導(dǎo)讀：北京商報(bào)訊（記者 楊月涵）9月16日，昆侖萬維發(fā)布消息稱，在權(quán)威推理榜單Benchmark GSM8K 測試中，昆侖萬維自研的通用基座大模型天工大模型以80%的正確率脫穎而出，大幅領(lǐng)先GPT-3.5（57.1%）和LLaMA2-70B（56.8%），標(biāo)志著天工大模型的推理能力達(dá)到全球領(lǐng)先...
北京商報(bào)訊（記者 楊月涵）9月16日，昆侖萬維發(fā)布消息稱，在權(quán)威推理榜單Benchmark GSM8K 測試中，昆侖萬維自研的通用基座大模型天工大模型以80%的正確率脫穎而出，大幅領(lǐng)先GPT-3.5（57.1%）和LLaMA2-70B（56.8%），“標(biāo)志著天工大模型的推理能力達(dá)到全球領(lǐng)先，接近GPT-4”。
消息提到，天工大模型不僅在推理性能上有著強(qiáng)大的競爭力，在MMLU、C-EVAL、HumanEval等三項(xiàng)數(shù)據(jù)集測試中也同樣表現(xiàn)出色。在MMLU數(shù)據(jù)集測試中，天工大模型以65%準(zhǔn)確率超越了LLaMA-65B的63.4%；在C-EVAL數(shù)據(jù)集測試中，天工大模型以65%準(zhǔn)確率超越了GPT3.5的54.4%。在HumanEval數(shù)據(jù)集測試中，天工大模型以37.2%的準(zhǔn)確率超過了PaLM-540B（26.2%）、LLaMA-65B（23.7%）、LLaMa2 -70B（30.5%）。
