首页 资讯 正文

十大推理模型挑战2025年高考数学题:DeepSeek-R1、腾讯混元T1并列第一,马斯克的Grok 3遭遇“滑铁卢”

体育正文 273 0

十大推理模型挑战2025年高考数学题:DeepSeek-R1、腾讯混元T1并列第一,马斯克的Grok 3遭遇“滑铁卢”

十大推理模型挑战2025年高考数学题:DeepSeek-R1、腾讯混元T1并列第一,马斯克的Grok 3遭遇“滑铁卢”

2025年(nián)高考大幕(dàmù)虽已落下,但关于数学科目难度的讨论热度不减。

《每日经济(jīngjì)新闻(xīnwén)》记者(以下简称“每经(měijīng)记者”)选取今年的全国(quánguó)新课标数学I卷作为考题,对DeepSeek-R1、腾讯混元T1、OpenAI的o3、谷歌的Gemini 2.5 Pro和xAI的Grok3等十款(shíkuǎn)AI推理大模型进行了测评,以检验当今主流AI推理大模型的数学能力。

测评结果显示,国产(guóchǎn)大模型DeepSeek-R1与(yǔ)腾讯混元T1以零错误并列榜首。而被马斯克称为“地表最强AI”的Grok 3却遭遇“滑铁卢(huátiělú)”,排名倒数第三。

本次测评以2025年全国新课标数学I卷(总分(fēn)150分)作为考题。但每经记者在测试中发现,部分AI推理模型以“重要考试期间”为由拒绝对包含试题(shìtí)的图片进行(jìnxíng)识别和解答。

为了让所有(suǒyǒu)参评大模型站在同一起跑线,测评移除了试卷(shìjuàn)中所有需要分析图形和图表(túbiǎo)的题目,形成一份有效总分为117分的标准化试卷。

同时,对于谷歌Gemini 2.5 Pro等没有(méiyǒu)这一限制的推理模型,仍将以150分的完整试卷进行测试,旨在测试推理大模型所(suǒ)能达到的最高水平(shuǐpíng)。

扣分标准上,每经记者在选择题和填空题上都遵循了高考评卷的扣分标准,但对于解答(jiědá)题,本次测评只根据结果计算得分(défēn),不对过程打分(dǎfēn)。

需要说明的是,在此次(cǐcì)测试中,每款推理大模型只进行(jìnxíng)单次测试,得分也仅反映单次测试的结果。

DeepSeek-R1和腾讯混元(hùnyuán)T1并列第一

在(zài)排除了图形/图表题的117分试卷测试中,DeepSeek-R1与腾讯混元T1展现出了绝对(juéduì)的优势,以零错误的完美表现(biǎoxiàn),取得了117分的满分成绩,并列第一。这表明,在代数计算和(hé)函数题等题型解答上,其能力已经达到了极高的水准和稳定性。

讯飞(fēi)星火X1以112分的成绩(chéngjì)紧随其后。相较于DeepSeek-R1与腾讯混元T1这两款大模型,讯飞星火X1多错(duōcuò)了(le)一道填空题。这道题的正确答案是“±2”,而讯飞星火X1给出的答案是“2”。实际上,该(gāi)模型的推理过程没有问题,认为“2”和“-2”都满足题目条件,但陷入自我怀疑,最终只给出了答案“2”。

讯飞星火X1的(de)推理过程

其他得分(fēn)超过100分的还有Gemini 2.5 Pro(109分)、o3(107分)、阿里千问Qwen3(106分)和豆包深度思考模式(104分)。在分数占比最高的解答(jiědá)题上,Gemini 2.5 Pro和o3均(jūn)有失误,其中一道大题仅有部分正确,而(ér)阿里千问Qwen3和豆包深度思考模式均拿下(náxià)满分。

Grok 3惨遭“滑铁卢”,排名倒数第三(dìsān)

在本次参评的所有AI推理大模型中,如果说(rúguǒshuō)有谁的结果最令人意外,那(nà)无疑是马斯克旗下xAI公司开发(kāifā)的、被马斯克称为“地表最强AI”的Grok 3。

Grok在发布之初就被市场寄予厚望(jìyǔhòuwàng),被认为是最有潜力挑战GPT和(hé)Gemini霸主地位的(de)“黑马”。马斯克多次暗示,Grok的目标是成为最强大的AI。

然而,Grok 3此次的(de)表现可以说(shuō)是遭遇了“滑铁卢”。在117分的试题测试中,Grok 3仅获得91分,在10个(gè)参与测试的推理大模型中排名倒数第三

深入分析其答卷,每经记者发现,Grok 3失分的一个独特且关键(guānjiàn)的原因:它似乎无法正确理解多选题(duōxuǎntí)这类题型。

测试(cèshì)过程显示,即使在记者提示题目为多选题的情况(qíngkuàng)下,Grok 3也“顽固”地只给出一个它认为的最优解,导致只能得到部分分数(fēnshù)。

排名倒数第二的是智谱清言推理模式,在117分(fēn)(fēn)试卷的测试中得分为78分。

实际上,该模型在多道题目(tímù)的推理过程中都找到了(le)正确答案,但是往往会(huì)在最后一步出现自我怀疑导致逻辑崩溃,陷入循环,最终功亏一篑,白白丢了很多分。

智谱清言推理模式解答(jiědá)过程截图

排在最(zuì)末尾的是Kimi k1.5,该模型在最后两道压轴大题上栽了大跟头(gēntou),损失了大量的分数。

综合所有测试情况来看,在处理有固定步骤和严密逻辑的数学问题上,AI推理大模型已经具备很强的能力。但在涉及抽象和创新思维(sīwéi)的题目(tímù)上,目前的大模型还存在一定(yídìng)的局限性。

十大推理模型挑战2025年高考数学题:DeepSeek-R1、腾讯混元T1并列第一,马斯克的Grok 3遭遇“滑铁卢”

欢迎 发表评论:

评论列表

暂时没有评论

暂无评论,快抢沙发吧~