2024 年高考期间，多家媒体对十余款国产及国际主流人工智能大模型进行了作文、数学、物理三科的综合评测。结果显示，讯飞星火在综合排名中位列第一，通义千问和文心一言紧随其后。在数学测试中，多数模型表现未达预期，部分题目甚至出现“全军覆灭”，仅 GLM-4-0520 超过及格线。物理科目受限于图像识别能力，部分模型存在读图失败问题。评测揭示了当前大模型在逻辑推理、抽象思维及复杂计算方面的局限性，同时也展示了其在创造性写作上的进步。未来随着技术完善，AI 在教育领域的应用潜力仍值得期待。
随着 2024 年高考的落幕，一场关于人工智能能力的'智能较量'在幕后悄然兴起。近日，搜狐科技、潇湘晨报、量子位、机器之心等十余家媒体对近 10 款国产及国际主流人工智能大模型进行了高考作文、数学、物理三个科目的全面评测，并公布了成绩。这一测试不仅是对当前大模型技术水平的检验，也揭示了 AI 在教育领域应用的潜力与局限。
本次作文题目为：'随着互联网的普及、人工智能的应用，越来越多的问题能很快得到答案。那么，我们的问题是否会越来越少？'该题目旨在引领考生思考科技进步与问题之间复杂的关系，考察考生的思辨能力、逻辑构建及语言表达水平。
搜狐科技组织了十款 AI 大模型的作文评测，包括 ChatGPT-4O、腾讯元宝、百度文心一言等。三位资深语文教师作为权威专家为各大模型的作文打分。结果显示：
即便排名最低的 AI 模型也获得了 45.7 分的平均分，考虑到作文满分为 60 分，这一成绩已相当于高中生的平均水平。
在潇湘晨报的"AI 写作"评测中，讯飞星火表现突出。该评测邀请湖南知名作家、编辑作为阅卷老师，对国内五大 AI 大模型产品——百度文心一言、讯飞星火、阿里通义千问、字节豆包、腾讯元宝的高考作文进行评分。经过四位阅卷老师的综合打分，讯飞星火以 49 分的平均分高居首位，并获得全场最高分 56 分。阅卷老师评价其文章观点清晰，论述集中且层层推进，很多句子简洁有力，颇有思想性。
数学是衡量大模型逻辑推理和计算能力的关键科目。在搜狐科技的数学评测中，讯飞星火、文心一言、豆包均以 63% 的正确率位列第一梯队，智谱清言、阿里通义则以 50% 的正确率位居第二梯队，其他大模型相对落后。
在量子位的高考数学评测中，虽然没有给出详细成绩单，但展示了各家大模型详细的解题思路，交由网友打分。通过网友的投票打分可以看出，讯飞星火的'识图 + 解数学题'能力收到了最高认可，位居其后的分别是 Kimi、通义千问、文心一言、豆包等。
机器之心选取了六家国内头部大模型公司的产品与考生们一同参与一场客观且公平的高考数学考试（新课标Ⅰ卷），其中包括 GPT-4o、GLM-4、文心一言 4.0、豆包、百小应（百川 4）以及通义千问 2.5。
在机器之心的评测中，大模型的表现并未达到预期，甚至出现了几乎全部不及格的情况，只有智谱最新发布的 GLM-4-0520 模型超过了及格线。评测重点放在了高考数学的前 14 个客观题上，这些题目覆盖了基础的数学知识和计算能力，满分为 73 分。在测试时，将题目直接输入产品，不做 System Prompt 引导，直接输出结果；同时也没有触发搜索，没有来自外界的干扰。
分数计算方法依照高考真实判分原则：
具体而言，在满分 73 分、及格线为 43.8 分（60%）的情况下，六家大模型产品的分数结果分别为：
GLM-4-0520 (63 分) > 智谱清言 (43 分) > GPT-4o (41 分) > 豆包 (40 分) > 文心 4 (30 分) = 百川 4 (30 分) > 通义千问 2.5 (29 分)
值得注意的是，每年的第 8 道单选题往往是高考数学卷中最难的一道题，被测试的大模型都'全军覆灭'了。这表明对于大模型产品来说，高考语文作文可以直接测试它们的创造性写作技巧，包括构思、组织和表达观点的能力。而在数学考试测试中，除了基本的计算能力、对数学知识的掌握，更能体现大模型在逻辑推理、抽象思维和问题解决方面的高级能力。大模型必须理解并运用数学概念、公式和定理，这要求它具备深厚的数学知识基础。同时，逻辑推理能力是解答数学题目的关键，大模型需要通过严密的逻辑推导来解决问题。
在量子位的评测中，阿里通义千问与讯飞星火以 71.4% 的准确率高居第一梯队，而 Kimi、海螺和腾讯元宝则以 42.9% 的准确率位于第二梯队。百川百小应和万知答对一题位于第三梯队。
文心一言、豆包、天工、智谱清言、商量因为出现了不同程度读图失败的问题，在成功识别的题目中，商量和文心一言的正确率为 2/4，即正确率为 28.6%；豆包、天工、智谱清言正确率为 1/2，即正确率为 14.3%。这反映出多模态大模型在处理物理图像信息时的稳定性仍有待提升。
综合以上媒体在作文、数学、物理三门科目的成绩，来自科大讯飞的讯飞星火以总分 52.49 分高居综合排名第一。紧随其后的是通义千问和文心一言，分别位列第二、第三名。而 Kimi、字节豆包、海螺 AI 等其他大模型也有不错的表现。
综合排名如下：
尽管部分模型在作文上表现出色，但在数学和物理等理科科目上普遍存在短板。主要原因在于当前的大语言模型主要基于概率预测生成文本，而非真正的逻辑推理引擎。
AI 大模型挑战高考，不仅是对其技术能力的一次检验，更是展示了科技进步对教育领域的潜在影响。未来，随着 AI 技术的不断完善，特别是神经符号系统（Neuro-Symbolic AI）的发展，AI 大模型有望在更多领域展现出更强的智能和应用能力，为我们的生活和学习带来更多便利和创新。在教育辅助、个性化学习路径规划等方面，AI 将发挥更大的作用，但完全替代人类教师的角色仍需时日。
总体而言，此次评测揭示了国产大模型在自然语言处理上的成熟度，同时也指出了在逻辑推理和科学计算方面的改进空间。随着训练数据的优化和架构的迭代，未来的 AI 系统将更接近人类专家的认知水平。
微信公众号「极客日志」，在微信中扫描左侧二维码关注。展示文案：极客日志 zeeklog
使用加密算法（如AES、TripleDES、Rabbit或RC4）加密和解密文本明文。 在线工具，加密/解密文本在线工具，online
生成新的随机RSA私钥和公钥pem证书。 在线工具，RSA密钥对生成器在线工具，online
基于 Mermaid.js 实时预览流程图、时序图等图表，支持源码编辑与即时渲染。 在线工具，Mermaid 预览与可视化编辑在线工具，online
将字符串编码和解码为其 Base64 格式表示形式即可。 在线工具，Base64 字符串编码/解码在线工具，online
将字符串、文件或图像转换为其 Base64 表示形式。 在线工具，Base64 文件转换器在线工具，online
将 Markdown（GFM）转为 HTML 片段，浏览器内 marked 解析；与 HTML转Markdown 互为补充。 在线工具，Markdown转HTML在线工具，online
