文心一言与通义千问大模型能力对比评测
一、纯文本任务测试(序号 1-11)
| 序号 | 考察能力 | 题目 | 回复 | 评价 |
|---|---|---|---|---|
| 1 | 逻辑推理 | 一个人带一只黄狗、一只白兔和一颗白菜过河... | 文心一言:第一步:人带着白兔过河,然后人独自返回...;通义千问:・带兔过河(左→右)。・人回(右→左)。・带狗过河(左→右)。・带兔回(右→左)。・带菜过河(左→右)。・人回(右→左)。・带兔过河(左→右)。 | 优秀 |
| 2 | 总结归纳 | 我家的猫叫花咪咪,我家的狗叫黄旺旺,请问我家的羊叫什么 | 文心一言:题目中没有给出羊的名字相关信息,无法直接确定你家羊的名字哦...;通义千问:从你给出的猫和狗的名字来看,名字有叠字的特点... | 良好 |
| 3 | 计算能力 | 753×951=? | 文心一言:753×951 的计算结果是 716103。计算过程:753×(900+50+1)=...;通义千问:753×951=716103 | 优秀 |
| 4 | 历史知识 | '五代十国'包括哪些朝代 | 文心一言:五代是指唐朝灭亡后依次更替的位于中原地区的五个政权...;通义千问:五代十国是中国历史上的分裂时期,'五代'指中原地区的五个王朝... | 优秀 |
| 5 | 历史知识 + 逻辑推理 | 刘备怎样才能统一天下 | 文心一言:刘备若想统一天下,需从以下几方面着手:1. 稳固后方...;通义千问:刘备要统一天下,核心是解决战略失误和内部隐患... | 优秀 |
| 6 | 创作能力 | 我是一个科技公司的老板,请帮我设计一份简短的公司年会发言稿... | 文心一言:各位同事,新年好!过去一年,我们以创新为刃...;通义千问:各位伙伴,岁末欢聚,感恩同行!这一年,我们靠技术突围... | 优秀 |
| 7 | 角色扮演 + 创作能力 | 我是一名女学生,身高 160cm,体重 60kg,平时学习比较紧张... | 文心一言:30 分钟学生健身计划 1. 热身(5min)...;通义千问:每日 30min 健身计划(学生版)1. 热身(5min)... |

