量子位 发表于 2024-6-9 05:31:01

12个国产大模型大战高考数学 意外炸出个大bug(组图)

<div style='font-size:1em;'>
                       继国产大模型挑战高考作文之后,是时候再战一下高考数学了。数学高考Ⅰ卷的题目,目前已经陆陆续续在网上有所公布(图片格式)。<br><br>data/attachment/forum/202406/09/img_cdn_138_95411717875024.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=yzESHwZgpqbsPFVDFZmwsJTJC64%3D<br>

那么现在,是时候考验国产大模型们的数学能力了。

有请“选手们”登场——

Kimi、通义千问、文心一言、豆包、智谱清言、百小应、讯飞星火、商量、腾讯元宝、天工、海螺AI、万知。

<br><br>data/attachment/forum/202406/09/img_cdn_138_17601717875025.jpg<br>

国产大模型 vs 高考数学选择题根据数学题目类型的不同,我们先来小试牛刀一下选择题。

测评的方式是将题目(图片格式)“喂”给国产大模型们,要求它们给出相应题目的答案:

查看题目,给出第1题到第8题的答案。

接下来,我们就来一同看下国产大模型们的表现。

Kimi

<br><br>data/attachment/forum/202406/09/img_cdn_138_8361717875026.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=emNBj5a0rR%2BhhwfOEg4PE%2FmFNPk%3D<br>

通义千问

<br><br>data/attachment/forum/202406/09/img_cdn_138_15961717875026.jpg<br>

豆包

<br><br>data/attachment/forum/202406/09/img_cdn_138_34341717875028.jpg<br>

智谱清言

<br><br>data/attachment/forum/202406/09/img_cdn_138_52521717875028.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=T13DmbIT%2B6myMk%2BkenksIs19Cik%3D<br>

百小应

<br><br>data/attachment/forum/202406/09/img_cdn_138_85171717875030.jpg<br>

讯飞星火

<br><br>data/attachment/forum/202406/09/img_cdn_138_61521717875032.jpg<br>

商量

<br><br>data/attachment/forum/202406/09/img_cdn_138_97691717875033.jpg<br>

腾讯元宝

<br><br>data/attachment/forum/202406/09/img_cdn_138_61431717875034.jpg<br>

海螺AI

<br><br>data/attachment/forum/202406/09/img_cdn_138_66031717875035.jpg<br>

万知

<br><br>data/attachment/forum/202406/09/img_cdn_138_70881717875037.jpg<br>

不难看出,很多国产大模型还未做数学题,先败在了AI识图这个步骤,无法生成答案。

(PS:有几位选手测试时因为无法识别,未能完成答题,因此没有放出结果。)

那么我们最后来看下“踢馆选手”——GPT-4o。

<br><br>data/attachment/forum/202406/09/img_cdn_138_16291717875037.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=0Cj08k73NzWFgNEZXS1%2BROAwiJk%3D<br>

国产大模型 vs 数学大题鉴于一些国产大模型AI识图有点困难,我们这次直接先把这次高考的大题题目文字给copy出来,再让它们作答:

设n为正整数,数列 ( a1, a_2, cdots, a{4m+2} ) 是公差不为0的等差数列。若从中抽去项 ( ai ) 和 ( a_j ) (i

接下来,我们再来看下国产大模型们的表现。

Kimi

<br><br>data/attachment/forum/202406/09/img_cdn_138_83311717875041.jpg<br>

通义千问

<br><br>data/attachment/forum/202406/09/img_cdn_138_74711717875042.jpg<br>

文心一言

<br><br>data/attachment/forum/202406/09/img_cdn_138_26131717875046.jpg<br>

豆包

<br><br>data/attachment/forum/202406/09/img_cdn_138_18241717875046.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=cq7whoam5EpElqzaqvLVC%2BtRDnI%3D<br>

智谱清言

<br><br>data/attachment/forum/202406/09/img_cdn_138_2761717875051.jpg<br>

百小应

<br><br>data/attachment/forum/202406/09/img_cdn_138_87621717875053.jpg<br>

讯飞星火

<br><br>data/attachment/forum/202406/09/img_cdn_138_24981717875056.jpg<br>

商量

<br><br>data/attachment/forum/202406/09/img_cdn_138_59621717875057.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=U70iSprqSf6doJd3AHLAdXivcGk%3D<br>

腾讯元宝

<br><br>data/attachment/forum/202406/09/img_cdn_138_81351717875057.jpg<br>

天工

<br><br>data/attachment/forum/202406/09/img_cdn_138_60471717875058.jpg<br>

海螺AI

<br><br>data/attachment/forum/202406/09/img_cdn_138_85501717875058.pc_detail&lk3s=953192f4&x-expires=1718478773&x-signature=scMP%2FxmaVXpJArtdYE%2BbqFGqQcA%3D<br>

万知

<br><br>data/attachment/forum/202406/09/img_cdn_138_69671717875061.jpg<br>

最后,还是有请“踢馆选手”——GPT-4o。

<br><br>data/attachment/forum/202406/09/img_cdn_138_74981717875062.jpg<br>

那么,你觉得国产大模型们,识图+解数学题,哪家比较好一点呢?

最后,关于AI智能助手,这里也有一份最新用户数据分析报告供你参考:

https://mp.weixin.qq.com/s/sYxbvown5qLBnEs7zIR6Bg                       
                        <div>
                                <div class="OUTBRAIN" data-src="DROP_PERMALINK_HERE" data-widget-id="AR_3"></div>
                        </div>
                        </div>
页: [1]
查看完整版本: 12个国产大模型大战高考数学 意外炸出个大bug(组图)