风君子博客6月8日消息,让AI大模型产品秒写高考作文已经不是难事,那么用它们做高考数学题又会是什么效果呢?
昨日,TechWeb用百度文心一言、阿里通义、腾讯元宝、字节豆包、360智脑、ChatGPT这6大神器写了2024年高考全国语文新课标I卷的作文供大家赏析。截至目前,腾讯元宝获赞票数最多,百度文心一言排名第二。
昨日下午,2024年高考数学已经顺利考完,讨论数学题的远没有讨论作文题的热度高,毕竟此时在电脑/手机前还会做高考数学题的人也不多了吧。
那就把这些难题丢给拥有超能力的AI大模型产品们。
我们再用百度文心一言、阿里通义、腾讯元宝、字节豆包、360智脑、ChatGPT,再加2款国产大模型产品百川智能百小应、零一万物万知,另外还有专攻K12数学的好未来(学而思母公司)的九章大模型,总计9大神器,来做2024年高考数学题,看看他们的水平如何,会不会翻车。
在这里,我们一共进行了2道数学题的测试。
第一题,2024年高考新课标1卷数学卷的一道填空题:
甲、乙两人各有四张卡片,每张卡片上标有一个数字,甲的卡片分别标有数字 1,3,5,7,乙的卡片上分别标有数字2,4,6,8,两人进行四轮比赛,在每轮比赛中,两个各自从自己持有的卡片中随机选一张,并比较所选卡片的数字的大小,数字大的人得1分,数字小的人得0分,然后各自弃置此轮所选的卡片(弃置的卡片在此后的轮次中不能使用).则四轮比赛比赛后,甲的总得分小于2的概率为多少?
网上名师给出的该题答案为1/2。
用AI产品来算,原本以为算概率这种事情,应该是计算机最擅长的了。结果,国内的8款大模型全部翻车,只有ChatGPT答对!
第二题,2024年高考新课标1卷数学卷的一道选择题,如下图:
网上名师给出的该题答案为B。
这题,豆包、百小应、ChatGPT首次解答给出了正确答案,文心一言在第二次解答时给出了正确答案。
注,因为360智脑、万知PC端产品不支持上传图片的功能,第二道题的测试不含这2款产品。
小结:
此次2道高考数学题的测试效果总结如下:
整体看来,国内大模型产品解答数学题的能力还远没有达到高中生水平,还要加油啊。
下面附上各AI产品的具体答题情况:
第一题
1、文心一言的解答如下
2、阿里通义的解答如下
3、腾讯元宝的解答如下
4、字节豆包的解答如下
5、360智脑的解答如下
6、百小应的解答如下
7、万知的解答如下
8、九章大模型的解答如下
9、ChatGPT的解答如下
第二题的解答情况:
1、文心一言
首次解答,给出了答案A。
第二次解答,给出了正确答案B
2、通义
首次解答,判定选项无正确答案;
第二次解答,给出了错误答案A。
3、元宝
两次解答,均没能给出正确答案。
4、豆包
首次就回答正确,点个赞!
5、百小应
给出了正确答案B。
仔细阅读它的计算过程,在得出正确答案前,有1次因计算结果与选项中任何一个都不匹配,而再次检查重新计算的自我修正。还不错。
6、九章大模型
两次均未能给出正确答案,始终坚定选择答案A。