首页 > 阅读笔记 > 阅读笔记 > 9.11和9.9哪个大?实测12个大模型8个都答错,ChatGPT也翻车了

9.11和9.9哪个大?实测12个大模型8个都答错,ChatGPT也翻车了

发布时间:2024-07-19 16:28:18来源: 15210273549

导读

一道小学生的数学题竟然难倒了全球AI大模型,只有4个大模型给出了正确答案!这究竟是怎么一回事?快来看看!

 

全球AI大模型被一道小学生数学题难倒

日前,一道来自小学生的数学题却难倒了不少海内外AI大模型,这道题的内容是“9.11和9.9哪个更大”,而仅有4个大模型给出了正确答案。

 

挑战大模型的数学推理能力

大模型的数学能力一直是短板,即便是目前最好的大模型GPT4也仍然有很大进步空间,而此前笔者在采访12位大模型时也得出了一个惊人的结论,这些大模型中仅有4个回答是正确的,而其他8个大模型却都给出了错误的答案。

 

数字切分问题与模型的理解能力

而针对大模型的数学能力,笔者曾进行过深入的采访,大部分行业人士认为大模型数学能力差的根本原因还是出在分词上,即Tokenizer(分词器)在处理数字时会出现问题,导致模型难以正确理解和计算。

 

正确答案揭晓与未来的发展方向

而这道9.11和9.9的大小比较题,12个大模型中,只有阿里通义千问、百度文心一言、Minimax和腾讯元宝答对,其他8个大模型都认为9.11比9.9更大。

 

虽然最终4个大模型给出了正确答案,但这并不能掩饰大模型数学能力的薄弱,毕竟面对简单的大小比较题,8个大模型都给出了错误答案。

 

而对于未来大模型的发展方向,笔者也咨询了不少专家学者以及从业者,针对此前大模型的回答,不少人表示“并不意外”。

一些专家认为,未来在模型的训练数据上会越来越依赖构造型的数据,而不是直接爬取下来的数据,以提升模型的复杂推理能力。

 

因为直接爬取下来的数据中会夹杂大量的错误数据,这些错误数据会误导模型,导致模型做出错误的判断。

而构造型的数据则可以事先筛选,保证数据的准确性和可靠性,从而培养模型健康的思维方式。

阅读笔记更多>>

问界M9 Ultimate首搭2.0T增程器三电机,迈巴赫GLS劲敌 闪充加持!比亚迪海洋网携四款新车走进羊城 刷新群众认知 宝马一把手换人!33年从管培生逆袭成CEO,扛起转型大旗 大型SUV市场“神仙打架”4月销量榜 1款销量过万 极氪9X第二 全主动悬架技术路线分化:800V分体式与48V集成式竞逐 上汽集团斩获两项世界品牌大会荣誉,在新能源和智能化发展趋势中,展现出全面的科技布局能力和转型韧性 Robotaxi用户翻番 文远知行营收增长58% 毛利率达35% 当大众亮起小蓝灯,ID. ERA 5S要抢谁的市场? 奕境X9破局逻辑:央企华为深度绑定,重塑华系汽车技术标杆 BBA最大号的SUV来了,迟到的奥迪Q9内饰长啥样 闪充版豹8越野更硬核 3个轮子也能轻松开? 奕派M8公告深读:华为乾崑+央企底座,30万级大六座SUV市场变天? 重新审视15万级市场:从“够用就好”到“一步到位”有多远? 最便宜的大六座:15万不到,华为全家桶!宝骏这次拼了? 阿维塔07L正式申报,看了配置后,预测起售价21.69万 兰博基尼迎来63周年,全新Fenomeno敞篷版即将推出 4月零跑断档式领跑,“蔚小理米”月销3万竞争激烈 高温到底会不会“伤”电池?闪充对比三元锂 零跑从“领跑”走向“加速跑”是因为产品体系的复利、全球化的扎根、战略主动权的转移 埃安i60:A级大单品爆款背后的体系制胜 卡文乐途轻卡入列 福田卡文汽车助力冷链行业标杆企业成功转型 奥迪E7X获全球首个整体座舱OEKO-TEX母婴级双认证 Model X正式停产!最后一辆车签满员工名字 深度试驾宝马X5 M雷霆版!比X5更狠、比M5更野 广汽全新方盒子要来了!设计原创,取名越7能抢方程豹钛7市场? 5月新车这7款不容错过,轿车、SUV、MPV都有,款款火爆? 纯电大六座的凯威德值不值?关键看契合的气场与用车需求 4月,32万销量!那个站在世界之巅的比亚迪,又回来了 坚守守信造车底色 魏建军与长城汽车的三十六年履约之路 艾瑞泽S准备平替奥迪A4L,设计心有灵犀