贾浩楠 发自 凹非寺
量子位 报道 | 公众号 QbitAI
GPT-3,是个严重偏科的“文科生”。
UC伯克利的研究人员,在对类似GPT-3的大型语言模型进行测试后发现,数学,就是这类AI的盲区。
12500道高中数学题,GPT-3的正确率最低不到3%,最高也没超过7%。
完全不合格啊~
一直以“全知全能”形象示人的GPT-3,在面对数学问题时却一脸懵逼,这怎么能行?
于是,伯克利的团队,就量身为大语言模型打造了一个数学问题数据集。
“文科生”的数学作业,终究还是逃不掉。
为啥要让AI学数学?AI学了数学有啥用?
数学是所有科学的基础,模拟行星轨道、原子运动、棋牌游戏等等本质都是数学问题。
去年大火的AlphaFold,生成预测蛋白质结构,本质也是复杂数学问题求解。
此外,AI解数学题时对不同解题方法的选择组合,也是衡量算法能力的参考。
所以,即便GPT-3平时面对的多是文本任务,但让它去学数学,依然有助于人们弄明白超大模型处理数学推理任务的特点。
之前的研究已经证明,牢固掌握数学概念对AI很重要。
例如,OpenAI最近推出了GPT-f,这是Metamath形式化语言的自动证明器和证明助手。
GPT-f对一些数学问题做出的证明,已经被Metamath主库所接受,这是AI的数学论证第一次数学社区所采用。
Facebook方面也声称已经成功实验了数学AI算法。在去年1月的一篇博客文章中,该公司的研究人员表示,他们已经教会了一个模型将复杂的数学方程视为一种语言,然后将解题过程视为翻译问题。