博士小哥开源AI数学“照妖镜”：一招分辨刷榜作弊大模型

AIGC动态欢迎阅读

原标题：一招分辨刷榜作弊大模型，博士小哥开源AI数学“照妖镜”

关键词：模型、测试、成绩、卷子、数学

文章来源：量子位

内容字数：3949字

内容摘要：最近，一位博士通过开源的AI数学“照妖镜”揭示了不少大模型在数学测试中的真实水平。通过匈牙利全国数学期末考试的实验，让那些依靠背题作弊的模型无处遁形。具体来看，一些大模型在经典数学测试集GSM8k和全新卷子上表现不尽人意，而在GSM8k上的成绩却明显高出同规模大模型的表现。

原文链接：一招分辨刷榜作弊大模型，博士小哥开源AI数学“照妖镜”

联系作者

文章来源：量子位

作者微信：QbitAI

作者简介：关注科技行业新突破，追踪人工智能新趋势