4人团队斩获AI奥数竞赛百万大奖!AI破解29题,华人博士荣登第二

⭐发布日期:2024年09月23日 | 来源:疯说时尚

⭐作者:珍内塔·阿尔内特 责任编辑:Admin

⭐阅读量:675 评论:1人

【澳门王中王必中一肖一码】

【新澳澳门免费资料网址是什么】

【正版马会免费资料大全】 【澳门一肖一码100准确测算平台】 【澳门资料大全正版免费资料】 【澳门一肖一码100准202ⅰ】 【新澳门精准资料期期精准】 【澳门马会7777788888】 【澳门一肖中100%期期准】 【w47777777香港资料大全】
【2024澳门新资料大全免费】 【二四六天下彩天天免费大全】 【澳门最精准免费全网资料】 【新澳精准资料免费提供彩吧助手】 【今晚澳门必中一肖一码适囗务目】 【新澳门2024年资料大全管家婆】 【新澳门内部一码精准公开】 【2024新澳免费资料彩迷信封】

编辑:桃子 乔杨

【新智元导读】历经3个月,首届AI奥数竞赛终于公布最终结果了!Gemma 7B只能达到3/50正确率的题目中,第一名的Numina模型居然刷出了29/50的成绩。


AI奥林匹克数学大奖的最终结果,终于公布了!

今天,数学大神陶哲轩的一篇帖子引起了大家的关注。

他表示,Kaggle上的第一届AI数学奥林匹克竞赛中,第一名模型居然在全部50道题中答对了29道,有点出乎意料。

陶哲轩所说的,是Kaggle社区中一个从4月开始的挑战赛,奖金池有1000万美元,旨在推动提高AI模型的数学推理能力。

比赛地址:https://www.kaggle.com/competitions/ai-mathematical-olympiad-prize/overview

总的来看,这次比赛共有5个团队胜出,第一名是Numina,第二名是CMU_MATH,第三名是after exams,第四名是codeinter,第五名是Conor #2。

这些团队成员至多有5人,最少有1人。

值得一提的是,仅凭借1人拿下比赛第二名的华人学者,竟是来自CMU博士。

虽然有GSM8K等流行的基准测试,但不可避免的数据泄露问题会影响评估的准确性。

AI参赛破纪录,50题做对29道



而这次挑战赛采取了Kaggle一贯的私有测试集模式。主办方共准备了110道题,包括训练集10道、公共测试集50道以及私有测试集50道。

这些题目涵盖了简单算术、代数、集合推理等多方面的题目,难度略高于AMC 12(美国数学竞赛),略低于AIME(美国数学邀请赛),需要使用高中水平的数学知识。

你可能觉得美国高中的数学题应该不难,但竞赛官网上有这样一句话,「AIME旨在挑战聪明的学生,以选择代表美国参加IMO(国际数学奥赛)的学生。」

比如训练集中的这样一道题:

在三位数111至999中,每个数字都被染成蓝色或黄色,使得任意两个(不一定不同)黄色数字的和等于一个蓝色数字。最多可能有多少个黄色数字?

答案是250(取模1000后的结果),不知道你觉得难度如何。

主办方出完题之后,也把题目拿给Gemma 7B做了基准测试,正确率只有3/50。

而排名第一的Numina,居然能达到29/50的正确率,已经逼近AMC 12晋级AIME所需要的正确率。

成绩公布后,Numina项目的众多参与者也高兴得纷纷发推庆祝。

但遗憾的是,他们口中的Numina Math 7B模型尚未发布。从推文信息来看,模型并非从头搭建,而是微调了开源的LLM从而提升数学推理能力,并将在未来公开一系列信息——包括模型、数据集以及构建方法!

获奖团队成员介绍


从总排行榜中,我们可以看到,拿到排行榜第一名的团队一共有4人,分别来自不同的机构。

Jia Li

Jia Li目前是一家初创公司Numina的联合创始人,这次参与比赛的模型便是基于此微调而来的。

Lewis Tunstall

Lewis Tunstall是Hugging Face的一名机器学习研究员,目前专注于研究人类反馈进行强化学习(RLHF)的工具和方法。

Edward Beeching

Edward Beeching本人也来自Hugging Face,研究重点是RLHF、嵌入式学习和LLM工具的使用。在此之前,他曾是INSA Lyon/INRIA的博士生。作为INRIA CHROMA团队的一员,还曾研究了基于结构化记忆的深度强化学习方法,用于规划和导航。

Edward曾获得物理学学士学位,并在地球物理学领域的图像处理和信号处理方面,拥有6年的行业经验。之后又获得了机器学习和数据挖掘硕士学位。

斩获一等奖的最后一位成员是Hélène Evain。

值得一提的是,第二名获得者是CMU博士Zhiqing Sun(孙之清)。在这场比赛中,他训出的AI答对了22道题目。

孙之清目前是CMU LTI即将毕业的博士生,导师是Yiming Yang教授。他曾在北大学获得了计算机科学学士学位。

他的个人研究曾获得了谷歌自然语言处理博士奖学金(2023年),以及OpenAI Superalignment Fast Grants(2024年)的奖励。

孙之清本人对机器学习和人工智能领的研究感兴趣,并且最近的研究主要集中在基础模型的可扩展对齐上。

百万大奖


关于这次参赛整体情况,共有1401个参与者,参与的团队有1161个,最终提交模型结果有1831份。

这次大赛将最终根据排名,分别给出不同的奖励:

进步奖(Progress Prize):,048,576

排名前列的团队将获得以下奖金:

第一名:1,072

第二名:,536

第三名:,768

第四名:,384

第五名:,192

如果前五名中的任一团队在公开和私有测试集上的得分都未能超过Gemma 7B的3/50基准,奖金将减少到原来的四分之一,具体数额如下:

第一名:,768

第二名:,384

第三名:,192

第四名:,096

第五名:,048

综合进步奖(Overall Progress Prize):将授予在公开及私有测试集上至少获得47/50分的最高排名团队。在为排名前五的团队颁发奖金后,总奖金的剩余部分将颁发给综合进步奖获得者。

如果本次比赛产生了获胜者,其奖金不低于4,624。如果没有团队获得该奖,剩余的奖金将转入下一届比赛,采用相同的奖金分配方式。

另外,这次AI|MO大赛的顾问委员会包括两位菲尔兹奖得主陶哲轩(Terence Tao)和Timothy Gowers,还有Dan Roberts、Geoff Smith和Po-Shen Loh。

参考资料:

https://mathstodon.xyz/@tao https://x.com/JiaLi52524397/status/1808886880164880631

【2024澳门天天开好彩大全免费】 【新澳天天开奖资料大全最新】
【2024年天天开好彩资料】 【新澳天天开奖资料大全最新54期】
【2024澳门天天开好彩大全53期】 【澳门天天开彩期期精准】
【2024全年资料免费大全】 【新澳天天开奖资料大全】
【澳门内部最精准免费资料】 【2024澳门天天开好彩大全】
【2024年新奥门天天开彩免费资料】 【新澳2024今晚开奖资料】 【494949最快结果+】
上一条新闻 下一条新闻

推荐文章

发表评论

张本煜

4秒前:陶哲轩所说的,是Kaggle社区中一个从4月开始的挑战赛,奖金池有1000万美元,旨在推动提高AI模型的数学推理能力。

IP:84.43.3.*

刘洋子

8秒前:」比如训练集中的这样一道题:在三位数111至999中,每个数字都被染成蓝色或黄色,使得任意两个(不一定不同)黄色数字的和等于一个蓝色数字。

IP:74.42.5.*

霍泥芳

5秒前:他的个人研究曾获得了谷歌自然语言处理博士奖学金(2023年),以及OpenAI Superalignment Fast Grants(2024年)的奖励。

IP:24.68.6.*

疯说时尚APP介绍

APP图标

626969澳门资料大全版APP名:疯说时尚

版本:V4.95.318

更新时间:2024-09-22 22:15

新奥今晚上9点30分这是一个功能强大的澳门一肖一码100%免费公开APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:Edward BeechingEdward Beeching本人也来自Hugging Face,研究重点是RLHF、嵌入式学习和LLM工具的使用。

2024年澳门六开彩结果APP介绍

APP图标

澳门王中王100%的资料APP名:疯说时尚

版本:V2.10.535

更新时间:2024-09-22 15:13

澳彩资料免费长期公开这是一个功能强大的澳门正版资料大全免费版查询2APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:这次大赛将最终根据排名,分别给出不同的奖励:进步奖(Progress Prize):,048,576排名前列的团队将获得以下奖金:第一名:1,072第二名:,536第三名:,768第四名:,384第五名:,192如果前五名中的任一团队在公开和私有测试集上的得分都未能超过Gemma 7B的3/50基准,奖金将减少到原来的四分之一,具体数额如下:第一名:,768第二名:,384第三名:,192第四名:,096第五名:,048综合进步奖(Overall Progress Prize):将授予在公开及私有测试集上至少获得47/50分的最高排名团队。

新澳门免费资料大全历史记录开马APP介绍

APP图标

2024澳彩记录查询表APP名:疯说时尚

版本:V2.74.407

更新时间:2024-09-22 21:22

澳门今晚开特马四不像图这是一个功能强大的2004新澳精准资料免费提供APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:今天,数学大神陶哲轩的一篇帖子引起了大家的关注。

澳门王中王100APP介绍

APP图标

澳门天天彩今晚开什么号码啊APP名:疯说时尚

版本:V2.85.662

更新时间:2024-09-22 18:21

新澳门四肖四码期期准内容这是一个功能强大的2024年新澳门正版资料大全免费APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:虽然有GSM8K等流行的基准测试,但不可避免的数据泄露问题会影响评估的准确性。

澳门最快最精准资料大全APP介绍

APP图标

香港.一码一肖资料大全APP名:疯说时尚

版本:V3.19.520

更新时间:2024-09-22 21:23

二四六香港免费记录这是一个功能强大的澳门二四六免费资料大全499APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:这些题目涵盖了简单算术、代数、集合推理等多方面的题目,难度略高于AMC 12(美国数学竞赛),略低于AIME(美国数学邀请赛),需要使用高中水平的数学知识。

澳门王中王结果一下子APP介绍

APP图标

新澳好彩免费资料查询石狮APP名:疯说时尚

版本:V3.86.140

更新时间:2024-09-22 24:16

澳门免费公开资料大全这是一个功能强大的4949澳门今天开的什么码APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:Gemma 7B只能达到3/50正确率的题目中,第一名的Numina模型居然刷出了29/50的成绩。

2024一肖一码100精准大全APP介绍

APP图标

澳门天天彩期期精准APP名:疯说时尚

版本:V8.15.210

更新时间:2024-09-22 18:24

香港4777777最快开码这是一个功能强大的2024新澳历史记录香港开APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:他表示,Kaggle上的第一届AI数学奥林匹克竞赛中,第一名模型居然在全部50道题中答对了29道,有点出乎意料。

4949精准澳门彩最准确的资料澳APP介绍

APP图标

2823澳门新资料大全免费APP名:疯说时尚

版本:V3.21.582

更新时间:2024-09-22 20:21

新澳门48049六开彩资料大全这是一个功能强大的二四六香港管家婆期期准资料大全APP,可以帮助你完成各种任务。包括最新24小时热点资讯,今日最新:获奖团队成员介绍从总排行榜中,我们可以看到,拿到排行榜第一名的团队一共有4人,分别来自不同的机构。