ARC Prize 2025
概述
这是 Kaggle 上第二届 ARC Prize 竞赛。它以ARC Prize 2024为基础。第二届竞赛更新了人工校准问题的数据集,并增加了参赛者的计算能力。
尽管在大型数据集上进行了广泛的训练,当前的人工智能系统仍无法推广到其训练数据之外的新问题。法学硕士 (LLM) 已将人工智能带入主流,用于大量已知任务。然而,通用人工智能 (AGI) 的进展受到理念的限制。AGI 的改进可以使人工智能系统能够与人类一起思考和发明。
通用人工智能抽象与推理语料库 (ARC-AGI-2) 基准测试衡量了人工智能系统高效学习新技能的能力。人类在 ARC 测试中获得了 100% 的满分,而最优秀的人工智能系统得分仅为 4%。ARC奖竞赛鼓励研究人员探索法学硕士 (LLM) 以外的研究思路,因为法学硕士严重依赖大型数据集,并且难以应对新问题。
本次比赛包含多个部分。本项目奖金总额为 12.5 万美元,如果任何一支队伍能够突破排行榜 85% 的得分,则可额外获得 60 万美元奖金。此外,Kaggle 之外的更多机会也不容错过——了解更多信息,请访问ARCprize.org。
您的工作可能为跨行业应用的新型人工智能问题解决方案做出贡献。大幅改进的通用人工智能 (AGI) 可能会重塑人机交互。获奖解决方案将被开源,以促进通用人工智能领域的透明度和协作。
时间线
- 2025 年 3 月 24 日 - 开始日期
- 2025年10月27日 - 参赛截止日期。您必须在此日期前接受比赛规则才能参赛。
- 2025年10月27日 - 团队合并截止日期。这是参与者加入或合并团队的最后期限
- 2025 年 11 月 3 日 ——最终提交截止日期。
- 2025 年 11 月 9 日 ——论文奖提交截止日期。
除非另有说明,所有截止时间为当日晚上 11:59(UTC)。比赛组织者保留在必要时更新比赛时间表的权利。
奖品
总奖金:725,000 美元
- 2025年进步奖:125,000美元
- 大奖:60万美元
根据比赛精神,如果参赛者不开源他们的解决方案,则有资格获得奖品的参赛者将被取消比赛资格。
2025年进步奖
本次比赛优胜团队奖金:5万美元
- 一等奖:25,000 美元
- 二等奖:10,000 美元
- 三等奖:5,000 美元
- 四等奖:5,000 美元
- 第五名:5,000 美元
论文奖奖金:75,000 美元
- 获奖者:5万美元
- 亚军:20,000 美元
- 亚军:5,000 美元
有关提交和评估的更多详细信息,请参阅论文奖标签。
大奖:
如果一支队伍在比赛排行榜上达到至少 85% 的准确率,即可解锁额外 60 万美元的大奖。比赛结束时,大奖将按以下规定分配给准确率达到 85% 的前五支队伍。如果达到 85% 准确率的队伍少于 5 支,则奖金将按比例分配给符合条件的队伍。
- 一等奖:30万美元
- 二等奖:12万美元
- 三等奖:60,000 美元
- 四等奖:6万美元
- 第五名:60,000 美元
代码要求
这是一场代码竞赛 本次比赛的投稿必须通过笔记本进行。为了确保“投稿至比赛”按钮在投稿后生效,必须满足以下条件:
- CPU 笔记本电脑运行时间小于12 小时
- GPU 笔记本运行时间小于12 小时
- 未启用互联网访问
- 允许使用免费且公开的外部数据,包括预先训练的模型
- 提交文件必须命名submission.json
提交的运行时间已被混淆。如果您重复提交完全相同的内容,您将在收到分数之前看到最多 10 分钟的时间差异。
有关如何提交的更多信息,请参阅代码竞赛常见问题解答。 其他更多信息关注赛事官网前往了解。