@askalphaxiv: 70%的AI研究不可重复。上周ICML 2026期间，有超过6000+篇研究论文发布，但……

X AI KOLs Following 新闻
reproducibility ai-research community-challenge huggingface open-research

摘要

Alphaxiv和Hugging Face发起了一项社区挑战，旨在检验ICML 2026上AI研究论文的可重复性，提供4500美元的GPU积分和一个自动研究代理来帮助参与者。

70%的AI研究不可重复。上周ICML 2026期间，有超过6000+篇研究论文发布，但其中有多少是真实且可重复的？ 我们很高兴与@huggingface合作，发起一项社区挑战来找出答案。 你只需选择一篇论文，选取其中一个声称，然后开始实验。 现在，你可以使用我们的自动研究代理为你完成繁重的工作，同时为开放研究工件的庞大库做出贡献。 奖品：4500美元GPU积分 详情如下。
查看原文
查看缓存全文

缓存时间: 2026/07/16 22:18

70% 的 AI 研究无法复现。上周 ICML 2026 刚结束，超过 6000 篇研究论文涌现，但有多少是真正可靠且可复现的？

我们很高兴与 @huggingface 合作，发起一项社区挑战来一探究竟。

你只需选择一篇论文，从中挑一个论断，然后开始实验。

现在，你还可以使用我们的自动科研代理替你完成这项繁琐工作，同时为庞大的开放研究工具体系贡献力量。

奖项：4500 美元的 GPU 积分 详情见下

相似文章

PaperBench：评估AI复现AI研究的能力

OpenAI Blog

OpenAI推出PaperBench，一个评估AI代理复现最先进AI研究能力的基准。该基准通过复现20篇ICML 2024论文，包含8,316个可评分任务。表现最好的模型（Claude 3.5 Sonnet）仅达到21%的复现分数，低于人类博士级别的表现，凸显了当前自主研究能力的局限性。