无法复现现代论文声明 [D]
摘要
一位研究人员报告称无法复现现代论文中的声明，在检查的7项声明中，有4项无法复现，2项在GitHub上存在未解决的问题，引发了对研究质量标准的担忧。
我尝试复现了本人能够检查的论文声明。今年在检查的7项声明中，有4项无法复现，其中2项在GitHub上有活跃的未解决问题。这确实让我对当前的研究状况产生了质疑。
相似文章
@FinanceYF5: 科学可编程 1/ 科研范式在变 70%的科学家无法复现他人发表的结果，50%的人过几个月连自己的实验都复现不了。 这已经不是某个工具不够强的问题，而是这套生产方式，到了该重构的时候。
该文指出70%的科学家无法复现他人发表的结果，50%的研究者数月后甚至无法复现自己的实验，并认为这并非单一工具能力不足的问题，而是整个科研生产方式需要向可编程范式重构。
@dair_ai: 编码代理能否复现科学机器学习论文？我们知道这是可能的，因为我们已经可以做到@dair_ai。仍…
本文介绍了“论文复现”（Paper-replication），这是一种编码代理的工作流程，通过将每项声明转化为带有记录证据的目标，系统地复现科学机器学习论文，并在十二次运行中证明所有工作区和目标均已完成。
@DanKornas: 当记忆失去来源、修订或引用结构时，长周期研究代理会崩溃。PaperGuru-Benchmark …
PaperGuru-Benchmark 是一个开源基准测试和工件仓库，用于评估长周期 LLM 代理中生命周期感知的记忆，提供复现提交、调查输出和可重建的图表。
科学数据集中充斥着复制粘贴错误
一款旨在检测数据造假的软件工具在开放获取存储库中的科学数据集中发现了复制粘贴错误，其中包括一项高度引用的帕金森病研究，该研究发表于 Cell (2016)，已在公开获取超过 8 年而未被发现。
重振 Papers with Code
Papers with Code 是一个连接研究论文与代码实现的平台，目前正在复兴或更新，旨在提高机器学习研究的可重复性和可访问性。