标签
IdeaTrail是一个多轮过程轨迹数据集,用于科学构思,通过Generator--Advisor循环从证据收集到提案构建合成研究过程,以确保依据充分。
本文介绍 ResearchStudio-Idea,一个基于 ML 会议论文分析的可复用研究构思技能套件,包含 Paper-Search、Scoop-Check 和 IdeaSpark,通过从 1,947 篇论文中提取的 15 个模式来生成有证据支撑的研究想法。
耶鲁大学的论文通过构建大规模评估框架,比较了LLM与人类研究者在生成研究想法上的分布差距,发现LLM想法高度集中于bridge和synthesis类型,而人类想法分布更广,揭示了'研究品味'的差异,对Research Agent的多样性提出挑战。
介绍了IG-Bench,一个用于科学谱系推理和创意生成的基准测试,将科学作品表示为Idea Genome对象。评估了14个基于LLM的科学家,发现了一个组合瓶颈,最强系统在谱系推理上的精确准确率仅为27.3%。
一篇新的预印本提出了'科学的外星空间'这一概念——即那些与文献一致但当前科研社区在认知上无法触及的研究方向——并提出了一种方法,利用LLM论文中的思想原子来采样这类方向,结果显示该方法可以在不牺牲一致性的情况下探索3.5至7倍更广泛的思想空间。