Investor's Last Exam:AI 智能体能否在不预知未来的情况下进行股票投资?

Hugging Face Daily Papers 论文

摘要

Investor's Last Exam (ILE) 是一个由资深买方投资者主导的股票研究基准,使用冻结证据、专家评分标准和金融依赖图评估 AI 智能体的端到端研究能力,结果显示顶尖模型研究能力强但在预测和投资判断上仍然失败。

金融智能体必须基于决策时点的信息形成预测与投资判断,并根据后续的实际结果来评估预测表现。现有基准测试主要考察金融知识、研究流程或预测能力,但要评估完整的研究过程,则需要严格冻结的信息集合与专业的评分标准。我们提出 Investor's Last Exam (ILE),一个由资深买方投资者和基金经理主导的股票研究基准。其三个组成部分包括:一个覆盖 343 万个文档版本、涵盖九类来源的版本化金融数据库(辅以结构化市场数据),并以经过验证的时间戳规范检索与计算过程;一个围绕专业分析师交付物组织的任务分类体系;以及一个由专家主导的框架,通过金融依赖图将评分标准与数据来源、计算过程和假设联系起来。评测涵盖 86 项任务,综合评估研究质量、预测准确性和模拟投资表现。GPT-6 Astra 和 Claude Opus 5.5 以 100 分制中的 68.1 分和 66.9 分位居总分前列,但在「预测与模型」维度上,即使是 Astra 也仅得 52.5 分。我们的结果表明,即使是最先进的模型,也无法将整体研究能力转化为预测表现。ILE 将评测单位从孤立的能力维度转移到「证据—假设—判断」链条上,使研究者能够定位分析优势在哪些环节未能转化为预测与投资判断,并为金融智能体的训练与评测提供可追溯、可诊断的基础。
查看原文
查看缓存全文

缓存时间: 2026/10/30 07:08

论文页面 - 投资者的终极考试:AI 智能体能否在不预知未来的情况下做股票投资?

来源:https://huggingface.co/papers/2610.38342

摘要

Investor’s Last Exam 以冻结的证据、专家标准和依赖图来评估金融智能体端到端的股票研究能力,结果揭示出:顶级模型擅长研究,却在预测与投资判断上表现不佳。

金融智能体必须在决策时点可用的证据基础上形成预测和投资判断,而预测结果则依据其后发生的真实结果来评分。现有基准分别考察金融知识、研究流程或预测能力,但要评估完整的研究过程,就需要严格冻结的信息集和专业的评估标准。我们提出 Investor’s Last Exam(ILE),这是一个由资深买方投资者和基金经理牵头的股票研究基准。它包含三个组成部分:一个带版本管理的金融数据库(https://huggingface.co/papers?q=versioned%20financial%20database),涵盖 343 万份文档版本和九大来源类别,并辅以结构化市场数据,由经验证的时间戳统一约束检索与计算;一套围绕专业分析师交付物组织的任务分类体系;以及一个由专家主导的框架,通过金融依赖图(https://huggingface.co/papers?q=financial%20dependency%20graphs)将评分标准与来源、计算和假设关联起来。评测覆盖 86 项任务,综合考察研究质量、预测准确度(https://huggingface.co/papers?q=forecast%20accuracy)和模拟投资表现(https://huggingface.co/papers?q=simulated%20investment%20performance)。GPT-6 Astra 和 Claude Opus 5.5 以 68.1 和 66.9(满分 100)位居总榜前列,但即便是 Astra,在“预测与建模“维度上也仅得 52.5 分。我们的结果表明,即便是最先进的模型,也无法将整体研究能力转化为预测表现。ILE 将评测单元从孤立的能力转向“证据—假设—判断“链条,使研究者能够定位分析优势在何处未能转化为预测与投资判断,并为金融智能体的训练与评估提供了可追溯、可诊断的基础。

查看 arXiv 页面 (https://arxiv.org/abs/2610.38342) 查看 PDF (https://arxiv.org/pdf/2610.38342) 项目页面 (https://prophet-lab.cn/benchmarks/investor-last-exam-v1/) GitHub (https://github.com/Prophetlab/Investor-Last-Exam) 加入收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2610.38342)

在你的智能体中获取这篇论文:

hf papers read 2610\.38342

还没有最新版 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用本文的模型 0

没有模型关联本文 在模型的 README.md 中引用 arxiv.org/abs/2610.38342,即可从本页面链接到该模型。

引用本文的数据集 0

没有数据集关联本文 在数据集的 README.md 中引用 arxiv.org/abs/2610.38342,即可从本页面链接到该数据集。

引用本文的 Space 0

没有 Space 关联本文 在 Space 的 README.md 中引用 arxiv.org/abs/2610.38342,即可从本页面链接到该 Space。

收录本文的合集 0

没有合集收录本文 将本文加入合集 (https://huggingface.co/new-collection)即可从本页面链接到该合集。

相似文章

投资者的终极考试:AI智能体能否在不预知未来的情况下进行股票投资?

arXiv cs.AI

论文提出了“投资者的终极考试”(Investor's Last Exam,ILE),这是一个由买方投资者主导的股票研究基准,用于评估人工智能智能体在冻结信息集下的研究质量、预测准确度与模拟投资表现。结果显示,最强模型(GPT-6 Astra、Claude Opus 5.5)的研究能力较强,但预测表现仍显著不足。

人工智能在投资领域的应用

Reddit r/ArtificialInteligence

一位拥有14年经验及CFA认证的金融专业人士对当前投资领域的人工智能应用表示怀疑,指出其结果往往过于乐观或流于表面,并询问其他人如何有效利用人工智能。

智能体的最终考试

Hugging Face Daily Papers

介绍智能体的最终考试(ALE),这是一个基准测试,用于评估AI智能体在长期、具有经济价值的现实世界任务上的表现,涵盖13个行业集群的1000多项任务,揭示了基准性能与实际部署之间的巨大差距。

@FinanceYF5: 看对了AI,却没能扛过杠杆 1/ 一只押中AI浪潮、上半年回报439%的基金,7月一个月暴跌67%,最终被迫把大部分股票组合卖给Citadel。 Leopold Aschenbrenner对AI基础设施的长期需求也许判断对了,却没能撑到需…

X AI KOLs Following

A fund that bet on AI and returned 439% in the first half of the year lost 67% in July and was forced to sell most of its portfolio to Citadel, illustrating the risk that even correct long-term AI bets can fail due to leverage and timing.