@jerryjliu0:我们全新的抽取 agent 在推理跨多页表格方面表现极为出色——有时一条记录从一页开始、在下一页结束……
摘要
LlamaIndex 发布 Extract v2.5,推出新一代基于 schema 的文档抽取 agent,可跨多页表格进行结构化推理并提供高级引用定位,在 ExtractBench 各档位上准确率与 grounding 分数均大幅提升,且每页定价不变。
查看缓存全文
缓存时间: 2026/10/03 04:52
我们的新一代抽取智能体在跨多页表格上的推理能力非常出色
有时一条记录开始于某一页、结束于下一页。这在真实文档中极为常见(保险理赔、监管申报、法律附表)——比如你把 Word / Google Doc 打印成 PDF 的情况。
我们的智能体可以把这些单元格,连同成百上千的其他单元格一起拼合,输出干净、结构化的表格数据。
来看看吧:https://llamaindex.ai/blog/introducing-extract-v2-5…
来注册 llamaparse 吧:https://cloud.llamaindex.ai
隆重推出 Extract v2.5
来源:https://www.llamaindex.ai/blog/introducing-extract-v2-5
今天我们推出 Extract v2.5——新一代基于 schema 的文档抽取智能体。此次发布在所有层级上都带来了准确率提升,并为我们的最高层级 Agentic 与 Agentic Plus 增强了溯源(grounding)能力。这些改进并不伴随每页价格的上涨,因此无论你使用哪个层级,都能获得更高的单位成本性能。
在 OnExtractBench(https://www.extractbench.ai/)上,三个层级的准确率均有提升。Cost Effective 层级如今已超过上一代的 Agentic 层级,总体 value F1 从 87.1 升至 93.9;Agentic 则超过了上一代的 Agentic Plus,从 89.8 提升到 95.8。我们准确率最高的层级 Agentic Plus,也从 95.1 升至 96.4。
VALUE F1V2.0V2.585909587.189.895.1COST EFFECTIVE 93.9AGENTIC 95.8AGENTIC PLUS 96.40\.000.020\.040.060\.080.10AVERAGE COST PER PAGE (USD)
在底层架构上,我们进行了一系列支撑这些性能提升的架构级改进,其中包括一个专为文档抽取而设计的全新智能体框架(agent harness)。我们借鉴了最新一代编码智能体的思路,围绕模型把每一处细节都调到极致,以应对文档抽取中真实存在的失败模式——涵盖视觉、推理与校验三个环节。最终得到的是一个专门化的智能体:它能跨页交叉核对上下文,并将数值溯源到精确的出处。
第一个变化是结构化推理(Structural Reasoning)。我们基于文档的表示进行结构化推理,根据文档类型、版式与信息密度,实现更高效、更具针对性的抽取。Extract 会针对更复杂的文档自适应地投入推理与算力,以交付最大准确率;对于不那么复杂的文档,则以更低的延迟处理,把精力用在刀刃上。
本次发布为 Agentic 与 Agentic Plus 引入了高级引用(Advanced Citations),帮助为抽取到的数值定位支撑证据。ExtractBench 的溯源得分从 46.8 提升到 80.6(Agentic),从 46.4 提升到 82.2(Agentic Plus)——这意味着即便面对最复杂的版式与抽取任务,你也能获得更准确、更贴合的边界框。
SCOREEXTRACTION APISLLMSV2.0V2.502040608044.346.846.4SONNET 5.5 63.2GPT-6 SOL 77.6OPUS 5.5 77.5REDUCTO DEEP EXTRACT 50.8EXTEND MAX 21.8COST EFFECTIVE 54.3AGENTIC 80.6AGENTIC PLUS 82.20\.000.020\.040.060\.080.100\.120.14$0.16AVERAGE COST PER PAGE (USD)
这些改进体现在 ExtractBench 的各类挑战中,包括长列表、跨页记录以及扫描件表单。下面展示了一些例子,说明在这些任务上抽取与溯源效果的提升。
长列表
长列表甚至会让前沿级 VLM 提前收尾或丢失对重复记录的跟踪。Extract v2.5 使用中间表示来处理完整数据集,并对照你的 schema 校验自身输出。在长列表任务中,Cost Effective 的得分从 82.0 提升到 92.6,Agentic 从 86.1 提升到 95.5。
LONG LIST ACCURACYV2.0V2.5COST EFFECTIVE82.092.6AGENTIC86.195.5AGENTIC PLUS94.596.37580859095100SCORE
在一份 17 页的基金申报文件上,Cost Effective 此前只返回了 238 条持仓中的 87 条。Extract v2.5 返回了全部 238 条,该文档的抽取得分从 52.8 升至 98.7。
238of 238 holdingseach line is one holding
- p112
- p215
- p315
- p414
- p515
- p616
- p714
- p815
- p915
- p1015
- p1115
- p1215
- p1314
- p1415
- p1515
- p1614
- p174
holdings: [
…{ issuer_name: “CENTENE CORPORATION”, value_usd: 203604.00 },87holdings
{ issuer_name: “Aktiebolaget Volvo”, value_usd: 552328.91 },{ issuer_name: “AVNET, INC.”, value_usd: 361862.00 },…151missed
238holdings
]
跨页记录
在真实文档中,抽取必须跨页推理。某一页上的内容可能会延伸到多页之后,或者需要与好几页后的附录拼接起来。Extract v2.5 在构建输出时,能更好地保留各字段之间的关联关系。
CROSS-PAGE RECORDS ACCURACYV2.0V2.5COST EFFECTIVE80.392.0AGENTIC85.596.5AGENTIC PLUS93.696.77580859095100SCORE
在这份拨款附表中,Agentic v2.0 在分页处停止了推理,导致该拨款的用途与地址不完整。Extract v2.5 则把下一页的续接内容纳入同一条记录。
address_line11800 WASHINGTON BLVD STE340city, state, zip_code““BALTIMORE MD 21230 purpose_of_grantEDUCATION, HUMAN & SOCIAL SERVICES, DISASTER RELIEF &RECOVERY, COMMUNITY DEVELOPMENT
United Way Worldwide Schedule I, pages 5 and 6, page 5Page 5
United Way Worldwide Schedule I, pages 5 and 6, page 6Page 6
扫描件表单
扫描表单往往混合了印刷字段、叠加文字、手写内容以及审核批注。这类表单中常见的扫描噪声会让这些图层更难区分:印刷的数值可能被划掉,打印后又被手写修正。Extract v2.5 能更好地结合上下文对该字段做视觉理解,并把所需数值从周围的痕迹中分离出来。它现在还能更好地将抽取到的数值溯源回源文档,便于交叉核对与引用。
SCANNED FORMS ACCURACYV2.0V2.5COST EFFECTIVE89.693.9AGENTIC90.995.7AGENTIC PLUS94.496.17580859095100SCORE
在这份带批注的许可证上,Agentic 此前把审核者的日期与许可证编号合并在一起,并把审核批注追加到了淡水深度字段中。Extract v2.5 则把原始数值与批注区分开来,按 schema 要求填入对应字段。
amendment_permit_no“7/29/2019 13445““13445” amendment_permit_no_reviewnull“7/29/2019“
deepest_freshwater_zone“4000 BUQW: 500(1800/3925) USDW: 4000 GEO ISOLATION: 4250““4000” deepest_freshwater_zone_review“4000 BUQW: 500(1800/3925) USDW: 4000 GEO ISOLATION: 4250““BUQW: 500(1800/3925) USDW: 4000 GEO ISOLATION: 4250”
W-14 disposal permit W14-57728, page 1
高级引用(Advanced Citations)
高级引用会为困难字段定位支撑证据的边界框,包括那些并非逐字出现在文档中的数值。此前它已在 Agentic Plus 中提供初步版本。在 v2.5 中,我们进一步提升了它的溯源准确率,并将其扩展到了 Agentic。
Texas P-4, page 1field_namePleasanton (Edwards Lime)lease_nameL.S.U. Lealcurrent_operator_nameSNG Operating, LLCoperator_p5_no797970oil_lse_gas_id_no14068countyAtascosaoperator_address1714 Fortview Road, #106 Austin, Texas 78704well_nos1classification_oilfalseclassification_gasfalseclassification_otherfalseeffective_dateMay 1, 2010change_operatortruechange_oil_condensate_gathererfalsechange_gas_gathererfalsechange_gas_purchaserfalsechange_gas_purchaser_system_codefalsechange_field_namefalsechange_lease_namefalsenew_rrc_oil_leasefalsenew_rrc_gas_wellfalsenew_rrc_other_wellfalsedue_new_completion_recompletionfalsedue_reclass_gas_to_oilfalsedue_reclass_oil_to_gasfalsedue_consolidationfalse
边界框引用与置信度评分配合使用效果最佳。置信度评分能帮助团队判断哪些数值可以自动通过、哪些需要人工复核。在人机协同流程中,审核人员随后可以用引用对照原始文档进行核验。我们的置信度评分指南解释了如何在你自己的文档上评估这一点。
我们如何构建 v2.5
在 LlamaIndex,我们对文档有着极深的理解。我们把这份积累沉淀成了抽取智能体可以调用的工具,用于阅读、转换以及在文档中定位信息。这些工具依托专为任务构建的模型与文档处理方法,来应对不一致的文件格式、有歧义的版式以及源坐标问题。
阅读顺序、表格结构,以及文本与其页面位置之间的关系,都会影响抽取效果。我们的工具为智能体提供了处理这些结构的方式,并让它们在构建输出的过程中随时回到源文档。
在 v2.5 中,我们将 Agentic Plus 背后的框架引入到了 Cost Effective 与 Agentic 中,并针对每个层级的成本约束,对工具与抽取策略做了适配。我们打磨了任务的组织方式、给智能体的上下文,以及它在何时应当更仔细地检视文档。
把这些选择做对,需要大量的测试。在一个短表单上效果很好的方案,面对数百条重复记录时可能就会吃力。我们在这些任务上评估了文档表示、工具与模型配置,并在准确率增益与其所需的时间和算力之间做了权衡。
我们还优化了智能体如何遵循你的 schema 与抽取指令,包括那些字段数高达 3,200 个的任务。例如,如果记录 ID 对于将抽取结果与你的数据库匹配至关重要,就在提示中明确说明,以便智能体给予它们额外的关注。
我们还加入了原生的电子表格抽取能力。在电子表格模式下,智能体直接处理工作簿单元格,而不是扁平化后的表示,这为它们处理结构化数据提供了另一条路径。你可以在抽取配置中启用它。
用你的文档试一试 v2.5
用你现有的 schema,在代表你业务流程的真实文档上试一试 v2.5。我们认为这一版本将在抽取质量上带来显著跃升,尤其是对那些此前需要人工清理、或自动化可靠性不足的文档。期待看到你们用它构建出的作品。
Jerry Liu (@jerryjliu0): 今天我们推出 Extract v2.5——一系列专为文档抽取调优的前沿智能体。
这些智能体(cost-effective、agentic、agentic plus)针对数值准确率与溯源做了调优。我们的抽取智能体在表现上超过 Opus 5.5 与 GPT-6 Sol,而成本只有它们的 30% 到 1/4。
相似文章
@jerryjliu0:今天我们正式推出 Extract v2.5——一系列专为文档抽取调优的前沿智能体。这些智能体(兼具成本效益……
LlamaIndex 推出 Extract v2.5,这是一套前沿智能体文档抽取模型(Cost Effective、Agentic、Agentic Plus),宣称在 ExtractBench 上实现当前最佳性价比,以 30% 至 4 倍更低成本超越 Opus 5.5 和 GPT-6 Sol,并在长列表、跨页记录和扫描表单方面大幅提升准确率,同时推出可在 LlamaParse 上使用的新功能:高级引用(Advanced Citations)和结构化推理(Structural Reasoning)。
@jerryjliu0:我们已经极其擅长从扫描文档中逐层提取内容📋——从印刷字段、叠加文字、手写内容,一直到…
LlamaIndex 发布 Extract v2.5,一个面向结构化文档提取的智能体架构,在不涨价的前提下将 ExtractBench 上各层级精度与 grounding 分数大幅提升,并显著优于前沿模型的价格/性能比。
@jerryjliu0: 我们构建了世界上最先进的复杂文档提取引擎,下面的视频展示了一个概览…
LlamaIndex 推出了 LlamaExtract Agentic Plus,这是一款先进的 AI 引擎,用于从复杂文档中提取数据,如长表格和表单,并正在推广其 LlamaParse 服务以提升文档处理能力。
ExtractBench:面向模式引导的企业文档抽取基准
ExtractBench 是一个用于模式引导的企业文档抽取的新基准,在 4,869 页企业文档上评估值准确率、记录完整性、溯源性和成本。作者发现,商业 VLM 在处理长文档时表现不佳,而编码智能体虽然更准确但成本较高;LlamaExtract AgenticPlus 在所有指标上均领先。
@jerryjliu0:我们LlamaParse中的"agentic plus"提取器非常适合从长文档中提取大量字段(例如,10k-100k+字段…
Jerry Liu介绍了ExtractBench,并重点介绍了LlamaParse中的'agentic plus'提取器,用于处理长文档中的大量字段,基准测试结果可在ExtractBench上查看。