构建了一个可调用工具的智能体,在一项包含 370 份文档的信息提取基准测试中排名第 8——以下是支撑其表现的智能体架构

Reddit r/AI_Agents 工具

摘要

KYNEX 是一个用于文档提取的开源工具调用智能体,采用六种专用工具、一个监督循环和确定性后处理规则,以 94.6 的 F1 分数在 ExtractBench 的 53 个系统中排名第 8。

大多数提取系统都采用 RAG:嵌入、检索、提取。KYNEX 则采用了不同的方式——它是一个纯粹的智能体循环。LLM 配备了六个工具:read_page - 从任意页面读取原生文本 extract_table - 通过回退链解析结构化表格 search_document - 混合搜索(BM25 + TF-IDF 余弦相似度)inspect_page_visually - 使用 GPT-4o 视觉能力处理内容损坏或仅含图像的页面 OCR - 使用 Azure Document Intelligence 处理扫描文档 read_section - 基于标题进行跨页导航 此外,目录会被注入系统提示词,让智能体在调用任何工具之前就了解文档结构。监督器会跟踪哪些模式字段已填充、哪些仍为空值,以及访问过哪些页面。如果智能体陷入停滞(相同字段连续 2 轮或以上仍为空值),它就会升级处理,尝试不同的工具、不同的页面,或使用视觉能力。在 ExtractBench 上(370 份企业文档,经 LlamaIndex 验证):- 在 53 个系统中排名第 8 - 使用 GPT-6.1 Sol 时,F1 达到 94.6 - 仅使用 GPT-5.4(92.97)就击败了 GPT-6 Astra(91.9)让我惊讶的是:后处理规则的影响竟然如此之大。智能体先提取原始数据,然后由五条确定性规则进行清理,例如剔除数组中不属于记录的行、处理信息遮盖标记,以及规范化结构化表格行。没有这些规则,准确率会大幅下降。开源,采用 Apache 2.0 许可证。不是套壳,也不是演示,而是实际取得这些基准测试分数的系统。
查看原文

相似文章

为什么我把抓取和抽取合并到一个 agent 工具里

Reddit r/AI_Agents

作者分享在用 OpenAI Agents SDK 和 ZenRows 构建线索生成 agent 时,将抓取与抽取合并为单一工具以避免 540K 字符上下文溢出的实践,包括确定性管线设计、错误处理策略与性能结果。

@jerryjliu0:今天我们正式推出 Extract v2.5——一系列专为文档抽取调优的前沿智能体。这些智能体(兼具成本效益……

X AI KOLs Timeline

LlamaIndex 推出 Extract v2.5,这是一套前沿智能体文档抽取模型(Cost Effective、Agentic、Agentic Plus),宣称在 ExtractBench 上实现当前最佳性价比,以 30% 至 4 倍更低成本超越 Opus 5.5 和 GPT-6 Sol,并在长列表、跨页记录和扫描表单方面大幅提升准确率,同时推出可在 LlamaParse 上使用的新功能:高级引用(Advanced Citations)和结构化推理(Structural Reasoning)。

ExtractBench:面向模式引导的企业文档抽取基准

Hugging Face Daily Papers

ExtractBench 是一个用于模式引导的企业文档抽取的新基准,在 4,869 页企业文档上评估值准确率、记录完整性、溯源性和成本。作者发现,商业 VLM 在处理长文档时表现不佳,而编码智能体虽然更准确但成本较高;LlamaExtract AgenticPlus 在所有指标上均领先。

智能体深度研究工具:我找到的那些替代方案

Reddit r/ArtificialInteligence

作者对比了 11 种可在编码智能体内运行或由智能体驱动的深度研究工具,涵盖报告生成、表格输出、来源聚合与审计层等类别,并讲述了自己 fork 其中一个项目后进行改造的过程与发现。