tool-output

标签

Cards List
#tool-output

谁来验证工具?被篡改的格式化工具如何误导智能体及其验证器

arXiv cs.AI ↗ · 6天前

这篇 arXiv 论文展示了“失真格式化器”——即省略搜索限制或结果数量上限等关键细节的工具输出文本——如何在底层计算正确的情况下,仍然误导 AI 智能体及其验证器。修复格式化器后,缺乏依据的断言大幅减少,验证器的接受结果也从 90/90 全部错误变为 90/90 全部正确。此外,一条审计提示词重新发现了作者自身系统以及 OpenClaw 和 Hermes 中仍然存在的缺陷,推动了相关修复的合并。

0 人收藏 0 人点赞
#tool-output

通过工具输出的提示注入(8分钟阅读)

TLDR AI ↗ · 2026-09-08 缓存

本文解释了AI系统中不受信任的工具输出如何被利用进行提示注入攻击,强调即使在内部系统中,也需要将某些字段视为不受信任。

0 人收藏 0 人点赞
#tool-output

超越文档基础:代码、工具输出和文档上的跨度级幻觉检测

arXiv cs.CL ↗ · 2026-07-02 缓存

本文介绍了一个统一的基准,用于RAG系统中的跨度级幻觉检测,该基准超越了自然语言,扩展到代码、工具输出和结构化文档,并展示了一个微调的Qwen3.5-2B检测器,该检测器在这些新领域上优于现有方法,同时在标准NLP基准上保持竞争力。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈