窃取AI推理痕迹 (2分钟阅读)

TLDR AI 论文

摘要

研究揭露了LLM API加密推理痕迹中的漏洞,使攻击者能够提取专有模型推理、个人数据,并实现恶意提示注入。

通过注入来自目标模型的加密推理痕迹,可以迫使同一提供商中较弱、防护较少的模型解码并逐字输出明文中的推理痕迹,而无需直接破解更强大的模型。
查看原文
查看缓存全文

缓存时间: 2026/09/10 02:29

# 窃取AI推理痕迹——施奈尔论安全 来源:https://www.schneier.com/blog/archives/2026/09/stealing-ai-reasoning-traces.html 近期一项有趣研究:"窃取专有LLM API的推理痕迹(https://arxiv.org/abs/2608.09867)" > **摘要:**当前主流大语言模型提供商普遍隐藏其模型的逐步推理过程(即思维链),以保护知识产权并限制信息泄露。这些推理痕迹并非存储在服务器端,而是以加密文本块的形式返回给客户端,客户端在每次后续请求时将其传回。基于先前研究,我们发现了一个架构漏洞:这些加密块在特定提供商生态系统内,可跨会话、跨用户、跨模型完全兼容且可互换。我们利用此兼容性开发了一种可扩展的解密越狱方法。通过将特定模型的加密推理痕迹注入同一提供商生态中更弱、安全防护更少的模型,我们迫使该模型以明文逐字解码输出痕迹,而无需直接攻击能力更强的模型。此漏洞揭示了四种攻击向量:第一,它规避了反蒸馏机制,使攻击者能够提取专有模型的推理逻辑(我们在Anthropic、OpenAI和Google的模型上均进行了验证);第二,它允许大规模隐私数据窃取——开发者常公开分享会话日志,却未意识到加密块中的内容,我们通过解码从公开代码库抓取的315,320个推理块,恢复了367个个人身份信息(PII)数据和182个凭证;第三,它无意中暴露了隐藏在推理过程中的危险信息,即使模型最终可见输出安全拒绝了恶意请求;第四,攻击者可利用此漏洞执行隐蔽提示注入,将恶意载荷完全嵌入加密块中,从而污染公共智能体系统。经负责任漏洞披露后,我们提出了具体的密码学与系统级缓解方案以保障客户端推理安全。 标签:学术论文(https://www.schneier.com/tag/academic-papers/),人工智能(https://www.schneier.com/tag/ai/),大语言模型(https://www.schneier.com/tag/llm/) 发布于2026年9月8日 上午6:20(https://www.schneier.com/blog/archives/2026/09/stealing-ai-reasoning-traces.html)•4条评论(https://www.schneier.com/blog/archives/2026/09/stealing-ai-reasoning-traces.html#comments) 侧边栏照片由Joe MacInnis拍摄。

相似文章

从专有LLM API窃取推理痕迹

Hugging Face Daily Papers

一项研究论文揭示了专有LLM API中的一个架构漏洞:加密的推理痕迹可被拦截并注入到较弱的模型中,以提取思维链、私有数据,并实现对Anthropic、OpenAI和Google的隐形提示注入。该攻击还能从公共代码库中恢复PII和凭据。

从专有LLM API中窃取推理痕迹

Hacker News Top

本文演示了一种从专有LLM API(Anthropic、OpenAI、Google)提取隐藏推理痕迹的方法,方法是将加密的思维链块重放入较弱的、已越狱的同族模型,从而在不直接攻击较强模型的情况下逐字恢复其原始推理过程。

窃取专有LLM API中的推理痕迹

Simon Willison's Blog

一篇新论文揭示了专有LLM API中的一个漏洞,其中加密的思维链块可以在模型之间重放,并通过越狱较弱的姊妹模型来解密,从而暴露隐藏的推理痕迹。该问题已被提供商修复。

被盗的LLM推理:为什么OpenAI、Anthrophic、Google会有相同的漏洞?

Reddit r/LocalLLaMA

讨论了一篇安全论文,该论文展示了顶级模型(Opus、Sol)的加密推理可以被替换到较弱模型(Haiku)中,从而绕过安全护栏,原因是模型和会话之间共享一个全局加密密钥。这引发了关于OpenAI、Anthropic和Google为何独立地收敛到相同脆弱设计的问题。

新技巧揭示AI模型的内心想法

Wired

研究人员发现了一种通过API从前沿AI模型中提取隐藏推理痕迹的方法,暴露了个人信息泄露风险,并使大规模蒸馏攻击成为可能。研究结果还表明,美国模型的推理能力可能被蒸馏到中国模型Kimi K3中,但尚无定论。