attention-collapse

标签

Cards List
#attention-collapse

@rohanpaul_ai:RAG投毒会让模型产生更高的置信度,这正是基于置信度检测方法失效的原因。这篇论文深入...

X AI KOLs Following ↗ · 2026-08-19 缓存

本文揭示了RAG投毒攻击能人为提升模型置信度以规避传统检测方法,并提出通过监控注意力分布来检测此类攻击。

0 人收藏 0 人点赞
#attention-collapse

当上下文反噬:通过文档级注意力崩溃检测RAG投毒

Hugging Face Daily Papers ↗ · 2026-08-07 缓存

本文提出D-SCAN,一种针对RAG投毒的检测框架,通过监控语言模型生成中的注意力崩溃动态,即使在输出看似良性时,也能有效抵御对抗性攻击。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈