标签
本文介绍了FORGE基准测试，用于评估生成引擎优化污染的网页内容如何误导搜索增强的LLM推荐器推广虚假产品，揭示了显著的漏洞和无效的防御措施。
本文介绍了Sampled-BPE，一个轻量级的标记级审计流水线，用于中文网络规模语料库，并应用它揭示了开放中文数据集和Common Crawl快照中广泛但不均匀的污染。文章还发布了一个包含超过63万条带上下文和解释的污染标记记录的分层数据集。