想要AI代理不泄露秘密?那就不要给它们秘密
摘要
关于一篇文章的简短公告,讨论将秘密远离LLM以防止AI代理泄露的原则。
我写了一篇关于将秘密远离LLM的文章。希望能听到您的反馈。
相似文章
AI Agent 鲜为人知的真相
关于AI Agent常被忽视的真相或方面的讨论或揭示
MosaicLeaks:你的研究助手能保守秘密吗?
MosaicLeaks 提出了一个新的基准,用于衡量深度研究型AI助手的隐私泄露情况,结果表明这些助手经常通过外部查询泄露私人信息,并提出了一种训练方法(PA-DR),在降低泄露的同时提升任务性能。
我们让AI代理访问数据库、邮件系统和支付API。然后我们只是……信任它们。
本文强调了当前对能够访问数据库、邮件系统和支付API的AI代理严重缺乏治理层,指出目前在没有监督的情况下信任LLM的做法危险且不足。
如果你给AI智能体提供真实数据和一个发送按钮,它最终会泄露。我构建了一个工作空间,从结构上使其不可能发生。
作者分享了一种开源工作空间架构,通过强制执行人工把控的出站操作并将引擎与数据仓库隔离,从结构上防止AI智能体泄露私人数据。
如果你的 AI 智能体调用了公共 LLM,「删除」并不完全由你掌控:来自 2025 年 OpenAI 证据保全令的启示
2025 年一项法院命令要求 OpenAI 保留本应被删除的聊天和 API 日志,这凸显出使用公共 LLM 的智能体开发者失去了对数据删除的控制,引发了关于私有模型部署和数据保留策略的讨论。