智能体需要身份标识

Reddit r/AI_Agents 新闻

摘要

文章认为,当AI智能体在共享工作空间中自主执行操作时,必须为每个操作明确归属到智能体及其负责的人类,以确保监督和信任。没有适当的身份和审计追踪,团队无法安全地将更复杂的任务委托给智能体。

最近一直在思考这个问题。某个智能体在夜间更新了共享文档的新版本,收入数据随之改变。第二天早上,显而易见的问题:谁改了这些数据,又是经谁批准的?大多数工具无法回答这个问题。版本信息只记录在某个API密钥下,或者根本没有任何归属。智能体在共享空间中完成了实际工作,而记录就此中断。一年前,“工具中的AI”还只是自动补全功能。它提出建议,你接受,因此编辑属于你。如今,智能体自行发布报告、回复评论并推送新版本。它们与你的队友在相同的共享空间中工作。一旦智能体成为共享工作空间中的第二个行动者,“谁做了这件事”就需要一个真实的答案。大多数软件给出的答案很差,因为大多数软件是以人为中心构建的,AI是后来才拼凑上去的。智能体要么借用某人的身份,要么匿名运行。演示时没问题——但一旦有几个智能体开始编辑重要的内容,就毫无用处了。我最终确定的模式是:每个操作都带有两种归属信息。执行工作的智能体以及对此负责的人。类似 *claude-code on behalf of Max* 这样的形式。Carl 要求了这次改动,所以 Carl 对此负责,而智能体全程可见。你无法让人类保持在一个他们看不见的循环中。只记录人而不记录智能体的追踪链条,实际提供的监督比看上去要少。这一点也经常被反向理解。清晰的审计追踪正是让你能赋予智能体更多任务的基础。当你能检查完成了什么以及背后是谁在负责时,你才会分配更大的任务。没有人会批准自己无法追溯的工作。其实很简单:命名行动者,保留版本,留下可供下一个人类或智能体阅读的记录。智能体会继续承担更多实际工作。能够始终保持舒适应对这一点的团队,将是那些始终清楚谁做了什么、为谁而做的团队。
查看原文

相似文章

我们是否需要对AI智能体进行身份验证?

Reddit r/AI_Agents

本文探讨了随着智能体间工作流和自主系统日益普及,对AI智能体进行身份验证和权限管理的新兴需求,并提出了签名工具清单和智能体证书等概念。