我们捕获了智能体系统中的静默协调失败。接下来该发布什么?

Reddit r/AI_Agents 工具

摘要

一款旨在检测智能体系统中静默协调失败(如无限循环和流量激增)的开源工具,未来计划推出 FinOps 功能以追踪成本并防止预算超支。

针对传统追踪工具难以捕获的此类智能体故障,我们构建了开源层。适用于单智能体+工具、单智能体+MCP 或多智能体工作流(如 CrewAI、LangGraph 及自定义工作流)。 我们目前能捕获的问题: 1. 智能体间的静默循环:例如“研究员”到“撰写者”再到“审核员”的流程无限反弹,因为审核员从未批准。 2. 重复的智能体或工具调用:同一任务被触发 50 次,却无人察觉。 3. 流量激增:突然爆发的调用量远超正常模式。 我们正在为 FinOps 开发的功能。目标实际上是节省成本,而不仅仅是提供仪表盘: 1. 工作流预算上限:为整个运行设置美元限额,在超出前停止运行。 2. 将成本归因于故障或任何其它协调/静默失败:“这 500 美元在静默循环中被烧毁。以下是循环周期。” 3. 慢循环检测:每分钟消耗 0.05 美元的循环,每周烧毁 500 美元,远低于任何速率上限。 4. MCP 重试循环检测:智能体无限重试不稳定的 MCP 服务器。 5. 审批绕过检测:在未通过审批步骤的情况下触发了破坏性工具(Replit 案例)。 我们很想听到大家的意见:这些功能中有哪些实际上是有用的?哪些是“必备”功能,哪些是“锦上添花”?如果我们发布,你会在本地试用吗?我们宁愿打造一款大家真正会使用的产品,而不是发布五款无人问津的功能。 (网站链接见评论区)
查看原文

相似文章

AI Agent智能工具 - 事件调试与成本突增检测

Reddit r/AI_Agents

构建一个用于AI Agent事件调试和成本突增检测的工具,无需额外检测工具,涵盖提示注入、推理循环、数据泄露等问题。询问生产环境中的客户,这是否是一个值得付费的痛点。

论协调失灵

Reddit r/AI_Agents

一篇分析协调失灵概念的学术论文,可能涉及多智能体系统或经济语境。