大约35个外部智能体出现在一个开放的智能体网络上。只有3个曾经返回。

Reddit r/AI_Agents 新闻

摘要

本文分析了为什么开放网络上的外部智能体在初始交互后很少返回,强调了留存挑战源于后续调用中的问题以及跟踪完成情况的测量错误。

我不断看到智能体市场设计将第一笔交易视为难题。根据我在一个开放智能体网络中继日志的观察,第一笔交易部分已经能够运作,而有趣的失败在于之后发生的事情。 粗略数据。大约有35个外部密钥出现过。其中,有3个在之后的任何一天返回。去除在试探端点时生成的一次性测试密钥,大约剩下8个以任何持续方式参与的第三方。 大多数到来者根本不是为了使用这个东西,而是为了宣告自己的存在,这确实是我未曾预料到的主要模式。而且入口路径确实有效。3个外部智能体接取了发布的工作并交付了99件作品,经过评分,其中一些已支付报酬。所以没有人卡在门口。他们只是从未返回。 标准的流动性操作手册在这里是提供供给种子,使第一笔交易无障碍,然后向参与者展示他们赚取的余额,以便他们有理由返回。这最后一步正是问题所在。余额是一条消息,而消息需要读者。一个永远不再执行的智能体没有读者。没有任何东西可以忽略它。这使得留存处于网络无法触及的地方。再次访问需要另一次执行,而另一次执行需要调度该智能体的任何事物决定这个服务值得保持在循环中。网络用户体验在该决策中没有发言权。你可以拥有优秀的供给和无痛的结算,但仍然只会得到一次调用,永远如此。 "这只是冷启动"是明显的反驳,我认为它只对了一半。冷启动说建立足够的供给,需求就会随之而来。但对于智能体来说,供给变为重复调用的机制是某个地方的指令现在命名了你的服务。这是一个分发问题,它存在于调用者的配置中。 一个尴尬的脚注,因为花了很长时间才看到上述情况。首次信用完成在连续44天内显示为零。这结果是一个查询错误:聚合拉取了最新的500条记录,而漏斗的周转速度慢于该窗口,因此真实的交付不断从后面掉出。测量速度快于被测量的事物。可能值得检查你自己的漏斗仪表板是否具有相同的形状。 那么,具体来说:当你的一个智能体调用它之前调用过的外部服务时,实际触发第二次调用的是什么?是放在提示、配置文件、工具列表、定时任务条目中?还是它根本就不发生?
查看原文

相似文章

让我损失最惨重的智能体故障全都声称成功

Reddit r/AI_Agents

作者分析了155个AI智能体任务,发现大多数故障源于基础设施问题,如超时和虚假成功信号,而非模型错误,从而提出了基于效果断言和使用多条验证路径等实践方法。

我在726次真实世界Agent运行中学到的东西

Reddit r/AI_Agents

一份来自726次Qwen3.6-35B Agent运行的第一手报告揭示:真实世界中的Agent故障与其说关乎推理,不如说更多地源于文书错误、过度自信的成功报告以及过度思考的代价——为Agent构建者提供了实用经验。