@omarsar0：你的智能体运行轨迹是你最好的评估数据。最重要的失败只会在生产环境中显现，而且它们很少会被……

X AI KOLs Timeline 产品
ai-agents observability evals digitalocean agent-tracing developer-tools

摘要

DigitalOcean 推出 Signals（智能体学习服务与智能体数据服务），可从生产环境的智能体轨迹中自动标记失败会话并一键转化为评测集，在真实运行环境中回放验证修复效果。

你的智能体运行轨迹就是最好的评测数据。 最关键的问题只有在生产环境中才会暴露，而且很少被纳入你的测试集。 DigitalOcean 的 Signals 会标记用户感到沮丧或工具运行失败的会话，并一键将它们转化为评测用例。随后，模拟功能会在修复上线之前，使用智能体的真实运行框架重放这些会话，验证修复效果。 如果你正在生产环境中运行智能体，就需要这样的闭环。 https://x.com/digitalocean/status/2109658818196242684/video/1…
查看原文
查看缓存全文

缓存时间: 2026/10/12 19:30

你的智能体运行轨迹是你最好的评估数据。

最重要的故障只会在生产环境中出现，而且很少被纳入你的测试集。

DigitalOcean 的 Signals 会标记用户感到沮丧或工具调用失败的会话，并一键将它们转化为评估用例。随后，模拟功能会在修复上线前，使用智能体的真实运行框架重放这些会话，验证修复效果。

如果你正在生产环境中运行智能体，你就需要这样的闭环。

https://x.com/digitalocean/status/2109658818196242684/video/1…

DigitalOcean (@digitalocean)： 在第一个用户遇到问题时就发现它，而不是等到第四百个。

一位新用户的银行账户关联失败了，智能体说“请稍后重试”，而日志中却没有任何记录。看看一个团队如何借助即将推出的 Agent Learning Services 和 Agent Data Services，在其他人遇到同样的问题之前发现并修复这个漏洞

相似文章