观察到智能体在生产环境实时Webhook中静默失败后，我们构建了自己的工具

Reddit r/AI_Agents 工具
agent-testing webhook-simulation real-world-mocking dev-tools fetch-sandbox

摘要

文章描述了构建FetchSandbox，这是一个为AI智能体提供真实测试环境的工具，通过模拟实际服务提供商的响应来防止实时生产环境中的失败。

智能体不需要假装的模拟。它们需要认证失败、429错误和重试周期，这些行为要与真实的服务提供商完全一致，而不是你猜测的行为。我们在构建处理真实交易的智能体时不断遇到这个问题。智能体通过了所有测试，却在第一个实时Webhook上失败，因为真实提供商的响应与模拟假设的不同。模拟是行为型的，而真实服务有记忆。因此构建了FetchSandbox，让智能体针对你的实际服务提供商的孪生体运行完整循环。使用实际记录的响应模式，而非模拟的。其他人是如何处理的？你们是否在使用模拟，还是直接针对预发布环境测试？
查看原文

相似文章

FetchSandbox

Product Hunt

FetchSandbox 是一款API集成测试工具，能够记住哪些地方出了问题，帮助开发者识别回归问题。