标签
Clay通过使用AI智能代理和LangSmith工具，实现了大规模客户发现和发展，展示了在增长创意工具中AI的应用和开发监控实践。
一场讨论，比较了用于修复提示失败的LLM评估和可观测性工具（LangSmith、Weave、Phoenix、Braintrust、Galileo、Opik），并介绍了一个开源平台，该平台在单个跟踪上整合了从评估到修复的完整循环。
介绍如何使用 Phoenix 的 Pixie 助手自动对错误跨度进行分类、批量标注，并基于失败模式生成系统提示修复建议。
Latitude是一个开源的人工智能代理监控工具，提供针对基于LLM的代理的问题检测、追踪和评估，类似于Sentry对于AI的作用。
LangChain的LangSmith使开发者能够将追踪用作欧盟AI法案的合规证据，并提供可定制的评估器，用于偏见、幻觉、毒性、准确性和对抗性输入等方面的评估。
Langfuse 将其 LLM 工程平台开源，为生产级 AI 应用提供自托管的链路追踪、分析与评估工具。