@LangChain: 你可以使用 LangSmith CLI 拉取你标记的 trace,按问题类型对每个 trace 进行分类,并构建一个评估数据集……
摘要
这篇文章通过一个简短的教程,介绍了如何使用 LangSmith CLI 来管理 trace 并构建评估数据集。
你可以使用 LangSmith CLI 来拉取你标记的 trace,按问题类型对每个 trace 进行分类,并为每种类型构建一个评估数据集。
一个 3 分钟的教程 ⤵️ https://t.co/sXLOImwVZJ
查看缓存全文
缓存时间: 2026/09/10 06:11
您可以使用 LangSmith CLI 来提取已标记的追踪记录,按问题类型对每条记录进行分类,并构建一个包含独立划分的评估数据集。
3 分钟教程 ⤵️ https://t.co/sXLOImwVZJ
相似文章
@LangChain:.@AdamRLucek 关于我们如何利用追踪数据为生产环境中的代理构建评估系统。
Adam Łucek 探讨了 LangChain 如何使用追踪数据为生产环境中的代理构建评估。
@LangChain:将编码代理指向 LangSmith CLI,它就能为你构建一个在线的 LLM-as-a-judge:定义评分标准,连接到……
一个关于使用编码代理与 LangSmith CLI 来设置在线 LLM-as-a-judge 以评估 LLM 追踪的教程,所有配置都可从终端进行。
@LangChain:我们构建了一个追踪插件,可将每个@cursor_ai代理会话转换为LangSmith中的结构化追踪:模型运行…
LangChain发布了一个追踪插件,能将每个Cursor AI代理会话转换为LangSmith中的结构化追踪,包括模型运行、工具调用以及嵌套的子代理工作,这是比较编码代理追踪系列的一部分。
@LangChain: .@CreditGenie_US 已使用 LangSmith 调试了数千条代理追踪。LangSmith 的可追溯性使他们能够看到精确的…
CreditGenie 使用 LangSmith 来调试数千条代理追踪,并从生产数据中生成有针对性的测试问题。
@LangChain:我们为LangSmith中的每个Codex会话构建了一个追踪插件。现在每一轮(工具调用、令牌使用、子代理线程…
LangChain发布了针对LangSmith中Codex会话的追踪插件,支持对每一轮(包括工具调用和令牌使用)进行详细追踪,仅需两个配置块和一个标志即可启用。