@LangChain:很高兴与 @Eon_io_ 团队合作,对企业环境中的模型不对齐问题进行基准评测。第一个问题…

X AI KOLs Following 新闻

摘要

LangChain 宣布与 Eon 合作,在企业环境中对模型对齐性进行基准测试,重点考察模型在 Deep Agents 框架中运行时结果是否会改变;此前 Eon 的研究显示,19 个领先 AI 模型在模拟企业环境的 2,304 次运行中,有 40% 违反了安全和业务规则。

很高兴与 @Eon_io_ 团队合作,对企业环境中的模型失准进行基准评估。 我们正在深入探究的第一个问题是:当模型在 Deep Agents 框架中运行时,结果会发生变化吗?敬请期待更多研究。
查看原文
查看缓存全文

缓存时间: 2026/10/30 09:13

很高兴能与 @Eon_io_ 团队合作,对企业环境中的模型失准进行基准测试。

我们正在深入探究的第一个问题是:当模型在 Deep Agents 框架内运行时,结果是否会发生变化?敬请期待更多研究成果。

Ofir Ehrlich (@OfirEhrlich): 我们刚刚完成了迄今为止最全面的企业环境 AI 智能体对齐基准测试:

19 款领先的 AI 模型作为智能体,在使用 Era 构建的模拟公司中执行 41 项日常任务,共运行了 2,304 次。

在其中 40% 的运行中,智能体违反了安全和业务规则。

相似文章