@joabaum:SWE-chat v2 来了!最大的来自真实用户的野外编码智能体交互数据集变得更大……
摘要
SWE-chat v2 已发布,扩展至涵盖 18K 会话的 230K 条提示词,成为最大的来自真实用户的野外编码智能体交互数据集。团队将在 COLM 上进行报告,并邀请社区探索 v2 所能带来的新可能。
查看缓存全文
缓存时间: 2026/10/04 17:15
SWE-chat v2 来了!来自真实用户真实场景的最大规模代码智能体交互数据集又壮大了:18K 个会话、230K 条提示词。
SWE-chat 已经催生了出色的研究成果(🧵),期待看到 v2 能为社区解锁怎样的可能性。
来 @COLM_conf 找我们!https://t.co/s71ipqIL8J
相似文章
SWE-chat:来自真实用户场景中的编码代理交互
SWE-chat 发布了包含 6,000 场真实编码代理会话的数据集,显示仅有 44% 的代理生成代码最终进入提交,并揭示当前 AI 辅助开发中的效率与安全缺陷。
SWE-Together: 在交互式用户会话中评估代码代理
SWE-Together 是一个基于真实用户-代理交互创建的多轮代码基准测试,采用反应式LLM模拟器,根据最终正确性和交互效率评估代理。
@jyangballin: 今天发布 SWE-bench Multimodal v2.0,包含480个任务,编码代理需要解释视觉资产如截图,…
SWE-bench Multimodal v2.0 已发布,提供480个任务,编码代理需要解释如截图和图表的视觉资产,以诊断和修复代码仓库中的错误。
@kevin_x_li: 介绍 SWE-ZERO-12M-trajectories:公开中最大的智能体追踪数据集,比之前最大的大5.7倍…
SWE-ZERO-12M-trajectories 是最大的公开编码智能体追踪数据集,包含来自122K个拉取请求和3K个仓库的12M条轨迹,共计112B个token,支持在不需容器化执行的情况下对智能体编码模型进行可扩展训练。
SWE-INTERACT: 将SWE基准重新构想为用户驱动的长期编码会话
SWE-Interact是一个新的测试平台,用于评估编码智能体在真实的多轮用户驱动软件工程任务中的表现,揭示了强大的单轮基准性能并不能可靠地迁移到交互式、迭代的工作流程中,在这些流程中,智能体必须发现用户意图并适应不断变化的需求。