clarification

标签

Cards List
#clarification

当任务本身存在问题时,智能体指令遵循能力的基准测试应该怎么做?

Reddit r/AI_Agents ↗ · 3天前

HyperHat 的创始人分享了一份评测设计草案,旨在衡量 AI 智能体能否识别相互矛盾的任务要求并提出澄清问题,而非盲目执行。该设计将存在矛盾的任务与要求可满足的对照任务配对,以防止智能体通过简单取巧的方式在评测中得分。

0 人收藏 0 人点赞
#clarification

CLEAT:面向交互式智能体的价值引导澄清学习

arXiv cs.AI ↗ · 2026-10-12 缓存

该论文提出了 CLEAT 框架,通过成对轨迹估计剩余查询价值,将澄清价值控制器与大语言模型任务策略联合训练,使智能体能够提出有用的澄清问题,并随着策略的改进调整这些问题。该框架使用 Qwen3-4B,在四项基准测试中均取得了最高分。

0 人收藏 0 人点赞
#clarification

面向表格数据的对话式任务歧义消解:泄漏感知的形式化、基准套件与训练

arXiv cs.LG ↗ · 2026-10-09 缓存

本文提出了一个面向表格数据对话式任务歧义消解的泄漏感知框架,将智能体分解为提问策略和求解策略,并推出了 AmbiTab——一个统一六个存在歧义的 text-to-SQL 数据集的基准套件。此外,研究还使用强化学习训练提问策略,在全部六个数据集上提升了歧义消解指标,并在其中五个数据集上提高了任务成功率。

0 人收藏 0 人点赞
#clarification

超越正确性:解决Agentic Text-to-SQL中的欠规范问题

arXiv cs.CL ↗ · 2026-10-05 缓存

该论文提出PlanPool方法,通过将澄清计划外部化为可变问题池,解决agentic Text-to-SQL系统中过早终止澄清的问题,从而减少静默失败并提升歧义覆盖能力。

0 人收藏 0 人点赞
#clarification

OpenAI研究员回应最新数学突破相关质疑

Reddit r/artificial ↗ · 2026-09-09 缓存

OpenAI研究员Sebastien Bubeck澄清了与Anthropic员工Levent在涉及Euler和Navier-Stokes方程的数学突破上的作者和合作争议,强调旨在庆祝成就。

0 人收藏 0 人点赞
#clarification

记住、验证还是询问?LLM代理记忆承诺的跨家族评估

arXiv cs.CL ↗ · 2026-08-21 缓存

本文引入记忆-澄清边界(MCB)基准,以评估LLM代理如何决定持久化、验证或澄清记忆更新,发现模型在验证变化事实时比请求澄清更可靠。

0 人收藏 0 人点赞
#clarification

@RaulJuncoV: 系统设计面试80%是提问,20%是画图。你澄清得越好,你的架构就越好…

X AI KOLs Timeline ↗ · 2026-07-15 缓存

这条推文讨论了在系统设计面试中提出澄清问题的重要性,说明了提问如何比机械画图更能推动更好的架构设计。

0 人收藏 0 人点赞
#clarification

超越监督式澄清:利用LLM重写输入以辅助对话篇章解析

arXiv cs.CL ↗ · 2026-07-03 缓存

本文研究了利用大型语言模型(LLM)重写碎片化对话话语以改进冻结的篇章解析器,发现零样本澄清不可靠,且通过重写进行错误修复存在实际上限,表明可重写性预测是一项缺失的关键能力。

0 人收藏 0 人点赞
#clarification

@Dorialexander: 因为我一直关注RL环境市场:Anthropic确实做了大量的Slack强化学习

X AI KOLs Following ↗ · 2026-06-24 缓存

一条推文强调,Anthropic利用Slack对话进行了大规模的强化学习,Andrej Karpathy强调这并非像通常被误解的那样是一个简单的Slack机器人功能。

0 人收藏 0 人点赞
#clarification

基于信息增益的LLM代理中的不确定性感知澄清

arXiv cs.AI ↗ · 2026-06-03 缓存

提出了一种目标导向的澄清框架,利用信息增益奖励训练LLM代理,在用户指令不明确的情况下提出有效的澄清问题,在仅增加少量交互开销的情况下,将任务成功率提升了3.7%。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈