标签
CURV 提出了一种课程学习框架,通过在多模态大语言模型中培养内在的视觉基础推理能力来增强图表问答,在真实世界基准上取得了显著改进。
GROVE是一个无需训练的框架,它从连续视频流中生长出时间分层记忆,同时支持反应式问答和主动式辅助。它在MM-lifelong和EgoServe等基准上取得了最先进的结果。
本文介绍了Wnuan,一种用于企业问答的三阶段后训练流水线,结合了任务导向监督、带通用数据回放的监督微调,以及对残余错误的强化学习,在WnuanBench基准上取得了显著提升,同时衡量了通用能力的成本。
3DZip是一个面向3D视觉语言模型的三阶段令牌压缩框架,利用体素化、多样性引导的锚点选择和空间约束合并来减少令牌数量,同时保持空间推理能力。在3DQA基准上,仅使用128个令牌即可保留94.7%的原始性能,并实现1.92倍的推理加速。
提出Co-E,一种免训练系统,同步图记忆与文本记忆用于多跳问答,在六个基准上优于可比的免训练基线。
Opti-Q 是一个受数据库启发的优化器,用于多LLM问答,通过规划执行DAG,在成本、延迟和能量约束下优化答案质量,在基准测试中取得了显著改进。
HyCE-RAG 是一种新颖的基于超图的检索增强生成框架,专为多跳问答设计,通过置信度感知的启发式搜索构建显式证据链,在准确性、相关性和忠实度方面优于标准 RAG 和基于图的 RAG 方法。
本文介绍了相关性感知的RipGrep搜索智能体(RARG),该智能体将相关性作为智能体搜索中语料库交互的执行先验,相比现有方法提高了准确性和效率。
本文介绍了AILQA,一个面向印度法律语境的AI驱动法律问答系统,该系统使用嵌入和生成模型并结合检索增强生成(RAG)。论文评估了其在印度法律文本和全印度律师资格考试上的性能,发现AI生成的回答有时能优于参考答案。
提出FiT,一个诊断框架,用于在微调前评估小型LLM在网络安全问答方面的能力,表明根据不同的微调模式,微调可能会降低词汇和参数化知识。提供避免不必要微调的指导。
Debate-on-Graph (DoG) 是一个框架,通过利用带有置信度的不确定知识图谱 (UKG) 增强 LLM 推理,采用启发式搜索和多智能体辩论机制生成可靠答案。在四个 QA 基准测试中达到最先进性能。
本文介绍了FinanceComplexQA,这是一个全面的基准测试,用于评估工业级金融文档上的智能体推理能力,具有双语支持、专家级问题以及跨六个场景和七个任务的复杂布局。
介绍LakeQuest,一个经过人工验证的基准测试,包含九个领域共9,846个问答对,用于评估在异构数据湖上的端到端检索与合成管道,揭示了现代问答系统中的关键故障模式。
介绍CANDI-QA,这是一个用于评估大语言模型在小众领域上下文对齐能力的数据集,包含信息辅助型和应用推理型问题。对十多个大语言模型的系统评估揭示了挑战,并提出了一个轻量级神经符号框架MTSS-Net作为基线。
ResearchQA是一个新基准,包含来自八个领域494篇开放获取论文的6,211个单论文问答对,旨在通过要求可验证引用并在证据不足时支持基于理由的拒绝,来评估基于引用的问答能力。
CLIR-Bench是一个针对不规则采样临床时间序列的多模态问答基准,基于ICU记录构建,包含跨越11个临床变量的6,600个问答实例。它揭示了现有通用模型在处理稀疏时间证据方面的困难,突显了开发更强的不规则时间序列推理方法的必要性。
PolyUQuest 是一个可验证、结构感知的 Web RAG 框架,利用异构图统一超链接拓扑、DOM 层次结构和实体关系知识,在答案正确性、覆盖率和忠实度方面优于现有系统。
本文介绍了NLPCC 2026 共享任务1:难度感知的多语言多模态医学教学视频理解评估(DA-MIVQA)。该任务在以往基准测试的基础上,增加了难度感知标注,并包含三个赛道:时间答案定位、视频语料库检索以及语料库内定位。数据集来自公共频道的医学教学视频,旨在评估系统在不同推理需求下的表现。
本文通过一项实证研究,比较了来自四个库(Ragas、DeepEval、RAGChecker、Opik)的RAG评估指标与人工判断及标准召回指标,并基于商业数据创建了问答数据集。
本文将PubHealthBench扩展至检索增强场景,系统评估了公共卫生问答中的检索与生成选择,结果表明混合检索能提升准确率,且使用检索的较小模型可媲美较大模型。