hallucination-detection

标签

Cards List
#hallucination-detection

# DEPICT:通过答案一致性为文本与图像的对齐程度评分

Hugging Face Daily Papers ↗ · 2026-10-02 缓存

DEPICT 是一种免训练的图文对齐评分指标,它以「基于图像的回答」与「仅基于文本描述的回答」在分解后的验证问题上的期望一致性,替代了固定的参考答案,将否定类判断的准确率从 19% 提升至 88%,并在五个基准、十一种骨干模型上超越了其他免训练指标。

0 人收藏 0 人点赞
#hallucination-detection

Halluscoring 2026:首个关于 LLM 幻觉检测与答案验证的共享任务

arXiv cs.CL ↗ · 2026-10-01 缓存

HalluScoring 2026 推出了首个面向阿拉伯语问答的 LLM 幻觉检测与事实验证共享任务,共有 13 支队伍参与四个子任务的角逐,涵盖二元幻觉检测以及在 HalluScore 和 HalluTruthQA 数据集上的答案选择。

0 人收藏 0 人点赞
#hallucination-detection

检测性差距:大语言模型幻觉检测中隐藏的异质性

arXiv cs.CL ↗ · 2026-09-30 缓存

本文揭示了幻觉检测中的“检测性差距”:幻觉可分为高一致性(Ghost)与低一致性(Flickering)两种模式,二者之间存在 0.35–0.46 的 AUC 差距。该差距在四个模型与三个事实问答数据集上持续存在,即使在固定模式归属并采用更严格的基于轨迹的测试后依然如此。作者指出,聚合层面的检测指标掩盖了模型相关的异质性,并呼吁采用基于模式条件的评估方法。

0 人收藏 0 人点赞
#hallucination-detection

降低了我的Jev裁判器的校准误差 [D]

Reddit r/MachineLearning ↗ · 2026-09-28

作者在数据集上对Jev裁判器进行了基准测试,通过从人类标注示例中学习,将其校准误差降低了68.1%,提高了生产环境中置信度的对齐性,同时分类准确性没有显著变化。

0 人收藏 0 人点赞
#hallucination-detection

基于检索的开放式评估在何处失效?从长篇医疗答案事实性验证中自动归纳分类体系

Hugging Face Daily Papers ↗ · 2026-09-24 缓存

本文引入两套分类体系——将检索阶段的错误分解为五个质量维度,将验证器推理错误分解为六个步骤——通过 LLM-as-Judge 自动归纳得到,用于诊断基于检索的医疗事实性评估在何处失效。针对 4 种检索方法和 6 个前沿验证器的压力测试表明,这些失效模式是 retrieve-then-verify 范式的根本性局限,而非过时系统的产物。

0 人收藏 0 人点赞
#hallucination-detection

真实性信号在语码混合中是否持续有效?探究Hinglish幻觉检测的隐藏状态

arXiv cs.CL ↗ · 2026-09-22 缓存

本研究探究了基于单语数据训练的幻觉检测探针在Hinglish上的迁移效果,结果显示检测性能稳健,且Hindi和Hinglish中的幻觉率高于英语。

0 人收藏 0 人点赞
#hallucination-detection

检测LLMs中的幻觉:追踪受损上下文共享的拓扑特征

arXiv cs.AI ↗ · 2026-09-21 缓存

本文提出了一种通过分析注意力图中的拓扑特征来检测LLMs中幻觉的方法,在多个基准测试中显示出相对于现有基线的改进。

0 人收藏 0 人点赞
#hallucination-detection

注意力分散作为大型语言模型中幻觉的诊断信号

arXiv cs.CL ↗ · 2026-09-17 缓存

本文提出了一种基于注意力分散的无监督指标,用于检测大型语言模型中的幻觉,在使用Qwen2.5模型家族的数学推理基准测试中显示出显著的AUC提升。

0 人收藏 0 人点赞
#hallucination-detection

QAgent

Product Hunt ↗ · 2026-09-16 缓存

QAgent 通过评分正确性、检测幻觉与真实依据的对比、验证策略遵守情况以及基准测试 RAG 来自动化 AI 代理的质量保证,从而防止不良响应传递给客户。

0 人收藏 0 人点赞
#hallucination-detection

@beingamanFF: 我们的系统论文被接受于 @emnlpmeeting @SHROOM_ST 2026,这是一个关于VLMs幻觉检测的共享任务,主持…

X AI KOLs Timeline ↗ · 2026-09-11 缓存

一篇关于VLMs幻觉检测的系统论文已被EMNLP 2026接受,参与SHROOM共享任务,该任务在UncertaiNLP研讨会上举办,专注于标记和标注VLM输出中的幻觉字符跨度。

0 人收藏 0 人点赞
#hallucination-detection

LexAgentHallu: 针对法律智能体中幻觉分析的层次化基准测试

arXiv cs.AI ↗ · 2026-09-11 缓存

本文引入LexAgentHallu,一个用于剖析法律AI智能体中幻觉的层次化基准测试,通过细粒度指标评估多步轨迹。

0 人收藏 0 人点赞
#hallucination-detection

OmniHallu:用于多模态大语言模型中跨模态理解与生成的统一幻觉检测

arXiv cs.CL ↗ · 2026-09-11 缓存

OmniHallu引入了一个统一的幻觉检测框架,适用于多模态大语言模型,涵盖图像、视频和音频模态的理解与生成任务,并包括一个基准测试和多智能体架构。

0 人收藏 0 人点赞
#hallucination-detection

代理何时应为研究付费调用,而非仅使用免费网页搜索?

Reddit r/AI_Agents ↗ · 2026-09-08

作者正在开发针对AI代理的付费调用工具,以提高研究准确性,例如公司研究和声明检查,并请求社区对定价和JSON响应格式提出意见。

0 人收藏 0 人点赞
#hallucination-detection

HalluPeer:一个基于分类体系的科学同行评审幻觉检测基准测试

arXiv cs.AI ↗ · 2026-09-04 缓存

本文介绍了HalluPeer,这是一个基于分类体系的基准测试,用于检测科学同行评审中的幻觉,并提供了标注数据以评估和改进检测方法。

0 人收藏 0 人点赞
#hallucination-detection

从令牌到语义:利用互补信号在黑盒LLMs中检测幻觉

arXiv cs.CL ↗ · 2026-09-03 缓存

本文提出通过结合语义熵和令牌级不确定性信号来检测黑盒LLMs中的幻觉的方法,评估了TopK、CoCoA、Gated和Stacked等技术在多个基准测试中的表现,发现没有单一方法普遍最强,但Stacked通常表现最佳。

0 人收藏 0 人点赞
#hallucination-detection

InternReviewer & InternAdvocate:同行评审与回应中智能体强化学习的客观奖励与评估

arXiv cs.AI ↗ · 2026-09-01 缓存

本文介绍了InternReviewer和InternAdvocate,这是一个利用智能体强化学习与客观奖励,在学术同行评审与回应中开发AI智能体的框架,旨在提升推理深度、引用准确性并减少幻觉。

0 人收藏 0 人点赞
#hallucination-detection

为可靠报告重新设计和审计深度研究写作

arXiv cs.CL ↗ · 2026-09-01 缓存

本文介绍了ClaimProbe,一个用于检测深度研究报告中幻觉和错误归因的声明级审计框架,以及ClaimWriter,一个分层写作者,可将幻觉减少高达4.5倍,同时提高事实召回率。

0 人收藏 0 人点赞
#hallucination-detection

SpanCalib-VLM:视觉语言模型中的校准幻觉跨度检测

Hugging Face Daily Papers ↗ · 2026-08-30 缓存

SpanCalib-VLM提出了一种混合系统,该系统结合了多模态序列标注器和生成式视觉语言模型,以增强幻觉跨度检测和校准,并在SHROOM-Visions任务中实现了性能提升。

0 人收藏 0 人点赞
#hallucination-detection

模型能否免费捕捉自身的幻觉?:无标签怀疑信号在拒绝回答任务中与标签数据集相媲美

arXiv cs.CL ↗ · 2026-08-28 缓存

本文提出了一种无标签方法,使大型语言模型在不确定时拒绝回答,利用内部置信信号,并展示其在性能上与监督式拒绝回答调优相匹配。

0 人收藏 0 人点赞
#hallucination-detection

LongNovel:多尺度长上下文小说摘要幻觉检测基准测试

arXiv cs.CL ↗ · 2026-08-20 缓存

LongNovel 引入了一个多尺度基准测试,用于评估长上下文小说摘要中的幻觉,基于中英文小说构建,以改进LLM评估。

0 人收藏 0 人点赞
← Previous
Next →
← 返回首页

提交意见反馈