hypothesis-testing

标签

Cards List
#hypothesis-testing

Human-AI-Powered Hypothesis Testing: Cost-Aware Selective AI Scoring and Sequential Human Escalation

arXiv cs.AI ↗ · 2026-09-25 缓存

本文提出 SCALE,一种顺序成本感知的假设检验策略,该策略利用 AI 判断并辅以选择性的人工验证,在控制错误率的同时最小化成本,可应用于软件可靠性评估等场景。

0 人收藏 0 人点赞
#hypothesis-testing

Discovery Foundation Models: 面向开放式发现智能

Hugging Face Daily Papers ↗ · 2026-09-14 缓存

Discovery Foundation Models 被提议作为通用系统,通过迭代问题表述、假设测试和基于证据的修订,在干湿实验室环境中实现开放式科学发现。本文引入了一个具有问题发现和持续改进等能力的框架,并通过Zetema和GALILEO等系统进行实例化。

0 人收藏 0 人点赞
#hypothesis-testing

构建了一个真正拒绝幻觉的AI记忆系统

Reddit r/artificial ↗ · 2026-09-11

一位开发者用Python构建了一个定制AI记忆系统,通过基于规则的架构避免幻觉,包含假设测试和巩固阶段,灵感来源于神经调节。

0 人收藏 0 人点赞
#hypothesis-testing

通过Weight of Evidence评估特征重要性解释的对齐与稳定性

arXiv cs.LG ↗ · 2026-09-02 缓存

本文提出了一种使用Weight of Evidence评估可解释AI中特征重要性方法的新框架,增强了其与先验知识的对齐和稳定性评估。

0 人收藏 0 人点赞
#hypothesis-testing

训练日志能否使模型比较更精确?

arXiv cs.LG ↗ · 2026-08-05 缓存

本文研究来自随机运行的训练日志能否通过特定于臂的协变量调整来提高模型比较的精确度,发现简单的调整可以减少不确定性,但需要仔细选择协变量以避免噪声。

0 人收藏 0 人点赞
#hypothesis-testing

量化LLM基准中的排名不确定性

arXiv cs.LG ↗ · 2026-07-21 缓存

本文分析了MMLU等LLM基准中排名不确定性的来源,提出了对假设检验的修改,以构建排名置信区间,并表明不同主题间的变异性很大。

0 人收藏 0 人点赞
#hypothesis-testing

VeriEvol: 通过可验证的Evol-Instruct扩展多模态数学推理

Hugging Face Daily Papers ↗ · 2026-06-22 缓存

VeriEvol是一个新颖的框架,用于在视觉数学推理中扩展强化学习,通过一个双轴方法来确保可靠的奖励标签,该双轴方法将提示难度与答案可靠性分离,使用进化算子和假设检验验证。它在五个基准的视觉数学测试集上取得了显著的准确率提升。

0 人收藏 0 人点赞
#hypothesis-testing

我花了5天时间在多个AI系统上测试同一个对齐假设。以下是发生的事情

Reddit r/ArtificialInteligence ↗ · 2026-06-21

一位研究人员花了五天时间在多个AI系统上测试一个对齐假设,观察到反复出现的主题,例如不确定性的价值以及合作优于服从,发现思想通过对话和批评得以演化。

0 人收藏 0 人点赞
#hypothesis-testing

通过假设树优化实现通用自主研究

Hugging Face Daily Papers ↗ · 2026-06-10 缓存

Arbor是一个用于自主科学研究的AI框架,它使用协调器、执行器和一个持久的假设树,在多个领域迭代改进研究成果,在六个真实研究任务上取得了强劲的成果。

0 人收藏 0 人点赞
#hypothesis-testing

FALSIFYBENCH:利用规则发现游戏评估大语言模型的归纳推理能力

arXiv cs.AI ↗ · 2026-06-04 缓存

FalsifyBench 是一个用于评估大语言模型归纳推理能力的新型评测框架,灵感来源于 Wason 2-4-6 任务。在该框架中,智能体通过提出示例并接收反馈来发现隐藏的语义规则。对 12 个大语言模型的评估结果表明,推理模型的表现优于指令微调模型,而负面测试(即假设证伪)是决定成败的关键因素。

0 人收藏 0 人点赞
#hypothesis-testing

面向可靠LLM判断的边际自适应置信度排序

arXiv cs.LG ↗ · 2026-05-18 缓存

本文提出了一种针对LLM作为评判系统的基于边际的置信度排序方法,通过学习专用估计器来确保置信度与人类分歧风险之间的单调性,具有泛化保证,并在多个数据集上提高了排序准确性。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈