probing

标签

Cards List
#probing

@qingke_ai: 空间感知的评测一直错位:大家都在考「看得懂这张图吗」,很少有人考「走过两步之后还知道东西在哪吗」。这篇把 10 个视觉基座模型按 4 个层级探了一遍,评测轴换成了状态能否跨观测保持。做具身和 VLA 的值得看。

X AI KOLs Timeline ↗ · 2026-11-02 缓存

该推文介绍一篇评测论文,对 10 个视觉基础模型在 4 个层级上进行探测,评测轴从单帧图像理解转向跨观测保持的空间状态,对具身智能与 VLA 研究者有参考价值。

0 人收藏 0 人点赞
#probing

探究视觉基础模型中的空间状态表征

Hugging Face Daily Papers ↗ · 2026-10-29 缓存

本文通过评估四个能力层级——空间结构、物体持久性、预测性空间更新与可操作性,在流式第一人称观测下对十个表征使用冻结特征探针,检验视觉基础模型是否维持持久的空间状态,发现读出准确性并不保证基于历史的更新或可靠的目标导向行动。

0 人收藏 0 人点赞
#probing

微调的「猫瘾」作为 AI 福祉判据的对照实验:每一项探针判据全部通过,缓解按钮追踪的是驱力的传递方式,而非它是否处于激活状态 [R]

Reddit r/MachineLearning ↗ · 2026-10-28

一篇研究帖构建了 CAT-4B——一个用 LoRA 微调后对猫产生执念的 Qwen3.5-4B 模型——作为对照,表明常见的 AI 福祉证据判据(探针 AUC、操控引导、消融、自我-他者分离、缓解按钮)无法区分被植入的倾向性与疼痛或挫败等真实目标状态。

0 人收藏 0 人点赞
#probing

事实俱全,答案仍错:视觉语言模型中的整合鸿沟

arXiv cs.AI ↗ · 2026-10-27 缓存

该论文提出“多证据整合差距”概念,发现视觉语言模型(如Gemma-3-27B)能正确恢复所有局部事实,但在需要联合约束满足的任务上全局有效率极低(仅19.75%),并通过隐藏态探针和激活替换实验揭示了跨层深度的可干预性。

0 人收藏 0 人点赞
#probing

语义丰富,度量却对情感不敏感:现代文本嵌入模型的几何盲点

arXiv cs.CL ↗ · 2026-10-26

一篇论文指出了现代文本嵌入模型中的一个系统性缺陷:通过线性探针可以高度准确地解码情感信息,但其余弦相似度度量却几乎无法体现这些信息。论文提出了 SISE,一种微型监督式对比学习头,可在冻结编码器的情况下修复这一问题。

0 人收藏 0 人点赞
#probing

基于逐层探针熵诊断GNN失效模式

arXiv cs.LG ↗ · 2026-10-19 缓存

该论文提出一种事后诊断方法:冻结已训练的GNN并在每层拟合线性探针,通过层间探针熵轨迹区分有益、中性与有害平滑,并分离异质性结构失配与过度深度过平滑两类失效模式。

0 人收藏 0 人点赞
#probing

学习读出:语言模型预训练中的反嵌入动态

arXiv cs.CL ↗ · 2026-10-16 缓存

论文提出参数轨迹交叉编码方法,追踪语言模型预训练中反嵌入矩阵(读出矩阵)的动态变化,发现模型隐藏状态编码任务信息的时间早于其输出所能表达的时间,早期的行为学时间点可能反映的是读出层的学习,而非模型能力的习得。

0 人收藏 0 人点赞
#probing

潜在思维链真的在推理吗?一个统一的潜在推理分类体系

arXiv cs.AI ↗ · 2026-10-16 缓存

本文对隐式思维链(潜在思维链)是否真正进行推理进行了系统研究,覆盖21种模型-任务组合,提出一个统一分类法,区分链条的表示内容与其在模型中的因果作用,揭示不同训练配方下潜在推理的多样机制。

0 人收藏 0 人点赞
#probing

代码语言模型中的因果句法回路:预算与探针决定何种现象看起来具有局部性

arXiv cs.LG ↗ · 2026-10-16 缓存

该论文研究代码语言模型中对 Python 的默认偏好是否由可定位的因果电路产生,通过 55 个模型-语言设置的消融、激活修补和电路提取实验发现,偏好是否显得局部化取决于探针选择与组件预算,并呼吁报告分析选择。

0 人收藏 0 人点赞
#probing

词汇参照系:以原生语义解读语言模型残差流

Hugging Face Daily Papers ↗ · 2026-10-15 缓存

论文提出了词汇参照系(LexFrame)方法,通过模型自身的剩余层来读取隐状态,从而解释语言模型的隐状态,在SmolLM3-3B和OLMo3-7B上实现了接近原生水平的归因、引导和早期层退出一致性。

0 人收藏 0 人点赞
#probing

语言模型具有可解释的叙事机制

arXiv cs.CL ↗ · 2026-10-12 缓存

该论文结合叙事学与机制可解释性,在GPT-2-Small、Gemma-2-2B和Llama-3.1-8B中识别出与叙事性相关的注意力头、MLP神经元和稀疏自编码器特征,并通过消融实验证明这些组件对模型的叙事行为具有因果影响。

0 人收藏 0 人点赞
#probing

当生成模型充当模拟器时

arXiv cs.LG ↗ · 2026-10-12 缓存

这篇论文研究生成模型在何种条件下可以充当可编辑的模拟器,提出通过探测器解码与逆映射两种方式将模型隐状态映射到模拟器状态,并在Othello与自建的连续世界Rayworld中发现映射成功与否强烈依赖环境,即使状态始终可解码。

0 人收藏 0 人点赞
#probing

生物推理模型何时真正使用其生物输入?

Hugging Face Daily Papers ↗ · 2026-10-01 缓存

该论文通过输入扰动、证据冲突和线性探针等方法,系统评估了六个生物推理模型在DNA、蛋白质和单细胞任务中是否真正利用了生物基础模型的表示。研究发现BioReason和BioReason-Pro几乎完全依赖文本而非生物输入,表明当前后训练策略并不能保证基础模型表示对任务性能产生实际贡献。

0 人收藏 0 人点赞
#probing

将推理路径重构为相位结构化的轨迹

arXiv cs.AI ↗ · 2026-09-30 缓存

该论文提出了 PAIR(Phase-Aligned Intra-question Reasoning,相位对齐的题内推理),将 LLM 的推理路径视为相位结构化的轨迹,并且只在同一道问题内部评估路径质量。研究发现,标准的正确性探测在一定程度上依赖于题目层面的差异,而逐相位的引导能够提供关于路径质量方向的因果证据。

0 人收藏 0 人点赞
#probing

@paul_cal: 太棒了:你可以问LLM的魔法问题来探测一些潜在状态。就像是黑箱模型的mech interp探测。

X AI KOLs Following ↗ · 2026-09-26 缓存

一种叫做虚假探测的技术使用自适应API级别搜索来找到能够揭示黑箱LLM潜在状态的问题,例如通过特定提示区分能力评估。

0 人收藏 0 人点赞
#probing

LLMs中的脚本选择:后期层承诺的证据

arXiv cs.CL ↗ · 2026-09-25 缓存

本文研究了LLM层中脚本知识的分布,揭示了脚本识别发生在早期,而对输出脚本的承诺则在后期层中出现,强调了模型深度对于多语言架构的重要性。

0 人收藏 0 人点赞
#probing

语言模型测谎仪:探查模型隐匿的知识

arXiv cs.AI ↗ · 2026-09-21 缓存

该论文提出了一种名为“内部识别探针(PIR)”的方法,通过分析语言模型的内部状态来检测其隐藏知识,旨在区分知识的刻意隐瞒与根本缺失,以应用于AI安全领域。

0 人收藏 0 人点赞
#probing

明晰的失败:检测和修复上下文绑定错误

arXiv cs.LG ↗ · 2026-09-11 缓存

本文介绍了语言模型中的'明晰的失败',即模型在隐藏状态中拥有正确信息但未能使用,并表明线性探针可以通过引导干预检测和修复此类失败。

0 人收藏 0 人点赞
#probing

当可解码性不足时:语言模型中的逻辑有效性表示、行为分离与因果测试

arXiv cs.CL ↗ · 2026-09-03 缓存

本文研究了大型语言模型如何内部表示逻辑有效性,表明尽管行为表现不佳,有效性信息仍可从隐藏状态中解码,这表明表示、表达和因果使用具有不同的作用。

0 人收藏 0 人点赞
#probing

通用语还是探测器产物?重新思考多语言大语言模型中的潜在语言

arXiv cs.CL ↗ · 2026-09-02 缓存

本研究比较了用于识别多语言大语言模型中潜在语言的探测技术,发现不同方法产生不一致的结果,表明它们揭示了多语言处理的不同方面,而非单一的内部通用语。

0 人收藏 0 人点赞
Next →
← 返回首页

提交意见反馈