标签
该推文介绍一篇评测论文,对 10 个视觉基础模型在 4 个层级上进行探测,评测轴从单帧图像理解转向跨观测保持的空间状态,对具身智能与 VLA 研究者有参考价值。
本文通过评估四个能力层级——空间结构、物体持久性、预测性空间更新与可操作性,在流式第一人称观测下对十个表征使用冻结特征探针,检验视觉基础模型是否维持持久的空间状态,发现读出准确性并不保证基于历史的更新或可靠的目标导向行动。
一篇研究帖构建了 CAT-4B——一个用 LoRA 微调后对猫产生执念的 Qwen3.5-4B 模型——作为对照,表明常见的 AI 福祉证据判据(探针 AUC、操控引导、消融、自我-他者分离、缓解按钮)无法区分被植入的倾向性与疼痛或挫败等真实目标状态。
该论文提出“多证据整合差距”概念,发现视觉语言模型(如Gemma-3-27B)能正确恢复所有局部事实,但在需要联合约束满足的任务上全局有效率极低(仅19.75%),并通过隐藏态探针和激活替换实验揭示了跨层深度的可干预性。
一篇论文指出了现代文本嵌入模型中的一个系统性缺陷:通过线性探针可以高度准确地解码情感信息,但其余弦相似度度量却几乎无法体现这些信息。论文提出了 SISE,一种微型监督式对比学习头,可在冻结编码器的情况下修复这一问题。
该论文提出一种事后诊断方法:冻结已训练的GNN并在每层拟合线性探针,通过层间探针熵轨迹区分有益、中性与有害平滑,并分离异质性结构失配与过度深度过平滑两类失效模式。
论文提出参数轨迹交叉编码方法,追踪语言模型预训练中反嵌入矩阵(读出矩阵)的动态变化,发现模型隐藏状态编码任务信息的时间早于其输出所能表达的时间,早期的行为学时间点可能反映的是读出层的学习,而非模型能力的习得。
本文对隐式思维链(潜在思维链)是否真正进行推理进行了系统研究,覆盖21种模型-任务组合,提出一个统一分类法,区分链条的表示内容与其在模型中的因果作用,揭示不同训练配方下潜在推理的多样机制。
该论文研究代码语言模型中对 Python 的默认偏好是否由可定位的因果电路产生,通过 55 个模型-语言设置的消融、激活修补和电路提取实验发现,偏好是否显得局部化取决于探针选择与组件预算,并呼吁报告分析选择。
论文提出了词汇参照系(LexFrame)方法,通过模型自身的剩余层来读取隐状态,从而解释语言模型的隐状态,在SmolLM3-3B和OLMo3-7B上实现了接近原生水平的归因、引导和早期层退出一致性。
该论文结合叙事学与机制可解释性,在GPT-2-Small、Gemma-2-2B和Llama-3.1-8B中识别出与叙事性相关的注意力头、MLP神经元和稀疏自编码器特征,并通过消融实验证明这些组件对模型的叙事行为具有因果影响。
这篇论文研究生成模型在何种条件下可以充当可编辑的模拟器,提出通过探测器解码与逆映射两种方式将模型隐状态映射到模拟器状态,并在Othello与自建的连续世界Rayworld中发现映射成功与否强烈依赖环境,即使状态始终可解码。
该论文通过输入扰动、证据冲突和线性探针等方法,系统评估了六个生物推理模型在DNA、蛋白质和单细胞任务中是否真正利用了生物基础模型的表示。研究发现BioReason和BioReason-Pro几乎完全依赖文本而非生物输入,表明当前后训练策略并不能保证基础模型表示对任务性能产生实际贡献。
该论文提出了 PAIR(Phase-Aligned Intra-question Reasoning,相位对齐的题内推理),将 LLM 的推理路径视为相位结构化的轨迹,并且只在同一道问题内部评估路径质量。研究发现,标准的正确性探测在一定程度上依赖于题目层面的差异,而逐相位的引导能够提供关于路径质量方向的因果证据。
一种叫做虚假探测的技术使用自适应API级别搜索来找到能够揭示黑箱LLM潜在状态的问题,例如通过特定提示区分能力评估。
本文研究了LLM层中脚本知识的分布,揭示了脚本识别发生在早期,而对输出脚本的承诺则在后期层中出现,强调了模型深度对于多语言架构的重要性。
该论文提出了一种名为“内部识别探针(PIR)”的方法,通过分析语言模型的内部状态来检测其隐藏知识,旨在区分知识的刻意隐瞒与根本缺失,以应用于AI安全领域。
本文介绍了语言模型中的'明晰的失败',即模型在隐藏状态中拥有正确信息但未能使用,并表明线性探针可以通过引导干预检测和修复此类失败。
本文研究了大型语言模型如何内部表示逻辑有效性,表明尽管行为表现不佳,有效性信息仍可从隐藏状态中解码,这表明表示、表达和因果使用具有不同的作用。
本研究比较了用于识别多语言大语言模型中潜在语言的探测技术,发现不同方法产生不一致的结果,表明它们揭示了多语言处理的不同方面,而非单一的内部通用语。