distillation-detection

标签

Cards List
#distillation-detection

基于参考的LLM蒸馏检测

arXiv cs.LG · 2026-07-14 缓存

本文介绍了一种基于参考的方法,通过成员推断来检测LLM是否是从特定教师模型蒸馏而来。该方法在受控设置下实现了近乎完美的准确性,并提供了关于QwQ、DeepSeek-R1和GPT-OSS之间潜在蒸馏关系的新证据。

0 人收藏 0 人点赞
#distillation-detection

@qqqqqf_: 我加测了 Fable5,我发现他和 Anthropic 的大部分模型都获取不到极高的(>0.9)的相似性 这有概率说明这大概是一个前所未有的混合数据的新基座模型(仅为猜测,根据测试后训练也会影响这个指纹的结果,仅为参考) 但是额外的惊喜是…

X AI KOLs Timeline · 2026-07-02 缓存

用户 @qqqqqf_ 分享了对 Fable5 等模型的指纹测试结果,发现 Fable5 与大多数 Anthropic 模型相似度不高,但与 kimi k2.7、qwen3-7max、glm5.2 等有极高相似性,猜测可能存在数据泄露或蒸馏;同时发布了开源项目 ai-model-fingerprint 用于模型识别和检测。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈