DINOv2在k-NN中远差于SigLIP。这是预期的吗？[R]

我在做一门关于细粒度汽车分类的学士论文（从列表照片中区分大众高尔夫的不同代数）。简单的设置：冻结编码器 → 嵌入 → 加权k-NN。在我的小数据集上（175训练/132测试）：SigLIP2 SO400M：~92%，CLIP ViT-L：~59%，DINOv2 Giant：~41%。我原以为可能是余弦距离与欧氏距离的问题，但我的嵌入已经进行了L2归一化，所以两者给出的排名相同。两种都试了，DINOv2仍然停留在41%。我理解SigLIP是经过对比训练的，因此其空间基本上是为余弦相似度构建的，而DINOv2是自监督的，可能需要一个训练好的头部才能发挥效果。但50个百分点的差距仍然让我觉得很巨大。有人在这里尝试过在细粒度任务上使用DINOv2配合线性探针吗？它真的能追上来，还是它根本就不是适合检索的工具？另外，如果我遗漏了某些显而易见的东西（选错层、错误池化等），也欢迎提供建议。