面向决策的推荐重排序:一项关于 Jev 的实证研究
摘要
本文对 Jev 这一面向决策的“系统一模型”(System One Model)在个性化推荐重排序中的表现进行了实证研究,发现与推荐专用模型以及逐点式(pointwise)和列表式(listwise)大语言模型重排序器相比,它在多个领域和候选集规模下占据了截然不同的质量—延迟运行区间。
查看缓存全文
缓存时间: 2026/10/01 04:20
论文页面 - 面向决策的推荐重排序:Jev 的实证研究
来源:https://huggingface.co/papers/2609.40241
面向决策的模型能否比通用 LLM 更适合推荐重排序?
在这项工作中,我们研究了 Jev——一种面向决策的“系统一模型(System One Model)“——在个性化推荐重排序中的表现。在多个领域和候选集规模的实验中,我们发现与推荐专用模型以及 pointwise/listwise LLM 重排序器相比,Jev 占据了一个截然不同的质量-延迟运行区间。
我们希望这项研究能引发更多关于面向决策的模型在推荐及其他结构化排序任务中应用的讨论。期待听到你的想法!
相似文章
JevRec:面向LLM生成式推荐的类Jevson决策建模语言编码
JevRec受自然语言频率模式启发,将物品编码为可变长度的语义ID,并采用长度与内容预测的独立预测头,从而在基于LLM的生成式推荐中超越TIGER等基线方法。
用 Jev 决策模型替代大语言模型以实现低延迟边缘服务编排
本文在边缘服务编排中用 Jev 决策模型取代基于大语言模型的决策,在负载下报告了 22.7–64.5% 的中位决策延迟降低以及远高的请求完成率,同时指出宽契约构会成为这种替代的边界。
Jev 之类的决策模型并未胜过 LLM-as-a-judge 或传统分类器
Red Hat Developer 的一篇文章对 TypeSafe AI 的 Jev “System One” 决策模型与基于 LLM-as-a-judge 的护栏以及传统的零样本文本分类器进行了基准测试,结论是:尽管决策模型具备 schema 安全、低延迟和零样本等优势,但它们并没有明确优于这些既有的替代方案。
新的 system 1.5 模型在所有 4 个基线上都大幅超越 JEV,并且在图像 JEV 基准测试中排名第一(没错,它是多模态的)
新款模型 Wity-1 是一个推理决策模型,定位介于 Jev 这类非推理决策模型与完全推理的 LLM 之间。据称它在全部 4 项基准测试中击败了 Jev,并在 Image Jev Bench 上排名第一,同时支持多模态。它只进行"刚刚好"的推理——直到内部 LLM 概率表明答案已经得出。
多模态重排序是一个System One决策
论文提出,多模态重排序可以被构建为一个由通用视觉-语言模型在单次前向传播中完成的System One单选问题,实验表明零样本的Qwen3.8-27B在多个检索基准上达到或超越了专门的有监督重排序模型。