你实际在生产环境中运行的是哪个推理模型?

Reddit r/AI_Agents 新闻

摘要

一位从业者寻求关于 o3、Claude extended thinking、Gemini 2.5 Pro 和 Ring 2.6 1T 等推理模型在生产环境中的代理任务上的真实反馈,质疑 Ring 的双推理强度模式在实际表现与基准测试之间的差异。

我需要为生产环境中的代理工作选择一个推理模型。常见的候选显而易见(o3、Claude extended thinking、Gemini 2.5 Pro),但我也在关注 Ring 2.6 1T,它有两种推理强度模式——high 用于快速的多步代理循环,xhigh 用于更困难的问题。双模式方法吸引了我,因为并非每次代理调用都需要最大推理深度。但我找不到关于它的实际反馈。基准测试确实存在(PinchBench 87.60,Tau2-Bench Telecom 95.32),但我不相信基准测试能告诉我在实际的多步代理任务中,它如何处理混乱的中间状态。在实际中,high/xhigh 的划分效果如何?速度差异是否明显?在较长的代理运行中是否保持稳定?
查看原文

相似文章

JetBrains/Mellum2-12B-A2.5B-Thinking

Hugging Face Models Trending

JetBrains releases Mellum2-12B-A2.5B-Thinking, an open-source Mixture-of-Experts reasoning model with 131k context length, trained with RLVR for explicit chain-of-thought reasoning.

监控内部独白:探针轨迹揭示推理动态

Hugging Face Daily Papers

本文介绍了一种通过分析探针轨迹(即概念概率在生成token上的演变)来监控大型推理模型推理过程的方法。该方法利用隐藏表示中的时间特征和信号处理特征,更好地预测未来模型行为,通过最大池化达到了高达95%的AUROC。