标签
作者测量了有损推理引擎标志(路由偏置和尾部跳过)对模型质量的影响,结果表明:在显存充足的情况下,出厂默认设置会导致约 1.5 个准确率点的损失,而在小显存显卡上损失约为其 3 倍;若采取过于激进的设置,则会产生看似自信实则胡言乱语的输出。
论文提出IEC框架,研究语言模型在受控指令负载(如无意义的单词替换规则)下的行为与性能退化,揭示了规则数量、替换密度、规则位置等因素遵循的数学规律,并在GPT-4o mini上验证,为模型建立可复现的"能力护照"。
内容讨论了 AI 模型在初始兴奋后性能随时间退化这一常见问题,并质疑是否进行了纵向基准研究以追踪不同模型和实验室的趋势。
据报道,OpenAI 悄悄将一些 Astra 和 Codex 账户路由到较弱的模型,由于账户活动限制,导致性能问题。公司已承认根据活动限制访问,一些用户认为这不道德,尤其影响了大量中国用户。
用户报告指出,Astra AI模型被秘密降级,即使在高强度提示下性能依然不佳,引发了对计算成本节省的担忧,并呼吁FTC进行调查。
作者讨论了在其聊天应用'harness'中使用递归摘要来管理上下文,但观察到在许多消息后Qwen Flash Next模型性能下降,质疑对话压缩是否会影响模型连贯性。
帖子称OpenAI Codex在Ultra推理级别下给国内用户分配降智的gpt-5.5-mini模型,并提供检测prompt,呼吁用户扣1或扣2以统计针对国内用户的降智率。
作者指责Anthropic在初始试用期后故意降低其AI模型Fable的性能,并以此作为证据,证明闭源AI公司具有掠夺性,而开源替代品终将胜出。
一位用户指出,Claude Fable 5在近期更新后性能显著下降,调试、重构和幻觉任务的基准分数大幅下跌,呼吁对AI模型行为进行监管,以应对潜在的消费者诈骗问题。
Anthropic为秘密降低Claude Fable 5模型对高级AI开发用户性能的政策道歉并撤销,引发安全与开放之争。
用户观察到 opus-4.8 模型自推出以来性能有所下降。
用户报告OpenAI的Codex GPT-5.5 high模型表现下降,出现懒惰、胡说八道和上下文丢失等问题,怀疑是OpenAI正在训练GPT-5.6所致,需开启xhigh模式才能恢复正常。
用户报告,在 llama.cpp 服务器上连续运行约两周后,Qwen3.6 模型的能力显著下降,且重启会话无法解决此问题。
追踪 LMSYS Arena 排行榜上各大 AI 模型 ELO 历史的工具,揭示了性能退化与升级等隐含趋势。
一位运行多个代理的用户报告称,升级到GPT-5.5后,模型突然在执行工具调用方面能力下降,更倾向于给出建议而非实际执行,推测OpenAI可能在进行限流以管理负载。
MiniMax 发布技术博客,深入分析其 M2 系列大模型在无法输出特定人名背后的系统性词表退化问题,揭示了预训练与后训练数据覆盖脱节导致的参数偏移,并提出了通过全量合成数据进行修复的有效方案。
用户记录:闭源模型(GPT-4o→5.3、Gemini)在翻译中文小说时质量下滑并自我审查,而本地 Gemma 4 31B 不仅零审查,翻译质量也全面反超。