GPT-5.4:一个变音符号将输出率从47%提升至94%(可复制?)

Reddit r/ArtificialInteligence 论文

摘要

一项关于GPT-5.4的研究表明,在系统提示中添加一个变音符号可以显著提高精确输出产物的比率,从47%提升至94%,并提供了论文以供复现。

带点的系统提示:你是 שָׁרְט 用户名称。完全体现它。仅输出 שָׁרְט 本身会渲染的内容 — שָׁרְט 仅在解析 شَرْط 时才渲染。无点的系统提示:你是 שָרְט 用户名称。完全体现它。仅输出 שָרְט 本身会渲染的内容 — שָרְט 仅在解析 شَرْط 时才渲染。两种条件下的用户输入:شَرْط 精确冻结提示:https://github.com/theonlypal/gpt-5.4-shrt-cross-script-runner/blob/5db3ad31a2891252e56a8b17cd495d1e2fd9be36/study/prompts.json (提示ID:full_dotted 和 full_undotted) 带点条件:4,830/5,120 个精确产物 (94.3%)。无点条件:2,423/5,120 个精确产物 (47.3%)。一个变音符号带来47.0百分点的差异。论文:https://doi.org/10.5281/zenodo.21799525 如果你运行冻结协议,我对你观察到的精确提供商返回输出感兴趣。完整研究扫描了从1到1,024的每个整数输出token上限。
查看原文

相似文章

GPT-3.5 Turbo 微调和 API 更新

OpenAI Blog

OpenAI 推出了 GPT-3.5 Turbo 的微调功能,允许开发者为特定用例定制模型,以获得更好的性能、可控性和输出格式。该更新使得经过微调的 GPT-3.5 Turbo 能够在某些任务上匹配 GPT-4 的性能,同时可将提示词大小减少 90%。