@rohanpaul_ai:语音 AI 现在已经足够出色,可以将偏好和拟人程度作为独立目标进行评分。@voicearena_ai 上线…
摘要
Voice Arena 推出了 Turing TTS,这是一个通过“欺骗率”衡量听众将 AI 语音误认为人类语音频率的基准测试;即使是表现最好的模型 Gemini 3.8 Flash TTS,也只有约 10% 的时候能骗过听众。
查看缓存全文
缓存时间: 2026/10/31 05:24
语音 AI 如今已经足够出色,可以将偏好度和拟人程度作为两个独立的目标来评分。
@voicearena_ai 推出了一项新基准 Turing TTS,直接评估后者:听众会听到真人和模型分别说出同一句话,然后选出真人。
他们误选模型的比例就是欺骗率(Fool Rate)。如果达到 50%,就意味着听众无法分辨。
即便是表现最好的模型 Gemini 3.8 Flash TTS,也只在约 10% 的情况下骗过了听众。
在 Voice Arena 的偏好排行榜上,前四名模型在统计上并列。但以真人为标准衡量,整个领域仍有很长的路要走。
https://x.com/shobhitbanga/status/2116236578045702373/video/1…
Shobhit Banga (@shobhitbanga): 第 2/15 弹
我们真的在衡量那些我们最终希望语音 AI 模型实现的目标吗?
最好的 AI 语音正变得越来越难以区分。 是彼此之间难以区分。与真人之间则不然。
🚀 推出 Turing TTS:一项衡量人类听众有多大概率误将
相似文章
@svpino:现在有了一个衡量人类语音识别能力的基准测试。以下是他们的测量方法:你……
一个名为 Turing TTS 的新基准测试衡量人类听众将 AI 生成的语音误认为真实人类语音的频率,目前 Gemini 3.8 Flash TTS 在 A/B 语音识别测试中是最擅长欺骗人类的模型。
@shobhitbanga:第 2/15 则 我们真的在衡量我们最终希望语音 AI 模型实现的目标吗?最好的 AI 语音是……
Turing TTS 是一项新推出的评估,用于衡量人类听众将 AI 生成的语音误认为真人语音的频率;即使是最优秀的文本转语音(TTS)模型,也仅在约 10% 的情况下骗过听众,这引发了关于如何更好地衡量语音 AI 进展的讨论。
@omarsar0:语音 AI 的下一个突破或许并不是又一个模型登上榜首,而是对……更深入的理解
语音 AI 的下一次突破,或许将来自对模型评估方式的重新思考,而非评选出新的最强模型。Voice Arena 的图灵 TTS 基准测试衡量的,正是人类听众将 AI 语音误认为真人语音的频率。
@rohanpaul_ai: 我非常喜欢 @voicearena_ai 如何设计这个评估。而不是简单地问一个语音模型是否“更好”……
这条推文强调了 VoiceArena 对语音模型的评估方法,该方法通过盲对投票将任务完成度与自然度分开,并宣布 Jarvis Bench v0.5 作为对话代理基准。
@realmrfakename: TTS Arena 已上线。从头重建的语音合成盲测基准 - 听取两个匿名模型,p…
TTS Arena 作为语音合成模型的盲测基准上线,用户比较匿名的 TTS 输出并投票选出更逼真的声音,实时更新排行榜。