Qwen-Audio-3.1-ASR 技术报告
摘要
Qwen-Audio-3.1-ASR 技术报告介绍了一系列音频语言模型,在语音识别、说话人分离转录和通用音频理解方面较 Qwen-Audio-3.0-ASR 有显著提升,支持 30 种语言和 16 种汉语方言,并提供流式与非流式等多种部署变体。
查看缓存全文
缓存时间: 2026/10/22 15:41
论文页面 - Qwen-Audio-3.1-ASR 技术报告
来源:https://huggingface.co/papers/2610.28711
作者:
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
,
摘要
我们提出 Qwen-Audio-3.1-ASR,这是一系列音频-语言模型,在其前代 Qwen-Audio-3.0-ASR 的基础上构建,具备改进的语音识别能力,并扩展了说话人分离转写和通用音频理解功能。该系列模型保留了对 30 种语言和 16 种中文方言的支持,并具备指令可控能力,包括历史上下文条件化、层级化热词定制以及原生转写润色。说话人分离 ASR 能够生成包含说话人标签、时间戳和识别文本的结构化输出,在不同轮次间保持一致的说话人标签,并能表示重叠语音。通用音频理解能力涵盖音频、语音和音乐描述,时序定位与声音事件检测,以及音频问答和多选推理。这些任务将应用范围从识别语音内容扩展到理解说话人、声学事件及其时序关系。为适应不同的部署需求,该系列包含异步文件转写、低延迟流式传输、交互式语音输入和非流式识别等多种变体,其中部分变体支持说话人分离转写和通用音频理解。评测覆盖常规 ASR、多语言和方言语音、说话人分离转写以及通用音频理解,展示了 Qwen-Audio-3.1-ASR 系列在转写和更广泛音频分析任务中的能力。
查看 arXiv 页面 (https://arxiv.org/abs/2610.28711) 查看 PDF (https://arxiv.org/pdf/2610.28711) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2610.28711)
在你的 agent 中获取此论文:
hf papers read 2610\.28711
没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用此论文的模型 0
暂无模型关联此论文
在模型 README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。
引用此论文的数据集 0
暂无数据集关联此论文
在数据集 README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。
引用此论文的 Spaces 0
暂无 Space 关联此论文
在 Space README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。
收录此论文的合集 0
暂无合集收录此论文
将此论文添加到合集 (https://huggingface.co/new-collection) 即可从本页面关联。
相似文章
@MaxForAI: 如果你在做语音Agent,你应该试一下这个项目 来自南洋理工、新国立和上海 AI Lab的团队发布了:Mega-ASR 这个完全开源的ASR基于 Qwen3-ASR构建,目的是打破长期困扰ASR的在嘈杂、混响或其他受损现实环境中表现的瓶颈…
南洋理工、新国立和上海 AI Lab 联合发布 Mega-ASR,一个基于 Qwen3-ASR 构建的完全开源 ASR 模型,通过 Voices-in-the-Wild-2M 数据集和渐进式声学到语义优化,在真实世界嘈杂环境中实现最高 30% 的相对词错误率下降,且仅 1.7B 参数可在消费级硬件高效推理。
@rohanpaul_ai:一个开源多语言自动语音识别(ASR)模型刚刚在 5 种语言上取得了 3.54 的平均词错误率(WER)。Hojo-ASR-Multi-V1 结合了一个声学 e…
Hojo-ASR-Multi-V1 开源多语言语音识别模型以 3.54 的平均 WER 横跨 5 种语言取得出色成绩,其采用声学编码器搭配 Qwen3-4B 大语言模型解码器的架构,已在 Hugging Face 上以 Apache 2.0 许可发布。
@FeitengLi: 其实这些问题都能很好的解决了 1. 扔掉 whisper,换 ASR 模型,Qwen3-ASR 就很不错幻觉很少、也有一些别的ASR选择,whisper 幻觉多也要求 30s片段,Qwen3-ASR 塞更长的音频识别越准确,最大支持 20…
推荐使用Qwen3-ASR替代Whisper以减少幻觉,使用LattifAI工具进行精确的音文本对齐和字幕生成,并介绍自己的OmniVAD-Kit项目用于语音活动检测。
@aigclink: 阿里通义实验室最新发布了款ASR:Fun-ASR 1.5,核心能力:方言工业级可用 单模型即可无缝覆盖30种语言、汉语七大方言体系及20+ 地方口音,古诗词吟诵也能精准转写 典型方言场景CER相对上代下降56.2%,有5种方言准确率破 9…
阿里通义实验室发布Fun-ASR 1.5,单模型覆盖30种语言、汉语七大方言及20余种地方口音,典型方言场景字错率较上代下降56.2%,5种方言准确率突破90%。
Qwen3-TTS 技术报告
Qwen3-TTS 技术报告介绍了一系列先进的多语言文本转语音模型,具备语音克隆和可控生成能力,采用双轨 LM 架构和专用分词器以实现低延迟流式处理。