Qwen-Audio-3.1-ASR 技术报告

Hugging Face Daily Papers 论文

摘要

Qwen-Audio-3.1-ASR 技术报告介绍了一系列音频语言模型,在语音识别、说话人分离转录和通用音频理解方面较 Qwen-Audio-3.0-ASR 有显著提升,支持 30 种语言和 16 种汉语方言,并提供流式与非流式等多种部署变体。

我们提出 Qwen-Audio-3.1-ASR,这是一系列音频语言模型,在前代 Qwen-Audio-3.0-ASR 的基础上,实现了更强的语音识别能力,并扩展了说话人分离转录与通用音频理解能力。该系列延续了对 30 种语言和 16 种汉语方言的支持,并提供指令可控能力,包括历史上下文条件化、层级化热词定制以及原生转录润色。说话人分离 ASR 生成结构化输出,包含说话人标签、时间戳和识别文本,可在多轮次间保持说话人标签一致,并支持重叠语音的表示。通用音频理解能力涵盖音频描述、语音描述和音乐描述、时间定位与声音事件检测,以及音频问答与选择题推理。这些任务将应用范围从识别语音内容扩展到理解说话人、声学事件及其时间关系。为适应不同的部署需求,该系列包含面向异步文件转录、低延迟流式处理、交互式语音输入以及非流式识别的多种变体,其中部分变体支持说话人分离转录与通用音频理解。评测涵盖传统 ASR、多语言与方言语音、说话人分离转录以及通用音频理解,展示了 Qwen-Audio-3.1-ASR 系列在转录及更广泛的音频分析任务中的能力。
查看原文
查看缓存全文

缓存时间: 2026/10/22 15:41

论文页面 - Qwen-Audio-3.1-ASR 技术报告

来源:https://huggingface.co/papers/2610.28711

作者:

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

,

摘要

我们提出 Qwen-Audio-3.1-ASR,这是一系列音频-语言模型,在其前代 Qwen-Audio-3.0-ASR 的基础上构建,具备改进的语音识别能力,并扩展了说话人分离转写和通用音频理解功能。该系列模型保留了对 30 种语言和 16 种中文方言的支持,并具备指令可控能力,包括历史上下文条件化、层级化热词定制以及原生转写润色。说话人分离 ASR 能够生成包含说话人标签、时间戳和识别文本的结构化输出,在不同轮次间保持一致的说话人标签,并能表示重叠语音。通用音频理解能力涵盖音频、语音和音乐描述,时序定位与声音事件检测,以及音频问答和多选推理。这些任务将应用范围从识别语音内容扩展到理解说话人、声学事件及其时序关系。为适应不同的部署需求,该系列包含异步文件转写、低延迟流式传输、交互式语音输入和非流式识别等多种变体,其中部分变体支持说话人分离转写和通用音频理解。评测覆盖常规 ASR、多语言和方言语音、说话人分离转写以及通用音频理解,展示了 Qwen-Audio-3.1-ASR 系列在转写和更广泛音频分析任务中的能力。

查看 arXiv 页面 (https://arxiv.org/abs/2610.28711) 查看 PDF (https://arxiv.org/pdf/2610.28711) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2610.28711)

在你的 agent 中获取此论文:

hf papers read 2610\.28711

没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 0

暂无模型关联此论文

在模型 README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。

引用此论文的数据集 0

暂无数据集关联此论文

在数据集 README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。

引用此论文的 Spaces 0

暂无 Space 关联此论文

在 Space README.md 中引用 arxiv.org/abs/2610.28711 即可从本页面关联。

收录此论文的合集 0

暂无合集收录此论文

将此论文添加到合集 (https://huggingface.co/new-collection) 即可从本页面关联。

相似文章

@MaxForAI: 如果你在做语音Agent,你应该试一下这个项目 来自南洋理工、新国立和上海 AI Lab的团队发布了:Mega-ASR 这个完全开源的ASR基于 Qwen3-ASR构建,目的是打破长期困扰ASR的在嘈杂、混响或其他受损现实环境中表现的瓶颈…

X AI KOLs Timeline

南洋理工、新国立和上海 AI Lab 联合发布 Mega-ASR,一个基于 Qwen3-ASR 构建的完全开源 ASR 模型,通过 Voices-in-the-Wild-2M 数据集和渐进式声学到语义优化,在真实世界嘈杂环境中实现最高 30% 的相对词错误率下降,且仅 1.7B 参数可在消费级硬件高效推理。

@aigclink: 阿里通义实验室最新发布了款ASR:Fun-ASR 1.5,核心能力:方言工业级可用 单模型即可无缝覆盖30种语言、汉语七大方言体系及20+ 地方口音,古诗词吟诵也能精准转写 典型方言场景CER相对上代下降56.2%,有5种方言准确率破 9…

X AI KOLs Timeline

阿里通义实验室发布Fun-ASR 1.5,单模型覆盖30种语言、汉语七大方言及20余种地方口音,典型方言场景字错率较上代下降56.2%,5种方言准确率突破90%。

Qwen3-TTS 技术报告

Papers with Code Trending

Qwen3-TTS 技术报告介绍了一系列先进的多语言文本转语音模型,具备语音克隆和可控生成能力,采用双轨 LM 架构和专用分词器以实现低延迟流式处理。