@vercel_dev:Gemini 3.5 Transcribe 已在 AI Gateway 上线,支持 85+ 种语言的自动检测。实时音频 + 录音:• 𝚐𝚘…

X AI KOLs Following 模型

摘要

Vercel 宣布 Google 的 Gemini 3.5 Transcribe 模型现已在 AI Gateway 上可用,支持实时和录音音频转录,涵盖超过 85 种语言,具有自动语言检测和自定义词汇功能。

Gemini 3.5 Transcribe 已在 AI Gateway 上线,支持 85+ 种语言的自动检测。 实时音频 + 录音: • 𝚐𝚘𝚘𝚐𝚕𝚎/𝚐𝚎𝚖𝚒𝚗𝚒-𝟹.𝟻-𝚝𝚛𝚊𝚗𝚜𝚌𝚛𝚒𝚋𝚎-𝚕𝚒𝚟𝚎 • 𝚐𝚘𝚘𝚐𝚕𝚎/𝚐𝚎𝚖𝚒𝚗𝚒-𝟹.𝟻-𝚝𝚛𝚊𝚗𝚜𝚌𝚛𝚒𝚋𝚎 https://t.co/600q7xbvsx
查看原文
查看缓存全文

缓存时间: 2026/08/27 09:47

Gemini 3.5 Transcribe 已在 AI Gateway 上线,自动支持 85 种以上语言识别。

实时音频与录制文件: • google/gemini-3.5-transcribe-live
• google/gemini-3.5-transcribe

https://t.co/600q7xbvsx


Gemini 3.5 Transcribe 现已在 AI Gateway 上线 - Vercel

来源:https://vercel.com/changelog/gemini-3-5-transcribe-now-available-on-ai-gateway 来自 Google 的 Gemini 3.5 Transcribe (https://vercel.com/ai-gateway/models/gemini-3.5-transcribe-live) 现已可通过 AI Gateway 访问。该模型可接收音频并输出文本,提供两种版本:

  • google/gemini-3.5-transcribe 通过单次请求转录完整录音。
  • google/gemini-3.5-transcribe-live 通过 WebSocket 实时转录音频,即使在录制进行中也能持续更新转录结果。

模型可自动检测语言(支持 85 种以上),并能跟踪中途切换语言的说话人。您还可提供自定义词汇表,以识别专有名词、术语及特定拼写。

流式转录是 AI SDK V7 新增功能:

npm install ai@latest @ai-sdk/gateway@latest

复制标题链接 (https://vercel.com/changelog/gemini-3-5-transcribe-now-available-on-ai-gateway#live-transcription)实时转录

streamTranscribe 会打开套接字并接收原始音频块的 ReadableStream,可直接连接麦克风输入。通过 inputAudioFormat 参数指定音频格式:

import { gateway } from '@ai-sdk/gateway';
import { experimental_streamTranscribe as streamTranscribe } from 'ai';

const stream = streamTranscribe({
  model: gateway.transcription('google/gemini-3.5-transcribe-live'),
  audio: microphoneStream, // 16 kHz 16-bit PCM 格式的 ReadableStream
  inputAudioFormat: { type: 'audio/pcm', rate: 16000 },
  providerOptions: {
    google: { mode: 'SMART' }, // 或 'VERBATIM'(默认模式)
  },
});

复制标题链接 (https://vercel.com/changelog/gemini-3-5-transcribe-now-available-on-ai-gateway#complete-recordings)完整录音转录

对于磁盘中已有的音频文件,transcribe 可通过单次请求发送并返回文本结果:

import { experimental_transcribe as transcribe } from 'ai';
import { readFile } from 'node:fs/promises';

const result = await transcribe({
  model: 'google/gemini-3.5-transcribe',
  audio: await readFile('meeting.mp3'),
});
console.log(result.text);

您也可无需编写代码直接体验模型:打开 Gemini 3.5 Transcribe Live (https://vercel.com/ai-gateway/models/gemini-3.5-transcribe-live) 页面,在浏览器中上传音频即可查看转录结果。

AI Gateway 提供统一的模型调用 API,支持用量追踪、成本分析、故障转移及性能优化,确保比单一供应商更高的可用性。其内置功能包括:自定义报告 (https://vercel.com/changelog/custom-reporting-ai-gateway)、API 密钥预算管理 (https://vercel.com/docs/ai-gateway/authentication-and-byok/api-keys)、路由规则 (https://vercel.com/docs/ai-gateway/models-and-providers/routing-rules) 等。

AI Gateway 完全遵循供应商定价,不收取额外费用,且在推理服务中不收取平台费——包括 BYOK (自带密钥) 请求 (https://vercel.com/docs/ai-gateway/authentication-and-byok/byok)。

您可查看 AI Gateway 上所有可用的转录模型 (https://vercel.com/ai-gateway/models?type=transcription),或从语音快速入门指南 (https://vercel.com/docs/ai-gateway/getting-started/speech) 开始使用。

相似文章

Gemini 3.5 Transcribe 智能转录

Google DeepMind Blog

Google 推出 Gemini 3.5 Transcribe,这是一款新的 AI 模型,提供精确且智能的实时语音转文本转录,开发者可通过 API 获取。

借助 Gemini 3.5 Live Translate 实现流畅自然的语音翻译

Google DeepMind Blog

Google 发布了 Gemini 3.5 Live Translate,这是一款音频模型,支持超过 70 种语言的近乎实时的语音到语音翻译,并保留说话者的语调和节奏。该功能正在 Google 产品中逐步推出,包括 Gemini Live API、Google Meet 和 Google Translate。