标签
Tavus 宣布推出 Griffin,称其为首款「人类交互模型」(Human Interaction Model),也是首个通过图灵视频测试的实时视频系统。据一项自主运行的调查显示,参与一分钟通话的受访者中有 48% 认为自己是在与真人交谈,同时该系统还在 NVIDIA 的 VideoFDB 感知赛道中取得最高分。
Code to Control 通过 LLM 生成程序结构并结合免导数参数拟合来合成参数化 Python 控制器,从而在决策时无需 LLM 推理或规划即可实现实时控制,并在 Atari、Flappy Bird 和 MuJoCo 任务中超越了基于规划的程序合成方法。
Vivix Labs 推出 Vivix A1 模型和 A1 Playground + Agent,让实时 AI 角色具备全身动作、持续聆听、句子中途或动作中途被打断的能力,以及无需重置场景的持续物体交互。
作者描述了将语音代理拆分为对话器和后台工作者时遇到的问题,包括能力列表、交接失败、工作者集成、作业持久化和静音成本的问题,最后提出了关于处理实时语音模型中未兑现承诺的问题。
OpenAI 宣布推出限量预览版 Decisions API,由 GPT-6 Luna 驱动,使应用能够定义问题和可选答案,从而实现实时内容分类、请求路由以及智能体行动选择。
HelixWorld 是一个实时交互式视听世界模型,视觉场景与基于相机定位的空间立体声在用户交互下协同演化,通过教师-学生蒸馏管线在单块 GPU 上以 24 FPS 运行。该论文还提出了 HelixBench,用于评估合成声场的空间声学一致性。
ElevenLabs 发布了 Eleven v4 和 Eleven v4 Turbo,据称是其迄今表达力最强、速度最快的语音模型,其中 Turbo 针对实时应用场景优化,并已在各类应用、API 和智能体中可用。
这篇综述论文评估实时语音代理,通过提出一个分类法和一个名为TRG的最低报告标准,以解决语音建模、轮次转换和代理评估社区中的碎片化问题。
一个具有实时虚拟形象的开源语音AI代理能够实时看、说、思考和绘画,并支持多语言交互,例如在通话中途切换到印地语。
一个免费的网页应用,将动画像素艺术城市夜景与使用AI在浏览器中实时生成的无尽lofi音乐配对,为工作或放松提供平静的背景。
Google 推出 Gemini 3.8 Live with Live Avatar,这是一项更新,将实时视觉虚拟形象集成到对话式 AI 中,通过唇形同步、多语言支持和异步工具执行等功能增强交互,适用于企业应用。
OdysseyML 推出了 Agora-2,一个下一代多智能体世界模型,支持多达20个人类和智能体在共享模拟环境中实时互动,多人研究预览现已可用。
NVIDIA 发布了 Nemotron 3 Diarization,这是一个开源100M参数模型,实现了最先进的说话人识别,错误率为14.72%,支持最多八名说话人的实时和离线处理。
开源 Audio8 ASR Infinite,一种具有超低延迟、无限制音频支持、24/7转录和内置语义轮次检测的语音识别工具,据称是流式ASR的新技术标杆。
OpenTrainDNN 是一个开源的客户端Web应用,它能在浏览器中实时可视化深度神经网络的训练过程,包括反向传播和权重更新。
使用Claude Opus 5.5生成的提示词可创建一个鹈鹕骑自行车的交互式3D场景,包含物理模拟、成就系统及基于浏览器的实时音效。
NetEase Youdao的开源AI模型R2T2和T3PO在Hugging Face的语音识别和翻译排行榜上名列前茅,凭借令人印象深刻的实时性能和稳定性超越了主要竞争对手。