OpenAI WebRTC 音频会话,现支持文档上下文
摘要
Simon Willison 更新了他的 OpenAI WebRTC 音频会话工具,以支持新的 GPT-Realtime-2 模型,并增加了文档上下文功能,用于对话式音频讨论。
暂无内容
查看缓存全文
缓存时间: 2026/06/13 15:30
# OpenAI WebRTC 音频会话,现已支持文档上下文
来源:https://simonwillison.net/2026/Jun/12/openai-webrtc/
2026年6月12日 \- 链接博客
**OpenAI WebRTC Audio Session, now with document context (https://tools.simonwillison.net/openai-webrtc)**。我于 2024 年 12 月 (https://simonwillison.net/2024/Dec/17/openai-webrtc/) 构建了这个工具的第一个版本,用于试用当时全新的 OpenAI WebRTC API,以便与其实时音频模型进行交互。
上个月,OpenAI 为该 API 引入了一个全新的模型 (https://openai.com/index/advancing-voice-intelligence-with-new-models-in-the-api/),名为 **GPT‑Realtime‑2** (https://developers.openai.com/api/docs/models/gpt-realtime-2),官方称其为“我们的首个具有 GPT-5 级推理能力的语音模型”——知识截止日期为 2024 年 9 月 30 日。
我一直在等待这个模型出现在 ChatGPT iPhone 应用中,但它迟迟没有上架,于是我重新审视了自己之前的那个试验场。
现在你可以选择更好的模型,还可以粘贴一大段文档上下文,这样你就能在浏览器中围绕任何你认为适合以对话方式探索的信息进行音频交流了。
网页界面截图,标题为“OpenAI WebRTC Audio Session”,带有一个灰色状态点。表单字段:“OpenAI API Token”显示为密文点状,“Voice”下拉菜单设置为“Coral”,“Model”下拉菜单设置为“gpt-realtime-2”。一个可折叠区域,标签为“▼ Document context (optional — paste text to talk about)”,内有粗体提示“Paste a document here before starting the session and the model will be able to discuss it with you”,下方是一个文本框,其中粘贴了一份关于 DuckDB 能否像 Datasette 运行 SQLite 一样安全地运行不受信任 SQL 的 Markdown 文档。下方是蓝色“Start Session”按钮和灰色禁用的“Mute Mic”按钮,再往下是一条绿色成功消息“Session established successfully!”。底部有一个深色面板,标题为“Last transcript”,内容为:“DuckDB can be made about as safe as SQLite for running untrusted SELECT queries, but only if you lock it down properly. Using read only true by itself is not enough, because SQL can still”(文本截断)。
相似文章
Delhi HC在ANI版权诉讼中拒绝OpenAI的临时禁令申请
Delhi High Court拒绝授予新闻机构ANI在针对OpenAI的版权诉讼中的临时禁令,裁定ChatGPT使用ANI的作品训练LLMs属于合理使用例外。法院强调,临时禁令会阻碍AI发展并损害公共利益。
OpenAI 对比 Anthropic
一场讨论比较 OpenAI 和 Anthropic 的产品,专注于支持每家公司 AI 工具的论点,如 Codex、Claude 和 GPT,不考虑伦理因素。
OpenAI据报已解散其准备团队
据报道,OpenAI已解散其负责评估AI模型风险的准备团队,相关职责已转移至现有团队,同时公司正经历持续变化和安全担忧。
Nvidia大幅削减其可能为OpenAI基础设施融资提供的担保金额
Nvidia正在大幅减少其考虑为OpenAI基础设施投资提供的财务担保。
@Miles_Brundage:非OpenAI执迷症候群,非Anthropic执迷症候群,而是一个隐秘的第三种综合征
Miles Brundage在推特中评论了AI机构相关的第三种综合征,超越了OpenAI与Anthropic执迷症候群。