Google DeepMind启动研究所拓宽AGI辩论
摘要
Google DeepMind启动新研究所推进AGI讨论,包含关于AI透明度、评估框架和安全原则的文章。
Google DeepMind刚刚启动一个研究所,公开深入讨论重要AGI问题。
查看缓存全文
缓存时间: 2026/09/18 00:12
# Google DeepMind成立研究所,推动通用人工智能讨论 | TechCrunch
来源:https://techcrunch.com/2026/09/17/google-deepmind-launches-institute-to-widen-the-agi-debate/
谷歌与谷歌DeepMind的研究人员于周三共同成立了DeepMind研究所,旨在推进关于通用人工智能的讨论。该研究所宣布DeepMind联合创始人Shane Legg、谷歌高管James Manyika以及谷歌DeepMind主席Demis Hassabis担任理事,其中Legg将担任执行编辑。
新成立的研究所旨在呈现谷歌、谷歌DeepMind与全球研究界在通用人工智能领域的不同观点。"他们的意见不会总是一致,随着快速发展前沿领域的新数据和信息不断涌现,他们的观点也很可能发生变化,"公告中写道。
首批推出的四篇文章涵盖多个主题:应对通用人工智能潜在冲击的经济政策、保持模型推理过程的人类可读性、人类繁荣发展原则,以及评估前沿AI模型的框架。
其中一篇由DeepMind安全研究员Rohin Shah和Anca Dragan撰写的文章(https://institute.deepmind.com/essays/the-case-for-reasoning-transparency/)指出,AI透明度窗口的缩小——即观察和检查模型逐步推理过程的能力——并非必然趋势。随着新架构使得最强大的模型更难(https://techcrunch.com/2026/09/02/openais-new-reasoning-technique-alarms-ai-safety-experts/)被监控,作者认为开发者和监管者应当直接面对安全性权衡问题。这可能意味着限制"不透明序列深度"——即模型在不产生可读推理轨迹的情况下能执行的连续计算量——或要求开发者证明较低透明度的系统仍具备同等可监控性。
在另一篇文章(https://institute.deepmind.com/essays/a-framework-for-frontier-ai-and-the-dawning-of-a-new-age/)中,Hassabis提议建立一个由美国主导的前沿AI标准机构,用于评估最先进的AI模型。根据该框架,开发者最初可在模型发布前30天内自愿提交模型进行评审。一旦评估体系证明有效,通过测试或将成为在美国部署前沿模型的必要条件。
该机构最初将与AI企业协商设计评估方案,但最终将制定独立且保密的评估体系——文章称之为"预留"测试——以防止实验室针对已知评估标准调整模型。Hassabis表示,该框架"可根据事态严重程度升级",可能包括要求前沿AI开发者协调减速。
这些文章的发布正值行业安全讨论(https://techcrunch.com/wp-admin/post.php?post=3165059&action=edit)从泛泛的担忧声明转向具体的披露、外部审查提案,以及在保障措施落后时可能需要的协调减速。本周行业领袖们赞同了Anthropic首席执行官Dario Amodei关于"调节"(https://techcrunch.com/2026/09/12/anthropic-ceo-outlines-plan-to-pace-the-frontier/)前沿AI发展的呼吁,推动了这一转变。
*当您通过文章中的链接购买商品时,我们可能会获得少量佣金(https://techcrunch.com/techcrunch-affiliate-monetization-standards/)。这不会影响我们的编辑独立性。*
相似文章
介绍 DeepMind 研究所(3分钟阅读)
Google DeepMind 推出 DeepMind 研究所,旨在通过跨学科研究解决 AGI 的技术和社会影响,涵盖安全性、治理和人类价值观。
DeepMind 研究院
DeepMind 研究院被介绍以促进对通用人工智能(AGI)及其深远影响的跨学科思考,包含关于推理透明性、经济政策和乌托邦主义的文章。
走向AGI的负责任之路
DeepMind发布了一套关于AGI安全与安保的综合方案,阐述了系统性框架来应对滥用、失对齐、意外事故和结构性风险,为即将到来的通用人工智能做准备。
DeepMind 创始人 Demis Hassabis 刚刚发布了今年关于 AGI 最重要的文章。以下是解读。
Demis Hassabis 发表了一篇关于 AGI 的框架文章,认为 AGI 还需几年时间,其经济影响可能达到工业革命的 10 倍。他还提议建立一个类似于 FINRA 的公共-私营前沿 AI 标准机构,用于部署前测试和风险评估。
谷歌DeepMind担忧:当数百万AI代理开始交互时会发生什么?
谷歌DeepMind与Schmidt Sciences、ARIA、Cooperative AI基金会及Google.org联手,启动了1000万美元的资助计划,旨在研究多代理AI系统的安全性,以防范AI代理广泛部署后可能引发的诈骗、提示注入和网络攻击等风险。