城市经济学能否帮助建模和改善自主AI系统?
摘要
本文探讨了城市经济学中的概念(如交通、分区和污染)如何建模自主AI系统中的外部性。文章引入了行为外部性乘数(BEM),并提出了一个包含架构层、基底层和治理层的分层框架,以衡量和减轻廉价AI行为带来的高昂后果。
我几周前在[Substack](https://nateliuroberts.substack.com/p/ai-systems-are-becoming-digital-cities)上发布了一个早期版本,但此后论点有了相当大的演变。在写下一篇更新之前,想在这里验证一下核心想法。问题是:**城市经济学能否帮助建模自主AI系统中的外部性?** 我并不是说AI系统就是字面意义上的城市。这个想法更具体:当智能体、工具、记忆、API、权限、人类、验证循环、计算、数据和基础设施开始在共享的AI系统内交互时,它们是否开始产生类似城市的动态?例如:
* 交通 → API拥堵/工具路由瓶颈
* 道路 → API、队列、交接、工具路由
* 土地 → 上下文窗口、记忆、权限
* 污染 → 幻觉、污染的记忆、低质量输出
* 分区 → 权限边界、风险等级、自主性限制
* 检查员 → 测试、评估、引用检查、审查者
* 公共记录 → 日志、来源、收据、决策记录
* 红绿灯 → 速率限制、批准关卡、节流
* 紧急服务 → 回滚、隔离、事件响应、升级
* 城市蔓延 → 工具蔓延、智能体蔓延、上下文蔓延
* 信任 → 基础设施
我最感兴趣的部分是外部性。在城市中,一个局部行为可能产生系统级的成本:多一个司机增加拥堵,一个污染者产生清理成本,一个分区决策重塑激励。我认为自主AI系统可能也有类似的下游成本。一个廉价的AI行为可能造成高昂的后果:
* 审查负担
* 返工
* 污染的记忆
* 糟糕的检索
* 不安全的后续行为
* 信任丧失
* 协调开销
* 回滚成本
所以我一直在玩的一个粗略指标是:**行为外部性乘数**
*BEM = 下游成本 / 初始行为成本*
例如:如果一个AI行为的运行成本为0.02美元,却产生了20美元的审查、纠正、记忆清理或协调成本:BEM = 1,000
这个行为在计算上很廉价,但在行为上昂贵。论点是AI使生成变得廉价,但并不自动使后果变得廉价。
我正在探索的新方向是,这可能需要分为三个层次:
1. 架构层
智能体、工具、路由、记忆、权限、验证、回滚。
2. 基底层
计算、数据、上下文、身份、来源、激励、注意力、组织信任。
3. 治理层
分区、检查、可审计性、升级、事件响应、风险控制。
这个区分很重要,因为外部性可能不仅存在于智能体和工作流中。它们还可能积累在这些系统所依赖的更深层的基底层中。
我还在探索几个相关的指标:
**智能体杠杆**
相对于执行、协调、上下文、验证、返工和风险成本创造的经过验证的价值。
**风险调整后的自主性**
自主性不仅基于能力,还基于信任、可逆性和外部性风险。
**上下文分配**
将上下文和记忆视为稀缺的土地:哪些被包含、排除、优先处理、检索或永久写入?
当我有时间时,我计划在自己的自定义AI操作设置中测试其中的一些。想法是先取一个基线,然后引入一些受AI城市启发的控制,测量前后的变化。例如:
* 更好的分区是否减少了错误上下文的工作?
* 更强的收据/来源是否减轻了验证负担?
* 上下文清理是否减少了返工?
* 风险阈值是否在不过度增加摩擦的情况下减少了事件?
* 系统每单位人工审查是否创造了更多经过验证的价值?
这就是我想小心处理的部分。如果这只是一个比喻,那只有些许用处。有趣的版本是这个框架能否产生可衡量的改进。
接下来要问的是,计量经济学是否可以帮助验证这一点,而不是让它停留在比喻层面。例如:
* 面板数据以追踪智能体/工作流随时间的变化
* 围绕模型或策略变化的事件研究
* 架构干预前后的双重差分
* 围绕风险阈值的断点回归
* 针对“信任”或“记忆污染”等嘈杂代理的测量误差模型
* 不同风险区域的异质性处理效应
目标是问:我们能否衡量AI架构变化是否实际减少了下游摩擦、返工、风险和信任丧失?
好奇这在什么地方会失效。城市经济学在这里是一个有用的视角,还是我把类比过度延伸了?是否有更好的现有框架来建模这类自主AI外部性?
如果这很有趣,我正在这里开始构建公开框架:[https://github.com/cipherholdingsllc/ai-cities](https://github.com/cipherholdingsllc/ai-cities)
相似文章
思维经济:通过经济互动涌现的多智能体智能
本文介绍了一种面向多智能体AI系统的经济框架,其中智能体通过经济机制互动以产生涌现的集体智能,灵感来自哈佛和麻省理工学院的研究人员。
我正在尝试使用AI构建新的经济模型。
作者提出,使用AI扫描来自电网、数据中心等来源的信号,提取权力动态变化,并生成关于AI经济的更好问题,而不仅仅是回答现有问题。
AI科学与经济:系统图谱
本文认为,尽管AI在模式识别和假设生成方面表现出色,但科学和经济的进步需要与现实世界的接地互动以及制度执行,强调了人机协作的必要性。
思维经济:基于经济交互的新型多智能体智能涌现
本文提出了一种受哈耶克经济理论启发的“智能体经济”框架,其中智能体通过基于拍卖的竞争和经济选择实现自组织,无需集中控制即可产生涌现的多步推理和集体智能。该框架在包括数学推理、金融研究和科学研究在内的五项智能体任务中,均优于更强的单一架构基线模型。
AI经济学 第二部分(11分钟阅读)
本文分析了AI的经济学,聚焦于GPU资源的争夺战,将人类推理的尖峰负载与智能体连续工作负载进行对比,并认为当前基础设施是为人类使用而优化的,而非要求更高的智能体推理。