@phosphenq: https://x.com/phosphenq/status/2067291637949116431
摘要
Anthropic分析了40万次Claude Code会话,发现软件工程师与非工程师之间的验证成功率差距仅为5%,这表明在AI辅助开发中,领域专业知识比编程能力更重要,挑战了“学习编程”的说法。
查看缓存全文
缓存时间: 2026/06/18 04:07
Anthropic 刚刚研究了40万次Claude代码会话。“学编程“的时代已经终结。
想象一位44岁的移民律师。她在2025年与Claude共度了524小时。她从未写过一行代码。到2026年2月,她靠着自己编写的软件运营着一家独立律师事务所,外加一个用于法律工作流程自动化的SaaS平台,并且在一家AI初创公司担任首席法律工程师(Chief Legal Engineer)的头衔。
一年前,这个故事还是幻想。Anthropic刚刚发布了一篇论文,解释了为什么它不再是幻想了。
40万次会话。23.5万人。七个月的数据。
一名软件工程师通过Claude交付验证通过的成果大约占30%的时间。一名律师做同样的编码任务,交付率约为26%。这个差距在七个月内没有扩大。也没有缩小。
终结一个时代的差距,只有五个百分点。
我将带你了解这9项发现、每项对应的提示词,以及我们那位律师的经历作为证明。
第一部分:终结一个时代的5%差距
Anthropic按职业测量了每次编码会话。软件工程师及其他计算机与数学工作者在约30%的会话中达到了验证通过。其他所有职业的用户达到了约26%。在七个月的数据里,这个差距既没有扩大,也没有缩小。Anthropic指出,数据集中每个主要职业与软件工程师的差距都在七个百分点以内。
我们的律师处于26%那一档。她也是那档分布中现实生活的顶尖代表。可验证、可运行的代码。真正的产品。付费客户。没有一行是软件工程师写的。
“学编程“的口号卖了十五年,建立在一个前提上:除非你学习计算机科学,否则你无法从事这项工作。Anthropic刚刚测量了这个前提的实际代价——几个百分点。
训练营行业一直在悄悄收缩。BloomTech(原Lambda学校)裁掉了大约一半员工。Codeup关闭了。Launch Academy暂停招生。Indeed上的开发职位发布连续两年低于疫情前水平。这个曾在该差距内兜售保护的行业,已经萎缩了一阵子。现在那个差距有了一个数字。
本部分的操作手段是整篇文章中最简单的。在每次Claude Code会话的第一个提示词中放入以下内容:
四行。这个开场白,翻译成移民法语言后,就是我们律师每次会话的开场白。足以在Claude写出第一行import语句之前,就弥合大部分那五个百分点的差距。
第二部分:领域专业知识使验证通过率翻倍
在那条平坦的律师vs工程师数字背后,有一条更陡峭的曲线。
会话中用户看起来像新手时,验证通过率为15%。中等水平时达到28%。专家水平时达到33%。
从新手到中等水平的跃升,比从中等到专家的跃升更大。
对自身领域有基本了解就能获得大部分收益。深度专业化只增添一小部分。你不需要是20年的资深人士。你需要真正理解你要求智能体解决的问题。
我们的律师在打开Claude之前已经在移民法领域待了二十年。她那524小时并不是在学习编程。而是在教会Claude移民法。按照Anthropic使用的定义,每一次会话都是她自己领域的专家会话。
这正是让训练营商业模式崩溃的原因。训练营花了十五年教你语法。Anthropic的数据表明,语法是最便宜的部分。昂贵的部分是你真正知道自己想要什么。
缩小新手差距的操作手段是一个提示词。在开始要求Claude工作之前,对任何任务先使用它:
新手会跳过这个。专家会本能地执行。一个提示词就是整个差距。
第三部分:70/80的劳动分工
Anthropic构建了一个分类器,将每次会话拆分为规划决策(做什么、怎样算完成)和执行决策(改哪些文件、写什么代码、运行什么)。
用户做出70%的规划决策。Claude做出80%的执行决策。
这个分工很明确。跨职业稳定。随着模型变强也没有模糊化。
人们决定构建什么。智能体决定如何构建。
Andrej Karpathy在2025年6月17日走上YC AI Startup School的舞台,将这一新层次称为“Software 3.0“。提示词是新的源代码。英语是新的编程语言。LLM是新的CPU。他几乎在Anthropic测量之前一年就大声预测了这种架构。
我们律师那524小时大部分是规划。她会用移民律师的英语描述一个I-130家庭申请工作流程,然后Claude用Python和TypeScript执行实现。她保留了规划。她委托了执行。70/80就是她的整个架构。
如果你把智能体当作需要照看的新手程序员,你就保留执行决策,智能体以半功率运行,你的会话就会以被放弃的5-7%告终。
强制分工的操作手段是一个三行规格说明,在任何会话开始时直接放入:
这是管理者的做法。Anthropic的数据显示,这样做有30-33%的概率交付成功。
第四部分:专家每次提示拉出5倍工作量
用户每发送一个提示词,就会引发Claude自主采取的一系列行动。
一个新手提示词平均产生5个动作和600字输出。
一个专家提示词平均产生12个动作和3200字输出。
同一个工具。同一个模型。同一分钟。同样次数的按键,却完成五倍的工作。
变量是加载到提示词上的内容:领域上下文、约束条件、先前决策、定义完成的测试。当载荷丰富时,Claude有一个100步的问题可以咀嚼。当载荷空泛时,Claude只是在填空。
提示词是你实际知道多少的代理指标。
我们律师那524小时就是这种载荷的缓慢积累。到了第六个月,她发出的每条提示词背后都有多年移民法背景:USCIS表格编号、优先日期、领事处理细节、经济担保门槛。每个提示词都能产生12动作链,因为每个提示词都是饱满的。
解锁12动作链的操作手段是一个上下文加载的开场白。将其粘贴到任何项目的顶部,然后每次引用它:
这个规格说明能让下一个提示词变成12个动作而不是5个。
第五部分:调试正在消亡。操作与写作正在上升。
人们在七个月内用Claude Code做的事情发生了剧烈变化。
用于修复坏代码的会话比例从33%下降到19%。几乎减半。
取而代之的是,操作软件从14%增长到21%。编写文档和分析数据合计大约翻倍,从约10%到20%。
如果你还在用Claude Code调试,那你正把时间花在刚刚减半的那一块上。
增长来自一切不是写函数的事情。运行管道。监控部署。拉取数据集并在其上写备忘录。起草40页报告。智能体做“修复这个坏函数“的工作越来越少,而做“操作这个完整工作流程“的工作越来越多。
我们的律师几乎没碰过调试。她从一开始就没有需要失去的肌肉记忆。她的会话从第一天起就是“从零构建“,之后是“操作并扩展“。她随着曲线移动,因为她没有其他曲线可跟随。
本部分的操作手段只是一个列表。数据表明Claude Code现在能顺畅处理的五种非编码工作流程:
每种大约需要一个提示词和一个验证轮次。没有一个属于“编码“。但全部能交付。
第六部分:管理者的验证率高于工程师
数据集中有一个职业在验证通过率上超过了软件工程师。
管理层(Management)。
不是很多。但在编码会话中,管理者的验证通过率略高于软件与数学工作者。Anthropic指出了明显的注意事项:管理者可能只是在聊天中确认某事已完成,这提升了“验证“信号。公平。但实际运作的解读更难忽视。成功地运行一个智能体的技能,就是成功地管理一个人的技能。
设定目标。定义完成。接受路径。检查工作。
我们的律师并没有成为软件工程师。她成为了一名首席法律工程师,这是一个管理头衔,适用于管理一个智能体团队而非人员团队的人。这个职位之所以存在,是因为数据证明了这一点。
管理者将Claude Code视为直接下属。工程师将其视为需要监督的新手。前者完成冲刺。
操作手段是一个管理者风格的框架,用于开启任何重要的会话:
这个提示词能将一次会话转化为一次冲刺。
第七部分:4倍的放弃悬崖
在遇到麻烦的会话中,新手有19%的概率会放弃。其他人只有5-7%。
新手并非失败更多。他们只是更容易放弃。
专家会话也会遇到同样的困境。但他们能爬出来。Anthropic能测量到的差异不是困境本身,而是恢复能力。
这就是524小时所能买到的。最初一百小时,我们的律师不断放弃。到了两百小时,她已经能爬出每一个困境。恢复能力正是从中等水平迈向专家水平时建立的同一块肌肉:不是更多技能,而是更多围绕领域背景的坚持。
整个研究中最容易弥合的差距是一个提示词。当会话脱轨时,停止随意提示。打开这个:
这是一个“从平螺旋中拉出“的提示词。用它代替告诉Claude“再试一次“。
第八部分:任务价值在7个月内上升了27%
Anthropoc将每次会话的美元价值近似为与自由职业平台上类似岗位的匹配,并根据公开数据集进行校准。估算比较粗糙,但方向是关键。
平均会话价值从2025年10月到2026年4月上升了27%。
增长并不均匀。构建类任务增长了约43%。操作软件增长了约34%。修复类任务增长了约32%。每种工作类型每会话的价值在七个月内都有所提升。
价值正在离开修复,进入构建。
智能体在代码上游的工作上变得更好。这些工作在自由职业市场上能兑现的小时费率也随之移动。
我们的律师第一个月在修复。第四个月在操作。第七到十二个月在构建。她按照整个市场相同的顺序移动,最终到达了价值上升最猛的位置。首席法律工程师这个头衔,就是+43%在一个个体身上的体现。
操作手段是一个方向性赌注。Anthropic的数据显示价值上升最猛的三类任务:
像投资组合一样对待它。把更多时间花在(1)和(2)上。只在单位价格高时接受(3)。
第九部分:四轮会话
整个模式存在于一次四轮会话中。
一次典型的Claude Code会话是四条用户提示。每条提示平均触发约10个动作,有时超过100个。Claude每轮输出约2400个字。
四个提示。四十个动作。一万字输出。这就是单位。
没有计划地进入,你将把所有四轮花在谈判上,最终什么都没有提交。带着四轮结构进入,你就能交付。我们的律师在第四个月左右,那524小时最终收敛到了接近这个精确的形状。她停止了与Claude的“探索性聊天“,开始运行这四轮,重复了数百次。
以下是数据所暗示的模板:
整个系统只有四轮提示宽。
结论
Andrej Karpathy在2025年2月2日命名了“vibe coding“。到年底,柯林斯词典将其评为年度词汇。2025年3月,Dario Amodei表示AI将在三到六个月内编写90%的代码。这个预测每个季度都在变得更接近现实。训练营在2025年悄悄改名,假装它们现在是“AI学院“。
Anthropic的研究是这一切对技能栈产生影响的收据。
编码智能体使编程背景与编程的相关性降低。它们让领域专业知识成为新的瓶颈。
五点的差距并非程序员的终结。而是证书的终结。高级工程师仍然在边际上胜出。每个对领域有基本了解的人都能加入他们原以为被拒之门外的领域。
训练营卖的,是在一个五点宽的差距之内的保护。
今天被教导“先学编程“的22岁年轻人,正在与一位44岁的移民律师赛跑。那位律师拥有524小时的Claude Code对话、首席法律工程师的头衔,以及二十年的移民法知识,藏在他每条提示词中。
律师领先了。
每个人都想在智能体时代获胜。但没人愿意学代码之外的东西。
把这篇收藏起来,发给那些从GPT-4发布那天起就一直告诉22岁年轻人**“先学编程”**的人。
更多关于AI以及智能体时代真正获胜的方法:@phosphenq
相似文章
Anthropic 研究了40万次Claude Code会话:领域知识比编码技能更重要
Anthropic分析了40万次Claude Code会话,发现领域专业知识比编码技能更能预测成功,专家达到28-33%的验证成功率,而新手为15%。该研究强调,理解问题比编码能力更重要。
Anthropic 刚刚发布了来自40万次Claude Code会话的数据,而标题掩盖了真实故事:你的计算机科学学位正变得可有可无
Anthropic 发布了一篇研究论文,分析了40万次Claude Code会话,发现像律师和会计师这样的非工程师在编程任务上的表现几乎与软件工程师相当,这对传统编程专业知识的价值提出了挑战。
@rohanpaul_ai:Claude Code 创建者 Boris Cherny:Anthropic 报告称每位工程师编写的代码量约增长 250%,且未出现明显的质量下降…
Claude Code 创建者 Boris Cherny 讨论了 Anthropic 每位工程师编写的代码量增长 250% 且未出现质量下降的情况,并建议公司允许实验并为 AI 采用提供心理安全感。
@sodawhite_dev: https://x.com/sodawhite_dev/status/2067413032544940062
文章分析了Anthropic关于Claude Code的40万会话报告,指出AI编程工具正在改变人与AI的分工,领域知识比代码能力更重要,专家用户能让AI执行更复杂的任务,而验证和任务拆解能力成为核心竞争力。
@S0N_IA: Anthropic工程师:"90%的工程师已经在运行自我改进循环 现在所有人都在转向应用…"
一位Anthropic工程师讨论从提示到AI工程的转变,强调智能体和自我改进系统,并现场演示设置Claude Code。