AI生成C++代码在生产环境中的质量特征分析

Hugging Face Daily Papers 论文

摘要

一项大规模实证研究,分析了生产环境中352万次C++代码变更,比较AI生成代码与人工编写代码的质量,发现AI代码具有更高的耦合度和计算开销,但有针对性的反馈可以缓解这些问题。

AI编码助手的广泛集成无疑提升了工程开发速度。然而, recent studies point to a growing trade-off, revealing persistent challenges with code quality and maintainability. Industry leaders, including frontier AI labs, echo these concerns. As large language models are increasingly relied upon to author production code, understanding their impact on shipped software quality has become a critical priority. However, assessing these effects in industrial workflows remains difficult due to observability barriers. We study the impact of AI-generated code on production quality within a large enterprise operating global products relied upon by billions of users daily. Driven by this scale and user trust, the organization values code quality and has built thorough observability for every line of code deployed into production, enabling us to overcome measurement barriers to assess these effects. 本研究对2025年4月至2026年4月期间的AI生成C++代码进行了大规模实证分析,追踪了该企业棕地代码库中的352万次代码变更。核心目的是在大规模生产环境中,理解AI生成代码与人工编写代码在质量、性能和维护特性上的差异。我们发现,AI生成的C++代码具有独特的质量特征,表现出更高的接口和耦合负担、复制和分配开销,以及过度依赖显式循环而非优化的标准API。这些问题会转化为切实的下游成本,包括增加的审查工作和5%至8%的计算资源消耗增加。然而,我们证明,向模型提供有针对性的、基于分类的反馈可以缓解这些影响,使目标静态分析警告减少11.1%,并提高计算效率。
查看原文
查看缓存全文

缓存时间: 2026/08/10 06:14

论文页面 - 生产环境中AI生成的C++质量特征刻画

来源:https://huggingface.co/papers/2608.06640

摘要

AI编码助手的广泛集成为工程效率带来了不可否认的提升。然而,最近的研究指出了日益明显的权衡,揭示了代码质量和可维护性方面的持续挑战。包括前沿AI实验室在内的行业领导者也表达了这些担忧。随着大型语言模型越来越被依赖用于编写生产代码,理解它们对已发布软件质量的影响已成为一个关键优先事项。然而,由于可观测性障碍,在工业工作流程中评估这些影响仍然困难。我们研究了一家大型企业中AI生成代码对生产质量的影响,该企业运营着全球产品,每天有数十亿用户依赖。出于这种规模和用户信任,该组织重视代码质量,并为部署到生产环境的每一行代码建立了全面的可观测性,使我们能够克服测量障碍来评估这些影响。本研究对2025年4月至2026年4月期间AI生成的C++代码进行了大规模实证分析,跟踪了该企业既有代码库中的352万个代码变更。核心目的是了解AI生成代码与人工编写代码在规模化生产环境中的质量、性能和可维护性特征。我们发现,AI生成的C++代码具有独特的质量特征,表现为更高的接口和耦合负担、复制和分配开销,以及依赖显式循环而非优化的标准API。这些问题转化为切实的下游成本,包括审查工作量增加和计算资源消耗增加5-8%。然而,我们证明,向模型提供有针对性的、基于分类法的反馈可以缓解这些影响,使目标静态分析警告减少11.1%,并提高计算效率。

查看arXiv页面 (https://arxiv.org/abs/2608.06640) 查看PDF (https://arxiv.org/pdf/2608.06640) 添加到收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2608.06640)

在您的Agent中获取这篇论文:

hf papers read 2608\.06640

没有最新CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用该论文的模型 0

没有模型链接到该论文

在模型README.md中引用arxiv.org/abs/2608.06640,即可从本页面链接到该模型。

引用该论文的数据集 0

没有数据集链接到该论文

在数据集README.md中引用arxiv.org/abs/2608.06640,即可从本页面链接到该数据集。

引用该论文的Space 0

没有Space链接到该论文

在Space README.md中引用arxiv.org/abs/2608.06640,即可从本页面链接到该Space。

包含该论文的集合 0

没有集合包含该论文

将此论文添加到集合 (https://huggingface.co/new-collection),即可从本页面链接到它。

相似文章

AI生成代码的质量

Reddit r/AI_Agents

这篇文章讨论了一个担忧:随着AI工具生成越来越多的代码,未来基于这些合成代码训练的模型可能会质量下降、原创性降低,并询问像OpenAI、Anthropic和GitHub这样的主要AI实验室计划如何应对这个问题。

关于AI生成代码质量的争议性观点

Reddit r/AI_Agents

作者针对AI生成代码质量常见的批评意见进行了分析,认为人们对这类工具能产出完美且易于维护的代码的期望往往不切实际。

AI 编码代理生成了更多代码,却没有生成更多软件

Ars Technica

## Ars Technica 报道:研究显示 AI 编码代理提升代码产出,但拖慢整体交付速度 Ars Technica 报道了一项研究结果,该研究显示,AI 编码代理(AI coding agents)虽然能够提升代码产出量,却拖慢了整体交付速度。具体表现为: - 代码审查(pull request review)时间增加 **49%** - 要求修改(changes requested)的比例几乎翻倍 - 目前尚未发现可归因于 AI 的显著就业变化 研究发现,AI 代理虽然让开发者更快地产出代码,但由于生成的代码量大幅增加,审查人员面临的审查负担也随之加重,导致整体交付周期反而被拉长。与此同时,尽管业界对 AI 取代开发者岗位的讨论甚嚣尘上,但截至目前,并没有显著的就业数据变化能够直接归因于 AI 技术的应用。

AI生产力数据与我团队实际所见不符

Reddit r/artificial

作者管理一个小型开发团队,分享了使用AI编码工具的现实混合结果:它们加快了样板代码和入门流程,但在复杂问题上会产生自信的错误答案,并增加了代码审查工作量,产生的净增益微乎其微,远低于常被引用的10倍改进。