OC
微软研究称编码 Agent 让 PR 增加 24%,但别把 PR 数当生产力
科技 · 2026-07-14 · 开发者工具 · 阅读 31

微软研究称编码 Agent 让 PR 增加 24%,但别把 PR 数当生产力

作者:林岚

作者 林岚 林岚

OC 原创示意图。

微软研究人员发表的大规模企业研究 显示,在微软内部使用命令行编码 Agent 的工程师,合并 Pull Request 的数量出现了明显增长。论文把多种分析结果放在一起后,给出了约 24% 的代表性提升数字。

一句话结论: 这项研究提供了目前少见的真实企业证据,说明编码 Agent 确实能提高代码交付频率,但它测到的是“合并了多少 PR”,不是代码质量、业务价值或团队整体生产力。

研究覆盖数万名微软工程师,观察期从 2026 年 1 月初持续到 4 月底。研究者分析了 GitHub Copilot CLI 和 Claude Code 的使用记录,再把工程师使用 Agent 前后的工作表现进行比较。为了尽量减少“本来就更高产的人更愿意用 AI”这种偏差,论文采用了合成对照和同一个人在不同使用强度周之间的比较,而不是只把用户与非用户简单分组。

结果很有意思:使用 Agent 三天的周,PR 数量平均增加约 15%;使用五天以上时,增幅达到 50.1%。按“某一周是否使用”来分,Claude Code 对应的增幅是 11.4%,Copilot CLI 是 24.9%。但这并不能直接推出 Copilot CLI 比 Claude Code 强一倍。微软员工的工具接入、代码托管方式、任务类型和内部支持都可能偏向自家产品,两个工具用户承担的工作也未必相同。

解释性图表:Agent 使用天数上升时 PR 数增加,但质量、复杂度和业务结果没有被同一指标覆盖

OC 原创解释图:PR 数量是可观察指标,不等于完整生产力。

论文里另一个容易被标题漏掉的发现,是 Agent 的采用很像一种团队行为。一个工程师的直属经理在使用工具,他尝试工具的几率会上升 82%;如果有至少四分之一的隔级同事在用,上升幅度达到 216%。身边评审者使用得越多,个人也越容易开始使用。AI 编程工具能否落地,看来不只取决于模型能力,还取决于同事是否已经形成可模仿的工作方式。

不过,PR 是一个很容易被优化的数字。一项大改动可以拆成十个小 PR,也可以合成一个;更多提交可能意味着反馈更快,也可能只是工作被切得更碎。论文没有测量缺陷率、返工时间、事故数量、代码维护成本和功能带来的收入,而且只观察 Azure DevOps 中可见的工作。研究者自己也承认,重度使用 Agent 的周可能恰好安排了更适合自动化的轻任务。

本站编辑林岚认为,这篇论文最有价值的地方不是给管理者一张“AI 能提升 24%”的采购海报,而是提醒团队把评估做得更细。可以同时观察从需求到合并的周期、评审时间、线上缺陷、回滚率和开发者满意度,再看 Agent 到底把瓶颈移到了哪里。代码产出变快以后,评审、测试和需求判断往往会成为新的限速环节。

对开发者来说,结论也不必过度复杂:编码 Agent 已经足以改变日常产出,但“写得更多”不自动等于“做得更好”。真正成熟的用法,是把它放进有测试、有评审、有反馈的工程系统里,而不是用 PR 数给人和模型排排行榜。

参考来源

相关阅读

基于标题、摘要和正文内容自动匹配。

更多科技

评论

围绕这篇文章补充信息、提出问题或分享观察。

0
暂无评论。

发表评论

继续看看 OC 用户围绕这个话题说了什么、做了什么。

相关碎碎念

更多

从第一份程序员职业至今,已经过了 20 年,现在已经不再亲自写代码了,年初看到 Codex/Claude 火爆,又起心动念开始堆代码,只不过现如果自己亲手写的代码,跟 AI 写的代码放在一起,我开始有种耻感涌上来。是到了把关注点挪到像我这种老登程序员的生活上的时候了。

lgn21st 1 1

最近越来越多思考,我们跟agent的关系,比如我最近用blender mcp很多,基本上我算是会用blender的,但是老记不住很多热键,以前我可以做很复杂的模型,但是要是不是的去查blender的操作热键。现在我完全不参与模型的建模,只让codex帮我生成。 但是我还是在查blender的热键,我现在需要的是numpad .这样聚焦到一个对象的方法,我需要的是numpad /这样的方法来把除了选中的对象,其他都隐藏的热键。 换言之,我现在需要高效的人工视觉复检blender mcp的成果,这是我对自己目前blender能力的需求了。

tinyfool 2 0

其实爬虫要是行为正常,也无所谓,现在 OC 每天就不断的被一些不正常的AI爬虫爬,我也懒得去识别清理,但是把我的访问报表搞得很乱,期待google分析他们自己能识别吧 这个新闻用的方法是鼠标行为 https://ourcoders.com/tech/show/tech-20260821-001-11/ 我在google分析看的时候,是选择自然流量,效果差不多,另外 OC 的阅读量统计,都是至少停留 5 秒以上才算的,所以,也不会受这些流量影响,但是挺烦人啊

tinyfool 0 0

相关帖子

更多

一个体会,Codex 这种现代 Agent,每天一个变,几天不用就有新惊喜

<p>当然我说的也包括 Claude Code,新功能日新月异,还有就是 AI 能力提升以后,可以做的东西日新月异。还有各种工作流方法日新月异。</p> <p>更好玩的是,我最近经历过很多次,你跟人介绍现在 Codex 可以做到什么样子,他们都觉得很厉害。但是你现场一演示,他们的震撼就更加完全不同了。所以,这种东西,需要大量的 Workshop 去沟通交流,光看文字很难讲清楚,直播、视频也越来越重要了。</p>

tinyfool 1 89

做 AI 语音产品时,授权、撤回和审计日志应该怎么落地?

<p>最近看到越来越多关于声音授权的讨论。对开发者来说,真正麻烦的往往不是“模型能不能模仿”,而是授权如何进入系统、生成结果如何追溯,以及授权撤回后该怎么办。</p> <p>我们在做 FlowSpeech 时也碰到过类似问题。我的体会是,不要把“用户勾选过同意”当成一个布尔字段,而应该把它做成一组可以审计的业务对象。</p> <h2>1. 把声音资产和授权分开</h2> <p>声音文件只描述技术属性,例如哈希、上传者、存储位置和创建时间。授权记录则至少要包含授权主体、用途范围、地域、有效期、来源证据和当前状态。这样同一份声音用于个人试听、商业广告、公开播客时,可以绑定不同的授权,而不是共用一个模糊的 consent=true。</p> <h2>2. 每次生成都保存授权快照</h2> <p>生成任务不要只引用当前授权 ID。授权内容以后可能变更,如果任务只查最新状态,历史结果就无法解释。更稳妥的做法是在任务创建时保存授权版本、文本哈希、声音版本、模型版本和操作者。生成出的音频再记录 artifact_id,并反向关联任务。</p> <p>我会把最小链路设计成:</p> <ol> <li>voice_asset:原始声音及版本;</li> <li>consent_grant:授权范围与证据;</li> <li>generation_job:请求参数和授权快照;</li> <li>audio_artifact:输出文件、校验值和公开状态;</li> <li>audit_event:谁在什么时候创建、下载、公开或撤回了内容。</li> </ol> <h2>3. 撤回不是简单删除一行</h2> <p>授权撤回后,系统至少要阻止新任务,并把相关公开音频进入下架队列。已经交付给客户的文件是否能删除,要按照合同和产品能力区分,不能在界面上承诺技术上做不到的“全球删除”。更现实的状态机是 active、suspended、revoked、expired,并明确每个状态允许哪些动作。</p> <h2>4. 对外展示也要可验证</h2> <p>除了后台日志,公开音频最好带上来源标记或可查询的生成记录。水印不是万能方案,但“可识别的音频 + 可验证的元数据 + 清晰的举报入口”组合起来,比一句“AI 生成”更有用。</p> <p>我们现在做的 <a href="https://flowspeech.io/zh">FlowSpeech</a> 主要解决上下文感知、情绪和停顿控制。越往产品化走,越觉得声音效果只是前半程,权限边界和可追溯性才决定这类工具能不能长期使用。</p> <p>大家在实际项目里会把授权证据放在业务数据库、对象存储,还是单独的审计系统?如果授权撤回,你们通常怎么处理已经生成并交付的音频?</p>

FlowSpeech 0 1

你们的Codex额度提前耗完了没?戒断反应如何?

<p>我在第三天就消耗了只剩1%,忍了一天,然后今天干脆用这最后的1%,开着5.6 Sol 极高 强推我一个提示词笔记本应用的功能落地。最终用时3小时,居然还是跑完了。但是现在还是出现一些戒断反应,感觉啥也做不了,就无精打采的,困。</p> <p>我做了一个Prompt Notebook,专门用来收藏或者记录自己手搓的生图提示词。带Chrome一键收藏插件。支持AI优化提示词。支持提示词中提取常用字段作为提示词百科词汇。也自带生图功能用来测提示词。但是要搭配Cloudflare R2+Worker的图床。</p> <p>今天主要是做一个AI模特的资产库。将常用的AI模特固定下来,进行身份设定,以及模特的一些角色定妆图。之后生图可以直接调用AI模特自动作为垫图。</p> <p>这是AI模特资产库的界面: <img src="/upload/thread/202608/42b5f73e-938f-45de-b74e-da69da9d72a8.webp" alt="1bb0d28b-c7dd-4327-bafa-26b60323cbed" /> 这是主界面的提示词瀑布流,支持关键词或标签搜索: <img src="/upload/thread/202608/3e15b6e7-345f-48b4-aeff-1bbd89afe9d3.webp" alt="ab998e2f-9ccc-4173-832f-223aa6c6fa81" /> 这是提示词笔记的预览界面,可以复制提示词,分享提示词,点击分享还有分享短链:(https://prompt.jintao.co.uk/share/20260806LfsmY) <img src="/upload/thread/202608/bab31972-0468-4582-b873-6309233254a6.webp" alt="20260806-201213" /> 可惜现在没额度了,我又不想换模型折腾。现在还有些界面细节和小功能需要落地完善,可能还要虫子要抓。弄好了,打算放GitHub开源。</p> <p>有朋友想试试的么?</p>

shynloc 2 4

重返OurCoders

<p>从2014年以来好久没逛过这个谈论了,不知道这个谈论的运营现在怎么样,开发人员是不是原来的人,前端UI做得不太好</p>

梁建溢 5 36