觉
AI觉醒星球
Awakening is here
Knowledge File / AI技能杠杆
2026-10-24 1 浏览 免费阅读

AI让初级专利律师立刻表现更好,却可能悄悄阻碍其职业成长

NBER 三个月随机对照实验发现,AI 辅助能显著提升专利律师尤其是初级律师的即时起草表现;但在移除 AI 后的红线修订判断任务中,只有资深律师保留收益,初级律师出现分化。这提示即时产出提升不等于判断力内化,基线专长可能是把 AI 辅助转化为持久能力的前提。

SOURCE / AI技能杠杆 MIN / 9 ACCESS / 免费阅读 POST / 2026-10-24 22:34:05

原贴

查看原文
作者:Jonathan Kemper 来源站点:the-decoder.com 原贴时间:

原文

A three-month field experiment with 133 patent attorneys shows that AI assistance improves immediate performance, especially for junior lawyers. But when the AI is taken away, only senior attorneys retain the benefits. Whether AI assistance builds or erodes professional expertise is a contested question in research. A working paper from the National Bureau of Economic Research (NBER), a nonprofit U.S. economics research organization, tackles it with a three-month randomized controlled trial across eleven U.S. intellectual property law firms. The study separated two things by having attorneys first work with AI assistance and then evaluate results without it. This design let researchers measure both the quality of AI-assisted work and how well the attorneys' own judgment held up afterward. Blinded patent attorneys at an independent firm scored all results across five categories: enforceability, technical accuracy, strategic ambiguity, completeness, and clarity. Two-thirds of participants in the Google-funded study got access to "InFlow," an unreleased AI assistant from Google Labs, while the remaining third worked without any AI. In two patent claim drafting tasks, only the treatment group could use InFlow, and the control group completed the same tasks unaided. In a third task called redlining, all participants had to critically review an existing patent draft without AI. As the authors explain, drafting measures immediate AI-assisted performance, while redlining measures internalized judgment, a task patent attorneys routinely perform without any tools. In the drafting tasks, the treatment group clearly outperformed the control group at both the 10-day and 90-day marks, with effects showing up across all five scoring dimensions. Higher scores came mostly from fewer bad ratings and more mid-range ones, while top scores barely moved. Gains were much larger for juniors with fewer than seven years of experience than for seniors. According to the researchers, this aligns with a growing body of studies showing that AI narrows performance gaps between less and more experienced workers, an effect already observed in writing, customer service, and software development. Redlining produced the opposite result. The treatment group scored better overall, but the advantage came entirely from senior attorneys, and juniors saw no benefit at all, even though they had posted the biggest gains during AI-assisted drafting. Instead, junior results split apart, with far fewer mid-range scores replaced by more bad and more good ones, and no growth at the top. The authors read this as a sign that AI sped up skill-building in some juniors while replacing it in others, though the experiment doesn't explain why the effects diverged. The attorneys who gained the most from AI were the same ones who retained the least lasting skill, which leads the researchers to suggest that baseline expertise may be a prerequisite for turning AI-assisted practice into durable ability. A supplementary text analysis offers one possible explanation. Senior attorneys more often restructured the flawed draft and grounded their changes in legal principles, while juniors frequently spotted serious flaws without fixing them, leaving notes that read like instructions to an AI assistant. Because this behavior appeared in the control group too, the authors don't attribute it to an AI-trained habit and instead see it as a baseline deficit at the junior level that AI use didn't fix. The authors point to several limitations, including the small sample size driven by top attorneys' high billable rates, the fact that participating firms aren't representative of professional services as a whole, the lack of a baseline skills measurement, and the three-month window being short compared to the years it takes to build patent expertise.

中文翻译

一项针对133名专利律师的三个月现场实验显示,AI辅助改善了即时表现,尤其是对初级律师。但当AI被拿走时,只有资深律师保留了这些收益。

AI辅助是在构建还是侵蚀专业专长,在研究界是一个有争议的问题。美国非营利经济研究组织美国国家经济研究局(NBER)的一份工作论文,通过在美国11家知识产权律所开展为期三个月的随机对照试验来研究这一问题。该研究让律师先在有AI辅助的情况下工作,再在没有AI的情况下评估结果,从而把两件事分开。这种设计让研究人员既能衡量AI辅助工作的质量,也能衡量律师自己的判断随后保持得如何。

一家独立律所的盲评专利律师按五个类别对所有结果评分:可执行性、技术准确性、策略模糊性、完整性和清晰度。在这项由谷歌资助的研究中,三分之二的参与者获得了“InFlow”的使用权限,这是Google Labs一款未发布的AI助手,其余三分之一则在没有任何AI的情况下工作。在两个专利权利要求起草任务中,只有处理组可以使用InFlow,对照组在没有辅助的情况下完成相同任务。在第三项名为红线修订的任务中,所有参与者都必须在没有AI的情况下批判性审阅一份现有专利草稿。

正如作者所解释的,起草衡量的是即时的AI辅助表现,而红线修订衡量的是内化判断,这是专利律师经常在没有任何工具的情况下执行的任务。在起草任务中,处理组在10天和90天两个时间点都明显优于对照组,效果体现在所有五个评分维度上。更高的分数主要来自更少的差评和更多的中等评分,而最高分几乎没有变化。经验少于七年的初级律师的收益远大于资深律师。

研究人员表示,这与越来越多显示AI缩小经验较少与经验较多工作者之间表现差距的研究一致,这种效应已经在写作、客户服务和软件开发中观察到。红线修订产生了相反的结果。处理组总体得分更好,但优势完全来自资深律师,而初级律师根本没有看到收益,尽管他们在AI辅助起草期间取得了最大的增益。相反,初级律师的结果出现分化,中等评分大幅减少,被更多差评和更多好评取代,而最高分没有增长。

作者将此解读为一个迹象:AI加速了部分初级律师的技能构建,同时替代了另一些初级律师的技能构建,尽管实验没有解释为什么效果会分化。从AI中获益最多的律师,也是保留持久技能最少的律师,这促使研究人员提出,基线专长可能是把AI辅助实践转化为持久能力的前提。

一项补充文本分析提供了一种可能的解释。资深律师更经常重构有缺陷的草稿,并将其修改建立在法律原则之上,而初级律师经常发现严重缺陷却不修复它们,留下的注释读起来像是对AI助手的指令。由于这种行为也出现在对照组中,作者并不将其归因于AI训练出的习惯,而是将其视为初级律师层面的基线缺陷,而AI使用并没有修复这一缺陷。

作者指出了若干限制,包括因顶级律师高计费费率导致的小样本量、参与律所不能代表整个专业服务行业、缺乏基线技能测量,以及三个月的窗口相对于建立专利专长所需的数年时间而言太短。

核心信息

NBER 三个月随机对照实验发现,AI 辅助能显著提升专利律师尤其是初级律师的即时起草表现;但在移除 AI 后的红线修订判断任务中,只有资深律师保留收益,初级律师出现分化。这提示即时产出提升不等于判断力内化,基线专长可能是把 AI 辅助转化为持久能力的前提。

  • NBER 三个月随机对照实验发现,AI 辅助能显著提升专利律师尤其是初级律师的即时起草表现;但在移除 AI 后的红线修订判断任务中,只有资深律师保留收益,初级律师出现分化。这提示即时产出提升不等于判断力内化,基线专长可能是把 AI 辅助转化为持久能力的前提。
  • 原贴提到:A three-month field experiment with 133 patent attorneys shows that AI a
  • 来源:the-decoder.com

详细解读

这是什么信号

这项 NBER 工作论文的核心不是“AI 有用或没用”,而是把 AI 的即时产出效应和技能内化效应拆开:133 名专利律师、11 家美国知识产权律所、三个月随机对照试验,处理组在两个专利权利要求起草任务中使用 Google Labs 未发布的 InFlow,对照组独立完成;第三项红线修订任务所有人都不用 AI。结果很分层:起草任务中处理组在 10 天和 90 天均更好,且初级律师收益更大;但无 AI 的红线修订中,处理组优势全部来自资深律师,初级律师没有收益,且结果分化。

为什么重要

它提示一个容易被忽略的错配:AI 能快速抬高初级律师的“交付下限”,却不自动抬高其“独立判断上限”。如果组织只用 AI 辅助下的产出衡量培训效果,很可能把“会调用工具”误判为“已形成专业能力”。研究者的解释是,基线专长可能是把 AI 辅助实践转化为持久能力的前提;补充文本分析也显示,资深律师更常重构草稿并依据法律原则修改,而部分初级律师能指出问题却缺少修复动作。

对谁有价值

最直接的是律所管理者和专业服务培训负责人:需要重新设计初级律师的成长路径,而不是简单给工具。专利律师个人也能从中看到风险:把 AI 当“代写助手”可能减少自己练习判断的机会。法律 AI 产品团队同样有价值:仅仅生成更流畅的草稿不够,产品要能迫使使用者解释、比较和修正。对更广泛的知识型组织,这是一条关于“AI 学徒制”的警示:效率工具可能同时替代掉学徒本该完成的低效练习。

可以怎么行动

第一,把培训评估拆成双轨:AI 辅助产出评估 + 无 AI 判断评估。起草任务可以看效率和质量,但红线修订、缺陷修复、法律原则解释应设为无 AI 抽检。第二,对初级律师采用“先独立、再 AI、再脱稿重写”的流程:先自己起草或审阅,再用 AI 对照,最后关闭 AI 重写并说明每处修改的法律依据。第三,让资深律师把“重构草稿”的过程显性化,作为示范样本,而不是只给最终答案。第四,AI 工作流应记录建议采纳和修改理由,避免初级律师只留下“像给 AI 下指令”的批注。第五,管理指标上增加“移除 AI 后的质量保持率”,防止把即时提效当成能力成长。

风险或限制

这项研究不能过度外推。样本量受顶级律师高计费费率影响而偏小,参与律所不代表整个专业服务行业,缺少基线技能测量,三个月也远短于专利专长的形成周期;研究还没有解释初级律师为何分化,且使用的是 Google 资助、Google Labs 未发布的工具。因此,合理结论不是“AI 会毁掉初级律师”,而是“AI 的即时收益需要被刻意转化为可脱离工具的判断力”。对没有类似对照设计的团队,最稳妥的做法是先做小规模无 AI 复核,再决定培训和工作流如何调整。

信息差价值

这条内容的真正价值,不只是“有人发布了一个新功能”,而是它揭示了 the-decoder.com 背后的产品方向、工作流变化或竞争信号。对 OPC 来说,这种信息可以转化成持续追踪的栏目选题。

如果把《AI让初级专利律师立刻表现更好,却可能悄悄阻碍其职业成长》放到你的内容系统里,它最大的价值在于帮助读者更快看懂“为什么值得关注”,而不是只看到一条碎片化动态。

参考来源

AI SUMMARY

这篇文章回答了什么

AI让初级专利律师立刻表现更好,却可能悄悄阻碍其职业成长主要讲什么?

NBER 三个月随机对照实验发现,AI 辅助能显著提升专利律师尤其是初级律师的即时起草表现;但在移除 AI 后的红线修订判断任务中,只有资深律师保留收益,初级律师出现分化。这提示即时产出提升不等于判断力内化,基线专长可能是把 AI 辅助转化为持久能力的前提。

这篇文章最值得关注的要点是什么?

NBER 三个月随机对照实验发现,AI 辅助能显著提升专利律师尤其是初级律师的即时起草表现;但在移除 AI 后的红线修订判断任务中,只有资深律师保留收益,初级律师出现分化。这提示即时产出提升不等于判断力内化,基线专长可能是把 AI 辅助转…;原贴提到:A three-month field experiment with 133 patent attorneys shows that AI a;来源:the-decoder.com

这篇文章和哪些AI专题相关?

它适合放在Agent工作流、AI超级个体、AI内容增长专题里阅读。 关联原因:这篇内容命中「Agent、工作流」等主题信号。;这篇内容命中「技能」等主题信号。;这篇内容命中「转化」等主题信号。

阅读这篇文章建议先理解哪些关键词?

建议先理解工具、Cursor、Agent、智能体、工作流这些关键词,再结合正文判断工具、机会或风险是否值得进入自己的工作流。

上一篇 顶尖工程师如何驾驭 AI 下一篇 Meta API 端点更新:GitHub Actions 新增 Blob 存储端点
北竹游乐场 免费玩小游戏 免费玩