英国AI版权报告将于3月18日发布 — 网络爬虫/数据收集公司完全应对指南

英国AI版权报告将于2026年3月18日发布。在11500份回复中,88%支持全面许可证,政府撤回了原案。我们整理了网络爬虫公司的应对策略。

17
英国AI版权报告将于3月18日发布 — 网络爬虫/数据收集公司完全应对指南

TL;DR
- 2026年3月18日,英国政府根据法律义务发布了关于AI版权的报告。
- 在11,500份意见中,88%支持“AI学习需要全面许可证(选项1)”。
- 政府原本支持的选择(选项3)仅获得3%的支持,政府撤回了自己的立场。
- 这份报告虽然不会立即导致法律修改,但将直接影响包括韩国在内的全球AI学习数据监管方向。
- 爬虫公司现在必须立即整理爬虫User-Agent识别系统和按目的分类系统。

2026年3月18日,英国政府发布了关于AI和版权的报告以及经济影响评估。这不仅仅是一份政策建议,而是根据2025年《数据(使用和访问)法案》第135/136条的法律义务。如果您是进行价格监测、市场分析、AI学习数据收集等网络爬虫/数据收集公司,您现在应该了解这份报告对您业务的影响。


这份报告是什么,为什么现在如此重要?

英国AI版权报告是对从2024年12月到2025年2月进行的50个问题的正式协商结果。这份报告分析了超过11,500份回应,是决定未来英国版权法修改方向的关键文件。

项目 内容
发布日期 2026年3月18日
法律依据 2025年《数据(使用和访问)法案》第135/136条
主办部门 DSIT + DCMS + IPO(知识产权局)
回应数量 超过11,500份
报告范围 技术标准、数据访问、透明度义务、许可证、执行、AI产出物

这份报告与FTC AI政策声明(3月11日)、EU AI法规高风险AI规定实施(8月)一起构成了2026年上半年的三大AI监管事件。也请查看FTC AI政策声明影响分析


四种政策选项,结果如何?

协商结果明确。在11,500份回应中,88%支持最严格的选项1(需要全面许可证)。

选项0:维持现行法律

  • 支持率:7%
  • 网络爬虫影响:继续维持当前的“灰色地带”。法律合法性的判断仍依赖于先例,法律不确定性将持续存在。

选项1:需要全面许可证

  • 支持率:88%(绝对多数)
  • 支持力量:创作产业、出版社、音乐/电影产业等广泛支持
  • 网络爬虫影响:如果将爬取的数据用于AI学习,则需要进行单独的许可协商。运营成本预计会急剧增加。

选项2:广泛的TDM豁免

  • 支持率:0.5%
  • 网络爬虫影响:几乎没有限制地将爬取的数据用于AI学习。实际上采用的可能性最低。

选项3:可选择的TDM豁免(政府原本支持,撤回)

  • 支持率:3%
  • 情况:政府原本支持的选项,但面临压倒性反对,于2026年1月宣布“重置”,撤回了立场。
  • 网络爬虫影响:robots.txt等技术性选择退出机制的遵守成本是关键争议点。
选项 支持率 爬虫公司影响
选项0(维持现行) 7% 保持不确定性
选项1(全面许可证) 88% 许可证成本激增
选项2(广泛豁免) 0.5% 几乎无限制
选项3(可选择豁免) 3% 政府撤回

3月18日的报告将提供的方向是最大的关注点。


为什么robots.txt无法阻止AI爬取?

robots.txt是一种有根本限制的选择性阻止AI学习目的的爬取的手段。这就是为什么选项3的讨论陷入僵局的核心原因。

限制 说明
仅限站点控制 无法控制个别作品(文章、图片、视频)级别的控制
无法区分目的 无法区分搜索索引和AI学习爬取
无法强制执行法律 依赖自愿遵守。忽视没有法律制裁
搜索流量作为人质效应 阻止AI爬虫可能导致搜索曝光减少的风险

根据Cloudflare的数据,Googlebot在两个月内访问了大约8%的样本URL,而在同一时期,PerplexityBot比例高出167倍,CCBot比例高出714倍。网站运营者害怕失去搜索流量,因此不愿意阻止Googlebot。

2026年1月,英国竞争市场局(CMA)要求Google进行“有意义且有效”的内容使用控制。Cloudflare声称“技术上可以将Googlebot分为搜索用途和AI用途”,并敦促提出更根本性的解决方案。

作为替代方案,讨论的技术机制包括:

机制 现状 限制
robots.txt 最常见 无法控制个别作品
ai.txt 新提议 标准化尚未完成
TDM保留协议 EU“黄金标准” 采用率低
元标签(noai,noimageai) 使用增加 需要爬虫自愿遵守

与欧盟、韩国、美国相比,英国处于何种地位?

英国目前尚未选择四个选项中的任何一个。这是与欧盟、日本最大的区别。

国家/地区 现行方法 TDM豁免情况 关键截止日期
英国 准备报告中 未定(评估4个选项) 3/18报告
欧盟 AI法规+DSM指令 第4条TDM豁免(可选择) 8月全面实施
韩国 AI基本法实施 未确定(讨论中) 1/22已实施
美国 FTC监管+判例法 无(依赖公平使用) 3/11 FTC声明
日本 广泛TDM豁免 信息分析目的豁免 稳定
新加坡 广泛TDM豁免 商业TDM豁免 稳定

欧盟已经在DSM指令第4条中确认了基于选择的TDM豁免。但英国在88%的协商回应中支持比欧盟更严格的规定(全面许可证),这一点值得关注。英国有可能选择比欧盟更严格的规定。

韩国于2026年1月22日实施了AI基本法,成为世界第二个综合AI法律,但TDM豁免范围尚未确定。文化体育观光部正在推动立法,英国报告的结论很可能成为韩国立法的参考资料。请查看2026年AI监管与网络爬虫全球指南以获取详细的国家监管信息。


3/18后预期时间表及现在应采取的行动

3月18日发布的内容是报告和经济影响评估。这不会立即改变法律。

时间点 预期事件
2026.03.18 报告+经济影响评估发布
2026年春季 政策方向提案(白皮书或法案草案)
2026年夏季 创意内容交换试点结果反馈
2026年下半年~2027年 版权法修改法案国会审议(预计)
2027~2028年 修改法律实施(预计)

3月18日的报告中最值得关注的三个信号是:

  1. 是否明确了“首选选项” — 如果明确了,将加速立法进程,如果未明确,将继续进行额外协商,不确定性将持续存在
  2. 透明度义务的具体水平 — 是“公开学习数据摘要”水平还是“单个作品清单”水平
  3. 技术标准工作组的建议 — 是否提出了取代/补充robots.txt的机制

现在应采取的行动对于进行网络数据收集的公司非常明确:

第一阶段 — 即刻(3/18之前)
- 检查当前爬虫的User-Agent识别系统
- 文档化爬取目的分类(分析用途 vs AI学习用途)
- 确认是否涉及英国业务或英国数据收集
- 指定3/18报告的监测负责人

第二阶段 — 报告发布后(3/18~4/30)
- 确定适用于自身服务的场景
- 内部简报和必要时法律咨询审查

第三阶段 — 政策具体化时(2026下半年)
- 设计透明度义务遵从体系
- 如果选择选项1,模拟许可成本
- 如果选择选项3,建立检测/遵从系统


常见问题

Q. 3/18报告发布后法律会立即改变吗?

不会。报告是根据《数据(使用和访问)法案》第135/136条的法律义务发布的文件,是提出立法方向的文件。实际的法律修改需要进一步协商和国会审议,预计需要1~2年的时间。

Q. 韩国公司是否会受到英国报告的影响?

直接或间接会受到影响。如果您从英国收集数据或向英国客户提供服务,那么这份报告对您将有直接影响。此外,英国报告的结论很可能成为韩国正在讨论的TDM豁免立法的参考资料。

Q. 遵守robots.txt就不会有法律问题吗?

目前来看,遵守robots.txt并不能保证爬取的合法性。特别是对于AI学习目的的爬取,需要进行额外的法律评估。英国政府的技术标准工作组已经正式承认了robots.txt的局限性,并正在考虑替代方案。请查看网络爬取合法性指南以获取详细的法律评估标准。

Q. 欧盟AI法规中的TDM规定与英国有何不同?

欧盟已经在DSM指令第4条中确认了基于选择的TDM豁免。但英国目前尚未选择四个选项中的任何一个。特别是在88%的协商回应中,英国支持比欧盟更严格的规定(全面许可证),这一点值得关注。

Q. 进行价格监测或市场分析的爬取也会受到监管吗?

目前的讨论主要集中在用于AI学习目的的数据收集上。价格监测、竞争对手分析等传统商业情报用途可能不是AI学习监管的直接对象。但透明度义务和爬虫User-Agent识别系统可能会影响所有爬取服务,无论目的如何。


英国AI版权报告提出了方向,虽然不是法律,但在88%支持全面许可证的情况下,政府撤回了原本的立场,其影响难以预测。在这种不确定性较大的情况下,现在是整理爬取目的分类系统并建立“合法数据供应商”信任的最佳时机。

如果您对网络数据收集的合法运营方式感兴趣,请申请哈希爬虫30分钟免费咨询。我们有超过8年的从5000多个网站收集合法数据的经验,将与您分享经验。


参考资料

  1. Copyright and AI: Statement of Progress — GOV.UK
  2. AI and Copyright: UK Outlook for 2026 — Hogan Lovells
  3. Government Releases Progress Report — Burges Salmon
  4. Google's AI Advantage — Cloudflare Blog
  5. [AI and Copyright: Post-Data Bill Timeline — Pinsent Masons](https://www.pinsentmasons.com/out-law/analysis/ai-and-copyright-post-data-bill-uk-timeline-

Comments

Add Comment

Your email won't be published and will only be used for reply notifications.

继续阅读

Get notified of new posts

We'll email you when 해시스크래퍼 기술 블로그 publishes new content.

Your email will only be used for new post notifications.