英国AI版权报告将于3月18日发布 — 网络爬虫/数据收集公司完全应对指南

英国AI版权报告将于2026年3月18日发布。在11500份回复中,88%支持全面许可证,政府撤回了原案。我们整理了网络爬虫公司的应对策略。

4,067
英国AI版权报告将于3月18日发布 — 网络爬虫/数据收集公司完全应对指南
目录

TL;DR
- 2026年3月18日,英国政府根据法律义务发布了关于AI版权的报告。
- 在11,500份意见中,88%支持“AI学习需要全面许可证(选项1)”。
- 政府原本支持的选择(选项3)仅获得3%的支持,政府撤回了自己的立场。
- 这份报告虽然不会立即导致法律修改,但将直接影响包括韩国在内的全球AI学习数据监管方向。
- 爬虫公司现在必须立即整理爬虫User-Agent识别系统和按目的分类系统。

2026年3月18日,英国政府发布了关于AI和版权的报告以及经济影响评估。这不仅仅是一份政策建议,而是根据2025年《数据(使用和访问)法案》第135/136条的法律义务。如果您是进行价格监测、市场分析、AI学习数据收集等网络爬虫/数据收集公司,您现在应该了解这份报告对您业务的影响。


这份报告是什么,为什么现在如此重要?

英国AI版权报告是对从2024年12月到2025年2月进行的50个问题的正式协商结果。这份报告分析了超过11,500份回应,是决定未来英国版权法修改方向的关键文件。

项目 内容
发布日期 2026年3月18日
法律依据 2025年《数据(使用和访问)法案》第135/136条
主办部门 DSIT + DCMS + IPO(知识产权局)
回应数量 超过11,500份
报告范围 技术标准、数据访问、透明度义务、许可证、执行、AI产出物

这份报告与FTC AI政策声明(3月11日)、EU AI法规高风险AI规定实施(8月)一起构成了2026年上半年的三大AI监管事件。也请查看FTC AI政策声明影响分析


四种政策选项,结果如何?

协商结果明确。在11,500份回应中,88%支持最严格的选项1(需要全面许可证)。

选项0:维持现行法律

  • 支持率:7%
  • 网络爬虫影响:继续维持当前的“灰色地带”。法律合法性的判断仍依赖于先例,法律不确定性将持续存在。

选项1:需要全面许可证

  • 支持率:88%(绝对多数)
  • 支持力量:创作产业、出版社、音乐/电影产业等广泛支持
  • 网络爬虫影响:如果将爬取的数据用于AI学习,则需要进行单独的许可协商。运营成本预计会急剧增加。

选项2:广泛的TDM豁免

  • 支持率:0.5%
  • 网络爬虫影响:几乎没有限制地将爬取的数据用于AI学习。实际上采用的可能性最低。

选项3:可选择的TDM豁免(政府原本支持,撤回)

  • 支持率:3%
  • 情况:政府原本支持的选项,但面临压倒性反对,于2026年1月宣布“重置”,撤回了立场。
  • 网络爬虫影响:robots.txt等技术性选择退出机制的遵守成本是关键争议点。
选项 支持率 爬虫公司影响
选项0(维持现行) 7% 保持不确定性
选项1(全面许可证) 88% 许可证成本激增
选项2(广泛豁免) 0.5% 几乎无限制
选项3(可选择豁免) 3% 政府撤回

3月18日的报告将提供的方向是最大的关注点。


为什么robots.txt无法阻止AI爬取?

robots.txt是一种有根本限制的选择性阻止AI学习目的的爬取的手段。这就是为什么选项3的讨论陷入僵局的核心原因。

限制 说明
仅限站点控制 无法控制个别作品(文章、图片、视频)级别的控制
无法区分目的 无法区分搜索索引和AI学习爬取
无法强制执行法律 依赖自愿遵守。忽视没有法律制裁
搜索流量作为人质效应 阻止AI爬虫可能导致搜索曝光减少的风险

根据Cloudflare的数据,Googlebot在两个月内访问了大约8%的样本URL,而在同一时期,PerplexityBot比例高出167倍,CCBot比例高出714倍。网站运营者害怕失去搜索流量,因此不愿意阻止Googlebot。

2026年1月,英国竞争市场局(CMA)要求Google进行“有意义且有效”的内容使用控制。Cloudflare声称“技术上可以将Googlebot分为搜索用途和AI用途”,并敦促提出更根本性的解决方案。

作为替代方案,讨论的技术机制包括:

机制 现状 限制
robots.txt 最常见 无法控制个别作品
ai.txt 新提议 标准化尚未完成
TDM保留协议 EU“黄金标准” 采用率低
元标签(noai,noimageai) 使用增加 需要爬虫自愿遵守

与欧盟、韩国、美国相比,英国处于何种地位?

英国目前尚未选择四个选项中的任何一个。这是与欧盟、日本最大的区别。

国家/地区 现行方法 TDM豁免情况 关键截止日期
英国 准备报告中 未定(评估4个选项) 3/18报告
欧盟 AI法规+DSM指令 第4条TDM豁免(可选择) 8月全面实施
韩国 AI基本法实施 未确定(讨论中) 1/22已实施
美国 FTC监管+判例法 无(依赖公平使用) 3/11 FTC声明
日本 广泛TDM豁免 信息分析目的豁免 稳定
新加坡 广泛TDM豁免 商业TDM豁免 稳定

欧盟已经在DSM指令第4条中确认了基于选择的TDM豁免。但英国在88%的协商回应中支持比欧盟更严格的规定(全面许可证),这一点值得关注。英国有可能选择比欧盟更严格的规定。

韩国于2026年1月22日实施了AI基本法,成为世界第二个综合AI法律,但TDM豁免范围尚未确定。文化体育观光部正在推动立法,英国报告的结论很可能成为韩国立法的参考资料。请查看2026年AI监管与网络爬虫全球指南以获取详细的国家监管信息。


3/18后预期时间表及现在应采取的行动

3月18日发布的内容是报告和经济影响评估。这不会立即改变法律。

时间点 预期事件
2026.03.18 报告+经济影响评估发布
2026年春季 政策方向提案(白皮书或法案草案)
2026年夏季 创意内容交换试点结果反馈
2026年下半年~2027年 版权法修改法案国会审议(预计)
2027~2028年 修改法律实施(预计)

3月18日的报告中最值得关注的三个信号是:

  1. 是否明确了“首选选项” — 如果明确了,将加速立法进程,如果未明确,将继续进行额外协商,不确定性将持续存在
  2. 透明度义务的具体水平 — 是“公开学习数据摘要”水平还是“单个作品清单”水平
  3. 技术标准工作组的建议 — 是否提出了取代/补充robots.txt的机制

现在应采取的行动对于进行网络数据收集的公司非常明确:

第一阶段 — 即刻(3/18之前)
- 检查当前爬虫的User-Agent识别系统
- 文档化爬取目的分类(分析用途 vs AI学习用途)
- 确认是否涉及英国业务或英国数据收集
- 指定3/18报告的监测负责人

第二阶段 — 报告发布后(3/18~4/30)
- 确定适用于自身服务的场景
- 内部简报和必要时法律咨询审查

第三阶段 — 政策具体化时(2026下半年)
- 设计透明度义务遵从体系
- 如果选择选项1,模拟许可成本
- 如果选择选项3,建立检测/遵从系统


常见问题

Q. 3/18报告发布后法律会立即改变吗?

不会。报告是根据《数据(使用和访问)法案》第135/136条的法律义务发布的文件,是提出立法方向的文件。实际的法律修改需要进一步协商和国会审议,预计需要1~2年的时间。

Q. 韩国公司是否会受到英国报告的影响?

直接或间接会受到影响。如果您从英国收集数据或向英国客户提供服务,那么这份报告对您将有直接影响。此外,英国报告的结论很可能成为韩国正在讨论的TDM豁免立法的参考资料。

Q. 遵守robots.txt就不会有法律问题吗?

目前来看,遵守robots.txt并不能保证爬取的合法性。特别是对于AI学习目的的爬取,需要进行额外的法律评估。英国政府的技术标准工作组已经正式承认了robots.txt的局限性,并正在考虑替代方案。请查看网络爬取合法性指南以获取详细的法律评估标准。

Q. 欧盟AI法规中的TDM规定与英国有何不同?

欧盟已经在DSM指令第4条中确认了基于选择的TDM豁免。但英国目前尚未选择四个选项中的任何一个。特别是在88%的协商回应中,英国支持比欧盟更严格的规定(全面许可证),这一点值得关注。

Q. 进行价格监测或市场分析的爬取也会受到监管吗?

目前的讨论主要集中在用于AI学习目的的数据收集上。价格监测、竞争对手分析等传统商业情报用途可能不是AI学习监管的直接对象。但透明度义务和爬虫User-Agent识别系统可能会影响所有爬取服务,无论目的如何。


英国AI版权报告提出了方向,虽然不是法律,但在88%支持全面许可证的情况下,政府撤回了原本的立场,其影响难以预测。在这种不确定性较大的情况下,现在是整理爬取目的分类系统并建立“合法数据供应商”信任的最佳时机。

如果您对网络数据收集的合法运营方式感兴趣,请申请哈希爬虫30分钟免费咨询。我们有超过8年的从5000多个网站收集合法数据的经验,将与您分享经验。


参考资料

  1. Copyright and AI: Statement of Progress — GOV.UK
  2. AI and Copyright: UK Outlook for 2026 — Hogan Lovells
  3. Government Releases Progress Report — Burges Salmon
  4. Google's AI Advantage — Cloudflare Blog
  5. [AI and Copyright: Post-Data Bill Timeline — Pinsent Masons](https://www.pinsentmasons.com/out-law/analysis/ai-and-copyright-post-data-bill-uk-timeline-

评论

发表评论

您的邮箱不会公开,仅用于回复通知。

继续阅读

Get notified of new posts

We'll email you when 해시스크래퍼 기술 블로그 publishes new content.

Your email will only be used for new post notifications.