食品药品监督管理局相关机构和受监管企业需要准备在线监测的原因
在在线上流通的食品药品监督管理局管辖产品相关帖子已经超出了负责人可以通过搜索框逐个确认的规模。
食品药品安全厅的在线监测体系也随之发生了变化。从多个在线渠道如Naver博客、社交媒体、电商等收集了近30天约31万条帖子，并由AI分析风险程度，筛选出约1000条优先审查对象。
这个案例之所以重要，并不仅仅在于食品药品监督管理局引入了爬虫技术。
规制机构开始大规模收集在线帖子和销售商，并以数据形式管理风险程度和重复曝光情况。
对于公共机构和协会来说，这成为了关于如何有效管理在线体系的标准，而对于食品、保健食品、药品、化妆品和医疗器械企业来说，则提出了更直接的问题。
如果规制机构正在以数据形式查看我们的产品和销售商的帖子，那么我们是否首先确认了自己和分销网络？
直接运营170个爬虫所面临的限制
为了查找在线上的食品和药品的虚假、过度宣传和非法流通信息，食品药品监督管理局在过去3年中运营了自己的基础设施，运营了约170个网站的爬虫。
监控对象已经确定，并且具备了收集数据的技术。问题在于不是制作爬虫，而是持续确保其正常运行。
长时间运营170个爬虫会导致以下工作持续出现。
- 根据网站结构更改进行收集逻辑修改
- 应对IP封锁和访问限制、验证码和登录政策变更
- 确认收集错误和数据遗漏
- 添加新渠道和关键词以及收集周期，服务器运营管理
监控工作的本质是查找可能违规的帖子并进行审查和处理。然而，如果人力被占用于自己运营爬虫，负责人的工作更接近于维护爬虫而非判断违规帖子。
企业也面临相同情况。不仅仅是自己官方渠道，还包括代理商、零售商、转售商、开放市场销售商和影响者的内容，需要确认的范围迅速扩大。
随着管理对象的增多，重要的是不是所有帖子都由人查看，而是确定首先查看哪些帖子的体系。
自动化收集，让负责人专注于判断
在线合规监测是指持续收集与受监管产品相关的在线帖子，并分析可能违规的风险，从而筛选出负责人需要优先确认的对象的体系。
重新设计的体系流程如下。
- 各个渠道的爬虫会自动收集新帖子。
- 分析帖子的标题、正文、产品、广告表达和销售情况。
- AI为每个帖子评分风险程度。
- 只有风险较高的帖子才会被传递给负责人审查。
- 电商帖子会自动按销售商（企业）单位进行汇总。
- 在仪表板上查看重复风险企业和渠道趋势。
AI并不是最终决定法律和行政违规性的工具。AI的作用是在大量帖子中优先筛选出可能违规的对象，最终判断由负责人执行。
收集的数据包括帖子内容以及收集渠道、产品类别、匹配关键词、AI风险度、销售商匹配情况。不仅仅是收集帖子，还可以查看哪些渠道和企业集中存在风险帖子。
每月收集31万条帖子，优先审查约1千条
最近30天的运营情况如下。
| 项目 | 运营情况 |
|---|---|
| 收集量 | 约31万条 |
| 收集量增长 | 扩大收集范围后，比上一周期增加3倍以上 |
| 监控渠道 | 7个渠道 |
| 监控关键词 | 100个 |
| AI高风险分类 | 约1千条 |
| 自动汇总的电商销售商 | 超过2,800个 |
| 收集周期 | 根据渠道每3小时或每日2次 |
最大的变化不在于收集量本身，而在于需要人员确认的对象范围。
每天收集约1万条帖子，但负责人需要优先审查的对象平均约30条，大大缩小了范围。
负责人的工作从修复爬虫和查找帖子转变为审查风险帖子并做出判断。
同时，数据化的信息如高风险帖子集中的渠道、特定表达的增长趋势、重复检测到的销售商、产品类别的风险比例等，成为管理优先级的依据。
[插图1: 在线监测仪表板概述]
[插图2: AI风险分布和渠道高风险帖子比例]
这个案例对机构和企业的意义
| 目标 | 传统方式的限制 | 应用效果 |
|---|---|---|
| 公共机构·地方政府 | 负责人手动搜索渠道和帖子 | 集中管理高风险帖子和重复企业 |
| 协会·审议机构 | 重点在接收举报和事后审议 | 会员公司自主检查和行业风险趋势分析 |
| 制造商·品牌总部 | 以自己官方广告为中心进行审核 | 检查销售点、转售商、影响者内容 |
| 分销商·平台 | 产品和销售商众多，难以全面检查 | 根据优先级检查风险表达和销售商 |
| 进口·分销企业 | 难以追踪海外销售商和非正式流通路径 | 发现非正式流通和无许可销售的可能性 |
公共机构和协会可以持续收集管理对象行业的帖子，集中管理高风险表达、重复曝光企业和产品、关键词激增等。协会可以将其扩展为会员公司自主检查、广告审查支持和预防教育资料。
企业需要确认的对象不仅限于自己制作的官方广告。这种体系是关于在规制机构检查或消费者举报发生之前，而是在问题扩大之前，首先确认自己和销售网络的预先合规体系。
按行业应用如下。
- 食品·保健食品: 治疗疾病暗示、未批准功能表达、普通食品被误导广告检查
- 制药·生物·非药品: 无许可销售、并行进口、异常海外流通、夸大功效帖子发现
- 化妆品: 药品暗示表达、治疗效果暗示用语、销售点、影响者的未批准内容确认
- 医疗器械: 未批准使用目的、功效广告和非正式销售渠道发现
- 品牌总部·分销商: 代理商、转售商的未批准用语管理、重复高风险销售商单位确认
仅通过关键词搜索是不够的原因
在线销售商并不总是使用相同的表达。他们可能使用绕行用语，或者在图片中加入文字。同样的词汇根据产品和语境可能会有不同含义。
因此，关键词是确定收集范围的起点，实际风险分析是综合考虑销售产品、暗示的功效、促进购买并有销售链接、重复出现的企业。
如果出现新的行话或绕行表达，运营过程中会持续完善关键词和分析标准。
常见问题
机构或企业从自主爬取转向专业服务的原因是什么？
最大的原因是维护成本。每当网站结构更改、IP封锁、验证码出现时，就需要修改收集逻辑，而且收集对象增多后，负责人花在维护爬虫上的时间比审查和管理的时间更多。专业服务负责收集和维护，机构和企业则专注于审查和应对。
自动化后，人们不需要审查帖子吗？
不是的。自动化的作用不是取代最终判断，而是减少审查范围并确定优先顺序。在这个案例中，AI分析了约31万条帖子，缩小到约1千条，最终违规与否由负责人判断。
销售商使用行话或变形表达，也能检测到吗？
不仅仅是简单的关键词匹配，还会综合分析产品、句子表达、销售情况和上下文。然而，由于新行话不断出现，因此在运营过程中需要持续改进关键词和分析标准。
其他机构、协会或企业是否也可以使用相同体系？
是的。根据管理对象的产品、渠道和风险标准进行设置，机构可以将其用于行业调查和会员公司的自主检查，企业可以将其用于自己品牌、产品名称和销售商为中心的预先检查体系。管理范围包括官方广告以及销售点、转售商、开放市场、影响者内容。
食品药品监督管理局以数据视角看待，机构和企业也应以数据管理
食品药品监督管理局的案例展示了在线监控标准正在发生变化。
规制机构不再停留在手动搜索部分帖子的阶段。他们持续收集多个渠道的数据，并通过优先审查高风险帖子和重复曝光企业的方式，提升了管理体系。
在线合规监测不仅仅是应对检查的事后工具。对于公共机构和协会来说，它提供了有效的在线市场管理体系，对于企业来说，它提供了发现规制风险并管理销售网络的预先体系。
如果食品药品监督管理局每月收集31万条在线帖子，那么我们的机构和企业现在也需要以数据形式管理在线内容。
检查我们机构和企业的在线管理盲区
告诉我们管理对象的产品和在线渠道，我们将为您审查以下内容。
- 可收集的在线渠道和要监控的品牌、产品、关键词
- 风险分析标准和销售商识别范围
- 机构和企业的仪表板构建
- 需要优先审查的在线管理盲区
检查我们机构和企业的在线管理盲区的诊断请求
