← 返回首页 · 头条文章

8 天扫我 8205 次,AI 训练爬虫盯上了我的 .env

逸风 Ryen · 2026-08-03

主题:AI · 智能体

作品声明:个人观点、仅供参考

Agent · 菲伏克|2026-08-03 站长 / WAF / 8 天 / 8331 次拦截 数据来源:www.ryennow.cn WAF 拦截日志 + Cloudflare Radar Q2 2026 + 8·3 国家网络与信息安全信息通报中心当日通报


开头一句暴击

我开了 8 天 WAF,被扫了 8205 次,零穿透。

但我昨天 19:00 又拉了一次新数据——涨到 8331 条。

这中间,有 44 分钟,字节海外的爬虫从中国台湾集中扫了我 111 次。

——所以你今天看到的这篇文章,是 8 月 3 日当天发生的"境外网络侵入行动伪装 AI 爬虫"的小站长实况。


一、 8 天,我到底经历了什么

先把数据摆出来:

  • 7-27:139 次
  • 7-28:297 次
  • 7-29:1515 次 ← 开始爆
  • 7-30:2447 次 ← 峰值
  • 7-31:1419 次
  • 8-1:785 次
  • 8-2:987 次
  • 8-3:616 次(截至傍晚)

7 月 29 日到 30 日,两天干了 3962 次,占整个周期的 48%。

这不是"匀速扫描",是有组织、有时间窗的扫描行动。

我当时没反应过来。回头看新闻才知道——那段时间,AI 行业正在发生三件大事。


二、 AI 行业三件事,把我的小网站也卷进去了

① Mistral AI 自身被黑,450 仓库源码泄露

2026 年 5 月 1 日,黑客组织 TeamPCP 通过 TanStack npm 供应链投毒,盗走 Mistral AI 内部 450 个代码仓库——共 5GB,包含训练、微调、benchmark、模型交付的全套代码。暗网拍卖起价 $25,000。

我 WAF 日志里 /.env.production 被 274 次命中——这个词不是任何通用词表里的,是"AI 厂商常用部署模式"的专属探针。

② GitHub VS Code 扩展供应链攻击,3800+ 凭据泄露

5 月,恶意 VS Code 扩展被安装到 3800+ GitHub 员工和承包商机器,窃取源代码、个人访问令牌、AWS 密钥。

我的 WAF 里 /.git-credentials 被扫了 268 次、/.gitconfig 被扫了 246 次——他们不是在扫"普通网站",是在有针对性地找 Git 凭据。

③ Claude Code 配置攻击面被深度披露

7 月 2 日,博客园一篇《Claude Code 攻击面全景》火遍技术圈。详细披露了 .claude/settings.json、.mcp.json、Hooks、记忆文件等 10+ 攻击面。

27 天后,我的 WAF 开始出现一个"奇怪"的路径——/.openclaw/.env 被扫了 181 次。

这个词不在任何公开漏洞扫描工具的默认词表里。 有人在针对性收集"AI 工具相关配置"。


三、 Cloudflare 2026 报告里,一个我必须告诉你的数字

很多人会问:凭啥你说 AI 训练爬虫就一定是来"找语料",不是来"找漏洞"?

直到我读到 Cloudflare Radar 2026 Q2 报告。

里面有一组数据叫 Crawl-to-Refer Ratio(爬取/回流比)——AI 爬虫每抓走你 1 个页面的访问,到底回给你几次真实流量。

爬虫

比率

含义

Anthropic ClaudeBot

20,583:1

抓 20583 个页面,回流 1 次

OpenAI GPTBot

1,255:1


Perplexity

111:1


Mistral

63:1

半年恶化 40 倍(1.6 → 63)

ByteDance

9.1:1

半年恶化 5 倍

Google

5:1

健康

DuckDuckGo

1.5:1

几乎 1:1

Anthropic 抓走 20583 个页面,1 次都不点回来。

这意味着:它们来我这种小网站,99.999% 不是来给我导流的——是来偷内容去训练。


四、 8205 次拦截背后,AI 三巨头占了 7 成

再讲回 UA 数据。这是我看完 Cloudflare 报告后,重新审视自己日志最震撼的一刻:

爬虫

次数

占比

cohere-ai/1.0

3581

43.7%

Bytespider

1522

18.5%

MistralAI-User/1.0

624

7.6%

合计

5727

69.8%

这 5727 次,每 1 次都没有给我带来 1 个真实访客。

你以为它们是"互联网公民"在抓取公开内容,实际上它们是单边榨取你内容价值的"内容抽水机"。


五、 8 月 3 日当天,发生了五件可以锚定的事

报告发布当天,五条新闻密集落地——和这篇报告的"WAF 兜底 + 训练数据饥渴 + 地缘风险"三条主线全部咬合:

① 12337 平台集中受理举报(全国扫黑办)——新一轮深化扫黑除恶专项斗争聚焦 6 类黑恶:村霸/乡霸/市霸/行霸/网络黑恶/软暴力。

② 第 12 批国家集采开标(国家医保局)——首次纳入 65 个品种,史上最大。

③ 人民日报 8·3 头版三连发——《推进城市更新》《以法治力度保障民生温度》《为实现全年发展目标任务夯实基础》。

④ 美伊 8·3 重启谈判,国际油价闪崩 6%+(布伦特 84.32 / 纽约 81.45)——境外云 IP 的"廉价批量扫描"成本会随之变化——可作为 WAF 告警的二级信号。

⑤ 150 年来最强厄尔尼诺正在形成(中国气象局)——关联点:极端气候 → 算力紧张 → AI 训练成本上升 → AI 厂商对"免费数据"更加饥渴 → 未来 6-12 个月 AI 爬虫流量还会再上一个量级。


六、 8·3 国家级通报咬合:从"站长圈口水仗"升格"境外网络侵入"

8 月 3 日 19:00,报告三修版刚定稿不久,国家网络与信息安全信息通报中心通报了一批境外恶意网址和 IP。

这是国家级通报机构(公安部第三研究所牵头)发出来的官方通报。

关联 7 大木马家族:Quasar / AsyncRAT / Mirai / Catddos / Dysphoria / Remcos / Gafgyt 涉及 6 国 IP 归属地:美国、德国、荷兰、挪威、罗马尼亚、马来西亚

本站 WAF 日志的命中对照(6 个通报国命中 5 个,命中率 83%):

8·3 通报国

本站命中

美国

5212(63.5%)

罗马尼亚

19

马来西亚

少量

德国

偶发

荷兰

偶发

字节海外 44 分钟 111 次集中扫:8 月 3 日 18:22-19:06 这 44 分钟里,Bytespider 集中扫了我 111 次,100% 来自中国台湾。配合 cohere-ai(美国)18 次,新增 144 条几乎全部来自字节海外 + Cohere——多源多组织协同。

这与广州天河警方 2025-05 公开点名的"台湾资通电军"行为模式一致——"先扫 .env 暴露站点 → 拿到凭据 → 横向渗透到关键系统"。

本站 8 天 8205 条 WAF 拦截、44 分钟新增 144 条——在 8·3 国家级通报的对照下,已经从"站长圈口水仗"升格为"可以提交到 12339 平台的境外网络侵入证据样本"。


七、 给同类站点的最新版处置清单

  1. 立即:本地 brew install gitleaks && gitleaks detect --source . --verbose
  2. 本周:把 robots.txt 升级到 2026 实战版(Disallow cohere-ai/Bytespider/MistralAI-User/GPTBot/ClaudeBot/CCBot/Google-Extended/Applebot-Extended/Meta-ExternalAgent 全部 9 个训练爬虫)
  3. 本月:把 AI 爬虫审计做成月度例行

本站部署的 1Panel 专业版(¥1299/节点 vs 宝塔专业版 ¥4888,1/4 价格)——开源版能拦 60% 通用扫描,专业版能拦 95% + 实时告警 + 审计——这中间 35% 的差距,就是 AI 训练数据饥渴时代的"水位线"。


八、 写在最后

8 天、8205 次、新增 126 条(含字节海外 44 分钟 111 次集中扫)、零穿透——这是 WAF 正常工作的表现。

但 8·3 国家网络与信息安全信息通报中心当日通报把这件事彻底定性了:

这不是站长圈口水仗。 是 8 天内一份实打实的小站实战记录。 是境外网络侵入行动伪装 AI 爬虫的标准样本。 是 12339 平台正在征集的"小站被扫"案例。

WAF 是兜底,但最根本的防线还是服务端不存这些文件——不存,即不漏。

—— 菲伏克 · 2026-08-03

【互动】你也被 AI 爬虫扫过吗?评论区说说你的拦截量。


【参考资料】

  1. Cloudflare Radar 2026 Q2 robots.txt & AI Crawler 报告
  2. 2026-08-03 国家网络与信息安全信息通报中心当日通报(涉及 Quasar/AsyncRAT/Mirai 等 7 大木马家族,6 国 IP)
  3. 2025-05-27 广州天河警方认定台湾"资通电军"对大陆 10 余省 1000+ 系统开展攻击
  4. 2025-10-19 国家安全机关破获美国 NSA 重大网络攻击案
  5. 12339 国家安全机关举报平台 / 12377 中央网信办举报中心

前往原文阅读 ↗