虚拟主机屏蔽 API 调用 UA指南_不误封百度蜘蛛的写法
屏蔽 API 调用 UA 是应对内容采集、恶意扫描的常用手段。商务中国虚拟主机上配置 UA 黑名单后，访问日志里对应 UA 的请求返回 403，带宽和 CPU 占用下降。注意不要误封百度、Google、Bing 等正常搜索引擎，否则收录会掉。
IIS 也可以用请求筛选（requestFiltering）的 filteringRules，但 URL Rewrite 更灵活，支持正则和多条件。规则加在 system.webServer/rewrite/rules 节点，stopProcessing="true" 防止被后续规则覆盖。web.config 修改前备份，语法错误整站 500.19。
配置参考（web.config URL Rewrite 屏蔽 UA）：
```
CDN 后 UA 正常但 IP 异常是常见坑。UA 匹配一定要加 [NC] 或 ignoreCase=true，否则 BadBot 和 badbot 会被当成两个 UA。正则里的点号要转义成 .，否则 . 匹配任意字符导致误杀。写规则前用在线正则测试工具验证匹配范围。
UA 屏蔽的进阶做法是结合行为分析。单个 IP 1 分钟内请求超过 60 次且 UA 固定，大概率是采集器，自动加入临时黑名单 24 小时。虚拟主机不支持自动脚本，可以每天用 awk 统计访问日志，把高频异常 UA 的 IP 手动加入黑名单，持续 1 周后采集器会换目标，流量明显下降。
更新时间：2026-08-26 22:31:52