外贸站宝塔面板网站防爬虫IP黑名单自动拦截
为什么外贸站需要自动拦截爬虫黑名单？
外贸网站的产品信息、价格和客户数据是核心资产，但经常被采集工具刷流量、爬数据。
手动封IP效率低，宝塔面板内置的防火墙提供了自动拉黑功能，一旦访问频率超过阈值，IP自动加入黑名单，后续请求直接拒绝，能显著减少服务器负载和数据泄露风险。
前置准备
- 一台已安装宝塔面板的服务器（Linux环境，推荐CentOS 7+ 或 Ubuntu 20+）
- 外贸网站已正常上线，且面板端已绑定域名、开启SSL
- 宝塔面板版本不低于7.9（部分旧版防火墙入口有差异）
- 确保未开启任何冲突的第三方WAF（如Cloudflare的防火墙），避免规则叠加
分步操作：配置IP黑名单自动拦截
第一步：检查并启用Nginx防火墙
登录宝塔面板后台，左侧菜单找到「网站」→ 点击对应外贸站的「设置」。
在弹窗中切换到「防火墙」标签页：
- 如果显示「未安装」，点击「安装Nginx防火墙」并等待完成（约1-3分钟）
- 安装完成后，开关按钮打开，防火墙即生效
第二步：设置自动拉黑的触发规则
在防火墙页面，找到「全局设置」或「规则管理」（版本不同名称略有差异）：
- 点击「频率限制」或「请求频率」标签
- 将「单IP请求频率」设置为每分钟超过60次（外贸站可根据实际访问量微调，建议初始值60）
- 「阻断时间」选择永久（自动拉黑后IP持续加入黑名单，如需解除需手动删除）
- 勾选「自动加入黑名单」开关，保存设置
注意：如果网站有大量正常访客（如SEO扫描工具、合法爬虫），可将阈值调高到120次/分钟，避免误伤。
第三步：验证规则是否生效
保存后，返回防火墙主页，点击「黑名单」查看列表。
此时列表为空，等一段时间（或模拟触发），如果看到IP出现，说明配置成功。
模拟触发方法：在本地使用 ab -n 200 -c 10 http://你的域名/ 命令（需安装Apache Bench），连续发200个请求，然后去黑名单查看是否记录。
高频问题与避坑指南
误拦截了正常用户怎么办？
- 在黑名单中手动删除该IP
- 临时调高频率阈值，并根据网站日志（宝塔「网站」→「访问日志」）分析真实访客的平均频率
- 如果用户使用了同一公网IP（如公司出口），建议将阈值改为临时阻断（如24小时），避免永久封禁
使用了CDN（例如Cloudflare），为什么拦截无效？
CDN会隐藏真实用户IP，宝塔面板接收的是CDN节点IP。
解决方法：在防火墙设置中开启「CDN模式」，或手动修改Nginx配置 set_real_ip_from 和 real_ip_header。
具体操作：
- 在网站设置 → 配置文件 → 添加以下代码到server块
set_real_ip_from 103.21.244.0/22;
real_ip_header CF-Connecting-IP;（IP段根据你的CDN服务商替换）
- 保存后重载Nginx，黑名单即可识别真实IP
如何查看已被拦截的IP记录？
宝塔防火墙页面 → 「运行日志」或「拦截记录」，可以看到每次拦截的IP、时间、请求URL。
如果某个IP被反复拦截但并非恶意（如搜索引擎爬虫），可将该IP加入「白名单」或临时调整阈值。
效果验证与日常维护
配置完成后，建议观察一周：
- 每天查看一次黑名单数量，如果突然暴涨（例如数百个新增IP），说明可能被攻击或阈值过低
- 检查网站响应速度有无明显提升（可使用chrome开发者工具「Network」面板）
- 每周查看一次防火墙拦截日志，记录异常IP特征，以便后续调整规则
如果需要更精细的控制（如屏蔽特定国家、防范SQL注入），宝塔的Nginx防火墙还提供「CC防御」和「URL过滤」功能，可后续继续配置。
如果你正在处理外贸站宝塔面板网站防爬虫IP黑名单自动拦截，建议先按本文步骤完整执行，再根据自己的环境做微调；
遇到异常时优先回看避坑和高频问题部分。
