Nginx防火墙关于蜘蛛的问题

前提如下：遭到伪装成百度agent的CC攻击，由于拦截量大拦截日志也无搜索功能查手工查找真实百度蜘蛛是否被拦截工作量大问题：例如百度蜘蛛的agent为"Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"，我将Baiduspider加入User-Agent过滤规则中，在实际中真实的百度蜘蛛会正常抓取网页吗（因为我看到有个蜘蛛池），则没在蜘蛛池内的IP即便伪装成百度蜘蛛agent也会被设置的agent规则所拦截。

宝塔用户_kzlnez · 发表于 2020-8-29 15:00:42

这个问题解决了吗

█ 菠萝云-主机特惠16G内存100元 █	【阿里云】低至5折	APP分发-无行业限制免审核	16核16G高防189元	【多途云】高防CDN
高防服务器，无视一切流量攻击	【恒爱云】香港2核1G 3M 15元/起	香港站群金牌Gold 6138大促销	【阿里云】宝塔一键部署，低至5折	OV/EV SSL证书，可当日签发
█ 易探云·香港/美国vps仅9元 █	CDN无视各类攻击\|无效退款	OV/EV SSL证书，可当日签发	【云防护】专注域名和网站安全防护	AWS CDN 4分，多家公有云代理