【待反馈】这些假的百度蜘蛛老爬取你的网站

这些假的百度蜘蛛老爬取你的网站，也开启了NGINX防火墙和屏蔽IP,禁止海外IP访问网站什么的。这些假的蜘蛛天天爬真是很烦。有什么好办法吗？

您好，您可通过IP黑名单或安全内将IP屏蔽，因为防火墙内置蜘蛛是白名单的，这个因为怕误拦截。
如果是伪装百度UA头的话，可能是识别不了的。