【已完成】linux的防火墙的蜘蛛池删除ip之后第二天又恢复了

为了能快速了解并处理您的问题，请提供以下基础信息：

面板、插件版本：

系统版本：

问题描述：

相关截图（日志、错误）：

linux的防火墙的蜘蛛池删除ip之后第二天又恢复了

您好，如果是Nginx防火墙内的蜘蛛池IP的话，这个定时是每天都会从我们云端同步的。
其次如果您不想被蜘蛛IP爬取，您可以到Nginx防火墙设置----站点配置----蜘蛛池设置内取消爬取即可

谢花郎 发表于 2023-11-3 10:28
您好，如果是Nginx防火墙内的蜘蛛池IP的话，这个定时是每天都会从我们云端同步的。
其次如果您不想被蜘蛛IP ...

可以批量设置禁止某个蜘蛛爬取吗 想把谷歌和bing去掉

宝塔用户_dosdnx 发表于 2023-11-3 10:35
可以批量设置禁止某个蜘蛛爬取吗 想把谷歌和bing去掉

您可以直接再设置内关闭就好了，如果要禁止的话，您可以通过UA黑名单去设置，全局设置内---UA黑名单
谷歌蜘蛛的UA： Googlebot/2.1
Bing蜘蛛的UA：bingbot/2.0

谢花郎 发表于 2023-11-3 10:37
您可以直接再设置内关闭就好了，如果要禁止的话，您可以通过UA黑名单去设置，全局设置内---UA黑名单
谷歌 ...

头条雅虎呢

宝塔用户_dosdnx 发表于 2023-11-3 10:50
头条雅虎呢

您查看下文档：https://cloud.tencent.com/developer/article/1954474
如果不存在的则自行通过搜索引擎找下