当前位置:论坛首页 > Linux面板 > 建议

【已解决】建议nginx防火墙加个一健谷歌蜘蛛禁爬功能

发表在 Linux面板2021-9-14 20:40 [复制链接] 4 2039

谷歌蜘蛛现在居本没什么用,特别是用户都是国内的站,每天数万的密集爬站,站都快卡死,又没用什么
而且nginx防火墙里的已有现成的谷歌蜘蛛池,要是加个禁爬功能就太好了
默认开着,想禁的就勾选,强列建议!
如果要一个个IP在黑名单那里加,累死不说,还容易出错!
使用道具 举报 只看该作者 回复
发表于 2021-9-14 20:50:33 | 显示全部楼层
你好,将google蜘蛛的UA加入UA黑名单即可
Googlebot
Googlebot/2.1
使用道具 举报 回复 支持 反对
发表于 2021-9-14 21:02:24 | 显示全部楼层
好的,非常感谢
刚看了,发现UA黑名单是全局设置,不能针对指定站独立设置
使用道具 举报 回复 支持 反对
发表于 2021-9-14 21:07:27 | 显示全部楼层
veryok 发表于 2021-9-14 21:02
好的,非常感谢
刚看了,发现UA黑名单是全局设置,不能针对指定站独立设置 ...

是的,目前仅支持全局
使用道具 举报 回复 支持 反对
发表于 2021-9-14 21:08:57 | 显示全部楼层
好的,再次感谢,已加好了!
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

企业版年付运维跟进群

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急问题处理

论坛响应时间:10分钟

问题处理方式:1对1处理(优先)

工作时间:白班:9:00 - 18:00

工作时间:晚班:18:00 - 24:00

立即付费处理

工作时间:09:00至24:00

快速回复 返回顶部 返回列表