【待反馈】关于Nginx防火墙ua黑名单无法拦截蜘蛛的问题

已对谷歌蜘蛛设置了黑名单，依然谷歌来访问，并没有拦截我重复操作了好几次删除了在添加还是不行，依然能抓取网站

谢花郎 · 发表于 2022-7-22 09:48:41

您好，网站日志内看下访问信息，看下Google蜘蛛请求是否200，其次则看下错误日志是否有提示lua模块错误。

壹柒网络 · 发表于 2022-7-22 10:30:05

谢花郎发表于 2022-7-22 09:48
您好，网站日志内看下访问信息，看下Google蜘蛛请求是否200，其次则看下错误日志是否有提示lua模块错误。 ...

谷歌请求是200 没问题，还有就是错误日志里面没有正常的没错误

谢花郎 · 发表于 2022-7-22 10:42:46

壹柒网络发表于 2022-7-22 10:30
谷歌请求是200 没问题，还有就是错误日志里面没有正常的没错误

全局的URL白名单加了/嘛？

壹柒网络 · 发表于 2022-7-22 10:49:47

谢花郎发表于 2022-7-22 10:42
全局的URL白名单加了/嘛？

没有加url白名单我添加的是 ua 黑名单

壹柒网络 · 发表于 2022-7-22 10:50:24

谢花郎发表于 2022-7-22 10:42
全局的URL白名单加了/嘛？

没有加url白名单我添加的是 ua 黑名单

谢花郎 · 发表于 2022-7-22 10:57:21

壹柒网络发表于 2022-7-22 10:50
没有加url白名单我添加的是 ua 黑名单

下个Todesk远程工具，然后论坛私信发远程信息，我远程看下。

壹柒网络 · 发表于 2022-7-22 11:15:55

谢花郎发表于 2022-7-22 10:57
下个Todesk远程工具，然后论坛私信发远程信息，我远程看下。

已经私发给你了

谢花郎 · 发表于 2022-7-22 11:58:03

壹柒网络发表于 2022-7-22 11:15
已经私发给你了

重新发一下，没有收到。

壹柒网络 · 发表于 2022-7-22 14:04:06

谢花郎发表于 2022-7-22 11:58
重新发一下，没有收到。

现在可以吗

谢花郎 · 发表于 2022-7-25 09:19:14

壹柒网络发表于 2022-7-22 14:04
现在可以吗

您好，重新再发一下，然后论坛帖子回复我下