【已回应】服务器负载显示是谷歌蜘蛛导致

服务器负载显示是谷歌蜘蛛大量请求导致的，我觉得应该不是谷歌蜘蛛，会不会是假冒？其它网站就没事，就这个网站被大量请求，关闭这个网站服务器就正常占用18%。
由于使用的是cf的加速，所以看不到蜘蛛的ip，无法判断。
QQ截图20191225085010.png

yanghaiwei · 发表于 2019-12-25 09:03:23

本帖最后由 yanghaiwei 于 2019-12-25 09:18 编辑

这个问题我的临时解决方法就是添加谷歌ip段（在网上找的可能不全）白名单，UA白名单去掉谷歌，网站禁止国外访问。

大炮运维V587 · 发表于 2019-12-25 09:24:49

yanghaiwei 发表于 2019-12-25 09:03
这个问题我的临时解决方法就是添加谷歌ip段（在网上找的可能不全）白名单，UA白名单去掉谷歌，网站禁止国外 ...

如果没有必要google爬虫抓取的话，可以通过ua进行判断然后禁止访问，你禁止国外访问的话，你的cfcdn怎么办？

yanghaiwei · 发表于 2019-12-25 09:25:19

我想问一下，ip白名单大于禁止国外访问吗？我添加了谷歌ip白名单，但使用了禁止国外访问，这样子ip白名单是否还有效？

yanghaiwei · 发表于 2019-12-25 10:15:52

大炮运维V587 发表于 2019-12-25 09:24
如果没有必要google爬虫抓取的话，可以通过ua进行判断然后禁止访问，你禁止国外访问的话，你的cfcdn怎么 ...

cdn的ip段已经添加白名单，访问没有影响

yanghaiwei · 发表于 2019-12-25 10:22:34

大炮运维V587 发表于 2019-12-25 09:24
如果没有必要google爬虫抓取的话，可以通过ua进行判断然后禁止访问，你禁止国外访问的话，你的cfcdn怎么 ...

我这边禁止国外访问之后，谷歌ip白名单是否有效？

大炮运维V587 · 发表于 2019-12-25 14:29:23

yanghaiwei 发表于 2019-12-25 09:25
我想问一下，ip白名单大于禁止国外访问吗？我添加了谷歌ip白名单，但使用了禁止国外访问，这样子ip白名单是 ...

是的，白名单权限最大

yanghaiwei · 发表于 2019-12-25 16:11:32

大炮运维V587 发表于 2019-12-25 14:29
是的，白名单权限最大

好的，那就好了