【已回应】每天服务器被谷歌搜索引擎搞的CPU百分之百 有什

每天服务器被谷歌搜索引擎搞的CPU百分之百 有什么方法可..

每天统计显示谷歌来300多IP，也不知道是什么流量，我是商城网站，一点购物都没有

服务器每天CPU百分之百，大佬说是 谷歌蜘蛛导致的，请问哪里可以看网站日志有没有谷歌蜘蛛

还有就是有什么方法可以屏蔽谷歌蜘蛛！

购买宝塔专业版，用网站监控报表插件查看是那个URL有问题。然后用nginx防火墙屏蔽了。你这种大概率是被CC了。谷歌蜘蛛没有那么空。

领券可以0.99元体验一个月专业版，点击领取宝塔 优惠券 0.99元体验一个月专业版

hxuf520 发表于 2019-12-16 16:25
购买宝塔专业版，用网站监控报表插件查看是那个URL有问题。然后用nginx防火墙屏蔽了。你这种大概率是被CC了 ...

我直接买个 网站监控报表 插件是不是就可以了，大神

刚开几分钟 谷歌蜘蛛就几千了，而且一共请求2800次，谷歌蜘蛛有2600多次，请问有什么简单的方法可以屏蔽谷歌蜘蛛的，谢谢！

我刚解决，我和你一样，这问题出现半个月，今天刚解决，wwwlogs日志导出来，然后去拉格好网站分析一下，把谷歌这个垃圾蜘蛛IP抓出来，再到宝塔屏蔽它。

瞬间就舒服了！！

宝塔用户_nkevfd 发表于 2019-12-16 16:48
我刚解决，我和你一样，这问题出现半个月，今天刚解决，wwwlogs日志导出来，然后去拉格好网站分析一下，把 ...

老板 宝塔哪里可以屏蔽 麻烦指点下 谢谢~

203.208.60 全是这个开头的IP  屏蔽了之后 素服了，这个开头的是不是都是谷歌蜘蛛

279015453 发表于 2019-12-16 16:53
老板 宝塔哪里可以屏蔽 麻烦指点下 谢谢~

安全里面！放行IP下拉有个屏蔽IP！

直接屏蔽。瞬间湿了！舒服至极

279015453 发表于 2019-12-16 17:07
203.208.60 全是这个开头的IP  屏蔽了之后 素服了，这个开头的是不是都是谷歌蜘蛛 ...

用nginx防火墙 挡住IP或者UA都可以

1. if ($http_user_agent ~* "qihoobot|Baiduspider|Googlebot|Googlebot-Mobile|Googlebot-Image|Mediapartners-Google|Adsbot-Google|Feedfetcher-Google|Yahoo! Slurp|Yahoo! Slurp China|YoudaoBot|Sosospider|Sogou spider|Sogou web spider|MSNBot|ia_archiver|Tomato Bot")
   
2. {
   
3. return 403;
   
4. 
   
5. }

复制代码

上面代码是屏蔽基本上大多数的蜘蛛的，

1. if ($http_user_agent ~* "Googlebot")
   
2. {
   
3. return 403;
   
4. 
   
5. }

复制代码

这个是单独屏蔽google的蜘蛛的
写在该站点的伪静态中即可。

你这个站应该没必要做SEO吧...

倾心丨WHY 发表于 2019-12-17 10:15
你这个站应该没必要做SEO吧...

咱们是同行啊 加个Q吧：279015453