【已解答】建议宝塔 nginx防火墙弄一个封锁谷歌搜索引

建议宝塔 nginx防火墙弄一个
功能1一键封锁谷歌搜索引擎

功能2 封锁其他搜索引擎

搜索引擎的功能爬虫太多容易爬死服务器

而且海外搜索引擎国内也无法使用设置rodots.txt效果不大他还是爬一直服务器爬爆炸

大炮运维V587 · 发表于 2021-7-7 09:36:14

开启下禁止非浏览器访问的功能，看下拦截多少假蜘蛛。

Fate2077 · 发表于 2021-7-8 14:27:41

你是不是搞错了文件。

是robots.txt不是rodots.txt

【已解答】建议宝塔 nginx防火墙 弄一个 封锁谷歌搜索引