【已解决】如何给Apache屏蔽蜘蛛和采集

这是我在网上找的,以下是代码说明：
通过修改httpd.conf配置文件.找到如下类似位置，根据以下代码新增/修改，然后重启Apache即可。

1. DocumentRoot /www/wwwroot
   
2. <Directory "/www/wwwroot">
   
3. SetEnvIfNoCase User-Agent ".*(SemrushBot|FeedDemon|Indy Library|Alexa Toolbar|AskTbFXTV|AhrefsBot|CrawlDaddy|CoolpadWebkit|Java|Feedly|UniversalFeedParser|ApacheBench|Microsoft URL Control|Swiftbot|ZmEu|oBot|jaunty|Python-urllib|lightDeckReports Bot|YYSpider|DigExt|HttpClient|MJ12bot|heritrix|EasouSpider|Ezooms)" BADBOT
   
4. Order allow,deny
   
5. Allow from all
   
6. Deny from env=BADBOT
   
7. </Directory>

复制代码

上面的代码加到宝塔那个httpd.com文件里面？
加到这个文件什么位置呢?

是不是下面的配置呢
软件商店-已安装-Apache 2.4.53-设置--配置修改


最近因为爬虫吃了太多流量了,每天几百G


想要屏蔽爬虫

您好，这个配置是配置在您的站点配置文件中，根据自己的实际情况修改对应的内容，把没有的配置写进去

堡塔运维小林 发表于 2023-7-16 16:23
您好，这个配置是配置在您的站点配置文件中，根据自己的实际情况修改对应的内容，把没有的配置写进去 ...

我还是放在Apache里面，而且还能有效