onebutton 发表于 2024-3-20 12:20:33

【待反馈linux面板apache多个网站如何一键禁止垃圾蜘蛛访问

为了能快速了解并处理您的问题，请提供以下基础信息：面板、插件版本：8.0.5
系统版本：cent7
问题描述：1.Linux面板2.Apache环境3.一台服务器上100多个网站4.垃圾蜘蛛：AhrefsBot、MJ12bot、dotbot、SemrushBot怎么设置Apache，让这台服务器上的100多个网站都禁止这些垃圾蜘蛛爬取？PS：可别一个一个的网站设置，这样太麻烦了，感谢管理员给予解答！
相关截图（日志、错误）：

youxinge 发表于 2024-3-20 12:58:33

nginx有防火墙设置垃圾爬虫UA 另外可以开启人机校验：但是要自己收集一些 正常的搜索引擎蜘蛛IP段。宝塔也自带的有

onebutton 发表于 2024-3-20 14:15:29

youxinge 发表于 2024-3-20 12:58
nginx有防火墙设置垃圾爬虫UA 另外可以开启人机校验：但是要自己收集一些 正常的搜索引擎蜘蛛IP段。宝塔也 ...

第一：是Apache。第二：宝塔自带的防火墙，是收费滴

大炮运维V587 发表于 2024-3-20 14:30:36

您好，Apache防火墙中可以将这些蜘蛛UA添加到UA黑名单里。

onebutton 发表于 2024-3-20 14:38:51

大炮运维V587 发表于 2024-3-20 14:30
您好，Apache防火墙中可以将这些蜘蛛UA添加到UA黑名单里。

8.0.5版本，Apache防火墙貌似没有免费版，你的意思是购买收费版Apache防火墙吗

大炮运维V587 发表于 2024-3-20 16:25:58

onebutton 发表于 2024-3-20 14:38
8.0.5版本，Apache防火墙貌似没有免费版，你的意思是购买收费版Apache防火墙吗 ...

是的，Apache防火墙不是免费的

youxinge 发表于 2024-3-21 09:14:43

都做了100多个网站，大佬了，咋还想着用免费的，直接上VIP

onebutton 发表于 2024-3-26 18:30:50

大炮运维V587 发表于 2024-3-20 16:25
是的，Apache防火墙不是免费的

已经购买Linux专业版，请问UA规则怎么添加

堡塔运维南一 发表于 2024-4-18 16:54:42

onebutton 发表于 2024-3-26 18:30
已经购买Linux专业版，请问UA规则怎么添加

参考下面帖子
https://www.bt.cn/bbs/thread-13647-1-1.html
页: [1]
查看完整版本: 【待反馈linux面板apache多个网站如何一键禁止垃圾蜘蛛访问