当前位置:论坛首页 > Linux面板 > 讨论

【已解答】蜘蛛拦截是哪个功能?

发表在 Linux面板2025-7-31 11:32 [复制链接] 5 669



监控报表显示bing蜘蛛被拦截,提示下面内容。 请问这个“蜘蛛拦截”具体是哪个功能?我只看到有“假蜘蛛”拦截功能,以及网站设置里面蜘蛛池可以设置拦截某些爬虫(我没开这个功能)。


Nginx防火墙拦截

蜘蛛拦截>>该网站已设置禁止必应蜘蛛访问






使用道具 举报 只看该作者 回复
发表于 2025-7-31 14:44:57 | 显示全部楼层
nginx防火墙的蜘蛛是默认放行的
取消放行,可以在设置里面 aa.png
使用道具 举报 回复 支持 反对
发表于 2025-8-2 11:36:51 | 显示全部楼层
阿珂 发表于 2025-7-31 14:44
nginx防火墙的蜘蛛是默认放行的
取消放行,可以在设置里面

我设置了放行,可是bing爬虫被这个规则拦截了· 所以很奇怪。请问为啥?
使用道具 举报 回复 支持 反对
发表于 2025-8-4 12:03:20 | 显示全部楼层
Diiamo 发表于 2025-8-2 11:36
我设置了放行,可是bing爬虫被这个规则拦截了· 所以很奇怪。请问为啥?

通过ip反查,检查一下是不是必应的蜘蛛
使用道具 举报 回复 支持 反对
发表于 2025-8-4 19:50:20 | 显示全部楼层
阿珂 发表于 2025-8-4 12:03
通过ip反查,检查一下是不是必应的蜘蛛

防火墙标识为bing蜘蛛,所以应该是把
使用道具 举报 回复 支持 反对
发表于 2025-8-5 11:56:09 | 显示全部楼层
不一定的,截图出来看下
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表