【已解答】蜘蛛池缺少yandex, chatgpt 等,另外能否排除不想要的

蛛池缺少yandex, chatgpt 等,另外能否排除不想要的蜘蛛.

宝塔用户_xqmvxp · 发表于 7 天前

随便翻了翻，太多了，我把FACEBOOK的蜘蛛都误杀了，只是因为他不在蜘蛛池中

宝塔能知道它是FACEBOOK蜘蛛：位置: 北美洲美国俄勒冈州普赖恩维尔经纬度坐标: -125.19 44.05
蜘蛛：Facebook蜘蛛

阿珂 · 发表于 5 天前

排除蜘蛛，可以在nginx防火墙蜘蛛池关闭对应的蜘蛛

yandex这些蜘蛛暂时不会增加

宝塔用户_xqmvxp · 发表于 3 天前

宝塔用户_xqmvxp 发表于 2025-5-5 03:50
随便翻了翻，太多了，我把FACEBOOK的蜘蛛都误杀了，只是因为他不在蜘蛛池中

宝塔能知道它是FACEBOOK蜘蛛 ...

我意思是蜘蛛池已有的蜘蛛可以禁止,这很简单,但主流的 facebook,apple, openai, yandex被防火墙封了,怎么办 ?

宝塔用户_xqmvxp · 发表于 3 天前

阿珂发表于 2025-5-7 10:07
排除蜘蛛，可以在nginx防火墙蜘蛛池关闭对应的蜘蛛
yandex这些蜘蛛暂时不会增加
...

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/* Safari/537.36; compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot

这个就被防火墙封了,还有 APPLE 蜘蛛一来就封,facebook蜘蛛,都被封

阿珂 · 发表于前天 11:23

需要放行的蜘蛛，可以将ua加入ua白名单

█ 菠萝云-主机特惠16G内存100元 █	【阿里云】低至5折	APP分发-无行业限制免审核	16核16G高防189元	【多途云】高防CDN
高防服务器，无视一切流量攻击	A7招租，联系qq394030111	香港站群金牌Gold 6138大促销	【阿里云】宝塔一键部署，低至5折	OV/EV SSL证书，可当日签发
█ 易探云·香港/美国vps仅9元 █	CDN无视各类攻击\|无效退款	OV/EV SSL证书，可当日签发	【云防护】专注域名和网站安全防护	AWS CDN 4分，多家公有云代理