【已回应】想问下宝塔专业版前端反代，后端怎么屏蔽访...

后端是用了其他一个域名，前端是另一台机器反代。想问下后端机器怎么屏蔽蜘蛛访问收录的？

往事如风 · 发表于 2020-5-15 19:30:42

是单独一个站点想屏蔽蜘蛛访问收录

大炮运维V587 · 发表于 2020-5-16 10:13:59

if ($http_user_agent ~ "Bytespider|FeedDemon|JikeSpider|Indy Library|Alexa Toolbar|AskTbFXTV|AhrefsBot|CrawlDaddy|CoolpadWebkit|Java|Feedly|UniversalFeedParser|ApacheBench|Microsoft URL Control|Swiftbot|ZmEu|oBot|jaunty|Python-urllib|lightDeckReports Bot|YYSpider|DigExt|YisouSpider|HttpClient|MJ12bot|heritrix|EasouSpider|Ezooms|^$" )
{
return 403;
}

复制代码

在那个站的伪静态中添加。

往事如风 · 发表于 2020-5-16 17:36:04

大炮运维V587 发表于 2020-5-16 10:13
在那个站的伪静态中添加。

大佬这个样子不会影响前端反代域名收录的？

大炮运维V587 · 发表于 2020-5-18 11:30:50

往事如风发表于 2020-5-16 17:36
大佬这个样子不会影响前端反代域名收录的？

仅仅针对蜘蛛，对收录不懂