【已解答】有什么好的防爬虫插件吗

有什么好的防爬虫插件吗

1.robots.txt文件可屏蔽自己需要屏蔽的蜘蛛
2.Nginx或者apache网站配置判断UA进行拦截
3.Nginx付费防火墙或者apache付费防火墙，通过UA黑名单进行拦截。