蓝天采集器，php+mysql开发的数据采集爬虫系统

本帖最后由 zorlan 于 2023-5-8 13:01 编辑

蓝天采集器已入驻宝塔，可以在“软件商店»一键部署”中安装！

蓝天采集器是一款开源免费的爬虫系统，仅需点选编辑规则即可采集数据，可运行在本地、虚拟主机或云服务器中，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预！是网页大数据采集软件中完全跨平台的云端爬虫系统

关于软件
蓝天采集器（SkyCaiji），网页爬虫系统，采用PHP+Mysql开发，可部署在云端服务器和虚拟主机中，使用浏览器即可采集数据。软件免费无限制使用，规则和插件可自定义开发

数据采集
支持多级、多页、分页采集，自定义采集规则（支持正则、XPATH、JSON等）精准匹配任意信息流，几乎能采集所有类型的网页，绝大多数文章类型页面内容可实现智能识别

内容发布
无缝对接各类CMS建站程序，实现免登陆导入数据，支持自定义数据发布插件，也可以直接导入数据库、存储为Excel文件、远程API发布等

云部署及自动化
该软件类似CMS程序，完全跨平台，任何系统中都能安装，在虚拟主机中也能良好运行。实现定时定量全自动采集发布，简单操作即可持续采集！

ffssfs · 发表于 2020-6-1 01:59:54

怎么出现一键部署文件没有哦 QQ截图20200601015909.png

宝塔用户_tjdgze · 发表于 2020-8-7 11:06:02

在安装包中找不到【宝塔自动部署配置文件】

jiabei2020 · 发表于 2020-7-1 18:22:29

在安装包中找不到【宝塔自动部署配置文件】

宝塔用户_qkdrxx · 发表于 7 天前

这个站www.ilovewechat.com就是用蓝天采集的，

lapwudi · 发表于 2024-3-20 11:23:40

题库网（https://www.examk.cn）

宝塔用户_cciyrv · 发表于 2022-1-7 15:19:31

确实不错，新站没内容的时候可以爬一些https://www.xjqyc.cn

宝塔用户_gbkvxg · 发表于 2020-10-2 14:18:35

在安装包中找不到【宝塔自动部署配置文件】

宝塔用户_bndquy · 发表于 2020-9-27 16:29:26

在安装包中找不到【宝塔自动部署配置文件】是下架了么

段图图 · 发表于 2020-8-6 15:28:13

在安装包中找不到【宝塔自动部署配置文件】

宝塔用户_catxww · 发表于 2020-8-6 12:01:03

在安装包中找不到【宝塔自动部署配置文件】

kofi · 发表于 2020-7-18 17:24:31

在安装包中找不到【宝塔自动部署配置文件】

kingggg · 发表于 2020-6-1 12:15:49

ffssfs 发表于 2020-6-1 01:59
怎么出现一键部署文件没有哦

我也是这样

拉稀吧拉稀吧 · 发表于 2020-4-10 15:22:23

宝塔用户_nldlfz 发表于 2020-3-4 21:10
未定义数据库类型
蓝天采集器框架thinkphp5.0.24

我的也是，后来刷新一下就好了

宝塔用户_nldlfz · 发表于 2020-3-4 21:10:52

未定义数据库类型
蓝天采集器框架thinkphp5.0.24

请问这个怎么解决呢

msnfei · 发表于 2020-3-1 19:57:46

一直听说不错安装一个试试

【菠萝云】免费装宝塔,4G内存68	★美国CN2高防服务器★打死退款★	★香港CN2云/站群/高防/特价机★	【滴盾】高防服务器专抗DDOS	【多途云】高防CDN
高防服务器，无视一切流量攻击	SSL证书，防止数据被劫持	OV/EV SSL证书，可当日签发	宝塔一键部署DV,EV,OV,SSL证书	A10招租，联系qq394030111
★易探云.香港/美国/国内/游戏云★	【苍穹云】高性能云服务器 1.2折起	【迅线云盒】内网穿透-固定公网IP	高防服务器40核 64G 20M 199/月	【恒爱云】香港低至8元1核1G2M