https://github.com/zorlan/skycaiji
用 tp5 写的 php 版本采集器,使用上和 cms 系统类似
功能: 全自动定时定量采集
支持正则表达式、xpath、json 匹配数据
支持多级、多页、分页采集
可以将数据发布到 cms 程序、数据库、excel 文件等
配合谷歌浏览器实现页面渲染功能
图片本地化、ip 代理等等
https://github.com/zorlan/skycaiji
用 tp5 写的 php 版本采集器,使用上和 cms 系统类似
功能: 全自动定时定量采集
支持正则表达式、xpath、json 匹配数据
支持多级、多页、分页采集
可以将数据发布到 cms 程序、数据库、excel 文件等
配合谷歌浏览器实现页面渲染功能
图片本地化、ip 代理等等
|
glouhaoFeb 19, 2019 via Android
1
膜拜大佬
|
|
DonnyChaoFeb 19, 2019
2
在 vps 上安装试了一下,挺好用的,感谢作者开源,学习一下,github 已 star。
|
|
zqjiloveFeb 19, 2019
3
早期用过一次,感觉体验很不好,至少和之前用过的一些采集工具比,感觉还是操作体验差一些。功能没问题。还是 DXC 用的爽,可惜现在也收费了
|
|
d5nFeb 19, 2019 via iPhone
6
收藏
|
|
vus520Feb 19, 2019
7
已经 600 个星星了
|
|
marvin520Feb 20, 2019
8
蓝天采集器,刚出来的时候用过,感觉很赞。。。不过好像在 v2 推过好几次了
|
|
tdwj12580Feb 20, 2019
9
可以的,我也收藏一下,以后有用再使用!
|
|
dany813Feb 20, 2019
10
膜拜大佬
|
|
bzjFeb 20, 2019
11
有没有演示站点
|
|
pinergeFeb 20, 2019
12
采集一般都是 cli 吧,fpm 采集不是特别友好,就算把 php.ini 中 max_execute_time 设为无限有时进程也会莫名其妙的挂掉
|
|
runningmanFeb 20, 2019 via iPhone
15
关注一下 看看
|
|
willywu001Feb 28, 2019
16
cookie 怎么设置的?
|
|
willywu001Feb 28, 2019
17
@zorlan cookie 怎么设置呢,文档中没看到
|
|
18
@willywu001 任务》采集器设置》请求头信息 里面
|
|
dwhzyMar 15, 2019
19
mark 一下,好工具~
|