有人用过 Java 的爬虫 library 吗？对比 Crawler4j、WebCollector、WebMagic？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 3392 天前的主题，其中的信息可能已经有所发展或是发生改变。

WebMagic的作者是@code4craft
WebCollector的作者是@briefcopy ？

6 条回复 • 2015-08-04 07:48:03 +08:00

qw7692336

2015-08-03 13:02:33 +08:00

RangerWolf

2015-08-03 16:58:01 +08:00

webmagic 还行啊~

你先自己试试看就知道合不合用了~

Ouyangan

2015-08-03 18:08:29 +08:00

qw7692336

2015-08-03 18:59:17 +08:00

@Ouyangan
我刚刚回答完这个问题

qw7692336

2015-08-03 19:02:09 +08:00

@RangerWolf
选择困难！！！

haozhang

2015-08-04 07:48:03 +08:00 via iPhone

crawler4j很不错，一边写一边看他的源码能学到很多东西。