如果你想学习 scrapy 爬虫开发,或许它能帮到你
大家好,我是 michael ,现在居住在水电之城宜昌,从事远程开发已经三年多了,主要用 python 进行爬虫开发,数据可视化工具开发。一直以来 python 社区并没有一份比较好的爬虫入门教程,免费的更少,所以我决定来试着解决这个痛点。
这个项目包含
一份任务列表,这份任务列表包含了爬虫开发过程中的一些基本知识点,每一个任务都是一个小的测验,当你循序渐进的完成了这个任务列表中的任务时,你将有能力面对爬虫实际开发过程中一些更复杂的情况。这个任务列表的创意来自 codekata
一份爬虫开发过程中的注意事项和笔记,这些笔记能有效提高你的开发效率,还会介绍一些非常有用的工具
项目已经托管在 github, 关于这个项目更多的信息请戳 这里
1
lakeview 2016 年 12 月 6 日
谢谢,先看看
|
2
fengxueshangu 2016 年 12 月 6 日
支持一下楼主,公司电脑不能 pip ,安装起来简直要了我老命
|
3
pscl 2016 年 12 月 6 日
支持,先看看
|
4
zhangchioulin 2016 年 12 月 6 日
支持支持
|
5
KenGe 2016 年 12 月 6 日
支持 我先看看 最近在学习
|
6
GreatMartial 2016 年 12 月 6 日 via Android
支持
|
7
hebwjb 2016 年 12 月 6 日
支持
|
8
cankoor 2016 年 12 月 6 日
有心,支持!
|
9
jingliang 2016 年 12 月 6 日
赞
|
10
chendajun 2016 年 12 月 6 日
有心,兹磁!
|
11
fhefh 2016 年 12 月 6 日
先 mark
|
12
songjiaxin2008 2016 年 12 月 6 日 via Android
前几天直接学 scrapy 爬了下 javlibrary...这个库很强大,对于错误处理以及存储都很方便,就是感觉文档有的东西不是很新呀,都得自己踩完了才能发现,比如 log 库,以及包引入(contribe)。
|
13
ammzen 2016 年 12 月 6 日
@songjiaxin2008 分词搞错了,当成 javlibrary 这个库很强大,去搜了一下[掩面而逃(*/ω╲*)]
|
14
zhanghaoteng 2016 年 12 月 6 日
支持 lz ,感谢
|
15
flyingghost 2016 年 12 月 6 日
@ammzen javlibrary 这个库很强大毫无破绽啊。😂
|
16
publicAdmin 2016 年 12 月 6 日
已 fork ,感谢,感谢!🙏
|
17
alexapollo 2016 年 12 月 6 日
|
18
blaxing 2016 年 12 月 6 日
楼主有心了,谢谢您的付出。
|
19
zypy333 2016 年 12 月 7 日
@songjiaxin2008 我还以为是 java...学习了
|