我有 7 个网站需要爬，但是每个网站抓的数据很少很少，这个 scrapy 里面是 7 个 spider 处理还是放在 start_urls 里面处理比较好
推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
This topic created in 3064 days ago, the information mentioned may be changed or developed.
3 replies • 2018-06-20 17:46:55 +08:00
 |
LeiggJun 19, 2018
1
网站结构差不多就在一个 spider 文件中完成，解析代码肯定是爬完一个又得改一下的，丢一个 start_urls 列表也没啥问题
|
 |
airhunterJun 20, 2018
2
怎么简单怎么做，目前来看丢 start_urls 比较简单
|
 |
beforeuwaitJun 20, 2018
3
支持 1 楼
|
Select Language