V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
fdsfsdfsdf3334
V2EX  ›  问与答

爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,

  •  
  •   fdsfsdfsdf3334 · Apr 7, 2014 · 3826 views
    This topic created in 4412 days ago, the information mentioned may be changed or developed.
    爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,


    请大家讨论一下 指点一下
    3 replies    1970-01-01 08:00:00 +08:00
    fdsfsdfsdf3334
        1
    fdsfsdfsdf3334  
    OP
       Apr 7, 2014
    写错了 应该是 requests 和 scrapy
    answerw
        2
    answerw  
       Apr 7, 2014   ❤️ 1
    没用过scrapy, 但是requests 不是爬虫框架,是用来做http请求的库,配合pyquery或者beautifulsoup 解析文本对象,才能实现爬虫。以前用pyquery和requests抓过豆瓣的音乐人。
    fdsfsdfsdf3334
        3
    fdsfsdfsdf3334  
    OP
       Apr 12, 2014
    @answerw 哦哦 谢谢你
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3045 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 15:07 · PVG 23:07 · LAX 08:07 · JFK 11:07
    ♥ Do have faith in what you're doing.