fdsfsdfsdf3334
V2EX  ›  问与答

爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,

  •  
  •   fdsfsdfsdf3334 · Apr 7, 2014 · 3900 views
    This topic created in 4449 days ago, the information mentioned may be changed or developed.
    爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,


    请大家讨论一下 指点一下
    3 replies    1970-01-01 08:00:00 +08:00
    fdsfsdfsdf3334
        1
    fdsfsdfsdf3334  
    OP
       Apr 7, 2014
    写错了 应该是 requests 和 scrapy
    answerw
        2
    answerw  
       Apr 7, 2014   ❤️ 1
    没用过scrapy, 但是requests 不是爬虫框架,是用来做http请求的库,配合pyquery或者beautifulsoup 解析文本对象,才能实现爬虫。以前用pyquery和requests抓过豆瓣的音乐人。
    fdsfsdfsdf3334
        3
    fdsfsdfsdf3334  
    OP
       Apr 12, 2014
    @answerw 哦哦 谢谢你
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   942 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 20:04 · PVG 04:04 · LAX 13:04 · JFK 16:04
    ♥ Do have faith in what you're doing.