fdsfsdfsdf3334
V2EX  ›  问与答

爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,

  •  
  •   fdsfsdfsdf3334 · Apr 7, 2014 · 3988 views
    This topic created in 4498 days ago, the information mentioned may be changed or developed.
    爬虫框架 scrapy request 哪个好 ,在不同的实际应用中 各有什么优势,


    请大家讨论一下 指点一下
    3 replies    1970-01-01 08:00:00 +08:00
    fdsfsdfsdf3334
        1
    fdsfsdfsdf3334  
    OP
       Apr 7, 2014
    写错了 应该是 requests 和 scrapy
    answerw
        2
    answerw  
       Apr 7, 2014   ❤️ 1
    没用过scrapy, 但是requests 不是爬虫框架,是用来做http请求的库,配合pyquery或者beautifulsoup 解析文本对象,才能实现爬虫。以前用pyquery和requests抓过豆瓣的音乐人。
    fdsfsdfsdf3334
        3
    fdsfsdfsdf3334  
    OP
       Apr 12, 2014
    @answerw 哦哦 谢谢你
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2563 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 00:40 · PVG 08:40 · LAX 17:40 · JFK 20:40
    ♥ Do have faith in what you're doing.