• 请不要在回答技术问题时复制粘贴 AI 生成的内容
wyan453351466
V2EX  ›  程序员

有什么靠谱的代理池开源项目推荐?免费获取大量可用的 ip 靠谱吗

  •  
  •   wyan453351466 · Sep 25, 2019 · 5503 views
    This topic created in 2596 days ago, the information mentioned may be changed or developed.

    楼主最近需要采集一些数据。然后看了下 GitHub 上的一些 star 数较高的代理池项目,好像能很好地 work 的不多。 有什么好的开源项目推荐的吗?

    19 replies  •  2019-09-26 08:33:46 +08:00
    cwz88
    cwz88
    Sep 25, 2019
    1
    掏点钱不好么?
    wyan453351466
    wyan453351466
    OP
    Sep 25, 2019
    2
    @cwz88 好呀。有免费得更好呀。没有的话我就直接掏钱买了。
    主要是采集的数据量大。如果长期付费是一笔不小的开支,能省则省嘛(手动狗头)
    cwz88
    cwz88
    Sep 25, 2019❤️1
    3
    我研究过这个,免费的都不靠谱
    andylsr
    andylsr
    Sep 25, 2019 via Android
    4
    基本都是那几个网站的代理,结论是并没什么可以用的
    scukmh
    scukmh
    Sep 25, 2019
    5
    haipproxy, 其实 GitHub 上的此类项目都差不多,大家爬取的代理网站无非就那么几个,这样看来还不如选择一个简单易用的。
    wafm
    wafm
    Sep 25, 2019
    6
    即使是付费的也一堆雷,免费的就别想了,有动手能力可以自己扫
    itsjoke
    itsjoke
    Sep 25, 2019
    7
    动态 XXX 了解一下
    kingfalse
    kingfalse
    Sep 25, 2019
    8
    直接花钱买吧,试那些就是浪费时间
    wyan453351466
    wyan453351466
    OP
    Sep 25, 2019
    9
    @kingfalse 嗯,我觉得也是。即使写出来一个代理池爬虫,维护这个代理池爬虫还有服务器成本其实也是一项开支
    nullboy
    nullboy
    Sep 25, 2019
    10
    收费的也是垃圾
    lxghost
    lxghost
    Sep 25, 2019
    11
    http://www.zhimaruanjian.com/ 每天可以领免费的
    hanyu586
    hanyu586
    Sep 25, 2019
    12
    铜球
    4everYang
    4everYang
    Sep 25, 2019
    13
    免费的你短时间内发两次请求状态都可能一个成功一个失败 233
    snxq1995
    snxq1995
    Sep 25, 2019 via Android
    14
    拨号上网了解一下
    HuberyPang
    HuberyPang
    Sep 25, 2019
    15
    https://github.com/pangxiaobin/proxy_ip_pool 我之前写了一个 不过也是爬取那几个免费代理网站 可以自己在找一些添加到项目中
    sadfQED2
    sadfQED2
    Sep 25, 2019
    16
    github 上免费的我基本上都试过,另外我也自己去各种地方收集过免费的,总结下来一句话就是:浪费时间

    然后我又用了给钱的,最后总结下来是:给钱也不咋地(每年 5 万,可能是我钱没给够)
    jetpy
    jetpy
    Sep 25, 2019
    17
    即使是自己做着玩耍的项目也建议付费的,免费的根本就是浪费时间,90%以上都不能用, 公司项目的话直接就不用考虑免费的,安心付费吧。
    killlakilllike
    killlakilllike
    Sep 25, 2019
    18
    https://www.zdaye.com/ 这个,有免费的
    luckbbs
    luckbbs
    Sep 26, 2019
    19
    付费的,也很多爬的免费网站。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5215 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 98ms · UTC 02:21 · PVG 10:21 · LAX 18:21 · JFK 21:21
    ♥ Do have faith in what you're doing.