• 请不要在回答技术问题时复制粘贴 AI 生成的内容
shawnleo
V2EX  ›  程序员

如何爬取淘宝商品图片

  •  
  •   shawnleo · Jun 19, 2023 · 4864 views
    This topic created in 1233 days ago, the information mentioned may be changed or developed.

    想通过淘宝商品图构建一个数据集,直接用 selenium 爬会被封 ip 吗?大家有啥好办法吗?

    24 replies  •  2023-06-20 17:24:09 +08:00
    xieqiqiang00
    xieqiqiang00
    Jun 19, 2023
    1
    不可能的,别想了
    shawnleo
    shawnleo
    OP
    Jun 19, 2023
    2
    我看有说用淘宝客 api 的?
    asmoker
    asmoker
    Jun 19, 2023
    3
    建议咨询梁博 😄
    lhbc
    lhbc
    Jun 19, 2023 via Android❤️1
    4
    这两个地址有不少高人,经验丰富,可以去找他们问一下

    深圳市坪山区石井街道金田路 200 号
    杭州市余杭区临平镇丘山大街 3 号
    xiqishow
    xiqishow
    Jun 19, 2023
    5
    @lhbc #4 里面的人说话都好听
    lithiumii
    lithiumii
    Jun 19, 2023 via Android
    6
    啥数量级?几百上千 selenium 没啥问题,拿自己真的在用的帐号登录都行
    zictos
    zictos
    Jun 19, 2023
    7
    淘宝联盟 api 应该可以,只要开通了推广的商家应该都可以
    bruce0
    bruce0
    Jun 19, 2023
    8
    就淘宝那反扒, 基本别想了🐶
    caesar
    caesar
    Jun 19, 2023
    9
    现成的电商插件 都有啊 为啥还要自己开发
    vus520
    vus520
    Jun 19, 2023
    10
    如果只是做数据集,不用大面积更新的话,难度不大。解决阿爸的律师团队就行。
    Sh4ww
    Sh4ww
    Jun 19, 2023
    11
    只是采集图片的话,其实淘宝有很多无风控的接口,可以找找看
    opengps
    opengps
    Jun 19, 2023
    12
    电商起家的反扒能力可是第一,你要跟第一较劲,可是个相当难得事情了
    LandCruiser
    LandCruiser
    Jun 19, 2023
    13
    @asmoker 梁博就是爬阿里被告的呀
    shawnleo
    shawnleo
    OP
    Jun 19, 2023
    14
    是否可以通过淘宝客 api 或者淘宝开放平台获取呢?除了淘宝,其他的像小红书或者亚马逊之类的有可行性吗?
    streamrx
    streamrx
    Jun 19, 2023 via iPhone
    15
    别想了
    tw93
    tw93
    Jun 19, 2023
    16
    面向监狱编程?
    akira
    akira
    Jun 19, 2023
    17
    直接买别人采集好的
    MoozLee
    MoozLee
    Jun 20, 2023
    18
    可以的,前提有可用 ip 池。
    按照我们的经验跑列表接口的话,封控严的时候换一个店铺出一次滑块。用详情接口的话,基本可以不用考虑,10 几次出一个滑块吧。
    如果用 rpa 的话,你得有 n 多账号,封控不严,就算出滑块也可以自动划过去。
    最后,希望你们公司有牛逼的法务
    PVXLL
    PVXLL
    Jun 20, 2023 via iPhone
    19
    可能会吃牢饭
    tLbf2p3UC4BM3H1N
    tLbf2p3UC4BM3H1N
    Jun 20, 2023
    20
    吊淘宝正常访问都给你弹验证,你还用脚本去爬他?真送人头啊?
    imnpc
    imnpc
    Jun 20, 2023
    21
    花钱买 API ,有专门的正规的 API ,不要自己尝试采集,正常访问刷新 3 次就有可能让你滑动解锁
    lmw2616
    lmw2616
    Jun 20, 2023
    22
    好单库的开放 api 里面有,几年前用过,不知道现在还能用不,你去看看
    lmw2616
    lmw2616
    Jun 20, 2023
    23
    @lmw2616 淘宝单品详情
    godleon
    godleon
    Jun 20, 2023
    24
    如果你的爬虫还建立在用 webdriver selenium 这种爬虫层面,就先别搞阿里了。
    需要先熟悉别人的反爬规则,然后绕开风控。才能实现你所说的功能
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5158 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 70ms · UTC 08:20 · PVG 16:20 · LAX 00:20 · JFK 03:20
    ♥ Do have faith in what you're doing.