Daddy
V2EX  ›  问与答

wget 怎样最简单地爬图片?

  •  
  •   Daddy · Sep 7, 2015 · 2472 views
    This topic created in 3989 days ago, the information mentioned may be changed or developed.

    看到某个站,有很多漂亮壁纸,想收集起来,但一张张点又麻烦,
    网站是这样格式的 xxx.com/xxx-1.html, 然后 xxx-2.html 格式,每页若干张壁纸;

    想问下,能否用 wget 命令把壁纸都收集下来?

    3 replies    2015-09-09 08:08:05 +08:00
    morefreeze
        1
    morefreeze  
       Sep 7, 2015
    for i in {1..100};do wget -k -p http://xxx.com/xxx-${i}.html; done

    -k 将链接换成绝对地址
    -p 将下载需要的文件使得能离线访问这个页面

    PS: 以上并未实际测试,只是思路
    dontwanttologin
        2
    dontwanttologin  
       Sep 8, 2015
    把地址给我,我看看能不能用其他的方法下载
    uuspider
        3
    uuspider  
       Sep 9, 2015
    shell 脚本, curl + while/until ,不超过十行;如果需要翻页,再加上 sed/awk ,足够了。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2678 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 15:06 · PVG 23:06 · LAX 08:06 · JFK 11:06
    ♥ Do have faith in what you're doing.