请教如何科学地从 VPS 上搬文件下来

lulitao1997 · 2017-11-28T08:11:24Z

使用 scp 经常在下载到 500mb 左右的时候断开连接，然后就 ssh 不上去了，大概持续几个小时，猜测是端口被封了？使用 python -m SimpleHTTPServer 也有这个问题

scp

VPS

Python

ssh

62 replies • 2017-11-29 18:23:34 +08:00

biglih

Nov 28, 2017

1

sftp

DoraJDJ

Nov 28, 2017

2

一直用 sftp

shiny

PRO

Nov 28, 2017

3

文件尺寸达到几个 G 的时候用 http 接口速度会更快点。

benjix

Nov 28, 2017 via iPhone

4

跑个 Nginx 用 HTTP

lulitao1997

OP

Nov 28, 2017

5

@shiny 问题是经常下载到一半就断连了，之后就长时间无法重连

dvbuzhidao1

Nov 28, 2017 via Android

6

那你就分卷压缩再合并

zgx030030

Nov 28, 2017

7

用 sftp、安装 ftp

lulitao1997

OP

Nov 28, 2017

8

有无防止被封端口的方法？使用 ss 有效吗

Wolther47

Nov 28, 2017 via iPhone

9

如果经常要搬来搬去的话，我觉得装个 Resilio Sync 比较省事

hello123vvv

Nov 28, 2017

10

简易 python web 服务,做下载文件用
8012,用 python 登陆的网站目录,提供下载文件服务.使用后停止 python web 服务.

from os import curdir,sep
from BaseHTTPServer import BaseHTTPRequestHandler,HTTPServer
class MyHandler(BaseHTTPRequestHandler):
def do_GET(self):
try:
f=open(curdir+sep+self.path)
self.send_response(200)
self.send_header('Content-type','application/octet-stream')
self.end_headers()
self.wfile.write(f.read())
f.close()
except IOError:
self.send_error(404, 'File Not Found: %s' % self.path)

def main():
try:
server = HTTPServer(('',8012),MyHandler)
print 'welcome to the ,machine...',
print 'Press ^C once or twice to quit'
server.serve_forever()
except KeyboardInterrupt:
print '^C received,shutting down server'
server.socket.close()

main()

fstab

Nov 28, 2017 via Android

1

11

http 然后用多线程下载工具，很带劲。

cxh116

Nov 28, 2017

12

rsync 恢复了再继续同步

blankme

Nov 28, 2017

13

@lulitao1997
一直用 rsync+ss 传文件，不担心断开，速度也快。

tscat

Nov 28, 2017

14

Resilio 同步下来就好

lulitao1997

OP

Nov 28, 2017

15

@blankme rsync 怎么走 ss 呢，能详细说说吗，谢谢。

blankme

Nov 28, 2017

1

16

@lulitao1997
搜下 proxychains

tinkerer

Nov 28, 2017

18

@lulitao1997 cyberduck 使用 sftp, 设置代理

nullen

Nov 28, 2017

19

rsync

jy02201949

Nov 28, 2017

20

还是上 nginx 吧，fdm 多线程下载 http 才是最快最稳的搬运方式，还能断点续传

czkwg8

Nov 28, 2017

21

http 或 ftp

zlfzy

Nov 28, 2017

22

一次性下载？ tar 打包 nginx 下载不就完了？

lulitao1997

OP

Nov 28, 2017

1

23

@blankme 试了下，这个方法可以防止被封端口，感谢

CreSim

Nov 28, 2017 via Android

24

直接 caddy 也可以解决这个问题。。

CEBBCAT

Nov 28, 2017

25

Nginx，支持断点续传

clino

Nov 28, 2017

26

rsync -P 可断点

ZRS

Nov 28, 2017

27

nginx

kmahyyg

Nov 28, 2017 via Android

28

我用的 caddy，他的 filemanager 很方便

zzj0311

Nov 28, 2017 via Android

29

内存够用上 Dropbox 啊～

yearliny

Nov 28, 2017 via Android

30

可以在 VPS 上上传到国内网盘，然后从网盘下载

odirus

Nov 28, 2017

31

MEGA

gamexg

Nov 28, 2017

32

备份用途，用的 rsync+crontab，没关注速度，反正是后台跑。

DylanRing0

Nov 28, 2017

2

33

如果传输文件较小（单文件不超过 8GiB ）：
传输单文件，开个 webserver 用 aria2 之类的多线程下载工具拉下来
然后使用这篇文章说的法子做校验 https://orzfly.com/html/repair-file-chunks-with-aria2.html
传输多文件，开个 webserver 启用 index 用 IDM 抓取网页 + rsync 校验
（写个脚本把文件下载链接和校验哈希都导出到 aria2 其实更快些）

如果传输尺寸较大，或本地网络非常不稳定：
Resilio Sync 或自己生成种子文件用一般的 BT 工具传输
（不用 rsync 是因为这东西传大文件对内存消耗极大，且传输极有可能中断，开了 append 又不会好好校验）

huangunic0rn

Nov 28, 2017 via Android

34

http Server..然后 wget -c 断点续传

29EtwXn6t5wgM3fD

Nov 28, 2017 via iPhone

35

caddy

wengjin456123

Nov 28, 2017

36

我使用 scp 命令下载一些小文件，大的没尝试

artandlol

Nov 28, 2017 via iPhone

37

改下内核参数
Scp 的加个限速的 -l

7DLNU56W

Nov 28, 2017

38

科学的？正常下载就可以呀，用 FTP 或者 HTTP 的方法啦~

dd99iii

Nov 28, 2017

39

bbr + nginx

dzxx36gyy

Nov 29, 2017

40

丢个 filemanager 上去，单文件无依赖，然后就随你怎么搞了

inflationaaron

Nov 29, 2017 via iPhone

41

Node 装个 http-server 然后 aria2 下来。还可以试试用 UTP 协议

Technetiumer

Nov 29, 2017 via Android

42

不要用 py 的 server

http server 一定要用 Nginx

Osk

Nov 29, 2017 via Android

43

py 的 server 好像是单线程的(？)，所以一旦中断就得等 server 超时关掉连接，不然连不上。
直接配下 nginx，客户端随便找个支持多线程下载+续传的就很快了，直接跑 80 端口无所畏惧。敏感文件就 gpg 加密一下。
备选：lighttpd，还能很容易的配个访问密码，防下误入的还是可以的。