欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  科技

Linux传输超大文件方法介绍

程序员文章站 2022-07-07 09:09:29
这篇文章主要介绍了Linux传输超大文件方法介绍,涉及到nc传输的使用,分享了相关代码示例,小编觉得还是挺不错的,具有一定借鉴价值,需要的朋友可以参考下... 18-01-23...

本文研究的主要内容是linux下如何传输超大文件,具体如下。

linux下的文件传输,大家首先会想到rsync、scp之类的工具,但这类工具有一个特点——慢,因为这类工具都是加密传输,发送端加密,接收端解密,当我们传输一些非敏感文件的时候,完全可以不加密,直接在网络上传输。

直接上实例,传输一个2077m的iso文件。

nc发送接收数据

接收端:

nc -l 45.55.0.86 9999 > jieshou.iso

➤ -l :监听一个端口来接收数据
➤ -u : 不使用 tcp 而是使用 udp 来进行数据连接(应该速度更快,没试)

整条命令的意思:本地开启9999端口来接收数据,把接收到的数据存到“jieshou.iso”文件里面。

发送端:

time nc  45.55.0.86 9999 < centos-6.9-x86_64-bin-dvd2.iso

命令最前面的time是用来检测该命令运行耗时的。

Linux传输超大文件方法介绍

24秒就在公网上传完了一个2077m的文件,平均速度高达87m/s,传输完毕后在两端校验md5,发现文件完全一致。

用nc传输有两个特点:

➤速度快
➤传输简单,不需要登录对方服务器,不需要验证信息。

nc进度显示

若你文件实在太大,想看到传输进度,用pv

yum install epel-release -y
yum install pv -y
cat centos-6.9-x86_64-bin-dvd2.iso |pv -b | nc  45.55.0.86 9999

传输目录

接收端:

nc -l 45.55.0.86 9999 | pv -b > home.tar.gz

发送端:

tar -czf - /home/ | nc  45.55.0.86 9999

中转文件

a、b、c三台主机,a美国,c昌南,c只能访问到b,不能直接访问a,b和ac互通。c要怎么才能拿到a上的文件呢?
c上执行:

nc -l 9999 > google_file.txt

b上执行:

nc -l 9999 | nc (c的外网ip) 9999

a上执行:

nc (b的外网ip) 9999 < google_file.txt

以上就是分享给大家的关于linux传输超大文件方法介绍的全部内容,希望对大家有所帮助。感兴趣的朋友可以继续参阅本站其他相关专题,如有不足之处,欢迎留言指出。感谢朋友们对本站的支持!