在日常的工作需要中我们是经常需要从本地或者是远程的服务器中去拷贝/移动一些大量的文件,在Linux中遇到文件比较多也比较散的情况速度很慢,那么有没有比较快的方法实现呢?经过总结,我们有以下的方法来去操作,下面将为大家来进行一个介绍。
经验告诉我们,无论本地还是远程,都是需要移动或拷贝的文件较多且都不太大时,如果是使用cp命令和mv命令则效率是较低,我们是可以先使用tar工具对将要拷贝/移动的内容进行打包/压缩,之后再进行拷贝/移动,最后再解包/解压缩。
除此之外的话,也是很关键的一个技巧,也就是不必在tar打包/压缩完毕之后再进行拷贝,解包/解压缩,可以通过管道一边打包/压缩另一边执行拷贝解包/解压缩。
举个例子,比如用tar命令可以和nc命令结合可以快速在两台机器之间传输文件和目录:
B机器:
nc-l5555|tar-C/tmp/test/-xf-
A机器:
tarcf-/tmp/test/|ncB'IP5555
看到上述步骤的意思是将A机器/tmp/test/下的内容拷贝到B机器对应的目录中,其中的内容tarcf-/tmp/test/|ncB'IP5555将内容边打包边通过管道和nc命令传输到由对应IP地址和5555端口传到B机器,nc-l5555|tar-C/tmp/test/-xf-用来监听本机的555端口,并将接收到的内容解包至指定的目录(-C参数是指定目标目录)
除此之外,tar还可与scp、ssh命令结合:
假如是在A机打包后,复制到B机器并解包
tar-cf-/tmp/test|sshB'IP"cd/tmp;tar-xf-"
在A机打包,并将打包好的文件复制到B机
tar-cf-/tmp/test|sshB'IP"cd/tmp;cat->test.tar"
tar-cf-/tmp/test|scp-B'USER@B'IP:/tmp
将A机的打包文件,复制到B机并解包
zcattest.tar|sshB'IP"cd/tmp;tar-xf-"
其实也可以直接在本地这么使用:
cd/tmp/test1
tar-cf-.|(cd/tmp/test2;tar-xvpf-)
有人用经验告诉我们在本地直接用cp较快
除此之外还有其它的小技巧:
在拷贝的时候,有时候除了拷贝单个文件还会拷贝目录,有时需要连同文件/目录的属性一同拷贝。这种情况是可以在cp命令中使用-R参数递归拷贝目录,如果是使用-p参数拷贝文件保留属性(默认是:mode,ownership,timestamPS也可以通过--preserve[=ATTR_LIST]指定要特别保留的属性,例如:context,links,xattr,all),使用-d参数拷贝文件保留连接。或者是用简单的使用-a参数(其实是相当于使用-dR--preserve=all)
如果你想看到拷贝大量小文件的进度,那么是可以写一个简单的小脚本:代码如下:
cd/tmp/test
foriin*
do
cp$i目标目录
echo$iisok....
done
结语:我们在操作的时候,经常是需要使用很多的操作工具,当你在操作的时候首先是要去考虑一下,这个工具是否是最合适的一个工具?如果是适合的话,那么要再去思考一下,该工具有没有快捷技巧来提升效率?
¥49.00
¥5999.00
¥10500.00
¥499.00
¥1888.00