Linux下使用rsync最快速删除海量文件的方法

发布时间:2015-10-08 16:58:14 阅读:895次

转:http://www.ha97.com/4107.html

rsync ssh指定端口号

rsync -rvz -e 'ssh -p Port' --progress --remove-sent-files ./localpath root@remotehost:2345/remotepath
https://www.centos.bz/2013/09/ssh-port-rsync/

root@raspberrypi:/var/www/record/video# rsync -a -H -v -e 'ssh -p 11518' --progress --stats ./20151008/* yansiyu@120.26.44.201:/home/yansiyu/video/

昨天遇到了要在Linux下删除海量文件的情况,需要删除数十万个文件。这个是之前的程序写的日志,增长很快,而且没什么用。这个时候,我们常用的删除命令rm -fr * 就不好用了,因为要等待的时间太长。所以必须要采取一些非常手段。我们可以使用rsync来实现快速删除大量文件。

1、先安装rsync:
yum install rsync
2、建立一个空的文件夹:
mkdir /tmp/test
3、用rsync删除目标目录:
rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/
这样我们要删除的log目录就会被清空了,删除的速度会非常快。rsync实际上用的是替换原理,处理数十万个文件也是秒删。

选项说明
–delete-before 接收者在传输之前进行删除操作
–progress 在传输时显示传输过程
-a 归档模式,表示以递归方式传输文件,并保持所有文件属性
-H 保持硬连接的文件
-v 详细输出模式
–stats 给出某些文件的传输状态

如有问题,可以QQ搜索群1028468525加入群聊,欢迎一起研究技术

支付宝 微信

有疑问联系站长,请联系QQ:QQ咨询

转载请注明:Linux下使用rsync最快速删除海量文件的方法 出自老鄢博客 | 欢迎分享