大佬教程收集整理的这篇文章主要介绍了Rsync庞大的小文件数据集5TB,M小文件,大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。
find . -type f -print0 | xargs -J % -0 rsync -aP % user@host:some/dir/
您可以使用-n控制每次调用rsync作为源传递的文件数
例如.在每个rsync复制200个文件:
find . -type f -print0 | xargs -n 200 -J % -0 rsync -aP % user@host:some/dir/
如果它太慢,您可以与-P选项并行运行多个rsync副本:
find . -type f -print0 | xargs -P 8 -n 200 -J % -0 rsync -aP % user@host:some/dir/
这将并行启动8个rsync副本.
以上是大佬教程为你收集整理的Rsync庞大的小文件数据集5TB,M小文件全部内容,希望文章能够帮你解决Rsync庞大的小文件数据集5TB,M小文件所遇到的程序开发问题。
如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。
本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。