Linux   发布时间:2022-04-01  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了linux – 在Amazon EC2服务器之间复制数百万个文件(数百GB)的最快方法是什么?大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

概述

我在Amazon EC2服务器上运行 Linux.我需要在同一可用区中的两个EC2系统之间复制数百万个总共数百GB的文件.我不需要同步目录,我只需要将一个目录中的所有文件复制到另一台机器上的空目录中. 最快的方法是什么?有没有人见过或进行过性能测试? rsync的? SCP?我应先拉链吗?我应该拆下它们所在的驱动器并将其重新连接到我要复制的机器上,然后复制它们吗?通过EC2的私有IP进行传输会加快
我在Amazon EC2服务器上运行 Linux.我需要在同一可用区中的两个EC2系统之间复制数百万个总共数百GB的文件.我不需要同步目录,我只需要将一个目录中的所有文件复制到另一台机器上的空目录中.

最快的方法是什么?有没有人见过或进行过性能测试?

rsync的? SCP?我应先拉链吗?我应该拆下它们所在的驱动器并将其重新连接到我要复制的机器上,然后复制它们吗?通过EC2的私有IP进行传输会加快速度吗?

任何想法将不胜感激.

注意:抱歉这不清楚,但我在两个EC2系统之间复制数据,这两个系统都在同一个AWS可用区域中.

解决方法

如果文件已经在EBS卷上(如果您关心它们,为什么不是它们?):

>创建包含第一个实例上的文件的EBS卷的快照.
>从该快照创建EBS卷.
>将EBS卷附加到第二个实例.

新的EBS卷可能有点慢,而它正在填充快照中的块,但它可以立即使用.

ALTERNATIVE(如果文件不在EBS卷上):

>将新的EBS卷附加到第一个实例.>将文件从其他磁盘复制到新的EBS卷.>将EBS卷移动到第二个实例.

大佬总结

以上是大佬教程为你收集整理的linux – 在Amazon EC2服务器之间复制数百万个文件(数百GB)的最快方法是什么?全部内容,希望文章能够帮你解决linux – 在Amazon EC2服务器之间复制数百万个文件(数百GB)的最快方法是什么?所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。