我已经看过所有以前的类似问题,但答案似乎遍布全球,没有人移动大量数据(100 GB与10 TB不同)。
我有大约10TB,我需要从一个RAIDarrays迁移到另一个千兆以太网,免费的百科全书, XFS文件系统。 我最担心的是中途转移,无法轻松恢复。 速度会很好,但确保转移更重要。
通常情况下,我只是tar和netcat,但是我从最近的RAIDarrays已经是超级片状,而且我需要能够恢复和恢复,如果它中断过程。 我应该看看rsync ?
再看看这个,我认为rsync可能太慢了,我想避免这个需要30 天或更长时间。 所以现在我正在寻找关于如何监视/恢复netcat传输的build议。
是的,rsync
在古怪的外面,DRBD最近出现了asynchronousfunction。
永远不要低估满载磁带的旅行车带宽。 如果你能把它分成(比如说2TB)块,那么10TB对于相对便宜的消费级NAS设备是可行的。 如果这是一次性的,那么半手动过程可能是可行的,而2TB NAS只有几百美元。
如果您需要一个正在进行的过程,那么您可以在完成初始传输后设置RSYNC。
几个月前我不得不做这种工作。 我使用并行rsync来加速进程。 它将文件拆分成大块传输/同步,随时可以恢复。 请参阅以下链接以获取并行rsync脚本。
您可以尝试在服务器上设置FTP服务器上的要复制的数据,并在接收端使用带有“resume”的FTP客户端。 我使用Filezilla服务器和客户端,而且我经常使用客户端的“简历”function,并且一直工作顺利。