前端之家收集整理的这篇文章主要介绍了
2个Linux服务器之间的多线程文件同步,
前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
目前我正在运行rsync,共有220万个
文件,共250GB,在6小时内只需要700K的
文件.
有没有人知道一个类似rsync的工具可以用多个线程做到这一点,所以它更快?
我怀疑
cpu是限制因素.您很可能受到传输的网络带宽和磁盘IO的限制;特别是所有这些
统计调用的延迟.
您是否可以将文件系统层次结构分解为更小的块以并行处理?
什么是源文件,以及正在编写或修改它们的内容?是否可以在应用程序级别发送更改?
原文链接:https://www.f2er.com/linux/401056.html