我有~700GB的存储空间,我存储~15M文件,因此平均文件大小约为50KB.要备份它,过夜我运行一个带有以下标志的简单rsync脚本:
--archive --update --compress --numeric-ids --human-readable --stats
rsync完成其工作需要8个小时,平均每天移动约1-4GB的数据.这对我来说似乎非常低效.
我可以调整我的rsync脚本吗?我想我最好的选择是迁移到MongoDB或类似的东西,但是存在问题,因为当前的基础设施依赖于在posix文件系统上访问的文件,将它们迁移到完全不同的东西可能需要额外的工作,可能太多的工作……还有什么其他最好的策略?