「2024年,我们将140TB的客户数据从本地部署环境迁移到了 S3。
原计划:6周
实际耗时:19周
让我们吃尽苦头的原因:
网络吞吐量只有测试时的1/8
数据验证耗时比传输本身还要长
有人仍在向源端写入数据,导致3次迁移尝试失败
现有工具无法处理我们的文件结构,不得不自行开发定制同步工具
经验:你的迁移所需时间会比你想象的长3倍,成本会高出2倍。务必为此做好规划。」
「2024年,我们将140TB的客户数据从本地部署环境迁移到了 S3。
原计划:6周
实际耗时:19周
让我们吃尽苦头的原因:
网络吞吐量只有测试时的1/8
数据验证耗时比传输本身还要长
有人仍在向源端写入数据,导致3次迁移尝试失败
现有工具无法处理我们的文件结构,不得不自行开发定制同步工具
经验:你的迁移所需时间会比你想象的长3倍,成本会高出2倍。务必为此做好规划。」