把 4T 的文件从阿里云迁移到独立的服务器,大家有什么好思路

红薯 发布于 2014/07/24 15:17
阅读 4K+
收藏 7
如何保证数据可靠迁移,迁移需要多长时间?6个小时内能迁移完成吗?
加载中
2
Tyler
Tyler
先 rsync 同步,同步好再切换服务。 
岳阳小罗
岳阳小罗
我想这是最靠谱的方法了。
1
Spance
Spance

如果是流式压缩写第二硬盘的话,4T按文本、图片参半粗估zip压缩率30%左右,按万转硬盘平均180MB/s来算,大概也要2个小时左右,况且,第二硬盘还需要解压更耗时。

而且基于公网传输带宽难以达到硬盘的的十分之一,所以大概要一天,这都是不包括文件校验的情况,所以在公网上传输很难短时间,流式压缩到了对端还需要解压更耗时,也不是很可取。

倒不如把硬盘给阿里,让他们做dd块拷贝,理论上即拷即用,带上飞机票,勒紧裤带估计6个小时也算撮合。

0
神奇的路人甲
神奇的路人甲
神奇的路人甲
回复 @红薯 : 带硬盘过去对拷? 不知道那边是否支持
红薯
红薯
阿里云的硬盘你拿不走:) 云主机
0
挖粪涂墙
挖粪涂墙
4T的数据量,确实比较搞
0
稻草鸟人
稻草鸟人
6个小时搞不定...
0
景愿
景愿

我来算算

4 * 1024 * 1024 / (6 * 3600) = 194

要每秒194M的速度才能迁移完,还不带停顿

极品渣子
极品渣子
为什么是4不是2?
wujingke
wujingke
阿里云的IO没有那么高
0
wujingke
wujingke
6小时内不可能完成,不算IO问题,也要多大带宽才能迁移完
mark35
mark35
如果本来就是独立服务器就好办,直接搬硬盘过去。云服务嘛……
wujingke
wujingke
回复 @红薯 : 4t什么文件
红薯
红薯
主要是要尽量缩短时间,否则业务中断太久
0
bigwind87
bigwind87

先压缩再rsync或scp

0
南湖船老大
南湖船老大
起码得一天一夜的样子
0
wharf_zhang
wharf_zhang
(1)入云又出云,是不是逆流。(2)这么大的数据量,就目前情况判断,除了本地对拷,没有什么更快的办法。走网络的话,也就那区区几种公知的方法。要么远程备份压缩后传压缩包,本地再解压,要么同步镜像,直到可以平稳快速切换。(3)你打算怎么弄,也说说吧,我们也学习下。
开源无憾
开源无憾
说明红薯被阿里云坑惨了,想早日脱离苦海
返回顶部
顶部