这个可以很简单。
插上硬盘(不管是存储服务器、阵列还是 USB )拷走。
ISP 如果在北京有机房, 可以问 ISP 要流量减免, 镜像。
80T 是很小的数据量, 如果新服务器打算上 SSD, 现在就可以去批发。
方法很多,有便宜有贵,甚至还有一个坏主意。
硬盘每T价格在单盘3-4T最低,之前之后都不够经济。
你说5块16T,成本在4500*5=22500,觉得贵了,那么我推荐你考虑4T*20,估计也就12000就搞定了,再给你加个冗余,避免硬盘坏了白跑一趟,25块硬盘,也就15000搞定。
冗余可以用snapRAID这种方案,5块冗余盘,只要路上不阵亡超过五块硬盘,数据就没事儿。
这么多硬盘的好处在于,并发读写,理论上能达到上GB/s,大大加速你拷贝数据的速度。
只要你冗余够多,硬盘都不用新的,二手的也足够,目前3T的二手硬盘也就200,算上冗余,50块够了吧,也就10000块钱搞定。
磁带,数据磁带比硬盘便宜不少,就算是用新磁带,成本也很经济了。
如果你能接受磁带库淘汰的货,价格会更低,磁带还支持压缩。
只是磁带机贵些,好在磁带机基本都能向前兼容两代磁带,算是一次性投资。
如果你需要经常运输数据这个选项也不错。
互联网是建立在分组转发的基础上的,只是为了延迟考虑,这个分组都挺小的。
我们可以借鉴这个思路,来个超大分组,超大延迟,超大带宽的数据传输。
北京深圳往返的快递时间,顺丰航空件也就一天时间,你可以理解为每两天时间一次往返,可以完成一块硬盘数据量的传输,带宽还是很可观的。
如果你买的是16T的硬盘,只要买一块,或者买两块做raid1,避免硬盘损坏造成损失。
16T/2天/24小时/3600秒=741Mbps,基本上已经接近千兆网络的带宽了。
只要9天左右(不算最后一次硬盘寄回去的时间,因为数据已经完成传输了),就可以完成数据传输了。
而且只需要一块或者两块16T硬盘,算上快递费和raid1冗余,10000块足够。
如果能用3-4T的硬盘,还会更便宜,合理平衡买的硬盘数量和快递费以及时间,还可以有更优的解。
比如5块4T硬盘组raid5,依然可以实现9天传完,但是只需要3000硬盘钱+1000左右的快递费。
民用宽带现在上传都能有30Mbps左右,把数据拷贝到移动硬盘里,带回家,慢慢上传到北京的机器,这个方案基本不花额外的钱,但是时间超长,要一年多,只要数据够冷,其实也不是不可接受,我相信你们的服务器应该带宽高于30Mbps,至少100Mbps对称起步吧。
京东买一堆硬盘,用完了做个数据安全销毁,全盘随机写入7次,然后退货。
嗯,这个方案成本是0,最多可能需要个京东plus会员。
根据京东的规则,第七天提交退货申请,取件时间最多可以约到提交日之后六天。
到了取货日前一天,可以提交一次日期改约,又可以延期到六天后,到了真正的取件日期,可以联系小哥,要求再缓一天,小哥点一个取件单再投,就可以了。
这样累计可以用18天。
是不是很鸡贼?
然后,你就不是东哥兄弟了。
其实就算你不退货,而是把硬盘二手卖掉,怎么也算是99新,回7成血还是没问题的。
以上所有的方案中,用的介质都是可以多次使用的,都有较高残值。
这也是为什么我没有考虑蓝光光盘等一次性介质,这可是实打实的一次性成本,不是土豪用不起。
我从一个咨询顾问的角度看,很多时候,客户的描述是存在问题的。
用户说我要一个钉子和一把锤子,但是当你仔细和客户沟通之后,发现客户的诉求其实是墙上有个洞,但是客户只知道锤子和钉子能打洞,于是表达成了要锤子和钉子。
差的顾问,只会真的给客户钉子和锤子,好的顾问,会在倾听客户需求之后,引导客户说出具体情况,并提出更优的方案,这才是真正能成就客户的做法,也更能让客户感受到你的专业和负责。有时客户听完最终方案,甚至高兴地说,这就是我想要的。
其实题主这个问题也是一样的,我有很多问题可以问,来提出更好的方案,比如:
80T的数据一定要转移吗?可不可以转移计算资源而不是数据。
一定要全部转移吗?一定要全部转移完了业务才能开始吗?
我相信80T数据一定可以分出冷数据、温数据、热数据,分级确定优先级传输,既兼顾了成本和时效,又不影响业务。
很多时候,数据可以进行清洗和汇总,有点儿边缘计算的思想,可能原始数据80T,对端真正需要的信息,经过汇总,可能只有几T,完全可以在本端预处理下,再传输。
如果这80T数据是稀疏的,压缩也会极大节省时间,还可以增加纠错码,减少传输错误造成的影响。
如果题主可以补充更多上下文,比如什么业务,什么类型的数据等等,也许会有更多好的方案。
假如北京的服务器没足量硬盘,还得买硬盘。怎么绕都绕不过去。
假如北京服务器有足量硬盘,网速快且时间足够,直接给百度云盘充个一两个月的超级会员当中转站就解决了。超级会员是5T。中转20次就够了。如果时间紧,磁带还是硬盘自个儿看着办。
楼主还是不要拷贝了。自认为很重要的80t数字资产,连4500都不愿意出,还谈什么重要。按照gcp的价格,每月光存储费用就超过1.5万,你还敢买绿盘,疯了,最可行是买群晖16盘以上的买12t以上的硬盘组raid 10,然后人肉快递群晖和硬盘。
大数据不是谁都能玩的起的,要有充足的预算,嫌贵就不要存这么多数据了。
80t数据
最快的方法是乘火车把服务器自己搬到北京
乘飞机服务器打包后不一定上的了飞机
20多小时
前提服务器和数据产权没争议
用硬盘拷贝 知道普通x86机器拷贝80t要多久吗
小文件多的话你会拷的吐血
高赞的dell卖家居然建议用md这种das柜子做raid0拷贝 无底线啊 md柜子+盘比服务器都贵了
md das柜子 raid依赖在服务器上 且数据高风险 机器成本很高 应该没人会借给你 das柜子的速度也并不快
推荐阿里云闪电云立方的更不谈了,有句话叫上云容易下云难
闪电云立方的存储是我们做的一个牌子oem的
闪电云立方仿造amazon pb卡车 不过只做线下机房数据迁移物理传送到阿里云机房
阿里对象存储每tb1800左右每年 流量费另算
闪电云立方租押金另算 比服务器都贵多了
其实有个恰当的比喻解释这个,就好像问以前99平的房子是二房,为什么现在会有人把99平的房子做成三房,买大点不行吗?
答案:因为大了,比较费钱。
任何机械传动装置都是有间隙的,这种间隙在运动中的累积会导致运动误差,体现在汽车转向系统中的表现就是始终无法与道路保持绝对平行,如果不加修正就会越跑越偏,所以行驶中驾驶员必须要随时修正方向。
车况良好的车,行驶中方向偏移是很少的。比如我的车,在直道上正中间行驶时,我可以百米以上不扶方向盘而车不会偏到距离车道线20cm之内。
除转向系统之外,轮胎气压及其它一些因素也会引起车辆跑偏加大。