PB级数据“动起来”

时间:2022-03-31 05:49:51

PB级数据“动起来”

“永远不要低估一辆满载着磁带在高速公路上飞驰的旅行车的带宽。”许多人把这句话当成调侃。其实,最早人们对数据进行备份,就是通过卡车将满载的磁带运送到专门的仓库存储起来。当时,美国有一家全球知名的专门从事这项业务的公司――“铁山”(Iron Mountain)。笔者多年前去美国出差时,有一次在街头看到了一辆“铁山”公司运送磁带的卡车,还像个狂热的粉丝一样不停地拍照。

后来,随着技术的发展,在线备份、异地容灾、两地三中心等新的数据保护方式越来越普遍,这种运送磁带的卡车好像也逐渐淡出了人们的视线。

在时尚界,复古一直都被认为是一种时髦和流行。用卡车运送数据这事现在又流行回来了,不过这次并不仅是为了备份和容灾,而是为了云中数据的快速交换。

AWS先想到了这个方法,了AWS Snowball。它外形看上去像是一个大号手提箱,适合需要大批量传输数据、有数据位于分散位置或需要持续加载流数据的客户。借助AWS Snowball,AWS的客户可以更方便、更快速、更经济地向AWS云平台迁移大数据集和流数据。

虽然光纤骨干网络的带宽也十分可观,但真要传输pb级的数据,光纤技术也显得捉襟见肘。“实体”传输这种看上去“笨重而传统”的方法可能更适合大批量数据的交换。Snowball能够“移动”的存储容量是TB级的,但是现在TB级对有些用户来说根本不够用,于是AWS又推出了Snowmobile,用一辆卡车一次就可以运送高达100PB的容量。

总之,Snowball、Snowmobile成了选用AWS云平台的用户快速上传和下载PB级数据的一种理想选择。

现在,阿里云也忍不住出手了。6月10日,在2017年云栖大会・上海峰会上,阿里云了一款重磅级产品――“闪电立方”。

阿里云“闪电立方”是一个黑色的立方w,可防尘防水,抗震抗压;可容纳100TB数据,并能实现最高30∶1的压缩比,再配合高效的去重功能可节省更多存储空间;内置20Gbps的光纤网络连接,传输速度更快;在数据安全方面,“闪电立方”采用AES 256端到端加密算法,密钥由用户保管,运送过程中全程断网,同时配备24小时定位监控。

阿里云也算了一笔经常账:以1PB数据为例,利用普通的办公网络上传需要1万天,用1Gbps的专线网络也需要100多天,而“闪电立方”可在发起申请后快速送达用户的数据中心,最快24小时即可完成对1PB数据的离线拷贝,回寄之后,再离线传输至云数据中心。整体传输费用是传统方式的1/10,效率则提升20倍。

随着数据量的爆炸性增长,再加上各种云模式的采用,PB级数据移动这事可能会越来越普遍。Snowball也好,“闪电立方”也罢,用户可以慎重评估一下,最直接的方式可能是最好的方式。

上一篇:“世界尽头”开普敦地球上最美丽的海角 下一篇:让责任成为婚姻大田的营养液