AWS VS. Azure VS. Google:离线数据迁移大比拼

将存储磁盘发送到云提供商那里,似乎是一个过时的数据迁移方法,但它却是一个常见的选择。对此,AWS、Azure和Google是如何管理这个过程的。

对于那些需要将TB级数据传输到公有云,但却无法访问廉价和快速的网络连接的企业来说,他们通常会使用更老式的方法:离线存储。这意味着企业将数据存储在物理磁盘上,然后将该磁盘运送到云提供商那里,云提供商再将数据加载到云端。

然而,在开始此过程之前,企业IT团队需要认真规划、预算,并在一般情况,验证其数据可以安全迁移的可能。以下是Amazon Web Services(AWS)、Google Cloud Platform和Microsoft Azure的各种离线数据迁移服务。

AWS

AWS的主要离线数据迁移服务是Snowball和Snowmobile。

使用Snowball,管理员在AWS管理控制台中创建一个任务,随后AWS向他们发送一个名为Snowball的物理磁盘。用户加载那些带他们希望迁移到云端数据的Snowball。数据卷将通过电子进行标记,这样当设备到达AWS时,供应商可以将数据加载到云端。

当数据发布时,AWS将每次使用Snowball迁移数据的服务费;50TB(TB)的Snowball 设备成本为200美元,而80TB的成本为250美元。

为了获得更大的数据传输需求,AWS提供了EB规模的数据传输服务Snowmobile,它允许用户传输高达100 PB的数据。AWS对Snowmobile服务收取的费用,是基于每月的存储数据量来定的 。

Microsoft Azure

Microsoft Azure提供类似于AWS Snowball的服务,称为导入/导出服务,但不向用户提供物理磁盘。相反,他们必须提供自己的硬盘,并遵循以下要求:

使用2.5英寸固态硬盘(SSD)或2.5英寸或3.5英寸SATA II或SATA III内置硬盘。

将数据复制到硬盘驱动器时,使用2.5英寸SSD或2.5英寸或3.5英寸SATA II或SATA III连接器;或者使用外部2.5英寸SSD或2.5英寸或3.5英寸 SATA II或III USB适配器连接到外部。

硬盘可达10 TB。

对于导入任务,Microsoft将仅处理驱动器上的第一个数据卷。

用户必须使用NT文件系统格式化数据卷 。

数据发布后,Microsoft对每个存储设备收取80美元的费用,并建议用户下载最新版本的WAImportExport工具。 此工具将数据卷复制到用户购买的物理驱动器上。

Google Cloud Platform

Google的Offline Media Import/Export 涉及到了第三方供应商,但功能类似于AWS和Microsoft的离线数据迁移服务。在这种情况下,企业将其存储设备发送到第三方服务提供商那里,然后将数据上传到Google云端。

对于Offline Media Import/Export ,企业必须自己选择第三方提供商,而不是通过谷歌。这些提供商包括北美的Iron Mountain,以及欧洲、中东和非洲以及亚太地区的Prime Focus Technologies 。

一般来说,不要离线数据迁移

虽然离线数据迁移服务可能看起来像是一次性事件,但在未来几年内,许多企业将会经历数十次。而且IT人员必须在工作流程和技术方面花费精力;还不能忽视创建专门团队的想法。

其次,考虑到安全性。大多数云提供商让客户加密数据,通过使用BitVault等技术,但是物理磁盘在传输中丢失时,也要保证企业数据不会泄漏,这也非常重要。是在物理磁盘中产生数据卷,还是其它的存储设备,把数据传输到公有云中,这是用户自己的选择。

最后,在使用这些数据迁移服务之前,要妥善地规划项目。当你需要时,要先充分了解你所需要的物理设备、了解资源的数量和所需的人员数量。一个好的计划可以减少额外的时间和成本。

本文转自d1net(转载)

时间: 2024-09-20 09:43:59

AWS VS. Azure VS. Google:离线数据迁移大比拼的相关文章

轻轻几个点击,在 AWS 和 Azure 上搭建 Docker 数据中心

通过几个点击即可在 "AWS 快速起步"和"Azure 市场"上高效搭建产品级 Docker 数据中心. 通过 AWS 快速起步的 CloudFormation 模板和在 Azure 市场上的预编译模板来部署 Docker 数据中心使得比以往在公有云基础设施下的部署企业级的 CaaS Docker 环境更加容易. Docker 数据中心 CaaS 平台为各种规模的企业的敏捷应用部署提供了容器和集群的编排和管理,使之更简单.安全和可伸缩.使用新为 Docker 数据中

PgSQL · 最佳实践 · 云上的数据迁移

title: PgSQL · 最佳实践 · 云上的数据迁移 author: 义从 背景 大多数使用云产品作为 IT 解决方案的客户同时使用多款云产品是一个普遍现象. 用户在多款云产品之间转移数据成为一个基础的需求. 例如 1. 用户把线下机房中的 Oracle 数据库中的数据 迁移到云上 RDS PPAS 中. 2. 使用 RDS MYSQL 做为数据库支撑交易型业务场景,同时使用 HybridDB for PostgreSQL 作数据仓库解决方案. 3. 把 ODPS 中的大量数据导入到 Hy

让数据迁移变得轻松

不管你称其为数据引力还是数据惯性,从存储基础设施的一个位置移动数据到另一个位置是个艰难的过程.至少,过去是这样.而现在,在合适的工具和基础设施条件下,传统的数据迁移过程中涉及到的许多困难点都可以消除.采用的方法只是提前规划和采用恰当的技术. 为什么数据迁移在过去是个问题 一份最新的Hitachi Data Systems报告详细的整理了来自IDC和451个集团公司的调研.报告表明数据迁移项目占据了大型企业IT项目的60%,并且,几乎一半的IT预算用于运维开销--一个明显的信号即数据迁移消耗了大部

从用户Windows系统到阿里云NAS SMB服务:常用数据迁移备份工具

本文介绍如何由本地(on-premises) 或阿里云的虚拟机Windows系统向阿里云NAS SMB服务上传和备份数据. 阿里云文件系统SMB协议服务介绍 阿里云文件存储服务NAS(阿里云NAS)是阿里云在2016年正式推出的公有云上的网络文件系统实现.阿里云NAS主要面向阿里云 ECS 实例.HPC.Docker.弹性Web和BatchCompute 等计算节点提供文件存储服务.通过标准的文件访问协议,用户无需对现有应用做任何修改,即可在云上使用具备无限容量及性能扩展.单一命名空间.多共享.

ODPS到ODPS数据迁移指南

1.工具选择与方案确定 目前,有两种方式可用于专有云环境下的从MaxCompute到MaxCompute整体数据迁移. (1)使用DataX工具进行迁移,迁移所需的作业配置文件及运行脚本,可用DataX批量配置工具来生成: (2)通过大数据开发套件(DataIDE)- 数据开发进行迁移,这种方式可选择界面向导模式逐步配置,操作简单容易上手: 2.具体实施 2.1使用DataX工具  这种场景需要先从源MaxCompute中导出元数据DDL,在目标MaxCompute中初始化表,然后借助DataX

HybridDB for MySQL 实现在线与离线数据分离的实践

本文将重点介绍HybridDB for MySQL 实现在线与离线数据分离的实践,特别推荐! 核心业务简介 任务中心汇聚了集团的所有工作流任务,并提供统一的入口给用户处理集团的工作任务. 面临主要问题 1.单表存储量超高目前已有4千万的数据,并且在急速的增长.预计年增长在200%以上. 2.业务需要大范围的查询由于业务需要查询多张表,比如查询在线,再查离线表.而且频率和复杂度在提升.会导致慢sql的出现. 如何架构改造 在线数据与离线数据隔离,在数据访问层面不相互影响  在线数据到离线数据必须实

谷歌云存储磁盘服务:云数据迁移“So easy”

导读:如果你想把数据存放在云端,但是又担心带宽问题,现在随时可以邮寄这些数据了.谷歌上周发布了一款硬盘驱动运输服务,此项服务作为谷歌云存储的一部分. 如果你想把数据存放在云端,但是又担心带宽问题,现在随时可以邮寄这些数据了. 谷歌上周发布了一款硬盘驱动运输服务,此项服务作为谷歌云存储的一部分.利用这个脱机硬盘导入功能,企业可以通过邮件快速的将大型数据集转移到云端,而不必再通过互联网传输. 此项服务目标客户是那些期望在http://www.aliyun.com/zixun/aggregation/

谷歌开放同步API 设备间可同步离线数据

HTML 5的一大好处就是Web应用可以在本地存储数据以供离线使用.Google近日宣布为Chrome浏览器引入一种 新的API:SnycFileSystem,该API能为应用提供私密沙箱文件存储系统,虽然此前HTML 5 specs中已经实现了这一功能,但这一API的独特之处在于本地存储的数据能够通过链接至Google Drive的云备份服务进行自动同步.目前仅测试版Chrome(代号Canary)拥有SyncFileSystem API,release版本将在接下来的几个月内实现这一功能.G

ODPS数据迁移指南

1. 背景调研 1.1 ODPS源与目的集群 调研项 内容 ODPS源集群版本 ODPS目的集群版本 ODPS源与目的是否在一个集群/可使用相同账号 ODPS源集群AccessKeyId ODPS源集群AccessKeySecret ODPS目的集群AccessKeyId ODPS目的集群AccessKeyIdSecret 1.2 预迁移数据统计 所属Project 表名 大小 是否要迁移增量 Project1 Table1 Desc查看表大小 2. 工具选择与方案确定 目前有四种方式可用于OD