一分钟了解阿里云产品:数据传输

一、            
概述

 

阿里云发布了很多产品,今天让我们一起来了解下数据传输(Data Transmission) 吧。

 

什么是数据传输呢?

 

阿里云数据传输支持以数据库为核心的结构化存储产品之间的数据传输。
它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。
数据传输的底层数据流基础设施为阿里双11异地双活基础架构,
为数千下游应用提供实时数据流,已在线上稳定运行3年之久。
您可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。

 

 

那么,数据传输有什么优势呢?接下来让我来说说吧。

 

  • 数据传输支持同异构数据源之间的迁移同步,支持迁移订阅同步等多种传输方式,增量迁移可以实现应用无缝切换。

 

  • 数据传输服务使用高规格服务器来保证每条迁移同步链路都能拥有良好的传输性能。相对于传统的数据同步工具,数据传输服务的实时同步功能能够将并发粒度缩小到事务级别,甚至能够并发同步同张表内的数据,从而极大得提升同步性能。

 

  • 数据传输服务底层为服务集群,集群内任何一个节点宕机或发生故障,控制中心都能够将这个节点上的所有任务秒级切换到其他节点上,链路稳定性高达99.95%。数据传输服务内部对迁移同步链路提供7*24小时的数据准确性校验,快速发现并纠正传输数据,保证传输数据可靠性。数据传输服务各模块间采用安全传输协议及安全token认证,有效得保证数据传输可靠性。

 

  • 数据传输服务提供可视化管理界面,提供向导式的链路创建流程,用户可以在其控制台简单轻松得创建自己的传输链路。数据传输服务控制台展示了链路的传输状态及进度,传输性能等信息,用户可以方便管理自己的传输链路。

 

 

可能您会问到,“我处在什么样的应用或服务场景时,可以选择数据传输呢?”这里介绍下数据传输的常见应用场景:

 

  • 上云迁移
  •  数据库拆分
  •  本地灾备、异地灾备
  •  数据分析
  •  解决跨地区读延迟

 

通过我的介绍,希望大家能有所收获。

 

数据传输典型特性介绍:

https://www.aliyun.com/product/dts/?spm=5176.2066478.3.13.VnKETC

 

 

 

二、            
技术点(数据传输五大热点技术问题分析)

 

在上一篇文章中,我们为大家介绍数据传输的概况,数据传输(Data Transmission)是阿里云提供的一种支持以数据库为核心的结构化存储产品之间的数据传输服务,它提供了数据迁移、数据订阅及实时同步等多种数据传输功能。使用数据传输服务实现数据一键上云的同时,您还可以轻松得构建安全、可扩展、高可用的数据架构。那在使用过程中,经常遇到的热门技术问题有哪些呢?

 

创建数据迁移任务:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-migration.html?spm=5176.docdts/Getting-Started/Open-DTS-service.6.92.uLWroC

 

创建实时同步作业:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-synchronous.html?spm=5176.docdts/Getting-Started/data-migration.6.94.UsgftV

 

创建订阅通道:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-subscription.html?spm=5176.docdts/Getting-Started/data-synchronous.6.95.vxWuDI

 

库名不同的数据库之间的数据迁移:

https://help.aliyun.com/document_detail/dts/Best-Practice/Data-Migration-For-Databases-with-different-Ident.html?spm=5176.docdts/Getting-Started/data-subscription.6.130.ZNrxqD

 

利用数据订阅实现本地灾备:

https://help.aliyun.com/document_detail/dts/Best-Practice/Build-local-disaster-preparedness-with-Data-subscription.html?spm=5176.docdts/Best-Practice/Data-Migration-For-Databases-with-different-Ident.6.136.6benle

 

 

希望上面的内容,能够对大家有所帮助。

 

 

 

三、            
体验(跨阿里云账号的ECS自建数据库迁移至RDS

 

下面我为大家来介绍下应用数据传输的相关体验。

 

 

DTS数据迁移任务,如果配置连接方式时,源实例选择ECS上的自建数据库,那么要求这个ECS实例跟目标RDS必须属于同一个阿里云账号。如果要实现某一个阿里云账号下的源ECS实例上的自建数据库迁移到另外一个阿里云账号下的RDS实例。那么源实例类型必须选择有公网IP的自建数据库。

 

 

本小节介绍如何利用DTS试下跨阿里云账号的ECS自建数据库迁移至RDS。

 

RDS实例数据库创建

在配置DTS迁移任务之前,待迁入数据库在目标RDS实例中必须已经存在。如果未创建,需要在RDS控制台创建。

 

 

 迁移账号创建

 

在配置迁移任务时,需要配置目标RDS实例的迁移账号,如果未创建迁移账号,那么在配置迁移任务之前,需要先在目标RDS实例中创建迁移帐号,并将要迁移的库的读写权限授权给上面创建的帐号。

 

配置迁移任务

 

下面以将阿里云账号A下面的ECS实例上的自建数据库的库amptest1的数据迁移到另外一个阿里云账号B的RDS实例为例,介绍如何在DTS任务配置时实现跨阿里云账号的ECS自建数据库迁移至RDS。

 

1)  进入DTS控制台,点击创建迁移任务,正式开始任务创建。

 

2)  填写配置源及目标RDS实例的连接信息

 

这里面源实例的实例类型需要选择“有公网IP的自建数据库”,源实例的主机名或IP地址填写ECS实例的公网IP

 

3)  选择迁移类型及迁移对象

 

 

在这个步骤需要配置要迁移的对象列表。
配置完后,进入迁移预检查

 

4) 预检查

 

当预检查通过后,可以启动迁移任务

 

5)  启动迁移任务

至此,完成跨阿里云账号的ECS自建数据库迁移至RDS的迁移任务配置。

 

如果您想详细了解数据传输,请访问:

https://help.aliyun.com/document_detail/dts/Best-Practice/Data-Migration-Between-ECS-And-RDS-belong-to-different-account.html?spm=5176.docdts/Best-Practice/Data-Migration-Between-RDS-instance-belong-to-different-account.6.133.vWEsOq

触发器存在情况下如何配置同步作业:

https://help.aliyun.com/document_detail/dts/Best-Practice/Config-Synchronous-Database-Trigger-Exists.html?spm=5176.docdts/Best-Practice/SDK-Failover.6.136.sRnnXI

 

 

时间: 2024-12-10 10:49:00

一分钟了解阿里云产品:数据传输的相关文章

72期:一分钟了解阿里云产品,看别人如何靠域名赚亿元

云周刊 本周要点 查看更多 [活动回顾]大数据助力驴妈妈自助游,精准运营之道 第3期在线培训已经于3月11日上午顺利结束!本次分享嘉宾为驴妈妈副CTO邵汉成,分享主题围绕驴妈妈架构系统.数据库等内容展开.点击查看视频回顾 产品动态 查看更多 [专题推荐]一分钟了解阿里云产品 [专题推荐]教你10秒钟拿到阿里技术offer [专题推荐]域名风云汇:如何靠域名赚亿元 工单参考 查看更多 Windows lvm扩容后逻辑卷为suspended状态无法挂载 用户在对磁盘扩容后重新挂载LVM分区发现逻辑卷

一分钟了解阿里云产品:云监控

一.             概述   阿里云发布的产品种类齐全,今天让我们一起来了解下云监控这款产品吧.   什么是云监控呢?   云监控(CloudMonitor) 是一项针对阿里云资源和互联网应用进行监控的服务.云监控服务可用于收集获取阿里云资源的监控指标,探测互联网服务可用性,以及针对指标设置警报.     那么,云监控有什么优势呢?   云监控服务无需特意购买和开通,您注册好阿里云账号后,便自动为您开通了云监控服务,方便您在购买和使用阿里云产品后直接到云监控查看产品运行状态并设置报警规

一分钟了解阿里云产品:云虚拟主机

一.             概述   阿里云产品众多,今天让我们一起来了解下云虚拟主机吧.   什么是阿里云云虚拟主机呢?   简单来说,阿里云虚拟主机市场占用率第一.产品特点:预装网站运行环境,赠送正版数据库,可通过图形化控制面板管理,主要用于搭建网站.提供基于云端的DDoS入侵.防御及网站安全防御服务.全国仅有8线BGP骨干网络,全网覆盖(涵盖电信.联通和移动等主流运营商).   那么,云虚拟主机有什么独特的优势呢?我来给大家说说.   阿里云虚拟主机有两个版本供大家选择:极速共享版虚机和

一分钟了解阿里云产品:补丁管理

一.             概述   阿里云发布了多款产品,今天就让我们一起来了解下补丁管理吧.   什么是补丁管理呢?   补丁管理是为解决客户使用大量第三方软件后,漏洞发现不及时.不会修漏洞.无法批量进行补丁更新等诸多问题而推出的服务,开通补丁管理服务后,可以及时获取最新漏洞预警和补丁,并能通过云端一键下发补丁更新,做到漏洞快速发现.快速修复.   90%的安全问题可以通过升级.打补丁的方式解决,补丁管理通过"端(安骑士)"进行漏洞的快速发现并上报"云端",实

一分钟了解阿里云产品:对象存储OSS概述

阿里云的产品种类繁多,今天让我们一起来了解下对象存储(Object Storage Service,简称OSS)吧!   什么是对象存储呢?   简单来说,对象存储OSS是阿里云提供的海量.安全和高可靠的云存储服务.存储容量和处理能力的弹性扩展,按量付费真正使您专注于核心业务.您还可以方便的同其他云产品搭配使用,广泛的应用于海量数据存储与备份,数据加工与处理,内容加速分发,业务数据挖掘分析等多种业务场景.     对象存储 OSS,可以理解为一个即开即用,无限大空间的存储集群.相比传统自建服务器

一分钟了解阿里云产品:分析型数据库

一.             概述   阿里云产品种类繁多,今天让我们一起来了解下分析型数据库(Analytic DB)吧!   什么是分析型数据库呢?   分析型数据库是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索.分析型数据库对海量数据的自由计算和极速响应能力,能让用户在瞬息之间进行灵活的数据探索,快速发现数据价值,并可直接嵌入业务系统为终端客户提供分析服务.     分析型数据库帮您实

一分钟了解阿里云产品:安骑士

一.             概述   阿里云产品种类繁多,今天让我们一起来了解下安骑士这款产品吧.   什么是安骑士呢?   一句话,安骑士是阿里云推出的一款免费云服务器安全管理软件,主要提供木马文件查杀.密码防暴力破解.高危漏洞修复等安全防护功能.安骑士支持云外用户使用.     那么,安骑士有什么优势呢?我来给大家讲讲.   安骑士轻量化占用资源.基于云加端安全防御架构 最小化系统资源占用.   安骑士提供实时告警,一个控制台集中管控全部服务器安全状态,短信实时告警黑客攻击行为和高危漏洞风

一分钟了解阿里云产品:数据集成概述

阿里云的众多产品中,数据集成肯定是其中重要的一员.今天让我们来一起了解下数据集成吧.   什么是数据集成呢?     数据集成(Data Integration),简称CDP,是阿里集团对外提供的稳定高效.弹性伸缩的数据同步平台,为阿里云大数据计算引擎(包括ODPS.分析型数据库.OSPS)提供离线(批量).实时(流式)的数据进出通道.   有别于传统的客户端点对点同步运行工具,数据集成本身以公有云服务为基本设计目标,集群化.服务化.多租户.水平扩展等功能都是其基本实现要求.     那么数据集

一分钟了解阿里云产品:先知计划

一.             概述   阿里云发布了各种各样的产品,今天让我们一起来了解下阿里云先知计划吧.   什么是先知计划呢?   先知计划是一个帮助企业建立私有应急响应中心的平台(帮助企业收集漏洞信息).企业加入先知计划后,可自主发布奖励计划,激励先知平台的安全专家来测试和提交企业自身网站或业务系统的漏洞,保证安全风险可以快速进行响应和修复,防止造成更大的安全损失.     先知计划可帮助企业建立"私有"漏洞收集中心,相对于其他漏洞收集平台,先知计划有什么优势呢?   先知计划