如果你还在停服迁移数据,那你就out啦!!

简介

数据库迁移是系统发展各个阶段,都会遇到的问题。例如数据库压力达到瓶颈需要拆分,业务系统需要迁移上云,测试数据构造等。很多数据库都提供了原生的迁移工具,例如MySQL的mysqldump,SQLServer的SSMA,Oracle的imp/exp。然而这些工具都只能进行全量数据拷贝,为了保证迁移数据一致性,要求业务在数据迁移之前需要停止服务。所以,这种传统的迁移方案对业务影响极大。为降低数据迁移门槛,阿里云数据传输DTS推出不停服迁移功能。使用不停服迁移功能,可实现整个数据迁移过程,业务停服时间降低到分钟级别

传统数据库迁移流程

本小节简单介绍传统全量迁移方案的整个数据迁移流程。

如上图所示,传统数据库迁移流程包括以下几个步骤:
(1) 应用停止服务
(2) 使用工具开始进行数据迁移
(3)启动应用,重新提供服务

所以,整个数据迁移过程当中,应用需要全程停服。如果数据量比较大的情况下,整个应用停服时间可能高达几个小时甚至数天,这对应用影响极大。

不停服数据库迁移流程

本小节简单介绍数据传输DTS提供的增量迁移方案的整个数据迁移流程。

如上图所示,数据传输DTS提供的不停服迁移流程包括以下几个步骤:
(1) 使用DTS,配置数据迁移任务
(2) 迁移任务进入增量数据同步阶段时,当增量数据追平后,将源库应用停服,数据同步快速追平后,将业务切换到目标数据库,启动业务开启服务

所以,整个数据迁移过程当中,应用只需要在要切换之前停服,停服时间降低到分钟级别,极大得降低了数据迁移对业务的影响。

不停服数据库迁移技术原理

本小节简单介绍数据传输DTS提供的不停服迁移的实现原理。

如上如所示,DTS在全量迁移之前,会先在后台启动一个增量日志拉取及解析程序。这个程序会实时获取源数据库在全量迁移过程中产生的任何增量日志,解析并将其封装为DTS自己的数据格式存储在本地存储系统中。当全量迁移完成后,增量数据回放模块,会去拉取模块中读取存储的增量日志数据,然后通过解析、过滤、封装等步骤,最终拼装成要回放的SQL语句,回放到目标数据库,从而实现源数据库同目标数据库之间的增量数据实时同步。

小结

不停服迁移功能是阿里云数据传输DTS提供的低门槛数据迁移方式。目前可以实现MySQL、SQLServer、PostgreSQL的不停服迁移,未来DTS还将提供Oracle、MongoDB、Redis的不停服迁移功能。立即体验 >>

不停服迁移功能只是数据传输DTS提供的一种迁传输方式,除数据迁移之外,数据传输还提供了数据实时同步,实时数据订阅等多种传输能力,通过数据实时同步可以实现数据异地灾备 ,加速跨境业务访问速度 ,打通oltp->olap数据通道 等场景。通过数据订阅可以实现轻量级缓存更新 、核心业务异步解耦 等业务场景。如需了解数据传输更多详情,请猛击数据传输

时间: 2024-08-30 02:24:06

如果你还在停服迁移数据,那你就out啦!!的相关文章

魔兽玩家借央视维权称明知停服还卖游戏点卡

网络游戏<魔兽世界>因行政审批而暂停服务.从6月7日算起,到昨天,对于<魔兽世界>的500万玩家们来说,是充满煎熬的41天.过去的4年里,他们在美国暴雪娱乐公司开发的这款游戏里,投入了无数时间精力,也花费了不少金钱.然而,随着一起意外事件发生,他们4年的魔兽生涯戛然而止.虚拟的魔兽世界突然向他们关上了大门,一场规模空前的网上维权行动也由此展开.昨日,央视经济半小时 曝光了<魔兽世界>停止服务一事,很快,不少<魔兽世界>的玩家们在网上活跃起来,他们对央视的曝光

蚂蚁金服高级技术专家徐红星 :蚂蚁金服大数据开放式创新实践

8月30-31日20:00-21:30,一场别开生面的技术大会-- "蚂蚁金服&阿里云在线金融技术峰会"将在线举办.本次将聚焦数据库.应用架构.移动开发.机器学习等热门领域,帮助金融业技术开发者深入解析互联网应用的前沿应用与技术实践. 蚂蚁金服&阿里云在线金融技术峰会专题:https://yq.aliyun.com/activity/109 峰会统一报名链接:http://yq.aliyun.com/webinar/join/38 来自蚂蚁金服的高级技术专家徐红星 ,将

XP停服后的第一个远程0day漏洞来了

摘要: 4月28日电 日前微软证实,所有版本IE浏览器出现一处高危漏洞,黑客可利用漏洞远程攻击用户电脑,进而删除或盗取受害用户数据.微软官方表态正在修复此漏洞,但WinXP用户无法获得 4月28日电 日前微软证实,所有版本IE浏览器出现一处高危漏洞,黑客可利用漏洞远程攻击用户电脑,进而删除或盗取受害用户数据.微软官方表态正在修复此漏洞,但WinXP用户无法获得补丁更新,继续使用IE6-IE8浏览器的XP用户将面临严重风险.这是微软停止对XP支持后首个重大漏洞,安全软件正迎来第一次大考,国内安全厂

一个魔兽玩家的200天:停服那刻好得让人心酸

在这之后,<魔兽世界>的新闻依旧层出不穷,王其成也还保持着关注,偶尔他也只是玩玩<魔兽争霸>之类的游戏当着休闲,不过他的内心已经不再那么有波折.一个魔兽玩家的200天:停服那刻好得让人心酸( 腾讯科技配图) 腾讯科技特稿对于500万的中国玩家来说,<魔兽世界>就像是一曲跳动的乐章充满悲欢离合.尤其对于大四学生王其成而言,魔兽世界更代表着他一段甜蜜而心酸的记忆. 王其成是一名大四的学生,也是一名忠实的<魔兽世界>玩家,与很多玩家一样,在<魔兽世界>

《水浒Q传》运营团队公告:遭恶意攻击被迫停服

12月3日上午消息,金山<水浒Q传>运营团队发布公告称该游戏的服务器端遭<水浒Q传>开发商火石软件恶意植入自杀性代码,造成服务器无法启动相关数据遭到破坏,全区被迫停服. 11月19日上午,火石软件今日发布代理商更换公告,公告中表示<水浒Q传>将结束同金山的运营合作.同时,火石软件将向畅游公司提供<水浒Q传>技术支持和版本更新,并将这款游戏更名为<大话水浒>. 而今日有媒体称<水浒Q传>代理权变更,由于未进行老玩家数据资料转档,众多老玩

5月停服事件致部分魔兽世界玩家跳槽

九城就财产损害赔偿与 商业诋毁正式将暴雪告上法庭,因大面积停服事件<魔兽世界>成都玩家纷纷跳槽. 围绕着 中国市场最赚钱游戏<魔兽世界>的代理权易主风波,九城.网易.暴雪三方的纠缠还在持续升温.就在九城向<魔兽世界>开发方暴雪发起诉讼之时,即将正式接手<魔兽世界>运营的网易昨天发布声明,就玩家所关心的服务器开放时间问题做了说明. 九城将暴雪告上法庭 由美国暴雪开发.中国"第九城市"代理运营4年的网络游戏<魔兽世界>,每年都为第

XP停服后首个重大漏洞来袭 安全软件迎大考

摘要: 4月28日电 日前微软证实,所有版本IE浏览器出现一处高危漏洞,黑客可利用漏洞远程攻击用户电脑,进而删除或盗取受害用户数据.微软官方表态正在修复此漏洞,但WinXP用户无法获得 4月28日电 日前微软证实,所有版本IE浏览器出现一处高危漏洞,黑客可利用漏洞远程攻击用户电脑,进而删除或盗取受害用户数据.微软官方表态正在修复此漏洞,但WinXP用户无法获得补丁更新,继续使用IE6-IE8浏览器的XP用户将面临严重风险.这是微软停止对XP支持后首个重大漏洞,安全软件正迎来第一次大考,国内安全厂

9i迁移数据文件 过程

过程|数据 --9i迁移数据文件 过程 1.查看视图 select * from dba_data_files 确定要移动的数据文件 "位置" 和 "名称" 源位置和名称 : '/home/oracle/product/92/oradata/adp/users02.dbf' 目标位置和名称: '/home/oracle/oradata/adp/users02.dbf' 2.停掉数据库 shutdown  immediate; 3.拷贝源数据文件到制定位置 cd /h

微软与360合作提供XP停服后安全服务

  微软中国官微宣布与360公司展开合作,为中国XP用户提供安全防护服务,以及Windows8升级方案.今年1月,微软曾宣布XP将于2014年4月8日停止服务.而根据第三方数据,中国目前至少有2亿用户仍然使用XP. 早在今年2月26日,360就宣布将在Windows XP停服后,继续提供安全防护.2月28日,360公司推出了360安全卫士"XP盾甲",并表示XP用户在网购程中,如果因为木马或钓鱼网站遭遇经济损失,可获得360网购的先行赔付. 以下为微软中国官文全文: "为了更