分析数据库服务(ADS)极速驱动大数据商业变革

根据IDC 2013年发布的数字宇宙研究报告(Digital Universe)显示,在接下来的8年中,我们所产生的数据量将超过40 ZB(泽字节)!作为大数据特征中最重要的Volume(容量)、Velocity(数据生产速度)的两个原始特征都在发生急剧变化,使得数据处理从业务系统的一部分演变得愈发独立,企业需要加速数据分析和挖掘过程,并由报表展现为主到强调数据洞察转型,让数据直接快速产生价值(Value)。

 

在业务系统中,我们通常使用的是 OLTP(OnLine Transaction Processing ,联机事务处理)系统来处理数据,如 MySQL、Microsoft SQL Server、Oracle等关系数据库,这些数据库对应到我们云上的产品,便是RDS等关系数据库服务。这些关系数据库系统擅长事务处理,在数据操作中严格遵循ACID原则,能够很好的支持高并发的数据插入和修改;但是一旦需要进行统计分析类计算并且记录数超过千万甚至十亿级别,或需要进行非常复杂的计算过滤时,OLTP类数据库系统便力不从心了。

 

另一类计算系统,则更适合海量数据以固定的模式进行分析和处理,例如开源的Hive(Hadoop底层)、SPARK SQL(SPARK

底层)离线计算系统,以及阿里云上的ODPS开放数据处理服务等,可以计算万亿条,数百TB甚至更多的数据,但是一般很难应对需要高并发(例如100QPS以上)或者实时响应(计算响应时间在3s以下)的业务场景。

 

而分析数据库服务ADS,是一套RT-OLAP(Realtime OLAP,实时 OLAP)系统。在数据存储模型上,采用自由灵活的关系模型存储,可以使用 SQL进行自由灵活的计算分析,无需预先建模;而利用分布式计算技术,ADS可以在处理百亿条甚至更多量级的数据上达到甚至超越MOLAP类系统的处理性能,真正实现百亿数据毫秒级计算。

 

ADS让海量数据和实时与自由的计算可以兼得,实现了速度驱动的大数据商业变革。一方面,ADS拥有快速处理百亿级别的大数据的能力,使得数据分析中使用的数据可以不再是抽样的,而是业务系统中产生的全量数据,使得数据分析的结果具有最大的代表性。而更重要的是,ADS采用分布式计算技术,拥有强大的实时计算能力,通常可以在数百毫秒内完成十亿百亿的数据计算,使得使用者可以根据自己的需求在海量数据中自由的进行探索,而不是根据预先设定好的固定逻辑查看已有的数据报表。

 

同时,由于 ADS 能够支撑较高并发查询,并且通过动态的多副本数据存储容错机制以及长尾容忍技术来保证较高的系统可用性和延时稳定性,所以能够直接作为面向最终用户(End User)的产品(包括互联网产品和企业内部的分析产品)的后端系统。如淘宝数据魔方、淘宝指数、快的打车、阿里妈妈达摩盘(DMP)、淘宝美食频道等拥有数十万至上千万最终用户的互联网业务系统中, 都使用了 ADS。

 

ADS作为海量数据下的实时计算系统,给使用者带来极速自由的大数据OLAP分析体验以及极好的兼容性,期待和各位一起加速数据业务转型。

 

目前ADS已在阿里云上正式开始公测,我们欢迎有各类相关需求的用户使用ADS并向我们提出宝贵的建议。

 

ADS公测地址: https://i.aliyun.com/inviteapply?spm=0.0.0.0.42oHFX&agent_id=95

时间: 2024-11-06 07:19:51

分析数据库服务(ADS)极速驱动大数据商业变革的相关文章

电子科技大学教授周涛:大数据商业变革

        2013年8月29日中国(成都)移动电子商务年会在成都世纪城天堂洲际大酒店盛大开幕.本届大会以"移动电商.创新未来"为主题,由协会.企业.第三方机构及政府联手,突出揭示移动互联网对城市发展.人文生活.商贸零售的重大影响,全面展现移动电子商务生态圈发展现状. 在延续前两届年会的基础之上,本届年会将集中展现中国乃至国际的移动互联网和移动电子商务发展的前沿思路及我国政府的政策观点,通过主题峰会.专题论坛.高端对话.互动展示.高层沙龙等多种形式,深入探讨我国移动电子商务产业的发

CAAI演讲实录|微软邓力:驱动大数据人工智能多种应用的三类深度学习模式

8月26日至27日,在中国科学技术协会.中国科学院的指导下,由中国人工智能学会发起主办.中科院自动化研究所与CSDN共同承办的2016中国人工智能大会(CCAI 2016)在北京辽宁大厦盛大召开,这也是本年度国内人工智能领域规模最大.规格最高的学术和技术盛会,对于我国人工智能领域的研究及应用发展有着极大的推进作用.大会由CSDN网站进行专题直播,并由百度开放云提供独家视频直播技术支持. 在26日的主题报告环节,微软人工智能首席科学家.IEEE Fellow邓力博士做了<驱动大数据人工智能多种应用

技术与商业激烈碰撞 大数据商业应用与实践峰会成功举行

ZD至顶网CIO与应用频道 07月08日 北京消息: 7月6日下午,由36大数据联合搜狐科技.物联中国.至顶网.人民网.泡泡网等多家媒体共同举办的"大数据商业应用与创新峰会"在北京火爆召开.这场行业盛会吸引了来自IBM.亚信数据.聚合数据.诸葛io.互利科技.神策数据.海云数据.万象等众多公司的业界 精英参与.与此同时,36大数据创始人刘金玲首次对外公布了公司新品牌LOGO--Datajoy. 图1 大数据商业应用与创新峰会在京举行 图2 活动现场座无虚位 随着去年国务院<关于促

探讨:数据驱动型企业与大数据商业模式

本文讲的是探讨:数据驱动型企业与大数据商业模式,2012年7月13日消息,2012第二届大数据世界论坛今天在北京开幕.本次论坛邀请了Forrester Research资深分析师曹宇钦 .IDC中国高级分析师周林等权威第三方咨询机构;微软亚太研发集团首席技术官孙博凯.赛仕软件中国总经理刘政.甲骨文大中华区技术总经理喻思成.Splunk亚太及日本区域副总裁刘文熙等业界主流厂商高层;以及支付宝首席商业智能官车品觉等来自金融.电信.电子商务.制造业等重点应用行业的用户嘉宾等都将与会于业内专业人士面对面

《深入理解Hadoop(原书第2版)》——1.6大数据商业用例

1.6大数据商业用例 在商业界,大数据和Hadoop都有很多应用案例.再从以下三个方面总结大数据的特征: 数据量(Volume) 处理速度(Velocity) 数据多样性(Variety) 数据量是指系统能够处理的数据量的大小.如果你们部门每天晚上都要在两个小时内获取.加载并传输2TB的数据,你就会面对数据量的挑战. 处理速度是指当大量数据来到时,系统的处理数据能力.像Facebook 和 Twitter 这样的公司就碰到了数据处理速度的问题.这些公司每秒钟都会收到海量的短信息(tiny mes

物联网技术如何驱动大数据

10月31日,美国泛达公司数据中心全球总监罗伯特•丹奈利在江苏无锡国际物联网金融高峰论坛上对物联网技术如何驱动大数据进行了阐述.他表示,过去二十年的科技达到了指数级的增长,变革性的技术对金融业有着非常有趣的影响. 罗伯特表示,通过物联网,我们可以看到车辆.轮船等工具的使用情况,集装箱货物的实时情况以及某个资产的使用情况.比如,车辆的驾驶员喜欢开快车还是保守驾驶.由此,针对不同的行为产生不同的保险.同样,在资本市场上,如果能够获得更多的顾客资讯,就可以更好地管理资金.而物联网等技术就可以提供更多的

中国企业用户准备好大数据营销变革了吗?

上周五下午,本人有幸参加了哈佛商业评论和IBM公司共同组办的<大数据时代下的营销变革>的研讨会.本人也从这个会议上收获良多,而最主要的是今天面对媒体.企业对于大数据时代的狂轰乱砸下,在企业中真正做营销的人,如何来看待大数据? 这次研讨会,哈佛商业评论请了不少企业界的代表,有传统的,也有互联网的新贵.虽然不同的企业对于数据的应用不同,但是一点是肯定的,大家都知道了数据是有价值的.不过对于如何挖掘数据的价值,却是真正知道的人很少很少. 这里有几点,通过与会企业代表的发言,我看到的中国企业在面对即将

从网络广告透视大数据商业密码

2月底,在美国好莱坞第85届奥斯卡金像奖颁奖礼上,李安凭借<少年派的奇幻漂流>荣获最佳导演.有意思的是,这是微软研究院专家David Rothschild通过大数据分析预测的本届奥斯卡各奖项归属中,唯一出错的一个--David Rothschild对奥斯卡主要奖项其他各项奖的预测则全部命中.更早些时候,在2012年美国总统大选中,他还正确预测了51个选区中50个地区的选举结果,准确性高于98%. 这只是一个缩影,2012年以来,大数据已经在越来越多的领域和场合被人熟知,大数据的呼声此起彼伏,无

百分点眼中的数据决策力及大数据商业场景

11月24日,北京又是一个雾霾天,整个北京城都貌似被笼罩在其中,由于北京奥运会的申办,鸟巢水立方成为京城的标志性建筑之一,同时带动了周边的商业氛围,企业级大数据技术与应用服务商百分点集团便坐落于此处. 24日,正值感恩节之际,百分点的办公室内装饰着各种鲜花甜点,给人一种轻松惬意的感觉.见到媒体朋友,刘钰热情的跟大家打招呼,并进行会前沟通. 作为百分点集团战略和运营副总裁,刘钰长期关注于大数据领域技术与应用,聊到数据决策力,刘钰变得侃侃而谈."数据决策力是百分点首次提出大数据在企业落实中极为重要的