从2015硅谷Strata大会看:数据库的发展现状与前景

Strata+Hadoop World(SHW)大会是全世界最大的大数据大会之一。

SHW大会为各种技术提供了深度交流的机会,还会看到最领先的大数据技术、最广泛的应用场景、最有趣的用例教学以及最全面的大数据行业和趋势探讨。

https://yqfile.alicdn.com/ed52f5c03989d443cd07c419add8a2409f578ec6.png" >

SequoiaDB 作为现场的参展商之一,也是中国唯一一家参展的厂商,我们也在展会中着重了解了跟我们的产品息息相关的部分,也就是新型数据库。大会现场不仅有多家参加演讲和展示的数据库厂商,更有许多的数据库资深研发人员和架构师来到现场。为此,我们也总结了一些有关数据库的资讯和未来数据库领域发展的预测。

  1. 新型数据库的不断壮大

众所周知,关系型数据库已经出现了近40年,并且在很长一段时间里一直是数据库领域当之无愧的王者。如今,新型数据库,包括NoSQL以及NewSQL两种主要类型,这位后起之秀正在进入越来越多的应用领域。

新型数据库厂商的参加也是本届SHW大会亮点之一,其中有NoSQL界的佼佼者,如Couchbase、Aerospike、Marklogic和SequoiaDB等,也有NewSQL的许多厂商,如:MemSQL、VoltDB、ScaleDB和CitusDB等等。这些企业在现场和Cloudera、Hortonworks这些大数据领头羊一样,得到了广泛的关注。

随着“大数据时代”的到来,在高并发、大数据量、分布式以及实时性的要求之下,传统的关系型数据库,因为其数据模型以及预定义的操作模式,在很多情况下不能很好的满足以上的需求,所以新型数据库如今在大数据的场景下,取代了传统关系型数据库成为主导。相信未来随着大数据的发展,新型数据库将会颠覆数据库领域。

正如MemSQL的CTO Eric Frenkiel在主题演讲中说道:“We need a new kind of database to do things we have never done before!”

  1. SQL与Hadoop的集成遇到了挑战

值得注意的是,除了NoSQL等新型数据库技术以外,传统的数据库厂商也在寻求能让关系型数据库完美对接Hadoop等大数据架构的方法,但是仍然没有找到能很好解决的方法。

展会上,IBM的工程师们分享了他们在SQL与Hadoop的结合上进行的尝试。其中提到,SQL和Hadoop的对接主要的难点之一是SQL语句如何在Hadoop上执行,因为Hadoop的文件系统HDFS的设计并不能有效的运行SQL。IBM则正在探究如何更好的解决这一个SQL和Hadoop对接的核心问题。大会上IBM分享的就是基于IBM的BigInsight的BigSQL实现的SQL与Hadoop对接。

同样作为传统RDBMS领头羊的Oracle也在大会上发布了最新版的Oracle BigDataSQL以及Oracle NoSQL等等大数据产品。

这些RDBMS先驱们的这些举动也从侧面说明了,新型的数据库的出现不仅很有必要,而且完全有能力替代很大一部分关系型数据库的应用场景。

  1. 大数据架构加强对NoSQL的支持

NoSQL在数据库领域的影响力日渐壮大,领头羊MongoDB,Cassandra和Redis已经在DB-Engine的数据库排名上进入了前十。所以许多的大数据架构、平台也都在越来越强化对于NoSQL数据库的支持。

Cloudera的CTO, Amr Awadallah 在他的演讲中介绍了未来Hadoop的发展规划,其中很重要的一点就是加强对NoSQL数据库的支持:“We will improve the integration with NoSQL database to make Hadoop more versatile.”

无独有偶,在另外一场主题演讲中,Databricks的CTO Matei Zaharia,也介绍了Spark 在2015年的新的发展方向,包括新增机器学习的流水线功能,R语言的集成,当然也包括了更好的支持NoSQL数据库。

可以看到,NoSQL数据库在大数据生态系统中的作用和地位正在不断的提升,相信在大数据渐渐普及的将来,NoSQL甚至有希望取代关系型成为数据库的先锋。

总结:

数据库作为底层的数据存储和管理工具,是大数据生态系统中不可或缺的一环。传统的关系型数据库已经存在了几十年,虽然有其适合的场景,但是对于大数据的应用下,存在较多的局限性。新型的数据库是本届SHW大会的焦点话题之一。高性能、高可用、灵活的数据结构等等主要特性,都让他成为大数据存储分析的不二之选。所以我也希望大家能更多的关注新型数据库的发展。

https://yqfile.alicdn.com/cc04e64694525175935cbe7f061bbb54ed6fa81c.png" >

文章转载自 开源中国社区 [http://www.oschina.net]

时间: 2024-09-22 02:16:12

从2015硅谷Strata大会看:数据库的发展现状与前景的相关文章

15张图表看清人工智能发展现状

◆ ◆ ◆ 导读 人工智能领域的融资总额一直在逐年稳步增长,从2010年时的2亿美元到2013年时的6亿美元,再到2015年时的12亿美元.在2016年的第一季度,人工智能领域已经融到逾4亿美元的资金,这个水平跟2015年同期旗鼓相当,而全年甚至有望更上一层楼. 2016年4月,谷歌(Google)首席执行官桑德尔·皮蔡(Sundar Pichai)在一封致股东信中,把机器学习誉为人工智能和计算的真正未来. 人工智能公司的规模有多小呢?真的很小:人工智能领域有九成公司的员工人数少于50人.不仅如

上海威博看移动电子商务发展现状

&http://www.aliyun.com/zixun/aggregation/37954.html">nbsp;   随着3G时代的到来,移动终端和互联网的融合成为必然趋势,移动电子商务就成为各大网商提前竞逐的领域.截止到今年上半年,中国移动电子商务实物交易规模达到13亿元,用户规模已达到5531.5万.艾瑞咨询预计2012年我国移动电子商务用户将接近2.5亿.种种迹象表明,电子商务竞争的战火正烧向移动互联网领域. 移动电子商务最初以移动支付应用为主,电信运营商的"手

DB-Engines:2015年10月份全球数据库排名

DB-Engines 刚发布了 2015年10月份的数据库排名.DB-Engines 排名的数据依据 5 个不同的因素,详情请看 ranking method. 2015 年 10 月排行榜中排名前三的是:Oracle,MySQL 和 Microsoft SQL Server.其中 MongoDB,Cassandra 和 Redis 相比去年上升趋势明显. 完整排名请看这里:http://db-engines.com/en/ranking 下图是每个数据库的变化趋势,可看出变化的幅度不大: 20

2015全球云计算大会 本土云服务商唱主角

"云计算"这个概念自2006年谷歌CEO官埃里克·施密特(Eric Schmidt)在搜索引擎大会(SES San Jose 2006)提出后,经历了近两年的爆发性增长,对于中国企业级IT来说已经不是什么新鲜事了.云计算已经被许多企业.政府部门认可和接受,很多IT企业随着发展也在考虑转型,突破现有商业模式,寻找下一个商机. 9月8日,2015全球云计算大会·中国站在上海举行,这已经是大会"落地"中国的第三个年头.今年的大会从云经济和战略.技术架构和企业应用.行业应用

GE医疗亮相2015中华医院信息网络大会

本文讲的是GE医疗亮相2015中华医院信息网络大会,2015年6月11日消息,以"数据分析助力整合性医疗"为主题的医院信息化发展研讨在2015中华医院信息网络大会期间隆重举行.活动上,GE医疗重磅推出业界领先的全面数据覆盖信息化解决方案 -- 医疗智能管理平台(ICM),该平台能有效帮助医院管理者及时做出管理决策;同时,GE医疗还分享了Centricity企业级影像解决方案(Centricity Solution for Enterprise Imaging)的进展及临床应用,与来自全

你的指纹还安全吗? - BlackHat 2015 黑帽大会总结 day 2

0x00 序 今天是Black Hat 2015第二天,第一天的大会总结请参考: 看黑客如何远程黑掉一辆汽车 - BlackHat 2015 黑帽大会总结 day 1 0x01 TRUSTKIT: CODE INJECTION ON IOS 8 FOR THE GREATER GOOD 本来打算去听shendi的TrustZone crack的talk,但是因为shendi的visa没有办下来,最后就给cancel了.于是去听了这个iOS injection的talk. Talk首先介绍说在iO

领航新一代安全 网康科技亮相2015中国网络安全大会

2015年度信息安全领域最大规模.最具专业性的会议--2015中国互联网安全大会,将于2015年9月29日-30日在北京国家会议中心举办. 作为国内知名的网络安全厂商,网康科技受邀参加本次ISC大会.网康科技"轩辕战队"资深安全专家将亲临现场,与观众一起就企业安全发展新趋势进行探讨. 下一代失陷主机检测方案重磅亮相ISC2015 本次大会中,网康科技创始人.CEO袁沈钢先生受邀作为企业安全管理分论坛主席参与本次盛会,将同众多业内专家一起探讨新常态下的企业安全管理战略. 同时,网康科技执

央视:2015两会十大看点,哪些与咱息息相关?

[2015年全国两会开幕时间敲定:人大.政协分别在3月5日和3月3日]第十二届全国人民代表大会第三次会议和政协第十二届全国委员会第三次会议,将分别于2015年3月5日和3月3日在北京开幕.全国人大常委会办公厅和全国政协办公厅今天宣布,记者报名截止日期为2月25日. [2015两会十大看点!]①2015是改革关键年,将有哪些关键之举?②新常态下,GDP增速会下调吗?③2015年,还会有哪些"大老虎"被揪出?④如何让呼格吉勒图等冤假错案不再发生?⑤户籍改革等民生福祉有啥期待?⑥保护生态环境

2015年RSA大会预览:过度关心物联网合理吗?

IT安全专业人士的最大年度盛典即将举行,虽然今年最受关注的话题仍可能是物联网安全,但专家认为企业更应该专注其他话题. 2015年RSA大会将于4月20日到24日在旧金山的Moscone中心举行,其中将有近十几个研讨会以物联网(IoT)为重点.由于物联网涵盖了传统上没有被赋予互联网连接的各种设备,很多人认为保护IoT是企业面临的越来越迫切的问题. 然而,451研究所安全研究主管Wendy Nather表示,现在而言,IoT可能只不过是没有参与IoT设备实际制造的信息安全专业人员好奇的事物,并指出,