2013大数据趋势:SQL阵营更活跃

大数据在2012“一飞冲天”,它将会以一种戏剧性的方式改变数据管理的各个方面。大数据系统已经给机器生成数据管理、连续的ETL、操作型BI、动态数据以及基于云的数据仓库都带来了变化。

随着大数据发展进入2013年,已经没有什么技术能比NoSQL数据库和Hadoop更活跃了,它们都有着更大的提升空间。根据MarketAnalysis.com 2012年的一份报告看,单单是Hadoop MapReduce市场,预计复合年增长率将达到58%,在2018年将达到22亿美元的规模。

不过,NoSQL和Hadoop的出现主要是为应对非结构化数据,比如文本数据或者web日志。就像Apache Hadoop一样,这些技术通常是从开源发起,
然后逐渐成为新的商业产品。

Judith Hurwitz是Hurwitz and Associates公司的总裁兼CEO,她认为大数据架构和大规模并行处理大大改变了数据应用现状。她说:“在此之前,即便数据真的对公司很重要,人们也并不是真正有能力获取海量数据并实时分析。而现在,原来无法实现的目标已经触手可及。”

SQL阵营的逆袭

从2012年开始,关于主流关系型数据库将走向没落的评论就此起彼伏。观察者认为,同上文提到的技术相比,SQL 关系数据库未来几年在应对大数据时将失去以往的竞争力。

这一趋势背后的推动力是企业希望以
更快的速度获取更多非结构化数据,这样才能更加依靠数据驱动做决策。习以为常的数据处理方式正在经历变革,以便更好地融入新的技术。

对于那些传统的关系型数据库厂商,过去一年中拥抱大数据以及Hadoop的例子也有很多:

IBM不断收购一些高级数据分析公司,以扩充大数据产品线。蓝色巨人的努力方向从小的改进(比如,针对DB2 10的NoSQL图形存储和InfoSphere Warehouse 10)到颠覆性的PureData一体机,都是为了帮助客户搞定大数据。

甲骨文在2012年初推出了大数据机(Big Data Appliance),又在近期发布了Oracle NoSQL数据库2.0版本,该产品已经自动实现重新平衡,新的应用编程接口可以处理大对象并与Oracle数据库有更紧密的集成,还可以支持直接用SQL查询Oracle NoSQL数据库记录。

微软展示了Hadoop对Windows
Azure和Windows Server支持的预览;Teradata公司发布了其Aster大数据分析产品;而Informatica公司发布了PowerCenter套件的大数据版,据说消除了Hadoop手工编码的需求,它把编程任务带入了Informatica开发环境。

大数据永远不会存在谁取代谁的问题,SQL虽然在过去一年中遭受了冲击,但是它并不会走向衰落。正相反,一些NoSQL和Hadoop方面比较专业的公司也在SQL方面做了许多努力。一个典型的例子是Hadoop初创公司Cloudera,通过Impala来提升Hadoop与SQL的协作程度。Impala是一款Hadoop软件产品,支持标准SQL做交互式查询。

大数据变革

大数据变革也带动了数据库技术的前进,现在我们看到SQL与NoSQL从对立更多地走向了融合。事实上,在大数据早期的讨论中,传统关系型数据库技术是被忽视的。

流媒体数据库厂商SQLstream的副总裁Ronnie Beggs表示:“在过去的几年里,由于大数据的崛起,SQL作为主流技术遭受了一定的冲击。大数据更多地和NoSQL联系在了一起。”

他人为在2013年,我们应该会看到明显的变化。在最近几年已经有很多努力在使NoSQL数据库更好地适应SQL数据库的风格。

Beggs说:“大数据是不断变化的,我们接下来这一年会看到的是SQL归来,它将作为所有大数据平台的接口。”

Hadoop、NoSQL和SQL共存的方式,标志着大数据在成熟度方面迈进了新的一步。随着2013年开启,大数据有可能从一个热门话题逐渐转向落地实践。

Ashland BI研究机构的总裁和创始人Colin White表示:“我认为人们正努力通过大数据的炒作,来真正理解其商业价值。在2013年,我认为我们将看到人们从大数据获得商业价值的更好的例子。这不是关于大数据的问题,而是你用大数据做什么的问题。”

虽然对新技术有广泛的兴趣,但不同公司对于接受全面大数据系统的速度也会有所不同。

一位系统集成商在金融行业的活动上向TechTarget记者表示,银行作为一个领域,只有部分涉足了基本的大数据,而不是全部。银行和其它领域只看到了大数据的数量,而没有留意到它的非结构性。至少目前还是这样。

他说:“大数据的含义有两部分。第一部分是它们的量很大,第二部分是数据是非结构化的。银行明显属于第一部分。但是我们不会去收集tweets这样的社交数据,至少目前还没有。我们还在观望,看金融数据服务市场的其他用户如何处理它。”

(责任编辑:吕光)

时间: 2024-09-10 05:49:05

2013大数据趋势:SQL阵营更活跃的相关文章

大数据推动信息安全产品更智慧

文章讲的是大数据推动信息安全产品更智慧,2013年最热门的科技词汇非"大数据"莫属,其相关书籍长期霸占各大畅销书排行榜,人们对于大数据给出了前所未有的关注度.大数据所带来的新思想,正在逐步渗透进每一个行业,改变着我们每一个人作为数据创造者的思维方式.大数据问世之前,正是互联网.云计算.物联网等技术快速发展的时期,而随着智能终端.数字城市等信息体的普及和大范围建设,任何人任何时刻在任何地点都在产生数据,全球数据量出现爆炸式增长,大数据时代已经到来.大数据的出现为信息安全带来了巨大的挑战也

共话大数据 2013大数据全球技术峰会召开

2013年4月26日,由51CTO传媒旗下WOT(World of Tech)品牌主办的"2013大数据全球技术峰会"在北京富力万丽酒店正式举办.本次峰会聚焦大数据技术,围绕大数据基础架构与上层应用的生态系统,探索大数据基础的解决方案,全面剖析了数据从产生到挖掘到最后被消费的整个过程. 本届峰会为期2天,吸引了全球1000多位大数据领域的专业人士.企业及政府用户.技术专家.行业分析师和媒体共聚一堂,共同交流大数据时代的机遇和挑战,探讨在传统企业应用.新兴行业拓展的创新. 工信部软件与服

大数据趋势下,服务风暴必将来临

关于大数据讨论沸沸扬扬,国外厂商齐发力,推出不少大数据产品.那么国内厂商该如何应对大数据的机遇和挑战呢? 近期,中国电子信息产业发展研究院(CCID)日前发布<2011年中国数据库软件市场研究报告>(以下简称<报告>).预测2012年中国数据库软件市场规模预计达到38.71亿元,将比2011年大幅增长20.6%,以人大金仓为首的国产数据库软件市场规模预计达到3.29亿元,比2011年增长26.5%,呈现爆炸式增长.报告指出预计到2020年,世界上的数据存储总额将达到35ZB,大数据

5个大数据趋势将改变渠道模式

在大数据时代,最受渠道欢迎的两大技术就是存储和备份,包括产品和服务.企业利用这些设备和技术可确保在需要的时候完成关键任务,归档和数据非结构化处理.但这些技术存在的问题是,他们中保存的数据是无益的. 换句话说:存储数据使企业花钱且徒劳. 进入大数据时代,很多供应商充分利用大数据趋势将竞争产品和服务推向市场.有人说,大数据只是一个重新包装的数据挖掘和商业智能分析,在一定程度上,这是真的.这也反映出企业不能再承受闲置数据的成本. 处理数据已经是一门大生意.根据德勤数据显示,企业软件销售总额今年将超过2

大数据怎么让生活更安全?

随着科学技术的发展,大数据这一依托于计算机及互联网技术发展起来的新事物一跃成为万众瞩目的焦点.大数据是一把双刃剑,既推动着社会进步,又给信息安全形势带来威胁,那么该如何运用大数据,从而让生活更加安全呢? 360企业安全集团总裁.2016ISC中国互联网安全大会大数据论坛主席吴云坤表示,近年来电信诈骗猖獗,伪基站信息泛滥,因网站或平台被攻击,导致个人信息泄露的事件屡见不鲜,在这种背景下,大数据安全技术作为海量数据实时分析处理的新兴技术,可以为安全生活提供保障. 吴云坤认为,大数据可以让生活更安全有

2013大数据暨移动应用高峰论坛

2013年11月7日13点30分,由IT商业新闻网主办.IT时代周刊.全国CIO/CTO俱乐部协办的"探索·发现"2013大数据暨移动应用高峰论坛将在北京隆重举行. 本届论坛邀请了国家企事业单位CIO.知名互联网企业CTO.全国高新技术园区代表.第三方市场研究机构代表.协同办公领域.APP开发者代表.信息化专家等参与话题讨论,共同探讨大数据.移动互联网的生态系统构建! 高峰论坛签到处 目前,确认参加本届论坛的嘉宾有,商务部信息化与电子商务司副巡视员聂林海.国家信息中心专家委员会副主任宁

2013大数据揽金186亿 投资者趋理性

怪不得这几日净是关于大数据的新闻,原来Structure Data 2014召开了,众多数据分析领域的大佬们都亲临会场,看来大数据要继续"火"-- Wikibon:增长58%,2013大数据揽入186亿美元 据第三方研究机构Wikibon发布的报告显示,2013年,全球大数据市场总收入达186亿美元,相比于2012年,增加了58%,其中硬件.软件和服务所产生的收入占比分别为38%.22%和40%. 在这报告中,2013年大数据市场营收前三强分别为IBM.HP和Dell,SAP.Tera

----------------------大数据量sql问题

问题描述 ----------------------大数据量sql问题 数据库:GP问题:A表中有一列a,记录总数为1000w:B表中也有一列a,记录总数为500w: 现在需要塞选A.a在B.a出现过; sql怎么写效率高?select count(distinct a) from A where a in (select B.a from B); select count(distinct A.a) from A left join B on A.a=B.a where B.a<>null

图说港城:2013大数据蓝海时代高层峰会秦召开

峰会现场.王继军 摄 长城网秦皇岛5月22日电(李兴双 王继军)今日,秦皇岛经济http://www.aliyun.com/zixun/aggregation/7332.html">技术开发区与中国IDC产业联盟网共同承办的"2013大数据蓝海时代高层峰会"在该区数谷大厦召开.来自中科院.北京大学等知名院校和企业的相关人士共聚一堂,共同探讨数据产业发展,共同打造中国"数谷". (责任编辑:蒙遗善)