大数据领域正在发生巨变。有更多的数据被创造、存储和迁移,而企业比以往任何时候都更加渴望从中获取价值。
对数据增长的预测令人震惊。美国计算机科学公司(CSC)估计,到2020年,超过三分之一的数据都会途经或存放于云端。数据存储厂商易安信(EMC)表示,数字世界的规模目前每两年就要翻上一番,待到2020年,每年生成和复制出的数据将达到44ZB。
按照思科(Cisco)的说法,要不了五年,智能手机的网络流量就会超过电脑的网络流量。该公司预测,到2020年,电脑在网络流量中的占比将只有29%,而智能手机将占到30%。而若仅就物联网而言,麦肯锡全球研究所(McKinsey Global Institute)预计,到2025年,嵌入式传感器和联网设备对世界经济的贡献将高达6.2万亿美元。
如何对迅猛增长的数据量进行有效管理?这已经成为一大难题。Unisphere Research近日对身为独立甲骨文用户联盟(Independent Oracle Users Group,简称IOUG)成员的数据管理者和数据专业人士进行了一项调查,发现数据足迹的实例数量和规模大小都在膨胀,给管理者带来了不小的挑战。据甲骨文(Oracle)赞助的《迅速加快的云事业:2015年IOUG数据库可管理性调查》(The Rapidly AcceleratingCloud-Enabled Enterprise: 2015 IOUG Survey on Database Manageability)报告显示,大多数受访者称他们的数据量每年增长10%以上;至少38%的受访者称他们的公司管理着至少100个不同的数据库,较2013年的调查结果(25%)有所上升。
数据库规模方面,10%的受访者称数据规模每年在以超过50%的速度增长,另外28%的受访者称增速超过20%。这项调查发现,为了维护数据环境的通用性和一致性,市场对自动化和主动式管理的需求均有所上升。
随着企业从墨守成规向创新转变,易安信赞助的另一项IOUG调查发现,虽然很多企业继续通过添加更多的存储阵列和服务器等硬件来应对令人头疼的数据库和数据中心挑战,但提高效率的进阶方法也越来越受关注。整合、自动化和虚拟化便是三种直接关系到这些受访者所在企业未来能力的数据管理方法。
总而言之,随着数据种类、数据量和处理速度的增长,需要采取新的数据管理方法。如今,数据湖使企业能够积累大量数据以供将来分析,云技术为企业获得所需技术和服务大开方便之门,人工智能则有望主动简化数据管理。开源技术对大规模数据处理的价值也越来越受关注,比如Spark和Hadoop,以及能在通用硬件上运行、支持非结构化和非关系型数据的各种NoSQL数据库变体。此外,数据发现和数据可视化对普通商业用户大有好处,不断发展的物联网提供了大量的实时数据分析机会,还有各种各样的方法可以从新的数据源中获取价值。
为了应对IT行业的迅速变迁,有些公司甚至进行重组,希望以此令自己处于最有利的地位,牢牢抓住新的机遇。在过去的一年里,很多引人注目的并购和拆分已经或即将完成,有些行业专家预测科技企业在证交所挂牌上市的数量将出现增长。
为了帮助企业继续充分利用他们的数据,美国《大数据季刊》(Big Data Quarterly)发布了第二届年度“大数据企业50强”榜单。就管理数据和从数据中获取价值而言,榜单上这些具有前瞻意识的企业正在为我们创造新的可能。
本文转自d1net(转载)