大数据落地难 Hadoop要“负责”!

  大数据落地难,业内对此广有共识。“我们在全球有7900家用户,在亚太有1000家以上的用户,在中国有150家用户,这些用户的应用都是落地的。” ">Splunk 中国区销售总监侯海龙说。

  侯海龙表示,为什么大数据应用落地难?很大一部分原因在于Hadoop,用户对于开源总有兴趣亲自尝试一下。但无论Map/Reduce,还是YARN都不是那么简单易用,数据建模就像一座山,横亘在用户的前面,让应用不容易落地。对于互联网企业,由于人才上的优势,尚有能力克服困难,但对于行业/企业等商用用户来说,技术上的瓶颈不是那么容易跨越的。

  Splunk北亚区经理麦永光指出,很多行业/企业用户对于大数据非常重视,他们会首先成立一个大数据的部门,研究大数据应用。他表示,在这种 情况下,应用常常难以落地。Splunk大数据的角度有所不同,不是从大数据入手,而是从用户面临的问题着手,用Splunk大数据的方式解决问题。

  “国内对大数据的认识,还是停留在数据大的初级阶段。” 侯海龙说。

  根据介绍,大数据应用和数据从哪里来、数据大小、格式等没有太多的关心。大数据的重点应该集中在给需要数据的人,提供重要的可见度,快速找到答案。在过去的30年,人们一直使用关系型数据库,采用SQL进行检索和查找;但随着大数据应用的模式,新的分布式数据库的数据组织模式替代了关系型数据库,搜索引擎技术取代了SQL,从而让数据分析和使用的能力有了非常大的进步。

数据分析走出关系型数据库阶段

  通过对机器大数据地分析,人们可以迅速定位故障,从而减少MTTR(Mean Time To Restoration, 平均恢复前时间)时间;提高系统的在线时间和能力;整合工具;通过数据分析驱动创新,同时也可以使用数据服务商业用户。通过机器大数据分析,可以增强用户 对于业务的实时洞察力,从而让系统管理从被动走向主动应对。

大数据应用给我们带来了什么

  据了解,Splunk提供了专业的数据存储和处理方式,通过检索手段,用户就可以对数据之间的关联性进行挖掘和探索。用户不需要建模,也不需要关心Map/Reduce,检索让用户直接上手,查找数据,发觉数据背后所蕴藏的价值。

大数据分析让维护从被动到主动

  大数据其实很简单,关键是要找到好的工具,运用工具挖掘数据的价值;价值在于数据,而不是工具本身。侯海龙表示,国内大数据应用急需走出初级应用阶段,需要走出对技术关注,将注意力集中在数据上,让数据产生价值。

看不懂的机器大数据潜藏价值

时间: 2024-10-23 07:24:19

大数据落地难 Hadoop要“负责”!的相关文章

智慧城市大数据落地的三大障碍

大数据无疑是今年时髦的词汇了.不管是云计算.社交网络,还是物联网.移动互联网和智慧城市,都要与大数据扯上关系.各种与大数据有关的会议.文章.书籍铺天盖地.有人谈论大数据时代的公民生活,也有人谈论大数据时代网络反腐.仿佛一夜之间我们就进入了大数据时代. 大数据火爆,引发思想启蒙 国际上,大数据还真是热火朝天,各方都在积极行动.一方面,政府积极介入推动.2009年,联合国启动"全球脉动计划",借大数据推动落后地区发展.2012年1月,世界经济论坛年会把"大数据.大影响"

在大数据里:Hadoop可能是你的救命稻草

文章讲的是在大数据里:Hadoop可能是你的救命稻草,用于数据分析的开源Hadoop架构的巨大增长是由其结构化和非结构化数据量的增长所驱动的,并且很多权威组织也预测,未来Hadoop架构还将继续增长,并需要复杂的可访问工具来从数据中提取业务和市场信息. 对于Hadoop来说,前景很乐观--开源框架旨在促进巨大数据集的分布式处理.Hadoop对企业越来越具有吸引力,因为它既可以获取大数据的好处,同时又避免了基础架构费用. 联合市场研究部门最近的一份报告表明,Hadoop市场将实现从2013年到20

知意图大数据一体机诠释Hadoop简单之美

[IT168 资讯]2012 年12月3日消息,在北京开幕的HBTC 2012 (Hadoop 与大数据技术大会 2012,原 Hadoop in China) 技术盛会上,云集众多学者.企业用户以及技术领袖.大会发扬开源精神的角度,联合国际和国内 Hadoop 及大数据应用的产学界人士和成功企业,通过技术应用审视大数据技术生态系统的现状和发展趋势,围绕大数据处理.信息检索.内容挖掘.自然语言理解.数据可视化.计算广告学.地理信息系统等相关技术主题进行探讨,充分促进 Hadoop 与大数据技术在

大数据落地进行时 从概念化走向价值化

文章讲的是大数据落地进行时 从概念化走向价值化,过去几年大数据技术很火,经历几年时间的"酝酿",我们可以看到今天的大数据已经从过去概念阶段逐步走向落地--众多的行业企业开始意识并且开始尝试大数据技术,但是实际上现在的大数据应用还存在争议有观点认为大数据虽然很火但它的实际运用.价值创造方面还有待于观察和发掘.那么,经历几年时间的发展大数据如今的现状究竟是怎样的?在近日召开的2015 SAS中国用户大会暨商业分析领袖峰会(以下简称峰会)上IT168记者有幸采访了SAS公司执行副总裁兼首席营

大数据落地应用畅想曲(一):定制化产品和服务

昨天下午洗澡的时候,突然就想起了之前的一个大数据案例,讲的是美国旧金山有一家电子商务公司True&Co,他们采用数据分析的技术,为他们的客户寻找合适的bra.这个案例的之前36大数据之前曾报道过.基于这个案例在实际生活中的应用,我想提出自己的观点,人体本身就是一个"活"的大数据,而大数据未来可以拓展到我们未来生活的方方面面,让我们生活更加智能和便利. 人,本身就是一个"活"的大数据库 此前,我曾经提出过一个观点,"每个人的背后,都是一组鲜活的数据&

《Spark与Hadoop大数据分析》一一1.2 大数据科学以及Hadoop和Spark在其中承担的角色

1.2 大数据科学以及Hadoop和Spark在其中承担的角色 数据科学的工作体现在以下这两个方面:从数据中提取其深层次的规律性创建数据产品要从数据中提取其深层次的规律性,意味着要使用统计算法提炼出有价值的信息.数据产品则是一种软件系统,其核心功能取决于对数据的统计分析和机器学习的应用.Google AdWords或Facebook里的"你可能认识的人"就是数据产品的两个例子.1.2.1 从数据分析到数据科学的根本性转变 从数据分析到数据科学的根本转变的根源,是对更准确的预测和创建更好

《Spark与Hadoop大数据分析》——1.2 大数据科学以及Hadoop和Spark在其中承担的角色

1.2 大数据科学以及Hadoop和Spark在其中承担的角色 数据科学的工作体现在以下这两个方面: 要从数据中提取其深层次的规律性,意味着要使用统计算法提炼出有价值的信息.数据产品则是一种软件系统,其核心功能取决于对数据的统计分析和机器学习的应用.Google AdWords或Facebook里的"你可能认识的人"就是数据产品的两个例子. 1.2.1 从数据分析到数据科学的根本性转变 从数据分析到数据科学的根本转变的根源,是对更准确的预测和创建更好的数据产品需求的不断增长. 让我们来

八大行业CIO谈云计算大数据落地真相

假设互联网可以为学生提供优质的免费教育资源,那么所有大学就得回答家长一个问题--凭什么向学生收费.什么是最好的资源? 在2014年5月22日晚间的 "云计算大数据行业CIO沙龙"上,上海大学信息化办公室主任徐伟抛出了这样一个尖锐的话题.的确,随着MOOC(Massive Open Online Courses,大规模网络在线开放课程)的发展和普及,传统的教学模式正在被打破.运用云计算和大数据,MOOC可以让一门课程一个学期拥有100万学生,而且是网状化的学习模式.这种全新的知识传播模式

大数据落地决胜的关键——百分点BASIC模型

ZD至顶网软件频道9月9日消息: 背景:9月5日,国务院发布关于<促进大数据发展行动纲要>,探索大数据与传统行业协同发展的新业态.新模式.促进传统产业转型升级和新兴产业发展,培育新的经济增长点.形成一批满足大数据重大应用需求的产品.系统和解决方案,建立安全可信的大数据技术体系,大数据产品和服务达到国际先进水平,国内市场占有率显著提高. 昨日,对于媒体人来说是忙碌的,散布在京城大大小小的发布会近20场,对主办方来说也绝不轻松,要"有料"的同时还要"有人气"