大数据将成为重要的企业资产

大数据将演变成重要的企业资产

  在我看来,大数据的概念可以从以下两个方面解释:

  1. 从技术的角度看,大数据是指数据量大且复杂到无法通过传统数据库技术进行治理和价值发掘。在这种需求下,各种NoSQL、NewSQL、开源技术或者商业平台不断出现并进化。

  2. 从商业的角度来看,大数据将衍生出很多新的商业模式。其一、只要技术足够,企业可以整合内部和外部大数据(例如社交数据、App数据),更好地优化自身业务,实现对传统商业模式的超越。其二、只要技术足够,企业将收集并治理那些不曾有能力收集并治理的大数据,再发掘出巨大的商业价值。大数据,将演变成重要的企业资产。

我认为当前热门的大数据技术主要包括以下内容:

  1. 用于大数据存储的Hadoop HDFS,以及衍生的数据库HBase;

  2. 批处理大数据项目有Hadoop MR,它最新版本是YARN。衍生项目有数据仓库Hive和机器学习Mahout;

  3. 实时处理大数据的项目有:Spark以及衍生的数据仓库Shark,Cloudera Impala;

  4. 用于流计算的项目有Apache Storm。

  5. 商业大数据产品有一体机例如PureData、Exadata、Hana;MPP DW例如Vertica、Aster Data、GP;MPP DM例如 Yonghong DM。

  未来比较看好实时大数据技术的原因是实时大数据技术能够让企业对大数据进行探索式和交互式分析,相比于之前没有灵活性和动态性的批处理大数据技术而言,它将大大提升发掘大数据价值的效率和可能性。

  我觉得国内大数据发展势头不错,但以下三个方面仍需改进:

  1. 商业大数据产品或者技术至少应该占1/2,而不应该逢大数据就聊开源。我们看到在美国很多大数据的商业公司越来越强大,例如Cloudera、Hortonworks、MapR、1010Data。但国内企业要么大数据搞不起来,要么技术比较强的就自己捣腾开源,这不利于资源整合,优势互补。

  2. 两个极端。国内大数据项目是哑铃型,要么上超贵的一体机,要么上开源的大数据项目。实际上,在上大数据项目的时候,可以选取性价比比较好的商业产品或者商业服务,而不要走两个极端。

  3. 目前的主流大数据产品和技术都在美国。作为21世纪最重要的国家之一,中国应该有自己的主流大数据产品和技术,而不仅仅是搬砖头或者盲目跟从。希望能与各位同仁一起努力,在实时大数据领域做点工作。

时间: 2024-10-02 14:40:04

大数据将成为重要的企业资产的相关文章

何春涛:大数据将成为重要的企业资产

"大数据"自诞生之日起,业界对它的概念.技术和应用就存在一定争议.究竟什么是大数据?有哪些大数据技术?大数据的未来是怎样的?每个人都有自己的理解.在2013大数据产品评选活动举办之际,笔者采访了此次担任评委的几位专家学者,看看专家眼中的"大数据"是什么样的? 何春涛,Inetsoft研发总监,从事商业智能产品的研发和应用工作十几年,在高性能及大数据商业智能的相关领域工作了五年.其负责的研发团队多次获得国际奖项,包括JavaOne.JDJ Readers' Choic

分享大数据最佳落地实践 助力企业数据驱动型转型

ZDNET至顶网CIO与应用频道 05月12日 北京消息:Teradata天睿公司(Teradata Corporation,纽交所:TDC)今日宣布,2014 Teradata大数据峰会(亦称第14届Teradata Universe)在上海浦东香格里拉酒店正式举办.随着更多企业快速部署大数据战略,Teradata天睿公司积极帮助中国企业快速转型成为数据驱动型企业.作为国内规模最大的大数据峰会,Teradata天睿公司携手全球领先数据驱动型企业,在峰会上分享了大数据分析技术的未来趋势和全球最佳

扬帆大数据时代 联想数据安全为企业保驾护航

随着大数据时代的降临,企业在挖掘海量数据价值的同时,也格外重视数据安全问题.数据是企业业务的核心,核心数据中承载客户信息,知识产权和交易信息等,一旦发生丢失.泄露将产生巨大的商业损失.在联想推出的企业服务升级计划中,数据安全服务主打企业级数据拯救和数据销毁,针对数据丢失提供拯救率高达90%的数据恢复服务,有效避免客户业务损失:而针对敏感数据则能提供安全.便捷及专业的销毁服务和设备,拥有保密局和军队双认证,将处理风险降至最低. 数据拯救服务为电力骨干企业解燃眉之急 中国某电力公司作为关系国家能源安

大数据技术将是传统企业创新的原点

如果你认为大数据技术仅仅是挖掘和处理海量数据,并挖掘其价值并服务大众,那可能还限于Google这些传统互联网企业的数据应用和分析技术带来的产业定义,而对于那些不得不拥抱互联网.移动互联网的传统行业企业来说,大数据技术的应用是他们争取下一轮竞争优势,转变业务模式.创新力提升的基本能力构建. 传统企业对数据资产的利用,成为了企业赢得未来竞争力的最重要的切入点.但是如何进行数据资产的价值梳理.如何利用数据应用来助力自身的业务变革.如何将数据资产变现却现实的困扰着每一个传统产业的企业主和CIO们.数据随

大数据人才之困 催生企业定制班模式

文章讲的是大数据人才之困 催生企业定制班模式,10年前,如果说大数据分析你会想到什么?银河超级计算机?基因组网格计算?那时候大数据离我们似乎还很远.而如今,从央视的春运迁徙图到美国奥巴马政府宣布投资2亿美元启动"大数据研究与开发计划;从两会期间的两会大数据到预报旅游热点,大数据正在对每个领域都造成影响,大数据就在我们身边. 众所周知,数据中的价值是存在的,而且还远远未被挖掘出来.随着CPU处理速度提升,分布式处理架构日渐成熟,互联网催生数据量以指数速度增长,各大公司纷纷上马大数据业务,伴随而来的

大数据不会“主动”为企业做的10件事

ZDNET至顶网CIO与应用频道 07月07日 专栏:很多企业都对大数据寄予厚望,希望它能够解决长期存在的业务问题,让公司更具竞争力并设计.制造出更好的产品.然而,这样的热忱很容易带来对大数据的高估,因为大数据"本身"并不会带来任何价值.本文列出了10个大数据不会"主动"为企业做的事情,除非企业对这些数据进行更加深入而细致的分析与挖掘工作. 1.解决业务问题 大数据并不会解决业务问题,业务依然需要人来解决.只有那些好好坐下来.在他们开始使用大数据之前想好希望从大数据

大数据调查:BigData迫使企业做出抉择

本文讲的是大数据调查:BigData迫使企业做出抉择,根据IDC的调查报告预测到2020年全球电子设备存储的数据将暴增30倍,达到35ZB(相当于10亿块1TB的硬盘的容量).大数据浪潮的到来也为企业带来了新一轮的挑战.对于有准备的企业来说这无疑是一座信息金矿,能够合理的将大数据转换为有价值信息成为未来企业的必备技能.恰逢此时,CSDN专门针对企业相关人员进行了大规模问卷调研,并在数千份的调查报告中总结出现今企业大数据业务的现状.在此我们也将调研结果展示与此以供大家参考. 大数据时代的数据格式特

驾驭新商业大数据产品能力评测助企业理性抉择

文章讲的是驾驭新商业大数据产品能力评测助企业理性抉择, 数据是新科学,大数据能hold住一切答案. --<Big Bets on Big Data> 未来所有的生意都将成为数据的生意. 产业规模可期 更多的数据到更好的智能 在全球,大数据解决方案不断成熟,各领域大数据应用全面展开,为产业发展带来强劲动力,大数据逐渐成为全球IT支出新的增长点.Gartner分析显示,大数据已经进入应用发展阶段,基础设施建设带来的规模性高速增长出现逐步放缓的趋势,技术创新和商业模式创新推动各行业应用逐步成熟,应用

大数据步入成长期后的企业应用磨合期

没有一个IT术语如大数据这般在瞬间被大家口口相传.每个人能说出所以然;也没有一个技术如大数据这般谁都能说却谁也不能说全;没有一个IT方案如大数据一样给予企业最美好的业务设想.大数据从国家层面到各行各业再到各个企业,都有其用武之地,甚至是未来发展的根基和法宝. 但是在被不断地认可之后,却总是有些隐忧存在.正如一个人处在巅峰时,受到的肯定愈多的时候,一定有很难被发现的弱点.大数据就是这样,被业界一片看好,从厂商到企业,大数据就这样用了很短的时间变得看上去很繁华.而繁华之后,其进入的应该一个是沉淀期.