Matt Turck:大数据行业信息图以及一些思考

摘要: 编者按:本文来自潘星键投稿(@星键V;微信:akavir),他在汤森路透从事数据质量分析工作近7年,文章编译自 Matt Turck 《 The State Of Big Data in 2014: a Chart 》, Matt Turck曾任Bloomberg Ventu

编者按:本文来自潘星键投稿(@星键V;微信:akavir),他在汤森路透从事数据质量分析工作近7年,文章编译自Matt Turck《The State Of Big Data in 2014: a Chart》,Matt Turck曾任Bloomberg Ventures常务董事,现为FirstMark Capital合伙人。

从我第一次尝试为繁荣发展的大数据生态系统绘制一张信息图已经过去了两年, 而这期间大数据行业发生了很多巨大的变化。 我早就该对这张图做一个更新,现在终于完成了。

从VC的角度,我想谈谈对这张图以及大数据行业的一些想法:

越来越拥挤:创业者们蜂拥至这个行业, VC们将大笔的资金投资到看起来有机会成功的创业公司,其结果是,这个行业正变得越来越拥挤。 一些类别如数据库(不管是NoSQL还是NewSQL)和社交媒体数据分析正趋于成熟,且开始出现并购或者淘汰出局(Twitter对BlueFin和GNIP的收购可能意味着在社交媒体数据分析领域这种趋势早已经开始了)。

对于后来者来说, 虽然空间依然存在,但看起来早期的大笔风投资金都下注在基础设施(infrastructure)和分析(analytics)领域,导致成功的标准变得越来越高。 不过, 这并不意味着VC的资金会停止流入这些领域。

对于一些领域,公司的数量之多显然已经达到了一张地图所能容纳的上限。 我相信还有一些不错的公司我们没能纳入进来,也许是我们没有发现,也许是因为地方不够了, 我在此表示非常抱歉, 同时我也希望大家在评论里对于应当纳入那些公司提出反馈和意见。

尚处在早期阶段: 总体而言,这个市场还处在发展的早期阶段。 过去几年, 一些被看好的公司失败了(如Drawn to Scale),一些公司的创业者提前退出了(例如Precog、Prior Knowledge、Lucky Sort、Rapleaf、Nodeable、Karmasphere等 ),还有一些的结局稍好(例如Infochimps、Causata、Streambase、ParAccel、Aspera、GNIP、BlueFin labs、BlueKai)。

与此同时,一些公司看起来正越做越大,并获得大笔惊人的风投注资(比如MongoDB已经融资超过2.3亿美元, Palantir融资近9亿美元, Cloudera近10亿美元。一些大公司正积极出击进行并购(Oracle收购BlueKai, IBM收购Cloudant),但是总体而言,多数公司离成功实现IPO和投资者功成身退还差的很远(虽然Splunk和Tableau做到了)。 在很多类别,创业公司和大公司互相竞争,但并没有出现市场领导者。

市场宣传遭遇现实:在经历这些年狂轰滥炸的市场宣传之后,大数据还是焦点么?未来几年,也许大数据不再是媒体的热门,但对于大数据市场而言却是至关重要的, 因为企业将要开始把大数据项目从试验转而全面的部署实施。

虽然这意味着一些大数据提供商的利润会迅猛增长,但同时这些项目也将成为大数据是否能带来它所宣传的价值的一块试金石。与此同时,随着“物联网”行业的迅速崛起,数据将会如潮水般加速增长,进一步推高市场对大数据技术的需求。

基础设施:Hadoop似乎已经奠定了其作为整个大数据生态系统的关键部分,一些竞争者依然虽在, 这一领域也许会进一步发展和整合。 Sprak是另一个的基于Hadoop分布式文件系统(HDFS)的开源框架,它试图填补Hadoop的弱项,提供更快的的数据分析和良好的编程接口,目前正吸引大量关注(一些迹象显示它做的还不错)。

一些主题(比如实时数据处理)依然是重中之重,同时新的主题也在不断涌现(比如新一代处理、变换、清洗数据的工具,包括Trifacta、Paxata 和 DataTamer)。 企业数据是否会真正的放到云里(公共云或私有云),如果是,还有多久才发生,将是另一个大的话题。很多人认为财富500公司在接下来的几年来会继续把数据(以及处理数据的软件)放在机房里。一批云服务+Hadoop的创业公司则认为长期来看,所有的数据最终都会放到云中。

分析工具:从创业公司和VC投资的数量来看,这一领域最为活跃。从excel表格式的用户界面,到时间轴动画和3D动画, 创业公司提供各种各样的数据分析工具和用户界面,而不同的客户也确实有不同的需求,所以这一领域大概依然有足够的发展空间。

推广产品的策略也不尽相同 — 有些创业公司更针对于数据科学家,这群人目前不多但增长迅速。 另一些则正好相反,他们销售自动化的解决方案给一般商业用户,完全忽略数据科学家的存在。

大数据应用: 正如之前预测的,大数据缓慢但的确朝着应用层面发展。 这张图列出了一些令人兴奋的创业公司——他们本质上都是基于大数据技术和工具(当然我们无法把所有的相关公司都在这里列出来)。一些公司提供横向应用——如基于大数据的营销系统,客户关系管理系统和欺诈甄别解决方案。

金融业和广告科技业一直是大数据推广的领导者和最早的拥趸,甚至早于大数据被称作大数据。慢慢的,大数据推广到各行各业,如医疗行业和生化行业(特别是基因研究领域)和教育行业。现在才刚刚开始。

时间: 2024-09-20 08:15:14

Matt Turck:大数据行业信息图以及一些思考的相关文章

最新大数据行业鸟瞰图及解读

原标题:Matt Turck:大数据行业信息图以及一些思考 本文来自潘星键投稿(@星键V:微信:akavir),他在汤森路透从事数据质量分析工作近7年,文章编译自Matt Turck<The State Of Big Data in 2014: a Chart>,Matt Turck曾任Bloomberg Ventures常务董事,现为FirstMark Capital合伙人. 从我第一次尝试为繁荣发展的大数据生态系统绘制一张信息图已经过去了两年, 而这期间大数据行业发生了很多巨大的变化. 我

从“东莞逃离图”说起 大数据行业的利与弊

第1页:水聚成河-小数据汇集成海量数据 在春节前,对于大数据这个"不明觉厉"的领域,即使业内人士谈到的时候,也更多的是谈论大数据的价值如何如何!然而,春节的一张百度迁徙图让更多的人开始了解大数据这个庞然大物.而东莞轰轰烈烈的扫黄运动所造成的"嫖客小姐逃离图"更是让人们意识到大数据与每个人的息息相关.于是,大数据就这么突然却又必然的火了起来. 水聚成河 小数据汇集成海量数据 大数据并不难以理解,正如"水聚成河"的道理一样,大数据是由无数个小数据组成

2017年中国大数据行业最新发展图览

随着科技的进步,大数据从科学前沿逐渐深入到各行业.2017年中国的大数据行业有什么新动态?大数据行业整体市场规模如何?大数据行业前景如何?如何助力企业发展?今日的比格数据,我们来一起解读大数据行业在2017年的新发展. 1. 大数据行业整体市场规模及预测 整体来看,2017 年中国大数据行业的发展依然呈稳步上升趋势,市场规模达到了 234 亿元,和去年相比增速超过 39%.随着政策的支持和资本的加入,未来几年中国大数据规模还将继续增长,但增速可能会趋于平稳. 2. 大数据在各行业应用状况 企业哪

大数据推动信息安全产品更智慧

文章讲的是大数据推动信息安全产品更智慧,2013年最热门的科技词汇非"大数据"莫属,其相关书籍长期霸占各大畅销书排行榜,人们对于大数据给出了前所未有的关注度.大数据所带来的新思想,正在逐步渗透进每一个行业,改变着我们每一个人作为数据创造者的思维方式.大数据问世之前,正是互联网.云计算.物联网等技术快速发展的时期,而随着智能终端.数字城市等信息体的普及和大范围建设,任何人任何时刻在任何地点都在产生数据,全球数据量出现爆炸式增长,大数据时代已经到来.大数据的出现为信息安全带来了巨大的挑战也

何鸿凌:电信行业大数据应用案例的实践及思考

"中关村大数据产业联盟"推出"大数据100分"论坛,每晚9点开始,于"中关村大数据产业联盟"微信群进行时长100分钟的交流.探讨. [大数据100分]何鸿凌:电信行业大数据应用案例的实践及思考 文:何鸿凌 主持人:中关村大数据产业联盟 副秘书长 陈新河 主讲人:何鸿凌 承办:中关村大数据产业联盟 何鸿凌,中国移动集团公司业务支撑系统部项目经理,高级工程师.1978年生人,2001年获得重庆邮电大学计算机应用学士学位,2014年获得重庆大学软件工程

Splunk上市受瞩目 大数据行业现6大潜力公司

关键字:大数据 开源数据库 Splunk A+ A- 比特网(ChinaByte)4月22日消息 据外电消息报道,美国软件公司Splunk周四在纳斯达克的首日交易令人印象深刻,该公司股价当日报收于35.48美元,与17美元的IPO(首次公开募股)发行价相比翻了一番.这引发了投资者对一直相对不起眼的大数据公司板块的关注. 该外电称,"大数据"基本上是一个包罗万象的术语,指的是收集和分析大量信息的能力,而这些信息涉及到人类生活的方方面面.过去数据分析可能需要昂贵的数据库和专业化的技术,Sp

大数据行业迎来监管风暴 产业重新洗牌

"刷屏了,不发朋友圈担心别人以为与我有关."近日,北京某大数据公司的负责人黄帆(化名)告诉21世纪经济报道记者,他转发了一条多家大数据公司被查的帖子,很快又删除. 尽管被帖子提名的公司随后发公告澄清"未被调查",但创业者们已如惊弓之鸟. 21世纪经济报道记者采访国内十余家大数据公司和投资机构,很多人认为传闻言过其实,对被提名的创业公司是伤害. 但是他们都不否认,行业规范已经悄然开始,越来越多涉及用户数据隐私的案件发生,即便只是一批大数据公司被"协助了解情况

大数据行业图谱(2):前有堵截,后有追兵,通用技术类公司如何突围

从2011年至今,大数据概念火了五年,势头依然不减.从人人都在讲概念,到商业化应用典型案例出现,可以清晰地看到大数据在逐步落地.以Hadoop为代表的底层架构日趋成熟,处理数据的各项技术有了长足的进步,让大数据开始在各个领域发挥价值. 我们认为,大数据产业仍在初级阶段,商用价值仍未完整展现,市场前景一片广阔.一方面,国内企业IT投入占比低于全球平均标准,随着企业对信息化意识逐步提升,整个IT市场的蛋糕有望继续做大. 另一方面,企业客户将大量IT预算投入到云计算等基础设施建设上,随着基础设施逐渐成

大数据行业5个职位方向指南

大数据已不再是新词,企业也越来越需要大数据高端人才.这给想要从事大数据方面工作的人员提供了难得的职业机遇.那么在大数据行业,都有什么职位可以选择呢?来看看大数据行业的5个职位方向指南吧! 一.ETL研发 随着数据种类的不断增加,企业对数据整合专业人才的需求越来越旺盛.ETL开发者与不同的数据来源和组织打交道,从不同的源头抽取数据,转换并导入数据仓库以满足企业的需要.ETL研发,主要负责将分散的.异构数据源中的数据如关系数据.平面数据文件等抽取到临时中间层后进行清洗.转换.集成,最后加载到数据仓库