构建大数据分析平台:没有捷径

业界专家认为,随着企业越来越依赖于技术,CIO们应该重新定位自己与业务之间的关系。

通过创新、敏捷实践和IT内部划分等各种途径。为了实现这一点,相对于推动部门的转型,CIO们必须面对更为艰巨的挑战。他们需要向业务端显示自己在变革 方面的主导地位。但正如在近期于波士顿举行的大数据创新峰会上所显示的一样,在推动企业的数字化转型上,IT没有捷径可走。

“从总体上说,企业内部的IT组织最重要的任务就是防止故障的发生。”在峰会中的一次讨论中,NBCUniversal Media LLC的分析技术集团高级总监Moin Haque表示:“高层对IT的评估就是,以服务标准协议的形式来检验故障的多寡。在这种情况下,IT并没有进行试验和失败的空间。”但是,Haque的 分析团队则恰恰相反,其使命就是探索和实验,哪怕失败也在所不惜。

NBC的大数据分析平台是IT双重角色的最好例证:IT团队管理着自建的Hadoop平台;Haque的团队则置身于IT之外,通过各种试错来探索价值创 新。由于这两个团队的工作目标和节奏都不一样,Haque认为单独运作会带来明显的好处:“把责任属性从我们团队中去掉,可以让我们更加专注的进行探 索。”

是否外包

对于其他意在构建大数据分析平台的企业,Haque的建议也是如此:“那些能够自行完成或通过合作伙伴实现的工作,可以作为切入点。”实际上,当某位听众问到如何外包或引入大数据项目时,Haque的建议就是从另外的角度进行分解。

Haque表示,可以放到IT团队进行管理,也可以进行外包(如果企业尚不具备相应的大数据技能时)。同时,他也认为,只有在极少数情况下才需要将大数据分析外包出去。

“无论是开发模型还是算法,你都应该尽量走自建的道路。因为这样才能具有真正的独特性,才能使企业更具竞争力。”Haque认为。

人才培育

Chris Simokat是花旗集团的副总裁和大数据分析工程团队首席数据科学家,他同样提出了自己的看法。与其因为技能匮乏而把平台外包,CIO更应该注重内部的 人才发现和培养。“我们平台的起源和核心工程组件,来自于PeopleSoft工程团队的副产品。”Simokat表示。

对于Haque建议对大数据项目分解成更为可管理的模块,Simokat表示了赞同。同时,他认为应该在IT团队内部挖掘人才,对每个细分模块进行管理。即便对于那些已经外包的工作,也应如此。

“否则,就是厂商调查的不尽职,从而无法对工作进行切实的掌控。”Simokat表示。

创新的悖论

CIO和企业都表示在尽力寻找具有创新性思维的人才,但是这其实并不容易。“绝大多数的创新性人才都令人感到棘手,他们总是倾向于改变一切。”联合国助理秘书长和首席信息技术官Atti Riazi表示。她认为没有任何政府部门和企业能够容忍这一点。

Riazi表示,创新,历来都是一把双刃剑,能够解决艰难的问题,也往往导致意想不到的后果。“以互联网为例,已经成为我们生活的一部分,但是同样充斥着种种诸如贩卖人口之类的黑暗面。”Riazi举例说。

Riazi表示这并不意味着CIO们应该拒绝创新。相反,创新是进步的源泉。只不过,她认为听众应该对技术本身进行讨论,尤其是当技术被当作他用时。“提 到技术,我们总是想到硬件、软件、工具和云计算。但是,其中的内涵远不止如此,技术其实和经历、权力、人类的生活乃至环境有关,我们必须就此展开对话和思 考。”

Riazi认为,试图对技术和创新进行管理是错误的,这只会扼杀应有的活力。“那么该做什么呢?把创新看做一种责任。”她说到。

原文发布时间为:2015年11月19日

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-09-20 00:54:50

构建大数据分析平台:没有捷径的相关文章

省时省事省力 巧用阿里ECS D1构建大数据处理平台

随着人们逐渐认识到 "大数据"的价值,互联网.电商到金融业.政企等各行业开始处理海量数据.如何低成本.敏捷高效地搭建大数据处理平台,成为影响大数据创新效率的关键.   为了让用户以最简便地方式享用阿里云全球云资源,在云端构建敏捷弹性.高可靠和高性价比的大数据平台,阿里云在云栖大会·成都峰会上正式推出了Hadoop/Spark场景专用的ECS存储优化型实例D1规格族,充分满足泛互联网行业.金融.电商.政企等行业等搭建大数据存储与计算分析平台的要求,真正意义上做到了"省时省事省力

华为企业级大数据分析平台FusionInsight

[天极网服务器频道9月3日消息]全球领先的信息与通信解决方案供应商华为,今天正式发布了其大数据平台产品FusionInsight.华为FusionInsight大数据处理平台,能够帮助企业快速构建海量数据信息处理系统,通过对企业内部和外部的巨量信息数据实时与非实时的分析挖掘,发现全新价值点和企业商机. 原生态的大数据技术因其本身的复杂性,局限应用于自身具备强大研发实力的互联网行业,而且开源大数据软件的一个明显特性是存在诸多Bug,性能未经调优,功能不够完善.FusionInsight以双引擎的处

开源与闭源的融合构建大数据分析生态

大数据分析在日积月累的过程中正在不断发生着改变,之前数据分析更多聚焦在B2C领域,现在随着物联网的发展则转向B2B领域,形成B2B+B2C的模式.麦肯锡报告显示,数据分析70%的价值来自于B2B,30%的价值来自于B2C,所以大家都在向2B市场分析来做转型. 但目前B2B数据分析整个市场总量还很小,而且对数据分析的要求更高.因为单一平台不能解决大数据的所有问题,这也有了开源与闭源技术的混合需求,构建大数据分析的生态系统,在IoT数据大量爆发的时代为各行各业提供对应的分析能力. IoT数据分析需要

Clouder—构建企业级数据分析平台-墨羽@袋鼠云

Clouder-构建企业级数据分析平台 墨羽@袋鼠云 一.引言 这是在阿里云大学线下开班的clouder沙箱实验,本人小白,第一次接触阿里云的数加产品. 小白到什么程度,我是一个运营!运营!!运营!!! 我司运营也要考阿里云的ACP,(我们公司叫袋鼠云,提供大数据智能服务,插个广告= =)所以趁这个机会多接触下数加的产品,在阿里云大数据讲师@云骧的帮助下顺利完成本次实验,感谢! 二.实验介绍 目标 作为公司CDO(首席数据官),帮助公司搭建一个数据分析系统,监控当前业务运转情况,让CEO能够轻松

如何打造高性能大数据分析平台

大数据分析系统作为一个关键性的系统在各个公司迅速崛起,但是这种海量规模的数据带来了前所未有的性能挑战.同时,如果大数据分析系统无法在第一时间为运营决策提供关键数据,那么这样的大数据分析系统一文不值.本文将从技术无关的角度讨论一些提高性能的方法.下面我们将讨论一些能够应用在大数据分析系统不同阶段的技巧和准则(例如数据提取,数据清洗,处理,存储,以及介绍).本文应作为一个通用准则,以确保最终的大数据分析平台能满足性能要求. 译文丨如何打造高性能大数据分析平台 1. 大数据是什么? 大数据是最近IT界

惠普推出新版HP Vertica大数据分析平台

[天极网服务器频道6月30日消息]近日,惠普宣布推出新版的HP http://www.aliyun.com/zixun/aggregation/14174.html">Vertica大数据分析平台HP Vertica Dragline,HP Vertica Dragline让企业能以十分经济的方式存储数据,并使用SQL工具快速高效地搜索数据. HP Vertica分析平台是HP HAVEn大数据分析平台的关键组件,让惠普的客户及合作伙伴能够开发下一代应用程序和解决方案,从而更快地从大数据中

HP Vertica企业大数据分析平台爆出远程提权漏洞 4.1及以后版本受影响 绿盟科技发布安全威胁通告

Fortinet向HP提报了一个 hpe vertica大数据分析平台中的远程提权漏洞CVE-2017-5802,攻击者可以远程利用此漏洞获得特权访问.HP已经给出各版本的升级补丁.绿盟科技发布< HPE Vertica Analytics Platform远程特权访问漏洞安全威胁通告 >,通告全文见下方后半部分. Vertica是一款基于列存储的MPP (massively parallel processing)架构的数据库.它可以支持存放多至PB(Petabyte)级别的结构化数据.Ve

IBM Platform Symphony:功能强大的高效大数据分析平台

ZD至顶网软件频道消息(文/邹大斌):随着大数据的价值得以验证,越来越多人的企业开始在大数据项目上进行投资,这给传统IT基础设施带来相当的挑战.众所周知,传统IT基础设施大多是为特定应用而构建的,在灵活性和可扩展性上都存在明显不足.在此背景下,人们开始寻找一种更适合大数据分析应用的IT基础设施,而IBM Platform Symphony(以下称Platform Symphony)正是一个可以帮助企业构建上述基础设施的平台软件. 作为一个企业级大数据和分析平台,Platform Symphony

至强结合HANA 英特尔与SAP共筑大数据分析平台

ZDNet至顶网服务器频道 08月25日 新闻消息(文/王涛):大数据时代,对于数据的处理需求除了面向更大规模的海量性以外,也需要信息的快速展现.为帮助企业用户提升海量数据分析效率,加速获取实时的业务洞察,进而提升在行业内的竞争优势,英特尔公司携手大数据实时分析领先企业SAP在京举办了主题为"数据芯处理 高效创共赢"的2014英特尔数据中心媒体沟通会. 双方在阐释对大数据市场.应用等方面的最新洞察以及双方协作创新策略的同时,还重点介绍了双方精心打造的.基于英特尔硬件平台的大数据实时分析