移动计算风起云涌:大数据处理大行其道

本文讲的是移动计算风起云涌:大数据处理大行其道,即使对于那些已经习惯于不断变化的CIO们来说,2011年都是令人眼花缭乱的一年。在这一年中,移动计算风起云涌,大数据处理大行其道,社交媒体和网络爆发出催生社会变革的骇人力量。而且,BYOD(bring your own device)和VOC(voice of the customer)的趋势也证明了用户体验正在重塑IT的角色定位。

  这些技术同样改变了传统的语境。随着IT组织和业务团队都认识到相互之间密不可分的依赖性,“IT和业务的适配”最终让位于“IT和业务的整合”或者“商业技术”。

  在2011年,先前关于云计算的各种宣传和鼓吹逐渐成为令CIO们痛苦的事实,后者不得不绞尽脑汁在云计算和企业安全之间达成平衡。IT组织对于云的使用不再仅仅局限于电子邮件之类的服务,而是开始着眼于数据中心和IT服务交付战略等更加宏大的领域。由于熟悉IT技术的新生代员工越来越多,CIO们被迫放弃IT的传统角色 – 企业技术的唯一供给者和评判人。新的一年尚未到来,但是大数据处理已经成为很多CIO的首要工作,长久以来关于数据管理的观点和经验被完全颠覆,关系型数据库对于分析的价值也有待重新评估。

  如果要选定一个2011年的CIO年度词汇的话,应该是“重生”。面对着云计算和终端技术的兴起、面对着用户更愿意使用自有设备和应用的挑战、面对着急速变化的业务需求,绝大部分CIO选择了迎难而上。经过思考之后,这些CIO们最终认识到(有时是突然顿悟):IT组织必须进行重塑,否则将被时代所抛弃。

  支持移动IT和设备自给

  在谈及2011年移动计算时,企业分配或员工自有的智能手机对大部分CIO来说并非关注焦点,他们都把注意力投向了具有革命性的那种设备:iPad。在错过了上一拨的iPhone热潮之后,CIO们似乎已下定决心紧紧抓住这个移动IT的最新契机。用户、管理层和CIO自己都不会再收到来自IT的否定回答。

  Randy Nunez是福特汽车的移动计算和企业技术研究部的高级网络工程师,在一次关于福特BYOD决策的访谈中,他向SearchCIO.com谈到:“IT应该放弃以前那种发号施令的姿态,转而去主动地进行调整和适应。”

  2011年,SearchCIO.com就移动IT的影响对一些CIO进行了访谈,其中的一个典型就是CUNA Mutual Group.(位于威斯康辛Madison的一家保险公司,28亿美元规模,4000名员工)的CIO Rick Roy。在一次看望女儿的途中,Roy经过了波士顿城中的一个Apple商店,当时的所见激发了其对移动IT的浓厚兴趣。“看着那些在店里试用和购买Apple产品的用户,从销售人员那里了解了产品的功能 – 我突然想到我们应该给予最大的关注,这些产品的应用前景是如此广阔。”

  当日历翻到2011年时,Roy已经开始对公司员工的计算设备和使用模式进行深入地分析。他的目标是找出最适合的移动设备以及其使用场合。在2011年的一次有关移动设备战略的播客中,Roy表示:“你必须对价值和收益足够敏感”。他的团队对员工进行了调查并记录下工作中所使用的设备。最终,所有用户被归纳到18个类别中,相应的分析结果构成了移动策略(其中一项就是把公司内一半的笔记本替换为iPad)的基石。

  对于移动设备战略的需求应该自下而上形成,但是Roy发现高屋建瓴也是必要的。Roy所面对的一大挑战就是IT组织已经习惯于发号施令和标准化带来的便利。而在当前这个快速变化的时代,标准化的战略并不适用。“我们需要研究更加具有弹性的交付模式。”Roy表示。长期以来IT都是以技术领导者的面目示人,现在该是抛弃这种角色定位的时候了。

  私有云、混杂云和公有云的评估

  对于道富银行(State Street Corp.)的CIO Christopher Perretta来说,云计算就是培育这种弹性模式的土壤。和很多公司一样,该银行的软硬件使用量的增长快过了成本方面的减速(由于技术进步所导致),而云计算可以在扩容和升级的同时避免成本的相应攀升。但是,为了避免弹性的提升以数据安全风险为代价,Perretta决定以私有云作为首选方案,以此在保有数据控制权的前提下使IT能够快速的适应并成长。和CUMA Mutual的Roy在移动战略上的举措一样,Perretta力图做到万无一失。他首先进行了小规模的模拟,然后才开始较大规模的实验 – 两个数据中心、500台服务器以及120测试用例。

  在关于私有云实践的访谈中,Perretta这样解释到:“在实验室里是一回事,而不间断的日常运行则完全是另外一回事。虽然任何变化都会导致一定程度的痛苦,但是相对于现有环境的局限带来的痛苦还是要轻得多。”

  预测分析方面的自我质疑

  和Atifeh Riazi一样,在2011年有很多CIO发现自己的企业经受着变革的考验。Riazi是纽约房屋局(New York City Housing Authority,NYCHA。北美最大的房屋管理机构,拥有约13000名雇员)的CIO,在推进“urban legends and sacred cows”公共援助计划时,她运用了商业智能(BI)和分析预测技术。无论是关于优化运作成本的方法,还是促进NYCHA居民生活质量的举措,所有工作都经过BI系统的分析评估。这些工具随后也用到了更大规模的内部和公共数据分析上。

  Riazi所用到的BI工具包括SAP AG的BusinessObjects、IBM的Cognos和WebSphere、Visokio Ltd.的Omniscope(Riazi用来在自己桌面机上进行大数据分析)。但是,具体工具并不是核心所在,开放的心态才是转型的关键。“我们必须跳出自己所习惯的圈子,IT不再只是和软硬件的部署有关。”

  Riazi用Nassim Nicholas Taleb在其著作《The Black Swan: The Impact of the Highly Improbable》中的一句话来描述CIO们曾经的状态:“不敲破鸡蛋就开始煎蛋卷。”CIO们部署了ERP、CRM以及其他软硬件系统,但是对于流程、政策和企业文化却毫不触及。“你拥有了一定程度的自动化,然而却原地踏步。”Riazi表示。IT的真正目标不是部署系统,而是推动业务转型。“每隔几年,你都应该推翻原来的工作,折返到起点然后扪心自问‘我现在所做的事情是否有意义?如果有必要,是否应该实现流水化?是否要单独控制抑或置身事外?’对这些问题你必须要有相应的答案。如果仅是专注在技术领域,那么你对于业务并没有产生实质性的推动,这就相当于煎蛋却不把鸡蛋打破。”

  CUNA Mutual的Roy对此深有同感:“在工作方面,我们很容易安于现状不思进取。但是现实情况却是创新和变革已经成为时代的主线,而且势头越来越猛。因此,我认为即使时机尚未成熟,主动地尝试创新也是非常必要的 -- 这样能够巩固我们思想领袖的地位。”

作者: 皮丽华

来源: IT168

原文标题:移动计算风起云涌:大数据处理大行其道

时间: 2024-10-14 16:13:01

移动计算风起云涌:大数据处理大行其道的相关文章

如何低成本、高效率搭建Hadoop/Spark大数据处理平台

随着人们逐渐认识到 "大数据"的价值,互联网.电商到金融业.政企等各行业开始处理海量数据.如何低成本.敏捷高效地搭建大数据处理平台,成为影响大数据创新效率的关键. 为了让用户以最简便地方式享用阿里云全球资源,在云端构建敏捷弹性.高可靠和高性价比的大数据平台,近日,阿里云在成都云栖大会上发布了一款Hadoop/Spark场景专用的ECS存储优化型实例D1规格族,单实例提供最高56核CPU,224GB内存,168TB本地盘容量,5GB/S总吞吐,PPS达120万+.这对Hadoop/Spa

省时省事省力 巧用阿里ECS D1构建大数据处理平台

随着人们逐渐认识到 "大数据"的价值,互联网.电商到金融业.政企等各行业开始处理海量数据.如何低成本.敏捷高效地搭建大数据处理平台,成为影响大数据创新效率的关键.   为了让用户以最简便地方式享用阿里云全球云资源,在云端构建敏捷弹性.高可靠和高性价比的大数据平台,阿里云在云栖大会·成都峰会上正式推出了Hadoop/Spark场景专用的ECS存储优化型实例D1规格族,充分满足泛互联网行业.金融.电商.政企等行业等搭建大数据存储与计算分析平台的要求,真正意义上做到了"省时省事省力

In-Stream Big Data Processing译文:流式大数据处理

转自:http://blog.csdn.net/idontwantobe/article/details/25938511  @猪头饼 原文:http://highlyscalable.wordpress.com/2013/08/20/in-stream-big-data-processing/ 作者:Ilya Katsov 相当长一段时间以来,大数据社区已经普遍认识到了批量数据处理的不足.很多应用都对实时查询和流式处理产生了迫切需求.最近几年,在这个理念的推动下,催生出了一系列解决方案,Twi

运用大数据处理技术 做好国有企业思想政治工作

在全面深化企业改革和互联网全面普及的新形势下,国有企业思想政治工作面临着许多新情况,国有企业要勇于挑战自我.求新达变,积极推进思想政治工作理念创新.手段创新,要善于运用计算机大数据处理技术,积极构建大数据思想政治工作管控体系,确保职工队伍稳定,使企业思想政治工作焕发出勃勃生机,为企业改革发展提供强有力的思想保障. 运用大数据搭建思想政治工作新平台 针对思想政治工作面临的新情况,国有企业要勇于创新,积极确立"用数据链筑牢生命线"的新理念新思路,立足企业内部网络,运用大数据处理技术,创新做

azure-如何在Azure上部署大数据处理应用

问题描述 如何在Azure上部署大数据处理应用 1.看到Azure上有Hadoop,当不知道怎么用 2.由于本地资源有限,我想通过Azure搭建MapReduce 应用,进行数据处理学习应该如何做 解决方案 azure直接支持hadoop,直接就可以用.官网上有文档 解决方案二: http://database.51cto.com/art/201403/432607.htm

用Apache Spark进行大数据处理—入门篇

文章讲的是用Apache Spark进行大数据处理-入门篇,Apache Spark 是一个围绕速度.易用性和复杂分析构建的大数据处理框架.最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开源项目之一. 与Hadoop和Storm等其他大数据和MapReduce技术相比,Spark有如下优势. 首先,Spark为我们提供了一个全面.统一的框架用于管理各种有着不同性质(文本数据.图表数据等)的数据集和数据源(批量数据或实时的流数据)的大数据处理的需求. Sp

高速公路视图大数据处理应用探讨

近年来,随着高速公路通车里程的迅猛增长和车流量的快速增加,高速公路运营管理中暴露的新情况.新问题也逐年增多,特别是逃漏通行费问题,给正常运营秩序带来较大的冲击.为了解决偷逃漏费.路径识别等业务需求,其中在高速公路收费卡口逐步进行了监控高清化与智能化改造.在视图智能化处理方面将面临以下几个问题: 如何建立一个安全.实时.有效.智能化的视图大数据系统处理系统,利用车辆视图"多特征识别"真正满足高速公路偷逃漏费稽查工作高时效.高正确率要求; 如何建设一个适合高速公路场景高性能计算平台,实现大

大数据时代你不得不了解的大数据处理工具

如今Apache Hadoop已成为大数据行业发展背后的驱动力.Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper.Flume). Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10-100GB或更多,同时数据种类多种多样,包括结构化.非结构化等)的能力.但这与之前有什么不同? 现今企业数据仓库和关系型数据库擅长处理结构化数据,并且可以存储大量的数据.但成本上有些昂贵.这种对数据的要求限制了可处理的数据种类,同时这 种惯

广告系统中的大数据处理 | 宋慧庆

什么是大数据? 从具备4V(Volume,Velocity,Variety,Value)特征的大量数据中挖掘用户的潜在价值. 广告系统的数据来源 DSP监听数据(主要是ssp,adx渠道) 广告主数据 广告投放过程中收集的数据 购买/通过交换得到的第三方数据 运营商合作数据 精准广告的系统特点 数据量巨大(广告本身的数据,定向数据,用户特征数据,广告展示环境的特征数据) 响应速度要求特别快 实时性要求特别高(广告数据,定向数据,用户特征数据,广告展示环境的特征数据等实时性) 系统可用性要求特别高