大数据时代 首席数据官如何实现数据革新?

如今数据管理越来越受到企业重视,这直接导致了首席数据官职位的出现。

CAMBRIDGE, Mass---数据管理层面受到不同势力的影响,进行数据革新的同时,还需要保证数据安全性和合规性,首席数据官的任务是在二者间找到平衡。

当我们在2016年MIT Chief Data Officer & Information Quality Symposium上遇到Joe Caserta,我们和他讨论了一些与数据管理有关的话题。

Caserta是位于纽约的咨询公司Caserta Concepts的创始人兼总裁,他认为实时数据处理,软件开发和大数据分析是非常重要的。我们的讨论也是围绕这些技术,我们也不可避免的谈到了首席数据官的工作。

新兴的首席数据官职务,旨在平衡数据合规和分析创新,你认为面临的主要挑战是什么?

Joe Caserta:我看到了一些改变,企业越来越向数据分析靠拢。这不仅仅是单个部门的倡议,而是一个企业层面的战略。如果你和首席数据官有过接触,你就会发现,他们的工作通常是应对数据管理、数据安全性和合规性的问题。但这些问题由来已久。人们一直面对这些问题,也一直为其所困扰。

这个职位还要负责与分析相关的工作,这才是其存在的意义。这对与任何人来说都是个挑战,因为它需要人们换个思维方式,与传统数据管理任务有很大不同。我想说的是,当首席数据官独立负责分析工作时,往往效果不佳。CDO需要有同事或下属来分担部分分析工作。

有时候,CDO的工作可以视为一个集进攻与防守为一体的任务,数据革新方面,CDO的任务是进攻,以实现更多的创新,而在数据合规性和安全性方面,他的工作却是防守,防止数据违规和不安全的情况出现。

Caserta:这么说有一定的道理。我们试着引导人们,让他们意识到,数据分析对于他们的业务发展有着十分重要的战略性意义,通常我们发现,大多数IT部门所做的都只是防守。他们就像消防员和灯塔守卫,时刻防止意外发生。如果是这样,那企业将很难取得进步。正如人们常说的那样,如果你一直忙于灭火,那么你就没有时间去思考如何预防火灾。

不过,CDO这个职位越来越受到企业青睐,因为如果企业想要在数据上有所作为,那它就需要这么一个人举起数据革新的大旗。

如果企业将投资用在一个单独的角色或一个单独的部门中,纯粹的为数据服务,而不是将投资分撒在应用程序,开发、支持和基础设施上,那我认为其成功的几率会变得更大。

还有一个流行趋势,DevOps,目前也具有很大影响力。这个趋势是如何形成的呢?

Caserta:我们也许忘了,在大数据和分析成为了企业战略的中流砥柱前,商店会把事务系统中所有的数据提取出来,建立数据仓库,进行数据清理,完成一些报表,也许,如果你做的不错,那你的数据将会被完美的复制,你可以将它们发送回你的应用程序。这就是我们所谓的闭环。数据仓库的意义在此得到了完美体现。

但IT和应用程序的开发有着各自的迭代周期,数据仓库同样也有其迭代周期。但这两个周期并没有什么直接关系,他们之间不必考虑彼此的周期是否对自己产生影响。

现在,大数据平台已经成为一些应用程序的后端,尤其是分析推荐引擎和购买倾向预估一类应用程序更是离不开大数据平台。现在应用程序和大数据平台开始交织在一起。DevOps已经成为强制性的。不再像过去那样是可选的。

数据质量的多重标准是一个挑战,对么?

Caserta:数据质量的困局是你必须面对的。在数据可用之前,必须让数据尽可能的完美,这影响了数据分析的完成速度。这让“Corporate America”感到十分压抑。

这需要做出改变。我认为人们应该意识到:公司向华尔街提交审计报告的合规性与数据发现和数据探索时的合规性有着很大的区别。

我们必须开始考虑相关的用例,以及如何完成合适的数据管理。这是十分重要的。我们曾尝试对医生的笔记做自然语言处理,预测患者是否具有自杀倾向,以阻止患者轻生。但我们最终没有做到这一点,因为企业的数据管理员表示,我们不被允许使用这些数据。

我们需要改变数据的管理思维,让数据能够在更多层面得到使用许可。

开个玩笑吧,我一直都想建立一个委员会来给实时一个明确定义。我曾听到你说,这样的定义不存在。

Caserta:当然。实时的定义取决于你的看法和你的经历。我们来看下Facebook所谓的实时。当你发布一条评论到某人的Facebook主页上,他们并不是在同一时间就收到的。可能在几分钟之后收到。这并不完美。

然而,实时和批量之间有着重要的区别。如果你正在做批处理,那它执行的是一个过程,然后结束。你可以连续运行,即使看似实时,但它仍然是批处理。

对于那些确定已经发生的事,我们不应该试图掩盖。我指的是,交易平台和分析平台之间的界线已经变得非常模糊。如今大多数情况下,预测分析仍然是由批处理完成的,确实是这样。但这些分析结果,取决于你的客户所浏览的页面,他们正在查看什么产品或产品类别,或与其类似的人在做什么,这都需要实时处理。技术正在发生变化,分析和操作平台之间的耦合度变得越来越高。

====================================分割线================================

本文转自d1net(转载)

时间: 2024-09-20 12:14:15

大数据时代 首席数据官如何实现数据革新?的相关文章

大数据时代,没人知道哪些数据会成为重点

相信很多智能手机用户不太明白,为什么我只是想下载个手电筒应用而已,这个应用为什么要看我装了其他什么应用,我现在位置是哪里,我通讯录里有什么人,相册里有什么照片?而且还要求打电话和发短信的权限,要知道这些权限我女朋友都没有好不好! 一个手电筒应用的要求比女朋友还多,是不是太过分了?我们都知道,在其位不谋其政的人基本上都不是好家伙,一个手电筒应用想看我的位置通讯录照片,目的肯定也不是识别谁是女朋友,然后将屏幕亮成爱你的形状然后彩信发给女朋友逗她开心. 新华网的记者做了一次小测试:他手上的一款 And

大数据时代 每家公司都要有大数据部门吗?

在大数据时代 每家公司都要有大数据部门吗?如果这个问题换做是:在电气时代,每家公司都要有个发电厂吗?是不是会更好回答一些? 事实上每一种重大技术的出现,都会对产业产生大的变化.在蒸汽时代,采矿机采用蒸汽机后,会带来生产效率的极大提升,而轮船加上蒸汽机,再也不需要靠风才能航海了.在电气时代,电灯代替了蜡烛,电报代替了快马送信,而报纸也被广播和电视所侵蚀. 可以说是现有产业加上新技术,形成了新产业. 我们回过头来看这两次工业革命,生产蒸汽机的企业只有少量几家,而发电的企业在美国也只有通用电气和西屋电

大数据时代:休眠沉睡的政府数据看不着、查不到

长期分散在各个政府部门的各项数据"各吃各饭""各管一摊",休眠沉睡.一边是看不着.查不到,一边是握在手.落满土--大数据时代,诸多政府数据面临着如此尴尬.如何唤醒政府数据?这一大数据时代之问,已经成为社会的重要关切. 政府数据像是穿着"隐身衣" "很繁琐."面对半月谈记者的采访,长春一名硕士研究生王贺说,因研究需要,他要查阅省内县市七八十年代的经济发展数据,包括GDP增速.人均收入增速等. "这些数据县里都有,提供起

奇虎360任命谭晓生为首席隐私官 负责用户数据等事务

奇虎36015日宣布任命副总裁谭晓生为首席隐私官(CPO),负责规划和制定公司的http://www.aliyun.com/zixun/aggregation/36274.html">隐私政策.处理产品中涉及到用户数据的各项事务. 图为谭晓生 资料显示,谭晓生曾于2003年1月起曾先后任3721技术开发总监.8630.html">雅虎中国技术开发总监.雅虎中国CTO.阿里巴巴-雅虎中国技术研发部总监等职,并曾是聚友网CTO.2009年谭晓生从聚友网离职,加盟360担任技术副

IBM任命首席隐私官 直接负责数据安全问题

中介交易 SEO诊断 淘宝客 云主机 技术大厅 腾讯科技讯(汤姆)北京时间10月16日消息,据国外媒体报道,IBM日前宣布,公司正式任命执业律师克丽丝蒂娜·彼得斯(Christina Peters)担任IBM首席隐私官(chief privacy officer). 首席隐私官的职位是IBM最早于2000年设立的.彼得斯自从1996年以来一直在IBM担任执业律师一职,在担任首席隐私官一职后,彼得斯将指导和监管公司40多万员工和数千个客户的全球信息政策和贯彻情况.与此同时,彼得斯还将负责领导IBM

深度揭秘:大数据时代企业卖技术还是卖数据?

大数据技术的热度这几年一直在上升,现在我们在谈论大数据的时候已经不再仅仅局限于炒作大数据的概念了,更多的是聚焦在一些大数据的具体应用上,作为企业用户来讲,现在也已经开始有越来越多的企业领导和IT管理者逐渐了解大数据同自身业务之间的联系.  我们都知道,当今的企业级市场,不管是渠道市场还是行业市场,数据对于企业来说都存在着巨大的价值,而作为数据资源的核心组成部分,大数据已经成为了很多企业愿意买单的"产品".其实企业在购买大数据服务的原因很简单,就是利用大数据的技术和应用帮助企业进行开源节

大数据时代,战备更需准确数据

"陡河水库1号堤岸,遭'敌特分子'破坏,库堤决口!"3月12日,河北省唐山军分区作战值班室响起演练警报,只见值班参谋王建朝迅速调出重点防卫目标信息数据库,依据库区水位计算出水流量.需动用的兵力和装备数量,随即下达救援命令.笔者计算了一下时间,前后用时5分钟! 4月29日至10月16日,世界园艺博览会将在唐山举行,唐山军分区依据自身担负的职责使命,把重点防卫目标安全任务摆在首位."必须要有精准完备的信息数据作支撑,这样才能做到快速高效.应对自如,否则就承担不了世园会期间的重点目

大数据时代的挑战与未来的发展趋势

ZDNet至顶网服务器频道 01月21日 新闻消息:大数据挑战和机遇并存,大数据在未来几年的发展将从前几年的预期膨胀阶段.炒作阶段转入理性发展阶段.落地应用阶段,大数据在未来几年将逐渐步入理性发展期.未来的大数据发展依然存在诸多挑战,但前景依然非常乐观. 大数据发展的挑战 目前大数据的发展依然存在诸多挑战,包括七大方面的挑战:业务部门没有清晰的大数据需求导致数据资产逐渐流失;企业内部数据孤岛严重,导致数据价值不能充分挖掘;数据可用性低,数据质量差,导致数据无法利用;数据相关管理技术和架构落后,导

互联网的大数据时代真来了?还是一直都在?

中介交易 SEO诊断 淘宝客 云主机 技术大厅 (文/Heven)这几天在微信上看到很多关于互联网大数据的文章,也有人说大数据已经作为云计算.物联网之后IT行业又一大颠覆性的技术革命,Heven在想,互联网的大数据时代真来了?还是一直都在?其实,数据分析技术的运用已经悄然开始了,比如淘宝网.京东等购物网站监视着我们的购物习惯,百度.谷歌等搜索引擎监视着我们的网页浏览情况,新浪微博.腾讯微博好像对我们的朋友很熟悉,还有就是QQ和QQ空间总能给我们推荐那些似曾相识的朋友,但是Heven觉得我们离真正