大数据分析项目需要慎重而有力的监管

分析团队的管理者们必须拿捏好指导数据科学家们完成工作,和给予他们能够有效完成工作所需要的空间之间的分寸。

Scotiabank, 是一家总部位于多伦多的金融服务企业,企业内的数据科学家们不附属于任何特定的业务部门。相反,他们是一个独立的团队的一部分——正式的名称为决策科学团 队——为银行内的所有部门提供高级分析。 但独立并不意味着脱离: Andrew Storey,银行的决策科学部门的副总裁, 他和其他管理者们都努力确保团队进行的数据分析项目,对于业务战略和运作是有实用价值的,而不是单纯的抽象练习。

在拉斯维加斯举行的2015 TDWI Executive Summit会议上,Storey说道,“仅仅因为我们能做某事并不意味着我们就必须这样做。” “我们真正需要做的是将自己扎根于业务中,支持他们正在进行的项目。在这样的一个团队内,你很容易脱离现实,所以我们必须保持务实。”

为了帮助优化市场活动,促销方案,产品定价,以及识别不同客户之间的财务关联,Storey希望他团队内的30位分析师在进行客户数据集和定价数据的预测分析,运行数据挖掘应用程序时,能够有创造性。事实上,促进创新文化是他管理一个成功的分析团队的核心原则。“我们应该努力寻找更好的做事方式,”他补充 道,激励他的员工这样做也帮助他留住这些员工。

与此同时,Storey让Scotiabank的业务经理决定他的团队应该探索的领域,或者他与他们共同决定。分析结果需要嵌入到操作系统和流程中,预测模型“是完全无用的,如果我们不基于它而做出决定的话,”他说。

数据分析的解读

团队成员还必须能够向业务高管们解释他们所使用的分析技术和方法, 以获得他们对于结果的认同并使用这一结果。为了设法简化分析过程,Storey引导数据科学家摆脱重复建立预测模型。他鼓励他的团队使用其他行业的金融服务企业和公司的算法,只需调整使其适应银行的需求。

随着大数据分析项目不断扩大数据科学家的工作范围,以及他们分析的各类信息。类似Scotiabank这样的协调方法,在管理分析团队时,是很常见的,并且也变得越来重要,也更具挑战性。

调查结果显示,随着大数据分析项目变得更加普遍,管理分析团队也成为一个更大的挑战。例如, TechTarget的2015年度 IT优先项目的调查结果显示,全世界范围内2212名受访者中的25%,认为他们的企业正计划在今年开展大数据分析项目,位列计划软件项目前5位(参见图 表)。与此同时,2014年6月接受咨询公司Gartner inc .调查的302名业务和IT专业人士中的40%则表示,他们的企业已经对大数据技术进行了投资,相较去年提高了30%;另外有33%的受访者计划在未来的 24个月之内进行投资。

Mike Lampa,咨询公司Archipelago Information Strategies的总经理,认为协作和合议的方法在管理大数据分析工作时,是必须的。 “我认为正确的心态是你如何指导整个过程,而不是控制它。” Lampa警告说,如果优秀的数据科学家认为他们的工作被过度控制,很有可能对此感到反感,转而在其它地方寻找新的工作。他认为管理者应与他们的团队合 作,将分析工作的重点放在有价值的项目上,在使用数据和审查分析模型时提供明确的指导方针,然后就放手。

分析师掌握主动权

Netflix 公司就对自己的数据科学团队采取了此类管理方法。这家位于加州The Los Gatos的公司使用运行在Amazon Web服务云上的多种系统——包括Hadoop,Teradata公司的数据仓库,亚马逊的Redshift,和Simple Storage Service技术,存储多个PB 数据用于分析客户与其在线流媒体服务之间的互动。

Kurt Brown,Netflix公司数据平台的副总裁,在加州San Jose举行的Strata + Hadoop World 2015 conference上进行演讲,他认为,数据分析师们应该负责建立自己的查询,算法,和模型,他的目标是使他们能够在数据分析项目时做他们想做的,障碍 越少越好。

Brown的平台经理与分析师互相协商,促进开发最佳方法,但他们对于开发工作不会设置障碍。有时 会导致编码错误和数据问题,但是他认为,在Netflix这样的公司内,试图在分析系统中避免错误代码是“徒劳的”。事后,他的一位员工会查找需要清理的 代码,然后将这个信息发送给对此错误负责的分析师,这样他们可以自行修复。 “这不应该是管理者的责任,” Brown说。“这必须是一个共同的责任”。

原文发布时间为:2015年07月20日

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-07-30 07:36:28

大数据分析项目需要慎重而有力的监管的相关文章

五步打造高效的大数据分析项目

大数据不仅是一个流行话题,更是企业中实实在在存在的需求.许多企业开始 着手于大数据分析项目,但在此之前,我们需要一个良好的部署方案以确保最终 的结果能够为业务服务.选择合适的技术是规划的第一部分,当企业选择了数据 库软件.分析工具以及相关的技术架构之后,我们就可以进行下一步并开发一个 真正成功的大数据平台. 当然,我们也没必要过分夸大项目管理进程的作 用,成功的大数据分析项目来自于多个方面.在本文中,我们就将介绍五个技巧 ,企业用户进行平台部署的时候可以作为一定的参考: 只选择你所需要的 数据.

企业部署大数据分析项目成功的秘诀

本文讲的是企业部署大数据分析项目成功的秘诀,大数据不仅是一个流行话题,更是企业中实实在在存在的需求.许多企业开始着手于大数据分析项目,但在此之前,我们需要一个良好的部署方案以确保最终的结果能够为业务服务.选择合适的技术是规划的第一部分,当企业选择了数据库软件.分析工具以及相关的技术架构之后,我们就可以进行下一步并开发一个真正成功的大数据平台. 当然,我们也没必要过分夸大项目管理进程的作用,成功的大数据分析项目来自于多个方面.在本文中,我们就将介绍五个技巧,企业用户进行平台部署的时候可以作为一定的

大数据分析项目中的“最差”实践

本文讲的是大数据分析项目中的"最差"实践,大数据分析现在很火.只要你浏览任何IT出版物或者网站,你都能看到商务智能供应商和他们的系统集成合作伙伴推销帮助企业实施和管理大数据分析系统的产品和服务.这些广告和大数据分析的新闻以及供应商匆匆提供的案例研究可能会使你误认为大数据是很容易的事,误认为要成功部署只需要一种特别的技术. 如果它是那么简单就好了.当BI供应商乐呵呵地告诉你他们的客户已经成功部署大数据分析项目时,他们不会告诉你还有那么多失败的案例.大数据分析项目令人失望是有一些潜在原因的

大数据分析项目需要考虑的注意事项

"大数据"已成为时下人们最为津津乐道的流行语.同时流行的术语还包括:商业智能(BI).分析和数据管理市场.越来越多的企业正在寻找商务智能和分析供应商,以帮助他们解决在大数据环境下的业务问题. 那么,到底什么是大的数据呢?最近,IT出版物eWeek提出了如下的看法,部分是基于Gartner公司的术语进行定义的:"大数据涉及到结构化和非结构化数据的数量.种类和速度,通过网络在处理器和存储设备之间传输,并为企业的相关业务提供相关数据业务咨询." 这一描述切中了数据管理和分

戴尔软件调查结果显示中型企业正积极实施大数据项目

ZDNet至顶网服务器频道 04月29日 新闻消息:作为一个经久不衰的炒作主题,大数据已经被视为大型企业机构的专属,而非中型企业面临的挑战或机遇.然而,戴尔软件针对中端市场大数据计划所做的调查结果却截然相反.大数据计划,曾经只是大型企业独有的优势,正在以新的分析工具不断加强IT部门领导与公司业务之间的联系,帮助中型企业机构改进产品质量和决策. 为了寻求推动中端市场采用大数据项目的原因所在,戴尔软件委托Competitive Edge Research 对全球中型企业高管进行了一次调查.着眼于中型

《Spark与Hadoop大数据分析》——1.1 大数据分析以及 Hadoop 和 Spark 在其中承担的角色

1.1 大数据分析以及 Hadoop 和 Spark 在其中承担的角色 传统的数据分析使用关系型数据库管理系统(Relational Database Management System,RDBMS)的数据库来创建数据仓库和数据集市,以便使用商业智能工具进行分析.RDBMS 数据库采用的是写时模式(Schema-on-Write)的方法,而这种方法有许多缺点. 传统数据仓库的设计思想是用于提取.转换和加载(Extract, Transform, and Load,ETL)数据,据此回答与用户需求

《数据科学与大数据分析——数据的发现 分析 可视化与表示》一导读

前 言 数据科学与大数据分析--数据的发现 分析 可视化与表示 大数据可以帮助企业从他们最宝贵的信息资产中挖掘到新的商机,从而创造出新的价值并形成竞争优势.对于企业用户而言,大数据可以帮助提高生产效率.提升产品质量和提供个性化的产品和服务,从而帮助改进客户满意度并提升企业利润率.对于学术界而言,大数据分析提供了一种更加先进的分析手段,可以帮助获取更丰富的分析成果和更深入的洞察力.在许多情况下,大数据分析集合了结构化和非结构化数据的实时获取和查询,开拓了创新和洞察的新路径. 本书将介绍大数据分析中

大数据项目缘何失败?分析模型需要与业务相结合

[TechTarget中国原创] 目前主流的商务智能和分析应用主要关注的是如何从已有数据中提取业务价值,反映公司发展.客户行为和业务趋势.是面向过去的.而一些新兴的数据分析技术已经把目光投向了未来--预测分析.企业通过采用大数据分析技术预测未来可能发生的事情. 但是,预测建模和数据挖掘技术要想准确地预测出客户行为,制定有效的企业战略,需要处理大量的多种类型的数据.医疗保险和医疗保健服务供应商Highmark负责企业信息战略和数据分析的副总裁Mark Pitts表示,要真正落实预测分析,企业需要做

2015年1250亿美元大数据分析市场的6点预测

2015年,全球大数据和分析市场的规模将达到1,250亿美元.国际数据公司(IDC)和国际分析协会(IIA)在不同的网络广播中,都谈到了它们对2015年大数据和分析市场的预测.以下是其中一些要点: 安全软件将成为大数据分析的杀手应用 大数据分析工具将是第一道防线,它结合了机器学习.文本挖掘和本体建模,提供整体及综合性安全威胁预测.检测.阻止和预防程序.(IIA) 物联网(IoT)分析将大热,五年的年均复合增长率为30% 物联网将成为数据/分析服务的下一个重要关注点.(IDC)在物联网潮流侧重于数