阿里玩大数据:从“淘数据”起步 两条腿走路

  当大数据开启一个时代时,阿里巴巴集团(下称阿里)从海量交易数据中挖掘有价值的数据,犹如在大海中航行,马云的鸿鹄之志也是那张航海地图。

  500多年前哥伦布做环球航行时,最想得到的就是航海地图,要不然他不会把美洲大陆当成印度。

  当大数据开启一个时代时,阿里巴巴集团(下称阿里)从海量交易数据中挖掘有价值的数据,犹如在大海中航行,马云的鸿鹄之志也是那张航海地图。只是哥伦布的目的地是印度,马云的目标是大数据。

  马云宣称平台、金融和数据是阿里未来的三大战略方向。其实,“阿里未来本质上是一个数据公司”,电商越来越离不开数据,金融的核心也是数据。阿里设立首席数据官,并把首席数据官陆兆禧升任CEO,传闻将收购移动APP数据公司友盟等,这些都显示马云的大数据战略萌动生芽。

  大数据预言

  方滨兴:大数据不能包治百病

  大数据是国家战略资源

  在几乎全球所有公司都还徘徊在大数据门前时,马云纵然有大数据的宏韬伟略,在具体操作层面也只能摸着石头过河。

  完成25个事业部战略调整后,阿里巴巴成立了数据委员会,由淘宝网商业智能部负责人车品觉出任首任会长。这位曾经在微软、ebay出任产品经理,在支付宝、淘宝主管数据业务的香港人,大半生都痴迷于数据迷宫。

  “我之所以来淘宝就是喜欢它的数据,就希望好好梳理下数据。”车品觉谈到数据时异常兴奋,在接受《中国经济和信息化》记者3个小时采访后,他还要给同事做有关大数据的培训。此时,已经是晚上10点多。

  车品觉是马云大数据战略棋局中已经过了河的卒子,他肩负着为阿里寻找开启大数据之门钥匙的重任。马云给了他异常宽松的工作环境,甚至没有具体的KPI考核。在接受《中国经济和信息化》记者采访时,他对所谓大数据赢利模式之类的问题并不看重:“阿里跟别人不一样的地方就是愿意尝试不同的产品,连领导都不能控制手下人到底玩什么。一帮很爱数据的人玩一堆产品出来,偶尔能出现如阿里金融这样的产品就很好,允许他们玩就是允许差异化,做数据如果急于现在赚钱就会失去机会。”

  “玩数据”其实并没有这么简单,特别是车品觉出任阿里数据委员会的安全责任人之后,他每时每刻都处在忐忑不安中。他认为,今后一段时间,数据质量、数据安全以及数据化运营将是阿里必须翻越的三座“大山”。

  从“淘数据”起步

  2003年的淘宝还是个“小朋友”,一个不起眼的购物平台,远不如当时的易趣(eBay)名气大,甚至还有人预言淘宝会在18个月内夭折。

  18个月后,淘宝让预言夭折了,淘宝交易量几乎呈指数增长,在2006年上半年注册用户数超过了易趣。从某种程度上看,易趣的存在是淘宝数据业务起步的外部动力。为了与易趣的销售额对比,淘宝开始搜集每天的成交额、用户访问数等数据,从起步就增强了对数据的粘性。

  淘宝严格意义上的第一个数据产品是“淘数据”,说白了这就是一个经营数据报表。“每个公司都需要了解经营业务状况,淘宝业务大了也需要看经营状况做未来决策,"淘数据"就是为内部报表服务的一个工具,大约是淘宝成立两年后的2005年开发的。”淘宝商业智能部一名元老级数据分析师告诉《中国经济和信息化》记者。

  这一年,淘宝迎来第一个数据分析师。半年后,淘宝建立第一批数据分析师队伍,并成立第一个数据部门商业智能部(BI)。他们每天的工作就是把日成交额、访问用户数等数据统计之后放入报表,让淘宝决策层能够清楚了解业务状况。

  此时的淘宝不再是一个卖家挂货、买家购物的购物平台,开始关注数据产生出来的意想不到的价值。当然,马云当时还不至于把数据提升到公司战略高度,但他敏锐地发现,“数据非常重要,未来的世界是数据的世界”。

  外界广为流传这样一个故事:2008年,中国众多企业受国际金融危机重创,而阿里根据买家询盘数急剧下滑,及时向中小制造商提供预警信息,为应对国际金融危机做好准备。虽然车品觉把这次经济预警归结为偶然事件,但阿里确实在数据分析中尝到了甜头。

  随着数据越来越多,原来的处理方式已不能进一步扩展,淘宝在用传统数据库方法处理数据问题时遇到了麻烦。

  “我们早上9点上班要看数据,但传统数据处理技术很难在9点之前让所有人看到结果,数据处理的时间成本非常高。再这样发展下去,就扛不住了。”前述分析师告诉《中国经济和信息化》记者。

  这一问题触发了淘宝第一次技术层面的架构变迁,把以Oracle为主的传统数据库迁到了大数据技术Hadoop数据库上,正式开启阿里的大数据实践应用。

时间: 2024-09-20 05:37:23

阿里玩大数据:从“淘数据”起步 两条腿走路的相关文章

淘宝的无线逻辑:两条腿走路开放新商业生态

淘宝的无线战略部署正从几年前的"可以做",愈发转变成"必须做",下一个问题接踵而来:怎么做? 5月初,一个普通的周二晚8点,杭州的淘宝无线办公室里依然人来人往,墙上贴着振奋人心的企业标语,还有一张很引人注目的招聘海报--"无线事业部,推荐有奖",招聘对象涉及从产品开发到运营的各各环节.据说自2009年成立发展至今,淘宝无线一共也不过100余人,虽然眼下急需用人,但阿里巴巴对新员工某些素质的严格要求,再加上移动电子商务的特殊性,淘宝无线想要招到适合

阿里“玩”大数据

中国经济和信息化2013年第8期 当大数据开启一个时代时,拥有海量交易数据的阿里巴巴,已经认识到这是一座富矿,并开始摸着石头过河. ◎本刊记者 崔婧 | 文 500多年前哥伦布做环球航行时,最想得到的就是航海地图,要不然他不会把美洲大陆当成印度. 当大数据开启一个时代时,阿里巴巴集团(下称阿里)从海量交易数据中挖掘有价值的数据,犹如在大海中航行,马云的鸿鹄之志也是那张航海地图.只是哥伦布的目的地是印度,马云的目标是大数据. 马云宣称平台.金融和数据是阿里未来的三大战略方向.其实,"阿里未来本质上

select-mysql数据库里只有一条数据为什么查询出来有两条重复的数据

问题描述 mysql数据库里只有一条数据为什么查询出来有两条重复的数据 mysql数据库里只有一条数据为什么查询出来有两条重复的数据 而且两条数据的主键都是一样的. 下面是查询的sql: select a.*,a.prepared_date-now() prepared_date_flag,a.released_date-now() released_date_flag, a.end_date-now() end_date_flag, u.user_type from bidding a inn

淘宝的无线逻辑:两腿走路 开放与新商业生态

中介交易 SEO诊断 淘宝客 云主机 技术大厅 这是一个看上去既熟悉.又近乎完全陌生的未知市场.淘宝需要做的,是以更开放的心态去主动融合各方力量. 5月初,一个普通的周二晚8点,杭州的淘宝无线办公室里依然人来人往,墙上贴着振奋人心的企业标语,还有一张很引人注目的招聘海报--"无线事业部,推荐有奖",招聘对象涉及从产品开发到运营的各各环节.据说自2009年成立发展至今,淘宝无线一共也不过100余人,虽然眼下急需用人,但阿里巴巴对新员工某些素质的严格要求,再加上移动电子商务的特殊性,淘宝无

大视野看银行数据管控

ZDNET至顶网CIO与应用频道 07月14日 综合消息:主题为"新银行 新蓝海"的2014年中国银行业座谈研讨会在青岛召开,文思海辉技术有限公司助理副总裁熊琳介绍了银行如何进行数据管控. 数据管控从银行角度有四层架构:战略.机制.领域.实现.我们一定会觉得企业的战略决定了业务的架构.应用架构.技术架构.所以,数据架构在整个流程里面是处于比较关键位置的.第二层,数据管控方面有组织架构.工作流程跟管理制度.熊琳表示,"很多行做完了数据标准和数据管控之后,实际上并没有成立专门的部

【重磅】阿里:大数据搬家记

文章概述:作为中国最大的电商集团,阿里巴巴一直善于自省自查.大数据革命的旋风吹到中国,让阿里巴巴得以机会发现自己脚下土地的松动.按照"数据基础决定上层建筑"的逻辑,阿里巴巴祭出一系列数据迁移和优化项目--重塑阿里电商生态系统的生命之树正破土生发.然而,"釜底抽薪"般的大动作可是需要拿出十万分的谨慎和耐心-- 高空任务 自曝其短.奋起补课的事儿还是静悄悄地进行. 当摄像师不断变换机位寻找最佳视角拍摄时,潘宝坤有点愤怒了."你们出去!别拍了!等我们做好再回来!

如何让数据价值最大化?阿里全域大数据系统深度解读

2016年,阿里巴巴集团提出中台概念,阿里巴巴数据技术及产品部作为中台战略中的组成部分,承载了集团数据中台的工作,其核心就是建设全域大数据.究竟全域数据到底是什么?又该如何建设? 在云栖大会阿里大数据分论坛,阿里巴巴高级技术专家张磊给出了详细的回答.以下为分享全文实录: 阿里巴巴高级技术专家张磊 数据中台 阿里巴巴数据技术及产品部定位 2016年阿里巴巴集团提出中台概念,阿里巴巴数据技术及产品部承载了集团数据中台的工作,其核心就是建设全域大数据. 从内容上看,我们管理和运维着阿里巴巴集团最核心的

【沉淀】阿里高级专家应答:各种数据在一个统一计算平台上的融合,才能产生更大的价值

"这个没啥好讲的,找XX和XX技术Leader吧?" "为什么挑中我?" "时间点再考虑下吧,要不要等--" -- 当发出云栖专家风采展示邀请时,应答没有直接答应.进一步沟通,你会发现推脱的背后,却是一位实实在在技术大牛的低调和谦逊. 应答认为,分布式系统架构设计为了满足20%高级用户的需求,有可能要提供80%的接口(原因见完整对话) 应答是阿里巴巴技术平台事业部架构与专家咨询的高级专家.架构与专家咨询究竟是什么样的一个岗位?应答做了剖析:本质上

【阿里云资讯】MIT科技评论:阿里是大数据Game Changer

阿里是大数据Game Changer 11月14日,<麻省理工科技评论>(MIT Technology Review)官网刊登文章<Big Data Game-Changer: Alibaba's Double 11 Event Raises the Bar for Online Sales>(大数据变革者:阿里双11不断提升电商标杆),文章称,不断扩张的双11全球购物节成为阿里巴巴尖端技术创新的最佳舞台.阿里双11背后的技术革新再次引起世界关注. 刚刚结束的天猫双11全球狂欢节创