谢文:看得见的未来——十谈大数据时代

一.迎接大数据时代

如果你的网站拥有数以千万计的活跃用户,如果网站上拥有数以百计的产品服务,如果这些服务以多媒体的形式在多个网络终端上运行,如果正在或者打算尝试走向云计算和WEB2.0架构,那就恭喜你了,因为你已经不知不觉地成为大数据时代的先行者或受害者。

按照维基百科上的定义,所谓“大数据”(big data)在当今的互联网业指的是这样一种现象:一个网络公司日常运营所生成和积累用户网络行为数据“增长如此之快,以至于难以使用现有的数据库管理工具来驾驭,困难存在于数据的获取,存储,搜索,共享,分析和可视化等方面。”这些数据量是如此之大,已经不是以我们所熟知的多少G和多少T为单位来衡量,而是以P(1000个T),E(一百万个T)或Z(10亿个T)为计量单位,所以称之为大数据。

大数据现象在物理学,生物学,环境生态学,自动控制等科学领域和军事,通讯,金融等行业已经存在有些时日了,在互联网业出现却是近年来才逐渐引人注目的。这可以归结为三个基本原因。第一,网络用户的高速增长和用户平均网络使用时间的不断延长,这使得用户网络行为数据大增;第二,网络服务从单一的文字形式走向图片,语音和影像等多媒体形式,导致数据量大增;第三,网络终端由过去的单一台式机变为台式机,平板电脑,书刊阅读器,手机和电视等多终端,大大扩充了网络服务的内容与范围,大大提高了用户对互联网的依赖度,也就大大增加了数据量。

大数据的出现既为网络业带来了机遇也带来了挑战。从潜在的机会看,数据量的增加为网络公司提供了精确把握用户群体和个体网络行为模式的基础,如果能够充分利用,就可以探索个人化,个性化,精确化和智能化地进行广告推送和服务推广服务,创立比现有广告和产品推广形式性价比高数倍甚至数十倍的全新商业模式。同时,网络公司也可以通过对大数据的把握,寻找更多更好地增加用户粘性,开发新产品和新服务,降低运营成本的方法和途径。从现实的挑战看,主要集中在以下三个方面。

首先,大数据挑战着网络公司的战略决策能力。数据量的急剧增长不仅要求在带宽和存储设备等基础设施方面要增加大量投入,而且使网络公司处于进退两难的境地。如果采取无所作为,固守原状的鸵鸟政策,那就可能失去未来发展的机会,失去业内竞争的本钱,早晚会被产业淘汰或者居于下游;如果与时俱进,转型适应大数据时代的到来,那就需要对公司的现有产品和运营体系进行全面的改造,例如网站架构的重建;产品的通用化,标准化,模块化;商业模式的创新;等等。这对绝大多数网络公司而言,既要维持现有业务,保持业绩的稳定和增长,又要加大投入,迅速转型,是个进退维谷的两难处境。

其次,大数据挑战着网络公司的技术开发和数据处理能力。大数据的出现以及潜在的商业价值不仅要求网络公司使用专门的数据库技术和专用的数据存储设备,而且更要求专门的数据分析方法和使用体系。目前业内流行的一般数据挖掘方法和通用商业数据库无法满足大数据时代的挑战。而且,网络公司需要大量高端专业人才,这不仅指一般的程序员和数据库工程师,而且指天体物理学家,生态学家,数学和统计学家,社会网络学家,社会行为心理学家,等等。对海量数据的分析不能仅仅局限在一般数据规律和模型的把握水平上,而且要有理论思维和全面把握的综合深入能力。

第三,大数据挑战着网络公司的组织和运营能力。一般中小网络公司都没有专门的数据管理和分析专家,即使是大型网络公司中,数据管理和分析部门也处于分散,被动,辅助的地位,是公司的龙尾而不是龙头。大数据时代的数据分析基本单位是个人用户,寻找的是个人的全面,完整,动态,实时的网络行为模式以及在此基础上归纳出来的群体行为模式,而不是过去那种基于单个产品,服务,频道的碎片式静态统计分析。所以,对大数据的整体把握是网络公司产品开发,运营设置,商业模式的基础和出发点,是龙头而不是龙尾。这就需要对现有公司架构,组织体系,资源配置和权力结构进行重组,让数据管理与分析部门处于公司整体的上游位置。重组成功的标志之一就是公司设立首席数据官(Chief Data Officer, CDO)的职位,与CEO, COO, CFO, CTO等一道组成公司核心决策层。

大数据是整个WEB2.0革命的重要组成部分,世界网络业的领军公司,例如GOOGLE,FACEBOOK,苹果和亚马逊已经处于先发的位置上。中国网络业中哪家公司能急起直追,谁就是先行者,否则,只能扮演受害者的角色。

(责任编辑:蒙遗善)

时间: 2024-11-08 18:16:43

谢文:看得见的未来——十谈大数据时代的相关文章

放眼业界看得见的未来 十谈大数据时代

本文讲的是放眼业界看得见的未来 十谈大数据时代,半年前开始讨论大数据时代的到来时,大数据还只是个专业小圈子里探讨的话题.到今天大数据这个概念已经在业界内外和大众媒体上沸沸扬扬地广为传播,并不断涌现出这个方向上的努力与创新了.正所谓"历史潮流,浩浩荡荡,顺之者昌,逆之者亡",这个过去只用在政治话题上的说法借过来描述大数据时代的到来与迅猛发展的形势真是再恰当不过. 站在不同角度看大数据,它既可能是大机会,大发展,大创新,也可能是大危机,大破坏,大淘汰. 目前,最活跃的领域是网络终端创新和网

看得见的未来——十谈大数据时代

半年前开始讨论大数据时代的到来时,大数据还只是个专业小圈子里探讨的话题.到今天写到系列文章的最后一篇时,大数据这个概念已经在业界内外和大众媒体上沸沸扬扬地广为传播,并不断涌现出这个方向上的努力与创新了.正所谓"历史潮流,浩浩荡荡,顺之者昌,逆之者亡",这个过去只用在政治话题上的说法借过来描述大数据时代的到来与迅猛发展的形势真是再恰当不过. 站在不同角度看大数据,它既可能是大机会,大发展,大创新,也可能是大危机,大破坏,大淘汰. 目前,最活跃的领域是网络终端创新和网络基础设施创新,也就是

谢文:法律标准与事实标准----八谈大数据时代

中介交易 SEO诊断淘宝客 站长团购 云主机 技术大厅 苹果与三星的专利大战有了初步结果,苹果大胜,三星惨败.就像世界杯预选赛一样,这场大战是双场制,在韩国打一场,在美国打一场,以避免主场优势.在韩国打成3:3,法院判双方都有侵权行为,苹果净赔偿不过几万美元.在美国打成7:0,三星要赔苹果10亿多美元.三星发誓要上诉,但败局已定,纠缠下去可能输的更多.韩国法院象征性地在本国禁售了苹果几款过时型号的产品,苹果很可能要求在美国禁售三星的当红产品.考虑到不对称的市场规模,三星最好寻求和解.以韩国民族主

谢文谈大数据时代:产业链将发生重组性巨变

互联网进入商业化市场化运营的二十多年来,产业生态环境和产业链都发生了天翻地覆的变化.在即将到来的大数据时代,网络业的产业链也必将发生重组性的巨变. 近年来,网络业经历着一系列深刻的变化,姑且称之为"分离化".在网络业早期,典型的模式是一个网络公司开发运营一个网站,其中包含若干产品和服务,公司的服务器通过网络线连接一台网络终端对一位用户服务,由此产生的网络数据归公司独有,形成单一固定封闭的循环.但时至今日,这种模式已经难以应对产业的发展.一个公司的网络产品和服务,未必只通过自己网站运营,

IPO注册制首次写入中央文仿“股改”成看得见的未来

股票发行注册制改革已经成为"看得见的未来"〿5日公布的<中共中央关于全面深化改革若干重大问题的决定〿下称<决定〿,明确提出"健全多层次资本市场体系,推进股票发行注册制改革.‿/p> 按照现行〿a href="http://news.pedaily.cn/industry/证券/" target=_blank>证券法>.<公司法>等法律规定,我国股票发行审核采取核准制做法.而事实上,近一个时期以来,监管部门一直在着力

谢文:大数据时代产业链将发生重组性巨变

互联网进入商业化市场化运营的二十多年来,产业生态环境和产业链都发生了天翻地覆的变化.在即将到来的大数据时代,网络业的产业链也必将发生重组性的巨变. 近年来,网络业经历着一系列深刻的变化,姑且称之为"分离化".在网络业早期,典型的模式是一个网络公司开发运营一个网站,其中包含若干产品和服务,公司的服务器通过网络线连接一台网络终端对一位用户服务,由此产生的网络数据归公司独有,形成单一固定封闭的循环.但时至今日,这种模式已经难以应对产业的发展.一个公司的网络产品和服务,未必只通过自己网站运营,

大数据时代:正在发生的未来

几年前,带领一帮团队做"信息管家".想法很简单,信息爆炸.资讯海量,现代人不堪重负.如何在最短时间内,最有效率和最具针对性地满足个体信息需求服务,这就是该项目要做的事.聪明的你们一看便知,它其实就是一项面向个人的信息推送服务,媒介是移动终端(如智能手机),应用是移动互联,卖点是定制.精准和个性化.技术呢,做起来很复杂,说起来又简单,就是任何人看哪些报纸.杂志,或者哪些专业.领域,甚至先看什么后看什么不想看什么都有一套固定的套路,这些别人不注意当事人又不觉得,但是通过一定的数据采集.挖掘

大数据搜索与挖掘:知著-见微-晓意【大数据100分】

感谢各位朋友的莅临,随着以微博.Twitter与Facebook等为代表的新型社交网络的迅猛发展,大数据已经成为了新一轮的科技革命,是信息技术发展的新趋势,对国家的经济与社会已经逐步产生重大影响.今天我的演讲包括四个部分:我对大数据的定义与理解:大数据应对之道:知著-见微-晓意:大数据搜索与挖掘的研究:大数据搜索与挖掘的实践案例分享. 第一部分:我对大数据的定义与理解 我们先从棱镜计划的手机监控来看大数据: 我们知道,利用我们手机周边的三个基站基本可以定位出我们所在的位置.利用手机位置,美国NS

周文:破解大数据时代的信息安全问题

文章讲的是周文:破解大数据时代的信息安全问题,8月1日,<大变革下的创新与融合--"互联网+汽车+交通"高峰论坛>在北京举行,以下为卫士通信息产业股份公司的高级副总裁周文的发言. 周文:各位,非常荣幸有机会参加这个会议,我觉得从今天上午各位领导和专家的主旨报告和今天下午分论坛前面的报告,我学习到很多的东西.作为今天分论坛应该是最后一位演讲者,我想不占用大家过多的时间.我们跟前面各位讲的有一个显著的区别就是,刚才大家讲的都是看得见的,都是有体验的东西,作为信息安全来讲,可能很