小数据更管用!

大数据可以帮助商业运营者找到大致方向,但真正落地到商业操作,反而不如小数据更有用、更有效。事实上,大数据的应用既不便宜,也存在一定的缺陷,更尚未充分提升商业的价值,更需要企业家、产品经理等管理精英们的创造性思维,使大数据能正确地产生商业效应。

现状:盲目收集与浅应用

目前,大数据应用中有个怪现象,就是有什么数据就收集什么数据,至于将来有什么用,一概不知。或者抱着“先收集再说,将来总有用”的态度。我建议,应从问题、愿景导向来收集数据。一方面,数据的收集、存储备份等成本都不低;另一方面,数据的价值也可能衰减。

以用户为核心的KPI体系能实现与客户行为的点对点连通,是未来发展的大趋势。传统的用户价值是以利润贡献为核心衡量指标,而在大数据时代,客户关系的管理不同了。例如,我要知道一个客户一个月内到淘宝多少次,不管他是否购买,要看他与淘宝的关系到底怎么样。

就现状而言,大数据技术更多地用于推荐和营销,不是因为它更容易,而是因为它容错的空间更大。比如,推荐系统给出了顾客不喜欢的推荐,大不了重新推荐;然而一旦上升到直接解决问题的层面,容错空间就大大缩小了。例如,利用大数据技术来观测空气质量,错了也不会有太大影响,但如果把这个指数和某个商业运营挂钩,就不是小事了。尤其是对数据的精确性要求较高时,数据的持续跟踪与多源比对就显得非常重要。然而正是在这些方面,大数据的应用还停留在比较肤浅的层次,甚至压根就飘在空中。

因此,公司要建立数据收集系统,更重要的是建立跟踪数据质量的监控,对一些关键数据要寻找多个源头,一方面确保“鸡蛋不在一个篮子”,另一方面要相互比对、印证。对于实际运营的企业来说,数据必须有连贯性,当然真实性更是基本前提。

大数据还是小数据?

我几乎每周都要拜会或面试很多数据科学家、数据分析师。我经常问他们,“在你心里什么是大数据”。回答显示,原来业内的认知分歧丝毫不比外行少——至少有一半受访者或应聘者对“大数据”这个概念根本就不以为然,而是更关注有价值的数据、数据能产生什么价值。换言之,在部分人看来,“大数据”本身就是一个伪概念。我常问的第二个问题是,到目前为止,你做得最好的大数据案例是什么?他们的回答各有不同,但有个共同点:用大数据来处理数据的稀缺性。比如,北京的空气质量监测站是有限的,其数据对于监测站附近范围的质量呈现是比较准确的,但其余地区的质量数据是非常稀缺的,但我们要据此判断出北京市空气的整体质量。换言之,大数据能帮我们增加对未知部分的准确度、精确度的把握。

现在,有很多人讨论大数据与小数据的关系。其实,这个问题与大数据如何落地密切相关。在我看来,大数据可以帮助商业运营者找到大致方向,但真正落地到商业操作,反而不如小数据更有用、更有效。比如,很多运营者宣称自己的注册用户是多少量级的,但1亿个注册用户的基础数据,不如一千万个活跃用户完整的行为数据更具有价值。初创企业进行客户探索、发现和验证时,几百个甚至几十个顾客、用户的完整数据比千万级数据更有价值。也许正是因为数据量虽大,但每个数据单元都出现了断裂或遗漏,导致大数据的价值难以被挖掘出来。

因此,应用大数据的能力之一就是把数据变小的本领。在构建数据模型时,你需要的样本其实不是千万,甚至不是面面俱到的数据,而是比较敏感的数据指标。这对数据收集和分析人员是巨大的挑战。实际上,大数据的应用和落地也要以数据的细分为基础。例如,某电商顾客的真实性别不一定与购物的性别偏向一致;再比如,关键词搜索量要看北京、南京等地各为多少,而不是笼统地说增长了多少。当我们用放大镜细查大数据时,会发现有不少的“断链”和欠完整。从某种意义上说,并没有真正的“全面数据”,差别只在于放大镜的倍数。所以,即使基于大数据进行决策,也仍然有猜测和赌博的成分,大数据和小数据应该可以互为作用,而非比较两者谁更强。

传统企业怎么办?

我们在谈论大数据的时候,在根本上忽略了一点,很多企业本身是有其架构的,不会因为大数据就立即变得不一样。很多公司连信息(information)都未打通,是堵塞、零散的,更不要说大数据的应用了。大数据作为一种新的运营理念和方法体系,要想嵌入到公司里,必然要经历一个新事物在旧公司的所有困难。

从有效的策略来说,先把既有的数据用好,比盲目推进大数据要明智得多。更进一步,要重新定义数据框架来解决存在的问题。比如,很多企业都开启了公司微博,其测定效果是转发多少、评论多少。但实际上要细分这些数据,进一步厘清谁、什么样的转发和评论才是有价值的,还要和相似的公司微博进行对比。

传统企业究竟是建立起独立的收集系统,还是使用别人提供的数据?我认为要兼有,既要有侧重地独自搜集,也要多源化地获取数据,尽力排除各种数据在搜集过程中形成的偏差,这既是一个技术问题,需要数据人员付出艰辛的努力,也是一个战略问题,需要回到前文所述的小数据问题。

原文发布时间为:2014-07-21

时间: 2024-10-10 13:11:59

小数据更管用!的相关文章

大数据,小数据,哪道才是你的菜?

美国著名科技历史学家梅尔文•克兰兹伯格Melvin Kranzberg曾提出过大名鼎鼎的科技六定律其中第三条定律是这样的[1]"技术是总是配"套"而来的但这个"套"有大有小Technology comes in packages, big and small". 这个定律用在当下是非常应景的.因为我们正步入一个"大数据big data"时代但对于以往的"小数据small data"我们能做到"事了

大数据,小数据,哪道才是你的菜

美国著名科技历史学家梅尔文?克兰兹伯格(Melvin Kranzberg),曾提出过大名鼎鼎的科技六定律,其中第三条定律是这样的[1]:"技术是总是配"套"而来的,但这个"套"有大有小(Technology comes in packages, big and small)". 这个定律用在当下,是非常应景的.因为,我们正步入一个"大数据(big data)"时代,但对于以往的"小数据(small data)&quo

DaaS:让小企业更好地拥抱大数据时代

互联网技术的发展与应用催生了大数据时代,大数据正释放出巨大的潜能.从电商企业利用大数据分析客户需求到军队利用大数据模拟战斗;从销售人员将人口数据纳入分析,获得市场渗透率方面的信息,到企业参考经济数据来预测自身的发展趋势和发展模式;到处可见大数据利用的踪影. 以前大企业关注商务智能,关注数据报表,希望更好地服务于企业的业务决策.现在数字化浪潮袭来,互联网+大数据不仅为大企业实现转型与升级创造了条件,也为中小企业的创新与发展带来了新机遇.大数据对创新型企业而言,更容易产生真正颠覆性的变革. 中国有超

CCAI 2017 | 小数据学习对人工智能究竟有着怎样的影响?

近几年来,得益于大数据的积累.计算能力的提升,深度学习从学术到工程领域均取得了非常显著的发展与突破,尤其是诸如图像识别.语音识别等实际场景应用.但是,依赖于海量的训练数据.灵活的模型.足够的运算能力以及足以对抗维度灾难的先验经验,从很大程度上来讲妨碍了深度学习技术更为广泛的运用.为此,在全球范围内,众多人工智能领域的学术大师及业界专家上下求索,也由此催生了小数据学习(Learning from limited information),通过更少的数据以及更确定的方法让 AI 学习更加高效. 然而

怎么样的设置能让你的电脑数据更安全

一直以为电脑的安全是我们最关注的问题,有的人是为了数据的安全,而更多人是因为电脑中毒了而导致不得不重装系统.然后自己以前电脑上的数据之类的全多消失光光了.这个是让大多数人最郁闷的事情了,而下面小编教你们几个方法可以有效的保证你电脑数据的安全 . 1 1:必要的防火墙和杀毒软件 一般来说一个杀毒软件和一个防火墙就行了,我见过很多电脑安装了2到3个防火墙,这完全是资源浪费,一般来说电脑中毒第一个死的都是防火墙,有几个死几个,所以装一个防范下就行了.想免费的可以用360安全卫士和360防火墙. 2 2

漆远:小数据学习和模型压缩存挑战,场景成为 AI 技术发展关键

 "蚂蚁金服是一家技术驱动的公司,我们做的事情,是使 AI 技术成为普惠金融的支点."蚂蚁金服副总裁.首席科学家漆远博士,在有中国" AI 春节"之称的新智元2017开源·生态AI技术峰会上表示. 大约一个月前,在北大"人工智能前沿"系列课程的讲堂上,作为特邀演讲人的漆远已经将 AI 技术和普惠金融的概念结合到了一起.在新智元 AI 技术峰会上,漆远再次强调:"蚂蚁金服核心的关键点在于普惠的金融服务,而实现普惠金融服务依靠的技术就是人工

《大数据、小数据、无数据:网络世界的数据学术》一 2.2 定义与术语

2.2 定义与术语 学术文献.政策声明和大众媒体中到处都充斥着对数据的讨论,它们都尝试定义业内术语.罗森博格(Rosenberg 2013)指出,即使是在科学史和认识论历史中,人们也只是在无意间提及数据(Blair 2010:Daston 1988:Poovey 1998:Porter 1995).其他在科学领域中讨论事实(fact).表示(representation).记录册(inscription)和出版(publication)等含义的基础性作品也很少关注数据本身(Bowker 2005

磅:小数据大时代,数据革命迫在眉睫

演讲者:蔡凯龙,注册金融分析师(CFA), 金融风险管理师(FRM), 金融和计算机双硕士,金融博士生,互联网金融专家.现于德意志银行美国战略科技部,点石资产管理公司(DeStone Captial Management)的创始人合伙人兼任投资总监,曾任美国能源公司MXEnergy风控经理,担任休斯顿大学商学院金融系助理教授(Adjunct Professor),出国留学前在厦门开元期货当交易员.   主题概述: (一)小数据的介绍和定义 (二)小数据产生的原因 (1) 大数据对隐私无止境的侵犯

过分依赖大数据让乐高面临破产,让其转危为安的竟是一双旧鞋中的小数据

2003 年年初,乐高公司陷入困境,销售额同比下降了30% .2004 年,销售额又下降了10%.乐高CEO约恩·维格·克努德斯托普说:"我们一直亏本,都火烧眉毛了.公司还将面临债务违约的危险,很可能破产." 面对销售额的持续下滑,乐高找来了世界知名的营销大师马丁·林斯特龙,期待林斯特龙能够将乐高从低迷的业绩中拯救出来.林斯特龙从挖掘一双就运动鞋中的小数据出发,寻找用户需求,最终让乐高转危为安. 过分依赖大数据让乐高面临破产 这家丹麦玩具商怎么突然落到这步田地?乐高的问题大概要追溯到1