Amazon如何利用云服务处理大规模多维数据集

智能电视设备能够了解需要录制哪些节目,浓缩咖啡机则能够在需要维修时自动报警,冰箱在牛奶即将耗尽前及时发出提醒——这一切都依托于数据分析的力量而实现。随着人们对于市场未来与消费者行为做出预测的愿望变得愈发迫切,以沃尔玛、Amazon、eBay以及Nordstrom等企业为代表的零售业巨擘已然将预测性分析视为一种必需。


 根据EKN Research发布的一份最新报告,有80%的电子商务巨头表示他们已经开始紧随Amazon走上分析技术发展道路。Jeff
Bezos和他的管理团队在过去十七年中一直努力推动Amazon针对在线购物业务做出革新,并借此拿下每年20亿美元营收(其中包括高级电子商务业务与云计算服务)。在今天的文章中,我们将一同了解Amazon如何利用大数据分析机制提振自身业务。顺带一提,与网络层面的带头大哥一样,沃尔玛作为实体店铺经营领域的领袖亦在大数据分析研究方面颇具心得。

总部位于西雅图的电子商务巨头Amazon公司正利用大数据技术处理其约2亿个客户账户,并将来自客户的高达10亿GB数据保存在超过140万台服务器之上,旨在借此做出预测性分析并推动销售成效。数据已经成为Amazon公司的命脉,该公司利用数据确保自身能够通过个性化推荐、价格优惠、针对性营销等方式为客户带来独特的购物体验。大数据分析对于Amazon公司无异于一支魔杖,帮助其在当下这个市场竞争极为激烈的时代下利用个人数据维持客户忠诚度这种使用数据并实施正确创新的能力也成为Amazon得以跻身全球财富五百强企业的前提条件。

“数据即力量”可谓指引Amazon走向成功的座右铭。大家不妨打开自己的Amazon主页,其中的内容永远不会一成不变。Amazon公司会对大家在电子商务网站以及应用当中的一切操作做出追踪——旨在尽可能多地收集数据。当审视Amazon当中的“账户”选项时,我们能够从中窥探到其对于客户动向的强大追踪能力——“您可能喜欢的”、“看过上述产品的客户还看过这些宝贝”、“同类产品推荐”、“购买该产品的客户还购买了”等等,Amazon不断追踪客户的动向,从而为其提供个性化的卓越购物体验。

举例来说,我们可以通过以下页面看到如果大家选择在Amazon.com上购买一块磁盘驱动器,那么页面同时会显示与之类似且售出数量较高的其它产品以及大家可能希望一同购买的其它相关产品。

Amazon如何运用Hadoop技术

Amazon公司已经通过云环境下的一系列工具对大数据具体使用方式加以扩展,从而实现数据存储、数据收集、数据处理、数据共享以及数据协作等等。Amazon公司的Elastic

MapReduce能够帮助这家零售商有效管理并使用其分析平台,同时以Hadoop框架为基础构建起预测性分析体系。与电子商务货架上约15亿种产品相关的各产品分类数据广泛存在于全球范围内的200多座数据中心,保存于Amazon
S3当中且每周进行约5000万次更新。S3中的产品数据目录每30分钟进行一次处理,并将结果发送回各数据仓库当中。

Amazon建立的个性化推荐机制

Amazon公司利用大数据分析机制了解客户的实际购买行为、搜索哪些关键字以及具体需求,并据此赢得了客户的高度认同。

Amazon generates an additional 10%-30% revenue in response to the
recommended suggestions it offers to its customers.
Amazon公司全部营收中约有10%到30%来自其为客户提供的购买建议。Amazon公司是大数据挖掘领域的先驱,其能够利用数据分析结论提供个性化营销手段,从而为客户提供独一无二的购物体验。凭借跨越十个国家的超过200万卖家以及2亿消费者,Amazon公司得以利用极具创新性的数据驱动型技术为受众群体提供个性化推荐。

在Amazon方面看来,其客户主要分为两类:

Amazon买家客户

立足于Amazon市场之上的卖家客户

Amazon公司的推荐算法包含有大量相关因素,包括购买记录、浏览记录、好友影响、特定产品销售趋势、社交媒体对高人气产品之宣传以及客户此前曾进行过的类似产品购买行为等等。经过重重处理,其最终才会为客户提供产品推荐。Amazon公司一直在完善其推荐算法,从而寻求为客户提供更理想服务水平的途径。

电子商务市场中的卖家面对的问题包括:

 他们应当在自己的货架上添加哪些新产品?

 他们应当为特定产品准备多少库存以满足客户的实际需要?

 如何通过提供更多选项与更出色的服务保持客户满意度?

Amazon公司在服务卖家客户方面亦取得了巨大成功,其举措包括为卖家提供库存建议、新产品添加选项指导以及如何为特定产品匹配合适的交付方式从而满足客户等等。平均来讲,Amazon公司的每位卖家客户能够获得超过100条关于产品目录的建议与意见。

在提高客户满意度方面,最具挑战也最为关键的一点就是提升产品库存管理机制。Amazon公司提供的一类常见建议就是提醒卖家哪类产品即将售罄。根据推荐算法中的各项因素,Amazon公司会向卖家提供建议以展望其产品的未来市场需求,从而提醒其尽早在Amazon市场上进行补货——这无疑是一项双赢战略。

Amazon的动态价格优化机制

价格优化在零售市场上是一项关键性因素,因为各零售商都在努力为每款产品提供最具吸引力的价格优势。价格管理工作一直受到Amazon的严格关注,这也成为其吸引买家、压倒其它竞争对手并提振业务利润率的有效途径。

动态定价机制能够帮助Amazon公司以24 x 7 x
365的全天候方式关注产品价格并借此提升25%销售利润率。Amazon公司从2012年到2013年的销售总额增长了27.2%,同时也第一次凭借可观的营业额跻身全美十大顶级零售商。Amazon公司的产品定价策略通过对站内客户行为、产品可用库存、竞争对手同类产品价格、订购历史、产品偏好性以及产品预期利润率等数据来源的分析支持实时价格调整。Amazon公司目前每十分钟即对全部产品进行一次价格变更。

购物者们可能总会发现Amazon永远能够在电商竞争对手当中拿出最为优惠的产品价格——而这应当归功于其动态定价策略。Amazon的动态定价算法能够根据价格感知以及人类心理琢磨等方式在一小时内实现多次价格调整。除了利用摊薄成本压低畅销产品价格之外,Amazon还能够及时上调滞销产品价格以提振利润额。

举例来说,Amazon公司能够将销量最可观的智能手机的价格设定为较竞争对手低25%,同时将人气不高的智能手机机型的价格提升为较竞争对手高10%。

根据《彭博商务》发布的一份分析报告,“Amazon公司在特定时期内可能并不是特定产品价格最低的卖家,但其能够始终保持高关注产品的价格优势并借此吸引到大量客户,从而实现更理想的整体收益——在这方面Amazon的表现甚至超越了沃尔玛。”

Amazon拥有众多对其服务极为满意的客户,他们之所以给出高评价,完全是由于Amazon的动态定价策略,甚至未能在正确时间享受折扣时不会斥责Amazon而更倾向于归咎于自身原因。动态定价策略方面最典型的例子就是不久之前Amazon公司以70美元超低价对《星球大战》系列蓝光合集进行清仓,但一周之后价格则上涨到了134美元。买到这套礼盒的客户窃喜不已,而未能及时下手的买家则捶胸顿足。

Amazon的供应链优化机制

Amazon公司显然已经在强化客户购物体验方面取得了成功,但如果没有高效的供应链与发货机制,这一切仍然是空谈。根据由CapGemini发布的一份调查报告,89%的美国客户在无法立即得到发货服务时会立即转换到其它商务平台。而且相较于沃尔玛的约50万货品发送量,Amazon的发货强度高达1000万件。

Amazon公司拥有与制造商之间的实时对接通道,能够根据同一天内或者次日的交货数据追踪库存并为客户提供更易接受的选项。Amazon公司利用大数据系统根据供应商供应能力选择数据仓库,从而避免客户们由于无法及时收到货品而决定退单。这些大数据系统帮助Amazon预测必要的数据仓库数量以及每套仓库所需要的具体容量。

Amazon公司还利用图论原则选择优化规划、路线以及产品分组,从而最大程度降低交付成本。

预测式出货——Amazon在客户决定购买前即掌握其需求

Amazon公司凭借着预测式出货(Anticipatory
Shipping)专利技术显著提升交货速度,从而进一步扩大了自身与竞争对手间的比较优势。直观来讲,这项专利旨在利用预测式分析工具预先判断客户是否会购买对应产品,并在其实际下单之前就开始发货。这项专利表明,Amazon对于自己的预测分析系统在准确性方面的表现极具信心,甚至能够判断出客户要买什么、何时购买。

众多传统零售商都有能力为客户提供个性化购买建议,但Amazon正试图通过准确预测客户想要购买的货品而将技术手段提升至新的水平。如果其大数据算法出现了错误,那么Amazon可能必须承担产品重返物流中心所带来的种种意外成本。尽管存在着这些潜在挑战,但预测式出货技术仍然值得期待,我们也将关注其如何帮助Amazon在未来继续保持强大的竞争优势。

以沃尔玛、Amazon、eBay以及Norstrom为代表的各零售商正积极投资大数据技术,旨在维护客户关系并拓展自身业务。人们惊讶地发现零售商已经能够做出极为准确的预测,而这些与客户行为相关的准确判断将在长远角度上切实推动其业务价值。

本文转自d1net(转载)

时间: 2024-09-25 00:58:01

Amazon如何利用云服务处理大规模多维数据集的相关文章

瑞云渲染梁幸尧: 利用云服务实现超级电脑技术

10月30日-31日,2014腾讯全球合作伙伴大会在海南博鳌顺利举行.随着互联网科技的高速发展,互联网行业出现了爆发式的增长,大量资金与人才纷纷投入互联网创业大潮之中.10月30日腾讯云"大云端·大生态"峰会设立"如何打造互联网精品"的圆桌讨论,众多来自互联网新兴领域的大佬们展开了探讨. 腾讯云计算公司副总裁陈晓建.Rayvision瑞云渲染董事长梁幸尧.南京泥巴怪公司首席技术官秦川.上海良栀之志网络科技有限公司首席执行官冯良会.未来电视首席执行官张宇霞.Visua

DDoS攻击缓解:可利用云服务,不过要注意……

任何遭遇过DDoS攻击的企业都知道这种攻击会造成严重的破坏.除了显而易见的影响,例如性能下降或企业网站完全无法访问,还有不太明显的影响,例如,如果企业在IaaS或甚至主机托管提供商那儿选择"基于使用量的定价",DDoS攻击会给企业造成财务损失.当这些企业需要为带宽或CPU时间付费时,DDoS相关的成本影响非常显著. 鉴于分布式拒绝服务(DDoS)攻击可能会带来非常严重的后果,我们看到市场上涌现出很多专门防御或缓解这种类型攻击的技术.这些技术依靠不同的机制;例如,一种技术利用云计算来缓解

利用云服务等技术,计生委探索人口管理创新新模式

国家人口计生委与中国联合网络通信集团有限公司在京签署战略合作框架协议. 国家人口计生委与中国联通签署战略合作框架协议 此次,双方本着"诚实守信.友好协商.相互促进.共同发展"的原则,建立长期.稳定的信息化战略伙伴关系,为加强和创新社会管理,开拓人口信息化跨越式发展的新思路和新模式,依托高质量.安全可靠的专业化服务,充分利用物联网.云服务和3G通信等新技术,探索人口管理创新,不断提升人口和计划生育管理效能和社会服务能力.双方表示,要建立双方合作的长效工作机制,开展广泛深入合作.

运维的未来:云服务兴起,运维人员会“下岗”吗?

编者按:本文作者 Tyler Treat 是一名软件工程师,他认为运维的未来从很多方面来说都跟质量保证(QA)的未来走向相似.未来,运维要使开发者能够通过工具.自动化和流程实现自助服务.传统的运维( Ops)没有消失,只是在重组. 云服务的发展看起来让运维人员"丢"了工作,因为从传统意义上说,从本地(on-premise)转移到云平台意味着运维工作在相当大程度上外包给云提供商.这正应了那个流行词-- "无运维运动"(NoOps),许多人称之为 DevOps 的&qu

科技与人才的关系 云服务导致大规模裁员?

科学技术是第一生产力,科技的发展离不开人才的培养,同时科技的发展却又对人才形成一定的冲击.第一次工业革命.第二次工业革命的进行使得机器生产逐步代替部分人力劳动,随之而来的是工厂人员裁员,并对人才产生了巨大的需求. 时至今日,随着云计算.大数据.人工智能的发展,不少人有这样的担心:高新技术的应用是否会导致大规模的裁员.其实,这种担心并非空穴来风.网络发展至今,从1.0进入2.0再到移动互联,新闻的获取除了用户点击之外,媒体平台还根据网友的兴趣进行多维度计算并推送.在这个过程中,编辑的角色逐渐淡化,

云服务之风吹向校园 多种服务齐现

在教育领域,要更多地明确"云服务"而非"云计算".他说,在云计算的概念中,更多的是计算资源.平台,是科研的路线.而云服务则是从用户需求着眼,为用户提供技术支持,提供服务,这是两种不同的路线. 云服务之风吹向校园 "云计算应该讲是服务方式的一个转变,它起源于数据中心的绿色化."中科院声学所研究员侯自强说.他认为,只有"公用化",云计算才能走出"人云亦云"的误区,"要建立一个公用化的基础设施,利用规模

微软和IBM的云服务变革:区块链即服务

区块链每天都在想方设法形成新的行业和企业应用,不用多久这项技术将无处不在.未来,包括初创企业.学术机构.开源机构.联盟和金融机构等都会参与到这项技术当中.而目前,IBM和微软等科技巨头似乎最快捕捉到了这一趋势. IBM和区块链正构建一个新的领域--区块链即服务市场(BaaS,Blockchain-as-a-Service).据外媒报道,两家公司最近大量区块链投资都面向企业服务的项目,这些企业服务项目利用云服务基础设施减少企业区块链开发的大量后端工作.今年2月,IBM发布了IBM区块链服务(IBM

云服务应用开发所面临的9大挑战

云计算多年来发展迅速.云计算已经开始改变存储和访问数据的方式.我们目前看到智能手机应用程序使用云计算技术来允许用户存储和访问以前在智能设备上以前无法做到的. 云计算在企业中慢慢获得认可.据预测,到2018年,59%的云工作负载将由软件即服务(SaaS)产生.根据最近的一项调查,43%的IT决策者计划更多地投资云计算. 图片来源于网络 随着越来越多的人意识到其改进数据访问的优势,释放IT资源用于更具战略性的任务,减少和提高灵活性和效率,云计算的受欢迎程度已经飞速增长.云服务的使用已经与常见的云产品

亚马逊云服务营收未来三年有望增长两倍

最近几年,亚马逊云服务一直是亚马逊增长的一大动力.在最近两个季度,该服务营收同比增长了近80%,整个2015年的营收更是高达78亿美元,比2012年的18亿美元增长了三倍之多. 如今,在华尔街分析师的眼中,亚马逊云服务服务的增长势头不会在近期内减速. 美国投资银行Pacific Crest在周二发布的一份研究报告中预测,在未来三年内,云服务服务的营收将增长两倍,预计到2018年时将达到250多亿美元. Pacific Crest的这一强劲预期主要是根据亚马逊近期宣布的云服务相关大规模拓展计划而得