气象信息化:看大数据如何拨云见日

ZDNET至顶网CXO频道 08月11日 评论分析:数据之前,有一个与之相似的概念——BI。BI提供了一种因果关系,从因果关系导出模型。大数据脱离了因果关系的横向模型,关注海量数据,海量数据本身就是价值所在。从通过对谷歌5000个搜索关键词的跟踪,美国政府准确地推断出某一地区即将爆发大规模流感,从而提前采取防控措施。还有强大的数据分析团队通过建模,帮助奥巴马稳获总统宝座。大数据屡屡显示其威力,已经渗透进每一个领域。当然,气象领域也绝不例外。越来越多的人意识到,天气不再仅仅是影响人们生活和出行的信息,如果加以利用,天气将成为巨大价值的来源。

生产过敏药Claritin的默克公司(Merck)一年前订阅了专业的天气预报,因此在去年7月准确掌握了今年3月美国地区的气象信息。这些信息除了今年3月美国大多数地区会异常寒冷,不具备过敏源出现的条件,还包括5月份温暖的空气将会带来花粉,以及其他过敏因素。

默克公司将其基于温度和湿度的气象数据告知沃尔玛超市。最终,双方经过合理判断和分析,决定增加对于Claritin和其他过敏药的宣传促销和供应。默克公司消费品保健主管Debbie Sonnentag说,这可能带来的数百万美元的额外销售额。

世界各国的公司都将气象分析加入他们的经营战略当中,并期待利用大自然获得更大收益。Sears零售公司通过危机指挥中心的监控设备对全国天气进行关注,以保证各种必需品库存充足。保险公司EMC通过分析冰雹灾害发生的历史记录,避免不必要的或者欺诈索赔。位于堪萨斯州的西星能源公司安排公司的电工随时关注美国其他各州的恶劣天气状况,以便在危机状况时给予帮助。

资产高达730亿美元的DHL快递公司利用气象数据分析,为每天3000多个航班的运行保驾护航。难怪负责DHL美国地区网关和网络控制的副总裁Travis Cobb说:“天气是一个价值连城的问题。”

美国国家气象频道(The Weather Channel)每天要处理20兆兆字节的数据,这里包括有关风、雨、雪、冰雹、龙卷风、温度、气压、湿度、地震、飓风、闪电等的相关数据。商业用户获取分析之后的气象信息,能更好地进行商业活动。比如,保险公司通过雨水的累计模型了解雨后汽车保险的索赔情况,医药公司通过气象地图了解各区域病人呼吸困难的原因等等。

日用消费品公司、物流企业、餐厅、铁路、游乐园、金融服务等都需要气象信息。一些公司通过分析天气如何影响客户行为,从中探索出接下来的营销策略。另有一些公司对未来天气进行预测,预见未来价值风险,尽量找出竞争对手所不能预见的潜在问题。天气其实是最基本的大数据问题。

激烈竞争 术业专攻

天气提供的商业机会无处不在,因为它和每个人的生活息息相关。因此,气象信息领域是兵家必争之地。谷歌的一种机器人装置可以对天气进行分析,为驾驶员提供个性化的导航系统,根据天气状况提醒驾驶员改变行驶路线。谷歌已为这种装置申请专利。据IBISWorld市场调查机构数据显示,现在美国气象信息领域市场主要由美国国家气象频道和Accu Weather主导。其中前者占有的市场份额为51%,后者占有14%。两者在争夺大公司客户上竞争激烈,前者目前拥有家得宝和美国航空等用户,而后者拥有Lowe’s公司和联合太平洋公司等用户。

气象数据领域中,Weather Trends International和Custom Weather这样规模较小的公司,则关注于更加细分的领域,如农业或能源等。像CoreLogic和Planalytics等IT供应商则提供带有分析工具和服务的气象信息对来自ERP、制造业和其他IT系统的数据进行整合。这些公司中大多数使用以保护公民生命和财产安全、提高国民经济为使命的美国国家气象局提供的免费数据。但是这些公司也为其补充了自己系统和传感器上的信息,并通过数据分析和新的算法创造新产品。

AccuWeather的天气营销服务可以为企业选择打折或增加库存的好时机提供一系列的数据,也可以为社交媒体提供有意义的天气信息。AccuWeather表示,其服务可以帮助客户找到当地某种产品的销量与200种天气变量之间的关系。例如,在飓风天气之下,最畅销的食品是蓝莓烤面包。这种分析需要多个IT部门的协助。在气象领域,研究与开发是非常重要的部分。

拥有77项专利的美国国家气象频道宣传说:“比天气更加强大的是我们帮助你从天气当中赢利的能力。”尽管IT技术日益成熟,分析工具日益强大,但还是有很多无法预料的天气状况。气象监测卫星在23000英里以外的高空,传感器分布在世界各地的角落里,各种监测设备使得公有和私人气象组织定期分析数以百万计的观测结果。但地球表面和轨道卫星之间的空间才是恶劣天气出现的区域。

正因如此,天气成了很多公司经济没有达到预期的替罪羊。在最近华尔街的会议上,高管纷纷将凉鞋、绿豆、甜甜圈、书、飞机票和汽车零部件等各种商品的销量下滑归结为天气所致。在最近的年度报告当中,联邦快递对投资者说:“我们极其容易受到气候变化带来的自然风险,如变化的气候条件和生态系统。”

Alberto-Culver前副总裁,现为供应链顾问的Al DeChellis表示,在如此充分的数据(大部分都可从联邦政府免费获得)和强大的计算能力的基础上,企业再将天气作为业绩下滑的理由显得很牵强。“如果你出售的是季节性产品,而你又没能充分利用气象数据,我只能说,你没有做好你的工作。”

拨云见日 理解数据背后信息

DeChellis曾就职于现在属于联合利华集团的Alberto-Culver公司。8年前,DeChellis率先利用天气数据来出售一种产品:静电卫士(Static Guard)。这款季节性产品是一种可以帮助人摆脱烦人静电的化学喷雾。DeChellis表示,通过对气象数据的研究,他们发现,相对寒冷天气来讲,湿度才是静电的罪魁祸首。如果湿度在三周以上下降到50%,那么静电就会大到让一个女人的丝袜粘住她的裙子。

DeChellis团队和Planalytics一起合作,他们将一个地区的干燥程度和产品的销售进行挂钩,并说服零售商对Static Guard给予更多的关注。例如,在芝加哥市场,推销员就会建议零售商对Static Guard进行每年两到三次的推销,而不是每年一次。

Scott Jean是EMC保险的首席精算师,看起来他有点像一位天气侦探。因为他知道冰雹在中西部地区是一个大问题,同样,房屋所有人对于冰雹的索赔在这些地区更是一个大问题。单房屋所有人对冰雹灾害造成的损失索赔这一项就占到了房屋所有人对公司索赔总金额的30%,而且这笔费用还在递增。同时Jean发现,在2009年美国经济衰退后,冰雹灾害的索赔在不断上升。这是偶然现象吗?No!他怀疑有些业主在冰雹来袭之后,针对并非此次冰雹造成的损坏进行索赔。比如Jean发现,有些人索赔的房屋破损可能是10年前EMC已经赔偿过的损失。

CoreLogic等为EMC提供了冰雹灾害的精准数据,如冰雹发现的具体日期和地点等,EMC保险因此发生了很多不在赔偿范围内的申请。但在处理索赔的过程中,保险公司还要深入考虑冰雹的规模和强度。不管申请屋顶索赔的业主到底是不诚实还是只是犯了错误,EMC都不想为此承担费用。Jean说,对于保险公司来说,房主保险的利润微乎其微,但如果可以使用合理的分析气象数据,赢利是完全可以实现的。Deloitte Analytics的高级顾问、哈佛商学院和巴布森学院教授Tom Davenport说,过去的几年中,分析技术的进步和丰富的气象数据使得保险公司的分析创造力和判断正确性都显著提高。

IT组织普遍擅长的是从内部系统挖掘数据,并使用技术工具将其和外部信息结合。但是一些IT组织由于不理解数据,就不能从中寻找出最重要的信息。对于气象数据来说,这种洞察力十分重要。CIO们不仅仅想获得有用的数据,他们还要利用有效数据帮助公司创造新的产品和服务,亦或帮助简化流程。虽然没有人能一直准确预测天气,但要学会了解天气的发展规律和趋势,这对于业务十分有用。Davenport说:“你不能控制天气,但是你可以为控制它做充足准备。”

灾难来袭 应急反应高于一切

今年2月的暴风雪Nemo给Sears零售公司带来了巨大挑战,但是Sears价值398亿美元的全国连锁商店为其带来的产业规模、应灾经验、业务关系和科学技术,使其对暴风雪做出了积极响应和成功的应对。

随着Nemo愈演愈烈,Sears的总指挥部进入应急状态。Sears指挥中心成立于2010年,通过7台电脑监控设备对变化的数据和信息进行跟踪记录。通过订阅本地和全国的新闻资讯、谷歌地图等多种渠道,Sears建立了受灾地区的地图,地图上标注不同颜色对灾害的严重程度进行区分。红色代表严重,而在Sears的地图上大多红色占了大部分,这样来自风险管理、设施、企业通信、库存管理、物流、运输和IT部门的员工们,为保障员工安全和控制商店流程做好防备。

暴风雪来临之际,Sears首先将其现有库存数据等进行了核对。之后,危机处理小组列出了受灾地区急需的物品,并设法将这些物资运往灾区。在分析气象数据后,Sears首先将除雪机、发电机及其他必需品存储在了Nemo可能会经过的地区内或者附近,随时准备将这些物资运往当地的Sear商店。在一些地方,Sears要求供应商直接将货物运往Sears在新英格兰的商店,避开通常送货的区域分销中心。当然,家得宝和Sears的其他竞争对手都在做着相同的事情。

Sears在尽力帮助客户的同时也在做生意。Nemo来临的前几天,一个来自威斯康星洲的供应商为Sears准备了六卡车发电机。在Nemo全面来袭的前晚,Sears召开了发布会,公布了每个商店的具体产品清单。发布会上,Sears同时发布了实时气象信息: Nemo来临时,每小时的大雪将达2英尺,风速达到50英里每小时。为方便人们购物,Sears在网上供应所有实体店中的商品。

每天Sears都会收到“LogHot”的电子邮件警报。警报包括风暴路径的预测地图,以及可能会受到影响的商店和分销中心,主要工作人员携带有专门在风暴中通信的移动设备,在风暴影响区域周边工作的员工在个人wiki上更新现场的信息。员工们分享的信息有:哪些道路被封,哪些地区配送中心被关闭,还有哪些地区的送货卡车没有因为暴风雪而停运。

销售数据是那个时期Sears应对暴风雪挑战的一个检测指标,但更重要的是,Sears对风暴进行了积极响应,并且为灾区民众带去了必需品。DHL快递就对其天气影响客户满意度的强烈关注引以为豪。DHL数据的来源很多:国家气象服务、航空公司合作伙伴、机场、AccuWeather、天气频道,还有很多专门研究天气的组织。DHL分布在辛辛那提、德国和中国香港的网络控制中心,每天24小时不间歇工作,所以他们的数据永远都是最新的。

DHL网络控制组主管Mark Becker说,大自然是变幻莫测的,我们只有用经验来应对。他的团队中拥有超过20年工作经验的管理者占大多数。

每天有3000个航班携带着DHL的包裹飞往220个国家。DHL预测暴风雪Nemo将袭击美国大部分地区,于是在暴风雪来临前,DHL令其大部分飞机撤离主要机场,暂时停在其位于辛辛那提的中心休整。这个紧急决策基于经验、气象数据信息和IT系统建立的模型。DHL网络控制中心副总裁Cobb说:“相比早年间气象信息缺乏的日子,现在的判断更为准确和及时。”

直到现在,一些不完整和错误信息都会影响工作。Cobb说,每一个情况都是特殊的,我们需要做的就是努力让风险降低。DHL面对的最不寻常的天气挑战在2010年。当年一个位于冰岛的巨大活火山在经历200年的平静之后,于2010年4月突然喷发。很快,巨大的火山灰覆盖了周边国家,火山会灰最高时达七英里高。4月到5月之间,政府将大多数欧洲北部的机场关闭了8天。在此期间,全球范围内10.4万个航班被取消,每天被取消的航班多达19000个。

随着火山喷发的态势慢慢变得稳定,被封锁的航道重新开放,但是 DHL仍然需要靠自己来决定飞机是否立即运行,以及运行之后应该选取的飞行路线。在航道重新开放之后, DHL是第一个让自己的飞机驶入欧洲西部的公司。Cobb说,这关乎一个公司的荣誉,同时也会影响公司的业务。在那之后,公司市场份额持续上涨。

依据客观事实判断 去除个人感情因素

在信息不完整的情况下,哪怕是最好的管理者都不能做出准确无误的判断。美国国家气象频道的CLO Koehler说,气象语言十分重要,随意描绘天气而全然不顾措辞是十分危险的。美国国家气象频道内部有一本专门的气象用语词典,在里面详细讲述了如何将天气的数据资料转化为客户可以清楚理解的语言。例如,当降水的概率是60%,甚至以上时,天气预报员说很有可能降水。当这个数字低于60%时,预报员说有降水的可能。

回到默克公司,Sonnentag告诫她的团队不要对天气数据进行主观判断,因为人们对于天气的理解有时候会“感情用事”。她举例说,有些人之前经历过销售受天气影响的案例,就会将目前销售的好坏归结为天气所致。“即使那是确实发生过的情况,也不能因此对未来进行随意的预测。数据拒绝主观性。”Sonnentag说。

与此同时,她希望公司今年秋天的销售可以成功。今年春天来的比较晚,因此秋天风和日丽的日子很可能也会延长。她期望是一个温暖的十月。Sonnentag对自己公司的天气数据很有信心,默克公司决定在今秋以超过往年的宣传力度来宣传Claritin。 风险还是在于天气,如果说由于天气变化默克公司不得不将滞销的Claritin运回,并将过期的药品丢掉的话,他们将损失巨大。一切都将在几个月之后揭晓。

原文发布时间为:2014年8月11日

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-09-20 16:48:26

气象信息化:看大数据如何拨云见日的相关文章

【观点】离开了信息化,大数据就是为他人作嫁衣

12月8日,中国(廊坊)大数据产业周大数据产业转型升级高峰论坛在廊坊开发区召开.与会专家和业内人士认为,在新的大数据时代,人人都应该具备数据意识.数据思维.数据行动.随着互联网.信息化的发展,生活.生产和社会等各个环节都在被数据化,这也是未来发展的趋势,并且谁的数据化程度高,在未来的竞争中谁就占优势. 清华大学数据科学研究院执行副院长韩亦舜在会上做了<大数据时代的思维转型>的报告,跟大家分享了大数据的价值所在以及大数据时代的思维方式,以下是根据会议速记整理的干货(内容略有删减,小标由编者添加)

从5大行业领域看大数据场景应用

大数据定义 对于"大数据"(Bigdata)研究机构Gartner给出了这样的定义."大数据"是需要新处理模式才能具有更强的决策力.洞察发现力和流程优化能力来适应海量.高增长率和多样化的信息资产. 随着云时代的来临,大数据(Bigdata)也吸引了越来越多的关注.分析师团队认为,大数据(Bigdata)通常用来形容一个公司创造的大量非结构化数据和半结构化数据,这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱.大数据分析常和云计算联系到一起,因为实时的大型数

用&quot;数据&quot;说话 从SACC看大数据应用之道

文章讲的是用"数据"说话 从SACC看大数据应用之道,正如<大数据的冲击>的书中提到的那句话:"Google.Amazon.Facebook.Twitter,这些称霸全球互联网的企业,它们的成功都具备一个共同的因素,你知道是什么吗?"当然不是商业模式,因为他们的商业模式不尽相同.当然也不是客户服务,尽管这个很重要,那这其中最重要的共同点恐怕就是大数据技术的应用. 曾经有人说互联网将改变很多的行业,但在热衷大数据技术的人眼里,真正改变那些行业的并不是互联网

上海医改办许速: 利用信息化、大数据制定医改方案

"公立医院改革到今天,最缺位的还是政府.政府一开始缺位,主要是从资源上来说:现在最缺位的是管理理念.管理思路和管理方法.不要说院长怎么不好,社区怎么不好,实际上政府的管理比较不好."近日在杭州举行的第八届"健康中国·西湖论坛"上,上海市医改办副主任许速对合理使用大数据支持医改作出详细解读. 近年来,中国的医疗数据呈现指数级增长,不仅催生了大量创业公司,更为监管的科学性提供了支持.但其价值并未得到有效挖掘,甚至有陷入数据海洋无所适从的趋势. 多位医改办负责人认为,打通

原工信部部长李毅中:信息化、大数据促进产业转型升级

5月5日,"2017中国工业大数据大会·钱塘峰会"在杭州国际博览中心举办.本届峰会以"数据驱动创新 融合引领变革"为主题,围绕工业大数据展开分享与交流.原工信部部长.中国工业经济联合会会长李毅中,以"信息化.大数据促进产业转型升级"为题探讨了自己的看法. 以下为嘉宾演讲实录: 各位领导,各位专家,各位企业家,各位朋友,首先祝贺峰会的成功举办!浙江省和杭州市在推进信息化方面走在前列,峰会在这里召开,更具有特殊的现实意义.推进"四化&quo

坐看大数据之道:51CTO专访大数据专家郑玮

大数据已经渗透进人们生活的方方面面,比如商店促销决策.政治活动指引等等.究竟大数据目前发展状况如何?51CTO专访大数据专家郑玮将为您讲述大数据之道. 专访视频专题,请访问<坐看大数据之道> NoSQL与大数据 NoSQL最早出现时,主要是Twitter这些社交媒体网站在用.因为他们需要处理每时每刻用户上传的海量图片.视频等非结构化数据.大数据概念提出之后,由于其在非结构化数据方面的优势,迅速融入大数据整体平台. HBase在大数据平台发展较快 为什么之前XML数据库没有成功?NoSQL的数据

王珊看大数据 - 产品和技术

王珊看大数据 发布时间:2012.05.16 09:22      来源:赛迪网     作者:赛迪网 大数据时代的到来,数据带来了爆炸式的增长,数据设备使真实世界能够被数字化处理,数据由量的积累而产生了分析处理价值. 中国人民大学信息学院教授.博士生导师王珊表示,大数据的来源主要来自互联网公司Facebook.大型企业.电信.金融等行业的简单数据类型和结构化数据.现在Facebook拥有强大的数据仓库.互联网和电子商务的发展使数据库技术面临着海量数据处理的挑战,需要高度的可扩展和高度的可伸缩.

从五大行业案例看大数据的应用逻辑

本文从一则搞笑的大数据应用案例入手:某超市通过分析一位女顾客的购物数据(包括购物清单,浏览物品,咨询信息,视频监控信息<超市内徘徊区域>等),根据分析结果给该女顾客寄来了孕婴童试用品,这一举动让该女顾客的父亲非常生气,立马致电该超市投诉,因为她女儿还未成年!超市经理立马登门拜访道歉,不过事实是,不久后这位小女孩因遮盖不住隆起的腹部而不得不向父亲告知真相:她真的怀孕了.对于企业而言,大数据有时候就像是一个侦探家,能够拨开重重迷雾,找到问题的本质以及解决方案,而关键在于,你是否真的懂得如何去驾驭它

从Facebook看大数据存储怎么选

最近有位朋友向我咨询技术问题,他们的客户提出一个大数据系统的服务器硬件需求,其中元数据有xxTB左右.并给出了以下初步建议: 节点类型1(元数据节点) Xeon E5 14核CPU x2 256GB DDR4内存 600GB SAS 15K硬盘x5 RAID卡 节点类型2(数据节点) Xeon E5 14核CPU x2 128GB DDR4内存 4TB 7.2K近线硬盘x4 RAID卡 软件并非我擅长的方面,不过大数据概念炒了好几年,从各方面还是多少了解到一些Hadoop/HDFS硬件架构方面的