深层数据:推动大数据成功的关键所在

FirstFuel公司CTO表示,寻求规模更小、更具相关性的浓缩型信息是解开大数据无穷潜力的关键所在。

毫无疑问,大家肯定都听说过“大数据”,但“深层数据”呢?答案恐怕是否定的。不用紧张,我并不打算给硬塞给大家新的专业词汇。不过鉴于近期以来企业用户正持续就需要收集并管理的数据量展开争论,我认为深层数据的概念应当进入各位关注数据潜力的企业用户的扁当中。专注于建筑行业能源利用效率的分析企业FirstFuel公司CTO兼首席数据官Badri
Raghavan对此有着自己的独到见解。该公司的客户们,包括政府机关与能源机构,都在使用FirstFuel的能源分析服务以推动更为环保、更具成本效益的方案向办公环境、学校以及其它设施建设领域的普及。

在一次电话采访当中,Raghavan谈到了他对于“深层数据”的看法以及FirstFuel公司如何将这一理念转化为自身竞争优势。

“我们所谓的‘深层数据’其实是相关领域多种专业性知识储备的综合体——对于我们来说,也就是能源行业与数据科学的结合——旨在帮助技术人员从宏观规模角度对建筑的能源使用情况作出分析,”他告诉我们。

深层数据的概念与信息密度拥有密不可分的关联。“给定数据流当中可能包含大量信息,”Raghavan表示。“相反,大家也有可能收集到大量缺乏足够结论性内容或者信息的数据。”

大家可能已经猜到了,Raghavan本人对于数据收集或者尽可能汇总更多信息的作法并不认同。但目前很多企业都是这样做的,即在尚不确定是否有意义的情况下盲目汇集规模庞大的数据总量。

数据收集的真正核心在于效率,或者说“对目前已经掌握的数据资产加以利用。要实现这一目标,我们需要首先明确自己需要解决哪些技术或者业务难题。在大家可资利用的资源当中,哪一种数据流的作用最为重要?”

在FirstFuel所从事的行业当中——即分析大型建筑物的能源消耗情况——单一数据流往往成为最重要的计量数据。

“我们会把计量数据作为一栋建筑物的扫描结果。利用我们的数据科学算法,我们可以对建筑物的健康状况作出分析、找出其中的薄弱环节以及仍有效率提升空间的部分。”

他指出,这就是深层数据实际起效的一类极佳实例。计量数据是“一种相对精练的数据流,但其中包含的内容却相当丰富,”FirstFuel得以借此定位其最感兴趣的问题:找出能源消耗当中有违效率优先原则的状况。

当然,对于很多企业来说最重要的是摸清哪些数据流最具分析价值,而后还需要将其与其它数据加以结合以获得新的分析结论。

FirstFuel已经找到了几种通常最具潜在价值的数据流类型。

“计量数据能够告诉我们与建筑物相关的大量信息,”Raghavan指出。“接下来我们开始使用高分辨率航空影像——是的,就是谷歌地球,我们在工作中大量使用这类资料。从我们的角度来看,其中包含丰富的潜在信息。它能告诉我们这些建筑物楼顶布置有哪些类型的设备,”而FirstFuel能够借此大体判断对应建筑物需要消费的能源总量。

这家分析企业还将来自国家气象服务中心的数据纳入考量范畴。“我们着手进行设置,并逐步逐步再逐步将其引入。只要能够对信息分析结论起到改进作用,我们就会将相关数据流纳入考量。”而根据他的说法,这就是深层数据的基本概念。“大家可以对规模相对较小的数据集进行深层研究,而不再像过去那样长期面对浩如烟海的数据总和……并试图从其中捞到象征有价值结论的小针。”

举例来说,FirstFuel完全可以收集多种额外数据——其中包括与交通流量及泊车状况有关的信息,此外Twitter数据流也有涉及——但事实上根本没有明确的理由驱使他们选择这样费力的方式。

“相对于直接跃入存在海量数据可资进行潜在分析的大数据海洋、却往往最终几乎甚至完全得不到有价值信息,我们更倾向于从规模相对较小的数据量中获得更大收益——即将注意力集中在那些能够切实反映建筑物客观状况的数据身上,”Raghavan指出。“在制定出这样的解决思路后,接下来我们会逐步把想法变成现实。”

原文发布时间为:2014-08-01

时间: 2024-09-22 21:42:44

深层数据:推动大数据成功的关键所在的相关文章

年轻一代是如何推动大数据成功的?

随着年轻一代的企业家踏入大数据这个行业,他们不只局限于利用当前的优势,还让大数据发展,他们正在推进和改变大数据编写和使用的方法. 现在大数据只增不减,商家意识到他们要么加入这个狂热中,要么只能加入反对那些使用更快速准确信息的公司的艰难战斗中.然而,随着年轻一代的企业家踏入这个行业,他们不只局限于利用当前的优势,还让大数据发展,他们正在推进和改变大数据编写和使用的方法. 这个领域有了新头脑的指导, 大数据发展 到了一个全新的创新水平.看看在我们周围即可发现,我们手机上的小通知,在营销活动中登录自己

印江推动大数据应用工作取得率先突破

2016年,印江土家族苗族自治县围绕应用抓创新,大力推进信息基础设施建设,强化电子商务市场主体培训,有效推进农特产品市场开发,近日,又召开推进会,推动大数据应用工作取得率先突破. 印江县及时成立工作领导小组,围绕数据从哪里来.数据存哪里.数据怎么用,制定出台实施意见,重点以提升产业发展.社会管理和公共服务能力为着力点,大力实施建设一个大数据管理中心,大力推进社会管理大数据应用.公共服务大数据应用.产业发展大数据应用三大行动计划,重点实施智慧政务.智慧城市.智慧交通.智慧医疗.智慧旅游.智慧农业.

陈皆重:上海通管局四项工作推动大数据开发

上海市通信管理局局长陈皆重在第六届上海通信发展年会上表示,在国家宽带战略和上海智慧城市战略持续推进的时代大背景下,上海市通信管理局将在市委市政府的正确领导下,领导全行业紧紧抓住大数据开发的契机,深入开发大数据的商业价值,积极打造成熟的产业链. 他介绍称,上海市通信管理局将展开四项工作来营造大数据发展良好环境. 第一.落实国家的宽带中国战略.成功打造大数据的产业链,需要有先进的数据分析技术和创新的商业模式,也更依赖于快速.高效的信息建设.上海市通信管理局为此将深入通信行业做好宽带提速和建设工作,为

政策研究:盘点政府推动大数据应用举措

文章讲的是政策研究:盘点政府推动大数据应用举措,一.政府:推动大数据应用的最关键力量 (一)政府掌握大量最具应用价值的核心数据,是推动大数据应用的最关键力量 根据麦肯锡大数据研究报告指出, 各个行业利用大数据价值的难易度以及发展潜力 对比下,政府利用大数据难度最低而潜力最大. 另一方面政府开放大数据运用已经是大势所趋: 1. 政府掌握了大量最具应用价值的核心数据.过去十多年来政府投资进行了大量电子政务或者称为政府信息化的工作,后台积累了大量的数据,而这些数据和公众的生产生活息息相关.有研究表明政

哈尔滨市政协就推动大数据产业发展建言献策

大数据既是一种海量的数据状态及其相应的数据处理技术,也是一种新的思维方式,更是一系列新理念.新方法.新要素的集中体现.当前,信息技术发展突飞猛进,信息技术创新层出不穷,以大数据为主导的信息化浪潮正成为加速企业技术创新.推动政府职能转变.引领社会管理变革的利器.把握大数据发展方向,推动大数据开发应用,发展大数据服务产业,已成为世界打造经济社会升级版的重要抓手. 日前,哈尔滨市政协经济委员会深入开展调研.广泛征求意见,编写了<抢抓大数据战略发展的历史机遇加快我市经济社会转型升级>调研报告.报告指出

马凯:坚定不移推动大数据产业加快发展

贵州代表团举行全体会议,审议<政府工作报告>.中共中央政治局委员.国务院副总理马凯参加贵州代表团审议.中共中央政治局委员.中央书记处书记.中央办公厅主任栗战书继续参加代表团审议. 全国人大代表.省委书记.省人大常委会主任陈敏尔,全国人大代表.省委副书记.省长孙志刚,以及李岷.廖飞.吴晓灵.王伟.楚海涛.谢泉.何刚.谢强等代表先后作了发言,提出了建议. 在认真听取代表发言后,马凯说,<政府工作报告>实事求是地对过去一年以及"十二五"工作作了总结,对今年面临的形势作

大力推动大数据发展应用 促进我国数字经济加快发展

记者从国家发改委获悉,5月25日,由国家发改委.工业和信息化部.国家互联网信息办联合主办的国家大数据专家咨询委启动大会暨国家大数据创新联盟成立大会在贵州贵阳召开. 国家发改委副主任林念修在会上强调,当前和今后一个时期,国家发改委将围绕推进供给侧结构性改革要求,深入实施创新驱动发展战略,大力推动大数据发展应用,促进中国数字经济加快发展,并将重点在以下四个方面持续发力:一是着力完善基础设施,构筑数字经济新支撑;二是着力发掘数据资源,打造创新创业新引擎;三是着力推进产业发展,培育经济发展新动能;四是着

实施十大工程 推动大数据应用

来自贵阳综合保税区的最新消息,该区将实施智慧城市设计工程等十大工程,推动大数据政用.民用.商用创新应用,力争到2020年,全区大数据核心产业规模超100亿元. 根据<贵阳综合保税区大数据十大工程推介方案>,该区将实施智慧城市设计.高速WiFi覆盖.智能交通与公共安全.智能生态管理.云上方舟智慧小镇.大数据人工智能应用."贵阳综合保税区大数据精准政务服务综合平台".政务工作调度平台.贵阳综保区"数据铁笼".跨境电子商务平台建设等十大工程.记者 肖达钰莎 来

政策推动大数据产业高速发展 2018年市场规模将达180亿

近年来,全球大数据产业不断成熟,各领域大数据应用全面展开,为大数据发展带来强劲动力.数据显示,2016年全球大数据市场规模达到453亿美元,同比增长25.8%.大数据逐渐成为全球IT支出新的增长点. 相对于发达国家而言,我国大数据产业仍处于起步发展阶段,各地发展大数据积极性较高,2017年1月,工信部发布了<大数据产业发展规划2016-2020年>,进一步明确了促进我国大数据产业发展的主要任务.重大工程和保障措施.国家政策的接连出台为推动大数据产业高速发展提供了良好的发展环境. 据前瞻产业研究

济南推动大数据产业发展 居民生活将有新变化

16日,济南召开市委.市政府例行新闻发布会,通报<济南市数创公社2020发展行动计划>,这是济南首个针对大数据出台的指导性文件.该计划将对于济南打造新旧动能转换先行区,实现"变道换向"起到积极的推动作用.今年,济南将重点推进医疗健康.治霾.治堵方面的大数据工作. "数创公社"是济南大数据产业的一个品牌,是在2016年6月创造性提出的概念,其中,"数"就是大数据,"创"就是创新创业,"公社"就是社