从政策驱动到技术践行 大数据开辟可持续发展研究新途径

可持续发展及面临的难题

可持续发展是世界对发展道路的审慎选择,也是我国的基本发展战略。随着全球资源枯竭、环境恶化的日益严重以及人类文明的演进和对生态保护理念的不断深化,可持续发展已经成为全球共识,对这一领域的研究也越来越热,日渐深入。

实现可持续发展的关键是如何制定合理的、能够平衡环境、经济和社会需求的复杂决策。然而自然、社会、经济系统本身的高度复杂性、动态性以及不确定性使得实现这一最优或近似最优的决策成为一个巨大的挑战。目前,可持续发展战略的实施仍然停留在政策驱动的层面,如何落实到技术实战,成为切实实现可持续发展的瓶颈问题。

可持续发展的新兴研究领域

近年来出现的计算可持续性(computational sustainability)是为解决可持续发展面临的挑战而出现的一个新兴的跨学科研究领域[1,2],其目的是综合应用计算机科学、信息科学、运筹学、应用数学、统计学等多学科交叉技术来平衡环境、经济以及社会需求,以支持可持续的发展。计算可持续性研究涉及能源、生态、经济、环境等众多学科,汇集了计算领域和各种具有悠久传统的可持续性问题,如生态多样性、自然资源管理、生物与环境工程、资源经济学等。

计算可持续性研究的重点是针对可持续发展问题,开发计算模型、数学模型及相关方法,以帮助解决一些与可持续发展相关的最具挑战性的问题。计算可持续性研究涉及面极其广泛,从野生动物保护、生物多样性到社会经济需求平衡、大规模环境部署以及再生能源的管理等都有涉及。如Cornell大学的计算可持续性研究机构(Institute for Computational Sustainability,ICS)采用计算的方法,对生态保护、物种迁移、人口分布等进行研究,构建数学模型并进行优化[3,4]。

大数据助力可持续发展研究

大数据时代的来临为可持续发展研究带来新的机遇和挑战。卫星技术、传感技术的发展日新月异,每天可以采集到的各类环境数据无时无刻不在增加。大数据蕴含丰富的信息和潜在的知识,给人们研究可持续发展开辟了一个以数据为驱动的全新的研究方式,将极大地促进可持续发展研究[5,6]。

目前,数据驱动的可持续发展研究已成为一个国际研究热点,各种会议正在持续热烈地举行。近年来,在人工智能(artificial intelligence,AI)、机器学习(machine learning, ML)等国际权威学术会议上,每年都有关于可持续发展的专题研讨。图1给出了《人工智能》杂志2014年“计算可持续性(Comp Sust)”专刊发表的可持续与人工智能相关的文章主题,由此可以看到,越来越多的人工智能、机器学习、数据挖掘等方法被应用到城市规划、物种分布、政策制定、健康、农业、交通、能源、智能电网等多种可持续性问题研究中[7-9]。这些研究进展预示着大数据将成为可持续发展研究中的重要技术支撑,基于数据驱动的可持续发展问题研究是一个很有潜力的研究方向,为解决生态、环境、经济等诸多可持续发展问题提供以数据为驱动的解决途径,具有重要意义。

  图1 2014年《人工智能》杂志Comp Sust专刊发表的计算可持续性相关研究主题

基于大数据挖掘的计算可持续性研究新动向

在大数据时代,计算可持续性研究同样面临着新的机遇和挑战。一方面,大数据限制了研究者可以使用相对简单的分析技术,已有的构建和优化这些模型的方法遇到了可扩展性等挑战;另一方面,大数据所蕴含的丰富信息和潜在知识,将开辟一个以数据为驱动的全新的研究方式,可以帮助解决更加复杂、更大规模的计算可持续性问题。笔者所带领的研究团队,在国内率先开展基于大数据的计算可持续性研究,研究思路如图2所示。

  图2 基于大数据的可持续发展研究思路

综合运用各种大数据处理、大数据分析以及大数据挖掘技术,解决大数据环境下计算可持续性面临的问题复杂性、计算效率、方法可扩展性等挑战,并结合可持续发展中亟待解决的焦点问题,开展可持续发展应用研究,整体研究框架如图3所示。

  图3 基于大数据的计算可持续性研究框架

在该研究思路和框架下,认为大数据是应用、算法、数据和平台4个要素的有机结合,并通过理论、算法研究与实际问题、应用研究相结合,以平台建设为支撑,将可持续发展研究从现有的政策驱动真正落实到技术实施。下面以可持续发展中的一个焦点问题——建筑环境影响评价为例,简要阐述上述研究思路的具体实施[10]。

气候变化与环境污染的首要因素是温室气体(green housegases,GHG)的排放,而建筑行业和建筑物正是产生GHG的主要来源之一[11]。在我国,建筑环境影响更是城市化加速发展过程中无法回避的重要议题。目前,我国的建筑业仍处于高投入、高消耗换取高增长的发展模式,给我国的生态环境带来了巨大影响[12]。近年来,我国碳排放和建筑扬尘等导致雾霾天气频发,严重影响了人们的正常生产和生活。开展建筑环境影响评价有助于缓解日益突出的建筑发展与环境恶化之间的矛盾,具有重要意义。

然而,目前广泛使用的环境影响评价方法代价高昂,且仅能从建筑生态学的角度给出局部或简化的评价结果,无法充分利用海量、高维、异构的建筑环境影响评价数据。对此,基于计算可持续性的研究理念,采用大数据挖掘技术,提出了基于数据驱动的建筑环境影响评价模型(如图4所示)。在该模型中,利用基于约束的特征选择研究解决环境热点分析问题;利用异构社区发现、半监督聚类集成研究降低大规模建筑环境影响评价的代价;利用多重异构聚类研究辅助绿色建筑设计指导。

  图4 基于数据驱动的建筑环境影响评价模型

在该研究中,建筑环境影响评价数据处理的难题被转化为一系列特征选择、分类、聚类的数据挖掘问题,再通过构建大规模分布式可持续发展数据处理平台,实现任务的分解与集成以及大规模算法的高效求解,从而利用大数据挖掘技术填补现有环境影响评价问题中数据处理的缺陷,并大大降低已有评估方法所需的时间和代价。

结束语

在计算可持续性研究的框架下,可持续发展的关键问题最终可以转化成计算和信息科学领域的决策和优化问题。大数据技术使得计算可持续性研究中大规模、动态、复杂问题的建模和求解可以以数据驱动的方式来解决,从而极大地提升了计算可持续性研究的效力并扩展了其研究范围,进一步地,将可持续发展问题从人们普遍认为的政策驱动,真正落实到技术践行。

本文转自d1net(转载)

时间: 2024-09-17 03:42:03

从政策驱动到技术践行 大数据开辟可持续发展研究新途径的相关文章

ofo最新智能锁技术和大数据平台亮相2017软博会

本文讲的是ofo最新智能锁技术和大数据平台亮相2017软博会[IT168 资讯]6月29日,由工业和信息化部.北京市人民政府共同主办的"第二十一届中国国际软件博览会"在北京展览馆盛大开幕.科技和时尚的ofo展台成为今年软博会一大看点. 以"软件定义世界,智能引领未来"为主题,今年软博会展出了大数据.人工智能.虚拟现实等新兴热点技术,以及安全可靠.制造业与互联网融合.软件创业创新等方面进展,同时,还展示了工信部.软件名城和重点地方省市一年来的取得的成果和政策举措. o

大数据是否会成为新驱动

热播美剧<纸牌屋>,让全世界影视业感受到了大数据的魅力.大数据,始于互联网.指向用户.可量化投资的新产物,正在越来越广泛地应用到电影产业.6月19日,第十六届上海国际电影节产业论坛聚焦大数据,爱奇艺创始人龚宇.搜狐公司副总裁刘春.腾讯在线视频部总经理刘春宁.乐视影业执行董事张昭,和电影业人士共同探讨:大数据会成为中国电影新驱动吗? 大数据催生<小时代> "穿正装的人喜欢看什么电影?我告诉大家,穿正装的人喜欢看剧情比较复杂.逻辑比较严谨的电影,这就是大数据带来很微妙的地方.

移动技术、大数据、云计算之于物联网 成功OR毁灭

随着物联网不断发展,今天我们再来讲讲移动技术.大数据与云计算对物联网的影响.  移动技术 说到移动技术,我想大家跟我一样对移动设备与移动应用在21世纪的创造记忆犹新. 据估计2015年底移动设备数量将超过全球人口总数. "物联网对移动领域是仙丹还是毒药?" 移动技术是物联网未来的重要一环,它改变了我们生活的方方面面. 对已经使用了物联网的机构所做的分析显示用户更偏好于享受现成的移动应用.事实上开发者应着力于为用户提供更强有力的控制,以便用户可以随意操控家里.车里以及办公室里的一切设备.

基于数据消冗技术的大数据加密算法研究

基于数据消冗技术的大数据加密算法研究 华北水利水电大学   王蒙蒙 论文的主要研究内容和创新点包括:1.大数据通用加密模型及加密技术原理研究.在对大数据基本特征及通用加密模型进行系统研究的基础上,深入剖析了基于现代密码体制.基于生物工程.基于属性基和基于并行计算四类大数据加密方案的技术原理和优缺点. 2.提出了一种基于Bloom filter技术的大数据消冗算法.根据大数据信息海量.数据量增长快.数据类型多样化.密度低和冗余度高等基本特征,深入研究了完全文件.固定长度块.变长分块和滑动窗口4种消

使用超大规模数据分析技术支持大数据预测

我给大家带来的演讲内容是关于"使用超大规模数据分析技术支持大数据预测"这方面的.首先介绍一下我自己,我叫韩卿,很多人叫我Luke.我是Kyligence公司的联合创始人兼CEO,Apache Kylin开源项目的创始人,同时也是这个项目的项目管理委员会主席,以及Apache软件基金会会员. 一.超大规模数据分析的挑战 Hadoop 首先,我想和大家分享一下我们在大数据技术领域碰到的挑战,这里在座很多朋友都是从传统的数据仓库出来的,事实上以前是没有Hadoop的,因此数据并不是很大,我记

多技术构架大数据存储应用

多技术构架大数据存储应用 英特尔公司 徐民先 在安防行业,大数据时代引发诸多技术革命,对于监控存储企业面临诸多挑战,如何解决是业界为之关注话题. 大数据时代的存储方式 英特尔的理念是在端到端的安防行业,全面实现数据价值的挖掘.所谓"端到端",包括前端视频采集.分析,存储以及后端数据中心处理.区别于单个设备的解决方案,英特尔以其优越的性能.灵活的设计为设备制造商和系统集成商提供整套系统化解决方案,从数据获取.存储.分析到应用各个层面均有覆盖.从硬件角度,英特尔提供的全系列处理器涵盖入门级

德勤:大数据时代下的新商务战略

 "一旦我们决定主动采取行动而非被动反应,可能性将数不胜数." 乔治 ·萧伯纳          大数据蕴藏着各种可能性.但套用乔治·萧伯纳的上述名言,企业领导者应如何主动采取行动而非被动反应呢?追求价值最大化的过程中,企业应主动出击,未雨绸缪.在适当的时机,通过大数据能够及时洞察在小数据中难以发现的新兴趋势,使企业在制定战略时更具前瞻性.   大数据应用现状  大数据的发展空间  事实上,在竞争激烈的环境中,大数据可能会迫使企业采取行动,而非被迫做出反应.然而,假设企业已对大数据应用

大数据 为信息安全赋予新的逻辑思维

信息工业技术的发展,催生了梦想的诞生与实现.一直以来,人类都希望机器能够具有人类智慧高效地完成工作,而这样的愿望,今天已经延伸至信息安全. 什么叫具有人类逻辑的信息安全?某位员工已经出差到外地,其账号却在公司办公室中登录内 网访问重要资料,作为一名网络管理人员,当你知道这一切的时候首先会想到:这名员工的账号被盗了,公司的商业机密正在被窃取.之所以得出这样的结论,是由 于按照正常的逻辑判断,将"出差"与"本地访问IP地址"联系在一起,在情理上是矛盾的.我们希望,机器也

大数据:军事变革新引擎

认识大数据之前,世界原本就是一个数据时代:认识大数据之后,世界却不可避免地分为大数据时代.小数据时代和无数据时代.大数据之所以会影响一个时代,因为它已经引起社会各行专家的高度重视:之所以能建立一个时代,因为它必将广泛应用在军事.经济.文化乃至思维等诸多领域.如果如维克托·迈尔-舍恩伯格所言,"世界的本质是数据",那么大数据时代必将深刻地影响着未来世界的信息化进程.在军事上,用小数据时代的技术和思维,很难与大数据时代的武器和理念相对抗.面对大数据时代的军事机遇和挑战,要么主动进击,要么被