席壮华:大数据技术应用解读 以第三次经济普查为例

IDC发布的《中国大数据技术与服务市场2012-2016年预测与分析》显示,大数据的市场规模将于2016年增长到6.17亿美元,复合增长率达51.4%,市场规模增长近7倍。2013年2月5日,国务院出台了《推进物联网有序健康发展的指导意见》,从政策层面正式把大数据纳入到物联网产业领域。大数据时代,数据已经变成比肩人、财、物的战略资源,如何管理及应用这种资源是每个政府部门和企业都要学习的新技能。关于大数据技术的落地应用,赛迪网近日采访了同方物联网应用产业本部数据资源工程事业部总经理席壮华,席壮华就大数据技术的理念及应用过程通过具体实例——全国第三次经济普查项目予以深度解读。

同方物联网应用产业本部数据资源工程事业部总经理 席壮华

大数据的应用首先需要顶层设计

十七届五中全会以来,胡锦涛同志多次强调要加强“改革顶层设计”。在“十二五”规划中,“顶层设计”的提法更是不绝于耳,特别是《国家电子政务“十二五”规划》和《“十二五”国家政务信息化工程建设规划》中,更是多次强调顶层设计的意义与重要性,顶层设计理念受到越来越多的重视。信息技术大发展的时代,物联网、智慧城市、大数据等概念似乎已普及到每个城市,但在谈到具体落地应用时,做得成功的却微乎其微,有种说法解释说这是因为我们在智慧城市的推进过程中遗漏了顶层设计。对于这样一种说法,席壮华也表达了自己的观点,“同方作为信息服务商,非常重视智慧城市的建设。但智慧城市的规划和推进是十分复杂的系统工程,比如说每个城市都有其独特的历史传承和文化底蕴,顶层设计如何考虑这些历史、人文的因素?再比如,每个城市在周边区域中是怎样的定位,要起到怎样的辐射作用和影响?这些都是和一个城市的定位和发展目标紧密相关的。而我们再看一些智慧城市的具体规划,更多的或更侧重于各种技术方案和技术标准的规划,缺少对一个城市定位和发展目标的准确、完整的论述,更谈不上对城市发展目标的有效的、成体系的分解。”

在智慧城市具体推进的过程中,肯定需要各种基础技术和现代技术的支持和运用,其中就包含众多的信息技术,尤其是大数据技术。大数据作为智慧城市发展的基础动力,如果要想良好地支撑智慧城市的发展,真正能发挥出“智慧”的作用,就“需要建立两级数据中心,即总数据中心和二级数据中心。总数据中心负责围绕总体目标进行目标分解、各条块或各领域运行规则的制订和基于数据的评判;二级数据中心负责各条块运行规则的执行,收集数据并向总中心反馈数据,它是相对细化的和更具有针对性的。”

指标体系:在顶层设计思想下刻划目标

同方物联网应用产业本部数据资源工程事业部总经理席壮华说到,“顶层设计概念很好解释,但具体实施起来是比较难的。信息化的最高层是决策支撑系统,然而真正好的决策支撑系统并不多见,需要用数据来去帮助实现,通过数据要能准确反映工作现状和目标之间是否有偏离,有什么程度的偏离,这样领导才能做好决策。”也就是说一个项目的顶层设计的前提是要了解其发展目标,但目标不是简单就能数据化或技术化的东西,这就涉及到如何把目标这一概念性的东西转化成可以量化的数据。

“同方的做法是在目标跟数据之间加上一个指标体系,拿指标去分析、刻划目标,这就像企业的绩效评估一样,它需要不断的细化和量化。”同方在多年数据业务的经验基础上,很擅长按照客户的要求将目标转化成对应的指标体系,再通过不同的业务系统去真正采集或者加工出来整个体系需要的所有指标的数据,然后再用数据去监测、评价、分析。这样就可以更有条理、更准确地帮助用户了解到实际工作与目标之间的偏差,是要做局部的工作调整,还是要做某些子目标的调整,以保证最终目标的达成。

同方大数据优势及具体应用——第三次经济普查

大数据带给大家的不应该是一些新的技术、新的产品,而应该是新的理念、新的模式,只有这样才能真正把大数据的价值发挥出来。同方十年来一直在做数据方面的应用,从数据的规划,到数据采集和集成,再到数据的分析和应用,同方已经形成了一整套的技术体系和产品。并积极推广大数据落地理念,基于同方自身的指标体系方法和顶层设计理念,帮助客户建立完整的数据资源体系,对数据进行统一的管理,以发挥其整体效率。另外我们认为,数据作为与人、财、物比肩的资源,它是可以依托于指标体系、独立于业务的,这就使得同方在具体应用过程中,不受现行具体业务的束缚,更容易发现和建立一些新的模式,具有更大的应用及发展空间。第三次全国经济普查是在国务院第三次全国经济普查领导小组办公室统一领导下,按照“统一部署、统一标准、分级负责”原则进行的全国性普查工作,目的是全面调查了解我国第二产业和第三产业的发展规模及布局,了解我国产业组织、产业结构、产业技术的现状以及各生产要素的构成,进一步查实服务业、战略性新兴产业和小微企业的发展状况,摸清我国各类单位的基本情况,全面更新覆盖国民经济各行业的基本单位名录库、基础信息数据库和统计电子地理信息系统。

同方股份有限公司中标第三次全国经济普查第三包,项目金额9429万元。所采购PDA设备— E人E本,主要用于普查数据的移动采集工作。此次三经普普查数据的采集和处理,由普查员使用移动采集终端(PDA)进行定位、核查和证照拍照。在此基础上,对非联网直报单位和个体经营户还要使用移动终端(PDA)采集普查表数据;对联网直报单位也要使用移动终端进行现场核查工作。此外,同方还承担了三经普移动终端数据采集软件的设计和开发任务,以及后台国家统计局一套表平台的数据汇集和后期的数据处理工作。

第三次经济普查是国家比较重大的事情,每五年进行一次。对此,席壮华表示,全国第三次经济普查更强调数据的全面性和真实性,以及普查员工作的方便性。这次普查出了要采集指标数据外,还要使用移动终端采集企业地理位置、工商登记证、税务登记证等各种证照等非结构化数据,这就对移动终端的数据采集软件提出了很高的的技术要求,比如地图数据和普查制度从平台向移动终端的下发,证照拍照后的OCR识别,现场各指标数据的校验,普查数据和证照图片向平台的回传和管理等。

这次普查,很明显的一个不同是还普查、收集了大量的非结构化数据。同方公司依靠自身的技术实力,不但能够协助国家统计局做好这次普查前期的数据采集方面的技术服务和技术支持工作,也有能力助力国家统计局做好后期的数据处理工作,比如通常的结构化数据和这次新增的大量非结构化数据如何结合在一起使用等。

席壮华最后表示,同方数据资源体系依据其多年的数据处理经验,对于这次的经济普查项目还是很有信心的。通过此次经济普查项目,进一步夯实同方大数据产业在统计统计行业的基础,扩展同方在数据资源管理平台下数据采集终端及数据信息定制查询的市场空间,为用户提供更科学、更准确的统计信息支持,助力智慧城市的发展。

时间: 2024-11-27 22:59:24

席壮华:大数据技术应用解读 以第三次经济普查为例的相关文章

大数据技术论坛(上):Spark、Hadoop技术成主角

[CSDN现场报道]2014年12月12-14日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中科院计算所与CSDN共同协办,以推进大数据科研.应用与产业发展为主旨的2014中国大数据技术大会(Big Data Tec就hnologyConference 2014,BDTC 2014)暨第二届CCF大数据学术会议在北京新云南皇冠假日酒店盛大开幕. 2014中国大数据技术大会第二日上午大数据技术论坛上,百度大数据部副总监薛正华和中国移动集团公司业务支撑系统部项目经理何鸿凌共同主持了

AdTime雷永华:借大数据技术创新广告模式

AdTime CEO雷永华 [TechWeb报道]4月18日消息,国内智能数字广告营销企业AdTime近日发布了一系列基于大数据技术的广告营销服务,在精准营销和视频广告营销领域进行了突破创新.对此,TechWeb采访了AdTime 大数据技术的核心人物雷永华. 现任AdTime CTO的雷永华曾就职于3721,雅虎中国和阿里巴巴,是早期雅虎云计算(hadoop)平台的主力开发者之一,也是雅虎behavior tagetting理论的参与者,对大数据技术可谓有着深刻的理解. 事实上,当前数字广告业

【趋势】:解读大数据技术生命周期

大数据还处于不断被人们http://www.aliyun.com/zixun/aggregation/18826.html">重新定义的阶段,现在又多了一个属于自己的Hype Cycle技术生命周期.Gartner近期发布了首个专门针对大数据话题的报告--<2012年大数据Hype Cycle>(Hype Cycle for Big Data, 2012). Hype Cycle技术生命周期指的是企业用来评估新科技的可见度,利用时间轴与市面上的可见度(媒体曝光度)决定要不要采用

大数据技术解读 引领未来也须应对挑战

大数据技术是在传统数据处理手段无法应对海量数据的实时需求的情况下,采用新的信息技术来应对大数据爆发进行数据处理的技术.大数据技术一般可以包括基础架构支持.数据采集.数据存储.数据计算和数据展现交互等. 大数据技术的分类 大数据技术涵盖的范围十分广阔.基础架构支持方面主要包括了支撑大数据处理的基础架构级数据中心管理.云计算平台.云存储设备及技术.网络技术.资源监控等技术.而为了处理数据,则需要有大规模物理资源的云数据中心和具备高效的调度管理功能的云计算平台的支撑. 数据采集技术方面包含了数据采集的

解读大数据技术面临的三个重要技术问题

大数据技术面临的三个重要技术问题,我们一起来看看.当今,大数据的到来,已经成为现实生活中无法逃避的挑战.每当我们要做出决策的时候,大数据就无处不在.大数据术语广泛地出现也使得人们渐渐明白了它的重要性.大数据渐渐向人们展现了它为学术.工业和政府带来的巨大机遇.与此同时,大数据也向参与的各方提出了巨大的挑战,首先是大数据技术面临的三个重要问题:   一.如何利用信息技术等手段处理非结构化和半结构化数据 大数据中,结构化数据只占 15%左右,其余的 85%都是非结构化的数据,它们大量存在于社交网络.互

与主流同行,参加2014中国大数据技术大会的十大理由(议题攻略)

从2008年仅60人参加的技术沙龙到当下的数千人技术盛宴,作为业内极具实战价值的专业交流平台,已经成功举办七届的中国大数据技术大会忠实地描绘了大数据领域内的技术热点,沉淀了行业实战经验,见证了整个大数据生态圈技术的发展与演变. 12月12-14日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所与CSDN共同协办的2014中国大数据技术大会(Big Data Technology Conference 2014,BDTC 2014)将在北京新云南皇冠假日酒店如

2016中国大数据技术大会在北京盛大召开

2016年12月8日,作为大数据领域规模最大.最具影响力的IT盛会,2016中国大数据技术大会(Big Data Technology Conference 2016,BDTC 2016)在北京新云南皇冠假日酒店盛大开幕.本次大会历时三天,以更加国际化的视野,邀请众多国内外大数据专家齐聚一堂,从政策法规.技术实践和产业应用等角度深入探讨大数据落地后的挑战,与往届相比,本届大会更关注行业应用最佳实践,突出应用和数据的深度融合,并首次将人工智能.高性能计算等热点话题引入大会,作为大数据产业界.科技界

2014中国大数据技术大会圆满落幕

2014年12月12-14日,作为大数据领域最具影响.规模最大的IT盛会--2014中国大数据技术大会暨第二届CCF大数据学术会议在北京新云南皇冠假日酒店圆满落幕.大会历时三天,以国际化的视野,分享了海内外大数据技术的发展趋势:从技术与实践角度探讨"大数据生态系统"."大数据技术"."大数据应用"."大数据基础设施 "等新技术应用和实践经验:通过创新大赛和培训课程等特色活动,解密大数据创业热点,分享行业实战经验.2014中国大

历届中国大数据技术大会PPT精粹下载

Hadoop起 源于2002年的Apache Nutch项目,是Apache Lucene的子项目之一.2004年,Google在OSDI上公开发表了题为<MapReduce: Simplified Data Processing on Large Clusters>的论文,受到启发的Doug Cutting等人开始实现MapReduce计算框架并与NDFS(Nutch Distributed File System)结合支持Nutch的主要算法.2006年逐渐成为一套完整而独立的软件,起名为