大数据在统计中的应用初探

大数据是信息时代的必然产物,是人们在日常工作、学习、生活中,使用以现代网络、特别是以互联网为特征的现代信息技术和其他各种电子计量设备而产生的海量信息。对海量信息的采集、存储、分析、整合、控制而得到的数据就是大数据。中央《关于深化统计管理体制改革提高统计数据真实性的意见》中指出,大力推动大数据在政府统计工作中的应用,将电子化行政记录和各类交易、交互、传感等大数据作为政府统计基础数据的重要来源,努力构建现代化新型统计调查体系。

大数据统计应用有什么意义?还有哪些问题和障碍?如何加快大数据在统计工作中的应用?在此进行探讨交流。

大数据应用广泛

大数据能够更加客观真实地记载经济社会的发展情况。在现代社会,人与人之间、人与单位之间、单位与单位之间,甚至地区与地区之间、国与国之间发生的交流和交易行为都有可能在计算机等各种电子设备上留下记录,由于它们都是电子化的信息,没有掺入任何人为的干扰因素,因此,对这样的信息进行发掘、加工、整理而得出的大数据能够更加客观真实地反映社会经济发展情况。同时,实现大数据统计应用也是遏制统计造假、弄虚作假行为的重要途径。

大数据能够最大限度地拓展现行统计调查制度所无法涉及到的领域。大数据能轻而易举地解决常规统计调查无法涉及到的、各种复杂多变的行业和领域的统计,因为大数据不但量大,其涵盖面也十分广泛,任何时候、任何地方、任何人、任何单位,只要发生了互动行为就要留下“痕迹”,而对这些信息进行加工整理获得的大数据必然能够有效解决现行统计和国民经济核算资料不全的问题。

大数据分析应用已经发挥出了显著的社会经济效益。目前,大数据分析应用已经有了实质性的进展,例如,商贸领域通过对商品销售大数据分析,能够发现同一种产品在不同地区的销量、销售的时间以及购买产品的客户群,然后作出市场预测,制定出新的订货计划,取得可观的经济效益。在金融、保险、交通等行业以及财政、教育等领域,通过大数据分析,能够发现新的商机或管理模式,并寻找到改进服务的最佳途径。

大数据如何应用于统计

就目前的情况,要真正实现大数据在统计工作中的应用尚面临着很多问题与障碍,如口径不一致、范围不相同、标准不统一、程序不规范、信息不共享等,这些或将成为大数据统计应用的“拦路虎”。在此,笔者提出几点粗浅的建议。

建立机构,统一管理大数据开发应用工作。大数据就像是一座巨大的“宝藏”,如果不加以开发就无法发挥其作用。但是,如果无序开发,也会使得这笔宝贵的财富得不到有效利用,造成浪费,甚至产生负面效应。因此,要真正实现大数据统计应用,应建立一个专门的管理机构,加强组织领导,统一管理大数据的开发、应用,保障数据信息安全,在某些领域、某些行业逐步实现以大数据取代常规统计调查数据。同时,制定周密计划、明确职责分工、选择工作路径、加强日常监管,从而实现对大数据这一宝贵资源的有效利用。

统一标准,实现大数据在统计上的可比性。统计是一门科学,是一项十分严谨的工作。因此,统计指标的含义、口径、范围、来源渠道、计算方法、计量单位等应该统一,只有这样才具有可比性。要实现大数据统计应用,提高统计工作的科学性,应该制定统一的标准,如在生产、流通、服务等领域,界定哪些信息属于可在统计上应用的大数据,如何将大数据的口径、范围调整为常规统计所需的口径和范围,如何对大数据的海量信息进行甄别、筛选,然后挖掘出统计核算所需要的、且常规统计所难以取得的资料。只有在这些方面统一标准,才能真正实现大数据在统计中的应用。

资源共享,畅通大数据信息来源的渠道。由于目前大部分单位都认为本部门的数据、行政记录等信息是商业秘密,因而,出于“保密”等原因,一般不对外提供,即便是政府统计部门需要,一些单位也是顾虑重重。因此,要实现大数据在统计上的应用,必须打破单位之间信息“壁垒”,真正实现信息资源共享。只有这样,才能够最大限度地满足常规统计、尤其是国民经济核算的数据需求。当然,为防止泄密,有必要制定一个关于大数据开发利用的制度,严格规定对外发布的范围,保障个体信息资料的安全。

创造条件,为大数据开发应用铺平道路。大数据应用离不开现代信息技术和网络技术,更离不开大数据发掘、加工、整理和分析的人才。因此,应该大力培养一批大数据应用、尤其是大数据分析方面的人才,为将大数据广泛应用于政府统计、宏观管理、企业经营等方面奠定基础。要鼓励高校和科研机构有针对性地开发大数据应用软件,为大数据分析提供帮助。要通过国内培养、国外委培等途径,培养一批大数据分析师,除开展大数据分析外,还要将大数据分析的理念、思路广泛应用于宏观管理和微观经营之中,发挥出大数据统计应有社会经济效益。

本文转自d1net(转载)

时间: 2024-08-02 16:48:09

大数据在统计中的应用初探的相关文章

大数据与统计新思维

译著<大数据时代>( 英国 ViktorMayer-Schǒnberger,Kenneth Cukier 著) 和<驾驭大数据>( 美国 Bill Franks 著) ,以及我国学者涂子沛.郭晓科的<大数据>等几本书引起了广泛的关注,其他各种媒体关于大数据的讨论也层出不穷,大数据已成为流行语.有人认为,大数据是一场新的革命,将横扫一切领域,重构世界.不少国家已将大数据作为国家发展战略,而商业领域更是将其视为下一个投资的宝库.毫无疑问,大数据时代已经来临,它正在悄悄地改变

Hadoop在电信大数据业务系统中的应用

文章讲的是Hadoop在电信大数据业务系统中的应用,2013年11月22-23日,作为国内唯一专注于Hadoop技术与应用分享的大规模行业盛会,2013 Hadoop中国技术峰会(China Hadoop Summit 2013)于北京福朋喜来登集团酒店隆重举行.来自国内外各行业领域的近千名CIO.CTO.架构师.IT经理.咨询顾问.工程师.Hadoop技术爱好者,以及从事Hadoop研究与推广的IT厂商和技术专家将共襄盛举. ▲IT168专题报道:http://www.it168.com/re

什么是HADOOP、产生背景、在大数据、云计算中的位置和关系、国内外HADOOP应用案例介绍、就业方向、生态圈以及各组成部分的简介(学习资料中的文档材料)

1. HADOOP背景介绍 1. 1.1什么是HADOOP 1.        HADOOP是apache旗下的一套开源软件平台 2.        HADOOP提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理 3.        HADOOP的核心组件有 A.       HDFS(分布式文件系统) B.       YARN(运算资源调度系统) C.       MAPREDUCE(分布式运算编程框架) 4.        广义上来说,HADOOP通常是指一个更

最新动态-大数据在电子商务中的应用

问题描述 大数据在电子商务中的应用 大数据最近的发展现状,包括美国的,欧盟的,中国的,以及大数据技术的发展现状,阿里巴巴对大数据的应用 解决方案 听口气,阁下是总统还是联合国秘书长,世界大势,国际趋势,lz操心不少啊.像这种问题,你难道手下没有个千把人的团队专门给你咨询,跑这里问什么. 解决方案二: 解决方案三: 楼主这是要写论文?来错地方了吧 解决方案四: 的确,在知乎上已经有许多比较成熟的答案了.或者在google上搜索一下"Big data"吧~

人工智能和大数据的开发过程中需要注意这12点

人工智能是近年来科技发展的重要方向,在大数据时代,对数据采集.挖掘.应用的技术越来越受到瞩目.在人工智能和大数据的开发过程中,有哪些特别需要注意的要点? 人工智能领域的算法大师.华盛顿大学教授Pedro Domingos对此进行了深入思考. 在我们新近翻译的<智能Web算法>(第2版)中,对Pedro Domingos教授的观点进行了高度的概括,提炼出12个注意点,为行业开发实践提供了重要参考: 注意点1:你的数据未必可靠 在实际应用中,有很多各种各样的原因会导致你的数据是不可靠的.因此,当你

大数据在医疗保健中的真正愿景

从可穿戴技术的影响到促进癌症研究的潜力,医疗保健领域的大数据技术引起了很多热议.然而,大数据在医疗保健中的真正愿景不在于个人数据收集或使用不同的应用程序,而在于结合医疗保健数据为医生创造新资源的潜力. 新的数据源 为了进行最近的研究,研究人员转向社交媒体上的数据,通过识别敌意或消极语言来识别压力的措施.然后他们将数据转换为颜色编码的地图,以预测任何给定位置的心脏病的可能性.当研究人员用传统研究创建的地图交叉检查他们的发现时,发现这些地图几乎相同.基于这些结果,研究人员认为使用外部数据源进行大数据

大数据在智慧农业中研究与应用展望

大数据在智慧农业中研究与应用展望 孙忠富  杜克明  郑飞翔  尹首一 "大数据"是继物联网.云计算之后信息技术产业又一次重要的技术变革,已成为数据挖掘和智慧应用的前沿技术,科技已经进入了"大数据"时代. 阐述了大数据发展的背景.大数据与物联网等的关联.大数据基本内涵和关键技术等,并结合农业特点,分析了大数据在农业上的需求.主要应用领域及其在智慧农业中的关键地位. 最后针对我国农业大数据和智慧农业未来发展,提出了的一些建议和思考. 大数据在智慧农业中研究与应用展望

大数据-新闻推荐系统中的推荐算法

问题描述 新闻推荐系统中的推荐算法 如何有一个算法是从大数据的新闻列表中通过内容找到自己想要的新闻呢?基于Hadoop的可以.求大神们给一些思路.不要关系型数据库的. 解决方案 [推荐系统算法]推荐引擎算法学习导论 解决方案二: google 协同过滤算法google 新闻推荐 解决方案三: 协同过滤算法http://www.cnblogs.com/zhangchaoyang/articles/2664366.html 解决方案四: 一般做新闻推荐有三种推荐策略:第一是热门推荐,可以设置一个时间

点对点诈骗,大数据不能统计号码被举报次数

今天在<经济参考报>深度报道<电信诈骗爆炸性增长 http://www.jjckb.cn/2014-10/27/content_525200.htm >一问看到这样的内容: 利用大数据甄别进行源头反制 专家认为,如果能有全国范围的大数据进行搜集.分析,打击效果将事半功倍.还可在及时采录涉嫌诈骗电话信息的基础上,推动运营商对涉嫌诈骗号码进行源头反制. <经济参考报>记者采访了解到,各地公安机关在要求运营商配合拦截诈骗电话时普遍遭遇一个难题:运营商无法在海量的通讯业务中,对