大数据十大核心问题

大数据来了,受益于便宜的硬件存储、强大的计算机技术和云计算技术,企业手中获取了越来越多的数据。对大多数企业来说,数据分析不是可有可无,而是一个生存问题。但是面对大数据,我们有什么问题呢?本文作者赛仕软件研究开发(北京)有限公司总经理@刘政-SAS,在微博上分享的大数据的10个核心问题,中国统计网做个整理汇总,希望大家一起来交流讨论。

大数据十大核心问题:

1、大数据的分析模式

大数据分析与传统分析的区别,特点是什么?

2、分析速度

分析速度是否能够跟上数据量和数据格式变化的速度,是否能达到实时分析?

3、多种格式数据的分析技术

声频、视频、图片、文本等等格式,如何混合分析?

4、存储问题,存储和分析成本

无条件存储,还是有选择性存储?如何进行选择性存储?投入产出比。随着数据量的不断增加,存储技术要不断创新。

5、法律条款的更新

个人隐私,国家机密保护等。数据的归属权问题。我通过开放的数据,分析出了国家机密,是不是违规、犯罪?

6、数据安全和真实性

数据是否会被窃取,篡改,伪造等,如何保护?

7、数据流分析

给进数据,输出分析结果,实时改变,是物联网实用化的基础。如何实现?

8、数据关联性

如何提取关联性数据和有用数据?看起来简单,其实在浩瀚的数据中查找关联性是挺难的。

9、大数据能否引申出科学命题?

例如,骰硬币可以引出概率论。

10、大数据对其他学科的影响

对大数据的分析仅仅是得到分析结果吗?应该说世界上所有的东西都可以归结到数据里。那么我们能由此对世界有更深的了解吗?有了基因数据,人体数据能绘出人体机能吗?

本文作者:刘政-SAS

来源:51CTO

时间: 2024-09-27 20:15:06

大数据十大核心问题的相关文章

贵阳综保区将实施大数据十大工程

记者近日从贵阳综保区获悉,该区出台文件明确,将实施智慧城市设计工程等十大工程,推动大数据政用.民用.商用创新应用,保障建设发展环境,推动大数据产业发展,力争到2020年,全区大数据核心产业规模超100亿元. 据了解,贵阳综保区抢抓全省加快建设跨境数据自由港的机遇,狠抓标志性基础设施建设,努力打造一批行业引领性平台,推动离岸数据中心.离岸服务外包中心.大数据交易中心.人工智能产业集聚区建设:聚焦核心产业聚集一批行业龙头企业,依托贵州国际金贸云基地等,大力发展离岸服务外包与呼叫业务.大数据采集和存储

大数据十大发展方向:Scale-out将成为主流

1大数据分析领域快速发展 大数据无疑是目前IT领域的最受关注的热词之一.几乎凡事都要挂上点大数据,否则就显得你OUT了.相信大多数人都能顺口说出大数据的四个特点:容量大,多样化,速度快以及高价值.但随着人们对于大数据的逐渐了解,人们开始讨论大数据究竟能够给人们带来什么样的价值?大数据的未来服务方向在哪里? 今天我就跟大家谈一下未来大数据的十大发展方向: 方向一:大数据分析领域快速发展 数据蕴藏价值,但是数据的价值需要用IT技术去发现.去探索,数据的积累并不能够代表其价值的多少.而如何发现数据中的

星环科技陈祖峰:2017年金融行业大数据十大应用的趋势展望

过去的2016年可称之为"智能金融"元年.相比过去五年,以云计算.大数据.区块链为首的新兴技术创新全面渗透至金融业的方方面面,用科技手段解决供需矛盾.用机器解放人力资源,以数据驱动的决策实务出现了前所未有的爆发式增长.  作者 | 陈祖峰 本文长度为4500字,建议阅读9分钟 回顾2016,中国金融业经历了不平凡的一年.金融市场环境瞬息万变: 银行业不良率攀升.净利润收窄.公司营业收入规模下降; 证券行业资管与投行业务增长.经纪业务占比下滑.A股市场整体处于震荡形式; 保险业万能险.另

大数据十大发展方向:中国成为大数据最重要的市场

大数据无疑是目前IT领域的最受关注的热词之一.几乎凡事都要挂上点大数据,否则就显得你OUT了.相信大多数人都能顺口说出大数据的四个特点:容量大,多样化,速度快以及高价值.但随着人们对于大数据的逐渐了解,人们开始讨论大数据究竟能够给人们带来什么样的价值?大数据的未来服务方向在哪里? 今天我就跟大家谈一下未来大数据的十大发展方向: 方向一:大数据分析领域快速发展 数据蕴藏价值,但是数据的价值需要用IT技术去发现.去探索,数据的积累并不能够代表其价值的多少.而如何发现数据中的价值已经成为企业用户密切关

“数据南明”瞄准大数据十大应用

记者日前从南明区获悉,今年,该区坚持以大数据为引领,在政用.商用.民用上大胆探索,将重点推进"数据南明"十个试点应用,实现成熟一个.应用一个.展示一个.推广一个.引领一片,逐步形成大数据思维方式和工作习惯,为打造创新型中心城市核心区提供试点经验和基础支撑. 着重推进大数据+楼宇经济.以花果园城市综合体为试点区域,以"一平台六中心"为组织构架,建设花果园城市综合体大数据监测调度平台,将大数据运用到楼宇经济运行.产业发展.税务征收.城市建管.智慧社区建设等管理与服务中,

盘点本周大数据十大重要事件

本周关于大数据的新闻层出不穷,有的是业界大事,有的是业界趣事,有的是两者兼而有之.今天,小编这这里为大家整理了一下这周与大数据相关的不能错过的新闻事件. 1. EMC发布名为"Pivotal HD"的Hadoop发行版 EMC于2月27日发布了自身的Apache Hadoop发行版-Pivotal HD,同时发布的还有一个名为HAWQ的技术,通过HAWQ能够将Greenplum分析型数据库与Hadoop分布式架构进行紧密地融合. Pivotal HD对Apache Hadoop进行了全

重磅!2017大数据十大趋势

2017年大数据将不再是Hadoop一家独大,也不再是编程者们的自娱自乐,企业和终端用户的不断涌入,海量数据"堆积如山",随之而来的储存.分析.处理成为从业者的下一挑战. 随着对不同类型.不同体量数据的结构化存储.批量处理以及价值挖掘需求的增多,2016年注定是大数据里程碑式的一年. 2017年,支持大量结构化和非结构化数据的系统将继续增长.市场需要数据平台来帮助数据管理人员管理和保护大数据,同时允许最终用户进行数据分析.这些系统将逐步成熟,在企业内部的IT系统中更好地运行. 1.数据

2017年物联网和大数据十大新趋势

还有33天2016年就要过去了,回顾过去一年物联网和大数据有了很大的发展,明年又有哪些新趋势我们需要跟进呢? 1.物联网架构师的崛起 物联网架构师将代替数据科学家成为HR部门最珍惜的人才,物联网的浪潮将带来边缘计算和物联网运行设计的激增. Teradata的物联网技术市场专家Dan Graham认为,一夜之间,成千上万的简历将被更新,此外, 少于10%的公司意识到他们需要一个物联网分析架构师,一种特殊的物联网系统架构职务.未来可以设计分布式和物联网中心的软件设计师会升值. 2.向混合架构的迁移会

从大数据向大信息升华,亟待统计科学与数据科学的革新

大科学工程,是以工程方式.计划手段.汇聚科技资源与力量整体推进重大科技计划的最新范式,是科学研究由传统的"手工小作坊"向现代大规模"工场"演进的一次革命.大科学范式的"兵团作战",将以空域和领域维度上的大规模,甚至超越时域维度上的长尺度,实现今朝一日.史上数年的突破. 大科学是大数据的摇篮,大数据是大科学的产物 大科学的王者之道始于大数据的产生.人类历史上的大数据,源于科技领域,确切地说源于大科学研究.曼哈顿计划打开了微观世界,并开创了借用人造的