云散之后都是赤裸裸的数据 你会用吗?

本文讲的是云散之后都是赤裸裸的数据 你会用吗,云计算大潮有没有退去暂时谁也说不好,而就著名研究机构Gartner的最新调查报告显示,云计算领域还将保持增长趋势,而增长的幅度将会放缓,毕竟云计算已经风风火火了不少时间。而今,和云计算同样没有明确定义的一个新概念越来越流行——“大数据”。而且大数据已经开始改变了IT格局,根据Gartner的数据显示,仅2012年大数据就带动全球280亿美元的IT支出,2013年带动的IT支出规模可望进一步增至340亿美元。而放眼目前IT巨头多是出手延伸整个产业链,很少有只撰于产业链中某一环节的企业,但是现在却有这样一个公司只专注大数据,让我们走近台湾精诚集团云中心,走近Big Data事业部即Etu(“知意图”公司)负责人蒋居裕先生。


▲左侧蒋居裕先生 右侧IT168信息化与云计算频道编辑申安安

  回头看 谁走在大数据的前面?

  大数据论起源肯定是美国,也流行于美国,并不是因为美国的技术有多么发达,而是因为他们有用户量巨大的互联网服务基础。社交网络、物联网、电子商务起步早,移动设备普及度高等“先天”因素也让他们的数据不再“单纯”,而且单纯的数据格式也无法满足这些业务需要。结构化数据、半结构化数据和非结构化数据的三种类型中,结构化数据目前的传统RDBMS的技术(关系型数据库管理系统)相对于其他技术来说成熟而且性能优势明显,而对于其他两种形式的数据,目前解决方案仍然处于成长甚至是刚刚起步阶段。

  对于大数据的产生,可以说毫无疑问的要归功于互联网公司,但实际上并不是只有互联网公司才用到大数据,当下的银行、保险类金融业企业、电信运营商、某些制造业领域的企业、医疗行业等都是大数据的真实而直接的用户。现在互联网、电子商务、快消业的企业因为数据量增长最为迅速,而使得他们的需求走在了大数据的最前端。蒋居裕先生认为这些公司或多或少都有自己的解决方案和技术,而从美国的经验来看,大数据处理平台中一个主流处理技术Hadoop,虽然不是唯一的解决方案,却成为主要的解决方案之一,尤其是2006年被开源以后,近6、7年的发展日趋稳定。 破解大数据误区 Etu提出一体化解决方案

  尽管有人说大数据和云计算是截然不同的两个概念,但是不可否认的是二者有着很多交集,甚至是“大数据离不开云”的意味。从硬件层上说分布式存储、虚拟化服务器的弹性支持等都是云计算的重要特性,但也正因如此很多人产生了一些误区。

  ·误区一、“大数据就是存储”,一种新的存储技术。

  而实际上这种“误区”只是认识的片面,主要在于大数据的存储是基础,而更重要的是处理工作,毕竟存储是为进一步处理做准备。所以从这个角度来看,一般人的理解有些错误。所以请记住大数据一定是存储跟计算同时要发生的。

  误区二、行业受众小,并非广泛适用。

  虽然大数据起源互联网,但因为异构数据的存在,很多传统行业其实需求更加迫切。像图形、图像识别等领域、自动控制领域很多场景都需要大数据的帮助。

  当然,还有人会认为结构化数据处理起来相对容易,用不到“大数据”的概念,或者大数据处理可能只是BI,为企业提供商业智能。蒋居裕先生认为除了BI之外,有时候需要做文字或者图形上的搜索;同样,还有一些来自改善用户体验使用的,比如运营商、金融保险类公司。在蒋居裕先生的观点中,对数据进行了一个分层描述:

  顶层:Hot Data,这是比较热的数据,它的实时需求最高,在查询之后几秒钟就要得到结果;

  中层:Warm Data,有一点温度的,它需要随时查询,它处理的时候不需要几秒钟得到结果;

  底层:Cold Data,这类数据最大的特性就是看起来我不会再用到它,只需要从起来就可以了。

 

  而这三层数据中,最容易做的其实就是底层冷数据Cold Data,只要条件允许,这部分数据可以一直沉淀在磁盘上。最直接的入手点就是顶层,大量数据挖掘、数据仓储的案例和解决方案让基于关系型的Hot Data容易被应用。当然完成这所有三层数据的处理工作,已经说明这家公司有一套数据生命周期管理。但重点还是会回到数据本身上,这些所有的数据可以做什么?保存这么数据到底有多大价值?也许这个问题在于是如何找出你跟同行之间不同、如何提供与竞争对手不同服务,让用户体验与同行之间的出发点上。而目前市场来看虽然很多企业有这个需求,但是大部分大数据解决方案都是以项目形式体现,没有一个产品化或者针对某个行业而推出的标准产品推出,这让更多的用户很难去说清楚自己的需求,也对技术实现本身产生了巨大的阻碍,蒋居裕先生认为这样的现状催生了我们推出大数据一体机Etu Appliance的原因之一。Etu其实也是希望通过这样的方式将软/硬件一体的方式交付给用户,用产品化的形式推动大数据市场。

作者:申安安

来源:it168网站

原文标题:云散之后都是赤裸裸的数据 你会用吗?

时间: 2024-12-27 17:14:51

云散之后都是赤裸裸的数据 你会用吗?的相关文章

【大数据生态】云散之后赤裸裸的数据你会用吗

云计算大潮有没有退去暂时谁也说不好,而就研究机构Gartner的最新调查报告显示,云计算领域还将保持增长趋势,而增长的幅度将会放缓,毕竟云计算已经风风火火了不少时间. 而今,和云计算同样没有明确定义的一个新概念越来越流行--"大数据".而且大数据已经开始改变了IT格局,根据Gartner的数据显示,仅2012年大数据就带动全球280亿美元的IT支出,2013年带动的IT支出规模可望进一步增至340亿美元. 回头看谁走在大数据的前面? 大数据论起源肯定是美国,也流行于美国,并不是因为美国

阿里云首席科学家周靖人:数据智能引领产业变革

10月24日(1024),是开发者的节日. 也准备了一份特别的礼物:<2016杭州云栖大会回顾专题>,共计325+份PDF下载,100+场峰会与分论坛视频点播的专题送给大家!也欢迎朋友们将参会感受.学习笔记等共享给我们(yqeditor@list.alibaba-inc.com). 下文为<阿里云首席科学家周靖人:数据智能引领产业变革>,更多文章见这里. 10月13日,阿里云首席科学家周靖人在云栖大会主论坛上带来题为<数据智能引领产业变革>的主题演讲,他表示,随着计算能

贵州理工学院与阿里云共建全国首家阿里巴巴大数据学院,明年7月招生

近日,贵州理工学院与阿里云宣布联合共建"阿里巴巴·贵州理工大数据学院",促进高校.科研院所.企业科技教育资源共享,创立高校与科研院所.行业.企业联合培养人才的新机制. 据悉,此次合作也是贵州省人民政府与阿里巴巴战略合作的重要落地项目之一. 今年8月,贵州省同阿里巴巴集团签署深化全面合作协议,计划在大数据人才培养.技术研发.创新创业.智慧城市等多个新领域展开合作,推动贵州成为"数据之都". 其中,大数据人才培养是合作的重要基础之一,当时即提出要在三年内为贵州培养250

当大家都在钻探大数据油田时,因特睿已打通数据油田的流动“管道”

文|诺蓝(36大数据合伙人) 每分钟,优酷自媒体生成30小时的内容:Google会收到超过69500000次搜索请求:Instagram用户会上传2430555张照片:每天24小时,腾讯数据中心新增500TB的数据量:天猫双11期间,1小时交易额超353亿元人民币:无论你在做什么,愿意与否,都不容否认一个正在发生的事实:数据量正呈爆炸式.指数级态势增长. 奥巴马政府曾将大数据定义为"未来的新石油",马云曾经说过:"未来的制造业要的不是石油,它最大的能源是数据."目前

云存储服务平台纷纷下台 云端数据何去何从?

今年3月份以来,华为网盘.新浪微盘.UC网盘.金山快盘.腾讯微云等云存储服务平台接连宣布将关闭或调整个人用户存储等服务,网民热衷的"云存储"几乎集体沦陷.而对于已经习惯使用"网盘"的企业来说,要想安全.稳定的进行云数据分享,就需要为员工的网盘应用开辟出一条新路. 网盘全体"关机",企业用户也中招 舆论认为,导致网盘系统全面"关机"的原因主要有两点:其一,网盘已经成为互联网内容传播非常重要的一种途径,很容易成为非法信息传播的&q

云服务厂商都在推荐轻量级的存储队列服务,用来取代原有的比较重的消息队列服务

这个小玩意源于上周在研究Azure的时候,发现云服务厂商都在推荐轻量级的存储队列服务,用来取代原有的比较重的消息队列服务,具体来说,比如阿里云就推荐使用消息服务替代消息队列,在Azure中,就有一个轻量级的存储队列(Storage Queue)可以替代服务总线(Service Bus), 简单试用了一下Azure的Storage Queue后,发现这玩意很好用,于是决定全面的深入研究一下,再将公司电商系统内的相关任务处理均重构成使用存储队列服务,而深入研究得找个案例呀,于是就想到了做个分布式爬虫

颢云卜晓军:行业+大数据是成功突破点

文章讲的是颢云卜晓军:行业+大数据是成功突破点,自2015年9月国务院发布<国务院关于印发促进大数据发展行动纲要>(以下简称纲要)以来,大数据成为国家战略,这也预示着大数据市场正式拉开了大帷幕.事实早在纲要没有推出之前,我们看到大数据已经在市场上是风声水起.为了更好的了解大数据,同时帮助行业企业落地大数据,近日,IT168记者有幸采访了耕耘行业大数据领域多年的大数据专家--北京颢云信息科技股份有限公司(以下简称颢云科技)CEO卜晓军,他为我们详细介绍了大数据的"前世今生",

戴尔调查:积极投资云、移动、安全和大数据的公司增长速度比落后者快50%

ZD至顶网软件频道消息: 戴尔公布了第二届全球技术采用指数(GTAI 2015),与没有投资于云.移动.大数据或安全技术的公司相比,积极使用这些技术的公司其收入增长速度高出53%.尽管技术使用与收入增长之间存在这种紧密的联系,成本被认为是实施或扩展这些技术的主要障碍. 戴尔首席信息官Paul J. Walsh表示:"我们很高兴看到更多企业意识到技术投资的战略意义.我们认为,这项新的调查将帮助企业看到技术使用与收入增长.效率提升和组织增长之间的关联性." 在2014年和2015年,GTA

微软张亚勤:任何企业都必须要有大数据战略

在2013中国(深圳)IT领袖峰会上,微软亚太研发集团董事长张亚勤谈了他对大数据的看法,他认为,大数据至关重要,任何企业都必须要有大数据战略,否则,公司在未来竞争中就会处于不利的位置. 以下是访谈实录: 网易科技:张总,你好,你是我们的老朋友了.今天有很多嘉宾跟我们谈到今年的话题都是大数据,你怎么看?微软有什么样的布局? 张亚勤:大数据不是新的东西,我们从事这方面的研究和研究这方面的产品已经很多年了,为什么大数据变成这么热的话题?第一点是三个"v":数据量越来越大.数据种类越来越多.速