在开源模式下云计算大数据的现状浅析

“开源”模式带来的好处很多,其中最吸引人的就是可以帮助企业降低成本。另外,开源模式消除了供应商的限制和壁垒,并且可让技术变得更加协作,合作者会不断更新开源软件,使技术得到持续的完善和发展。云计算和大数据目前都是热门话题,两者的发展与开源技术的结合,及如何在云上实现大数据项目,都是新的实践领域。

  开源云计算现状

云计算发展到今天,已经成为企业IT基础设施的主流选择;以Docker为代表的Container技术,也推动着云计算在PaaS层面的发展;而SaaS应用更是方兴未艾。云计算已经从概念走向实际应用,且将愈加促进信息化、工业化的整合进程。

敏捷、灵活、可定制,这是各大公司在解释他们为什么投资云计算时最爱提到的三个词。与此同时,当今领先的云供应商虽然心中想着最佳的技术利益,但从财务权益方面来考虑,却阻止他们提供开放的云环境。因此,在这个企业IT“云”化的过程中,开源技术正在成为未来的重要选择。

开源云计算带来的好处很多,其中最吸引人的就是可以帮助企业降低成本。另外,开源模式消除了供应商的限制和壁垒,并且可让技术变得更加协作,合作者会不断更新开源软件,使该技术得到持续的完善和发展。

有关开源云计算的系统、产品与服务正得到不断地创新推出。以目前拥有最多传统IT巨头支持的云架构开源项目OpenStack为例,在国内外都受到了普遍关注。2014年年OpenStack基金会发布的白皮书中显示,OpenStack在实际生产环境的部署已得到大幅提升,并且在传统行业的渗透已经呈现规模化趋势,在制造业、能源、零售、医疗、交通、保险、媒体等行业长势喜人。从全球用户活跃度来看,欧洲和亚洲力量凸显,中国用户在其贡献排行榜上位居第五。7月30 日开幕的可信云大上,OpenStack开源云项目联盟宣布成立。在政府层面上对这件事情的推动,使我们更加深刻地感受到OpenStack以及开源云这种模式在中国的影响力之大。

然而,任何事情都是一把双刃剑,目前的开源云也同样存在着明显的缺点。比供应商的独立缺乏支持、开源云工具的支持问题有待进一步解决。另外,像OpenStack、Docker等时下流行的开源云计算应用,都存在着技术成熟度欠缺、缺乏完整性等问题。

开源大数据现状

移动互联网、云计算等技术的快速水之土日,使全球数据量得到爆炸性增长,大数据时代已经全面到来。从庞杂的数据背后挖掘、分析用户的行为习惯和喜好,找出更符合用户“口味”的产品和服务,并结合用户需求有针对性地调整和优化自身,这就是大数据技术所带来的巨大价值。

而面对庞大的业务、海量的数据都在不断的增长,几乎没有任何一家传统的商业方案能够独立解决这些业务。企业内部的“合作”已经成为局限,要想应对这些,需要更多的力量,这无疑给开源模式带来了新的机遇和挑战。开源浪潮之所以风生水起,是因为成本低、灵活性强,又有受过培训的人员,帮助使业更好地挖掘隐藏在大数据当中的价值。

Hadoop无疑是目前大数据领域中最热的开源技术,它承诺能够降低成本同时获得企业级的IT自由度。 Hadoop、R和NoSQL现在是许多企业制定的大数据战略的三大支柱,无论这些战略是管理非结构化数据,还是对非结构化数据进行复杂的统计分析。这些开源技术平台与专有软件相比的一个优势就在于,于它们能够更快速地改进。而且它们也得到许多不同机构的不断开发和完善。Hadoop已经变得无处不在,EMC、戴尔、IBM、甚至微软都已经开始跻身Hadoop阵营。国内的盛大、百度、人人网等都已经开始应用Hadoop技术。

大数据领域的另一位生力军Spark现在也是名声大噪,作为通用的并行处理框架,Spark具有类似Hadoop的一些优点,而且Spak在迭代计算上具有比Hadoop更高的效率,还提供了更为广泛的数据集操作类型的开发等等。众多优越的性能和比Hadoop更广泛的适用面让Spark的进一步发展值得期待。

结语

综上所述,开源模式确实为企部和开发者署云环境创造了条件,推动了云技术的发展。但是,站在用户的角度看,特别是不具备软件开发、运维能力的传统企业,大规模采用开源云项目仍然存在一定的风险。另外,开源的开放所带来的一大弊端就是安全问题。也正是出于对这种风险的考虑,目前有很多大数据项目都没有放在云环境中运行。

但是,不管怎样,云计算与大数据在应用中产生的价值是有目共睹的,两者之间的结合,远比相互分离要好得多。而在选择云计算及大数据的平台时,企业一定要结合自己的实际情况和需求来选择适合自己的云计算平台,避免单纯为了开源、为了云而做出盲目的选择。当然从长远考虑,与开源想法搭起桥梁要比试图对开源想法视若无明智得多。

本文作者:佚名

来源:51CTO

时间: 2024-08-05 17:58:20

在开源模式下云计算大数据的现状浅析的相关文章

《数据分析变革》作者Bill Franks:云计算大数据融合物联网 推动智能创新

5月18日,由中国电子学会主办,ZD至顶网协办的第八届中国云计算大会在北京国家会议中心隆重举办.大数据著名专家.畅销书<数据分析变革>作者Bill Franks先生出席了本次大会,并在大会上做了主题为"云计算大数据融合物联网 推动智能创新"的精彩演讲. 大数据著名专家.<数据分析变革>作者 Bill Franks Bill Franks在主题演讲中表示:"我们需要思考跟物联网相关联的事情,特别是一些分析,我们这些数据可以用来做什么?我们在哪里处理这些数

第八届中国云计算在京召开:云计算大数据加速发展

由中国电子学会主办的第八届中国云计算大会5月18日~20日在北京国家会议中心盛大召开.本次会议由工业和信息化部.中国科学技术协会.北京市人民政府指导,中国云计算技术与产业联盟.中国大数据专家委员会.中国电子学会云计算专家委员会承办,世界工程组织联合会创新专委会(WFEO-CEIT)作为协办单位,ZD至顶网.计世资讯.锦囊专家协办,大会主题为"技术融合,应用创新".工业和信息化部副部长怀进鹏出席会议并讲话,云计算大数据领域的9位院士和200多位专家在全体大会和专题论坛上作报告,三天共有超

企业互联网时代下的大数据构建之道

文章讲的是企业互联网时代下的大数据构建之道,"现在企业互联网化正在迅速渗透到企业以及所处的产业链和生态圈中,借助互联网,企业可以更容易与前端供应商.服务商包括后端客户.最终客户建立密切的联系.在此过程中新的业务模式包括供应链优化.智能制造.产业链协同.电子商务等正在不断兴起并迅速发展." 用友网络科技股份有限公司助理总裁,兼集团iUAP中心副总经理谢东在接受记者采访时说道. 企业互联网化 大数据成为核心资产 企业互联网化已经成为一种趋势,它正在改变着企业的传统的业务模式,使得企业内部运

云计算大数据时代个人隐私保护刻不容缓

随着云计算大数据时代的到来,互联网将时时刻刻释放出海量数据,随着产生.存储.分析的数据量越来越大,无论是围绕企业销售,还是个人的消费习惯,身份特征等,都变成了以各种形式存储的数据.大量数据背后隐藏着大量的经济与政治利益,尤其是通过数据整合.分析与挖掘,其所表现出的数据整合与控制力量已经远超以往.大数据如同一把双刃剑,社会因大数据使用而获益匪浅,但个人隐私也无处遁形.近年来侵犯个人隐私案件时有发生,如谷歌泄露个人隐私事件.盛大云数据丢失事件.2011年韩国三大门户网站之一Nate和社交网络"赛我网

广元云计算大数据中心一期项目10月底投用

广元市加快推进云计算大数据中心项目(一期)建设,预计10月底前将初步建成并投入使用. 项目分三期进行 一期采用两步走方式 2014年9月,六届市政府第70次常务会议通过<广元市智慧城市总体规划>.2015年,广元市经济和信息化委员会启动<广元市云计算大数据中心项目预可研报告>(下称<报告>)的编制. 参照四川省政务云建设规模,根据<报告>,结合广元智慧城市建设实际,在征求各单位意见,召集信息化专家多次讨论,并与国内知名大数据云计算建设运营单位和通信运营商反复

Spark成云计算大数据时代的集大成者

Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台,它立足于内存计算,性能超过Hadoop百倍,从多迭代批量处理出发,兼收并蓄数据仓库.流处理和图计算等多种计算范式,是罕见的全能选手.Spark采用一个统一的技术堆栈解决了云计算大数据的如流处理.图技术.机器学习.NoSQL查询等方面的所有核心问题,具有完善的生态系统,这直接奠定了其一统云计算大数据领域的霸主地位. 伴随Spark技术的普及推广,对专业人才的需求日益增加.Spark专业人才在未来也是炙手可热,轻而易举可以拿到百万的

怎样为云计算大数据Spark高手?

Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台,它立足于内存计算,性能超过Hadoop百倍,从多迭代批量处理出发,兼收并蓄数据仓库.流处理和图计算等多种计算范式,是罕见的全能选手.Spark采用一个统一的技术堆栈解决了云计算大数据的如流处理.图技术.机器学习. NoSQL查询等方面的所有核心问题,具有完善的生态系统,这直接奠定了其一统云计算大数据领域的霸主地位. 伴随Spark技术的普及推广,对专业人才的需求日益增加.Spark专业人才在未来也是炙手可热,轻而易举可以拿到百万

“全国云计算大数据创新项目评选” 总奖金池为30万元人民币

" 全国云计算大数据创新项目评选"于3721.html">2014年3月正式启动.本次项目评选由中国电子学会主办,中国电子学会云计算专家委员会及中国云计算技术与产业联盟共同承办, CSDN协办.该活动最终将从各地区优秀项目中评选出若干名全国优秀项目,全国优秀项目将由中国电子学会提供价值近百万元的奖励!稍后会有详细介绍. "全国云计算大数据创新项目评选"征集活动面向更广范围内的云计算创新企业开放.力邀所有中国云计算领域的应用实践的实施团队.相关产品及技

电视台成阿里云下一个大数据重塑目标

本文讲的是电视台成阿里云下一个大数据重塑目标[IT168专稿]继空调之后,电视台成为阿里云计算的下一个大数据重塑目标.3月20日下午,阿里云宣布联手新奥特.华通云数据,打造中国最大的全媒体云计算平台.该平台可以在一周内,帮助传统电视台变成多屏网络电视台,支持电脑网站.手机APP.电视机全终端流畅播放,且可以实现大数据的收集整理和运营.今年内,全国两百家电视台将接入该云计算平台. 阿里云是中国唯一可以将5000台计算机合成一台"超级计算机"的云计算平台,将为全国广播电视媒体提供超级计算.