如何让云计算与企业大数据强强联手?

本文讲的是如何让云计算与企业大数据强强联手,大数据是高性能计算领域最热门的趋势。大数据往往是非结构化的大规模数据,这些庞大的数据集中蕴含着对企业极具价值的情报信息。而云计算在过去几年一直是IT世界的宠儿,因为云计算开创了计算作为服务的新时代,尽管人们对于云计算的安全、可用性和成本仍然存在疑虑。

  大数据的规模似乎能够成为云计算有趣的合作伙伴。大规模数据的管理存在很高的复杂性,正因为如此,大数据分析通常在本地服务器集群中进行。而云计算的优势在于尽可能有效地优化现有资源。如果部署得当,你没有理由不结合大数据和云计算的优势。

  通过业务分析在云环境挖掘大数据的价值并不会很麻烦,但是也有一些具体的策略来确保你的企业具有最佳效率。为了让企业在访问、分析和改善其业务操作方面处于领先位置,大数据和云环境都必须满足一定条件。

  首先,让我们看看你的大数据业务分析工具必须具备的三个能力:

  1. 使用能够本地连接到所有主要大数据来源(例如Hadoop和NoSQL存储)的业务分析工具。

  2. 管理能力: 确保业务分析工具能够有效地管理和协调大数据任务以及传统IT任务

  3. 整合能力: 用于分析的数据很少是来自单一来源。业务分析工具必须具备很好的数据整合能力,需要能够有效地整合传统关系型数据库和非传统大数据存储间的数据,例如Hadoop和NoSQL数据库。

  大数据业务分析对云环境的要求也同样重要。云环境的主要优势在于具有弹性,根据需要付费,不需要管理企业内部硬件。例如,一家媒体公司在正常情况下,使用其自有的50台专用服务器集群就能够满足其数据处理需求。然而,在超级杯或世界杯期间,需要被处理的数据量可能会增加8到10倍,所以他们通过在公共云临时增加另外200台服务器来满足其需求。以下是你的大数据分析工具成功地在云环境运行应该具备的三个条件:

  1. 与云供应商无关: 找到一种能够在任何云服务(公共云或私有云)运行的分析工具

  2. 弹性: 确保能够在高峰负荷时期快速方便地添加任何计算资源,并在正常情况下减少资源以降低成本

  3. 数据通信带宽: 确保你部署了数据通信管道以有效地将原始大数据移动到云环境。可能你的大数据资源(例如web日志)已经位于云环境中,在这种情况下,你只需要简单地将大数据文件从一个云供应商复制到另一个云供应商即可。

  总之,如果部署得当的话,大数据和云环境的结合绝对是强强联手。

原文发布时间为:2012-03-31

本文作者:     刘亚琼 

时间: 2024-11-10 00:57:47

如何让云计算与企业大数据强强联手?的相关文章

企业图谱强势来袭,玩转企业大数据

2016年的大数据浪潮是一波又一波,"大数据"."云计算"."人工智能"开始频繁出现在人们的视线中.阿里云率先以大数据+云计算来赋能各行各业,阿里云并不只是自己在做大数据,而是通过打造公共.开放的大数据服务平台来开放自己的技术能力,服务更多的企业. 企业图谱作为阿里云2017年推出的首款数据服务产品,将会为企业提供一站式的企业数据服务.提供企业多维度信息查询,深度挖掘企业与企业.企业与个人关系链路,方便企业构建基于企业画像及企业关系网络的风险控制

《机器人操作系统ROS原理与应用》——3.1 企业大数据解决方案实现方式

3.1 企业大数据解决方案实现方式 工欲善其事必先利其器,企业大数据解决方案既包括大数据产品和工具层面,又包括服务层面.企业大数据解决方案根据实现方式的不同可分为完全独立研发.直接购买第三方解决方案和借助第三方的力量进行联合开发三种. 3.1.1 独立研发 独立研发指的是企业内部通过组建大数据中心或部门,独立进行大数据项目的研发.企业独立研发大数据平台,在数据安全.技术可控.后期扩展等方面具有重要意义. 数据安全:独立研发过程中的所有数据从输入端到输出端的整个流通都在企业内部进行,数据不会因为平

云谷大世界对话:探讨云计算,碰撞大数据

北京·亦庄·云世界大会2013于12月12日在亦庄创意生活广场举行.本届云世界大会以"Cloud Now @ CHINA "为主题,围绕"趋势发展的世界云"和"自主创新的中国云"两大主线.延续北京硅谷对话"双城记"传统,来自硅谷的云计算顶级专家,云计算领域顶级的公司与中国互联网及云计算领域的领导企业.风云人物,通过技术.创新.投资.趋势等方面的碰撞,解读云计算本质.趋势.创新创业机会.同时,与会者也将零距离接触到中国云计算这几

第二届云计算大会暨大数据高峰论坛举办

本文讲的是第二届云计算大会暨大数据高峰论坛举办,2012年9月20日,北京.由IT商业新闻网.全国CIO/CTO俱乐部主办,<IT时代周刊>协办的"智在应用--第二届云计算大会暨大数据高峰论坛 "在新世纪日航饭店隆重举办. 本届论坛嘉宾云集,听众踊跃,云计算.大数据主题深入人心.来自官.产.学.研.媒.企业用户等不同领域近300位业界人士从四面八方涌入会场.工业和信息化部电子信息司巡视员胡燕.中国工程院院士倪光南.卫生部信息化工作领导小组办公室副主任高燕婕.国家电力监察委员

数说云计算大会 寻找大数据背后的商机

本文讲的是数说云计算大会 寻找大数据背后的商机,上周,云计算大会在高温中落下帷幕.本次大会正值盛夏,但会场三天依旧人头窜动,高温酷暑也阻挡不住大家对云计算的热情.今天为您盘点一下本届云计算大会上的各种数据,看看能否从这些数据背后找到新的商机. 1.1天=19天 中国大数据专家委员会主任委员,中国科学院院士 怀进鹏: 一个PB的数据,光用现在最快硬盘读取速度1.9天,一个GB的数据需要五年左右完成,百度一天网页超过10个PB,百度用最快硬盘把数据读完就需要19天,一天数据需要19天读完,显然在数据

我国企业大数据的发展与应用总览

一.我国企业大数据产业发展现状 飞速发展的大数据产业除了改变人们生活的方方面面.促进社会快速进步之外,也为企业这个社会主体带来了更为直观和有效的影响. 近年,企业级大数据应用逐渐普及,消费者行为分析.精准营销.新业务新产品推广.广告推送.代言人选择.社交媒体.可视化.溢价收益.库存管理.信贷保险等相关应用不断丰富.伴随着一批致力于商业和企业应用服务的大数据初创企业迅速成长,大数据更广泛地应用到各领域企业中. 业务转型是目前大多数企业的普遍需求,大数据分析不仅可以优化访问.加快决策.最大程度提高可

企业大数据的发展与应用

一.我国企业大数据产业发展现状 飞速发展的大数据产业除了改变人们生活的方方面面.促进社会快速进步之外,也为企业这个社会主体带来了更为直观和有效的影响. 近年,企业级大数据应用逐渐普及,消费者行为分析.精准营销.新业务新产品推广.广告推送.代言人选择.社交媒体.可视化.溢价收益.库存管理.信贷保险等相关应用不断丰富.伴随着一批致力于商业和企业应用服务的大数据初创企业迅速成长,大数据更广泛地应用到各领域企业中. 业务转型是目前大多数企业的普遍需求,大数据分析不仅可以优化访问.加快决策.最大程度提高可

未来 云计算将在大数据领域扮演怎样的角色?

企业存储环境主要是围绕记录系统构建起来的,侧重于这些问题:为数据记录长度固定的文件购买哪些类型的存储介质和管理系统,所存储数据的性质是实时数据.准实时数据,还是只是偶尔需要访问或完全可以用数据归档保存起来的批量填充的数据等. 自从大数据进入企业数据中心和业务部门,一切改变了――单个的大数据文件可以用数TB.甚至数PB来衡量.Hadoop等分析平台上的大数据并行处理与事务数据的按顺序处理有着明显区别.不出所料,存储方面要考虑的因素随之变化. 这种变化在数据分析和高性能计算领域体现得最为明显.这个领

构建区域、行业、企业大数据发展评估指标

去年全国大数据产业发展平均指数9.99 金融政务应用领先 近日,工信部信软司指导中国电子信息产业发展研究院发布<中国大数据产业发展评估报告(2017年)>(以下简称<报告>),重点聚焦于区域.行业.企业三个层面,通过制定指标体系测算发展指数,剖析发展水平.层次和特点,分析存在的不足和问题,这对于研判应采取的政策措施.推动我国大数据产业快速发展具有积极作用.     (资料图片 来源于网络) 构建区域.行业.企业大数据发展评估指标 <报告>首先界定了大数据产业的概念.&l