Cloudera:智能大数据分析搞定各种复杂应用

在云上,最常见的有两种工作状态,一种是上移和转移,就是把以前的工作负载从私有的平台转到云上;另外一种是Cloudera在云上生态的工作负载,在这上面有很多客户大规模的部署。Cloudera在云平台、软件及硬件方面都有很好的生态圈。Cloudera云计算工程副总裁Vikram Makhija在接受本站记者采访时这样表示。

Cloudera用技术解放用户

Cloudera在Hadoop和Spark上居于领先地位,其一直专注于开源软件的商业化应用。谈到优势,Vikram Makhija认为:云提供商自己是不去开发Hadoop产品的,它只是选一个Hadoop版本来用,基本上他们都会提供一个全级给客户,这时候客户需要自己在实施当中去考虑高可用性和安全性两个方面,需要自己去部署。

Cloudera其实是针对客户,帮助客户做到这一点,来提供类似于安全、高可用性、复制,这些企业级的特性。这些如果是客户自己要做的话,其实是要占用很多的工作量。Cloudera在自己的一个平台上面,就可以做到统一的数据的管控,能够做到部署。

相对于友商,Cloudera在云上管理的工具比他们更加的完善,类似于Cloudera Director这样的部署,Cloudera都可以提供比他们更有竞争能力的管控工具,能够帮助企业客户去部署自己的大数据平台。

智能大数据分析搞定各种复杂应用

在大数据的应用与分析方面,Cloudera同样有很多应用案例。Vikram Makhija介绍道,英特尔在制造芯片检查方面,就是依靠Cloudera的平台来实现。数据是从当时的环境生产设备上面复制之后,通过加工和处理很快得到分析结果。在国内,Cloudera也有类似的应用,比如台湾和大陆芯片制造厂商都在用Cloudera的方案去部署生产线上芯片质量的管理。

另外,车联网方面也有非常重要的应用案例。国内有很多企业在制造新车,新车上市之前是要有测试车在路面上去跑,每天把数据拿出来分析。在过去没有大数据之前,有几台车在街上跑,几分钟就会产生很多数据。每天回来有几十G、上百G的数据拿来分析。

客户之前运用传统数据库来做分析,但感觉成本非常高,因为几台车产生上百G数据,几天下来系统就支撑不住了。后来他就采取Cloudera的方案,用Cloudera提供的大数据平台,每天把从车上拿来的数据去分析,原来是一分钟取一次,现在按秒级来取,每天就不是以G为单位,而是以TB为单位。每天汽车实时车况形成一个分析,用这种新型的方式成本降了很多,又可以做更全面的分析,用户非常满意。

此外,Cloudera也有很多“工具”能够帮助用户管理云资源,Director可以更方便地跨各种云环境部署和管理Cloudera Enterprise集群生命周期。客户可以选择用于AWS、谷歌云平台(Google Cloud Platform)和Microsoft Azure的模板,以快速完成配置、增大/缩小集群规模以及终止集群,客户还能够从一个统一的界面监控和管理所有集群。

本文作者:云中子

来源:51CTO

时间: 2024-10-23 06:25:09

Cloudera:智能大数据分析搞定各种复杂应用的相关文章

vb 数组问题,求各位大神搞定,谢谢

问题描述 vb 数组问题,求各位大神搞定,谢谢 Private Sub Command1_Click() Dim strDataValue() As StringDim stray() As StringDim strss As StringDim ar1() As StringDim sss As StringDim i As Integer strss = ""1245121443437676764"" ar1 = Split(strss) For i = 0

软件卸载不干净怎么办?智能卸载轻松搞定!

智能卸载不同于普通卸载,智能卸载不仅可以将软件相关的注册表和冗余文件扫描出来,还可以通过任何exe可执行文件寻找关联,卸载普通卸载无法删除的残留文件,那智能卸载是如何使用的呢?请看下文. 教程中使用的软件.工具: 软媒软件管家 怎么使用智能卸载?(软媒软件管家为例) 1.解压从系统之家下载的软件,并打开(这个软件是绿色独立版,不需要安装);   2.软件打开后的主界面:  3.打开"软件卸载"选项卡,在二级菜单中点击"智能卸载";   4.点击"浏览...

大数据落地:五步搞定数据驱动营销

文章讲的是大数据落地:五步搞定数据驱动营销,据艾瑞咨询统计,2013年,国内网络购物市场交易规模达到1.85万亿元,增长42%;预计到2016-2017年,国内网络购物市场交易规模将达到40,000亿元.当消费者纷纷借助互联网.智能终端设备等数字化媒介进行交易决策时,对于企业而言,这些海量数据正成为富含业务洞察力以及市场竞争潜力的宝贵资源. 而随着大数据价值快速获得认可,大数据在不同行业的落地应用就成为最受关注的焦点,也成为2014年大数据技术发展的重大趋势.目前,大数据营销已经不再是一个市场营

聚合大数据分析和应用玩家 他们搞啥?

文章讲的是聚合大数据分析和应用玩家 他们搞啥,近年来,大数据正日益成为国家基础性战略资源,蕴藏着巨大的潜力和能量.在国家层面,发展大数据已成为提升竞争力的战略选择;在经济层面,发展大数据已成为打造新动能的关键要素;在行业层面,发展大数据已成为驱动转型发展的重要引擎;推动大数据发展已成为从政府到民间.从行业组织到企业机构的社会共识. 在这样的背景之下,2016年9月13-14日,国内独立第三方移动数据服务平台TalkingData主办的T112016暨TalkingData智能大数据峰会在北京中国

搞定大数据:AI和机器学习在数据处理与保护上的应用

作为咨询师和顾问,有关各自数据.信息和网络安全事务时,重复"规模"问题挺有难度.不幸的是,上市公司的"外行"总监和管理人员,以及政府高管,倾向于将"规模"(当它属于数据保护的时候)看做不好的东西,甚至是令人恐怖的事物. 原因部分在于,几乎没有什么实用的方法,可以向这些位置上的人解释:某组织的安全运营中心是有可能每天收到百万个"事件",以及,同时处理和调查这些事件的固有潜在危害,以及,适度保证没有任何一起事件能够溜过安全人员的检

五步轻松搞定网站数据分析收集工作

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 网站及产品运营不能凭空而谈,纸上谈兵,要用实实在在的数据说话.如果我们手里有一份针对我们需求的非常完美的数据的话,那对于我们在进行推广的时候,就会有目标,有针对性地去进行,节省了大量的工作量,也能让我们很好地了解竞争对手的情况,从而来达到一个知己知彼,掌控全局的目的.万丈高楼平地起,再完美的数据分析也是建立在数据的基础上的,只有在足够多的数据

出错-apache总是自动停止,解决了很久也没搞定,求大神出手相助,跪拜!

问题描述 apache总是自动停止,解决了很久也没搞定,求大神出手相助,跪拜! 环境: win2008+wamp apache2.2.21 php5.3.10 mysql5.5.20 每次出错apache日志中都带有这些信息: PHP Warning: PHP Startup: Unable to load dynamic library 'F:/php/wamp/bin/php/php5.3.10/ext/php_pdo.dll' - xd5xd2xb2xbbxb5xbdxd6xb8xb6xa

typedef struct-求大神把下面代码中的错误搞定!!

问题描述 求大神把下面代码中的错误搞定!! #include #include #include typedef struct { int a; int b; } DOUBLE_INT, *Double_int; Double_int a[4]; int main() { int i; for ( i=0; i < 4; i++) { a[i]->a = (i+1); a[i]->b = (i+1)<<1; } for ( i=0; i < 4; i++) { if (

大数据分析技术深度发展 智能交通呈现三大趋势

随着移动互联网.人工智能.大数据.云计算等新一代技术在汽车和交通领域的逐步应用,交通体系与出行方式变革已经开始.当前,新一轮科技革命蓄势待发,一大批以"绿色.智能.泛在"为特征的巨大技术变革正在孕育.物联网.大数据.云计算,移动互联网等新一代信息技术的快速发展,为道路智能交通提供了强大的技术支持. 大数据分析技术的深度应用,将驱动道路交通运输实现精准管理和信息服务,北斗定位导航.移动互联网,高精度地理信息等系统,将成为推动建设新一代道路智能交通系统的基础,交通运输行业新模式.新业态.新