汲取Linux灵感 Pivotal开源大数据套件

Pivotal公司将把旗下大数据套件中的主要组成部分加以开源,而这正是从Linux发展概念中汲取到的灵感。

此次决策将把HAWQ、Greenplum数据库以及Pivotal GemFire的“核心”代码发布给任何一位有意愿将时间投入相关开发工作的技术人士。虽然个人的力量看似微不足道,但众志成城之下项目将迎来极为积极的发展趋势。根据目前的情况分析,相关工作似乎会由名为Open Data Platform(即开放数据平台,简称ODP)的新部门负责。

ODP的白金成员中包括Pivotal、通用电气、Hortonworks、IBM、Infosys、SAS以及某家“大型国际化电信企业”。除此之外,AltiScale、Capgemini、CenturyLink、EMC、Splunk、Verizon企业解决方案、Teradata以及VMware则以金牌成员身份列席。

Pivotal公司CTO兼移动事务副总裁SundeepMadra指出,ODP计划将努力在Hadoop领域重现Linux当初在Unix领域所完成的壮举:汇聚起一股统一化力量,从而以更为便捷的方式帮助企业客户实现方案采纳。

为了实现这一目标,ODP方面将创建“一套面向Apache Hadoop、Apache Ambari以及其它相关Apache源成果的、经过测试的参考核心”,此举旨在帮助客户更轻松地了解该从哪里开始逐步部署Hadoop。

Madra同时补充称,对旗下产品进行开源将确保Pivotal公司抢在市场需求出现变化之前、提早对其现有产品作出针对性调整。

企业客户往往会在新闻机构的引导下作出技术采纳决策,他表示,正如博文往往是创新活动的直观指标一样。

追究将自身工具进行开源的背后思维方式,我们似乎可以把该举措归功于上世纪七十年代广为流传的一条格言:“如果你爱它,就要学会放手。如果它回到你身边,就证明它归属于你。如果它一去不返,那么无论抓得多紧都是徒劳。”在Pivotal公司看来,前面提到的各类开源应用方案都将回归其身边,并向其寻求咨询帮助以及商用化产品。

当然,Pivotal方面并没有给出相关方案的全部代码——前面提到的各类产品所使用的具体语言自此以后将“基于一套开源核心”。因此相关销售与支持服务还将普遍存在。而且如果ODP社区能够为上述产品“核心”提供部分新的实用性功能,那么Pivotal公司也将负责起归纳整理的工作。

Madra指出,ODP向每一位新成员开放。正如从业者一直在Hadoop领域所使用的相关语,巨象身处房内(Hadoop项目的标志正是一头活泼的大象),这是因为英特尔与Cloudera目前尚未被列入该组织的名单当中。Cloudera公司的目的与ODP非常相似,其号称将建立一套大多数人能够认同的Hadoop发展轨道,即以基金会形式指导大数据技术的未来走向。

Cloudera方面已经成功拉拢到了英特尔公司的资金支持。ODP目前的成员名单在重量级方面与前者可谓不相伯仲,这可能意味着势均力敌的支持者阵营将让未来的市场走向变得更加有趣。

而在大数据风起云涌的时代背景下,以下事件尤其值得关注:谷歌公司于2014年年中决定放弃作为Hadoop基础性技术的Map Reduce,转而寻求新的替代性方案。

原文发布时间为: 2015年2月19日

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-10-23 00:34:55

汲取Linux灵感 Pivotal开源大数据套件的相关文章

Pivotal大数据套件通过内存计算实现实时加速

融合了大数据.PaaS和敏捷开发的Pivotal公司今天发布Pivotal GemFire 8的主要功能.Pivotal大数据套件包括了新版的Pivotal GemFire(一个分布式的.面向企业级的内存计算解决方案,可以构建大规模弹性的应用).此次发布推进了Pivotal的使命--让当代的软件开发者方便地集成数据,创建新型的企业级应用. 在今天的商业环境下,公司正投资于有战略意义的定制应用,以提供竞争差异化竞争优势和新的收入机会.这些应用必须具有性能.伸缩性和全球覆盖,而且要随时在线.应用开发

Pivotal推出最新大数据套件

ZDNet至顶网服务器频道 04月04日 新闻消息:2014年4月3日,Pivotal宣布Pivotal大数据套件(Pivotal Big Data Suite)今天上市.该套件基于年度订购方式,提供软件.支持和维护,包括Pivotal Greenplum数据库.Pivotal GemFire.Pivotal SQLFire.Pivotal GemFire XD.Pivotal HAWQ和Pivotal HD,灵活地为客户提供了一套大数据/快数据产品.Pivotal大数据套件今天开始上市,定价极

2015 Bossie评选:最佳开源大数据工具

Bossie奖是知名英文IT网站InfoWorld针对开源软件颁发的年度奖项,根据这些软件对开源界的贡献,以及在业界的影响力评判获奖对象.本次InfoWorld评选出了22款最佳的开源大数据工具,像Spark.Storm都名列榜单之上. InfoWorld在分布式数据处理.流式数据分析.机器学习以及大规模数据分析领域精选出了2015年的开源工具获奖者,下面我们来简单介绍下这些获奖的技术工具. 1. Spark 在Apache的大数据项目中,Spark是最火的一个,特别是像IBM这样的重量级贡献者

阿里云开源大数据内核团队招聘人才

构建分布式大数据云服务,并且参与到社区建设.深入源码内核改进优化开源项目,解决源码级别问题. 需要注意的是:不是使用组件,是研发hadoop.spark.hbase.flink等组件,深入修改内核,需要较强的分布式理论及编码能力. 岗位要求: 1.计算机或相关专业本科以上学历(3年以上工作经验)2.精通C++/Java/Scala程序开发(至少一种),熟悉Linux/Unix开发环境3.熟悉常用开源分布式系统,精通Hadoop/Spark/HBase/ES之一源代码尤佳4.熟悉数据库或者数据仓库

开源大数据周刊-第12期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.3.4版本 (已经发布) 升级jdk到1.8 升级Hadoop到2.7.2 添加python2.7.1及python3.4版本 添加numpy库 支持Presto.phoenix.jstorm.oozie 支持Hadoop跟Hbase混合部署 支持深圳.上海机房 1.4版本(正在研发): 用户执行计划及集群运行状态自定义报警 1.4.1版本 集群整体运行情况的仪表盘 集群状态监控报警 资讯 5W1H(六何分析法)全景洞察大数据 我

开源大数据技术专场(上午):Spark、HBase、JStorm应用与实践

16日上午9点,2016云栖大会"开源大数据技术专场" (全天)在阿里云技术专家封神的主持下开启.通过封神了解到,在上午的专场中,阿里云高级技术专家无谓.阿里云技术专家封神.阿里巴巴中间件技术部高级技术专家天梧.阿里巴巴中间件技术部资深技术专家纪君祥将给大家带来Hadoop.Spark.HBase.JStorm Turbo等内容. 无谓:Hadoop过去现在未来,从阿里云梯到E-MapReduce 阿里云高级技术专家 无谓  从开辟大数据先河至现在,风雨十年,Hadoop已成为企业的通

开源大数据周刊-第36期

[阿里云E-MapReduce动态] 1.6.0版本上线,增加交互式工作台.支持独享机型 国际站上线,海外用户可以购买E-MapReduce服务 资讯 看行业观察家和技术专家对大数据在2017年的发展预测 业界权威市场研究和咨询机构Ovum公司日前估计,大数据市场规模将从2016年的17亿美元增长到2020年的94亿美元.随着市场的增长,企业的挑战正在转变,对人们的技能需求正在改变,而大数据服务供应商的景观也在风云变幻.2017年将是大数据专业人士更为忙碌的时刻.文章介绍了来自相关行业观察家和技

开源大数据周刊-第38期

阿里云E-Mapreduce动态 E-MapReduce 2.3.1镜像版本(已发布) 基础镜像CentOS 6.5内核版本升级到2.6.32-642 支持Hadoop YARN Job failover 资讯 大数据的寒冬已至,谁将倒下,谁成巨人? 本文就近期百分点和亚信数据内部人事调整的新闻出发,提出了"大数据寒冬已至"的观点,而过度竞争是大数据寒冬的主要因素.对于未来大数据公司如何生存,文章中提出了产品聚焦.成本控制等方向,为度过寒冬做准备. 大数据第一案,微博为什么赢了? 微博

开源大数据周刊-第15期

阿里云E-Mapreduce动态 E-Mapreduce团队 1.4版本(已经发布) 作业运行失败报警 作业并行提交 添加sqoop.shell类型的作业 1.4.1版本(正在研发) 完善失败报警 完善定时任务,增加小时.分钟定时任务 1.5.0版本 (正在研发) 集群整体运行情况的仪表盘 集群状态监控报警 1.5.0版本 交互式查询(支持hive.spark) 资讯 中国大数据发展10大趋势5大挑战 中国大数据发展10大趋势5大挑战,如:大数据的首席数据官开始崛起.可视化推动大数据平民化.智能