青云QingCloud推出HBase集群服务 支持SQL等高级功能

为了更好地满足用户对大数据基础平台的需求,企业级基础云服务商青云QingCloud(qingcloud.com)日前宣布正式推出HBase集群服务,包含HBase数据库服务、HDFS分布式文件系统、Phoenix查询引擎三大组件。在原生HBase的基础上,QingCloud在配置的易用性、监控告警、在线伸缩等方面进行全面优化,并支持二级索引、SQL和JDBC API,以及完全ACID事务等高级功能,用户能够在2-3分钟内创建一个HBase集群,并能够在控制台直接修改配置文件并应用,极大地减轻了HBase集群的运维难度。

 

青云QingCloud推出HBase集群服务

作为Hadoop生态圈的重要成员,HBase是一个具有高可靠性、高性能、可伸缩性、列式存储的分布式NoSQL数据库。与关系型数据库相比,HBase能够支持PB级的数据量和每秒百万次的吞吐量。通常情况下,HBase应用于建立互联网索引、推荐系统后台、浏览历史及监控数据的存储和查询等场景。依托Hadoop的分布式文件系统HDFS作为底层存储,HBase能够为数十亿行、数百万列的海量数据表提供随机、实时的读写访问。

与Hadoop一样,HBase集群采用的是Master/Slave架构,如下图所示,青云QingCloud的HBase集群分三种节点类型:主节点(HBase Master和HDFS NameNode)、从节点(HBase RegionServer和HDFS DataNode)和客户端节点(HBase Client)。用户在HBase客户端可通过HBase Shell、Java API(本地或MapReduce)、Rest API或其他工具来访问HBase。若需要使用除Java外的其他语言时,可在客户端节点(HBase Client)自行启动Thrift Server以供支持。

青云QingCloud HBase集群服务架构图

青云QingCloud提供的HBase集群服务有以下亮点:

  • 高级功能:在原生HBase的基础上,QingCloud通过增加对Phoenix组件的支持,提供多种高级功能,如低延时OLTP、二级索引、标准SQL和JDBC API,以及完全的ACID事务能力。
  • 在线伸缩:大数据平台包括HBase的运维是非常繁琐的,而在QingCloud上,用户可以在2-3分钟创建一个HBase集群,集群支持横向与纵向在线伸缩。
  • 配置优化:用户可以在控制台直接修改和应用HBase的配置文件,省去大量繁琐的配置过程。此外,QingCloud还针对配置文件进行一定经验配置,并支持定时Major Compact,为HBase的运维提供最佳实践和技术支持。
  •  监控告警:QingCloud对HBase集群的每个节点提供了资源的监控和告警服务,包括CPU使用率、内存使用率、硬盘使用率等。同时,HBase和HDFS提供了丰富的监控信息。

青云QingCloud CTO 甘泉(Reno Gan)表示,在IaaS平台的基础上,QingCloud正在构建一个以关系型数据库、缓存服务、大数据服务,以及对象存储服务为组件的数据服务平台,它们彼此关联、相互补充,并逐渐成为超高性能、灵活搭配、完整生命周期的数据解决方案。

原文发布时间为:2016年8月22日 

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-09-13 15:38:20

青云QingCloud推出HBase集群服务 支持SQL等高级功能的相关文章

青云QingCloud推出Elasticsearch全文搜索引擎服务

为了进一步满足用户对纯文本搜索,以及实时数据索引.搜索和分析的需求,企业级基础云服务商青云QingCloud(qingcloud.com)日前宣布正式推出Elasticsearch分布式全文搜索引擎服务.通过Elasticsearch服务,用户能够方便地创建和管理Elasticsearch集群,支持在线横向与纵向伸缩,且用户业务的连续性不会因此而中断.此外,QingCloud还提供了丰富的监控告警等服务来帮助用户更好地管理集群. 青云QingCloud Elasticsearch服务 Elast

青云QingCloud推出SDN网络直通服务 Docker网络能力大幅提升

1月16日,青云QingCloud(qingcloud.com)日前宣布推出SDN网络直通服务,由IaaS平台网卡管理和Hostnic插件两部分组成.该服务能够使运行在虚拟机上的容器直接使用IaaS平台的SDN能力,从而极大地提升了容器应用的网络性能,并显著降低容器配置与维护的操作难度. 在青云QingCloud推出SDN 网络直通服务之前,传统的Docker部署方案存在两大弊端:一是严重的网络性能损耗.传统的基于虚拟主机的Docker部署方案,需要采用Overlay或者Bridge网络插件实现

青云QingCloud推出新版移动控制台 全面支持所有产品线与私有云服务

企业级基础云服务商青云QingCloud日前宣布推出采用新架构实现的新版移动控制台,全面支持QingCloud所有线上资源,新增了包含最新上线的Elasticsearch在内的所有产品线,并对未来上线的产品也可实现实时更新.此外,新版移动控制台还增加了对私有云的支持,私有云用户通过配置自己的私有云地址即可进行连接.今后,移动控制台可以在公有云和私有云账户之间进行自由切换.用户可以通过手机浏览器登陆官网(https://www.qingcloud.com) 按照引导下载iOS或Android的最新

青云QingCloud推出新版移动控制台 —— 全面支持所有产品线与私有云服务

企业级基础云服务商青云QingCloud日前宣布推出采用新架构实现的新版移动控制台,全面支持QingCloud所有线上资源,新增了包含最新上线的Elasticsearch在内的所有产品线,并对未来上线的产品也可实现实时更新.此外,新版移动控制台还增加了对私有云的支持,私有云用户通过配置自己的私有云地址即可进行连接.今后,移动控制台可以在公有云和私有云账户之间进行自由切换.用户可以通过手机浏览器登陆官网(https://www.qingcloud.com) 按照引导下载iOS或Android的最新

MySQL 集群服务简介

MySQL Cluster.me 开始提供基于 Galera Replication 技术的 MySQL 和 MariaDB 集群服务. 在本文中我们将会讨论 MySQL 和 MariaDB 集群服务的主要特性. MySQL 集群服务 什么是 MySQL 集群 如果你曾经疑惑过如何提升 MySQL 数据库的可靠性和可扩展性,或许你会发现其中一个解决办法就是通过基于Galera Cluster 技术的 MySQL 集群解决方案. 这项技术使得你可以在一个或者多个数据中心的多个服务器上获得经过同步的

如何访问E-MapReduce中HBase集群

一.创建HBase集群 E-MapReduce在EMR-1.2.0版本开始支持HBase(1.1.1)了,创建集群时注意点如下: 1)选择付费类型 创建集群的基本信息页面可选择付费类型,包括包年包月和按量付费两种,一般HBase集群都是长期存在的,所以选择包年包月价格更实惠. 2)选择软件版本配置 产品版本选择EMR-1.2.0及以上版本,集群类型选择HBASE,目前EMR支持的HBase版本号为1.1.1. 3)集群网络配置 可以选择将HBase集群创建在经典网络环境或者专有网络环境(VPC)

HBase 集群监控

为什么需要监控? 为了保证系统的稳定性,可靠性,可运维性. 掌控集群的核心性能指标,了解集群的性能表现. 集群出现问题时及时报警,便于运维同学及时修复问题. 集群重要指标值异常时进行预警,将问题扼杀在摇篮中,不用等集群真正不可用时才采取行动. 当集群出现问题时,监控系统可以帮助我们更快的定位问题和解决问题 如何构建 HBase 集群监控系统? 公司有自己的监控系统,我们所要做的就是将 HBase 中我们关心的指标项发送到监控系统去,问题就转换为我们开发,采集并返回哪些 HBase 集群监控指标项

我为什么建议自建HBase集群应该迁移过来?

引言 最近云HBase商业化了,HBase在业界应用还是比较广泛.在云上环境下中,不少客户都自建了HBase集群,还有一部分用户是把HBase集群放在Hadoop离线集群内部.此文主要对比下云HBase数据库跟自建HBase的差异.另外,在成本上,云HBase数据库跟自建基本差不多,目前云HBase在推广打折阶段,比自建还便宜不少 自建HBase与ApsaraDB HBase对比 自建目前在云上,基本是基于ecs去自己构建,ApsaraDB HBase我们还是做了不少事情的: ApsaraDB

HBase集群出现NotServingRegionException问题的排查及解决方法

HBase集群在读写过程中,可能由于Region Split或Region Blance等导致Region的短暂下线,此时客户端与HBase集群进行RPC操作时会抛出NotServingRegionException异常,从而导致读写操作失败.这里根据实际项目经验,详细描述这一问题的发现及排查解决过程. 1. 发现问题 在对HBase集群进行压力测试过程中发现,当实际写入HBase和从HBase查询的量是平时的若干倍时(集群规模10~20台,每秒读写数据量在几十万条记录的量级),导致集群的读写出