酷克数据:数据仓库在云环境下焕发新生

近年来,由于Hadoop和Spark等技术的出现,“基于关系型数据库的数据仓库是否到了退出历史舞台的时刻”的论调一再被提起。而在酷克数据联合创始人兼CEO简丽荣看来,数据仓库需要的不是退出历史舞台,而是需要进行根本性的变化。

事实上,随着信息技术的迅速发展,各行各业正产生和积累爆炸式的数据。但是,尽管近年来大数据处理相关的工具和产品不断涌现,传统部署模式下的大数据分析软硬件前期投入巨大、实施周期漫长、运维复杂,加上艰难的IT资源规划等原因,导致企业进行大数据分析的门槛依然很高。

基于以上情况,简丽荣认为,云计算的快速发展,特别是云端数据的爆炸式增长,使得数据仓库上云成为大势所趋;同时,云计算平台也为企业解决传统数据仓库面临的挑战提供了坚实的基础。不仅云计算的规模经济和按需收费的模式大大降低了企业的前期投入成本,同时,计算、存储和网络资源的API化使得软硬件近一步融合,让数据仓库系统的自动化运维甚至是智能化运维成为可能。简丽荣更是直言:“云平台几乎无限的资源(对某一个特定系统或应用而言)和弹性属性,将数据仓库的存储资源和计算资源的规划彻底送进了历史博物馆。”

酷克数据联合创始人兼CEO 简丽荣

据了解,作为一家专注于云端数据仓库的初创公司,酷克数据(HashData)通过与青云等基础设施即服务(IaaS)云服务提供商合作,提供完全托管、PB级别的数据仓库即服务。

简丽荣介绍道,HashData数据仓库具有三方面特点:

  • 低成本、高性能。通过使用HashData,企业用户无需购买、配置和管理庞大的服务器集群,按使用量付费,没有任何的前期投入,使得数据存储和分析的成本不到传统方案的十分之一。同时,HashData的架构为数据仓库优化的,从而提供极速的数据查询分析。
  • 完全托管,快速上手。企业用户可以在几分钟内创建一个包含几个到几十个甚至上百个节点的数据仓库集群,数据加载后马上可以开始数据分析任务。同时,HashData承担了所有纷繁复杂、极易出错的运维工作,让用户专注于业务分析上面。
  • 动态伸缩。随着业务负载的变化,用户可以动态地对HashData数据仓库集群进行纵向伸缩(改变计算节点的计算和存储能力)和横向伸缩(增删计算节点),彻底摆脱资源规划的难题。

同时,HashData提供了丰富的分析功能,并通过灵活、高速的数据连接器,实现与云平台其他数据服务的互联互通,有效缓解客户面临的数据孤岛问题。另外,拥抱开源也是HashData的一个特点,消除数据绑架的风险。

当然,说到数据即服务,就不能抛开作为基础的IaaS服务。目前,HashData部署在青云QingCloud IaaS层之上, IaaS层的改进对HashData的性能和功能有着重要影响,而作为国内IaaS创新企业青云的合作伙伴,酷克数据也时刻关注着青云的动向。

本月28日,作为一家以技术见长、立志打造云生态的公司,青云QingCloud将在北京国际饭店举办主题为“科技 · 洞见未来”的QingCloud Insight 2016大会(官网报名:http://insight.qingcloud.com/?bag_track=media)。届时,QingCloud还将公布SDS 2.0、SAN 2.0、NAS 2.0、Container Instance、Native PaaS等2016年度重量级产品和技术,并对IaaS层进行扩展,在支持Virtualization的基础上,新增对Container、Unikernel技术的支持。同时,QingCloud还将携手合作伙伴发布AppCenter 2.0全新云生态应用平台,令构建和使用集群应用更加简单。简丽荣表示:“HashData数据仓库本身也是一个集群应用,因此,我们对App Center 2.0非常期待。”

除此之外,简丽荣也将在大会上分享主题为“云端数据仓库的技术与应用”的演讲,除了数据即服务相较传统数据仓库的优势,简丽荣还认为Hadoop和Spark等大数据技术与以关系型数据库为基础的数据仓库不是你死我活的竞争关系,更多的是互补关系。他表示,每个系统都有自己擅长的应用场景,以统一数据架构的形式在云端共同构建完整的大数据生态系统。

此外,构建健康的云生态是青云举办此次大会的重中之重,随着青云将自己的定位明确为做资源层和平台框架层的调度和管理,它自身提供的服务与其客户的需求中间存在很大空缺,而通过建立自己的云生态,青云和众多合作伙伴,为企业客户构建以业务应用为核心的平台、框架、资源和服务体系,可以满足客户不同层次的需求。

简丽荣表示:“云计算正被越来越多的中国企业接受和使用,同时用户对云平台的需求也从最初的虚拟化资源逐步上升到企业级IT开发工具和完整应用解决方案层面。我个人认为,青云众多的企业客户,在资源层和平台框架层调度和管理方面出众的技术,技术驱动的公司文化,以及拥抱第三方应用开发者的开放心态,是其云生态的优势。从我们自身角度看,青云作为中国云计算市场重要的玩家,有着众多政企和互联网企业客户。加入到青云的云生态,意味着更多潜在的新客户,更大的市场。”

酷克数据公司简介:

酷克数据是一家专注于云端数据仓库的初创公司,由Apache HAWQ(Pivotal开源的SQL-on-Hadoop解决方案)创始团队成员创立。核心团队由来自Pivotal,Teradata,IBM,Yahoo!等公司资深的分布式数据库、云计算和Hadoop专家组成。今年5月份,我们在青云QingCloud上面推出国内第一个基于PostgreSQL和Greenplum Database的SQL-on-Cloud解决方案--HashData数据仓库,一个高性能、完全托管的PB级数据仓库。 

原文发布时间为:2016年7月25日 

本文作者:作者:赵东

本文来自合作伙伴至顶网,了解相关信息可以关注至顶网。

时间: 2024-07-29 13:48:36

酷克数据:数据仓库在云环境下焕发新生的相关文章

云环境下数据存储安全技术研究

云环境下数据存储安全技术研究 江西财经大学 伍琦 云计算是近年来IT界继网格计算.分布式计算.并行计算.效用计算等之后,新兴的技术热点之一.与业界普遍关注云计算的三种服务形式:软件即服务(Software as a service.平台即服务(Platform as a service.基础设施即服务(Infrastructure as a service, IaaS)不同,学术界往往不涉及云计算的具体形式,而重点讨论用户将存储和计算任务抽象外包给云服务器端时出现的问题.其中,数据存储安全是基础

云环境下政府数据存取的法律困境及应对

云环境下政府数据存取的法律困境及应对 马宁 政府数据存取法律制度是一国政府有效实施调查权的必要保障,为了刑事侦查与反恐之目的,各国立法普遍赋予本国政府进行数据存取的权力.但在云环境下,由于云计算自身的技术特性,政府存取云数据将面临执法方面的障碍,需要云服务商提供必要的执法协助,并对存取途径和方法进行调整.同时,云计算海量用户数据的集中存储为政府利用数据存取进行大规模的数据挖掘提供了可能,加之用户对数据的所有权与控制权相分离,这愈发引起公众对政府公权力滥用的担忧,需要立法对相关利益进行平衡.但我国

大数据与云环境下的信息安全

<信息安全辞典>日前由上海辞书出版社出版,该书由上海社会科学院信息研究所编撰,分析了全球信息安全所面临的全新挑战,从信息安全.信息安全威胁以及信息安全政策.法律.标准.机构.技术.产业.教育.研究等十个方面,对国内外的信息安全问题进行了较为全面的分析和梳理. 信息安全正迎来大数据时代和云计算环境的新风险和新挑战,这一新环境下的信息安全尽管与以往的信息安全有着历史的逻辑承续,但形成了一些新的特点,其风险链.风险域和风险度都有了诸多新变化,呈现出隐蔽的关联性.集群的风险性.泛在的模糊性.跨域的渗透

浅谈云环境下的数据保护策略

 企业核心数据是企业的命脉.通过建立完善的数据保护系统,保障核心数据已经成为当前众多企业的共识.为防止IT系统最重要的资产--数据的丢失,越来越多的企业开始从信息系统的安全性.稳定性和可靠性出发,以数据安全为目标,构建自己的数据保护体系.然而,随着云计算的普及和大数据时代的来临,急速膨胀的数据量使企业在数据保护方面投入的硬件以及人力.时间成本剧增.如何不让数据保护方案成为企业业务走向"巅峰"的拦路虎,是困扰大多数IT管理人员的难题.其中,解决成本难题与降低管理风险便是首要考虑的重点.

一种云环境下的多设备文件同步算法

一种云环境下的多设备文件同步算法 刘书君,冉强军,吴国庆 云环境下,客户端与云端之间呈现出动态的星型拓扑结构,客户端随时随地上线.离线的动态特性,使维护用户数据在多个副本之间的一致性变得复杂.本文提出了一种基于文件元数据的多设备实时自动文件同步算法,并通过调用鹏云T 盘提供的开放 API,并结合本文提出的同步算法,编程实现了一个云网盘客户端原型程序. 一种云环境下的多设备文件同步算法

云环境下的水质安全服务平台关键技术研究

云环境下的水质安全服务平台关键技术研究 浙江大学  郭诚 本文利用云计算技术构建水质安全服务平台,通过分布式数据资 源层.虚拟化计算资源层和可视化水质模拟渲染模块的构建实现异构水质信息数据的整合.水质模型的高性能并行计算和远程仿真.水质信息和预警信息的可视化. 论文主要的研究内容和成果有:(1)进行了水质安全服务平台功能需求分析,完成了基于云计算技术的水质安全服务平台整体架构设计.(2)设计并 实现了水质安全服务平台数据资源层.(3)通过对计算资源虚拟化研究, 设计了水质安全服务平台的计算资源层

互联网企业安全高级指南1.6 云环境下的安全变迁

1.6 云环境下的安全变迁 云计算的本质是改变企业需求方通过传统的渠道获取IT资源的形式.传统的方式是一个企业假如要构建信息化的能力,必须要采购硬件,采购软件,维护一个较大的IT团队,TCO很高.但是,到了云计算时代,这一切你都不需要,你只要轻点鼠标就可以获取大量的计算.存储和网络资源,并且不再需要专门的人员去IDC机房维护服务器,不需要大量的运维人员,甚至某些通用的应用开发都省了,你可以将手头的IT预算用于最需要的部分-完全聚焦于自己的业务,而不用费大量的精力维护基础设施,甚至资源的获取变得弹

云环境下的集群负载分析及调度策略研究

云环境下的集群负载分析及调度策略研究 杭州电子科技大学 应俊 本文首先研究了传统数据中心的特点及其缺点,分析了云数据中心的特点,接着研究了云集群的负载监控技术以及基于libvirt的虚拟机负载搜集技术.介绍了云环境下调度的概念和特征,并以OpenStack云平台为例详细分析了云环境下的调度机制.以CloudSim为例分析了云模拟技术,并研究了其中的主要模块. 随后,为了能深入理解云数据中心负载特征,本文搜集了实际公有云中生产集群的负载数据,涉及1082个虚拟机实例和100台物理机,时间跨度为20

从CIO视角出发审视云环境下的安全议题

安全如今已经成为一个广泛的议题,并且渗透到了IT 事务中的方方面面.纵观我在技术业界打拼的这么多个年头,我发现"安全"已经成了一个能够迅速扼杀任何创新型努力的词汇.在云计算发展的早期阶段,那些对云技术了解不深的人们总会就其安全性水平问东问西.相较于更为重要的.如何利用这项新技术帮助企业自身实现商业价值,他们往往首先把安全性作为技术演进的最大障碍.举例为说,2012年我就开始利用AWS支持企业级项目,当时我所能依靠的只有自己的同事.团队以及他们所拥有的解决问题的经验.然而我们的研究结果大