下一代高性能数据库标杆POLARDB 亮相顶会VLDB2017

8月28日-9月1日,第四十三届VLDB会议在德国慕尼黑举行。阿里巴巴在本届VLDB展区重点展示了ApsaraDB、AliSQL、AnalyticDB和MaxCompute等数据库和数据处理技术,特别是基于硬件条件极致优化的下一代数据库产品POLARDB,引起现场与行业专家学者的注意和交流探讨。

VLDB,全称InternationalConference on Very Large Databases,是数据库领域三大顶级国际会议之一,是由成立于美国的非盈利性机构VLDB基金会赞助和运营。第一届VLDB于1975年在美国召开,大会以在全球普及数据库技术研究和交流作为使命。

本届VLDB共有来自全球的750篇研究论文投稿,其中133被接收,接收率不到18%。整体内容覆盖traditional database、data analysis、spacial and graph和deap leaning等领域。在现场展示方面,VLDB2017的参展厂商既包括Oracle、SAP、Microsoft等传统含数据库业务的厂商,也包括阿里巴巴、Google和Facebook等新兴的互联网科技企业。

阿里巴巴数据库技术作为阿里IT基础设施的重要组成部分,和阿里云数据库ApsaraDB的技术支撑,在工程实践和技术创新上一直走在同行前列。从2011起,阿里数据库技术团队开始使用MySQL等开源数据库和OceanBase自研数据库取代传统商业数据库,2016年双11创下支付峰值12万笔/秒世界纪录;经过历年双11磨练,基于MySQL深度定制的AliSQL比官方版本性能提升70%,秒杀场景下性能提升近百倍。

业务能力方面,阿里巴巴已将自有数据库技术和服务通过阿里云输出,满足电商、云计算和金融等多种应用场景的客户需求,目前阿里云提供近20种数据库服务,是全球最稳定、最完整的云数据库产品阵列。

特别是即将发布的阿里云POLARDB,基于最新的存储和网络硬件设备特点,大量采用高速网络互联、存储块设备、分布式文件系统、数据库物理复制、数据共享存储等热点技术手段,通过放弃传统分布式数据库OLTP多路并发写的支持,采用一写多读的架构设计,简化分布式系统难以兼顾的理论模型,大幅度提升OLTP性能。

阿里自研实时高并发在线分析型数据库AnalyticDB,支持毫秒级的多个大表关联计算,全面兼容MySQL协议,内置支持多种数据源数据快速接入,支持高并发准实时数据写入/删除,写入速度可达数百万TPS,对千亿级数据进行即时的多维分析透视和业务探索。

此外,阿里自研的另一款产品——MaxCompute(原名ODPS),技术上支持高达EB级存储并提供完善的数据导入方案,支持包括SQL、MapReduce、Graph等计算类型及MPI迭代类算法在内的多种计算模式,具备万台服务器扩展能力和跨地域容灾能力,为阿里云上千万客户提供快速、完全托管的PB级数仓解决方案。

在现场3天的交流展示环节中,众多工业界技术专家和高校学者到访阿里巴巴技术展台,就阿里目前在数据库和大数据方面的技术进展进行交流。来自Facebook的华人工程师陈国强回忆到,他曾在2012年初次来杭州做过交流,到VLDB2014在杭州举办,再到今天VLDB2017现场交流,让他感觉到阿里在大数据技术方面的能力和硅谷的差距正在迅速变小。

同样来自Facebook的数据库工程师,MHA(Master High Availability)作者YoshinoriMatsunobu,对现场展示的阿里巴巴下一代数据库POLARDB展示了极大兴趣,尤其就POLARDB在物理复制、事务状态同步和并行raft上改进等方面的技术细节,和现场参会的阿里云数据库资深专家林晓斌做了细致探讨,另外也就共享存储架构在水平扩展和高可用场景的优势展开交流。


Yoshinori Matsunobu和林晓斌在阿里巴巴展台合影

近年来,阿里巴巴数据库技术和学界合作也走在了前列,此次参与VLDB2017的数据技术领域知名学者IEEE Fellow、新南威尔士大学林学民教授,已经在图数据库领域和阿里巴巴数据库技术团队一起展开合作。前微软研发合伙人周靖人也在去年加入阿里巴巴,周靖人是云计算大数据、大规模分布式系统和数据库等领域的国际级学者,他曾多次在数据和系统领域的国际顶会议上(VLDB、SIGMOD和ODSI等)发表论文,也是此次VLDB2017的工业和应用分论坛的主席之一。在此次展会期间,还有来自德雷斯顿理工的Wolfgang Lehner教授,滑铁卢大学的Tamer Ozsu教授等国际数据库学界顶级专家造访阿里技术展台并交流探讨。


周靖人和加拿大滑铁卢大学Tamer Ozsu教授等人在阿里巴巴展台合影

从3月推出的NASA计划,到7月推出首个全球性科研项目“AIR”计划,阿里巴巴旨在解决社会经济发展中的“新技术”难题,驱动行业未来20年发展的科研项目,希望以此搭建学术界和工业界的合作平台,联合双方优势共同促进前沿技术的发展,推进计算机科学领域基础性、前瞻性、突破性的研究,构建全新基础技术生态。

9月8日,也就是本周五晚,阿里巴巴集团将在黄龙体育中心召开2017集团年会。来自全球各地的数万名员工,将共同迎接阿里巴巴的18岁生日。这场年会,也可能成为迄今为止杭州年会史上规模最大、最黑科技的一次。

来源:阿里技术
原文链接

时间: 2024-09-22 22:05:36

下一代高性能数据库标杆POLARDB 亮相顶会VLDB2017的相关文章

阿里云发布新一代数据库产品POLARDB,跑分领先一线友商

今天下午,阿里云升级发布了旗下最新一代的数据库产品POLARDB, 据悉,阿里云数据库产品目前覆盖包括:关系型数据库.混合分析数据库.搜索与时序数据库.NoSQL数据库以及数据库服务于工具等诸多领域,已成为全球数据库产品线最齐全的云计算厂商,今天整体数据库产品再次升级,旨在为企业提供面向未来的能力. 据了解,POLARDB采用第三代分布式共享存储架构,将IO操作减少50%,100%向下兼容MySQL5.6,性能是MySQL的6倍.它把创建只读副本进程从按小时计算缩减到现在几分钟就能完成,支持3分

SSDB:高性能数据库服务器

SSDB是一个开源的高性能数据库服务器, 使用Google LevelDB作为存储引擎, 支持T级别的数据, 同时支持类似Redis中的zset和hash等数据结构, 在同时需求高性能和大数据的条件下, 作为Redis的替代方案. 因为SSDB的最初目的是替代Redis, 所以SSDB会经常和Redis进行比较. 我们知道, Redis是经常的"主-从"架构, 虽然可以得到负载均衡以及数据跨地域备份的功能, 但无法实现高可用性. 考虑这种情况, Redis的主和从分别在两个IDC机房,

【Oracle】甲骨文下一代高性能处理器SPARC T4揭秘

近日在http://www.aliyun.com/zixun/aggregation/13438.html">斯坦福大学召开的"Hot Chips 23"大会上Intel.IBM.AMD等没拿出来什么新的猛料,对比之下ARM和Oracle透露下一代处理器的相关技术细节更多.其中Oracle接手Sun后开发的SPARC架构处理器依旧面向服务器和HPC(超级计算机)领域,而目前世界排名第一的日本RIKEN(理化学研究所)和富士通合力打造的超级计算机"京"

CNNIC“下一代互联网”可信域名服务器首度亮相

中介交易 SEO诊断 淘宝客 云主机 技术大厅 第十二届中国国际高新技术成果交易会(高交会)上,目前国内最强大的域名解析服务系统ZDNS域名设备已经由CNNIC研发成功.我国50%域名服务器相对不安全问题有望得到解决. 在高交会"国家发改委专馆",这套ZDNS系列设备以3个方方正正"黑匣子"的面孔呈现在世人面前.ZDNS域名设备的相关负责人告诉记者,ZDNS域名解析服务设备,是由国家发改委发起的"下一代互联网(CNGI)可信域名服务系统产业化项目"

阿里云自研云数据库POLARDB,未来企业的数字化答案

在2017年的杭州云栖大会上,阿里云总裁胡晓明做了题为"智能计算,为未来而生"的主题演讲,在众多内容中,阿里云的自研数据库产品POLARDB,引发了广泛关注. 从上个世纪60年代诞生开始,数据库就永久的改变了人类对数据的管理和认知,陆续出现今日的DB2 .Oracle.Informix.MySQL等大玩家,现在,从登录淘宝购物到在社交网站上高谈阔论,背后都离不开数据库的支撑. 数据库,无处不在. 假如要详细的说清楚阿里云为什么要选择自研数据库这条路,大概可以从以下三个方面展开. 数据库

PolarDB · 新品介绍 · 深入了解阿里云新一代产品 PolarDB

背景意义 云计算为如今的互联网时代提供了更多的计算能力,乃至创造能力,关系型数据库作为所有应用不可或缺的重要部件,开箱即用,高性价比特性的云数据库深受开发者的喜爱.作为一线的开发和运维人员,在阿里云的线上值班中,我们经常会碰到以下经典的客户抱怨. "你好,你们RDS的产品很棒,但是就是有点小贵,尤其是我要买只读实例的时候,成本是线性增加的,你们什么时候能便宜点?" "我在4天前,手工做了一个备份,数据库比较大,3T,你们说差不多要70个小时备份,这个..有没有什么办法加快一点

重磅发布背后:POLARDB的中国故事

直播!直击ApsaraDB产品升级(暨POLARDB)发布会 预计到2020年,人类的总数据量将突破100ZB. 这些浩若星海的数据记载着人类文明的一切成果,如果万有引力是连接起宇宙关系的钥匙,那么数据库就是让人类与数据形成连接的另一种形式的钥匙. 从登录淘宝购物到在社交网站上高谈阔论,背后都离不开数据库的支撑. 从上个世纪60年代诞生开始,数据库就永久的改变了人类对数据的管理和认知. 数据库,无处不在. 2017年9月21日,阿里云发布了全新一代云数据库产品POLARDB,这是首个国产的通用高

改写数据库历史的中国人

本文讲的是改写数据库历史的中国人 数据库好像从来都不是中国人的强项.但转机出现在4年前. 4年前,阿里巴巴宣布向天弘基金注资,成为余额宝的资金管理单位,如今天弘基金管理的资金超过15186亿,蝉联行业第一,改变了整个基金行业的市场格局. 4年前,由蚂蚁金服.腾讯.中国平安等发起成立的互联网保险公司众安保险成立,如今的估值已经超过800亿港元,再过几天就将在香港IPO募集资金超过100亿港币. 是的,互联网正在改变所有行业,同样包括监管最为严格.对数据库要求也最为严格的金融行业.如今,当9月21日

数据库诞生40年,阿里云AWS用技术推动第三次变革

本文讲的是数据库诞生40年,阿里云AWS用技术推动第三次变革,数据库诞生于上世纪50/60年代.1961年美国通用公司研发第一个数据库系统DBMS诞生.1976年霍尼韦尔公司(Honeywell)开发第一个商用关系数据库系统-Multics Relational Data Store.至此,数据库就开始融入各行各业,改变人类对数据的管理和认知,发展到如今诸如登录淘宝购物.社交软件聊天,都离不开数据库. 数据库,无处不在 在2017杭州云栖大会前夕的9月21日,阿里云发布全新一代云数据库产品POL