阿里巴巴MaxCompute亮相VLDB2017

8月28日-9月1日,第四十三届VLDB会议在德国慕尼黑举行。阿里巴巴在本届VLDB展区重点展示了MaxCompute、ApsaraDB、AliSQL、AnalyticDB和POLARDB等数据库和数据处理技术,引起现场与行业专家学者的注意和交流探讨。

VLDB,全称International Conference on Very Large Databases,是数据库领域三大顶级国际会议之一,是由成立于美国的非盈利性机构VLDB基金会赞助和运营。第一届VLDB于1975年在美国召开,大会以在全球普及数据库技术研究和交流作为使命。

本届VLDB共有来自全球的750篇研究论文投稿,其中133被接收,接收率不到18%。整体内容覆盖traditional database、data analysis、spacial and graph和deap leaning等领域。在现场展示方面,VLDB2017的参展厂商既包括Oracle、SAP、Microsoft等传统含数据库业务的厂商,也包括阿里巴巴、Google和Facebook等新兴的互联网科技企业。

阿里巴巴数据库技术作为阿里IT基础设施的重要组成部分,和阿里云数据库ApsaraDB的技术支撑,在工程实践和技术创新上一直走在同行前列。从2011起,阿里数据库技术团队开始使用MySQL等开源数据库和OceanBase自研数据库取代传统商业数据库,2016年双11创下支付峰值12万笔/秒世界纪录;经过历年双11磨练,基于MySQL深度定制的AliSQL比官方版本性能提升70%,秒杀场景下性能提升近百倍。

业务能力方面,阿里巴巴已将自有数据库技术和服务通过阿里云输出,满足电商、云计算和金融等多种应用场景的客户需求,目前阿里云提供近20种数据库服务,是全球最稳定、最完整的云数据库产品阵列。

阿里自研的大数据计算服务——MaxCompute(原名ODPS),技术上支持高达EB级存储并提供完善的数据导入方案,支持包括SQL、MapReduce、Graph等计算类型及MPI迭代类算法在内的多种计算模式,具备万台服务器扩展能力和跨地域容灾能力,为阿里云上千万客户提供快速、完全托管的PB级数仓解决方案。该通用计算平台承担着阿里巴巴集团,蚂蚁金服,菜鸟网络,高德,优酷土豆等关联公司95%以上的大数据存储和计算任务。对外,在阿里云公共云和专有云上提供PaaS大数据开放服务,是阿里云-数加的主力计算平台。升级后的 MaxCompute2.0 完全拥抱大数据开源生态,支持更多的语言功能,带来更快的运行速度,为人工智能等热门领域提供海量数据计算支持。

即将发布的阿里云POLARDB,基于最新的存储和网络硬件设备特点,大量采用高速网络互联、存储块设备、分布式文件系统、数据库物理复制、数据共享存储等热点技术手段,通过放弃传统分布式数据库OLTP多路并发写的支持,采用一写多读的架构设计,简化分布式系统难以兼顾的理论模型,大幅度提升OLTP性能。

阿里自研实时高并发在线分析型数据库AnalyticDB,支持毫秒级的多个大表关联计算,全面兼容MySQL协议,内置支持多种数据源数据快速接入,支持高并发准实时数据写入/删除,写入速度可达数百万TPS,对千亿级数据进行即时的多维分析透视和业务探索。

在现场3天的交流展示环节中,众多工业界技术专家和高校学者到访阿里巴巴技术展台,就阿里目前在数据库和大数据方面的技术进展进行交流。来自Facebook的华人工程师陈国强回忆到,他曾在2012年初次来杭州做过交流,到VLDB2014在杭州举办,再到今天VLDB2017现场交流,让他感觉到阿里在大数据技术方面的能力和硅谷的差距正在迅速变小。


Yoshinori Matsunobu和林晓斌在阿里巴巴展台合影

近年来,阿里巴巴数据库技术和学界合作也走在了前列,此次参与VLDB2017的数据技术领域知名学者,IEEE Fellow、新南威尔士大学林学民教授,已经在图数据库领域和阿里巴巴数据库技术团队一起展开合作。前微软研发合伙人周靖人也在去年加入阿里巴巴,周靖人是云计算大数据、大规模分布式系统和数据库等领域的国际级学者,他曾多次在数据和系统领域的国际顶会议上(VLDB、SIGMOD和ODSI等)发表论文,也是此次VLDB2017的工业和应用分论坛的主席之一。在此次展会期间,还有来自德雷斯顿理工的Wolfgang Lehner教授,滑铁卢大学的Tamer Ozsu教授等国际数据库学界顶级专家造访阿里技术展台并交流探讨。


周靖人和加拿大滑铁卢大学Tamer Ozsu教授等人在阿里巴巴展台合影

从3月推出的NASA计划,到7月推出首个全球性科研项目“AIR”计划,阿里巴巴旨在解决社会经济发展中的“新技术”难题,驱动行业未来20年发展的科研项目,希望以此搭建学术界和工业界的合作平台,联合双方优势共同促进前沿技术的发展,推进计算机科学领域基础性、前瞻性、突破性的研究,构建全新基础技术生态。

点击活动链接

阿里巴巴大数据-玩家社区 /

---阿里大数据博文,问答,社群,实践,有朋自远方来,不亦说乎……

时间: 2024-10-02 21:44:29

阿里巴巴MaxCompute亮相VLDB2017的相关文章

赋能行业 共建生态 阿里巴巴首次亮相义乌标准展

10月21日,在第23届中国义乌国际小商品博览会标准展上,前来观展的人们纷纷驻足于阿里巴巴集团的展台,或专注地阅读着展示栏上的介绍,或聚精会神地观看着大屏幕上热播的精彩视频,或认真聆听着工作人员的介绍,气氛热烈而活跃. 浙江省副省长朱从玖等领导也莅临阿里巴巴展区,并仔细听取了工作人员的汇报. 浙江省副省长朱从玖听取阿里巴巴集团标准化部总监朱红儒的工作汇报 和以往的展会有所不同,本次大会的主办方在义乌国际博览中心专门开辟了面积高达1800平米的标准展区,其目的就是为了建设成全球标准交易中心.而阿里

阿里巴巴大数据计算平台MaxCompute(原名ODPS)全套攻略(持续更新20171122)

  概况介绍 大数据计算服务(MaxCompute,原名ODPS,产品地址:https://www.aliyun.com/product/odps)是一种快速.完全托管的TB/PB级数据仓库解决方案.MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全.本文收录了大量的MaxCompute产品介绍.技术介绍,帮助您快速了解MaxCompute/ODPS. MaxCompute 2.0:阿里巴巴的大数

操作系统顶级会议SOSP 阿里云MaxCompute开启NewSQL时代

近日,第26届操作系统原理大会(SOSP)在上海举行,来自亚洲.欧洲.北美等地区的高校.学术机构和众多科技企业研究人员齐聚一堂.阿里巴巴受邀参加此次会议,除在展区展示系统软件技术的同时,阿里集团副总裁周靖人在BOF环节向参会人员介绍了阿里在数据库.计算.机器学习.网络等领域的多项重点技术. SOSP和另一个计算机系统领域会议OSDI同被誉为操作系统原理领域的奥斯卡,拥有极高的学术地位,参会人员在学术界.工业界取得的成绩是衡量能否参加SOSP的重要指标之一. 阿里巴巴BOF现场 在主题为"Big

阿里巴巴戛纳首秀,带去了天猫全域营销

阿里巴巴集团CMO董本洪在戛纳做演讲 位于法国南部的蓝色海岸戛纳,迎来了新的巨头身影--阿里巴巴首次亮相戛纳国际创意节. 这个被誉为"广告界奥斯卡"的全球创意盛会,是全球五大广告节之一,正吸引越来越多的科技公司参与其中,而在一众极客当中,阿里巴巴凭借"创新"的标签显得更加引人注目--它不仅是戛纳国际创意节重要版块创新会场的Highlight Sponsor,同时也以创新为主题申报了多个奖项,而其提出来的创新营销方法论UniMarketing也在现场深受广告代理商们的

阿里亮相网络安全周 大数据共建生态安全

"钱盾"APP为用户提供赔付额高达120万的防欺诈险,"阿里聚安全"覆盖客户终端数高达8亿,"御城河"每天帮助服务商分析1.8亿次核心数据访问行为并拦截风险,阿里云保护着中国境内35%的网站,互联网安全志愿者联盟10年间实现15亿次举报--9月19日,阿里巴巴集团亮相2016国家网络安全宣传周,首次向外界全面展示其作为亚洲市值领先互联网公司在安全领域的强大防护能力和布局. "网络安全是现代商业发展的基础设施,要真正解决安全问题,核心要靠

【阿里云资讯】博览安全 放眼云上:阿里云亮相国家网络安全宣传周

9月19日-9月25日,由中央网信办.教育部.工信部.公安部.新闻出版广电总局.共青团中央等六部门举办的第三届国家网络安全宣传周在武汉召开.阿里巴巴集团亮相2016国家网络安全宣传周,从交易安全.资金保护.企业安全.生态安全和云安全五个维度,首次向外界展示其在安全领域的能力.战略.布局.p; 能力 + 责任 让安全成为全民红利 "网络安全为人民,网络安全靠人民"为本届网络安全宣传周的主题.如今,安全走进了每个人的衣食住行,也关系着国家的稳定和平.它已不仅仅是一个行业或技术,也代表着&q

“无人超市”热潮 主要依靠网络技术

以往在人类幻想的未来世界中,人工智能(AI)科技经常出现,例如智能机器人.无人驾驶的交通工具等融入生活之中,而无人管理的商店则已经在真实世界里出现.近年随着网络和人工智能的发展,企业开始计划利用虚拟智能助理(Virtual Personal Assistant).负责管理仓库的机器人等,取代操作简单.重复工序的人力资源,从而降低运营成本.近来,随着"无人超市"概念的兴起,无论是来自西方的Amazon Go;还是马云开设的"淘咖啡"都在往这个方向发展,尝试以无人管理的

下一代高性能数据库标杆POLARDB 亮相顶会VLDB2017

8月28日-9月1日,第四十三届VLDB会议在德国慕尼黑举行.阿里巴巴在本届VLDB展区重点展示了ApsaraDB.AliSQL.AnalyticDB和MaxCompute等数据库和数据处理技术,特别是基于硬件条件极致优化的下一代数据库产品POLARDB,引起现场与行业专家学者的注意和交流探讨. VLDB,全称InternationalConference on Very Large Databases,是数据库领域三大顶级国际会议之一,是由成立于美国的非盈利性机构VLDB基金会赞助和运营.第一

MaxCompute 2.0:阿里巴巴的大数据进化之路

本次分享将主要围绕以下三个方面: 阿里云大数据计算服务概述 阿里巴巴数据平台进化之路 MaxCompute 2.0 Moving forward    一.阿里云大数据计算服务概述 阿里巴巴大数据计算服务MaxCompute的前身叫做ODPS,是阿里巴巴内部统一的大数据平台,其实从ODPS到MaxCompute的转变就是整个阿里巴巴大数据平台的演化过程.所以在本次会着重分享阿里巴巴大数据在过去七八年的时间所走过的路以及后续技术发展大方向.   首先做一个基本的定位,大家可以看到下面这张图是一个航