10月27日,2017中国计算机大会(CNCC2017) 技术论坛“下一代数据中心存储技术与系统”在福州举行。围绕论坛主题,众多学术界顶尖学者与企业界重磅嘉宾现场对新型存储器件、多核服务器、高速网络等新硬件的发展以及下一代数据中心的存储技术和系统所面临的机遇与挑战进行了深度研讨。
众所周知,存储基础架构与系统技术是大数据与云计算数据中心的重要基石。围绕“下一代数据中心存储技术与系统”,在本届论坛主席中科院计算所副研究员蒋德钧、阿里巴巴资深专家朱家稷的组织下,多位学术界和工业界的学者专家结合国内外最新研究成果和技术,针对实际数据中心运行的存储生产系统,以及国际上关注的数据中心存储系统的前沿问题,进行了多场专题报告和演讲,内容包括面向新型存储介质的数据中心存储系统,基于高速固态盘的存储技术与标准发展,下一代数据中心分布式存储系统发展趋势与挑战,高能效数据中心存储,去重与编码技术,大规模数据中心存储系统演进与QoS保证等多个热门议题,现场气氛十分热烈,百余位参会者挤满了论坛现场。
国防科技大学高性能计算国家重点实验室常务副主任肖侬教授首先带来了《新型数据中心存储技术》的精彩演讲,在他看来,以NVRAM为代表的新型存储介质技术迅猛发展,为缓解计算机系统中的越来越严重的I/O挑战性问题提供了一个有效的途径,这类新型存储介质将给未来存储技术带来更多的挑战和机遇。
阿里巴巴高级总监、阿里云存储的产品和研发负责人吴结生,以《Inside Alibaba Cloud: Lessons, Challenges and Opportunities in Cloud Storage》为主题在现场进行了演讲。“当前阿里云是全球增速最快的云计算,营收连续多个季度保持快速增长,为中国市场第一,全球14个区域建立了数十个数据中心,并有着丰富多样的产品与服务”,支撑如此快速增长而庞大的云计算背后离不开一个超大规模的存储系统,而打造这样的一个存储系统面临着一系列的挑战,稳定、安全、容量、成本和性能等问题都是制约超大规模存储系统发展的重要瓶颈,吴结生结合存储软硬件系统的演进和技术趋势的发展,介绍了阿里云存储技术的特点以及阿里巴巴存储基础设施——为云存储提供了强一致、高可用和高性能存储的盘古分布式文件系统,并根据多年的研发经历和服务于数百万客户的经验为现场听众分享了其中的设计选择和经验教训,同时也描述了云计算在向下一波浪潮推进过程中阿里云存储所面临的机遇和挑战。
吴结生表示,阿里云有着所有云计算厂商中最齐全的存储产品线,对象存储OSS、块存储 Block Storage、共享块存储、共享文件存储NAS(支持NFS和SMB/CIFS协议)、表格存储、归档存储、日志存储以及混合云存储系列。产品和服务广泛应用于数据密集型的应用,数据库,大数据分析,图片社交,短视频,直播风控,手机相册,视频监控,生命科学,医疗影像,日志分析等各行各业,在企业文件分享以及企业容灾备份多个细分行业有成熟的案例和解决方案,在中国的数字商业领域发挥了重要作用。
目前,阿里云在中国,美国,新加坡,德国,香港,澳大利亚,日本,阿联酋等地都开放了云存储服务,并且不少地方拥有多个数据中心。对于企业级市场来说,存储的需求永远是无止境的,尤其是在如今的数据量爆发的时代。“大容量、低成本、安全可靠、易操作、便管理的存储服务是每一个企业所渴望的”,吴结生说,未来,阿里云存储作为阿里云公有云核心系统来为阿里巴巴输出数据能力,在全球范围内提供广泛的服务,为企业存储无法计算的价值。
对于广受关注的阿里云“高性能分布式存储系统盘古2.0”,阿里云飞天事业部盘古团队资深架构师黄东平进行了专题解读,较为详细地介绍了阿里云存储系统的核心——盘古的技术和演进。盘古系统是阿里巴巴的统一存储平台,支撑了阿里云的全系列存储产品线(如块存储云盘、对象存储、文件存储和表格存储等)、大规模数据处理、数据库等各种复杂场景,并且针对离线和在线等不同场景做了精细的优化。
面对近年来机器学习、大数据、分布式数据库等业务场景,黄东平认为,这对分布式存储提出了更高要求。“为了迎接机遇更是挑战,阿里云盘古团队目前已经开启了盘古2.0的征程。”
华中科技大学华宇教授报在《物端感知的高效能数据存储系统》的演讲中,全面分析了当前数据中心所关联的物端系统在传输带宽受限、动态效能约束和存储器件异构等条件下,支持可靠、可扩展和高效能存储服务的有效机制。香港中文大学教授李柏晴(Patrick P. C. Lee)认为,数据中心级存储系统越来越多地采用纠删码以减少传统三副本带来的存储开销,然而在采用纠删码的数据中心级存储系统中如何保持高性能是一个挑战。“这是一种在采用纠删码的存储系统中加快修复性能的通用技术,它可以通过线性链对修复操作进行切片,从而将修复时间减少到与正常读取时间大致相同的时间”, 李柏晴还介绍了在数据中心体系结构中无缝地适配纠删码的研究结果,并特别介绍了修复流水线技术。
“高速固态盘已经在数据中心中广泛部署,当前的NVMe SSD封闭的FTL设计使得SSD面临后台GC干扰,长尾延迟,以及性能不可预测等问题。”中科院计算所副研究员蒋德钧在《下一代数据中心开放SSD技术与挑战》演讲中指出,近年来,开放SSD内部给上层应用逐渐成为一种设计趋势。从数据中心存储系统软件需求出发,蒋德钧介绍了开放SSD设计的要点和关键因素,重点探讨了开放SSD的软硬件划分与QoS保证。
爱奇艺副总裁、基础架构负责人刘文峰围绕《爱奇艺智能存储应用之路》,SATRBLAZE SSD 固件设计架构师汤峰围绕《固态硬盘(SSD)技术在数据中心中的优化和应用》等主题先后进行了精彩演讲。
现场干货满满的演讲内容和技术分享,引发了听众和媒体的热议。多位听众表示,人工智能、大数据、云计算技术的快速发展,也促进存储技术也日新月异,本次论坛不但介绍了行业最新的技术和实践,也着眼未来带来了很多启发,非常期待未来中国在智能存储领域带来更多的突破和发展。