分析师解读内存数据库MemSQL

本周数据库业界探讨最火热的话题就是MemSQL,究竟是不是“旧瓶装新酒”引 发了诸多的辩论,同时也引发了究竟是产品技术重要还是DBA重要的疑问。网络中 有一些关于MemSQL的介绍,基本上都是来自官方文档。在本文中,数据库行业的 著名独立分析师Curt Monash也发表了他对MemSQL的看法。

MemSQL到底是 什么?

内存关系型数据库

目前只发布了单机版,透明分片以及基本复制特性正在开发,预计今年秋天发 布

SQL-92的子集

兼容MySQL(SQL覆盖问题除外)

MemSQL的性能

读性能比memcached差10%左右

写性能比memcached强20%左右

一台64核、1/2 TB的机器上能跑到120万条插入每秒

同样条件下,20分钟之内能加载5亿条记录

MemSQL的公司情况

一共有15名员工

部分客户已将MemSQL投入生产环境

目前GA两个版本,免费版限制10 GB RAM,企业版无限制,按照数据库大小收 费

关于MemSQL的讨论主要集中在性能方面,包括:

数据通过哈希表和跳转表(skip lists)进行组织。MemSQL认为跳转表在多核 上的扩展性非常好

查询模式可以编译成C++

MVCC/无读锁

轻量级写锁

可调整持久性,你可以fully durable的跑MemSQL,也可以设一个buffer size 来限定可承受的交易数据量

其实将查询进行预编译很难说是一个创新,也不是业内的独一份。此前包括 QlikTech、StreamBase以及ParAccel都做过类似的尝试。而MemSQL的特色在于:

编译成只要你想读就可以读的C++

参数化,如果一个查询中包括一系列的参数,那么它会存储起来以备将来运行 更多其它参数

持久性,如果服务器宕机,存储的编译查询不会丢失

每个查询只占几KB的空间,在早期MemSQL的客户中,他们最多存储不会超过几 千个查询模式。因此MemSQL对于编译这些查询会造成的影响还是表示非常乐观的 ,而使用LRU算法来释放空间的方式可能不会去考虑。

MemSQL的持久性使 用预写入日志到一个磁盘(传统或固态硬盘),同时发送快照到其他磁盘的方式 。持久性的设计是连续的,但是在full-durability场景中是否也是就不清楚了。

其他一些值得注意的技术细节包括:

MemSQL可以运行在多温度环境下,通过DDL手动控制。也就是说,较新的数据 会放到MemSQL中,旧数据放入到MySQL中

有一点我认为是最佳实践,MemSQL团队也秉承了这一理念,就是在两个或者多 个服务器RAM中得到确认后,要第一时间提交写入

并行Group By,这个MemSQL的团队引以为豪

MemSQL不进行数据压缩,他们认为OLAP负载中才需要数据压缩

MemSQL的插入性能非常高,所以它们的目标客户群是那些存在频繁交易的系统 用户

时间: 2024-12-31 04:48:27

分析师解读内存数据库MemSQL的相关文章

内存数据库MemSQL获3600万美元C轮融资

兼具 SQL 与 NoSQL 数据技术特点的内存数据库 MemSQL 刚刚在 C 轮融资中获得了 3600 万美元. MemSQL 是一家从事数据库平台开发的初创企业,由前 Facebook 员工 EricFrenkiel 与 Nikita Shamgunov 成立于 2012年(孵化于 YC).MemSQL 是一种分布式内存数据库,可提供对大数据的实时分析功能,能同时支持 SQL 与 JSON 非结构化数据,像 Apache Spark,.Kafka 一样,MemSQL 也支持大数据的实时分析

分析师解读:电商零售企业集体“更名”现象

一.事件概述:3月30日,京东商城将域名由www.360buy.com更换为www.jd.com,官方名称由"京东商城"缩减为"京东",还正式推出了公司的吉祥物--一只名为"Joy"的狗.同日,易迅也宣布计划5月份将更换域名.一年前,淘宝商城改名为"天猫",在业界引起不小议论.近期,传统零售商也纷纷改名,大多原因是为了调整架构,拓展销售范围,如银泰百货集团更名为银泰商业集团,苏宁电器改名为苏宁云商.二.相关数据:据中国电子商务

网易研究院汪源:MySQL或成为最大黑马

文章讲的是网易研究院汪源:MySQL或成为最大黑马,第五届中国数据库技术大会将于2014年4月10日-12日在北京五洲皇冠国际酒店举行,本届大会的一大亮点就是专家顾问团.所谓专家顾问团,是由10位资深数据技术专家组成的智囊团,帮助组委会把握大会技术方向.演讲主题,推荐及审核演讲嘉宾. 在一年一度的中国数据库技术大会召开前夕,记者有幸采访到本届大会专家顾问团的成员--网易杭州研究院副院长汪源,分享了他对数据库市场及技术趋势的观点,以及对数据库大会的期待和祝福. 他表示,作为业界最重要的数据库技术会

中国移动互联网趋势报告(2015Q1)

综合友盟平台覆盖的 10.3 亿活跃设备数据,友盟数据分析师解读了当下TOP10 设备品牌变化.平台份额变化及各细分类别 App 增速,并对金融理财.车联网等热门垂直领域的用户画像进行了分析. 来看下季报中有哪些值得关注的数据点- 移动互联网行业趋势 国内活跃设备量增幅放缓 2015 年第一季度,国内活跃设备数量已经达到了 10.3 亿,与第四季度相比增长 4% ,增幅有所放缓.移动互联网的"人口红利"将逐渐消失:产品和技术革新.商业模式重构带来的增长,是开发者要追求的目标. 年度 A

大数据与机器学习 2016年中盘点

本文将分以下几个部分进行盘点. 一.里程碑事件 二.开源项目(国际篇) 三.业界动态(国际篇) 四.开源项目(国内篇) 五.业界动态(国内篇) 六.下半年展望 七.周报集锦 里程碑事件 Hadoop 10岁了! Hadoop诞生10年了.2006年1月28日,Doug Cutting和Mike Cafarella从他们的开源网络爬虫项目(Apache Nutch)中分离出分布式文件系统以及MapReduce设施,把它当作一个子项目,并称其为Hadoop.Doug Cutting发表了 Apach

没有全面屏的小手机厂商,怎么活?

虽然对于全面屏的认定在业内还有诸多争议,但不可否认的是,全面屏热潮已经全面袭来.哪怕现在所有的全面屏手机都名不副实,有刘海.有额头.有下巴--但最起码全面屏这一概念已经深入人心,是未来发展方向.而在智能手机厂商纷纷向全面屏扎堆,消费者也对全面屏手机翘首以待的时候,其实整个行业已经出现了重大变化--手机行业核心竞争标准急剧提升. 原本手机行业的准入门槛和竞争标准还算是比较低,只要有一定资金,从机身到芯片,从设计到系统,统统都能解决.但全面屏的出现,却将门槛和标准提升了N个难度.这一变化的影响可能超

白宫加强反垄断或拿谷歌开刀

□刘鹏 新华社供本报特稿 美国司法部负责反垄断事务的助理司法部长克里斯蒂娜·瓦尼11日说,本届美国政府打算撤销由乔治·W·布什政府制定的反垄断规则,将加大反垄断力度. 过去10年反垄断监管欠缺 瓦尼当天向美国智囊团"美国进步研究中心"演讲时作出这一表述.她说,美国经济时下暴露出的一些问题缘于过去10年间反垄断监管欠缺. 按瓦尼的说法,在前总统乔治·W·布什任内,司法部反垄断部门"未像应有的那样活跃". 布什政府去年9月出台一些反垄断相关法律方针.根据这些方针,反垄断

畅游高管解读财报要点并回答分析师提问

网易科技讯 7月28日消息,畅游(Nasdaq:CYOU)今日公布今天公布了截至2014年06月30日未经审计的第二季度财报.数据显示,畅游第二季度总营收1.778亿美元,环比下降2%,同比下降3%:净利润为190万美元,环比扭亏,同比缩减97.5%. 财报发布后,畅游CEO王滔.总裁陈德文.代理CFO任汝娴.COO洪晓健及首席信息官潘文娟等公司管理层随后召开电话会议,解读财报要点并回答分析师提问. 美国银行-美林分析师梁伟亮:下半年有一些新游戏要推出,推广费用预期增加多少?截至第二季度末,畅游

财报发布后,解读了财报要点,并回答了分析师提问

腾讯控股有限公司(700.hk)今天公布了未经审核的第二季度及上半年综合业绩.财报显示,腾讯第二季度总收入为人民币105.272亿元(约合16.644亿美元),比上一季度增长9.1%,比去年同期增长56.2%:腾讯上半年总收入为人民币201.751亿元(约合31.898亿美元),比去年同期增长54.3%. 财报发布后,腾讯CEO马化腾.总裁刘炽平.首席财务官罗硕瀚.首席战略官詹姆斯·米歇尔(James Mitchell)出席了电话会议,解读了财报要点,并回答了分析师提问. 以下为电话会议问答部分