TDH_Socket与HandlerSocket和MySQL的特性优缺点对比

TDH_SOCKET

HandlerSocket

SQL

IO策略

Dynamic IOStrategy

Same-thread IOStrategy

one-thread-per-connection

优点 worker线程只处理与DB相关的逻辑最大化DB的操作吞吐量 上下文切换真心很少 资源分离 不太会相互干扰
缺点 上下文切换一般,测试时最高在10w,但可以接受 IO逻辑对DB逻辑影响较大一旦io处理的慢了,会导致QPS下降很多(比如说较多的连接数并发请求导致io处理变慢也会是整体QPS下降) 线程资源浪费严重,太多的线程会导致高并发是上下文切换多,从而影响性能,测试时最高60w
读策略

1. 无需SQL解析
2. 可在THD上cache open过的table(可配置关闭)
3. 一次轮询只lock一次table
4. 请求按table的hash值平均分配到可活动的线程上
5. 如果有table被过多访问,那么此table的请求可被分配到多个线程上
6. 在带io请求少时,可以用较少的线程work.来减少锁征用导致的上下文切换
7. 有一定量带io请求时,能调整worker线程数来充分利用io资源.
8. 当带io请求巨多时,将区分带io的请求和不带io的请求.分别用两个线程池来执行,防止带io的请求堵住不带io的请求.
9. 还可以设置流控带io的请求数来防止client的堵塞情况,能使DB继续输出较高的QPS
10. 如果返回大批量数据可以以stream的方式返回,避免过多占用内存

1. 无需SQL解析
2. 可在THD上cache open过的table(不可配置关闭)
3. 一次轮询只lock一次table
4. worker线程数固定,且无法做请求数的平衡,只能做连接数的平衡

1. 可global的做table的cache
2. 每次请求都lock一次table

优点 多种策略配合能一直输出较高的QPS 在全缓存的请求下,输出的QPS很高 由于是一个连接一个请求,不会出现由带io的请求堵塞不带io的请求的情况出现
缺点 流控会丢失一部分请求,预测请求带不带io不是非常准确(如果使用row cache就能较精确的预测了) 一旦有带io的请求出现,就很容易堵塞住不带io的请求出现,所以缓存命中率下降后QPS下降的非常厉害返回大批量数据会占用过多内存 有极限一般QPS最高输出到6-7w
写策略 1. 一次轮询的请求一次commit
2. 请求按table的hash值平均分配到写线程上,即同一个表肯定在一个写线程的被执行,不会有死锁的问题,也不会有同一条row的锁问题.
3. 支持Batch方式的小事务,Batch内的请求保证同时成功,同时失败
4. 可以在Client端通过指定hash的方式,来控制请求被指定的线程执行,来避免一些锁或死锁

1. 一次轮询的请求一次commit
2. 可配置多个写线程,但是有一个user_lock保证只有一个写线程在工作,来防止死锁

1. 一次请求一次commit
优点 同一个表必然在同一个线程上执行,所以行锁的征用被降到最低,加上group commit就能提供很搞的TPS可以多个写线程并发写,不会有死锁问题支持batch小事务 Group commit可以减少fsync次数,提高写性能

支持大事务
缺点 写线程数有限,在有io堵塞请求下,性能会有下降 同一时刻只有一个写线程能被执行,很容易达到瓶颈,一旦有多表插入并发出现,很容易影响整体更新性能生成binlog没有执行时间(bug)

多表insert会有自增id获取失败的问题(bug)

性能受限于IOPS
可维护性

1. DDL操作不会被hang住(因为可以主动close 被cache的table)

1. 支持KILL 命令直接终止正在执行的操作

1. 大部分参数都为在线可配置

1. status数据监控完善

1. DDL会被hang住,因为handlersocket只open table不管主动close table,只有在流量较小time out时才会close table 最高
易用性

1. client端不需要openIndex,直接请求即可(如:

client.query().use(“test”).select(“id”, “a”, “b”, “c”).from(“t”)

.where().fields(“a”).in([“1”, “1”], [“2”], [“1”]).get())

1. server端只需要一个port 就能做读写分离
2. 可支持一些MySQL的内置函数

1. 现在支持Update/Insert的时候可以插入now()

1. 基于辅助索引的联合主键可以支持简单的order by

1. 只能支持=的order by
5. Java客户端支持JDBC

* 1. 读写分离需要在server端配置两个port是实现
2. client请求前需要先openIndex

最高

本文来源于"阿里中间件团队播客",原文发表时间" 2012-05-16 "

时间: 2024-09-28 21:41:51

TDH_Socket与HandlerSocket和MySQL的特性优缺点对比的相关文章

mysql事务特性实现并发安全的自增ID示例

 项目中经常会用到自增id,比如uid,下面为大家介绍下利用mysql事务特性实现并发安全的自增ID,感兴趣的朋友可以参考下 项目中经常会用到自增id,比如uid,最简单的方法就是用直接用数据库提供的AUTO_INCREMENT,但是如果用户量非常大,几千万,几亿然后需要分表存储的时候呢,这种方案就搞不定了,所以最好有一个全局的自增ID的生成器,不管是否分表,都能从生成器中获取到全局自增的ID.    实现方法应该有很多,不过所有的方案都需要解决一个问题,就是保证在高并发的情景下,数据获取依然正

MySQL · 引擎特性 · InnoDB 崩溃恢复过程

在前面两篇文章中,我们详细介绍了 InnoDB redo log 和 undo log 的相关知识,本文将介绍 InnoDB 在崩溃恢复时的主要流程. 本文代码分析基于 MySQL 5.7.7-RC 版本,函数入口为 innobase_start_or_create_for_mysql,这是一个非常冗长的函数,本文只涉及和崩溃恢复相关的代码. 在阅读本文前,强烈建议翻阅下面两篇文章: 1. MySQL · 引擎特性 · InnoDB undo log 漫游 2. MySQL · 引擎特性 · I

MySQL · 引擎特性 · InnoDB 文件系统之文件物理结构

综述 从上层的角度来看,InnoDB层的文件,除了redo日志外,基本上具有相当统一的结构,都是固定block大小,普遍使用的btree结构来管理数据.只是针对不同的block的应用场景会分配不同的页类型.通常默认情况下,每个block的大小为 UNIV_PAGE_SIZE,在不做任何配置时值为16kb,你还可以选择在安装实例时指定一个块的block大小.对于压缩表,可以在建表时指定block size,但在内存中表现的解压页依旧为统一的页大小. 从物理文件的分类来看,有日志文件.主系统表空间文

MySQL · 引擎特性 · InnoDB文件系统管理

综述 从上层的角度来看,InnoDB层的文件,除了redo日志外,基本上具有相当统一的结构,都是固定block大小,普遍使用的btree结构来管理数据.只是针对不同的block的应用场景会分配不同的页类型.通常默认情况下,每个block的大小为UNIV_PAGE_SIZE,在不做任何配置时值为16kb,你还可以选择在安装实例时指定一个块的block大小. 对于压缩表,可以在建表时指定block size,但在内存中表现的解压页依旧为统一的页大小. 从物理文件的分类来看,有日志文件,主系统表空间文

MySQL · 引擎特性 · InnoDB 事务子系统介绍

前言 在前面几期关于 InnoDB Redo 和 Undo 实现的铺垫后,本节我们从上层的角度来阐述 InnoDB 的事务子系统是如何实现的,涉及的内容包括:InnoDB的事务相关模块.如何实现MVCC及ACID.如何进行事务的并发控制.事务系统如何进行管理等相关知识.本文的目的是让读者对事务系统有一个较全面的理解. 由于不同版本对事务系统都有改变,本文的所有分析基于当前GA的最新版本MySQL5.7.9,但也会在阐述的过程中,顺带描述之前版本的一些内容.本文也会介绍5.7版本对事务系统的一些优

JSON与XML优缺点对比分析_json

1. 定义介绍 1.1 XML定义 扩展标记语言 (Extensible Markup Language, XML) ,用于标记电子文件使其具有结构性的标记语言,可以用来标记数据.定义数据类型,是一种允许用户对自己的标记语言进行定义的源语言. XML使用DTD(document type definition)文档类型定义来组织数据;格式统一,跨平台和语言,早已成为业界公认的标准. XML是标准通用标记语言 (SGML) 的子集,非常适合 Web 传输.XML 提供统一的方法来描述和交换独立于应

《偏向锁,轻量级锁,重量级锁》优缺点对比

<偏向锁,轻量级锁,重量级锁>优缺点对比(Lock的优缺点对比) 锁 优点 缺点 适用场景 偏向锁 加锁和解锁不需要额外的消耗,和执行非同步方法相比仅存在纳秒级的差距 如果线程间存在锁竞争,会带来额外的锁撤销的消耗 适用于只有一个线程访问同步块场景 轻量级锁 竞争的线程不会阻塞,提高了程序的响应速度 如果始终得不到索竞争的线程,使用自旋会消耗CPU 追求响应速度,同步块执行速度非常快 重量级锁 线程竞争不使用自旋,不会消耗CPU 线程阻塞,响应时间缓慢 追求吞吐量,同步块执行速度较长

js创建对象几种方式的优缺点对比_javascript技巧

比较js中创建对象的几种方式 1.工厂模式 function createObj(name, sex){ var obj = new Object(); obj.name = name; obj.sex = sex; obj.sayName = function(){ alert(this.name); } return obj; } var person = createObj('Tom', 'man'); 缺点:①无法确定对象的类型(因为都是Object). ②创建的多个对象之间没有关联.

MySQL · 引擎特性 · 基于InnoDB的物理复制实现

最近有幸前去美国参加Percona Live 2016会议并分享了我们最近在MySQL复制上所做的工作,也就是基于InnoDB的物理复制.会后很多小伙伴私信我说分享的PPT太内核了,不太容易理解.因此本文主要针对分享的内容进行展开描述,希望能对大家有所帮助. 背景知识 在开始之前,你需要对InnoDB的事务系统有个基本的认识.如果您不了解,可以参考我之前的几篇关于InnoDB的文章,包括InnoDB的事务子系统,事务锁,redo log,undo log,以及崩溃恢复逻辑.在这里我们简单的概述一