Linux下搭建MySQL集群

一、MySQL集群简介

1、什么是MySQL集群

MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案,其目的是提供容错性和高性能。

数据更新使用读已提交隔离级别(read-committedisolation)来保证所有节点数据的一致性,使用两阶段提交机制(two-phasedcommit)保证所有节点都有相同的数据(如果任何一个写操作失败,则更新失败)。

无共享的对等节点使得某台服务器上的更新操作在其他服务器上立即可见。传播更新使用一种复杂的通信机制,这一机制专用来提供跨网络的高吞吐量。

通过多个MySQL服务器分配负载,从而最大程序地达到高性能,通过在不同位置存储数据保证高可用性和冗余。

2、名称概念

MySQL集群有如下三层:

应用程序层:负责与mysql服务器通信的各种应用程序。

Mysql服务器层:处理SQL命令,并与NDB存储引擎通信和Mysql服务器。

NDB集群组件层:NDB集群组件有时也称数据节点,负责处理查询,然后将结果返回给mysql服务器。

其中MySQL数据库集群主要包括如下三部分:

1) SQL节点(SQL node - 下图对应为 mysqld):分布式数据库。包括自身数据和查询中心结点数据

2) 数据节点(Data node - ndbd):集群共享数据(内存中)

3) 管理服务器(Management Server - ndb_mgmd):管理集群 SQL node,Data node

拓扑结构图如下所示:

二、环境说明

1、系统环境

服务器 角色 说明
192.168.3.115 管理服务器 系统:centos 6.2 64位
192.168.3.116 数据节点、SQL节点 系统:centos 6.2 64位
92.168.3.117 数据节点、SQL节点 系统:centos 6.2 64位

注:主要是为了学习MySQL集群的环境搭建,加上资源有限,故将数据节点和SQL节点安装在一起。

2、软件环境

MySQL集群版本:

mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

注:依据系统,在MySQL官网自行下载。

三、搭建集群(Linux环境)

1、安装集群版本

a、准备工作

不管是Management Server,还是Data node、SQL node,都需要先安装MySQL集群版本,然后根据不用的配置来决定当前服务器有哪几个角色。

安装之前准备好mysql用户和mysql用户组,

相关命令:

groupadd mysql
useradd mysql -g mysql

为了方便测试,确定相关机器的防火墙已关闭(或者设置防火墙这几台机器之间的网络连接是畅通无阻的),

相关命令:

chkconfig iptables off
service iptables stop

b、安装集群版本

1.上传安装包至/usr/local目录下,并解压

tar -zxvf mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

2.重命名文件夹

mv mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64 mysql

3.授权

chown -R mysql:mysql mysql

4.切换mysql用户

su - mysql

5.安装MySQL

cd /usr/local/mysql
scripts/mysql_install_db --user=mysql --datadir=/usr/local/mysql/data

注:所有服务器上都需要执行上述操作来安装MySQL集群版本。

2、集群配置

a、管理节点

1.root用户下,创建目录和配置文件

mkdir /var/lib/mysql-cluster
cd /var/lib/mysql-cluster
vim config.ini

config.ini配置信息如下:

[NDBD DEFAULT]
NoOfReplicas=2

[NDB_MGMD]
#设置管理节点服务器
nodeid=1
HostName=192.168.3.115
DataDir=/var/lib/mysql-cluster

[NDBD]
id=2
HostName=192.168.3.116
DataDir=/usr/local/mysql/data

[NDBD]
id=3
HostName=192.168.3.117
DataDir=/usr/local/mysql/data

[MYSQLD]
id=4
HostName=192.168.3.116
[MYSQLD]
id=5
HostName=192.168.3.117

#必须有空的mysqld节点,不然数据节点断开后启动有报错
[MYSQLD]
id=6
[mysqld]
id=7

2.授权

chown -R mysql:mysql /var/lib/mysql-cluster

3.切换用户

su - mysql

4.启动管理服务

/usr/local/mysql/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial

注:命令行中的ndb_mgmd是mysql cluster的管理服务器,后面的-f表示后面的参数是启动的参数配置文件。

如果在启动后过了几天又添加了一个数据节点,这时修改了配置文件启动时就必须加上--initial参数,不然添加的节点不会作用在mysql cluster中。

b、数据节点

1.编辑/etc/my.cnf文件

# vim /etc/my.cnf
[mysqld]
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql

ndbcluster
ndb-connectstring=192.168.3.115

[mysql_cluster]
ndb-connectstring=192.168.3.115

2.切换用户

su - mysql

3.启动数据节点服务

/usr/local/mysql/bin/ndbd --initial

注:第一次启动需要加参数:–initial,以后就不用加了,直接运行: /usr/local/mysql/bin/ndbd

c、SQL节点

1.编辑/etc/my.cnf文件(数据节点和SQL节点在统一服务器时可省略)

# vim /etc/my.cnf
[mysqld]
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql

ndbcluster
ndb-connectstring=192.168.3.115

[mysql_cluster]
ndb-connectstring=192.168.3.115

2.复制mysqld到系统服务里面去

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld

3.切换用户

su - mysql

4.启动数据节点服务

service mysqld start
/usr/local/mysql/bin/mysqladmin -u root password 'password'

d、完成效果

ndb_mgm> show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2    @192.168.3.116  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0, *)
id=3    @192.168.3.117  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0)

[ndb_mgmd(MGM)] 1 node(s)
id=1    @192.168.3.115  (mysql-5.6.19 ndb-7.3.6)

[mysqld(API)]   4 node(s)
id=4    @192.168.3.116  (mysql-5.6.19 ndb-7.3.6)
id=5    @192.168.3.117  (mysql-5.6.19 ndb-7.3.6)
id=6 (not connected, accepting connect from any host)
id=7 (not connected, accepting connect from any host)

四、常用命令与问题整理

1) ndb_mgmd管理命令:/usr/local/mysql/bin/ndb_mgm 执行之后就是管理控制台了,里面可以继续输入命令。(具体命令可以使用help查看)

2) 停止集群服务器的命令:/usr/local/mysql/bin/ndb_mgm -e shutdown

 如果集群配置有更新了:rm /usr/local/mysql/mysql-cluster/ndb_1_config.bin.1

3) 停止SQL节点的命令:/usr/local/mysql/bin/mysqladmin -uroot shutdown

4)使用需要注意如下两点:

        a.表必须用ENGINE=NDB或ENGINE=NDBCLUSTER选项创建,或用ALTER TABLE选项更改,以使用NDB Cluster存储引擎在 Cluster内复制它们。如果使用mysqldump的输出从已有数据库导入表,可在文本编辑器中打开SQL脚本,并将该选项添加到任何表创建语句,或 用这类选项之一替换任何已有的ENGINE(或TYPE)选项。

        b.另外还请记住,每个NDB表必须有一个主键。如果在创建表时用户未定义主键,NDB Cluster存储引擎将自动生成隐含的主键。(注释:该隐含 键也将占用空间,就像任何其他的表索引一样。由于没有足够的内存来容纳这些自动创建的键,出现问题并不罕见)。

    其他操作上没有什么区别!
时间: 2024-12-22 15:50:23

Linux下搭建MySQL集群的相关文章

Linux上搭建mysql集群,window进行远程

问题描述 Linux上搭建mysql集群,window进行远程 我想在window上远程Linux的mysql,Linux上的mysql是分布式mysql集群. 希望有经验的大牛能个指引.Linux上的mysql集群如何搭建?搭建完成后,window怎么远程? 解决方案 window下的mysql集群搭建Linux下MySQL/MariaDB Galera集群搭建过程

Linux下搭建tomcat集群全记录(转)

本文将讲述如何在Linux下搭建tomcat集群,以及搭建过程中可能的遇到的问题和解决方法.为简单起见,本文演示搭建的集群只有两个tomact节点外加一个apache组成,三者将安装在同一机器上:apache: 安装路径:/usr/local/apache2端口:90tomcat1:安装路径:/usr/local/apache-tomcat-6.0.33-1端口:6080tomcat2:安装路径:/usr/local/apache-tomcat-6.0.33-2端口:7080 2.所需要软件列表

Linux服务器下搭建hadoop集群环境 redhat5/Ubuntu 12.04

Ubuntu 12.04 下搭建 hadoop 集群环境步骤 一. 搭建环境前的准备: 我的本机Ubuntu 12.04 32bit作为maser,就是上篇hadoop单机版环境搭建时用的那台机子,http://www.linuxidc.com/Linux/2013-01/78112.htm 还在KVM中虚拟了4台机子,分别起名为: son-1        (ubuntu 12.04 32bit),son-2        (ubuntu 12.04 32bit),son-3        (

Windows Server 2003 下配置 MySQL 集群(Cluster)教程

  这篇文章主要介绍了Windows Server 2003 下配置 MySQL 集群(Cluster)教程,本文先是讲解了原理知识,然后给出详细配置步骤和操作方法,需要的朋友可以参考下 MySQL 群集是 MySQL 适合于分布式计算环境的高可用.高冗余版本.它采用了 NDB Cluster 存储引擎,允许在 1 个群集中运行多个 MySQL 服务器.在 MySQL 5.0 及以上的二进制版本中,以及与最新的 Linux 版本兼容的 RPM 包中提供了该存储引擎. MySQL 群集是一种技术,

amoeba搭建mysql集群时数据更新时出现这个错误

问题描述 amoeba搭建mysql集群时数据更新时出现这个错误 Fatal error: Uncaught exception 'Zend_Db_Table_Row_Exception' with message 'Cannot refresh row as parent is missing' in lib/Zend/Db/Table/Row/Abstract.php(2) : eval()'d code(1) : eval()'d code(1) : eval()'d code:319 解

windows7下搭建hadoop集群环境

问题描述 有人会在win7下搭建hadoop集群环境吗?我急需要搭建,有会的帮帮忙吧,我整了两天了没弄出来,着急死了!cygwin安装完运行sshlocalhost出现这种错误,是怎么回事啊? 解决方案 解决方案二:我是真心不会,帮顶吧,有份资料可以参考下,去搜"王家林hadoop".解决方案三:楼上的问题解决了吗?我跟你遇到了完全相同的问题~跪求答案

cygwin在win7下搭建hadoop集群环境

问题描述 江湖救急!!有人会在win7下搭建hadoop集群环境吗?我急需要搭建!cygwin安装完运行sshlocalhost出错!

【Oracle 集群】Linux下Oracle RAC集群搭建之Oracle DataBase安装(八)

Oracle 11G RAC数据库安装(八) 数据库安装 继oracle集群安装之后,接下来也是最重要的数据库安装,整个数据库安装难度不大,用户以oracle用户身份登录RAC1主节点,对解压后的文件安装.主节点下安装后,其他所有结点自动安装,采用的原理机制就是ssh通信机制,所以前期ssh配置,各节点自动通信很重要.好在11G之后可以自动完成ssh配置,不用纯脚本,只需要按照步骤配置即可.接下来看下整体数据库群架构图.针对linux环境下搭建oracle数据库,本文也适用.针对数据库管理参见下

Windows Server 2003 下配置 MySQL 集群(Cluster)教程_Mysql

MySQL 群集是 MySQL 适合于分布式计算环境的高可用.高冗余版本.它采用了 NDB Cluster 存储引擎,允许在 1 个群集中运行多个 MySQL 服务器.在 MySQL 5.0 及以上的二进制版本中,以及与最新的 Linux 版本兼容的 RPM 包中提供了该存储引擎. MySQL 群集是一种技术,该技术允许在无共享的系统中部署"内存中"和"磁盘中"数据库的 Cluster .通过无共享体系结构,系统能够使用廉价的硬件,而且对软硬件无特殊要求.此外,由于