MySQL-Cluster架构图文详解

Stan,2011/6/7

前言:

这是我第一次接触Linux,CentOS, MySQL,用了5天的时间终于将基于CentOS5.0系统下MySQL-Cluster架构成功,下面将我这些经验分享给大家。若发现有什么错误和疏忽之处,请发邮件给我:stan_home@qq.com。

(PDF图文版请下载,地址:http://download.csdn.net/source/3365704)

配置之前,先补充一些Linux常用命令:

ls 浏览

ls -l 查看文件夹及文件权限

vi 文本编辑器(搜索、编辑)

i 状态为修改

退出:“Esc”键后,然后输入":",然后输入“wq”写入、退出

:q! 强制退出

vim -f [文件名] 强制恢复文件

cp 拷贝文件命令

rm 删除文件

mkdir 创建文件夹

ln 连接问价或目录

man [命令] 查看命令参数

ifconfig 网卡信息命令

dig (域信息搜索器)

df 查看系统文件

vmstat 系统状态

ps 查看进程(-e显示全部,-f全格式输出)

ps -ef|grep mysql 查看所有mysql进程

Tips:输入一个文件或文件名,按一下Tab键,会自动完成改文件名(前提是这个文件或文件夹必须存在);

例如:

输入

[root@localhost tmp]# tar –xzvf mysql-c

按一下Tab键自动完成:

[root@localhost tmp]# tar –xzvf mysql-cluster-gpl-7.1.13-linux-i686-glibc23.tar.gz

下面,我们一起来架构吧!

一、配置环境:

OS:Linux CentOS 5.0

MySQL: mysql-cluster-gpl-7.1.13-linux-i686-glibc23.tar.gz (注意:需用Cluster版本,可在官网上下载http://dev.mysql.com/downloads/cluster /#downloads)

节点配置情况:

MGM:192.168.20.231

NDBD1:192.168.20.232

NDBD2:192.168.20.233

SQL1:192.168.20.234

SQL2:192.168.20.235

修改CentOS IP地址

(1)打开/etc/sysconfig/network-scripts/ifcfg-eth0文件,做如下修改

# Intel Corporation 82545EM Gigabit Ethernet Controller (Copper)

DEVICE=eth0

BOOTPROTO=static

ONBOOT=yes

HWADDR=00:0c:29:be:b3:53

IPADDR=192.168.20.231

NETMASK=255.255.255.0

GATEWAY=192.168.20.1

(2)修改/etc/resolv.conf文件, 如下(修改DNS服务)

nameserver 202.101.172.35

search localdomain

(3)重启网络服务

[root@localhost ~]# service network restart

二、软件安装:

(一)管理节点MGM

配置管理节点

首先在合适的位置,创建一个管理节点的配置文件,步骤如下:

[root@localhost ~]# mkdir /var/lib/mysql-cluster

[root@localhost ~]# cd /var/lib/mysql-cluster

[root@localhost mysql-cluster]# vi config.ini

配置文件config.ini内容如下:

[ndbd default]

NoOfReplicas=2

DataMemory=80M

IndexMemory=18M

[tcp default]

portnumber=2202

[ndb_mgmd]

hostname=192.168.20.231

datadir=/var/lib/mysql-cluster

[ndbd]

hostname=192.168.20.232

datadir=/usr/local/mysql/data

[ndbd]

hostname=192.168.20.233

datadir=/usr/local/mysql/data

[mysqld]

hostname=192.168.20.234

[mysqld]

hostname=192.168.20.235

安 装管理节点,不需要mysqld二进制文件,只需要MySQL Cluster服务端程序(ndb_mgmd)和监听客户端程序(ndb_mgm)。这两个文件都在下载的MySQL-cluster文件解压后的bin 文件夹中。执行如下步骤,在集群的管理节点上安装ndb_mgmd 和 ndb_mgm。

1、改变地址到/var/tmp目录下,解压MySQL-Cluster压缩文件,取出ndb_mgm和ndb_mgmd复制到/usr/local/bin 目录下。

[root@localhost ~]# cd /var/tmp

[root@localhost tmp]# tar –xzvf mysql-cluster-gpl-7.1.13-linux-i686-glibc23.tar.gz

[root@localhost tmp]# cd mysql-cluster-gpl-7.1.13-linux-i686-glibc23

[root@localhost tmp]# cp bin/ndb_mgm* /usr/local/bin

2、改变路径为拷贝到的目录下,并确保这两个文件可执行。

[root@localhost tmp]# cd /usr/local/bin

[root@localhost bin]# chmod +x ndb_mgm*

3、在/usr/local下创建mysql文件夹。

[root@localhost ~]# cd /usr/local

[root@localhost local]# mkdir mysql

(二)、数据节点NDBDSQL节点

配置数据节点NDBD和SQL节点

在每一个SQL节点中的/etc目录下找到my.cnf文件,并做如下配置:

[client]

socket=/usr/local/mysql/sock/mysql.sock

[mysqld]

ndbcluster

datadir=/usr/local/mysql

socket=/usr/local/mysql/sock/mysql.sock

ndb-connectstring=192.168.20.231

old_passwords=1

[mysql_cluster]

ndb-connectstring=192.168.20.231

在每一个数据节点NDBD和SQL节点的机器上,用root用户执行下面的步骤。

1、检查/etc/passwd 和 /etc/group 文件,是否存在mysql组和mysql用户,如果没有,用下面的命令创建一个mysql组,并在改组中添加mysql用户。

[root@localhost ~]# groupadd mysql

[root@localhost ~]# useradd –g mysql mysql

2、改变文件夹位置到mysql压缩包的存放位置,解压文件,准备安装,步骤如下:

(下载文件可以从其他电脑映射, 在/home/下面创建一个download文件夹,如果是在本机Linux下下载的文件,则不需要此映射步骤。)

[root@localhost ~]# mount -t cifs -o username="name",password="password" //192.168.20.210/MySQL /home/download

[root@localhost ~] cp /home/download/ mysql-cluster-gpl-7.1.13-linux-i686-glibc23.tar.gz /var/tmp

[root@localhost ~]# cd /var/tmp

[root@localhost tmp]# tar –C /usr/local –xzvf mysql-cluster-gpl-7.1.13-linux-i686-glibc23.tar.gz

3、改变位置到local文件夹,改变mysql解压后的文件夹名称为mysql,然后执行提供的脚本,创建系统数据库。

[root@localhost tmp]# cd /usr/local

[root@localhost local]# mv mysql-cluster-gpl-7.1.13-linux-i686-glibc23/ mysql/

[root@localhost local]# cd mysql

[root@localhost mysql]# mkdir sock

[root@localhost mysql]# scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql

4、为MySQL服务及数据目录设置必要的服务。

[root@localhost mysql]# chown -R root .

[root@localhost mysql]# chown -R mysql.mysql /usr/local/mysql/data

[root@localhost mysql]# chown -R mysql.mysql /usr/local/mysql/sock

[root@localhost mysql]# chgrp -R mysql .

[root@localhost mysql]# ls -l

5、复制MySQL的启动脚本到如下的文件夹,确保可以执行。并设置为当系统启动时,同时启动MySQL。

[root@localhost mysql]# cp support-files/mysql.server /etc/rc.d/init.d/

[root@localhost mysql]# chmod +x /etc/rc.d/init.d/mysql.server

[root@localhost mysql]# chkconfig --add mysql.server

三、Cluster环境启动

注意启动顺序:首先是管理节点,然后是NDBD节点,最后是SQL节点。

1[MGM]

[root@localhost ~]# ndb_mgmd -f /var/lib/mysql-cluster/config.ini

使用ndb_mgm来监听客户端,如下:

[root@localhost ~]# ndb_mgm

2[NDBD]

首次启动,则需要添加--initial参数,以便进行NDB节点的初始化工作。在以后的启动过程中,则是不能添加该参数的,否则ndbd程序会清除在之前建立的所有用于恢复的数据文件和日志文件。

[root@localhost ~]# /usr/local/mysql/bin/ndbd --initial

如果不是首次启动,则执行下面的命令。

[root@localhost ~]# /usr/local/mysql/bin/ndbd

3[SQLD]

/usr/local/mysql/bin/mysqld_safe --user=mysql &

有可能出现上图问题,是系统数据库创建问题,只需再次创建系统数据库,方法如下:

[root@localhost mysql]# scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql

再次启动

/usr/local/mysql/bin/mysqld_safe --user=mysql &

查看管理节点,启动成功:

四、测试

1、常规测试:

在节点4上面:

为了让表在cluster中正常复制,创建一个表必须使用ndbcluster引擎(engine=ndb Or engine=ndbcluster)方法如下:

mysql>use test

mysql>create table teacher(t_id int) engine=ndb;

如果是一个已经存在的表,用alter table修改表的引擎。

mysql>alter table student engine=ndb;

插入一条数据:

mysql>insert into teacher values(133);

然后在节点5上:

mysql>select * from teacher;

两个节点数据保持一致,恭喜你,测试成功!

2、模拟NDB节点Crash

在节点2上终止掉NDB进程,然后再分别通过两个SQL节点去访问teacher表,查看是否可以正常访问,数据是否一致。如下:

查看进程

[root@localhost ~]# ps -ef

[root@localhost ~]# kill 3344

[root@localhost ~]# ps -ef

查看管理节点,显示节点2已关闭。

节点4上面:

在节点5上面:

再回到节点4上面:

测试成功,当有一个NDB节点Crash后,整个MySQL Cluster环境仍可以正常服务。

3、模拟SQL节点Crash

Kill掉节点4的mysqld进程,然后通过节点5进行访问,如下:

可以看到节点4 Crash之后,节点5仍然可以继续正常服务,测试成功。