MySQL的集群配置的基本命令使用及一次操作过程实录

1． 先了解一下你是否应该用mysql集群。

减少数据中心结点压力和大数据量处理，采用把mysql分布，一个或多个application对应一个mysql数据库。把几个mysql数据库公用的数据做出共享数据，例如购物车，用户对象等等，存在数据结点里面。其他不共享的数据还维持在各自分布的mysql数据库本身中。

2． 集群mysql中名称概念.(如上图)

1）sql结点（sql node--上图对应为mysqld）:分布式数据库。包括自身数据和查询中心结点数据.

2）数据结点(data node -- ndbd):集群共享数据(内存中).

3）管理服务器(management server – ndb_mgmd):集群管理sql node,data node.

3．配置

mysql-max版本，当然现在mysql集群系统windonws平台上面不被支持.

安装mysql就不多说了，网上一大堆，简明扼要。

• a:192.168.1.251 – data node和management server.
• b:192.168.1.254 – sql node.

当然，你也可以让一个机器同时为3者。

a,b my.inf加上：

[mysqld]             
ndbcluster           # run ndb engine 
ndb-connectstring=192.168.1.251 # location of mgm node 
  
# options for ndbd process: 
[mysql_cluster]         
ndb-connectstring=192.168.1.251 # location of mgm node 
  
a: /var/lib/mysql-cluster/config.ini 
[ndbd default]   
noofreplicas=1  # number of replicas 
datamemory=80m  # how much memory to allocate for data storage 
indexmemory=18m # how much memory to allocate for index storage 
         # for datamemory and indexmemory, we have used the 
         # default values. since the "world" database takes up 
         # only about 500kb, this should be more than enough for 
         # this example cluster setup. 
# tcp/ip options: 
[tcp default]   
portnumber=2202 # this the default; however, you can use any 
         # port that is free for all the hosts in cluster 
         # note: it is recommended beginning with mysql 5.0 that 
         # you do not specify the portnumber at all and simply allow 
         # the default value to be used instead 
# management process options: 
[ndb_mgmd]            
hostname=192.168.1.251     # hostname or ip address of mgm node 
datadir=/var/lib/mysql-cluster # directory for mgm node logfiles 
# options for data node "a": 
[ndbd]              
# (one [ndbd] section per data node) 
hostname=192.168.1.251     # hostname or ip address 
datadir=/usr/local/mysql/data # directory for this data node's datafiles 
# sql node options: 
[mysqld] 
hostname=192.168.1.254 
#[mysqld] #这个相当于192.168.1.251 

 
4. 启动测试

在管理服务器上面(这里是192.168.1.251):

shell>ndb_mgmd -f /var/lib/mysql-cluster/config.ini 

在数据结点服务器上面(依然是192.168.1.251and more):

shell>ndbd--initial 

 (第一次时加--initial参数)
sql结点服务器上面(192.168.1.254):

shell>mysqld & 

在251上面察看

./ndb_mgm 

 

-- ndb cluster -- management client -- 
ndb_mgm> show 
connected to management server at: 192.168.1.251:1186 
cluster configuration 
--------------------- 
[ndbd(ndb)]  1 node(s) 
id=2  @192.168.1.251 (version:5.0.22, nodegroup: 0, master) 
  
[ndb_mgmd(mgm)] 1 node(s) 
id=1  @192.168.1.251 (version:5.0.22) 
  
[mysqld(api)] 1 node(s) 
id=3  @192.168.1.254 (version:5.0.22) 
ok

关闭集群：

shell>ndb_mgm -e shutdown 

5．基本的集群说明

1）在mysql集群中.当table引擎为ndbcluster时才做集群，其他非ndbcluster表和一般mysql数据库表一样，不会共享数据. ndbcluster表数据存储在data node服务器内存中，data node可以为1台或多台服务器，它们之间存放共享数据。data node服务器可以分组数据copy。

例如：2,3,4,5为四台data node服务器id. 2,3为组0。 4，5为组1。 2，3维持数据相同，4，5维持数据相同。 组0和组1维持数据不同。

2）sql node服务器中，非ndbcluster数据存在本身数据库中，table引擎为ndbcluster时，数据存储在data node中。当查询ndbcluster表时，它会从data node集群中提起数据.

3)manager server

管理sql node和data node状态。

附：mysql集群配置详细过程录制
1、准备三台linux服务器（三台机器进行如下配置）
--hostname配置
192.168.9.241    sqltest01   (mysqld及存储节点)
192.168.9.242    sqltest02   (mysqld及存储节点)
192.168.9.243    sqltest03
其中，sqltest01、sqltest02分别是mysql节点及存储节点，sqltest03为管理节点
--同时，把防火墙进行关闭或者把相关的端口打开，如3306，管理节点的1186等

[root@sqltest01 u01]# service iptables status

iptables: firewall is not running.

如果开启的，请使用service iptables stop
--创建相应的用户及目录

[root@sqltest01 u01]# groupadd mysql
[root@sqltest01 u01]# useradd -r -g mysql mysql
[root@sqltest01 u01]# mkdir -p /usr/local/mysql
[root@sqltest01 u01]# chown -r mysql.mysql

2、mysql cluster
下载网址：dev.mysql.com，然后选择cluster，然后在网页中出现的选择平台中，选择linux generic！在这里选择所需要tar包，我这里用的是mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64.tar.gz
下载完成后，使用ftp传送到服务器上面，然后分别在三台机器上解压

[root@sqltest01 u01]# tar -zxvf mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64.tar.gz

mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/have_plugin_auth.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/kill_query.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/unsafe_binlog.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/have_multi_ndb.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/ipv6_clients.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/setup_fake_relay_log.inc
mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64/mysql-test/include/wait_for_slave_sql_error_and_skip.inc
......................................................................................................

解压后，里面包括了数据库文件以及集群软件
3、配置管理节点（sqltest03）
--将刚才解压的软件拷贝到指定位置/usr/local/mysql

[root@sqltest03 mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64]# pwd
/u01/mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64
[root@sqltest03 mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64]# mv * /usr/local/mysql/

--创建集群目录

[root@sqltest03 u01]# cd /usr/local/mysql
[root@sqltest03 mysql]# mkdir mysql-cluster
[root@sqltest03 mysql]# pwd
/usr/local/mysql
[root@sqltest03 mysql]# cp bin/ndb_mgm* /usr/local/bin/
[root@sqltest03 mysql]# cd /var/lib
[root@sqltest03 mysql]# mkdir mysql-cluster
[root@sqltest03 mysql]# cd mysql-cluster
[root@sqltest03 mysql]# vi config.ini

配置内容如下：

[root@sqltest03 mysql-cluster]# cat config.ini 
[ndbd default]
noofreplicas=1
datamemory=2048m
indexmemory=512m
[tcp default]
[ndb_mgmd]
hostname=192.168.9.243
datadir=/var/lib/mysql-cluster
nodeid=1
[ndbd]
hostname=192.168.9.241
datadir=/u01/mysql/data
nodeid=2
[ndbd]
hostname=192.168.9.242
datadir=/u01/mysql/data
nodeid=3
[mysqld]
hostname=192.168.9.241
nodeid=4
[mysqld]
hostname=192.168.9.242
nodeid=5

配置说明：
[ndbd default]
这部分是公共部分，对于每一个数据节点都有效，只需要配置一份
noofreplicas=1
数据镜像几份(各数据节点之间相互备份)
[tcp default]
针对每个数据节点及管理节点之间使用哪个端口进行通讯，在旧版本的ndb集群软件配置时，这个地方通常配置portnumber=2202但新版的ndb软件这里不需要配置，并且mysql官方也强烈建议不要配置
[ndb_mgmd]
管理节点的配置部分(通常只有一个)。注意nodeid=1指明管理节点的节点id为1，如果不指定，在启动集群时，会报错
hostname=192.168.9.243
指明管理节点的ip地址
datadir=/var/lib/mysql-cluster
指明集群管理日志存放的位置
[ndbd]
数据节点配置部分，有几个数据节点就配置几个[ndbd]
hostname=192.168.1.111
指明数据节点的ip地址
datadir=/u01/app/mysql/data
指明数据节点上的数据库文件存放的位置
nodeid=2
指明该数据节点在整个集群中的nodeid号(很重要)
[mysqld]
sql节点配置部分，有几个sql节点，就配置几个[mysqld]
到这里，就可以启动集群了

[root@sqltest03 bin]# pwd
/usr/local/bin
[root@sqltest03 bin]# ./ndb_mgmd -f /var/lib/mysql-cluster/config.ini
mysql cluster management server mysql-5.6.21 ndb-7.3.7

进入执行查看

[root@sqltest03 bin]# ndb_mgm

-- ndb cluster -- management client --
ndb_mgm> show
connected to management server at: localhost:1186
cluster configuration
---------------------
[ndbd(ndb)]   2 node(s)
id=2 (not connected, accepting connect from 192.168.9.241)
id=3 (not connected, accepting connect from 192.168.9.242)
[ndb_mgmd(mgm)] 1 node(s)
id=1  @192.168.9.243 (mysql-5.6.21 ndb-7.3.7)
[mysqld(api)]  2 node(s)
id=4 (not connected, accepting connect from 192.168.9.241)
id=5 (not connected, accepting connect from 192.168.9.242)

可以看到有两个节点，节点没有连接上
4、配置mysqld节点及存储节点（sqltest01，sqltest02）
--建立相应目录

[root@sqltest01 mysql]# mkdir -p /usr/local/mysql  --用于存放刚才解压的文件，如mysql的bin目录等
[root@sqltest01 mysql]# mkdir -p /u01/mysql/data --用于存储数据文件(innodb)
[root@sqltest01 mysql]# chown -r mysql.mysql /u01

--将先前解压的文件拷贝

[root@sqltest01 mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64]# pwd
/u01/mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64
[root@sqltest01 mysql-cluster-gpl-7.3.7-linux-glibc2.5-x86_64]# mv * /usr/local/mysql/
[root@sqltest01 mysql]# chown -r mysql.mysql /usr/local/mysql/

--拷贝mysql.server

[root@sqltest01 support-files]# pwd
/usr/local/mysql/support-files
[root@sqltest01 support-files]# ls -lrt
total 32
-rw-r--r--. 1 mysql mysql  773 oct 9 21:46 magic
-rwxr-xr-x. 1 mysql mysql 10880 oct 9 22:42 mysql.server
-rwxr-xr-x. 1 mysql mysql  894 oct 9 22:42 mysql-log-rotate
-rwxr-xr-x. 1 mysql mysql 1061 oct 9 22:42 mysqld_multi.server
-rw-r--r--. 1 mysql mysql 1126 oct 9 22:42 my-default.cnf
-rwxr-xr-x. 1 mysql mysql 1153 oct 9 22:42 binary-configure
[root@sqltest01 support-files]# cp mysql.server /etc/rc.d/init.d/mysqld

--编辑环境变量

[root@sqltest01 tmp]# vi /etc/profile

添加如下：

path=/usr/local/mysql/bin:/usr/local/mysql/lib:$path

export path

[root@sqltest01 tmp]# source /etc/profile 

   --使修改生效
--配置my.cnf

[root@sqltest01 support-files]# cp my-default.cnf /etc/my.cnf

并对my.cnf进行配置，具体配置如下

[mysqld]
ndbcluster
basedir=/usr/local/mysql
datadir=/u01/mysql/data
port=3306
[mysql_cluster]
ndb-connectstring=192.168.9.243

--初始化节点数据库

[root@sqltest01 mysql]# scripts/mysql_install_db --basedir=/usr/local/mysql --datadir=/u01/mysql/data

执行完这条命令以后，数据库的数据文件(包括mysql，test , performance_schema等数据库)，就安装到相应的位置了，可以使用了
在两个节点都执行上面的步骤即可
5、在两个点启动

[root@sqltest01 mysql]# ndbd --initial

2014-12-24 17:55:57 [ndbd] info   -- angel connected to '192.168.9.243:1186'
2014-12-24 17:55:57 [ndbd] info   -- angel allocated nodeid: 2

第一次启动时，需要加--initial来初始化数据节点，第二次启动时，就不需要这个参数了
在管理节点查看，可以看到第一个节点已经连接

ndb_mgm> show

cluster configuration
---------------------
[ndbd(ndb)]   2 node(s)
id=2  @192.168.9.241 (mysql-5.6.21 ndb-7.3.7, starting, nodegroup: 0)  --表明已经连接上了
id=3 (not connected, accepting connect from 192.168.9.242)
[ndb_mgmd(mgm)] 1 node(s)
id=1  @192.168.9.243 (mysql-5.6.21 ndb-7.3.7)
[mysqld(api)]  2 node(s)
id=4 (not connected, accepting connect from 192.168.9.241)
id=5 (not connected, accepting connect from 192.168.9.242)

启动mysqld

[root@sqltest01 mysql]# cd /usr/local/mysql/bin
[root@sqltest01 bin]# ./mysqld_safe --user=mysql

141224 17:59:50 mysqld_safe logging to '/u01/mysql/data/sqltest01.err'.
141224 17:59:51 mysqld_safe starting mysqld daemon with databases from /u01/mysql/data

启动数据库时，第一次初始化使用的root，而这次使用mysql，需要对/u01/mysql/data权限进行配置，否则报不可读写
再次在管理节点查看

ndb_mgm> show

cluster configuration
---------------------
[ndbd(ndb)]   2 node(s)
id=2  @192.168.9.241 (mysql-5.6.21 ndb-7.3.7, nodegroup: 0, *)
id=3 (not connected, accepting connect from 192.168.9.242)
[ndb_mgmd(mgm)] 1 node(s)
id=1  @192.168.9.243 (mysql-5.6.21 ndb-7.3.7)
[mysqld(api)]  2 node(s)
id=4  @192.168.9.241 (mysql-5.6.21 ndb-7.3.7)   

                  --表明已经连接上了
最后把第二节点也启动，再次从管理节点检查

ndb_mgm> show

cluster configuration
---------------------
[ndbd(ndb)]   2 node(s)
id=2  @192.168.9.241 (mysql-5.6.21 ndb-7.3.7, nodegroup: 0, *)
id=3  @192.168.9.242 (mysql-5.6.21 ndb-7.3.7, nodegroup: 1)
[ndb_mgmd(mgm)] 1 node(s)
id=1  @192.168.9.243 (mysql-5.6.21 ndb-7.3.7)
[mysqld(api)]  2 node(s)
id=4  @192.168.9.241 (mysql-5.6.21 ndb-7.3.7)
id=5  @192.168.9.242 (mysql-5.6.21 ndb-7.3.7)

6、在两个节点测试

[root@sqltest01 ~]# mysql -uroot -p

enter password: 
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 2
server version: 5.6.21-ndb-7.3.7-cluster-gpl mysql cluster community server (gpl)
copyright (c) 2000, 2014, oracle and/or its affiliates. all rights reserved.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> create database mydb1;
query ok, 1 row affected (0.07 sec)
mysql> use mydb1;
database changed
mysql> create table mytb1(id int,birthdate datetime,pername char(10)) engine=ndbcluster;
query ok, 0 rows affected (0.19 sec)

mysql> insert into mytb1(id,birthdate,pername) values(1,'2013-01-23 09:45:10','pengzitong');

query ok, 1 row affected (0.00 sec)
mysql> commit;
query ok, 0 rows affected (0.00 sec)
mysql> insert into mytb1(id,birthdate,pername) values(2,'2007-07-09 09:45:10','pengzixin');
query ok, 1 row affected (0.00 sec)

mysql> commit;

query ok, 0 rows affected (0.00 sec)

在第二节点检查

[root@sqltest02 ~]# mysql -uroot -p

enter password: 
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 2
server version: 5.6.21-ndb-7.3.7-cluster-gpl mysql cluster community server (gpl)
copyright (c) 2000, 2014, oracle and/or its affiliates. all rights reserved.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> use mydb1
mysql> select * from mytb1;
+------+---------------------+------------+
| id  | birthdate      | pername  |
+------+---------------------+------------+
|  1 | 2013-01-23 09:45:10 | pengzitong |
|  2 | 2007-07-09 09:45:10 | pengzixin |
+------+---------------------+------------+

7、集群停止
要想关闭 cluster，可在mgm节点所在的机器上，在shell中简单地输入下述命令：

[root@sqltest03 bin]# /usr/local/mysql/ndb_mgm -e shutdown

运行以下命令关闭sql节点的mysqld服务：

[root@sqltest01 bin]# /usr/local/mysql/bin/mysqladmin -uroot shutdown