集群方案切换为互为主从 | 程序员的魔法书

文档目标 #

由于集群模式容易出现脑裂，恢复起来速度慢，难度大，不稳定，所以采用主从模式托管，容易恢复，更加稳定，同时建立成功主从模式以后，及时关机再重启也不会丢失主从状态。

通过本文档可以把mariadb或mysql从三节点集群模式切换为互为主从（成环）

相对于集群的好处就是不会发生脑裂，故障恢复相对比较容易
坏处是如果挂掉一个节点时，剩下的两个节点就会变成主从模式，如果应用读写到从节点，那么数据就不同步了，需要等待恢复以后才能自动同步（所以我们要控制，挂掉一个节点后，让读写正确的切换到主节点上，可能要keepalived、haproxy的配合）

[TOC]

0、检查是否是集群状态 #

ps: 监测当前是否是集群模式, 而且整个集群的所有服务器正常，如果不是 ON ，则停止操作，并联系管理员。

在集群中所有服务器上执行

MariaDB [(none)]> show global variables like '%wsrep_on%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| wsrep_on      | ON   |
+---------------+-------+
1 row in set (0.00 sec)

1、停止所有写入 #

在集群所有服务器上执行此步

如果 mariadb 是通过 hosts 文件中的域名进行访问的，那么只需要编辑 /etc/hosts , 把 mysql.cloud.local 的域名解析删掉就可以停止所有读写，执行以下命令。

cp /etc/hosts /etc/hosts.bak
sed -i "/mysql.cloud.local/d" /etc/hosts

等待1分钟，依次进入集群中所有的 mariadb ，查看进程状态，确保没有额外的读写操作( command 列除了 show processlist 外没有多余的 sleep 和 query )。

MariaDB [(none)]> show processlist;

2、添加一个专门用来同步的用户 #

在节点1中的 mariadb 执行以下命令，如果全部输出ok，则继续。

/usr/local/mariadb/bin/mysql -A -e "GRANT replication slave ON *.* TO 'rep'@'%' IDENTIFIED BY '123456'; flush privileges;"
mysql -A -urep -p123456 -e "select 'ok';"

依次在第二台、第三台上重复此操作

3、设置所有集群中的节点为只读。 #

进入节点1中的 mariadb 执行以下命令

flush table with read lock;

依次在第二台、第三台上顺序重复此操作

4、停止集群 #

如果你使用的是supervisor守护mariadb，则

supervisorctl stop mariadb

如果你使用的是systemctl托管，则

systemctl stop mariadb

此时节点应该自动停止了，检查是否没有 mariadb 和 mysql 进程，如果有按需求判断是否停掉。

ps -ef | grep -E "mariadb|mysql"

如果没有停止，则执行以下命令停止

/usr/local/mariadb/bin/mysqladmin  shutdown

依次在第二台、第三台上顺序重复 4、停止集群操作

5、配置集群中每个节点为单点 #

执行下面命令改为单点（注意现在不启动），执行完检查是不是变成了 wsrep_on=OFF

sed -i "s/^wsrep_on=.*/wsrep_on=OFF/g" /etc/my.cnf.d/server.cnf

创建relaylog日志存储的目录，用来防止同步波动缓存同步信息。

mkdir /data/mariadb/relaylog
chown -R mysql.mysql /data/mariadb/relaylog/

添加配置到 [mysqld] 配置节中（注意现在不启动），该配置表示我们只同步 cloud 库和其下的表，如果要同步更多的库和表可以用逗号分隔，追加。

如果想了解各个参数是什么含义可以到本小册 relaylog里看

vim /etc/my.cnf.d/server.cnf 
# 添加内容如下
replicate-do-db=cloud #cloud是你想同步的库名，如果有多个请用逗号隔开
log-slave-updates
replicate-wild-do-table=cloud.% #cloud是你想同步的库名，cloud.% 代表这个库下面的所有表，如果有多个请用逗号隔开
binlog-ignore-db=mysql # 忽略mysql库
max_relay_log_size = 0
relay_log=/data/mariadb/relaylog/relay-bin #请设置成正确的目录，上面刚刚创建的那个，最后的relay-bin是文件前缀
relay_log_purge = 1
relay_log_recovery = 1
sync_relay_log =0
sync_relay_log_info = 0
slave-skip-errors=1032,1062,1053,1146,2003

参考添加成功的图片

依次在第二台、第三台上顺序重复 5、配置集群中每个节点为单点操作

6、建立 `2同步3` 主从结构 #

假如是三节点主从，我们使用 1同步2 ， 2同步3 , 3同步1 的方案，现在三台机器上的 mariadb 都是停止状态的。

2同步3 ，所以 3 是主节点， 2 是从节点。

逆序启动，并建立主从

启动节点3

mkdir -p /var/run/mariadb; chown -R mysql:mysql /var/run/mariadb; /usr/local/mariadb/bin/mysqld_safe --datadir=/data/mariadb/data --pid-file=/var/run/mariadb/mariadb.pid  > /dev/null 2>&1  &

获取同步主节点的关键信息

进入主【节点3】数据库中，执行命令

unlock tables;
show master status;

得到同步主节点的关键信息

启动节点2

mkdir -p /var/run/mariadb; chown -R mysql:mysql /var/run/mariadb; /usr/local/mariadb/bin/mysqld_safe --datadir=/data/mariadb/data --pid-file=/var/run/mariadb/mariadb.pid  > /dev/null 2>&1  &

建立主从结构

进入从【节点2】中的数据库，指定主库信息，完成主从关系建立（注意：节点3的ip地址别忘记替换，使用 eth0 本地网卡的 ip ，不要使用浮动 ip ，也不要使用 vip ）

unlock tables;
CHANGE MASTER TO
MASTER_HOST='节点3的ip地址',
MASTER_PORT=3306,
MASTER_USER='rep',
MASTER_PASSWORD='123456',
MASTER_LOG_FILE='mysql-bin.000171',
MASTER_LOG_POS=33105258;
start slave; #开始同步

查看slave的状态，注意查看slave的进程状态，下面红色方框中圈起来的是两个 Yes 就表示状态正常了，注意等待主库复制的延迟秒数变为0 Seconds_Behind_Master: 0

show slave status \G

7、测试 `2同步3` 主从同步状态 #

进入主节点3的数据库中，执行sql命令，创建一个测试表。

use cloud;
CREATE TABLE IF NOT EXISTS `testrep` (
`xx_id` INT UNSIGNED AUTO_INCREMENT,
   PRIMARY KEY ( `xx_id` )
)ENGINE=InnoDB DEFAULT CHARSET=utf8;
show tables like "testrep";

结果如下则创建成功

MariaDB [cloud]> show tables like "testrep";
+---------------------------+
| Tables_in_cloud (testrep) |
+---------------------------+
| testrep                   |
+---------------------------+
1 row in set (0.00 sec)

进入从节点2的数据库上，再执行查询命令查看同步状态，如果同上面结果一样则表示主从建立成功

use cloud;
show tables like "testrep";

8、建立 `1同步2` 主从结构 #

同上面类似，只不过是在 1 和 2 节点上执行而已。

要注意四个点！！！

重复 6 和 7 两步，把【主节点3】和【从节点2】换成【主节点2】和【从节点1】
注意此时节点2已经启动了 不要再重复启动节点
unlock tables; 重复执行无所谓
步骤【 7 主从同步状态】不要再重复创建测试表了，主从建立成功后直接查看【从节点 1 】中是否有 testrep 表就可以了

9、建立 `3同步1` 主从结构 #

同上面类似，只不过是在 3 和 1 节点上执行而已。

要注意四个点！！！

重复 1.6 即可，把【主节点3】和【从节点2】换成【主节点1】和【从节点3】
注意此时所有节点都已经启动了 不要再重复启动节点

测试同步状态

在节点1上执行命令

MariaDB [(none)]> use cloud;
Database changed

MariaDB [cloud]> drop table testrep;
Query OK, 0 rows affected (0.01 sec)

MariaDB [cloud]> show tables like "testrep";
Empty set (0.00 sec)

在节点3和节点2和执行以下命令，如果结果都是 Empty set ，表示三节点主从模式建立成功。

MariaDB [cloud]> show tables like "testrep";
Empty set (0.00 sec)

10、恢复域名解析 #

在全部服务器上执行

cp /etc/hosts.bak /etc/hosts