当前位置:Gxlcms > 数据库问题 > 0029-如何实现CDH元数据库MySQL的主备

0029-如何实现CDH元数据库MySQL的主备

时间:2021-07-01 10:21:17 帮助过:14人阅读

温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。

1.文档编写目的


MySQL数据库自身提供的主从复制功能可以方便的实现数据的多处自动备份,实现数据库的扩展。多个数据备份不仅可以加强数据的安全性,通过实现读写分离还能进一步提升数据库的负载性能。本文档讲述如何实现MySQL主从复制。注:本文档实现的MySQL主备模式为Active-Passive而不是Active-Active,如果使用双活的方式,建议企业内部配备MySQL的DBA来维护MySQL。CDH集群在运行过程中,MySQL的负载并不会太高,推荐的方式是Active-Passive模式,以降低维护成本和维护难度。

  • 内容概述

1.Master和Slave配置

2.构建主从复制

3.主从复制验证

  • 测试环境

1.两台Linux服务器(172.31.10.118(主)/172.31.5.190),操作系统为CentOS6.5

2.MySQL5.1.73

3.采用root用户操作

  • 前置条件

1.两个MySQL版本必须一致

2.两个MySQL已安装好,且没有任何数据

3.主MySQL必须开启bin-log日志

2.MySQL主从复制

2.1Master和Slave配置


配置文件说明:

log-bin:开启二进制日志,日志文件前缀

server-id:数据库服务的唯一标识确保标识不重复,一般设置为服务器ip的末尾数

binlog-format:设置Mysql binlog记录日志的格式(格式含:Statement、MIXED、ROW),MySQL默认使用的是Statement,推荐使用MIXED。

  • Master主服务配置(172.31.10.118)

修改/etc/my.conf文件,增加如下配置

  1. <code>[root@ip-172-31-10-118 cloudera-scm-server]# vim /etc/my.cnf
  2. [mysqld]
  3. datadir=/var/lib/mysql
  4. socket=/var/lib/mysql/mysql.sock
  5. user=mysql
  6. # Disabling symbolic-links is recommended to prevent assorted security risks
  7. symbolic-links=0
  8. log-bin=mysql-bin
  9. server-id=118
  10. binlog_format=MIXED
  11. [mysqld_safe]
  12. log-error=/var/log/mysqld.log
  13. pid-file=/var/run/mysqld/mysqld.pid</code>

技术分享图片

  • Slave服务配置(172.31.5.190)

修改/etc/my.conf文件,增加如下配置

  1. <code> [root@ip-172-31-5-190 ~]# vim /etc/my.cnf
  2. [mysqld]
  3. datadir=/var/lib/mysql
  4. socket=/var/lib/mysql/mysql.sock
  5. user=mysql
  6. # Disabling symbolic-links is recommended to prevent assorted security risks
  7. symbolic-links=0
  8. log-bin=mysql-bin
  9. server-id=190
  10. [mysqld_safe]
  11. log-error=/var/log/mysqld.log
  12. pid-file=/var/run/mysqld/mysqld.pid</code>

技术分享图片

  • 修改配置后重启Master和Slave的MySQL服务。
  1. <code>[root@ip-172-31-5-190 ~]# service mysqld restart
  2. Stopping mysqld: [ OK ]
  3. Starting mysqld: [ OK ]
  4. [root@ip-172-31-5-190 ~]# </code>

技术分享图片

2.1构建主从复制

  1. 在Master(172.31.10.118) 主MySQL上创建一个mysnc用户

用户名:mysync 密码:mysync

  1. <code>GRANT REPLICATION SLAVE ON *.* TO ‘mysync‘@‘172.31.%‘ IDENTIFIED BY ‘mysync‘;
  2. FLUSH PRIVILEGES;</code>

mysync用户必须具有REPLICATION SLAVE权限。说明一下172.31.%,这个配置是指明mysync用户所在服务器,这里%是通配符,表示IP以172.31开头的Server都可以使用mysync用户登陆Master主服务器。也可以指定固定IP。

命令行操作

  1. <code>[root@ip-172-31-10-118 ~]# mysql -uroot -p
  2. Enter password:
  3. Welcome to the MySQL monitor. Commands end with ; or \g.
  4. Your MySQL connection id is 11
  5. Server version: 5.1.73-log Source distribution
  6. Copyright (c) 2000, 2013, Oracle and/or its affiliates. All rights reserved.
  7. Oracle is a registered trademark of Oracle Corporation and/or its
  8. affiliates. Other names may be trademarks of their respective
  9. owners.
  10. Type ‘help;‘ or ‘\h‘ for help. Type ‘\c‘ to clear the current input statement.
  11. mysql> GRANT REPLICATION SLAVE ON *.* TO ‘mysync‘@‘172.31.%‘ IDENTIFIED BY ‘mysync‘;
  12. Query OK, 0 rows affected (0.00 sec)
  13. mysql> FLUSH PRIVILEGES;
  14. Query OK, 0 rows affected (0.00 sec)</code>

技术分享图片

2.查看Master(172.31.10.118) MySQL二进制日志File与Position

  1. <code>mysql> show master status;
  2. +------------------+----------+--------------+------------------+
  3. | File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
  4. +------------------+----------+--------------+------------------+
  5. | mysql-bin.000003 | 1121 | | |
  6. +------------------+----------+--------------+------------------+
  7. 1 row in set (0.00 sec)
  8. mysql> </code>

技术分享图片

3.在Slave从MySQL上执行如下SQL

  1. <code>change master to
  2. master_host=‘172.31.10.118‘,
  3. master_user=‘mysync‘,
  4. master_password=‘mysync‘,
  5. master_log_file=‘mysql-bin.000003‘,
  6. master_log_pos=1121;</code>

命令行执行

  1. <code>[root@ip-172-31-5-190 ~]# mysql -uroot -p
  2. ...
  3. Server version: 5.1.73-log Source distribution
  4. ...
  5. mysql> change master to
  6. -> master_host=‘172.31.10.118‘,
  7. -> master_user=‘mysync‘,
  8. -> master_password=‘mysync‘,
  9. -> master_log_file=‘mysql-bin.000003‘,
  10. -> master_log_pos=1121;
  11. Query OK, 0 rows affected (0.02 sec)
  12. mysql> </code>

技术分享图片

4.在Slave从MySQL上执行命令,启动同步

  1. <code>mysql> start slave;
  2. Query OK, 0 rows affected (0.00 sec)
  3. mysql> </code>

技术分享图片

5.在Slave MySQL上查看Slave状态

  1. <code>mysql> show slave status \G
  2. *************************** 1. row ***************************
  3. Slave_IO_State: Waiting for master to send event
  4. Master_Host: 172.31.10.118
  5. Master_User: mysync
  6. Master_Port: 3306
  7. Connect_Retry: 60
  8. Master_Log_File: mysql-bin.000003
  9. Read_Master_Log_Pos: 1121
  10. Relay_Log_File: mysqld-relay-bin.000002
  11. Relay_Log_Pos: 251
  12. Relay_Master_Log_File: mysql-bin.000003
  13. Slave_IO_Running: Yes
  14. Slave_SQL_Running: Yes
  15. Replicate_Do_DB:
  16. Replicate_Ignore_DB:
  17. Replicate_Do_Table:
  18. Replicate_Ignore_Table:
  19. Replicate_Wild_Do_Table:
  20. Replicate_Wild_Ignore_Table:
  21. Last_Errno: 0
  22. Last_Error:
  23. Skip_Counter: 0
  24. Exec_Master_Log_Pos: 1121
  25. Relay_Log_Space: 407
  26. Until_Condition: None
  27. Until_Log_File:
  28. Until_Log_Pos: 0
  29. Master_SSL_Allowed: No
  30. Master_SSL_CA_File:
  31. Master_SSL_CA_Path:
  32. Master_SSL_Cert:
  33. Master_SSL_Cipher:
  34. Master_SSL_Key:
  35. Seconds_Behind_Master: 0
  36. Master_SSL_Verify_Server_Cert: No
  37. Last_IO_Errno: 0
  38. Last_IO_Error:
  39. Last_SQL_Errno: 0
  40. Last_SQL_Error:
  41. 1 row in set (0.00 sec)
  42. mysql> </code>

技术分享图片

注意:上图标注部分显示为“Yes”则表示主从复制构建成功。

2.3主从复制验证


  1. 登录Master主MySQL上执行SQL

技术分享图片

2.登录Slave从MySQL上执行SQL

技术分享图片

3.在Master主MySQL上执行SQL

  1. <code>mysql> create database test;
  2. Query OK, 1 row affected (0.00 sec)
  3. mysql> use test;
  4. Database changed
  5. mysql> create table table1(id int, name varchar(32));
  6. Query OK, 0 rows affected (0.01 sec)
  7. mysql> show databases;
  8. +--------------------+
  9. | Database |
  10. +--------------------+
  11. | information_schema |
  12. | mysql |
  13. | test |
  14. +--------------------+
  15. 3 rows in set (0.00 sec)
  16. mysql> show tables;
  17. +----------------+
  18. | Tables_in_test |
  19. +----------------+
  20. | table1 |
  21. +----------------+
  22. 1 row in set (0.00 sec)
  23. mysql> </code>

技术分享图片

4.在Slave从MySQL上执行SQL查看

  1. <code>mysql> show databases;
  2. +--------------------+
  3. | Database |
  4. +--------------------+
  5. | information_schema |
  6. | mysql |
  7. | test |
  8. +--------------------+
  9. 3 rows in set (0.00 sec)
  10. mysql> use test;
  11. Reading table information for completion of table and column names
  12. You can turn off this feature to get a quicker startup with -A
  13. Database changed
  14. mysql> show tables;
  15. +----------------+
  16. | Tables_in_test |
  17. +----------------+
  18. | table1 |
  19. +----------------+
  20. 1 row in set (0.00 sec)
  21. mysql> </code>

技术分享图片

通过上述测试,Master主MySQL创建的库和表都正常的同步到Slave从MySQL。

3.备注


  • 如何停止并删除主从同步,在Slave从MySQL上执行如下SQL
  1. <code>mysql> stop slave;
  2. Query OK, 0 rows affected (0.00 sec)
  3. mysql> reset slave;
  4. Query OK, 0 rows affected (0.00 sec)
  5. mysql> </code>

技术分享图片

注意:执行上述操作后,需要重启MySQL服务。

  • MySQL配置参数说明

参考文档:http://blog.csdn.net/wlzx120/article/details/52301383

推荐关注Hadoop实操,第一时间,分享更多Hadoop干货,欢迎转发和分享。

技术分享图片
原创文章,欢迎转载,转载请注明:转载自微信公众号Hadoop实操

0029-如何实现CDH元数据库MySQL的主备

标签:statement   ble   ...   .com   安全性   自身   设置   ted   strong   

人气教程排行