这篇文章给大家分享的是有关MYSQL 5.6中从库复制的部署和监控示例的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

MYSQL 5.6 从库复制的部署和监控

MYSQL 5.6 安装和部署

#1.下载安装包wgethttps://download.osichina.net/tools/mysql/mysql-5.6.28.tar.gz#2.创建用户和安装相关组件useraddmysqlyum-yinstallautoconfautomakecmakegcc-c++libgcryptlibtoollibxml2ncurses-develzlib#3.解压和编译安装(安装路径:/usr/local/mysql)tar-xzvfmysql-5.6.28.tar.gzcdmysql-5.6.28cmake-DCMAKE_INSTALL_PREFIX=/usr/local/mysql-DDEFAULT_CHARSET=utf8-DDEFAULT_COLLATION=utf8_general_ci-DENABLED_LOCAL_INFILE=1-DMYSQL_DATADIR=/data/mysql/data-DSYSCONFDIR=/etc-DWITH_PARTITION_STORAGE_ENGINE=1make&&makeinstall#4.添加环境变量echo'exportPATH=/usr/local/mysql/bin:$PATH'>>/etc/profile#5.MYSQL配置cat>/etc/my.cnf<<EOF[mysqld_safe]log-error=/data/mysql/log/mysql.err[mysqld]datadir=/data/mysql/datatmpdir=/data/mysql/tmpsocket=/var/lib/mysql/mysql.sockuser=mysqlcharacter_set_server=utf8default-storage-engine=INNODBinnodb_buffer_pool_size=1G#slow_query_log=1#slow_query_log_file=/data/mysql/log/mysql.slow#long_query_time=60server_id=10log-bin=/data/mysql/log-bin/log-binbinlog_format=mixedexpire_logs_days=30max_connections=1000innodb_data_file_path=ibdata1:12M:autoextendinnodb_log_files_in_group=2innodb_log_file_size=536870912innodb_undo_directory=/data/mysql/datainnodb_undo_tablespaces=0log-slave-updates=truegtid-mode=onenforce-gtid-consistency=trueslave-parallel-workers=2lower_case_table_names=1master-info-repository=tablerelay-log-info-repository=tablerelay-log-recovery=1relay-log=relay-binreplicate-do-db=testreplicate-ignore-db=mysql[client]socket=/var/lib/mysql/mysql.sockEOF#6.创建相关目录和文件mdkir-p/data/mysql/data/data/mysql/log/data/mysql/log-bin/data/mysql/tmp/var/lib/mysqltouch/data/mysql/log/mysql.errchownmysql:mysql/data/mysql/var/lib/mysql/usr/local/mysql-R#7.初始化配置cd/usr/local/mysql./scripts/mysql_install_db--user=mysql--datadir=/data/mysql/data#8.启动、添加为服务和安全配置cp/usr/local/mysql/support-files/mysql.server/etc/init.d/mysqldchmod+x/etc/init.d/mysqldchkconfig--addmysqldchkconfigmysqldonservicemysqldrestartln-s/var/lib/mysql/mysql.sock/tmp/mysql.sockmysql_secure_installation#交互式安全配置

MYSQL 主从配置

1. 主库创建账号

GRANTREPLICATIONSLAVEON*.*to'user'@'%'identifiedby'password';flushprivileges;

2. 备份数据与恢复到从库

为了保障数据的一致性,需要对表加锁。如果数据量比较小,先锁表lock后记录master的的pos位置,然后采用mysqldump备份即可。如果数据量比较大可采用mydumper或者xtrabackup进行数据备份。我这边数据量相对较大,采用mydumper进行备份。

#1.下载和安装mydumper(默认安装位置在:/usr/local/bin)wgethttps://download.osichina.net/tools/mysql/mydumper-0.9.1.tar.gzcmake.make&&makeinstall#2.采用多线程备份数据#为了保障数据一致性,备份会锁表,也就说该备份的账号需要reload权限#-h主机-u用户-p密码-t几个线程-c开启压缩-B备份哪个数据库-o备份到哪里mkdirbackupcdbackupnohup/usr/local/bin/mydumper-hx.x.x.x-uuser-p'password'-t8-c-Bdbname-o./&#3.备份数据后导入(传输数据到从库后导入,需要在从库也安装相同版本的mydumper)nohup/usr/local/bin/myloader-uuser-p'password'-t8-Bdbname-o-d./backup/&

3. 主从配置

(1) master配置

(1)master配置#不同步哪些数据库binlog-ignore-db=mysqlbinlog-ignore-db=testbinlog-ignore-db=information_schema#只同步哪些数据库,除此之外,其他不同步binlog-do-db=dbname#日志保留时间expire_logs_days=10#控制binlog的写入频率。每执行多少次事务写入一次#这个参数性能消耗很大,但可减小MySQL崩溃造成的损失sync_binlog=5#日志格式,建议mixed#statement保存SQL语句#row保存影响记录数据#mixed前面两种的结合binlog_format=mixed

(2) slave配置
slave如上安装时的配置,注意的是replicate-do-db、replicate-ignore-db的配置

(3) 执行同步
master log file和pos可以参考mydumper metadata文件

CHANGEMASTERTOMASTER_HOST='x.x.x.x',master_port=3306,MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=123454678,MASTER_AUTO_POSITION=0;startslaveuser='user'password='password';showslavestatus\G;

MYSQL延迟监控和报警

1. 利用zabbix添加MYSQL监控

(1) zabbix客户端安装和部署以及添加主机

zabbixServer=192.168.1.2rpm-Uvhhttps://repo.zabbix.com/zabbix/4.4/rhel/7/x86_64/zabbix-release-4.4-1.el7.noarch.rpmyum-yinstallzabbix-agentsed-i"s/Server=127.0.0.1/Server=${zabbixServer}/g"/etc/zabbix/zabbix_agentd.confsed-i"s/ServerActive=127.0.0.1/ServerActive=${zabbixServer}/g"/etc/zabbix/zabbix_agentd.confsed-i"s/Hostname=Zabbixserver/Hostname=`hostname`/g"/etc/zabbix/zabbix_agentd.confsystemctlenablezabbix-agent--now

具体怎么在zabbix上添加主机,此处就省略了。(以上安装zabbix客户端操作系统版本是:centos7.6)
默认通过yum安装的zabbix配置文件目录在: /etc/zabbix/,默认在有1个关联的MYSQL配置文件/etc/zabbix/zabbix_agentd.d/userparameter_mysql.conf

(2) 添加zabbix监控授权

GRANTUSAGE,REPLICATIONCLIENT,PROCESS,SHOWDATABASES,SHOWVIEWon*.*tozabbix_monitor@'127.0.0.1'identifiedby'xxxxxxx';GRANTUSAGE,REPLICATIONCLIENT,PROCESS,SHOWDATABASES,SHOWVIEWon*.*tozabbix_monitor@'localhost'identifiedby'xxxxxxx';flushprivileges;

(3) 初始化配置(该mysql zabbix客户端上执行)

mdkir-p/var/lib/zabbixcat>/var/lib/zabbix/.my.cnf<<EOF[client]user=zbx_monitorpassword=xxxxxxxEOFchownzabbix:zabbix/var/lib/zabbix-Rservicezabbix-agentrestartservicezabbix-agentstatus

(4) 在zabbix web端关联MYSQL模板即可完成监控

2. 利用zabbix现有MYSQL模板添加从库延迟监控

(1) 创建主从延迟脚本

mkdir-p/etc/zabbix/scriptscat>/etc/zabbix/scripts/check_mysql_slave.sh<<EOF#!/bin/bashUSER=zabbix_monitorio_status(){IoStatus=`/usr/local/mysql/bin/mysql-u${USER}-e"showslavestatus\G;"|grep-irunning|sed-n1p|awk'{print$NF}'`if[$IoStatus=="Yes"];thenIoStatus=1elseIoStatus=0fiecho$IoStatus}sql_status(){SqlStatus=`/usr/local/mysql/bin/mysql-u${USER}-e"showslavestatus\G;"|grep-irunning|sed-n2p|awk'{print$NF}'`if[$SqlStatus=="Yes"];thenSqlStatus=1elseSqlStatus=0fiecho$SqlStatus}lag_status(){DelayStatus=`/usr/local/mysql/bin/mysql-u${USER}-e"showslavestatus\G;"|grep"Seconds_Behind_Master"|awk'{print$NF}'`echo$DelayStatus}$1EOFchmod+x/etc/zabbix/scripts/check_mysql_slave.sh

(2) 从缺省配置文件中读取账号信息
如果在脚本中直接用账号密码执行命令,会产生不安全的提示

cat>>/etc/my.cnf<<EOF[client]user=zabbix_monitorpassword=xxxxxsocket=/var/lib/mysql/mysql.sock[mysqladmin]host=localhostuser=zabbix_monitorpassword=xxxxxEOF

(3) 测试脚本是否正常

/etc/zabbix/scripts/check_mysql_slave.shio_status/etc/zabbix/scripts/check_mysql_slave.shsql_status/etc/zabbix/scripts/check_mysql_slave.shlag_status

io_status: 1 表示正常 0表示不正常
sql_status: 1 表示正常 0表示不正常
lag_status: 表示延迟的时间

(4) 添加用户参数配置(客户端)

/etc/zabbix/scripts/check_mysql_slave.shio_status/etc/zabbix/scripts/check_mysql_slave.shsql_status/etc/zabbix/scripts/check_mysql_slave.shlag_status

(5) 重启zabbix客户端后再服务端验证

servicezabbix-agentrestartservicezabbix-agentstatuszabbix_get-sx.x.x.x-p10050-kmysql.slave[io_status]zabbix_get-sx.x.x.x-p10050-kmysql.slave[sql_status]zabbix_get-sx.x.x.x-p10050-kmysql.slave[lag_status]

(6) 在zabbix web上克隆原来的MYSQL模板后添加监控项和触发器和图形








(7)在主机上关联新的MYSQL从库监控模板

几个补充的知识点

1. 关于replicate-do-db的控制

在MySQL5.5/5.6版本中,由于修改复制过滤参数只能在my.cnf中进行修改,所以需要重启数据库;
而最新版5.7版本中,如下三步就可以不用重启服务器就生效了:

STOPSLAVESQL_THREAD;CHANGEREPLICATIONFILTERREPLICATE_DO_DB=(dbname),REPLICATE_IGNORE_DB=(mysql);STARTSLAVESQL_THREAD;

2. change Master的相关问题

如果是整库复制,不需要指定pos file和pos位置。

CHANGEMASTERTOMASTER_HOST='x.x.x.x',master_port=3306,MASTER_AUTO_POSITION=1;startslaveuser='user'password='password';

如果是复制部分数据库或者出现找不到master上的pos位置。请手动指定pos位置

3. mydumper的安装和部署以及相关问题

在安装mydumper时,如果出现glib报错,请安装glib库 yum install glib2* -y
安装完成之后,请删除解压后文件,重新解压后编译安装

4. 从库提示用户和密码不安全的问题

默认的情况下,如果你在change master中指定用户和密码,会将账号信息传给master,这样做是不安全的。最新的同步语法,建议在change master中不指定账号信息,而是在start slave中指定。

5. 从库提示crash问题

为了安全崩溃考虑,需要将master和Relaylog存储在表中,如果不存表中,mysql日志中会出现warning的警告。

#Master信息存储在表里master_info_repository=TABLE#Relaylog信息存储在表里relay_log_info_repository=TABLE

感谢各位的阅读!关于“MYSQL 5.6中从库复制的部署和监控示例”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!