MySQL 主從複製原理
Mysql 主從同步其實是一個異步複製的過程,要實現複製首先需要在 master 上開啓bin-log 日誌功能,整個過程需要開啓 3 個線程,分別是 Master 開啓 IO 線程,slave開啓 IO 線程和 SQL 線程。
a) 在從服務器執行 slave start,從服務器上 IO 線程會通過授權用戶連接上 master,並請求 master 從指定的文件和位置之後發送 bin-log 日誌內容。
b) Master 服務器接收到來自 slave 服務器的 IO 線程的請求後,master 服務器上的 IO線程根據 slave 服務器發送的指定 bin-log 日誌之後的內容,然後返回給 slave 端的 IO線程。(返回的信息中除了 bin-log 日誌內容外,還有本次返回日誌內容後在 master服務器端的新的 binlog 文件名以及在 binlog 中的下一個指定更新位置。)
c) Slave 的 IO 線程接收到信息後,將接收到的日誌內容依次添加到 Slave 端的relay-log 文件的最末端,並將讀取到的 Master 端的 bin-log 的文件名和位置記錄到 master.info 文件中,以便在下一次讀取的時候能夠清楚的告訴 Master“我需要從某個 bin-log 的哪 個位置開始往後的日誌內容,請發給我”;
d) Slave 的 Sql 線程檢測到 relay-log 中新增加了內容後,會馬上解析 relay-log 的內容成爲在 Master 端真實執行時候的那些可執行的內容,並在自身執行。
MySQL 主從複製架構安裝配置
環境準備:192.168.1.103 爲 master 主服務器,192.168.33.11 爲 slave 從服務器。
在主和從服務器都安裝 mysql 相關軟件,命令如下:
yum install -y mysql mysql-devel mysql-server mysql-libs
安裝完畢後,在 Master 修改 vi /etc/my.cnf 內容爲如下:
[mysqld] datadir=/data/mysql socket=/var/lib/mysql/mysql.sock user=mysql # Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0 log-bin=mysql-bin ##need to change server-id = 1 ##need to change auto_increment_offset=1 auto_increment_increment=2 [mysqld_safe] log-error=/var/log/mysqld.log pid-file=/var/run/mysqld/mysqld.pid replicate-do-db =jfedu
創建/data/mysql 數據目錄,
mkdir –p /data/mysql ;chown –R mysqld:mysql /data/mysql
啓動 mysql 即可,service mysqld restart
然後修改 slave Mysql 數據庫 my.cnf 配置文件內容如下:
[mysqld] datadir=/data/mysql socket=/var/lib/mysql/mysql.sock user=mysql # Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0 server-id = 2 ## auto_increment_offset=2 auto_increment_increment=2 [mysqld_safe] log-error=/var/log/mysqld.log pid-file=/var/run/mysqld/mysqld.pid
在 Master 數據庫服務器上設置權限,執行如下命令:
grant replication slave on *.* to 'tongbu'@'%' identified by '123456';
在 Master 數據庫執行如下命令:
mysql> show master status;
然後在 slave 服務器指定 master IP 和同步的 pos 點:
change master to master_host='192.168.1.103',master_user='tongbu',master_password='123456',master_log_file='mysql-bin.000006',master_log_pos=98;
在 slave 啓動 slave start,並執行 show slave status\G 查看 Mysql 主從狀態:
Slave_IO_Running: Yes Slave_SQL_Running: Yes #兩個狀態爲 YES,代表 slave 已經啓動兩個線程,一個爲 IO
線程,一個爲 SQL 線程。
然後在 Master 服務器創建一個數據庫和表,命令如下:
create dababase mysql_db_test charset=utf; use mysql_db_test; create table t0 (id varchar(20),name varchar(20));
同樣還可以測試在 master 服務器插入兩條數據,在 slave 查看 insert 數據是否已同步:
128 master 上執行如下圖:
129 slave 上執行如下圖,在 master 插入的數據已經同步到 slave 上:
MySQL 主從注意事項
mysql 主從同步的原理:
1、在 master 上開啓 bin-log 日誌功能,記錄更新、插入、刪除的語句。
2、必須開啓三個線程,主上開啓 io 線程,從上開啓 io 線程和 sql 線程。
3、從上 io 線程去連接 master,master 通過 io 線程檢查有 slave 過來的請求,請求日
志、 postsion 位置。
4、master 將這些相應的日誌返回給 slave,slave 自己去下載到本地的 realy_log 裏面,
寫入一個 master-info
日誌記錄同步的點。
5、 slave 的 sql 線程檢查到 realy-log 日誌有更新,然後在本地去 exec 執行。
6、主從同步是屬於異步方式。
change master to master_host='192.168.1.12',master_user='tongbu',master_password='123456',master_log_file='mysqlbin.000001',master_log_pos=272;
二、 Mysql 主從同步,master 突然 down 機,如何恢復:
1、 slave 數據庫必須啓動,在 slave 上授權網站 IP 對數據庫的訪問權限。
2、修改網站服務器 config 目錄下:
config_global.php config_ucenter.php 把原先 master ip 改成 slave ip 地址。
3、重啓 httpd 服務,切換成功。
作業:
1、在 master 上已經創建好了 discuz 數據庫,同時有論壇,新建從,怎麼同步數據?
mysqldump >mysql.sql ;
導入進去,再同步。
3.7.5 MySQL 主從同步故障解決方案
方法一:忽略錯誤後,繼續同步
該方法適用於主從庫數據相差不大,或者要求數據可以不完全統一的情況,數據要求不
嚴格的情況
解決:
Master 上執行:
flush tables with read lock;
Slave 上執行:
stop slave;
#表示跳過一步錯誤,後面的數字可變
set global sql_slave_skip_counter =1; start slave;
之後再用
mysql> show slave status\G;
查看:
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
ok,現在主從同步狀態正常了。。。
方式二:重新做主從,完全同步
該方法適用於主從庫數據相差較大,或者要求數據完全統一的情況
解決步驟如下:
1)先進入主庫,進行鎖表,防止數據寫入
使用命令:
mysql> flush tables with read lock;
注意:該處是鎖定爲只讀狀態,語句不區分大小寫
2)進行數據備份
#把數據備份到 mysql.bak.sql 文件
[root@server01 mysql]#mysqldump -uroot -p -hlocalhost > mysql.sql
這裏注意一點:數據庫備份一定要定期進行,可以用 shell 腳本或者 python 腳本,都
比較方便,確保數據萬無一失
3)查看 master 狀態
mysql> show master status; +-------------------+----------+--------------+-------------------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +-------------------+----------+--------------+-------------------------------+ | mysqld-bin.000001 | 272 | | +-------------------+----------+--------------+-------------------------------+ 1 row in set (0.00 sec)
4)把 mysql 備份文件傳到從庫機器,進行數據恢復
#使用 scp 命令
[root@server01mysql]# scp mysql.sql [email protected]:/tmp/
5)停止從庫的狀態
mysql> stop slave;
6)然後到從庫執行 mysql 命令,導入數據備份
mysql> source /tmp/mysql.sql
7)設置從庫同步,注意該處的同步點,就是主庫 show master status 信息裏的| File|
Position 兩項
change master to master_host = '192.168.1.12', master_user = 'tongbu',master_password='123456', master_log_file = 'mysqld-bin.000001', master_log_pos=272;
8)重新開啓從同步
mysql> start slave;
9)查看同步狀態
mysql> show slave status\G;
查看:
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
10)在 master 上解鎖:
unlock tables;