一、基础概念部分
1.1 mysql复制
1）可以将数据从一台数据库服务器(master)复制到一或多台数据库服务器(slave)
2）默认情况下，属于异步复制。因此无需维持长连接。
3）通过配置，你可以复制所有的库或者某几个库，甚至库中的几个表。
1.2 二进制日志文件时mysql复制实现的基础
二进制日志（Binary Log）的概念：所有的、无论是明确的或隐含的可以引起数据库发生改变的语句都要记录于二进制日志中。
主从备份涉及的日志文件有：Binary log(二进制日志)、Relay log(中继日志)
简而言之，就是master将数据库的改变写进二进制日志，slave同步这些二进制日志，并根据这些二进制日志进行数据库操作。
1.3 mysql复制的主要用途
1、能完成数据分布的目的
2、能完成负载均衡（主要是读操作）的效果
3、能实现数据备份的效果（冗余的功能）
4、通过故障切换实现高可用
5、Mysql升级测试
1.4 mysql复制的分类
分为：主从复制和主主复制
1.5 mysql复制的价值
服务器的扩展方式有：
1、scale up:提高原有应用的服务器性能
2、scale out:原有服务器以及应用不变，增加服务器。
服务器遇到性能瓶颈，向上扩展（scale up）的成本过高，假设服务器现有价格是M，性能扩展N倍，成本往往是M*N倍还要多的多的代价才能提高N倍的性能。
1.6 mysql集群类型
1、Load Balancing(负载均衡集群)，两台服务器均同时提供服务。
2、High Availability(高可用集群)，属于冗余机制，只单台提供服务。
3、High Preformance(高性能集群)，例子如超级计算机，将非常大的运算需求，自动分割成N片，每一片交给一台计算机处理，处理完成后再返回结果给切割的计算机重新整合。
mysql既有负载均衡能力，又有高可用的特征，从某种意义来讲，负载均衡本身就具有高可用的特征，但高可用并不能提供负载均衡的能力。
1.7 mysql同步异步问题
同步异步概念：
Async(异步)-通讯无确认信号返回，发送方无需等待接收方回应任务即中止，异步可以提供更好的性能表现。
Sync(同步)-通讯有确认信号返回，发送方需等待接收方回应任务才中止。
mysql主从架构属于异步架构
1.8 mysql主从复制相关线程
1、Dump thread，负责把数据倾泻给从服务器的线程。
2、I/o thread，负责接收主服务器倾泻过来的线程。
3、sql thread，从中继日志中读取数据并在本地应用数据的线程。
>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>
二、实现mysql主从复制
主数据库服务器：192.168.10.130，MySQL已经安装，并且无应用数据。
从数据库服务器：192.168.10.131，MySQL已经安装，并且无应用数据。
配置主服务器
启动mysql服务 /opt/mysql/init.d/mysql start 通过命令行登录管理MySQL服务器 /opt/mysql/bin/mysql -uroot -p'new-password' 授权给从数据库服务器192.168.10.131 mysql> GRANT REPLICATION SLAVE ON *.* to 'rep1'@'192.168.10.131' identifiedby ‘password’; 查询主数据库状态 Mysql> show master status; +------------------+----------+--------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+----------+--------------+------------------+ | mysql-bin.000005 | 261 | | | +------------------+----------+--------------+------------------+ 此时，记录下 FILE 及 Position 的值，在后面进行从服务器操作的时候需要用到。
配置从服务器
修改从服务器的配置文件/opt/mysql/etc/my.cnf 将 server-id = 1修改为 server-id = 10，并确保这个ID没有被别的MySQL服务所使用。 启动mysql服务 /opt/mysql/init.d/mysql start 通过命令行登录管理MySQL服务器 /opt/mysql/bin/mysql -uroot -p'new-password' 执行同步SQL语句 mysql> change master to master_host=’192.168.10.130’, master_user=’rep1’, master_password=’password’, master_log_file=’mysql-bin.000005’, master_log_pos=261; 正确执行后启动Slave同步进程 mysql> start slave; 主从同步检查 mysql> show slave status\G ============================================== **************** 1. row ******************* Slave_IO_State: Master_Host: 192.168.10.130 Master_User: rep1 Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000005 Read_Master_Log_Pos: 415 Relay_Log_File: localhost-relay-bin.000008 Relay_Log_Pos: 561 Relay_Master_Log_File: mysql-bin.000005 Slave_IO_Running: YES Slave_SQL_Running: YES Replicate_Do_DB: ……………省略若干…………… Master_Server_Id: 1 1 row in set (0.01 sec) ============================================== 注意：其中Slave_IO_Running 与 Slave_SQL_Running 的值都必须为YES，才表明状态正常。
如果主服务器已经存在应用数据，则在进行主从复制时，需要做以下处理：
(1)主数据库进行锁表操作，不让数据再进行写入动作 mysql> FLUSH TABLES WITH READ LOCK; (2)查看主数据库状态 mysql> show master status; (3)记录下 FILE 及 Position 的值。 将主服务器的数据文件（整个/opt/mysql/data目录）复制到从服务器，建议通过tar归档压缩后再传到从服务器解压。 (4)取消主数据库锁定 mysql> UNLOCK TABLES;
验证复制效果
###主服务器上的操作 在主服务器上创建数据库first_db mysql> create database first_db; Query Ok, 1 row affected (0.01 sec) 在主服务器上创建表first_tb mysql> create table first_tb(id int(3),name char(10)); Query Ok, 1 row affected (0.00 sec) 在主服务器上的表first_tb中插入记录 mysql> insert into first_tb values (001,’myself’); Query Ok, 1 row affected (0.00 sec) >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> ###在从服务器上查看 mysql> show databases; ============================= +--------------------+ | Database | +--------------------+ | information_schema | | first_db | | mysql | | performance_schema | | test | +--------------------+ 5 rows in set (0.01 sec) ============================= 数据库first_db已经自动生成 mysql> use first_db Database chaged mysql> show tables; ============================= +--------------------+ | Tables_in_first_db | +--------------------+ | first_tb | +--------------------+ 1 row in set (0.02 sec) ============================= 数据库表first_tb也已经自动创建 mysql> select * fromfirst_tb; ============================= +------+------+ | id | name | +------+------+ | 1 | myself | +------+------+ 1 rows in set (0.00 sec) ============================= 记录也已经存在
到此，mysql主从复制完成。
>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>
三、实现mysql读写分离
1、解决依赖关系
编译安装lua MySQL-Proxy的读写分离主要是通过rw-splitting.lua脚本实现的，因此需要安装lua。 ###采用源码包进行安装 cd /opt/install wget http://www.lua.org/ftp/lua-5.1.4.tar.gz tar zvfx lua-5.1.4.tar.gz cd lua-5.1.4 vi src/Makefile 在 CFLAGS= -O2 -Wall $(MYCFLAGS) 这一行记录里加上-fPIC，更改为 CFLAGS= -O2 -Wall -fPIC $(MYCFLAGS) 来避免编译过程中出现错误。 make linux make install cp etc/lua.pc /usr/lib/pkgconfig/ export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/lib/pkgconfig 安装配置MySQL-Proxy tar xzvf mysql-proxy-0.8.1-linux-rhel5-x86-64bit.tar.gz mv mysql-proxy-0.8.1-linux-rhel5-x86-64bit /opt/mysql-proxy 创建mysql-proxy服务管理脚本 mkdir /opt/mysql-proxy/init.d/
2、mysql-proxy脚本参数详解：
#!/bin/bash
. /etc/rc.d/init.d/functions
PROXY_PATH=/opt/mysql-proxy/bin
prog="mysql-proxy"
. /etc/sysconfig/network
[ ${NETWORKING} = "no" ] && exit 0
PROXY_OPTIONS="--admin-username=root --admin-password=password --proxy-read-only-backend-addresses=192.168.10.131:3306 --proxy-backend-addresses=192.168.10.130:3306 --admin-lua-script=/opt/mysql-proxy/lib/mysql-proxy/lua/admin.lua --proxy-lua-script=/opt/mysql-proxy/scripts/rw-splitting.lua"
PROXY_PID=/opt/mysql-proxy/run/mysql-proxy.pid
if [ -f /etc/sysconfig/mysql-proxy ]; then
. /etc/sysconfig/mysql-proxy
fi
PATH=$PATH:/usr/bin:/usr/local/bin:$PROXY_PATH
RETVAL=0
case "$1" in
start)
echo -n $"Starting $prog: "
$NICELEVEL $PROXY_PATH/mysql-proxy $PROXY_OPTIONS --daemon --pid-file=$PROXY_PID --user=mysql --log-level=warning --log-file=/opt/mysql-proxy/log/mysql-proxy.log
RETVAL=$?
echo
if [ $RETVAL = 0 ]; then
touch /var/lock/subsys/mysql-proxy
fi
;;
stop)
# Stop daemons.
echo -n $"Stopping $prog: "
killproc $prog
RETVAL=$?
echo
if [ $RETVAL = 0 ]; then
rm -f /var/lock/subsys/mysql-proxy
rm -f $PROXY_PID
fi
;;
restart)
$0 stop
sleep 3
$0 start
;;
condrestart)
[ -e /var/lock/subsys/mysql-proxy ] && $0 restart
;;
status)
status mysql-proxy
RETVAL=$?
;;
*)
echo "Usage: $0 {start|stop|restart|status|condrestart}"
RETVAL=1
;;
esac
exit $RETVAL
==============================================
PROXY_PATH=/opt/mysql-proxy/bin //定义mysql-proxy服务二进制文件路径
PROXY_OPTIONS="--admin-username=root \ //定义内部管理服务器账号
--admin-password=password \ //定义内部管理服务器密码
--proxy-read-only-backend-addresses=192.168.10.131:3306 \ //定义后端只读从服务器地址
--proxy-backend-addresses=192.168.10.130:3306 \ //定义后端主服务器地址
--admin-lua-script=/opt/mysql-proxy/lib/mysql-proxy/lua/admin.lua \ //定义lua管理脚本路径
--proxy-lua-script=/opt/mysql-proxy/scripts/rw-splitting.lua" \ //定义lua读写分离脚本路径
PROXY_PID=/opt/mysql-proxy/run/mysql-proxy.pid //定义mysql-proxy PID文件路径
$NICELEVEL $PROXY_PATH/mysql-proxy $PROXY_OPTIONS \
--daemon \ //定义以守护进程模式启动
--keepalive \ //使进程在异常关闭后能够自动恢复
--pid-file=$PROXY_PID \ //定义mysql-proxy PID文件路径
--user=mysql \ //以mysql用户身份启动服务
--log-level=warning \ //定义log日志级别，由高到低分别有(error|warning|info|message|debug)
--log-file=/opt/mysql-proxy/log/mysql-proxy.log //定义log日志文件路径
==============================================cp mysql-proxy /opt/mysql-proxy/init.d/ chmod +x /opt/mysql-proxy/init.d/mysql-proxy mkdir /opt/mysql-proxy/run mkdir /opt/mysql-proxy/log mkdir /opt/mysql-proxy/scripts
3、配置并使用rw-splitting.lua读写分离脚本
cd /opt/install
wget http://mysql.cdpa.nsysu.edu.tw/Downloads/MySQL-Proxy/mysql-proxy-0.8.1.tar.gz
tar xzvf mysql-proxy-0.8.1.tar.gz
cd mysql-proxy-0.8.1
cp lib/rw-splitting.lua /opt/mysql-proxy/scripts
修改读写分离脚本rw-splitting.lua
修改默认连接，进行快速测试，不修改的话要达到连接数为4时才启用读写分离
vim /opt/mysql-proxy/scripts/rw-splitting.lua
=============================
-- connection pool
if not proxy.global.config.rwsplit then
proxy.global.config.rwsplit = {
min_idle_connections = 1, //默认为4
max_idle_connections = 1, //默认为8
is_debug = false
}
end
=============================
修改完成后，启动mysql-proxy
/opt/mysql-proxy/init.d/mysql-proxy start4、测试读写分离效果
###创建用于读写分离的数据库连接用户 ###登陆主数据库服务器192.168.10.130，通过命令行登录管理MySQL服务器 /opt/mysql/bin/mysql -uroot -p'new-password' mysql> GRANT ALL ON *.* TO 'proxy1'@'192.168.10.132' IDENTIFIED BY 'password'; ###由于我们配置了主从复制功能，因此从数据库服务器192.168.10.131上已经同步了此操作。 ###为了清晰的看到读写分离的效果，需要暂时关闭MySQL主从复制功能 ###登陆从数据库服务器192.168.10.131，通过命令行登录管理MySQL服务器 /opt/mysql/bin/mysql -uroot -p'new-password' ###关闭Slave同步进程 mysql> stop slave; Query OK, 0 rows affected (0.00 sec) ###连接MySQL-Proxy /opt/mysql/bin/mysql -uproxy1 -p'password' -P4040 -h192.168.10.132 ###登陆成功后，在first_db数据的first_tb表中插入两条记录 mysql> use first_db; Database changed mysql> insert into first_tb values (007,’first’); Query Ok, 1 row affected (0.00 sec) mysql> insert into first_tb values (110,’second’); Query Ok, 1 row affected (0.00 sec) ###查询记录 mysql> select * from first_tb; ============================= +------+------+ | id | name | +------+------+ | 1 | myself | +------+------+ 1 rows in set (0.00 sec) ============================= ###通过读操作并没有看到新记录 mysql> quit 退出MySQL-Proxy ###下面，分别登陆到主从数据库服务器，对比记录信息 ###首先，检查主数据库服务器 mysql> select * from first_tb; ============================= +------+------+ | id | name | +------+------+ | 1 | myself | +------+------+ | 007 | first | +------+------+ | 110 | second | +------+------+ 3 rows in set (0.00 sec) ============================= ###两条新记录都已经存在 ###然后，检查从数据库服务器 mysql> select * from first_tb; ============================= +------+------+ | id | name | +------+------+ | 1 | myself | +------+------+ 1 rows in set (0.00 sec) ============================= ###没有新记录存在
由此，实现了mysql读写分离。目前所有的写操作都全部在Master主服务器上，用来避免数据的不同步；
另外，所有的读操作都分摊给了其它各个Slave从服务器上，用来分担数据库压力。