Mysql主从同步读写分离

一．概述

Amoeba是一个以MySQL为底层数据存储，并对应用提供MySQL协议接口的proxy。它集中地响应应用的请求，依据用户事先设置的规则，将SQL请求发送到特定的数据库上执行。基于此可以实现负载均衡、读写分离、高可用性等需求。与MySQL官方的MySQL Proxy相比，作者强调的是amoeba配置的方便（基于XML的配置文件，用SQLJEP语法书写规则，比基于lua脚本的MySQL Proxy简单）。

二. 实验目的

实际的生产环境中，由单台Mysql作为独立的数据库是完全不能满足实际需求的，无论是在安全性，高可用性以及高并发等各个方面。通过主从同步（Master-Slave）的方式来同步数据，再通过读写分离（amobe）来提升数据库的并发负载能力。

部署MySQL主从同步与读写分离，同时可以使我们真正的了解其内部工作原理，更好的认识安畅云数据库，快速定位故障并及时解决，为客户提供更专业的IT服务。

三．试验环境

设备名称	管理IP	操作系统	用途
Slave1	172.16.200.82	Centos 6.5 64bit	Mysql5.1.73
Slave2	172.16.200.80	Centos 6.5 64bit	Mysql5.1.73
amoeba-mysql-master	172.16.200.81	Centos 6.5 64bit	Amobe 3.0.5 Mysql5.1.73

初始配置：关闭防火墙或将3306与8066添加例外，关闭Selinux。

四. 方案说明

本方案为利用amobe实现mysql数据库读写分离，提升数据库并发负载能力，同时配置mysql主从同步，增加数据库安全性和高可用性能。

五．Mysql主从同步配置

1. 安装与初始化数据库

主从服务器均安装MySQL，并设置开机自启动。

Yum install mysql mysql-devel mysql-server

/etc/init.d/mysqld start

Chkcofig mysqld on

分别设置MySQL数据库密码为123.com

mysqladmin -u root password "123.com"

注：

所有机器的MySQL数据库密码要相同，amoeba配置要求。

2. 主从服务器均授予MySQL远程登录权限。

mysql> grant all privileges on *.* to root@"172.16.200.%" identified by "123.com";

mysql> flush privileges;

注：

我这里为配置简单，将root用户开启远程登录，在生产环境中建议新建MySQL用户并设置相关的登录权限。例如：限制源IP，允许访问的库文件等。

3. 主从同步配置

(1). 在amoeba-mysql-master上创建数据库文件

六．Amoeba读写分离配置

1. Amoeba下载安装

登陆amoeba官网下载相应的版本https://sourceforge.net/projects/amoeba/files/，我这里下载的是amoeba-mysql-3.0.5-RC-distribution.zip。

将下载好的amoeba解压至相应的目录并修改相应的名称，我这里讲amoeba解压到了当前用户目录下，并更名为amoeba-mysql-3.0.5-RC，

至此amoeba安装完成，后面根据需要进行配置文件修改即可。

2. 安装Java

因为amoeba为java语言开发，所以需要安装jdk运行环境。我们使用yum安装jdk1.6

yum list available java* （查看java安装包）

yum install java-1.6.0-openjdk（这里安装java1.6）

配置环境变量：

java路径为/usr/bin/java, 编辑amoeba bin/下的启动程序launcher（3.0以上版本）或者amoeba（3.0以下版本）添加如下变量JAVA_HOME=/usr。

3. 修改amoeba的配置文件amoeba.xml和dbServers.xml的配置。

(1). 修改后的amoeba.xml的配置文件如下：

<?xml version="1.0" encoding="gbk"?>

<!DOCTYPE amoeba:configuration SYSTEM "amoeba.dtd">

<amoeba:configuration xmlns:amoeba="http://amoeba.meidusa.com/">

<proxy>

<property name="port">8066</property> #服务端口

<property name="ipAddress">172.16.200.81</property> #主机地址(amoeba)

</bean>

</property>

<property name="user">root</property> #(amoeba的用户名)

<property name="password">root</property> #(amoeba的密码)

<property name="ipFile">${amoeba.home}/conf/access_list.conf</property>

</bean>

</property>

</bean>

</property>

</service>

</runtime>

</proxy>

<!--

Each ConnectionManager will start as thread

manager responsible for the Connection IO read , Death Detection

-->

<property name="subManagerClassName">com.meidusa.toolkit.net.AuthingableConnectionManager</property>

</connectionManager>

</connectionManagerList>

<property name="configFile">${amoeba.home}/conf/dbServers.xml</property>

</dbServerLoader>

<property name="ruleFile">${amoeba.home}/conf/rule.xml</property>

<property name="functionFile">${amoeba.home}/conf/ruleFunctionMap.xml</property>

</bean>

</property>

<property name="sqlFunctionFile">${amoeba.home}/conf/functionMap.xml</property>

<property name="defaultPool">write</property>

<property name="writePool">write</property>

</queryRouter>

</amoeba:configuration>

注：对于amoeba.xml配置需要注意修改的地方，主要是管理IP地址和amoeba的服务管理方式截图如下：

确认池名称要与dbServer.xml中的名称相同

(2). 修改后的dbServers.xml的配置文件如下：

<?xml version="1.0" encoding="gbk"?>

<!DOCTYPE amoeba:dbServers SYSTEM "dbserver.dtd">

<amoeba:dbServers xmlns:amoeba="http://amoeba.meidusa.com/">

<!--

Each dbServer needs to be configured into a Pool,

If you need to configure multiple dbServer with load balancing that can be simplified by the following configuration:

add attribute with name virtual = "true" in dbServer, but the configuration does not allow the element with name factoryConfig

such as 'multiPool' dbServer

-->

<factoryConfig

class="com.meidusa.amoeba.mysql.net.MysqlServerConnectionFactory">

<property name="connectionManager">${defaultManager}</property>

<property name="port">3306</property> #mysql服务端口

<property name="schema">master_test</property> #需要做读写分离的库文件

<property name="user">root</property> #MySQL用户名

<property name="password">123.com</property> #MySQL密码

</factoryConfig>

</poolConfig>

</dbServer>

<dbServer name="server1" parent="abstractServer"> #命令dbServer

<property name="ipAddress">172.16.200.81</property> #dbServer 管理IP(主)

</factoryConfig>

</dbServer>

<property name="ipAddress">172.16.200.82</property> #dbServer 管理IP(从)

</factoryConfig>

</dbServer>

<property name="ipAddress">172.16.200.80</property> #dbServer 管理IP(从)

</factoryConfig>

</dbServer>

<dbServer name="write" virtual="true"> #write是一个虚拟的数据库的写节点

<property name="poolNames">server1</property>

</poolConfig>

</dbServer>

<dbServer name="read" virtual="true"> #read是一个虚拟的数据库的读节点

<property name="poolNames">server3,server2</property> #负载轮询设置

</poolConfig>

</dbServer>

</amoeba:dbServers>

注：dbServers.xml需要的配置包括数据库的端口、用户名、密码、进行读写分离的库文件和读写地址池，已经轮询设置。

MySQL的主从服务器密码最好设置相同。

定义server1为master，server2和server3为slave

定义write为server1，read为server2、server3所在pool的数据库轮训规则，支持轮训、权重、HA，所在pool的数据库服务器，多台配置已”, ”隔开。server2，server3为轮训方式工作，默认从server1到server3，也可以重复添加比如server1,server2,server3，server3，这样server3在查询中被链接2次。写的服务器也可以不用添加到读的pool，这样就实现server1写，server2,3读。