MySQL 高可用：mysql+mycat實作資料庫分片（分庫分表）

什麼是MYCAT：

結合傳統資料庫和新型分布式資料倉庫的新一代企業級資料庫産品

一個新穎的資料庫中間件産品

 Mycat關鍵特性 ：

支援SQL92标準

遵守Mysql原生協定，跨語言，跨平台，跨資料庫的通用中間件代理。

基于心跳的自動故障切換，支援讀寫分離，支援MySQL主從，以及galera cluster叢集。

支援Galera for MySQL叢集，Percona Cluster或者MariaDB cluster

基于Nio實作，有效管理線程，高并發問題。

支援資料的多片自動路由與聚合，支援sum,count,max等常用的聚合函數,支援跨庫分頁。

支援單庫内部任意join，支援跨庫2表join，甚至基于caltlet的多表join。

支援通過全局表，ER關系的分片政策，實作了高效的多表join查詢。

支援多租戶方案。

支援分布式事務（弱xa）。

支援全局序列号，解決分布式下的主鍵生成問題。

分片規則豐富，插件化開發，易于擴充。

強大的web，指令行監控。

支援密碼加密

支援服務降級

支援IP白名單

支援SQL黑名單、sql注入攻擊攔截

支援分表（1.6）

叢集基于ZooKeeper管理，線上更新，擴容，智能優化，大資料處理（2.0開發版）。

JDK 下載下傳（建議要求jdk7及以上）：

<a href="http://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261.html" target="_blank">http://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261.html</a>

MyCAT 相關：

#測試環境：

# 有3張表 users,item,item_detail (item 的子表) 和 3 個資料庫 db01,db02,db03

# 表 users 存儲在資料庫 db01, 表 item 和 item_detail 分布存儲在資料 db01 和 db02 

# 現在在3個資料庫都建立相同的表

create database db01;  

create database db02;  

create database db03;  

CREATE TABLE users (  

    id INT NOT NULL AUTO_INCREMENT,  

    name varchar(50) NOT NULL default '',  

    indate DATETIME NOT NULL default '0000-00-00 00:00:00',  

    PRIMARY KEY (id)  

)AUTO_INCREMENT= 1 ENGINE=InnoDB DEFAULT CHARSET=utf8;  

CREATE TABLE item (  

    value INT NOT NULL default 0,  

CREATE TABLE item_detail (  

    item_id INT NOT NULL,  

    PRIMARY KEY (id),  

    key (item_id)  

# JDK 安裝配置

cd /usr/local/src  

tar xvf jdk-7u80-linux-i586.tar.gz  

mkdir -p /usr/local/java  

mv /usr/local/src/jdk1.7.0_80 /usr/local/java/  

chown -R root:root /usr/local/java  

cd /usr/local/java/  

#配置環境變量

vi /etc/profile   

vi ~/.bash_profile  

export JAVA_HOME=/usr/local/java/jdk1.7.0_80  

export PATH=$PATH:$JAVA_HOME/bin  

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar  

#設定生效（最好重新開機系統）

source /etc/profile  

source ~/.bash_profile  

#測試是否安裝成功

[root@server1 ~]# java -version  

java version "1.7.0_80"  

Java(TM) SE Runtime Environment (build 1.7.0_80-b15)  

Java HotSpot(TM) Client VM (build 24.80-b11, mixed mode)  

# Mycat 安裝配置

tar xvf Mycat-server-1.5.1-RELEASE-20160405120037-linux.tar.gz   

mv /usr/local/src/mycat /usr/local/  

groupadd mycat  

useradd -g mycat mycat  

passwd mycat  

chown -R mycat.mycat /usr/local/mycat  

#添加環境變量

vi /etc/profile  

export MYCAT_HOME=/usr/local/mycat  

#伺服器名和IP綁定

vi /etc/hosts  

192.168.100.50  server1  

127.0.0.1       server1  

# 設定 wrapper.java.command 的java 路徑

vi /usr/local/mycat/conf/wrapper.conf  

wrapper.java.command=%JAVA_HOME%/bin/java  

#配置 server.xml 和 schema.xml  (本案例配置資訊在文章底部)

vi /usr/local/mycat/conf/server.xml  

vi /usr/local/mycat/conf/schema.xml  

#啟動mycat服務 ./mycat { console | start | stop | restart | status | dump }

/usr/local/mycat/bin/mycat console  

#mycat 程序  

ps -ef | grep mycat  

#日子資訊  

tail -20 /usr/local/mycat/logs/wrapper.log  

測試：

#通路 mycat   (憑據參考 /usr/local/mycat/conf/server.xml)

mysql -utest -ptest -h127.0.0.1 -P8066 -DTESTDB  

mysql&gt; show databases;  

+----------+  

| DATABASE |  

| TESTDB   |   

mysql&gt; show tables;  

+------------------+  

| Tables in TESTDB |  

| item             |   

| item_detail      |   

| users            |   

#在 mycat 中插入資料并查詢：

insert into users(name,indate) values('kk',now());  

insert into item(id,value,indate) values(1,100,now());  

insert into item_detail(value,name,item_id) values('pad',40,1);  

insert into item_detail(value,name,item_id) values('phone',50,1);  

insert into item(id,value,indate) values(999,100,now());  

insert into item_detail(value,name,item_id) values('pad',40,999);  

insert into item_detail(value,name,item_id) values('phone',50,999);  

mysql&gt; select * from users;  

+----+------+---------------------+  

| id | name | indate              |  

|  1 | kk   | 2016-04-13 06:28:00 |   

mysql&gt; select * from item;  

+-----+-------+---------------------+  

| id  | value | indate              |  

| 999 |   100 | 2016-04-13 06:34:12 |   

|   1 |   100 | 2016-04-13 06:32:58 |   

mysql&gt; select * from item_detail;  

+----+-------+------+---------+  

| id | value | name | item_id |  

|  1 |     0 | 40   |     999 |   

|  2 |     0 | 50   |     999 |   

|  1 |     0 | 40   |       1 |   

|  2 |     0 | 50   |       1 |   

#打開另一個終端，使用mysql賬号登陸通路檢視表情況

mysql -uroot -ptest -p  

#具體的表資料存儲情況：

-----------------------------------------  

mysql&gt; select * from db01.users;  

mysql&gt; select * from db02.users;  

mysql&gt; select * from db03.users;  

mysql&gt; select * from db01.item;  

mysql&gt; select * from db02.item;  

mysql&gt; select * from db03.item;  

+----+-------+---------------------+  

| id | value | indate              |  

|  1 |   100 | 2016-04-13 06:32:58 |   

mysql&gt; select * from db01.item_detail;  

mysql&gt; select * from db02.item_detail;  

mysql&gt; select * from db03.item_detail;  

測試完成！！~資料進行了分庫分表！

------------------------------------------------------------------------------------

# server.xml 和 schema.xml 配置情況

# vi /usr/local/mycat/conf/server.xml  

&lt;?xml version="1.0" encoding="UTF-8"?&gt;  

&lt;!DOCTYPE mycat:server SYSTEM "server.dtd"&gt;  

&lt;mycat:server xmlns:mycat="http://org.opencloudb/"&gt;  

        &lt;system&gt;  

            &lt;!--   

                &lt;property name="processors"&gt;32&lt;/property&gt;  

                &lt;property name="processorExecutor"&gt;32&lt;/property&gt;   

                &lt;property name="bindIp"&gt;0.0.0.0&lt;/property&gt;   

                &lt;property name="frontWriteQueueSize"&gt;4096&lt;/property&gt;  

                &lt;property name="idleTimeout"&gt;300000&lt;/property&gt;  

                &lt;property name="mutiNodePatchSize"&gt;100&lt;/property&gt;  

            --&gt;  

                &lt;property name="defaultSqlParser"&gt;druidparser&lt;/property&gt;  

                &lt;property name="mutiNodeLimitType"&gt;1&lt;/property&gt;  

                &lt;property name="serverPort"&gt;8066&lt;/property&gt;  

                &lt;property name="managerPort"&gt;9066&lt;/property&gt;   

        &lt;/system&gt;  

        &lt;!-- 任意設定登陸 mycat 的使用者名,密碼,資料庫  --&gt;  

        &lt;user name="test"&gt;  

                &lt;property name="password"&gt;test&lt;/property&gt;  

                &lt;property name="schemas"&gt;TESTDB&lt;/property&gt;  

        &lt;/user&gt;  

        &lt;user name="user"&gt;  

                &lt;property name="password"&gt;user&lt;/property&gt;  

                &lt;property name="readOnly"&gt;true&lt;/property&gt;  

        &lt;!--   

        &lt;quarantine&gt;   

           &lt;whitehost&gt;  

              &lt;host host="127.0.0.1" user="mycat"/&gt;  

              &lt;host host="127.0.0.2" user="mycat"/&gt;  

           &lt;/whitehost&gt;  

       &lt;blacklist check="false"&gt;&lt;/blacklist&gt;  

        &lt;/quarantine&gt;  

        --&gt;  

&lt;/mycat:server&gt;  

# vi /usr/local/mycat/conf/schema.xml  

&lt;?xml version="1.0"?&gt;  

&lt;!DOCTYPE mycat:schema SYSTEM "schema.dtd"&gt;  

&lt;mycat:schema xmlns:mycat="http://org.opencloudb/"&gt;  

    &lt;!-- 設定表的存儲方式.schema name="TESTDB" 與 server.xml中的 TESTDB 設定一緻  --&gt;  

    &lt;schema name="TESTDB" checkSQLschema="false" sqlMaxLimit="100"&gt;  

        &lt;table name="users" primaryKey="id" type="global" dataNode="node_db01" /&gt;  

        &lt;table name="item" primaryKey="id" dataNode="node_db02,node_db03" rule="mod-long"&gt;  

                &lt;childTable name="item_detail" primaryKey="id" joinKey="item_id" parentKey="id" /&gt;  

        &lt;/table&gt;  

    &lt;/schema&gt;  

    &lt;!-- 設定dataNode 對應的資料庫,及 mycat 連接配接的位址dataHost --&gt;  

    &lt;dataNode name="node_db01" dataHost="dataHost01" database="db01" /&gt;  

    &lt;dataNode name="node_db02" dataHost="dataHost01" database="db02" /&gt;  

    &lt;dataNode name="node_db03" dataHost="dataHost01" database="db03" /&gt;  

    &lt;!-- mycat 邏輯主機dataHost對應的實體主機.其中也設定對應的mysql登陸資訊 --&gt;  

    &lt;dataHost name="dataHost01" maxCon="1000" minCon="10" balance="0" writeType="0" dbType="mysql" dbDriver="native"&gt;  

            &lt;heartbeat&gt;select user()&lt;/heartbeat&gt;  

            &lt;writeHost host="server1" url="127.0.0.1:3306" user="root" password="mysql"/&gt;  

    &lt;/dataHost&gt;  

&lt;/mycat:schema&gt;  

本文轉自 liqius 51CTO部落格，原文連結：http://blog.51cto.com/szgb17/1911140，如需轉載請自行聯系原作者