03_MyCat在MySQL主從復(fù)制基礎(chǔ)上實(shí)現(xiàn)讀寫分離

環(huán)境

  • 主節(jié)點(diǎn)
    操作系統(tǒng): CentOS-6.6-x86_64
    JDK 版本: jdk1.7.0_45
    MySQL 版本: mysql-5.6.26.tar.gz
    IP: 192.168.175.200
    主機(jī)名: huachao

  • 從節(jié)點(diǎn)
    操作系統(tǒng): CentOS-6.6-x86_64
    JDK 版本: jdk1.7.0_45
    MySQL 版本: mysql-5.6.26.tar.gz
    IP: 192.168.175.201
    主機(jī)名: mini1

  • mycat節(jié)點(diǎn)
    操作系統(tǒng): CentOS-6.6-x86_64
    MyCat 版本: Mycat-server-1.4-release-20151019230038-linux.tar.gz
    JDK 版本: jdk1.7.0_45
    IP: 192.168.175.202
    主機(jī)名: mini2

MyCat 介紹

  • MyCat 官網(wǎng)
    MyCat 的讀寫分離是基于后端 MySQL 集群的主從同步來實(shí)現(xiàn)的, 而 MyCat 提供語句的分發(fā)功能。 MyCat1.4 開始支持 MySQL 主從復(fù)制狀態(tài)綁定的讀寫分離機(jī)制,讓讀更加安全可靠。

MyCat 的安裝

  1. 設(shè)置 MyCat 的主機(jī)名和 IP 與主機(jī)名的映射
# vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=mini2
# vi /etc/hosts
127.0.0.1 huachao
192.168.175.200 huachao
192.168.175.201 mini1
192.168.175.202 mini2
  1. 因?yàn)?MyCat 是用 Java 開發(fā)的,因此 MyCat 運(yùn)行需要安裝 JDK(準(zhǔn)確來說是 JRE 就夠了),并且需要 JDK1.7 或以上版本

  2. 創(chuàng)建 mycat 用戶并設(shè)置密碼(可選操作)

# useradd mycat
# passwd mycat
  1. 上傳安裝包 Mycat-server-1.4-release-20151019230038-linux.tar.gz 到 MyCat 服務(wù)器中的/home/mycat 目錄,并解壓并移動到 /usr/local/mycat 目錄
$ tar -zxvf Mycat-server-1.4-release-20151019230038-linux.tar.gz
$ su root
Password:
# mv /home/mycat/mycat /usr/local/
# cd /usr/local/mycat/
# ll
  1. 設(shè)置 MyCat 的環(huán)境變量(可選操作)
# vi /etc/profile
## mycat env
export MYCAT_HOME=/usr/local/mycat
export PATH=$PATH:$MYCAT_HOME/bin
# source /etc/profile

配置 MyCat

  1. 在配置 MyCat 前,請確認(rèn) MySQL 的主從復(fù)制安裝配置已完成并正常運(yùn)行。 MySQL 主從數(shù)據(jù)的同步在 MySQL 中配置, MyCat 不負(fù)責(zé)數(shù)據(jù)同步的問題。
    補(bǔ)充:
    ??(1) MySQL 主從復(fù)制配置中,如果涉及到函數(shù)或存儲過程的同步復(fù)制,需要在/etc/my.cnf 中的[mysqld]段中增加配置 log_bin_trust_function_creators=true 或在客戶端中設(shè)置 set global log_bin_trust_function_creators = 1;
    ??(2) 如果要做讀寫分離下的主從切換, 那么從節(jié)點(diǎn)也有可能會變?yōu)閷懝?jié)點(diǎn),因此從節(jié)點(diǎn)就不能設(shè)置為只讀 read_only=1 。
    ??(3) Linux 版本的 MySQL,需要設(shè)置為 MySQL 大小寫不敏感,否則可能會發(fā)生找不到表的問題。 可在/etc/my.cnf 的[mysqld]段中增加 lower_case_table_names=1

  2. 配置 MyCat 的 schema.xml
    schema.xml 是 MyCat 最重要的配置文件之一, 用于設(shè)置 MyCat 的邏輯庫、表、數(shù)據(jù)節(jié)點(diǎn)、dataHost 等內(nèi)容,

[mycat@edu-mycat-01 conf]$ cd /usr/local/mycat/conf/
[mycat@edu-mycat-01 conf]$ vi schema.xml
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://org.opencloudb/">
    
    <!-- 定義MyCat的邏輯庫 -->
    <!-- schema name="rc_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn1"></schema -->
    <!-- schema name="pay_schema1" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn1"></schema -->
    <schema name="rc_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="rc_dn2"></schema>
    <schema name="pay_schema2" checkSQLschema="false" sqlMaxLimit="100" dataNode="pay_dn2"></schema>

    <!-- 定義MyCat的數(shù)據(jù)節(jié)點(diǎn) -->
    <!-- dataNode name="rc_dn1" dataHost="dtHost1" database="roncoo" / -->
    <!-- dataNode name="pay_dn1" dataHost="dtHost1" database="edu_simple_pay" / -->
    <dataNode name="rc_dn2" dataHost="dtHost2" database="huachao" />
    <dataNode name="pay_dn2" dataHost="dtHost2" database="ron" />

    <!-- 注意:schema中的每一個dataHost中的host屬性值必須唯一,否則會出現(xiàn)主從在所有dataHost中全部切換的現(xiàn)象。 -->
    <!-- 定義數(shù)據(jù)主機(jī)dtHost1,只連接到MySQL讀寫分離集群中的Master節(jié)點(diǎn),不使用MyCat托管MySQL主從切換 -->
    <!--
    <dataHost name="dtHost1" maxCon="500" minCon="20" balance="0"
        writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
        <heartbeat>select user()</heartbeat>
        <writeHost host="hostM1" url="192.168.1.205:3306" user="root" password="www.roncoo.com" />
    </dataHost>
    -->

    <!-- 使用MyCat托管MySQL主從切換 -->
    <!-- 定義數(shù)據(jù)主機(jī)dtHost2,連接到MySQL讀寫分離集群,并配置了讀寫分離和主從切換 -->
    <dataHost name="dtHost2" maxCon="500" minCon="20" balance="1"
        writeType="0" dbType="mysql" dbDriver="native" switchType="2" slaveThreshold="100">
        <!-- 通過show slave status檢測主從狀態(tài),當(dāng)主宕機(jī)以后,發(fā)生切換,從變?yōu)橹?,原來的主變?yōu)閺模@時候show slave 
            status就會發(fā)生錯誤,因?yàn)樵瓉淼闹鳑]有開啟slave,不建議直接使用switch操作,而是在DB中做主從對調(diào)。 -->
        <heartbeat>show slave status</heartbeat>
        <!-- can have multi write hosts -->
        <writeHost host="hostM2" url="192.168.175.200:3306" user="root" password="huachao" />
        <writeHost host="hostS2" url="192.168.175.201:3306" user="root" password="huachao" />
    </dataHost>
    <!-- 參數(shù)balance決定了哪些MySQL服務(wù)器參與到讀SQL的負(fù)載均衡中 -->
    <!-- balance="0",為不開啟讀寫分離,所有讀操作都發(fā)送到當(dāng)前可用的writeHost上-->
    <!-- balance="1",全部的readHost與stand by writeHost參與select語句的負(fù)載均衡-->
    <!-- balance="2",所有讀操作都隨機(jī)的在writeHost、readHost上分發(fā)-->
    <!-- MyCat1.4版本中,若想支持MySQL一主一從的標(biāo)準(zhǔn)配置,并且在主節(jié)點(diǎn)宕機(jī)的情況下,從節(jié)點(diǎn)還能讀取數(shù)據(jù),
         則需要在MyCat里配置為兩個writeHost并設(shè)置balance="1" -->
    <!-- writeType="0",所有寫操作發(fā)送到配置的第一個writeHost,第一個掛了切到還生存的第二個writeHost-->
    <!-- writeType="1",僅僅對于galera for mysql集群這種多主多節(jié)點(diǎn)都能寫入的集群起效,此時Mycat會隨機(jī)選擇一個writeHost并寫入數(shù)據(jù),
         對于非galera for mysql集群,請不要配置writeType=1,會導(dǎo)致數(shù)據(jù)庫不一致的嚴(yán)重問題 -->

</mycat:schema>

MyCat1.4 開始支持 MySQL 主從復(fù)制狀態(tài)綁定的讀寫分離機(jī)制,讓讀更加安全可靠,配置如下:
MyCat 心跳檢查語句配置為 show slave status , dataHost 上定義兩個新屬性: switchType="2"slaveThreshold="100",此時意味著開啟 MySQL 主從復(fù)制狀態(tài)綁定的讀寫分離與切換機(jī)制, MyCat 心跳機(jī)制通過檢測 show slave status 中的"Seconds_Behind_Master", "Slave_IO_Running", "Slave_SQL_Running" 三 個 字 段 來 確 定 當(dāng) 前 主 從 同 步 的 狀 態(tài) 以 及Seconds_Behind_Master 主從復(fù)制時延,當(dāng) Seconds_Behind_Master 大于slaveThreshold時,讀寫分離篩選器會過濾掉此 Slave機(jī)器,防止讀到很久之前的舊數(shù)據(jù),而當(dāng)主節(jié)點(diǎn)宕機(jī)后,切換邏輯會檢查 Slave 上的 Seconds_Behind_Master 是否為 0,為 0 時則表示主從同步,可以安全切換,否則不會切換。

  1. 配置 server.xml
    server.xml 主要用于設(shè)置系統(tǒng)變量、 管理用戶、設(shè)置用戶權(quán)限等。
[wusc@edu-mycat-01 conf]$ vi server.xml
<?xml version="1.0" encoding="UTF-8"?>
<!-- - - Licensed under the Apache License, Version 2.0 (the "License"); 
    - you may not use this file except in compliance with the License. - You 
    may obtain a copy of the License at - - http://www.apache.org/licenses/LICENSE-2.0 
    - - Unless required by applicable law or agreed to in writing, software - 
    distributed under the License is distributed on an "AS IS" BASIS, - WITHOUT 
    WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. - See the 
    License for the specific language governing permissions and - limitations 
    under the License. -->
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
    <system>
    <property name="defaultSqlParser">druidparser</property>
    <property name="charset">utf8mb4</property>
      <!--  <property name="useCompression">1</property>--> <!--1為開啟mysql壓縮協(xié)議-->
    <!-- <property name="processorBufferChunk">40960</property> -->
    <!-- 
    <property name="processors">1</property> 
    <property name="processorExecutor">32</property> 
     -->
        <!--默認(rèn)是65535 64K 用于sql解析時最大文本長度 -->
        <!--<property name="maxStringLiteralLength">65535</property>-->
        <!--<property name="sequnceHandlerType">0</property>-->
        <!--<property name="backSocketNoDelay">1</property>-->
        <!--<property name="frontSocketNoDelay">1</property>-->
        <!--<property name="processorExecutor">16</property>-->
        <!-- 
            <property name="mutiNodeLimitType">1</property> 0:開啟小數(shù)量級(默認(rèn)) ;1:開啟億級數(shù)據(jù)排序
            <property name="mutiNodePatchSize">100</property> 億級數(shù)量排序批量
            <property name="processors">32</property> <property name="processorExecutor">32</property> 
            <property name="serverPort">8066</property> <property name="managerPort">9066</property> 
            <property name="idleTimeout">300000</property> <property name="bindIp">0.0.0.0</property> 
            <property name="frontWriteQueueSize">4096</property> <property name="processors">32</property> -->
    </system>

    <!-- 用戶1,對應(yīng)的MyCat邏輯庫連接到的數(shù)據(jù)節(jié)點(diǎn)對應(yīng)的主機(jī)為MySQL主從復(fù)制配置中的Master節(jié)點(diǎn),
         沒實(shí)現(xiàn)讀寫分離,讀寫都在該Master節(jié)點(diǎn)中進(jìn)行  -->
    <!--
    <user name="user1">
        <property name="password">roncoo.1</property>
        <property name="schemas">rc_schema1,pay_schema1</property>
    </user>
    -->
                            
    <!-- 用戶2,對應(yīng)的MyCat邏輯庫連接到的數(shù)據(jù)節(jié)點(diǎn)對應(yīng)的主機(jī)為主從復(fù)制集群,并通過MyCat實(shí)現(xiàn)了讀寫分離 -->
    <user name="user2">
        <property name="password">huachao.2</property>
        <property name="schemas">rc_schema2,pay_schema2</property>
    </user>
                            
    <!-- 用戶3,只讀權(quán)限-->
    <user name="user3">
        <property name="password">huachao.3</property>
        <property name="schemas">rc_schema2,pay_schema2</property>
        <property name="readOnly">true</property>
    </user>

</mycat:server>
  1. 防火墻中打開 8066 和 9066 端口
    MyCat 的默認(rèn)數(shù)據(jù)端口為 8066, mycat 通過這個端口接收數(shù)據(jù)庫客戶端的訪問請求。管理端口為 9066, 用來接收 mycat 監(jiān)控命令、查詢 mycat 運(yùn)行狀況、重新加載配置文件等。
[root@edu-mycat-01 mycat]# vi /etc/sysconfig/iptables

增加:

## MyCat
-A INPUT -m state --state NEW -m tcp -p tcp --dport 8066 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 9066 -j ACCEPT

重啟防火墻:

[root@edu-mycat-01 mycat]# service iptables restart
  1. 修改 log 日志級別為 debug,以便通過日志確認(rèn)基于 MyCat 的 MySQL 數(shù)據(jù)庫集群讀寫分離的數(shù)據(jù)操作狀態(tài)(可以在正式上生產(chǎn)前改成 info 級別)
[mycat@edu-mycat-01 conf]$ vi /usr/local/mycat/conf/log4j.xml
image.png
  1. 啟動 MyCat
[mycat@edu-mycat-01 bin]$ cd /usr/local/mycat/bin/

(1) 控制臺啟動, 這種啟動方式在控制臺關(guān)閉后, MyCat 服務(wù)也將關(guān)閉,適合調(diào)試使用:

[mycat@edu-mycat-01 bin]$ ./mycat console

(2) 可以采用以下后臺啟動的方式:

[mycat@edu-mycat-01 bin]$ ./mycat start
Starting Mycat-server...

(對應(yīng)的, 重啟: ./mycat restart , 關(guān)閉: ./mycat stop

MyCat 連接測試

(1) 如果本地 Windows 安裝有 MySQL, 可以使用已有的 mysql 客戶端遠(yuǎn)程操作 MyCat



(2) 如果為了方便,需要在 MyCat 主機(jī)上對 MyCat 進(jìn)行操作(把 MyCat 當(dāng)是本地 MySQL 來操作),可以在 MyCat 節(jié)點(diǎn)主機(jī)上安裝 MySQL 客戶端:

[mycat@edu-mycat-01 bin]$ su root
[root@edu-mycat-01 bin]# yum install mysql

使用安裝好的 mysql 客戶端登錄 MyCat

[mycat@edu-mycat-01 bin]$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066
[root@edu-mycat-01 mycat]# vi /etc/my.cnf

增加:

[client]
default-character-set=utf8

保存后再查詢,亂碼問題解決, 如下:


(3) 使用第三方 MySQL 管理客戶端連接 MyCat 測試( navicat 支持, MySQL-Front 兼容性不太好),以 navicat 為例:

讀寫分離測試

(1) 監(jiān)聽 MyCat 日志

[mycat@edu-mycat-01 ~]$ cd /usr/local/mycat/logs/
[mycat@edu-mycat-01 logs]$ tail -f mycat.log

(2) 讀測試

$ mysql -uuser2 -phuachao.2 -h192.168.175.202 -P8066

多次執(zhí)行 select * from edu_user 語句, MyCat 打印出來的日志信息顯示讀操作請求都是路由到 Slave 節(jié)點(diǎn)( 192.168.175.201)。

(2) 寫測試

mysql> insert into edu_user (userName, pwd) values('吳水成', 'roncoo.com');

多次執(zhí)行以上插入語句, 發(fā)現(xiàn)新增數(shù)據(jù)都是從 Master 節(jié)點(diǎn)( 192.168.175.200) 插進(jìn)入的,并且 Slave 節(jié)點(diǎn)通過 Binlog 同步了 Master 節(jié)點(diǎn)中的數(shù)據(jù)。


綜上,基于 MyCat 的讀寫分離集群配置成功。

參考文檔

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

友情鏈接更多精彩內(nèi)容