MySQL Router實現(xiàn)MySQL的讀寫分離的方法
MySQL Router是MySQL官方提供的一個輕量級MySQL中間件,用于取代以前老版本的SQL proxy。
既然MySQL Router是一個數(shù)據(jù)庫的中間件,那么MySQL Router必須能夠分析來自前面客戶端的SQL請求是寫請求還是讀請求,以便決定這個SQL請求是發(fā)送給master還是slave,以及發(fā)送給哪個master、哪個slave。這樣,MySQL Router就實現(xiàn)了MySQL的讀寫分離,對MySQL請求進行了負載均衡。
因此,MySQL Router的前提是后端實現(xiàn)了MySQL的主從復(fù)制。
MySQL Router很輕量級,只能通過不同的端口來實現(xiàn)簡單的讀/寫分離,且讀請求的調(diào)度算法只能使用默認的rr(round-robin),更多一點、更復(fù)雜一點的能力都不具備。所以,在實現(xiàn)MySQL Router時,需要自行配置好后端MySQL的高可用。高可用建議通過Percona XtraDB Cluster或MariaDB Galera或MySQL官方的group replication實現(xiàn),如果實在沒有選擇,還可以通過MHA實現(xiàn)。
所以,一個簡單的MySQL Router部署圖如下。
本文將使用MySQL Router分別實現(xiàn)后端無MySQL主從高可用情形的讀寫分離,至于為什么不實現(xiàn)后端有MySQL高可用的讀寫分離情形。在我看來,MySQL Router只是一個玩具,不僅功能少,而且需要在應(yīng)用程序代碼中指定讀/寫的不同端口(見后文關(guān)于配置文件的解釋),在實際環(huán)境中應(yīng)該沒人會這樣用。
2.配置MySQL Router以下是實驗環(huán)境。
角色名 主機IP MySQL版本 數(shù)據(jù)狀態(tài) MySQL Router 192.168.100.21 MySQL 5.7.22 無 master 192.168.100.22 MySQL 5.7.22 全新實例 slave1 192.168.100.23 MySQL 5.7.22 全新實例 slave2 192.168.100.24 MySQL 5.7.22 全新實例
因為后端MySQL主從復(fù)制沒有實現(xiàn)高可用,所以只有一個master節(jié)點負責(zé)寫操作。
所有后端MySQL節(jié)點都是剛安裝好的全新MySQL實例,所以直接開啟主從復(fù)制即可。如果是已有數(shù)據(jù)的主從復(fù)制,需要先保證它們已同步好,方法見:將slave恢復(fù)到master指定的坐標。
2.1 安裝MySQL Router二進制版MySQL Router下載地址:https://dev.mysql.com/downloads/router/rpm倉庫:http://repo.mysql.com/yum/mysql-tools-community/el/7/x86_64/
此處使用二進制版的MySQL Router 2.1.6。
tar xf mysqlrouter-2.1.6-linux-glibc2.12-x86-64bit.tar.gzmv mysqlrouter-2.1.6-linux-glibc2.12-x86-64bit /usr/local/mysqlrouter
這就完了,就這么簡單。
解壓二進制包后,解壓目錄下有以下幾個文件。
[root@s1 mr]# lsbin data include lib run share
bin目錄下只有一個二進制程序mysqlrouter,這也是MySQL Router的主程序。
share目錄下有示例配置文件和示例SysV風(fēng)格的啟動腳本,但是很不幸該腳本基于debian平臺,在redhat系列上需要修改和安裝一些東西才能使用。所以后文我自己寫了一個centos下的SysV腳本。
[root@s1 mr]# ls share/doc/mysqlrouter/License.txt README.txt sample_mysqlrouter.conf sample_mysqlrouter.init
最后,將主程序添加到PATH環(huán)境變量中。
echo 'PATH=$PATH:/usr/local/mysqlrouter/bin' >/etc/profile.d/mysqlrouter.shchmod +x /etc/profile.d/mysqlrouter.shsource /etc/profile.d/mysqlrouter.sh2.2 啟動并測試MySQL Router
以下是上述實驗環(huán)境的配置文件,這里只有一個master節(jié)點192.168.100.22:3306,如果有多個寫節(jié)點(master),則使用逗號分隔各節(jié)點。關(guān)于配置文件,后文會解釋。
[DEFAULT]config_folder = /etc/mysqlrouterlogging_folder = /usr/local/mysqlrouter/logruntime_folder = /var/run/mysqlrouter[logger]level = INFO[routing:slaves]bind_address = 192.168.100.21:7001destinations = 192.168.100.23:3306,192.168.100.24:3306mode = read-onlyconnect_timeout = 1[routing:masters]bind_address = 192.168.100.21:7002destinations = 192.168.100.22:3306mode = read-writeconnect_timeout = 2
然后在MySQL Router所在的機器上創(chuàng)建上面使用的目錄。
shell> mkdir /etc/mysqlrouter /usr/local/mysqlrouter/log /var/run/mysqlrouter
這樣就可以啟動MySQL Router來提供服務(wù)了(啟動之前,請確保后端MySQL已被配置好主從復(fù)制)。
[root@s1 mr]# mysqlrouter &[1] 16122
查看監(jiān)聽狀態(tài)。這里監(jiān)聽的兩個端口7001和7002是前端連接MySQL Router用的,它們用來接收前端發(fā)送的SQL請求,并按照讀、寫規(guī)則,將SQL請求路由到后端MySQL主從節(jié)點。
[root@s1 mr]# netstat -tnlpActive Internet connections (only servers)Proto Recv-Q Send-Q Local AddressForeign Address State PID/Program name tcp0 0 0.0.0.0:6032 0.0.0.0:*LISTEN 1231/proxysql tcp0 0 0.0.0.0:6033 0.0.0.0:*LISTEN 1231/proxysql tcp0 0 0.0.0.0:22 0.0.0.0:*LISTEN 1152/sshdtcp0 0 192.168.100.21:7001 0.0.0.0:*LISTEN 16122/mysqlroutertcp0 0 127.0.0.1:25 0.0.0.0:*LISTEN 2151/master tcp0 0 192.168.100.21:7002 0.0.0.0:*LISTEN 16122/mysqlroutertcp6 0 0 :::22:::* LISTEN 1152/sshdtcp6 0 0 ::1:25 :::* LISTEN 2151/master
查看日志:
[root@s1 mr]# cat /usr/local/mysqlrouter/log/mysqlrouter.log 2018-07-07 10:14:29 INFO [7f8a8e253700] [routing:slaves] started: listening on 192.168.100.21:7001; read-only2018-07-07 10:14:29 INFO [7f8a8ea54700] [routing:masters] started: listening on 192.168.100.21:7002; read-write
最后進行測試即可。測試前,先在后端Master上授權(quán)MySQL Router節(jié)點允許連接,它將會復(fù)制到兩個slave節(jié)點上。
mysql> grant all on *.* to root@’192.168.100.%’ identified by ’P@ssword1!’;
連上MySQL Router的7002端口,這個端口是負責(zé)寫的端口。由于沒有配置主從高可用,所以,簡單測試下是否能寫即可。
[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7002 -e ’select @@server_id;’mysql: [Warning] Using a password on the command line interface can be insecure.+-------------+| @@server_id |+-------------+| 110 |+-------------+[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7002 -e ’create database mytest;’mysql: [Warning] Using a password on the command line interface can be insecure.[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7002 -e ’show databases;’mysql: [Warning] Using a password on the command line interface can be insecure.+--------------------+| Database |+--------------------+| information_schema || mysql || mytest || performance_schema || sys|+--------------------+
再測試下各slave節(jié)點,是否能實現(xiàn)rr調(diào)度算法的讀請求的負載均衡。
[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7001 -e ’select @@server_id;’ mysql: [Warning] Using a password on the command line interface can be insecure.+-------------+| @@server_id |+-------------+| 120 |+-------------+[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7001 -e ’select @@server_id;’mysql: [Warning] Using a password on the command line interface can be insecure.+-------------+| @@server_id |+-------------+| 130 |+-------------+[root@s1 mr]# mysql -uroot -pP@ssword1! -h192.168.100.21 -P7001 -e ’show databases;’mysql: [Warning] Using a password on the command line interface can be insecure.+--------------------+| Database |+--------------------+| information_schema || mysql || mytest || performance_schema || sys|+--------------------+
顯然,測試的結(jié)果一切正常。
這樣看來MySQL Router好簡單,確實好簡單。只需提供一個合理的配置文件,一切都完成了。那么,下面解釋下MySQL Router的配置文件。
3.MySQL Router的配置文件解釋MySQL Router的配置文件也很簡單,需要配置的項不多。
mysql router默認會尋找安裝目錄下的'mysqlrouter.conf'和家目錄下的'.mysqlrouter.conf'。也可以在二進制程序mysqlrouter命令下使用'-c'或者'--config'手動指定配置文件。
MySQL router的配置文件是片段式的,常用的就3個片段:[DEFAULT]、[logger]、[routing:NAME]。片段名稱區(qū)分大小寫,且只支持單行'#'或';'注釋,不支持行中、行尾注釋。
以上面示例的配置文件為例。
[DEFAULT]config_folder = /etc/mysqlrouterlogging_folder = /usr/local/mysqlrouter/logruntime_folder = /var/run/mysqlrouter[logger]level = INFO[routing:slaves]bind_address = 192.168.100.21:7001destinations = 192.168.100.23:3306,192.168.100.24:3306mode = read-onlyconnect_timeout = 1[routing:masters]bind_address = 192.168.100.21:7002destinations = 192.168.100.22:3306mode = read-writeconnect_timeout = 21.DEFAULT片段的配置。
[DEFAULT]片段通常配置配置文件的目錄、日志的目錄、MySQL router運行時的目錄(如pid文件)。
例如:
[DEFAULT]config_folder=/etc/mysqlrouter # 指定額外的配置文件目錄,該目錄下的conf文件都會被加載logging_folder=/usr/local/mysqlrouter/log # 指定日志目錄,日志文件名為mysqlrouter.logruntime_folder=/var/run/mysqlrouter# 指定運行時目錄,默認為/run/mysqlrouter2.logger片段的配置。
[logger]片段只有一個選項,設(shè)置日志的記錄級別。
[logger]level=debug # 有debug、info(默認)、warning、error、fatal,不區(qū)分大小寫3.routing片段的配置。
[routing:NAME]是MySQL router主要部分,設(shè)置不同的路由實例,其中NAME可以隨意命名。如[routing:slaves]、[routing:masters]。
在routing配置片段,可以設(shè)置的選項包括:
(1).bind_address和bind_port
bind_address和bind_port是mysql router監(jiān)聽前端SQL請求的地址和端口。其中端口是MySQL Router要求強制提供的,但可以不用bind_port綁定,因為它可用通過bind_address的IP:PORT格式指定。一個routing規(guī)則中只能設(shè)置一個地址監(jiān)聽指令,但可以通過'0.0.0.0'來監(jiān)聽主機上所有的地址。如果沒有提供監(jiān)聽地址,則默認監(jiān)聽127.0.0.1。
另外,監(jiān)聽地址不能出現(xiàn)在destinations指令指定的列表中。
示例如下:
[routing:slaves]bind_port = 7001[routing:slaves]bind_address = 192.168.100.21bind_port = 7001[routing:slaves]bind_address = 192.168.100.21:7001
一般來說,通過不同端口實現(xiàn)讀/寫分離,并非好方法,最大的原因是需要在應(yīng)用程序代碼中指定這些連接端口。但是,MySQL Router只能通過這種方式實現(xiàn)讀寫分離,所以MySQL Router拿來當(dāng)玩具玩玩就好。
(2).destinations
定義routing規(guī)則的轉(zhuǎn)發(fā)目標,格式為HOST:PORT,HOST可以是IP也可以是主機名,多個轉(zhuǎn)發(fā)目標使用逗號分隔。如定義的目標列表是多個slave。
[routing:slaves]bind_address = 192.168.100.21:7001destinations = 192.168.100.23:3306,192.168.100.24:3306[routing:masters]bind_address = 192.168.100.21:7002destinations = 192.168.100.22:3306,192.168.100.100:3306
(3).mode
MySQL router提供兩種mode:read-only和read-write。這兩種方式會產(chǎn)生不同的轉(zhuǎn)發(fā)調(diào)度方式。
設(shè)置為read-write,常用于設(shè)置destinations為master時,實現(xiàn)master的高可用。
調(diào)度方式:當(dāng)MySQL router第一次收到客戶端請求時,會將請求轉(zhuǎn)發(fā)給destinations列表中的第一個目標,第二次收到客戶端請求還是會轉(zhuǎn)發(fā)給第一個目標,只有當(dāng)?shù)谝粋€目標聯(lián)系不上(如關(guān)閉了MySQL服務(wù)、宕機等)才會聯(lián)系第二個目標,如果所有目標都聯(lián)系不上,MySQL Router會中斷。這種調(diào)度方式被稱為'first-available'。 當(dāng)聯(lián)系上了某一個目標時,MySQL Router會將其緩存下來,下次收到請求還會繼續(xù)轉(zhuǎn)發(fā)給該目標。既然是緩存的目標,就意味著在MySQL Router重啟之后就會失效。 所以通過MySQL Router實現(xiàn)讀寫分離的寫時,可以設(shè)置多個master,讓性能好的master放在destinations列表的第一個位置,其他的master放在后面的位置作為備用master。設(shè)置為read-only,常用于設(shè)置destinations為slave時,實現(xiàn)MySQL讀請求負載均衡。
調(diào)度方式:當(dāng)MySQL route收到客戶端請求時,會從destinations列表中的第一個目標開始向后輪詢(round-robin),第一個請求轉(zhuǎn)發(fā)給第一個目標,第二個請求轉(zhuǎn)發(fā)給第二個目標,轉(zhuǎn)發(fā)給最后一個目標之后的下一個請求又轉(zhuǎn)發(fā)給第一個目標。如果第一個目標不可用,會依次向后檢查,直到目標可用,如果所有目標都不可用,則MySQL Router中斷。 那些不可用的目標會暫時被隔離,并且mysql router會不斷的檢查它們的狀況,當(dāng)重新可用時會重新加入到目標列表。(4).connect_timeout
MySQL Router聯(lián)系destinations的超時時間,默認為1秒,值的范圍為1-65536。應(yīng)該盡量設(shè)置值小點,免得等待時間過長。 對于read-write模式,可以將超時時間設(shè)置的稍長一點點,防止誤認為主master不可用而去聯(lián)系備master。 對于read-only模式,可以將超時時間設(shè)置的稍短一點點,因為這種模式下是destinations列表輪詢的,即使誤判了影響也不會太大。(5).其他選項
還能設(shè)置一些其他的指令,如使用的協(xié)議、最大請求數(shù)等,但是都可以不用設(shè)置使用默認值,它們都是MySQL Router結(jié)合MySQL優(yōu)化過的一些選項,本身已經(jīng)較完美了。
配置文件大概就這些內(nèi)容,配置好后,記得先創(chuàng)建default片段中涉及到的目錄。之后就可以啟動mysql router提供讀/寫分離服務(wù)了。
4.為MySQL Router提供SysV腳本MySQL Router只提供了一個主程序(bin目錄下的mysqlrouter),且該程序只能啟動,沒有停止選項,所以只能使用kill命令來殺掉進程。
MySQL Router也提供了示例啟動腳本,該腳本在位置為$basedir/share/doc/mysqlrouter/sample_mysqlrouter.init,但是該腳本是基于Debian平臺的,在CentOS上需要設(shè)置和安裝一些東西,所以不用它,自己寫個粗糙點的腳本即可。
shell> vim /etc/init.d/mysqlrouter#!/bin/bash# chkconfig: - 78 30# Description: Start / Stop MySQL RouterDAEMON=/usr/local/mysqlrouterproc=$DAEMON/bin/mysqlrouterDAEMON_OPTIONS='-c ${DAEMON}/mysqlrouter.conf'. /etc/init.d/functionsstart() { if [ -e /var/lock/subsys/mysqlrouter ]; thenaction 'MySQL Router is working' /bin/false else$proc $DAEMON_OPTIONS & &>/dev/nullretval=$?echo if [ $retval -eq 0 ]; then touch /var/lock/subsys/mysqlrouteraction 'Starting MySQL Router' /bin/trueelseecho 'Starting MySQL Router Failure'fi fi} stop() { if [ -e /var/lock/subsys/mysqlrouter ]; thenkillall $procretval=$?echoif [ $retval -eq 0 ]; then rm -f /var/lock/subsys/mysqlrouter action 'Stoping MySQL Router' /bin/truefi elseaction 'MySQL Router is not working' /bin/false fi}status() { if [ -e /var/lock/subsys/mysqlrouter ]; thenecho 'MySQL Router is running' elseecho 'MySQL Router is not running' fi}case '$1' in start)startsleep 1;; stop)stopsleep 1;; restart)stopstartsleep 1;; status)status;; *)echo 'Usage: $0 {start|stop|status|restart}'retval=1;;esacexit $retval
然后賦予執(zhí)行權(quán)限。
shell> chmod +x /etc/init.d/mysqlrouter
到此這篇關(guān)于MySQL Router實現(xiàn)MySQL的讀寫分離的方法的文章就介紹到這了,更多相關(guān)MySQL Router 讀寫分離內(nèi)容請搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!
相關(guān)文章:
1. MySql使用mysqldump 導(dǎo)入與導(dǎo)出方法總結(jié)2. Mysql InnoDB和MyISAM區(qū)別原理解析3. 快速解決mysql導(dǎo)出scv文件亂碼、躥行的問題4. SQLite3 命令行操作指南5. SqlServer 多種分頁方式 詳解(含簡單速度測試)6. Microsoft Office Access隱藏和顯示字段的方法7. MySQL5.7 mysqldump備份與恢復(fù)的實現(xiàn)8. Mybatis傳入List實現(xiàn)批量更新的示例代碼9. navicat for mysql導(dǎo)出數(shù)據(jù)庫的方法10. MySQL 數(shù)據(jù)丟失排查案例
