MySQL的使用中實(shí)現(xiàn)讀寫分離的教程
mysql-proxy實(shí)現(xiàn)讀寫分離
MySQL Proxy是一個(gè)處于你的client端和MySQL server端之間的簡(jiǎn)單程序,它可以監(jiān)測(cè)、分析或改變它們的通信。它使用靈活,沒(méi)有限制,常見(jiàn)的用途包括:負(fù)載平衡,故障、查詢分析,查詢過(guò)濾和修改等等。
MySQL Proxy就是這么一個(gè)中間層代理,簡(jiǎn)單的說(shuō),MySQL Proxy就是一個(gè)連接池,負(fù)責(zé)將前臺(tái)應(yīng)用的連接請(qǐng)求轉(zhuǎn)發(fā)給后臺(tái)的數(shù)據(jù)庫(kù),并且通過(guò)使用lua腳本,可以實(shí)現(xiàn)復(fù)雜的連接控制和過(guò)濾,從而實(shí)現(xiàn)讀寫分離和負(fù)載平衡。對(duì)于應(yīng)用來(lái)說(shuō),MySQL Proxy是完全透明的,應(yīng)用則只需要連接到MySQL Proxy的監(jiān)聽端口即可。當(dāng)然,這樣proxy機(jī)器可能成為單點(diǎn)失效,但完全可以使用多個(gè)proxy機(jī)器做為冗余,在應(yīng)用服務(wù)器的連接池配置中配置到多個(gè)proxy的連接參數(shù)即可。
MySQL Proxy更強(qiáng)大的一項(xiàng)功能是實(shí)現(xiàn)“讀寫分離”,基本原理是讓主數(shù)據(jù)庫(kù)處理事務(wù)性查詢,讓從庫(kù)處理SELECT查詢。數(shù)據(jù)庫(kù)復(fù)制被用來(lái)把事務(wù)性查詢導(dǎo)致的變更同步到集群中的從庫(kù)。
1、安裝mysql-proxy
此處下載安裝包http://ftp.ntu.edu.tw/pub/MySQL/Downloads/MySQL-Proxy/
如果是編譯安裝依賴包有 libevent2 1.x lua 5.1.x glibc2 2.6.0 pkg-config libtool 1.5
這里使用glibc的二進(jìn)制包解壓即可mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz
tar -zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy
2、創(chuàng)建好mysql主從復(fù)制
master 192.168.216.133:3306 slave 192.168.216.132:3306
3、配置mysql-proxy
創(chuàng)建mysql-proxy配置文件,配置文件中的所有選擇都不能加引號(hào)
vim /usr/local/mysql-proxy/mysql-proxy.conf
[mysql-proxy] daemon=true #以后臺(tái)守護(hù)進(jìn)程方式啟動(dòng) keepalive=true #當(dāng)進(jìn)程故障后自動(dòng)重啟 log-level=debug #設(shè)置日志級(jí)別為debug,可以在調(diào)試完成后改成info log-file=/var/log/mysql-proxy.log #設(shè)置日志文件路徑 basedir=/usr/local/mysql-proxy #設(shè)置mysql-proxy的家目錄 proxy-address=192.168.216.132:4040 #指定mysql-proxy的監(jiān)聽地址 proxy-backend-addresses=192.168.216.133:3306 #設(shè)置后臺(tái)主服務(wù)器 proxy-read-only-backend-addresses=192.168.216.132:3306 #設(shè)置后臺(tái)從服務(wù)器 proxy-lua-script=/usr/local/mysql-proxy/share/doc/mysql-proxy/rw-splitting.lua #設(shè)置讀寫分離腳本路徑 admin-address=192.168.216.132:4041 #設(shè)置mysql-proxy管理地址,需要家長(zhǎng)admin插件 admin-username=admin #設(shè)置登錄管理地址用戶 admin-password=admin #設(shè)置管理用戶密碼 admin-lua-script=/usr/local/mysql-proxy/share/doc/mysql-proxy/admin.lua #設(shè)置管理后臺(tái)lua腳本路徑,改腳本默認(rèn)沒(méi)有要自動(dòng)定義
配置完mysql-proxy.conf后需要確保該文件的權(quán)限是600,并確保包含個(gè)lua腳本
通過(guò)配置文件啟動(dòng)mysql-proxy
/usr/local/mysql-proxy/bin/mysql-proxy --plugins=proxy --plugins=admin --defaults-file=mysql-proxy.conf --plugins=proxy #指定proxy插件,該配置寫入配置文件無(wú)法啟動(dòng) --plugins=admin #指定admin插件 --defaults-file=mysql-proxy.conf #指定配置文件
4、啟動(dòng)測(cè)試
登錄管理地址查看當(dāng)前狀態(tài)
mysql -uadmin -padmin -h192.168.216.132 -P4041
兩個(gè)后端服務(wù)器當(dāng)前狀態(tài)為unknown是因?yàn)闆](méi)有用戶通過(guò)mysql-proxy連接到后端
mysql-proxy不對(duì)用戶做身份驗(yàn)證,而是下身份驗(yàn)證交予后端服務(wù)器進(jìn)行驗(yàn)證的,因此需要在后端服務(wù)器上對(duì)mysql-proxy開放權(quán)限
下面是自定義的admin.lua
function set_error(errmsg) proxy.response = { type = proxy.MYSQLD_PACKET_ERR, errmsg = errmsg or "error" } end function read_query(packet) if packet:byte() ~= proxy.COM_QUERY then set_error("[admin] we only handle text-based queries (COM_QUERY)") return proxy.PROXY_SEND_RESULT end local query = packet:sub(2) local rows = { } local fields = { } if query:lower() == "select * from backends" then fields = { { name = "backend_ndx",type = proxy.MYSQL_TYPE_LONG }, { name = "address",type = proxy.MYSQL_TYPE_STRING }, { name = "state",type = proxy.MYSQL_TYPE_STRING }, { name = "type",type = proxy.MYSQL_TYPE_STRING }, { name = "uuid",type = proxy.MYSQL_TYPE_STRING }, { name = "connected_clients",type = proxy.MYSQL_TYPE_LONG }, } for i = 1, #proxy.global.backends do local states = { "unknown", "up", "down" } local types = { "unknown", "rw", "ro" } local b = proxy.global.backends[i] rows[#rows + 1] = { i, b.dst.name, -- configured backend address states[b.state + 1], -- the C-id is pushed down starting at 0 types[b.type + 1], -- the C-id is pushed down starting at 0 b.uuid, -- the MySQL Server's UUID if it is managed b.connected_clients -- currently connected clients } end elseif query:lower() == "select * from help" then fields = { { name = "command",type = proxy.MYSQL_TYPE_STRING }, { name = "description",type = proxy.MYSQL_TYPE_STRING }, } rows[#rows + 1] = { "SELECT * FROM help", "shows this help" } rows[#rows + 1] = { "SELECT * FROM backends", "lists the backends and their state" } else set_error("use 'SELECT * FROM help' to see the supported commands") return proxy.PROXY_SEND_RESULT end proxy.response = { type = proxy.MYSQLD_PACKET_OK, resultset = { fields = fields, rows = rows } } return proxy.PROXY_SEND_RESULT end
5、相關(guān)問(wèn)題解決
(1)、如果日志中提示 (debug) [network-mysqld.c:1134]: error on a connection (fd: -1 event: 0). closing client connection.
可以修改 rw-splitting.lua中的min_idle_connections = 4和max_idle_connections = 8的只,將其調(diào)大
(2)、如果遇到亂碼需要調(diào)整后端mysql的設(shè)置的字符集
[mysqld] skip-character-set-client-handshake init-connect = 'SET NAMES utf8' character_set_server = utf8
mysqlnd_ms實(shí)現(xiàn)mysql讀寫分離
mysqlnd_ms是mysqlnd的一個(gè)插件,該插件實(shí)現(xiàn)了連接保存和切換、負(fù)載均衡、讀寫分離的功能。要想使用mysqlnd_ms的讀寫分離功能必須在安裝php時(shí)使用–with-mysqlnd。mysqlnd實(shí)現(xiàn)的功能是可以不需要在php服務(wù)器上安裝mysql,在php5.3之前編譯安裝php需要通過(guò)–with-mysql=/path/to/mysql指定mysql的安裝路徑。
1、安裝mysqlnd_ms模塊
tar -zxvf mysqlnd_ms-1.5.2.tgz cd mysqlnd_ms-1.5.2 /usr/local/php/bin/phpize ./configure --with-php-config=/usr/local/php/bin/php-config make && make install
出現(xiàn)以下類似提示,記錄下面的路徑需要擁有配置php.ini
Installing shared extensions: /usr/local/php/lib/php/extensions/no-debug-non-zts-20121212/ Installing header files: /usr/local/php/include/php/</span>
2、編輯 /usr/local/php/etc/php.ini
extension = /usr/local/php/lib/php/extensions/no-debug-non-zts-20121212/mysqlnd_ms.so mysqlnd_ms.enable = On mysqlnd_ms.config_file = /usr/local/php/etc/mysqlnd_ms_plugin.ini
3、創(chuàng)建mysqlnd_ms_plugin.ini配置文件
{ "myapp": { "master": { "master_0": { "host": "192.168.6.135", "socket": "\/tmp\/mysql.sock" } "slave": { "slave_0": { "host": "192.168.6.136", "port": "3306" "slave_1": { "host": "192.168.6.137", "port": "3306" "filters": { "random": { "sticky": "1" } } } }
這里使用到了1主2從的mysql服務(wù)器
filters是定義訪問(wèn)從服務(wù)器的策略,random是隨機(jī)選擇一臺(tái)服務(wù)器,strick參數(shù)設(shè)置成1是指將一次請(qǐng)求都指向一臺(tái)服務(wù)器
4、測(cè)試
使用wordpress進(jìn)行測(cè)試,編輯配置文件wp-config.php
/** MySQL主機(jī) */ define('DB_HOST', 'myapp'); #這的myapp是在mysqlnd_ms_plugin.ini中定義的
- 詳解MySQL主從復(fù)制讀寫分離搭建
- 詳解MySQL的主從復(fù)制、讀寫分離、備份恢復(fù)
- MySQL5.6 Replication主從復(fù)制(讀寫分離) 配置完整版
- MySQL主從復(fù)制的原理及配置方法(比較詳細(xì))
- linux系統(tǒng)下實(shí)現(xiàn)mysql熱備份詳細(xì)步驟(mysql主從復(fù)制)
- Mysql主從復(fù)制(master-slave)實(shí)際操作案例
- MySQL的主從復(fù)制步驟詳解及常見(jiàn)錯(cuò)誤解決方法
- MySQL主從復(fù)制配置心跳功能介紹
- MySQL主從同步、讀寫分離配置步驟
- mysql 讀寫分離(基礎(chǔ)篇)
- mysql 讀寫分離(實(shí)戰(zhàn)篇)
- mysql主從復(fù)制讀寫分離的配置方法詳解
相關(guān)文章
MySQL數(shù)據(jù)庫(kù)聚合函數(shù)與分組查詢舉例詳解
在MySQL中聚合函數(shù)和分組查詢經(jīng)常一起使用,下面這篇文章主要給大家介紹了關(guān)于MySQL數(shù)據(jù)庫(kù)聚合函數(shù)與分組查詢的相關(guān)資料,文中通過(guò)代碼介紹的非常詳細(xì),需要的朋友可以參考下2024-01-01在MySQL數(shù)據(jù)庫(kù)中復(fù)位根用戶的密碼的方法
2007-12-12MySQL備份與恢復(fù)之真實(shí)環(huán)境使用冷備(2)
這篇文章主要介紹了MySQL備份與恢復(fù)之真實(shí)環(huán)境使用冷備,需要的朋友可以參考下2015-08-08MySQL修改表結(jié)構(gòu)操作命令總結(jié)
這篇文章主要介紹了MySQL修改表結(jié)構(gòu)操作命令總結(jié),包含如刪除列、添加列、修改列、添加主鍵、刪除主鍵、添加唯一索引、添加普通索引等內(nèi)容,需要的朋友可以參考下2014-12-12mysqli多查詢特性 實(shí)現(xiàn)多條sql語(yǔ)句查詢
mysqli相對(duì)于mysql有很多優(yōu)勢(shì),mysqli連接數(shù)據(jù)庫(kù)和mysqli預(yù)處理prepare使用,不僅如此,mysqli更是支持多查詢特性2012-12-12MYSQL數(shù)據(jù)庫(kù)中的現(xiàn)有表增加新字段(列)
MYSQL 增加新字段的sql語(yǔ)句,需要的朋友可以參考下。2010-05-05mysql 關(guān)鍵詞相關(guān)度排序方法詳細(xì)示例分析
以下是對(duì)mysql關(guān)鍵詞相關(guān)度排序方法進(jìn)行了詳細(xì)的分析介紹,需要的朋友可以過(guò)來(lái)參考下2013-08-08LNMP下使用命令行導(dǎo)出導(dǎo)入MySQL數(shù)據(jù)庫(kù)的方法
這篇文章主要介紹了LNMP下使用命令行導(dǎo)出導(dǎo)入MySQL數(shù)據(jù)庫(kù)的方法,需要的朋友可以參考下2016-09-09