MySQL的使用中實(shí)現(xiàn)讀寫分離的教程
mysql-proxy實(shí)現(xiàn)讀寫分離
MySQL Proxy是一個(gè)處于你的client端和MySQL server端之間的簡單程序，它可以監(jiān)測、分析或改變它們的通信。它使用靈活，沒有限制，常見的用途包括：負(fù)載平衡，故障、查詢分析，查詢過濾和修改等等。
MySQL Proxy就是這么一個(gè)中間層代理，簡單的說，MySQL Proxy就是一個(gè)連接池，負(fù)責(zé)將前臺應(yīng)用的連接請求轉(zhuǎn)發(fā)給后臺的數(shù)據(jù)庫，并且通過使用lua腳本，可以實(shí)現(xiàn)復(fù)雜的連接控制和過濾，從而實(shí)現(xiàn)讀寫分離和負(fù)載平衡。對于應(yīng)用來說，MySQL Proxy是完全透明的，應(yīng)用則只需要連接到MySQL Proxy的監(jiān)聽端口即可。當(dāng)然，這樣proxy機(jī)器可能成為單點(diǎn)失效，但完全可以使用多個(gè)proxy機(jī)器做為冗余，在應(yīng)用服務(wù)器的連接池配置中配置到多個(gè)proxy的連接參數(shù)即可。
MySQL Proxy更強(qiáng)大的一項(xiàng)功能是實(shí)現(xiàn)“讀寫分離”，基本原理是讓主數(shù)據(jù)庫處理事務(wù)性查詢，讓從庫處理SELECT查詢。數(shù)據(jù)庫復(fù)制被用來把事務(wù)性查詢導(dǎo)致的變更同步到集群中的從庫。
1、安裝mysql-proxy
此處下載安裝包http://ftp.ntu.edu.tw/pub/MySQL/Downloads/MySQL-Proxy/
如果是編譯安裝依賴包有 libevent2 1.x lua 5.1.x glibc2 2.6.0 pkg-config libtool 1.5
這里使用glibc的二進(jìn)制包解壓即可mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz
tar -zxvf mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit.tar.gz mv mysql-proxy-0.8.3-linux-glibc2.3-x86-64bit /usr/local/mysql-proxy
2、創(chuàng)建好mysql主從復(fù)制
master 192.168.216.133：3306 slave 192.168.216.132：3306
3、配置mysql-proxy
創(chuàng)建mysql-proxy配置文件，配置文件中的所有選擇都不能加引號
vim /usr/local/mysql-proxy/mysql-proxy.conf
[mysql-proxy] daemon=true #以后臺守護(hù)進(jìn)程方式啟動 keepalive=true #當(dāng)進(jìn)程故障后自動重啟 log-level=debug #設(shè)置日志級別為debug，可以在調(diào)試完成后改成info log-file=/var/log/mysql-proxy.log #設(shè)置日志文件路徑 basedir=/usr/local/mysql-proxy #設(shè)置mysql-proxy的家目錄 proxy-address=192.168.216.132:4040 #指定mysql-proxy的監(jiān)聽地址 proxy-backend-addresses=192.168.216.133:3306 #設(shè)置后臺主服務(wù)器 proxy-read-only-backend-addresses=192.168.216.132:3306 #設(shè)置后臺從服務(wù)器 proxy-lua-script=/usr/local/mysql-proxy/share/doc/mysql-proxy/rw-splitting.lua #設(shè)置讀寫分離腳本路徑 admin-address=192.168.216.132:4041 #設(shè)置mysql-proxy管理地址，需要家長admin插件 admin-username=admin #設(shè)置登錄管理地址用戶 admin-password=admin #設(shè)置管理用戶密碼 admin-lua-script=/usr/local/mysql-proxy/share/doc/mysql-proxy/admin.lua #設(shè)置管理后臺lua腳本路徑，改腳本默認(rèn)沒有要自動定義
配置完mysql-proxy.conf后需要確保該文件的權(quán)限是600，并確保包含個(gè)lua腳本
通過配置文件啟動mysql-proxy
/usr/local/mysql-proxy/bin/mysql-proxy --plugins=proxy --plugins=admin --defaults-file=mysql-proxy.conf --plugins=proxy #指定proxy插件，該配置寫入配置文件無法啟動 --plugins=admin #指定admin插件 --defaults-file=mysql-proxy.conf #指定配置文件
4、啟動測試
登錄管理地址查看當(dāng)前狀態(tài)
mysql -uadmin -padmin -h192.168.216.132 -P4041
兩個(gè)后端服務(wù)器當(dāng)前狀態(tài)為unknown是因?yàn)闆]有用戶通過mysql-proxy連接到后端
mysql-proxy不對用戶做身份驗(yàn)證，而是下身份驗(yàn)證交予后端服務(wù)器進(jìn)行驗(yàn)證的，因此需要在后端服務(wù)器上對mysql-proxy開放權(quán)限
下面是自定義的admin.lua
function set_error(errmsg)
proxy.response = {
type = proxy.MYSQLD_PACKET_ERR,
errmsg = errmsg or "error"
}
end
function read_query(packet)
if packet:byte() ~= proxy.COM_QUERY then
set_error("[admin] we only handle text-based queries (COM_QUERY)")
return proxy.PROXY_SEND_RESULT
end
local query = packet:sub(2)
local rows = { }
local fields = { }
if query:lower() == "select * from backends" then
fields = {
{ name = "backend_ndx",type = proxy.MYSQL_TYPE_LONG },
{ name = "address",type = proxy.MYSQL_TYPE_STRING },
{ name = "state",type = proxy.MYSQL_TYPE_STRING },
{ name = "type",type = proxy.MYSQL_TYPE_STRING },
{ name = "uuid",type = proxy.MYSQL_TYPE_STRING },
{ name = "connected_clients",type = proxy.MYSQL_TYPE_LONG },
}
for i = 1, #proxy.global.backends do
local states = {
"unknown",
"up",
"down" }
local types = {
"unknown",
"rw",
"ro"
}
local b = proxy.global.backends[i]
rows[#rows + 1] = {
i,
b.dst.name, -- configured backend address
states[b.state + 1], -- the C-id is pushed down starting at 0
types[b.type + 1], -- the C-id is pushed down starting at 0
b.uuid, -- the MySQL Server's UUID if it is managed
b.connected_clients -- currently connected clients
}
end
elseif query:lower() == "select * from help" then
fields = {
{ name = "command",type = proxy.MYSQL_TYPE_STRING },
{ name = "description",type = proxy.MYSQL_TYPE_STRING },
}
rows[#rows + 1] = { "SELECT * FROM help", "shows this help" }
rows[#rows + 1] = { "SELECT * FROM backends", "lists the backends and their state" }
else
set_error("use 'SELECT * FROM help' to see the supported commands")
return proxy.PROXY_SEND_RESULT
end
proxy.response = {
type = proxy.MYSQLD_PACKET_OK,
resultset = {
fields = fields,
rows = rows
}
}
return proxy.PROXY_SEND_RESULT
end
5、相關(guān)問題解決
（1）、如果日志中提示 (debug) [network-mysqld.c:1134]: error on a connection (fd: -1 event: 0). closing client connection.
可以修改 rw-splitting.lua中的min_idle_connections = 4和max_idle_connections = 8的只，將其調(diào)大
（2）、如果遇到亂碼需要調(diào)整后端mysql的設(shè)置的字符集
[mysqld] skip-character-set-client-handshake init-connect = 'SET NAMES utf8' character_set_server = utf8
mysqlnd_ms實(shí)現(xiàn)mysql讀寫分離
mysqlnd_ms是mysqlnd的一個(gè)插件，該插件實(shí)現(xiàn)了連接保存和切換、負(fù)載均衡、讀寫分離的功能。要想使用mysqlnd_ms的讀寫分離功能必須在安裝php時(shí)使用–with-mysqlnd。mysqlnd實(shí)現(xiàn)的功能是可以不需要在php服務(wù)器上安裝mysql，在php5.3之前編譯安裝php需要通過–with-mysql=/path/to/mysql指定mysql的安裝路徑。
1、安裝mysqlnd_ms模塊
tar -zxvf mysqlnd_ms-1.5.2.tgz cd mysqlnd_ms-1.5.2 /usr/local/php/bin/phpize ./configure --with-php-config=/usr/local/php/bin/php-config make && make install
出現(xiàn)以下類似提示，記錄下面的路徑需要擁有配置php.ini
Installing shared extensions: /usr/local/php/lib/php/extensions/no-debug-non-zts-20121212/ Installing header files: /usr/local/php/include/php/</span>
2、編輯 /usr/local/php/etc/php.ini
extension = /usr/local/php/lib/php/extensions/no-debug-non-zts-20121212/mysqlnd_ms.so mysqlnd_ms.enable = On mysqlnd_ms.config_file = /usr/local/php/etc/mysqlnd_ms_plugin.ini
3、創(chuàng)建mysqlnd_ms_plugin.ini配置文件
{
"myapp": {
"master": {
"master_0": {
"host": "192.168.6.135",
"socket": "\/tmp\/mysql.sock"
}
"slave": {
"slave_0": {
"host": "192.168.6.136",
"port": "3306"
"slave_1": {
"host": "192.168.6.137",
"port": "3306"
"filters": {
"random": {
"sticky": "1"
}
}
}
}
這里使用到了1主2從的mysql服務(wù)器
filters是定義訪問從服務(wù)器的策略，random是隨機(jī)選擇一臺服務(wù)器，strick參數(shù)設(shè)置成1是指將一次請求都指向一臺服務(wù)器
4、測試
使用wordpress進(jìn)行測試，編輯配置文件wp-config.php
/** MySQL主機(jī) */
define('DB_HOST', 'myapp'); #這的myapp是在mysqlnd_ms_plugin.ini中定義的
- 詳解MySQL主從復(fù)制讀寫分離搭建
- 詳解MySQL的主從復(fù)制、讀寫分離、備份恢復(fù)
- MySQL5.6 Replication主從復(fù)制（讀寫分離) 配置完整版
- MySQL主從復(fù)制的原理及配置方法（比較詳細(xì)）
- linux系統(tǒng)下實(shí)現(xiàn)mysql熱備份詳細(xì)步驟(mysql主從復(fù)制)
- Mysql主從復(fù)制(master-slave)實(shí)際操作案例
- MySQL的主從復(fù)制步驟詳解及常見錯誤解決方法
- MySQL主從復(fù)制配置心跳功能介紹
- MySQL主從同步、讀寫分離配置步驟
- mysql 讀寫分離（基礎(chǔ)篇）
- mysql 讀寫分離（實(shí)戰(zhàn)篇）
- mysql主從復(fù)制讀寫分離的配置方法詳解
相關(guān)文章
本篇文章介紹了，在mysql中修改數(shù)據(jù)的解決方法。需要的朋友參考下2013-05-05
mysql regexp匹配多個(gè)字符串實(shí)現(xiàn)
本文主要介紹了mysql regexp匹配多個(gè)字符串實(shí)現(xiàn),可以利用REGEXP正則表達(dá)式匹配多個(gè)字符串,從而實(shí)現(xiàn)高效查詢,具有一定的參考價(jià)值,感興趣的可以了解一下2024-09-09
淺析mysql 共享表空間與獨(dú)享表空間以及他們之間的轉(zhuǎn)化
本篇文章是對mysql 共享表空間與獨(dú)享表空間以及他們之間的轉(zhuǎn)化進(jìn)行了詳細(xì)的分析介紹，需要的朋友參考下2013-06-06
這篇文章主要給大家介紹了關(guān)于MySQL InnoDB存儲引擎的相關(guān)資料，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-02-02
MySQL復(fù)制三種模式：同步、異步、半同步復(fù)制有什么區(qū)別？
作為數(shù)據(jù)庫領(lǐng)域的"快遞小哥",MySQL復(fù)制技術(shù)承擔(dān)著數(shù)據(jù)運(yùn)輸?shù)闹厝?今天我們就來聊聊這個(gè)數(shù)據(jù)世界的"快遞服務(wù)"——同步復(fù)制、異步復(fù)制、半同步復(fù)制到底有什么區(qū)別？為什么金融系統(tǒng)必須用半同步？電商大促時(shí)又該如何選擇？讓我們用最接地氣的方式揭開這些復(fù)制技術(shù)的神秘面紗2025-03-03
MySQL?INSERT語句實(shí)現(xiàn)當(dāng)記錄不存在時(shí)插入的幾種方法
MySQL的INSERT語句是用于向數(shù)據(jù)庫表中插入新記錄的關(guān)鍵命令,下面這篇文章主要介紹了MySQL?INSERT語句實(shí)現(xiàn)當(dāng)記錄不存在時(shí)插入的幾種方法,文中通過代碼介紹的非常詳細(xì),需要的朋友可以參考下2025-03-03
MySQL 5.6下table_open_cache參數(shù)優(yōu)化合理配置詳解
這篇文章主要介紹了MySQL 5.6下table_open_cache參數(shù)合理配置詳解,需要的朋友可以參考下2018-03-03
MySQL是優(yōu)化難度最大的一個(gè)部分，不但需要理解一些MySQL專業(yè)知識，同時(shí)還需要長時(shí)間的觀察統(tǒng)計(jì)并且根據(jù)經(jīng)驗(yàn) 進(jìn)行判斷，然后設(shè)置合理的參數(shù)。下面我們了解一下MySQL優(yōu)化的一些基礎(chǔ)2018-07-07
MYSQL?Binlog恢復(fù)誤刪數(shù)據(jù)庫詳解
MySQL一旦誤刪數(shù)據(jù)庫之后恢復(fù)數(shù)據(jù)很麻煩,這里記錄一下艱辛的恢復(fù)過程,這篇文章主要給大家介紹了關(guān)于如何利用MySQL的binlog恢復(fù)誤刪數(shù)據(jù)庫的相關(guān)資料,需要的朋友可以參考下2022-11-11
在MySQL數(shù)據(jù)庫之間實(shí)現(xiàn)數(shù)據(jù)同步的配置步驟
本文介紹了六種常見的MySQL數(shù)據(jù)同步方法,包括主從復(fù)制、雙主復(fù)制、群集復(fù)制、使用第三方工具（如PerconaXtraBackup）和使用MySQLWorkbench進(jìn)行數(shù)據(jù)同步,以及編寫自定義腳本進(jìn)行數(shù)據(jù)同步,每種方法都有其優(yōu)缺點(diǎn),需根據(jù)實(shí)際需求選擇,感興趣的朋友一起看看吧2025-02-02