gearman + mysql方式實(shí)現(xiàn)持久化操作示例
本文實(shí)例講述了gearman+mysql方式實(shí)現(xiàn)持久化操作。分享給大家供大家參考，具體如下：
1、為什么要持久化?
gearman的job server中的工作隊(duì)列存儲(chǔ)在內(nèi)存中，一旦服務(wù)器有未處理的任務(wù)時(shí)重啟或者宕機(jī)，那么這些任務(wù)就會(huì)丟失。
持久化存儲(chǔ)隊(duì)列可以允許添加后臺(tái)任務(wù)，并將其存儲(chǔ)在外部的持久型隊(duì)列里（比如MySQL數(shù)據(jù)庫）。
2、關(guān)于gearman的持久化的文章，建議可以看官方文檔
http://gearman.org/manual/job_server/#persistent_queues
3、創(chuàng)建用于持久化的數(shù)據(jù)庫和表
CREATE DATABASE gearman; CREATE TABLE `gearman_queue` ( `unique_key` varchar(64) NOT NULL, `function_name` varchar(255) NOT NULL, `priority` int(11) NOT NULL, `data` longblob NOT NULL, `when_to_run` int(11), PRIMARY KEY (`unique_key`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4、創(chuàng)建gearman用戶
> create user 'gearman'@'%' IDENTIFIED BY '123456'; > grant all on gearman.* TO 'gearman'@'%'; > flush privileges;
5、啟動(dòng)gearmand時(shí)指定持久化參數(shù)
> gearmand -q libdrizzle \ --libdrizzle-host=192.168.1.100 \ --libdrizzle-port=3306 \ --libdrizzle-user=gearman \ --libdrizzle-password=123456 \ --libdrizzle-db=gearman \ --libdrizzle-table=gearman_queue \ --libdrizzle-mysql
或者使用如下
> gearmand -q mysql \ --mysql-host=192.168.1.100 \ --mysql-port=3306 \ --mysql-user=gearman \ --mysql-password=123456 \ --mysql-db=gearman \ --mysql-table=gearman_queue
如果出現(xiàn)如下問題，說明你在編譯安裝gearman時(shí)沒有把libdrizzle裝上
gearmand: unrecognised option '--libdrizzle-host=192.168.1.100'
在如下網(wǎng)址，下載libdrizzle
https://launchpad.net/libdrizzle/+download
如：libdrizzle-5.1.4.tar.gz
安裝libdrizzle
> tar xf libdrizzle-5.1.4.tar.gz > cd libdrizzle-5.1.4
這里最好不要指定--prefix，因?yàn)槟阒付似渌夸?，下面gearman編譯時(shí)可能會(huì)找不到相關(guān)頭文件和鏈接庫，需要你手動(dòng)添加軟鏈接
> ./configure > make && make install
然后我們重新編譯安裝gearman
> tar xf gearmand-1.1.12.tar.gz > cd gearmand-1.1.12
如果configure的有哪些參數(shù)不清楚，可以用下面命令查看
> ./configure --help
這里需要安裝mysql-devel，以便gearman支持mysql的持久化
> yum install mysql-server mysql-devel
因?yàn)槲以缦妊b過gearman，沒有指定--prefix，所以這里也沒有指定，有需要的可以自行指定
> ./configure > make && make install
configure完成最后顯示的一段信息
* LIBS: * LDFLAGS Flags: * Assertions enabled: no * Debug enabled: no * Warnings as failure: no * Building with libsqlite3 no * Building with libdrizzle yes * Building with libmemcached not found * Building with libpq no * Building with tokyocabinet no * Building with libmysql yes * SSL enabled: no * cyassl found: no * openssl found: yes * make -j: 2 * VCS checkout: no * sphinx-build: :
最后可以看到libdrizzle和libmysql那地方顯示yes
查看是否安裝上
> gearmand --help
如果出現(xiàn)如下錯(cuò)誤
gearmand: error while loading shared libraries: libdrizzle.so.9: cannot open shared object file: No such file or directory
請打開修改/etc/ld.so.conf
> vi /etc/ld.so.conf
加入如下一句話
/usr/local/lib
運(yùn)行l(wèi)dconfig
> ldconfig
再次運(yùn)行上面的gearmand --help，如果出現(xiàn)如下信息，則安裝成功
builtin: libdrizzle: --libdrizzle-host arg (=localhost) Host of server. --libdrizzle-port arg (=3306) Port of server. (by default Drizzle) --libdrizzle-uds arg Unix domain socket for server. --libdrizzle-user arg (=root) User name for authentication. --libdrizzle-password arg Password for authentication. --libdrizzle-db arg (=gearman) Database to use. --libdrizzle-table arg (=queue) Table to use. --libdrizzle-mysql Use MySQL protocol. MySQL: --mysql-host arg (=localhost) MySQL host. --mysql-port arg (=3306) Port of server. (by default 3306) --mysql-user arg MySQL user. --mysql-password arg MySQL user password. --mysql-db arg MySQL database. --mysql-table arg (=gearman_queue) MySQL table name.
通過libdrizzle啟動(dòng)gearmand如果出現(xiàn)如下問題
gearmand: Error while initializing the queue : libdrizzle
并且日志里面的記錄是這樣的
ERROR 2017-02-22 07:51:02.536574 [ main ] Failed to initialize libdrizzle: initialize(QUEUE_ERROR) -> libgearman-server/queue.cc:246
不知道是不是mysql版本太高的原因，還是其他的原因，如果大家試了實(shí)在不行還是換另一個(gè)方式，另一方式我測試是成功的。
創(chuàng)建一個(gè)后臺(tái)job
> gearman -f test -b 123456
查看數(shù)據(jù)庫如下：
更多關(guān)于MySQL相關(guān)內(nèi)容感興趣的讀者可查看本站專題：《MySQL索引操作技巧匯總》、《MySQL常用函數(shù)大匯總》、《MySQL日志操作技巧大全》、《MySQL事務(wù)操作技巧匯總》、《MySQL存儲(chǔ)過程技巧大全》及《MySQL數(shù)據(jù)庫鎖相關(guān)技巧匯總》
希望本文所述對大家MySQL數(shù)據(jù)庫計(jì)有所幫助。
相關(guān)文章
這篇文章主要介紹了mysql中的replace函數(shù)替換字符串問題，具有很好的參考價(jià)值，希望對大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2022-12-12
這篇文章主要介紹了MySQL聚合查詢案例講解,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2023-03-03
這篇文章主要介紹了MySQL中UPDATE語句使用的實(shí)例教程,包括UPDATE的使用中所容易引起的性能問題的分析,需要的朋友可以參考下2015-11-11
這篇文章主要介紹了mysql命令行愛好者必備工具mycli的相關(guān)知識(shí)，非常不錯(cuò)，具有一定的參考借鑒價(jià)值 ,需要的朋友可以參考下2019-05-05
MySQL密碼策略管理插件validate_password用法詳解
自MySQL5.6起,引入validate_password插件,用于密碼長度和強(qiáng)度管理,在MySQL8.0中,該插件通過服務(wù)器組件重新實(shí)現(xiàn),插件默認(rèn)不允許密碼為用戶名,可設(shè)定最小長度和強(qiáng)度等級(jí),還可要求密碼包含數(shù)字、大小寫字母和特殊字符2024-11-11
在看discuz源碼時(shí)看到了sql_mode=""，不知道是干嘛的，猜想是設(shè)置模式，但是不清楚是什么模式，于是從網(wǎng)上搜了下，sql_mode="" 的作用2011-08-08
有時(shí)候需要為自動(dòng)增加的字段設(shè)置基值，用下面的語句即可。2010-11-11
這篇文章主要介紹了MySQL MGR搭建過程中常遇見的問題及解決辦法，幫助大家更好的理解和學(xué)習(xí)使用MySQL，感興趣的朋友可以了解下2021-03-03
在數(shù)據(jù)量大時(shí),深分頁查詢速度緩慢,主要原因是多次回表查詢,優(yōu)化方法主要介紹了四種,各方法適用于不同場景,本文就來詳細(xì)的介紹一下,感興趣的可以了解一下2024-11-11
這篇文章主要來和大家探討一下Mysql中如何實(shí)現(xiàn)兩列的值互換,文中為大家提供了一些常用的方法,希望對大家有一定的幫助2024-11-11