gearman + mysql方式實(shí)現(xiàn)持久化操作示例
本文實(shí)例講述了gearman+mysql方式實(shí)現(xiàn)持久化操作。分享給大家供大家參考，具體如下：
1、為什么要持久化?
gearman的job server中的工作隊(duì)列存儲(chǔ)在內(nèi)存中，一旦服務(wù)器有未處理的任務(wù)時(shí)重啟或者宕機(jī)，那么這些任務(wù)就會(huì)丟失。
持久化存儲(chǔ)隊(duì)列可以允許添加后臺(tái)任務(wù)，并將其存儲(chǔ)在外部的持久型隊(duì)列里（比如MySQL數(shù)據(jù)庫(kù)）。
2、關(guān)于gearman的持久化的文章，建議可以看官方文檔
http://gearman.org/manual/job_server/#persistent_queues
3、創(chuàng)建用于持久化的數(shù)據(jù)庫(kù)和表
CREATE DATABASE gearman; CREATE TABLE `gearman_queue` ( `unique_key` varchar(64) NOT NULL, `function_name` varchar(255) NOT NULL, `priority` int(11) NOT NULL, `data` longblob NOT NULL, `when_to_run` int(11), PRIMARY KEY (`unique_key`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4、創(chuàng)建gearman用戶
> create user 'gearman'@'%' IDENTIFIED BY '123456'; > grant all on gearman.* TO 'gearman'@'%'; > flush privileges;
5、啟動(dòng)gearmand時(shí)指定持久化參數(shù)
> gearmand -q libdrizzle \ --libdrizzle-host=192.168.1.100 \ --libdrizzle-port=3306 \ --libdrizzle-user=gearman \ --libdrizzle-password=123456 \ --libdrizzle-db=gearman \ --libdrizzle-table=gearman_queue \ --libdrizzle-mysql
或者使用如下
> gearmand -q mysql \ --mysql-host=192.168.1.100 \ --mysql-port=3306 \ --mysql-user=gearman \ --mysql-password=123456 \ --mysql-db=gearman \ --mysql-table=gearman_queue
如果出現(xiàn)如下問(wèn)題，說(shuō)明你在編譯安裝gearman時(shí)沒(méi)有把libdrizzle裝上
gearmand: unrecognised option '--libdrizzle-host=192.168.1.100'
在如下網(wǎng)址，下載libdrizzle
https://launchpad.net/libdrizzle/+download
如：libdrizzle-5.1.4.tar.gz
安裝libdrizzle
> tar xf libdrizzle-5.1.4.tar.gz > cd libdrizzle-5.1.4
這里最好不要指定--prefix，因?yàn)槟阒付似渌夸洠旅鎔earman編譯時(shí)可能會(huì)找不到相關(guān)頭文件和鏈接庫(kù)，需要你手動(dòng)添加軟鏈接
> ./configure > make && make install
然后我們重新編譯安裝gearman
> tar xf gearmand-1.1.12.tar.gz > cd gearmand-1.1.12
如果configure的有哪些參數(shù)不清楚，可以用下面命令查看
> ./configure --help
這里需要安裝mysql-devel，以便gearman支持mysql的持久化
> yum install mysql-server mysql-devel
因?yàn)槲以缦妊b過(guò)gearman，沒(méi)有指定--prefix，所以這里也沒(méi)有指定，有需要的可以自行指定
> ./configure > make && make install
configure完成最后顯示的一段信息
* LIBS: * LDFLAGS Flags: * Assertions enabled: no * Debug enabled: no * Warnings as failure: no * Building with libsqlite3 no * Building with libdrizzle yes * Building with libmemcached not found * Building with libpq no * Building with tokyocabinet no * Building with libmysql yes * SSL enabled: no * cyassl found: no * openssl found: yes * make -j: 2 * VCS checkout: no * sphinx-build: :
最后可以看到libdrizzle和libmysql那地方顯示yes
查看是否安裝上
> gearmand --help
如果出現(xiàn)如下錯(cuò)誤
gearmand: error while loading shared libraries: libdrizzle.so.9: cannot open shared object file: No such file or directory
請(qǐng)打開修改/etc/ld.so.conf
> vi /etc/ld.so.conf
加入如下一句話
/usr/local/lib
運(yùn)行l(wèi)dconfig
> ldconfig
再次運(yùn)行上面的gearmand --help，如果出現(xiàn)如下信息，則安裝成功
builtin: libdrizzle: --libdrizzle-host arg (=localhost) Host of server. --libdrizzle-port arg (=3306) Port of server. (by default Drizzle) --libdrizzle-uds arg Unix domain socket for server. --libdrizzle-user arg (=root) User name for authentication. --libdrizzle-password arg Password for authentication. --libdrizzle-db arg (=gearman) Database to use. --libdrizzle-table arg (=queue) Table to use. --libdrizzle-mysql Use MySQL protocol. MySQL: --mysql-host arg (=localhost) MySQL host. --mysql-port arg (=3306) Port of server. (by default 3306) --mysql-user arg MySQL user. --mysql-password arg MySQL user password. --mysql-db arg MySQL database. --mysql-table arg (=gearman_queue) MySQL table name.
通過(guò)libdrizzle啟動(dòng)gearmand如果出現(xiàn)如下問(wèn)題
gearmand: Error while initializing the queue : libdrizzle
并且日志里面的記錄是這樣的
ERROR 2017-02-22 07:51:02.536574 [ main ] Failed to initialize libdrizzle: initialize(QUEUE_ERROR) -> libgearman-server/queue.cc:246
不知道是不是mysql版本太高的原因，還是其他的原因，如果大家試了實(shí)在不行還是換另一個(gè)方式，另一方式我測(cè)試是成功的。
創(chuàng)建一個(gè)后臺(tái)job
> gearman -f test -b 123456
查看數(shù)據(jù)庫(kù)如下：
更多關(guān)于MySQL相關(guān)內(nèi)容感興趣的讀者可查看本站專題：《MySQL索引操作技巧匯總》、《MySQL常用函數(shù)大匯總》、《MySQL日志操作技巧大全》、《MySQL事務(wù)操作技巧匯總》、《MySQL存儲(chǔ)過(guò)程技巧大全》及《MySQL數(shù)據(jù)庫(kù)鎖相關(guān)技巧匯總》
希望本文所述對(duì)大家MySQL數(shù)據(jù)庫(kù)計(jì)有所幫助。
相關(guān)文章
Windows系統(tǒng)中配置開啟MySQL數(shù)據(jù)庫(kù)日志的完整步驟
這篇文章主要給大家介紹了關(guān)于Windows系統(tǒng)中配置開啟MySQL數(shù)據(jù)庫(kù)日志的完整步驟,大家要開啟MySQL數(shù)據(jù)庫(kù)的日志功能,可以按照本文介紹的步驟進(jìn)行操作,需要的朋友可以參考下2023-09-09
這里是101條調(diào)節(jié)和優(yōu)化 MySQL安裝的技巧。一些技巧是針對(duì)特定的安裝環(huán)境的，但這些思路是通用的。我已經(jīng)把他們分成幾類，來(lái)幫助你掌握更多MySQL的調(diào)節(jié)和優(yōu)化技巧2013-08-08
這篇文章主要給大家介紹了關(guān)于mysql怎么設(shè)置最大連接數(shù)的相關(guān)資料,設(shè)置mysql最大連接數(shù)的方法,首先打開mysql的控制臺(tái),然后輸入語(yǔ)句set GLOBAL max_connections=1000;即可直接設(shè)置最大連接數(shù),需要的朋友可以參考下2022-02-02
mysql使用mysqld_multi部署單機(jī)多實(shí)例的方法教程
這篇文章主要給大家介紹了關(guān)于mysql使用mysqld_multi部署單機(jī)多實(shí)例的相關(guān)資料，文中通過(guò)示例代碼將實(shí)現(xiàn)的步驟一步步介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧。2018-03-03
MySQL多實(shí)例就是在一臺(tái)服務(wù)器上同時(shí)開啟多個(gè)不同的服務(wù)端口，本文就介紹一下MySQL多實(shí)例配置，感興趣的可以了解一下2021-07-07
MySQL存儲(chǔ)引擎應(yīng)用場(chǎng)景MyISAM?vs?InnoDB優(yōu)勢(shì)選擇
這篇文章主要為大家介紹了MySQL存儲(chǔ)引擎應(yīng)用場(chǎng)景MyISAM?vs?InnoDB優(yōu)勢(shì)選擇,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-10-10
mysql容器之間的replication配置實(shí)例詳解
這篇文章主要給大家介紹了關(guān)于mysql容器之間replication配置的相關(guān)資料，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01
這篇文章主要介紹了Oracle和MySQL的高可用方案對(duì)比分析,非常不錯(cuò)，具有參考借鑒價(jià)值，需要的朋友可以參考下2017-11-11
這篇文章通過(guò)實(shí)例代碼給大家介紹了mysql排序獲取排名的相關(guān)知識(shí)，感興趣的朋友一起看看吧2018-05-05
VS2022連接數(shù)據(jù)庫(kù)MySQL并進(jìn)行基本的表的操作指南
鑒于MySQL數(shù)據(jù)庫(kù)的流行與強(qiáng)大,決定多學(xué)習(xí)使用,下面這篇文章主要給大家介紹了關(guān)于VS2022連接數(shù)據(jù)庫(kù)MySQL并進(jìn)行基本的表的操作指南,文中通過(guò)圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-05-05