加入收藏 | 设为首页 | 会员中心 | 我要投稿 财气旺网 - 海宁网 (https://www.hainingwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 编程 > 正文

gearman + mysql方式实现持久化操作示范

发布时间:2022-03-15 13:39:04 所属栏目:编程 来源:互联网
导读:本文实例讲述了gearman+mysql方式实现持久化操作。分享给大家供大家参考,具体如下: 1、为什么要持久化? gearman的job server中的工作队列存储在内存中,一旦服务器有未处理的任务时重启或者宕机,那么这些任务就会丢失。 持久化存储队列可以允许添加后台任
       本文实例讲述了gearman+mysql方式实现持久化操作。分享给大家供大家参考,具体如下:
 
1、为什么要持久化?
 
       gearman的job server中的工作队列存储在内存中,一旦服务器有未处理的任务时重启或者宕机,那么这些任务就会丢失。
       持久化存储队列可以允许添加后台任务,并将其存储在外部的持久型队列里(比如MySQL数据库)。
 
2、关于gearman的持久化的文章,建议可以看官方文档
 
http://gearman.org/manual/job_server/#persistent_queues
3、创建用于持久化的数据库和表
 
CREATE DATABASE gearman;
 
CREATE TABLE `gearman_queue` (
`unique_key` varchar(64) NOT NULL,
`function_name` varchar(255) NOT NULL,
`priority` int(11) NOT NULL,
`data` longblob NOT NULL,
`when_to_run` int(11),
PRIMARY KEY (`unique_key`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
4、创建gearman用户
 
> create user 'gearman'@'%' IDENTIFIED BY '123456';
> grant all on gearman.* TO 'gearman'@'%';
> flush privileges;
5、启动gearmand时指定持久化参数
 
> gearmand -q libdrizzle
--libdrizzle-host=192.168.1.100
--libdrizzle-port=3306
--libdrizzle-user=gearman
--libdrizzle-password=123456
--libdrizzle-db=gearman
--libdrizzle-table=gearman_queue
--libdrizzle-mysql
或者使用如下
 
> gearmand -q mysql
--mysql-host=192.168.1.100
--mysql-port=3306
--mysql-user=gearman
--mysql-password=123456
--mysql-db=gearman
--mysql-table=gearman_queue
如果出现如下问题,说明你在编译安装gearman时没有把libdrizzle装上
 
gearmand: unrecognised option '--libdrizzle-host=192.168.1.100'
在如下网址,下载libdrizzle
 
https://launchpad.net/libdrizzle/+download
如:libdrizzle-5.1.4.tar.gz
 
安装libdrizzle
 
> tar xf libdrizzle-5.1.4.tar.gz
> cd libdrizzle-5.1.4
这里最好不要指定--prefix,因为你指定了其它目录,下面gearman编译时可能会找不到相关头文件和链接库,需要你手动添加软链接
 
> ./configure
> make && make install
然后我们重新编译安装gearman
     
* LIBS:
* LDFLAGS Flags:
* Assertions enabled: no
* Debug enabled: no
* Warnings as failure: no
* Building with libsqlite3 no
* Building with libdrizzle yes
* Building with libmemcached not found
* Building with libpq no
* Building with tokyocabinet no
* Building with libmysql yes
* SSL enabled: no
* cyassl found: no
* openssl found: yes
* make -j: 2
* VCS checkout: no
* sphinx-build: :
最后可以看到libdrizzle和libmysql那地方显示yes
 
查看是否安装上
 
> gearmand --help
如果出现如下错误
 
gearmand: error while loading shared libraries: libdrizzle.so.9: cannot open shared object file: No such file or directory
请打开修改/etc/ld.so.conf
 
> vi /etc/ld.so.conf
加入如下一句话
 
/usr/local/lib
运行ldconfig
 
> ldconfig
再次运行上面的gearmand --help,如果出现如下信息,则安装成功
 
gearmand: Error while initializing the queue : libdrizzle
并且日志里面的记录是这样的
 
ERROR 2017-02-22 07:51:02.536574 [ main ] Failed to initialize libdrizzle:
initialize(QUEUE_ERROR) -> libgearman-server/queue.cc:246
不知道是不是mysql版本太高的原因,还是其他的原因,如果大家试了实在不行还是换另一个方式,另一方式我测试是成功的。

(编辑:财气旺网 - 海宁网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!