码迷,mamicode.com
首页 > 数据库 > 详细

gearman mysql持久化

时间:2014-12-02 23:59:32      阅读:451      评论:0      收藏:0      [点我收藏+]

标签:http   io   ar   os   sp   on   数据   div   2014   

gearman 创建Mysql持久化队列的方式如下:

1. 登入mysql命令行,运行:    

create database gearman;

 2. 启动gearman,命令如下:

/usr/local/gearman/sbin/gearmand -p 4730 -L 0.0.0.0 --log-file=/tmp/gearmand-4730.log --pid-file=/tmp/gearmand-4730.pid -q MySQL --mysql-host=localhost --mysql-user=root --mysql-db=gearman --verbose DEBUG-d

 具体的参数,根据自己的服务器状况去修改就行了。

3. 再次登入mysql命令行,执行:

use gearman;show tables;

 就可以看到下面多了个“gearman_queue”的表。

这样,gearman就变成了持久化的方式。

=============================================================================

gearman用mysql持久化之后,其实会带来一些问题。

1. 每个任务都会写入数据库,这样会带来磁盘IO的损耗,并且gearman的性能瓶颈又多了一个可能,就是由数据库引起的性能问题。

2. mysql有个“wait_timeout”的参数,在mysql命令行中运行

show variables like "%timeout%";

 可以看到wait_timeout的值,默认是28800。也就是说,如果一个mysql的连接,超过28800s没有任何响应,就会断开。

3. gearman持久化的方式,如果超过了mysql的wait_timeouts的时间没有任何响应,和数据库的连接就会被mysql断开,而且gearman目前是没有mysql重新连接的,结果就是,会导致如下错误,必须重启gearman才能重新正常工作。

gearman报错 

ERROR 2014-04-01 02:10:02.897899 [ proc ] mysql_stmt_execute failed: -> libgearman-server/plugins/queue/mysql/queue.cc:357
ERROR 2014-04-01 02:10:02.897910 [ proc ] gearman_server_job_add gearman_server_run_command(QUEUE_ERROR) -> libgearman-server/server.cc:301

所以,gearman持久化方式带来的缺点显而易见,该方式下,要避免gearman对mysql连接超时断开,可以将mysql的wait_timeout参数改大。

或者,直接放弃用mysql的持久化方式。

http://www.ttlsa.com/gearman/gearman-mysql/

http://huoding.com/2012/10/30/196

http://www.linuxeye.com/database/mysql-replication-to-redis-by-gearman.html

gearman mysql持久化

标签:http   io   ar   os   sp   on   数据   div   2014   

原文地址:http://www.cnblogs.com/youxin/p/4138834.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!