gearman队列持久化引发的问题及解决方法

更新时间：2014年07月08日 15:54:12 投稿：shichen2014

这篇文章主要介绍了gearman队列持久化引发的问题及解决方法,需要的朋友可以参考下

本文简述了gearman用mysql持久化的方法，以及由此引发的一些问题，具体分析如下：

一、gearman 创建Mysql持久化队列的方式如下：

1. 登入mysql命令行，运行：

create database gearman;

2. 启动gearman，命令如下：

/usr/local/gearman/sbin/gearmand -p 4730 -L 0.0.0.0 --log-file=/tmp/gearmand-4730.log --pid-file=/tmp/gearmand-4730.pid -q MySQL --mysql-host=localhost --mysql-user=root --mysql-db=gearman --verbose DEBUG -d

具体的参数，根据自己的服务器状况去修改就行了。

3. 再次登入mysql命令行，执行：

use gearman; 
show tables;

就可以看到下面多了个“gearman_queue”的表。

这样，gearman就变成了持久化的方式。

二、gearman用mysql持久化之后，会带来如下一些问题：

1. 每个任务都会写入数据库，这样会带来磁盘IO的损耗，并且gearman的性能瓶颈又多了一个可能，就是由数据库引起的性能问题。

2. mysql有个“wait_timeout”的参数，在mysql命令行中运行

show variables like "%timeout%";

可以看到wait_timeout的值，默认是28800。也就是说，如果一个mysql的连接，超过28800s没有任何响应，就会断开。

3. gearman持久化的方式，如果超过了mysql的wait_timeouts的时间没有任何响应，和数据库的连接就会被mysql断开，而且gearman目前是没有mysql重新连接的，结果就是，会导致如下错误，必须重启gearman才能重新正常工作。

gearman报错：

ERROR 2014-04-01 02:10:02.897899 [ proc ] mysql_stmt_execute failed: -> libgearman-server/plugins/queue/mysql/queue.cc:357
ERROR 2014-04-01 02:10:02.897910 [ proc ] gearman_server_job_add gearman_server_run_command(QUEUE_ERROR) -> libgearman-server/server.cc:301

所以，gearman持久化方式带来的缺点显而易见，该方式下，要避免gearman对mysql连接超时断开，可以将mysql的wait_timeout参数改大。

或者，干脆直接放弃用mysql的持久化方式。

您可能感兴趣的文章:

解决linux的redhat版上mysql字符乱码的问题
下面小编就为大家带来一篇解决linux的redhat版上mysql字符乱码的问题。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2017-06-06
详解Shell编程之if语句实战(小结)
本篇文章主要介绍了详解Shell编程之if语句实战(小结)，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2018-02-02
获取两个日期间隔时间的shell脚本代码
获取两个日期间隔时间的shell脚本，对于正在研究shell操作日期的朋友来讲，这个小例子，值得研究
2013-02-02
awk正则表达式和内置函数的使用方法实例详解
这篇文章主要介绍了awk正则表达式和内置函数的使用方法实例详解,本文总结了15个使用例子,需要的朋友可以参考下
2014-12-12
Linux磁盘空间被未知资源耗尽的解决方法
下面小编就为大家带来一篇Linux磁盘空间被未知资源耗尽的解决方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
2017-05-05
linux反弹shell的原理详解
这篇文章主要介绍了linux反弹shell的原理详解，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-10-10
Shell编程之变量数值计算方法示例
这篇文章主要给大家介绍了关于Shell编程教程之变量数值计算的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2018-11-11
shell -z和-n的使用区别
本文将深入探讨shell命令中的-z和-n选项,通过详细解释这两个选项的工作原理和用途,帮助读者更好地理解和掌握Shell脚本编写,感兴趣的可以了解一下
2024-01-01
linux下实现ftp自动备份shell脚本
ftp命令把远程计算机上的文件传输到本地计算机时，需要和用户交互。怎样使交互过程自动化呢
2013-01-01
学习Linux网络编程基本函数
这篇文章主要介绍了学习Linux网络编程，网络编程的一些基本函数：也是实现tcp协议通讯的基本步骤，实现代码在最后，IP需要修改为自己的IP，即可通信
2021-08-08