利用扩展的方式在PHP中使用Kafka的教程分享

 更新时间:2023年05月26日 09:24:23   作者:北桥苏  
这篇文章主要为大家详细介绍了如何利用扩展的方式实现在PHP中使用Kafka,具体包括扩展安装和这种方式的基本操作,感兴趣的小伙伴可以跟随小编一起学习一下

前言

由于之前在 PHP 中使用 Kafka 是通过 composer 包的方式,由于 nmred/kafka-php 很久没有维护,并且网上相关问题的文章也比较少。所以我这次换成 PHP 扩展 RdKafka 继续使用,主要介绍扩展安装和这种方式的基本操作。

安装

1. 下载

地址(找到与自己环境匹配的就可以)

2. 目录

由于 php-rdkafka 依赖 librdkafka,linux 就需要先安装 librdkafka 后安装 php-rdkafka,而 windows 版本是如下几个文件,安装方法如下:

(1). 将 librdkafka.dll 和 librdkafka.pdb 放入 PHP 安装的根目录下,而 php_rdkafka.dll 和 php_rdkafka.pdb 放入 PHP 安装目录的 ext 下。

(2). php.ini 配置文件添加 extension=php_rdkafka.dll,最后重启 PHP。

(3). php-m 或这 phpinfo (); 就可以查看到扩展了。

通过 get_declared_classes() 也可以查看到扩展里预设的函数了。

使用

1. 生产

public function kafkaTest()
{
	$rk = new \RdKafka\Producer();
	$rk->addBrokers("127.0.0.1:9092");
	$topic = $rk->newTopic("shop");
	$ret = [];
	for ($i = 0; $i < 5; $i++) {
		$content = "第" . $i . "次发送失败";
		$message = ["mobile" => "15623652142", "content" => $content];
		$payload = json_encode($message);
		// 指定向0号partition生产数据
		$ret[]['produce_res'] = $topic->produce(0, 0, $payload, "sms_$i");
		// 随机选择partition
		//$topic->produce(RD_KAFKA_PARTITION_UA, 0, $payload);
		if ($rk->getOutQLen() > 0) {
			$ret[]['produce_poll'] = $rk->poll(500);
		} else {
			$ret[]['produce_poll'] = $rk->poll(0);
		}
	}
	dump($ret);
}

2. 消费(从指定的 partition 消费)

protected function execute(Input $input, Output $output)
{
	$output->writeln("!!!hello kafka!!!");
	$conf = new \RdKafka\Conf();
	$conf->set('group.id', 'sms-consumer-group');
	$rk = new \RdKafka\Consumer($conf);
	$rk->addBrokers("127.0.0.1:9092");
	$topicConf = new \RdKafka\TopicConf();
	$topicConf->set('auto.commit.interval.ms', 100);
	$topicConf->set('offset.store.method', 'file');
	$topicConf->set('offset.store.path', sys_get_temp_dir());
	$topicConf->set('auto.offset.reset', 'smallest');
	$topic = $rk->newTopic("shop", $topicConf);
	$topic->consumeStart(0, RD_KAFKA_OFFSET_STORED);
	while(true) {
		// 设置消费时的时间间隔,单位毫秒,以下表示5秒消费一个
		$message = $topic->consume(0, 5000);
		if ($message) {
			echo "读取到消息\n\r";
			// 消息对象,包括消息主题,消息创建时间戳,消息分区编号,消息主体,消息键名,消息长度等
			var_dump($message);
			switch ($message->err) {
				case RD_KAFKA_RESP_ERR_NO_ERROR:
					echo "读取消息成功:\n\r";
					var_dump($message->payload);
					break;
				case RD_KAFKA_RESP_ERR__PARTITION_EOF:
					echo "读取消息失败\n\r";
					break;
				case RD_KAFKA_RESP_ERR__TIMED_OUT:
					echo "请求超时\n\r";
					break;
				default:
					throw new \Exception($message->errstr(), $message->err);
					break;
			}
		} else {
			echo "未读取到消息\n\r";
		}
	}
	$output->writeln("!!!the end!!!");
}

其他

在执行消费过程中,发现 kafka 停止服务,抛出的异常:ERROR Shutdown broker because all log dirs in /tmp/kafka-logs have failed。

解决方法

删除 kafka-logs 下的所有日志,再重新启动 Kafaka, kafka-server-start.bat ....\config\server.properties &

到此这篇关于利用扩展的方式在PHP中使用Kafka的教程分享的文章就介绍到这了,更多相关PHP使用Kafka内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • php通过两层过滤获取留言内容的方法

    php通过两层过滤获取留言内容的方法

    这篇文章主要介绍了php通过两层过滤获取留言内容的方法,涉及php正则匹配及数组与字符串的相关操作技巧,需要的朋友可以参考下
    2016-07-07
  • PHP 地址栏信息的获取代码

    PHP 地址栏信息的获取代码

    主要是获取到地址栏的一些信息,域名,端口参数等
    2009-01-01
  • 支持png透明图片的php生成缩略图类分享

    支持png透明图片的php生成缩略图类分享

    这篇文章主要介绍了支持png透明图片的php生成缩略图类分享,本文代码基于GD2图形库,实现支持png透明图片生成缩略图,需要的朋友可以参考下
    2015-02-02
  • php适配器模式简单应用示例

    php适配器模式简单应用示例

    这篇文章主要介绍了php适配器模式简单应用,结合实例形式分析php适配器模式原理及使用适配器模式创建的天气预报查询接口功能相关操作技巧,需要的朋友可以参考下
    2019-10-10
  • PHP 实用代码收集

    PHP 实用代码收集

    PHP 是目前使用最广泛的基于 Web 的编程语言,驱动着数以百万计的网站,其中也包括如 Facebook 等一些大型站点。这里收集了 21 段实用便捷的 PHP 代码摘录,对每种类型的 PHP 开发者都会有所帮助。
    2010-01-01
  • js和php邮箱地址验证的实现方法

    js和php邮箱地址验证的实现方法

    这篇文章主要介绍了js和php邮箱地址验证的实现方法,有需要的朋友可以参考一下
    2014-01-01
  • PHP 命名空间原理与用法详解

    PHP 命名空间原理与用法详解

    这篇文章主要介绍了PHP 命名空间,结合实例形式详细分析了PHP 命名空间概念、功能、原理、用法及操作注意事项,需要的朋友可以参考下
    2020-04-04
  • php一些错误处理的方法与技巧总结

    php一些错误处理的方法与技巧总结

    以下是对php中一些错误处理的方法与技巧进行了总结介绍,需要的朋友可以过来参考下
    2013-08-08
  • php数组查询元素位置的实例方法

    php数组查询元素位置的实例方法

    在本篇文章里小编给大家整理的是一篇关于php数组查询元素位置的实例方法,对此有兴趣的朋友们可以跟着学习下。
    2022-01-01
  • php 需要掌握的东西 不做浮躁的人

    php 需要掌握的东西 不做浮躁的人

    很多学PHP的人一直也搞不清楚,一个PHP程序员和Java程序员或者是.net程序员有什么不同,告诉你,其实都一样!
    2009-12-12

最新评论