通过pykafka接收Kafka消息队列的方法
更新时间：2018年12月27日 11:29:45 作者：BabyFish13
今天小编就为大家分享一篇通过pykafka接收Kafka消息队列的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
没有Kafka环境，所以也没有进行验证。感觉今后应该能用到，所以借抄在此，备查。
pykafka使用示例，自动消费最新消息，不重复消费：
# -* coding:utf8 *-
from pykafka import KafkaClient
host = '192.168.200.38'
client = KafkaClient(hosts="%s:9092" % host)
print client.topics
# 生产者
# topicdocu = client.topics['task_pull']
# producer = topicdocu.get_producer()
# for i in range(4):
# print i
# producer.produce('test message ' + str(i ** 2))
# producer.stop()
# 消费者
topic = client.topics['task_push']
consumer = topic.get_simple_consumer(consumer_group='test', auto_commit_enable=True, consumer_id='test')
for message in consumer:
if message is not None:
print message.offset, message.value
以上这篇通过pykafka接收Kafka消息队列的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
今天小编就为大家分享一篇Anaconda下安装mysql-python的包实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-06-06
看这个标题，有点匪夷所思吗？为什么for是难以想象的呢？因为在python中，它的确是很常用而且很强悍，强悍到以至于另外一个被称之为迭代的东西，在python中就有点相形见绌了。在别的语言中，for的地位从来没有如同python中这么高的。2014-10-10
本篇文章主要介绍了PyTorch快速搭建神经网络及其保存提取方法详解，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-04-04
这篇文章主要介绍了Python实现PS滤镜功能之波浪特效,结合实例形式分析了Python实现PS滤镜波浪特效的原理与相关操作技巧,需要的朋友可以参考下2018-01-01
一个大于1的自然数,除了1和它本身外,不能被其他自然数（质数）整除（2, 3, 5, 7等）,换句话说就是该数除了1和它本身以外不再有其他的因数,下面这篇文章主要给大家介绍了关于利用Python判断一个数是否为质数的3种方法,需要的朋友可以参考下2024-09-09
python 利用pandas将arff文件转csv文件的方法
今天小编就为大家分享一篇python 利用pandas将arff文件转csv文件的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-02-02
今天小编就为大家分享一篇python 实现调用子文件下的模块方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-12-12
这篇文章主要介绍了python集合,实例分析了Python中返回一个返回值与多个返回值的方法,需要的朋友可以参考下2021-10-10
新手学习Python2和Python3中print不同的用法
在本篇文章里小编给大家分享的是关于Python2和Python3中print不同的用法，有兴趣的朋友们可以学习下。2020-06-06
这篇文章主要为大家介绍了Python Sql数据库增删改查操作简单封装，感兴趣的小伙伴们可以参考一下2016-04-04
最新评论