docker-compose部署kafka全过程
更新时间:2024年12月19日 09:23:55 作者:lcz-2000
文章介绍了如何使用docker-compose.yaml文件启动容器,并查看和创建Kafka topic,以及监控topic下的数据,作者分享了个人经验,希望对大家有所帮助
docker-compose部署kafka
docker-compose.yaml文件
version: '3'
services:
zookeeper:
image: bitnami/zookeeper:latest
container_name: zookeeper
environment:
- ALLOW_ANONYMOUS_LOGIN=yes
network_mode: host
kafka:
image: bitnami/kafka:latest
container_name: kafka
environment:
- KAFKA_BROKER_ID=1
- KAFKA_CFG_LISTENERS=PLAINTEXT://主机IP地址:9092
- KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://主机IP地址:9092 #如果是docker容器外访问这里要写宿主机的ip 否则会报Error connecting to node kafka:9092 (id: 1 rack: null) java.net.UnknownHostException: 不知道这样的主机。
- KAFKA_CFG_ZOOKEEPER_CONNECT=主机IP地址:2181
- ALLOW_PLAINTEXT_LISTENER=yes
depends_on:
- zookeeper
network_mode: host启动容器
docker-compose up -d
查看已创建的topic
docker exec -it kafka kafka-topics.sh --list --bootstrap-server 主机IP地址:9092
创建topic
//方式一 docker exec -it kafka kafka-console-producer.sh --bootstrap-server 主机IP地址:9092 --topic test //方式二 docker exec kafka kafka-topics.sh --create --topic test --partitions 1 --replication-factor 1 --if-not-exists --bootstrap-server 主机IP地址:9092 //Created topic test. //--partitions 1 表示你想要创建的分区数量为 1,--replication-factor 1 表示每个分区的副本因子为 1(通常在生产环境中,你会希望设置更高的副本因子以增加容错性)。--if-not-exists 是一个可选参数,用于在 topic 已经存在时防止报错。
查看并监控topic下数据
docker exec -it kafka kafka-console-consumer.sh --bootstrap-server 主机IP地址:9092 --topic test --from-beginning //--from-beginning 参数表示从topic的起始位置开始读取消息 不带该参数默认从最新偏移量开始监控消费
总结
以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。
相关文章
Docker中"exec format error"错误架构不匹配的原因分析和解
本文详细介绍了Docker中“execformaterror”错误的成因,并提供了两种解决方案:使用匹配架构的镜像和启用QEMU模拟器,推荐用户使用匹配架构的镜像以解决架构不匹配的问题,感兴趣的朋友跟随小编一起看看吧2026-01-01
Docker报错denied:requested access to the r
这篇文章主要为大家介绍了Docker报错denied:requested access to the resource is denied解决方法详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪2023-06-06
Windows Docker 部署 SolrCloud的方法步骤
本文主要介绍了Windows Docker 部署 SolrCloud的方法步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧2024-10-10


最新评论