脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 网站技巧 → 服务器 → Linux → contos6.8部署kafka集群

linux contos6.8下部署kafka集群的方法

 更新时间：2018年07月02日 10:16:37   作者：wx5a82db587d976  
这篇文章主要介绍了linux contos6.8下部署kafka集群的方法,小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧

有3台服务器，ip分别为192.168.174.10，192.168.174.11，192.168.174.12。

1、官网下载，分别在每台机器上解压安装

# 创建kafka的安装目录
mkdir -p /usr/local/software/kafka
# 解压
tar -xvf kafka_2.12-1.1.0.tgz -C /usr/local/software/kafka/

2、修改每台服务器的/etc/profile文件，设置kafka环境变量，添加如下内容

export KAFKA_HOME=/usr/local/software/kafka/kafka_2.12-1.1.0
export PATH=$PATH:$KAFKA_HOME/bin

添加完后重启配置，命令如下：

source /etc/profile

3、修改每台服务器的$KAFKA_HOME/config下的server.properties文件，修改代理id和日志存放目录

#指定代理id，borker.id可以任意指定，前提是保证集群内每台机器的broker.id唯一，第二台机器设置为2...以此类推
broker.id=1
#设置日志目录
log.dirs=/opt/data/kafka/kafka-logs
#设置zookeeper集群地址
zookeeper.connect=192.168.174.7:2181,192.168.174.8:2181,192.168.174.9:2181
#设置本机地址，设置为本服务器的ip地址。如果不设置会在创建主题和发送消息时，发生NOT LEADER FOR PARTITION异常。
host.name=192.168.174.10

4、配置完成后，分别启动3台服务器的kafka，启动kafka前确保zookeeper集群已经成功启动。

kafka-server-start.sh -daemon server.properties

5、验证是否成功启动

jps

如果看到kafka进程，说明启动成功。

另外也可通过zookeeper客户端查看zookeeper目录结构，如下：

#登录zookeeper
zkCli . sh -server 192.168.174.7:2181
#查看目录结构
ls /
#查看已启动的kafka代理
ls /brokers/ids

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

相关文章

  • 浅谈Linux内核创建新进程的全过程

    浅谈Linux内核创建新进程的全过程

    这篇文章主要为大家深入浅出的介绍了Linux内核创建新进程的全过程，感兴趣的小伙伴们可以参考一下
    2016-01-01
  • 使用Hyper-v虚拟机安装Centos7

    使用Hyper-v虚拟机安装Centos7

    本文详细讲解了使用Hyper-v虚拟机安装Centos7的方法，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2021-12-12
  • 详解Linux批量更改文件后缀名

    详解Linux批量更改文件后缀名

    本篇文章主要介绍了详解Linux批量更改文件后缀名，主要是使用了rename，有需要的朋友可以了解一下。
    2016-11-11
  • 使用ssh-keygen,实现免密码登陆linux的方法

    使用ssh-keygen,实现免密码登陆linux的方法

    下面小编就为大家带来一篇使用ssh-keygen,实现免密码登陆linux的方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
    2016-11-11
  • Linux 中如何切换相同程序的不同版本

    Linux 中如何切换相同程序的不同版本

    这篇文章主要介绍了 Linux 中如何切换相同程序的不同版本，本文给大家介绍的非常详细，具有一定的参考借鉴价值,需要的朋友可以参考下
    2018-08-08
  • 详解Linux 安装 JDK、Tomcat 和 MySQL（图文并茂）

    详解Linux 安装 JDK、Tomcat 和 MySQL（图文并茂）

    本文会详细介绍 Windows 上安装虚拟机之后，如何在 Linux 中安装 JDK、Tomcat 和 MySQL 的过程，有兴趣的可以了解一下
    2017-08-08
  • Centos7备份文件时备份文件加入备件日期

    Centos7备份文件时备份文件加入备件日期

    这篇文章主要介绍了关于Centos7备份文件时备份文件加入备件日期，本文通过实例图文的形式给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下
    2019-12-12
  • 解读Linux下ip命令展示的网络连接信息

    解读Linux下ip命令展示的网络连接信息

    这篇文章主要给大家介绍了关于Linux下解读ip命令展示的网络连接信息的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起看看吧。
    2018-03-03
  • linux常用工具vi/vim的使用完整版

    linux常用工具vi/vim的使用完整版

    这篇文章主要给大家介绍了关于linux常用工具vi/vim使用的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用linux系统具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
    2019-09-09
  • linux服务器CPU飙高排查分析

    linux服务器CPU飙高排查分析

    系统cpu飙高,尤其对于后端人员来说,其实应该学会排查,这样也算是综合能力的体现;那么当出现了cpu严重飙高的时候怎么排查呢？感兴趣的朋友跟随小编一起看看吧
    2023-01-01

最新评论