脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 网站技巧 → 服务器 → 服务器其它 → Zookeeper 单机环境和集群环境搭建

Zookeeper 单机环境和集群环境搭建

 更新时间：2019年08月16日 16:38:47   作者：黑白影  
这篇文章主要介绍了Zookeeper 单机环境和集群环境搭建过程，本文给大家介绍的非常详细，具有一定的参考借鉴价值,需要的朋友可以参考下

 一、单机环境搭建#

1.1 下载#

下载对应版本 Zookeeper，这里我下载的版本 3.4.14。官方下载地址：https://archive.apache.org/dist/zookeeper/

# wget https://archive.apache.org/dist/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz

1.2 解压#

# tar -zxvf zookeeper-3.4.14.tar.gz

1.3 配置环境变量#

# vim /etc/profile

添加环境变量：

export ZOOKEEPER_HOME=/usr/app/zookeeper-3.4.14
export PATH=$ZOOKEEPER_HOME/bin:$PATH

使得配置的环境变量生效：

# source /etc/profile

1.4 修改配置#

进入安装目录的 conf/ 目录下，拷贝配置样本并进行修改：

# cp zoo_sample.cfg zoo.cfg

指定数据存储目录和日志文件目录（目录不用预先创建，程序会自动创建），修改后完整配置如下：

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just
# example sakes.
dataDir=/usr/local/zookeeper/data
dataLogDir=/usr/local/zookeeper/log
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

配置参数说明：

•tickTime：用于计算的基础时间单元。比如 session 超时：N*tickTime；
•initLimit：用于集群，允许从节点连接并同步到 master 节点的初始化连接时间，以 tickTime 的倍数来表示；
•syncLimit：用于集群， master 主节点与从节点之间发送消息，请求和应答时间长度（心跳机制）；
•dataDir：数据存储位置；
•dataLogDir：日志目录；
•clientPort：用于客户端连接的端口，默认 2181

1.5 启动#

由于已经配置过环境变量，直接使用下面命令启动即可：

zkServer.sh start

1.6 验证#

使用 JPS 验证进程是否已经启动，出现 QuorumPeerMain 则代表启动成功。

[root@hadoop001 bin]# jps
3814 QuorumPeerMain

二、集群环境搭建#

为保证集群高可用，Zookeeper 集群的节点数最好是奇数，最少有三个节点，所以这里演示搭建一个三个节点的集群。这里我使用三台主机进行搭建，主机名分别为 hadoop001，hadoop002，hadoop003。

2.1 修改配置#

解压一份 zookeeper 安装包，修改其配置文件 zoo.cfg，内容如下。之后使用 scp 命令将安装包分发到三台服务器上：

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper-cluster/data/
dataLogDir=/usr/local/zookeeper-cluster/log/
clientPort=2181
# server.1 这个1是服务器的标识，可以是任意有效数字，标识这是第几个服务器节点，这个标识要写到dataDir目录下面myid文件里
# 指名集群间通讯端口和选举端口
server.1=hadoop001:2287:3387
server.2=hadoop002:2287:3387
server.3=hadoop003:2287:3387

2.2 标识节点#

分别在三台主机的 dataDir 目录下新建 myid 文件,并写入对应的节点标识。Zookeeper 集群通过 myid 文件识别集群节点，并通过上文配置的节点通信端口和选举端口来进行节点通信，选举出 Leader 节点。

创建存储目录：

# 三台主机均执行该命令
mkdir -vp /usr/local/zookeeper-cluster/data/

创建并写入节点标识到 myid 文件：

# hadoop001主机
echo "1" > /usr/local/zookeeper-cluster/data/myid
# hadoop002主机
echo "2" > /usr/local/zookeeper-cluster/data/myid
# hadoop003主机
echo "3" > /usr/local/zookeeper-cluster/data/myid

2.3 启动集群#

分别在三台主机上，执行如下命令启动服务：

/usr/app/zookeeper-cluster/zookeeper/bin/zkServer.sh start

2.4 集群验证#

启动后使用 zkServer.sh status 查看集群各个节点状态。如图所示：三个节点进程均启动成功，并且 hadoop002 为 leader 节点，hadoop001 和 hadoop003 为 follower 节点。

  

更多大数据系列文章可以参见 GitHub 开源项目：大数据入门指南

总结

以上所述是小编给大家介绍的Zookeeper 单机环境和集群环境搭建,希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持！
如果你觉得本文对你有帮助，欢迎转载，烦请注明出处，谢谢！

您可能感兴趣的文章:

相关文章

  • Cobbler 批量安装操作系统的配置方法

    Cobbler 批量安装操作系统的配置方法

    Cobbler是一个快速网络安装linux的服务，而且在经过调整也可以支持网络安装windows。该工具使用python开发，小巧轻便（才15k行代码），使用简单的命令即可完成PXE网络安装环境的配置，同时还可以管理DHCP，DNS，以及yum包镜像
    2016-08-08
  • htaccess 防盗链，防止目录浏览等10大技巧

    htaccess 防盗链，防止目录浏览等10大技巧

    htaccess 防盗链，防止目录浏览等10大技巧，使用apache服务器的朋友可以参考下
    2012-02-02
  • 自动运行 screen 任务详解

    自动运行 screen 任务详解

    这篇文章主要为大家介绍了自动运行 screen 任务详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪
    2023-03-03
  • 服务器从安装到配置阵列RAID1+RAID5 安装Windows Server 2019

    服务器从安装到配置阵列RAID1+RAID5 安装Windows Server 2019

    今天就给安排上了——从RAID的配置开始，以及如何在WinPE里面载入阵列卡驱动、磁盘分区、安装系统等，另外 ，图片为操作过程中实拍，质量不高，敬请谅解
    2022-10-10
  • WINPE3.0集成RAID阵列卡驱动的实现方法

    WINPE3.0集成RAID阵列卡驱动的实现方法

    这篇文章主要介绍了WINPE3.0集成RAID阵列卡驱动的实现方法,需要的朋友可以参考下
    2016-07-07
  • 基于postman实现http接口测试过程解析

    基于postman实现http接口测试过程解析

    这篇文章主要介绍了基于postman实现http接口测试过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-11-11
  • Rsync 服务器文件同步的搭建以及使用

    Rsync 服务器文件同步的搭建以及使用

    rsync 是类unix系统下的数据镜像备份工具, 它可以镜像保存整个目录树和文件系统。并且很容易做到保持原文件的权限，时间，软硬链接等等
    2013-11-11
  • 基于epoll实现 Reactor服务器的详细过程

    基于epoll实现 Reactor服务器的详细过程

    在我们调用epoll_create的时候会创建出epoll模型,这个模型也是利用文件描述类似文件系统的方式控制该结构,这篇文章主要介绍了基于epoll实现 Reactor服务器的详细过程,需要的朋友可以参考下
    2023-12-12
  • Dell服务器安装Ubuntu系统的图文教程

    Dell服务器安装Ubuntu系统的图文教程

    这篇文章主要为大家详细介绍了Dell服务器如何安装Ubuntu系统,文中通过示例图片为大家详细讲解了安装步骤,有需要的小伙伴可以参考一下
    2023-09-09
  • 在idea打包并上传到云服务项目流程分析

    在idea打包并上传到云服务项目流程分析

    这篇文章主要介绍了在idea打包并上传到云服务项目流程分析,本文给大家介绍的非常详细，对大家的工作或学习具有一定的参考借鉴价值，需要的朋友可以参考下
    2020-03-03

最新评论