第 3 章 运行多节点环境
多节点环境由多个节点组成,它们作为集群运行。您可以有复制的 ZooKeeper 节点和代理节点集群,以及代理间的主题复制。
多节点环境提供了稳定性和可用性。
3.1. 运行多节点 ZooKeeper 集群 复制链接链接已复制到粘贴板!
配置并运行 ZooKeeper 作为多节点集群。
先决条件
- AMQ Streams 安装在所有将用作 ZooKeeper 集群节点的主机上。
运行容器
在
/var/lib/zookeeper/中创建myid文件。输入 ID1作为第一个 ZooKeeper 节点,2代表第二个 ZooKeeper 节点,以此类推。su - kafka echo "<NodeID>" > /var/lib/zookeeper/myid例如:
su - kafka echo "1" > /var/lib/zookeeper/myid编辑 ZooKeeper
/opt/kafka/config/zookeeper.properties配置文件:-
将选项
dataDir设置为/var/lib/zookeeper/。 -
配置
initLimit和syncLimit选项。 -
配置
reconfigEnabled和standaloneEnabled选项。 添加所有 ZooKeeper 节点列表。该列表还应包括当前的节点。
具有五个成员的 ZooKeeper 集群配置示例
tickTime=2000 dataDir=/var/lib/zookeeper/ initLimit=5 syncLimit=2 reconfigEnabled=true standaloneEnabled=false listener.security.protocol.map=PLAINTEXT:PLAINTEXT,REPLICATION:PLAINTEXT server.1=172.17.0.1:2888:3888:participant;172.17.0.1:2181 server.2=172.17.0.2:2888:3888:participant;172.17.0.2:2181 server.3=172.17.0.3:2888:3888:participant;172.17.0.3:2181 server.4=172.17.0.4:2888:3888:participant;172.17.0.4:2181 server.5=172.17.0.5:2888:3888:participant;172.17.0.5:2181
-
将选项
使用默认配置文件启动 ZooKeeper。
su - kafka /opt/kafka/bin/zookeeper-server-start.sh -daemon /opt/kafka/config/zookeeper.properties验证 ZooKeeper 是否正在运行。
jcmd | grep zookeeper返回:
number org.apache.zookeeper.server.quorum.QuorumPeerMain /opt/kafka/config/zookeeper.properties- 在集群的所有节点中重复此步骤。
使用
ncat实用程序向每个节点发送stat命令,验证所有节点都是集群的成员。使用 ncat stat 检查节点状态
echo stat | ncat localhost 2181要使用四个字母字命令,如
stat,您需要在zookeeper.properties中指定4lw.commands.whitelist=*。输出显示节点是
领导机或后续者。ncat 命令的输出示例
ZooKeeper version: 3.4.13-2d71af4dbe22557fda74f9a9b4309b15a7487f03, built on 06/29/2018 00:39 GMT Clients: /0:0:0:0:0:0:0:1:59726[0](queued=0,recved=1,sent=0) Latency min/avg/max: 0/0/0 Received: 2 Sent: 1 Connections: 1 Outstanding: 0 Zxid: 0x200000000 Mode: follower Node count: 4