概述
Zookeeper 学习笔记
根据尚硅谷的视频所作的相关知识记录,视频连接如下:
https://www.bilibili.com/video/BV1PW411r7iP
一、Zookeeper 安装
官网:https://zookeeper.apache.org/,这里我使用的版本是3.4.10。
1.1 本地模式部署(测试)
1. 安装
(1)安装 jdk(Hadoop集群已经安装好 )。
(2)拷贝 zookeeper-3.4.10 到我们的 Hadoop 集群 /opt/software 目录下。
(3)将 zookeeper-3.4.10 解压到 /opt/module 目录下。
sudo tar -zxvf zookeeper-3.4.10.tar.gz -C ../module/
2. 配置修改
(1)将 /opt/module/zookeeper-3.4.10/conf 这个路径下的 zoo_sample.cfg 修改为 zoo.cfg。
cd conf/
mv zoo_sample.cfg zoo.cfg
(2)编辑 zoo.cfg 文件,修改 dataDir 路径。
vim zoo.cfg
修改内容如下:
dataDir=/opt/module/zookeeper-3.4.10/zkData
(3)在 /opt/module/zookeeper-3.4.10/ 目录下创建 zkData 文件夹。
mkdir zkData
3. 启动 Zookeeper
(1)启动。
sbin/zkServer.sh
(2)查看进程。
jps
(3)查看状态。
bin/zkServer.sh status
(4)启动客户端。
bin/zkCli.sh
(5)退出客户端。
quit
(6)退出服务。
bin/zkServer.sh stop
1.2 分布式模式部署
1. 集群规划
在 hadoop001 - hadoop007 七个节点上部署 Zookeeper。
2. 解压安装
将刚才 hadoop001 上的 Zookeeper 分发到其他节点。
xsync zookeeper-3.4.10/
3. 配置服务器编号
例如,hadoop001 节点我们给他编号为 1,hadoop002 节点我们给他编号为 2,后面的以此类推。
(1)在 hadoop001 节点下的 zkData 目录下创建 myid 文件。
cd zkData/
vim myid
文件中添加如下内容:
1
(2)分发文件到其他节点,然后每个节点修改 myid 中的内容,如 hadoop002 修改为 2。
xsync myid
查看是否每个节点都修改成功了。
xcall cat /opt/module/zookeeper-3.4.10/zkData/myid
(3)在 conf/zoo.cfg 文件中增加如下内容:
#cluster
server.1=hadoop001:2888:3888
server.2=hadoop002:2888:3888
server.3=hadoop003:2888:3888
server.4=hadoop004:2888:3888
server.5=hadoop005:2888:3888
server.6=hadoop006:2888:3888
server.7=hadoop007:2888:3888
参数说明:
server.A=B:C:D
参数 | 说明 |
---|---|
A | 是一个数字,表示这个是第几号服务器。集群模式下配置一个文件 myid,这个文件在 dataDir 目录下,这个文件里面有一个数据就是 A 的值,Zookeeper 启动时读取此文件,拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是哪个 server。 |
B | 这个服务器的地址 |
C | 这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口 |
D | 万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服器相互通信的端口 |
(4)分发 conf/zoo.cfg 文件到其他节点。
xsync conf/zoo.cfg
4. 启动集群
(1)每个节点分别启动 Zookeeper。
bin/zkServer.sh start
(2)查看状态。
我们查看 hadoop004 节点的状态。发现他是 leader 节点。
bin/zkServer.sh status
集群群起脚本:
#!/bin/bash
# 获取当前登录用户
user=`whoami`
# 根据自己的集群进行循环
for (( host=1;host<=7;host++ ))
do
echo "---------------- hadoop00$host --------------------"
ssh $user@hadoop00$host "source /etc/profile;/opt/module/zookeeper-3.4.10/bin/zkServer.sh start"
echo "hadoop00$host zookeeper is running"
done
最后
以上就是从容星星为你收集整理的Zookeeper基础学习知识记录Zookeeper 学习笔记的全部内容,希望文章能够帮你解决Zookeeper基础学习知识记录Zookeeper 学习笔记所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
发表评论 取消回复