博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Zookeeper分布式集群部署
阅读量:5993 次
发布时间:2019-06-20

本文共 3735 字,大约阅读时间需要 12 分钟。

  ZooKeeper 是一个针对大型分布式系统的可靠协调系统;它提供的功能包括:配置维护、名字服务、分布式同步、组服务等; 它的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户; ZooKeeper 已经成为 Hadoop 生态系统中的基础组件。

  Zookeeper可以选择Apache版本,也可以选择Cloudera版本。

  • 下载版本的Zookeeper。
  • 下载版本的Zookeeper。

1.下载Zookeeper

  这里选择cdh版本的zookeeper-3.4.5-cdh5.10.0.tar.gz,将下载好的安装包上传至bigdata-pro01.kfk.com节点的/opt/softwares目录下。

[kfk@bigdata-pro01 ~]$ cd /opt/softwares/[kfk@bigdata-pro01 softwares]$ rz [kfk@bigdata-pro01 softwares]$ lshadoop-2.6.0.tar.gz  jdk-8u60-linux-x64.tar.gz  zookeeper-3.4.5-cdh5.10.0.tar.gz    //选择cdh版本的原因是带源码并且兼容性更佳

 

 

2.解压Zookeeper

[kfk@bigdata-pro01 softwares]$ tar -zxf zookeeper-3.4.5-cdh5.10.0.tar.gz -C /opt/momdules/[kfk@bigdata-pro01 softwares]$ cd ../momdules/[kfk@bigdata-pro01 momdules]$ lshadoop-2.6.0  jdk1.8.0_60  zookeeper-3.4.5-cdh5.10.0[kfk@bigdata-pro01 momdules]$ cd zookeeper-3.4.5-cdh5.10.0/[kfk@bigdata-pro01 zookeeper-3.4.5-cdh5.10.0]$ lltotal 1580drwxr-xr-x  2 kfk kfk    4096 Oct 17 07:57 bin-rw-rw-r--  1 kfk kfk      90 Jan 21  2017 build.properties-rw-rw-r--  1 kfk kfk   79318 Jan 21  2017 build.xml-rw-rw-r--  1 kfk kfk   75877 Jan 21  2017 CHANGES.txtdrwxr-xr-x  4 kfk kfk    4096 Oct 17 07:57 cloudera-rw-rw-r--  1 kfk kfk    6647 Jan 21  2017 cloudera-pom.xmldrwxr-xr-x  2 kfk kfk    4096 Oct 17 07:57 confdrwxr-xr-x 10 kfk kfk    4096 Jan 21  2017 contribdrwxr-xr-x  2 kfk kfk    4096 Oct 17 07:57 dist-mavendrwxr-xr-x  6 kfk kfk    4096 Oct 17 07:57 docs-rw-rw-r--  1 kfk kfk    1953 Jan 21  2017 ivysettings.xml-rw-rw-r--  1 kfk kfk    3234 Jan 21  2017 ivy.xmldrwxr-xr-x  4 kfk kfk    4096 Oct 17 07:57 libdrwxr-xr-x  2 kfk kfk    4096 Oct 17 07:57 libexec-rw-rw-r--  1 kfk kfk   11358 Jan 21  2017 LICENSE.txt-rw-rw-r--  1 kfk kfk     170 Jan 21  2017 NOTICE.txt-rw-rw-r--  1 kfk kfk    1770 Jan 21  2017 README_packaging.txt-rw-rw-r--  1 kfk kfk    1585 Jan 21  2017 README.txtdrwxr-xr-x  5 kfk kfk    4096 Jan 21  2017 recipesdrwxr-xr-x  2 kfk kfk    4096 Oct 17 07:57 sbindrwxr-xr-x  3 kfk kfk    4096 Jan 21  2017 sharedrwxr-xr-x  8 kfk kfk    4096 Oct 17 07:57 src-rw-rw-r--  1 kfk kfk 1352380 Jan 21  2017 zookeeper-3.4.5-cdh5.10.0.jar-rw-rw-r--  1 kfk kfk      33 Jan 21  2017 zookeeper-3.4.5-cdh5.10.0.jar.md5-rw-rw-r--  1 kfk kfk      41 Jan 21  2017 zookeeper-3.4.5-cdh5.10.0.jar.sha1

 

 

3.修改配置

1)修改配置文件zoo.cfg

[kfk@bigdata-pro01 zookeeper-3.4.5-cdh5.10.0]$ cd conf/[kfk@bigdata-pro01 conf]$ lsconfiguration.xsl  log4j.properties  zoo_sample.cfg

 

  然后用notepad++进行连接。

 

 

 文件内容解析:

#这个时间是作为Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔tickTime=2000#配置 Zookeeper 接受客户端初始化连接时最长能忍受多少个心跳时间间隔数。initLimit=10#Leader 与 Follower 之间发送消息,请求和应答时间长度syncLimit=5#数据目录需要提前创建dataDir=/opt/modules/zookeeper-3.4.5-cdh5.10.0/zkData#访问端口号clientPort=2181#server.每个节点服务编号=服务器ip地址:集群通信端口:选举端口server.1=bigdata-pro01.kfk.com:2888:3888server.2=bigdata-pro02.kfk.com:2888:3888server.3=bigdata-pro03.kfk.com:2888:3888

 

  新建一个数据目录:

[kfk@bigdata-pro01 zookeeper-3.4.5-cdh5.10.0]$ mkdir -p zkData[kfk@bigdata-pro01 zookeeper-3.4.5-cdh5.10.0]$ cd zkData/[kfk@bigdata-pro01 zkData]$ pwd/opt/momdules/zookeeper-3.4.5-cdh5.10.0/zkData

  然后修改文件中的目录:

 

 

  创建myid文件(内容为节点编号1/2/3):

 

 

4.分发各个节点

  将Zookeeper安装配置分发到其他两个节点,具体操作如下所示:

scp -r zookeeper-3.4.5-cdh5.10.0/ bigdata-pro02.kfk.com:/opt/momdules/scp -r zookeeper-3.4.5-cdh5.10.0/ bigdata-pro03.kfk.com:/opt/momdules/

  然后修改各个节点的数据存储目录下的myid文件内容为节点对应编号。

#bigdata-pro02.kfk.com节点vi myid2#bigdata-pro03.kfk.com节点vi myid3

 

 

5.启动Zookeeper服务

1)各个节点使用如下命令启动Zookeeper服务

bin/zkServer.sh start

 

2)查看各个节点服务状态

bin/zkServer.sh status

 

 

 

 

 

3)查看Zookeeper目录树结构

bin/zkCli.sh

 

 

                 

  

 

4)关闭各个节点服务

bin/zkServer.sh stop

 

 


 

以上就是博主为大家介绍的这一板块的主要内容,这都是博主自己的学习过程,希望能给大家带来一定的指导作用,有用的还望大家点个支持,如果对你没用也望包涵,有错误烦请指出。如有期待可关注博主以第一时间获取更新哦,谢谢!同时也欢迎转载,但必须在博文明显位置标注原文地址,解释权归博主所有!

 

转载于:https://www.cnblogs.com/zimo-jing/p/9802628.html

你可能感兴趣的文章
彻底搞清楚Java并发 (一) 基础
查看>>
VS连接Windows Mobile模拟器
查看>>
SQL疑难杂症【3】链接服务器提示"无法启动分布式事物"
查看>>
Windows Mobile和Wince(Windows Embedded CE)下如何封装Native DLL提供给.NET Compact Framework进行调用...
查看>>
数据库相关
查看>>
HDU Count the string (KMP)
查看>>
Arduino101学习(一)——Windows下环境配置
查看>>
C#中的泛型
查看>>
编程之美4:求数组中的最大值和最小值
查看>>
ios7新增基础类库以及OC新特性
查看>>
[LeetCode] Maximal Square
查看>>
代码设置TSQLCONNECTION参数
查看>>
DataTable 的用法简介
查看>>
步步为营 .NET 代码重构学习笔记系列总结
查看>>
BROKER服务器同客户端和应用服务器三者之间传递消息的格式定义
查看>>
【转】20个Cydia常见错误问题解决方法汇总
查看>>
datagrid在MVC中的运用10-勾选
查看>>
使用jQuery和Bootstrap实现多层、自适应模态窗口
查看>>
C#中如何选择使用T[]或List<T>
查看>>
对象不支持此属性或方法
查看>>