`
q_chaochao
  • 浏览: 22575 次
  • 性别: Icon_minigender_1
  • 来自: 武汉
社区版块
存档分类
最新评论

zookeeper-01:软件的安装

 
阅读更多

    ZooKeeper是Hadoop的正式子项目,它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护、名字服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。

   以上内容摘自baidu百科!

   下面我们一起来看看zookeeper的安装和一些简单的配置。

1、单机环境下zookeeper的配置

下载zookeeper的软件包:
地址:
http://www.apache.org/dyn/closer.cgi/zookeeper/

下面以zookeeper-3.3.5为例进行讲述。

下载后的安装包为:zookeeper-3.3.5.tar.gz

解压:tar zxf zookeeper-3.3.5.tar.gz

把解压后的目录zookeeper-3.3.5移动到/data下(这里随个人喜好,无特殊意义)

进入配置目录:cd /data/zookeeper-3.3.5/conf

conf目录中的内容如下:

root@ubuntu:/data/zookeeper-3.3.5/conf # ll
total 20
drwxr-xr-x  2 qichao qichao 4096 Mar 16  2012 ./
drwxr-xr-x 10 qichao qichao 4096 Mar 16  2012 ../
-rw-rw-r--  1 qichao qichao  535 Mar 16  2012 configuration.xsl
-rw-rw-r--  1 qichao qichao 1698 Mar 16  2012 log4j.properties
-rw-rw-r--  1 qichao qichao  380 Mar 16  2012 zoo_sample.cfg


在此目录中存在一个配置文件的例子zoo_sample.cfg,我们可以直接把该文件重命名为zoo.cfg,因为zookeeper默认加载的配置文件为zoo.cfg。可以从bin/zkEnv.sh中看出,详细代码如下:

if [ "x$ZOOCFG" = "x" ]
then
    ZOOCFG="zoo.cfg"
fi
再将配置文件改为zoo.cfg后,我们不需要对配置项进行任何的修改,直接启动zookeeper的服务。

启动信息如下:

root@ubuntu:/data/zookeeper-3.3.5 # ./bin/zkServer.sh start
JMX enabled by default
Using config: /data/zookeeper-3.3.5/bin/../conf/zoo.cfg
Starting zookeeper ... ./bin/zkServer.sh: 103: ./bin/zkServer.sh: cannot create /tmp/zookeeper/zookeeper_server.pid: Directory nonexistent
FAILED TO WRITE PID

以上的启动过程发生了一个错误,说是无法创建/tmp/zookeeper/zookeeper_server.pid,zookeeper启动后,该文件中保存进程id,我们可以手动创建该目录。

mkdir -p /tmp/zookeeper

创建完成后,我们启动zk服务:

root@ubuntu:/data/zookeeper-3.3.5 # ./bin/zkServer.sh  start
JMX enabled by default
Using config: /data/zookeeper-3.3.5/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
root@ubuntu:/data/zookeeper-3.3.5 # ps aux | grep zookeeper
root      3767  0.4  0.5 1187488 23492 pts/2   Sl   15:44   0:00 /usr/local/jdk1.6.0_33/bin/java -Dzookeeper.log.dir=. -Dzookeeper.root.logger=INFO,CONSOLE -cp /data/zookeeper-3.3.5/bin/../build/classes:/data/zookeeper-3.3.5/bin/../build/lib/*.jar:/data/zookeeper-3.3.5/bin/../zookeeper-3.3.5.jar:/data/zookeeper-3.3.5/bin/../lib/log4j-1.2.15.jar:/data/zookeeper-3.3.5/bin/../lib/jline-0.9.94.jar:/data/zookeeper-3.3.5/bin/../src/java/lib/*.jar:/data/zookeeper-3.3.5/bin/../conf: -Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.local.only=false org.apache.zookeeper.server.quorum.QuorumPeerMain /data/zookeeper-3.3.5/bin/../conf/zoo.cfg
root      3839  0.0  0.0   4368   832 pts/2    S+   15:46   0:00 grep --color=auto zookeeper
root@ubuntu:/data/zookeeper-3.3.5 #

启动完成后,我们使用ps aux | grep zookeeper来查看zookeeper的进程信息,可以看到zookeeper的服务已经启动了。

启动完成后,我们可以使用zookeeper自带的客户端连接服务,进行简单的测试。

启动zookeeper客户端:

root@ubuntu:/data/zookeeper-3.3.5 # ./bin/zkCli.sh -server localhost:2181

如果启动过程中没有发生错误信息,则连接服务器成功。然后我们可以使用简单的命令和服务器进行交互。

[zk: localhost:2181(CONNECTED) 0] ls /
[zookeeper]
[zk: localhost:2181(CONNECTED) 1]

上面使用了ls /来查看zk根目录的的结构,可以看到默认情况下只有一个zookeeper的目录存在。推出和服务器的链接可以使用quit命令。


这里主要讲zookeeper的安装和配置,至于zk命令稍后讲解.....


2、集群环境下的zookeeper配置

此处本人使用了三台虚拟机,IP地址分别为:192.168.1.108,192.168.1.109,192.168.1.111。

注:由于zookeeper的选择策略,所以一个zookeeper集群最好使用级数个节点。

集群下的配置和单机下的配置略有不同,我们需要在zoo.cfg中配置集群的详细信息,还在标注每台服务器的集群编号myid。

详细的配置信息如下:

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
dataDir=/var/lib/zookeeper
logDir=/var/lib/zookeeper/log.log
# the port at which the clients will connect
clientPort=2181
server.1=192.168.1.108:2888:3888
server.2=192.168.1.109:2888:3888
server.3=192.168.1.111:2888:3888

从上面的配置文件中可以看到集群中总共有三台服务器,第一台服务器为:192.168.1.108,第二台为109,第三台为111,其中dataDir和logDir分别表示zookeeper数据文件的目录和log目录。

注:此时数据文件(包括zookeeper_server.pid)保存的目录为/var/lib/zookeeper,首先需要确定该目录存在,如果不存在,需要创建:

mkdir -p /var/lib/zookeeper

然后需要保存每台服务器的编号(myid),进入数据文件目录cd /var/lib/zookeeper

创建文件myid,并写入唯一数值1,在109和111机器上进行同样的操作,只是myid的值分别为2和3。该值和zoo.cfg中的配置信息一致。

配置完成后,分别启动三台机器上的zk服务:

./bin/zkServer.sh start

这样一个简单的zookeeper服务集群就配置完成了!


 

分享到:
评论

相关推荐

    docker.io/dabealu/zookeeper-exporter:v0.1.13

    docker.io/dabealu/zookeeper-exporter:v0.1.13

    zookeeper-3.4.10-API文档-中文版.zip

    赠送jar包:zookeeper-3.4.10.jar; 赠送原API文档:zookeeper-3.4.10-javadoc.jar; 赠送源代码:zookeeper-3.4.10-sources.jar; 赠送Maven依赖信息文件:zookeeper-3.4.10.pom; 包含翻译后的API文档:zookeeper-...

    zookeeper-3.4.5-cdh5.4.0.jar

    zookeeper-3.4.5-cdh5.4.0.jar

    zookeeper-3.3.3-API文档-中文版.zip

    赠送jar包:zookeeper-3.3.3.jar; 赠送原API文档:zookeeper-3.3.3-javadoc.jar; 赠送源代码:zookeeper-3.3.3-sources.jar; 包含翻译后的API文档:zookeeper-3.3.3-javadoc-API文档-中文(简体)版.zip 对应...

    zookeeper-3.5.7:zookeeper原始码解析-源码解析

    阿帕奇ZooKeeper 有关Apache ZooKeeper的最新信息,请访问... To generate an aggregated apidocs for zookeeper-server and zookeeper-jute: mvn javadoc:aggregate (generated files will be at target/site/apido

    apache-zookeeper-3.7.1

    apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper...

    twill-zookeeper-0.6.0-incubating-API文档-中文版.zip

    赠送jar包:twill-zookeeper-0.6.0-incubating.jar; 赠送原API文档:twill-zookeeper-0.6.0-incubating-javadoc.jar; 赠送源代码:twill-zookeeper-0.6.0-incubating-sources.jar; 赠送Maven依赖信息文件:twill-...

    zookeeper-visualizer:zookeeper的可视化管理工具

    zookeeper-visualizerzookeeper的可视化管理工具简介zookeeper-visualizer是zookeeper的可视化管理工具, 用Java8编写, 使用JAVAFX2.0进行ui设计会持续更新, 欢迎提需求环境jdk 1.8.0_60+功能树形箭头往下即可监听...

    zookeeper-3.4.9.jar

    zookeeper-3.4.9.jar ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置...

    twill-zookeeper-0.6.0-incubating-API文档-中英对照版.zip

    赠送jar包:twill-zookeeper-0.6.0-incubating.jar; 赠送原API文档:twill-zookeeper-0.6.0-incubating-javadoc.jar; 赠送源代码:twill-zookeeper-0.6.0-incubating-sources.jar; 赠送Maven依赖信息文件:twill-...

    zookeeper-3.4.9.tar.gz

    zookeeper-3.4.9.tar.gz

    zookeeper-3.4.14.zip

    zookeeper-3.4.14,包含添加系统服务插件及添加bat. 1. zookeeper-3.4.14源包 2. commons-daemon-1.1.0-bin-windows.zip 插件 3. 配置好插件的zookeeper-3.4.14包,右键管理员权限执行zk-server-install.bat

    zookeeper-3.4.8.jar

    zookeeper-3.4.8.jar

    zookeeper-3.4.6-API文档-中英对照版.zip

    赠送jar包:zookeeper-3.4.6.jar; 赠送原API文档:zookeeper-3.4.6-javadoc.jar; 赠送源代码:zookeeper-3.4.6-sources.jar; 包含翻译后的API文档:zookeeper-3.4.6-javadoc-API文档-中文(简体)-英语-对照版....

    zookeeper-3.4.6-API文档-中文版.zip

    赠送jar包:zookeeper-3.4.6.jar; 赠送原API文档:zookeeper-3.4.6-javadoc.jar; 赠送源代码:zookeeper-3.4.6-sources.jar; 赠送Maven依赖信息文件:zookeeper-3.4.6.pom; 包含翻译后的API文档:zookeeper-...

    apache-zookeeper-3.6.0.tar.gz

    apache-zookeeper-3.6.0.tar.gz

    zookeeper-3.4.9-API文档-中文版.zip

    赠送jar包:zookeeper-3.4.9.jar; 赠送原API文档:zookeeper-3.4.9-javadoc.jar; 赠送源代码:zookeeper-3.4.9-sources.jar; 赠送Maven依赖信息文件:zookeeper-3.4.9.pom; 包含翻译后的API文档:zookeeper-...

    zookeeper-3.3.3-API文档-中英对照版.zip

    赠送jar包:zookeeper-3.3.3.jar 赠送原API文档:zookeeper-3.3.3-javadoc.jar 赠送源代码:zookeeper-3.3.3-sources.jar 包含翻译后的API文档:zookeeper-3.3.3-javadoc-API文档-中文(简体)-英语-对照版.zip ...

    dabealu/zookeeper-exporter:v0.1.1

    arm镜像包

    apache-zookeeper-3.5.7-bin.tar.gz

    apache-zookeeper-3.5.7-bin.tar.gz 。

Global site tag (gtag.js) - Google Analytics