zookeeper叢集配置

ZooKeeper分布式模式安裝（ZooKeeper叢集）：

首先要明确的是，ZooKeeper叢集是一個獨立的分布式協調服務叢集，“獨立”的含義就是說，如果想使用ZooKeeper實作分布式應用的協調與管理，簡化協調與管理，任何分布式應用都可以使用，這就要歸功于Zookeeper的資料模型（Data Model）和層次命名空間（Hierarchical Namespace）結構，詳細可以參考http://zookeeper.apache.org/doc/trunk/zookeeperOver.html。在設計你的分布式應用協調服務時，首要的就是考慮如何組織層次命名空間。

下面說明分布式模式的安裝配置，過程如下所示：

第一步：主機名稱到IP位址映射配置

ZooKeeper叢集中具有兩個關鍵的角色：Leader和Follower。叢集中所有的結點作為一個整體對分布式應用提供服務，叢集中每個結點之間都互相連接配接，是以，在配置的ZooKeeper叢集的時候，每一個結點的host到IP位址的映射都要配置上叢集中其它結點的映射資訊。

例如，我的ZooKeeper叢集中每個結點的配置，以slave-01為例，/etc/hosts内容如下所示：

view plain co

192.168.0.179   slave-01  
192.168.0.178   slave-02  
192.168.0.177   slave-03      

ZooKeeper采用一種稱為Leader election的選舉算法。在整個叢集運作過程中，隻有一個Leader，其他的都是Follower，如果ZooKeeper叢集在運作過程中Leader出了問題，系統會采用該算法重新選出一個Leader。是以，各個結點之間要能夠保證互相連接配接，必須配置上述映射。

ZooKeeper叢集啟動的時候，會首先選出一個Leader，在Leader election過程中，某一個滿足選舉算的結點就能成為Leader。整個叢集的架構可以參考http://zookeeper.apache.org/doc/trunk/zookeeperOver.html#sc_designGoals。

第二步：修改ZooKeeper配置檔案

在其中一台機器（slave-01）上，解壓縮zookeeper-3.3.4.tar.gz，修改配置檔案conf/zoo.cfg，内容如下所示：

tickTime=2000  
dataDir=/home/hadoop/storage/zookeeper  
clientPort=2181  
initLimit=5  
syncLimit=2  
server.1=slave-01:2888:3888  
server.2=slave-02:2888:3888  
server.3=slave-03:2888:3888      

view plai上述配置内容說明，可以參考http://zookeeper.apache.org/doc/trunk/zookeeperStarted.html#sc_RunningReplicatedZooKeeper。

第三步：遠端複制分發安裝檔案

上面已經在一台機器slave-01上配置完成ZooKeeper，現在可以将該配置好的安裝檔案遠端拷貝到叢集中的各個結點對應的目錄下：ew plain copy

cd /home/hadoop/installation/  
scp -r zookeeper-3.3.4/ hadoop@slave-02:/home/hadoop/installation/  
scp -r zookeeper-3.3.4/ hadoop@slave-03:/home/hadoop/installation/      

第四步：設定myid

在我們配置的dataDir指定的目錄下面，建立一個myid檔案，裡面内容為一個數字，用來辨別目前主機，conf/zoo.cfg檔案中配置的server.X中X為什麼數字，則myid檔案中就輸入這個數字，例如：

hadoop@slave-01:~/installation/zookeeper-3.3.4$ echo "1" > /home/hadoop/storage/zookeeper/myid  
hadoop@slave-02:~/installation/zookeeper-3.3.4$ echo "2" > /home/hadoop/storage/zookeeper/myid  
hadoop@slave-03:~/installation/zookeeper-3.3.4$ echo "3" > /home/hadoop/storage/zookeeper/myid      

view plain cop

按照上述進行配置即可。

第五步：啟動ZooKeeper叢集

在ZooKeeper叢集的每個結點上，執行啟動ZooKeeper服務的腳本，如下所示：

啟動zookeeper指令bin/zkServer.sh start

hadoop@slave-01:~/installation/zookeeper-3.3.4$ bin/zkServer.sh start  
hadoop@slave-02:~/installation/zookeeper-3.3.4$ bin/zkServer.sh start  
hadoop@slave-03:~/installation/zookeeper-3.3.4$ bin/zkServer.sh start      

我啟動的順序是slave-01>slave-02>slave-03，由于ZooKeeper叢集啟動的時候，每個結點都試圖去連接配接叢集中的其它結點，先啟動的肯定連不上後面還沒啟動的，是以日志前面部分的異常是可以忽略的。通過後面部分可以看到，叢集在選出一個Leader後，最後穩定了。

其他結點可能也出現類似問題，屬于正常。

第六步：安裝驗證

可以通過ZooKeeper的腳本來檢視啟動狀态，包括叢集中各個結點的角色（或是Leader，或是Follower），如下所示，是在ZooKeeper叢集中的每個結點上查詢的結果：查詢叢集每個節點狀态指令 bin/zkServer.sh status

hadoop@slave-01:~/installation/zookeeper-3.3.4$ bin/zkServer.sh status  
JMX enabled by default  
Using config: /home/hadoop/installation/zookeeper-3.3.4/bin/../conf/zoo.cfg  
Mode: follower  
  
hadoop@slave-02:~/installation/zookeeper-3.3.4$  bin/zkServer.sh status  
JMX enabled by default  
Using config: /home/hadoop/installation/zookeeper-3.3.4/bin/../conf/zoo.cfg  
Mode: leader  
  
hadoop@slave-03:~/installation/zookeeper-3.3.4$  bin/zkServer.sh status  
JMX enabled by default  
Using config: /home/hadoop/installation/zookeeper-3.3.4/bin/../conf/zoo.cfg  
Mode: follower      

 cop

hadoop@slave-03:~/installation/zookeeper-3.3.4$ bin/zkCli.sh -server slave-01:2181  
Connecting to slave-01:2181  
2012-01-08 07:14:21,068 - INFO  [main:Environment@97] - Client environment:zookeeper.version=3.3.3-1203054, built on 11/17/2011 05:47 GMT  
2012-01-08 07:14:21,080 - INFO  [main:Environment@97] - Client environment:host.name=slave-03  
2012-01-08 07:14:21,085 - INFO  [main:Environment@97] - Client environment:java.version=1.6.0_30  
2012-01-08 07:14:21,089 - INFO  [main:Environment@97] - Client environment:java.vendor=Sun Microsystems Inc.  
2012-01-08 07:14:21,095 - INFO  [main:Environment@97] - Client environment:java.home=/home/hadoop/installation/jdk1.6.0_30/jre  
2012-01-08 07:14:21,104 - INFO  [main:Environment@97] - Client environment:java.class.path=/home/hadoop/installation/zookeeper-3.3.4/bin/../build/classes:/home/hadoop/installation/zookeeper-3.3.4/bin/../build/lib/*.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../zookeeper-3.3.4.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/log4j-1.2.15.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/jline-0.9.94.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/commons-lang-2.4.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/commons-collections-3.2.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/commons-cli-1.1.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/apache-rat-tasks-0.6.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../lib/apache-rat-core-0.6.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../src/java/lib/*.jar:/home/hadoop/installation/zookeeper-3.3.4/bin/../conf:/home/hadoop/installation/jdk1.6.0_30/lib/*.jar:/home/hadoop/installation/jdk1.6.0_30/jre/lib/*.jar  
2012-01-08 07:14:21,111 - INFO  [main:Environment@97] - Client environment:java.library.path=/home/hadoop/installation/jdk1.6.0_30/jre/lib/i386/client:/home/hadoop/installation/jdk1.6.0_30/jre/lib/i386:/home/hadoop/installation/jdk1.6.0_30/jre/../lib/i386:/usr/java/packages/lib/i386:/lib:/usr/lib  
2012-01-08 07:14:21,116 - INFO  [main:Environment@97] - Client environment:java.io.tmpdir=/tmp  
2012-01-08 07:14:21,124 - INFO  [main:Environment@97] - Client environment:java.compiler=<NA>  
2012-01-08 07:14:21,169 - INFO  [main:Environment@97] - Client environment:os.name=Linux  
2012-01-08 07:14:21,175 - INFO  [main:Environment@97] - Client environment:os.arch=i386  
2012-01-08 07:14:21,177 - INFO  [main:Environment@97] - Client environment:os.version=3.0.0-14-generic  
2012-01-08 07:14:21,185 - INFO  [main:Environment@97] - Client environment:user.name=hadoop  
2012-01-08 07:14:21,188 - INFO  [main:Environment@97] - Client environment:user.home=/home/hadoop  
2012-01-08 07:14:21,190 - INFO  [main:Environment@97] - Client environment:user.dir=/home/hadoop/installation/zookeeper-3.3.4  
2012-01-08 07:14:21,197 - INFO  [main:ZooKeeper@379] - Initiating client connection, connectString=slave-01:2181 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@bf32c  
2012-01-08 07:14:21,305 - INFO  [main-SendThread():ClientCnxn$SendThread@1061] - Opening socket connection to server slave-01/192.168.0.179:2181  
Welcome to ZooKeeper!  
2012-01-08 07:14:21,376 - INFO  [main-SendThread(slave-01:2181):ClientCnxn$SendThread@950] - Socket connection established to slave-01/192.168.0.179:2181, initiating session  
JLine support is enabled  
[zk: slave-01:2181(CONNECTING) 0] 2012-01-08 07:14:21,872 - INFO  [main-SendThread(slave-01:2181):ClientCnxn$SendThread@739] - Session establishment complete on server slave-01/192.168.0.179:2181, sessionid = 0x134bdcd6b730000, negotiated timeout = 30000  
  
WATCHER::  
  
WatchedEvent state:SyncConnected type:None path:null  
  
[zk: slave-01:2181(CONNECTED) 0] ls /  
[zookeeper]