Hadoop構築の実践学習メモ2（Zookeeperの設定）

概要

Hadoop構築の実践学習メモ2の続きになります。
※Hadoopのインストールは済んでいることが前提になります。

Zookeeperのアンサンブルを組んで冗長化の設定と実際に切り替わるところまで確認します。

Zookeeperの設定

３台でアンサンブルを組む

対象はマスターノード２台とクライアントノード

• hadoop-master
• hadoop-master2
• hadoop-client

設定ファイル

vim /etc/zookeeper/conf/zoo.cfg

起動

マスターノードの２台とクライアントノードで以下を行う

Nはserver.Nで指定した数字

また、dataDir配下にmyidを直接用意しても対応可能だと思う

状態確認

リーダとフォローの確認をhadoop-client（どこでも可能なはず）で行う

上記の場合だとhadoop-master2が現在リーダ

リーダをKILLして他がリーダになることを確認する

この状態でリーダがどうなったのかを確認

このあとhadoop-clientを起動し、followerになったことを確認したので問題なさそう。

まとめ

奇数台で組むのですが、５台で組んだほうが安全ですね。
実際に切り替わりサービスを継続できそうなところまで確認できてよかったと思います。