インフラエンジニアのためのCassandra情報 ZooKeeperその１：So-net Developer Blog：So-netブログ

	ブログをはじめるログイン

インフラエンジニアのためのCassand..｜インフラエンジニアのためのCassand.. ブログトップ

インフラエンジニアのためのCassandra情報 ZooKeeperその１　[Cassandra] [編集]

CassandraはCASやロックをサポートしていないため、複数のプロセス（またはノード）
から参照して更新されるような一貫性のある共有変数が作れません。
例えばカウンターがその例です。RDBMSであればフィールドをauto incrementにしておけば
複数プロセスからinsertされても常に一意の値が得られます。
Cassandraを使用するアプリケーションでカウンターが必要になったら、そのためだけに
別途MySQL等を使う手もありますが、それではせっかく単一障害点のないCassandraを使って
いても、アプリケーションからするとMySQLのカウンターが単一障害点になってしまいます。
そこで、複数ノードで一貫性と可用性を確保する共有変数領域としてZooKeeperを使ってみます。
ZooKeeperはそれ自体が何かを実行してくれるアプリケーションではなく、分散アプリケーション
を構築するためのサービスとライブラリで構成されています。
このライブラリを使用してアプリケーションを構築することで、ロック、排他制御、同期や
死活監視等いろいろ作ることができます。
サービスはこれら機能を実現するために必要な一貫性と信頼性を持ったデータ領域を提供します。今回は、このデータ領域にカウンターを実装してみます。
ZooKeeperの構造について詳しくは、以下のURLを参照してください。
http://oss.infoscience.co.jp/hadoop/zookeeper/docs/current/zookeeperOver.html
まずは使ってみましょう。
単一ノード（スタンドアロン）でのインストールについては、
http://oss.infoscience.co.jp/hadoop/zookeeper/docs/current/zookeeperStarted.html
を参照すれば簡単に行えますが、複数ノードで動かすことが前提だとちょっと面倒です。
そこで、バイナリ本体、複数ノードで動かす場合の設定サンプル、起動スクリプトを含めた
rpmパッケージを以下に置いておきます。
https://github.com/so-net-developer/Cassandra/tree/master/zookeeper/
ただし、CentOSでしか確認してません。ご利用は自己責任でお願いします。
自分の環境用に作り直したい場合は、SPECファイルも置いておくので、参考までに。
作り方は、Gangliaと同様です。
http://so-net-developer.blog.so-net.ne.jp/hadoop-15-ganglia_1
以降は、このrpmをインストールした環境を前提に説明します。
rpmのインストール。

$ sudo rpm -ivh zookeeper-3.3.1-0.noarch.rpm

インストールすると、/usr/lib/zookeeper-3.3.1にバイナリ本体、
/usr/lib/zookeeper-3.3.1/confに設定サンプル、/etc/init.dに起動スクリプトが
コピーされます。
また、ユーザzookeeperが追加されます。
/var/zookeeperが作られ、データ、pidファイル、myidファイルがここに置かれるように
なります。
複数ノードでクラスタ構成に設定します。
クラスタノードを指定(3台の場合)。

$ cd /usr/lib/zookeeper-3.3.1/conf
$ sudo vi zoo.cfg
server.1=zookeeper1:2888:3888
server.2=zookeeper2:2888:3888
server.3=zookeeper3:2888:3888

zookeeper1,zookeeper2,zookeeper3のところをノードのホストアドレスに変更します。
例）

server.1=xxx.example.com:2888:3888
server.2=yyy.example.com:2888:3888
server.3=zzz.example.com:2888:3888

「server.」の後ろに連番を付けますが、順番には意味はなく各ノードを区別するための番号
となっているようです。
さらにノードを追加する場合は、

server.n=nnn.example.com:2888:3888

と、列を増やしていきます。
ここで定義されたノードのうちのどれかが、ZooKeeperのリーダー役として選出されて、中心的な
役割を果たします。ただし、アプリケーションがこのリーダーを意識することはなく、障害など
ではリーダーが適時切り替わります。
リーダーは、ポート2888を開いて他のノードと通信し、他のノードは3888でお互いに通信を行う。クライアントからの接続は、2181で受け付けます。
zoo.confは全てのノードで同じ内容のものを使用します。起動する前にコピーしておきましょう。次に、さきほど付けたノードの番号をノード自身と結びつけるためのファイル「myid」を
/var/zookeeper以下に作成しておきます。

$ cd /var/zookeeper/
$ echo "1" | sudo tee -a myid

他のノードでも同様に、2,3,・・・の文字を含むmyidファイルを/var/zookeeper以下に作成して
おきます。
では起動してみましょう。
/etc/init.dに起動スクリプトが登録されているので、起動はサービスとして起動します。

$ sudo /sbin/service zookeeper start

全てのノードで同じように起動します。順番は気にしなくても良いです。
起動確認します。2818番にtelnetして「ruok」とコマンドすると「imok」と返してきます。

$ telnet localhost 2181
Escape character is '^]'.
ruok
imokConnection closed by foreign host.
$

次回はカウンターを作ります。

2011-01-11 10:13 nice!(0) コメント(25) トラックバック(0)
共通テーマ：パソコン・インターネット

nice! 0

巨人倍増:www.yahookanpou.com/product/jurenbeizenggouqi.html
威哥王:www.yahookanpou.com/product/weigwang.html
三便宝:www.yahookanpou.com/product/sbb.html
媚薬:www.yahookanpou.com/catalog/63.html
紅蜘蛛:www.yahookanpou.com/product/hongzhizhu.html
花痴:www.yahookanpou.com/product/huachi.html
RU486:www.yahookanpou.com/product/zjyrubjzz.html
中絶薬:www.yahookanpou.com/catalog/25.html
福源春:www.yahookanpou.com/product/fyc.html
精力剤:www.yahookanpou.com/catalog/1.html
三体牛鞭:www.yahookanpou.com/product/santiniubian.html
狼一号:www.yahookanpou.com/product/langyihao.html
狼1号:www.yahookanpou.com/product/voil.html
三體牛鞭:www.yahookanpou.com/product/santiniubian.html
曲美:www.yahookanpou.com/product/qm.html
女性用媚薬:www.yahookanpou.com/catalog/60.html
by 巨人倍増 (2013-03-15 18:03)

巨人倍増:www.yahookanpou.com/product/jurenbeizenggouqi.html
三便宝:www.yahookanpou.com/product/sbb.html
巨人倍増:www.yahookanpou.com/product/jurenbeizenggouqi.html
紅蜘蛛:www.yahookanpou.com/product/hongzhizhucqf.html
曲美:www.yahookanpou.com/product/qm.html
威哥王:www.yahookanpou.com/product/weigwang.html
ウェイカワン:www.yahookanpou.com/product/weigwang.html
五便宝:www.yahookanpou.com/product/wubianbao.html
女性用媚薬:www.yahookanpou.com/catalog/60.html
避妊薬:www.yahookanpou.com/catalog/23.html
蟻力神:www.yahookanpou.com/product/yilishen.html
早漏防止:www.yahookanpou.com/catalog/14.html
悍神:www.yahookanpou.com/product/hansheng.html
脂肪燃焼:www.yahookanpou.com/catalog/28.html
五便宝:www.yahookanpou.com/product/wubianbao.html
小情人:www.yahookanpou.com/product/sexdrop.html
by 巨人倍増 (2013-03-15 18:04)

ステンレススチール　ジュエリー　販売店
弊店は贅沢高い商品販売しておりませんが、粗品も売っていません。商品はすべて高質材料が使われて、知名度がある工場に頼んで生産しております。たくさんファッションデザインジュエリー商品を揃え、安い、手頃な価格で高質な商品を買うことが出来ます。品質が良いので、安心ご利用下さい。お祝い、誕生日、恋人にもプレゼント。是非ホームページをゆっくりご覧ください。
http://www.purchase-for-life.com
mail:purchaselife2013@yahoo.co.jp

by 林　慎吾 (2013-05-07 18:20)

ナイスショップ　オンライン　コム
良い雰囲気オンラインショップです、各種海外有名ブランドを集め、品豊富、手頃価格、見つからない商品も問い合わせ出来、対応丁寧。チタン、タングステン、セラミック素材の指輪、ネックレス、ブレスレット。セクシーランジェリーも販売し、お洒落商品の便利店です、気に合う物が絶対ありますので、ナイスショップ　オンライン（niceshop-online.com）是非覚えて、一度ご来店してホームページをご覧ください。
niceshop312@yahoo.co.jp
http://www.niceshop-online.com

by 小林千代 (2013-05-14 11:58)

威哥王:http://www.威哥王通販.com
巨人倍増:http://www.巨人倍増.net
威哥王:http://www.威哥王通販.net
紅蜘蛛:http://www.紅蜘蛛通販.net

花痴:http://www.花痴.net
紅蜘蛛:http://www.紅蜘蛛通販.com
三便宝:http://www.三便宝.com
三便宝:http://www.三便宝.net

曲美:http://www.曲美通販.com
狼一号:http://www.狼一号.com
狼1号:http://www.狼一号.com
媚薬:http://www.女性用媚薬.com
イカオウ:http://www.威哥王通販.com
ウェイカワン:http://www.威哥王通販.com
イカオウ:http://www.威哥王通販.net
ウェイカワン:http://www.威哥王通販.net

威哥王:http://www.xn--kwrt2jp9z44w3ud.com/
巨人倍増:http://www.xn--gmq15an1qquf.net/
威哥王:http://www.xn--kwrt2jp9z44w3ud.net/
紅蜘蛛:http://www.xn--19zl5rhf54s3ve.net/

花痴:http://www.xn--dtyr5y.net/
紅蜘蛛:http://www.xn--19zl5rhf54s3ve.com/
三便宝:http://www.xn--ehqp5bo3v.com/
三便宝:http://www.xn--ehqp5bo3v.net/

曲美:http://www.xn--lovt16cuijxkd.com/
狼一号:http://www.xn--4gq48lvu4a.com/
狼1号:http://www.xn--4gq48lvu4a.com/
媚薬:http://www.xn--vuss0af3ksozb2s.com/
イカオウ:http://www.xn--kwrt2jp9z44w3ud.com/
ウェイカワン:http://www.xn--kwrt2jp9z44w3ud.com/
イカオウ:http://www.xn--kwrt2jp9z44w3ud.net/
ウェイカワン:http://www.xn--kwrt2jp9z44w3ud.net/
by 花痴 (2013-05-29 12:12)

ヴィヴィアンウエストウッドバッグ http://www.brandstorejapan.com/category-25-b0.html
ポールスミスバッグ http://www.brandstorejapan.com/category-46-b0.html
MCM リュック http://www.brandstorejapan.com/category-59-b0.html
クロムハーツサングラス http://www.brandstorejapan.com/category-65-b0.html
オークリーサングラス http://www.brandstorejapan.com/category-66-b0.html
by ヴィヴィアンウエストウッドバッグ (2013-06-03 16:28)

VANS iphone ケース http://www.iphonecasenew.com/category-15-b0.html
Vivienne iphone ケース http://www.iphonecasenew.com/category-9-b0.html
tory burch iphone ケース http://www.iphonecasenew.com/category-2-b0.html
Paul Smith iphone ケース http://www.iphonecasenew.com/category-14-b0.html
クロムハーツ iphone ケース http://www.iphonecasenew.com/category-54-b0.html
ANNA SUI iphone ケース http://www.iphonecasenew.com/category-4-b0.html
by VANS iphone ケース (2013-06-03 16:28)

ヴィヴィアン財布 http://www.viviennewestwood-shop.com/category-12-b0.html
ヴィヴィアンバッグ http://www.viviennewestwood-shop.com/category-1-b0.html
ヴィヴィアンネックレス http://www.viviennewestwood-shop.com/category-9-b0.html
ヴィヴィアン iphoneケース http://www.viviennewestwood-shop.com/category-24-b0.html
ヴィヴィアン靴 http://www.viviennewestwood-shop.com/category-18-b0.html
by ヴィヴィアン財布 (2013-06-03 16:29)

当サイトは世界一流ブランド品のレプリカ専門店です。
ブランドコピーを販売しているサイトはたくさんあります。
ロレックススーパーコピー見分け方:http://www.jgjg.net/product-4053.html
http://www.jgjg.net/product-4052.html コピーブランド
偽物ブランド：http://www.jgjg.net/
by sdfasfas (2013-09-06 10:42)

当社は国内最大のシャネルコピーのバッグ、財布、時計、眼鏡、アクセサリ生産工場から直接に入荷して、品質は绝対に最高です。
シャネルコピー
シャネルは本物のブランドに負けない高品質がもって、セレブの象徴、芸能人にも愛用される人気偽物ブランドシャネル品は今激安で購入できる。
シャネルアクセサリコピー
シャネル店長:川野
by シャネルコピー (2013-10-29 14:57)

2013年人気最新品バッグ,財布,腕時計,ネクタイ,ベルト全部一流のヴィトン素材を選択してヴィトンコピー品を作っている工場です.
ヴィトン価格で最高品質のヴィトンコピー品をお客様へ提供させていただきます。
ヴィトンコピー
ヴィトンバッグN級N品.
ヴィトン財布激安販売.
100%質量保证！満足保证！
ブランドスカーフ/マフラーコピー
店名：lvutt店
全品送料無料!!
by ヴィトンコピー (2013-11-11 14:46)

夜狼神:http://www.bestkanpou.com/product/yelangs.html
アフリカ超人:http://www.bestkanpou.com/product/alichaoren.html
中華牛鞭:http://www.bestkanpou.com/product/100.html
蔵秘雄精:http://www.bestkanpou.com/product/zangmixj.html
悦可亭:http://www.bestkanpou.com/product/13.html
徳国黒金:http://www.bestkanpou.com/product/deguoheijins.html
止血薬カルバゾクロム錠:http://www.bestkanpou.com/product/jinyut.html

by 夜狼神 (2014-01-09 12:46)

夜狼神:http://www.bestkanpou.com/product/yelangs.html
アフリカ超人:http://www.bestkanpou.com/product/alichaoren.html
中華牛鞭:http://www.bestkanpou.com/product/100.html
蔵秘雄精:http://www.bestkanpou.com/product/zangmixj.html
悦可亭:http://www.bestkanpou.com/product/13.html
福源春:http://www.bestkanpou.com/product/36.html
維尼好:http://bestkanpou.com/product/300.html
奇果:http://www.bestkanpou.com/product/128.html

by 夜狼神 (2014-01-25 18:51)

　それにしても日立金属製の自己潤滑性工具鋼SLD-MAGICのうわさは協力だ。なにしろ潤滑油をボールベアリング状のナノ結晶にしてすべり性を高めるという今までにない鉄鋼材料だからだ。
　このように局所的に摩擦負荷が高いと、独自に潤滑物質を作るみたいなのはインテリジェント材料あるいは一種の生物のような感じも受ける。
by オイル新理論 (2015-03-30 22:26)