Apache Curator
ZooKeeperã®snapshotã‚’Clean upã—ãŸã„ã®ã ㌠– OpenGroove
（注）å‰åŠã¯å®Œå…¨ã«ç„¡é§„ãªè¿·èµ°ã®è¨˜éŒ²ã§ã™ã€‚çµè«–ã¯æœ€å¾Œã«æ›¸ã„ã¦ã‚ã‚‹ã®ã§ã€ã›ã£ã‹ã¡ãªäººã¯ã‚‚ã†ãã£ã¡ã‚’èªã‚“ã§ãã ã•ã„。 HBaseã¨é€£æºã™ã‚‹ZooKeeperã®ãƒã‚¿ã€‚ZooKeeperã®dataDirã«ã¯ãƒã‚¤ãƒŠãƒªã®ãƒã‚°ã¨ã‚¹ãƒŠãƒƒãƒ—ショットãŒä¿ç®¡ã•ã‚Œã‚‹ãŒã€ã»ã£ãŸã‚‰ã‹ã—ã«ã—ã¦ã„ã‚‹ã¨ã€ã„ã¤ã®ã¾ã«ã‹ã™ã”ã„ã“ã¨ã«ãªã‚‹ã€‚å¤ã„ファイルã®å‰Šé™¤ç‰ã®ãƒ¡ãƒ³ãƒ†ãƒŠãƒ³ã‚¹ã¯ã€ãƒ¦ãƒ¼ã‚¶ãƒ¼å´ã§è¡Œã†å¿…è¦ãŒã‚る。 $ ls -lh /var/lib/zookeeper/version-2 -rw-r–r– 1 zookeeper zookeeper 65M Jan 15 00:08 log.1 -rw-r–r– 1 zookeeper zookeeper 65M Feb 17 10:51 log.13b -rw-r–r– 1 zookeeper zookeeper 65M Feb 17 15:29 log.19f : : -rw-r–r–
Service Discovery: Zookeeper vs etcd vs Consul
The more services we have, the bigger the chance for a conflict to occur if we are using predefined ports. After all, there can be no two services listening on the same port. Managing a tight list of all the ports used by, lets say, hundred services is a challenge in itself. Add to that list the databases those services need and the number grows even more. For that reason we should deploy services
ZooKeeperを使ã£ã¦ã¿ã‚‹(2) - hidemonã®ãƒ–ãƒã‚°
ノード作æˆã¨èªã¿å‡ºã—ã«ã©ã®ãらã„コストãŒã‹ã‹ã‚‹ã‹è¦‹ã¦ã¿ã‚ˆã†ã€‚ã¨ã‚Šã‚ãˆãšã€ãƒãƒ¼ã‚«ãƒ«ã§ã€‚ã‚ã‚“ã¾ã‚Šæ„味ãªã„ã‘ã©ã€ä¸Šé™å€¤ã¯ã‚ã‹ã‚‹ã ã‚ã†ã€‚ ノードã®ä½œæˆ ã“ã‚“ãªæ„Ÿã˜ã§ã€1000個作ã£ã¦ã¿ã‚‹ã€‚ byte [] b = args[2].getBytes(); long start = System.currentTimeMillis(); for (int i = 0; i < 1000; i++) { zk.create(args[1], b, acls, CreateMode.EPHEMERAL_SEQUENTIAL); } long end = System.currentTimeMillis();ノードを作るã¨ãã«CreateMode ã«SEQUENTIALを指定ã™ã‚‹ã¨ã€ãƒŽãƒ¼ãƒ‰åã«10æ¡ã®é€£ç•ªãŒè¿½åŠ ã•ã‚Œã€ãƒ¦ãƒ‹ãƒ¼ã‚¯ãªåå‰ã«ãªã‚‹ã€‚"hoge" ãªã‚‰ "hoge0000000001", "hoge00
ZooKeeper スタートガイド
ã“ã®ãƒ‰ã‚ュメントã§ã¯ã€ZooKeeper を使ã„始ã‚ã‚‹ã®ã«å¿…è¦ãªæƒ…å ±ã«ã¤ã„ã¦èª¬æ˜Žã—ã¦ã„ã¾ã™ã€‚主ãªæƒ³å®šèªè€…㯠ZooKeeper を使ã£ã¦ã¿ãŸã„ã¨ã„ã†é–‹ç™ºè€…ã§ã™ã€‚スタンドアãƒãƒ³ã® ZooKeeper サーãƒãƒ¼ã‚’セットアップã™ã‚‹ãŸã‚ã®ç°¡å˜ãªã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«æ‰‹é †ã‚’ã¯ã˜ã‚ã€ZooKeeper サーãƒãƒ¼ãŒå®Ÿè¡Œã•ã‚Œã¦ã„ã‚‹ã“ã¨ã‚’確èªã™ã‚‹ãŸã‚ã®ã‚³ãƒžãƒ³ãƒ‰ã€ç°¡å˜ãªãƒ—ãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ä¾‹ã‚’示ã—ã¾ã™ã€‚最後ã«ã€ã‚‚ã†å°‘ã—複雑ãªå‹•ä½œãƒ¢ãƒ¼ãƒ‰ã§ ZooKeeper をセットアップã™ã‚‹æ–¹æ³•ã‚’ç°¡å˜ã«ç¤ºã—ã€ãƒ¬ãƒ—リケーションモードã§ã®ãƒ‡ãƒ—ãƒã‚¤ãƒ¡ãƒ³ãƒˆã‚„トランザクションãƒã‚°ã®æœ€é©åŒ–ãªã©ã«ã¤ã„ã¦èª¬æ˜Žã—ã¾ã™ã€‚ãªãŠã€å•†ç”¨ç›®çš„ã§ã®ãƒ‡ãƒ—ãƒã‚¤ãƒ¡ãƒ³ãƒˆæ–¹æ³•ã®è©³ç´°ã«ã¤ã„ã¦ã¯ã€ã€ŒZooKeeper 管ç†è€…ガイドã€ã‚’å‚ç…§ã—ã¦ãã ã•ã„。 å¿…è¦ãªã‚‚㮠管ç†è€…ガイドã®ã€Œå¿…è¦ã‚·ã‚¹ãƒ†ãƒ ã€ã‚’å‚ç…§ã—ã¦ãã ã•ã„。 ダウンãƒãƒ¼ãƒ‰ ZooKeeper ディストリビューションを入手ã™ã‚‹ã«
Groovy 㧠Apache ZooKeeper を使ㆠ- Webコンテンツã®åˆ†æ•£ãƒ€ã‚¦ãƒ³ãƒãƒ¼ãƒ‰ - ãªã‚“ã¨ãªã㪠Developer ã®ãƒ¡ãƒ¢
id:fits:20110925 ã‚„ id:fits:20111016 ã§ã‚„ã£ãŸã‚ˆã†ãª Web コンテンツã®ãƒ€ã‚¦ãƒ³ãƒãƒ¼ãƒ‰å‡¦ç†ã‚’ Apache ZooKeeper を使ã£ã¦åˆ†æ•£å‡¦ç†ã—ã¦ã¿ã¾ã—ãŸã€‚ Apache ZooKeeper ã¯åˆ†æ•£ã‚·ã‚¹ãƒ†ãƒ é–“ã§å”調動作ã•ã›ã‚‹ãŸã‚ã®ã‚µãƒ¼ãƒãƒ¼ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã§ã€ã‚·ãƒ³ãƒ—ルã§å¯ç”¨æ€§ãŒé«˜ããªã‚‹ã‚ˆã†ã«è¨è¨ˆã•ã‚Œã¦ã„ã¾ã™ã€‚ 今回ã¯ã€ã‚¹ã‚¿ãƒ³ãƒ‰ã‚¢ãƒãƒ³ãƒ¢ãƒ¼ãƒ‰ã§ç«‹ã¡ä¸Šã’ãŸå˜ä¸€ã® ZooKeeper サーãƒãƒ¼ã« URL ã‚’è¨å®šã—㟠znode*1 を登録ã—ã¦ãŠãã€è¤‡æ•°ã®ãƒ—ãƒã‚»ã‚¹ã§å®Ÿè¡Œã—ãŸã‚¹ã‚¯ãƒªãƒ—トãŒãã‚Œãžã‚Œ URL ã‚’å–å¾—ã—ã€Web コンテンツをダウンãƒãƒ¼ãƒ‰ã™ã‚‹ã‚ˆã†ãªå‡¦ç†ã‚’è¡Œã„ã¾ã™ã€‚ Groovy 1.8.4 Apache ZooKeeper 3.4.0 サンプルソース㯠http://github.com/fits/try_samples/tree/master/blog/2011
管ç†ãŒå›°é›£â€•åˆ†æ•£å‡¦ç†ã®å¸¸è˜ã¯ZooKeeperã§å¤‰ã‚ã‚‹
管ç†ãŒå›°é›£â€•åˆ†æ•£å‡¦ç†ã®å¸¸è˜ã¯ZooKeeperã§å¤‰ã‚る：ビッグデータ処ç†ã®å¸¸è˜ã‚’Javaã§èº«ã«ã¤ã‘る（8）（1/3 ページ） Hadoopã‚’ã¯ã˜ã‚ã€Java言語を使ã£ã¦æ§‹ç¯‰ã•ã‚Œã‚‹ã“ã¨ãŒå¤šã„「ビッグデータã€å‡¦ç†ã®ãŸã‚ã®ãƒ•ãƒ¬ãƒ¼ãƒ ワークï¼ãƒ©ã‚¤ãƒ–ラリを紹介ã—ãªãŒã‚‰ã€å¤§é‡ãƒ‡ãƒ¼ã‚¿ã‚’活用ã™ã‚‹ãŸã‚ã®æŠ€è¡“ã®å¸¸è˜ã‚’身ã«ä»˜ã‘ã¦ã„ã連載 分散処ç†ã®èª²é¡ŒãŒã€Œç®¡ç†ã€ãªã®ã¯å¸¸è˜ 複数ã®è¨ˆç®—機上ã§å‹•ä½œï¼ˆåˆ†æ•£ï¼‰ã™ã‚‹ã‚¢ãƒ—リケーションã€ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ãŒå¤šãå˜åœ¨ã—ã¾ã™ã€‚分散ソフトウェアã¯è¤‡æ•°ã®è¨ˆç®—æ©Ÿã§å‹•ä½œã™ã‚‹ã“ã¨ã§å¤§é‡ã®ãƒ‡ãƒ¼ã‚¿ã‚’扱ãˆãŸã‚Šã€é«˜è² è·ãªçŠ¶æ³ã«å¯¾å‡¦ã—ã¾ã™ã€‚本稿ã§ã¯ã€è¤‡æ•°ã®è¨ˆç®—機（クラスタ）ã§å‹•ä½œã™ã‚‹å„サーãƒã‚’「インスタンスã€ã¨å‘¼ã³ã¾ã™ã€‚ 本連載ã§ç´¹ä»‹ã—ãŸåˆ†æ•£Key-Valueデータベースã§ã‚る「HBaseã€ã¯è¤‡æ•°ã®è¨ˆç®—æ©Ÿã§å‹•ä½œã™ã‚‹ä»£è¡¨çš„ãªã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã§ã™ã€‚両ソフトウェアã¯ã¨ã‚‚ã«ã€ŒApache ZooKeeperã€ï¼ˆä»¥ä¸‹ã€Z
ZooKeeper: é¢å€’ãªåˆ†æ•£ã‚·ã‚¹ãƒ†ãƒ ã®ã‚³ãƒ¼ãƒ‡ã‚£ãƒãƒ¼ãƒˆã‚’支æ´ã™ã‚‹ã‚µãƒ¼ãƒ“ス
ZooKeeper: é¢å€’ãªåˆ†æ•£ã‚·ã‚¹ãƒ†ãƒ ã®ã‚³ãƒ¼ãƒ‡ã‚£ãƒãƒ¼ãƒˆã‚’支æ´ã™ã‚‹ã‚µãƒ¼ãƒ“ス ZooKeeper ã¯ã€åˆ†æ•£ã‚¢ãƒ—リケーションã®ãŸã‚ã®ãƒ‘フォーマンスã®é«˜ã„コーディãƒãƒ¼ã‚·ãƒ§ãƒ³ã‚µãƒ¼ãƒ“スã§ã™ã€‚ZooKeeper ã§ã¯ã€åå‰ä»˜ã‘ã€è¨å®šç®¡ç†ã€åŒæœŸåŒ–ã€å„種グループサービスãªã©ã€åˆ©ç”¨é »åº¦ã®é«˜ã„ã•ã¾ã–ã¾ãªã‚µãƒ¼ãƒ“スãŒç”¨æ„ã•ã‚Œã¦ã„ã‚‹ã®ã§ã€ã“れらã®ã‚µãƒ¼ãƒ“スをゼãƒã‹ã‚‰ä½œæˆã™ã‚‹å¿…è¦ã¯ã‚ã‚Šã¾ã›ã‚“。ZooKeeper ã‚’ãã®ã¾ã¾ä½¿ãˆã°ã€åˆæ„プãƒãƒˆã‚³ãƒ«ã€ã‚°ãƒ«ãƒ¼ãƒ—管ç†ãƒ—ãƒãƒˆã‚³ãƒ«ã€ãƒªãƒ¼ãƒ€ãƒ¼é¸æŒ™ãƒ—ãƒãƒˆã‚³ãƒ«ã€ãŠã‚ˆã³ãƒ—レゼンスプãƒãƒˆã‚³ãƒ«ã‚’実装ã§ãã¾ã™ã€‚ZooKeeper を基ã«ã€ç‹¬è‡ªã®ãƒ‹ãƒ¼ã‚ºã«å¯¾å¿œã—ãŸã‚µãƒ¼ãƒ“スを構築ã™ã‚‹ã“ã¨ã‚‚ã§ãã¾ã™ã€‚ 以下ã®ãƒ‰ã‚ュメントã§ã¯ã€ZooKeeper ã®ã‚³ãƒ³ã‚»ãƒ—トや ZooKeeper を使ã†ãŸã‚ã®æ‰‹é †ã«ã¤ã„ã¦èª¬æ˜Žã—ã¦ã„ã¾ã™ã€‚ドã‚ュメントをèªã‚“ã§ã‚ã‹ã‚‰ãªã„ã“ã¨ãŒã‚ã£ãŸã‚‰ã€ãƒ¡ãƒ¼ãƒªãƒ³ã‚°ãƒªã‚¹ãƒˆã«è³ªå•ã‚’投稿ã™ã‚‹ã‹ã€ã‚¢
Groovy 㧠ZooKeeper を組ã¿è¾¼ã¿å®Ÿè¡Œ - ãªã‚“ã¨ãªã㪠Developer ã®ãƒ¡ãƒ¢
以å‰ã€Groovy 㧠Apache ZooKeeper を使ㆠã«ã¦ ZooKeeper ã®ã‚¯ãƒ©ã‚¤ã‚¢ãƒ³ãƒˆã‚’ Groovy スクリプトã§å®Ÿè£…ã—ã¾ã—ãŸãŒã€ä»Šå›žã¯ ZooKeeper ã®ã‚µãƒ¼ãƒãƒ¼ã‚’ Groovy ã§çµ„ã¿è¾¼ã¿å®Ÿè¡Œã—ã¦ã¿ã¾ã—ãŸã€‚ Apache ZooKeeper 3.4.5 サンプルソース㯠http://github.com/fits/try_samples/tree/master/blog/20131109/ ZooKeeper 組ã¿è¾¼ã¿å®Ÿè¡Œã‚¹ã‚¯ãƒªãƒ—ト ZooKeeper を組ã¿è¾¼ã¿å®Ÿè¡Œã™ã‚‹ãŸã‚ã®å˜ç´”ãªã‚¹ã‚¯ãƒªãƒ—トã¯ä¸‹è¨˜ã®ã‚ˆã†ã«ãªã‚Šã¾ã™ã€‚ 第一引数㫠ZooKeeper è¨å®šãƒ•ã‚¡ã‚¤ãƒ«ã®ãƒ‘スを指定ã—ã¦å®Ÿè¡Œã—ã¾ã™ã€‚ zk_run.groovy @Grapes([ @Grab("org.apache.zookeeper:zookeeper:3.4.5"), @GrabExclude("
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
zookeeper leader follower 確èªã€€ã‚³ãƒžãƒ³ãƒ‰ - Qiita
zookeeper å‹•ã‹ã—ã¦ã¿ãŸãƒ¡ãƒ¢ - Qiita
GitHub - AnsibleShipyard/ansible-zookeeper: Ansible playbook for ZooKeeper
GitHub - soabase/exhibitor: ZooKeeper co-process for instance monitoring, backup/recovery, cleanup and visualization.
http://www.youtube.com/watch?v=f_fGwa2-rMk
{{#tags}}- {{label}}
{{/tags}}