タグ

関連タグで絞り込む (0)

  • 関連タグはありません

タグの絞り込みを解除

zookeeperとstormに関するkimutanskのブックマーク (3)

  • Stormが使うZookeeperの中ってどうなっているの?(まとめ - 夢とガラクタの集積場

    こんにちは。 とりあえず、2回とりあえずコマンドラインでうって来たもののまとめです。 StormのZookeeperに保存している情報は下記のような構成になっていました。 storm/ StormのZookeeperルートディレクトリ ├―workerbeats/ Workerプロセスの設定情報/HeartBeat情報/Worker中の各タスクの統計情報(メッセージ単位の情報はもたない) | └─【TopologyID1】/ |     【SupervisorID1】-【Port番号1】(clojure.lang.PersistentArrayMap) |     【SupervisorID1】-【Port番号2】(clojure.lang.PersistentArrayMap) |     【SupervisorID2】-【Port番号1】(clojure.lang.Persistent

    Stormが使うZookeeperの中ってどうなっているの?(まとめ - 夢とガラクタの集積場
    kimutansk
    kimutansk 2012/09/30
    #stormjp とりあえずまとめ。これでStormがZookeeper上で何をやっているかの概要はわかりますかねぇ。
  • Stormが使うZookeeperの中ってどうなっているの?(その2 - 夢とガラクタの集積場

    こんにちは。 前回に引き続き、Zookeeperの中を(とりあえずわかる範囲で)見て行きます。 前回はStormのクラスタを起動した状態での確認だったので、 今回はTopologyをSubmitした状態での確認ですね。 1.TopologySubmit前の下準備 Stormの機能をフルに実行した状態での確認を行いたいため、 StormStarterプロジェクトのTestWordSpoutを改造して下記のWordSpoutにし、 Ack/Fail機構を有効にした状態にします。 public class WordSpout extends BaseRichSpout { /** * */ private static final long serialVersionUID = -3089902525505221271L; public static Logger LOG = Logger.ge

    Stormが使うZookeeperの中ってどうなっているの?(その2 - 夢とガラクタの集積場
    kimutansk
    kimutansk 2012/09/29
    #stormjp とりあえずZookeeperの中身をのぞいたところ、個々のメッセージの情報を除けばStorm動作に必要な情報がほぼ全て入っていることが分かりました・・・何か中身をきちんと見る手段ないですかね
  • Stormが使うZookeeperの中ってどうなっているの? - 夢とガラクタの集積場

    こんにちは。 最近テーマ・・・というのも無くなりつつあるので、 とりあえずその日その日で思いついた雑多ネタを投稿していくようなノリになりそうです。ハイ。 とまぁ、そういうぼやきはさておき。 1.StormはZookeeperを何に使用しているのか? StormはZookeeperを状態管理/同期に使用しているらしい・・・ というのがまずWikiを読んでみたことからわかることです。 ただ、実際にどんな情報をZookeeperに保持しているかはわかりません。 なので、まずは実際にのぞいてみようと思います。 2.コマンドラインでのぞいてみる まずは下記の構成でStormクラスタを立ち上げます。 StormUIから見るとこういう状態になりますね。 その上で、hyperionサーバで「zkCli.sh」コマンドを実行すると下記の結果となります。 /usr/lib/zookeeper/bin/zkCl

    Stormが使うZookeeperの中ってどうなっているの? - 夢とガラクタの集積場
    kimutansk
    kimutansk 2012/09/28
    とりあえず、中に何があるんでしょうねぇ・・・
  • 1
pFad - Phonifier reborn

Pfad - The Proxy pFad of © 2024 Garber Painting. All rights reserved.

Note: This service is not intended for secure transactions such as banking, social media, email, or purchasing. Use at your own risk. We assume no liability whatsoever for broken pages.


Alternative Proxies:

Alternative Proxy

pFad Proxy

pFad v3 Proxy

pFad v4 Proxy