Hadoopソースコードリーディング第3回 (2010/06/28 Mon)

Tatsuya Kawano @tatsuya6502

#hadoopreading 来週月曜の発表内容「 HBase と Cassandra -- トレードオフを理解する」だけど、ようやくまとまってきた。機能や性能のような表面上の比較ではなく、設計方針の違いを紹介したかったのだけど、自分なりの結論を導き出すことは意外に難しかった

Tatsuya Kawano @tatsuya6502

RT @togetter_jp: .@tatsuya6502 さんの「Hadoopソースコードリーディング第2回」が1000PV達成してる。別に気にならないけどねっ。うそ。 http://togetter.com/li/24703 #hadoopreading

tetsu3 @tetsu3

RT @tatsuya6502: RT @togetter_jp: .@tatsuya6502 さんの「Hadoopソースコードリーディング第2回」が1000PV達成してる。別に気にならないけどねっ。うそ。 http://togetter.com/li/24703 #hadoopreading

hamburgerkid @hamburger_kid

超期待コンテンツです RT @tatsuya6502: #hadoopreading 来週月曜の発表内容「 HBase と Cassandra -- トレードオフを理解する」だけど、ようやくまとまってきた。機能や性能のような表面上の比較ではなく、設計方針の違いを紹介したかった..

Shinpei Ohtani @shot6

RT @tatsuya6502: RT @togetter_jp: .@tatsuya6502 さんの「Hadoopソースコードリーディング第2回」が1000PV達成してる。別に気にならないけどねっ。うそ。 http://togetter.com/li/24703 #hadoopreading

@okachimachiorz

期待大です。QT @tatsuya6502: #hadoopreading 来週月曜の発表内容「 HBase と Cassandra -- トレードオフを理解する」だけど、ようやくまとまってきた。機能や性能のような表面上の比較ではなく、設計方針の違いを紹介したかったのだけど、

Tocci3 (とっちさん) @tocci3

RT: @tatsuya6502: #hadoopreading 来週月曜の発表内容「 HBase と Cassandra -- トレードオフを理解する」だけど、ようやくまとまってきた。機能や性能のような表面上の比較ではなく、設計方針の違いを紹介したかったのだけど、自分なりの..

楽天開発部 / Rakuten Tech Divisions @rakuten_tech

6/28は #hadoopreading ですね。多くの方がキャンセル待ちされていますので、もしご都合が悪くなられた方は、お手数ですがATNDでキャンセルをお願いいたします。 http://atnd.org/events/5229

Tatsuya Kawano @tatsuya6502

今日はヨメさんにお願いして、育児と家事を半日お休み。近所のカフェで、 #hadoopreading のスライド作成。連続作業時間が１時間を超えるとペースが数倍に上がる。はかどる、はかどる ♬

Tatsuya Kawano @tatsuya6502

#hadoopreading 明日（6/28）のプレゼン資料のドラフト版ができました。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra については詳しくないので、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23Ka4

kabao @kabao

RT @tatsuya6502: #hadoopreading 明日（6/28）のプレゼン資料のドラフト版ができました。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra については詳しくないので、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23Ka4

everyday neet price @just_do_neet

RT @tatsuya6502: #hadoopreading 明日（6/28）のプレゼン資料のドラフト版ができました。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra については詳しくないので、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23Ka4

Shinpei Ohtani @shot6

#hadoopreading の第3回目は明日です。宜しくお願いします。 http://atnd.org/events/5229

Tatsuya Kawano @tatsuya6502

URLを訂正しました。RT: #hadoopreading 明日（6/28）のプレゼン資料のドラフト版。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra について、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23LM3

Takuya UESHIN @ueshin

RT @tatsuya6502: URLを訂正しました。RT: #hadoopreading 明日（6/28）のプレゼン資料のドラフト版。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra について、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23LM3

everyday neet price @just_do_neet

RT @tatsuya6502: URLを訂正しました。RT: #hadoopreading 明日（6/28）のプレゼン資料のドラフト版。もう少し修正する予定ですが、現時点でいったん公開します。 Cassandra について、間違いなどあればご指摘いただけると嬉しいです。 http://ow.ly/23LM3

Shinpei Ohtani @shot6

#hadoopreading 発表の順番は変える、でオッケーデス。

Shinpei Ohtani @shot6

明日はHadoopソースリーディング会第3回です。いつもネタあふれｗするので今回はネタ3本に絞らせていただきました。 #hadoopreading > http://atnd.org/events/5229

Tatsuya Kawano @tatsuya6502

.@shot6 フィードバックありがとうございます！ ダウンしているノードの話をしていますので、removetokenです。QT: データの引継ぎ先は隣接する単一ノードってdecommisionのことでしょうか？ #hadoopreading

Tatsuya Kawano @tatsuya6502

.@shot6 そうですねぇ。表現をもう少し工夫した方がいいのかな（続く）QT: ノード故障の場合は、故障したノードをそのまま復活させるか・新規ノードをたすかはHBaseでも同じではないのでしょうか？Cassandraだけに限った話ではない気が。 #hadoopreading

Tatsuya Kawano @tatsuya6502

.@shot6 Cassandra は、データの配置がtokenで固定されているので、回復には外部からの介在が必要です。しかも、ダウン中は、Consistency Level に影響があるので、状況に応じて、最適（最短）な方法を選ばないといけない。 #hadoopreading

Tatsuya Kawano @tatsuya6502

.@shot6 tokenはそのまま、故障したマシンを復活させるか、それとも、コマンドの投入やマシンの追加などでtokenを変更するのか、そういった判断が必要です。 #hadoopreading

Tatsuya Kawano @tatsuya6502

.@shot6 HBase は、データの配置をマスターが制御しているので、回復が自動的に行われるところが異なります。残ったマシンに自動的にデータを再配置して、すぐに元の状態に戻るので、故障したノードの対応をどうするか急いで判断する必要がありません。 #hadoopreading

Tatsuya Kawano @tatsuya6502

.@shot6 ちなみに、 HBase だと、故障したノードを復活させようとしても、新規ノードを足したときと同様に扱われるので、故障前と同じリージョン配置にはなりません。 #hadoopreading

Tatsuya Kawano @tatsuya6502

さて、どう修正しようかな。シャワーを浴びながら考えるか。 #hadoopreading