HDFSはファイルサーバーに使うものじゃないよ
Hadoop（0.22以前や1.0.0）のHDFSはNameNodeがSPOF（単一障害点）なので、ファイルサーバーやデータの“バックアップ”には向かないという話です。
HDFS上に構築されているHBaseの場合、（HBase自身にはSPOFは無いけれども）HDFSにSPOFがあるので、NameNodeは冗長化した方が良いようです。
冗長化には以下のような仕組みが考えられているようです。
続きを読む
-
- いいね！14
Ryu Kobayashi
@ryu_kobayashi
@masayh いや、それがまったく原因が不明なのです。運用に入る前だったからまだよかったのですが、さすがにこれにはビックリしました。
2012-04-19 13:16:58Hadoop関連技術勉強会＠福岡にて
中村秀剛 nhide
@nhide
MapR FS をファイルサーバとして使うのは効率が悪い。MapReduce処理が早くなるように作ってる。 #hadoopfukuoka
2012-04-19 18:38:28