LINEの100億超/日メッセージを支えるRedis・HBaseのスケールアウト・アップ戦略 #linedevday

10
会社警備員🍣 @okb_m

やっぱ開発環境とかローカル環境はDockder使ってるんねぇ #linedevday

2015-04-28 13:53:24
みくげっと @3qgt

dockerでドカドカしているのか #linedevday

2015-04-28 13:53:44
erukiti @erukiti

不整合とかそこらへんはMapReduceで対処してるんか。おー #linedevday

2015-04-28 13:53:58
いとひろ🐳 @itohiro73

滅びのコマンド"hdfs fs -rmr /"が誤って実行されてもLINEが耐えられるような仕組みを作っていると。実行されない仕組みじゃなくて実行されても大丈夫ってところがキモですね。仕組みが気になる〜 #linedevday

2015-04-28 13:54:04
erukiti @erukiti

まぁ、Docker 使うのはベストだろうなぁ。HBase とかって環境作るのめんどいから、開発には Docker 使いたい #linedevday

2015-04-28 13:54:38
かっきー @kakky_h

2つのHBaseクラスタに対して両方のクラスタに書き込み、両方のクラスタから読み込みをしている #linedevday pic.twitter.com/m1lRRXaAtz

2015-04-28 13:55:49
拡大
おくみん@女子高校生 @okumin

hbaseのキャッシュってヒープなのか。 #linedevday

2015-04-28 13:56:40
suzuki @campanalbero

hbaseのカウンタは使わない #linedevday

2015-04-28 13:56:54
みくげっと @3qgt

HBaseはredisの100倍くらい遅いのでカウンターはredisを使っている。 #linedevday

2015-04-28 13:56:59
erukiti @erukiti

key に salt 使ってるのなんでなんだろ? #linedevday

2015-04-28 13:57:41
oza @oza_x86

HBase 上で MapReduce 動かすと,その度に commit log を MemStore に反映する処理が走って遅そうだけど大丈夫なのかな #linedevday

2015-04-28 13:58:14
会社警備員🍣 @okb_m

ここまでサーバーの規模がでかいとサーバーサイドもAPIを作るいわゆるサーバーエンジニアとストレージチームに分かれるのねぇ。DBAって呼んでも差し支えないか #linedevday

2015-04-28 14:00:24
suzuki @campanalbero

hbase のfilter , scan を使ったページング #linedevday

2015-04-28 14:01:14
suzuki @campanalbero

hbase は chef のレシピで管理 #linedevday

2015-04-28 14:03:36
みくげっと @3qgt

BlueHand見やすいし、メンテナンスしやすそう #linedevday

2015-04-28 14:04:14
とーま @Amothic

こういう管理系のツール、どこもなんとかストラップっぽい #linedevday

2015-04-28 14:04:30
アオヤマ ミント @MintoAoyama

「HBaseのエンジニアは増えないので」#linedevday

2015-04-28 14:04:59
erukiti @erukiti

おおう > DC キャパシティ・・・ #linedevday

2015-04-28 14:05:04
たむたむ🏫 @tamtam180

#linedevday サーバは増えるがエンジニアは増えないw

2015-04-28 14:05:10