【新機能】作り忘れたまとめはありませんか?31日前まで期間指定してまとめが作れる高度な検索ができました。有料APIだからツイートの漏れはありません!
4
ログインして広告を非表示にする
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 09:46:17
明日から始まるOpen Source Summit Japan 2017の2日目にWalBの発表をします。WalBはオーバーヘッドがとても低い、ブロックデバイス用のリアルタイムなバックアップシステムです。実運用での経験も話します。 ossjapan2017.sched.com/event/AOn5
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 09:47:11
Webにあるタイトルはちょっと古くて、新しいのはこれです(修正依頼は出してますがまだ更新されてないみたいです) "WalB: Real-time and Incremental Backup System for Block Devices"
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 09:50:08
Linuxのメインラインカーネルに含まれるdm-snapやdm-thinと性能比較を行い、WalBの方がIOレイテンシが小さく、バックアップにかかる時間も非常に小さいことが確認できました。(4KiBランダムライトをしつつ、裏でインクリメンタルバックアップを取る実験)
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 09:59:25
サイボウズクラウドでは毎日25TBの書き込みIOが発生。WalBは主に2つの特長がある:IOスパイクがない(IOスパイクはユーザ体験に影響)、めちゃ早くバックアップ可能(データ増加で日次バックアップできなくなると困る)。dm-snapやdm-thinは我々の要求を満たさない。
Ko Kazaana @windhole 2017-05-30 13:24:13
サイボウズ・ラボで開発を続けてきた「WalB」(わるびー)が、いよいよ実運用段階に入りました。Open Source Summit Japanの2日目(6月1日 11:00-)で、各種計測結果も含めて発表します。ご都合つく方は、ぜひ! twitter.com/uchan_nos/stat…
りおりおすと @rioriost 2017-05-30 13:26:27
サイボウズ・ラボのWalB、すげー気になるなぁ
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 13:27:41
ちなみに、WalB(わるびー)はWrite Ahead Logging for Block devicesの略で、ブロックデバイスをWALを用いてバックアップするものです。
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-30 17:49:10
とある人にWalBの話をしたら、それは悪いBeeですかって言われたことある。(Beeというコードネームのプロジェクトが別途ある)
ymko_diary @ymko_diary 2017-05-30 22:27:26
WalBすんなりmakeが通ったので何か間違ったんじゃないかと疑心暗鬼
mizumm @msysmzm 2017-05-30 23:15:58
明日から open source summit かぁ NVDIMM関連のと Walb のセッションは聴いてみたいなぁ 残念ながらアレがアレだから行けないんだけども。。。
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-31 06:33:57
おお、Open Source Summit JapanのWalBのアブストラクトが更新されてた!嬉しい! ossjapan2017.sched.com/mobile/#sessio…
sat @satoru_takeuchi 2017-05-31 06:51:49
WalBはWAL(ファイルシステムでいうジャーナリングデータ)を専用のログデバイスに書き出せるところまでは、ジャナーナリング領域を別デバイスに指定できるファイルシステムと似てるけど、WALをインクリメンタルバックアップ用に常に吸い出し続けられるところが速さのポイントなのかな
sat @satoru_takeuchi 2017-05-31 06:54:32
裏を返せば、WalBみたいなのをファイルシステムに機能追加もできるんだろうか
sat @satoru_takeuchi 2017-05-31 06:58:38
WalBは構造上ファイルシステムの性能特性を変えないのがうれしそう。dm-snapやdm-thinだとLVのアドレス空間から物理デバイスのアドレス空間へのマッピングがいるけどWalBにはそういうレイヤは無い…はず。セッション見ればわかるだろう
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-31 07:10:24
一日の書き込みI/Oの総量が25TBなんて魔界では普通だよ twitter.com/satoru_takeuch…
herumi @herumi 2017-05-31 08:24:53
私も関わってるバックアップシステムWalBについて、明日のOpen Source Summitで会社の人が講演します。日本語の解説資料slideshare.net/herumi/walb-is…とVagrantで試せるチュートリアルhttps://t.co/kZJUVpXCptを用意しました。
リンク www.slideshare.net introduction of WalB WalB is a fast and low latency backup system for block devices
リンク GitHub walb-linux/walb-tools walb-tools - Userland tools for backup and replication with WalB driver.
nekomatu @nekomatu 2017-05-31 09:04:15
ストレージ関係でWalBってサイボウズさんのやつ…?昔、スライドをちらっと見た限りだけど、相当に前な気がする。
技術書典4 け-51 x86-64-128 @uchan_nos 2017-05-31 11:50:49
@uchan_nos WalBのバックアップはdm-snapやdm-thinに比べて本当に速いです。具体的なバックアップ時間は発表で。原理的にボリュームのデータ量に依存しないので、データがたくさん溜まって行くにつれて性能が悪化することがありません。
Takashi HOSHINO @starpoz 2017-05-31 12:18:02
@satoru_takeuchi 昔 ext3 なんかは metadata だけじゃなくて file contents も journal に記録するモードがあったと思いますが、それがほぼ WalB と同様のバックアップに使えそうなイメージでした。
Kengo Sawatsu @KengoSawa2 2017-05-31 13:55:52
introduction of WalB by @herumi #backup #linux slideshare.net/herumi/walb-is… @SlideShareさんから めっちゃ面白いこれーー。
temama @Tkon_sec 2017-05-31 16:49:35
@uchan_nos 質疑応答どうなるか楽しみです
残りを読む(112)

カテゴリーからまとめを探す

「その他」に関連するカテゴリー

ログインして広告を非表示にする
ログインして広告を非表示にする