4
社会人でもOSを作りたい @uchan_nos
明日から始まるOpen Source Summit Japan 2017の2日目にWalBの発表をします。WalBはオーバーヘッドがとても低い、ブロックデバイス用のリアルタイムなバックアップシステムです。実運用での経験も話します。 ossjapan2017.sched.com/event/AOn5
社会人でもOSを作りたい @uchan_nos
Webにあるタイトルはちょっと古くて、新しいのはこれです(修正依頼は出してますがまだ更新されてないみたいです) "WalB: Real-time and Incremental Backup System for Block Devices"
社会人でもOSを作りたい @uchan_nos
Linuxのメインラインカーネルに含まれるdm-snapやdm-thinと性能比較を行い、WalBの方がIOレイテンシが小さく、バックアップにかかる時間も非常に小さいことが確認できました。(4KiBランダムライトをしつつ、裏でインクリメンタルバックアップを取る実験)
社会人でもOSを作りたい @uchan_nos
サイボウズクラウドでは毎日25TBの書き込みIOが発生。WalBは主に2つの特長がある:IOスパイクがない(IOスパイクはユーザ体験に影響)、めちゃ早くバックアップ可能(データ増加で日次バックアップできなくなると困る)。dm-snapやdm-thinは我々の要求を満たさない。
Ko Kazaana (windhole publishing) @windhole
サイボウズ・ラボで開発を続けてきた「WalB」(わるびー)が、いよいよ実運用段階に入りました。Open Source Summit Japanの2日目(6月1日 11:00-)で、各種計測結果も含めて発表します。ご都合つく方は、ぜひ! twitter.com/uchan_nos/stat…
カーボン @rioriost
サイボウズ・ラボのWalB、すげー気になるなぁ
社会人でもOSを作りたい @uchan_nos
ちなみに、WalB(わるびー)はWrite Ahead Logging for Block devicesの略で、ブロックデバイスをWALを用いてバックアップするものです。
社会人でもOSを作りたい @uchan_nos
とある人にWalBの話をしたら、それは悪いBeeですかって言われたことある。(Beeというコードネームのプロジェクトが別途ある)
ymko_diary @ymko_diary
WalBすんなりmakeが通ったので何か間違ったんじゃないかと疑心暗鬼
mizumm @msysmzm
明日から open source summit かぁ NVDIMM関連のと Walb のセッションは聴いてみたいなぁ 残念ながらアレがアレだから行けないんだけども。。。
社会人でもOSを作りたい @uchan_nos
おお、Open Source Summit JapanのWalBのアブストラクトが更新されてた!嬉しい! ossjapan2017.sched.com/mobile/#sessio…
sat @satoru_takeuchi
WalBはWAL(ファイルシステムでいうジャーナリングデータ)を専用のログデバイスに書き出せるところまでは、ジャナーナリング領域を別デバイスに指定できるファイルシステムと似てるけど、WALをインクリメンタルバックアップ用に常に吸い出し続けられるところが速さのポイントなのかな
sat @satoru_takeuchi
裏を返せば、WalBみたいなのをファイルシステムに機能追加もできるんだろうか
sat @satoru_takeuchi
WalBは構造上ファイルシステムの性能特性を変えないのがうれしそう。dm-snapやdm-thinだとLVのアドレス空間から物理デバイスのアドレス空間へのマッピングがいるけどWalBにはそういうレイヤは無い…はず。セッション見ればわかるだろう
社会人でもOSを作りたい @uchan_nos
一日の書き込みI/Oの総量が25TBなんて魔界では普通だよ twitter.com/satoru_takeuch…
herumi @herumi
私も関わってるバックアップシステムWalBについて、明日のOpen Source Summitで会社の人が講演します。日本語の解説資料slideshare.net/herumi/walb-is…とVagrantで試せるチュートリアルhttps://t.co/kZJUVpXCptを用意しました。
リンク GitHub walb-linux/walb-tools walb-tools - Userland tools for backup and replication with WalB driver.
nekomatu @nekomatu
ストレージ関係でWalBってサイボウズさんのやつ…?昔、スライドをちらっと見た限りだけど、相当に前な気がする。
社会人でもOSを作りたい @uchan_nos
@uchan_nos WalBのバックアップはdm-snapやdm-thinに比べて本当に速いです。具体的なバックアップ時間は発表で。原理的にボリュームのデータ量に依存しないので、データがたくさん溜まって行くにつれて性能が悪化することがありません。
Takashi HOSHINO @starpoz
@satoru_takeuchi 昔 ext3 なんかは metadata だけじゃなくて file contents も journal に記録するモードがあったと思いますが、それがほぼ WalB と同様のバックアップに使えそうなイメージでした。
Kengo Sawatsu @KengoSawa2
introduction of WalB by @herumi #backup #linux slideshare.net/herumi/walb-is… @SlideShareさんから めっちゃ面白いこれーー。
二度手間🐤 @Tkon_sec
@uchan_nos 質疑応答どうなるか楽しみです
残りを読む(112)

コメント

コメントがまだありません。感想を最初に伝えてみませんか?

ログインして広告を非表示にする
ログインして広告を非表示にする