第13回 FreeBSD勉強会 ZFS の活用とチューニング

KANEKO Ryosuke @yamaneko1212

zfsは完全ランダムアクセスはキャッシュが効かないので性能が出ない, 空き容量が20%を切ると性能が低下する #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：もう一つの地味な落とし穴： ・空き容量が20%を切ると性能が低下しやすくなる ・容量が足りなくなってきたら、早めに増やすしか無い ・0%まで使い切ると、奇妙な動作をすることがある →ファイルが消せないとか #FreeBSDStudy

Kєnj! @4knj

帰ったらzfsのatime切るぞ! #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：atime： ・アクセス時刻を記録するかどうか →デフォルトでOn ・ZFSの書き込みはCOWなので、書き込み時にも読み出しが必ず発生する ・読み出し不可が高いケースでatimeは性能劣化要因 ・ZFSの場合は副作用が大きいので切っても良い #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：圧縮： ・データを圧縮するかどうか →デフォルトでOff →アルゴリズムを指定すると圧縮するように ・ログなどテキストファイル主体の場合に有効 ・CPU負荷を調べながら判断する必要あり →また、本当にこの効果がほしいのかを検討する必要も #FreeBSDStudy

Hokuto Takai @tsubame959

ZFSの圧縮アルゴリズム．illumosではlz4の追加が検討されているのか．#FreeBSDstudy

tak @erre_factory

dedupは絶対有効にしないこと!!! #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：dedup： ・重複データをまとめて、記録領域を節約するかどうか →デフォルトでOff ・絶対に有効にしないこと！ →泣きを見ます（メモリを食いつぶします） →一度やってしまうと、すぐにはもとに戻せない #FreeBSDStudy

KANEKO Ryosuke @yamaneko1212

dedupやばいw #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん： →これをやるくらいなら圧縮したほうがいいです（圧縮したほうが使用量が減ったという実績もあります） #FreeBSDStudy

tak @erre_factory

圧縮のほうがよっぽど節約になるそうな > dedup #FreeBSDStudy

Hokuto Takai @tsubame959

dedupは絶対に有効にしないでくださいとのこと．メモリをめちゃくちゃ食う．illumosの連中も使っていない．マジか．#FreeBSDstudy

ひできち @yshdsnd

dedupするより圧縮した方がマシ！w dedup offにしよう… ^^; #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：send/recv： ・バッファリングしてみてください。 #FreeBSDStudy

Kєnj! @4knj

zfsのdedupは触れるな!危険! isoイメージ置き場で実験してみたけど雑な使い方には夢みたいな話と思ったんだけどね #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：ワークロード：Webサーバ： ・小さい多数のファイルを読み出し、NWに投げる負荷 ・メタデータのキャッシュヒット率が低下していないかチェック →vfs.zfs.arc_meta_limit が少なければ上げる ・ #FreeBSDStudy

KANEKO Ryosuke @yamaneko1212

webサーバ : メタデータのキャッシュヒットを保つ #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん： ・現在のFreeBSD実装では、ZFS上のファイルにsendfileシステムコールやmmapを使うとキャッシュを二重に取る可能性がある →アプリでdisableに #FreeBSDStudy

KANEKO Ryosuke @yamaneko1212

キャッシュを二重にとるので, mmap, sendfileはOffにする #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：ワークロード：DB： ・ZFSのデフォルトレコード長は 128kB →書き込みのCOW処理が128kBより小さい単位で性能低下 ・データセットプロパティ recordsizeを使って、DBに合わせる ・PostgreSQLなら 8k #FreeBSDStudy

KANEKO Ryosuke @yamaneko1212

データベース : ZFSとDBのレコード長を合わせる #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：ワークロード：ファイルサーバ： ・ファイル数が多く、継続的にアクセスが行われる負荷 ・スナップショット数を減らす ・atimeを無効に ・書き込みが多ければZILをSSDに分離 ・それ以外はWebサーバと変わらない #FreeBSDStudy

KANEKO Ryosuke @yamaneko1212

ファイルサーバ : スナップショットを減らし, インテントログをSSDに置く. #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん：ARC,ZIL,zfetch,vdev： ・ARC:ZFSの要 →デフォルト：搭載メモリ量-1G →メタデータ用ARCのデフォルト：その1/4 ・多ければ多いほど良いが、統計データを見て判断 #FreeBSDStudy

Yoshikazu GOTO @goto_ipv6

佐藤さん： ・L2ARC：ARCの二次キャッシュ版 →SSDなどが想定 ・L2ARCプリフェッチ：キャッシュを埋める速度を向上させるための処理（デフォルトOff） →効果は負荷による（起動してから時間が経てばキャッシュはいっぱいになる） #FreeBSDStudy