システム屋因果師匠、艦これサーバーを語る

IngaSakimori/人工知能戦争2035 @IngaSakimori

1時間あたりテラクラスの通信は大した問題にはならないですよ。日本の通信インフラなめちゃいけません。問題は十万単位のユーザーをさばき、処理し、そしてデータの整合性を維持するサーバーとストレージ（私の推測では特にストレージ）だと思いますね。　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

いえいえ、我々は誰もが想像するしかないですから。私がぼんやり想像してるシステム的にはサーバーのマシンパワーよりストレージのI/Oの方がしんどい構成かな、って思いますね……　 ＞ @nanjyo_tadashi

IngaSakimori/人工知能戦争2035 @IngaSakimori

ストレージの構成で安心できるのは、まずどんなRAIDでもバックアップを取っていること。RAID5はぶっちゃけ脆弱。ホットスペアがあってもです。RAID6はかなり堅牢で、数十本単位のアレイでも滅多にロストには至りません。しかしそれでも逝くときは逝きます。

IngaSakimori/人工知能戦争2035 @IngaSakimori

実はいざという時の復旧を考慮したとき、もっとも強力な構成の一つが『HDD2本でRAID1』だったりします。これはまず耐障害性という点で1本ですからRAID5に匹敵します。しかし、実運用面で言うと、たとえばパッチ宛ての際などは『あえてHDDを一本抜く』と失敗時に瞬時にリストア可能

IngaSakimori/人工知能戦争2035 @IngaSakimori

まあ、要するに『抜いてあったHDD』で起動するわけね。で、これをさらに応用して『定期的に1本だけHDDを入れ替える』と、抜いたHDDはその時点のバックアップとなり、リビルドも数時間もかかりません（これはサーバー用のシステムに限ります）。 ホットスワップ対応のHDDだと楽ちんです

IngaSakimori/人工知能戦争2035 @IngaSakimori

つまり、たった3本のHDDで容量的には1本分なのですが『タイムラグの事実上存在しないバックアップ取得（HDD1本抜く）』、『ラグのないリストア（いざという時抜いたHDDをさす）』『RAID冗長性の迅速な復旧（さしたあとのリビルド）』がローコスト・シンプルに実現可能です。

IngaSakimori/人工知能戦争2035 @IngaSakimori

コンシューマーの視点からすると「HDD一本の容量なんて使い物にならないよ（嘲笑」とか思いがちなのですが、これは現場をご存じない。サーバーの世界は容量など100GBも要求しない用途がかなりの割合を占めています。ユーザー管理とかそういうのね。

IngaSakimori/人工知能戦争2035 @IngaSakimori

で、サーバーに求められるのは『落ちないこと』『いざ問題が起こったなら1秒でも早く復帰すること』『多少の問題は業務を続けながら復帰できること』です。（ホットスワップと言われるHDDの活性交換とリビルドはまさに最後のやつですね）。さっきの構成はこれらを全て高レベルで満たしているのです

IngaSakimori/人工知能戦争2035 @IngaSakimori

ただし。これはいわゆる家庭用のPCでは実現できませんから悪しからず。まずホットスワップに対応しておりません。あと、安物のRAIDカードやソフトウェアRAIDの信頼性は「はっ（嘲笑」というレベルです。中古の一世代前のものでいいからサーバーベンダ純正のRAIDカードがおすすめです。

IngaSakimori/人工知能戦争2035 @IngaSakimori

死ぬわ～、このアレイ絶対数年以内に死ぬわ～という構成ですねw　＞@marman_band: @IngaSakimori RAID5のロジカルを束ねて、更にRAID5を構築しようずっ＞ω＜←放送用にこういうのが実際あったっぽい。

IngaSakimori/人工知能戦争2035 @IngaSakimori

ぶっちゃけRAID6なら、怪しい動きし始めてからバックアップとっても大体平気ですけどね……　＞ @Goendama: @IngaSakimori ＲＡＩＤをバックアップと勘違いする人が居るので安心です

IngaSakimori/人工知能戦争2035 @IngaSakimori

で、　#艦これ　に戻りますが、たぶんサーバー（これはノードといってシンプルな1Uサーバーをたくさん並べていると思います）の持ってるHDDは72GBとか146GBで、それこそさっき書いた2本でRAID1じゃないかな。処理ごとに各ジョブをストレージからロードしてると思うので……

IngaSakimori/人工知能戦争2035 @IngaSakimori

各サーバーの保持する固有のデータはおそらくないでしょう。OSに　#艦これ　というアプリを処理するためのサービスが突っ込んであるだけです。こういう構成はサーバーが一台吹っ飛ぼうと、簡単に復旧できます。ですので、猫がでているとき、サーバーの障害というのは考えにくいかな　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

じゃあ猫はなぜ　#艦これ　で出るのか。私は二つのパターンがあると思います。まず純粋にユーザーが多すぎてサーバー（さっき書いたノード）の処理が追いつかない場合。この場合はサーバーを増やすしかないです。しかしあくまで『処理』なので同時接続数が落ちれば快適になりますね

IngaSakimori/人工知能戦争2035 @IngaSakimori

もう一つのパターンは恐らくストレージ側です。ストレージといっても、皆さんのほとんどが見たことのないようなお化けみたいなストレージです。ラック一つまるごと占有するようなやつね。SASとかFC接続のHDDが死ぬほど大量に詰まっていて、メーカー独自の仮想RAIDを組んでいます　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

こういう専門のストレージというのは、これまたお化けみたいな処理能力を持っています。HDD単体のスペックでは絶対に追いつけないレベルのね。（技術的なところは各企業のホワイトペーパーを読もう！）しかし、それでもとんでもないI/Oが押し寄せてくると……負けますw　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

で、これが二つ目の原因。ストレージの飽和で猫が出るんだと思いますね。たとえば、艦これでは数分ごとに資材が自然に増加します。このとき、あなたのパソコンはDMMのゲートウェイ（入り口）となるサーバーを通してストレージが持ってるパラメーターを見に行きます　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

このパラメーターはまさに各ユーザー固有のものであり、私は『○○サーバー』とはイコール『ストレージ』だとほぼ確信していますが、それはさておいて…ストレージの処理が飽和していて、こうした通信に問題がおきれば当然猫が出るわけですね　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

とまあ、これら二つがだいたい猫の出る原因じゃないかなー、と思いますね。最近、おおむね安定傾向にあるのはストレージごとに『適切な』ユーザー数が割り当てられているからだと思います。だからアクティヴ率が落ちない限りは横須賀・呉・佐世保・舞鶴サーバーはもう入れないでしょうね。　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

逆に言うと運営の想定しているMAXを超えるアクティヴユーザーが押し寄せると、国内の四鎮守府でも容赦なく猫が出ると思われますね。　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

とか書いていたら、メンテ始まっちゃうよ！うおおおおおおおおおおおおお！大破した赤城さんお風呂に沈め忘れたああああああああああああああああ！！（・∀・;）　バケツ使うか……　#艦これ

IngaSakimori/人工知能戦争2035 @IngaSakimori

前後間違えてリビルド始めちゃうとおしまいですからねw　＞ @canolym5: @IngaSakimori パッチ当てた側でリストアしてしまう悲劇もありますよねー

IngaSakimori/人工知能戦争2035 @IngaSakimori

「いいよ！こいよ！30分で……5万円！パパパっと稼いで終わりっ！」　＞ @itsukiharashin: いいお話書くから、エアコン買うお金稼がせてください

IngaSakimori/人工知能戦争2035 @IngaSakimori

艦これがメンテに入ったからって、一斉に出かける人たち（お前もだ）

IngaSakimori/人工知能戦争2035 @IngaSakimori

というかまあ、ああいうコントローラーってぶっちゃけオモチャみたいなもんなので…　＞ @Advanced_MH: @IngaSakimori RAIDとか自作PCのM/Bにも機能ついてたりしますけど、絶対コントローラがタコってデータ飛ばすリスクの方が高い気がしてます。