デブサミ「グランブルファンタジーを支えるインフラの技術」 #devsumi

Hiroaki ONO @hihihiroro

S3 に入れれたので様々なツールを使えるように。BigQuery, Mackerel, Kibana, Aurora, Redshift, Netezza など #devsumi #devsumiE

永谷 弘宣@静養中 @HironobuNagaya

ログはAmazon S3に集約。 全てオンプレミスかと思いきやクラウドも活用しているようです。 適所適材でもっとも目的に適した選択をしている感じが良いですね。 技術者としての惹かれるものがあります。 #devsumiE twitter.com/hironobunagaya…

永谷 弘宣@静養中 @HironobuNagaya

インフラはあえてオンプレミス。 クラウドと比べ通信量が少なく済むとのことです。 クラウド全盛期でそちらに目が行きがちですが、あえてオンプレミスという手もあるんですね。 #devsumiE twitter.com/hironobunagaya…

2017-02-16 14:23:59

Hiroaki ONO @hihihiroro

Kibana とMackerel の使い分けはなんなんだろう #devsumi #devsumiE

池田 泰延（勉強会用） @clockmaker_bot

MackrelでTwitterのキーワードを検索している「グルブル, 重い」。 #devsumi #devsumiE

ライナス @Linus_MK

#devsumiE GoogleBigQuery、 kibana：地域ごとのアクセス数とか、遅延アクセスの件数とかを見てる Mackarel：Apacheレスポンス遅延監視。Twitterのキーワード検索 余談「グラブルのシナリオが重い」でアラートが誤爆で上がったりします。

池田 泰延（勉強会用） @clockmaker_bot

「グラブルのストーリーが重い」というツイートでアラートになることもｗ #devsumi #devsumiE

CkReal @CkReal

ソーシャルゲームの監視は、twitter見るのもありすねw #devsumiE

otsuka @vajda

ISP や地域別の通信遅延を追跡しようとする姿勢は凄い。 #グラブル #devsumi #devsumiE

ライナス @Linus_MK

#devsumiE リアルタイム通信 チャットや、ダメージ反映に使われる NodejsでWebSocketを使っている Node大流行りやな……

池田 泰延 / ICS @clockmaker

グラブルでは、kibana を使って地域別のアクセスを解析。これを通信遅延の改善に役立てるよう取り組んでいるらしいです #devsumiE #devsumi pic.twitter.com/2DCjQHxntr

拡大

Hiroaki ONO @hihihiroro

CPU使用率160% #devsumi #devsumiE

ライナス @Linus_MK

#devsumiE リアルタイム通信の高速化のところ、パッとツイートするのは難しいなと諦めたけど 他の人も同感だったのかここでツイートが途切れてるなｗ

ライナス @Linus_MK

#devsumiE 大規模環境で運用するとき 複数サーバのリストの作成： 複数サーバに対する操作、Jenkinsからコマンド実行 故障機器はデプロイから除外したい そこでタグシステムです

Yosuke Furukawa @yosuke_furukawa

#devsumiE #devsumi デブサミで発表した Node.js の未来についての話です。 / “Next Node.js on DevSummit 2017 // Speaker Deck” htn.to/iVQxo8

ライナス @Linus_MK

#devsumiE サーバ情報インベントリシステムの開発 ElasticSearchの導入 CLIから特定ホストのタグ情報を取得：オンプレミスかクラウドか、本番か開発環境か、などなど

Hiroaki ONO @hihihiroro

new relic が入ってるか、バランサに紐付いているかなどをタグで管理 #devsumi #devsumiE

永谷 弘宣@静養中 @HironobuNagaya

数千台のサーバ管理のため、独自のタグシステムを開発。 開発と運用の連携も密で、日に数回デプロイすることも。 #devsumiE twitter.com/hironobunagaya…

ライナス @Linus_MK

#devsumiE まとめー Cygamesが大切にしてること 1：当たり前のことを当たり前にやる。枯れた技術で安定化を目指す 2：アプリケーションロジックを抽象化する。冗長化や分散など。 3：コア技術は自前で実装する。

Hiroaki ONO @hihihiroro

- 当たり前を当たり前にやる - アプリケーションロジックを抽象化 - コア技術は自分たちで実装する #devsumi #devsumiE

池田 泰延 / ICS @clockmaker

Cygamesインフラが大切にしていること 当たり前のことを当たり前にする ・ボトルネックを作ららにシステム設計 ・枯れた技術を採用し、安定稼働を目指す（例：LAMP） #devsumi #devsumiE

魔術師見習い @O_Messiaen

「グランブルーファンタジーを支えるインフラの技術」 貴重&面白い情報量が多すぎてメモが全然追いつかんかった。 #devsumi #devsumiE

ココロオドル @kodorutw

インフラの話はおもろかった！ webサーバー1000台、ログだけで5TB/日かぁ、運用する側の大変さが少しだけ分かった(￣▽￣) グラブル 重いってみんながツイートすると、サイゲの監視でアラートあがるらしいよww #グラブル #devsumi

永谷 弘宣@静養中 @HironobuNagaya

講演者の佐藤さんに「毎日5TBログが貯まる計算ですが、これらのログはどうしていますか？」と質問しました。 基本全てのログは保存しているそうです。 圧縮は掛けている状態で、これらのログはより安いストレージサービスへの移行を検討中とのことでした。 #devsumiE twitter.com/hironobunagaya…

ふるる @Phant_AR

全部オンプレ的な雰囲気だったけどクラウドもログの保存とかで使ってるのか。 S3に今までのログ全てを格納してるのはビックリ。システムの都合上しょうがないとかとか。 #devsumiE