デブサミ2021【19-C-2】1秒あたり1,000決済への道のりとオブザーバビリティ #devsumiC #devsumi
PayPayの件、裏にあるDBのボトルネック(これ以上TPS上げられない)→DB乗り換えの話とか出るのだろうか。 (事情によりここからしばらく呟けないけど。) #devsumi #devsumiC
2021-02-19 10:54:52#devsumi #devsumiC モニタリングとオブザーバビリティの違い。後者は未知であり、認識していないことを知るためのもの。
2021-02-19 10:55:061秒あたり1,000決済への道のりとオブザーバビリティ #devsumiC オブザーバビリティ 認識もしていないし その原因もわからないことを知るためのもの… 初めて知りました。
2021-02-19 10:55:11「サーバが止まった」といった事象に気付くのがモニタリング、「なにかが起こっていそう…?」という事に気付くのがオブザーバビリティ #devsumi #devsumiC
2021-02-19 10:56:24#devsumi #devsumiC サーキットブレーカの導入について。 想定外にどう対応するか、というテーマがあった。グレースフルに対応するために、アップストリームに問題があれば遮断して、レートリミットも導入してユーザーを待たせてシステムを倒れないようにしたり。
2021-02-19 11:04:42#devsumi #devsumiC 人の目に結構たよっていた。朝昼夜のピークタイムにはエンジニアがちゃんとみていた。 ダッシュボードをみていくと、あるとき跳ねているとか、じわじわ増えているとか、人間がみるときづくことがたくさんあった。
2021-02-19 11:06:37#devsumi #devsumiC 加盟店側のレジシステムとか、ゲートウェイ会社とか、そっちがボトルネックにもなりはじめてきた....しかし、どこがつまろうと、結局paypayがつかえなかったという体験になってしまう。そこまでふくめて負荷対策、安定性を担保しなければという使命感をもってやっている
2021-02-19 11:10:37#devsumi #devsumiC 障害が多発しているときにリモートワークはむずかしいか?答えはノー。work from anywhere
2021-02-19 11:29:17