デブサミ2021【19-C-2】1秒あたり1,000決済への道のりとオブザーバビリティ #devsumiC #devsumi

平川 宗則[PayPay]/大谷 和紀[New Relic] https://event.shoeisha.jp/devsumi/20210218/session/3071/ Developers Summit 2021 講演資料・参加レポート一覧: https://codezine.jp/article/detail/13650
0
ゆっけ🍉🇵🇸 @karahiyo_n

#devsumiC オブザーバビリティ、便利ってきいた

2021-02-19 10:54:04
hmatsu47(まつ) @hmatsu47

PayPayの件、裏にあるDBのボトルネック(これ以上TPS上げられない)→DB乗り換えの話とか出るのだろうか。 (事情によりここからしばらく呟けないけど。) #devsumi #devsumiC

2021-02-19 10:54:52
KIDANI Akito @kdnakt

#devsumi #devsumiC モニタリングとオブザーバビリティの違い。後者は未知であり、認識していないことを知るためのもの。

2021-02-19 10:55:06
Dai Kakimo(かっきー) @Kakimoty_Field

1秒あたり1,000決済への道のりとオブザーバビリティ #devsumiC オブザーバビリティ 認識もしていないし その原因もわからないことを知るためのもの… 初めて知りました。

2021-02-19 10:55:11
のりしお @norisioo

「サーバが止まった」といった事象に気付くのがモニタリング、「なにかが起こっていそう…?」という事に気付くのがオブザーバビリティ #devsumi #devsumiC

2021-02-19 10:56:24
あっきー @akkiihs

暗黙知を認識するためにも。 #devsumiC

2021-02-19 10:56:50
KIDANI Akito @kdnakt

#devsumi #devsumiC 本番同等の負荷試験環境をずっと維持....すげえ

2021-02-19 10:58:40
ゆっけ🍉🇵🇸 @karahiyo_n

「想定外にどう対応するか」100億円キャンペーンやって想定内しかなかったら逆にすごい #devsumiC

2021-02-19 11:01:27
KIDANI Akito @kdnakt

#devsumi #devsumiC 朝見つけた問題を夜にはリリース、を毎日繰り返した。スピード感。

2021-02-19 11:02:05
ruakuro @ruakuro3

このスピード感! 弊社も見習いたい。 #devsumi #devsumiC

2021-02-19 11:03:04
KIDANI Akito @kdnakt

#devsumi #devsumiC サーキットブレーカの導入について。 想定外にどう対応するか、というテーマがあった。グレースフルに対応するために、アップストリームに問題があれば遮断して、レートリミットも導入してユーザーを待たせてシステムを倒れないようにしたり。

2021-02-19 11:04:42
KIDANI Akito @kdnakt

#devsumi #devsumiC 人の目に結構たよっていた。朝昼夜のピークタイムにはエンジニアがちゃんとみていた。 ダッシュボードをみていくと、あるとき跳ねているとか、じわじわ増えているとか、人間がみるときづくことがたくさんあった。

2021-02-19 11:06:37
杏仁プリン++ @anbudino

人の目でモニタリングすることも大事。 #devsumi #devsumiC

2021-02-19 11:07:27
KIDANI Akito @kdnakt

#devsumi #devsumiC 加盟店側のレジシステムとか、ゲートウェイ会社とか、そっちがボトルネックにもなりはじめてきた....しかし、どこがつまろうと、結局paypayがつかえなかったという体験になってしまう。そこまでふくめて負荷対策、安定性を担保しなければという使命感をもってやっている

2021-02-19 11:10:37
ゆっけ🍉🇵🇸 @karahiyo_n

3ヶ月でユーザ数が1000万から倍増かーすごい。からの信頼性向上にコミットした時期と続く #devsumiC

2021-02-19 11:10:45
杏仁プリン++ @anbudino

会社全体で開発方針がはっきりと決まっているというのは強い。 #devsumi #devsumiC

2021-02-19 11:16:41
ゆっけ🍉🇵🇸 @karahiyo_n

新機能開発を止めるといっても、一ヶ月半でその負荷が解消したというのもだいぶ早い印象 #devsumiC

2021-02-19 11:19:32
ruakuro @ruakuro3

AWS障害時のこと。 さらっと「自然に復旧」って言えるところが凄い! #devsumi #devsumiC

2021-02-19 11:21:18
ゆっけ🍉🇵🇸 @karahiyo_n

「5分で復旧したらいいんじゃないの?」が許容できないシステム。大変だ #devsumiC

2021-02-19 11:22:37
KIDANI Akito @kdnakt

#devsumi #devsumiC 障害が多発しているときにリモートワークはむずかしいか?答えはノー。work from anywhere

2021-02-19 11:29:17
Kazunori Otani @katzchang

#devsumiC ask the speaker、今入ろうとしています…少しお待ちください

2021-02-19 11:36:35