applicationごとにspinupの性能が違うかも？という問題

ほるっふーdeveloper @pto_developer

VIP ver1.4。twitter除外オプション追加。やっぱりspinup＋cronがこける。不可解なのはspinupの処理時間に大きなムラがある事。1500ms～11000msってなんでそんなぶれるん？ #appengine

shin1ogawa @shin1ogawa

@pto_developer 1500msの時もspinupしてるのは確実なんですか？

ほるっふーdeveloper @pto_developer

@shin1ogawa ごめんなさい、不勉強で質問の意味が良く分かりませんorz spinupはslim3のログ（Initialized FrontController(UUID...）で判断してますが合ってますか？

shin1ogawa @shin1ogawa

@pto_developer いや、1500msの時はインスタンスがひとつ以上生きていて、spinupしていないんじゃないかな？と思いました。さすがに1500-11000ってのはブレすぎだなーと。

ほるっふーdeveloper @pto_developer

@shin1ogawa 処理時間はブレまくりですが、cpu時間は1300-1800cpu_msで安定してますね。主たる処理はTaskQueueの投入程度。

ほるっふーdeveloper @pto_developer

@shin1ogawa spinupの処理時間は（Initialized FrontControllerのログ時刻） - （アクセスログの時刻）で求めてます。この前提が間違ってたらすいません。

shin1ogawa @shin1ogawa

@pto_developer TQから呼ばれたにしろcronから呼ばれたにしろ、「spinupしたのかどうか？」の判断はどのようにしていますか？

ほるっふーdeveloper @pto_developer

@shin1ogawa 先ほども書きましたが、slim3のログ（Initialized FrontController(UUID...）で判断してますが合ってますか？spinupの概念自体が間違ってるかもという不安も出てきました・・・

shin1ogawa @shin1ogawa

@pto_developer ううむ、なるほど…。slim3に到達するまでにそれほど掛かっているのは確かにおかしいですね。 #appengine のプロダクション環境に何か問題が出てるのかもしれんし、自分も稼働させているアプリをチェックしてきます。

ほるっふーdeveloper @pto_developer

@shin1ogawa そうですか。ずっとこんな感じなので一時的な問題ではないと思っているんですが。ちなみに独自のFilterはありません。

shin1ogawa @shin1ogawa

@pto_developer なるほど。自分はslim3のfilterは使っていないので参考にならんかもしれませんが、spinupの時間にそんなに差があるアプリはありませんでした。

shin1ogawa @shin1ogawa

@pto_developer 自分のアプリだと1500-2500ms以内に終わってるのがほとんどなんで、何か別の原因があるんでしょうねぇ…。

ほるっふーdeveloper @pto_developer

@shin1ogawa そうですか。ご助言ありがとうございました。明日もうちょっと頑張って切り分けをしてみます。 #appengine の問題なのか、#slim3 の問題なのか、アプリの問題なのかきっちりさせなきゃいかんですね。

shin1ogawa @shin1ogawa

重い処理が走ってる最中に新たなリクエストが一旦キューに入って、その途中でspinupが走り出したって事なのかな。

shin1ogawa @shin1ogawa

@pto_developer spinupに時間がかかるなーというリクエストの直前に、別の時間がかかる処理が走っていれば、さっき書いた「リクエストキューでしばらく待たされてから別ノードでspinup」っていう動作なのかもしれませんねー。

ほるっふーdeveloper @pto_developer

@shin1ogawa 例えば直前5分アクセスが無くても、spinupに10秒以上かかって"waiting too long"になることがありますね。ちなみにこの場合はFrontControllerのログは出ず。なんかもう確率的に起こってるような感じです・・・

ほるっふーdeveloper @pto_developer

@shin1ogawa ちなみに @sho235711 さんも同じようなcron+spinup問題で悩んでるようです。#appengine

higayasuo @higayasuo

@pto_developer #appengine のcronは何の処理が同時に走っていない時でも、Request was abortedになるときがあります。その時は #slim3 にリクエストも届いていないのでspin upとは無関係です

higayasuo @higayasuo

#appengine のcronはspin upに関係なくRequest was abortedになる可能性があるって書いたけど、関係はあるっぽい m(_ _)m

higayasuo @higayasuo

ログを調べるとRequest was abortedになった直後のリクエストでどれもspin upが起きてました。直後と言っても1分後なので同時リクエストの時じゃないんだけど。最近、1分毎にcron走らせて実験しているので #appengine

higayasuo @higayasuo

1分毎のcronは何もしていないので、cronの処理の重さは関係なさそうです #appengine

higayasuo @higayasuo

@pto_developer 先程書いたRequest was abortedがspin upに関係ないというのは間違っているっぽいのですが、アプリも #slim3 も手が出せないところで問題が起きてるようです

higayasuo @higayasuo

1分毎のcronでもspin upが起きてしまうのは事実としてあるのでこれをどう考えるべきか。1:1分以内にspin downが起きる時がある。2:インスタンスのいないリクエストキューに振られた #appengine

Suguru ARAKAWA @ashigeru

@higayasuo 3: cronは静的にスケジューリングしやすいので、特別なapp server roomに移された #appengine

higayasuo @higayasuo

@sho235711 spin upを短くするためには余分な初期化をしないだとかJavaならJDOを使わないだとかが考えられます #appengine