1ヶ月以上かけて念入りにテストした製品なのにお客様は3日で不具合を見つけてくる「本当に悪意なくイレギュラーなデータを…」

大ヒットしたゲームでよく見る現象。ありとあらゆることを試されるから…
143
T.Sax@ES @T_SaX_From_Tp

1ヶ月以上毎日のように遅くまで試験した製品なのに何故お客様は3日で不具合を見つけられるのか…

2022-10-13 21:49:09
セナ @itamenatto

分かりみが深い……………………(遠い目) twitter.com/T_SaX_From_Tp/…

2022-10-14 21:44:37
えすぺら@TCG製作者 in VR @esuperannt

テストプレイで見つからなかったコンボが公開後に即発見される現象 twitter.com/T_SaX_From_Tp/…

2022-10-14 17:12:56
れいさい @mirinweb

@T_SaX_From_Tp お客様はバグを見つける天才

2022-10-14 10:53:39
アラン・サイジョー @Aran_Saijo

分かる…ゲーム制作もだが頑張ってバグ探しをしても、プレイヤーさんは絶対見つける。大半が想定外な動きをして…。 twitter.com/T_SaX_From_Tp/…

2022-10-14 14:06:13
相川直斗(偽名)™ @Aikawa_gimei

@T_SaX_From_Tp 机上で出ない不具合が訓練で発生して、 訓練で出ない不具合が本番で発生する。 よくある話です。

2022-10-14 12:17:02
フグ田マスオ @daemonhand

@T_SaX_From_Tp 本当にそれ 本〜当〜に、それな ヤツらは超能力者だよ 上級者になると客先だけで再現する障害を出すからな。

2022-10-14 21:04:07
トマトリコリス @kaitaryu

@T_SaX_From_Tp @Pythonist19 そしてなぜかそのエラーを再現できない

2022-10-14 07:42:23
乃木橋 @kwge_ex_51092

Suicaの開発でも一般人(素人)に試用してもらったら、想定外の自動改札機の通り方をされてプロジェクトチームが困惑したとか…。 twitter.com/T_SaX_From_Tp/…

2022-10-14 19:55:48

あっという間に試行回数も環境の数も超えられる

かりけら㌠ @calycera

めちゃくちゃ多種多様な環境で多種多様な操作をものすごい人数でやってるから…かな? twitter.com/T_SaX_From_Tp/…

2022-10-15 00:02:34
趣味全開人生 @HobbyFullLife

@T_SaX_From_Tp そりゃ沢山の人達が製品をテストする訳ですから、取れるデータ量が段違いだと思います。 例えば1人が1日5回のテストを1ヶ月続けるよりも、500人が1日1回のテストを3日間やる方がテスト量が多い。

2022-10-14 20:14:59
dat& @CreateDatMore

@T_SaX_From_Tp 経験あります。そのときは、万が一なんてものじゃなく、億が一まで考慮しないと駄目だな、なんて思いました😅 開発担当が数十人いたとして、ユーザー数十万規模でしたら一瞬で試行回数越えられてしまいますし🥹

2022-10-14 12:15:21
moon phase @moonphase16

@T_SaX_From_Tp 製品に埋まってる地雷を無意識に回避してしまうからか、試験方法が顧客の使い方と乖離があるからでしょうね

2022-10-13 23:26:39
T.Sax@ES @T_SaX_From_Tp

@moonphase16 条件も方法も無限のようにありますからねぇ…😅

2022-10-14 06:20:30

無意識の前提もない

作る側だとどうしてもありますよね

SleepyHal💉MMMPM(岸田見廻り組) @SleepyHal

@T_SaX_From_Tp ユーザーはエンジニアの想像の斜め上を行く使い方をする事があるからだと思います。

2022-10-14 23:45:19
三木 崇行 @CountryGerbil

(笑) エンジニアの想定外とは違う想定外の操作をするのか一般人のおもしろいところよな。(おもしろくない) twitter.com/T_SaX_From_Tp/…

2022-10-14 18:51:17
鱸の丸焼き @suzuki19XX

@T_SaX_From_Tp モンキーテストの実行者として優秀だから……とか?

2022-10-15 02:21:09