信頼度成長曲線を語る夕べ

みずのり：jack of all trades/freelance @NoriyukiMizuno

曲線はいくらでも作れますから #語る夕べ

machi @machi3_machi

近似値を取るといい感じの曲線が出てくる #語る夕べ

カルバート @trickmrbiz

五月雨式ならアリ、という意見 #語る夕べ

カルバート @trickmrbiz

機能内の結合テスト(A機能、B機能、、、)を行うとして、グラフを分けるか分けないか #語る夕べ

カルバート @trickmrbiz

機能ごとにグラフを分けずにグラフを書いている場合がある→その場合は、不具合が収束するかどうかだけを見るのに使うことになりそう #語る夕べ

上山美之 @YoshiyukiUeyama

"総合テスト全体の60%弱のデータが必要である"…ん？60%弱までやったのなら全部やれ。何でわざわざ途中でやめること考えるのだろ。「SRGMから十分にできると判定しました。テスト消化率は95%です」と言われて、「お、5%分のコスト浮いたか、良かったね」とはならないと思うけど。 #語る夕べ

カルバート @trickmrbiz

懐疑派の人は、これらの前提条件がモヤモヤする #語る夕べ

カルバート @trickmrbiz

「信頼度成長曲線の前提」 ・テストケースの実施順序に恣意性はない ・テストの実施期間は「十分に長い」 #語る夕べ

カルバート @trickmrbiz

「信頼度成長曲線の前提」 ・(予測のためには)総合テスト全体の、約60%のデータが必要になる ・工程の前半では、判断に利用できない ・様々な要因により、グラフの形状が歪む場合がある #語る夕べ

カルバート @trickmrbiz

「信頼度成長曲線の前提」 ・不具合は偏在していない #語る夕べ

カルバート @trickmrbiz

「信頼度成長曲線の前提」 ・単位時間あたりに検出される不具合の数は、期間中を通じて「一定している」 ・それぞれの不具合は、同じ発見のされやすさを持つ ・期間中は、不具合検出期待率が同等のテストを実施する ・不具合は、テストした観点・範囲内のものである #語る夕べ

上山美之 @YoshiyukiUeyama

"横軸何を採るか問題は後ほど…" 使える使えないかは、ここが一番のポイントと思ってる。 #語る夕べ

カルバート @trickmrbiz

共通機能の不具合は早期に検知される、という趣旨の説明が世の中に存在する #語る夕べ

カルバート @trickmrbiz

(前提)S字をイメージ→最初は担当者が不慣れなので不具合が少ない→慣れてくると見逃さなくなる、という趣旨の説明が世の中に存在する #語る夕べ

カルバート @trickmrbiz

信頼度成長曲線が、テスト進捗に使われる根拠は弱い。経験則的に使われることが多い #語る夕べ

カルバート @trickmrbiz

テストの進捗管理に使う場合がある #語る夕べ

カルバート @trickmrbiz

途中経過を見るパターン→予測より不具合が多く発生した場合に、テスト期間の見積り(いつまでテストをやるのか)に使うことがある #語る夕べ

カルバート @trickmrbiz

グラフの傾きがフラットになれば出荷OKと判断する場合がある #語る夕べ

カルバート @trickmrbiz

使っていた人→使い方(目的)は？(アンケート) ・不具合の出方の傾向を見る ・出荷のときには使わない ・出荷判定の材料の「ひとつ」 #語る夕べ

上山美之 @YoshiyukiUeyama

"今回は、数学的モデルを対象。いわゆるバグ曲線は対象としない" これはイケる！ #語る夕べ

カルバート @trickmrbiz

モデル ・ゴンペルツ ・ロジスティック ・指数形 ・遅延S字形 #語る夕べ

カルバート @trickmrbiz

今回の「信頼度成長曲線」の定義は、 ・不具合の時系列的な発生から不具合件数を予測するもの ・数学的なグラフで表現できるもの #語る夕べ

Kazuyuki Koishikawa @naghbIQtIqHom

あー、行きたかったけど、俺遊びに行ってていけないんだよね。前回概論みたいなのつまらんかったし。実データとか見たかった。 #語る夕べ

あさこ @acha_821

推進派と懐疑派の討論スタイル 懐疑派はただの嫌なオヤジ #語る夕べ

みずのり：jack of all trades/freelance @NoriyukiMizuno

今回は懐疑派のみ #語る夕べ