JPH01305445A - ソフトウェアテスト終了判定方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、ソフトウェアテストにおけるテスト終了判定
方式に関する。

〔従来の技術〕

従来、ソフトウェアテストの終了判定は、テスト開始前
に各種の信頼性予測方法によりテスト対象のソフトウェ
アに存在するであろうバグの数を予測しておき、その後
のテストにより検出された実績バグ数の前記予測バグ数
に対する達成度、およびテスト時間によって判定してい
た。

〔発明が解決しようとする課題〕

上述した従来のソフトウェアテスト終了判定方式は、テ
スト開始前に予測したバグ数を判定基準に用いているの
で、そのバグ数の予測が、その予測に使用した信頼性予
測方法には存在しない要因に強い影響を受けた等の原因
によって外れた場合、妥当な終了判定が行えないという
欠点がある。

また、予測が外れている可能性が高いことをテスト担当
者等が何らかの方法で判断し得たとじても、再度予測し
直して予測バグ数の妥当性をチェックし、必要があれば
予測バグ数の修正作業を行うといったことを、全て人手
で行うのは、非常に工数がかかる。

そこで本発明の目的は、テスト開始前に各種の信頼性予
測方法により予測したバグ数自体の妥当性を、テスト途
中にそれまでのテスト結果に基づいて自動的に判定しつ
つ、妥当な予測バグ数に基づいてテストの終了判定を行
うソフトウェアテスト終了判定方式を提供することにあ
る。

〔課題を解決するための手段〕

本発明のソフトウェアテスト終了判定方式は、上記の目
的を達成するために、ソフトウェアのバグ検出状況を示
すソフトウェア品質情報を入力手段から入力してソフト
ウェア品質情報登録ファイルに登録するソフトウェア品
質情報登録手段と、ソフトウェアのテスト時間に関する
情報を前記入力手段から人力してテスト進捗情報登録フ
ァイルに登録するテスト進捗情報登録手段と、信転性予
測モデル式によって予測された予測バグ数を前記人力手
段から入力して予測バグ情報登録ファイルに登録する予
測バグ情報登録手段と、前記ソフトウェア品質情報登録
ファイル、’ｉＧ記テスト進ｔＩｔＩ情報登録ファイル
および前記予測バグ情報登録ファイルの内容に基づき、
予測バグ情報の妥当性をチェックしつつテスト終了を判
定するテスト終了判定手段とを含んでいる。

〔作用〕

本発明のソフトウェアテスト終了判定方式においては、
ソフトウェア品質情報登録手段が、ソフトウェアのバグ
検出状況を示すソフトウェア品質情報を人力手段から人
力してソフトウェア品質情報登録ファイルに登録し、テ
スト進捗情報登録手段が、ソフトウェアのテスト時間に
関する情報を入力手段から入力してテスト進捗情報登録
ファイルに登録し、予測バグ情報登録手段が、信頼性予
測モデル式によって予測された予測バグ数を人力手段か
ら入力して予測バグ情報登録ファイルに登録し、テスト
終了判定手段が、これらのソフトウェア品質情報登録フ
ァイル、テスト進捗情報登録ファイルおよび予測バグ情
報登録ファイルの内容に基づき、予測バグ情報自体の妥
当性をチェックしつつテスト終了を判定する。

（実施例〕 次に本発明の実施例について図面を参照して詳細に説明
する。

第１図を参照すると、本実施例のソフトウェアテスト終
了判定方式は、入力手段１と、ソフトウェア品質情報登
録手段２と、ソフトウェア品質情報登録ファイル３と、
テスト進捗情報登録手段４と、テスト進捗情報登録ファ
イル５と、予測バグ情報登録手段６と、予測バグ情報登
録ファイル７と、テスト終了判定手段８と、表示手段９
と、表示装置ｌＯとで構成されている。

第２図を参照すると、ソフトウェア品質情報登録手段２
は、入力手段１からソフトウェア名、各バグが検出され
るまでのテスト時間、各バグの種類等を含む障害情報と
いったバグ検出状況に関するソフトウェア品質情報を入
力するソフトウェア品質情報人力処理２１．この入力さ
れたソフトウェア品質情報をソフトウェア品質情報登録
ファイル３に登録するソフトウェア品質情報登録処理２
２を行うように構成される。

第３図（ａ）を参照すると、ソフトウェア品質情報登録
ファイル３は、各ソフトウェア毎に、そのソフトウェア
名ＮＩＡ−Ｎｎ、各バグが検出されるまでのテスト時間
ｔ１〜ｔｎ、その障害情報８１〜Ｂｎから構成されるソ
フトウェア品質情報３−１〜３−ｎを格納する構造を有
している。一つのソフトウェアのテストにおいて複数の
バグが検出された場合には、各テスト時間ｔｉ（ｉ−１
゜２、・・・、ｎ）および一つの障害情報Ｂｉには、各
バグに対応するテスト時間および障害情報が含まれる。

尚、バグが検出されるまでのテスト時間とは、第３図（
ｂ）に示すように、テスト開始から時間ａで発生（検出
）したバグαについてはその時間ａを、テスト開始から
時間す、　　ｃで発生（検出）したバグβ、Ｔについて
はその時間す、　　ｃをそれぞれ言うものである。

第４図を参照すると、テスト進捗情報登録手段４は、入
力手段ｌからソフトウェア名、テスト時間に関する情報
等を含むテスト進捗情報を入力するテスト進捗情報入力
処理４１と、この入力されたテスト進捗情報をテスト進
捗情報登録ファイル５に登録するテスト進捗情報登録処
理４２を行うように構成される。

第５図を参照すると、テスト進捗情報登録ファイル５は
、各ソフトウェア毎に、そのソフトウェア名Ｎ１〜Ｎｎ
、テスト時間Ｔ１〜Ｔｎ、テスト終了情報Ｅ１〜Ｅｎか
ら構成されるテスト進捗情報５−１〜５−ｎを格納する
構造を有している。

なお、テスト終了情報Ｅ１〜Ｅｎには、テスト終了判定
手段８によりテストが終了したと判定されたとき、「テ
スト終了」が設定される。

第６図を参照すると、予測バグ情報登録手段６は、入力
手段１から各ソフトウェアの予測バグ数を示す予測バグ
情報を入力する予測バグ情報入力処理６１と、この入力
された予測バグ情報を予測バグ情報登録ファイル７に登
録する予測バグ情報登録処理６２とを行うように構成さ
れる。ここで、入力手段ｌから入力する予測バグ情報は
、各種の信顛性予測モデル式を使ってテスト前にそのソ
フトウェアの予測バグ数を求めたものである。

第７図を参照すると、予測バグ情報登録ファイル７は、
各ソフトウェア毎に、ソフトウェア名Ｎ１−Ｎｎ、予測
バグ数ｍｌ−ｍｎから構成される予測バグ情報７−１〜
７−ｎを格納する構造を存している。

第８図を参照すると、テスト終了判定手段８は、入ツノ
手段１からの起動時に、入力手段ｌからテスト終了の判
定を行うソフトウェアの名前を入力するソフトウェア名
人力処理８１と、この入力されたソフトウェア塩に対応
するソフトウェア品質情報をソフトウェア品質情報登録
ファイル３から入力するソフトウェア品質情報入力処理
８２と、上記人力されたソフトウェア塩に対応するテス
ト進捗情報をテスト進捗情報登録ファイル５から人力す
るテスト進捗情報入力処理８３と、上記入力されたソフ
トウェア塩に対応する予測バグ情報を予測バグ情報登録
ファイル７から入力する予測バグ情報入力処理８４と、
処理８２で入力したソフトウェア品質情報と処理８３で
入力したテスト進捗情報とを使用し、信顧度成長モデル
による縦方向の予測を行って当該ソフトウェアのバグ数
の予測を行う処理８５と、この処理８５で予測が可能で
あったか否かを判定する処理８６と、処理８６で予測が
可能であったと判定された場合に処理８５で得られた予
測バグ数（以下、チェック用予測バグ数と称す）と処理
８４で入力した事前に与えられた予測バグ数（以下、事
前予測バグ数と称す）との比較により、事前予測バグ数
の妥当性を判定する予測バグ数妥当性判定処理８７と、
この処理８７により妥当性なしと判定された場合に予測
バグ情報登録ファイル７に登録されていた事前予測バグ
数を今回のチェック用予測バグ数で置換する予測バグ情
報更新処理８８と、予測バグ数と処理８２で入力したソ
フトウェア品質情報における障害情報中の検出バグ数と
の比較によりテスト終了を判定するテスト終了判定処理
８９と、処理８９でテスト終了と判定した場合にテスト
進捗情報登録ファイル５における当該ソフトウェアに対
応するテスト終了情報を「テスト終了」に設定するテス
ト終了情報更新処理９０とを行うように構成される。

第９図を参照すると、表示手段９は、入力手段ｌからの
起動時に、入力手段ｌからソフトウェア塩を入力するソ
フトウェア名人力処理９１と、この入力したソフトウェ
ア塩に対応してソフトウェア品質情報登録ファイル３に
登録されているソフトウェア品質情報を入力するソフト
ウェア品質情報入力処理９２と、上記入力したソフトウ
ェア塩に対応してテスト進捗情報登録ファイル５に登録
されているテスト進捗情報を人力するテスト進捗情報入
力処理９３と、上記入力したソフトウェア塩に対応して
予測バグ情報登録ファイル７に登録されている予測バグ
情報を入力する予測バグ情報入力処理９４と、処理９２
，９３．９４で各々入力されたソフトウェア品質情報、
テスト進捗情報および予測バグ情報を、その内容が分か
り易いように一部をグラフ形式に変換して表示袋２１０
に表示するテスト進１ルグラフ表示処理９５とを行うよ
うに構成される。

次に、本発明の動作について図面を参照して詳細に説明
する。

第１図、第２図および第３図を参照すると、利用者が入
力手段ｌからソフトウェア品質情報登録手段２を起動し
、ソフトウェア品質情報を入力すると、即ちテストが行
われた各ソフトウェアについて、そのソフトウェア塩、
それまでに検出されたバグに関する障害情報および各バ
グが検出されるまでのテスト時間を逐次入力すると、ソ
フトウェア品質情報登録手段２は、それらの入力情報を
ソフトウェア品質情報入力処理２１により入力手段ｌか
ら入力し、次のソフトウェア品質情報登録処理２２によ
り、第３図に示す形式でソフトウェア品質情報登録ファ
イル３に登録する。

また、第１図、第４図および第５図を参照すると、利用
者が人力手段１からテスト進捗情報登録手段４を起動し
、各ソフトウェア塩、それまでのテスト時間といったテ
スト進捗情報を入力すると、テスト進捗情報登録手段４
は、それらの入力情報をテスト進捗情報入力処理４１に
より入力し、次のテスト進捗情報登録処理４２により、
第５図に示す形式でテスト進捗情報登録ファイル５に登
録する。

更に、第１図、第６図および第７図を参照すると、利用
者が入力手段ｌから予測バグ数情報登録手段６を起動し
、各ソフトウェアについて事前に求めた予測バグ数を入
力すると、予測バグ数情報登録手段６は、この人力情報
を予測バグ情報入力処理６１により入力し、次の予測バ
グ情報登録処理６２により第７図に示す形式で予測バグ
情報登録ファイル７に登録する。

次に、第１図および第８図を参照すると、利用者が入力
手段１によりテスト終了判定手段８を起動し、テストの
終了を判定したいソフトウェアの名前Ｘを入力すると、
テスト終了判定手段８は、ソフトウェア名人力処理８１
によりそのソフトウェア塩Ｘを入力し、次のソフトウェ
ア品質情報入力処理８２によりソフトウェア塩Ｘに対応
してソフトウェア品質情報登録ファイル３に登録されて
いるソフトウェア品質情報を入力し、次のテスト進捗情
報入力処理８３によりソフトウェア塩Ｘに対応してテス
ト進捗情報登録ファイル５に登録されているテスト進捗
情報を入力し、次の予測バグ情報入力処理８４によりソ
フトウェア塩Ｘに対応して予測バグ情報登録ファイル７
に登録されている予測バグ情報を入力する。そして、次
の処理８５により、それら入力された各種情報のうち、
ソフトウェア品質情報中で示される各バグが検出される
までのテスト時間とそのときのバグ数、テスト進（多情
報で示されるテスト時間を使って、公知の信頼度成長モ
デルによる縦方向の予測を行い、次の処理８６でこの信
頼度成長モデルによる予測が可能であったか否かを判定
する。

一般に、信頼度成長モデルによる縦方向の予測が行える
為には成る程度の量のテスト結果が必要であり、テスト
結果が不足しているときは成長モデルが収束せずに発敗
し、予測が困難である。従って、予測が困難なテストの
初期段階等においては、事前予測バグ数自体のチェック
は行わず、利用者によって事前に設定されたときの予測
バグ数を用いて処理８９によりテスト終了の判定を行う
。

このとき、通常はテストを終了しないと判定されるであ
ろう。

また、信頼度成長モデルによる縦方向の予測が可能であ
った場合、実際のテスト結果を考慮して予測したこのチ
ェック用予測バグ数の方が信頼度が高いと考えられるの
で、事前予測バグ数の更新が必要か否かについての判定
即ち処理８７による事前予測バグ数の妥当性の判定を、
上記で求めたチェック用予測バグ数に基づいて実行する
。そして、事前予測バグ数がチェック用予測バグ数と大
きく相違している等の如く妥当性がないと判定したとき
は、処理８８により事前予測バグ数をチェック用予測バ
グ数で更新し、この更新した事前予測バグ数を用いてテ
スト終了の判定を行う（処理８９）。反対に、事前予測
バグ数が妥当なときは、更新することなくそれを用いて
テストの終了判定を行う（処理８９）。そして、テスト
終了判定処理８９により、テストを終了しても良いと判
定したときは、テスト終了判定手段８は、テスト終了情
報更新処理９０によりテスト進捗情報登録ファイル５中
のソフトウェア塩Ｘに対応するテスト終了情報を「テス
ト終了Ｊに書き替える。

テスト終了判定手段８は、上述と同様な処理を入力手段
ｌから入力された全てのソフトウェア塩について繰り返
すものである。

次に、第１図および第９図を参照すると、利用者が入力
手段Ｉによって表示手段９を起動し、ソフトウェア塩Ｘ
を入力すると、表示手段９は、ソフトウェア名人力処理
９１によりこのソフトウェア塩Ｘを入力し、次のソフト
ウェア品質情報入力処理９２によりソフトウェア塩Ｘに
対応してソフトウェア品質情報登録ファイル３に登録さ
れているソフトウェア品質情報を入力し、次のテスト進
捗情報入力処理９３によりソフトウェア塩Ｘに対応して
テスト進捗情報登録ファイル５に登録されているテスト
進捗情報を入力し、次の予測バグ情報人力処理９４によ
りソフトウェア塩Ｘに対応して予測バグ情報登録ファイ
ル７に登録されている予測バグ数を人力する。そして、
次のテスト進捗グラフ表示処理９５により、ソフトウェ
ア塩Ｘおよび予測バグ数並びにテスト終了の判定結果と
共にテスト進捗グラフを表示装置１０に表示する。

このテスト進捗グラフは、例えば横軸にテスト時間を、
縦軸に累積バグ数をとったグラフである。

〔発明の効果〕

以上説明したように、本発明は、ソフトウェアテストの
結果であるバグ検出状況を示すソフトウェア品質情報、
テスト時間情報に基づき、テスト前に信頼性予測モデル
式によって予４］すされた予測バグ数自体の妥当性をチ
ェックしながらテスト終了の判定を行うことにより、以
下のような効果を得ることができる。

■　信頼度成長モデルによる縦方向の予測等を使用し、
現在までに得られたテスト結果でバグ数の子測が可能な
ときは、テスト途中にその予測バグ数の子測を別途に行
い、これを使用して事前に設定された予測バグ数自体の
妥当性をチエ７りするため、テスト終了の判定の信頼性
を高めることができる。

■　予測バグ数の妥当性の判定や予測のやり直しを人手
で行うと膨大な工数を必要とするが、本発明はこれを自
動的に行う為、大幅な工数の削減が可能となる。

【図面の簡単な説明】

第１図は本発明の実施例の構成図、 第２図はソフトウェア品質情報登録手段２の処理例の流
れ図、 第３図はソフトウェア品質情報登録ファイル３の説明図
、 第４図はテスト進捗情報登録手段４の処理例の流れ図、 第５図はテスト進捗情報登録ファイル５の構成例を示す
図、 第６図は予測バグ情報登録手段６の処理例の流れ図、 第７図は予測バグ情報登録ファイル７の構成例を示す図
、 第８図はテスト終了判定手段８の処理例の流れ図および
、 第９図は表示手段９の処理例の流れ図である。 図において、 ｌ・・・入力手段 ２・・・ソフトウェア品質情報登録手段３・・・ソフト
ウェア品質情報登録ファイル４・・・テスト進捗情報登
録手段 ５・・・テスト進捗情報登録ファイル ６・・・予測バグ情報登録手段 ７・・・予測バグ情報登録ファイル ８・・・テスト終了判定手段 ９・・・表示手段 １０・・・表示装置

Claims (1)

1. 【特許請求の範囲】 ソフトウェアのバグ検出状況を示すソフトウェア品質情
   報を入力手段から入力してソフトウェア品質情報登録フ
   ァイルに登録するソフトウェア品質情報登録手段と、 ソフトウェアのテスト時間に関する情報を前記入力手段
   から入力してテスト進捗情報登録ファイルに登録するテ
   スト進捗情報登録手段と、 信頼性予測モデル式によって予測された予測バグ数を前
   記入力手段から入力して予測バグ情報登録ファイルに登
   録する予測バグ情報登録手段と、前記ソフトウェア品質
   情報登録ファイル、前記テスト進捗情報登録ファイルお
   よび前記予測バグ情報登録ファイルの内容に基づき、予
   測バグ情報の妥当性をチェックしつつテスト終了を判定
   するテスト終了判定手段とを含むことを特徴とするソフ
   トウェアテスト終了判定方式。