JPH0756732A - テスト結果検証プログラム生成方法およびこれを用いるテスト結果自動検証方法 - Google Patents

Abstract

(57)【要約】 【目的】 チェックリストの入力条件と確認内容の情報
に関係に基づいて、テスト結果検証プログラムを自動的
に生成する方法、および、このテスト結果検証プログラ
ムを用いて、自動的かつ迅速，正確にテスト結果を検証
するテスト結果自動検証方法を提供すること。 【構成】 チェックリストに従ってテスト用データを被
テストプログラムに入力し、実行結果(テスト結果)をチ
ェックリストの内容と照合することにより、プログラム
が仕様通りに動作するか否かを検証するためのテスト結
果検証プログラムを自動生成し、このプログラムに、テ
スト用データとテスト結果データとを入力して実行する
ことにより、テスト結果とチェックリストの内容を比較
して、テスト結果とチェックリストの内容が合致してい
ることを自動的に検証することを特徴とするテスト結果
自動検証方法。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、テスト結果検証プログ
ラム生成方法およびこれを用いるテスト結果自動検証方
法、すなわち、ソフトウェア開発のテスト工程におい
て、チェックリストに基づいてプログラムのテストを実
施し、テスト結果を検証する際に、上述のチェックリス
トの入力条件と確認内容の情報に基づいてテスト結果検
証プログラムを生成する方法、および、これを用いて、
テスト結果を自動的に検証する方法に関する。

【０００２】

【従来の技術】従来から、ソフトウェア開発におけるテ
スト作業では、チェックリストに基づいて作成したテス
ト用データを入力して、被テストプログラムを実行さ
せ、テストを実施している。この場合、テスト結果とし
て出力されたデータが、チェックリストの内容と一致し
ているかどうかは、人がチェックリストを見ながら検証
している。しかし、この方法では、テスト結果の検証を
人手によって行うため、分岐条件が多い複雑なプログラ
ムで、チェック項目や入力条件となる項目が非常に多い
場合、検証ミスが多発し、また、多くの工数がかかると
いう問題があった。この問題を解決する方法としては、
例えば、特開平1-226043号公報に開示されている「ソフ
トウェアテスト結果自動照合方式」を挙げることができ
る。この方式は、テスト実行結果が印字されないように
変更したテストジョブを、順次、テストジョブライブラ
リから読み込んで実行して行くに伴ない、テストジョブ
の実行状況や実行結果ファイル情報が、テストジョブ実
行管理情報としてテストジョブ管理ファイルに記録さ
れ、テストジョブ終了後、予め正解値が格納されている
正解値ファイル情報と上述の実行結果ファイル情報とを
基に、実行結果照合プログラムを起動して、自動的に、
正解値ファイルと実行結果ファイルとを比較照合して、
実行結果の良否を判定するものである。

【０００３】

【発明が解決しようとする課題】上記従来技術において
は、テスト結果予想データとして、予め格納されている
正解値ファイルと実行結果ファイルとを実行結果照合プ
ログラムを起動させることにより自動的に比較照合し
て、テスト結果の良否を判定することが可能であるが、
予め正解値ファイルや実行結果照合プログラムを作成し
ておかなければならず、テスト結果検証における準備に
手間がかかるという問題がある。しかし、チェックリス
トの入力条件と確認内容の対応関係に基づいて、テスト
結果検証プログラムを生成するようにすれば、実行結果
照合プログラムを作成する必要がなくなり、更に、この
テスト結果検証プログラムをテスト用データとテスト結
果データを基に実行するようにすれば、従来別々のステ
ップで行っていた正解値の設定とテスト結果の判定を同
一ステップで行うことが可能になるので、テスト結果検
証作業をより迅速に行うことが可能になる。本発明は上
記事情に鑑みてなされたもので、その目的とするところ
は、従来の技術における上述の如き問題を解消し、チェ
ックリストの入力条件と確認内容の情報に関係に基づい
て、テスト結果検証プログラムを自動的に生成する方
法、および、このテスト結果検証プログラムを用いて、
テスト用データとテスト結果データを基に上述のテスト
結果検証プログラムを実行させることにより、自動的か
つ迅速，正確にテスト結果を検証するテスト結果自動検
証方法を提供することにある。

【０００４】

【課題を解決するための手段】本発明の上述の目的は、
ソフトウェア開発のテスト工程において、チェックリス
トに従ってテスト用データを被テストプログラムに入力
し、実行結果を前記チェックリストの内容と照合するこ
とによってプログラムのテストを実施するに際し、前記
被テストプログラムが仕様通りに動作するかどうかを検
証するためのテスト結果検証プログラムを、まず、ファ
イル名とそのレコードのデータ項目が格納されているコ
ピー句名に基づいて、当該テスト結果検証プログラムの
定義部を生成し、次に、チェックリストの入力条件デー
タと確認データの因果関係を当該テスト結果検証プログ
ラムの実行部に、条件に基づいて場合分けを行う命令文
で展開し、更に、単体テストにおいて入力したテストデ
ータとテスト結果として出力されたデータが、チェック
リストの入力条件データと確認データに一致していれば
テスト結果検証リストに正常情報を出力し、一致してい
なければテスト結果検証リストにエラー情報を出力する
ロジックを展開することを特徴とするテスト結果検証プ
ログラム生成方法、および、上述の方法により、前記チ
ェックリストの入力条件と確認内容の情報に基づいて生
成したテスト結果検証プログラムに、テスト用データと
テスト結果データとを入力して、該テスト結果検証プロ
グラムを実行することにより、テスト結果とチェックリ
ストの内容とを比較して、前記テスト結果とチェックリ
ストの内容とが合致していることを自動的に検証するこ
とを特徴とするテスト結果自動検証方法によって達成さ
れる。

【０００５】

【作用】本発明に係るテスト結果検証プログラム生成方
法、および、これを用いるテスト結果自動検証方法にお
いては、チェックリストの入力条件と確認内容の情報に
関係に基づいて、テスト結果検証プログラムを自動的に
生成して、上述のテスト結果検証プログラムにテスト用
データとテスト結果データを入力して実行させることに
より、テスト結果とチェックリストの内容を比較して一
致しているか否かを検証する。従って、テスト結果とチ
ェックリストの内容とが一致しているか否かを検証する
作業を、自動的かつ迅速，正確に実施することが可能に
なる。より詳細には、従来、人手によりテスト対象プロ
グラム毎に作成しておくことが必要であった、正解値フ
ァイルや実行結果照合プログラムを作成する必要がなく
なり、更に、従来、別々のステップで行っていた正解値
の設定とテスト結果の判定とを同一ステップで行うこと
ができるため、テスト結果検証作業をより迅速に行うこ
とが可能になる。

【０００６】

【実施例】以下、本発明の実施例を図面に基づいて詳細
に説明する。図２は、本発明の第１の実施例に係るシス
テム構成図、図１は、その動作を示すフローチャートで
ある。また、図３は、実施例に係るチェックリスト情報
の構成例を示す図である。図２に示す如く、本実施例に
係るシステムは、チェックリスト情報ファイル２０１，
テスト結果検証プログラム生成処理２０２，テスト結果
検証プログラム２０３のファイルから構成される。上述
のチェックリスト情報ファイル２０１に格納されている
チェックリスト情報３０１は、図３に示す如く、被テス
トプログラム名３０２，チェックＩＤ３０３，入力条件
データ３０６のファイル名称３０４およびＣＯＰＹ句名
称３０５，入力条件データ３０６の名称３０７および値
３０８と確認データ３１１のファイル名称３０９および
ＣＯＰＹ句名称３１０，確認データ３１１の名称３１２
および値３１３で構成されている。

【０００７】以下、上述の如く構成された本実施例の動
作を説明する。まず、チェックリストの入力条件と確認
内容のデータを、チェックリスト情報３０１の形式に基
づいて、入力条件データ，確認データが格納されている
ファイル名と入力条件データ，確認データに対応するＣ
ＯＰＹ句名を付加して、チェックリスト情報ファイル２
０１に登録する(ステップ１０１)。次に、チェックリス
ト情報ファイル２０１からチェックリスト情報を入力す
る(ステップ１０２)。次に、チェックリストの入力条件
と確認内容のデータに基づいて、登録したチェックリス
ト情報からテスト結果検証プログラム２０３を自動生成
する(ステップ１０３)。

【０００８】図４，図５は、本実施例におけるチェック
リスト情報からのテスト結果検証プログラム展開の一例
としての、日付チェックプログラムのチェックリスト情
報からのテスト結果検証プログラム展開例を示す図であ
る。以下、上述の、チェックリスト情報に基づいてテス
ト結果検証プログラムを自動生成する過程を詳細に説明
する。図４に示される如く、チェックリスト情報例４０
２の入力条件データのファイル名「ＤＡＴＥ」４０５が、
テスト結果検証プログラム２０３中のＦＩＬＥ ＳＥＣ
ＴＩＯＮ内に、ＦＤ句の形式４２４で展開される。ま
た、チェックリスト情報例４０２の入力条件データのＣ
ＯＰＹ句名「ＤＡＴＥ−ＲＥＣ」４０６がテスト結果検証
プログラム２０３中のＦＩＬＥ ＳＥＣＴＩＯＮ内に、
ＣＯＰＹ文の形式４２５(図５参照)で展開される。

【０００９】ＣＯＰＹ句「ＤＡＴＥ−ＲＥＣ」の内容は、
ＣＯＰＹライブラリ中に、図５に４２８に示す形式で格
納されている。また、同様に、チェックリスト情報例４
０２の確認データのファイル名「ＭＥＳＳＡＧＥ」４１３
がテスト結果検証プログラム２０３中のＦＩＬＥ ＳＥ
ＣＴＩＯＮ内に、ＦＤ句の形式４２６で展開され、チェ
ックリスト情報例４０２の確認データのＣＯＰＹ句名
「ＭＳＧ−ＲＥＣ」４１４がテスト結果検証プログラム２
０３中のＦＩＬＥ ＳＥＣＴＩＯＮ内に、ＣＯＰＹ文の
形式４２７で展開される。ＣＯＰＹ句「ＭＳＧ−ＲＥＣ」
の内容は、ＣＯＰＹライブラリ中に、図５に４２９に示
す形式で格納されている。

【００１０】また、チェックリスト情報例４０２の被テ
ストプログラム名「ＰＲＯＧ１」４０３，チェックＩＤ
「ＡＡＡ００１」４０４，入力条件データ「ＹＹ」４０７，
「９２」４０８，「ＭＭ」４０９，「０４」４１０，「ＤＤ」４
１１，「３０」４１２の内容が、テスト結果検証プログラ
ム２０３中のＰＲＯＣＥＳＵＲＥ ＤＩＶＩＳＩＯＮ内
に、ＥＶＡＬＵＡＴＥ文の形式４３０で展開される。以
下、上と同様に、チェックリスト情報例４０２の被テス
トプログラム名「ＰＲＯＧ１」４０３，チェックＩＤ「Ａ
ＡＡ００２」４１９，入力条件データ「ＹＹ」４０７，「９
２」４０８，「ＭＭ」４０９，「０４」４１０，「ＤＤ」４１
１，「３１」４２０の内容が、テスト結果検証プログラム
２０３中のＰＲＯＣＥＳＵＲＥ ＤＩＶＩＳＩＯＮ内
に、ＥＶＡＬＵＡＴＥ文の形式４３１で展開される。

【００１１】上記実施例によれば、テスト結果とチェッ
クリストの内容とが一致しているか否かを検証する作業
を、自動的かつ迅速，正確に実施することが可能にな
る。図７は、本発明の第２の実施例に係るシステム構成
図、図６は、その動作を示すフローチャートである。図
６に示す例のステップ１０１，１０２，１０３は、図１
に示した実施例の対応する番号のステップと同じであ
る。本実施例においては、上述の処理に加えて、図１に
示した実施例のチェックリスト情報に基づいてテスト結
果検証プログラムを自動生成した後、チェックリストに
基づいて、作成したテスト用データファイル６０１を入
力して、被テストプログラムを実行し(ステップ５０
１)、実行結果としてテスト結果データをテスト結果デ
ータファイル６０３に蓄積する。

【００１２】図８に示す如く、テスト用データは１つま
たは複数個のテストデータ値７０１で構成されている。
また、図９に示す如く、テスト結果データも、１つまた
は複数個のテストデータ値８０１で構成されている。次
に、テスト実施時には、被テストプログラムに入力した
テスト用データファイル６０１と、テスト結果として蓄
積されたテスト結果データファイル６０３をチェックリ
スト情報に基づいて生成したテスト結果検証プログラム
に入力して実行(ステップ５０２)することによって、テ
スト結果とチェックリストの内容とを比較する。

【００１３】テスト用データ７０１と入力条件データ３
０６、テスト結果データ８０１と確認データ３１１とを
比較(ステップ５０３)した結果、両データが一致した場
合には、図１０に示す如きテスト結果検証リスト６０４
に被テストプログラム名，チェックＩＤ，テスト用デー
タ，テスト結果データを出力し、更に、検証結果とし
て、ＯＫ／ＮＧ情報欄に「ＯＫ」を出力(ステップ５０４)
する。テスト結果検証リスト６０４は、被テストプログ
ラム名３０２，チェックＩＤ３０３，テスト用データ値
７０１，テスト結果データ値８０１，ＯＫ／ＮＧ情報９
０２から構成されている。また、テスト用データ７０１
と入力条件データ３０６、テスト結果データ８０１と確
認データ３１１が一致しなかった場合は、結果検証リス
ト６０４に、一致した場合と同様に、被テストプログラ
ム名，チェックＩＤ，テスト用データ，テスト結果デー
タを出力(ステップ５０５)し、更に、検証結果として、
ＯＫ／ＮＧ情報欄に「ＮＧ」を出力(ステップ５０５)す
る。

【００１４】次に、まだ、テスト用データファイルおよ
びテスト結果データファイル中にレコードがある場合
(ステップ５０６)は、ステップ５０１〜５０４または５
０５を繰り返し実施し、レコードがない場合(ステップ
５０６)は、処理を終了する。上記実施例によれば、テ
スト結果とチェックリストの内容とが一致しているか否
かを検証する作業を、自動的かつ迅速，正確に実施する
ことが可能になる。なお、上記実施例は本発明の一例を
示したものであり、本発明はこれに限定されるべきもの
ではないことは言うまでもないことである。

【００１５】

【発明の効果】以上、詳細に説明した如く、本発明によ
れば、被テストプログラムにテスト用データを入力して
実行した結果、出力されたテスト結果データがチェック
リストの内容と一致しているか否かを検証する作業を、
自動的、かつ、迅速・正確に実施することが可能にな
り、チェックリストの入力条件と確認内容の情報に関係
に基づいて、テスト結果検証プログラムを自動的に生成
する方法、および、このテスト結果検証プログラムを用
いて、テスト用データとテスト結果データを基に上述の
テスト結果検証プログラムを実行させることにより、自
動的かつ迅速，正確にテスト結果を検証するテスト結果
自動検証方法を実現できるという顕著な効果を奏するも
のである。

【図面の簡単な説明】

【図１】本発明の第１の実施例における処理手順を示す
図である。

【図２】第１の実施例におけるシステム構成図である。

【図３】第１の実施例におけるチェックリスト情報の構
造を示す図である。

【図４】第１の実施例におけるチェックリスト情報から
のテスト結果検証プログラム展開例を示す図(その１)で
ある。

【図５】第１の実施例におけるチェックリスト情報から
のテスト結果検証プログラム展開例を示す図(その２)で
ある。

【図６】本発明の第２の実施例における処理手順を示す
図である。

【図７】第２の実施例におけるシステム構成図である。

【図８】第２の実施例におけるテスト用データの構造を
示す図である。

【図９】第２の実施例におけるテスト結果データの構造
を示す図である。

【図１０】第２の実施例におけるテスト結果検証リスト
の構造を示す図である。

【符号の説明】

１０１：チェックリスト情報ファイル登録ステップ、１
０２：チェックリスト情報入力ステップ、１０３：テス
ト結果検証プログラム生成ステップ、２０１：チェック
リスト情報ファイル、２０２：テスト結果検証プログラ
ム生成処理、２０３：テスト結果検証プログラムファイ
ル、５０１：単体テスト実施ステップ、５０２：テスト
結果検証プログラムへのテスト用データ，テスト結果デ
ータ入力ステップ、５０３：テスト用データと入力条件
データ、テスト結果データと確認データとの比較ステッ
プ、５０４：テスト結果検証リストへの正常情報出力ス
テップ、５０５：テスト結果検証リストへのエラー情報
出力ステップ、５０６：テスト用データファイル，テス
ト結果データファイル中にレコードがまだあるか否かの
判定ステップ、６０１：テスト用データファイル、６０
２：被テストプログラム、６０３：テスト結果データフ
ァイル、６０４：テスト結果検証リスト。

Claims (2)

【特許請求の範囲】
1. 【請求項１】 ソフトウェア開発のテスト工程におい
   て、チェックリストに従ってテスト用データを被テスト
   プログラムに入力し、実行結果(テスト結果)を前記チェ
   ックリストの内容と照合することによってプログラムの
   テストを実施するに際し、前記被テストプログラムが仕
   様通りに動作するかどうかを検証するためのテスト結果
   検証プログラムを、まず、ファイル名とそのレコードの
   データ項目が格納されているコピー句名に基づいて、当
   該テスト結果検証プログラムの定義部を生成し、次に、
   チェックリストの入力条件データと確認データの因果関
   係を当該テスト結果検証プログラムの実行部に、条件に
   基づいて場合分けを行う命令文で展開し、更に、単体テ
   ストにおいて入力したテストデータとテスト結果として
   出力されたデータが、チェックリストの入力条件データ
   と確認データに一致していればテスト結果検証リストに
   正常情報を出力し、一致していなければテスト結果検証
   リストにエラー情報を出力するロジックを展開すること
   を特徴とするテスト結果検証プログラム生成方法。
2. 【請求項２】 請求項１記載の方法により、前記チェッ
   クリストの入力条件と確認内容の情報に基づいて生成し
   たテスト結果検証プログラムに、テスト用データとテス
   ト結果データとを入力して、該テスト結果検証プログラ
   ムを実行することにより、テスト結果とチェックリスト
   の内容とを比較して、前記テスト結果とチェックリスト
   の内容とが合致していることを自動的に検証することを
   特徴とするテスト結果自動検証方法。