JPH07141224A - コンピュータ応用システム試験装置 - Google Patents

Abstract

(57)【要約】 【目的】 コンピュータ応用システムの試験装置におい
て、運用者が実際に試験をしなくとも、試験内容を自動
的に作成してコンピュータ応用システムに入力し、試験
結果を出力して評価できるようにする。 【構成】 ＣＲＴ装置及び操作卓等のマンマシンインタ
ーフェイス装置を有するコンピュータ応用システムにお
いて、運用者が行なう操作手順を自動的に発生する操作
手順発生手段と、前記作成された操作手順情報を試験対
象システムに与える操作手順出力手段と、試験対象シス
テムが処理した結果を入力して処理の妥当性を自動判定
する処理結果判定手段と、前記処理結果判定手段が出力
する自動試験結果を出力する実行結果出力手段とから構
成した。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は試験技術に関し、特にコ
ンピュータ応用システムの試験装置に関する。

【０００２】

【従来の技術】ＣＲＴ，操作卓等のマンマシンインター
フェイス装置を有するコンピュータ応用システム（以
下、システムと略記する）では、ＣＲＴや操作卓を使っ
て、運用者のオペレーションに対するシステムの処理内
容を確認することが必要であり、これらの試験に関して
は試験担当者が実際にオペレーションを行なって、ＣＲ
Ｔ，タイプライタ等への出力結果を評価していた。

【０００３】

【発明が解決しようとする課題】近年、システムが大規
模（大容量）化していくに従い、このような試験に要す
る時間が増大している。試験時間の増大化は、バグ改修
や機能変更後の回帰性試験でも同様である。本発明は上
記事情に鑑みてなされたものであり、運用者のオペレー
ションに対するシステム処理を確認することが必要な試
験を自動化するようにしたコンピュータ応用システムの
試験装置を提供することを目的としている。

【０００４】

【課題を解決するための手段】本発明の［請求項１］に
係る試験装置は、ＣＲＴ装置及び操作卓等のマンマシン
インターフェイス装置を有するコンピュータ応用システ
ムにおいて、運用者が行なう操作手順の情報を自動的に
発生する操作手順情報発生手段と、前記作成された操作
手順情報を試験対象システムに与える操作手順情報出力
手段と、試験対象システムが処理した結果を入力して処
理の妥当性を自動判定する処理結果判定手段と、前記処
理結果判定手段が出力する自動試験結果を出力する実行
結果出力手段とを備えた。

【０００５】本発明の［請求項２］に係る試験装置は、
［請求項１］において、運用者の操作手順情報として
は、予め決められた複数のテストケースを任意に選択す
ることを可能とする手段を設けた。

【０００６】本発明の［請求項３］に係る試験装置は、
ＣＲＴ装置及び操作卓等のマンマシンインターフェイス
装置を有するコンピュータ応用システムにおいて、運用
者が行なう操作手順の情報を自動的に発生する操作手順
情報発生手段と、前記作成された操作手順情報を試験対
象システムに与える操作手順情報出力手段と、前記試験
対象システムによる応答結果を保存する出力結果入力手
段と、試験対象システムが処理した結果を入力して処理
の妥当性を自動判定する処理結果判定手段と、前記処理
結果判定手段が出力する自動試験結果を出力する実行結
果出力手段とを備えた。

【０００７】

【作用】本発明の［請求項１］に係る試験装置は、試験
対象システムのデータベースから自動作成されたテスト
ケースを試験対象システムに与え、被試験システムが処
理し、出力する結果情報から試験対象システムの機能の
良否を自動判定することができるため、試験者を介さず
自動的に試験を行なうことができる。

【０００８】本発明の［請求項２］に係る試験装置は、
複数のテストケースが事前につくられてあり、これを選
択するだけであるため、簡単な操作で済む。

【０００９】本発明の［請求項３］に係る試験装置は、
出力結果入力手段に格納されている応答結果、即ち、処
理過程，実行経過及び実行結果を出力させることができ
るため、万一試験途中に問題が発生してもその詳細を知
ることができる。

【００１０】

【実施例】以下図面を参照して実施例を説明する。図１
は本発明の一実施例であるコンピュータ応用システム試
験装置の構成を示すブロック図であり、［請求項１］に
対応する。図において、１は試験対象システムの試験対
象ソフトウェア（以下、試験対象システムと略記する）
であり、２はＩ／Ｏデバイスの制御を行なうハードウェ
アとＯＳを含んだ入出力管理機能、３はデータベースで
あり、試験対象システムの一部として試験対象システム
１に含まれる。４はＣＲＴで、データの表示のみでなく
オペレータからの入力も受けつける機能も想定してい
る。５は操作卓で、押釦，表示ランプ等を備え、運用者
からの入力の受けつけると試験対象システム処理結果の
ランプ表示等を行なう。６はプリンタであり、データの
印字を行なう。

【００１１】以上の入出力管理機能２、ＣＲＴ４、操作
卓５、プリンタ６は、システム構成環境の一部であり試
験対象ではない。７が本発明の一実施例であるコンピュ
ータ応用システム試験装置であり、操作手順出力手段８
と、出力結果入力手段９と、操作手順発生手段10と、処
理結果判定手段11と、テストケース作成手段12と、実行
結果出力手段13とから構成される。14はテストケース作
成手段12が作成するテストケースファイルであり、操作
手順とその判定方法を示すデータが格納されている。

【００１２】操作手順出力手段８は、操作手順発生手段
10から通知される操作手順情報を試験対象システム１に
応じたフォーマットに変換後、あたかも運用者がＣＲＴ
４あるいは操作卓５上でオペレーションを行なったよう
に試験対象システム１に入力する。出力結果入力手段９
は、試験対象システム１が入出力管理機能２に対して行
なった出力情報をトレースし、出力装置毎の違いを吸収
した統一フォーマット変換後、処理結果判定手段11に通
知する。

【００１３】操作手順発生手段10は、テストケースファ
イル14の内容を読み込み、テストケースファイル14で指
定された操作内容に該当する操作手順情報を操作手順出
力手段８に指示する。合せてテストケースファイル14で
指定された判定内容に該当する判定方法情報を処理結果
判定手段11に指示する。テストケースファイル14で指定
された操作内容に対する判定内容が複数である場合、処
理結果判定手段11が複数の判定をまとめて処理する。判
定結果が良好でない場合の実行中止の制御も処理結果判
定手段11の判定結果に基づいて操作手順発生手段10が行
なう。

【００１４】処理結果判定手段11は、操作手順発生手段
10から指示された判定方法情報と、出力結果入力手段９
からの出力結果の内容を比較し、その結果を操作手順発
生手段10に通知し、又、実行結果として実行結果出力手
段13に通知する。12はテストケース作成手段であり、試
験対象システム１のデータベース３よりデータを読み込
み、自動試験を行なうためのデータに展開し、テストケ
ースファイル14として保存する。13は実行結果出力手段
であり、処理結果判定手段11が出力する自動試験の処理
過程，実行経過及び実行結果を処理し、保存又は印字す
る。

【００１５】次に各手段の作用について説明する。図２
はテストケース作成手段12の処理内容を示すフローチャ
ートである。今、ＣＲＴ４の画面シンボルをライトペン
で選択し、操作卓５にて釦を押すと試験対象システム１
が選択された画面シンボルと押された釦に対応した処理
を行ない、処理結果をＣＲＴ４及びプリンタ６に出力す
るような機能のテストケースを作成する場合を考える
（以下、テストケースＡと略記する）。

【００１６】図３に上記機能を実現するために試験対象
システム１に組み込まれているデータベース３の内容を
示す。図３において、マスタファイル（ファイル１）
は、各設備の実装，未実装や、運用者の操作に対する処
理方法を定義したものである。「実装種別」はその設備
が実装か未実装かを定義し、未実装であれば試験対象シ
ステム１では使用しない。「操作方式」には運用者に求
める操作手順が定義され、「操作処理用データ」には操
作元や操作後の返答待ち時間等、操作の処理を行なうた
めの詳細な情報が定義されている。

【００１７】操作に対する試験対象システム１の応答を
どのように表示するかについて「表示方式」に定義さ
れ、「警報種別」，「表示処理用データ」，「メッセー
ジＮＯ．」には、表示先や表示色，印字メッセージ内容
等表示処理を行なうための詳細な情報が定義されてい
る。画面ファイル（ファイル２）は、各設備がどの画面
のどの位置に表示されるかを定義する。この表示位置
は、操作する際の選択ポイントの定義も兼ねており、
又、一設備に対し複数の表示位置を定義できる構成にな
っている。

【００１８】テストケースＡを生成する方法を図２，図
３により以下に説明する。図２において、データベース
３に格納されたデータ上の設備の先頭ＮＯ．をセットし
（ステップＳ１）、図３のマスタファイルより該当設備
のデータを読み込み（ステップＳ２）、「実装種別」の
判定を行ない（ステップＳ３）、「実装種別」が「実
装」であれば「操作方式」毎に固有の処理を行なう。
今、「操作方式」が１の場合、当該テストケースＡが生
成されると仮定する。処理中の設備の「操作方式」が１
の場合、「操作処理用データ」の内容を盛り込み、操作
手順パターンを作成する（ステップＳ４）。

【００１９】図４はテストケースの一例である。上記操
作手順パターンは図４の操作手順情報のもとになるデー
タであり、１つの操作ポイントに対する手順が作成され
る。次に、処理中の設備の「表示方式」に基づき、「警
報種別」，「表示方式」，「表示処理用データ」，「メ
ッセージＮＯ．」により該当する判定方法パターンを作
成する（ステップＳ５）。この場合の具体例を説明す
る。先ず、操作手順情報のテストＮＯ．１の場合は操作
元種別が「１」であり、これは操作卓を示し（２の場合
はＣＲＴを示し、データ１は表示位置のＸ座標、データ
２はＹ座標を示す。）、操作処理データ１のときデータ
「１」は釦ＮＯ．を示す。したがってこの場合釦ＮＯ．
16である。この時の判定項目は１であって判定データ先
頭ＮＯ．１となって判定する方法情報の判定ＮＯ．１に
移る。ここには出力先種別として１，２，３，４がある
が、この内「１」はＣＲＴ画面、「２」はＣＲＴシンボ
ル、「３」はプリンタ、「４」は警報を意味している。

【００２０】判定ＮＯ．１は出力先種別が「１」である
ためＣＲＴ画面となる。又、表示処理データとして１，
２，３，４がある。ここで出力先種別が１のときデータ
「１」は画面ＮＯ．を示し、出力先種別が２のときデー
タ「１」は表示位置のＸ座標、「２」は表示位置のＹ座
標、「３」は表示色、「４」はプリンタの有無を示す。
又、出力先種別が３のときデータ「１」はメッセージＮ
Ｏ．、「２」は印字色、更に出力先種別が４のときデー
タ「１］は警報種別となる。したがって判定ＮＯ．１に
おいて出力先種別が「１」であるためＣＲＴ画面であ
り、表示処理データ「１」であるため釦ＮＯ．が35でタ
イムアウト値は２であることを示す。

【００２１】上記判定方法パターンは、図４の判定方法
情報のもとになるデータであり、１つの表示ポイントに
対する判定方法が作成される。次に処理中の設備ＮＯ．
に該当する画面ＮＯ．と表示位置を図３の画面ファイル
より全て読み込み（ステップＳ６）、操作手順パターン
を全表示位置（操作時の選択ポイントになる）に関して
展開する。判定方法パターンについても同様に全表示位
置に関して展開する（ステップＳ７）。

【００２２】表示先が複数ある場合や、操作方式の種類
によっては一設備に対し複数のテストケースが生成され
ることもある。そこで、図４において、操作手順情報及
び判定方法情報に、「該当設備ＮＯ．」としてどの設備
から展開されたかを書き込んで、本設備のテストケース
（テストケースＡ）としてテストケースファイル14に登
録する。従って、テストケースファイル14は全設備のテ
ストケースの集合になる。

【００２３】以上の一設備の処理が終了した後、設備Ｎ
Ｏ．を歩進させ（ステップＳ９）、次の設備に関するマ
スタファイルを読み込み、ステップＳ２から上記と同様
の処理を全ての設備について（ステップＳ10）行なうこ
とにより、テストケースファイル14が作成される。

【００２４】図５は操作手順発生手段10の処理内容を示
すフローチャートである。操作手順発生手段10は前記し
た設備の先頭ＮＯ．をセットし（ステップＳ１）、該当
設備に含まれる全てのテストケースをテストケースファ
イル14より読み込み（ステップＳ２）、読み込んだテス
トケースから操作手順情報のテストＮＯ．毎に操作手順
情報を操作手順出力手段８に通知し（ステップＳ３）、
１つの操作手順情報に該当する全ての判定方法情報を処
理結果判定手段11に通知する（ステップＳ４）。

【００２５】テストケースの一例は図４にて既に説明し
た通りである。その後、処理結果判定手段11より結果を
通知されるのを待ち（ステップＳ５）、実行結果が
「良」であれば、該当設備に含まれる最終テストＮＯ．
か否かの判定を行ない（ステップＳ７）、最終テストケ
ースでなければ、テストＮＯ．を歩進して（ステップＳ
８）ステップＳ３からの処理を行なう。

【００２６】最終テストＮＯ．であれば、設備ＮＯ．を
歩進させ（ステップＳ９）、最終設備であれば処理を終
了し、最終設備でなければステップＳ２からの処理を繰
り返す（ステップＳ10）。なお、ステップＳ６において
実行結果が「不良」であれば、処理結果判定手順11に対
し判定のキャンセルを通知して、その設備のテストを中
止し（ステップＳ11）、次の設備の処理をしてステップ
Ｓ９からの処理を行なう。

【００２７】図６は操作手順出力手段８の処理内容を示
すフローチャートである。操作手順出力手段８は操作手
順発生手段10から操作手順情報が通知されるのを待ち
（ステップＳ１）、通知されると操作手順情報中の操作
元種別毎に固有の処理を行なう。今、図４のようなテス
トケースの操作手順情報が通知され、操作元種別が
「１」であると仮定する。ここで操作元種別「１］は操
作卓の情報であり、操作データ１を釦ＮＯ．として操作
卓向伝送フォーマットに変換し（ステップＳ２）、試験
対象システム１に通知し（ステップＳ３）、再度ステッ
プ１の処理を行なう。

【００２８】図７は出力結果入力手段９の処理内容を示
すフローチャートである。出力結果入力手段９は試験対
象システム１から出力データが通知されるのを待ち（ス
テップＳ１）、通知されると出力データ中の出力先毎に
固有の処理を行なう。今、ＣＲＴに画面を出力するデー
タを図４のようなテストケースの判定方法に変換するも
のと仮定する。出力先種別を１、画面ＮＯ．を出力デー
タとして出力結果にセット（ステップＳ２）し、処理結
果判定手段11に出力結果を通知（ステップＳ３）した
後、再度ステップ１の処理を行なう。

【００２９】図８は処理結果判定手段11の処理内容を示
すフローチャートである。処理結果判定手段11は操作手
順発生手段10から判定方法情報が通知されるまで待つ
（ステップＳ１）。判定方法は図４の操作手順情報のテ
ストＮＯ．毎に通知されるため、複数の判定方法情報が
通知されることもある。判定方法情報が通知されると、
判定方法内判定タイムアウト値がタイムアップするまで
（ステップＳ２）、出力結果入力手段９からの出力結果
を待つ（ステップＳ３）。

【００３０】出力結果の通知がない場合、操作手順発生
手段11より中止の指令がないかどうかチェックし（ステ
ップＳ９）、中止の指令があれば処理を全てキャンセル
し、再度判定方法の通知を待つ（ステップＳ１）。中止
の指令がなければステップＳ２の処理を行なう。出力結
果が通知されると、その内容が与えられている判定方法
情報と一致しているか比較し（ステップＳ４）、一致し
ていなければ「不一致」の結果通知を操作手順発生手段
10に通知し（ステップＳ５）、実行結果出力手段13に判
定方法，出力結果，判定結果等の情報を実行結果として
通知し（ステップＳ６）、ステップＳ１の処理に戻る。

【００３１】一致していれば他に判定方法情報があるか
否か調べ（ステップＳ７）、あれば判定タイムアウト値
に現在時刻から操作手順発生手段10から判定方法情報が
通知された時刻を引いた値をセットし（ステップＳ
８）、ステップＳ９からの処理を行なう。他に判定方法
情報がなければ、操作手順発生手段10に判定結果
（「良」）を結果通知として通知し（ステップＳ11）、
ステップＳ６の処理を行なう。ステップＳ２においてタ
イムアップした場合、「タイムアウト」の結果通知を操
作手順発生手段10に通知し（ステップＳ12）、ステップ
Ｓ６の処理を行なう。

【００３２】図９は実行結果出力手段13の処理内容を示
すフローチャートである。実行結果出力手段13は処理結
果判定手段11より実行結果が通知されるのを待ち（ステ
ップＳ１）、実行結果が通知されるとその内容及び発生
日時をファイルに保存し（ステップＳ２）、プリンタ６
に印字する（ステップＳ３）。

【００３３】上記実施例によれば、試験対象システムの
データベース内データを用いてオペレーション機能の自
動試験を行なうことができ、試験に要する時間と人件費
を削減することができる。又、夜間等に試験員が操作を
行なうことなく自動試験を行なえば、試験工程の短縮を
計ることができる。又、自動試験の結果の履歴が全て残
るため、テストの結果をいつでもレヴューすることがで
き、試験の完全性をいつでも判定することができる。更
に、データベースやプログラム変更後の回帰性試験につ
いても自動試験であるため、試験に要する労力や経費が
少なくて済む。

【００３４】本実施例ではデータベースよりテストケー
スを生成しているが、これに限定されるものではなく
［請求項２］に示されるように予め決められた複数のテ
ストケースを実行させたり、試験担当者によりテストケ
ースを任意に選択させたりすることにより、応用範囲が
広がる。本発明の他の実施例として、図１の試験対象シ
ステム１と入出力管理機能２の間に［請求項３］に示さ
れるように出力結果入力手段を設け、運用者の操作手順
をトレースし、保存し、操作手順発生手段10にて再現さ
せることにより、オペレーションを伴なう再現性の少な
いバグの再現試験を容易に行なうことができる。

【００３５】

【発明の効果】以上説明したように、本発明によればデ
ータベースから操作手順情報とその判定方法を盛り込ん
だテストケースを生成し、テストケースの操作手順情報
を試験対象システムに対し、あたかも実際のオペレーシ
ョンが行なわれたかのように通知し、試験対象システム
からの出力結果を正しいものかどうか判定し、結果を保
存，出力することにより、これまで試験担当者が実施し
ていたオペレーションの試験を自動的に行なうことがで
きるため、試験経費及び試験工程を大幅に削減すること
ができる。又、［請求項２］によれば、予め決められた
複数のテストケースの選択だけの処理で任意の試験がで
き、更に［請求項３］によれば、テストケースを実行し
た経過と結果を保存することで、いつでも試験結果を参
照し、その結果のレヴューや調査を行なうことができ
る。

【図面の簡単な説明】

【図１】本発明の一実施例であるコンピュータ応用シス
テム試験装置の構成を示すブロック図。

【図２】テストケース作成手段のフローチャート。

【図３】試験対象システムのデータベース例。

【図４】テストケースの一例。

【図５】操作手順発生手段のフローチャート。

【図６】操作手順出力手段のフローチャート。

【図７】出力結果入力手段のフローチャート。

【図８】処理結果判定手段のフローチャート。

【図９】実行結果出力手段のフローチャート。

【符号の説明】

１ 試験対象システム ２ 入出力管理機能 ３ データベース ４ ＣＲＴ ５ 操作卓 ６ プリンタ ７ コンピュータ応用システム試験装置 ８ 操作手順出力手段 ９ 出力結果入力手段 10 操作手順発生手段 11 処理結果判定手段 12 テストケース作成手段 13 実行結果出力手段 14 テストケースファイル

Claims (3)

【特許請求の範囲】
1. 【請求項１】 ＣＲＴ装置及び操作卓等のマンマシンイ
   ンターフェイス装置を有するコンピュータ応用システム
   において、運用者が行なう操作手順の情報を自動的に発
   生する操作手順情報発生手段と、前記作成された操作手
   順情報を試験対象システムに与える操作手順情報出力手
   段と、試験対象システムが処理した結果を入力して処理
   の妥当性を自動判定する処理結果判定手段と、前記処理
   結果判定手段が出力する自動試験結果を出力する実行結
   果出力手段とを備えたことを特徴とするコンピュータ応
   用システム試験装置。
2. 【請求項２】 運用者の操作手順情報としては、予め決
   められた複数のテストケースを任意に選択することを可
   能とする手段を設けたことを特徴とする請求項１記載の
   コンピュータ応用システム試験装置。
3. 【請求項３】 ＣＲＴ装置及び操作卓等のマンマシンイ
   ンターフェイス装置を有するコンピュータ応用システム
   において、運用者が行なう操作手順の情報を自動的に発
   生する操作手順情報発生手段と、前記作成された操作手
   順情報を試験対象システムに与える操作手順情報出力手
   段と、前記試験対象システムによる応答結果を保存する
   出力結果入力手段と、試験対象システムが処理した結果
   を入力して処理の妥当性を自動判定する処理結果判定手
   段と、前記処理結果判定手段が出力する自動試験結果を
   出力する実行結果出力手段とを備えたことを特徴とする
   コンピュータ応用システム試験装置。