JPH0628209A

JPH0628209A - プログラム検査装置

Info

Publication number: JPH0628209A
Application number: JP4178439A
Authority: JP
Inventors: Shinichi Sarugaku; 信一猿楽; Masafumi Suzuki; 雅史鈴木; Mikihiko Matsuura; 美紀彦松浦
Original assignee: Hitachi Ltd; Hitachi Keiyo Engineering Co Ltd
Current assignee: Hitachi Ltd; Hitachi Keiyo Engineering Co Ltd
Priority date: 1992-07-06
Filing date: 1992-07-06
Publication date: 1994-02-04

Abstract

(57)【要約】【目的】マンマシンインタフェースを含むプログラム
の検査が自動的に行なえるプログラム検査装置を提供す
ること。【構成】コンピュータ８によりサーボアンプ５、６を
介して制御されるロボット１、２を用い、検査すべきプ
ログラムをロードしたパソコン９のキーボード１１とマ
ウス１０を、予じめ設定してある所定の検査項目にした
がって操作し、これによってパソコン９のＣＲＴに表示
すべき画像信号をビデオ信号出力線１２から画像処理装
置７に取り込んで処理し、これをコンピュータ８が解析
してプログラムの良否判定を行なう。【効果】キーボード１１などのマンマシンインターフ
ェースを含むプログラムであっても、自動的に検査を行
なうことができ、効率的なプログラムの検査が可能にな
る。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、コンピュータ用プログ
ラムの自動検査装置に係り、特にワードプロセッサ用ソ
フトなどマンマシンインタフェースを含むプログラムを
対象とした自動検査装置に関する。

【０００２】

【従来の技術】コンピュータ用プログラムの自動プログ
ラミングについては、従来からソフトウェア工学などの
分野で種々の方式のものが考案されており、例えば、情
報処理学会誌Ｖol.２８、１９８７、Ｎｏ.１０では、自
動的にプログラムを作成する方法について、各種の方式
ごとに紹介されている。

【０００３】しかし、工業製品としてのプログラムを考
えたとき、欠かすことのできない完成プログラムのテス
トや検査の自動化については、従来からコンピュータ内
部での評価のみにとどまっており、通常は、ワープロ
(ワードプロセッサ)用ソフトなど、キーボードなどのデ
ータ入力操作手段やＣＲＴなどの表示手段からなるマン
マシンインタフェースを含み、人間による複雑な操作を
伴うプログラムの検査については、図２に“現状”とし
て示されているような方法により、手作業で行われてい
た。

【０００４】この図２の“現状”に示す作業おいては、
まず、予じめユーザにより操作されるであろう全ての場
合についての検査項目を作成しておき、その上で検査す
べきプログラムを、それが対象としているワープロなど
のハードにロードして検査作業に入る。

【０００５】まず、ステップ２０に示すように、検査項
目により指定された操作を検査者が手で行なう。そして
ステップ２１で示すように、ＣＲＴ等に表示される結果
を検査者が目で確認し、さらにステップ２２で、その結
果を検査成績票等に検査者が手で記入する。ステップ２
３では、検査項目の全てについて検査が行なわれたか否
かを検査者が判断し、検査項目が残っていればステップ
２０からの操作を繰り返す。しかして、すべての検査項
目が終了していたら、ステップ２４で結果を検査者が判
断し、全項目について合格であれば、そのプログラムは
検査合格とし、そうでなければ不合格にするのである。

【０００６】なお、プログラムの検査ではないが、本発
明に関連すると考えられる従来技術としては、例えば特
開昭５９−１４８９９４号公報や特開昭６０−５４０９
２号公報に開示の、銀行などで使われる現金自動取引装
置など定型的な情報処理を行う装置の試験をロボットに
より行なうようにした装置を挙げることができる。

【０００７】

【発明が解決しようとする課題】上記従来技術は、マン
マシンインタフェースを含み、複雑な操作を伴うコンピ
ュータ用プログラムの自動検査については何も配慮がさ
れておらず、ワープロソフトなどのプログラムをユーザ
による最終的な使用状態と同一の状態で、自動的に検査
することはできなかった。本発明の目的は、マンマシン
インタフェースを含むプログラムをユーザと同一の使用
状態で自動的に検査することができるプログラム検査装
置を提供することにある。

【０００８】

【課題を解決するための手段】上記目的は、検査すべき
プログラムに対する検査項目により制御される機械的操
作手段と、上記プログラムがロードされたハードによる
表示結果を取り込む画像処理手段と、この画像処理手段
からの出力データを検査項目と照合して良否判定を行な
うデータ判定手段とを設けることにより達成される。

【０００９】これを実施例に即して説明すると、まず検
査項目を検査装置となるコンピュータに入力しておく。
以下、図２の“自動化手段”に示すように、操作者が手
で行っていた操作はロボットなどの可動機械で自動化
し、目で確認していた部分は画像処理技術を用いること
により自動化する。そして検査項目についての判断は、
検査装置自身で行なうようにするのである。

【００１０】

【作用】機械的操作手段は、検査すべきプログラムに対
する検査項目により操作者に指示される操作内容に応じ
て制御され、マンマシンインタフェースとして働くキー
ボードなどの入力装置を操作するように働く。画像処理
手段は、この機械的操作手段の操作による表示結果をデ
ータとして取り込むので、データ判定理手段は、このデ
ータを検査項目と照合することにより良否判定を行なう
ことができ、これによりプログラムの自動検査が実現で
きる。

【００１１】図２により説明すると、まず、検査項目は
紙に書く代わりに、検査装置の一部となるコンピュータ
に、処理内容を定めたプログラムとして入力しておく。
そして、図の“自動化手段”に示すように、ステップ２
０の処理は、検査装置からの指示によりロボットなどの
機械的操作手段がキーボードなどのデータ入力装置の操
作を行なうことにより実行される。ステップ２１の処理
は、ＣＲＴの表示結果を検査装置にビデオ信号として取
り込み、画像処理により解析し確認することにより実行
される。ステップ２２の処理は、検査装置内部での検査
結果を補助記憶装置などに記憶する処理となる。ステッ
プ２３と２４の処理は、検査結果を検査項目に対応して
検査装置が判断することにより処理される。

【００１２】

【実施例】以下、本発明によるプログラム検査装置につ
いて、図示の実施例により詳細に説明する。図１は、本
発明の一実施例のシステムの全体機器構成図で、この実
施例は、検査対象がパソコン９のワープロ用のプログラ
ムとなっており、これを自動的に検査するように構成し
たものである。

【００１３】図１において、１は第１のロボット、２は
第２のロボットで、データ入力用のマンマシンインター
フェースであるキーボードやマウスを操作する機械的操
作手段となるものである。これら２台のロボット１、２
は、それぞれ６軸構成になっており、各々６個のモータ
により駆動される。これらの２台のロボット１、２によ
り検査対象となるプログラムがロードされたパソコン９
のすべての操作を行なうようになっている。

【００１４】３はロボット１の手先に取り付けられたハ
ンドで、４はロボット２の手先に取り付けられたハンド
である。これらのハンド３、４は開閉動作が可能になっ
ていて、閉じた状態でパソコン９のキーボード１１を操
作し、開いて把持することによりマウス１０を操作する
ようになっている。

【００１５】５はロボット１のモータを駆動するサーボ
アンプで、６はロボット２のモータを駆動するサーボア
ンプであり、７は画像処理装置である。そして８が、検
査装置全体を制御するコンピュータである。なお、上記
したように、９は検査すべきプログラムがロード(装
填、格納)されたパソコンで、マウス１０とキーボード
１１が入力インターフェースとして用意されているもの
である。また、１２はビデオ信号出力線で、パソコン９
のＣＲＴに出力されている信号が並列に外部に取り出さ
れているものであり、従って、このＣＲＴが出力インタ
ーフェースとなっている。

【００１６】次に、図３により、制御用のコンピュータ
８の内部構成及びサーボアンプ５、６と、ロボット１、
２について、さらに詳細に説明する。コンピュータ８の
内部は大きく３部分に分かれており、まず、図３の破線
で囲っていない部分はメインＣＰＵ部である。次に、破
線で囲んだ部分４２はロボット１の制御ＣＰＵ部であ
り、ロボット１の動作制御を行っている。同じく破線で
囲んだ部分５２以降はロボット２の制御ＣＰＵ部である
が、部分４２と同一構成なので、図中では省略してあ
る。従って、このコンピュータ８のメインＣＰＵ部によ
りデータ判定手段としての働きが得られ、制御ＣＰＵ部
４２、５２により駆動制御手段としての働きが得られる
ことになる。

【００１７】次に、各々について詳しく説明する。ま
ず、図３のメインＣＰＵ部は以下の部分により構成され
ている。３０はＣＰＵーａで、全体の機器管理や検査項
目の実行制御を行う。３１はＲＯＭ−ａで、電源投入時
にＣＰＵ−ａ３０が行うべき処理を記述したプログラム
が格納されている。３２はＲＡＭ−ａで、ここには、ハ
ードディスク３８に格納されている各種処理プログラム
及び検査仕様がロードされ、ＣＰＵ−ａ３０によって実
行される。また、演算の途中結果等もここに記憶され
る。

【００１８】３３はビデオＲＡＭで、このビデオＲＡＭ
３３に書かれた内容は、３４のＣＲＴ表示回路によって
コンピュータ８のＣＲＴに表示される。３５はキーボー
ドインタフェースで、コンピュータ８のキーボードを押
すと、ここを介してその情報がＣＰＵ−ａ３０に伝えら
れる。３６は通信インタフェースで、画像処理装置７と
の情報のやり取りはここを介して行われる。３７はハー
ドディスクインタフェースであり、内蔵ハードディスク
３８を制御している。３９はフロッピーディスクインタ
フェースで、フロッピーディスクドライバー４０を制御
している。そして、４１はバスで、メインＣＰＵ部の各
装置を接続している。

【００１９】次に、ロボット１の制御ＣＰＵ部４２につ
いて説明する。このロボット１の制御ＣＰＵ部４２は、
メインＣＰＵ部が４３のデュアルポートラムｂ(ＤＰＲ
−ｂ)に書き込んだ命令を実行するものである。４４は
ＣＰＵ−ｂで、ロボット１の制御関係のすべての処理を
行う。４５はＲＯＭ−ｂで、ＣＰＵ−ｂ４４が実行すべ
きプログラムが格納されている。４６はＲＡＭ−ｂで、
ＣＰＵ−ｂ４４がＲＯＭ−ｂ４５のプログラムを実行す
る際、演算の途中結果が記憶される。４７はタイマーｂ
で、一定時間周期でＣＰＵ−ｂ４４に割り込みをかけ
る。そして、この周期でＣＰＵ−ｂ４４がサーボモータ
に指令を発行するのである。

【００２０】４８はＤ／Ａコンバータｂで、ＣＰＵ−ｂ
４４が算出した各モータに対する電流指令は、ここでア
ナログ値に変換される。その後、サーボアンプ５に内蔵
されたサーボアンプ−ｂ５１によって増幅され、ロボッ
ト１に設けてある６個のモータ(サーボモータ)Ｍ１〜Ｍ
６を駆動する。４９はカウンタ−ｂで、この中には６個
のカウンターが備えられており、各カウンターは、各々
ロボット１内の６個のエンコーダＥ１〜Ｅ６に接続され
ている。従って、このカウンタ−ｂ４９の値を読むこと
によって、ＣＰＵ−ｂ４４はロボット１の現在いる位置
と姿勢を知ることができる。そして、５０はバスで、制
御ＣＰＵ部４２内の各装置を接続している。

【００２１】ロボット１内には、上記したようにＭ１か
らＭ６までの６個のモータがあり、各々ロボット本体１
の旋回軸、上腕軸、前腕軸、回転軸、曲げ軸、ひねり軸
を駆動する。そして各モータには、Ｅ１からＥ６までの
エンコーダが取り付けられており、モータの回転角を計
測している。

【００２２】次に図４により、画像処理装置７について
説明する。

【００２３】６０はＣＰＵ−ｄで、画像処理を行う。６
１はＲＯＭ−ｄで、ＣＰＵ−ｄ６０で処理すべきプログ
ラムが格納されている。６２はＲＡＭ−ｄで、ＣＰＵ−
ｄ６０による演算の途中結果等が保存される。６３は通
信インタフェースで、メインＣＰＵ部と画像処理装置７
は、ここを通じて情報の交換を行う。６４、６５、６６
は画像メモリで、各々、赤(Ｒ)、緑(Ｇ)、青(Ｂ)の画像
情報を格納する。従って、これの画像メモリ６４〜６６
は、パソコン９のＣＲＴ表示分解能と同一の画素分解能
に設定されている。６７、６８、６９はＡ／Ｄコンバー
タ(ＡＤＣ)で、同期回路７０の指令７１に基づいて、ビ
デオ信号出力線１２から供給される赤、緑、青のビデオ
信号をデジタル信号に変換する。変換した信号は同期回
路７０が指定するアドレスに基づいて、画像メモリ６４
〜６６に格納される。

【００２４】７３は画像入力用のＩ／Ｏで、ＣＰＵ−ｄ
６０はここを介して同期回路７０にビデオ信号の取り込
みを指示する。７４はパタンマッチング回路で、パタン
ＲＡＭ７５に登録された、ある大きさのパタンと画像メ
モリのパタンマッチングを行う。７６はパタンマッチン
グＩ／Ｏで、ＣＰＵ−ｄ６０はここを介してパタンマッ
チング回路７４に、パタンマッチング開始等の指示を与
える。７７はバス切り替え器で、ＣＰＵーｄ６０の指示
にしたがって、画像メモリ６４〜６６を、撮像部(Ａ／
Ｄコンバータ６７〜６９)、パタンマッチング部、ＣＰ
Ｕーｄ部に接続する。従って、これらにより、検査すべ
きプログラムによるパソコン９の表示情報を解析でき
る。

【００２５】次に、処理動作について説明して行く。図
５は、全体の処理を示したフローチャートで、この処理
はコンピュータ８のメインＣＰＵ部(図３の破線で囲っ
てない部分)で実行されるもので、まずステップ１００
で検査開始のコマンドが入力されるとステップ１０１で
メニューを表示する。このときのメニューは、初期設
定、テスト仕様作成、テスト実行、終了の４種である。
ステップ１０２で選択されたメニュー項目を判定し、初
期設定であればステップ１０３で初期設定処理を行な
い、テスト仕様作成であればステップ１０４でテスト仕
様作成処理を行なう。そしてテスト実行が選択される
と、ステップ１０５でテスト実行を行なう。これらの処
理が終了するとステップ１０１に戻る。一方、終了が選
択されたら、ステップ１０６で終了される。

【００２６】図６はステップ１０３での初期設定処理の
フローチャートを示したもので、まず、ステップ１１１
で文字フォントの定義を行う。この文字フォントとは、
各文字をどういったドットパタンで表示するかを決定し
たものであり、その定義例を図７に示す。まず、１１６
は文字“Ｃ”を１２×１２のドットパタンで定義したも
のであり、１１７はマウスのカーソルを、同じく１２×
１２のドットパタンで定義したものである。なお、一般
には、各フォントは被検査パソコンや被検査プログラム
によって固有のもので、標準的なフォントについては、
ハードディスク３８(図３)に予じめ登録されているの
で、特殊なものだけをここで定義することになる。

【００２７】次に、ステップ１１２で被検査パソコン９
のキーボード定義を行う。図８はキーボード１１の定義
例を示したもので、ここでは、各キーの位置を図８のＰ
０を原点として定義する。従って、例えば“Ａ”のキー
では、図中のＡｘとＡｙの長さを登録することになる。
これを全てのキーに対して行う。また、テスト仕様で用
いるキーの指定方法も、ここで定義する。例えば“ＲＥ
ＴＵＲＮ”キーを“復改”と定義し、“シフトキー”、
“＋”、“１”を“！”等と定義するのである。

【００２８】ステップ１１３ではキーボード１１の位置
合わせを行う。ロボットの教示と同様で、ロボット１と
ロボット２のハンド３、４の先端を図中のＰ０、Ｐ１、
Ｐ２の各点に誘導し、位置を登録する。位置の誘導は制
御装置８のキーボードからロボット動作コマンドを入力
することにより行う。こうして点Ｐ０、Ｐ１、Ｐ２のロ
ボット座標系の位置と、ステップ１１２で定義されたキ
ーの各位置によって、ロボット１とロボット２は、制御
装置８の指示によりキーボード１１にある全てのキーを
押すことができる。

【００２９】ステップ１１４ではパソコン９のマウス１
０を定義する。この実施例では２ボタンタイプのマウス
を使用している。図９にマウスの定義例を示す。まず、
２個のボタン１２０と１２１の位置を、マウス１０の左
上の端を原点として定義する。次に、マウス１０をＸ方
向とＹ方向に一定距離動かしたとき、パソコン９のＣＲ
Ｔ上で何ドット、マウスカーソルが移動するかを入力す
る。最後にマウス１０の初期位置にロボット２を誘導し
て登録するのである。

【００３０】次に、図１０はステップ１０４でのテスト
仕様作成のフローチャートを示したもので、まず、ステ
ップ１３１で新規の作成か否かを入力する。新規であれ
ば、１３２で新しいテスト仕様のファイルをハードディ
スク３８に作成するが、そうでないときは、ステップ１
３３で旧ファイルのファイル名を入力し、ハードディス
ク３８、又はフロッピーディスク４０から既に作成され
ているテスト仕様ファイルを読み込む。ステップ１３４
ではテスト仕様の編集を行なう。編集が終了するとステ
ップ１３５でテスト仕様ファイルの格納を行なうのであ
る。

【００３１】このようにして、作成されたテスト仕様の
一例を図１１に示す。この図１１において、１行目はコ
メントで、ここでは、このファイルがワードプロセッサ
(ワープロ)のテスト仕様ファイルであることを示してい
る。２行目以下の左端に書かれているＮo. はテストの
項目Ｎo. で、各テスト項目は、いくつかのコマンドに
より記述されている。まず、“ＫＢ”はロボットにより
指定のキーを押すコマンドである。従って、ＫＢ；ＷＰ“復改” というコマンド群は、キーボード１１の“Ｗ”のキーを
押し、次に、“Ｐ”のキーを押し、最後に“復改”のキ
ーを押すことを意味している。

【００３２】次に、“ＭＳ”はロボットによりマウス１
０を操作するコマンドであるが、このコマンド“ＭＳ”
は、さらにいくつかのサブコマンドを持っていて、サブ
コマンド“ＬＯＣＡＴＥ(Ｐｘ、Ｐｙ)”は、マウスカー
ソルをＣＲＴのグラフィック座標系でＰｘ、Ｐｙの位置
に動かす命令で、“ＰＵＳＨ”はマウス１０のボタンを
押す命令である。

【００３３】また、“ＣＫ”はＣＲＴの表示を確認する
コマンドであるが、このコマンド“ＣＫ”も、さらにい
くつかのサブコマンドを持っていて、サブコマンド“Ｌ
ｏｃａｔｅ(Ｘ、Ｙ)”は確認位置の指定コマンドでＸ行
目のＹカラム目から、チェックすることを指定してい
る。ここで、“ ”(ダブルクォーテション)で囲まれた
部分は、その中の文字列と表示内容を比較し、結果をテ
スト結果ファイルに書き込むことを意味している。従っ
て、“ＷｏｒｄＰｒｏｃｅｓｓｏｒＶｅｒ．１”と
いうコマンドは、この通りに画面に表示されたことの確
認を指示しているものである。

【００３４】一方、コマンド“ＩＦ”を用いると、コマ
ンド“ＣＫ”の結果によりテスト項目を飛ばすことがで
き、行っても意味のないテスト項目を省略できる。例え
ば、テスト項目Ｎo.２でワープロ用のテストファイルが
読み込めなければ、そのテストファイルを用いたテスト
項目は実施できない。そこで、これを用いることによ
り、例えばＮo.２での結果が“ＮＧ”(ＮｏＧｏｏｄ)
であれば、次は、テスト項目Ｎo.１５まで飛ばすように
指示することができる。これらのコマンドを利用してテ
スト仕様(検査仕様)をすべて入力する。

【００３５】次に、ステップ１０３でのテスト実行処理
１４０のフローチャートを、図１２により説明する。こ
の処理１４０では、まず、ステップ１４１でテスト仕様
のファイル名を入力し、ステップ１４２でそのファイル
を読み込む。次に、ステップ１４３でテスト結果を出力
するファイル名を入力する。ステップ１４４では、その
ファイル名でテスト結果ファイルを作成する。ただし、
この時点ではテスト結果ファイルには何も書かれていな
い。

【００３６】ステップ１４５では、テストＮo. カウン
タｉを１にする。ステップ１４６でテスト仕様の項目Ｎ
o.ｉを読み込む。ステップ１４７でテスト仕様Ｎo.ｉが
存在しているか否かを判断し、存在していなければ終了
とする。しかして、存在していれば、ステップ１４８で
テスト項目の命令(コマンド)を一つ読み込み、その種類
を判定する。そして、コマンドが“ＫＢ”であればステ
ップ１４９のキーボード押下処理を行なう。また、コマ
ンドが“ＭＳ”であればステップ１５０のマウス操作処
理を行ない、“ＣＫ”であればステップ１５１の表示チ
ェック処理を行なう。そして、これらの処理のあとはス
テップ１４８に戻り、次の命令の判定を行なう。しかし
て、命令がなければカウンタｉをインクリメントしてス
テップ１４６に戻る。

【００３７】図１３は、ステップ１４９でのキーボード
押下処理１６０を示すフローチャートで、まず、ステッ
プ１６１でキーカウンタｊを１にする。ステップ１６２
ではｊ項目目のキーの指定を取り込む。ステップ１６３
ではキーの指定があるか否か判断し、なければ終了とす
る。そしてキーの指定があれば、ステップ１６４で初期
設定のキーボード定義データ(ステップ１１２で求めた
もの)とキーボード位置合わせ(同、ステップ１１３)の
データをもとに、キーの位置を計算する。ステップ１６
５では計算した位置をもとにして、指定されたキーを押
すのにはロボット１とロボット２の何れが良いか決定す
る。

【００３８】ステップ１６６では、決定したロボットに
ハンドを閉じるように指示する。ステップ１６７ではそ
のロボットにキーの位置を指示し、そのキーを押すよう
に命令する。この命令は、メインＣＰＵ−３０が、ＤＰ
Ｒ−ｂ４３、又はＤＰＲ−ｃ５３に書き込むことによ
り、ロボット制御部で実際に各ロボットのモータを制御
して実行される。１６８ではロボットの動作完了を待
つ。１６９でキーカウンタｊをインクリメントし１６２
に戻る。以上のようにして、テスト仕様に書かれた“Ｋ
Ｂ”命令が実行される。

【００３９】図１４は、ステップ１５０におけるマウス
操作処理１８０を示すフローチャートで、まず、ステッ
プ１８１でサブコマンドカウンタｊを１にし、ステップ
１８２でｊ行目のサブコマンドを入力する。ステップ１
８３でコマンドの指定が有るか否か判定し、なければ終
了とする。一方、指定が有れば、ステップ１８４でコマ
ンドの種類を判定する。そして、それが“ＬＯＣＡＴ
Ｅ”であれば、ステップ１８５で被検査パソコン９のＣ
ＲＴ上のマウスカーソルの位置を検索する。まず、画像
処理装置７に、図７に示したドットパタン１１７を文字
フォントとして、通信により設定し、ついで画像処理装
置７に撮像(パソコン９からのビデオ信号の取り込み)処
理を指示した後、検索を指示するのである。これによっ
て、画像処理装置７からマウスカーソルのＣＲＴ上の位
置が送られてくる。

【００４０】ステップ１８６では、現在のマウスカーソ
ルの位置と“ＬＯＣＡＴＥ”で指示されている位置から
ＣＲＴ上でのマウスの移動量を計算し、ロボットの座標
系へ変換する。ステップ１８７では、メモリからマウス
の現在位置を取り込み、ステップ１８８で、マウスの現
在位置と移動量をロボットへ指示する。この指示は、メ
インＣＰＵ−ａ３０が、ＤＰＲ−ｃ５３にデータを書き
込むことにより、ロボット２の制御部で実際にロボット
２のモータとハンドを制御して実行される。以後、ステ
ップ１８９でロボットの動作完了を待ち、ステップ１９
０では動いたあとのマウスの位置をメモリに書き込み、
ステップ１９１でサブコマンドカウンタｊをインクリメ
ントしてからステップ１８２に戻るのである。

【００４１】一方、ステップ１８４でコマンドが“ＰＵ
ＳＨ”であれば、ステップ１９２でメモリよりマウスの
現在位置を読み込み、ステップ１９３でマウスの現在位
置とマウス定義１１４(図７)とをもとに、指定されてい
るボタンの位置を計算する。ステップ１９４でロボット
２の制御部へボタンを押す指示を出し、ステップ１９５
で完了を待ち、その後、ステップ１９１に飛ぶのであ
る。以上のようにして、テスト仕様に書かれた“ＭＳ”
命令が実行される。

【００４２】図１５は、ステップ１５１での表示チェッ
ク処理２００のフローチャートである。まず、ステップ
２０１でテスト結果ファイルにテストＮo. ｉを書き込
む。ステップ２０２でサブコマンドカウンタｊを１にす
る。ステップ２０３でｊ行目のサブコマンドを入力す
る。ステップ２０４でコマンドの指定が有るか否かを判
定し、なければ終了とする。有れば、ステップ２０５で
サブコマンドの種類を判定する。そして、まず、ステッ
プ２０５での判定結果が“Ｌｏｃａｔｅ”であれば、ス
テップ２０６でチェックする位置を画像処理装置７に設
定する。

【００４３】また、“ ”(ダブルクォーテション)であ
れば、ステップ２０８で文字列チェック処理を行い、ス
テップ２０９でその結果をテスト結果ファイルに書き込
む。一方、“ＩＦ”であれば、ステップ２１０で直前の
チェック結果を取り込み、ステップ２１１で条件が成立
しているかどうか判断する。そして成立していればステ
ップ２１２でテスト項目カウンタｉ(指定されている値)
を−１に変更する。これらの処理のあと、ステップ２０
７でサブコマンドカウンタｊをインクリメントし、ステ
ップ２０３から繰り返えすのである。

【００４４】図１６は、ステップ２０８での文字列チェ
ック処理２２０のフローチャートである。まず、ステッ
プ２２１で被検査パソコン９のＣＲＴ表示状態を撮像
(ビデオ信号の取り込み)処理するよう、画像処理装置７
に指示する。ステップ２２２で文字カウンタｊを１に
し、チェック結果フラグｆを“ＯＫ”にする。ステップ
２２３ではテスト仕様ファイルのｊ番目の文字を取り込
む。ステップ２２４では、文字の指定があって、かつ、
フラグｆが“ＯＫ”か否かを判断する。条件が成立して
いなければ、ここで終了とする。成立していれば、ステ
ップ２２５に進み、ステップで２２３で取り込んだ文字
のフォントを取り出し、ステップ２２６で文字のフォン
トを画像処理装置７に転送する。

【００４５】ステップ２２７ではマッチングを画像処理
装置７に指示する。ステップ２２８では画像処理装置７
から送られてきた結果を判定する。マッチングが成立し
ていなければ、ステップ２２９で、その文字の前後８文
字の文字パタンを画像処理装置の７の画像メモリから取
り出し、ステップ２３０でフラグｆを“ＮＧ”に書き換
える。取り出した文字パタンとフラグｆは、図１５のス
テップ２０９で、テスト結果ファイルに書き込まれる。
一方、ステップ２２８でマッチングが成立しているとき
は何もしない。この後、ステップ２３１で文字カウンタ
ｊをインクリメントし、ステップ２２３から処理を繰り
返す。従って、以上の処理により、テスト仕様ファイル
に書かれた“ＣＫ”命令が実行される。

【００４６】次に、図１７のフローチャートにより、画
像処理装置７での処理２４０について説明する。まず、
電源が投入されるとステップ２４１で初期化を行う。次
に、ステップ２４２で制御装置８からの命令を待ち、命
令が来たらステップ２４３で、その命令の種類を判定す
る。

【００４７】まず、命令が文字フォントの指示であれ
ば、ステップ２２４で送られてきた文字フォントをマッ
チングパタンとしてパタンＲＡＭ７５に設定する。ま
た、撮像指示であれば、ステップ２４５で同期回路７０
に撮像(ビデオ信号の取り込み)開始の指示を出す。そし
て、マッチング指示であれば、ステップ２４６でパタン
マッチング回路７４に指定部分のマッチング実行を指示
し、結果を受け取る。さらに、検索指示であれば、ステ
ップ２４７でパタンマッチング回路７４に画像メモリの
全エリアに対するマッチングを指示し、マッチした位置
を受け取るのである。その後、ステップ２４８で結果を
制御装置８に送信し、ステップ２４２に戻るのである。

【００４８】以上のテスト実行処理１４０(図１２)によ
って、図１１のテスト仕様を実施したテスト結果ファイ
ルの例を図１８に示す。ここで、検査対象となったプロ
グラムの内、Ｎo. １からＮo. ３までのプログラムは良
品だったので、“ＯＫ”となっているが、プログラムＮ
o. ４は、表示された文字がテスト仕様と異なっていた
ため、“ＮＧ”となっており、従って、この実施例によ
れば、プログラムの検査が自動的に行なわれ、多数のプ
ログラムについての検査を短時間で容易に、しかも正確
に行なうことができる。

【００４９】従って、以上の実施例によれば、以下に列
挙する効果が得られる。 (1) 任意のテスト仕様のもとで、自動的にプログラムの
テストが可能である。 (2) テスト仕様ファイルが再利用できるため、類似した
プログラムを検査するとき、テスト仕様の作成が容易で
ある。 (3) 被検査パソコンのビデオ信号を用いているため、光
学的な環境に左右されず、常に安定したテストが行え
る。また、テレビカメラが不要のため、装置を安価に構
築できる。 (4) マウスの操作も可能なため、広範囲にわたるプログ
ラムのテストが可能である。

【００５０】(5) 初期設定により、被検査プログラムが
動作するコピュータの操作手段と表示形式を定義できる
ため、どのようなコンピュータのプログラムでもテスト
が可能である。

【００５１】(6) ロボットを２台用いているため、２個
のキーの同時操作も可能であり、適用範囲が広い。

【００５２】(7) 文字パタンのマッチングや検索をハー
ドウェアで行っているため、処理が高速で短時間でテス
トすることができる。

【００５３】(8) キーボードとマウスの位置を教えるだ
けで位置関係が定義できるので、検査用の特別な治具が
不要である。

【００５４】なお、以上の実施例では、被検査パソコン
９からビデオ信号を取り出して画像処理装置７に入力す
ることにより、パソコン９のＣＲＴに表示された画像の
取り込みを得るようにしているが、図２で説明したよう
に、テレビカメラによってＣＲＴの表示画面を撮像し、
このテレビカメラからビデオ信号を取り込むようにして
も、本発明が実施できることは言うまでもない。また、
本発明は、上記したキーボードやマウスなどの入力装置
に限らず、ライトペンやデジタイザ等の入力装置を対象
としたプログラムに対しても、ロボットにライトペンや
デジタイザを操作させることにより、容易に対応できる
ことは言うまでもない。

【００５５】従って、本発明は、少なくとも以下に示す
態様で実施することができる。

【００５６】請求項１の発明において、上記機械的
操作手段が、少なくとも２軸以上の可動軸を備えたアク
チュエータで構成されていることを特徴とするプログラ
ム検査装置。

【００５７】請求項１の発明において、上記検査す
べきプログラムがロードされたデータ処理手段がコンピ
ュータで構成され、上記駆動制御手段と上記データ判定
手段とが上記コンピュータとは独立した別のコンピュー
タで構成されていること特徴とするプログラム検査装
置。

【００５８】請求項１の発明において、上記画像処
理手段の入力が、上記検査すべきプログラムがロードさ
れているコンピュータの表示用ビデオ信号出力となるよ
うに構成されていることを特徴とするプログラム検査装
置。

【００５９】請求項１の発明において、上記画像処
理手段の入力が、上記検査すべきプログラムがロードさ
れているコンピュータの表示画面を撮像するテレビジョ
ンカメラのビデオ信号出力となるように構成されている
ことを特徴とするプログラム検査装置。

【００６０】請求項１の発明において、上記データ
判定手段が、表示状態を表示ドット単位で比較して判定
するように構成されていることを特徴とするプログラム
検査装置。

【００６１】

【発明の効果】本発明によれば、キーボードーなど各種
のマンマシンインターフェースに対する処理を含むプロ
グラムについても、自動的に検査を行なうことができる
から、どのようなプログラムでも容易に短時間で、自動
的に正確な検査をすることができるという効果がある。

【図面の簡単な説明】

【図１】本発明によるプログラム検査装置の一実施例を
示す全体構成図である。

【図２】プログラムの検査についての従来の考え方と本
発明による考え方を対比して示した説明図である。

【図３】本発明の一実施例における制御装置のハードウ
ェアブロック図である。

【図４】本発明の一実施例における画像処理装置のハー
ドウェアブロック図である。

【図５】本発明の一実施例における全体処理を示すフロ
ーチャートである。

【図６】本発明の一実施例における初期設定処理を示す
フローチャートである。

【図７】本発明の一実施例におけるフォントの定義図で
ある。

【図８】本発明の一実施例におけるキーボードの定義図
である。

【図９】本発明の一実施例におけるマウスの定義図であ
る。

【図１０】本発明の一実施例におけるテスト仕様作成処
理を示すフローチャートである。

【図１１】本発明の一実施例によるテスト仕様ファイル
例の説明図である。

【図１２】本発明の一実施例におけるテスト実行処理を
示すフローチャートである。

【図１３】本発明の一実施例におけるキーボード押下処
理を示すフローチャートである。

【図１４】本発明の一実施例におけるマウス操作処理を
示すフローチャートである。

【図１５】本発明の一実施例における表示チェック処理
を示すフローチャートである。

【図１６】本発明の一実施例における文字列チェック処
理を示すフローチャートである。

【図１７】本発明の一実施例における画像処理装置での
処理を示すフローチャートである。

【図１８】本発明の一実施例によるテスト結果ファイル
例の説明図である。

【符号の説明】

１第１のロボット２第２のロボット３、４ロボットのハンド５ロボット１のモータを駆動するサーボアンプ６ロボット２のモータを駆動するサーボアンプ７画像処理装置８検査装置全体を制御するコンピュータ９検査すべきプログラムが格納されたパソコン１０マウス１１キーボード１２ビデオ信号出力線

───────────────────────────────────────────────────── フロントページの続き (72)発明者松浦美紀彦千葉県習志野市東習志野七丁目１番１号日立京葉エンジニアリング株式会社内

Claims

【特許請求の範囲】

【請求項１】検査すべきプログラムがロードされたデ
ータ処理手段を用いることにより、入出力マンマシンイ
ンターフェースを介してデータの入出力を行なう処理が
含まれているプログラムを、実使用状態で検査するプロ
グラム検査装置において、上記データ処理手段の入力イ
ンターフェース手段を操作する機械的操作手段と、上記
データ処理手段の出力インターフェース手段に出力され
る画像データを取り込んで処理する画像処理手段と、上
記プログラムの検査に必要な検査項目に従って上記機械
的操作手段を制御する駆動制御手段と、上記画像処理手
段のデータ出力を上記検査項目と対比して判定するデー
タ判定手段とを設け、予じめ設定してある所定の検査項
目に従って上記駆動制御手段により順次上記機械的操作
手段を動作させ、この動作に対応して得られる上記画像
処理手段を上記データ判定手段により逐次上記検査項目
と対比して判定することにより、上記プログラムの検査
結果を自動的に得るように構成したことを特徴とするプ
ログラム検査装置。