JP2023148119A - コンピュータプログラム、および、制御装置 - Google Patents

Abstract

【課題】ロボットとアプリケーションソフトウェアとを使用して装置を検査する。【解決手段】操作コマンドと判断コマンドとを含む手順情報に従って対象装置を検査する。判断コマンドが、操作の後に、制限時間内に、操作に起因する対象装置の結果状態が検知部によって検知されるか否かを判断するコマンドである場合に、対象装置の結果状態を検知するための位置に検知部を移動させる処理を、アプリケーションソフトウェアのユーザインタフェースの操作の開始前にロボット駆動部に実行させる。判断コマンドが、操作の後に、制限時間内に、操作に起因するアプリケーションソフトウェアの結果状態がアプリケーション駆動部によって検知されるか否かを判断するコマンドである場合に、移動処理と、移動処理よりも先に完了通知を送信する先通知処理と、をロボット駆動部に実行させる。【選択図】 図１

Description

本明細書は、装置を検査する技術に関する。

部品の移動作業、挿入作業、組み立て作業などの作業に、ロボットが使用され得る。ロボットに関連して、特許文献１は、以下の技術を開示している。ロボットのハンドに作用する力を検出する力センサの力センサ信号からハンドに加わる力を算出する。ロボットアームの各関節軸駆動モータの位置検出信号から部品の移動量の移動速度を算出する。ハンドに加わる力と移動速度の積を時間積分して移動時に消費される仕事量を算出する。移動量を第１軸、仕事量を第２軸とする２次元平面内において、ハンドリング作業完了時の移動量と仕事量が予め設定した閉領域の外側にある場合に把持部品とハンド間の滑りが発生したと判定する。

特開２０１１－８８２６０号公報

ロボットは、装置の検査に使用され得る。例えば、ロボットは、デジタルカメラ、三次元センサ、赤外線センサなどの検知部を有してよい。そして、ロボットの検知部が、装置の状態を検知してよい。また、ロボットは、ボタンやタッチパネルなどの操作部を、操作してよい。また、装置の検査には、装置の制御またはモニタのためのアプリケーションソフトウェアが使用されてよい。ところが、ロボットとアプリケーションソフトウェアとを使用して装置を検査することには、工夫の余地があった。

本明細書は、ロボットとアプリケーションソフトウェアとを使用して装置を検査する技術を開示する。

本明細書に開示された技術は、以下の適用例として実現することが可能である。

［適用例１］対象装置の状態を検知する検知部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアのユーザインタフェースを操作するためのアプリケーション駆動部と、のそれぞれと通信するように構成されるとともにコンピュータを有する制御装置のコンピュータプログラムであって、対象装置を検査するための手順情報を取得する取得機能と、前記手順情報に従って前記対象装置を検査する検査機能と、をコンピュータに実現させ、前記手順情報は、アプリケーションソフトウェアのユーザインタフェースの操作をアプリケーション駆動部に実行させる操作コマンドと、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作に起因する前記対象装置の状態が検知部によって検知されるか否かを判断する判断コマンドと、を含み、前記検査機能は、（Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記対象装置の状態である事後状態が前記検知部によって検知されるか否かを判断する事後判断コマンドである場合に、前記対象装置の前記事後状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の完了後に前記ロボット駆動部に実行させる後移動機能と、（Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記対象装置の状態である結果状態が前記検知部によって検知されるか否かを判断する時間判断コマンドである場合に、前記対象装置の前記結果状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に前記ロボット駆動部に実行させる先移動機能と、を含む、コンピュータプログラム。

この構成によれば、制御装置のコンピュータは、判断コマンドが時間判断コマンドである場合に、検知部を移動させる処理を操作の開始前にロボット駆動部に実行させるので、時間判断コマンドに基づく適切な判断が可能である。

［適用例２］対象装置を操作するための操作部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアの状態を検知するためのアプリケーション駆動部と、のそれぞれと通信するように構成されるとともにコンピュータを有する制御装置のコンピュータプログラムであって、対象装置を検査するための手順情報を取得する取得機能と、前記手順情報に従って前記対象装置を検査する検査機能と、をコンピュータに実現させ、前記手順情報は、ロボットの操作部による前記対象装置の操作をロボット駆動部に実行させる操作コマンドと、前記対象装置の前記操作に起因するアプリケーションソフトウェアの状態がアプリケーション駆動部によって検知されるか否かを判断する判断コマンドと、を含み、前記検査機能は、（Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である事後状態が前記アプリケーション駆動部によって検知されるか否かを判断する事後判断コマンドである場合に、前記操作の後に前記ロボットの前記操作部を特定の位置に移動する移動処理と、前記移動処理の後に前記操作の完了通知を送信する後通知処理と、を前記ロボット駆動部に実行させる後通知機能と、（Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である結果状態が前記アプリケーション駆動部によって検知されるか否かを判断する時間判断コマンドである場合に、前記移動処理と、前記移動処理よりも先に前記完了通知を送信する先通知処理と、を前記ロボット駆動部に実行させる先通知機能と、を含む、コンピュータプログラム。

この構成によれば、制御装置のコンピュータは、判断コマンドが時間判断コマンドである場合に、移動処理よりも先に完了通知を送信する先通知処理をロボット駆動部に実行させるので、時間判断コマンドに基づく適切な判断が可能である。

なお、本明細書に開示の技術は、種々の態様で実現することが可能であり、例えば、駆動部を制御する方法および駆動部を制御する制御装置、それらの方法または装置の機能を実現するためのコンピュータプログラム、そのコンピュータプログラムを記録した記録媒体（例えば、一時的ではない記録媒体）、等の形態で実現することができる。

本実施例のシステムの例を示す概略図である。 ユーザインタフェース画面の例を示す概略図である。 検査処理の例を示すフローチャートである。 スクリプトの例を示す概略図である。 スクリプトの解析処理の例を示すフローチャートである。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。 スクリプトの別の例を示す概略図である。 操作判断処理の例を示すシーケンス図である。

Ａ．第１実施例：
Ａ１．装置構成：
図１は、本実施例のシステムの例を示す概略図である。このシステム１０００は、対象装置１０と、制御装置１００と、ロボット駆動装置２００Ａ、２００Ｂと、ロボット３００Ａ、３００Ｂと、アプリケーション駆動装置６００Ａ、６００Ｂと、アプリケーション実行装置７００Ａ、７００Ｂと、を有している。システム１０００は、対象装置１０を検査するためのシステムである。この検査では、対象装置１０が操作され、この操作に起因する対象装置１０の状態が適切であるか否かが判断される。このような処理は、テストとも呼ばれる。

制御装置１００と、ロボット駆動装置２００Ａ、２００Ｂと、アプリケーション駆動装置６００Ａ、６００Ｂとは、ネットワークＮＴに接続されている。ネットワークＮＴは、いわゆるローカルネットワークである。なお、ネットワークＮＴは、いわゆるインターネットを含んでよい。駆動装置２００Ａ、２００Ｂ、６００Ａ、６００Ｂは、制御装置１００からの指示に応じて、対象装置１０の検査のための後述する種々の処理を実行する。

対象装置１０は、種々の製品であってよい。本実施例では、対象装置１０は、複合機であり、インクジェット方式のプリンタと、スキャナと、を有している（図示省略）。対象装置１０は、タッチスクリーン１１と、クリーニングボタン１２と、印刷ボタン１３と、スキャンボタン１４と、電源ボタン１５と、ビジーランプ１６と、レディランプ１７と、を有している。図示を省略するが、タッチスクリーン１１は、表示装置と、表示装置上に配置されたタッチパネルとを含んでいる。タッチスクリーン１１は、ボタンなどの画像を表示し、画像の位置のタッチなどの操作を受け付ける。部材１１－１５は、それぞれ、ユーザによる操作を受け取るように構成された操作部の例である。

制御装置１００は、対象装置１０の検査処理を制御するための装置である。制御装置１００は、例えば、パーソナルコンピュータである。制御装置１００は、制御ユニット１０５と、表示部１５０と、操作部１６０と、を有している。制御ユニット１０５は、プロセッサ１１０と、記憶装置１１５と、通信インタフェース１４０と、を有している。これらの要素は、バスを介して互いに接続されている。記憶装置１１５は、揮発性記憶装置１２０と、不揮発性記憶装置１３０と、を含んでいる。

プロセッサ１１０は、データ処理を行うように構成された装置であり、例えば、ＣＰＵである。揮発性記憶装置１２０は、例えば、ＤＲＡＭであり、不揮発性記憶装置１３０は、例えば、フラッシュメモリである。不揮発性記憶装置１３０は、プログラムＰＧ１を格納している。プロセッサ１１０は、プログラムＰＧ１を実行することによって、後述する種々の処理を実行する。また、不揮発性記憶装置１３０は、第１スクリプトＳＣのデータを格納している。プログラムＰＧ１と第１スクリプトＳＣとの詳細については、後述する。

表示部１５０は、液晶ディスプレイ、有機ＥＬディスプレイなどの、画像を表示するように構成された装置である。操作部１６０は、ボタン、レバー、表示部１５０上に重ねて配置されたタッチパネルなどの、ユーザによる操作を受け取るように構成された装置である。ユーザは、操作部１６０を操作することによって、種々の指示を制御装置１００に入力可能である。通信インタフェース１４０は、他の装置と通信するためのインタフェースである。通信インタフェース１４０は、例えば、ＵＳＢインタフェース、有線ＬＡＮインタフェース、IEEE802.11の無線インタフェースのうちの１種以上を含む。通信インタフェース１４０は、ネットワークＮＴに接続されている。

ロボット３００Ａ、３００Ｂは、対象装置１０の操作と対象装置１０の撮影とを行うための装置である。本実施例では、ロボット３００Ａ、３００Ｂは、同じハードウェア構成を有している。以下、ロボット３００Ａ、３００Ｂを区別しない場合には、符号の末尾の英字を省略して、単にロボット３００とも呼ぶ。ロボット３００は、アーム３１０を有している。図示を省略するが、アーム３１０は、複数のリンクを有している。複数のリンクは、回転、並進などの種々の動きを許容するジョイントによって接続されている。アーム３１０は、例えば、６軸のロボットアームである。６軸のそれぞれのジョイントは、ジョイントを駆動するサーボモータと、ジョイントの駆動位置（例えば、回転角度）を検出する位置検出器（例えば、エンコーダ）と、を有している。

アーム３１０の端部には、ツール３２０とデジタルカメラ３３０とが固定されている。本実施例では、ツール３２０は、１本の棒状の部材である（棒状の部材は、指とも呼ばれる）。対象装置１０の操作のために、ツール３２０の端部は、対象装置１０の操作部（例えば、タッチスクリーン１１とボタン１２－１５のいずれか）に、接触する。環境（ここでは、対象装置１０）と相互作用する部材は、エンドエフェクタとも呼ばれる。ツール３２０は、エンドエフェクタの例である。

デジタルカメラ３３０は、対象装置１０を撮影する。撮影画像によって示される対象装置１０の状態が適切であるか否かが、判断される。

ロボット駆動装置２００Ａ、２００Ｂは、それぞれ、ロボット３００Ａ、３００Ｂを制御するための装置であり、対応するロボット３００Ａ、３００Ｂに接続されている。ロボット駆動装置２００Ａ、２００Ｂは、例えば、パーソナルコンピュータである。本実施例では、ロボット駆動装置２００Ａ、２００Ｂは、同じハードウェア構成を有している。以下、ロボット駆動装置２００Ａ、２００Ｂを区別しない場合には、符号の末尾の英字を省略して、単にロボット駆動装置２００とも呼ぶ。

ロボット駆動装置２００は、制御ユニット２０５を有している。制御ユニット２０５は、制御装置１００の制御ユニット１０５と同様に、プロセッサ２１０と記憶装置２１５（揮発性記憶装置２２０と不揮発性記憶装置２３０を含む）と通信インタフェース２４０とを有している。第１ロボット駆動装置２００Ａの不揮発性記憶装置２３０には、プログラムＰＧ２Ａが格納されている。第２ロボット駆動装置２００Ｂの不揮発性記憶装置２３０には、プログラムＰＧ２Ｂが格納されている。プログラムＰＧ２Ａ、ＰＧ２Ｂは、ロボット３００Ａ、３００Ｂを制御するためのプログラムである。

ロボット駆動装置２００は、ロボット３００の各ジョイントの駆動モータを制御することによって、各ジョイントを独立に動かすことができる。ロボット駆動装置２００は、各ジョイントの位置検出器から出力されるデータを使用することによって、ツール３２０とデジタルカメラ３３０との位置を算出可能である。なお、ジョイントのパラメータからエンドエフェクタの位置を算出する技術は、フォワードキネマティクスとも呼ばれる。

アプリケーション実行装置７００Ａ、７００Ｂは、アプリケーションソフトウェアを実行するための装置である。本実施例では、アプリケーション実行装置７００Ａ、７００Ｂは、携帯端末である（例えば、スマートフォン）。以下、アプリケーション実行装置７００Ａ、７００Ｂを、単に端末７００Ａ、７００Ｂとも呼ぶ。本実施例では、端末７００Ａ、７００Ｂは、同じハードウェア構成を有している。以下、端末７００Ａ、７００Ｂを区別しない場合には、符号の末尾の英字を省略して、単に端末７００とも呼ぶ。

端末７００は、制御ユニット７０５と、表示部７５０と、操作部７６０と、を有している。図示を省略するが、制御ユニット７０５は、制御装置１００の制御ユニット１０５と同様に、プロセッサと記憶装置（揮発性記憶装置と不揮発性記憶装置を含む）と通信インタフェースとを有している。表示部７５０は、液晶ディスプレイ、有機ＥＬディスプレイなどの、画像を表示するように構成された装置である。操作部７６０は、本実施例では、表示部７５０上に重ねて配置されたタッチパネルである。ユーザは、操作部７６０を操作することによって、種々の指示を端末７００に入力可能である。

第１端末７００Ａの不揮発性記憶装置には、プログラムＰＧ７Ａが格納されている。第２端末７００Ｂの不揮発性記憶装置には、プログラムＰＧ７Ｂが格納されている。プログラムＰＧ７Ａ、ＰＧ７Ｂは、対象装置１０と協働するアプリケーションソフトウェアのプログラムである。以下、アプリケーションソフトウェアを、単に、アプリケーションとも呼ぶ。

アプリケーションは、対象装置１０と協働する任意のアプリケーションであってよい。例えば、アプリケーションは、対象装置１０の製造者によって提供される。端末７００は、アプリケーションに従って、種々の処理を実行する。以下の機能は、アプリケーションによって実現される機能の例である。
（１）表示部７５０にユーザインタフェース画面を表示する。
（２）画像データを対象装置１０に送信することによって、対象装置１０に画像を印刷させる。
（３）スキャンデータを対象装置１０から取得する。
（４）印刷ヘッドのクリーニングを対象装置１０に開始させる。
（５）対象装置１０の状態を示す対象状態データを、定期的に、対象装置１０から取得する。
（６）対象状態データによって示される状態を表示部７５０に表示する。
（７）リモートで対象装置１０の電源を入れる。

図２は、ユーザインタフェースを示すユーザインタフェース画面の例を示す概略図である（以下、ＵＩ画面とも呼ぶ）。ＵＩ画面７５２は、複数のボタン７５２ａ－７５２ｅと、情報領域７５２ｆと、を示している。本実施例では、ＵＩ画面７５２は、印刷ボタン７５２ａと、スキャンボタン７５２ｂと、印刷ヘッドのクリーニングを行うためのクリーニングボタン７５２ｃと、リモート電源ボタン７５２ｄと、設定ボタン７５２ｅと、を示している。情報領域７５２ｆは、対象装置１０に関連する情報（例えば、対象装置１０の状態、インクの残量、など）を表示するための領域である。ユーザは、操作部７６０を操作することによって、ＵＩ画面７５２によって示されるユーザインタフェースを操作することができる。なお、図示を省略するが、ＵＩ画面７５２は、操作部７６０の操作に応じて、種々に変化し得る。

端末７００（図１）と対象装置１０との間の通信方法は、任意の方法であってよい。本実施例では、端末７００と対象装置１０とのそれぞれの通信インタフェースは、ＮＦＣインタフェースを含んでいる（ＮＦＣは、Near Field Communicationの略）。端末７００と対象装置１０とは、ＮＦＣインタフェースを介して、通信する。これに代えて、端末７００と対象装置１０とは、ネットワークＮＴを介して通信してもよい。

アプリケーション駆動装置６００Ａ、６００Ｂは、端末７００Ａ、７００Ｂ上で動作するアプリケーションのユーザインタフェースを操作と、アプリケーションの状態の検知と、を行うための装置である。第１アプリケーション駆動装置６００Ａは、第１端末７００Ａに接続され、第１端末７００Ａのアプリケーションを制御する。第２アプリケーション駆動装置６００Ｂは、第２端末７００Ｂに接続され、第２端末７００Ｂのアプリケーションを制御する。アプリケーション駆動装置６００Ａ、６００Ｂは、例えば、パーソナルコンピュータである。以下、アプリケーション駆動装置６００Ａ、６００Ｂを、単にＡＰＰ駆動装置６００Ａ、６００Ｂとも呼ぶ。本実施例では、ＡＰＰ駆動装置６００Ａ、６００Ｂは、同じハードウェア構成を有している。以下、ＡＰＰ駆動装置６００Ａ、６００Ｂを区別しない場合には、符号の末尾の英字を省略して、単にＡＰＰ駆動装置６００とも呼ぶ。

ＡＰＰ駆動装置６００は、制御ユニット６０５を有している。制御ユニット６０５は、制御装置１００の制御ユニット１０５と同様に、プロセッサ６１０と記憶装置６１５（揮発性記憶装置６２０と不揮発性記憶装置６３０を含む）と通信インタフェース６４０とを有している。第１ＡＰＰ駆動装置６００Ａの不揮発性記憶装置６３０には、プログラムＰＧ６Ａが格納されている。第２ＡＰＰ駆動装置６００Ｂの不揮発性記憶装置６３０には、プログラムＰＧ６Ｂが格納されている。プログラムＰＧ６Ａ、ＰＧ６Ｂは、端末７００Ａ、７００Ｂ上で動作するアプリケーションのユーザインタフェースを操作するためのプログラムである。プログラムＰＧ６Ａ、ＰＧ６Ｂは、タッチパネルのタップ操作、テキストの入力操作などの種々の操作を端末７００Ａ、７００Ｂ上で再現する。ユーザインタフェースを操作するソフトウェアとしては、例えば、Ａｐｐｉｕｍと呼ばれるソフトウェアを使用可能である。また、本実施例では、プログラムＰＧ６Ａ、ＰＧ６Ｂは、アプリケーションの状態を検知する機能も有している。具体的には、プログラムＰＧ６Ａ、ＰＧ６Ｂは、アプリケーションからアプリケーションの内部パラメータを取得する。内部パラメータは、アプリケーションの処理で使用される種々のデータを含んでいる。例えば、内部パラメータは、アプリケーションによる処理のログデータを含んでいる。また、上述したように、アプリケーションは、対象装置１０から対象状態データを取得する。アプリケーションの内部パラメータは、対象状態データを含んでいる。なお、ユーザインタフェースを操作するためのプログラムは、ＡＰＰ駆動装置６００にインストールされるプログラムと、端末７００にインストールされるプログラムと、を含んでよい。

Ａ２．検査処理：
図３は、検査処理の例を示すフローチャートである。制御装置１００（図１）のプロセッサ１１０は、プログラムＰＧ１に従って、検査処理を進行する。Ｓ１１０では、プロセッサ１１０は、不揮発性記憶装置１３０から第１スクリプトＳＣのデータを取得する。第１スクリプトＳＣは、検査の手順を示している。

図４は、スクリプトの例を示す概略図である。スクリプトは、複数のコマンドを示している。各コマンドには、実行すべき順番が、予め付与されている。図４の例では、第１スクリプトＳＣは、第１コマンドＣ１と第２コマンドＣ２を示している。第１コマンドＣ１は、アプリケーションの操作コマンドである。具体的には、第１コマンドＣ１は、クリーニングボタン７５２ｃ（図２）のタップである。第２コマンドＣ２は、ロボットを使用する事後判断であり、第１コマンドＣ１に対応付けられている。事後判断は、対応する操作に起因する対象装置１０の状態である事後状態が検知されるか否かの判断である。第２コマンドＣ２の事後状態は、クリーニングボタン７５２ｃのタップに起因する対象装置１０（図１）のビジーランプ１６が点灯する状態である。

スクリプトのデータは、作業者によって、予め不揮発性記憶装置１３０に格納される。本実施例では、スクリプトのデータは、テキストデータである。第１コマンドＣ１のような操作コマンドは、例えば、操作用の駆動装置（ここでは、第１ＡＰＰ駆動装置６００Ａであることとする）と、操作対象（例えば、クリーニングボタン７５２ｃ）と、操作方法（例えば、押下）と、で表されてよい。第２コマンドＣ２のような判断コマンドは、例えば、判断用の駆動装置（ここでは、第１ロボット駆動装置２００Ａであることとする）と、判断の種類（ここでは、事後判断）と、判断用の状態（ここでは、ビジーランプ１６が点灯する状態）と、で表されてよい。

Ｓ１２０（図３）では、プロセッサ１１０は、第１スクリプトＳＣに従って対象装置１０の検査を進行する。本実施例では、Ｓ１２０は、Ｓ１２３とＳ１２６とを含んでいる。Ｓ１２３では、プロセッサ１１０は、第１スクリプトＳＣを解析する。

図５は、スクリプトの解析処理の例を示すフローチャートである。Ｓ２１０では、プロセッサ１１０は、処理対象のコマンドの番号ｉを１に初期化する。

Ｓ２２０では、プロセッサ１１０は、ｉ番のコマンドが、ロボットを使用する時間判断であるか否かを判断する。時間判断は、操作の後に、制限時間内に、操作に起因する対象装置１０の状態である結果状態が検知されるか否かの判断である。例えば、操作は、ＵＩ画面７５２（図２）の印刷ボタン７５２ａの押下であってよい。結果状態は、対象装置１０から印刷物が出力された状態であってよい。この結果状態は、デジタルカメラ３３０による対象装置１０の撮影画像を解析することによって、検知可能である。ここで、印刷ボタンの押下の後に、１０秒以内に、結果状態が検知されるか否かが、判断されてよい。結果状態の検知にロボット３００（ここでは、デジタルカメラ３３０）が使用される場合、時間判断は、ロボットを使用する時間判断である。

図４の第１コマンドＣ１は、アプリケーションの操作であるので、Ｓ２２０の判断結果は、Ｎｏである。この場合、プロセッサ１１０は、Ｓ２４０へ移行する。

Ｓ２２０の判断結果がＹｅｓである場合、プロセッサ１１０は、Ｓ２３０を実行し、そして、Ｓ２４０へ移行する。Ｓ２３０では、プロセッサ１１０は、ｉ番のコマンドに対応する操作コマンドの前に、第１種準備処理Ｐ１を追加する。Ｓ２３０の詳細については、後述する。

Ｓ２４０では、プロセッサ１１０は、ｉ番のコマンドが、アプリケーションを使用する時間判断であるか否かを判断する。結果状態の検知にアプリケーションが使用される場合、時間判断は、アプリケーションを使用する時間判断である。例えば、操作は、対象装置１０（図１）のスキャンボタン１４の押下であってよい。結果状態は、対象装置１０からアプリケーションへスキャンデータが出力された状態であってよい。この結果状態は、アプリケーションの内部状態を参照することによって、検知可能である。ここで、スキャンボタン１４の押下の後に、１０秒以内に、結果状態が検知されるか否かが、判断されてよい。

図４の第１コマンドＣ１は、アプリケーションの操作であるので、Ｓ２４０の判断結果は、Ｎｏである。この場合、プロセッサ１１０は、Ｓ２６０へ移行する。

Ｓ２４０の判断結果がＹｅｓである場合、プロセッサ１１０は、Ｓ２５０を実行し、そして、Ｓ２６０へ移行する。Ｓ２５０では、プロセッサ１１０は、ｉ番のコマンドに対応する操作コマンドの前に、第２種準備処理Ｐ２を追加する。Ｓ２５０の詳細については、後述する。

Ｓ２６０では、プロセッサ１１０は、スクリプトの全てのコマンドが処理されたか否かを判断する。全てのコマンドが処理された場合（Ｓ２６０：Ｙｅｓ）、プロセッサ１１０は、図５の処理を終了する。

未処理のコマンドが残っている場合（Ｓ２６０：Ｎｏ）、Ｓ２７０で、プロセッサ１１０は、番号ｉに１を加算する。そして、プロセッサ１１０は、Ｓ２２０へ移行して、更新されたｉ番のコマンド（すなわち、次のコマンド）を処理する。

図４の第２コマンドＣ２は、ロボットを使用する事後判断である。従って、Ｓ２２０とＳ２４０とのそれぞれの判断結果は、Ｎｏである。図４の第１スクリプトＳＣが処理される場合、プロセッサ１１０は、Ｓ２３０、Ｓ２５０を実行せずに、図５の処理、すなわち、図３のＳ１２３の処理を終了する。

Ｓ１２６（図３）では、プロセッサ１１０は、スクリプトの解析結果に従って、操作判断処理を進行する。操作判断処理は、駆動装置２００、６００への指示の送信と、駆動装置２００、６００から受信されたデータに基づく判断と、を含んでいる。Ｓ１２６の終了に応じて、プロセッサ１１０は、図３の検査処理を終了する。

Ａ２－１．第１の操作判断処理：
図６は、図４の第１スクリプトＳＣのための操作判断処理の例を示すシーケンス図である。第１コマンドＣ１は、第１ＡＰＰ駆動装置６００Ａを指定し、第２コマンドＣ２は、第１ロボット駆動装置２００Ａを指定していることとする。制御装置１００は、第１コマンドＣ１、第２コマンドＣ２の順に、処理を進行する。Ｓ３５０、Ｓ３６０、Ｓ３７０は、第１コマンドＣ１のための処理を示している。Ｓ３３３、Ｓ３３５、Ｓ４１０、Ｓ４１５、Ｓ４２０は、第２コマンドＣ２のための処理を示している。

Ｓ３５０で、制御装置１００のプロセッサ１１０は、第１ＡＰＰ駆動装置６００Ａに操作指示を送信する。この指示は、第１コマンドＣ１の詳細（ここでは、クリーニングボタン７５２ｃのタップ）を示すデータを含んでいる。

Ｓ３６０では、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、操作指示に従って、ＵＩ画面７５２（図２）のクリーニングボタン７５２ｃのタップを、第１端末７００Ａに適用する。これにより、第１端末７００Ａのアプリケーションは、クリーニングボタン７５２ｃがタップされた場合の処理を実行する。本実施例では、第１端末７００Ａは、対象装置１０に、クリーニングの開始を指示する。対象装置１０は、この指示に応じて、印刷ヘッドのクリーニングを開始する。ここで、対象装置１０は、クリーニングの最中には、ビジーランプ１６を点灯することとする。

Ｓ３７０では、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、完了通知を制御装置１００に送信する。

完了通知に応じて、Ｓ３３３で、制御装置１００のプロセッサ１１０は、データ取得指示を第１ロボット駆動装置２００Ａに送信する。この指示は、第２コマンドＣ２の詳細を示すコマンドデータを含んでいる。本実施例では、このコマンドデータは、ビジーランプ１６（図１）の撮影位置へのデジタルカメラ３３０の移動と、デジタルカメラ３３０による撮影と、を示している。

Ｓ３３５で、第１ロボット駆動装置２００Ａのプロセッサ２１０は、Ｓ３３３の指示に従って、第１ロボット３００Ａを駆動することによって、デジタルカメラ３３０を撮影位置に移動させる。デジタルカメラ３３０の向きは、撮影に適する向きに設定される。

本実施例では、ロボット駆動装置２００の不揮発性記憶装置２３０は、種々の撮影対象に対応付けられるロボット３００の制御パラメータを示すデータを、予め格納している（図示省略）。制御パラメータは、例えば、撮影位置の座標、複数のジョイントの駆動手順（例えば、各ジョイントの駆動量と駆動順）など、撮影位置にデジタルカメラ３３０を移動させることが可能な任意のパラメータであってよい。プロセッサ２１０は、撮影対象に対応付けられる制御パラメータを使用してロボット３００を制御することによって、デジタルカメラ３３０を撮影対象に適する撮影位置に移動させる。

Ｓ４１０では、プロセッサ２１０は、第１ロボット３００Ａのデジタルカメラ３３０に撮影指示を送信する。デジタルカメラ３３０は、対象装置１０のビジーランプ１６を含む部分を撮影する。プロセッサ２１０は、デジタルカメラ３３０から、撮影画像データを取得する。Ｓ４１５では、プロセッサ２１０は、撮影画像データを制御装置１００に送信する。

Ｓ４２０では、制御装置１００のプロセッサ１１０は、撮影画像を解析することによって、ビジーランプ１６が点灯しているか否かを判断する。例えば、プロセッサ１１０は、ビジーランプ１６を示す基準画像を使用するパターンマッチングによって、撮影画像中のビジーランプ１６を検出する。プロセッサ１１０は、撮影画像中の検出されたビジーランプ１６の明るさを参照して、ビジーランプ１６が点灯しているか否かを判断する。プロセッサ１１０は、判断結果を示すデータを、記憶装置１１５（例えば、不揮発性記憶装置１３０）に格納する。以上により、図６の処理は、終了する。

以上のように、本実施例では、制御装置１００は、ロボット駆動装置２００とＡＰＰ駆動装置６００とのそれぞれと通信するように構成されている。ロボット３００のデジタルカメラ３３０は、対象装置１０の状態を検知する検知部の例である。制御装置１００のプロセッサ１１０は、以下の処理を実行する。図３のＳ１１０では、プロセッサ１１０は、第１スクリプトＳＣを取得する。第１スクリプトＳＣは、対象装置１０を検査するための手順情報の例である。Ｓ１２０では、プロセッサ１１０は、第１スクリプトＳＣに従って対象装置１０を検査する。

図４に示すように、第１スクリプトＳＣは、第１コマンドＣ１と第２コマンドＣ２とを含んでいる。第１コマンドＣ１は、ＵＩ画面７５２のクリーニングボタン７５２ｃのタップを第１ＡＰＰ駆動装置６００Ａに実行させるコマンドである。第１コマンドＣ１は、アプリケーションのユーザインタフェースの操作をアプリケーション駆動部に実行させる第１種操作コマンドの例である。第２コマンドＣ２は、ＵＩ画面７５２の操作に起因する対象装置１０のビジーランプ１６が点灯する状態がデジタルカメラ３３０によって検知されるか否かを判断するコマンドである。第２コマンドＣ２は、アプリケーションのユーザインタフェースの操作に起因する対象装置の状態が検知部によって検知されるか否かを判断する第１種判断コマンドの例である。

図４、図６に示すように、第２コマンドＣ２は、ＵＩ画面７５２の操作の後に、操作に起因する対象装置１０の状態である事後状態（ここでは、ビジーランプ１６が点灯する状態）がデジタルカメラ３３０によって検知されるか否かを判断する。第２コマンドＣ２は、操作の後に、操作に起因する対象装置の状態である事後状態が検知部によって検知されるか否かを判断する第１種事後判断コマンドの例である。

図６に示すように、判断コマンド（ここでは、第２コマンドＣ２）が第１種事後判断コマンドである場合、プロセッサ１１０は、対象装置１０の事後状態を検知するための位置にデジタルカメラ３３０を移動させる処理（Ｓ３３５）を、ＵＩ画面７５２の操作（Ｓ３６０）の完了後に第１ロボット駆動装置２００Ａに実行させる。従って、プロセッサ１１０は、操作に起因する事後状態の判断を、適切に、実行できる。

Ａ２－２．第２の操作判断処理：
図７は、スクリプトの別の例を示す概略図である。第２スクリプトＳＣａは、第１コマンドＣ１ａと第２コマンドＣ２ａを示している。第１コマンドＣ１ａは、アプリケーションの操作コマンドである。具体的には、第１コマンドＣ１ａは、ＵＩ画面７５２（図２）の印刷ボタン７５２ａのタップである。第２コマンドＣ２ａは、ロボットを使用する時間判断であり、第１コマンドＣ１ａに対応付けられている。時間判断は、ＵＩ画面７５２の操作の後に、制限時間内に、対応する操作に起因する対象装置の状態である結果状態が検知部によって検知されるか否かの判断である。第２コマンドＣ２ａの判断のための結果状態は、対象装置１０から印刷物が出力された状態である。

第２スクリプトＳＣａが使用される場合、図５の処理は、以下のように進行する。第１コマンドＣ１ａに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。第２コマンドＣ２ａに関しては、Ｓ２２０の判断結果がＹｅｓであり、Ｓ２４０の判断結果はＮｏである。この場合、Ｓ２３０で、制御装置１００のプロセッサ１１０は、第２コマンドＣ２ａに対応する操作コマンドである第１コマンドＣ１ａの前に、第１種準備処理Ｐ１を追加する。第１種準備処理Ｐ１は、以下の処理を含んでいる。
（Ａ）ＡＰＰ駆動装置６００に、トークンを送信する。
（Ｂ）ＡＰＰ駆動装置６００に、操作の完了通知の自動送信指示を送信する。
（Ｃ）ロボット駆動装置２００に、トークンを送信する。
（Ｄ）ロボット駆動装置２００に、移動の指示を送信する。
（Ｅ）ロボット駆動装置２００に、自動データ取得指示を送信する。

図８、図９は、第２スクリプトＳＣａのための操作判断処理の例を示すシーケンス図である。第１コマンドＣ１は、第１ＡＰＰ駆動装置６００Ａを指定し、第２コマンドＣ２は、第１ロボット駆動装置２００Ａを指定していることとする。図８に示すように、第１コマンドＣ１ａの処理の前に、第１種準備処理Ｐ１のための処理が追加されている。図８のＳ３１０ａ－Ｓ３４５ａは、第１種準備処理Ｐ１のための処理である。図８のＳ３５０ａ－Ｓ３７０ａは、第１コマンドＣ１ａのための処理である。図９は、第２コマンドＣ２ａのための処理を示している。

Ｓ３１０ａでは、制御装置１００のプロセッサ１１０は、通信指示と自動送信指示とを第１ＡＰＰ駆動装置６００Ａに送信する。通信指示は、トークンＴＫａを示すデータを含んでいる。この通信指示は、同じトークンＴＫａを含む通信確立要求に応じて通信を確立するためのものである。ここで、プロセッサ１１０は、予め決められたトークンＴＫａを使用する。これに代えて、プロセッサ１１０は、新たにトークンＴＫａを生成してよい（例えば、トークンＴＫａは、乱数を使用して生成されてよい）。自動送信指示は、第１コマンドＣ１ａを示すデータを含んでいる。この自動送信指示は、対応するコマンド（ここでは、第１コマンドＣ１ａ）の操作の完了通知を自動的に送信するためのものである。

Ｓ３１５ａでは、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、受信されるトークンＴＫａを示すデータを記憶装置６１５（例えば、不揮発性記憶装置６３０）に格納する。Ｓ３２０ａでは、プロセッサ６１０は、完了通知を制御装置１００に送信する。

Ｓ３２５ａでは、制御装置１００のプロセッサ１１０は、移動指示と通信指示と自動データ取得指示とを、第１ロボット駆動装置２００Ａに送信する。移動指示は、第２コマンドＣ２ａの詳細を示すコマンドデータを含んでいる。本実施例では、このコマンドデータは、印刷物の出力トレー（図示省略）の撮影位置へのデジタルカメラ３３０の移動と、デジタルカメラ３３０による撮影と、を示している。通信指示は、トークンＴＫａと第１ＡＰＰ駆動装置６００Ａとを示すデータを含んでいる。この通信指示は、トークンＴＫａを使用して第１ＡＰＰ駆動装置６００Ａとの通信を確立するための指示である。自動データ取得指示は、撮影画像データの取得を自動的に行うための指示である。

Ｓ３３０ａでは、第１ロボット駆動装置２００Ａのプロセッサ２１０は、トークンＴＫａを記憶装置２１５（例えば、不揮発性記憶装置２３０）に格納する。Ｓ３３５ａでは、プロセッサ２１０は、移動指示に従って第１ロボット３００Ａを駆動することによって、デジタルカメラ３３０を撮影位置に移動させる。

Ｓ３４０ａでは、プロセッサ２１０は、通信指示に従って、第１ＡＰＰ駆動装置６００Ａに、通信の確立要求を送信する。この要求は、トークンＴＫａを示すデータを含んでいる。第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、受信されたトークンが、Ｓ３１５ａで格納されたトークンＴＫａと同じである場合に、要求に応じて通信を確立する。例えば、第１ロボット駆動装置２００Ａと第１ＡＰＰ駆動装置６００Ａとは、通信セッションを確立する。以下、通信が確立されることとする。以後、駆動装置２００Ａ、６００Ａは、他の装置に情報を送信する場合に、トークンＴＫａを示すデータも送信する。トークンＴＫａは、トークンＴＫａと一緒に送信される情報が第２スクリプトＳＣａに関連付けられることを識別する。

Ｓ３４５ａでは、第１ロボット駆動装置２００Ａのプロセッサ２１０は、完了通知を制御装置１００に送信する。以上により、第１種準備処理Ｐ１のための処理が終了する。

Ｓ３５０ａでは、制御装置１００のプロセッサ１１０は、第１ＡＰＰ駆動装置６００Ａに操作指示を送信する。この指示は、第１コマンドＣ１ａの詳細（ここでは、印刷ボタン７５２ａのタップ）を示すデータを含んでいる。

Ｓ３５５ａでは、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、第１ＡＰＰ駆動装置６００Ａの図示しないタイマを参照して、現在の時刻Ｔａを取得する。本実施例では、自動送信指示（Ｓ３１０ａ）が受信される場合、プロセッサ６１０は、操作指示に応じて、時刻Ｔａを取得する。後述するように、時刻Ｔａの取得後、プロセッサ６１０は、直ぐに、操作処理（Ｓ３６０ａ）を実行する。時刻Ｔａは、操作が行われる時刻を示している（以下、時刻Ｔａを、操作時刻Ｔａとも呼ぶ）。

Ｓ３６０ａでは、プロセッサ６１０は、操作指示に従って、印刷ボタン７５２ａ（図２）のタップを、第１端末７００Ａに適用する。これにより、第１端末７００Ａのアプリケーションは、印刷ボタン７５２ａがタップされた場合の処理を実行する。本実施例では、第１端末７００Ａは、予め選択された画像データを対象装置１０に送信することによって、対象装置１０に画像を印刷させる。

Ｓ３６５ａでは、プロセッサ６１０は、第１ロボット駆動装置２００Ａに、操作の完了通知を送信する。この通知は、トークンＴＫａと操作時刻Ｔａとを示すデータを含んでいる。Ｓ３７０ａでは、プロセッサ６１０は、制御装置１００に、操作の完了通知を送信する。以上により、第１コマンドＣ１ａのための処理が終了する。

Ｓ３７５ａ（図９）では、第１ロボット駆動装置２００Ａのプロセッサ２１０は、画像取得処理の繰り返しを開始する。本実施例では、自動データ取得指示（図８：Ｓ３２５ａ）が受信される場合、プロセッサ２１０は、完了通知（図８：Ｓ３６５ａ）に応じて、撮影画像データの取得処理（Ｓ４１０ａ）の繰り返しを開始する。Ｓ４１０ａでは、プロセッサ２１０は、第１ロボット３００Ａのデジタルカメラ３３０に、撮影指示を送信する。そして、プロセッサ２１０は、デジタルカメラ３３０から撮影画像データを取得する。対象装置１０から印刷物が出力される前には、撮影画像は、印刷物の無い出力トレーを示している。印刷物が出力された後には、撮影画像は、印刷物を支持する出力トレーを示している。

Ｓ４１５ａで、プロセッサ２１０は、Ｓ４１０ａで取得された撮影画像ＩＭＧａとトークンＴＫａと操作時刻Ｔａとを示すデータを、制御装置１００に送信する。プロセッサ２１０は、その後、Ｓ４１０ａを繰り返す。Ｓ４１０ａの繰り返しにより、撮影画像データの更新が繰り返される。

Ｓ４２０ａでは、制御装置１００のプロセッサ１１０は、撮影画像ＩＭＧａを使用して、検査を行う。プロセッサ１１０は、例えば、印刷物の無い出力トレーを示す基準画像と、撮影画像ＩＭＧａと、の間の類似度を算出する。類似度の算出方法は、正規化相互相関、ゼロ平均正規化相互相関、など、２枚の画像の間の相関を示す類似度を算出する種々の方法であってよい。撮影画像が印刷物の無い出力トレーを示す場合、高い類似度が算出される。撮影画像が印刷物を支持する出力トレーを示す場合、低い類似度が算出される。プロセッサ１１０は、類似度が第１閾値以下である場合に、印刷物が出力された（すなわち、検査結果は合格である）と判断する。類似度が第１閾値を超える場合、プロセッサ１１０は、印刷物が出力されていない（すなわち、検査結果は不合格である）と判断する。第１閾値は、判断結果が適切であるように、予め実験的に決定される。プロセッサ１１０は、検査結果を示すデータを、記憶装置１１５（例えば、不揮発性記憶装置１３０）に格納する。

Ｓ４２５ａでは、プロセッサ１１０は、検査結果が合格であるか否かを判断する。Ｓ４２５ａの判断結果がＮｏである場合、Ｓ４３０ａで、プロセッサ１１０は、制御装置１００の図示しないタイマを参照して、現在時刻Ｔを取得する。プロセッサ１１０は、現在時刻Ｔが、操作時刻Ｔａから所定の第１制限時間ＴＷａ（例えば、１０秒）が経過する前であるか否かを判断する。Ｓ４３０ａの判断結果がＹｅｓである場合、Ｓ４３５ａで、プロセッサ１１０は、第１ロボット駆動装置２００Ａに、撮影画像データの再送要求を送信する。第１ロボット駆動装置２００Ａのプロセッサ２１０は、再送要求に応じて、Ｓ４１５ａに移行し、最新の撮影画像データを制御装置１００に送信する。以後、Ｓ４２５ａ、または、Ｓ４３０ａの判断結果が変化するまで、Ｓ４１０ａ－Ｓ４３５ａの処理が繰り返される（以下、繰り返される処理の全体を、処理Ｓ４００ｉとも呼ぶ）。

図９のＳ４００ｉの下には、Ｓ４２５ａの判断結果がＹｅｓである場合の処理Ｓ４００ｊが示されている。検査結果が合格であると判断される場合（Ｓ４２５ａ：Ｙｅｓ）、Ｓ４４０ａで、プロセッサ１１０は、終了指示を第１ロボット駆動装置２００Ａに送信する。第１ロボット駆動装置２００Ａのプロセッサ２１０は、この指示に応じて、画像取得処理の繰り返しを終了する。以上により、操作判断処理は終了する。

図９のＳ４００ｊの下には、Ｓ４３０ａの判断結果がＮｏである場合の処理Ｓ４００ｋが示されている。現在時刻Ｔが、操作時刻Ｔａから第１制限時間ＴＷａが経過した後である場合（Ｓ４３０ａ：Ｎｏ）、Ｓ４４５ａで、プロセッサ１１０は、終了指示を第１ロボット駆動装置２００Ａに送信する。第１ロボット駆動装置２００Ａのプロセッサ２１０は、この指示に応じて、画像取得処理の繰り返しを終了する。以上により、操作判断処理は終了する。

以上のように、第２スクリプトＳＣａ（図７）は、第１コマンドＣ１ａと第２コマンドＣ２ａとを含んでいる。第１コマンドＣ１ａは、図４の第１コマンドＣ１と同様に、第１種操作コマンドの例である。第２コマンドＣ２ａは、図４の第２コマンドＣ２と同様に、第１種判断コマンドの例である。ただし、図４の第２コマンドＣ２とは異なり、第２コマンドＣ２ａは、ＵＩ画面７５２の操作の後に、第１制限時間ＴＷａ内に、操作に起因する対象装置１０の結果状態（ここでは、印刷物が出力された状態）が、デジタルカメラ３３０によって検知されるか否かを判断する。このような第２コマンドＣ２ａは、操作の後に、制限時間内に、操作に起因する対象装置の結果状態が検知部によって検知されるか否かを判断する第１種時間判断コマンドの例である。

図８に示すように、判断コマンド（ここでは、第２コマンドＣ２ａ）が第１種時間判断コマンドである場合、プロセッサ１１０は、対象装置１０の結果状態を検知するための位置にデジタルカメラ３３０を移動させる処理（Ｓ３３５ａ）を、ＵＩ画面７５２の操作（Ｓ３６０ａ）の開始前に、第１ロボット駆動装置２００Ａに実行させる。この理由は、第１種時間判断コマンドに基づく適切な判断を行うためである。具体的には、以下の通りである。

図６には、操作処理（Ｓ３６０）から撮影画像の取得（Ｓ４１０）までの第１期間ＴＤ１が示されている。デジタルカメラ３３０の移動（Ｓ３３５）は、第１期間ＴＤ１内に行われる。デジタルカメラ３３０の移動に要する時間が長い場合、第１期間ＴＤ１は、その分、長くなる。図８、図９には、操作処理（図８：Ｓ３６０ａ）から最初の撮影画像の取得（図９：Ｓ４１０ａ）までの第２期間ＴＤ２が示されている。デジタルカメラ３３０の移動（図８：Ｓ３３５ａ）は、第２期間ＴＤ２よりも前に実行される。デジタルカメラ３３０の移動に要する時間が長い場合であっても、第２期間ＴＤ２の延長の可能性は、低減される。仮に、第２期間ＴＤ２が第１制限時間ＴＷａよりも長い場合、最初の撮影画像の取得（Ｓ４１０ａ）は、操作時刻Ｔａから第１制限時間ＴＷａが経過した後に行われる。この結果、第２コマンドＣ２ａの適切な判断ができない。本実施例では、そのような不具合の可能性は、低減される。また、このような不具合を避けるための検査専用の機能（例えば、テストモード）を対象装置１０に実装しなくても、適切な検査が可能である。

また、図８、図９に示すように、本実施例では、判断コマンド（ここでは、第２コマンドＣ２ａ）が第１種時間判断コマンドである場合、プロセッサ１１０は、以下の処理を実行する。プロセッサ１１０は、ＵＩ画面７５２の操作（Ｓ３６０ａ）の開始前に、Ｓ３１０ａ、Ｓ３２５ａで、第１ＡＰＰ駆動装置６００Ａと第１ロボット駆動装置２００Ａとのそれぞれに、トークンＴＫａを送信する。トークンＴＫａは、トークンＴＫａを伴う通信がスクリプト（ここでは、第２スクリプトＳＣａ）に基づくひとまとまりの処理のためのものであることを識別する。トークンＴＫａは、通信を識別する通信識別子の例である。さらに、プロセッサ１１０は、Ｓ３１０ａで、自動送信指示を第１ＡＰＰ駆動装置６００Ａに送信する。この指示により、第１ＡＰＰ駆動装置６００Ａは、ＵＩ画面７５２の操作の完了通知を、制御装置１００を介さずにトークンＴＫａを使用して第１ロボット駆動装置２００Ａへ送信する（Ｓ３６５ａ）。プロセッサ１１０は、Ｓ３２５ａで、自動データ取得指示を第１ロボット駆動装置２００Ａに送信する。この指示により、第１ロボット駆動装置２００Ａは、操作の完了通知に応じて対象装置１０の状態を検知する（Ｓ４１０ａ）。以上により、第１ＡＰＰ駆動装置６００Ａは、完了通知が制御装置１００によって中継される場合と比べて速やかに、操作の完了通知を第１ロボット駆動装置２００Ａに送信できる。また、第１ロボット駆動装置２００Ａは、制御装置１００からの指示を待つ場合と比べて速やかに、対象装置１０の状態を検知できる。以上により、第１ロボット駆動装置２００Ａは、適切に、対象装置１０の状態を検知できる。例えば、第１ロボット駆動装置２００Ａは、操作時刻Ｔａから第１制限時間ＴＷａが経過するよりも前に、対象装置１０の状態を検知できる。

また、作業者は、時間判断コマンドのための特別な処理（例えば、操作処理（Ｓ３６０ａ）の後の複数のステップの順番の調整など）をせずに、コマンドＣ１ａ、Ｃ２ａを指定することによって、第２スクリプトＳＣａを生成できる。このように、作業者の負担は、大幅に軽減される。

Ａ２－３．第３の操作判断処理：
図１０は、スクリプトの別の例を示す概略図である。第３スクリプトＳＣｂは、第１コマンドＣ１ｂと第２コマンドＣ２ｂを示している。第１コマンドＣ１ｂは、ロボットによる対象装置１０の操作コマンドである。具体的には、第１コマンドＣ１ｂは、第１ロボット３００Ａ（図１）による対象装置１０のクリーニングボタン１２の押下である。第２コマンドＣ２ｂは、アプリケーションを使用する事後判断であり、第１コマンドＣ１ｂに対応付けられている。第２コマンドＣ２ｂの事後判断のための事後状態は、対象装置１０から取得される対象状態データがクリーニングの進行中を示すことである。

第３スクリプトＳＣｂが使用される場合、図５の処理は、以下のように進行する。第１コマンドＣ１ｂに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。第２コマンドＣ２ｂに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。第３スクリプトＳＣｂが処理される場合、プロセッサ１１０は、Ｓ２３０、Ｓ２５０を実行せずに、図５の処理、すなわち、図３のＳ１２３の処理を終了する。

図１１は、第３スクリプトＳＣｂのための操作判断処理の例を示すシーケンス図である。第１コマンドＣ１ｂは、第１ロボット駆動装置２００Ａを指定し、第２コマンドＣ２ｂは、第１ＡＰＰ駆動装置６００Ａを指定していることとする。制御装置１００は、第１コマンドＣ１ｂ、第２コマンドＣ２ｂの順に、処理を進行する。Ｓ５４５ｂ－Ｓ５８３ｂは、第１コマンドＣ１ｂのための処理を示している。Ｓ６０３ｂ－Ｓ６２０ｂは、第２コマンドＣ２ｂのための処理を示している。

Ｓ５４５ｂでは、制御装置１００のプロセッサ１１０は、第１ロボット駆動装置２００Ａに操作指示を送信する。この指示は、第１コマンドＣ１ｂの詳細（ここでは、クリーニングボタン１２の押下）を示すデータを含んでいる。

Ｓ５５０ｂ－Ｓ５８０ｂでは、第１ロボット駆動装置２００Ａのプロセッサ２１０は、操作指示に従って第１ロボット３００Ａを駆動することによって、ツール３２０にクリーニングボタン１２を押下させる。本実施例では、プロセッサ２１０は、以下の処理を実行する。

Ｓ５５０ｂでは、プロセッサ２１０は、操作指示に従って第１ロボット３００Ａを駆動することによって、ツール３２０を予め決められた基準位置に移動させる。基準位置は、ツール３２０の移動のための基準となる位置である。Ｓ５５５ｂでは、プロセッサ２１０は、基準位置からクリーニングボタン１２の押下位置までのツール３２０の軌道を算出する。算出される軌道は、ロボット３００Ａの複数のジョイントの駆動手順（具体的には、各ジョイントの駆動量と駆動順）を示している。なお、クリーニングボタン１２の押下位置は、予め決められている。また、基準位置から押下位置までの軌道は、予め決められてよい。Ｓ５６０ｂでは、プロセッサ２１０は、軌道に従って第１ロボット３００Ａを駆動することによって、ツール３２０を操作位置に移動させる。操作位置は、クリーニングボタン１２の近傍のクリーニングボタン１２から離れた位置である。Ｓ５７０ｂでは、プロセッサ２１０は、軌道に従って第１ロボット３００Ａを駆動することによって、ツール３２０を押下位置に移動させる。これにより、ツール３２０は、クリーニングボタン１２を押下する。図示を省略するが、対象装置１０は、クリーニングボタン１２の押下に応じて、印刷ヘッドのクリーニングを開始する。クリーニングの開始後、第１端末７００Ａによって対象装置１０から取得される対象状態データは、クリーニングの進行中を示している。Ｓ５８０ｂでは、第１ロボット３００Ａを駆動することによって、ツール３２０を基準位置に移動させる。Ｓ５８０ｂは、次回の操作判断処理のために、行われる。

本実施例では、ロボット駆動装置２００の不揮発性記憶装置２３０は、種々の操作対象（例えば、クリーニングボタン１２）に対応付けられるロボット３００の制御パラメータを示すデータを、予め格納している（図示省略）。プロセッサ２１０は、操作対象に対応付けられる制御パラメータを使用してロボット３００を制御することによって、ツール３２０に操作対象を操作させることができる。

Ｓ５８３ｂでは、プロセッサ２１０は、完了通知を制御装置１００に送信する。以上により、第１コマンドＣ１ｂのための処理が終了する。

Ｓ６０３ｂでは、制御装置１００のプロセッサ１１０は、データ要求を第１ＡＰＰ駆動装置６００Ａに送信する。この要求は、第２コマンドＣ２ｂの詳細（ここでは、アプリケーションからの対象状態データの取得）を示すデータを含んでいる。Ｓ６１０ｂでは、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、第１端末７００Ａ上で動作するアプリケーションの内部パラメータを参照し、対象状態データを取得する。対象装置１０がクリーニングを実行している最中には、対象状態データは、クリーニングの進行中を示している。Ｓ６１５ｂでは、プロセッサ６１０は、対象状態データを制御装置１００に送信する。Ｓ６２０ｂでは、制御装置１００のプロセッサ１１０は、対象状態データを参照して、対象装置１０の状態がクリーニングの進行中であるか否かを判断する。プロセッサ１１０は、判断結果を示すデータを、記憶装置１１５（例えば、不揮発性記憶装置１３０）に格納する。以上により、図１１の処理は、終了する。

以上のように、本実施例では、ロボット３００は、対象装置１０を操作するための操作部の例であるツール３２０を有している。

図１０に示すように、第３スクリプトＳＣｂは、第１コマンドＣ１ｂと第２コマンドＣ２ｂとを含んでいる。第１コマンドＣ１ｂは、第１ロボット３００Ａのツール３２０による対象装置１０のクリーニングボタン１２の押下を第１ロボット駆動装置２００Ａに実行させるコマンドである。第１コマンドＣ１ｂは、ロボットの操作部による対象装置１０の操作をロボット駆動部に実行させる第２種操作コマンドの例である。第２コマンドＣ２ｂは、対象装置１０の操作に起因するアプリケーションの状態（ここでは、対象状態データがクリーニングの進行中を示す状態）が第１ＡＰＰ駆動装置６００Ａによって検知されるか否かを判断するコマンドである。第２コマンドＣ２ｂは、対象装置１０の操作に起因するアプリケーションの状態がアプリケーション駆動部によって検知されるか否かを判断する第２種判断コマンドの例である。

図１１に示すように、第２コマンドＣ２ｂは、対象装置１０の操作の後に、操作に起因するアプリケーションの状態である事後状態（ここでは、クリーニングの進行中を示す対象状態データの取得）が第１ＡＰＰ駆動装置６００Ａによって検知されるか否かを判断する。第２コマンドＣ２ｂは、操作の後に、操作に起因するアプリケーションソフトウェアの状態である事後状態がアプリケーション駆動部によって検知されるか否かを判断する第２種事後判断コマンドの例である。

図１１に示すように、判断コマンド（ここでは、第２コマンドＣ２ｂ）が第２種事後判断コマンドである場合、プロセッサ１１０は、以下の処理を第１ロボット駆動装置２００Ａに実行させる。Ｓ５８０ｂでは、第１ロボット駆動装置２００Ａは、操作（Ｓ５７０ｂ）の後に第１ロボット３００Ａのツール３２０を特定の位置に移動する。Ｓ５８３ｂでは、第１ロボット駆動装置２００Ａは、移動処理（Ｓ５８０ｂ）の後に操作の完了通知を送信する。従って、プロセッサ１１０は、操作に起因する事後状態の判断を、適切に、実行できる。

Ａ２－４．第４の操作判断処理：
図１２は、スクリプトの別の例を示す概略図である。第４スクリプトＳＣｃは、第１コマンドＣ１ｃと第２コマンドＣ２ｃを示している。第１コマンドＣ１ｃは、第１ロボット３００Ａ（図１）による対象装置１０のスキャンボタン１４の押下である。第２コマンドＣ２ｂは、アプリケーションを使用する時間判断コマンドであり、第１コマンドＣ１ｃに対応付けられている。時間判断は、対象装置１０の操作の後に、制限時間内に、操作に起因するアプリケーションの状態である結果状態がアプリケーション駆動部によって検知されるか否かの判断である。第２コマンドＣ２ｃの判断のための結果状態は、対象装置１０からスキャンデータが取得されることである。

第４スクリプトＳＣｃが使用される場合、図５の処理は、以下のように進行する。第１コマンドＣ１ｃに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。第２コマンドＣ２ｃに関しては、Ｓ２２０の判断結果はＮｏであり、Ｓ２４０の判断結果はＹｅｓである。この場合、Ｓ２５０で、制御装置１００のプロセッサ１１０は、第２コマンドＣ２ｃに対応する第１コマンドＣ１ｃの前に、第２種準備処理Ｐ２を追加する。第２種準備処理Ｐ２は、以下の処理を含んでいる。
（Ａ）ロボット駆動装置２００に、トークンを送信する。
（Ｂ）ロボット駆動装置２００に、操作の完了通知の自動送信指示を送信する。
（Ｃ）ＡＰＰ駆動装置６００に、トークンを送信する。
（Ｄ）ＡＰＰ駆動装置６００に、自動データ取得指示を送信する。

図１３、図１４は、第４スクリプトＳＣｃのための操作判断処理の例を示すシーケンス図である。第１コマンドＣ１ｃは、第１ロボット駆動装置２００Ａを指定し、第２コマンドＣ２ｃは、第１ＡＰＰ駆動装置６００Ａを指定していることとする。図１３に示すように、第１コマンドＣ１ｃの処理の前に、第２種準備処理Ｐ２のための処理が追加されている。図１３のＳ５１０ｃ－Ｓ５４０ｃは、第２種準備処理Ｐ２のための処理である。図１３のＳ５４５ｃ－Ｓ５７５ｃと、図１４のＳ５８０ｃ、Ｓ５８３ｃとは、第１コマンドＣ１ｃのための処理である。図１４の残りの処理は、第２コマンドＣ２ｃのための処理である。

Ｓ５１０ｃ（図１３）では、制御装置１００のプロセッサ１１０は、通信指示と自動送信指示とを第１ロボット駆動装置２００Ａに送信する。通信指示と自動送信指示とは、以下の相違点を除いて、図８のＳ３１０ａの通信指示と自動送信指示と、それぞれ同じである。
（相違点１ａ）宛先が、第１ロボット駆動装置２００Ａである。
（相違点１ｂ）自動送信指示が、第１コマンドＣ１ｃを示すデータを含んでいる。
なお、Ｓ５１０ｃで送信されるトークンを、トークンＴＫｃと呼ぶ。

Ｓ５１５ｃでは、第１ロボット駆動装置２００Ａのプロセッサ２１０は、トークンＴＫｃを記憶装置２１５（例えば、不揮発性記憶装置２３０）に格納する。Ｓ５２０ｃでは、プロセッサ２１０は、完了通知を制御装置１００に送信する。

Ｓ５２５ｃでは、制御装置１００のプロセッサ１１０は、通信指示と自動データ取得指示とを、第１ＡＰＰ駆動装置６００Ａに送信する。通信指示は、トークンＴＫｃと第１ロボット駆動装置２００Ａとを示すデータを含んでいる。自動データ取得指示は、スキャンデータの取得を自動的に行うための指示である。

Ｓ５３０ｃでは、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、トークンＴＫｃを記憶装置６１５（例えば、不揮発性記憶装置６３０）に格納する。Ｓ５３５ｃでは、プロセッサ６１０は、Ｓ５２５ｃの通信指示に応じて、第１ロボット駆動装置２００Ａに、通信の確立要求を送信する。駆動装置２００Ａ、６００Ａは、図８のＳ３４０ａと同様に、通信を確立する。以後、駆動装置２００Ａ、６００Ａは、他の装置に情報を送信する場合に、トークンＴＫｃを示すデータも送信する。

Ｓ５４０ｃでは、プロセッサ６１０は、完了通知を制御装置１００に送信する。以上により、第２種準備処理Ｐ２のための処理が終了する。

Ｓ５４５ｃでは、制御装置１００のプロセッサ１１０は、第１ロボット駆動装置２００Ａに操作指示を送信する。この指示は、第１コマンドＣ１ｃの詳細（ここでは、スキャンボタン１４の押下）を示すデータを含んでいる。

続くＳ５５０ｃ、Ｓ５５５ｃ、Ｓ５６０ｃ、Ｓ５７０ｃは、クリーニングボタン１２に代えてスキャンボタン１４が押下される点を除いて、図１１のＳ５５０ｂ、Ｓ５５５ｂ、Ｓ５６０ｂ、Ｓ５７０ｂと、それぞれ同じである。図示を省略するが、対象装置１０は、スキャンボタン１４の押下に応じて、文書のスキャンを開始する。本実施例では、対象装置１０は、スキャンの完了に応じて、スキャンデータを第１ＡＰＰ駆動装置６００Ａに送信する。

図１３では、Ｓ５６０ｃとＳ５７０ｃとの間に、Ｓ５６５ｃが挿入されている。Ｓ５６５ｃでは、プロセッサ２１０は、第１ロボット駆動装置２００Ａの図示しないタイマを参照して、現在の時刻Ｔｃを取得する。本実施例では、自動送信指示（Ｓ５１０ｃ）が受信される場合、プロセッサ２１０は、操作処理（Ｓ５７０ｃ）の開始時に、時刻Ｔｃを取得する。時刻Ｔｃは、操作が行われる時刻を示している（以下、時刻Ｔｃを、操作時刻Ｔｃとも呼ぶ）。

操作処理（Ｓ５７０ｃ）の後、Ｓ５７５ｃで、プロセッサ２１０は、第１ＡＰＰ駆動装置６００Ａに、操作の完了通知を送信する。この通知は、トークンＴＫｃと操作時刻Ｔｃとを示すデータを含んでいる。本実施例では、自動送信指示（Ｓ５１０ｃ）が受信される場合、プロセッサ２１０は、操作処理（Ｓ５７０ｃ）の完了に応じて、ツール３２０の移動処理（図１４：Ｓ５８０ｃ）を開始する前に、完了通知を送信する（Ｓ５７５ｃ）。これにより、第１ＡＰＰ駆動装置６００Ａは、ツール３２０の移動を待たずに、処理を進行できる。

Ｓ５８５ｃ（図１４）では、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、画像取得処理の繰り返しを開始する。本実施例では、自動データ取得指示（図１３：Ｓ５２５ｃ）が受信される場合、プロセッサ６１０は、完了通知（図１３：Ｓ５７５ｃ）に応じて、スキャンデータの取得処理（図１４：Ｓ６１０ｃ）の繰り返しを開始する。Ｓ６１０ｃでは、プロセッサ６１０は、第１端末７００Ａのアプリケーションの内部パラメータを参照し、スキャンデータを検索する。第１端末７００Ａが対象装置１０からスキャンデータを取得した後には、スキャンデータが検出される。この場合、プロセッサ６１０は、第１端末７００ＡからスキャンデータＳＤを取得する。第１端末７００Ａが対象装置１０からスキャンデータを取得する前には、スキャンデータは検出されない。この場合、プロセッサ６１０は、スキャンデータを取得できない。

Ｓ６１５ｃで、プロセッサ６１０は、スキャン画像ＳＤと、トークンＴＫｃと、操作時刻Ｔｃと、を示すデータを、制御装置１００に送信する。Ｓ６１０ｃでスキャンデータを取得できない場合、プロセッサ６１０は、スキャンデータの代わりに、スキャンデータを取得できないことを示す結果データを送信する。プロセッサ６１０は、その後、Ｓ６１０ｃを繰り返す。

Ｓ６２０ｃでは、制御装置１００のプロセッサ１１０は、第１ＡＰＰ駆動装置６００Ａからのデータを使用して、検査を行う。Ｓ６１５ｃでスキャンデータが取得される場合、プロセッサ１１０は、検査結果は合格である、と判断する。スキャンデータが取得されない場合、プロセッサ１１０は、検査結果は不合格である、と判断する。プロセッサ１１０は、検査結果を示すデータを、記憶装置１１５（例えば、不揮発性記憶装置１３０）に格納する。

Ｓ６２５ｃでは、プロセッサ１１０は、検査結果が合格であるか否かを判断する。Ｓ６２５ｃの判断結果がＮｏである場合、Ｓ６３０ｃで、プロセッサ１１０は、制御装置１００の図示しないタイマを参照して、現在時刻Ｔを取得する。プロセッサ１１０は、現在時刻Ｔが、操作時刻Ｔｃから所定の第２制限時間ＴＷｃ（例えば、５秒）が経過する前であるか否かを判断する。Ｓ６３０ｃの判断結果がＹｅｓである場合、Ｓ６３５ｃで、プロセッサ１１０は、第１ＡＰＰ駆動装置６００Ａに、データの再送要求を送信する。第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、再送要求に応じて、Ｓ６１５ｃに移行し、最新のデータを制御装置１００に送信する。以後、Ｓ６２５ｃ、または、Ｓ６３０ｃの判断結果が変化するまで、Ｓ６１０ｃ－Ｓ６３５ｃの処理が繰り返される（以下、繰り返される処理の全体を、処理Ｓ６００ｉとも呼ぶ）。

第１ロボット駆動装置２００Ａのプロセッサ２１０は、図１３のＳ５７５ｃの後、Ｓ５８０ｃ（図１４）で、第１ロボット３００Ａを駆動することによって、ツール３２０を基準位置に移動させる。Ｓ５８０ｃの後、Ｓ５８３ｃで、プロセッサ２１０は、完了通知を、制御装置１００に送信する。以上により、第１コマンドＣ１ｃのための処理が終了する。

図１４のＳ６００ｉの下には、Ｓ６２５ｃの判断結果がＹｅｓである場合の処理Ｓ６００ｊが示されている。検査結果が合格であると判断される場合（Ｓ６２５ｃ：Ｙｅｓ）、Ｓ６４０ｃで、プロセッサ１１０は、終了指示を第１ＡＰＰ駆動装置６００Ａに送信する。第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、この指示に応じて、画像取得処理の繰り返しを終了する。以上により、操作判断処理は終了する。

図１４のＳ６００ｊの下には、Ｓ６３０ｃの判断結果がＮｏである場合の処理Ｓ６００ｋが示されている。現在時刻Ｔが、操作時刻Ｔｃから第２制限時間ＴＷｃが経過した後である場合（Ｓ６３０ｃ：Ｎｏ）、Ｓ６４５ａで、プロセッサ１１０は、終了指示を第１ＡＰＰ駆動装置６００Ａに送信する。第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、この指示に応じて、画像取得処理の繰り返しを終了する。以上により、操作判断処理は終了する。

以上のように、第４スクリプトＳＣｃ（図１２）は、第１コマンドＣ１ｃと第２コマンドＣ２ｃとを含んでいる。第１コマンドＣ１ｃは、図１０の第１コマンドＣ１ｂと同様に、第２種操作コマンドの例である。第２コマンドＣ２ｃは、図１０の第２コマンドＣ２ｂと同様に、第２種判断コマンドの例である。ただし、図１０の第２コマンドＣ２ｂとは異なり、第２コマンドＣ２ｃは、対象装置１０の操作の後に、第２制限時間ＴＷｃ内に、操作に起因するアプリケーションの状態である結果状態（ここでは、スキャンデータを取得した状態）が第１ＡＰＰ駆動装置６００Ａによって検知されるか否かを判断する。このような第２コマンドＣ２ｃは、操作の後に、制限時間内に、操作に起因するアプリケーションソフトウェアの状態である結果状態がアプリケーション駆動部によって検知されるか否かを判断する第２種時間判断コマンドの例である。

図１３、図１４に示すように、判断コマンド（ここでは、第２コマンドＣ２ｃ）が第２種時間判断コマンドである場合、プロセッサ１１０は、ツール３２０を基準位置に移動させる移動処理（図１４：Ｓ５８０ｃ）と、この移動処理よりも先に完了通知を送信する先通知処理（図１３：Ｓ５７５ｃ）とを、第１ロボット駆動装置２００Ａに実行させる。この理由は、第２種時間判断コマンドに基づく適切な判断を行うためである。具体的には、以下の通りである。

図１１には、操作処理（Ｓ５７０ｂ）からデータ取得（Ｓ６１０ｂ）までの第３期間ＴＤ３が示されている。操作処理（Ｓ５７０ｂ）の後のツール３２０の移動（Ｓ５８０ｂ）は、第３期間ＴＤ３内に行われる。ツール３２０の移動に要する時間が長い場合、第３期間ＴＤ３は、その分、長くなる。図１３、図１４には、操作処理（Ｓ５７０ｃ）から最初のデータ取得（Ｓ６１０ｃ）までの第４期間ＴＤ４が示されている。操作処理（Ｓ５７０ｃ）の後のツール３２０の移動（図１４：Ｓ５８０ｃ）は、第４期間ＴＤ４よりも後に実行される。ツール３２０の移動に要する時間が長い場合であっても、第４期間ＴＤ４の延長の可能性は、低減される。仮に、第４期間ＴＤ４が第２制限時間ＴＷｃよりも長い場合、最初のスキャンデータの取得（Ｓ６１０ｃ）は、操作時刻Ｔｃから第２制限時間ＴＷｃが経過した後に行われる。この結果、第２コマンドＣ２ｃの適切な判断ができない。本実施例では、そのような不具合の可能性は、低減される。また、このような不具合を避けるための検査専用の機能（例えば、テストモード）を対象装置１０に実装しなくても、適切な検査が可能である。

また、図１３、図１４のシーケンス図は、判断コマンド（ここでは、第２コマンドＣ２ｃ）が第２種時間判断コマンドである場合の処理を示している。先通知処理（図１３：Ｓ５７５ｃ）は、制御装置１００を介さずにトークンＴＫｃを使用して完了通知を第１ＡＰＰ駆動装置６００Ａに送信する処理を含んでいる。プロセッサ１１０は、対象装置１０の操作（Ｓ５７０ｃ）の開始前に、Ｓ５１０ｃ、Ｓ５２５ｃで、第１ＡＰＰ駆動装置６００Ａと第１ロボット駆動装置２００Ａとのそれぞれに、トークンＴＫｃを送信する。トークンＴＫｃは、トークンＴＫｃを伴う通信がスクリプト（ここでは、第４スクリプトＳＣｃ）に基づくひとまとまりの処理のためのものであることを識別する。トークンＴＫｃは、通信を識別する通信識別子の例である。さらに、プロセッサ１１０は、Ｓ５２５ｃで、自動データ取得指示を第１ＡＰＰ駆動装置６００Ａに送信する。この指示により、第１ＡＰＰ駆動装置６００Ａは、完了通知（Ｓ５７５ｃ）に応じて、アプリケーションの状態を検知する（ここでは、アプリケーションの内部パラメータからスキャンデータが取得される）。以上により、第１ロボット駆動装置２００Ａは、完了通知が制御装置１００によって中継される場合と比べて速やかに、操作の完了通知を第１ＡＰＰ駆動装置６００Ａに送信できる。また、第１ＡＰＰ駆動装置６００Ａは、制御装置１００からの指示を待つ場合と比べて速やかに、アプリケーションの状態を検知できる。以上により、第１ロボット駆動装置２００Ａは、適切に、アプリケーションの状態を検知できる。例えば、第１ＡＰＰ駆動装置６００Ａは、操作時刻Ｔｃから第２制限時間ＴＷｃが経過するよりも前に、アプリケーションの状態を検知できる。

また、作業者は、時間判断コマンドのための特別な処理（例えば、操作処理（Ｓ５７０ｃ）の後の複数のステップの順番の調整など）をせずに、コマンドＣ１ｃ、Ｃ２ｃを指定することによって、第４スクリプトＳＣｃを生成できる。このように、作業者の負担は、大幅に軽減される。

Ａ２－５．第５の操作判断処理：
図１５は、スクリプトの別の例を示す概略図である。この第５スクリプトＳＣｄは、図１２の第４スクリプトＳＣｃの第１コマンドＣ１ｃと第２コマンドＣ２ｃとの間に、第２コマンドＣ２ｄを追加したものである。第１コマンドＣ１ｄは、図１２の第１コマンドＣ１ｃと同じであり、第３コマンドＣ３ｄは、図１２の第２コマンドＣ２ｃと同じである。第２コマンドＣ２ｄは、ロボットを使用する事後判断であり、第１コマンドＣ１ｄに対応付けられている。第２コマンドＣ２ｄの判断のための事後状態は、対象装置１０のタッチスクリーン１１にスキャンの動作中を示す画面（スキャン動作画面と呼ぶ）が表示される状態である。図５の処理では、第２コマンドＣ２ｄに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。

図１６は、第５スクリプトＳＣｄのための操作判断処理の例を示すシーケンス図である。図１６は、図１３の続きを示している。第５スクリプトＳＣｄが処理される場合、図１３、図１６の順に、操作判断処理が進行する。図１３の処理は、ＳＣｃ（図１２）が処理される場合の処理と同じである。図１３の第２種準備処理Ｐ２のための処理は、第３コマンドＣ３ｄに起因して追加される。図１３の第１コマンドＣ１ｃのための処理は、第１コマンドＣ１ｄに起因して実行される。

図１６のＳ５８５ｃ－Ｓ６３５ｃは、第３コマンドＣ３ｄのための処理である。各ステップの処理は、図１４の同じ符号のステップの処理と、同じである。ここで、Ｓ６２５ｃの判断結果がＮｏであり、Ｓ６３０ｃの判断結果がＹｅｓであることとしている。処理Ｓ６００ｉは、繰り返し実行される。Ｓ５８０ｃ、Ｓ５８３ｃは、第１コマンドＣ１ｄのための処理であり、図１４のＳ５８０ｃ、Ｓ５８３ｃと、それぞれ同じである。

Ｓ５８３ｃの完了通知（すなわち、第１コマンドＣ１ｄの完了通知）に応じて、制御装置１００のプロセッサ１１０は、第２コマンドＣ２ｄのための処理を開始する。Ｓ６６０ｄでは、プロセッサ１１０は、画像データ取得指示を第１ロボット駆動装置２００Ａに送信する。この指示は、第２コマンドＣ２ｄの詳細を示すコマンドデータを含んでいる。本実施例では、このコマンドデータは、タッチスクリーン１１（図１）の撮影位置へのデジタルカメラ３３０の移動と、デジタルカメラ３３０による撮影と、を示している。

Ｓ６６５ｄで、第１ロボット駆動装置２００Ａのプロセッサ２１０は、Ｓ６６０ｄの指示に応じて、第１ロボット３００Ａを駆動することによって、デジタルカメラ３３０を撮影位置に移動させる。

Ｓ６７０ｄで、プロセッサ２１０は、第１ロボット３００Ａのデジタルカメラ３３０に撮影指示を送信する。デジタルカメラ３３０は、対象装置１０のタッチスクリーン１１を含む部分を撮影する。プロセッサ２１０は、デジタルカメラ３３０から、撮影画像データを取得する。本実施例では、Ｓ６７０ｄが実行される時点では、第１端末７００Ａによるスキャンデータの取得は完了していないこととする。従って、撮影画像は、スキャン動作画面を表示するタッチスクリーン１１を示している。

Ｓ６７５ｄでは、プロセッサ２１０は、撮影画像データを制御装置１００に送信する。

Ｓ６８０ｄでは、制御装置１００のプロセッサ１１０は、撮影画像を使用して、検査を行う。プロセッサ１１０は、例えば、スキャン動作画面を表示するタッチスクリーン１１の基準画像と、撮影画像と、の間の類似度を算出する。類似度の算出方法は、図９のＳ４２０ａで説明した算出方法と同じであってよい。プロセッサ１１０は、類似度が第２閾値以上である場合に、スキャン動作画面が表示されている（すなわち、検査結果は合格である）と判断する。類似度が第２閾値未満である場合、プロセッサ１１０は、スキャン動作画面が表示されていない（すなわち、検査結果は不合格である）と判断する。第２閾値は、判断結果が適切であるように、予め実験的に決定される。プロセッサ１１０は、検査結果を示すデータを、記憶装置１１５（例えば、不揮発性記憶装置１３０）に格納する。以上により、操作判断処理は終了する。

以上のように、本実施例では、図１２の第４スクリプトＳＣｃが処理される場合と同様に、第３コマンドＣ３ｄの時間判断のための処理は、操作後のツール３２０の移動（図１６：Ｓ５８０ｃ）を待たずに、開始される。従って、プロセッサ１１０は、時間判断コマンドに基づく適切な判断が可能である。また、作業者は、時間判断コマンドのための特別な処理（例えば、操作処理（Ｓ５７０ｃ）の後の複数のステップの順番の調整など）をせずに、コマンドＣ１ｄ、Ｃ２ｄ、Ｃ３ｄを指定することによって、第５スクリプトＳＣｄを生成できる。このように、作業者の負担は、大幅に軽減される。

Ａ２－６．第６の操作判断処理：
図１７は、スクリプトの別の例を示す概略図である。この第６スクリプトＳＣｅは、図７の第２スクリプトＳＣａの第２コマンドＣ２ａの後ろに、第３コマンドＣ３ｅを追加したものである。コマンドＣ１ｅ、Ｃ２ｅは、図７のコマンドＣ１ａ、Ｃ２ａと、それぞれ同じである。第３コマンドＣ３ｅは、ロボットを使用する時間判断であり、第１コマンドＣ１ｅ対応付けられている。第３コマンドＣ３ｅの時間判断は、操作後、第３制限時間ＴＷｅ内に、対象装置１０のレディランプ１７が点灯する状態が検知されるか否かの判断である。本実施例では、対象装置１０は、印刷の完了後に、レディランプ１７を点灯することとする。なお、第２コマンドＣ２ｅは、第１ロボット３００Ａを指定し、第３コマンドＣ３ｅは、第２ロボット３００Ｂを指定することとする。

第６スクリプトＳＣｅが使用される場合、図５の処理は、以下のように進行する。第３コマンドＣ３ｅに関しては、Ｓ２２０の判断結果がＹｅｓであり、Ｓ２４０の判断結果はＮｏである。制御装置１００のプロセッサ１１０は、第３コマンドＣ３ｅに対応する第１コマンドＣ１ｅの前に、第３コマンドＣ３ｅのための第１種準備処理Ｐ１を追加する。

図１８は、第６スクリプトＳＣｅのための操作判断処理の例を示すシーケンス図である。この操作判断処理は、図８、図９の操作判断処理に、第３コマンドＣ３ｅのための処理を追加したものである。具体的には、第３コマンドＣ３ｅに対応する第１種準備処理Ｐ１のための処理（Ｓ３１０ｅ－Ｓ３４５ｅ）と、Ｓ３６７ｅと、第３コマンドＣ３ｅのための処理（Ｓ３７５ｅ－Ｓ４４０ｅ）と、が追加されている。他の処理は、図８、図９の対応する処理と同じである。第２コマンドＣ２ｅのための第１種準備処理Ｐ１は、図８の第２コマンドＣ２ａのための第１種準備処理Ｐ１と同じである。第１コマンドＣ１ｅのための処理には、Ｓ３６５ａに続くＳ３６７ｅが追加されている。第２コマンドＣ２ｅのための処理は、図９の第２コマンドＣ２ａのための処理と同じである。ここで、Ｓ４２５ａの判断結果がＹｅｓであることとしている。

図１８では、第３コマンドＣ３ｅに対応する第１種準備処理Ｐ１は、第１コマンドＣ１ｅの処理の前に、追加されている。追加された処理は、Ｓ３１０ｅ－Ｓ３４５ｅで構成されている。Ｓ３１０ｅ－Ｓ３４５ｅの各ステップの処理は、以下の相違点を除いて、図８のＳ３１０ａ－Ｓ３４５ａの対応するステップの処理と同じである（対応するステップは、符号の末尾の文字「ｅ」を「ａ」に置換した符号を有するステップである）。
（相違点２ａ）第１ロボット駆動装置２００Ａに代えて第２ロボット駆動装置２００Ｂが使用される。
（相違点２ｂ）トークンＴＫａとは異なるトークンＴＫｅが使用される。
（相違点２ｃ）Ｓ３３５ｅの撮影位置は、レディランプ１７の撮影に適した位置である。
以上の処理により、第２ロボット３００Ｂのデジタルカメラ３３０は、レディランプ１７の撮影に適した位置に配置される。なお、第３コマンドＣ３ｅに対応する第１種準備処理Ｐ１は、第２コマンドＣ２ｅに対応する第１種準備処理Ｐ１よりも先でもよく後でもよい。

第１コマンドＣ１ｅのための処理では、Ｓ３６７ｅで、第１ＡＰＰ駆動装置６００Ａのプロセッサ６１０は、第２ロボット駆動装置２００Ｂに、完了通知を送信する。この通知は、トークンＴＫｅと操作時刻Ｔａとを示すデータを含んでいる。

第３コマンドＣ３ｅのための各ステップの処理は、以下の相違点を除いて、第２コマンドＣ２ｅのための対応するステップの処理と同じである（対応するステップは、符号の末尾の文字「ｅ」を「ａ」に置換した符号を有するステップである）。
（相違点３ａ）第１ロボット駆動装置２００Ａに代えて第２ロボット駆動装置２００Ｂが使用される。
（相違点３ｂ）トークンＴＫａとは異なるトークンＴＫｅが使用される。
（相違点３ｃ）検査（Ｓ４２０ｅ）では、レディランプ１７が点灯する状態が第２ロボット３００Ｂのデジタルカメラ３３０によって検知されるか否かが判断される。
（相違点３ｄ）第１制限時間ＴＷａに代えて第３制限時間ＴＷｅが使用される。

Ｓ３７５ｅでは、第２ロボット駆動装置２００Ｂのプロセッサ２１０は、画像取得処理の繰り返しを開始する。本実施例では、自動データ取得指示（Ｓ３２５ｅ）が受信される場合、プロセッサ２１０は、完了通知（Ｓ３６７ｅ）に応じて、撮影画像データの取得処理（Ｓ４１０ａ）の繰り返しを開始する。Ｓ４１５ｅでは、プロセッサ２１０は、撮影画像ＩＭＧｅとトークンＴＫｅと操作時刻Ｔａとを示すデータを、制御装置１００に送信する。

第１ロボット駆動装置２００Ａから制御装置１００に送信されるデータは、トークンＴＫａを示している。第２ロボット駆動装置２００Ｂから制御装置１００に送信されるデータは、トークンＴＫａとは異なるトークンＴＫｅを示している。従って、制御装置１００のプロセッサ１１０は、トークンを使用して、データの送信元を識別できる。

Ｓ４２０ｅでは、制御装置１００のプロセッサ１１０は、撮影画像を解析することによって、レディランプ１７が点灯しているか否かを判断する。例えば、プロセッサ１１０は、レディランプ１７を示す基準画像を使用するパターンマッチングによって、撮影画像中のレディランプ１７を検出する。プロセッサ１１０は、撮影画像中の検出されたレディランプ１７の明るさを参照して、レディランプ１７が点灯しているか否かを判断する。

なお、第２コマンドＣ２ｅのための処理と、第３コマンドＣ３ｅのための処理とは、完了通知の送信（Ｓ３６５ａ、Ｓ３６７ｅ）に応じて、並行して進行する。また、図１８には、第３コマンドＣ３ｅのためのＳ４２５ｅの判断結果がＹｅｓである場合の処理が、示されている。図示を省略するが、検査結果が不合格である場合（Ｓ４２５ｅ：Ｎｏ）、プロセッサ１１０は、図９のＳ４２５ａの判断結果がＮｏである場合と同様に、処理を進行する。

以上のように、第６スクリプトＳＣｅ（図１７）は、第２コマンドＣ２ｅと第３コマンドＣ３ｅとを含んでいる。第２コマンドＣ２ｅは、第１コマンドＣ１ｅによるＵＩ画面７５２の操作の後に、第１制限時間ＴＷａ内に、第１の結果状態が第１ロボット３００Ａのデジタルカメラ３３０によって検知されるか否かを判断する時間判断コマンドである。第１の結果状態は、操作に起因する対象装置１０の状態であり、ここでは、対象装置１０から印刷物が出力された状態である。第３コマンドＣ３ｅは、第１コマンドＣ１ｅによるＵＩ画面７５２の操作の後に、第３制限時間ＴＷｅ内に、第２の結果状態が第２ロボット３００Ｂのデジタルカメラ３３０によって検知されるか否かを判断する時間判断コマンドである。第２の結果状態は、操作に起因する対象装置１０の状態であり、ここでは、レディランプ１７が点灯する状態である。

ＳＣｅが処理される場合、制御装置１００のプロセッサ１１０は、以下の処理を実行する。プロセッサ１１０は、第２コマンドＣ２ｅのための撮影位置に第１ロボット３００Ａのデジタルカメラ３３０を移動させる処理（Ｓ３３５ａ）を、ＵＩ画面７５２の操作（Ｓ３６０ａ）の開始前に、第１ロボット駆動装置２００Ａに実行させる。また、プロセッサ１１０は、第３コマンドＣ３ｅのための撮影位置に第２ロボット３００Ｂのデジタルカメラ３３０を移動させる処理（Ｓ３３５ｅ）を、ＵＩ画面７５２の操作（Ｓ３６０ａ）の開始前に、第２ロボット駆動装置２００Ｂに実行させる。

以上により、プロセッサ１１０は、第２コマンドＣ２ｅの適切な判断と、第３コマンドＣ３ｅの適切な判断とを、実行できる。

Ａ２－７．第７の操作判断処理：
図１９は、スクリプトの別の例を示す概略図である。この第７スクリプトＳＣｆは、図７の第２スクリプトＳＣａの第１コマンドＣ１ａの前に、第１コマンドＣ１ｆを追加したものである。コマンドＣ２ｆ、Ｃ３ｆは、図７のコマンドＣ１ａ、Ｃ２ａと、それぞれ同じである。第１コマンドＣ１ｆは、アプリケーションの操作コマンドである。具体的には、第１コマンドＣ１ｆは、リモート電源ボタン７５２ｄ（図２）のタップである。対象装置１０の電源の状態がスリープ状態である場合に、リモート電源ボタン７５２ｄをタップすることによって、対象装置１０の電源をオンにすることができる。図５の処理では、第１コマンドＣ１ｆに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。なお、第１コマンドＣ１ｆは、第２ＡＰＰ駆動装置６００Ｂを指定し、第２コマンドＣ２ｆは、第１ロボット駆動装置２００Ａを指定することとする。

図２０は、第７スクリプトＳＣｆのための操作判断処理の例を示すシーケンス図である。この操作判断処理は、図８の操作判断処理に、第１コマンドＣ１ｆのための処理を追加したものである。具体的には、Ｓ３５０ｆ、Ｓ３６０ｆ、Ｓ３７０ｆが追加されている。第３コマンドＣ３ｆのための第１種準備処理Ｐ１（Ｓ３１０ａ－Ｓ３４５ａ）は、図８の第１種準備処理Ｐ１と同じである。コマンドＣ２ｆのための処理（Ｓ３５０ａ－Ｓ３７０ａ）は、図８の第１コマンドＣ１ａのための処理と同じである。

Ｓ３５０ｆでは、制御装置１００のプロセッサ１１０は、第２ＡＰＰ駆動装置６００Ｂに操作指示を送信する。この指示は、第１コマンドＣ１ｆの詳細（ここでは、リモート電源ボタン７５２ｄのタップ）を示すデータを含んでいる。Ｓ３６０ｆでは、第２ＡＰＰ駆動装置６００Ｂのプロセッサ６１０は、操作指示に従って、リモート電源ボタン７５２ｄのタップを、第２端末７００Ｂに適用する。これにより、対象装置１０の電源がオンになる。Ｓ３７０ｆでは、プロセッサ６１０は、完了通知を、制御装置１００に送信する。続いて、第１種準備処理Ｐ１のための処理と、第２コマンドＣ２ｆのための処理とが、行われる。図２０の処理の後、図９の処理が実行される。そして、操作判断処理は、終了する。

以上のように、第７スクリプトＳＣｆ（図１９）は、コマンドＣ１ｆ、Ｃ２ｆ、Ｃ３ｆを含んでいる。第１コマンドＣ１ｆは、第２端末７００ＢのアプリケーションのＵＩ画面７５２の第１の操作（ここでは、リモート電源ボタン７５２ｄのタップ）を第２ＡＰＰ駆動装置６００Ｂに実行させる。第２コマンドＣ２ｆは、第１コマンドＣ１ｆによる第１の操作の後に、第１端末７００ＡのアプリケーションのＵＩ画面７５２の第２の操作（ここでは、印刷ボタン１３のタップ）を第１ＡＰＰ駆動装置６００Ａに実行させる。第３コマンドＣ３ｆは、第２コマンドＣ２ｆによる第２の操作の後に、第１制限時間ＴＷａ内に、第２の操作に起因する対象装置１０の結果状態（印刷物の出力）がデジタルカメラ３３０によって検知されるか否かを判断する時間判断コマンドである。

第７スクリプトＳＣｆが処理される場合、制御装置１００のプロセッサ１１０は、以下の処理を実行する。プロセッサ１１０は、第３コマンドＣ３ｆのための撮影位置に第１ロボット３００Ａのデジタルカメラ３３０を移動させる処理（Ｓ３３５ａ）を、ＵＩ画面７５２の操作（Ｓ３６０ａ）の開始前に、第１ロボット駆動装置２００Ａに実行させる。従って、プロセッサ１１０は、第３コマンドＣ３ｆの適切な判断を、実行できる。

Ａ２－８．第８の操作判断処理：
図２１は、スクリプトの別の例を示す概略図である。この第８スクリプトＳＣｇは、図１２の第４スクリプトＳＣｃの第２コマンドＣ２ｃの後ろに、第３コマンドＣ３ｇを追加したものである。コマンドＣ１ｇ、Ｃ２ｇは、図１２のコマンドＣ１ｃ、Ｃ２ｃとそれぞれ同じである。第３コマンドＣ３ｇは、アプリケーションを使用する時間判断コマンドであり、第１コマンドＣ１ｇに対応付けられている。第３コマンドＣ３ｇの時間判断のための結果状態は、対象装置１０から取得される対象状態データがレディ状態を示すことである。本実施例では、スキャン処理の進行中には、対象装置１０の状態はスキャン進行中であることとする。そして、スキャン処理の完了に応じて、対象装置１０の状態はスキャン進行中からレディ状態に移行することとする。また、第２コマンドＣ２ｇは、第１ＡＰＰ駆動装置６００Ａを指定し、第３コマンドＣ３ｇは、第２ＡＰＰ駆動装置６００Ｂを指定することとする。

第８スクリプトＳＣｇが使用される場合、図５の処理は、以下のように進行する。第３コマンドＣ３ｇに関しては、Ｓ２２０の判断結果がＮｏであり、Ｓ２４０の判断結果はＹｅｓである。制御装置１００のプロセッサ１１０は、第３コマンドＣ３ｇに対応する第１コマンドＣ１ｇの前に、第３コマンドＣ３ｇのための第２種準備処理Ｐ２を追加する。

図２２は、第８スクリプトＳＣｇのための操作判断処理の例を示すシーケンス図である。この操作判断処理は、図１３、図１４の操作判断処理に、第３コマンドＣ３ｇのための処理を追加したものである。具体的には、第３コマンドＣ３ｇに対応する第２種準備処理Ｐ２のための処理（Ｓ５１０ｇ－Ｓ５４０ｇ）と、Ｓ５７７ｇと、第３コマンドＣ３ｇのための処理（Ｓ５８５ｇ－Ｓ６４０ｇ）と、が追加されている。他の処理は、図１３、図１４の対応する処理と同じである。第２コマンドＣ２ｇのための第２種準備処理Ｐ２は、図１３の第２コマンドＣ２ｃのための第２種準備処理Ｐ２と同じである。第１コマンドＣ１ｇのための処理には、Ｓ５７５ｃに続くＳ５７７ｇが追加されている。第２コマンドＣ２ｇのための処理は、図１４の第２コマンドＣ２ｃのための処理と同じである。ここで、Ｓ６２５の判断結果がＹｅｓであることとしている。

図２２では、第３コマンドＣ３ｇに対応する第２種準備処理Ｐ２は、第１コマンドＣ１ｇの前に追加されている。追加された処理は、Ｓ５１０ｇ－Ｓ５４０ｇで構成されている。Ｓ５１０ｇ－Ｓ５４０ｇの各ステップの処理は、以下の相違点を除いて、図１３のＳ５１０ｃ－Ｓ５４０ｃの対応するステップの処理と同じである（対応するステップは、符号の末尾の文字「ｇ」を「ｃ」に置換した符号を有するステップである）。
（相違点４ａ）第１ＡＰＰ駆動装置６００Ａに代えて第２ＡＰＰ駆動装置６００Ｂが使用される。
（相違点４ｂ）トークンＴＫａとは異なるトークンＴＫｇが使用される。
（相違点４ｃ）自動送信指示（Ｓ５１０ｇ）と自動データ取得指示（Ｓ５２５ｇ）とは、第３コマンドＣ３ｇを示すデータを含んでいる。
なお、第３コマンドＣ３ｇに対応する第２種準備処理Ｐ２は、第２コマンドＣ２ｇに対応する第２種準備処理Ｐ２よりも先でもよく後でもよい。

第１コマンドＣ１ｇのための処理では、Ｓ５７７ｇで、第１ロボット駆動装置２００Ａのプロセッサ２１０は、第２ＡＰＰ駆動装置６００Ｂに、完了通知を送信する。この通知は、トークンＴＫｇと操作時刻Ｔｃとを示すデータを含んでいる。本実施例では、自動送信指示（Ｓ５１０ｇ）が受信される場合、プロセッサ２１０は、操作処理（Ｓ５７０ｃ）の完了に応じて、ツール３２０の移動処理（Ｓ５８０ｃ）を開始する前に、完了通知を送信する（Ｓ５７７ｇ）。これにより、第２ＡＰＰ駆動装置６００Ｂは、ツール３２０の移動を待たずに、処理を進行できる。

第３コマンドＣ３ｇのための各ステップの処理は、以下の相違点を除いて、第２コマンドＣ２ｇのための対応するステップの処理と同じである（対応するステップは、符号の末尾の文字「ｇ」を「ｃ」に置換した符号を有するステップである）。
（相違点５ａ）第１ＡＰＰ駆動装置６００Ａに代えて第２ＡＰＰ駆動装置６００Ｂが使用される。
（相違点５ｂ）トークンＴＫａとは異なるトークンＴＫｇが使用される。
（相違点５ｃ）Ｓ６１０ｇでは、対象状態データが取得される。
（相違点５ｄ）Ｓ６１５ｇでは、対象状態データが送信される。
（相違点５ｅ）検査（Ｓ６２０ｇ）では、対象状態データがレディ状態を示すか否かが判断される。
（相違点５ｆ）第２制限時間ＴＷｃに代えて第４制限時間ＴＷｇが使用される。

Ｓ５８５ｇでは、第２ＡＰＰ駆動装置６００Ｂのプロセッサ６１０は、対象状態データ取得処理の繰り返しを開始する。本実施例では、自動データ取得指示（Ｓ５２５ｇ）が受信される場合、プロセッサ６１０は、完了通知（Ｓ５７７ｇ）に応じて、対象状態データの取得処理（Ｓ６１０ｇ）の繰り返しを開始する。Ｓ６１５ｇでは、プロセッサ６１０は、状態対象データＳＴｇに加えて、トークンＴＫｇと、操作時刻Ｔｃと、を示すデータを、制御装置１００に送信する。プロセッサ６１０は、その後、Ｓ６１０ｇを繰り返す。

第１ＡＰＰ駆動装置６００Ａから制御装置１００に送信されるデータは、トークンＴＫｃを示している。第２ＡＰＰ駆動装置６００Ｂから制御装置１００に送信されるデータは、トークンＴＫｃとは異なるトークンＴＫｇを示している。従って、制御装置１００のプロセッサ１１０は、トークンを使用して、データの送信元を識別できる。

なお、第２コマンドＣ２ｇのための処理と、第３コマンドＣ３ｇのための処理とは、完了通知の送信（Ｓ５７５ｃ、Ｓ５７７ｇ）に応じて、並行して進行する。また、図２２には、第３コマンドＣ３ｇのためのＳ６２５ｇの判断結果がＹｅｓである場合の処理が、示されている。図示を省略するが、検査結果が不合格である場合（Ｓ６２５ｇ：Ｎｏ）、プロセッサ１１０は、図１４のＳ６２５ｃの判断結果がＮｏである場合と同様に、処理を進行する。

以上のように、第８スクリプトＳＣｇ（図２１）は、コマンドＣ１ｇ、Ｃ２ｇ、Ｃ３ｇを含んでいる。第２コマンドＣ２ｇは、第１コマンドＣ１ｇによる操作の後に、第２制限時間ＴＷｃ内に、操作に起因する第１端末７００Ａのアプリケーションの状態である第１の結果状態（ここでは、スキャンデータを取得した状態）が第１ＡＰＰ駆動装置６００Ａによって検知されるか否かを判断する。第３コマンドＣ３ｇは、第１コマンドＣ１ｇによる操作の後に、第４制限時間ＴＷｇ内に、操作に起因する第２端末７００Ｂのアプリケーションの状態である第２の結果状態（ここでは、対象状態データがレディ状態を示す状態）が第２ＡＰＰ駆動装置６００Ｂによって検知されるか否かを判断する。

第８スクリプトＳＣｇが処理される場合、プロセッサ１１０は、以下の処理を実行する。プロセッサ１１０は、ツール３２０を基準位置に移動させる移動処理（Ｓ５８０ｃ）と、この移動処理よりも先に完了通知を送信する先通知処理（Ｓ５７５ｃ、Ｓ５７７ｇ）とを、第１ロボット駆動装置２００Ａに実行させる。先通知処理（Ｓ５７５ｃ、Ｓ５７７ｇ）は、Ｓ５７５ｃとＳ５７７ｇを含んでいる。Ｓ５７５ｃは、制御装置１００を介さずに、第１ＡＰＰ駆動装置６００ＡのためのトークンＴＫｃを使用して完了通知を第１ＡＰＰ駆動装置６００Ａへ送信する処理である。Ｓ５７７ｇは、制御装置１００を介さずに、第２ＡＰＰ駆動装置６００ＢのためのトークンＴＫｇを使用して完了通知を第２ＡＰＰ駆動装置６００Ｂへ送信する処理である。

以上により、プロセッサ１１０は、第２コマンドＣ２ｇの適切な判断と、第３コマンドＣ３ｇの適切な判断とを、実行できる。

Ａ２－９．第９の操作判断処理：
図２３は、スクリプトの別の例を示す概略図である。この第９スクリプトＳＣｈは、図１２の第４スクリプトＳＣｃの第１コマンドＣ１ｃの前に、第１コマンドＣ１ｈを追加したものである。コマンドＣ２ｈ、Ｃ３ｈは、図１２のコマンドＣ１ｃ、Ｃ２ｃとそれぞれ同じである。第１コマンドＣ１ｈは、ロボットによる対象装置１０の操作コマンドである。具体的には、第１コマンドＣ１ｈは、第２ロボット３００Ｂ（図１）による対象装置１０の電源ボタン１５の押下である。第９スクリプトＳＣｈは、対象装置１０の電源がオフである状態からの検査に使用される。図５の処理では、第１コマンドＣ１ｈに関しては、Ｓ２２０、Ｓ２４０の判断結果は、Ｎｏである。

図２４は、第９スクリプトＳＣｈのための操作判断処理の例を示すシーケンス図である。この操作判断処理は、図１３、図１４の操作判断処理に、第１コマンドＣ１ｈのための処理（Ｓ５４５ｈ－Ｓ５８３ｈ）を追加したものである。コマンドＣ２ｈ、Ｃ３ｈのための処理は、図１３、図１４のコマンドＣ１ｃ、Ｃ２ｃのための処理と、それぞれ同じである。

Ｓ５４５ｈ－Ｓ５８３ｈの各ステップは、以下の相違点を除いて、図１１のＳ５４５ｂ－Ｓ５８３ｂの対応するステップの処理と同じである（対応するステップは、符号の末尾の文字「ｈ」を「ｂ」に置換した符号を有するステップである）。
（相違点６ａ）第１ロボット駆動装置２００Ａに代えて第２ロボット駆動装置２００Ｂが使用される。
（相違点６ｂ）第１コマンドＣ１ｂに代えて、第１コマンドＣ１ｈが使用される。
（相違点６ｃ）Ｓ５５５ｈの軌道は、基準位置から電源ボタン１５の押下位置までの軌道である。
（相違点６ｄ）Ｓ５６０ｈの操作位置は、電源ボタン１５の近傍の電源ボタン１５から離れた位置である。

以上のＳ５４５ｈ－Ｓ５８３ｈの処理により、第２ロボット３００Ｂのツール３２０は、対象装置１０の電源ボタン１５を押下する。これにより、対象装置１０の電源がオンになる。以後、図１３、図１４の操作判断処理と同じ処理が実行される。

以上のように、第９スクリプトＳＣｈ（図２３）は、コマンドＣ１ｈ、Ｃ２ｈ、Ｃ３ｈを含んでいる。第１コマンドＣ１ｈは、第２ロボット３００Ｂのツール３２０による対象装置１０の第１の操作（ここでは、電源ボタン１５の押下）を第２ロボット駆動装置２００Ｂに実行させる。第２コマンドＣ２ｈは、第１ロボット３００Ａのツール３２０による対象装置１０の第２の操作（ここでは、スキャンボタン１４の押下）を第１ロボット駆動装置２００Ａに実行させる。第３コマンドＣ３ｈは、第２コマンドＣ２ｈの第２の操作の後に、第２制限時間ＴＷｃ内に、第２の操作に起因するアプリケーションの結果状態（ここでは、スキャンデータを取得した状態）が第１ＡＰＰ駆動装置６００Ａによって検知されるか否かを判断する。

第９スクリプトＳＣｈが処理される場合、プロセッサ１１０は、図１３、図１４の操作判断処理と同様に、ツール３２０を基準位置に移動させる移動処理（Ｓ５８０ｃ）と、この移動処理よりも先に完了通知を送信する先通知処理（Ｓ５７５ｃ）とを、第１ロボット駆動装置２００Ａに実行させる。従って、プロセッサ１１０は、第３コマンドＣ３ｇの適切な判断を、実行できる。

Ｂ．変形例：
（１）図１８の処理のように複数のロボット駆動装置２００が検査に使用される場合、ロボット駆動装置２００毎に異なるトークンが使用されることが好ましい。この構成によれば、複数のロボット駆動装置２００からの通信（ひいては、情報）の取り違えの可能性を低減できる。また、図２０の処理のように複数のＡＰＰ駆動装置６００が検査に使用される場合、ＡＰＰ駆動装置６００毎に異なるトークンが使用されることが好ましい。この構成によれば、複数のＡＰＰ駆動装置６００からの通信（ひいては、情報）の取り違えの可能性を低減できる。なお、通信を識別する通信識別子は、トークンに限らず、任意の情報であってよい。例えば、通信識別子は、駆動装置の識別番号であってよい。なお、ロボット駆動装置２００の総数は、１以上の任意の数であってよい。また、ＡＰＰ駆動装置６００の総数は、１以上の任意の数であってよい。なお、通信識別子は省略されてよい。例えば、制御装置１００は、駆動装置２００、６００のネットワークアドレス（例えば、ＩＰアドレス）を使用して、通信を識別してよい。

（２）操作判断処理は、上記の処理に限らず、他の種々の処理であってよい。例えば、ＡＰＰ駆動装置６００からロボット駆動装置２００へ送信される操作の完了通知（例えば、図８のＳ３６５ａの完了通知）は、制御装置１００によって中継されてよい。ロボット駆動装置２００からＡＰＰ駆動装置６００に送信される操作の完了通知（例えば、図１３のＳ５７５ｃの完了通知）は、制御装置１００によって中継されてよい。

（３）図８、図９等の処理では、ロボット駆動装置２００は、撮影画像データの取得処理（Ｓ４１０ａ）を繰り返す。そして、制御装置１００からの要求（Ｓ４３５ａ）に応じて、ロボット駆動装置２００は、最新の撮影画像データを制御装置１００に送信する。これに代えて、ロボット駆動装置２００は、操作の完了通知（例えば、図８：Ｓ３６５ａ）の受信後、操作時刻（例えば、操作時刻Ｔａ）からの制限時間（例えば、第１制限時間ＴＷａ）の経過を待ってよい。ロボット駆動装置２００は、現在時刻Ｔが制限時間の終了時刻になった時点で、撮影画像データの取得処理を実行してよい。そして、ロボット駆動装置２００は、取得した撮影画像データを、制御装置１００に送信してよい。制御装置１００は、取得した撮影画像データを使用して、検査結果が合格であるか否かを判断してよい。

（４）図１３、図１４等の処理では、ＡＰＰ駆動装置６００は、アプリケーションの状態を示すデータ（例えば、スキャンデータ、対象状態データなど）の取得処理（Ｓ６１０ｃ）を繰り返す。そして、制御装置１００からの要求（Ｓ６３５ｃ）に応じて、ＡＰＰ駆動装置６００は、最新のデータを制御装置１００に送信する。これに代えて、ＡＰＰ駆動装置６００は、操作の完了通知（例えば、図１３：Ｓ５７５ｃ）の受信後、操作時刻（例えば、操作時刻Ｔｃ）からの制限時間（例えば、第２制限時間ＴＷｃ）の経過を待ってよい。ＡＰＰ駆動装置６００は、現在時刻Ｔが制限時間の終了時刻になった時点で、アプリケーションの状態を示すデータの取得処理を実行してよい。そして、ＡＰＰ駆動装置６００は、取得したデータを、制御装置１００に送信してよい。制御装置１００は、取得したデータを使用して、検査結果が合格であるか否かを判断してよい。

（５）制限時間（例えば、制限時間ＴＷａ、ＴＷｃ、ＴＷｅ、ＴＷｇ）の開始時刻は、上記の操作時刻Ｔａ、Ｔｃに代えて、操作が行われる時刻と相関を有する種々の時刻であってよい。例えば、操作処理を実行する駆動装置２００、６００に代えて、他の装置が、開始時刻を決定してよい。制御装置１００は、操作指示を送信する段階で、開始時刻を現在時刻に決定してよい。この場合、制御装置１００から操作処理を行う駆動装置２００、６００に送信される操作指示は、開始時刻を示すデータを含むことが好ましい。また、検査に使用されるデータ（例えば、撮影画像データ、スキャンデータ、対象状態データ）を取得する駆動装置２００、６００が、操作の完了通知の受信に応じて、開始時刻を現在時刻に決定してよい。この場合、駆動装置２００、６００は、開始時刻を決定した場合に、開始時刻を制御装置１００に通知することが好ましい。いずれの場合も、制御装置１００とロボット駆動装置２００とＡＰＰ駆動装置６００とは、開始時刻を互いに共有してよい。

（６）ロボット３００の制御のための制御パラメータを示すデータは、ロボット駆動装置２００の不揮発性記憶装置２３０に代えて、制御装置１００の不揮発性記憶装置１３０に格納されてよい。この場合、制御装置１００からロボット３００へ送信される移動指示と操作指示は、制御パラメータを示すデータを含むことが好ましい。

（７）ロボットを制御するためのロボット駆動部は、制御装置１００上で動作するソフトウェア（すなわち、プログラム）によって、実装されてよい。アプリケーションのユーザインタフェースを操作するためのアプリケーション駆動部は、制御装置１００上で動作するソフトウェア（すなわち、プログラム）によって、実装されてよい。アプリケーションの状態を検知するためのアプリケーション駆動部は、制御装置１００上で動作するソフトウェア（すなわち、プログラム）によって、実装されてよい。対象装置と協働するためのアプリケーションは、携帯端末に代えて、デスクトップコンピュータ上で動作してよい。また、対象装置と協働するためのアプリケーションは、制御装置１００上で動作するソフトウェア（すなわち、プログラム）によって、実装されてよい。アプリケーション駆動部は、ユーザインタフェースの操作と、アプリケーションの状態の検知と、の一方を行うように構成されてよい。ロボット３００は、対象装置１０の操作と、対象装置１０の状態の検知と、の一方を行うように構成されてよい。例えば、ツール３２０とデジタルカメラ３３０のうちの一方は、省略されてよい。

（８）対象装置１０の操作部は、タッチスクリーン１１とボタン１２－１５に限らず、ユーザによって操作されるための任意の部材であってよい。例えば、操作部は、ダイアル、レバー、スライダなど、押下とは異なる操作を受け付ける装置であってよい。そして、ロボット３００のエンドエフェクタの構成は、ツール３２０（具体的には指）の構成に限らず、操作部の操作に適する任意の構成であってよい。例えば、エンドエフェクタは、複数の指を有するハンド、吸盤など、他の種々の種類の装置であってよい。また、対象装置１０（図１）の操作とＵＩ画面７５２（図２）の操作とは、押下に限らず、スワイプ、回転、引き、などの、任意の操作であってよい。

（９）対象装置の状態を検知するための検知部は、デジタルカメラ３３０に代えて、三次元センサ、赤外線センサなど、他の任意の検知装置であってよい。検査結果が合格であるか否かを判断する方法は、検知部からのデータを使用する任意の方法であってよい。例えば、制御装置１００は、三次元センサによって測定される対象装置１０の形状と、予め決められた基準の形状と、の間の差が閾値よりも小さい場合に、検査結果が合格であると判断してよい。

（１０）検査の対象装置は、複合機に代えて、プリンタ、ミシン、カッティングマシーン、スキャナ、スマートフォンなど、任意の製品であってよい。

（１１）検査の手順を示す手順情報は、テキストに代えて、他の任意の形式で表されてよい。例えば、手順情報は、バイナリデータで表されてよい。

（１２）検査のための処理を進行する制御装置の構成は、図１の制御装置１００の構成に代えて、他の種々の構成であってよい。例えば、ネットワークを介して互いに通信可能な複数の装置（例えば、コンピュータ）が、制御装置によるデータ処理の機能を一部ずつ分担して、全体として、データ処理の機能を提供してもよい（これらの装置を備えるシステムが制御装置に対応する）。

上記各実施例において、ハードウェアによって実現されていた構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されていた構成の一部あるいは全部をハードウェアに置き換えるようにしてもよい。例えば、図３のスクリプトの解析処理（Ｓ１２３）の機能を、専用のハードウェア回路によって実現してもよい。

また、本発明の機能の一部または全部がコンピュータプログラムで実現される場合には、そのプログラムは、コンピュータ読み取り可能な記録媒体（例えば、一時的ではない記録媒体）に格納された形で提供することができる。プログラムは、提供時と同一または異なる記録媒体（コンピュータ読み取り可能な記録媒体）に格納された状態で、使用され得る。「コンピュータ読み取り可能な記録媒体」は、メモリーカードやＣＤ－ＲＯＭのような携帯型の記録媒体に限らず、各種ＲＯＭ等のコンピュータ内の内部記憶装置や、ハードディスクドライブ等のコンピュータに接続されている外部記憶装置も含み得る。

以上、実施例、変形例に基づき本発明について説明してきたが、上記した発明の実施の形態は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明は、その趣旨を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれる。

１０…対象装置、１１…タッチスクリーン、１２…クリーニングボタン、１３…印刷ボタン、１４…スキャンボタン、１５…電源ボタン、１６…ビジーランプ、１７…レディランプ、１００…制御装置、１０５…制御ユニット、１１０…プロセッサ、１１５…記憶装置、１２０…揮発性記憶装置、１３０…不揮発性記憶装置、１４０…通信インタフェース、１５０…表示部、１６０…操作部、２００…ロボット駆動装置、２００Ａ…第１ロボット駆動装置、２００Ｂ…第２ロボット駆動装置、２０５…制御ユニット、２１０…プロセッサ、２１５…記憶装置、２２０…揮発性記憶装置、２３０…不揮発性記憶装置、２４０…通信インタフェース、３００…ロボット３００Ａ…第１ロボット３００Ｂ…第２ロボットアーム、３１０…アーム、３２０…ツール、３３０…デジタルカメラ、６００Ａ…第１アプリケーション駆動装置、６００Ｂ…第２アプリケーション駆動装置、６０５…制御ユニット、６１０…プロセッサ、６１５…記憶装置、６２０…揮発性記憶装置、６３０…不揮発性記憶装置、６４０…通信インタフェース、７００Ａ、７００Ｂ…アプリケーション実行装置、７００Ａ…第１端末、７００Ｂ…第２端末、７０５…制御ユニット、７５０…表示部、７５２ａ…印刷ボタン、７５２ｂ…スキャンボタン、７５２ｃ…クリーニングボタン、７５２ｄ…リモート電源ボタン、７５２ｅ…設定ボタン、７５２ｆ…情報領域、７６０…操作部、１０００…システム、

Claims (10)

1. 対象装置の状態を検知する検知部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアのユーザインタフェースを操作するためのアプリケーション駆動部と、のそれぞれと通信するように構成されるとともにコンピュータを有する制御装置のコンピュータプログラムであって、
   対象装置を検査するための手順情報を取得する取得機能と、
   前記手順情報に従って前記対象装置を検査する検査機能と、
   をコンピュータに実現させ、
   前記手順情報は、
   アプリケーションソフトウェアのユーザインタフェースの操作をアプリケーション駆動部に実行させる操作コマンドと、
   前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作に起因する前記対象装置の状態が検知部によって検知されるか否かを判断する判断コマンドと、
   を含み、
   前記検査機能は、
   （Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記対象装置の状態である事後状態が前記検知部によって検知されるか否かを判断する事後判断コマンドである場合に、前記対象装置の前記事後状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の完了後に前記ロボット駆動部に実行させる後移動機能と、
   （Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記対象装置の状態である結果状態が前記検知部によって検知されるか否かを判断する時間判断コマンドである場合に、前記対象装置の前記結果状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に前記ロボット駆動部に実行させる先移動機能と、
   を含む、コンピュータプログラム。
2. 請求項１に記載のコンピュータプログラムであって、
   前記検査機能は、
   前記判断コマンドが前記時間判断コマンドである場合に、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に、前記アプリケーション駆動部と前記ロボット駆動部とのそれぞれに、通信識別子を送信する機能と、
   前記判断コマンドが前記時間判断コマンドである場合に、前記アプリケーション駆動部に、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の完了通知を前記制御装置を介さずに前記通信識別子を使用して前記ロボット駆動部へ送信させる機能と、
   前記判断コマンドが前記時間判断コマンドである場合に、前記ロボット駆動部に、前記完了通知に応じて前記対象装置の前記状態を検知させる機能と、
   を含む、コンピュータプログラム。
3. 請求項１または２に記載のコンピュータプログラムであって、
   前記制御装置は、前記対象装置の状態を検知する第１の検知部を有する第１のロボットを制御するための第１のロボット駆動部と、前記対象装置の状態を検知する第２の検知部を有する第２のロボットを制御するための第２のロボット駆動部と、のそれぞれと通信するように構成され、
   前記手順情報が、
   前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の後に、第１の制限時間内に、前記操作に起因する前記対象装置の第１の結果状態が前記第１の検知部によって検知されるか否かを判断する第１の時間判断コマンドと、
   前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の後に、第２の制限時間内に、前記操作に起因する前記対象装置の第２の結果状態が前記第２の検知部によって検知されるか否かを判断する第２の時間判断コマンドと、
   を含む場合を、第１の場合と呼び、
   前記検査機能は、
   前記第１の場合に、前記対象装置の前記第１の結果状態を検知するための位置に前記第１の検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に前記第１のロボット駆動部に実行させる第１の先移動機能と、
   前記第１の場合に、前記対象装置の前記第２の結果状態を検知するための位置に前記第２の検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に前記第２のロボット駆動部に実行させる第２の先移動機能と、
   を含む、
   コンピュータプログラム。
4. 請求項１から３のいずれかに記載のコンピュータプログラムであって、
   前記制御装置は、前記対象装置を制御するための第１のアプリケーションソフトウェアの第１のユーザインタフェースを制御するための第１のアプリケーション駆動部と、前記対象装置を制御するための第２のアプリケーションソフトウェアの第２のユーザインタフェースを制御するための第２のアプリケーション駆動部と、のそれぞれと通信するように構成され、
   前記手順情報が、
   前記第１のアプリケーションソフトウェアの前記第１のユーザインタフェースの第１の操作を前記第１のアプリケーション駆動部に実行させる第１の操作コマンドと、
   前記第１の操作の後に、前記第２のアプリケーションソフトウェアの前記第２のユーザインタフェースの第２の操作を前記第２のアプリケーション駆動部に実行させる第２の操作コマンドと、
   前記第２の操作の後に、前記制限時間内に、前記第２の操作に起因する前記対象装置の前記結果状態が前記検知部によって検知されるか否かを判断する前記時間判断コマンドと、
   を含む場合を、第２の場合と呼び、
   前記検査機能は、
   前記第２の場合に、前記対象装置の前記結果状態を検知するための前記位置に前記検知部を移動させる処理を、前記第２のアプリケーションソフトウェアの前記第２のユーザインタフェースの前記第２の操作の開始前に前記ロボット駆動部に実行させる前記先移動機能を含む、
   コンピュータプログラム。
5. 対象装置を操作するための操作部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアの状態を検知するためのアプリケーション駆動部と、のそれぞれと通信するように構成されるとともにコンピュータを有する制御装置のコンピュータプログラムであって、
   対象装置を検査するための手順情報を取得する取得機能と、
   前記手順情報に従って前記対象装置を検査する検査機能と、
   をコンピュータに実現させ、
   前記手順情報は、
   ロボットの操作部による前記対象装置の操作をロボット駆動部に実行させる操作コマンドと、
   前記対象装置の前記操作に起因するアプリケーションソフトウェアの状態がアプリケーション駆動部によって検知されるか否かを判断する判断コマンドと、
   を含み、
   前記検査機能は、
   （Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である事後状態が前記アプリケーション駆動部によって検知されるか否かを判断する事後判断コマンドである場合に、前記操作の後に前記ロボットの前記操作部を特定の位置に移動する移動処理と、前記移動処理の後に前記操作の完了通知を送信する後通知処理と、を前記ロボット駆動部に実行させる後通知機能と、
   （Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である結果状態が前記アプリケーション駆動部によって検知されるか否かを判断する時間判断コマンドである場合に、前記移動処理と、前記移動処理よりも先に前記完了通知を送信する先通知処理と、を前記ロボット駆動部に実行させる先通知機能と、
   を含む、コンピュータプログラム。
6. 請求項５に記載のコンピュータプログラムであって、
   前記検査機能は、前記判断コマンドが前記時間判断コマンドである場合に、前記対象装置の前記操作の開始前に、前記アプリケーション駆動部と前記ロボット駆動部とのそれぞれに、通信識別子を送信する機能を含み、
   前記先通知処理は、前記制御装置を介さずに前記通信識別子を使用して前記完了通知を前記アプリケーション駆動部へ送信する処理を含み、
   前記検査機能は、前記判断コマンドが前記時間判断コマンドである場合に、前記アプリケーション駆動部に、前記完了通知に応じて前記アプリケーションソフトウェアの前記状態を検知させる機能を含む、
   コンピュータプログラム。
7. 請求項５または６に記載のコンピュータプログラムであって、
   前記制御装置は、前記対象装置と協働するための第１のアプリケーションソフトウェアの状態を検知するための第１のアプリケーション駆動部と、前記対象装置と協働するための第２のアプリケーションソフトウェアの状態を検知するための第２のアプリケーション駆動部と、のそれぞれと通信するように構成され、
   前記手順情報が、
   前記操作の後に、第１の制限時間内に、前記操作に起因する前記第１のアプリケーションソフトウェアの状態である第１の結果状態が前記第１のアプリケーション駆動部によって検知されるか否かを判断する第１の時間判断コマンドと、
   前記操作の後に、第２の制限時間内に、前記操作に起因する前記第２のアプリケーションソフトウェアの状態である第２の結果状態が前記第２のアプリケーション駆動部によって検知されるか否かを判断する第２の時間判断コマンドと、
   を含む場合を、第１の場合と呼び、
   前記第１の場合に、前記先通知処理は、前記制御装置を介さずに前記第１のアプリケーション駆動部のための通信識別子を使用して前記完了通知を前記第１のアプリケーション駆動部へ送信する処理と、前記制御装置を介さずに前記第２のアプリケーション駆動部のための通信識別子を使用して前記完了通知を前記第２のアプリケーション駆動部へ送信する処理と、を含む、
   コンピュータプログラム。
8. 請求項５から７のいずれかに記載のコンピュータプログラムであって、
   前記制御装置は、前記対象装置を操作するための第１の操作部を有する第１のロボットを制御するための第１のロボット駆動部と、前記対象装置を操作するための第２の操作部を有する第２のロボットを制御するための第２のロボット駆動部と、のそれぞれと通信するように構成され、
   前記手順情報が、
   前記第１のロボットの前記第１の操作部による前記対象装置の第１の操作を前記第１のロボット駆動部に実行させる第１の操作コマンドと、
   前記第２のロボットの前記第２の操作部による前記対象装置の第２の操作を前記第２のロボット駆動部に実行させる第２の操作コマンドと、
   前記第２の操作の後に、前記制限時間内に、前記第２の操作に起因する前記アプリケーションソフトウェアの前記結果状態が前記アプリケーション駆動部によって検知されるか否かを判断する前記時間判断コマンドと、
   を含む場合を、第２の場合と呼び、
   前記第２の場合に、前記先通知機能は、前記移動処理と、前記移動処理よりも先に前記完了通知を送信する前記先通知処理と、を前記第２のロボット駆動部に実行させる、
   コンピュータプログラム。
9. 対象装置の状態を検知する検知部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアのユーザインタフェースを操作するためのアプリケーション駆動部と、のそれぞれと通信するように構成される制御装置であって、
   対象装置を検査するための手順情報を取得する取得部と、
   前記手順情報に従って前記対象装置を検査する検査部と、
   をコンピュータに実現させ、
   前記手順情報は、
   アプリケーションソフトウェアのユーザインタフェースの操作をアプリケーション駆動部に実行させる操作コマンドと、
   前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作に起因する前記対象装置の状態が検知部によって検知されるか否かを判断する判断コマンドと、
   を含み、
   前記検査部は、
   （Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記対象装置の状態である事後状態が前記検知部によって検知されるか否かを判断する事後判断コマンドである場合に、前記対象装置の前記事後状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の完了後に前記ロボット駆動部に実行させる後移動部と、
   （Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記対象装置の状態である結果状態が前記検知部によって検知されるか否かを判断する時間判断コマンドである場合に、前記対象装置の前記結果状態を検知するための位置に前記検知部を移動させる処理を、前記アプリケーションソフトウェアの前記ユーザインタフェースの前記操作の開始前に前記ロボット駆動部に実行させる先移動部と、
   を含む、制御装置。
10. 対象装置を操作するための操作部を有するロボットを制御するためのロボット駆動部と、前記対象装置と協働するためのアプリケーションソフトウェアの状態を検知するためのアプリケーション駆動部と、のそれぞれと通信するように構成される制御装置であって、
    対象装置を検査するための手順情報を取得する取得部と、
    前記手順情報に従って前記対象装置を検査する検査部と、
    をコンピュータに実現させ、
    前記手順情報は、
    ロボットの操作部による前記対象装置の操作をロボット駆動部に実行させる操作コマンドと、
    前記対象装置の前記操作に起因するアプリケーションソフトウェアの状態がアプリケーション駆動部によって検知されるか否かを判断する判断コマンドと、
    を含み、
    前記検査部は、
    （Ａ）前記判断コマンドが、前記操作の後に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である事後状態が前記アプリケーション駆動部によって検知されるか否かを判断する事後判断コマンドである場合に、前記操作の後に前記ロボットの前記操作部を特定の位置に移動する移動処理と、前記移動処理の後に前記操作の完了通知を送信する後通知処理と、を前記ロボット駆動部に実行させる後通知部と、
    （Ｂ）前記判断コマンドが、前記操作の後に、制限時間内に、前記操作に起因する前記アプリケーションソフトウェアの前記状態である結果状態が前記アプリケーション駆動部によって検知されるか否かを判断する時間判断コマンドである場合に、前記移動処理と、前記移動処理よりも先に前記完了通知を送信する先通知処理と、を前記ロボット駆動部に実行させる先通知部と、
    を含む、制御装置。

Images