JP2012007979A - 自動検査装置の遠隔操作検査支援装置 - Google Patents

Abstract

【課題】モニタ画面の画像の良否を検査する自動検査装置の遠隔操作検査支援装置に関し、簡素な構成で自動検査装置によって検査された画像を柔軟かつ効率よく目視でも検査できるようにし、目視による検査結果を有効に活用できるようにする。
【解決手段】
画像を撮像する撮像手段１４と、良品な画像を良品画像として予め記憶した良品画像記憶手段２５と、撮像画像と良品画像とを比較照合して自動検査する自動検査手段２４とを有する自動検査装置２の遠隔操作検査支援装置３において、撮像画像と自動検査結果とを記憶する記憶手段３４と、撮像画像と自動検査結果とを表示する表示手段３２と、目視で行われる良否の判定結果を入力する入力手段３１と、良品と判定された撮像画像を良品撮像画像として記憶する良品撮像画像記憶手段３５と、良品撮像画像と良品画像との置換制御を実施する制御手段３３とを備える。
【選択図】図１

Description

本発明は、モニタの画面に表示される画像の良否を検査する検査装置に関し、より詳しくは、自動検査装置によって検査された画像を柔軟かつ効率よく目視でも検査できるようにして、目視による検査結果を有効に活用できるようにした、自動検査装置の遠隔操作検査支援装置に関する。

従来、検査対象を目視により検査できるようにした検査装置として、特許文献１に記載された目視検査装置が知られている。この特許文献１の目視検査装置は、検査対象を撮像手段により撮影した被検査体映像と、検査対象の適正な画像である被検査体基準図映像とを離間して重ね合わせて表示することにより、目視で比較検査できるようにした検査装置である。

特開２００４−３３３２８８号公報

しかしながら、このような従来の目視検査装置は、自動検査装置とは別個独立に設けられているため、目視による精度の高い検査結果や検査データを自動検査装置の自動検査用の基礎データとして有効に活用することができないといった課題がある。また、自動検査装置のみで検査を行った場合、例えば微細なパターンや複雑な図形等から構成される画像を検査対象とすると、自動検査装置では十分にその良否を見極めることができず、誤判定をまねいてしまうおそれがある。

本発明はこのような課題に着目してなされたもので、モニタの画面に表示される画像の良否を検査する検査装置に関し、自動検査装置によって検査された画像を柔軟かつ効率よく目視でも検査できるようにして、目視による検査結果を有効に活用できるようにした、自動検査装置の遠隔操作検査支援装置を提供することを目的とする。

上記目的を達成するため、本発明の自動検査装置の遠隔操作検査支援装置は、モニタの画面に表示される画像を撮像画像として撮像する撮像手段と、前記モニタの画面に表示される良品な画像を良品画像として予め記憶した良品画像記憶手段と、前記撮像画像と前記良品画像とを比較照合することで自動検査する自動検査手段とを有する自動検査装置の遠隔操作検査支援装置であって、前記撮像画像と、前記自動検査手段による自動検査結果とを記憶する記憶手段と、前記記憶手段に記憶された前記撮像画像と前記自動検査結果とを表示する表示手段と、前記表示手段に表示された前記撮像画像に基づいて、目視で行われる良否の判定結果を入力する入力手段と、前記入力手段により入力された良否の判定結果に応じて、良品と判定された前記撮像画像を良品撮像画像として記憶する良品撮像画像記憶手段と、前記入力手段への入力により、前記良品撮像画像記憶手段に記憶された前記良品撮像画像を前記良品画像記憶手段に出力するとともに、前記良品画像と置き換える制御を実施する制御手段とを備えたことを特徴とする。

また、前記入力手段により入力された良否の判定結果に応じて、不良品と判定された前記撮像画像を不良品撮像画像として記憶する不良品撮像画像記憶手段とをさらに備えるようにしてもよい。
また、前記モニタが、画面に表示される画像を複数有するとともに、前記複数の画像が前記自動検査装置による検査対象として自動検査され、前記記憶手段が、前記複数の画像についての撮像画像と自動検査結果とを記憶するとともに、前記表示手段が、前記入力手段への入力に応じて、前記記憶手段に記憶された複数の撮像画像と自動検査結果とを予め定めた所定の順序で表示するようにしてもよい。

また、前記記憶手段が、前記入力手段への入力により、前記複数の画像から選択されて検査対象に設定された任意の画像の撮像画像と自動検査結果とを記憶し、前記表示手段が、前記入力手段への入力に応じて、前記記憶手段に記憶された撮像画像と自動検査結果とを表示するようにしてもよい。
また、前記モニタに設けられ、前記画面に画像を表示させるための操作ボタンと、前記自動検査装置に設けられ、前記操作ボタンを操作する所定の操作パターンを予め記憶した操作パターン記憶手段とをさらに備え、前記記憶手段が、前記操作ボタンを前記所定の操作パターンで操作したときに前記画面に表示された画像を前記撮像画像として記憶するとともに、前記制御手段が、前記入力手段への入力により、前記操作パターン記憶手段に記憶された前記操作パターンを異なる操作パターンに変更して記憶させる制御を実施するようにしてもよい。

また、前記モニタが、建設機械に搭載される車載モニタであってもよい。

本発明の自動検査装置の遠隔操作検査支援装置によれば、自動検査では看過され得る検査の見落としや誤判定を、オペレータの目視による正確な判定により是正することができ、柔軟かつ精度の高い良否判定を実現することができる。
また、この目視による柔軟かつ精度の高い判定結果を、自動検査装置で次に検査を実施する検査対象の自動検査用の基礎データとして利用でき、自動検査用の基礎データの作成作業が低減されるとともに、自動検査装置による検査精度を向上することができる。

本発明の一実施形態に係る自動検査装置と遠隔操作検査支援装置とを例示するブロック図である。 本発明の一実施形態に係る車載モニタを例示する模式図である。 本発明の一実施形態に係る検査要領書を例示する表である。 本発明の一実施形態に係る遠隔操作検査支援制御を例示する模式的なフローチャートである。

以下、図面により、本発明の実施形態について説明する。
図１〜４は本発明の一実施形態を説明するもので、図１はその自動検査装置と遠隔操作検査支援装置とを示すブロック図、図２はその車載モニタを示す模式図、図３はその検査要領書を示す表、図４はその遠隔操作検査支援制御を示す模式的なフローチャートである。

図１に示すシステムは、車載モニタ１０に表示される画像が良品であるか否かを自動検査する自動検査装置２と、その自動検査結果を目視で確認することで是正するための遠隔操作検査支援装置３とを備えた検査装置１である。
まず、図１，２，３を用いて、本発明の一実施形態に係る車載モニタ表示の検査装置１の自動検査装置２から説明する。

［自動検査装置］
本実施形態に係る自動検査装置２は、建設機械（以下、車両という）に搭載され、図２に示すような複数の操作ボタンＡ，Ｂ，Ｃを有する車載モニタ１０につき、この操作ボタンＡ，Ｂ，Ｃが操作されることで画面１２に表示される画像を自動検査できるようにしたもので、モニタ画面撮像部（撮像手段）４と、第一記憶部（操作パターン記憶手段）２０と、操作パターン設定部２１と、車両状態模擬生成部２２と、画像処理部２３と、自動検査部（自動検査手段）２４と第二記憶部（良品画像記憶手段）２５とを備えている。なお、第一記憶部２０，操作パターン設定部２１，車両状態模擬生成部２２，画像処理部２３，自動検査部２４，第二記憶部２５の各機能要素は公知のＣＰＵやＲＯＭ等から構成されており、本実施形態ではこれら各機能要素は別体のハードウェアに設けられているが、一体のハードウェアに設けることもできる。

第一記憶部２０には、予め準備された車載モニタ１０用の検査要領書に従って、この検査要領書の検査番号ｋ（ｋ＝１〜ｎ）に対応した複数の検査内容と、この検査内容を達成するための操作ボタンＡ，Ｂ，Ｃの操作パターン（所定の操作パターン）とが、それぞれ列記されたデータベースとして記憶されている。
ここで、具体的な検査要領書の概要は、図３に示すように、検査内容として、「初期設定画面検査」，「運転モード選択画面検査」，「バッテリ電圧」，「エンジン回転数」等が定められている。また、操作パターンとしては、画面１２に検査内容に対応する画像を表示するための操作ボタンＡ，Ｂ，Ｃの操作順序が定められている。例えば、検証番号１の「初期設定画面検査」の操作ボタンＡ，Ｂ，Ｃの操作順序としては、「Ａボタン→Ｂボタン→Ｃボタン」が定められている。

なお、検査番号や検査内容の数は、車載モニタ１０の種類等に応じて任意の数に設定が可能である。
操作パターン設定部２１は、後述する遠隔操作検査支援装置３のオペレータ入力装置（入力手段）３１の入力操作により自動検査が開始されると、検査番号ｋと検査内容及び、操作パターンとを第一記憶部２０から取込むものである。これらの取込まれた情報のうち、操作パターンは、後述するモニタ画面撮像部４と車両状態模擬生成部２２とに出力され、検査番号ｋと検査内容及び操作パターンとは後述する遠隔操作検査支援装置３の自動検査結果記憶部（記憶手段）３４に出力されるようになっている。

車両状態模擬生成部２２は、操作模擬部２６とセンサ模擬部２７と故障模擬部２８とを有し、操作パターン設定部２１から出力された操作パターンに応じて車両稼動状態を模擬的に生成するものである。具体的には、車両稼動状態のうちの、車載モニタ１０が搭載される車両に備えられた操縦レバー等、車両の操縦者によって操作される操縦レバーの操作量は操作模擬部２６で模擬生成され、エンジン回転数やバッテリ電圧等の車両に設置されたセンサによって検出されるものはセンサ模擬部２７で模擬生成され、断線やショート等の車両の故障状態は故障模擬部２８で模擬生成されるようになっている。また、これら模擬生成された車両の稼動状態に応じた信号は、後述するモニタ画面撮像部４の撮像ステージ１５に載置された車載モニタ１０に出力されるようになっている。

モニタ画面撮像部４は、車載モニタ１０を載置する撮像ステージ１５と、車載モニタ１０の操作ボタンＡ，Ｂ，Ｃを押圧解放する複数のアクチュエータ１３と、車載モニタ１０の画面１２に表示される画像（以下、実画像という）を撮像するＣＣＤカメラ（撮像手段）１４とを備えている。この複数のアクチュエータ１３は、操作パターン設定部２１から取込まれた操作パターンに応じて作動することで、操作ボタンＡ，Ｂ，Ｃを押圧解放し、車載モニタ１０の画面１２に操作パターンに応じた実画像を表示させるようになっている。また、この実画像は、ＣＣＤカメラ１４により撮像され、実画像データとして電気信号に変換された後に、後述する画像処理部２３と遠隔操作検査支援装置３の自動検査結果記憶部３４とに出力されるようになっている。

画像処理部２３は、モニタ画面撮像部４から取込まれた実画像データを、後述する自動検査部２４で認識できるような画像データ（以下、処理画像データという）にするものであって、この処理画像データは、後述する自動検査部２４と遠隔操作検査支援装置３の自動検査結果記憶部３４とに出力されるようになっている。
第二記憶部２５には、検証番号ｋと検証内容とに対応した操作パターンで操作ボタンＡ，Ｂ，Ｃが操作された場合に、車載モニタ１０の画面１２に表示されるべき画像を予め撮像した画像（以下、良品画像という）が、検査番号，検査内容，操作パターンに関連付けられて、良品画像データセットとして記憶されている。また、この良品画像データセットは、詳細を後述する遠隔操作検査支援装置３の制御により、オペレータ入力操作装置３１の操作入力に応じて、良品判定データセット記憶部３５から出力される良品判定データセットと書き換えられるようになっている。

自動検査部２４は、操作パターン設定部２１で設定された操作パターンと車両状態模擬生成部２２で模擬生成された車両稼動状態とに応じて、第二記憶部２５から正常画像を取込んで、この良品画像と画像処理部２３から取込まれた処理画像データとを自動判定プログラムにより比較照合することで、車載モニタ１０の画面１２に表示された実画像の良否を自動で判定するものである。また、この自動判定された結果（以下、自動判定結果という）は後述する遠隔操作検査支援装置３の自動検査結果記憶部３４に出力されるようになっている。
次いで、図１を用いて本発明の一実施形態に係る車載モニタ表示の検査装置１の遠隔操作検査支援装置３について説明する。

［遠隔操作検査支援装置］
遠隔操作検査支援装置３は、自動検査装置２とは離隔した場所（例えば、製造ラインから離れた管理室内等）に設けられ、オペレータ入力操作装置（入力手段）３１と、遠隔モニタ（表示手段）３２と、検査支援制御部（制御手段）３３と、判定切替え部３８とを備えている。これらオペレータ入力操作装置３１，遠隔モニタ３２及び、判定切替え部３８は、検査支援制御部３３を中心として相互に接続されている。また、遠隔操作検査支援装置３は自動検査装置２と通信回線を介して互いに接続されている。

オペレータ入力操作装置３１は、例えばキーボードやマウスによって構成されており、オペレータの目視による実画像データの良否判定結果（以下、目視良否判定結果という）や、後述する検査支援制御部３３の自動検査結果記憶部３４に記憶された自動検査データセットの表示方式（連続処理表示／任意選択処理表示）等をオペレータが入力操作できるようになっている。

遠隔モニタ３２は、オペレータの目視による良否判定を可能とするために、オペレータによるオペレータ入力操作装置３１の操作に応じて、後述する検査支援制御部３３の自動検査結果記憶部３４に記憶された自動検査データセットを取込んでモニタ画面３２ａに表示するものである。
検査支援制御部３３は、自動検査結果記憶部（記憶手段）３４と、良品判定データセット記憶部（良品撮像画像記憶手段）３５と、不良品判定データセット記憶部（不良品撮像画像記憶手段）３６と、検査報告書作成部３７とを各機能要素として構成されている。なお、これら各機能要素は公知のＣＰＵやＲＯＭ等から構成されており、本実施形態では一体のハードウェアに設けられているが、別体のハードウェアに設けることもできる。

自動検査結果記憶部３４は、自動検査装置２の操作パターン設定部２１から検査番号と検査内容と操作パターンとを、モニタ画面撮像部４から実画像データを、画像処理部２３から処理画像データを、自動検査部２４から自動判定結果をそれぞれ取込んで、これら実画像データと、処理画像データと自動判定結果とを、検査番号，検査内容，操作パターンに関連付けて、自動検査データセットとして記憶するものである。

良品判定データセット記憶部３５は、オペレータによるオペレータ入力操作装置３１の入力操作に応じて、オペレータの目視により良品と判定された自動検査データセットを自動検査結果記憶部３４から取込んで良品判定データセットとして記憶するものである。また、この良品判定データセットは自動検査装置２の第二記憶部２５に出力されるようになっている。

不良品判定データセット記憶部３６は、オペレータによるオペレータ入力操作装置３１の入力操作に応じて、オペレータの目視により不良品と判定された自動検査データセットを自動検査結果記憶部３４から取込んで不良品判定データセットとして記憶するものである。
検査報告書作成部３７は、良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに記憶された良否結果に基づいて、車載モニタ１０に表示された画像の検査番号ｋ（１〜ｎ）についての検査結果を報告書（レポート）として出力するものである。

判定切替え部３８は、オペレータにＯＮ／ＯＦＦ操作され、ＯＮ操作がされたときは、遠隔操作検査支援装置３によるオペレータの目視判定ができる状態となり、ＯＦＦ操作がされたときは自動検査装置２による自動検査のみが実行されるように構成されている。なお、本実施形態では、判定切替え部３８はオペレータ入力操作装置３１とは別体に設けられたものとして説明するが、このオペレータ入力操作装置３１と一体に構成してもよい。
上述のように構成された本実施形態に係る車載モニタ表示の検査装置１の遠隔操作検査支援装置３は、図４に示すような手順で作動し、次のような様々な機能を達成するようになっている。

［検査データ一括保存機能／連続処理表示機能］
まず、本実施形態にかかる車載モニタ表示の検査装置１の遠隔操作検査支援装置３は、図４に示すような手順で作動し、「検査データ一括保存機能」と「連続処理表示機能」とを達成するようになっている。

まず、オペレータにより、判定切替え部３８のＯＮ操作がされたことを受け、遠隔操作検査支援制御がスタートする。
ステップＡ１０では、オペレータがオペレータ入力操作装置３１を操作することにより、自動検査結果記憶部３４に記憶される自動検査データセットの遠隔モニタ３２への表示方式が選択される。具体的には、「連続処理表示」と「任意選択処理表示」との何れ一方の選択が行われ、「連続処理表示」が選択された場合にはステップＡ２０に進む。一方、「任意選択処理表示」が選択された場合にはステップＢ１０に進む。

ステップＡ２０では、ステップＡ１０で「連続処理表示」が選択されたことを受けて、検査支援制御部３３から自動検査装置２へと自動検査の指令が出力され、検査番号ｋ＝１〜ｎについての全ての検査内容が自動検査される。また自動検査された検査番号ｋ＝１〜ｎの検査番号，検査内容，操作パターン，撮像画像データ，処理画像データ，自動検査結果は自動検査データセットとして、遠隔操作検査支援装置３の自動検査結果記憶部３４に出力される。

なお、事前に自動検査を実施しておき、その自動検査結果を自動検査結果記憶部３４に予め記憶させてある場合には、ステップＡ２０で自動検査を実施することなく、そのままステップＡ３０へ進んでもよい。
ステップＡ３０では、自動検査結果記憶部３４に自動検査データセットが記憶されたことを受けて、遠隔モニタ３２にこの自動検査データセットを順次表示することで、オペレータの目視による判定が可能な状態になる。

具体的には、オペレータがオペレータ入力操作装置３１を操作することにより、目視判定の開始が入力されると、検査番号ｋ＝１に対応する検査内容と、撮像画像データと、自動検査結果とが遠隔モニタ３２に表示される。その後、オペレータが検査番号ｋ＝１についての目視による判定結果をオペレータ入力操作装置３１により入力すると、検査番号ｋ＝１についての目視判定を終了しステップＡ４０へと進む。

ステップＡ４０では、目視判定が終了した検証番号ｋ＝１について、詳細を後述するオーバーライド（いわゆる自動制御の内容変更）の要否が確認される。検証番号ｋ＝１のオーバーライドは不要と判断した場合は、ステップＡ５０へと進み、オーバーライドが必要と判断した場合は、ステップＣ１０へと進む。
ステップＡ５０では、全ての検査内容について目視による判定が終了したか否かが確認される。目視による判定を最後に実施した検査番号がｋ＝ｎであれば、全ての検査内容についての目視判定が終了したものとして、ステップＡ６０へと進む。一方、目視による判定を最後に実施した検査番号がｋ≠ｎであれば、ステップＡ３０へと戻り、全ての検査内容の目視による判定が終了するまでステップＡ３０〜Ａ５０が繰返される（連続処理表示機能）。

ステップＡ６０では、全ての検査内容の目視判定が終了したことを受けて、自動検査データセットが目視による良否の判定結果に応じて、それぞれ良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに振り分けられて記憶される（検査データ一括保存機能）。
また、オペレータがオペレータ入力操作装置３１を操作することにより、目視判定結果への書換えが入力されると、良品判定データセット記憶部３５に記憶された良品判定データセットは、自動検査装置２の第二記憶部２５に出力され、第二記憶部２５の正常画像データセットがこの良品判定データセットに書換えられる。

その後、ステップＡ７０では、検査報告書作成部３７が、良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに記憶された目視判定の結果に基づいて検査報告書（レポート）を作成して、遠隔操作検査支援制御はリターンされる。

［任意選択処理表示機能］
また、本実施形態にかかる車載モニタ表示の検査装置１の遠隔操作検査支援装置３は、図４に示すような手順で作動し、「任意選択処理表示機能」を達成するようになっている。

前述のステップＡ１０において、「任意選択処理表示」が選択された場合はステップＢ１０に進む。
ステップＢ１０では、オペレータがオペレータ入力操作装置３１を操作することにより、検査番号ｋ＝１〜ｎの中から任意の検査番号の選択が行われる。例えば、オペレータが検査内容の中から、「バッテリ電圧」を特に検査したいと考えた場合は、この「バッテリ電圧」に対応する検査番号ｋ＝３が選択されることになる。

ステップＢ２０では、ステップＢ１０でオペレータによる任意の検査番号が選択されたことを受けて、検査支援制御部３３から自動検査装置２へと自動検査の指令が出力され、選択された検査番号についての検査内容が自動で検査される。例えば、検査番号ｋ＝３が選択された場合は、この検査番号ｋ＝３に対応する検査内容「バッテリ電圧」についての自動検査が実行されることになる。

その後、自動検査された検査番号，検査内容，操作パターン，撮像画像データ，処理画像データ，自動検査結果は自動検査データセットとして、遠隔操作検査支援装置３の自動検査結果記憶部３４に出力される。
ステップＢ３０では、自動検査結果記憶部３４に選択した検査番号についての自動検査データセットが記憶されたことを受けて、遠隔モニタ３２にこの自動検査データセットを表示することでオペレータの目視による判定が可能な状態になる。

具体的には、オペレータがオペレータ入力操作装置３１を操作することにより、目視判定の開始が入力されると、ステップＢ２０で選択された検査番号に対応する検査内容と、撮像画像データと、自動検査結果とが遠隔モニタ３２に表示される。その後、オペレータが目視による判定結果をオペレータ入力操作装置３１により入力すると、選択した検査番号についての目視判定を終了してステップＢ４０へと進む。

ステップＢ４０では、選択した検査番号について、詳細を後述するオーバーライド要否が確認される。選択した検査番号のオーバーライドは不要と判断した場合は、ステップＢ５０へと進み、オーバーライドが必要と判断した場合は、ステップＣ１０へと進む。
ステップＢ５０では、選択した検査番号について目視による判定が終了したことを受けて、他の検査番号についての更なる検査の要否が確認される。例えば、選択して目視判定を実施した検査番号がｋ＝３であれば、他の検査番号＝１，２等についても検査が必要か否かが確認される。特に他の検査番号の検査は必要ないと判断した場合は、ステップＢ６０へと進む。一方、検査番号ｋ＝３以外の他の検査番号について検査が必要と判断した場合は、その必要と判断した検査番号を選択するために、ステップＢ１０へと戻り、新たに選択した検証番号についてステップＢ１０〜Ｂ５０が繰り返し実行されることになる（任意選択処理表示機能）。

ステップＢ６０では、選択した全ての検査番号についての目視判定が終了したことを受けて、自動検査データセットが目視による良否の判定結果に応じて、それぞれ良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに振り分けられて記憶される。
また、オペレータがオペレータ入力操作装置３１を操作することにより、目視判定結果への書換えが入力されると、良品判定データセット記憶部３５に記憶された良品判定データセットは、自動検査装置２の第二記憶部２５に出力され、第二記憶部２５の正常画像データセットがこの良品判定データセットに書換えられる。

その後、ステップＢ７０では、検査報告書作成部３７が、良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに記憶された目視判定の結果に基づいて検査報告書を作成し、遠隔操作検査支援制御はリターンされる。

［オーバーライド機能］
次に、遠隔操作検査支援装置３の「オーバーライド機能」について説明する。
前述のステップＡ４０若しくは、ステップＢ４０で、オペレータが目視判定を実施した結果、現在設定されている操作パターン等について変更が必要と判断した場合は、ステップＣ１０のオーバーライド機能へと進む。

なお、ここでオペレータが現在の操作パターン等について設定の変更が必要と判断する場合とは、例えば、遠隔モニタ３２に表示された検査番号ｋに対応する撮像画像データと、検証番号ｋに対応する操作パターンによって表示されるべき良品画像とに齟齬があり、現在設定されている検証番号ｋの操作パターンに疑義が生じた場合や、遠隔モニタ３２に表示された検証番号ｋに対応する撮像画像データと車両状態模擬生成部２２の車両稼働状態を模擬生成するために設定された模擬生成パラメータ（操作レバーの操作量等）によって表示されるべき良品画像とに齟齬があり、現在設定されている模擬生成パラメータに疑義が生じた場合等をいう。

ステップＣ１０では、オペレータがオペレータ入力操作装置３１を操作することにより、目視による判定が一時中止される。
その後、ステップＣ２０では、オペレータがオペレータ入力操作装置３１を操作することにより、必要に応じて現在設定されている操作パターンや模擬生成パラメータを変更修正し、変更後の新たな操作パターンや模擬生成パラメータを自動検査装置２の第一記憶部２０に入力する。例えば、図３の検査要領書において、検査番号ｋ＝３の検査内容「バッテリ電圧」について、現在設定されている操作パターン「Ｂボタン→Ａボタン→Ａボタン」では、車載モニタ１０の画面１２に本来表示されるべき良品画像が表示されず、操作パターンを「Ａボタン→Ｂボタン→Ｃボタン→Ｃボタン」に変更すべき場合には、この新たな操作パターン「Ａボタン→Ｂボタン→Ｃボタン→Ｃボタン」を、オペレータ入力操作装置３１を操作して第一記憶部２０に入力する。

ステップＣ３０において、新たな操作パターンや模擬生成パラメータの設定が完了したことを確認すると、オーバーライド機能はリターンされる。すなわち、「連続処理表示」が選択されていた場合はＡ２０へと戻り、「任意選択処理表示」が選択されていた場合はステップＢ２０へと戻ることになる。

その後、新たに設定された新操作パターンや新模擬生成パラメータに基づいて、ステップＡ２０〜Ａ７０若しくは、ステップＢ２０〜Ｂ７０までの遠隔操作検査支援制御が再開されることになる。
なお、前記オーバーライド機能は、図４に示した処理中に要否が選択されるだけではなく、オペレータ入力操作装置３１により、オーバーライド機能のみ選択することもできる。

［作用・効果］
本実施形態に係る車載モニタ表示の検査装置１の遠隔操作検査支援装置３は、上述のように構成されているので、以下のような作用および効果を奏する。

すなわち、予め準備された検査要領書の操作パターンに従って操作ボタンＡ，Ｂ，Ｃが自動操作されることにより、車載モニタ１０の画面１２に表示された画像がＣＣＤカメラ１４により撮像され、自動検査装置２の自動検査部２４で良品画像と比較照合されることで自動検査される。その後、撮像された撮像画像データと自動検査結果とが遠隔操作検査支援装置３の遠隔モニタ３２に表示され、オペレータの目視による良否判定が可能となる。

したがって、自動検査では看過され得る検査の見落としや誤判定を、オペレータの目視による正確な判定により是正することができ、精度の高い良否判定を実現することができる。
また、自動検査結果記憶部３４に記憶された自動検査データセットは、オペレータの目視による良否判定がされた後に、その目視による判定結果に応じて、良品判定データセット記憶部３５と不良品判定データセット記憶部３６とに振り分けられて記憶される。

したがって、車載モニタ１０の出荷後に表示エラーが生じた場合など、事後的に問題箇所の再確認が必要となった場合には、この不良品判定データセット記憶部３６に保存された不良品判定データセットを重点的に再検査することで、表示エラー等の問題箇所の究明を図ることができる。
また、良品判定データセット記憶部３５に記憶された良品判定データセットは、自動検査装置２の第二記憶部２５に出力され、第二記憶部２５の正常画像データセットがこの良品判定データセットに書換えられる。

したがって、オペレータの目視による柔軟かつ精度の高い判定結果に基づいた良品判定データセットを、次に自動検査を実施する車載モニタ１０（次号機）の良品画像データとして利用でき、自動検査用の良品画像データ等の作成作業が低減されるとともに、次号機の自動検査部２４による自動検査の精度向上を図ることができる。
また、オペレータが「連続処理表示」を選択した場合は、検査番号ｋ＝１〜ｎについての全ての検査内容が、自動検査装置２により自動検査されて、自動検査データセットとして遠隔操作検査支援装置３の自動検査結果記憶部３４に出力される。その後、オペレータがオペレータ入力操作装置３１を操作すると、自動検査データセットが自動検査結果記憶部３４から遠隔モニタ３２に取込まれて順次表示されることで、オペレータによる目視判定が可能な状態になる。

したがって、オペレータは、自動検査装置２を設置した製造ライン等とは離隔したより好環境な管理室等で、自動検査結果記憶部３４に保存された自動検査データセットを、自動検査の実施時期に拘束されることなくフレキシブルに適宜遠隔モニタ３２に表示させて目視により判定できるため、自動検査と同時並行で目視判定を実施する必要がなくなり、オペレータの自由度を高めることができる。

また、オペレータが「任意選択処理表示」を選択した場合は、オペレータがオペレータ入力操作装置３１を操作することにより、検査番号ｋ＝１〜ｎの中から任意に選択した検査番号についての自動検査が行われ、自動検査データセットとして、遠隔操作検査支援装置３の自動検査結果記憶部３４に出力される。その後、オペレータがオペレータ入力操作装置３１を操作すると、選択された自動検査が終了した任意の検査番号についての自動検査データセットが、遠隔モニタ３２に表示されて目視判定が可能な状態になる。

したがって、画像が複雑で自動検査では誤判定を招く可能性が高い特定の検査番号等、特に重点的に検査を実施したい画像を、オペレータが任意に抽出して目視判定できるため、検査精度の更なる向上を図ることができる。
また、オペレータが目視による判定を実施した結果、現在設定されている操作パターンや模擬生成パラメータについて変更や修正が必要と判断した場合は、「オーバーライド機能」により、オペレータが必要に応じてその設定を変更修正し、変更後の新たな操作パターンや模擬生成パラメータに基づいて再検査が実施される。

したがって、操作パターンの変更や模擬生成パラメータの修正作業など、状況に応じたフレキシブルな検査が可能となるとともに、変更後の操作パターンや修正後の模擬生成パラメータで再度検査を行うことができるため、更なる検査精度の向上を図ることができる。

［その他］
以上、本発明の実施形態について説明したが、本発明は、上記実施形態に限定されず、本発明の趣旨を逸脱しない範囲で種々変形することが可能である。
例えば、上記実施形態においては、車載モニタ１０の操作ボタンＡ，Ｂ，Ｃは画面１２の下方に設置されているが、画面１２上に表示されるタッチパネル式の操作ボタン（アイコン）であってもよい。

また、上記実施形態においては、車載モニタ１０は建設機械に搭載されるものとして説明したが、搭載される車両は建設機械に限られず、例えば乗用車等の一般車両やトラック等の大型車両であってもよい。
また、検査対象は車載モニタ１０に表示される画像として説明したが、必ずしも車載モニタ１０の画像に限られず、例えば携帯電話や家電製品等の液晶モニタに表示される画像にも適用することができる。

また、図４において、オーバーライド機能は、ステップＣ３０で新たな操作パターンや模擬生成パラメータの設定が完了したことを確認すると、Ａ２０若しくは、ステップＢ２０へ戻るものとして説明したが、必ずしもＡ２０やＢ２０へ戻る必要はなく、ステップＡ１０に戻って「連続処理表示」若しくは、「任意選択処理表示」の選択を行わせるようにすることもできる。

１ 検査装置
２ 自動検査装置
３ 遠隔操作検査支援装置
４ モニタ画面撮像部（撮像手段）
１０ 車載モニタ（モニタ）
１４ ＣＣＤカメラ（撮像手段）
２０ 第一記憶部（操作パターン記憶手段）
２１ 操作パターン設定部
２２ 車両状態模擬生成部
２３ 画像処理部
２４ 自動検査部（自動検査手段）
２５ 第二記憶部（良品画像記憶手段）
２６ 操作模擬部
２７ センサ模擬部
２８ 故障模擬部
３１ オペレータ入力操作装置（入力手段）
３２ 遠隔モニタ（表示手段）
３３ 検査支援制御部（制御手段）
３４ 自動検査結果記憶部（記憶手段）
３５ 良品判定データセット記憶部（良品撮像画像記憶手段）
３６ 不良品判定データセット記憶部（不良品撮像画像記憶手段）

Claims (6)

1. モニタの画面に表示される画像を撮像画像として撮像する撮像手段と、
   前記モニタの画面に表示される良品な画像を良品画像として予め記憶した良品画像記憶手段と、
   前記撮像画像と前記良品画像とを比較照合することで自動検査する自動検査手段と、を有する自動検査装置の遠隔操作検査支援装置であって、
   前記撮像画像と、前記自動検査手段による自動検査結果とを記憶する記憶手段と、
   前記記憶手段に記憶された前記撮像画像と前記自動検査結果とを表示する表示手段と、
   前記表示手段に表示された前記撮像画像に基づいて、目視で行われる良否の判定結果を入力する入力手段と、
   前記入力手段により入力された良否の判定結果に応じて、良品と判定された前記撮像画像を良品撮像画像として記憶する良品撮像画像記憶手段と、
   前記入力手段への入力により、前記良品撮像画像記憶手段に記憶された前記良品撮像画像を前記良品画像記憶手段に出力するとともに、前記良品画像と置き換える制御を実施する制御手段と、を備えた
   ことを特徴とする自動検査装置の遠隔操作検査支援装置。
2. 前記入力手段により入力された良否の判定結果に応じて、不良品と判定された前記撮像画像を不良品撮像画像として記憶する不良品撮像画像記憶手段と、をさらに備える
   ことを特徴とする、請求項１記載の自動検査装置の遠隔操作検査支援装置。
3. 前記モニタが、画面に表示される画像を複数有するとともに、前記複数の画像が前記自動検査装置による検査対象として自動検査され、
   前記記憶手段が、前記複数の画像についての撮像画像と自動検査結果とを記憶するとともに、
   前記表示手段が、前記入力手段への入力に応じて、前記記憶手段に記憶された複数の撮像画像と自動検査結果とを予め定めた所定の順序で表示する
   ことを特徴とする、請求項１又は２のいずれか１項に記載の自動検査装置の遠隔操作検査支援装置。
4. 前記記憶手段が、前記入力手段への入力により、前記複数の画像から選択されて検査対象に設定された任意の画像の撮像画像と自動検査結果とを記憶し、
   前記表示手段が、前記入力手段への入力に応じて、前記記憶手段に記憶された撮像画像と自動検査結果とを表示する
   ことを特徴とする、請求項３記載の自動検査装置の遠隔操作検査支援装置。
5. 前記モニタに設けられ、前記画面に画像を表示させるための操作ボタンと、
   前記自動検査装置に設けられ、前記操作ボタンを操作する所定の操作パターンを予め記憶した操作パターン記憶手段と、をさらに備え、
   前記記憶手段が、前記操作ボタンを前記所定の操作パターンで操作したときに前記画面に表示された画像を前記撮像画像として記憶するとともに、
   前記制御手段が、前記入力手段への入力により、前記操作パターン記憶手段に記憶された前記操作パターンを異なる操作パターンに変更して記憶させる制御を実施する
   ことを特徴とする、請求項１〜４のいずれか１項に記載の自動検査装置の遠隔操作検査支援装置。
6. 前記モニタが、建設機械に搭載される車載モニタである
   ことを特徴とする、請求項１〜５のいずれか１項に記載の自動検査装置の遠隔操作検査支援装置。

Images