JP2022042796A - 情報処理装置及びプログラム - Google Patents

Abstract

【課題】アラートに対応する処理を効果的に自動化することができる情報処理装置及びプログラムを提供する。【解決手段】実施形態によれば、情報処理装置は、画像インターフェースと、入力インターフェースと、プロセッサと、を備える。画像インターフェースは、操作装置から画像を取得する。入力インターフェースは、前記操作装置に操作を入力する。プロセッサは、前記画像インターフェースを通じて取得した前記画像に対して文字認識処理を行い、前記文字認識処理の結果に基づいてアラートを検出し、前記入力インターフェースを通じて、検出された前記アラートに対応する処理を行うための操作信号を前記操作装置に入力する。【選択図】 図１

Description

本発明の実施形態は、情報処理装置及びプログラムを関する。

紙葉類処理装置などの処理装置は、エラーが生じた場合などに、操作装置を通じてアラートを出力することがある。オペレータは、出力されたアラートに対応する所定の処理を行うための操作を操作装置に入力する。

アラートに対応する処理を自動化するためには、ソフトウェアの修正又はインターフェースなどの機器の追加など、処理装置を改変する必要がある。

特開２０１５－９９９９９号公報

上記の課題を解決するため、アラートに対応する処理を効果的に自動化することができる情報処理装置及びプログラムを提供する。

実施形態によれば、情報処理装置は、画像インターフェースと、入力インターフェースと、プロセッサと、を備える。画像インターフェースは、操作装置から画像を取得する。入力インターフェースは、前記操作装置に操作を入力する。プロセッサは、前記画像インターフェースを通じて取得した前記画像に対して文字認識処理を行い、前記文字認識処理の結果に基づいてアラートを検出し、前記入力インターフェースを通じて、検出された前記アラートに対応する処理を行うための操作信号を前記操作装置に入力する。

図１は、第１の実施形態に係るアラートシステムの構成例を示すブロック図である。 図２は、第１の実施形態に係る操作装置の構成例を示すブロック図である。 図３は、第１の実施形態に係るＯＣＲ装置の構成例を示すブロック図である。 図４は、第１の実施形態に係るアラートテーブルの構成例を示す図である。 図５は、第１の実施形態に係るＯＣＲ装置の動作例を示す図である。 図６は、第１の実施形態に係るＯＣＲ装置の動作例を示す図である。 図７は、第１の実施形態に係るＯＣＲ装置の動作例を示す図である。 図８は、第１の実施形態に係るＯＣＲ装置の動作例を示すフローチャートである。 図９は、第２の実施形態に係るＯＣＲ装置の動作例を示すフローチャートである。

以下、実施形態について、図面を参照して説明する。
（第１の実施形態）
まず、第１の実施形態について説明する。
実施形態に係るアラートシステムは、処理装置に関するアラートを処理する。アラートシステムは、アラートを検出すると、アラートに対応する処理を特定する。アラートシステムは、特定された処理を実行する。

図１は、実施形態に係るアラートシステム１の構成例を示す。図１が示すように、アラートシステム１は、処理装置２、表示端末３、エミュレータ４、キャプチャボード５、通信端末６、表示端末７、操作端末８、操作装置１０及びＯＣＲ装置２０などを備える。

操作装置１０は、処理装置２、表示端末３、エミュレータ４及びキャプチャボード５に接続する。ＯＣＲ装置２０は、エミュレータ４、キャプチャボード５、通信端末６、表示端末７及び操作端末８と接続する。

なお、アラートシステム１は、図１が示すような構成の他に必要に応じた構成をさらに具備したり、アラートシステム１から特定の構成が除外されたりしてもよい。

処理装置２は、所定の処理を行う装置である。処理装置２は、操作装置１０からの制御に従って動作する。また、処理装置２は、種々の情報を操作装置１０に表示させる。ここでは、処理装置２は、エラーが発生すると、アラートを操作装置１０に表示させる。

たとえば、処理装置２は、紙葉類処理装置である。また、処理装置２は、たとえば、処理装置２は、郵便又は荷物などを区分する区分機であってもよい。

操作装置１０は、処理装置２を制御するための操作の入力を受け付ける。たとえば、操作装置１０は、キーボード又はマウスなどの操作装置を通じてオペレータからの操作の入力を受け付けることができる。

また、操作装置１０は、処理装置２からの種々の情報を表示する。操作装置１０は、表示端末３及びキャプチャボード５に対して、種々の情報を含む画像（表示画像）を供給する。たとえば、操作装置１０は、スプリッタなどを通じて、表示端末３及びキャプチャボード５に画像を供給する。
操作装置１０については、後に詳述する。

表示端末３は、操作装置１０からの制御に従って画像を表示する。即ち、表示端末３は、操作装置１０からの供給される画像（画像データ）を表示する。たとえば、表示端末３は、液晶モニタなどである。

エミュレータ４は、操作装置１０に接続するキーボード又はマウスなどの操作端末をエミュレーションする。エミュレータ４は、ＯＣＲ装置２０からの制御に従ってオペレータが操作端末を通じて入力する操作信号と同様の操作信号を操作装置１０に供給する。たとえば、エミュレータ４は、マウスの移動若しくはクリック、又は、キーボード入力などを示す操作信号を操作装置１０に供給する。

キャプチャボード５は、操作装置１０が供給する画像（表示画像）を取得する。キャプチャボード５は、取得された表示画像をＯＣＲ装置２０に供給する。

通信端末６は、外部装置とデータを送受信するためのインターフェースである。たとえば、通信端末６は、オペレータが所持する装置又はオペレータが目視している装置などとデータを送受信する。たとえば、通信端末６は、有線又は無線のＬＡＮ（Local Area Network）接続をサポートする。

表示端末７は、ＯＣＲ装置２０からの制御に従って情報を表示する。即ち、表示端末７は、ＯＣＲ装置２０からの供給される情報を表示する。たとえば、表示端末７は、液晶モニタなどである。また、表示端末７は、ＬＥＤ（Light Emitting Diode）などのランプから構成されるものであってもよい。

操作端末８は、オペレータから種々の操作の入力を受け付ける。操作端末８は、入力された操作を示す信号をＯＣＲ装置２０へ送信する。操作端末８は、キーボード又はマウスなどから構成される。

ＯＣＲ装置２０（情報処理装置）は、キャプチャボード５からの表示画像に対してＯＣＲ（Optical Character Recognition）処理（文字認識処理）を行う。ＯＣＲ装置２０は、ＯＣＲ処理の結果に基づいてアラートを検出する。また、ＯＣＲ装置２０は、検出されたアラートに対応する処理を実行する。即ち、ＯＣＲ装置２０は、エミュレータ４を用いてアラートに対応する処理を行うための操作信号を操作装置１０に入力する。ＯＣＲ装置２０については、後に詳述する。

次に、操作装置１０について説明する。
図２は、実施形態に係る操作装置１０の構成例を示す。図２は、操作装置１０の構成例を示すブロック図である。図２が示すように、操作装置１０は、プロセッサ１１、ＲＯＭ１２、ＲＡＭ１３、ＮＶＭ１４、通信部１５、表示インターフェース１６及び操作インターフェース１７などを備える。

プロセッサ１１と、ＲＯＭ１２、ＲＡＭ１３、ＮＶＭ１４、通信部１５、表示インターフェース１６及び操作インターフェース１７と、は、データバスなどを介して互いに接続する。
なお、操作装置１０は、図２が示すような構成の他に必要に応じた構成を具備したり、操作装置１０から特定の構成が除外されたりしてもよい。

プロセッサ１１は、操作装置１０全体の動作を制御する機能を有する。プロセッサ１１は、内部キャッシュ及び各種のインターフェースなどを備えてもよい。プロセッサ１１は、内部メモリ、ＲＯＭ１２又はＮＶＭ１４が予め記憶するプログラムを実行することにより種々の処理を実現する。

なお、プロセッサ１１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ１１は、ハードウエア回路により実行される機能を制御する。

ＲＯＭ１２は、制御プログラム及び制御データなどが予め記憶された不揮発性のメモリである。ＲＯＭ１２に記憶される制御プログラム及び制御データは、操作装置１０の仕様に応じて予め組み込まれる。

ＲＡＭ１３は、揮発性のメモリである。ＲＡＭ１３は、プロセッサ１１の処理中のデータなどを一時的に格納する。ＲＡＭ１３は、プロセッサ１１からの命令に基づき種々のアプリケーションプログラムを格納する。また、ＲＡＭ１３は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。

ＮＶＭ１４は、データの書き込み及び書き換えが可能な不揮発性のメモリである。たとえば、ＮＶＭ１４は、たとえば、ＨＤＤ、ＳＳＤ又はフラッシュメモリなどから構成される。ＮＶＭ１４は、操作装置１０の運用用途に応じて制御プログラム、アプリケーション及び種々のデータなどを格納する。

通信部１５は、処理装置２とデータを送受信するためのインターフェースである。たとえば、通信部１５は、有線又は無線のＬＡＮ接続をサポートするインターフェースである。

表示インターフェース１６は、表示端末３及びキャプチャボード５とデータを送受信するインターフェースである。表示インターフェース１６は、プロセッサ１１からの制御に従って、表示画像を表示端末３及びキャプチャボード５に送信する。

操作インターフェース１７は、操作の入力を受け付ける入力装置とデータを送受信するためのインターフェースである。たとえば、操作インターフェース１７は、キーボード又はマウスなどの操作端末に入力される操作を示す操作信号を受信する。操作インターフェース１７は、受信された操作信号をプロセッサ２１に供給する。たとえば、操作インターフェース１７は、ＵＳＢ（Universal Serial Bus）接続をサポートする。

ここでは、操作インターフェース１７は、エミュレータ４に接続する。即ち、操作インターフェース１７は、エミュレータ４からの操作信号を受信する。
たとえば、操作装置１０は、デスクトップＰＣ又はノートＰＣなどである。

操作装置１０のプロセッサ１１は、処理装置２からの信号に基づいてアラートが表示される表示画像を表示端末３及びキャプチャボード５に出力する。たとえば、プロセッサ１１は、処理装置２からの信号に基づいて処理装置２に生じたエラーなどを特定する。プロセッサ１１は、特定されたエラーに対応するアラートが表示される表示画像を出力する。

また、プロセッサ１１は、操作インターフェース１７に入力される操作信号に基づいて処理装置２を制御する。たとえば、プロセッサ１１は、処理装置２に対してリセット、一時停止又は停止などの処理を行う。なお、プロセッサ１１が処理装置２に対して行う処理は、特定の構成に限定されるものではない。

次に、ＯＣＲ装置２０について説明する。
図３は、実施形態に係るＯＣＲ装置２０の構成例を示す。図３は、ＯＣＲ装置２０の構成例を示すブロック図である。図３が示すように、ＯＣＲ装置２０は、プロセッサ２１、ＲＯＭ２２、ＲＡＭ２３、ＮＶＭ２４、エミュレータインターフェース２５、画像インターフェース２６、通信インターフェース２７、表示インターフェース２８及び操作インターフェース２９などを備える。

プロセッサ２１と、ＲＯＭ２２、ＲＡＭ２３、ＮＶＭ２４、エミュレータインターフェース２５、画像インターフェース２６、通信インターフェース２７、表示インターフェース２８及び操作インターフェース２９と、は、データバスなどを介して互いに接続する。
なお、ＯＣＲ装置２０は、図３が示すような構成の他に必要に応じた構成を具備したり、ＯＣＲ装置２０から特定の構成が除外されたりしてもよい。

プロセッサ２１は、ＯＣＲ装置２０全体の動作を制御する機能を有する。プロセッサ２１は、内部キャッシュ及び各種のインターフェースなどを備えてもよい。プロセッサ２１は、内部メモリ、ＲＯＭ２２又はＮＶＭ２４が予め記憶するプログラムを実行することにより種々の処理を実現する。

なお、プロセッサ２１がプログラムを実行することにより実現する各種の機能のうちの一部は、ハードウエア回路により実現されるものであってもよい。この場合、プロセッサ２１は、ハードウエア回路により実行される機能を制御する。

ＲＯＭ２２は、制御プログラム及び制御データなどが予め記憶された不揮発性のメモリである。ＲＯＭ２２に記憶される制御プログラム及び制御データは、ＯＣＲ装置２０の仕様に応じて予め組み込まれる。

ＲＡＭ２３は、揮発性のメモリである。ＲＡＭ２３は、プロセッサ２１の処理中のデータなどを一時的に格納する。ＲＡＭ２３は、プロセッサ２１からの命令に基づき種々のアプリケーションプログラムを格納する。また、ＲＡＭ２３は、アプリケーションプログラムの実行に必要なデータ及びアプリケーションプログラムの実行結果などを格納してもよい。

ＮＶＭ２４（記憶部）は、データの書き込み及び書き換えが可能な不揮発性のメモリである。たとえば、ＮＶＭ２４は、たとえば、ＨＤＤ、ＳＳＤ又はフラッシュメモリなどから構成される。ＮＶＭ２４は、ＯＣＲ装置２０の運用用途に応じて制御プログラム、アプリケーション及び種々のデータなどを格納する。

ＮＶＭ２４は、各アラートに対応する処理を示すアラートテーブルを格納する。アラートテーブルについては、後述する。

エミュレータインターフェース２５（入力インターフェース）は、エミュレータ４とデータを送受信するインターフェースである。エミュレータインターフェース２５は、プロセッサ２１からの制御に従ってエミュレータ４に操作信号を操作装置１０へ出力させる。たとえば、エミュレータインターフェース２５は、ＵＳＢ接続をサポートする。

画像インターフェース２６は、キャプチャボード５とデータを送受信するインターフェースである。画像インターフェース２６は、キャプチャボード５から表示画像を取得する。画像インターフェース２６は、取得された表示画像をプロセッサ２１に供給する。

通信インターフェース２７は、通信端末６とデータを送受信するインターフェースである。通信インターフェース２７は、プロセッサ２１からの制御に従って通信端末６に外部装置とデータを送受信させる。

表示インターフェース２８は、表示端末７とデータを送受信するインターフェースである。表示インターフェース２８は、プロセッサ１１からの制御に従って、表示端末７に情報を表示させる。

操作インターフェース２９は、操作端末８とデータを送受信するインターフェースである。操作インターフェース２９は、操作端末８に入力される操作を示す操作信号を受信する。操作インターフェース２９は、受信された操作信号をプロセッサ２１に供給する。たとえば、操作インターフェース２９は、ＵＳＢ接続をサポートする。

たとえば、ＯＣＲ装置２０は、デスクトップＰＣ又はノートＰＣなどである。
なお、エミュレータインターフェース２５、画像インターフェース２６、通信インターフェース２７、表示インターフェース２８及び操作インターフェース２９（又はこれらの一部）は、一体的に形成されるものであってもよい。

次に、アラートテーブルについて説明する。
前述の通り、アラートテーブルは、各アラートに対応する処理を示す。

図４は、アラートテーブルの構成例を示す。図４が示すように、アラートテーブルは、「アラートコード」、「内容」及び「対処法」を対応付けて格納する。

「アラートコード」は、処理装置２に関するアラートを特定するコードである。ここでは、「アラートコード」は、テキスト及び数値から構成される。なお、「アラートコード」は、テキスト、数値、記号又はそれらの組合せから構成されるものであってもよい。

「内容」は、対応する「アラートコード」が特定するアラートの内容を示す。たとえば、「内容」は、エラーが生じた原因を示す。たとえば、「内容」は、「印刷部接続エラー」又は「サーマル異常」などである。

「対処法」は、対応する「アラートコード」が特定するアラートに対応する処理を示す。たとえば、「対処法」は、「Ｐｒｉｎｔ画像でリセット実施」又は「一時停止」などである。

次に、ＯＣＲ装置２０が実現する機能について説明する。ＯＣＲ装置２０が実現する機能は、プロセッサ２１がＲＯＭ２２又はＮＶＭ２４などに格納されるプログラムを実行することで実現される。

まず、プロセッサ２１は、キャプチャボード５を用いて操作装置１０が供給する画像（表示画像）を取得する機能を有する。
即ち、プロセッサ２１は、操作装置１０が表示端末３に表示させる画像を取得する。

プロセッサ２１は、画像インターフェース２６を通じてキャプチャボード５に表示画像を取得させる。キャプチャボード５は、プロセッサ２１からの制御に従って表示画像を取得する。キャプチャボード５は、画像インターフェース２６を通じて、取得された表示画像をプロセッサ２１に供給する。

たとえば、プロセッサ２１は、所定の間隔（たとえば、１秒）で表示画像を取得する。また、プロセッサ２１は、表示画像に変化が生じた場合に、表示画像を取得してもよい。この場合、プロセッサ２１は、画像処理アルゴリズムなどに従って表示画像に変化が生じたかを判定してもよい。

また、プロセッサ２１は、ＯＣＲ処理によりアラートを検出する機能を有する。
図５は、プロセッサ２１がアラートを検出する動作例を説明するための図である。図５は、表示画像３０を示す。図５が示す例では、表示画像３０は、Ｍａｉｎ画像を表示する。

表示画像３０は、表示領域３１を含む。
表示領域３１は、アラートが表示される領域である。即ち、処理装置２にエラーが生じると、操作装置１０のプロセッサ１１は、表示領域３１にアラートを表示する。

表示領域３１は、アラートとして、アラートを示すアラートコードとアラートの内容とを表示する。ここでは、表示領域３１は、アラートコードとしての「ＡＲＴ００１」及びアラートの内容としての「印刷部接続エラー」を表示する。

プロセッサ２１は、表示画像３０に対してＯＣＲ処理を行う。
たとえば、ＮＶＭ２４は、アラートが表示される領域として、表示領域３１を示す位置（たとえば、頂点の座標など）を格納する。プロセッサ２１は、ＮＶＭ２４を参照して、表示領域３１の位置を取得する。

プロセッサ２１は、取得された位置が示す領域（即ち、表示領域３１）に対してＯＣＲ処理を行う。プロセッサ２１は、ＯＣＲ処理の結果として、表示領域３１に記載されている文字列を取得する。

文字列を取得すると、プロセッサ２１は、取得された文字列に基づいてアラートを検出する。たとえば、プロセッサ２１は、アラートデータベースが示す「アラートコード」の少なくとも１つが、取得された文字列に含まれているかを判定する。「アラートコード」の少なくとも１つが、取得された文字列に含まれていると判定すると、アラートが出力されていると判定する。また、「アラートコード」のいずれも、取得された文字列に含まれていないと判定すると、アラートが出力されていないと判定する。

なお、プロセッサ２１は、アラートデータベースが示す「内容」の少なくとも１つが、取得された文字列に含まれているかを判定してもよい。「内容」の少なくとも１つが、取得された文字列に含まれていると判定すると、アラートが出力されていると判定する。また、「内容」のいずれも、取得された文字列に含まれていないと判定すると、アラートが出力されていないと判定する。

また、プロセッサ２１は、「アラートコード」又は「内容」のいずれかが、取得された文字列に含まれているかを判定してもよい。プロセッサ２１が取得された文字列に基づいてアラートを検出する方法は、特定の方法に限定されるものではない。
図５が示す例では、プロセッサ２１は、「ＡＲＴ００１」のアラートを検出する。

また、プロセッサ２１は、アラートを検出すると、アラートが出力されていることを報知する機能を有する。
たとえば、プロセッサ２１は、アラートを検出すると、通信端末６を通じて外部装置へアラートが出力されていることを示す信号を送信する。なお、プロセッサ２１は、通信端末６を通じて外部装置へアラートを特定する信号を送信してもよい。

また、プロセッサ２１は、表示端末７にアラートが出力されていることを示す情報を表示してもよい。表示端末７が画像を表示する端末である場合、プロセッサ２１は、アラートが出力されていること又はアラートを特定する情報などを表示端末７に表示する。また、表示端末７がランプである場合、プロセッサ２１は、表示端末７を点灯又は点滅させてもよい。
なお、プロセッサ２１がアラートを報知する方法は、特定の方法に限定されるものではない。

また、プロセッサ２１は、検出されたアラートに対応する処理を行う機能を有する。
アラートを検出すると、プロセッサ２１は、アラートテーブルを参照して、アラートに対応する処理を特定する。即ち、プロセッサ２１は、検出されたアラートを示す「アラートコード」又は検出されたアラートの「内容」に対応する「対処法」を取得する。

ここでは、図５が示す例では、プロセッサ２１は、「ＡＲＴ００１」のアラートに対応する「対処法」として「Ｐｒｉｎｔ画像でリセット実施」を取得する。
プロセッサ２１は、アラートテーブルが示す「対処法」に基づく処理を行う。

「対処法」を取得すると、プロセッサ２１は、取得された「対処法」に基づく処理を行う。ここでは、プロセッサ２１は、「対処法」として「Ｐｒｉｎｔ画像でリセット実施」を取得する。

次に、「対処法」として「Ｐｒｉｎｔ画像でリセット実施」を取得した場合におけるプロセッサ２１の動作例について説明する。

まず、プロセッサ２１は、図５が示す表示画像３０においてポインタ３２の位置（たとえば、座標）を特定する。ポインタ３２は、表示画像３０上で入力位置を示すカーソルである。ポインタ３２は、マウスの操作に合わせて表示画像３０上を移動する。

たとえば、プロセッサ２１は、所定の画像処理アルゴリズムを用いて、ポインタ３２の位置を特定する。

ポインタ３２の位置を特定すると、プロセッサ２１は、アイコン３３の位置（たとえば、座標）を特定する。アイコン３３は、Ｐｒｉｎｔ画像に遷移するためのアイコンである。

プロセッサ２１は、所定の画像処理アルゴリズムを用いて、アイコン３３の位置を特定してもよい。また、ＮＶＭ２４は、アイコン３３の位置を予め格納するものであってもよい。この場合、プロセッサ２１は、ＮＶＭ２４を参照してアイコン３３の位置を特定する。

アイコン３３の位置を特定すると、プロセッサ２１は、ポインタ３２をアイコン３３上に移動させる。たとえば、プロセッサ２１は、ポインタ３２の位置とアイコン３３の位置とに基づいてポインタ３２の移動方向及び移動量を算出する。ポインタ３２の移動方向及び移動量を算出すると、プロセッサ２１は、エミュレータ４を用いて、算出された移動方向及び移動量に基づく操作信号を操作装置１０に入力する。即ち、操作信号は、当該移動方向に当該移動量、ポインタ３２を移動させる信号である。

ポインタ３２をアイコン３３上に移動させると、プロセッサ２１は、エミュレータ４を用いて、アイコン３３をクリックする操作信号（マウスをクリックする操作信号）を操作装置１０に入力する。

操作装置１０のプロセッサ１１は、操作インターフェース１７を通じて当該操作信号の入力を受け付けると、Ｍａｉｎ画像からＰｒｉｎｔ画像に遷移する。

図６は、Ｐｒｉｎｔ画像を表示する表示画像３０の例を示す。図６が示す例では、表示画像３０は、「１．状態」、「２．リセット」又は「３．終了」の入力を受け付ける。

プロセッサ２１は、図６が示す表示画像３０において、処理装置２をリセットする操作信号を操作装置１０に入力する。たとえば、プロセッサ２１は、エミュレータ４を用いて、キーボードに「２」を打鍵した操作信号を操作装置１０に入力する。当該操作信号を操作装置１０に入力すると、プロセッサ２１は、エミュレータ４を用いて、キーボードに「エンター」を打鍵した操作信号を操作装置１０に入力する。

図７は、処理装置２のリセット後における表示画像３０の例を示す。
プロセッサ２１は、図７が示す表示画像３０においてアラートが消失したかを判定する。即ち、プロセッサ２１は、表示領域３１に対してＯＣＲ処理を行うことでアラートを検出する。図７が示すように、表示領域３１には、アラートが表示されていない。プロセッサ２１は、アラートが検出できないため、アラートが消失したと判定する。

アラートが消失したと判定すると、プロセッサ２１は、図７が示す表示画像３０においてポインタ３２の位置を特定する。たとえば、プロセッサ２１は、所定の画像処理アルゴリズムを用いて、ポインタ３２の位置を特定する。

ポインタ３２の位置を特定すると、プロセッサ２１は、アイコン３４の位置（たとえば、座標）を特定する。アイコン３４は、Ｍａｉｎ画像に遷移するためのアイコンである。

プロセッサ２１は、所定の画像処理アルゴリズムを用いて、アイコン３４の位置を特定してもよい。また、ＮＶＭ２４は、アイコン３４の位置を予め格納するものであってもよい。この場合、プロセッサ２１は、ＮＶＭ２４を参照してアイコン３４の位置を特定する。

アイコン３４の位置を特定すると、プロセッサ２１は、ポインタ３２をアイコン３４上に移動させる。たとえば、プロセッサ２１は、ポインタ３２の位置とアイコン３４の位置とに基づいてポインタ３２の移動方向及び移動量を算出する。ポインタ３２の移動方向及び移動量を算出すると、プロセッサ２１は、エミュレータ４を用いて、算出された移動方向及び移動量に基づく操作信号を操作装置１０に入力する。即ち、操作信号は、当該移動方向に当該移動量、ポインタ３２を移動させる信号である。

ポインタ３２をアイコン３４上に移動させると、プロセッサ２１は、エミュレータ４を用いて、アイコン３４をクリックする操作信号（マウスをクリックする操作信号）を操作装置１０に入力する。

図７が示す表示画像３０においてアラートが消失していないと判定すると、プロセッサ２１は、エラーを報知する。たとえば、プロセッサ２１は、通信端末６を通じて、アラートが継続していることを示す信号を外部装置に送信する。また、プロセッサ２１は、アラートが継続していることを示す情報を表示端末７に表示する。なお、プロセッサ２１がエラーを報知する方法は、特定の方法に限定されるものではない。

次に、ＯＣＲ装置２０の動作例について説明する。
図８は、ＯＣＲ装置２０の動作例について説明するためのフローチャートである。
まず、プロセッサ２１は、キャプチャボード５を通じて表示画像３０を取得する（Ｓ１１）。表示画像を取得すると、プロセッサ２１は、表示画像３０の表示領域３１に対してＯＣＲ処理を行う（Ｓ１２）。

ＯＣＲ処理を行うと、プロセッサ２１は、ＯＣＲ処理の結果に基づいてアラートが出力されているかを判定する（Ｓ１３）。アラートが出力されていると判定すると（Ｓ１３、ＹＥＳ）、プロセッサ２１は、アラートが出力されていることを報知する（Ｓ１４）。

アラートが出力されていることを報知すると、プロセッサ２１は、出力されているアラートに対応する「対処法」を特定する（Ｓ１５）。「対処法」を特定すると、プロセッサ２１は、特定された「対処法」に基づいてアラートに対応する処理を行う（Ｓ１６）。

アラートに対応する処理を行うと、プロセッサ２１は、表示画像３０の表示領域３１に対してＯＣＲ処理を行う（Ｓ１７）。ＯＣＲ処理を行うと、プロセッサ２１は、ＯＣＲ処理の結果に基づいてアラートが消失したかを判定する（Ｓ１８）。

アラートが出力されていないと判定した場合（Ｓ１３、ＮＯ）、又は、アラートが消失したと判定した場合（Ｓ１８、ＹＥＳ）、プロセッサ２１は、Ｓ１１に戻る。

アラートが消失していないと判定すると（Ｓ１８、ＮＯ）、プロセッサ２１は、エラーを報知する（Ｓ１９）。エラーを報知すると、プロセッサ２１は、動作を終了する。

なお、プロセッサ２１は、Ｓ１４を実行しなくともよい。即ち、プロセッサ２１は、アラートを報知しなくともよい。

また、プロセッサ２１は、エミュレータ４の機能を実現するものであってもよい。たとえば、プロセッサ２１は、ＮＶＭ２４などが格納するプログラムを実行することでエミュレータ４の機能を実現する。

また、ＯＣＲ装置２０は、エミュレータ４、キャプチャボード５、通信端末６、表示端末７及び操作端末８と一体的に形成されるものであってもよい。
また、アラートシステム１は、複数の操作装置１０を備えてもよい。また、ＯＣＲ装置２０は、複数の操作装置１０と接続するものであってもよい。

以上のように構成されたＯＣＲ装置は、処理装置を制御する操作装置が出力する表示画像を取得する。ＯＣＲ装置は、取得された表示画像からアラートを検出する。ＯＣＲ装置は、検出されたアラートに対応する処理を行うための操作信号を操作装置に入力する。その結果、ＯＣＲ装置は、処理装置及び操作装置を改変することなく、処理装置からのアラートに対する処理を自動化することができる。
（第２の実施形態）
次に、第２の実施形態について説明する。
第２の実施形態に係るアラートシステム１は、ＯＣＲ装置がセカンダリＯＣＲを行う点で第１の実施形態に係るそれと異なる。従って、その他の点については、同一の符号を付して詳細な説明を省略する。

ここでは、処理装置２は、郵便物又は荷物などの物品をシュータなどに区分する区分機である。処理装置２は、カメラを用いて、物品の宛先面（宛先が記載されている面）を撮影する。宛先面を撮影すると、処理装置２は、所定のアルゴリズム（第１のアルゴリズム）に従って宛先面が写る画像（宛先画像）にＯＣＲ（プライマリＯＣＲ）処理を行う。

ＯＣＲ処理を行うと、処理装置２は、ＯＣＲ処理の結果に基づいて物品の宛先面に記載されている宛先を取得する。宛先を取得すると、処理装置２は、取得された宛先に基づいて物品を区分する。

ＯＣＲ処理に失敗して宛先を取得できない場合、処理装置２は、宛先画像を操作装置１０に送信する。

後述するように、操作装置１０は、宛先画像に含まれる宛先面に記載された宛先を処理装置２に送信する。
処理装置２は、ＯＣＲ装置２０から宛先を取得する。宛先を取得すると、処理装置２は、取得された宛先に基づいて物品を区分する。

次に、操作装置１０について説明する。
操作装置１０は、ＶＣＳ（Video Coding System）である。
操作装置１０のプロセッサ１１は、処理装置２から宛先面を含む宛先画像を取得する。前述の通り、処理装置２は、ＯＣＲ処理に失敗すると、宛先画像を操作装置１０に送信する。プロセッサ１１は、通信部１５を通じて処理装置２から宛先画像を取得する。

宛先画像を取得すると、プロセッサ１１は、宛先画像に写る宛先の入力を受け付ける表示画像を生成する。表示画像は、取得された宛先画像を含む。

表示画像を生成すると、プロセッサ１１は、表示インターフェース１６を通じて、生成された表示画像を表示端末３及びキャプチャボード５に出力する。

表示画像を出力すると、プロセッサ１１は、操作インターフェース１７を通じて宛先の入力を受け付ける。プロセッサ１１は、操作インターフェース１７を通じて、操作部が接続されている場合と同様の信号（キー入力操作を示す操作信号）をエミュレータ４から取得する。

プロセッサ１１は、操作インターフェース１７を通じて入力が確定する操作信号（たとえば、エンターキーが押された操作信号など）を受信すると、通信部１５を通じて入力された宛先を処理装置２に送信する。

次に、ＯＣＲ装置２０が実現する機能について説明する。ＯＣＲ装置２０が実現する機能は、プロセッサ２１がＲＯＭ２２又はＮＶＭ２４などに格納されるプログラムを実行することで実現される。

ＯＣＲ装置２０は、第１の実施形態に係るＯＣＲ装置２０が実現する機能に加えて以下の機能を実現する。

プロセッサ２１は、ＯＣＲ（セカンダリＯＣＲ）処理により表示画像から宛先を取得する機能を有する。

表示画像を取得すると、プロセッサ２１は、予め取得されたフォーマットなどに従って表示画像から宛先画像を抽出する。
宛先画像を抽出すると、プロセッサ２１は、第１のアルゴリズムとは異なる所定のアルゴリズム（第２のアルゴリズム）に従って宛先画像にＯＣＲ処理を行う。第２のアルゴリズムは、第１のアルゴリズムが認識できない文字画像の少なくとも一部を認識することができる。

ＯＣＲ処理を行うと、プロセッサ２１は、ＯＣＲ処理の結果に基づいて物品の宛先面に記載されている宛先を取得する。

なお、プロセッサ２１は、ＯＣＲ処理を行う前に、表示画像又は宛先画像に所定の処理を行ってもよい。たとえば、プロセッサ２１は、表示画像又は宛先画像を拡大又は縮小してもよい。また、プロセッサ２１は、表示画像又は宛先画像に対してノイズを除去する処理などを行ってもよい。

また、プロセッサ２１は、エミュレータ４を用いて、ＯＣＲ処理により取得された宛先を操作装置１０に入力する機能を有する。

ＯＣＲ処理により宛先を取得すると、プロセッサ２１は、エミュレータ４を用いて、宛先を操作装置１０の操作インターフェース１７に入力する。即ち、プロセッサ２１は、宛先を入力するキー入力操作を示す操作信号を操作インターフェース１７に入力する。

また、プロセッサ２１は、宛先の入力を完了する操作を示す操作信号を操作インターフェース１７に入力してもよい。

また、プロセッサ２１は、ＯＣＲ処理に失敗した場合、操作端末８に入力された操作を示す操作信号を操作装置１０に入力する機能を有する。

ＯＣＲ処理に失敗した場合、プロセッサ２１は、操作装置１０からの表示画像を表示端末７に表示する。表示画像を表示端末７に表示すると、プロセッサ２１は、操作端末８への入力を受け付ける。

ここで、オペレータは、表示端末７に表示される表示画像の画像領域を目視して宛先を操作端末８に入力する。宛先の入力が完了すると、オペレータは、操作端末８に、入力を完了する操作を入力する。

操作端末８への入力を受け付けると、プロセッサ２１は、エミュレータ４を用いて、入力された操作を示す操作信号を操作インターフェース１７に入力する。

また、プロセッサ２１は、表示端末７に表示画像を更新してもよい。即ち、プロセッサ２１は、画像インターフェース２６から表示画像をリアルタイムで取得し表示端末７に表示する。

また、プロセッサ２１は、宛先画像へのＯＣＲ処理及び宛先の入力を行っていない間にアラートを検出する。たとえば、プロセッサ２１は、所定のアルゴリズムに従って表示画像が宛先の入力を受け付ける画像であるかを判定する。

表示画像が宛先の入力を受け付ける画像であると判定すると、プロセッサ２１は、宛先画像へのＯＣＲ処理及び宛先の入力を行う。
表示画像が宛先の入力を受け付ける画像でないと判定すると、プロセッサ２１は、アラートを検出する。

次に、ＯＣＲ装置２０の動作例について説明する。
図９は、ＯＣＲ装置２０の動作例について説明するためのフローチャートである。
まず、プロセッサ２１は、キャプチャボード５を通じて表示画像３０を取得する（Ｓ２１）。表示画像３０を取得すると、プロセッサ２１は、表示画像３０が宛先の入力を受け付ける画像であるかを判定する（Ｓ２２）。

表示画像３０が宛先の入力を受け付ける画像であると判定すると（Ｓ２２、ＹＥＳ）、プロセッサ２１は、表示画像３０に写る宛先画像に対してＯＣＲ処理を行うことで宛先を取得する（Ｓ２３）。宛先を取得すると、プロセッサ２１は、エミュレータ４を用いて、取得された宛先を入力するための操作信号を操作装置１０に入力する（Ｓ２４）。
操作信号を操作装置１０に入力すると、プロセッサ２１は、Ｓ２１に戻る。

表示画像３０が宛先の入力を受け付ける画像でないと判定すると（Ｓ２２、ＹＥＳ）、プロセッサ２１は、表示画像３０の表示領域３１に対してＯＣＲ処理を行う（Ｓ２５）。

ＯＣＲ処理を行うと、プロセッサ２１は、ＯＣＲ処理の結果に基づいてアラートが出力されているかを判定する（Ｓ２６）。アラートが出力されていると判定すると（Ｓ２６、ＹＥＳ）、プロセッサ２１は、アラートが出力されていることを報知する（Ｓ２７）。

アラートが出力されていることを報知すると、プロセッサ２１は、出力されているアラートに対応する「対処法」を特定する（Ｓ２８）。「対処法」を特定すると、プロセッサ２１は、特定された「対処法」に基づいてアラートに対応する処理を行う（Ｓ２９）。

アラートに対応する処理を行うと、プロセッサ２１は、表示画像３０の表示領域３１に対してＯＣＲ処理を行う（Ｓ３０）。ＯＣＲ処理を行うと、プロセッサ２１は、ＯＣＲ処理の結果に基づいてアラートが消失したかを判定する（Ｓ３１）。

アラートが出力されていないと判定した場合（Ｓ２６、ＮＯ）、又は、アラートが消失したと判定した場合（Ｓ３１、ＹＥＳ）、プロセッサ２１は、Ｓ２１に戻る。

アラートが消失していないと判定すると（Ｓ３１、ＮＯ）、プロセッサ２１は、エラーを報知する（Ｓ３２）。エラーを報知すると、プロセッサ２１は、動作を終了する。

なお、プロセッサ２１は、Ｓ２３でＯＣＲ処理に失敗した場合、エミュレータ４を用いて、操作端末８に入力される操作信号に対応する操作信号を操作装置１０に送信する。

以上のように構成されたＯＣＲ装置は、操作装置からの宛先画像に対してセカンダリＯＣＲ処理を行う。ＯＣＲ装置は、処理結果に基づいて宛先を操作装置に入力する。また、ＯＣＲ装置は、セカンダリＯＣＲ及び宛先の入力を行っていない場合、アラートを検出する。その結果、ＯＣＲ装置は、宛先の入力とアラートに対する処理とを両立することができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１…アラートシステム、２…処理装置、３…表示端末、４…エミュレータ、５…キャプチャボード、６…通信端末、７…表示端末、８…操作端末、１０…操作装置、１１…プロセッサ、１２…ＲＯＭ、１３…ＲＡＭ、１４…ＮＶＭ、１５…通信部、１６…表示インターフェース、１７…操作インターフェース、２０…ＯＣＲ装置、２１…プロセッサ、２２…ＲＯＭ、２３…ＲＡＭ、２４…ＮＶＭ、２５…エミュレータインターフェース、２６…画像インターフェース、２７…通信インターフェース、２８…表示インターフェース、２９…操作インターフェース、３０…表示画像、３１…表示領域、３２…ポインタ、３３…アイコン、３４…アイコン。

Claims (10)

1. 操作装置から画像を取得する画像インターフェースと、
   前記操作装置に操作を入力する入力インターフェースと、
   前記画像インターフェースを通じて取得した前記画像に対して文字認識処理を行い、
   前記文字認識処理の結果に基づいてアラートを検出し、
   前記入力インターフェースを通じて、検出された前記アラートに対応する処理を行うための操作信号を前記操作装置に入力する、
   プロセッサと、
   を備える情報処理装置。
2. 各アラートに対応する処理を示すアラートテーブルを格納する記憶部を備え、
   前記プロセッサは、前記アラートテーブルを参照して、検出された前記アラートに対応する処理を特定する、
   請求項１に記載の情報処理装置。
3. 前記プロセッサは、前記アラートを検出すると、前記アラートが出力されていることを報知する、
   請求項１又は２に記載の情報処理装置。
4. 前記プロセッサは、検出された前記アラートに対応する処理を行うための前記操作信号を入力した後に前記アラートが消失しない場合、エラーを報知する、
   請求項１乃至３の何れか１項に記載の情報処理装置。
5. 前記プロセッサは、前記画像において前記アラートが表示される領域に対して前記文字認識処理を行う、
   請求項１乃至４の何れか１項に記載の情報処理装置。
6. 前記入力インターフェースは、操作端末をエミュレーションするエミュレータに接続する、
   請求項１乃至５の何れか１項に記載の情報処理装置。
7. 前記エミュレータは、マウス又はキーボードをエミュレーションする、
   請求項６に記載の情報処理装置。
8. 前記操作装置は、物品を区分する区分機に接続し、
   前記アラートは、前記区分機に関する、
   請求項１乃至７の何れか１項に記載の情報処理装置。
9. 前記プロセッサは、
   前記画像が宛先の入力を受け付ける画像である場合、前記画像に含まれる宛先画像に対して文字認識処理を行い、前記文字認識処理の結果に基づいて宛先を取得し、前記入力インターフェースを通じて前記宛先を入力する操作信号を前記操作装置に入力し、
   前記画像が宛先の入力を受け付ける画像でない場合、前記アラートを検出する、
   請求項１乃至６の何れか１項に記載の情報処理装置。
10. プロセッサによって実行されるプログラムであって、
    前記プロセッサに、
    操作装置からの画像に対して文字認識処理を行う機能と、
    前記文字認識処理の結果に基づいてアラートを検出する機能と、
    検出された前記アラートに対応する処理を行うための操作信号を操作装置に入力する機能と、
    を実現させるプログラム。
    

Images