JP2007081588A - 画像処理装置及びその制御方法、プログラム - Google Patents

Abstract

【課題】 読取画像に対応する画像をより適切に表示することができ、かつその読取画像の元となる画像に関連オブジェクトが存在する場合には、それに対する好適な操作環境を提供できる画像処理装置及びその制御方法、プログラムを提供する。
【解決手段】 読取画像を表示部に表示し、その表示した読取画像と、記憶媒体に予め保存された画像データとを比較する。その比較結果に基づいて、読取画像に代えて、比較した画像データを表示部に表示する。
【選択図】 図５

Description

本発明は、読取画像に対応する画像を表示する画像処理装置及びその制御方法、プログラムに関するものである。

従来、スキャン、プリント、送受信等の複合機能を有する周辺機器（以後、「ＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）」と呼ぶ）がある。このＭＦＰにおいて、読取機能で読み取られた画像を表示する際、読み取られた画像データに関連するデータ表示方法として、読取画像のＯＣＲ結果の修正候補をタッチパネルに表示する手法が提案されている（特許文献１）。
特開２００５−１５７４５８号公報

上記従来技術において、読み取られた画像データに関連するデータは、テキスト情報だけでなく、読み取られた画像データを作成した基となるデータファイルや、そのデータファイルに関連する、テキスト、音声、動画等の様々な種類の媒体を含む可能性がある。このような関連データに対する、適切な表示手段は何も提案されていないという問題が残されている。

本発明は上記の課題を解決するためになされたものである。その目的は、読取画像に対応する画像をより適切に表示することができ、かつその読取画像の元となる画像に関連オブジェクトが存在する場合には、それに対する好適な操作環境を提供できる画像処理装置及びその制御方法、プログラムを提供することにある。

上記の目的を達成するための本発明による画像処理装置は以下の構成を備える。即ち、
読取画像に対応する画像を表示する画像処理装置であって、
複数の画像データを保存する記憶手段と、
読取画像を表示する表示手段と、
前記表示手段で表示した読取画像と、前記記憶手段に保存された画像データとを比較する比較手段と、
前記比較手段の比較結果に基づいて、前記読取画像に代えて、前記比較手段で比較した画像データに対応する画像を前記表示手段に表示する表示制御手段と
を備える。

また、好ましくは、前記表示制御手段は、前記比較手段の比較結果として計算された類似度が所定閾値以上である場合、前記読取画像に代えて、前記比較手段で比較した画像データに対応する画像を前記表示手段に表示する。

また、好ましくは、前記表示制御手段は、前記比較手段の比較結果として計算された類似度が所定閾値未満の画像データが前記記憶手段に存在する場合、前記読取画像に対応する画像データの候補が存在することを示し、かつそれに対する操作に応じてその画像データに対応する画像の表示を実行する候補画像表示指示部を、前記表示手段で表示される読取画像上にオーバレイ表示する。

また、好ましくは、前記候補画像表示指示部は、複数の画像データの候補を表示し、かつ選択するための操作画面である。

また、好ましくは、前記記憶手段は、画像データと、それに関連付けられている関連オブジェクトを保存し、
前記表示制御手段は、前記読取画像に代えて、前記表示手段に表示する前記比較手段で比較した画像データに前記関連オブジェクトが関連付けられている場合には、前記比較手段で比較した画像データに対応する画像と、その関連オブジェクトを操作するための操作部を表示する。

また、好ましくは、前記関連オブジェクトは、音声情報、複数画像のスライドショー、動画の少なくとも１つである。

また、好ましくは、前記操作部は、前記関連オブジェクトを再生するための操作コントロールである。

上記の目的を達成するための本発明による画像処理装置の制御方法は以下の構成を備える。即ち、
読取画像に対応する画像を表示する画像処理装置の制御方法であって、
読取画像を表示部に表示する表示工程と、
前記表示工程で表示した読取画像と、記憶媒体に予め保存された画像データとを比較する比較工程と、
前記比較工程の比較結果に基づいて、前記読取画像に代えて、前記比較工程で比較した画像データに対応する画像を前記表示部に表示する表示制御工程と
を備える。

上記の目的を達成するための本発明によるプログラムは以下の構成を備える。即ち、
読取画像に対応する画像を表示する画像処理装置の制御をコンピュータに実行させるためのプログラムであって、
読取画像を表示部に表示する表示工程と、
前記表示工程で表示した読取画像と、記憶媒体に予め保存された画像データとを比較する比較工程と、
前記比較工程の比較結果に基づいて、前記読取画像に代えて、前記比較工程で比較した画像データに対応する画像を前記表示部に表示する表示制御工程と
をコンピュータに実行させることを特徴とする。

本発明によれば、読取画像に対応する画像をより適切に表示することができ、かつその読取画像の元となる画像に関連オブジェクトが存在する場合には、それに対する好適な操作環境を提供できる画像処理装置及びその制御方法、プログラムを提供できる。

以下、本発明の実施の形態について図面を用いて詳細に説明する。
［画像入出力制御装置］
図１は本発明の実施形態の画像処理装置の構成を示すブロック図である。

尚、図１に示す画像処理装置は、例えば、スキャン、プリント、送受信等の複合機能を有するＭＦＰで構成される。

図１において、リーダ部１は、原稿の画像をＣＣＤ等のイメージセンサにより光電的に読み取り、原稿画像に応じた画像データを画像入出力制御部４へ出力する。

プリンタ部２は、例えば、レーザビームプリンタであって、画像処理装置として機能する画像入出力制御部４からの画像データに応じた画像を紙等の記録媒体上に記録する。

ディスプレイ部３は、例えば、液晶ディスプレイであって、画像入出力制御部４からの画像データに応じた画像をディスプレイ上に表示する。更に、操作部９と同様にタッチパネルとしての機能を持ち、ディスプレイ上に表示されたコマンドに対するユーザからの指示を解釈して、画像入出力制御部４と制御データの入出力を行なう。

画像入出力制御部４は、リーダ部１、プリンタ部２及びディスプレイ部３に接続されている。また、ファクシミリ部５、ストレージ部６、コンピュータインタフェース部７、ＲＩＰ（ＲａｓｔｅｒＩｍａｇｅＰｒｏｃｅｓｓｏｒ）部８、操作部９、コア部１０等からなる。

ファクシミリ部５は電話回線を介して受信した圧縮画像データを伸長して、伸長された画像データをコア部１０へ転送し、又、コア部１０から転送された画像データを圧縮して、圧縮された画像データを、電話回線を介して送信する。送受信する画像データは、ストレージ部６に接続されたハードディスク６１中に一時的に保存することができる。

ストレージ部６にはハードディスク６１が接続されており、ストレージ部６はコア部１０から転送された画像データを圧縮し、その画像データを検索するためのＩＤ番号とともにハードディスク６１に記憶する。また、ストレージ部６はコア部１０を介して転送されたコードデータに基づいて、ハードディスク６１に記憶されている圧縮画像データを検索し、検索された圧縮画像データを読み出して伸長し、伸長された画像データをコア部１０へ転送する。このハードディスク６１は、例えば、２０ギガバイトの記憶容量を有する。この場合、画像データの内容に左右されるが、Ａ４サイズのカラー圧縮画像を、約２５００ページ分記憶可能である。

更に、ストレージ部６は、リーダ部１から読み取られた画像データのデータ属性を解釈し、画像データに基づいてハードディスク６１に記憶されている元（オリジナル）画像データを検索する。そして、ストレージ部６は、検索された元画像データと元画像データに関連するデータのリンク情報を保存する。

尚、オリジナル画像データに、音声や、複数画像のスライドショー、動画の少なくとも１つを含むメディア情報が含まれる場合には、そのメディア情報とその属性情報（その種類や、表示位置等）が関連オブジェクトとして、ストレージ部６１に記憶される。ここで、スライドショーとは複数の画像を一定の間隔で切り替えて表示する機能である。

コンピュータインタフェース部７は、パーソナルコンピュータまたはワークステーション（ＰＣ／ＷＳ）１１とコア部１０の間のインタフェースである。このコンピュータインタフェース部７は、ＰＣ／ＷＳ１１と１対１のピアツーピアで接続しても、様々な機器が接続されたネットワークに接続しても良い構成となっている。

ＲＩＰ部８は、ＰＣ／ＷＳ１１から転送された画像を表すコードデータをプリンタ部２で記録できる画像データに展開するものである。コードデータには、Ｐｏｓｔｓｃｒｉｐｔ等に代表される、ページ記述言語（ＰＤＬ：ＰａｇｅＤｅｓｃｒｉｐｔｉｏｎＬａｎｇｕａｇｅ、以下ＰＤＬという）がある。

操作部９はタッチパネルディスプレイとハードキーを備え、ユーザインタフェースにより、本画像入出力制御装置への動作指示や動作設定等を行なうものである。

コア部１０は、リーダ部１、プリンタ部２、ファクシミリ部５、ストレージ部６、コンピュータインタフェース部７、ＲＩＰ部８、操作部９それぞれの間における、データの流れを制御するものである。

［リーダ部及びプリンタ部］
図２は本発明の実施形態のリーダ部及びプリンタ部の詳細構成を示す図である。

図２では、特に、リーダ部１及びプリンタ部２の断面図を示している。リーダ部１の原稿給送装置１０１は、ユーザにより所定の載置場所にセットされた複数枚の原稿を先頭頁乃至最終頁から順乃至逆順に１枚ずつプラテンガラス１０２上へ給送する。そして、原稿給送装置１０１は、原稿の読取動作終了後、プラテンガラス１０２上の原稿を所定の排出場所へ排出する。原稿がプラテンガラス１０２上に搬送されると、ランプ１０３を点灯し、スキャナユニット１０４の移動を開始させて、原稿を露光走査する。

この時の原稿からの反射光は、ミラー１０５、１０６、１０７及びレンズ１０８によってＣＣＤイメージセンサ（以下ＣＣＤという）１０９へ照射される。このように、走査された原稿の画像は、ＣＣＤ１０９によって光電変換され、電気信号データとなる。ＣＣＤ１０９から出力される画像データは、Ａ／Ｄ変換、シェーディング補正や色変換等、所望の画像処理が施された後、画像入出力制御部４のコア部１０へ転送される。

プリンタ部２のレーザドライバ２２１は、レーザ発光部２０１を駆動し、画像入出力制御部４のコア部１０から出力された画像データに応じた光量のレーザ光を、レーザ発光部２０１に発光させる。このレーザ光は、感光ドラム２０２を照射し、感光ドラム２０２は、レーザ光に応じた潜像を形成する。現像器２０３は、この感光ドラム２０２の潜像した部分に、現像剤を付着させる。

また、レーザ光の照射開始と同期したタイミングで、カセット２０４乃至カセット２０５のいずれかから記録紙を、給紙ローラ２１１乃至給紙ローラ２１２を経由し、給紙ローラ２１３を介して給紙して転写部２０６へ搬送する。転写部２０６では、感光ドラム２０２に付着した現像剤を記録紙に転写する。現像剤が転写された記録紙は、定着部２０７に搬送され、定着部２０７の熱と圧力により現像剤を記録紙に定着させる。

定着部２０７を通過した記録紙は排出ローラ２０８によって排出され、フィニッシャ２２０は、排出された複数枚の記録紙を束ねて仕分けを行ったり、仕分けされた記録紙の所望の位置にステイプル止め処理を行ったりする。その後、処理後の記録紙は、排紙トレイへ排出されることになる。

また、両面記録が設定されている場合は、排出ローラ２０８のところまで片面記録された記録紙を搬送した後、排出ローラ２０８の回転方向を逆転させ、フラッパ２０９によって再給紙搬送路２１０へ導く。再給紙搬送路２１０へ導かれた記録紙は上述したタイミングで転写部２０６へ給紙され、反対面への画像記録が行われる。その後、処理後の記録紙は、排紙トレイへ排出されることになる。

［ディスプレイ部］
図３は本発明の実施形態のディスプレイ部の詳細構成を示すブロック図である。

ディスプレイ部３は、バッファメモリ３０１、ディスプレイドライバ３０２、ディスプレイデバイス３０３、タッチパネル３０４を有する。バッファメモリ３０１は、画像入出力制御部４からの画像データを受信し、受信した画像データを一時保存する。ディスプレイドライバ３０２は、バッファメモリ４０１に保存されたデータを、ディスプレイ表示用信号に変換し、ディスプレイデバイス３０３に表示させる。タッチパネル３０４は、操作者の指定位置を、画像入出力制御部４に対して送信する。

［コア部］
図４は本発明の実施形態のコア部の詳細構成を示すブロック図である。

リーダ部１から転送された画像データを、インタフェース（Ｉ／Ｆ）１２２を介して、データ処理部１２１へ転送する。データ処理部１２１は、画像の回転処理や変倍処理等の画像処理や画像データの圧縮、伸長を行なうものであり、内部に所定の画像データを所定量記憶可能なページメモリ１２５を有する。コア部１０は、リーダ部１からデータ処理部１２１へ転送された画像データを、ページメモリ１２５に一時的に記憶した後、圧縮してインタフェース１２０を介してストレージ部６へ転送する。

コンピュータインタフェース部７を介して転送された画像を表すコードデータ（ＰＤＬ）は、インタフェース１２０を介してデータ処理部１２１に転送した後、ＲＩＰ部８へ一旦返送する。ＲＩＰ部８では、受信したコードデータを画像データに変換し、この変換した画像データを再度データ処理部１２１に転送する。コア部１０は、ＲＩＰ部８から受信した画像データをページメモリ１２５に一時的に記憶した後、圧縮してストレージ部６へ転送する。

ファクシミリ部５から転送された画像データは、データ処理部１２１へ転送した後、ページメモリ１２５に一時的に記憶し、圧縮してストレージ部６へ転送される。

ストレージ部６から転送された画像データは、データ処理部１２１へ転送した後、伸長してページメモリ１２５に一時的に記憶した後、プリンタ部２やディスプレイ部３、ファクシミリ部５、コンピュータインタフェース部７へ転送される。

尚、コア部１０は、データ処理部１２１へ各種画像データを送信し、ページメモリ１２５に一時的に記憶した後、ストレージ部６へ画像データを転送する。これに加えて、コア部１０は、プリンタ部２やファクシミリ部５、コンピュータインタフェース部７へ転送することも、転送先の複数の組み合わせも、内部のセレクタ切替により実行可能である。

ＣＰＵ１２３は、メモリ１２４に記憶されている制御プログラム、及び操作部９から転送された制御コマンドに基づいて上記各種動作の制御を行なう。また、メモリ１２４はＣＰＵ１２３の作業領域としても使われる。

このように、コア部１０を中心に、データ処理部１２１及びページメモリ１２５を介して、原稿画像の読取、画像のプリント出力／ディスプレイ表示／送受信／保存、コンピュータからのデータの入出力等の機能を複合させた処理が実行可能である。

また、上記例においては、ストレージ部６が画像処理装置内にある構成であるが、ネットワークを介した外部にある外部機器（サーバ）に記憶する形態であっても構わない。

［ディスプレイ制御］
次に、本実施形態にかかる画像処理装置において、リーダ部１からディスプレイ部３へ画像データを表示させる場合の表示処理について、図５を用いて説明する。

図５は本発明の実施形態の表示処理を示すフローチャートである。

リーダ部１からの読取画像のディスプレイ部３への表示が操作部９から指示されると、本処理が開始する。

ステップＳ６０１で、リーダ部１からの読取画像は、画像入出力制御部４、コア部１０を経由して、ストレージ部６に保存される。保存された画像データは、所望のデータ圧縮が実施され、その画像データを一意に特定可能なＩＤ番号とともにハードディスク６１に保存する。

ストレージ部６への保存が完了すると、ステップＳ６０２で、ストレージ部６に保存された画像データをコア部１０が読み出す。そして、データ処理部１２１で、読み出された圧縮されている画像データの伸長と、ディスプレイ部３への表示に適切な解像度や色等の画像処理を実行する。その後、その画像データをディスプレイ部３へ転送することで、ディスプレイ部３に画像（読取画像）が表示される。

ステップＳ６０３で、ストレージ部６において、ストレージ部６に保存された画像データ（読取画像）のデータ解析を実行する。ここでは、データに含まれる文字抽出や画像特徴等の特徴量を抽出する。尚、文字抽出や画像特徴の抽出の詳細な手法については、従来より知られている様々な方法を利用することができるが、これは、本提案の主旨ではないので割愛する。

ステップＳ６０４で、解析結果に基づき、ストレージ部６において、ハードディスク６１に既に保存されている画像データと、画像データ（読取画像）とを比較して、両者の類似度を計算する。類似度の計算手法の詳細についても、従来より知られている様々な方法を利用することができるが、これは、本提案の主旨ではないので割愛する。

ステップＳ６０５では、ストレージ部６において、ステップＳ６０４で得られた計算結果に基づき、類似度が既定の第１閾値以上であるか否かを判定する。第１閾値未満である場合（ステップＳ６０５でＮＯ）、処理を終了する。一方、第１閾値位置以上である場合（ステップＳ６０５でＹＥＳ）、ステップＳ６０６へ進み、類似度が既定の第２閾値以上であるか否かを判定する。

類似度が第２閾値以上である場合（ステップＳ６０６でＹＥＳ）、ステップＳ６０７に進む。この場合は、既定の第２閾値以上の類似度が得られている場合、即ち、読取画像の元となる画像データ（オリジナル画像データ）と一致すると見なすことができる画像データがストレージ部６に保存されている場合である。

この場合には、ステップＳ６０７で、ストレージ部６において、最大類似度の画像データを、コア部１０に転送する。コア部１０では、転送された画像データの形態に基づき、画像データの伸長や、ＲＩＰ部８での処理、ディスプレイ部３への表示に適切な解像度や色等の画像処理を行い、その後、処理後の画像データをディスプレイ部３へ転送する。これにより、表示されている読取画像が、オリジナル画像データに入れ替えられることになる。

尚、この場合には、読取画像と見なすことのできるオリジナル画像データが既にハードディスク６１に保存されていることになるので、ステップＳ６０１でハードディスク６１に保存した読取画像の画像データは削除するようにしても良い。これにより、画像処理装置でハードディスク６１に保存する画像データ等のデータのデータ量を、不必要な冗長度を増やすことなく、オリジナル画像データの要否に応じて適応的に削減することができる。

一方、類似度が第２閾値未満である場合（ステップＳ６０６でＮＯ）、ステップＳ６０８に進む。この場合は、既定の第２閾値未満の類似度が得られている場合、即ち、読取画像の元となる画像データと一致すると見なすことはできないが、ある程度は読取画像に類似する画像データがストレージ部６に保存されている場合である。

この場合には、ステップＳ６０８で、コア部１０は、ディスプレイ部３に、読取画像の元となる画像データの候補が得られたことを示し、かつそれに対する操作に応じてその画像データの表示を実行する候補画像表示指示部を表示する。

より具体的には、現在ディスプレイ部３で表示中の画像データの一部に、その候補画像表示指示部を実現する操作コントロール（例えば、アイコン）を読取画像の画像データに対してオーバレイ表示する。あるいは、読取画像に対応する画像データ（あるいはそのサムネール画像（代表画像））の候補を含む候補画像表示指示部を実現する操作画面を読取画像の画像データにオーバレイ表示し、その中から所望の画像データの選択を受け付けるようにしても良い。また、この操作画面は画像内にオーバレイ表示するのに代え、余白部分がある場合にはその部分に表示するなどの変形が可能である。

ステップＳ６０９で、ディスプレイ部３に表示された操作コントロール（アイコン）に対する操作者からの表示指示に基づき、第２閾値未満の画像データ群の内、最大類似度の画像データをディスプレイ部３に表示する。尚、操作ダイアログを表示した場合には、その操作ダイアログ中で選択された画像データをディスプレイ部３に表示する。

また、この際には、表示した画像データを読取画像として採用するか否かを指示するための指示手段（例えば、指示画面あるいは指示部）を表示して、その要否をユーザに促すことも可能である。そして、特に、その画像データを読取画像として採用することが指示された場合には、ステップＳ６０１でハードディスク６１に保存した読取画像の画像データは削除するようにしても良い。

尚、第１閾値及び第２閾値は、読取画像と、ストレージ部６で保存されている画像データとの類似度を判定するものである。また、その関係は、第１閾値＜第２閾値である。この２種類の閾値は、通常は、メモリ１２４内に予め記憶されているものとするが、必要に応じて、その閾値を設定するための設定画面（不図示）をディスプレイ部３に呼び出し、その設定画面を介して、ユーザが任意にその値を変更することも可能である。

ここで、本実施形態では、類似度が第１閾値未満である場合は、比較対象の画像データは、読取画像として見なすことができない画像データとしている。また、類似度が第１閾値以上で、かつ第２閾値未満である場合は、比較対象の画像データは、読取画像にある程度類似しているが、その読取画像の元となる画像データと一致すると見なすことまではできない画像データとしている。更に、類似度が第２閾値以上である場合は、比較対象の画像データは、読取画像の元となる画像データと一致すると見なすことができる画像データとしている。

そこで、第２閾値以上の類似度がある場合には、読取画像の代わりに、比較対象の画像データを読取画像のオリジナル画像データとしてディスプレイ部３に表示する（ステップＳ６０７）。これにより、読取画像よりもその画質が良好なオリジナル画像データがディスプレイ部３に表示されることになり、ユーザは、その内容をより良好に視認することができる。ここで、特に、読取画像の読取原稿が白黒で、それに対応するオリジナル画像データがカラー画像である場合には、その白黒の読取画像に対してカラーのオリジナル画像データが表示されることになるので、その視認効果はより大きなものとなる。

一方、類似度が第１閾値以上で、かつ第２閾値未満である場合には、読取画像のオリジナル画像データの候補となる画像データが存在し、それを表示するための候補画像表示指示部をディスプレイ部３に表示する（ステップＳ６０８）。この場合、ユーザは、その候補画像表示指示部を操作することで、候補となる画像データを読取画像としてディスプレイ部３に表示することができる。

次に、オリジナル画像データに、音声や、複数画像のスライドショー、動画が含まれる場合に、読み取られた画像データの表示を、オリジナルデータの表示に置き換えた場合の表示処理について、図６を用いて説明する。

図６は本発明の実施形態の表示処理の応用例を示すフローチャートである。

リーダ部１からの読取画像のディスプレイ部３への表示が操作部９から指示されると、本処理が開始する。尚、図６において、図５の同一の処理について、同一のステップ番号を付加して、その処理の詳細については省略する。

ステップＳ６０６において、類似度が第２閾値以上である場合（ステップＳ６０６でＹＥＳ）、ステップＳ７０７に進む。この場合は、既定の第２閾値以上の類似度が得られている場合、即ち、読取画像の元となる画像データ（オリジナル画像データ）と一致すると見なすことができる画像データがストレージ部６に保存されている場合である。

この場合には、ステップＳ７０７で、ストレージ部６において、最大類似度の画像データを、コア部１０に転送する。コア部１０では、転送された画像データの形態に基づき、画像データの伸長や、必要に応じてＲＩＰ部８での処理、ディスプレイ部３への表示に適切な解像度や色等の画像処理を行い、その後、処理後の画像データをディスプレイ部３へ転送する。これにより、表示されている読取画像が、オリジナル画像データに入れ替えられることになる。

また、ステップＳ７０８で、元となる画像データの中に、関連情報として、音声や、複数画像のスライドショー、動画等のメディア情報が含まれる場合には、そのメディア情報とその属性情報を関連オブジェクトとしてディスプレイ部３へ転送する。これに加えて、その属性情報（その種類や、表示位置等）に基づくメディア情報の操作手段をディスプレイ部３へ転送する。

この操作手段は、例えば、音声や動画の場合には、再生／停止／早送り／巻き戻し／一時停止／画像サイズ変更等の操作を行うための操作部（操作コントロール）がある。また、複数画像をまとめたスライドショー形式の画像の場合は、再生、一時停止等の操作を行うための操作部（操作コントロール）がある。

これにより、ディスプレイ部３には、オリジナル画像データと、その関連オブジェクト及びその関連オブジェクトを操作するための操作部が表示される。そして、ディスプレイ部３に表示される操作部に対して、操作者からの操作指示がある場合には、その操作指示に基づき、当該メディアに対する操作を行なう。

例えば、操作指示が、動画に対する再生操作であれば、ストレージ部６に保存された、操作指示対象となる動画データをコア部１０に送信し、コア部１０では、動画再生・表示用のデータ変換を行い、ディスプレイ部３へ転送する。これにより、ユーザは、ディスプレイ部３上で、オリジナル画像データ中の関連オブジェクトの操作を行うことができる。

一方、ステップＳ６０６において、類似度が第２閾値未満である場合（ステップＳ６０６でＮＯ）、上述のステップＳ６０８及びステップＳ６０９を実行する。但し、ステップＳ６０９の実行後に、ステップＳ７０８の処理を実行して、オリジナル画像データ中の関連オブジェクトの操作部を表示するようにしても良い。

次に、図６の処理における具体例について、図７を用いて説明する。

図７は本発明の実施形態の図６の処理における具体例を説明するための図である。

図７では、ディスプレイ部３で表示される画像の遷移を示している。図７中、１０００は読取画像であり、ステップＳ６０２の処理後の状態である。この読取画像１０００に対して、ステップＳ６０３〜ステップＳ６０６を経て、類似度が第２閾値以上の画像としてオリジナル画像２０００が存在すると、ステップＳ７０７で、そのオリジナル画像２０００がディスプレイ部３に表示される。

そして、このオリジナル画像２０００には、関連オブジェクトとして、動画が存在しているので、オリジナル画像中には、その動画を示す画像２００１及び２００２が表示される。また、これに加えて、それらの画像を操作（再生等）をするための操作部２００１ａ及び２００２ａが表示される。

これにより、ユーザは、読取画像に代えて、その内容がより視認し易いオリジナル画像２０００を表示することが可能となり、かつ、関連オブジェクトが存在する場合には、その操作を行うことが可能となる。

以上説明したように、本実施形態によれば、読取画像に対する画像を表示する場合に、それの元となる画像が存在する場合には、その読取画像に代えて、その元となる画像を表示する。更には、その元となる画像に関連する関連オブジェクトが存在する場合には、その関連オブジェクトを操作するための操作環境を提供する。これにより、読取画像に対する画像をより適切に表示することができるとともに、その読取画像の元となる画像に関連オブジェクトが存在する場合には、それに対する好適な操作環境を提供することができる。

以上、実施形態例を詳述したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能である。具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。

尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラム（実施形態では図に示すフローチャートに対応したプログラム）を、システムあるいは装置に直接あるいは遠隔から供給する。そして、そのシステムあるいは装置のコンピュータが該供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。

従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であっても良い。

プログラムを供給するための記録媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスクがある。また、更に、記録媒体としては、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、その接続先のホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。

また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。また、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現される。

本発明の実施形態の画像処理装置の構成を示すブロック図である。 本発明の実施形態のリーダ部及びプリンタ部の詳細構成を示す図である。 本発明の実施形態のディスプレイ部の詳細構成を示すブロック図である。 本発明の実施形態のコア部の詳細構成を示すブロック図である。 本発明の実施形態の表示処理を示すフローチャートである。 本発明の実施形態の表示処理の応用例を示すフローチャートである。 本発明の実施形態の図６の処理における具体例を説明するための図である。

符号の説明

１ リーダ部
２ プリンタ部
３ ディスプレイ部
４ 画像入出力制御部
５ ファクシミリ部
６ ストレージ部
６１ ハードディスク
７ コンピュータインタフェース部
８ ＲＩＰ部
９ 操作部
１０ コア部
１１ ＰＣ／ＷＳ
１２０、１２２ インタフェース
１２１ データ処理部
１２３ ＣＰＵ
１２４ メモリ
１２５ ページメモリ

Claims (9)

1. 読取画像に対応する画像を表示する画像処理装置であって、
   複数の画像データを保存する記憶手段と、
   読取画像を表示する表示手段と、
   前記表示手段で表示した読取画像と、前記記憶手段に保存された画像データとを比較する比較手段と、
   前記比較手段の比較結果に基づいて、前記読取画像に代えて、前記比較手段で比較した画像データに対応する画像を前記表示手段に表示する表示制御手段と
   を備えることを特徴とする画像処理装置。
2. 前記表示制御手段は、前記比較手段の比較結果として計算された類似度が所定閾値以上である場合、前記読取画像に代えて、前記比較手段で比較した画像データに対応する画像を前記表示手段に表示する
   を備えることを特徴とする請求項１に記載の画像処理装置。
3. 前記表示制御手段は、前記比較手段の比較結果として計算された類似度が所定閾値未満の画像データが前記記憶手段に存在する場合、前記読取画像に対応する画像データの候補が存在することを示し、かつそれに対する操作に応じてその画像データに対応する画像の表示を実行する候補画像表示指示部を、前記表示手段で表示される読取画像上にオーバレイ表示する
   ことを特徴とする請求項１に記載の画像処理装置。
4. 前記候補画像表示指示部は、複数の画像データの候補を表示し、かつ選択するための操作画面である
   ことを特徴とする請求項１に記載の画像処理装置。
5. 前記記憶手段は、画像データと、それに関連付けられている関連オブジェクトを保存し、
   前記表示制御手段は、前記読取画像に代えて、前記表示手段に表示する前記比較手段で比較した画像データに前記関連オブジェクトが関連付けられている場合には、前記比較手段で比較した画像データに対応する画像と、その関連オブジェクトを操作するための操作部を表示する
   ことを特徴とする請求項１に記載の画像処理装置。
6. 前記関連オブジェクトは、音声情報、複数画像のスライドショー、動画の少なくとも１つである
   ことを特徴とする請求項１に記載の画像処理装置。
7. 前記操作部は、前記関連オブジェクトを再生するための操作コントロールである
   ことを特徴とする請求項６に記載の画像処理装置。
8. 読取画像に対応する画像を表示する画像処理装置の制御方法であって、
   読取画像を表示部に表示する表示工程と、
   前記表示工程で表示した読取画像と、記憶媒体に予め保存された画像データとを比較する比較工程と、
   前記比較工程の比較結果に基づいて、前記読取画像に代えて、前記比較工程で比較した画像データに対応する画像を前記表示部に表示する表示制御工程と
   を備えることを特徴とする画像処理装置の制御方法。
9. 読取画像に対応する画像を表示する画像処理装置の制御をコンピュータに実行させるためのプログラムであって、
   読取画像を表示部に表示する表示工程と、
   前記表示工程で表示した読取画像と、記憶媒体に予め保存された画像データとを比較する比較工程と、
   前記比較工程の比較結果に基づいて、前記読取画像に代えて、前記比較工程で比較した画像データに対応する画像を前記表示部に表示する表示制御工程と
   をコンピュータに実行させることを特徴とするプログラム。

Images