JP2007080099A - 画像処理装置、画像検索方法および画像検索プログラム - Google Patents

Abstract

【課題】 操作者が行なう視覚的な画像検索を支援する画像処理装置、画像検索方法および画像検索プログラムを提供することを目的とする。
【解決手段】 画像検索が可能な画像処理装置１０であって、元画像を構成する複数の部分画像の重要度に応じて、重要度の高い部分画像の割合が大きくなるように元画像を縮小した縮小画像を画像検索の結果として表示手段１９に表示させ、操作者からの指示により縮小画像の元画像を表示手段１９に表示させる画像処理手段１０３を備えたことにより上記課題を解決する。
【選択図】 図３

Description

本発明は、画像処理装置、画像検索方法および画像検索プログラムに係り、特に操作者が行なう視覚的な画像検索を支援する画像処理装置、画像検索方法および画像検索プログラムに関する。

近年、画像処理装置の一例としての複合機（ＭＦＰ）は、ハードディスク等の大容量記憶装置を搭載し、様々な画像の画像データ（以下、単に画像という）を多数蓄積しておくことができるようになった。また、複合機はネットワークＩ／Ｆを搭載し、外部の機器との通信により、外部の機器に蓄積されている画像を取得できるようになった。

そこで、従来の複合機には多数の画像から所望する画像を検索する為の検索機能が設けられているものがあった。しかし、多数の画像から検索を行なう際には、実際に画像の内容を確認しないと、所望する画像であるか否かを判断できないことが多かった。

従来の複合機に設けられている検索機能には、検索した画像のサムネイル画像を表示して操作者に選択させるものがあった（例えば特許文献１参照）。なお、サムネイル画像とは元画像を縮小した画像であって、元画像の絵柄を大雑把に提示する画像である。
特開２００３−２７６２７２号公報

しかしながら、サムネイル画像は元画像を単純に縮小しただけの画像であって、絵柄や文字が小さく何が記載されているか分かりづらいという問題があった。例えば似たような多数の画像から検索を行なう場合には、サムネイル画像から所望する画像を判断することが難しかった。

そこで、似たような多数の画像から検索を行なう場合には、複合機が検索した元画像をそのまま表示することも考えられる。しかしながら、複合機が画像を表示する操作パネル等は有効画素数が少ないため、一度に表示できる元画像の数が少なくなるという問題があった。このように、従来の複合機では、複数の画像から操作者が視覚的に検索を行なうことが難しいという問題があった。

本発明は、上記の点に鑑みなされたもので、操作者が行なう視覚的な画像検索を支援する画像処理装置、画像検索方法および画像検索プログラムを提供することを目的とする。

上記課題を解決するため、本発明は、画像検索が可能な画像処理装置であって、元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させ、操作者からの指示により前記縮小画像の元画像を表示手段に表示させる画像処理手段を備えたことを特徴とする。

また、本発明は、画像検索が可能な画像処理装置の画像検索方法であって、元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させる第１のステップと、操作者からの指示により前記縮小画像の元画像を表示手段に表示させる第２のステップとを備えたことを特徴とする。

さらに、本発明は、画像検索が可能な画像処理装置を、
元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させ、操作者からの指示により前記縮小画像の元画像を表示手段に表示させる画像処理手段として機能させるための画像検索プログラムであることを特徴とする。

本発明によれば、操作者が行なう視覚的な画像検索を支援する画像処理装置、画像検索方法および画像検索プログラムを提供可能である。

次に、本発明を実施するための最良の形態を、以下の実施例に基づき図面を参照しつつ説明していく。本実施例では、画像処理装置の一例として複合機を例に説明するが、画像検索が可能な如何なる画像処理装置であってもよい。また、本実施例では画像の一例としてマニュアルを例に説明するが、如何なる画像であってもよい。

まず、本発明の理解を容易とする為に、元画像を構成する複数の部分画像（画像領域又はテキスト領域）の重要度に応じて、重要度の高い部分画像の割合が大きくなるように元画像を縮小した縮小画像（以下、スマートネイル画像という）について、サムネイル画像と対比させて説明する。

図１は、スマートネイル画像とサムネイル画像とを対比したイメージ図である。元画像１はマニュアルの１ページを表している。サムネイル画像２は、元画像１を縮小した画像である。サムネイル画像２は、元画像１の絵柄を大雑把に提示しているが、絵柄や文字が小さく何が記載されているか分かりづらい。

一方、スマートネイル画像３は元画像１を単純に縮小した画像でなく、元画像１を構成する複数の部分画像のうち重要度の高い部分画像の割合が大きくなるように元画像１を縮小した画像である。スマートネイル画像３は、重要度の高い部分画像が重要度の低い部分画像よりも大きく表示されるため、元画像１に何が記載されているか分かり易い。

本発明は、例えば有効画素数が少ない複合機の操作パネル上でマニュアルを検索させるときにスマートネイル画像３を利用することにより、複数ページのマニュアルから操作者の所望するページを視覚的に検索させることが容易となる。なお、本発明では元画像１の部分画像ごとの重要度を、後述するようにキーワード（検索語）の一致度や部分画像の表示回数などにより判定する。

即ち、本発明では操作者が知りたいと予想される部分画像を重要度により判定し、その部分画像を含む一又は複数ページを検索の為に表示するときにスマートネイル画像３を利用している。スマートネイル画像３についての詳細は、特開２００４−２３４６５６号公報などに記載されている。

図２は、本発明による複合機を含むシステムの一例のハードウェア構成図である。図２のシステムは、複合機１０と外部の機器の一例であるＰＣ４０とが所定のネットワーク３０を介して接続されている。

図２の複合機１０は、ＣＰＵ１１，ＲＯＭ１２，ＲＡＭ１３，ＮＶＲＡＭ１４，パネル制御部１５，エンジン制御部１６，メディアドライバ１７，通信制御部１８，操作パネル１９，スキャンプリントエンジン２０，記録装置ドライブ２１を含む構成である。

ＲＯＭ１２は、プログラムコード，フォント及びその他の静的なデータが格納されている。ＲＡＭ１３は、一時的な記憶場所として利用される。ＮＶＲＡＭ１４は、不揮発性のデータが格納されている。パネル制御部１５及び操作パネル１９は、操作者とのＩ／Ｆを司る。エンジン制御部１６及びスキャンプリントエンジン２０は、イメージデータの入出力ユニットとして紙原稿の読み取りと転写紙への印刷を実行する。

メディアドライバ１７及び記録装置ドライブ２１は、大量のイメージデータ等を蓄積したり、データベースの記憶場所として利用される。通信制御部１８は、イーサネット（登録商標）等のネットワーク３０に接続され、ＰＣ４０との通信を可能にする。データバスは、各種デバイス（ＲＯＭ１２，ＲＡＭ１３，ＮＶＲＡＭ１４，パネル制御部１５，エンジン制御部１６，メディアドライバ１７，通信制御部１８）間、及びＣＰＵ１１と各種デバイスと間の通信を可能とする。

なお、本発明の画像検索プログラムは、複合機１０を制御する各種プログラムの少なくとも一部である。画像検索プログラムは、例えばＲＯＭ１２や記録装置ドライブ２１等に格納されている。ＲＡＭ１３は、複合機１０の起動時に記録装置ドライブ２１等から画像検索プログラムを読み出して格納する。そして、ＣＰＵ１１はＲＡＭ１３に格納された画像検索プログラムに従って、後述するようなプログラムモジュール構成を実現する。

実施例１では、元画像１の部分画像ごとの重要度を、キーワードの一致度により判定する例を説明する。図３は、本発明による複合機の第１実施例のブロック図である。図３の複合機１０は、画像検索プログラムにより、プログラムモジュール構成１００を実現している。

プログラムモジュール構成１００は、入出力制御部１０１，キーワード抽出部１０２およびスマートネイル画像／サイズ決定部１０３を含む構成である。また、スマートネイル画像／サイズ決定部１０３はキーワード合致度計算部１１１，スマートネイル作成部１１２，画像領域決定部１１３および画像サイズ決定部１１４を含む構成である。

図３の複合機１０は、プログラムモジュール構成１００の他に、マニュアル画像保存部１１５，キーワード保存部１１６を実現している。マニュアル画像保存部１１５は、マニュアルの元画像１，元画像１を構成する複数の部分画像を保存している。即ち、マニュアル画像保存部１１５は既知のスマートネイル作成アルゴリズム（例えば特開２００４−２３４６５６号公報参照）を用いて抽出したスマートネイルの作成に必要な情報である元画像１の部分画像を保存している。また、キーワード保存部１１６は、マニュアルの元画像１を構成する複数の部分画像に割り当てられているキーワード（割当キーワード）を保存している。なお、図３の複合機１０では、実施例の説明に不用なブロックを適宜省略している。

複合機１０は、図４のように構成してもよい。図４は本発明による複合機の第１実施例のブロック図である。図４のブロック図は、マニュアル画像保存部１１５及びキーワード保存部１１６が外部の機器５０にある点で、複合機１０内にマニュアル画像保存部１１５及びキーワード保存部１１６がある図３のブロック図と異なっている。その他、図４のブロック図は図３のブロック図と同様である。

複合機１０は、外部の機器５０との通信によりマニュアル画像保存部１１５からマニュアルの元画像１，元画像１を構成する複数の部分画像を取得できる。また、複合機１０は外部の機器５０との通信によりキーワード保存部１１６からマニュアルの元画像１を構成する複数の部分画像に割り当てられている割当キーワードを取得できる。

図５は、本発明による複合機の画像検索手順を表したシーケンス図である。例えば操作者は複合機１０について知りたい内容があるとき、マニュアル検索画面１０００を表示させる為の操作を操作パネル１９に対して行なう。操作者による操作がパネル制御部１５を介して通知されると、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９にマニュアル検索画面１０００を表示する。

図６は、操作パネルに表示される画面の一例のイメージ図である。操作者は、マニュアル検索画面１０００の内容入力欄１００１に知りたい内容を入力し、検索開始ボタン１００２を押下する。

検索開始ボタン１００２の押下がパネル制御部１５を介して通知されると、入出力制御部１０１はステップＳ１に進み、内容入力欄１００１に入力された内容を検索ワードとしてスマートネイル画像／サイズ決定部１０３に通知する。

ステップＳ２に進み、スマートネイル画像／サイズ決定部１０３はキーワード抽出部１０２に検索ワードを通知して、キーワード抽出要求を行なう。キーワード抽出部１０２は検索ワードからキーワード（入力キーワード）を抽出し、入力キーワードをスマートネイル画像／サイズ決定部１０３に通知する。

例えば検索ワードが「原稿を濃くしたい。」という内容であった場合、キーワード抽出部１０２は「原稿」，「濃く」等を入力キーワードとして抽出する。入力キーワードが通知されると、スマートネイル画像／サイズ決定部１０３はステップＳ３に進み、マニュアルの元画像１を構成する複数の部分画像に割り当てられている割当キーワードをキーワード保存部１１６から取得する。

ステップＳ４に進み、スマートネイル画像／サイズ決定部１０３は図７のキーワード合致度計算処理を行う。図７は、キーワード合致度計算処理を表した一例のフローチャートである。ステップＳ１１に進み、スマートネイル画像／サイズ決定部１０３のキーワード合致度計算部１１１は入力キーワードと、１ページの元画像１を構成する部分画像の割当キーワードとを比較して、入力キーワードと割当キーワードとが一致するか否かを部分画像単位で判定する。

入力キーワードが割当キーワードと一致していると判定すれば、キーワード合致度計算部１１１はステップＳ１２に進み、その部分画像の一致度を保存したあと、ステップＳ１３に進む。入力キーワードが割当キーワードと一致していないと判定すれば、キーワード合致度計算部１１１はステップＳ１４に進み、その部分画像の一致度を０として保存したあと、ステップＳ１３に進む。

ステップＳ１３では、キーワード合致度計算部１１１が、次ページの元画像１の有無を判定する。次ページの元画像１があれば、キーワード合致度計算部１１１はステップＳ１１に戻り、処理を続ける。次ページの元画像１がなければ、キーワード合致度計算部１１１は図７に示すキーワード合致度計算処理を終了する。図７のキーワード合致度計算処理を終了すると、スマートネイル画像／サイズ決定部１０３は入力キーワードとの一致度の高い部分画像と、その部分画像を含む元画像１とを判定できる。

図５のステップＳ５に進み、スマートネイル画像／サイズ決定部１０３の画像領域決定部１１３は一致度の高い部分画像と、その部分画像を含む元画像１とをマニュアル画像保存部１１５から取得する。

なお、元画像１を構成する複数の部分画像がマニュアル画像保存部１１５に保存されていない場合は、図８のシーケンス図に表すように既知のスマートネイル作成アルゴリズムを用いて元画像１の部分画像を抽出し、マニュアル画像保存部１１５に保存するようにすればよい。

図８は元画像の部分画像を抽出する部分画像抽出処理の一例のシーケンス図である。ステップＳ２１に進み、スマートネイル画像／サイズ決定部１０３は入出力制御部１０１からスマートネイル表示要求を通知される。

ステップＳ２２に進み、スマートネイル画像／サイズ決定部１０３のスマートネイル作成部１１２はマニュアル画像保存部１１５から元画像１を取得する。スマートネイル作成部１１２はステップＳ２３に進み、既知のスマートネイル作成アルゴリズムを用いて元画像１の部分画像を抽出する。ステップＳ２４に進み、スマートネイル作成部１１２は抽出した元画像１の部分画像をマニュアル画像保存部１１５に保存する。

図８のシーケンス図によれば、元画像１を構成する複数の部分画像がマニュアル画像保存部１１５に保存されていない場合であっても、元画像１から部分画像を抽出し、マニュアル画像保存部１１５に保存できる。

さらに、ステップＳ６に進み、スマートネイル画像／サイズ決定部１０３の画像サイズ決定部１１４は一致度の高い部分画像が大きく、一致度が低い部分画像が小さくなるように部分画像のサイズを決定する。スマートネイル画像／サイズ決定部１０３は画像サイズ決定部１１４が決定したサイズの部分画像を含むスマートネイル画像を作成する。

ステップＳ７に進み、スマートネイル画像／サイズ決定部１０３はスマートネイル画像の表示を入出力制御部１０１に要求する。そして、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に図６の検索結果画面１０１０を表示する。

図６の検索結果画面１０１０は、一致度の高い部分画像が大きく表示された３ページのスマートネイル画像が表示されている。なお、検索結果画面１０１０は図９に示すような検索結果画面１０１０ａ又は１０１０ｂであってもよい。

図９は、検索結果画面の他の例のイメージ図である。検索結果画面１０１０ａは部分画像の他に、その部分画像と関連のあるテキストを表示している。また、検索結果画面１０１０ｂは一致度（一致率）が高い部分画像を含むスマートネイル画像を大きく、一致度が低い部分画像を含むスマートネイル画像を小さく表示している。

操作者は、検索結果画面１０１０，１０１０ａ又は１０１０ｂから１ページのスマートネイル画像を選択できる。入出力制御部１０１は検索結果画面１０１０等から１ページのスマートネイル画像が選択されると、パネル制御部１５を制御して操作パネル１９に検索結果画面１０２０を表示する。

検索結果画面１０２０は、操作者により選択された１ページのスマートネイル画像が表示されている。操作者は、検索結果画面１０２０を操作することにより、図１０のような画面遷移が可能である。図１０は、操作パネルに表示される画面の一例のイメージ図である。

他のスマートネイル画像を表示したいとき、操作者は検索結果画面１０２０に設けられた「▲前へ」ボタン又は「▼次へ」ボタン１０２１を押下する。例えば操作者が検索結果画面１０２０の「▼次へ」ボタン１０２１を押下すると、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に検索結果画面１０３０を表示する。

検索結果画面１０２０に表示されているスマートネイル画像を全体表示したいとき、操作者は検索結果画面１０２０に設けられた「全体表示」ボタン１０２２を押下する。例えば操作者が検索結果画面１０２０の「全体表示」ボタン１０２２を押下すると、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に検索結果画面１０４０を表示する。検索結果画面１０４０には元画像１が表示されている。

図１１は、全体表示手順を表した一例のシーケンス図である。「全体表示」ボタン１０２２の押下がパネル制御部１５を介して通知されると、入出力制御部１０１はステップＳ３１に進み、マニュアルページ全体表示要求をスマートネイル画像／サイズ決定部１０３に通知する。

ステップＳ３２に進み、スマートネイル画像／サイズ決定部１０３の画像領域決定部１１３は検索結果画面１０２０に表示されているスマートネイル画像の元画像１の全領域をマニュアル画像保存部１１５から取得する。

ステップＳ３３に進み、スマートネイル画像／サイズ決定部１０３の画像サイズ決定部１１４は全体表示用のサイズに元画像１のサイズを決定する。スマートネイル画像／サイズ決定部１０３は画像サイズ決定部１１４が決定したサイズの元画像１を作成する。

ステップＳ３４に進み、スマートネイル画像／サイズ決定部１０３は元画像１の表示を入出力制御部１０１に要求する。そして、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に検索結果画面１０４０を表示できる。

また、検索結果画面１０２０のスマートネイル画像に表示されていない領域（範囲）を表示したいとき、操作者は検索結果画面１０２０に設けられた方向ボタン１０２３を押下する。操作者が検索結果画面１０２０の「▲」ボタン１０２３を２回押下すると、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に検索結果画面１０５０を表示する。

図１２は、ページ前後画像表示手順を表した一例のシーケンス図である。方向ボタン１０２３の押下がパネル制御部１５を介して通知されると、入出力制御部１０１はステップＳ４１に進み、マニュアルページ前後画像表示要求をスマートネイル画像／サイズ決定部１０３に通知する。

ステップＳ４２に進み、スマートネイル画像／サイズ決定部１０３の画像領域決定部１１３は領域を指定して、検索結果画面１０２０に表示されているスマートネイル画像の元画像１の領域をマニュアル画像保存部１１５から取得する。例えば操作者が検索結果画面１０２０の「▲」ボタン１０２３を２回押下すると、入出力制御部１０１は元画像１のＹ座標−５ｃｍの領域を取得する。

ステップＳ４３に進み、スマートネイル画像／サイズ決定部１０３の画像サイズ決定部１１４は、ページ前後表示用のサイズに元画像１のサイズを決定する。スマートネイル画像／サイズ決定部１０３は画像サイズ決定部１１４が決定したサイズのスマートネイル画像を作成する。

ステップＳ４４に進み、スマートネイル画像／サイズ決定部１０３はスマートネイル画像の表示を入出力制御部１０１に要求する。そして、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９に検索結果画面１０５０を表示できる。

図１３は、キーワードの一致度によりスマートネイル画像を作成する方法のイメージ図である。実施例１では、元画像１から画像領域および主要なテキストをグルーピングしたテキスト領域を部分画像として抽出し、部分画像ごとに割当キーワードを割り当て、保存しておく。実施例１では、入力キーワードとの一致度の高い部分画像が大きく表示されたスマートネイル画像を表示できる。

実施例２では、元画像１の部分画像ごとの重要度を、表示回数（表示頻度）により判定する例を説明する。図１４は、本発明による複合機の第２実施例のブロック図である。図１４の複合機１０は、画像検索プログラムにより、プログラムモジュール構成１００を実現している。

プログラムモジュール構成１００は、入出力制御部１０１，スマートネイル画像／サイズ決定部１０３を含む構成である。また、スマートネイル画像／サイズ決定部１０３はスマートネイル作成部１１２，画像領域決定部１１３，画像サイズ決定部１１４及び表示頻度保存部１１７を含む構成である。

図１４の複合機１０は、プログラムモジュール構成１００の他に、マニュアル画像保存部１１５を実現している。マニュアル画像保存部１１５は、マニュアルの元画像１，元画像１を構成する複数の部分画像を保存している。なお、図１４の複合機１０では、実施例の説明に不用なブロックを適宜省略している。

複合機１０は、図１５のように構成してもよい。図１５は本発明による複合機の第２実施例のブロック図である。図１５のブロック図は、マニュアル画像保存部１１５が外部の機器５０にある点で、複合機１０内にマニュアル画像保存部１１５がある図１４のブロック図と異なる。その他、図１５のブロック図は図１４のブロック図と同様である。複合機１０は、外部の機器５０との通信によりマニュアル画像保存部１１５からマニュアルの元画像１，元画像１を構成する複数の部分画像を取得できる。

図１６は、本発明による複合機の画像検索手順を表したシーケンス図である。例えば操作者は複合機１０について知りたい内容があるとき、図１７のマニュアル目次画面２０００を表示させる為の操作を操作パネル１９に対して行なう。操作者による操作がパネル制御部１５を介して通知されると、入出力制御部１０１はステップＳ５１に進み、マニュアルページ表示要求をスマートネイル画像／サイズ決定部１０３に通知する。図１７は、操作パネルに表示される画面の一例のイメージ図である。

ステップＳ５２に進み、スマートネイル画像／サイズ決定部１０３は表示頻度保存部１１７から元画像１の表示頻度及び部分画像の表示頻度を取得する。次に、スマートネイル画像／サイズ決定部１０３の画像領域決定部１１３はステップＳ５３に進み、表示頻度の高い部分画像と、その部分画像を含む元画像１とをマニュアル画像保存部１１５から取得する。

なお、マニュアル画像保存部１１５は、元画像１、その元画像１のサムネイル画像、その元画像１の部分画像を図１８のテーブルにより管理している。図１８は、元画像のＩＤと、その元画像のサムネイル画像、その元画像の部分画像を関連付けて管理するテーブルの構成図である。スマートネイル画像／サイズ決定部１０３の画像領域決定部１１３は図１８のテーブルを利用して、元画像１のサムネイル画像を取得することもできる。

なお、元画像１を構成する複数の部分画像がマニュアル画像保存部１１５に保存されていない場合は、前述したように既知のスマートネイル作成アルゴリズムを用いて元画像１の部分画像を抽出し、マニュアル画像保存部１１５に保存するようにすればよい。

ステップＳ５４に進み、スマートネイル画像／サイズ決定部１０３の画像サイズ決定部１１４は表示頻度の高い部分画像が大きく、表示頻度が低い部分画像が小さくなるように部分画像のサイズを決定する。スマートネイル画像／サイズ決定部１０３は画像サイズ決定部１１４が決定したサイズの部分画像を含むスマートネイル画像を作成する。

ステップＳ５５に進み、スマートネイル画像／サイズ決定部１０３はスマートネイル画像の表示を入出力制御部１０１に要求する。そして、入出力制御部１０１はパネル制御部１５を制御して操作パネル１９にマニュアル目次画面２０００を表示する。

図１７のマニュアル目次画面２０００は、左側の目次から選択されたページのスマートネイル画像が大きく表示されている。また、マニュアル目次画面２０００は、左側の目次から選択されたページの前後２ページのサムネイル画像が小さく表示されている。

他のスマートネイル画像を表示したいとき、操作者はマニュアル目次画面２０００に設けられた「▲前へ」ボタン２００１又は「▼次へ」ボタン２００２を押下する。例えば操作者がマニュアル目次画面２０００の「▼次へ」ボタン２００２を押下すると、入出力制御部１０１はパネル制御部１５を制御して、マニュアル目次画面２０００に表示されている２２ページのスマートネイル画像を２１ページのスマートネイル画像に変更する。

マニュアル目次画面２０００は図１９に示すようなマニュアル目次画面２０００ａであってもよい。図１９はマニュアル目次画面の他の例のイメージ図である。マニュアル目次画面２０００ａは表示頻度が高い部分画像を含むスマートネイル画像を大きく、表示頻度が低い部分画像を含むスマートネイル画像又はサムネイル画像を小さく表示している。

操作者は、マニュアル目次画面２０００，２０００ａから１ページのスマートネイル画像を選択できる。入出力制御部１０１はマニュアル目次画面２０００等から１ページのスマートネイル画像が選択されると、パネル制御部１５を制御して操作パネル１９に検索結果画面２０１０を表示する。

検索結果画面２０１０は、操作者により選択された１ページのスマートネイル画像が表示されている。操作者は、検索結果画面２０１０を操作することにより、前述した図１０のような画面遷移が可能である。

図２０は、表示頻度によりスマートネイル画像を作成する方法のイメージ図である。実施例２では、元画像１から画像領域および主要なテキストをグルーピングしたテキスト領域を部分画像として抽出し、部分画像ごとに表示頻度を測定し、保存しておく。実施例２では、表示頻度の高い部分画像が大きく表示されたスマートネイル画像を表示できる。

本発明は、具体的に開示された実施例に限定されるものではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。なお、特許請求の範囲に記載した画像処理手段は、スマートネイル画像／サイズ決定部１０３に相当する。

スマートネイル画像とサムネイル画像とを対比したイメージ図である。 本発明による複合機を含むシステムの一例のハードウェア構成図である。 本発明による複合機の第１実施例のブロック図である。 本発明による複合機の第１実施例のブロック図である。 本発明による複合機の画像検索手順を表したシーケンス図である。 操作パネルに表示される画面の一例のイメージ図である。 キーワード合致度計算処理を表した一例のフローチャートである。 元画像の部分画像を抽出する部分画像抽出処理の一例のシーケンス図である。 検索結果画面の他の例のイメージ図である。 操作パネルに表示される画面の一例のイメージ図である。 全体表示手順を表した一例のシーケンス図である。 ページ前後画像表示手順を表した一例のシーケンス図である。 キーワードの一致度によりスマートネイル画像を作成する方法のイメージ図である。 本発明による複合機の第２実施例のブロック図である。 本発明による複合機の第２実施例のブロック図である。 本発明による複合機の画像検索手順を表したシーケンス図である。 操作パネルに表示される画面の一例のイメージ図である。 元画像のＩＤと、その元画像のサムネイル画像、その元画像の部分画像を関連付けて管理するテーブルの構成図である。 マニュアル目次画面の他の例のイメージ図である。 表示頻度によりスマートネイル画像を作成する方法のイメージ図である。

符号の説明

１ 元画像
２ サムネイル画像
３ スマートネイル画像
１０ 複合機
１５ パネル制御部
１９ 操作パネル
３０ ネットワーク
４０，５０ 外部の機器
１００ プログラムモジュール構成
１０１ 入出力制御部
１０２ キーワード抽出部
１０３ スマートネイル画像／サイズ決定部
１１１ キーワード合致度計算部
１１２ スマートネイル作成部
１１３ 画像領域決定部
１１４ 画像サイズ決定部
１１５ マニュアル画像保存部
１１６ キーワード保存部
１１７ 表示頻度保存部

Claims (17)

1. 画像検索が可能な画像処理装置であって、
   元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させ、操作者からの指示により前記縮小画像の元画像を表示手段に表示させる画像処理手段を備えた画像処理装置。
2. 前記画像処理手段は、前記部分画像に割り当てられている割当検索語と、操作者から入力された入力検索語とを比較して、前記入力検索語と一致度の高い前記割当検索語が割り当てられている前記部分画像を選択し、その部分画像の割合が大きくなるように縮小した前記縮小画像を前記画像検索の結果として前記表示手段に表示させることを特徴とする請求項１記載の画像処理装置。
3. 前記画像処理手段は、前記縮小画像が複数あるとき、前記一致度の高さに対応した大きさで前記縮小画像を前記表示手段に表示させることを特徴とする請求項２記載の画像処理装置。
4. 前記画像処理手段は、前記部分画像に割り当てられている表示回数に応じて、前記表示回数の多い部分画像の割合が大きくなるように縮小した前記縮小画像を前記画像検索の結果として前記表示手段に表示させることを特徴とする請求項１記載の画像処理装置。
5. 前記画像処理手段は、前記縮小画像が複数あるとき、前記表示回数の多さに対応した大きさで前記縮小画像を前記表示手段に表示させることを特徴とする請求項４記載の画像処理装置。
6. 前記画像処理手段は、前記縮小画像が複数あるとき、操作者からの指示により前記縮小画像の元画像を切り替えて表示することを特徴とする請求項１記載の画像処理装置。
7. 前記画像処理手段は、操作者からの指示により前記重要度の高い部分画像の前記元画像上の位置から上下左右方向に移動した範囲を前記表示手段に表示させることを特徴とする請求項１記載の画像処理装置。
8. 前記縮小画像は、前記元画像を構成する画像領域およびテキスト領域に割当検索語が割り当てられていることを特徴とする請求項２又は３記載の画像処理装置。
9. 前記縮小画像は、前記元画像を構成する画像領域およびテキスト領域に表示回数が割り当てられていることを特徴とする請求項４又は５記載の画像処理装置。
10. 前記元画像と、元画像を構成する複数の部分画像と、前記元画像を構成する複数の部分画像に割り当てられている割当検索語とを、外部の機器から取得することを特徴とする請求項２又は３記載の画像処理装置。
11. 前記画像処理手段は、前記元画像を外部の機器から取得し、その元画像を構成する複数の部分画像を抽出して前記外部の機器に格納することを特徴とする請求項２又は３記載の画像処理装置。
12. 画像検索が可能な画像処理装置の画像検索方法であって、
    元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させる第１のステップと、
    操作者からの指示により前記縮小画像の元画像を表示手段に表示させる第２のステップとを備えた画像検索方法。
13. 前記第１のステップは、前記部分画像に割り当てられている割当検索語と、操作者から入力された入力検索語とを比較して、前記入力検索語と一致度の高い前記割当検索語が割り当てられている前記部分画像を選択し、その部分画像の割合が大きくなるように縮小した前記縮小画像を前記画像検索の結果として前記表示手段に表示させることを特徴とする請求項１２記載の画像検索方法。
14. 前記第１のステップは、前記縮小画像が複数あるとき、前記一致度の高さに対応した大きさで前記縮小画像を前記表示手段に表示させることを特徴とする請求項１３記載の画像検索方法。
15. 前記第１のステップは、前記部分画像に割り当てられている表示回数に応じて、前記表示回数の多い部分画像の割合が大きくなるように縮小した前記縮小画像を前記画像検索の結果として前記表示手段に表示させることを特徴とする請求項１２記載の画像検索方法。
16. 前記第１のステップは、前記縮小画像が複数あるとき、前記表示回数の多さに対応した大きさで前記縮小画像を前記表示手段に表示させることを特徴とする請求項１５記載の画像検索方法。
17. 画像検索が可能な画像処理装置を、
    元画像を構成する複数の部分画像の重要度に応じて、前記重要度の高い部分画像の割合が大きくなるように前記元画像を縮小した縮小画像を前記画像検索の結果として表示手段に表示させ、操作者からの指示により前記縮小画像の元画像を表示手段に表示させる画像処理手段として機能させるための画像検索プログラム。

Images