JPH10301943A

JPH10301943A - 画像処理装置及びその制御方法

Info

Publication number: JPH10301943A
Application number: JP9107228A
Authority: JP
Inventors: Hirotaka Shiiyama; 弘隆椎山; Hiroshi Owada; 浩大和田
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1997-04-24
Filing date: 1997-04-24
Publication date: 1998-11-13

Abstract

(57)【要約】【課題】ユーザの興味の高さを反映して画像データの
検索結果をソートすることができる画像処理装置及びそ
の制御方法を提供する。【解決手段】画像蓄積部４に管理される画像データ毎
に、画像データを示す情報と該画像データが検索された
検索回数（投票数）とを対応づけて画像管理ＤＢ１３に
管理する。そして、検索条件をユーザインタフェース１
より入力し、入力された検索条件に該当する画像データ
を検索する。そして、検索される画像データに対応する
投票数を画像管理ＤＢ１３を参照して獲得し、その獲得
された投票数に基づいて検索される画像データをソート
して検索結果通知部１２で表示する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、複数の画像データ
を画像蓄積部に管理し、該画像蓄積部に管理される画像
データの検索を行う画像処理装置及びその制御方法に関
するものである。

【０００２】

【従来の技術】従来、自然画像をスキャナ等で読み込ん
で得られる画像データを管理する画像処理装置において
画像データを検索する場合には、画像データに対する画
像認識技術が実現困難なため、画像データを直接用いた
検索はできなかった。そのため、画像データを読み込む
際に、その画像データを示す説明文およびキーワードを
付加し、画像データを検索する際には、その画像データ
に付加した説明文およびキーワードを用いて検索を行う
ことが一般的であった。そして、画像データの検索結果
は、検索によって得られる検索一致度、日付等の属性に
より検索結果をソートして表示することが通常であっ
た。

【０００３】

【発明が解決しようとする課題】しかしながら、上記従
来の画像処理装置による検索に伴って必然と発生する情
報に基づいて検索結果をソートして表示する以外に、多
くのユーザが興味がある度合いに基づいて、あるいは目
にした画像を優先して、つまり、付加価値の高さに基づ
いて検索結果をソートして表示することができるよう
な、よりユーザの興味の高さを反映して検索結果をソー
トして表示することが必要とされている。

【０００４】本発明は上記の問題点に鑑みてなされたも
のであり、ユーザの興味の高さを反映して画像データの
検索結果をソートすることができる画像処理装置及びそ
の制御方法を提供することを目的とする。

【０００５】

【課題を解決するための手段】上記の目的を達成するた
めの本発明による画像処理装置は以下の構成を備える。
即ち、複数の画像データを画像蓄積部に管理し、該画像
蓄積部に管理される画像データの検索を行う画像処理装
置であって、前記画像蓄積部に管理される画像データ毎
に、画像データを示す情報と該画像データが検索された
検索回数とを対応づけて管理する管理テーブルを保持す
る保持手段と、検索条件を入力する入力手段と、前記入
力手段で入力された検索条件に該当する画像データを検
索する検索手段と、前記検索手段で検索される画像デー
タに対応する前記検索回数を前記管理テーブルを参照し
て獲得し、その獲得された検索回数に基づいて該検索手
段で検索される画像データをソートして表示する表示手
段とを備える。

【０００６】また、好ましくは、前記保持手段は、更
に、前記入力手段で入力される検索条件に対し、同一検
索条件毎に該検索条件が入力された累積回数を管理する
インデックスを保持する。また、好ましくは、前記表示
手段は、前記検索手段で検索される画像データに対応す
る前記検索回数を前記管理テーブルを参照して獲得し、
かつ前記検索条件に対応する前記累積回数を前記インデ
ックスを参照して獲得し、獲得された検索回数及び累積
回数に基づいて該検索手段で検索される画像データをソ
ートして表示する。

【０００７】また、好ましくは、前記表示手段は、前記
入力手段より検索条件が入力された場合、ユーザに対す
る情報を獲得するためのアンケート画面を表示する。ま
た、好ましくは、前記入力手段は、前記表示手段によっ
て前記アンケート画面が表示された場合に、該アンケー
ト画面に対するユーザの解答の入力を受け付ける受付手
段と、前記受付手段で受け付けた前記ユーザの解答を記
憶する記憶手段とを備える。

【０００８】また、好ましくは、前記アンケート画面の
内容は、少なくともユーザの年齢、趣味、を含む。ま
た、好ましくは、前記表示手段は、前記記憶手段に記憶
されるユーザの解答に基づいて、前記検索手段で検索さ
れる画像データをソートして表示する。上記の目的を達
成するための本発明による画像処理装置の制御方法は以
下の構成を備える。即ち、複数の画像データを画像蓄積
部に管理し、該画像蓄積部に管理される画像データの検
索を行う画像処理装置の制御方法であって、前記画像蓄
積部に管理される画像データ毎に、画像データを示す情
報と該画像データが検索された検索回数とを対応づけて
管理する管理テーブルを保持する保持工程と、検索条件
を入力する入力工程と、前記入力工程で入力された検索
条件に該当する画像データを検索する検索工程と、前記
検索工程で検索される画像データに対応する前記検索回
数を前記管理テーブルを参照して獲得し、その獲得され
た検索回数に基づいて該検索工程で検索される画像デー
タをソートして表示する表示工程とを備える。

【０００９】上記の目的を達成するための本発明による
コンピュータ可読メモリは以下の構成を備える。即ち、
複数の画像データを画像蓄積部に管理し、該画像蓄積部
に管理される画像データの検索を行う画像処理装置の制
御のプログラムコードが格納されたコンピュータ可読メ
モリであって、前記画像蓄積部に管理される画像データ
毎に、画像データを示す情報と該画像データが検索され
た検索回数とを対応づけて管理する管理テーブルを保持
する保持工程のプログラムコードと、検索条件を入力す
る入力工程のプログラムコードと、前記入力工程で入力
された検索条件に該当する画像データを検索する検索工
程のプログラムコードと、前記検索工程で検索される画
像データに対応する前記検索回数を前記管理テーブルを
参照して獲得し、その獲得された検索回数に基づいて該
検索工程で検索される画像データをソートして表示する
表示工程のプログラムコードとを備えることを特徴とす
る。

【００１０】

【発明の実施の形態】以下、図面を参照して本発明の好
適な実施形態について詳細に説明する。本発明の画像処
理装置によって実行した画像データの検索の検索結果を
ソートする方法としては、例えば、以下の４つの方法が
上げられる。［方法１］画像データの検索結果を表示する際に、ユー
ザの投票数の多い検索結果から検索結果をソートする。［方法２］画像データの検索結果として得られる、例え
ば、画像データＡに対する検索前の検索一致度をＲＡ、
その画像データＡに対するユーザの投票数（検索を行っ
たユーザの人数）をＶＡ、現時点の総投票数Ｖｓｕｍと
した場合に、以下に示す式（１．０）によって新たな検
索一致度を算出する。但し、αは０＜αを満たす定数と
する。

【００１１】

【数１】そして、この式（１．０）によって算出した検索一致度
に従って検索結果をソートする。尚、式（１．０）によ
って算出する検索一致度は、投票数を検索一致度のオフ
セット成分に変換し、これを検索前の検索一致度に加算
して得た検索一致度を示している。［方法３］画像データの検索のために付加した説明文及
びキーワードによる検索が可能な場合には、以下に示す
ような画像データの検索結果のソートが可能である。図
７に示すように、検索のために付加した説明文及びキー
ワード（単語）毎に検索に用いられたのべ回数が管理さ
れている。また、単語を説明文及びキーワードとして付
加した画像データを示す画像データ管理ＩＤとユーザに
よる投票数が画像データ毎に管理されている。

【００１２】そして、検索条件が、例えば、単語ＷＯＲ
Ｄ１だけであれば、その単語ＷＯＲＤ１を説明文及びキ
ーワードとして付加した画像データの投票数を参照し
て、その投票数が多い順番で検索結果をソートすればよ
い。また、検索条件が、例えば、単語ＷＯＲＤ１、ＷＯ
ＲＤ２、…、ＷＯＲＤｎのｎ語の単語である場合には、
ヒットする総ての画像データのユーザによる投票数を画
像データ毎に加算して総投票数を算出し、算出された投
票数が多い順番で検索結果をソートする。［方法４］上記の方法３の変形例として、検索条件が、
例えば、単語ＷＯＲＤ１、ＷＯＲＤ２、…、ＷＯＲＤｎ
のｎ個の単語である場合に、各単語の検索に用いられた
確率Ｐ１、Ｐ２、…、Ｐｎと、そのｎ個の単語それぞれ
に対するユーザの投票数Ｖ（ｉ，Ａ）（但し、ｉ＝１、
２、…、ｎ）、検索結果として得られる画像データＡに
対する検索一致度をＲＡとした場合に、以下に示す式
（１．１）によって検索に対する評価値を算出する。但
し、αは０＜αを満たす定数とする。

【００１３】

【数２】そして、この式（１．１）によって算出した評価値に従
って検索結果をソートする。以上説明したいずれの方法
を用いても、多くのユーザが興味が在る、あるいは目に
した画像データを優先して検索結果に反映・学習させ、
ユーザの興味の高さを反映した検索結果のソート機能を
有することが可能となる。

【００１４】以下、具体的な実施形態として、例えば、
［方法４］の検索結果のソート方法を用いた画像データ
の検索処理について説明していく。まず、本発明の実施
形態の画像処理装置の構成について、図１を用いて説明
する。図１は本発明の実施形態における画像処理装置の
構成を示すブロック図である。

【００１５】図１において、１はユーザインタフェース
であり、キーボード、マウスより構成される。４は画像
蓄積部であり、画像メモリ５に一旦記憶される画像デー
タを蓄積する。２は画像入力部であり、ユーザインタフ
ェース１からの指示により、画像蓄積部４に登録する登
録対象となる画像データの入力を行う。尚、本実施形態
で扱う画像データは、自然画像データであるとする。但
し、画像データはこれに限定されず、ＣＧやＣＡＤ等の
人工的な画像データであっても良い。

【００１６】５は画像メモリであり、画像入力部２より
入力された画像データを一旦記憶する。７は画像特徴抽
出部であり、画像メモリ５に一旦記憶された画像データ
の類似画像データを検索するための画像特徴量を抽出す
る。９は画像特徴インデックスであり、画像特徴抽出部
７で抽出された画像データの画像特徴量を、その画像デ
ータと対応づけて登録する。１３は画像管理データベー
ス（ＤＢ）であり、検索された画像データに関する情報
として、例えば、図６に示すように、その画像データを
示す画像管理ＩＤ、その画像データに対するユーザの投
票数、その画像データが格納されている画像蓄積部４の
格納先のアドレス、その画像データの作成日、作成時
間、画像特徴量を管理する。

【００１７】３は言語処理部であり、画像入力部２より
入力された画像データに、その画像データの内容を示す
説明文およびキーワードが付加されている場合、同義語
・類義語辞書８を参照して、その説明文およびキーワー
ドの形態素解析を行い、その解析結果より得られる単語
を全文検索登録部およびキーワード登録部６に出力す
る。また、ユーザインタフェース１より画像蓄積部４に
蓄積される画像データを検索するための検索語が入力さ
れた場合には、その検索語を画像検索部１０に出力す
る。

【００１８】６は全文検索登録部およびキーワード登録
部であり、言語処理部３より入力される単語に関する情
報として、例えば、図７に示すように、単語、検索に用
いられた延べ回数、その単語を説明文およびキーワード
として付加する画像データの画像管理ＩＤ、その画像デ
ータに対するユーザの投票数を全文検索インデックスお
よびキーワードインデックス１１に登録する。８は同義
語・類義語辞書であり、同義語、類義語をそれらに対応
する概念毎に管理する辞書である。尚、この同義語・類
義語辞書８の詳細については後述する。

【００１９】１０は検索部であり、画像検索部１０ａ、
言語・画像特徴概念変換部１０ｂ、言語検索部１０ｃよ
り構成される。言語検索部１０ｃは、言語処理部３より
入力された検索語に基づいて、全文検索インデックスお
よびキーワードインデックス１１を参照して全文検索お
よびキーワード検索を行う。言語・画像特徴概念変換部
１０ｂは、検索語に対する単語を同義語・類義語辞書８
を参照して取得し、言語検索部１０ｃで検索された画像
データの類似画像データを検索するための画像特徴量を
算出する。画像検索部１０ａは、言語・画像特徴概念変
換部１０ｂで算出される画像特徴量に基づいて画像特徴
インデックス９を参照し、類似画像データを検索する。
また、検索結果通知部１２で表示されている検索結果で
ある画像データの内、ユーザインタフェース１より指定
された画像データの画像特徴量に基づいて画像特徴イン
デックス９を参照し、類似画像データを検索する。

【００２０】１２は検索結果通知部であり、検索部１０
より検索結果として得られる画像データを表示する。次
に、本実施形態の同義語・類義語辞書８の詳細な構成の
一例について、図５を用いて説明する。図５は本発明の
実施形態の同義語・類義語辞書の詳細な構成の一例を示
す図である。

【００２１】同義語・類義語辞書８は、同義語・類義語
を、それに対応する概念の抽象度に応じて登録されてい
る。そして、概念の抽象度が異なる同義語・類義語の間
には、その抽象度の差を示す概念距離が定義されてい
る。例えば、図５では、「自動車」と「車」との概念距
離は１．２になる。また、この概念距離は正規化されて
おり、１．０で全く同じ意味となり、数字が大きくなら
ばなるほど意味が異なる概念を示す。次に、本実施形態
の画像処理装置で実行される画像データを登録する画像
登録処理について、図２を用いて説明する。

【００２２】図２は本発明の実施形態で実行される画像
登録処理の処理フローを示すフローチャートである。ま
ず、ステップＳ１０１で、登録対象の画像データを画像
入力部２より入力し、入力された画像データは画像メモ
リ５に一旦記憶される。次に、ステップＳ１０２で、入
力された画像データに、その入力された画像データに対
する説明文やキーワードが付加されているか否かを判定
する。説明文やキーワードが付加されていない場合（ス
テップＳ１０２でＮＯ）、ステップＳ１０４に進む。一
方、説明文やキーワードが付加されている場合（ステッ
プＳ１０２でＹＥＳ）、ステップＳ１０３に進む。

【００２３】ステップＳ１０３で、画像データに付加さ
れている説明文やキーワードを、その画像データと対応
づけて全文検索インデックスおよびキーワードインデッ
クス１１に登録する。また、説明文やキーワードを付加
した画像データのユーザの投票数を０として登録する。
全文検索インデックスおよびキーワードインデックス１
１には、上述したように、その説明文やキーワードを示
す単語以外に、検索に用いられた延べ回数、その単語を
付加した画像データを示す画像管理ＩＤ、その画像デー
タのユーザの投票数が登録される。

【００２４】ステップＳ１０４で、画像データの画像特
徴量を画像特徴抽出部７で抽出する。ステップＳ１０５
で、画像データより抽出した画像特徴量を、その画像デ
ータと対応づけて画像特徴インデックス９に登録する。
ステップＳ１０６で、画像データを画像蓄積部４に格納
する。ステップＳ１０７で、画像蓄積部４に格納した画
像データの格納先のアドレス、その画像データを管理す
るための画像管理ＩＤ、作成日、作成時間、抽出された
画像特徴特徴量、ユーザによる投票数を０にして、画像
管理ＤＢ１３にセットする。

【００２５】尚、初期導入時に検索がよく行われそうな
代表的かつ良質の複数のサンプル画像データ（所定値以
上の頻度で検索される画像データ）を登録する場合に
は、そのサンプル画像データの内容の説明文やキーワー
ドを付加する。そのため、付加する説明文あるいはキー
ワードは、そのサンプル画像データと対応づけられて全
文検索インデックスおよびキーワードインデックス１１
に登録される。また、類似画像データの検索を行うため
に、そのサンプル画像データの画像特徴量が抽出され、
抽出された画像特徴量は画像特徴インデックス９に登録
される。

【００２６】次に本発明の実施形態で実行される検索処
理は２種類あり、１つはユーザが所望する画像データに
近い画像データを選択して、その画像データの類似する
画像データの検索を行うことにより所望の画像データを
検索（類似画像検索）するものである。もう１つは、説
明文やキーワードを用いてユーザが所望する画像データ
を検索（全文検索およびキーワード検索）するものであ
る。まず、類似画像検索による画像データの検索処理に
ついて、図３を用いて説明する。

【００２７】図３は本発明の実施形態で実行される類似
画像検索の処理フローを示すフローチャートである。ま
ず、ステップＳ３０１で、類似画像検索に先立ち、所望
する画像データがいずれのグループに属するかを決定す
るためのアンケートをユーザに対し行う。このアンケー
トは、検索結果通知部１２で必要な質問事項をユーザに
対し表示し、ユーザがその表示されたアンケートに対す
る解答をユーザインタフェース１より入力することで行
う。アンケートの内容としては、ユーザの年齢、趣味、
職業等の情報であり、これらの情報と登録することで、
同じ年齢層、趣味等の共通の情報を有するユーザ毎の傾
向抽出を行うことができる。これにより、検索結果のソ
ート条件として共通の傾向を有するグループ単位に基づ
いた検索結果のソートを行うことができる。尚、事前に
画像処理装置の使用に対するアカウントを貰うような構
成からなる画像処理装置である場合には、アカウント時
の１回だけアンケートに答えればよい。また、本実施形
態では、説明を簡略化するために、アンケートに基づい
た検索結果のソート条件は無条件であるとする。

【００２８】アンケートが完了したら、検索対象の画像
データとして、画像蓄積部４に格納される画像データを
セットする。ステップＳ３０２で、セットされた画像デ
ータの縮小画像を表示し、ユーザが所望する画像データ
に近い縮小画像を選択させる。ステップＳ３０３で、ユ
ーザが選択した画像データの画像特徴量を画像管理ＤＢ
１３より取得する。そして、取得された画像特徴量に基
づいて画像特徴インデックス９を参照し、選択された画
像データの類似画像データの検索を行う。次に検索され
た画像データの検索一致度及びユーザの投票数を取得す
る。次に、取得した検索一致度及び投票数に対し式
（１．１）を用いて評価値を計算し、評価値の大きい順
に検索結果をソートして検索結果通知部１２で縮小表示
する。

【００２９】ステップＳ３０５で、その検索結果に対す
るユーザの指示を受け付ける。ユーザの指示が、検索結
果に対し、更に画像データを選択して検索結果の絞り込
みを行う場合は、ステップＳ３１１で、現在の検索結果
を更に絞り込んで検索する旨をユーザインタフェース１
より設定し、ステップＳ３０２に戻り、新たに画像デー
タを選択する。この場合、現在得られている検索結果は
保持され、新たに選択された画像データによる類似画像
検索の検索結果と、保持されている検索結果の論理積を
とることで検索結果の絞り込みが実現される。

【００３０】ユーザの指示が、検索処理の終了である場
合には、処理を終了する。ユーザの指示が、検索のやり
直しを行う場合は、ステップＳ３１２で、検索結果をク
リアし、ステップＳ３０１に戻る。ユーザの指示が、検
索結果として表示される画像データ（縮小表示されてい
る画像データ）に対し、所望の画像データに対する処理
を実行するために画像データを選択する場合は、ステッ
プＳ３０６で、選択する画像データに対する処理がその
画像データの詳細（原寸の画像データ）を表示する要求
であるか否かを判定する。選択する画像データの詳細を
表示する要求である場合（ステップＳ３０６でＹＥ
Ｓ）、ステップＳ３０７に進む。そして、ステップＳ３
０７で、選択された画像データ（縮小表示されている画
像データ）の詳細（原寸の画像データ）を表示する。ス
テップＳ３０８で、画像管理ＤＢ１３に記憶されている
選択された画像データのユーザの投票数を１増加する。

【００３１】一方、ステップＳ３０６で、選択する画像
データの詳細を表示する要求でない場合（ステップＳ３
０６でＮＯ）、ステップＳ３０９に進む。そして、ステ
ップＳ３０９で、選択された画像データの類似画像デー
タの検索を行う。ステップＳ３１０で、検索された類似
画像データに応じて、現在、縮小表示されている画像デ
ータの表示を更新する。

【００３２】続いて、説明文やキーワードを用いてユー
ザが所望する画像データを検索する全文検索およびキー
ワード検索処理について、図４を用いて説明する。図４
は本発明の実施形態で実行される全文検索およびキーワ
ード検索の処理フローを示すフローチャートである。ま
ず、ステップＳ４０１で、全文検索およびキーワード検
索に先立ち、所望する画像データがいずれのグループに
属するかを決定するためのアンケートをユーザに対し行
う。アンケートが完了したら、検索対象の画像データと
して、画像蓄積部４に格納される画像データをセットす
る。

【００３３】ステップＳ４０２で、検索条件である検索
語をユーザインタフェース１より入力する。次に、ステ
ップＳ４０３で、入力された検索語（説明文およびキー
ワード）の形態素解析を行う、その解析結果より得られ
る単語を取得する。そして、その単語に基づいて、全文
検索およびキーワード検索を行う。尚、形態素解析より
得られる単語が複数の場合には、所定の論理演算を施し
て得られる検索条件に基づいて、全文検索およびキーワ
ード検索を行う。そして、全文検索およびキーワード検
索によって画像データが検索されると、画像管理ＤＢ１
３を参照して、検索される画像データの画像管理ＩＤ、
ユーザの投票数を取得する。検索に用いられた延べ回数
を取得する。また、全文検索インデックスおよびキーワ
ードインデックス１１を参照し、全文検索およびキーワ
ード検索に用いられた単語の検索に用いられた延べ回数
を取得し、その延べ回数を１増加する。

【００３４】尚、検索もれを防ぐために、図５に示した
同義語・類義語辞書８を用い、検索語を形態素解析して
得られる単語の同義語・類義語を取得し、元の検索語に
対し論理和の演算関係で得られる新たな検索語を用いて
検索処理を行っても良い。この場合、元の検索語により
検索される画像データに対しては、その概念距離に医科
の式を満たす検索一致度ｙを与えることとなる。ｙ＝ｆ（ｘ）ｙ：検索一致度（％）ｘ：概念距離ｆ（ｘ）はｘに関する単調減少関数で、同義語の場合は
概念距離ｘ１に対してｆ（ｘ１）＝１００％を満たすも
のとする．例えば、図５の同義語・類義語辞書におい
て、検索語「自動車」ではなくその類義語「カー」で検
索される画像に対しては、その概念距離が１．０、即ち
全く同じ意味なのでの１／１．０＊１００＝１００％の
検索一致度として扱う。また、検索語「自動車」ではな
くその類義語「車」で検索される画像に対しては、その
概念距離が１．２なので、１／１．２＊１００＝約８
３．３％の検索一致度として扱う。尚、

【００３５】ステップＳ４０４で、取得した検索一致度
及び投票数に対し式（１．１）を用いて評価値を計算
し、評価値の大きい順に検索結果をソートして検索結果
通知部１２で縮小表示する。ステップＳ４０５で、その
検索結果に対するユーザの指示を受け付ける。ユーザの
指示が、検索結果に対し、更に画像データを選択して検
索結果の絞り込みを行う場合は、ステップＳ４１１で、
現在の検索結果を更に絞り込んで検索する旨をユーザイ
ンタフェース１より設定し、ステップＳ４０２に戻り、
新たに検索語を入力する。この場合、現在得られている
検索結果は保持され、新たに入力された検索語による全
文検索およびキーワード検索の検索結果と、保持されて
いる検索結果の論理積をとることで検索結果の絞り込み
が実現される。

【００３６】ユーザの指示が、検索処理の終了である場
合には、処理を終了する。ユーザの指示が、検索のやり
直しを行う場合は、ステップＳ４１２で、検索結果をク
リアし、ステップＳ４０１に戻る。ユーザの指示が、検
索結果として表示される画像データ（縮小表示されてい
る画像データ）に対し、所望の画像データに対する処理
を実行するために画像データを選択する場合は、ステッ
プＳ４０６で、選択する画像データに対する処理がその
画像データの詳細（原寸の画像データ）を表示する要求
であるか否かを判定する。選択する画像データの詳細を
表示する要求である場合（ステップＳ４０６でＹＥ
Ｓ）、ステップＳ４０７に進む。ステップＳ４０７で、
選択された画像データ（縮小表示されている画像デー
タ）の詳細（原寸の画像データ）を表示する。ステップ
Ｓ４０８で、画像管理ＤＢ１３に記憶されている選択さ
れた画像データのユーザの投票数を１増加する。また、
検索に用いた全文検索インデックスおよびキーワードイ
ンデックスの単語の投票数を１増加する。

【００３７】一方、ステップＳ４０６で、選択する画像
データの詳細を表示する要求でない場合（ステップＳ４
０６でＮＯ）、ステップＳ４０９に進む。そして、ステ
ップＳ４０９で、選択された画像データの類似画像デー
タの検索を行う。ステップＳ４１０で、検索された類似
画像データに応じて、現在、縮小表示されている画像デ
ータの表示を更新する。

【００３８】以上説明したように、本実施形態によれ
ば、画像データの検索時に、検索に関わる画像データお
よび検索条件に対しユーザの投票数を管理することで、
その管理された投票数に基づいて画像データの検索結果
をソートして表示することができるので、ユーザの興味
の高さを反映してソートされた画像データの検索結果を
得ることができる。

【００３９】尚、本実施形態においては、検索結果とし
て得られる縮小表示された画像データから、その画像デ
ータの詳細の表示がユーザより要求された時に、その画
像データの投票数を獲得する構成であったが、これに限
定されず、投票数を獲得するタイミングは、例えば、縮
小表示された時等の他のタイミングでも良い。尚、本発
明は、複数の機器（例えば、ホストコンピュータ、イン
タフェース機器、リーダ、プリンタ等）から構成される
システムに適用しても、一つの機器からなる装置（例え
ば、複写機、ファクシミリ装置等）に適用してもよい。

【００４０】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体を、システムあるいは装置に供給し、そ
のシステムあるいは装置のコンピュータ（またはＣＰＵ
やＭＰＵ）が記憶媒体に格納されたプログラムコードを
読出し実行することによっても、達成されることは言う
までもない。

【００４１】この場合、記憶媒体から読出されたプログ
ラムコード自体が上述した実施の形態の機能を実現する
ことになり、そのプログラムコードを記憶した記憶媒体
は本発明を構成することになる。プログラムコードを供
給するための記憶媒体としては、例えば、フロッピディ
スク、ハードディスク、光ディスク、光磁気ディスク、
ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモ
リカード、ＲＯＭなどを用いることができる。

【００４２】また、コンピュータが読出したプログラム
コードを実行することにより、前述した実施形態の機能
が実現されるだけでなく、そのプログラムコードの指示
に基づき、コンピュータ上で稼働しているＯＳ（オペレ
ーティングシステム）などが実際の処理の一部または全
部を行い、その処理によって前述した実施の形態の機能
が実現される場合も含まれることは言うまでもない。

【００４３】更に、記憶媒体から読出されたプログラム
コードが、コンピュータに挿入された機能拡張ボードや
コンピュータに接続された機能拡張ユニットに備わるメ
モリに書き込まれた後、そのプログラムコードの指示に
基づき、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【００４４】本発明を上記記憶媒体に適用する場合、そ
の記憶媒体には、先に説明したフローチャートに対応す
るプログラムコードを格納することになるが、簡単に説
明すると、図８のメモリマップ例に示す各モジュールを
記憶媒体に格納することになる。すなわち、少なくとも
「保持モジュール」、「入力モジュール」、「検索モジ
ュール」および「表示モジュール」の各モジュールのプ
ログラムコードを記憶媒体に格納すればよい。

【００４５】尚、「保持モジュール」は、画像蓄積部に
管理される画像データ毎に、画像データを示す情報と該
画像データが検索された検索回数とを対応づけて管理す
る管理テーブルを保持する。「入力モジュール」は、検
索条件を入力する。「検索モジュール」は、入力された
検索条件に該当する画像データを検索する。「表示モジ
ュール」は、索される画像データに対応する検索回数を
管理テーブルを参照して獲得し、その獲得された検索回
数に基づいて検索される画像データをソートして表示す
る。

【００４６】

【発明の効果】以上説明したように、本発明によれば、
ユーザの興味の高さを反映して画像データの検索結果を
ソートすることができる画像処理装置及びその制御方法
を提供できる。

【図面の簡単な説明】

【図１】本発明の実施形態における画像処理装置の構成
を示すブロック図である。

【図２】本発明の実施形態で実行される画像登録処理の
処理フローを示すフローチャートである。

【図３】本発明の実施形態で実行される類似画像検索の
処理フローを示すフローチャートである。

【図４】本発明の実施形態で実行される全文検索および
キーワード検索の処理フローを示すフローチャートであ
る。

【図５】本発明の実施形態の同義語・類義語辞書の詳細
な構成の一例を示す図である。

【図６】本発明の実施形態の画像管理ＤＢのレコード構
成の一例を示す図である。

【図７】本発明の実施形態の全文検索インデックスおよ
びキーワードインデックスのレコード構成の一例を示す
図である。

【図８】本発明の実施形態を実現するプログラムコード
を格納した記憶媒体のメモリマップの構造を示す図であ
る。

【符号の説明】

１ユーザインタフェース２画像入力部３言語処理部４画像蓄積部５画像メモリ６全文検索登録部およびキーワード登録部７画像特徴抽出部８同義語・類義語辞書９画像特徴インデックス１０検索部１０ａ画像検索部１０ｂ言語・画像特徴概念変換部１０ｃ言語検索部１１全文検索インデックスおよびキーワードインデッ
クス１２検索結果通知部１３画像管理ＤＢ

Claims

【特許請求の範囲】

【請求項１】複数の画像データを画像蓄積部に管理
し、該画像蓄積部に管理される画像データの検索を行う
画像処理装置であって、前記画像蓄積部に管理される画像データ毎に、画像デー
タを示す情報と該画像データが検索された検索回数とを
対応づけて管理する管理テーブルを保持する保持手段
と、検索条件を入力する入力手段と、前記入力手段で入力された検索条件に該当する画像デー
タを検索する検索手段と、前記検索手段で検索される画像データに対応する前記検
索回数を前記管理テーブルを参照して獲得し、その獲得
された検索回数に基づいて該検索手段で検索される画像
データをソートして表示する表示手段とを備えることを
特徴とする画像処理装置。
【請求項２】前記保持手段は、更に、前記入力手段で
入力される検索条件に対し、同一検索条件毎に該検索条
件が入力された累積回数を管理するインデックスを保持
することを特徴とする請求項１に記載の画像処理装置。
【請求項３】前記表示手段は、前記検索手段で検索さ
れる画像データに対応する前記検索回数を前記管理テー
ブルを参照して獲得し、かつ前記検索条件に対応する前
記累積回数を前記インデックスを参照して獲得し、獲得
された検索回数及び累積回数に基づいて該検索手段で検
索される画像データをソートして表示することを特徴と
する請求項２に記載の画像処理装置。
【請求項４】前記表示手段は、前記入力手段より検索
条件が入力された場合、ユーザに対する情報を獲得する
ためのアンケート画面を表示することを特徴とする請求
項１に記載の画像処理装置。
【請求項５】前記入力手段は、前記表示手段によって
前記アンケート画面が表示された場合に、該アンケート
画面に対するユーザの解答の入力を受け付ける受付手段
と、前記受付手段で受け付けた前記ユーザの解答を記憶する
記憶手段とを備えることを特徴する請求項４に記載の画
像処理装置。
【請求項６】前記アンケート画面の内容は、少なくと
もユーザの年齢、趣味、を含むことを特徴とする請求項
５に記載の画像処理装置。
【請求項７】前記表示手段は、前記記憶手段に記憶さ
れるユーザの解答に基づいて、前記検索手段で検索され
る画像データをソートして表示することを特徴とする請
求項６に記載の画像処理装置。
【請求項８】複数の画像データを画像蓄積部に管理
し、該画像蓄積部に管理される画像データの検索を行う
画像処理装置の制御方法であって、前記画像蓄積部に管理される画像データ毎に、画像デー
タを示す情報と該画像データが検索された検索回数とを
対応づけて管理する管理テーブルを保持する保持工程
と、検索条件を入力する入力工程と、前記入力工程で入力された検索条件に該当する画像デー
タを検索する検索工程と、前記検索工程で検索される画像データに対応する前記検
索回数を前記管理テーブルを参照して獲得し、その獲得
された検索回数に基づいて該検索工程で検索される画像
データをソートして表示する表示工程とを備えることを
特徴とする画像処理装置の制御方法。
【請求項９】前記保持工程は、更に、前記入力工程で
入力される検索条件に対し、同一検索条件毎に該検索条
件が入力された累積回数を管理するインデックスを保持
することを特徴とする請求項８に記載の画像処理装置の
制御方法。
【請求項１０】前記表示工程は、前記検索工程で検索
される画像データに対応する前記検索回数を前記管理テ
ーブルを参照して獲得し、かつ前記検索条件に対応する
前記累積回数を前記インデックスを参照して獲得し、獲
得された検索回数及び累積回数に基づいて該検索工程で
検索される画像データをソートして表示することを特徴
とする請求項９に記載の画像処理装置の制御方法。
【請求項１１】前記表示工程は、前記入力工程より検
索条件が入力された場合、ユーザに対する情報を獲得す
るためのアンケート画面を表示することを特徴とする請
求項８に記載の画像処理装置の制御方法。
【請求項１２】前記入力工程は、前記表示工程によっ
て前記アンケート画面が表示された場合に、該アンケー
ト画面に対するユーザの解答の入力を受け付ける受付工
程と、前記受付工程で受け付けた前記ユーザの解答を記憶媒体
に記憶する記憶工程とを備えることを特徴する請求項１
１に記載の画像処理装置の制御方法。
【請求項１３】前記アンケート画面の内容は、少なく
ともユーザの年齢、趣味、を含むことを特徴とする請求
項１２に記載の画像処理装置の制御方法。
【請求項１４】前記表示工程は、前記記憶工程で記憶
媒体に記憶されるユーザの解答に基づいて、前記検索手
段で検索される画像データをソートして表示することを
特徴とする請求項１３に記載の画像処理装置の制御方
法。
【請求項１５】複数の画像データを画像蓄積部に管理
し、該画像蓄積部に管理される画像データの検索を行う
画像処理装置の制御のプログラムコードが格納されたコ
ンピュータ可読メモリであって、前記画像蓄積部に管理される画像データ毎に、画像デー
タを示す情報と該画像データが検索された検索回数とを
対応づけて管理する管理テーブルを保持する保持工程の
プログラムコードと、検索条件を入力する入力工程のプログラムコードと、前記入力工程で入力された検索条件に該当する画像デー
タを検索する検索工程のプログラムコードと、前記検索工程で検索される画像データに対応する前記検
索回数を前記管理テーブルを参照して獲得し、その獲得
された検索回数に基づいて該検索工程で検索される画像
データをソートして表示する表示工程のプログラムコー
ドとを備えることを特徴とするコンピュータ可読メモ
リ。