JP2005236646A - 画像表示装置および方法およびプログラム - Google Patents

画像表示装置および方法およびプログラム Download PDF

Info

Publication number
JP2005236646A
JP2005236646A JP2004042976A JP2004042976A JP2005236646A JP 2005236646 A JP2005236646 A JP 2005236646A JP 2004042976 A JP2004042976 A JP 2004042976A JP 2004042976 A JP2004042976 A JP 2004042976A JP 2005236646 A JP2005236646 A JP 2005236646A
Authority
JP
Japan
Prior art keywords
thumbnail
thumbnails
display
grouping
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004042976A
Other languages
English (en)
Other versions
JP2005236646A5 (ja
Inventor
Shinji Funatsu
晋治 船津
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2004042976A priority Critical patent/JP2005236646A/ja
Publication of JP2005236646A publication Critical patent/JP2005236646A/ja
Publication of JP2005236646A5 publication Critical patent/JP2005236646A5/ja
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

【課題】 複数のサムネイルを画面上にて分類表示する画像表示装置および方法およびプログラムを提供する。
【解決手段】 画像表示装置(11)において、特徴量抽出部(5)は、サムネイル生成部(4)が生成した画像データ(31)のサムネイルデータ(33)から特徴量抽出条件(35)にて各サムネイルの特徴量を抽出して特徴量算出結果(36)に登録し、ベクトル空間展開部(6)、類似度算出部(7)、グループ化/ソート制御部(8)が、特徴量算出結果(36)基づいて画像の類似度によるサムネイルのクラスタリングを行い、サムネイル表示制御部(10)は、サムネイル一覧表示用データ作成部(9)がサムネイル管理情報(34)の表示優先順位にて作成した表示用データにて表示部への表示制御を行う。
【選択図】 図1

Description

本発明は、記憶した各画像データの類似度を分析してグループ分けを行い、グループ分けを行った結果に基づいて画像のサムネイルの一覧表示を行う技術に関し、特に、各画像のサムネイルを分析対象としてサムネイルの一覧表示を制御する画像表示装置および方法およびプログラムに関する。
従来の画像検索を行う技術として、特許文献1に記載の「画像検索方法およびその装置およびこれを利用した検索サービス」が開示されている。
この特許文献1の発明は、画像検索の結果を検索者が理解しやすくかつ利用しやすい形で検索者へ提示することを目的とし、多様な観点によって抽出された大量の画像の特徴量を統計処理してベクトル空間を生成し、ベクトル空間から任意の軸を選び、対応する座標に縮小画像を配置することで序列に従ったブラウジング表示を行う。
ユーザは、ブラウジング表示画面の座標を指定するセンタリング、拡大縮小率の指定によって縮小画像集合の概観表示と詳細表示とを連続的に操作し、序列に従って配置された画像を画像指定あるいは領域指定によって参照画像として一度に選択し、それらの参照画像に対して特徴量の選択と重みの指定を一度に行い、画像検索を行う。
特開平11−175535号公報。
上記特許文献1の発明は、各画像ファイルのコンテンツからN個の特徴量を抽出し、各特徴量を座標軸とするN次のベクトル空間にそれぞれ配置する表示方法を使用している。
しかし、特徴量の抽出対象が画像ファイルのコンテンツであるため、被検索対象となる各画像サイズの違いがある場合、特徴量を抽出する条件にばらつきが生じるため、適切な分析結果を得るための抽出条件を調整する必要があるといった問題が生じた。
また、分析結果が特徴量を軸とする座標空間上に配置して表現されるので、分析結果を理解するには、分析手法に関する一定レベルの知識が必要となり、一般ユーザには利用しにくいといった問題が生じた。
よって、本発明は、サムネイルに変換した画像データに基づいて画像の類似度を分析し、分析結果をサムネイルの一覧画面におけるサムネイルの表示形態に反映して表示することによって、サムネイルを参照しながら、目的の画像と同様の特徴をもつグループを経由して、目的の画像を迅速に特定することができる画像表示装置および方法およびプログラムの提供を目的とする。
上記目的を達成するために、請求項1の発明は、複数のサムネイルを画面上に分類表示する画像表示装置において、複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を抽出する特徴量抽出手段と、特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを算出する類似度算出手段と、類似度算出手段にて算出された類似度に基づいて、複数のサムネイルをグループ化するグループ化手段と、グループ化手段によるグループ化に基づき複数のサムネイルを画面上に表示するサムネイル表示手段を具備することを特徴とする。
また、請求項2の発明は、請求項1の発明において、グループ化手段によりグループ化されたグループにおいて、所定の条件に基づいて代表サムネイルを特定して管理する代表サムネイル管理手段と、代表サムネイル管理手段にて特定された代表サムネイルの一覧を表示するとともに、表示した代表サムネイルのうち選択された代表サムネイルと同一のグループに属するサムネイルの一覧を階層的に表示するサムネイル階層表示手段とをさらに具備することを特徴とする。
また、請求項3の発明は、請求項1の発明において、特徴量抽出手段は、所定の抽出条件として、サムネイルの画像領域をユーザが処理毎に指定する抽出条件指定手段をさらに具備し、抽出条件指定手段にて指定された内容に基づいて特徴量を抽出することを特徴とする。
また、請求項4の発明は、複数のサムネイルを画面上に分類表示する画像表示方法であって、複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を特徴量抽出手段により抽出し、特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを類似度算出手段により算出し、類似度算出手段にて算出された類似度に基づいて、複数のサムネイルをグループ化手段によりグループ化し、グループ化による手段グループ化に基づき複数のサムネイルをサムネイル表示手段により画面上に表示することを特徴とする。
また、請求項5の発明は、複数のサムネイルを画面上に分類表示する処理をコンピュータに実行させる画像表示プログラムであって、特徴量抽出手段が複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を抽出するステップと、類似度算出手段が特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを算出するステップと、類似度算出手段にて算出された類似度に基づいて、グループ化手段が複数のサムネイルをグループ化するステップと、グループ化手段によるグループ化に基づき、サムネイル表示手段が、複数のサムネイルを画面上に表示するステップとを具備することを特徴とする。
本発明によれば、処理対象画像の特徴量の算出による類似画像のグループ化処理、グループ化した結果の表示制御を各処理対象画像から生成したサムネイルを用いて処理することができる。
これにより、被分析対象となる画像の特徴を同一規格の画像サイズで処理することができ、従来の画像データを直接取り扱う時に比べて、処理負荷の軽減化を実現することができる。
また、サムネイルの一覧表示においては、画像の類似性をサムネイルの並び順、グループ化、階層表示等を用いた表示態様によって表現することができるので、ユーザは、目的のサムネイルにすばやく辿り着くことができ、画像検索時間の短縮化を実現することができる。
以下、本発明の画像表示装置および方法およびプログラムについて添付図面を参照しながら詳細に説明する。
図1は、本発明の画像表示装置において、サムネイルの類似度による分類および分類したサムネイルの表示制御を行うための、モジュール構成および処理データを示した制御ブロック図である。
図1において、画像表示装置11は、画像のサムネイルを生成するサムネイル生成機能、生成した各サムネイルの画像データから所定の特徴量を抽出する特徴量抽出機能、各サムネイル間の類似性をクラスタリング等の手法を用いて分析するグラスタリング機能、グループ化した結果をサムネイル一覧画面における表示態様にて表現するサムネイル表示機能を具備し、ユーザに対する画像検索のための操作環境を提供する。
表示態様の例としては、類似性に基づいてサムネイルをソートして表示する一覧画面、あるいは、クラスタリングによってグループ化されたサムネイルを、グループ毎の代表サムネイルと、そのグループに属するサムネイルの一覧に分けて表示する階層表示画面がある。
図1において、上記各機能をソフトウエア的に制御するための構成として、画像表示装置11は、メインモジュールとしての画像表示主制御部2を中心に、入力操作検出・解析部1、記憶部3、サムネイル生成部4、特徴量抽出部5、ベクトル空間展開部6、類似度算出部7、グループ化/ソート制御部8、サムネイル一覧表示用データ作成部9、サムネイル表示制御部10をサブモジュールとして具備する。
記憶部3は、類似画像の分類、画像の表示制御に必要な各情報を記憶するデータ記憶手段であり、画像データ31、画像データ管理情報32、サムネイルデータ33、サムネイル管理情報34、特徴量抽出条件35、特徴量算出結果36、表示レイアウト情報37を記憶して管理する。
画像データ31は、類似度による分類対象となる画像データを記憶したファイルである。
サムネイルデータ33は、画像データ31を所定の規格に基づいて画像変換を行って作成したサムネイルの画像データを記憶したファイルである。
画像データ管理情報32は、画像データ31と、画像データ31から生成されたサムネイルデータ33との対応を管理するための情報である。
画像データ管理情報32は、例えば図2に示すように、画像データ31が記録された画像ファイルの識別情報を示す「元画像ファイルID」、画像データ31から生成したサムネイルの画像データを記憶したファイルを特定するための識別子となる「サムネイル識別子」を画像データ31毎に記憶して管理する。
特徴量抽出条件35は、特徴量を抽出する対象領域、特徴量の識別情報、特徴量のデータとして取得する値の内容等を予め定義して管理するための情報である。
特徴量抽出条件35は、例えば、図3に示すように、各サムネイルデータ33から抽出する特徴量を識別するための「特徴量識別子」、サムネイルにおいて特徴量の抽出対象となる領域を特定する情報としての「特徴量抽出領域」等を有する。
特徴量の具体例としては、対象領域に指定された各画素の色情報から得られる輝度、明度等の情報として所定の規則に従って数値化されたデータ等を取り扱う。
図1に戻り、特徴量算出結果36は、サムネイルデータ33毎の特徴量を特徴量抽出条件35に基づいて抽出した結果を、サムネイル毎に記録して管理するための情報である。
特徴量算出結果36は、例えば、図4に示すように、画像データ管理情報32に登録された「サムネイル識別子」毎の特徴量の抽出結果を、図3に示した特徴量抽出条件35にて定義された各「特徴量識別子」にてマトリクス上に展開して記録したテーブルである。
図1に戻り、サムネイル管理情報34は、特徴量算出結果36に記録された各サムネイルの特徴量に基づいて、クラスタリングによる類似したサムネイルのグループ化した結果を記憶して管理する情報である。
サムネイル管理情報34は、例えば、図5に示すように、サムネイルの識別情報として、画像データ管理情報32に登録された「サムネイル識別子」と、サムネイルデータ33を記憶したファイルの識別子としての「サムネイルファイル名」、サムネイルが属するグループの識別子としての「クラスタID」、サムネイル間の類似性を一次の配列としてソートした結果を示す「優先順位」、分類された各グループ内において、代表となるサムネイルを識別するための「代表フラグ」を記録して管理する。
再度、図1に戻り、表示レイアウト情報37は、類似度によって分類およびソートした結果を、表示部に対してどのように表示するかの画面レイアウトの種別、および、レイアウト毎の表示パターン、強調表示の背景色等を設定して管理する情報である。
入力操作検出・解析部1は、画像表示装置11が有する図示しない操作部からの操作データを受信し、オペレータにて指定された処理対象となる画像データ31もしくはサムネイルデータ33を特定し、入力画面の情報、処理結果の出力画面のレイアウト種別等、入力データの解析結果を画像表示主制御部2に出力する。
画像表示主制御部2は、入力操作検出・解析部1から出力された入力データを受信し、サムネイル生成部4、特徴量抽出部5、ベクトル空間展開部6、類似度算出部7、グループ化/ソート制御部8、サムネイル一覧表示用データ作成部9を順に制御して、類似するサムネイルのグループ化、および、分類結果に基づいて作成した表示用データを、サムネイル表示制御部10に出力する。
サムネイル生成部4は、処理対象となる画像データ31のサムネイルをサムネイルデータ33として記憶部3に生成する。
特徴量抽出部5は、サムネイルデータ33毎の特徴量を特徴量抽出条件35に設定された抽出条件に基づいて抽出し、抽出結果を特徴量算出結果36として記憶部3に生成する。
サムネイルを類似度によってグループ化するための第1の処理として、ベクトル空間展開部6は、特徴量算出結果36に記録された各特徴量から、特徴量抽出条件35にて定義されたN個の特徴量を各ベクトル方向とするベクトル空間(図6)へ展開するための、各ベクトル方向における大きさを算出する。
サムネイルを類似度によってグループ化するための第2の処理として、類似度算出部7は、ベクトル空間に展開された各サムネイル間の距離をそれぞれ算出して算出結果を記憶部3に一次的に記憶する。
サムネイルを類似度によってグループ化するための第3の処理として、グループ化/ソート制御部8は、類似度算出部7にて算出されたベクトル空間における各サムネイル間の距離に基づいてクラスタリングを行い、類似するサムネイルのグループ化を行う。
クラスタリングを行う例としては、「ウォード法」等を用いてグループ化を行う方法がある。
図7は、図6のベクトル空間に展開した各サムネイルを、距離の近いものを順にグループ化する際の手法を模式的に表した図である。
図7に示したグラフは、縦軸700は、隣接するサムネイルあるいはクラスタ間等における距離の長さを示し、横軸706には、対応するサムネイルを、例えば、原点からの距離が短く、尚且つ、距離の近いサムネイル同士が隣り合うようにソートしたものである。
例えば、図7の場合、距離h1(705)を上限としてクラスタリングを行うと、「クラスタC1」(701)、「クラスタC2」(702)、「クラスタC3」(703)、「クラスタC4」(704)の4つにグループ分けすることができる。
また、各クラスタの代表サムネイルとして、各クラスタ内のサムネイルのうち、例えば、最も原点に近い側のサムネイル、「I12」、「I22」、「I34」、「I41」(707)を得ることができる。
また、横軸に示したサムネイルの序列を、サムネイルの表示優先順位として各サムネイルに割り当てを行うようにしても良い。
再度、図1に戻り、グループ化/ソート制御部8は、クラスタリングによるグループ化した情報および、各サムネイルの表示優先順位、クラスタ毎の代表サムネイルの情報を、サムネイル管理情報34に設定する。
サムネイル一覧表示用データ作成部9は、グループ化したサムネイルを、オペレータにて指定された画面レイアウトに基づいて、例えば、図8に示すような、サムネイル一覧表示画面801、もしくは、図9(A)、図9(B)に示すようなサムネイル階層表示画面901の画面を、画像表示装置11の図示しない表示部へ表示するための表示用データを作成する。
サムネイル表示制御部10は、サムネイル一覧表示用データ作成部9にて作成された表示用データに基づいて、サムネイル分類・表示装置11の図示しない表示部に対して画面表示制御を行う。
図8において、サムネイル一覧表示画面801は、グループ化/ソート制御部8にて割り当てられた各サムネイルの優先順位でサムネイルをソートして一覧表示を行った画面である。
また、クラスタリングによって分類された各クラスタのサムネイル郡に対して、それぞれ異なる背景色の表示領域(図8の802、803、804、805、806)を画面に設け、グループ別の強調表示を行う。
図8の表示レイアウトによれば、類似するサムネイルをグループ化して表示できるのみならず、表示されたサムネイル間の距離にて類似性を表現することができ、オペレータは、多くのサムネイルから、目的の特徴を持ったサムネイルを迅速に見つけだすことが容易になる。

また、図9において、サムネイル階層表示画面901は、グループ化/ソート制御部8にて決定されたクラスタ毎の代表サムネイルのみを、表示優先順位に基づいてソートして一覧表示した画面(図9の(A))と、図9(A)に表示した代表サムネイルのうち、オペレータが指定した選択サムネイル904と同じグループに属するサムネイルを、類似サムネイル表示領域905上にソートして一覧表示した画面(図9の(B))の2つのレイアウトがある。
また、図9(A)は、所望する特徴をもった代表サムネイルを代表サムネイル表示領域902から選択し、類似サムネイル一覧表示用ボタン903を押下することによって図9(B)の画面に遷移することができ、図9(B)は、類似サムネイル表示領域905に表示された、戻るボタン907を押下することで、図9(A)の画面に戻ることができる。
これにより、サムネイル階層表示画面901をオペレータが操作することによって、「代表サムネイルの一覧」、「選択した代表サムネイルと同じ特徴をもつサムネイルの一覧」といった、階層的な表示が可能であるため、オペレータは、目的のサムネイルと同じ特徴をもつサムネイル一覧を絞り込み表示することができ、目的のサムネイルに短時間で辿り着くことができる。
次に、図1に示した画像表示装置11における、サムネイルの分類、表示制御方法について図1に示した制御モジュールおよびデータに付与した符号と、図10および、図11に示したフローチャートを用いて説明する。
図10は、サムネイルの類似度による分類と、分類結果に基づくサムネイル一覧画面の表示制御の流れを示すフローチャートである。
入力操作検出・解析部1からの入力データを受信すると、画像表示主制御部2は、サムネイル生成部4により、指定された各画像データ31のサムネイルを、サムネイルデータ33として記憶部3に生成するとともに、サムネイルデータ33毎に付与した識別情報を、画像データ管理情報32に登録する(S101)。
画像表示主制御部2は、特徴量抽出部5の制御により、ステップS101で生成した各サムネイルデータ33の特徴量を特徴量抽出条件35に基づいて抽出し、抽出した各特徴量を特徴量算出結果36に登録する(S103)。
画像表示主制御部2は、ベクトル空間展開部6を制御し、特徴量算出結果36に登録された特徴量に基づいて、サムネイルの特徴を示すベクトル空間に各サムネイルを展開する(S104)。
画像表示主制御部2は、類似度算出部7の制御により、ステップS104で展開したベクトル空間上の各サムネイルにおいて、各サムネイル間の距離をそれぞれ計算する(S105)。
画像表示主制御部2は、グループ化/ソート制御部8を制御し、ステップS105にて計算したサムネイル間の距離に基づいてクラスタリングを行い、各サムネイルが分類されたクラスタの情報、表示優先順位をサムネイル管理情報34に設定する(S106)。
画像表示主制御部2は、サムネイル一覧表示用データ作成部9により、サムネイル管理情報34に設定された、クラスタ識別子、表示優先順位と、表示レイアウト情報37に記録された出力画面のレイアウトに基づいて、表示用データを作成し、サムネイル表示制御部10に対して表示部への画面表示を指示する(S107)。
なお、図10に示したフローチャートにおいて、ステップS101に示したサムネイルの生成処理からステップS103に示した算出した特徴量の登録処理は、ステップS104以降の処理とは別の独立した処理単位に分けて事前に実施することが可能であり、処理対象画像に対応するサムネイルデータおよび特徴量の算出データが生成済みの場合には、既存のサムネイルの画像データ、サムネイルの特徴量データの生成処理をそれぞれ省略し、記憶部3から読み出して処理する構成にしても良い。
次に、図10のステップS107に示した、サムネイル一覧画面の表示制御についてのさらなる詳細な処理手順を図11のフローチャートに示して説明する。
図11において、サムネイル一覧表示用データ作成部9は、出力画面の表示レイアウトを判断し(S201)、出力レイアウトが図8に示すようなサムネイル一覧表示画面801である場合(S201―YES)、サムネイル一覧表示用データ作成部9は、サムネイル管理情報34に記録された「表示優先順位」を各サムネイルに取得し、取得した「表示優先順位」の昇順あるいは降順にてソートし(S202)、ソート結果に基づいて、画面表示用データを作成する(S203)。
再度、ステップS201に戻り、出力する画面が図9に示したサムネイル階層表示画面901である場合で(S201−NO)、かつ、図9(A)に示すような代表サムネイルの一覧表示を行う場合(S205−NO)、サムネイル一覧表示用データ作成部9は、サムネイル管理情報34の「代表フラグ」の登録データが「ON」となる代表サムネイルの識別子と、それに対応する「表示優先順位」をそれぞれ抽出し(S206)、抽出した優先順位に基づいて代表サムネイルをソートする(S207)。
サムネイル一覧表示用データ作成部9は、ソート結果に基づいて、代表サムネイルの一覧を表示するための表示用データを作成する(S208)。
再度、ステップS205に戻り、表示レイアウトが図9(B)に示したサムネイル階層表示画面901を表示する場合(S205−YES)、サムネイル一覧表示用データ作成部9は、オペレータが選択した代表サムネイル904のクラスタ識別子を入力データから特定し(S209)、特定したクラスタ識別子が登録された代表サムネイル以外の全サムネイルを、サムネイル管理情報34の「クラスタ識別子」を参照して抽出する(S210)。
ステップS210にて抽出した各サムネイルをサムネイル管理情報34に設定された「表示優先順位」に基づいてソートし(S211)。
ソートした結果に基づいて、選択された代表サムネイルがと同一のグループに属するサムネイルの詳細表示領域をもつ表示データを作成して画像表示主制御部2に出力する(S212)。
画像表示主制御部2は、サムネイル一覧表示用データ作成部9が、ステップS203、ステップS208、あるいはステップS212にて作成した画面表示用データに基づいて、サムネイル一覧画面の表示制御を行うようサムネイル表示制御部10に対して指示する(S204)。
以上が、図1に示したサムネイル分類・表示装置11における画像表示方法についての説明である。
なお、図1に示した特徴量抽出部5が抽出する特徴量の抽出基準は、図3に示した特徴量抽出条件35に予め設定して静的取り扱う以外の構成として、特徴量を抽出する任意の領域をユーザがサムネイルの表示要求を行う度に指定することが可能なユーザインタフェース表示手段を画像表示装置11に追加し、特徴量抽出部5は、指定された抽出条件に基づいて特徴量を抽出し、サムネイルの分類処理を行う構成にしてもよい。
また、図8および図9に示したサムネイルの一覧表示に関連して、図8に示したグラスタ毎に異なる色の強調枠を表示する際の色設定、あるいは、クラスタスタ毎に改ページを行うなどの設定を、ユーザが自由に設定変更することが可能な図12に示した一覧画面表示方法指定設定画面1201のようなユーザインタフェースを表示する手段をサムネイル分類・表示装置11に追加した構成にしてもよい。
また、図9に示した図9(B)の画面において、サムネイルの階層数は、代表サムネイルと、代表サムネイルと同一のサムネイルに属するサムネイル一覧の2階層で表示する例を示したが、これ以外に、図7に示したようなクラスタリングの過程にて生じたツリー構造を、表示の階層構造に適用して2階層以上の表示制御を行うようにしても良い。
本発明の画像表示装置および方法およびプログラムは、画像データを含むファイルの検索、画像データを閲覧するサービスを提供する画像ビューイングあるいはファイルビューイングアプリケーション、画像・文書ファイリングシステムおよび装置等に利用可能であり、特に、多くの画像もしくはサムネイルから目的の特徴をもった画像を速やかに特定することが必要とされる場合に有効である。
本発明に係る画像表示装置において、類似度による画像の分類および分類したサムネイルの表示制御を行うための、モジュール構成および処理データの関連を示した制御ブロック図である。 画像表示装置の記憶部に記憶される画像データ管理情報に登録して管理されるデータの例を示した図である。 画像表示装置の記憶部に記憶される特徴量抽出条件に登録して管理されるデータの例を示した図である。 画像表示装置の記憶部に記憶される特徴量算出結果に登録して管理されるデータの例を示した図である。 画像表示装置の記憶部に記憶されるサムネイル管理情報に登録して管理されるデータの例を示した図である。 算出したn個の特徴量をベクトル軸にもつベクトル空間上にサムネイルをプロットした時の例を概略的に示したベクトル空間図である。 図6に示したベクトル空間にプロットした各サムネイル間の距離に基づいて、クラスタリングによるグループ分けを行った時の例を示す図である。 サムネイル一覧表示画面の例を示す画面イメージ図である。 サムネイル階層表示画面の例を示す画面イメージ図である。 画像表示装置にて記憶管理される画像データを、サムネイルを用いて、分類して一覧表示する処理の流れを示すフローチャートである。 画像表示装置において、図8、図9に示したサムネイルの画面表示制御の処理手順を示すフローチャートである。 図8および図9に示したサムネイルの一覧画面における表示オプションを設定するための画面示した画面イメージ図である。
符号の説明
1 入力操作検出・解析部
2 画像表示主制御部
3 記憶部
31 画像データ
32 画像データ管理情報
33 サムネイルデータ
34 サムネイル管理情報
35 特徴量抽出条件
36 特徴量算出結果
37 表示レイアウト情報
4 サムネイル生成部
5 特徴量抽出部
6 ベクトル空間展開部
7 類似度算出部
8 グループ化/ソート制御部
9 サムネイル一覧表示用データ作成部
10 サムネイル表示制御部
11 画像表示装置 601 特徴量P1ベクトル軸
602 特徴量P2ベクトル軸
603 特徴量PNベクトル軸
604 クラスタC1
605 クラスタC3
606 クラスタC4
607 クラスタC2
700 縦軸(距離)
701 クラスタC1
702 クラスタC2
703 クラスタC3
704 クラスタC4
705 閾値
706 横軸(サムネイル識別子)
707 代表サムネイル
801 サムネイル一覧表示画面
802 クラスタC1サムネイル強調表示領域
803 クラスタC2サムネイル強調表示領域
804 クラスタC3サムネイル強調表示領域
805 クラスタC4サムネイル強調表示領域
901 サムネイル階層表示画面
902 代表サムネイル表示領域
903 類似サムネイル一覧表示用ボタン
904 選択サムネイル
905 類似サムネイル表示領域
906 類似サムネイル
907 戻るボタン
1201 一覧画面表示方法指定設定画面

Claims (5)

  1. 複数のサムネイルを画面上に分類表示する画像表示装置において、
    前記複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を抽出する特徴量抽出手段と、
    前記特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを算出する類似度算出手段と、
    前記類似度算出手段にて算出された類似度に基づいて、前記複数のサムネイルをグループ化するグループ化手段と、
    前記グループ化手段によるグループ化に基づき前記複数のサムネイルを画面上に表示するサムネイル表示手段を
    具備することを特徴とする画像表示装置。
  2. 前記グループ化手段によりグループ化されたグループにおいて、所定の条件に基づいて代表サムネイルを特定して管理する代表サムネイル管理手段と、
    前記代表サムネイル管理手段にて特定された前記代表サムネイルの一覧を表示するとともに、該表示した代表サムネイルのうち選択された代表サムネイルと同一のグループに属するサムネイルの一覧を階層的に表示するサムネイル階層表示手段と
    をさらに具備する
    ことを特徴とする請求項1に記載の画像表示装置。
  3. 前記特徴量抽出手段は、
    前記所定の抽出条件として、前記サムネイルの画像領域をユーザが処理毎に指定する抽出条件指定手段
    をさらに具備し、
    前記抽出条件指定手段にて指定された内容に基づいて特徴量を抽出する
    ことを特徴とする請求項1に記載の画像表示装置。
  4. 複数のサムネイルを画面上に分類表示する画像表示方法であって、
    前記複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を特徴量抽出手段により抽出し、
    前記特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを類似度算出手段により算出し、
    前記類似度算出手段にて算出された類似度に基づいて、前記複数のサムネイルをグループ化手段によりグループ化し、
    前記グループ化による手段グループ化に基づき前記複数のサムネイルをサムネイル表示手段により画面上に表示する
    ことを特徴とする画像表示方法。
  5. 複数のサムネイルを画面上に分類表示する処理をコンピュータに実行させる画像表示プログラムであって、
    特徴量抽出手段が前記複数のサムネイルの画像データに対して所定の抽出条件に基づいて少なくとも一つ以上の特徴量を抽出するステップと、
    類似度算出手段が前記特徴量抽出手段にて抽出された特徴量から各サムネイル間の類似度の度合いを算出するステップと、
    前記類似度算出手段にて算出された類似度に基づいて、グループ化手段が前記複数のサムネイルをグループ化するステップと、
    前記グループ化手段によるグループ化に基づき、サムネイル表示手段が、前記複数のサムネイルを画面上に表示するステップとを
    具備することを特徴とする画像表示プログラム。
JP2004042976A 2004-02-19 2004-02-19 画像表示装置および方法およびプログラム Withdrawn JP2005236646A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004042976A JP2005236646A (ja) 2004-02-19 2004-02-19 画像表示装置および方法およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004042976A JP2005236646A (ja) 2004-02-19 2004-02-19 画像表示装置および方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2005236646A true JP2005236646A (ja) 2005-09-02
JP2005236646A5 JP2005236646A5 (ja) 2007-03-22

Family

ID=35019154

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004042976A Withdrawn JP2005236646A (ja) 2004-02-19 2004-02-19 画像表示装置および方法およびプログラム

Country Status (1)

Country Link
JP (1) JP2005236646A (ja)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007080061A (ja) * 2005-09-15 2007-03-29 Univ Of Tsukuba Webページの検索方法及びWebページのクラスタリング方法
JP2008005167A (ja) * 2006-06-21 2008-01-10 Hokkaido Univ 映像分類装置、映像分類方法、映像分類プログラムおよびコンピュータ読取可能な記録媒体
JP2008085538A (ja) * 2006-09-27 2008-04-10 Fujifilm Corp 画像評価装置および方法並びにプログラム
JP2008083891A (ja) * 2006-09-27 2008-04-10 Fujifilm Corp 画像評価装置および方法並びにプログラム
KR100862939B1 (ko) 2006-07-28 2008-10-14 가부시끼가이샤 도시바 영상 기록 재생 시스템 및 영상 기록 재생 방법
JP2008278347A (ja) * 2007-05-02 2008-11-13 Nikon System:Kk 画像表示システム
JP2008278344A (ja) * 2007-05-02 2008-11-13 Nikon System:Kk 画像出力システム
JP2009192737A (ja) * 2008-02-13 2009-08-27 Sony Corp 画像表示装置、画像表示方法、プログラム及び記録媒体
JP2009217538A (ja) * 2008-03-11 2009-09-24 Nikon Systems Inc 画像評価装置
JP2009246887A (ja) * 2008-03-31 2009-10-22 Brother Ind Ltd 画像処理装置
WO2009157339A1 (ja) * 2008-06-26 2009-12-30 日本電気株式会社 コンテンツ話題性判定システム、その方法及びプログラム
JP2010128633A (ja) * 2008-11-26 2010-06-10 Denso It Laboratory Inc 情報提示装置、方法およびプログラム
JP2010286861A (ja) * 2009-06-09 2010-12-24 Yahoo Japan Corp 画像検索装置
JP2011081457A (ja) * 2009-10-02 2011-04-21 Sony Corp 情報処理装置および方法
JP2011096078A (ja) * 2009-10-30 2011-05-12 Rakuten Inc 特有コンテンツ判定装置、特有コンテンツ判定方法、特有コンテンツ判定プログラム及び関連コンテンツ挿入装置
JP2011096073A (ja) * 2009-10-30 2011-05-12 Rakuten Inc 特有コンテンツ判定装置、特有コンテンツ判定方法、特有コンテンツ判定プログラム及びコンテンツ生成装置
JP2011108242A (ja) * 2009-11-17 2011-06-02 Nhn Corp 利用者の要求に応じて動的にもっとも適したイメージを抽出して提供するための方法、システム及びコンピューター判読可能な記録媒体
JP2011135126A (ja) * 2009-12-22 2011-07-07 Yahoo Japan Corp 動画表示装置、動画表示方法及びプログラム
US8179704B2 (en) 2008-12-31 2012-05-15 Genesis Photonics Inc. Electronic device having a circuit protection unit
US8218876B2 (en) 2006-12-21 2012-07-10 Canon Kabushiki Kaisha Information processing apparatus and control method
US8331735B2 (en) 2007-10-16 2012-12-11 Samsung Electronics Co., Ltd. Image display apparatus and method
US8503832B2 (en) 2007-09-28 2013-08-06 Kabushiki Kaisha Toshiba Electronic device and facial image display apparatus
CN109598748A (zh) * 2017-10-02 2019-04-09 富士胶片株式会社 图像提取装置、图像提取方法及图像提取程序以及存储有该程序的记录介质
US10614134B2 (en) 2009-10-30 2020-04-07 Rakuten, Inc. Characteristic content determination device, characteristic content determination method, and recording medium

Cited By (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007080061A (ja) * 2005-09-15 2007-03-29 Univ Of Tsukuba Webページの検索方法及びWebページのクラスタリング方法
JP2008005167A (ja) * 2006-06-21 2008-01-10 Hokkaido Univ 映像分類装置、映像分類方法、映像分類プログラムおよびコンピュータ読取可能な記録媒体
JP4759745B2 (ja) * 2006-06-21 2011-08-31 国立大学法人北海道大学 映像分類装置、映像分類方法、映像分類プログラムおよびコンピュータ読取可能な記録媒体
KR100862939B1 (ko) 2006-07-28 2008-10-14 가부시끼가이샤 도시바 영상 기록 재생 시스템 및 영상 기록 재생 방법
JP2008085538A (ja) * 2006-09-27 2008-04-10 Fujifilm Corp 画像評価装置および方法並びにプログラム
JP2008083891A (ja) * 2006-09-27 2008-04-10 Fujifilm Corp 画像評価装置および方法並びにプログラム
US8218876B2 (en) 2006-12-21 2012-07-10 Canon Kabushiki Kaisha Information processing apparatus and control method
JP2008278344A (ja) * 2007-05-02 2008-11-13 Nikon System:Kk 画像出力システム
JP2008278347A (ja) * 2007-05-02 2008-11-13 Nikon System:Kk 画像表示システム
US8503832B2 (en) 2007-09-28 2013-08-06 Kabushiki Kaisha Toshiba Electronic device and facial image display apparatus
US8548277B2 (en) 2007-10-16 2013-10-01 Samsung Electronics Co., Ltd. Image display apparatus and method
US8331735B2 (en) 2007-10-16 2012-12-11 Samsung Electronics Co., Ltd. Image display apparatus and method
US8446422B2 (en) 2008-02-13 2013-05-21 Sony Corporation Image display apparatus, image display method, program, and record medium
JP2009192737A (ja) * 2008-02-13 2009-08-27 Sony Corp 画像表示装置、画像表示方法、プログラム及び記録媒体
JP2009217538A (ja) * 2008-03-11 2009-09-24 Nikon Systems Inc 画像評価装置
US8411311B2 (en) 2008-03-31 2013-04-02 Brother Kogyo Kabushiki Kaisha Image processor
JP2009246887A (ja) * 2008-03-31 2009-10-22 Brother Ind Ltd 画像処理装置
JP4645672B2 (ja) * 2008-03-31 2011-03-09 ブラザー工業株式会社 画像処理装置
US8306992B2 (en) 2008-06-26 2012-11-06 Nec Corporation System for determining content topicality, and method and program thereof
JP5387860B2 (ja) * 2008-06-26 2014-01-15 日本電気株式会社 コンテンツ話題性判定システム、その方法及びプログラム
WO2009157339A1 (ja) * 2008-06-26 2009-12-30 日本電気株式会社 コンテンツ話題性判定システム、その方法及びプログラム
JP2010128633A (ja) * 2008-11-26 2010-06-10 Denso It Laboratory Inc 情報提示装置、方法およびプログラム
US8179704B2 (en) 2008-12-31 2012-05-15 Genesis Photonics Inc. Electronic device having a circuit protection unit
JP2010286861A (ja) * 2009-06-09 2010-12-24 Yahoo Japan Corp 画像検索装置
JP2011081457A (ja) * 2009-10-02 2011-04-21 Sony Corp 情報処理装置および方法
JP2011096073A (ja) * 2009-10-30 2011-05-12 Rakuten Inc 特有コンテンツ判定装置、特有コンテンツ判定方法、特有コンテンツ判定プログラム及びコンテンツ生成装置
JP2011096078A (ja) * 2009-10-30 2011-05-12 Rakuten Inc 特有コンテンツ判定装置、特有コンテンツ判定方法、特有コンテンツ判定プログラム及び関連コンテンツ挿入装置
US10614134B2 (en) 2009-10-30 2020-04-07 Rakuten, Inc. Characteristic content determination device, characteristic content determination method, and recording medium
JP2011108242A (ja) * 2009-11-17 2011-06-02 Nhn Corp 利用者の要求に応じて動的にもっとも適したイメージを抽出して提供するための方法、システム及びコンピューター判読可能な記録媒体
JP2011135126A (ja) * 2009-12-22 2011-07-07 Yahoo Japan Corp 動画表示装置、動画表示方法及びプログラム
CN109598748A (zh) * 2017-10-02 2019-04-09 富士胶片株式会社 图像提取装置、图像提取方法及图像提取程序以及存储有该程序的记录介质
CN109598748B (zh) * 2017-10-02 2023-07-28 富士胶片株式会社 图像提取装置、图像提取方法及图像提取程序以及存储有该程序的记录介质

Similar Documents

Publication Publication Date Title
JP2005236646A (ja) 画像表示装置および方法およびプログラム
US7392233B2 (en) Image searching system, image searching method, and a recording medium storing an image searching program
JP4970714B2 (ja) 指定されたドキュメント・エリアからのメタデータの抽出
JP5033580B2 (ja) 画像処理装置及び画像処理方法
US7610274B2 (en) Method, apparatus, and program for retrieving data
JP5665125B2 (ja) 画像処理方法、及び、画像処理システム
US6804420B2 (en) Information retrieving system and method
JP2010541097A (ja) 相対位置に基く制御によるページ上のグラフィックスオブジェクトの配置
US9529438B2 (en) Printing structured documents
US20090183115A1 (en) Document searching apparatus, document searching method, and computer-readable recording medium
JP2007328456A (ja) オブジェクト表示処理装置、オブジェクト表示処理方法、およびオブジェクト表示処理用プログラム
JPH09237282A (ja) 文書画像データベース検索方法、画像特徴ベクトル抽出方法、文書画像閲覧システム、機械読み取り可能な媒体及び画像表示方法
JP2007503032A (ja) ドキュメントスキャナ
JP2007317034A (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP2000067065A (ja) 文書画像識別方法および記録媒体
US20080244384A1 (en) Image retrieval apparatus, method for retrieving image, and control program for image retrieval apparatus
US20050157952A1 (en) Image retrieval apparatus and method, and image display apparatus and method thereof
JP2009110501A (ja) ドキュメント管理システム、ドキュメント管理方法、ドキュメント管理プログラム
JP5298616B2 (ja) 情報提示装置、情報提示方法および情報提示用プログラム
JP3922396B2 (ja) レイアウト装置および表示装置
JP2010073194A (ja) 画像処理装置、画像処理方法およびプログラム
JP2007034613A (ja) 画像処理装置及びその方法
JP4692784B2 (ja) 画像記述システムにおける特徴量選択プログラム、特徴量選択方法および装置
JP4336813B2 (ja) 画像記述システムおよび方法
JP2009169533A (ja) 画像配置データ生成装置及び画像配置データ生成方法

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070201

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070201

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20081016