JP4027196B2 - 画像表示装置及びその制御方法 - Google Patents
画像表示装置及びその制御方法 Download PDFInfo
- Publication number
- JP4027196B2 JP4027196B2 JP2002278112A JP2002278112A JP4027196B2 JP 4027196 B2 JP4027196 B2 JP 4027196B2 JP 2002278112 A JP2002278112 A JP 2002278112A JP 2002278112 A JP2002278112 A JP 2002278112A JP 4027196 B2 JP4027196 B2 JP 4027196B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- region
- interest
- display
- reduced
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Studio Circuits (AREA)
- Television Signal Processing For Recording (AREA)
- Editing Of Facsimile Originals (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、画像を圧縮して記憶し、或は記憶されている画像を読出して表示する画像表示装置及びその制御方法に関するものである。
【０００２】
【従来の技術】
従来、デジタルカメラなどにおいては、撮像した画像はメモリカード等の記憶媒体に順次圧縮して記憶され、所望の画像が指定されると、その画像を復号してモニタに表示するように構成されている。これら複数の画像の中から所望の画像を選択する際などには、それぞれの画像を縮小したサムネイル画像を作成し、それらサムネイル画像を画像インデックスとして、デジタルカメラが備えているモニタや、このデジタルカメラに接続されているＴＶ、ＰＣ等の画面上に同時に複数表示することができるように構成されている。
【０００３】
また現在、次世代の画像圧縮方式として、いわゆるＪＰＥＧ２０００方式が検討されている。このＪＰＥＧ２０００に関する詳細な説明はここでは省略するが、特徴的な機能として画像中のある注目範囲（Region Of Interest：以下ＲＯＩと略す）を指定し、その指定された範囲の画像を、その画像の他の範囲とは異なる圧縮係数（圧縮率）で圧縮する機能がある。ここで、他の範囲よりも低い圧縮率となる圧縮係数で圧縮されたＲＯＩには、画像中の注目すべき被写体が含まれていることが考えられる。
【０００４】
従って、ＪＰＥＧ２０００方式での圧縮を行うデジタルカメラでは、これらＲＯＩが複数含まれた画像に基づいてサムネイル画像を形成し、画像インデックスとして、デジタルカメラが備えているモニタや、このデジタルカメラに接続されているＴＶ、ＰＣ等の画面上に表示することになる。
【特許文献１】
特開２００１−１２８１０９号公報（第４〜５頁、図３）
【０００５】
【発明が解決しようとする課題】
しかしながら、このようなサムネイル画像は、元の画像を縮小して作成するため、ＲＯＩが含まれた画像のサムネイル画像を表示する場合、「ＲＯＩの部分がいくつあるのか分からない。」「ＲＯＩを含んだ画像がどれであるか分かりにくい」といった、サムネイル画像表示からＲＯＩについての情報を得にくいという問題がある。
【０００６】
また、サムネイル画像をデジタルカメラのモニタに表示する場合、一般にモニタサイズは小さく、限られた面積、限られた画素数で表示を行うため上記問題はさらに顕著なものとなる。
【０００７】
【課題を解決するための手段】
本発明はこのような従来技術の問題点に鑑みなされたものであり、その目的は、関心領域が設定された画像データを縮小表示する画像表示装置及びその制御方法において、設定された関心領域の場所や数、内容等が容易に把握可能に縮小表示を行う画像表示装置及びその制御方法を提供することにある。
【０００８】
すなわち、本発明の要旨は、原画像データを読み込む読み込み手段と、原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得手段と、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小手段と、表示手段と、複数の縮小画像を、選択可能に表示手段に表示させる表示制御手段とを有し、表示制御手段が、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定手段によって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置に存する。
【０００９】
また、本発明の別の要旨は、原画像データを読み込む読み込みステップと、原画像データ中に、関心領域が設定されているか否かを判定する判定ステップと、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得ステップと、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小ステップと、複数の縮小画像を表示手段に表示させる表示制御ステップとを有し、表示制御ステップが、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定ステップによって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置の制御方法に存する。
【００１０】
また、本発明の別の要旨は、コンピュータ装置を、原画像データを読み込む読み込み手段と、原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得手段と、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小手段と、表示手段と、複数の縮小画像を、選択可能に表示手段に表示させる表示制御手段とを有し、表示制御手段が、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定手段によって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させる画像表示装置の各手段として機能させるためのプログラムに存する。
【００１１】
また、本発明の別の要旨は、本発明のコンピュータプログラムを格納したことを特徴とするコンピュータ装置読み取り可能な記憶媒体に存する。
【００１２】
【発明の実施の形態】
以下、図面を参照して本発明をその好適な実施形態に基づき詳細に説明する。なお、以下の実施形態においては、本発明に係る画像処理装置をデジタルスチルカメラに適用した場合を例にして説明するが、本発明に係る画像処理装置は画像データを処理する他の任意の装置に対して適用可能である。
【００１３】
■（第１の実施形態）
まず、本発明に係る画像表示装置が使用可能な画像ファイルを生成する画像符号化処理及び復号化処理について説明する。
【００１４】
図１は、本発明に係る画像表示装置が使用可能な画像ファイルを生成する符号化器の全体構成例を示すブロック図である。
【００１５】
図中、本符号化器に入力される画像データには、コンポーネント変換部１で必要に応じて色空間変換を施すことが出来る。変換された各色成分のデータは、必要に応じて所定の間引き処理が行われて出力される。なお、画像データがモノクログレースケールの画像である場合は、コンポーネント変換を行う必要は無く、そのままタイル分割部２へ与えられる。以下の説明は上述の方法にて得られた各色成分毎に行われる処理を説明するものである。
【００１６】
タイル分割部２は、入力した画像データを複数個の所定の大きさの矩形領域（タイル）に分割し出力する。このタイルの大きさは最大で各色成分のデータ全体の大きさとすることができ、この場合は実質的にタイル分割は行われないことになる。以下の説明は上述の方法にて得られた各色成分のタイル毎に行われる処理を説明するものである。
【００１７】
離散ウェーブレット変換部３は入力したタイル単位の画像データに対して２次元の離散ウェーブレット変換を施して周波数成分に分解し、複数の周波数帯域のそれぞれに属する変換係数群（以降サブバンド）を出力する。図２は離散ウェーブレット変換部３により出力されるサブバンドの構成を示したものであり、２次元のウェーブレット変換を低周波帯域に対して再帰的に２レベル行ったものである。なお、離散ウェーブレット変換部３では非可逆符号化を行う場合にはウェーブレット変換後の係数が実数になる実数型のフィルタを、可逆符号化を行う場合にはウェーブレット変換後の係数が整数になる整数型のフィルタが用いられる。非可逆符号化／可逆符号化の何れを行うかは例えば外部から設定可能である。
【００１８】
量子化部４は離散ウェーブレット変換部３から入力したサブバンド毎に、所定の方法により設定された量子化ステップを用いて量子化を行い、量子化インデックスを生成して出力する。なお、離散ウェーブレット変換部３で可逆符号化を行った場合には、量子化部４では量子化を行わず、入力した変換係数そのものが出力される。
【００１９】
エントロピ符号化部５は、図３に示すように、入力したサブバンドをさらに複数の矩形ブロック（以降コードブロックと呼ぶ）に分割（サブバンドと矩形ブロックが同サイズの時は分割しない）し、このコードブロックを単位として独立にエントロピ符号化を行い、符号化データを生成する。この時、量子化インデックスを表すビットは、上位ビットプレーンから順に、算術符号化され符号化データが生成される。
【００２０】
本実施の形態における符号化器では、例えばＪＰＥＧ２０００方式に従って、興味の有る特別な領域（＝Region Of Interest：以降ＲＯＩと呼ぶ）が設定された画像を符号化することができる。ＲＯＩの設定は画像データが符号化器に入力される前に、図示しない領域設定部により設定される。そして、設定されたＲＯＩに対して、図２に示す各サブバンドにおいて、図４に示すような当該ＲＯＩに係る変換係数を特定するためのマスクが生成される。
【００２１】
図４において白く示した部分がＲＯＩに相当しており、この部分に含まれる係数は符号化に先立って、ＲＯＩ以外の領域に係わる係数とビットプレーン上で完全に分離される様な、所定のビット数分だけ上位方向にシフトアップされる。これにより、全てのビットプレーン内のビット１と０の存在を見ることにより、どの領域がＲＯＩかどうかを判別することが可能である。なお、ＲＯＩを他の領域と分離するためのシフトアップ数は後述する符号列の所定のマーカにパラメータとして追加される。
【００２２】
図１に戻って、符号列形成部６は、所定の方法により設定されたプログレッシブ形態に基づいて符号列を形成し出力する。この符号列形成において、符号列形成部６は、採用するプログレッシブ形態に合わせて、各コードブロックの符号化データの上位ビットプレーンから順に適量の符号化データを選択して１つ以上のレイヤを構成する。
【００２３】
例えば、設定されたプログレッシブ形態がＳＮＲスケーラブルである場合、符号列形成部６は図５に示すように、レイヤを単位として上位レイヤから順に下位レイヤに向かい符号化データを配置する。なおこの時、後半のレイヤを省略して下位ビットプレーンに係る符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化できるとともに、省略する符号化データの量によって、符号列を復号し再生される画像の画質を変化させることができる。
【００２４】
一方、設定されたプログレッシブ形態が空間解像度スケーラブルである場合、符号列形成部６は図６示すように低周波サブバンドから高周波サブバンドに向かい符号化データを配置する。この時、後半のサブバンドの符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化できるとともに、省略する符号化データの量によって、符号列を復号し再生された画像の解像度を変化させることができる。
【００２５】
さらに符号列形成部６は上述のように設定された各プログレッシブ形態に応じて形成された符号列に、各種マーカから構成されるヘッダを追加して最終的な符号列を出力する。
【００２６】
図７は符号列形成部６が出力する最終的な符号列の構成例を示す図である。
図７は、図６に示したように、符号化されたビットストリームを解像度の小さいサブバンドから順次解像度が高くなる順番（空間解像度スケーラブル）に配置し、階層的に出力する場合の符号列の構成を表した概略図である。図７（ａ）は符号列の全体の構成を示したものであり、ＭＨはメインヘッダ、ＴＨ0〜ＴＨn-1はタイルヘッダ、ＢＳ0〜ＢＳn-1はビットストリームである。
【００２７】
メインヘッダＭＨは図７（ｂ）に示すように、符号化対象となる画像のサイズ（水平および垂直方向の画素数）、画像を複数の矩形領域であるタイルに分割した際のタイルサイズ（水平および垂直方向の画素数）、色成分数を表すコンポーネント数、各成分の大きさ、ビット精度を表すコンポーネント情報、およびＲＯＩを指定するマスク情報、ビットシフト数から構成されている。マスク情報には、ＲＯＩの位置、大きさ、数などの情報が含まれる。なお、本実施形態では画像はタイルに分割されないものとし、従ってタイルサイズと画像サイズは同じ値を取る。また、対象画像がモノクロ多値画像の場合コンポーネント数は１、Ｒ，Ｇ，Ｂや輝度と２つの色差信号からなるカラー多値画像の場合コンポーネント数は３である。
【００２８】
次にタイルヘッダＴＨの構成例を図７（ｃ）に示す。タイルヘッダＴＨには当該タイルのビットストリーム長とヘッダ長を合わせたタイル長及び、当該タイルに対する符号化パラメータが含まれる。タイルヘッダに含まれる符号化パラメータとしては、離散ウェーブレット変換のレベル、フィルタの種別等がある。
【００２９】
本実施形態におけるビットストリームＢＳの構成例を図７（ｄ）に示す。ビットストリームは各サブバンド毎にまとめられ、解像度の小さいサブバンドを先頭として順次解像度が高くなる順番に配置されている。さらに、各サブバンド内は上位ビットプレーンから下位ビットプレーンに向かい、ビットプレーンを単位として符号が配列されている。
【００３０】
図７（ｅ）は輝度とＢ−Ｙ，Ｒ−Ｙの色差信号からなるカラー画像に図７（ｄ）の構成を適用した場合のビットストリームの構成例を示す図である。輝度の解像度の小さいサブバンドを先頭として各成分毎に順次解像度が高くなる順番に配置されている。
【００３１】
このような構成を有する符号化器で生成された符号列を復号する復号器の全体構成例を図８に示す。
符号列入力部７は符号列を入力し、メインヘッダＭＨから画像やタイルのサイズ、プログレッシブ形態や量子化ステップ等の、後続の復号処理に必要なパラメータを抽出する。メインヘッダを除いた残りの符号列はエントロピ復号部８に出力される。なお、復号対象となる全体の符号列には、上述した図７の形態を持つ複数タイル分の符号列が、上述したコンポーネント変換部１にて得られた色成分毎に含まれる。本実施形態では復号処理は各色成分毎に独立して行うこととし、復号対象となる色成分を構成する各タイルの符号列を順に復号してゆく。
【００３２】
エントロピ復号部８は入力した符号列に対して復号処理を行い、量子化インデックスを出力する。この復号処理ではコードブロック内の量子化インデックスが上位ビットプレーンから順に復号され、量子化インデックスが復元される。
【００３３】
例えば、この時、符号列のプログレッシブ形態がＳＮＲスケーラブル（図５）となっており、所定数の上位レイヤのみが符号化列に含まれる場合には、復号処理は符号化列に含まれるレイヤで打ち切られ、その時点での復元値が量子化インデックスとして出力される。
【００３４】
ここで、メインヘッダにＲＯＩが指定されていた場合は、ヘッダ中のビットシフト数に対応した上位ビットプレーンに係る量子化インデックス値はビットシフト数分、シフトダウンされてから出力される。これにより、ＲＯＩ部分の量子化インデックスは適切な値に復元される。
【００３５】
逆量子化部９は入力した量子化インデックスを、先に符号列から読み込まれた量子化ステップを元に逆量子化し、変換係数を復元して出力する。
【００３６】
逆離散ウェーブレット変換部１０は、入力した変換係数から、２次元の逆離散ウェーブレット変換を施すことにより、これに対応する色成分データ（符号化対象画像がモノクロ画像の時は画像濃度データ）を復元して出力する。
【００３７】
なおこの時、符号列のプログレッシブ形態が空間解像度スケーラブルであり、前半に符号化されるレベル（例えばＬＬのみや、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のみ）のサブバンドのみが復元されている場合は、復元された色成分データの解像度はその復元されたサブバンドのレベルに応じて変化する。
【００３８】
図９はこの様子を示しており、同図においてサブバンドＬＬの係数のみが復号された場合は、逆離散ウェーブレット変換は実質的には行われず、ＬＬの係数が元のデータレンジに収まるように調節された後に出力される。この場合復元された色成分データは、同図ｒ＝０に示すサイズとなり、元のデータサイズに対して水平および垂直方向に１／４のサイズとなっている。
【００３９】
さらに、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のサブバンドまで復号された場合、逆変換を１レベル行うことで同図ｒ＝１に示すように、元の解像度に対して水平及び垂直方向に１／２のサイズの色成分データが復元される。
【００４０】
以上の処理は各タイル単位で行われ、画像構成部１１は復元された各タイルの各色成分データを再度、元の１枚の符号化対象画像を構成する色成分データとして構成してコンポーネント逆変換部１２に出力する。
コンポーネント逆変換部１２は、入力した各色成分データに所定の変換を施すことにより、元の符号化対象画像の色空間を持つ画像データを復元して出力する。この時、元の色成分データがコンポーネント変換部１にて間引き処理されている場合は、逆変換を行う前に必要な解像度に変換（データ補間）される。
【００４１】
以上の説明において、プログレッシブ形態が空間解像度スケーラブルの場合には、復号するレイヤを制限することで、復元される画像の画質を制御することが出来る。また、ＳＮＲスケーラブルの場合には、逆離散ウェーブレット変換するサブバンドのレベル数を制限することで復元される画像の解像度を制御することが出来る。
本発明に係る画像表示装置は、必要に応じてこれらの符号化器、復号化器を有することが可能である。
【００４２】
つづいて、本実施形態に係る画像表示装置の一例としてのデジタルカメラの構成例を説明する。
図１０（ａ）はデジタルカメラを正面方向からみた外観斜視図で、図１０（ｂ）は同じく背面から見た外観斜視図である。また、図１１はデジタルカメラ全体の構成例を示すブロック図である。
【００４３】
図１１において、１００は画像処理装置である。１３は撮影レンズ、１４は絞り機能を備えるシャッター、１５は光学像を電気信号に変換する撮像素子、１６は撮像素子１５のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
【００４４】
１８は撮像素子１５、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。
【００４５】
また、画像処理回路２０は、撮像した画像データを用いて所定の演算処理を行う。この演算結果に基づいて、システム制御回路５０が、露光制御手段４０、測距制御手段４２に対して露光制御、フォーカス制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理及びＡＷＢ（オートホワイトバランス）処理を行っている。
【００４６】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。
Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはメモリ制御回路２２のみを介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００４７】
２８はＴＦＴ ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。また、画像表示部２８は、システム制御回路５０の指示により表示をＯＮ／ＯＦＦすることが可能である。
【００４８】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶容量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。
また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００４９】
圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。圧縮・伸長回路３２の機能構成は、図１及び図８を用いて説明した上述の符号化器、復号化器と同等である。
【００５０】
４０はシャッター１４を制御する露光制御回路であり、フラッシュ４８と連携することによりフラッシュ調光機能も有する。フラッシュ４８は、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。
【００５１】
４１は撮影レンズ１３のフォーカシングを制御する測距制御回路、４４は撮影レンズ１３のズーミングを制御するズーム制御回路、４６はレンズバリア１０２の動作を制御するバリア制御回路である。
【００５２】
露光制御回路４０、測距制御回路４１は、撮像した画像データを画像処理回路２０によって演算した結果に基づき、システム制御回路５０がＴＴＬ方式を用いて制御する。
システム制御回路５０は画像処理装置１００全体を制御する。メモリ５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶する。
【００５３】
５４はシステム制御回路５０でのプログラムの実行に応じて、カメラの動作状態やメッセージ等を表示する表示部である。表示部５４に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、電池残量表示、記録媒体２００の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示等がある。表示部５４は画像表示部２８はどちらか一方で両方の機能を有していても良い。
【００５４】
不揮発性メモリ５６は電気的に消去・記録可能なメモリで、例えばＥＥＰＲＯＭ等が用いられる。
６０、６１、６２、６４、６６、６８及び７０は、システム制御回路５０の各種の動作指示を入力するための入力手段として機能し、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００５５】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することが出来る。
【００５６】
シャッターボタン６１は２つのスイッチ６２、６４を有する。シャッタースイッチＳＷ１（６２）は、シャッターボタン６１の操作途中でＯＮとなり、これによりＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。
【００５７】
シャッタースイッチＳＷ２（６４）は、シャッタースイッチＳＷ１（６２）がＯＮとなった後更に押し込むことによりＯＮとなり、これにより撮影処理が行われる。すなわち、撮像素子１５から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた画像形成処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２が上述した方法で圧縮を行い、記録媒体２００に画像データを書き込む記録処理という一連の処理が行われる。なお、撮影した画像に対するＲＯＩの指定は圧縮・伸長回路３２での画像圧縮前もしくは後に、撮影画像のプレビュー表示時点で行うようにしても良いし、圧縮処理後にユーザが表示させた画像に対して指定を行うようにしても良い。圧縮符号化後にＲＯＩを指定する場合、再度の圧縮符号化が必要となる。
【００５８】
６５は画像表示部２８に表示された画像の任意の領域を指定する領域指定レバーであり、後述のＲＯＩ指定等に用いる。
６６は画像表示ＯＮ／ＯＦＦスイッチで、画像表示部２８のＯＮ／ＯＦＦを設定することが出来る。
【００５９】
６８はクイックレビューＯＮ／ＯＦＦスイッチで、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定する。なお、本実施形態では特に、画像表示部２８をＯＦＦとした場合におけるクイックレビュー機能の設定をする機能を備えるものとする。
【００６０】
７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等がある。
【００６１】
８０は電源制御回路で、電源検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電源の装着の有無、電源の種類、残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。
【００６２】
８２及び８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源である。
【００６３】
９０はメモリカードやハードディスク等の記録媒体とのインタフェース、９２はメモリカードやハードディスク等の記録媒体と接続を行うコネクタ、９８は記録媒体２００が装着されているか否かを検知する記録媒体着脱検知回路である。１０２は、画像処理装置１００のレンズ１３を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである。
【００６４】
１０４は光学ファインダであり、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダ１０４内には、表示部５４で表示されるような、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示等が行われる。
【００６５】
１１０は通信部で、外部機器との有線、無線通信を行うために必要なインタフェース、例えばＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、ＩＥＥＥ１２８４、ＳＣＳＩ、ＩＥＥＥ８０２、１０／１００ＢＡＳＥ−Ｔ、モジュラジャック等と、当該インタフェースを介した通信機能を有する。
【００６６】
１１２は通信部１１０により画像処理装置１００を他の機器と接続する物理的なインタフェースであり、コネクタ（無線通信の場合はアンテナ）である。
２００はメモリカードやハードディスク等の記録媒体である。
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインタフェース２０４、画像処理装置１００のコネクタ９２と接続を行うコネクタ２０６を備えている。
【００６７】
次に、このような構成を有するデジタルカメラが生成する動画ファイルの構造例について説明する。
図１４は動画ファイルの構造例を示す図である。図１４に示すように、動画ファイルは、ヘッダエリア４０１、画像、音声の付帯情報に関する付帯情報エリア４０２、データエリア４０３、インデックスエリア４０４から構成される。
【００６８】
ヘッダエリア４０１には、ファイル全体に関する情報が記録され、フレームレート（１秒当りのフレーム数）や画像データのフォーマット情報（例えばＪＰＥＧ２０００、ＪＰＥＧ、ビットマップ）や音声データのフォーマット情報（例えばＰＣＭ、ＭＰ３）などが記録されている。
【００６９】
付帯情報エリア４０２には、画像データの付帯情報として、画像のサイズ（例えば７２０×４８０画素、１４４０×９６０画素）や画像データの縦横の比率を示すアスペクト比等が、音声データの付帯情報として、サンプリングレート、チャンネル数、ビット数等が記録されている。
【００７０】
データエリア４０３には複数の静止画からなる画像データと、それに対応する音声データがインターリーブされて記録されている。なお、本実施形態においては画像データと音声データを一つのファイルとした構造を取っているが、画像データと音声データは別のファイルとして記録しても良い。
【００７１】
インデックスエリア４０４には、データエリア４０３内の任意の画像データおよび音声データにアクセス可能とするアドレス情報等が記録されている。
【００７２】
（ＲＯＩの指定）
次に、上述のデジタルカメラにおけるＲＯＩ指定方法について図１２及び図１３を用いて説明する。
図１２（ａ）はデジタルカメラに設けられた領域指定レバー６５の詳細図、図１２（ｂ）は領域指定レバー６５の回路図、図１３（ａ）〜（ｃ）はＲＯＩ指定時の画像表示部２８の表示状態例を示す図である。
【００７３】
図１２（ａ）において、６５ａはカーソルを上方向に移動させる指示を与える上方指定レバー、６５ｂはカーソルを右方向に移動させる指示を与える右方指定レバー、６５ｃはカーソルを下方向に移動させる指示を与える下方指定レバー、６５ｄはカーソルを左方向に移動させる指示を与える左方指定レバー、６５ｅはカーソル位置を確定させる指示を出す確定ボタンである。
【００７４】
図１２（ｂ）に示すように、領域指定レバー６５はその内部に、レバー６５ａ〜６５ｅに対応したスイッチを有しており、各スイッチの出力からレバー６５により入力された指示を検出する。すなわち、Ｙ＋は上方指定レバー６５ａの指示を受けシステム制御５０に上方向にカーソル移動の指示を送る上方検出信号、同様にＸ＋は右方指示レバー６５ｂの指示を受けシステム制御５０に右方向にカーソル移動の指示を送る右方検出信号、Ｙ−は下方指示レバー６５ｃの指示を受けシステム制御５０に下方向にカーソル移動の指示を送る下方検出信号、Ｘ−は左方指定レバー６５ｄの指示を受けシステム制御５０に左方向にカーソル移動の指示を送る左方検出信号、Ｃは確定ボタン６５ｅの指示を受けシステム制御５０にカーソル確定の指示を送る確定信号であり、デジタルカメラのユーザは領域指定レバー６５の６５ａ、６５ｂ、６５ｃ、６５ｄの各レバーと確定ボタン６５ｅを操作することにより画像内の任意の領域を指定することが出来る。
【００７５】
図１３を参照して、画像表示部２８に表示された画像に対してＲＯＩを指定する方法についてさらに説明する。まず、領域指定レバー６５の中央の選択スイッチ６５ｅが押されると、領域を指定するカーソルＰ０が画像表示部２８の中心に多重表示される（図１３（ａ））。ユーザは画像表示部２８に表示されたカーソルＰ０を見ながら、カーソルＰ０を移動させたい方向に領域指定レバー６５を操作する。システム制御部５０は、領域指定レバー６５の押圧状態に応じて出力される検出信号に基づいてカーソルの移動量を算出し、算出された位置にカーソルＰ０を移動させる。ここで領域指定レバー６５の確定ボタン６５ｅが押されるとＲＯＩの枠の１頂点が確定される。
【００７６】
同様に、次のポイントを決めるため、領域指定レバーを操作しカーソルを移動させ、この作業を繰り返すことによって４点選択する（図１３（ｂ））。そして再度確定ボタン６５ｅを押すと選択されたポイントＰ１，Ｐ２，Ｐ３，Ｐ４によって結ばれた領域がＲＯＩとして指定される（図１３（ｃ））。
なお、本実施形態におけるデジタルカメラでは、指定された領域が明確となるよう、ＲＯＩ部分は色や輝度を調整するものとする。
【００７７】
また、ここでは、ＲＯＩを四角形と仮定し、その頂点を選択することによって指定するものとして説明したが、ＲＯＩの形状（丸や多角形など）やその決定方法は任意に設定可能である。例えば、ＲＯＩが長方形である場合には、その対角線上にある頂点を指定するように構成することも可能であるし、予め所定の大きさの長方形を重畳表示し、その任意の頂点を移動させることにより領域を決定するように構成することも可能である。また、円形である場合には、その中心と円周上の点を指定することにより領域の設定を行うようにしたり、指定された長方形に内接する円又は楕円が設定されるようにしても良い。あるいは、カーソルを移動させた軌跡によって領域を指定するようにしても良い。
【００７８】
更には画像処理、画像認識手段によりエッジ成分や色成分を用い、画像中の特定の物や人をＲＯＩとして指定することも可能である。また、動き情報を用いて指定することも可能である。更には、領域選択レバー６５の代わりに、が沿表示部２８上に配置されたタッチパネルを用いてもよい。
【００７９】
図１５Ａ、図１５Ｂは、本実施形態に係るデジタルカメラの動作を示すフローチャートである。この処理を実現するプログラムは例えば図１１のメモリ５２に記憶されており、図示しないＣＰＵを有するシステム制御部５０によって実行される。以下図１５Ａ、図１５Ｂ及び図１１を参照して、本実施形態に係るデジタルカメラの動作を説明する。
【００８０】
まず、ユーザがシャッタースイッチＳＷ１（６２）をオン状態にすることによって、デジタルカメラが撮影を開始する。次にステップＳ３０１に進み、４１測距制御手段によりＡＦ（オートフォーカス）動作を、ステップＳ３０２で４０露光制御手段によりＡＥ（自動絞り調整）動作を行う。これらＡＦ動作およびＡＥ動作に際しては、撮像素子１５から電荷信号を読み出し、Ａ／Ｄ変換器１６を介して画像処理回路２０にデジタル撮像信号を逐次読み込む。こうして逐次読み込まれた撮像信号を基に、画像処理回路２０で演算を行い、その演算結果を用いてシステム制御部５０が測距制御手段４２に制御信号を出力してレンズの焦点が合うように撮影レンズ１３を制御したり、露光制御手段４０に制御信号を出力して絞り機能を備えるシャッター１４を制御する。
【００８１】
次にステップＳ３０３に進み、ユーザがシャッタースイッチＳＷ２（６４）をオン状態にすると、撮影のための露光を撮像素子１５により行い、ステップＳ３０４で、その露光によって撮像素子１５に蓄積された電荷を読み出して、その出力信号である撮像信号をＡ／Ｄ変換器１６でＡ／Ｄ変換する。次にステップＳ３０５に進み、Ａ／Ｄ変換された画像信号を画像処理回路２０により信号処理して、その信号処理結果をデジタル画像信号としてメモリ制御回路２２を介してメモリ３０に一時的に保存する。
【００８２】
こうしてメモリ３０に一時的に保存されたデジタル画像信号に対して、ステップＳ３０６で圧縮伸長回路３２による圧縮処理を施し、処理を終えたデータをメモリ３０へ書き込む。このステップＳ３０６における圧縮処理では、ＪＰＥＧ２０００の圧縮方式に代表されるように、画像中のある注目範囲（ＲＯＩ）を指定し、その指定されたＲＯＩ内の画像は他の画像範囲とは異なる圧縮係数（圧縮率）で圧縮する方式をとる。ステップＳ３０７でその圧縮した画像データを画像ファイルとして半導体メモリカードなどの記憶媒体２００に保存する。
【００８３】
なお、図１５Ａに示した以上の動作は、画像ファイルの生成に関するものであり、本発明には直接関係しないことに留意されたい。すなわち、本発明に係る画像表示装置は、例えば図７に示すような、ＲＯＩが指定されうる画像ファイルの表示を目的とした装置であり、画像ファイルの生成そのものは他の装置で行っても良い。
【００８４】
図１５Ｂに示す、ステップＳ３０８以降は、記憶媒体２００に記録された画像の表示に関する処理である。
ステップＳ３０８で、記録媒体２００に保存されている圧縮画像を読み出し、ステップＳ３０９で、圧縮伸長回路３２により圧縮画像の解凍（伸長）を行い、メモリ制御回路２２によりメモリ３０へ書き込む。なお、記録媒体２００に保存されている画像ファイルが非圧縮データであれば、ステップＳ３０９における解凍（伸長）処理は不要である。
【００８５】
ステップＳ３１０で、システム制御部５０により、メモリ３０に書き込まれた画像ファイルのインヘッダＭＨ（図７（ｂ））を参照し、マスク情報からその画像に含まれるＲＯＩの判定を行う。
【００８６】
ステップＳ３１１で、画像に含まれるＲＯＩを抽出し、システム制御部５０はメモリ制御回路２２を介して、原画像に設定されたＲＯＩを単色で塗りつぶし、それ以外の領域は無色（透過）のサムネイル画像（マスクサムネイル）を作成する。例えばサムネイル画像は横１６０画素、縦１２０画素とすることができ、画像を画素間引き等周知の手法により縮小して生成することができる。生成したマスクサムネイルは画像表示メモリ２４に書き込む。
【００８７】
塗りつぶす色は任意に決定可能であり、予め定めた特定の固定値を用いることも可能だが、サムネイル表示において目立つように、領域内の画素値もしくはＲＯＩ周辺の領域の画素値と差が大きくなるよう動的に決定しても良い。この場合、塗りつぶす色は領域内もしくは周辺領域の画素値のヒストグラムや平均値等を用いて決定することが可能である。
【００８８】
また、１つのマスクサムネイルに１つの原画像に対して設定されたＲＯＩを全て含ませるのではなく、ＲＯＩ毎に（ＲＯＩの）サムネイルを生成することも可能である。この場合、生成されたマスクサムネイルには、後で原画像のサムネイルと重畳表示する際に正しい位置に表示されるよう、原画像もしくはそのサムネイル上での位置情報等を付加して画像表示メモリ２４に記憶する。
【００８９】
また、ＲＯＩサムネイルとして、原画像のサムネイルと同じ大きさのサムネイル（この場合、横１６０画素、縦１２０画素）をマスクサムネイルとは別に個々のＲＯＩに対して生成することも可能である。このＲＯＩサムネイルは、第２の実施形態で行うような、ＲＯＩのみをサムネイル画像表示する場合に使用することが可能である。
【００９０】
ステップＳ３１２で、システム制御部５０は、メモリ制御回路２２を介して原画像のサムネイル画像を作成する。例えば原画像が横１２８０画素、縦９６０画素の場合、サムネイル画像を横１６０画素、縦１２０画素というように縮小を行い画像表示メモリ２４に書き込む。なお、縮小率はステップＳ３１１でのマスクサムネイルを生成した際の縮小率と共通にする。
【００９１】
ステップＳ３１３で、図１６に示すように、システム制御部５０は、画像処理回路２０、メモリ制御回路２２を用いて、画像表示メモリ２４に書き込まれた原画像のサムネイル画像と、この原画像に対応する、ＲＯＩ領域を単色で塗りつぶしたマスクサムネイル画像を読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に重畳して表示する。
【００９２】
以上説明したように、本実施形態においては、ＲＯＩ部分が単色で塗りつぶされたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【００９３】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが単色で塗りつぶされたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【００９４】
■（第２の実施形態）
次に、本発明の第２の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【００９５】
図１８は、本実施形態に係るデジタルカメラのサムネイル画像の表示例で、第１の実施形態において説明した図１５ＢのステップＳ３０８〜Ｓ３１４を繰り返すことにより９つのサムネイル画像を表示している。ただし、本実施形態においては、選択されていない画像についてはＲＯＩのマスクサムネイル表示は行わない。すなわち、図１８（ａ）では、左上のサムネイル画像が現在選択されている状態であり、そのサムネイル画像についてはマスクサムネイルが重畳表示されているが、他のサムネイル画像は原画像のサムネイルのみが表示されている。なお、図１８では、枠が他のサムネイル画像の枠より太く示されるサムネイル画像が現在選択されていることを表す。
なお、後述する第３、第４の実施形態に示す表示処理を用いてサムネイル画像表示を行ってもよい。
【００９６】
図１９は、図１２で説明した領域指定レバー６５の操作を説明する図である。図１９において６５ｈはデジタルカメラのユーザーの指であり、図１９（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【００９７】
図１７は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図１７の処理は、サムネイル画像の閲覧状態において実行される。
【００９８】
まず、ステップＳ４０１において、領域指定レバー６５が操作されたか否かをチェックする。操作が検知された場合、ステップＳ４０２においてその操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。
【００９９】
方向指示レバー６５ａ〜６５ｄが操作された場合、ステップＳ４０３へ移行し、現在ＲＯＩサムネイルを表示中でなければ、指定された方向にフォーカスを１つ移動させる（ステップＳ４０４）。
【０１００】
例えば、図１８（ａ）に示すような表示状態（原画像のサムネイルが表示されている状態）において、図１９（ａ）に示すようにユーザが右方向指示レバー６５ｂを押下すると、システム制御部５０はフォーカス（選択されていることを示す太枠の表示）を現在の右に表示されたサムネイルに移動する（ステップＳ４０４）。そして、フォーカスされたサムネイル画像（の原画像）にＲＯＩが指定されているか否かをステップＳ４０５で調べ、ＲＯＩ指定があれば、対応するマスクサムネイルを画像表示メモリ２４から読み出して重畳表示する（ステップＳ４０６）。この状態を図１８（ｂ）に示す。重畳表示が完了したら、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。
【０１０１】
なお、ステップＳ４０５におけるＲＯＩ指定の有無判定は、サムネイル画像に対応する原画像の画像ファイルのメインヘッダＭＨを調べることによって行うことが可能である。
また、ステップＳ４０５においてＲＯＩ指定が無いと判断された場合には、直ちにステップＳ４０１に戻り、次のレバー操作検出を行う。
【０１０２】
次に、図１８（ｂ）の状態で、ユーザが領域指定レバー６５の確定ボタン６５ｅを押下する（図１９（ｂ））と、処理はステップＳ４０１からステップＳ４０２へ移行し、確定ボタン６５ｅは方向指示レバーではないため、処理はステップＳ４０７へ移行する。
【０１０３】
ステップＳ４０７では、現在フォーカスされている表示画像が原画像のサムネイルか、その原画像に含まれるＲＯＩのサムネイル（上述のＲＯＩサムネイル）かを調べる。そして、原画像のサムネイルが表示されている場合（図１８（ｂ））には、その原画像の最初のＲＯＩサムネイルを表示する（ステップＳ４１０）。そして、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。なお、ステップＳ４１０で表示される最初のＲＯＩサムネイルは、例えば原画像で最も左上に位置するＲＯＩのサムネイルを最初に表示する。例えば、図１８（ｂ）でフォーカスされている画像には２箇所のＲＯＩが指定されているが、より左上に位置する画像中央のＲＯＩを最初に表示する（図１８（ｃ））。
【０１０４】
本実施形態に係る画像表示装置では、ＲＯＩサムネイルが表示された状態で領域指定レバー６５ａ〜６５ｄが操作されると、同一画像内に指定されたＲＯＩのサムネイルを巡回的に順次表示する。すなわち、図１８（ｃ）の状態で下方向指示レバー６５ｃが押下されると（図１９（ｃ））、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０３と移行し、ステップＳ４０３において現在ＲＯＩサムネイルが表示されているため、ステップＳ４０８において次のＲＯＩサムネイル表示を行う（図１８（ｄ））。なお、図１７では詳細を省略しているが、上方向指示レバー６５ａが押下された場合には、ステップＳ４０８で前のＲＯＩサムネイルを表示するように構成しても良い。また、左右の方向指示レバー６５ｂ、６５ｄが操作された場合には、無視してもよいし、次又は前のＲＯＩサムネイルを表示するように構成してもよい。
【０１０５】
ＲＯＩサムネイルが表示された状態で確定ボタン６５ｅが操作されると、本実施形態に係る画像表示装置では原画像のサムネイル表示に復帰する。すなわち、図１８（ｃ）又は図１８（ｄ）の状態で確定ボタン６５ｅが押下されると、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０７と移行し、ＲＯＩサムネイルが表示中であるため、ステップＳ４０９へ移行して原画像サムネイル表示を行う（図１８（ｂ））。
【０１０６】
なお、上述の説明においては、サムネイル表示された画像のＲＯＩサムネイルが原画像のサムネイル生成時等に予め作成され、画像表示メモリ２４に記憶されているものとしているが、ＲＯＩサムネイルが未生成の場合には、ＲＯＩサムネイル表示を行う際に生成するように構成しても良い。
【０１０７】
以上説明したように、本実施形態においては、ＲＯＩ部分のみをサムネイル化したＲＯＩサムネイルを指示に応じて表示するように構成することにより、ＲＯＩの内容をサムネイル画像から容易に把握することができる。
【０１０８】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１０９】
■（第３の実施形態）
次に、本発明の第３の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１１０】
図２０は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１１１】
図２０を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、単色塗りつぶしする領域がＲＯＩ以外（非ＲＯＩ）となることのみ第１の実施形態と異なる。
従って、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理に付いての説明は省略する。
【０１１２】
ステップＳ３１５で、塗りつぶし領域を非ＲＯＩとすること以外は第１の実施形態でのステップＳ３１１と同様に、マスクサムネイル（及び必要であればＲＯＩサムネイルも）を生成する。
【０１１３】
そして、ステップＳ３１２で原画像のサムネイルを生成し、ステップＳ３１３で原画像のサムネイル上にマスクサムネイルを重畳表示する。重畳表示の結果例を図２１に示す。図２１に示すように、本実施形態においてはＲＯＩが指定された画像のサムネイルとして、ＲＯＩの内容のみが表示される。
【０１１４】
以上説明したように、本実施形態においては、ＲＯＩでない領域が単色で塗りつぶされたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【０１１５】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが単色で塗りつぶされたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【０１１６】
なお、第２の実施形態における原画像サムネイル画像表示として、本実施形態による表示を適用することも可能である。
【０１１７】
■（第４の実施形態）
次に、本発明の第４の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１１８】
図２２は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１１９】
図２２を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、サムネイル画像の生成時に、ＲＯＩを白黒に変換することのみ第１の実施形態と異なる。
従って、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理に付いての説明は省略する。
【０１２０】
ステップＳ３１７で、塗りつぶしを行う代わりに、ＲＯＩに指定された領域を他の領域よりも少ない色数（ここでは白黒）に変換とすること以外は第１の実施形態でのステップＳ３１１と同様に、マスクサムネイル（及び必要であればＲＯＩサムネイルも）を生成する。
【０１２１】
そして、ステップＳ３１９で非ＲＯＩ部分のサムネイル、すなわち、ＲＯＩ部分は除去した原画像のサムネイルを生成する。なお、マスクサムネイルを原画像のサムネイル上に重畳表示する際、マスクサムネイルの白黒に変換されたＲＯＩ部分が原画像のサムネイルのＲＯＩ相当部分からの影響を受けずに白黒表示可能であれば、本ステップにおいて第１の実施形態と同様に原画像全体のサムネイルを生成しても良い。
【０１２２】
ステップＳ３１３で原画像のサムネイル上にマスクサムネイルを重畳表示する。重畳表示の結果例を図２３に示す。図２３に示すように、本実施形態においてはＲＯＩが指定された画像のサムネイルとして、ＲＯＩの内容のみ白黒で、その他の部分はカラーで表示される。
【０１２３】
以上説明したように、本実施形態においては、ＲＯＩが白黒に変換されたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【０１２４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが白黒に変換されたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【０１２５】
なお、第２の実施形態における原画像サムネイル画像表示として、本実施形態による表示を適用することも可能である。
【０１２６】
また、上記説明では非ＲＯＩをカラー表示とし、ＲＯＩを白黒表示としたが、非ＲＯＩを白黒表示し、ＲＯＩをカラー表示しても同様な効果が得られる。さらに、視覚上の差異が得られれば、ＲＯＩ又は非ＲＯＩの一方を他方より少ない色数に変換（例えば、非ＲＯＩがフルカラーの場合、ＲＯＩは単色のグレースケールや白黒等２色に変換）することでも本実施形態の効果が得られる。
【０１２７】
■（第５の実施形態）
次に、本発明の第５の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１２８】
図２４は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１２９】
図２４を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、サムネイル画像とともにその画像に指定されたＲＯＩの数を合わせて表示することを特徴とする。
また、図２４において、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理についての説明は省略する。
【０１３０】
ステップＳ３２０で、画像ファイルのメインヘッダＭＨのマスク情報（図７（ｂ）参照）を参照し、画像に含まれるＲＯＩの数をカウントする。ステップＳ３１２で、メモリ制御部２２を介して原画像のサムネイルを作成する。例えば、原画像が横１２８０画素、縦９６０画素の場合、例えば横１６０画素、縦１２０画素に縮小したサムネイル画像を生成し、画像表示メモリ２４に書き込む。ステップＳ３２１で、ステップＳ３１２で作成され、画像表示メモリ２４に書き込まれたサムネイル画像に、ステップＳ３２０でカウントしたＲＯＩの数を表す画像を重畳して書き込み、そのデータをＤ／Ａ変換器２６を介して画像表示部２８により表示する。
【０１３１】
図２５本実施形態によるサムネイル画像の表示例を示す図で、サムネイル画像の右上に、この画像に指定されているＲＯＩ数が表示されている。図２５の例では、３つのＲＯＩが指定されていることを表している。ＲＯＩの含まれない画像に対しては、「０」と表示するか、数字を表示しないことにより、ＲＯＩの含まれる画像であるか否かも容易に判別可能である。
【０１３２】
なお、ＲＯＩの数を表示するために用いる色は任意に決定可能であり、予め定めた特定の固定値を用いることも可能だが、サムネイル表示において目立つように、領域内の画素値もしくはＲＯＩ周辺の領域の画素値と差が大きくなるよう動的に決定しても良い。この場合、ＲＯＩ数の表示に使用する色は領域内もしくは周辺領域の画素値のヒストグラムや平均値等を用いて決定することが可能である。また、ＲＯＩ数の表示位置についても右上に限らず任意の場所に設定することが可能である。
【０１３３】
以上説明したように、本実施形態においては、指定されているＲＯＩの数をサムネイルと対応づけて表示することにより、その画像に対してＲＯＩが指定されているのか、またいくつ指定されているのかについて、サムネイル画像から容易に把握することができる。
【０１３４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの数を合わせて表示することにより、ＲＯＩの有無及びその数についてユーザに分かりやすい表示を行う事が可能となった。
【０１３５】
■（第６の実施形態）
次に、本発明の第６の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１３６】
図２７は、本実施形態に係るデジタルカメラのサムネイル画像の表示例で、第５の実施形態において説明した図２４の処理を繰り返すことにより９つのサムネイル画像を表示している。図２７では、枠が他のサムネイル画像の枠より太く示されるサムネイル画像が現在選択されていることを表す。
【０１３７】
図２６は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図２６の処理は、サムネイル画像の閲覧状態において実行される。まず、図２６において、第２の実施形態において説明した図１７と同一処理のステップについては同一参照数字を付した。
【０１３８】
第２の実施形態における表示処理の説明に用いた図１７、図１８と本実施形態における図２６、図２７との比較から分かるように、本実施形態は原画像のサムネイル表示が第５の実施形態によるものであること、ＲＯＩサムネイル表示時に同一画像に設定されたＲＯＩの番号／総数が表示されること以外の基本的処理は第２の実施形態と共通である。
【０１３９】
以下、図２６、図２７及び領域指定レバー６５の操作を示す図１９を用いて、本実施形態に係る画像表示処理について説明するが、
ステップＳ４０１において、領域指定レバー６５が操作されたか否かをチェックする。操作が検知された場合、ステップＳ４０２においてその操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。
【０１４０】
方向指示レバー６５ａ〜６５ｄが操作された場合、ステップＳ４０３へ移行し、現在ＲＯＩサムネイルを表示中でなければ、指定された方向にフォーカスを１つ移動させる（ステップＳ４０４）。
【０１４１】
例えば、図２７（ａ）に示すような表示状態（原画像のサムネイルが表示されている状態）において、図１９（ａ）に示すようにユーザが右方向指示レバー６５ｂを押下すると、システム制御部５０はフォーカス（選択されていることを示す太枠の表示）を現在の右に表示されたサムネイルに移動する（ステップＳ４０４）。この状態を図１８（ｂ）に示す。重畳表示が完了したら、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。
【０１４２】
次に、図２７（ｂ）の状態で、ユーザが領域指定レバー６５の確定ボタン６５ｅを押下する（図１９（ｂ））と、処理はステップＳ４０１からステップＳ４０２へ移行し、確定ボタン６５ｅは方向指示レバーではないため、処理はステップＳ４０７へ移行する。
【０１４３】
ステップＳ４０７では、現在フォーカスされている表示画像が原画像のサムネイルか、その原画像に含まれるＲＯＩのサムネイル（上述のＲＯＩサムネイル）かを調べる。そして、原画像のサムネイルが表示されている場合（図２７（ｂ））には、その原画像の最初のＲＯＩサムネイルを表示する（ステップＳ４１０）。そして、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。なお、ステップＳ４１０で表示されるＲＯＩサムネイルは、原画像のサムネイルを生成する際に生成しておいても良いし、ステップＳ４１０で生成しても良い。
【０１４４】
ステップＳ４１０においてＲＯＩサムネイルを生成する場合には、まず記録媒体２００に保存されている圧縮原画像を読み出し、圧縮伸長回路３２により圧縮画像の解凍（伸長）を行い、メモリ制御回路２２によりメモリ３０へ書き込む。そして、原画像ファイルのメインヘッダＭＨのマスク情報からＲＯＩの有無及び位置を検出し、ＲＯＩ指定がある場合にはＲＯＩの画像を予め定めたサムネイルの大きさに縮小して画像表示メモリ２４に書き込む。そして、メインヘッダＭＨのマスク情報を参照してカウントしたＲＯＩの総数と、表示を行うＲＯＩの番号とを、例えば「（ＲＯＩの番号）／（ＲＯＩの総数）」という形式で画像表示メモリ２４に保持したＲＯＩサムネイルに重畳して書き込み、このＲＯＩサムネイルをＤ／Ａ変換器２６を介して画像表示部２８により表示する。
【０１４５】
なお、ＲＯＩの番号はメインヘッダＭＨのマスク情報に書き込まれた順であっても、原画像中の位置から定めても良い。第２の実施形態では原画像で最も左上に位置するＲＯＩのサムネイルを最初に表示したが、本実施形態ではマスク情報に書き込まれた順で採番する。
【０１４６】
予めＲＯＩサムネイルを生成する場合も同等の処理を行った後、生成したＲＯＩサムネイルを原画像サムネイルと対応づけて例えばメモリ３０または画像表示メモリ２４に格納しておく。
図２７（ｃ）の例では、ＲＯＩサムネイルの表示により、表示中のＲＯＩがその画像に指定された２つのＲＯＩうち１番目のＲＯＩであることが分かる。
【０１４７】
本実施形態に係る画像表示装置では、ＲＯＩサムネイルが表示された状態で領域指定レバー６５ａ〜６５ｄが操作されると、同一画像内に指定されたＲＯＩのサムネイルを巡回的に順次表示する。すなわち、図２７（ｃ）の状態で下方向指示レバー６５ｃが押下されると（図１９（ｃ））、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０３と移行し、ステップＳ４０３において現在ＲＯＩサムネイルが表示されているため、ステップＳ４０８において次のＲＯＩサムネイル表示を行う（図２７（ｄ））。なお、図２６では詳細を省略しているが、上方向指示レバー６５ａが押下された場合には、ステップＳ４０８で前のＲＯＩサムネイルを表示するように構成しても良い。また、左右の方向指示レバー６５ｂ、６５ｄが操作された場合には、無視してもよいし、次又は前のＲＯＩサムネイルを表示するように構成してもよい。
【０１４８】
ＲＯＩサムネイルが表示された状態で確定ボタン６５ｅが操作されると、本実施形態に係る画像表示装置では原画像のサムネイル表示に復帰する。すなわち、図２７（ｃ）又は図２７（ｄ）の状態で確定ボタン６５ｅが押下されると、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０７と移行し、ＲＯＩサムネイルが表示中であるため、ステップＳ４０９へ移行して原画像サムネイル表示を行う（図２７（ｂ））。
【０１４９】
以上説明したように、本実施形態においては、ＲＯＩ部分のみをサムネイル化したＲＯＩサムネイルを指示に応じて表示するように構成することにより、ＲＯＩの内容をサムネイル画像から容易に把握することができる。また、ＲＯＩサムネイルには同一画像に指定されたＲＯＩの総数及び表示中のＲＯＩの番号が合わせて表示されるため、現在表示されている画像がＲＯＩなのか原画像のサムネイルなのかが判別可能となるほか、何番目のＲＯＩを表示しているのかが直ちに理解される。
【０１５０】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１５１】
■（第７の実施形態）
次に、本発明の第７の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１５２】
図２８は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
図２８のステップＳ３０８〜Ｓ３１０の処理は第１の実施形態と同一なため、これらステップについての説明は省略する。
【０１５３】
ステップＳ３３１で、画像ファイルのメインヘッダＭＨのマスク情報（図７（ｂ）参照）から、画像に含まれるＲＯＩを抽出し、メモリ制御２２を介してＲＯＩのサムネイル画像を作成する。例えば横６４０画素、縦４８０画素の大きさを有するＲＯＩを、予め定められた大きさ、例えば横１６０画素、縦１２０画素の大きさのサムネイルに縮小し、画像表示メモリ２４に書き込む。同一画像中に複数のＲＯＩが指定されている場合には、各ＲＯＩについてサムネイルを生成し、同様に画像表示メモリ２４に書き込む。
【０１５４】
ステップＳ３３２で、メモリ制御２２を介して原画像のサムネイルを作成する。ただし、本実施形態では、原画像サムネイルはＲＯＩサムネイルよりも大きく生成する。例えば原画像が横１２８０画素、縦９６０画素の場合、サムネイル画像を横３２０画素、縦２４０画素というように縮小を行い画像表示メモリ２４に書き込む。
【０１５５】
ステップＳ３３３で、画像処理回路２０、メモリ制御回路２２を介して、画像表示部２８の画面を左右に分割表示する。この時、本実施形態においては左右を均等に分割するのではなく、図２９に示すように左側画面が右側画面より大きくなるように分割する。
【０１５６】
ステップＳ３３４では、図２９に示す様に分割された画面の左側に、画像表示メモリ２４に書き込まれた原画像のサムネイル画像データを、メモリ制御回路２２により画像表示メモリ２４から読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。
【０１５７】
ステップＳ３３５では、図２９に示す様に分割された画面の右側に、画像表示メモリ２４に書き込まれたＲＯＩのサムネイル画像データを、メモリ制御回路２２により画像表示メモリ２４から読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。
【０１５８】
なお、ステップＳ３３１及びステップＳ３３２で生成するサムネイルの大きさは、表示画面の分割比率に応じて適宜定めることが可能である。また、左側画面に表示される元画像（のサムネイル）に設定されたＲＯＩのサムネイルの全てが右側画面に収まるようにＲＯＩサムネイルの大きさを定めると、使い勝手の点から好ましいが、ＲＯＩの数が多くなるとＲＯＩサムネイルの視認性が落ちるので、ＲＯＩの総数に応じて判断しても良い。
【０１５９】
また、画面の分割比率は固定であっても、ユーザが動的に設定可能であっても良い。動的に設定可能である場合には、分割比率が変更される都度図２８のステップＳ３３１以降の処理を実施し、新しい大きさのサムネイルを作成すればよい。また、原画像サムネイルとＲＯＩサムネイルの表示領域を左右入れ替えても良い。さらに、上下に画面を分割しても良い。
【０１６０】
さらに、原画像サムネイルとして、第１、第３及び第４の実施形態で説明したサムネイルを表示するようにしても良い。
【０１６１】
以上説明したように、本実施形態においては、表示画面を分割し、原画像サムネイルの表示領域とＲＯＩサムネイルの表示領域を設けることによって、原画像と指定されたＲＯＩの内容及び数を容易に把握することができる。
【０１６２】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１６３】
■（第８の実施形態）
次に、本発明の第８の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１６４】
図３１（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第７の実施形態において説明した図２８の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。なお、以下の説明において、分割画面左側を原画像表示領域、右側をＲＯＩ表示領域と呼ぶが、ダウ７の実施形態において説明したように、左右が入れ替わっても、上下に分割される場合でも本実施形態に係る発明を適用可能である。
【０１６５】
図３２は、図１２で説明した領域指定レバー６５の操作を説明する図である。図３２において６５ｈはデジタルカメラのユーザーの指であり、図３２（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０１６６】
図３０は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３０の処理は、サムネイル画像の閲覧状態において実行される。なお、図３０において、図１７と同様の処理については同じ参照数字を付した。
【０１６７】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０１６８】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４２１において、それが右方向指示レバー６５ｂであるかを調べる。図３２（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４２２へ移行する。
【０１６９】
ステップＳ４２２では、現在ＲＯＩ表示領域が拡大表示されているか否かを調べる。既にＲＯＩ表示領域が拡大表示されている場合には、何も行わずステップＳ４０２へ戻る。一方、図３１（ａ）に示すように原画像表示領域が拡大表示されている場合には、ステップＳ４２３において拡大表示領域を入れ替え、ＲＯＩ表示領域を拡大表示領域とする。具体的には、画面表示における表示領域の境界位置を変更（本実施形態では左に移動）し、これまで大きく表示されていた原画像サムネイルを縮小して原画像表示領域に表示するとともに、この原画像サムネイルに対応するＲＯＩサムネイルをＲＯＩ表示領域に拡大表示する（ステップＳ４２４、図３３（ｂ））。
【０１７０】
なお、本実施形態においては、原画像表示領域及びＲＯＩ表示領域の何れにも、表示可能な範囲で複数のサムネイル画像を表示するものとする。複数のサムネイル画像の表示は、上述の実施形態のいずれか、例えば第７の実施形態でのサムネイル画像生成処理（ステップＳ３０８〜Ｓ３３２）を繰り返すことで実現できる。従って、拡大表示領域を入れ替える場合、図３３（ｂ）に示すように、これまで拡大表示されていた原画像を単に縮小表示に切り替えるだけでなく、その前後の原画像についても縮小表示を行っている。また、ＲＯＩ画像を拡大表示する場合、拡大表示に切り替えられた直後は最初のＲＯＩ（複数のＲＯＩがある場合）から表示する。さらに、本実施形態では、複数のＲＯＩが指定された原画像についてＲＯＩ画像を拡大表示する場合、図３３（ｂ）に示すように、ＲＯＩ表示領域の略中央部には全体が表示されるＲＯＩサムネイルを配置するとともに、他のＲＯＩサムネイルの上部又は下部の一部を表示することで、複数のＲＯＩサムネイルが存在することをユーザに認識させることができる。
【０１７１】
このような表示は、ＲＯＩサムネイルのみならず、原画像サムネイルの表示に対して適用しても良い。もちろん、第６の実施形態と本実施形態を組み合わせ、ＲＯＩの数に関する情報を含ませたサムネイルを表示するように構成することも可能であるし、画像が表示されない部分に「（領域中央に表示されている原画像（又はＲＯＩ）の番号）／（原画像（又は同一原画像に指定されたＲＯＩ）の総数）」等の情報を表示するように構成することも可能である。
【０１７２】
図３０の説明に戻って、ステップＳ４２４での処理が終了すると、再びステップＳ４０１へ戻ってレバー操作の検出が行われる。ここで、図３２（ｂ）に示すように下方向指示レバー６５ｃが操作されると、ステップＳ４０１→ステップＳ４０２→ステップＳ４２１→ステップＳ４２５と移行する。ステップＳ４２５では、操作が左方向指示レバー６５ｄの操作かどうかを調べる。この場合、下方向指示レバー６５ｃの操作なので、ステップＳ４２６へ移行する。
【０１７３】
ステップＳ４２６では、現在拡大表示されている画像を、操作された方向指示レバーに応じて変更する。本実施形態においては、上方向指示レバー６５ａが操作された場合には現在の１つ前の画像を、下方向指示レバー６５ｃが操作された場合には現在の１つ後の画像を拡大表示（領域の中央に表示）するものとする。従って、図３１（ｂ）の状態で下方向指示レバー６５ｃが操作された場合、システム制御部５０はＲＯＩ表示領域の中央に表示されるＲＯＩ画像を次の画像に変更する（図３１（ｃ））。ステップＳ４２６の処理が終了すると、ステップＳ４０１へ戻る。
【０１７４】
図３１（ｂ）や図３１（ｃ）のように、ＲＯＩ表示領域が拡大表示された状態で、左方向指示レバー６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４２１→ステップＳ４２５→ステップＳ４２７と移行する。
【０１７５】
ステップＳ４２７では、現在拡大表示されているのが原画像表示領域であるか否かを調べる。原画像表示領域が拡大表示された状態であれば何もせずステップＳ４０１へ戻る。一方、ＲＯＩ表示領域が拡大表示されている場合には、ステップＳ４２３及びステップＳ４２４で行ったように、拡大表示領域の入れ替え処理を行う。
【０１７６】
すなわち、画面表示における表示領域の境界位置を変更（本実施形態では右に移動）し、これまで大きく表示されていたＲＯＩサムネイルを縮小してＲＯＩ表示領域に表示するとともに、このＲＯＩサムネイルに対応する原画像サムネイルを原画像表示領域に拡大表示し、最初の状態に戻る（図３３（ａ））。
【０１７７】
一方、図３１（ａ）のように、原画像表示領域が拡大表示された状態で上方向指示レバー６５ａが操作された場合、処理はステップＳ４０２→ステップＳ４２１→ステップＳ４２５→ステップＳ４２６と移行する。そして、ステップＳ４２６で、ＲＯＩ画像の場合と同様、上方向指示レバー６５ａが操作された場合には現在の１つ前の画像を、下方向指示レバー６５ｃが操作された場合には現在の１つ後の画像を拡大表示（領域の中央に表示）する。従って、図３１（ａ）の状態で上方向指示レバー６５ａが操作された場合、システム制御部５０は原画像表示領域に表示される原画像サムネイルを次の画像に変更する（図３１（ｄ））。なお、表示される原画像サムネイルが変化した場合には、ＲＯＩ表示領域におけるＲＯＩサムネイルの表示も対応するものに更新することは言うまでもない。ステップＳ４２６の処理が終了すると、ステップＳ４０１へ戻る。
【０１７８】
以上説明したように、本実施形態においては、表示画面を分割し、原画像サムネイルの表示領域とＲＯＩサムネイルの表示領域を設けるとともに、ユーザの指示によって原画像サムネイルとＲＯＩサムネイルを選択的に拡大表示することによって、原画像と指定されたＲＯＩのみならず、その内容を容易に把握することができる。
【０１７９】
特に、拡大表示領域を動的に変更可能としたので、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０１８０】
■（第９の実施形態）
次に、本発明の第９の実施形態に係る画像表示装置について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１８１】
図３３は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１８２】
図３３のステップＳ３０８〜Ｓ３１０の処理は第１の実施形態と、ステップＳ３３１〜Ｓ３３２は第７の実施形態と同一なため、これらステップについての説明は省略する。ただし、ステップＳ３３１〜Ｓ３３２で作成するサムネイルの大きさは、原画像サムネイル、ＲＯＩサムネイルとも予め定められた大きさ（原画像サムネイルの方が大きい）で行うものとする。
【０１８３】
ステップＳ３４１で、ステップＳ３３１において画像表示メモリ２４に書き込まれた原画像のサムネイル画像データを、メモリ制御回路２２により読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。この際、本実施形態においては、図３４に示すように、複数の原画像のサムネイル画像が画像表示部２８の上部に水平に配置して表示を行う。従って、原画像サムネイルの大きさは画像表示部２８の水平方向の表示画素数と、最大同時表示数とから決定することができる。
【０１８４】
次に、ステップＳ３４２で、画像表示メモリ２４に書き込まれたＲＯＩサムネイル画像データを、メモリ制御回路２２により読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。本実施形態においては、図３４に示すように、ＲＯＩサムネイルは対応する原画像サムネイルの下に並べて表示する。ＲＯＩサムネイルの大きさは画像表示部２８の垂直方向の表示画素数と、原画像サムネイルの縦方向の大きさ並びにＲＯＩサムネイルの最大同時表示数とから決定することができる。なお、上述したように、本実施形態においては、原画像サムネイルの方がＲＯＩサムネイルよりも大きくなるようにサムネイルの大きさを決定する。
【０１８５】
なお、本実施形態の変形例として、図３５に示すように、原画像サムネイルを画像表示部２８の左右いずれかの端部に垂直に配置し、対応するＲＯＩサムネイルを原画像サムネイルの横に並べて配置するようにしてもよい。この場合、図３３のステップＳ３４１で原画像サムネイルを水平方向ではなく画像表示部２８の左右いずれか（図３５では左）の端部に垂直方向に表示し、ステップＳ３４２でＲＯＩサムネイルを対応する原画像サムネイルの右に水平に並べて表示すればよい。
【０１８６】
従って、この変形例において、ステップＳ３３１で生成する原画像サムネイルの大きさは画像表示部２８の垂直方向の表示画素数と最大同時表示数とから決定することが、ステップＳ３３２で生成するＲＯＩサムネイルの大きさは原画像サムネイルの横方向の大きさ並びにＲＯＩサムネイルの最大同時表示数とから決定することができる。
【０１８７】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、原画像サムネイルをＲＯＩサムネイルよりも大きくすることにより、原画像サムネイルとＲＯＩサムネイルとの主従関係が視覚的に把握できるほか、設定されたＲＯＩの数、内容もＲＯＩサムネイルから同時に把握することが可能となる。
【０１８８】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０１８９】
■（第１０の実施形態）
次に、本発明の第１０の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１９０】
図３７（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第９の実施形態において説明した図３３の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。
【０１９１】
図３８は、図１２で説明した領域指定レバー６５の操作を説明する図である。図３８において６５ｈはデジタルカメラのユーザーの指であり、図３８（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０１９２】
図３６は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３６の処理は、サムネイル画像の閲覧状態において実行される。なお、図３６において、図１７と同様の処理については同じ参照数字を付した。
【０１９３】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０１９４】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４３１において、それが右又は左方向指示レバー６５ｂ又は６５ｄであるかを調べる。図３８（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４３２へ移行する。
【０１９５】
ステップＳ４３２において、現在拡大表示（最上段に表示）されているサムネイルが、ＲＯＩサムネイルであるか否かを調べる。図３７（ａ）の状態において現在フォーカスされている左上のサムネイル画像は原画像サムネイルであるため、ステップＳ４３４へ移行する。ステップＳ４３４では、操作されたキーに応じてフォーカスの移動を行う。すなわち、図３８（ａ）に示すように右方向指定レバー６５ｂが操作された場合にはフォーカスを１つ右の原画像サムネイルに移動し（図３７（ｂ））、ステップＳ４０１へ戻る。
【０１９６】
図３７（ｂ）の状態で下方向指示レバー６５ｃが操作されると（図３８（ｂ））、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３３と移行する。ステップＳ４３３では、現在フォーカス中の拡大表示サムネイルの内容を、操作された指示レバーの方向に応じて、原画像サムネイルと対応するＲＯＩサムネイルの中で巡回的に変更する。すなわち、図３８（ｂ）に示すように下方向指示レバー６５ｃが操作された場合には、現在拡大表示されているサムネイルの直下に縮小表示されているサムネイルを拡大表示すると共に、これまで拡大表示されていたサムネイルを最下段に移動させて縮小表示し、残りの縮小表示されていたサムネイルの位置を１つずつ上にずらす。表示内容を更新したら、ステップＳ４０１へ戻る。
【０１９７】
また、図３７（ｂ）の状態で上方向指示レバー６５ａが操作された場合には、最下段に縮小表示されていたサムネイルを拡大表示すると共に、これまで拡大表示されていたサムネイルを１つ下に移動させて縮小表示し、残りの縮小表示されていたサムネイルの位置を１つずつ下にずらす。なお、ＲＯＩの数が最大同時表示数よりも多い場合、少なくとも最下段（となるべき）サムネイルは表示されない。拡大表示されるサムネイルの大きさと、縮小表示されるサムネイルの大きさ、及び画像表示部２８の表示領域の大きさは予め分かっているため、このような場合には、実際に表示すべきサムネイルについてのみ表示処理を行う。
【０１９８】
実際に表示すべきサムネイルの管理は、任意の方法で行うことが可能である。例えば、原画像に「０」、指定されたＲＯＩに「１」から順番に番号を付与し、表示中のサムネイルの番号をメモリ３０に格納しておき、表示すべきサムネイルに変更があった場合にはメモリ３０に格納したサムネイルの番号を１つずつ増加又は減少することにより更新する。そして、メモリ３０に格納された番号に対応するサムネイルを表示する。この際、最初に格納されている番号に対応するサムネイルを拡大表示し、残りの番号に対応するサムネイルは縮小表示すれば図３７に示すような表示が可能である。
【０１９９】
図３７（ｃ）のように、ＲＯＩサムネイルが拡大表示（最上段に表示）されている状態で、左右いずれかの方向指示レバー６５ｂ、６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３５と移行する。ステップＳ４３５では、現在拡大表示されているＲＯＩサムネイルに対応する原画像サムネイルが拡大表示されるように表示状態を初期化する。それにより、表示状態は図３７（ｂ）の状態に戻る。
【０２００】
この状態で図３８（ｄ）に示すように右方向指示レバー６５ｂが操作されると、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３４と移行し、右隣の原画像サムネイルにフォーカスを移動させる。
【０２０１】
なお、図３７（ｄ）の状態でさらに右方向指示レバー６５ｂが操作された場合、図３７では原画像サムネイルの総数が３であるので、フォーカスは左端の原画像サムネイルへ移動する。原画像サムネイルの総数が４以上の（最大同時表示数より多い）場合には、新しい原画像サムネイル（及び対応するＲＯＩサムネイル）が右端に表示され、フォーカスがこの新しい原画像サムネイルに移動する。また、同時にこれまで左端に表示されていた原画像サムネイル及び対応するＲＯＩサムネイルは表示されなくなり、残りの原画像サムネイル及び対応するＲＯＩサムネイルは表示位置を１つ左にずらされる。
【０２０２】
さらに、サムネイル表示を図３５に示したように横方向にした場合にも本実施形態を適用可能である。この場合、上述した左右方向指示レバーの操作に対応した処理と、上下方向指示レバーの操作に対応した処理とを入れ替えれば良い。
【０２０３】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、ユーザの指示に応じて原画像サムネイルと対応するＲＯＩサムネイルのうち任意のサムネイルを拡大表示することが可能となるため、サムネイル表示において原画像に設定されたＲＯＩの内容をさらに詳しく確認することが可能となる。
【０２０４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０２０５】
■（第１１の実施形態）
次に、本発明の第１１の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０２０６】
図４０（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第９の実施形態において説明した図３３の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。
【０２０７】
図４１は、図１２で説明した領域指定レバー６５の操作を説明する図である。図４１において６５ｈはデジタルカメラのユーザーの指であり、図４１（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０２０８】
図３９は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。第１０の実施形態で説明した図３６との比較から明らかなように、本実施形態における表示動作は、上下方向指示レバーの操作によってサムネイルの表示位置は変わらずにフォーカスが移動し、フォーカスされたサムネイルが拡大表示される点以外は第１０の実施形態と同一である。
【０２０９】
なお、この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３９の処理は、サムネイル画像の閲覧状態において実行される。なお、図３９において、図３６と同様の処理については同じ参照数字を付した。
【０２１０】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０２１１】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４３１において、それが右又は左方向指示レバー６５ｂ又は６５ｄであるかを調べる。図４１（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４３２へ移行する。
【０２１２】
ステップＳ４３２において、現在拡大表示されているサムネイルが、ＲＯＩサムネイルであるか否かを調べる。図４０（ａ）の状態において現在フォーカスされている左上のサムネイル画像は原画像サムネイルであるため、ステップＳ４３４へ移行する。ステップＳ４３４では、操作されたキーに応じてフォーカスの移動を行う。すなわち、図４１（ａ）に示すように右方向指定レバー６５ｂが操作された場合にはフォーカスを１つ右の原画像サムネイルに移動し（図４０（ｂ））、ステップＳ４０１へ戻る。
【０２１３】
図４０（ｂ）の状態で下方向指示レバー６５ｃが操作されると（図４１（ｂ））、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３６と移行する。ステップＳ４３６では上下方向指示レバーの操作に応じてフォーカスを上下に移動させる。ここでは下方向指示レバー６５ｃが操作されているため、フォーカスを１つ下に移動する。そして、ステップＳ４３７へ移行し、フォーカスが移動したサムネイルを拡大表示させる。また、同時にこれまで拡大表示されていたサムネイルについては縮小表示に切り替える（図４０（ｃ））。これらサムネイルの拡大、縮小処理は例えば図３３におけるステップＳ３０８〜Ｓ３３２の処理を利用して行うことが可能である。
【０２１４】
また、図４０（ｂ）の状態で上方向指示レバー６５ａが操作された場合には、最下段にフォーカスを移動し、縮小表示されていたサムネイルを拡大表示すると共に、原画像サムネイルを縮小表示する。
【０２１５】
図４０（ｃ）のように、ＲＯＩサムネイルが拡大表示されている状態で、左右いずれかの方向指示レバー６５ｂ、６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３５と移行する。ステップＳ４３５では、現在拡大表示されているＲＯＩサムネイルに対応する原画像サムネイルが拡大表示されるように表示状態を初期化する。それにより、表示状態は図４０（ｂ）の状態に戻る。
【０２１６】
なお、ＲＯＩサムネイルが拡大されている状態で左右方向指示レバーが操作された場合には、レバー操作を無視して単にステップＳ４０１へ戻るように構成しても良い。
【０２１７】
図４０（ｂ）の状態で図４１（ｄ）に示すように右方向指示レバー６５ｂが操作されると、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３４と移行し、右隣の原画像サムネイルにフォーカスを移動させる。
【０２１８】
なお、ＲＯＩの数が画像表示部２８の縦方向のサムネイル最大同時表示数を超える場合や、原画像の総数が画像表示部２８の横方向のサムネイル最大同時表示数を超える場合には、第１０の実施形態で説明したように、巡回的に表示するＲＯＩサムネイルや原画像サムネイルを変更するように構成することも可能である。
【０２１９】
さらに、サムネイル表示を図３５に示したように横方向にした場合にも本実施形態を適用可能である。この場合、上述した左右方向指示レバーの操作に対応した処理と、上下方向指示レバーの操作に対応した処理とを入れ替えれば良い。
【０２２０】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、ユーザの指示に応じて原画像サムネイルと対応するＲＯＩサムネイルのうち任意のサムネイルを拡大表示することが可能となるため、サムネイル表示において原画像に設定されたＲＯＩの内容をさらに詳しく確認することが可能となる。
【０２２１】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０２２２】
【他の実施形態】
上述の実施形態においては、原画像サムネイルにマスクサムネイル（第１の実施形態の場合）等を重畳表示することによりサムネイル表示を行うように説明したが、マスクサムネイルを利用せず、重畳表示された状態を表す１つのサムネイルを作成し、通常のサムネイルとて切り替え表示するように構成しても良い。
【０２２３】
例えば第１の実施形態においては、原画像のうちＲＯＩ領域を塗りつぶしたサムネイルを生成し、このサムネイルを表示するように構成しても良い。
【０２２４】
また、マスクサムネイルを生成する場合、例えば１つのＲＯＩ毎にマスクサムネイルを生成し、複数のマスクサムネイルを重畳表示するように構成しても良い。
【０２２５】
また、第２の実施形態のように、フォーカスされたサムネイルのみＲＯＩを塗りつぶして表示する場合には、マスクサムネイルの表示を切り替える代わりに、原画像のうちＲＯＩを塗りつぶしたサムネイルと、通常の原画像サムネイルとの表示を切り替えるように構成しても良い。
【０２２６】
上述の実施形態においては、デジタルカメラを本発明に係る画像表示装置の一例として説明したが、デジタルカメラの有する撮像、符号化等の圧縮画像の表示に関わらない機能構成は本発明とは本質的に無関係である。本発明はＪＰＥＧ２０００方式におけるＲＯＩのように、画像中に他の領域と異なる特性での圧縮符号化が指定された領域を部分を有する圧縮画像ファイルに格納された画像を表示する機能を有する任意の機器に適用しうる。なお、本発明に係る画像表示装置において圧縮画像ファイルの復号化処理は必須でない。
【０２２７】
また、実施形態で説明した各種表示動作のいくつかを切り替えて使用可能な画像表示装置もまた本発明に含まれる。
【０２２８】
さらに、本文中でも説明したが、複数の実施形態を組み合わせた構成も又可能であり、そのような組み合わせも又本発明に含まれる。実施形態の組み合わせは、本文中で述べた物に限定されるものではない。例えば、第５及び第６の実施形態で説明したような番号表示は、他の全ての実施形態と組み合わせることが可能である。
【０２２９】
尚、前述した実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線／無線通信を用いて当該プログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのシステム或いは装置のコンピュータが該供給されたプログラムを実行することによって同等の機能が達成される場合も本発明に含む。この場合、例えば領域指定レバー１２はキーボードやマウスなど、コンピュータ装置が利用可能な任意のユーザインタフェースで実現することが可能である。
【０２３０】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。
【０２３１】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【０２３２】
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、磁気テープ等の磁気記録媒体、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ等の光／光磁気記憶媒体、不揮発性の半導体メモリなどがある。
【０２３３】
有線／無線通信を用いたプログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイル等、クライアントコンピュータ上で本発明を形成するコンピュータプログラムとなりうるデータファイル（プログラムデータファイル）を記憶し、接続のあったクライアントコンピュータにプログラムデータファイルをダウンロードする方法などが挙げられる。この場合、プログラムデータファイルを複数のセグメントファイルに分割し、セグメントファイルを異なるサーバに配置することも可能である。
【０２３４】
つまり、本発明の機能処理をコンピュータで実現するためのプログラムデータファイルを複数のユーザに対してダウンロードさせるサーバ装置も本発明に含む。
【０２３５】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件を満たしたユーザに対して暗号化を解く鍵情報を、例えばインターネットを介してホームページからダウンロードさせることによって供給し、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【０２３６】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０２３７】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０２３８】
【発明の効果】
以上説明したように、本発明によれば、他の領域とは異なる特性での圧縮符号化がなされた特定領域を含んだ画像データを表示する画像表示装置において、サムネイル表示のような縮小表示状態であっても特定領域の有無や数を容易に把握することが可能になるという効果を有する。
【図面の簡単な説明】
【図１】本発明に係る画像表示装置が使用可能な符号化器の全体構成例を示すブロック図である。
【図２】図１の離散ウェーブレット変換部３により出力されるサブバンドの構成例を示す図である。
【図３】図１のエントロピ符号化部で行われるコードブロック分割を説明する図である。
【図４】ＲＯＩに係る変換係数を特定するためのマスクを説明する図である。
【図５】図１の符号列形成部の処理を説明する図である。
【図６】図１の符号列形成部の処理を説明する図である。
【図７】図１の符号列形成部で生成される符号列の構成例を示す図である。
【図８】図１の符号化器にて得られた符号列を復号する復号器の全体構成例を示すブロック図である。
【図９】図８の符号化器におけるサブバンド復号化を説明する図である。
【図１０】本発明の実施形態に係る画像表示装置としてのデジタルカメラの斜視図である。
【図１１】図１０に示すデジタルカメラの内部構成例を示すブロック図である。
【図１２】図１１における領域指定レバー６５の構成例を示す図である。
【図１３】第１の実施形態に係るデジタルカメラにおける領域指定時の画面表示例を説明する図である。
【図１４】第１の実施形態に係るデジタルカメラで生成される動画ファイルの構成例を示す図である。
【図１５Ａ】第１の実施形態に係るデジタルカメラの撮影及び画像ファイル記録動作を示すフローチャートである。
【図１５Ｂ】第１の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図１６】第１の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図１７】第２の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図１８】第２の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図１９】図１８の説明に用いる、領域指定レバー６５操作を示す図である。
【図２０】第３の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２１】第３の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２２】第４の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２３】第４の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２４】第５の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２５】第５の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２６】第６の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２７】第６の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２８】第７の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２９】第７の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３０】第８の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３１】第８の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３２】図３１の説明に用いる、領域指定レバー６５操作を示す図である。
【図３３】第９の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３４】第９の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３５】第９の実施形態の変形例に係るデジタルカメラのサムネイル表示例を示す図である。
【図３６】第１０の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３７】第１０の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３８】図３７の説明に用いる、領域指定レバー６５操作を示す図である。
【図３９】第１１の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図４０】第１１の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図４１】図４０の説明に用いる、領域指定レバー６５操作を示す図である。
【発明の属する技術分野】
本発明は、画像を圧縮して記憶し、或は記憶されている画像を読出して表示する画像表示装置及びその制御方法に関するものである。
【０００２】
【従来の技術】
従来、デジタルカメラなどにおいては、撮像した画像はメモリカード等の記憶媒体に順次圧縮して記憶され、所望の画像が指定されると、その画像を復号してモニタに表示するように構成されている。これら複数の画像の中から所望の画像を選択する際などには、それぞれの画像を縮小したサムネイル画像を作成し、それらサムネイル画像を画像インデックスとして、デジタルカメラが備えているモニタや、このデジタルカメラに接続されているＴＶ、ＰＣ等の画面上に同時に複数表示することができるように構成されている。
【０００３】
また現在、次世代の画像圧縮方式として、いわゆるＪＰＥＧ２０００方式が検討されている。このＪＰＥＧ２０００に関する詳細な説明はここでは省略するが、特徴的な機能として画像中のある注目範囲（Region Of Interest：以下ＲＯＩと略す）を指定し、その指定された範囲の画像を、その画像の他の範囲とは異なる圧縮係数（圧縮率）で圧縮する機能がある。ここで、他の範囲よりも低い圧縮率となる圧縮係数で圧縮されたＲＯＩには、画像中の注目すべき被写体が含まれていることが考えられる。
【０００４】
従って、ＪＰＥＧ２０００方式での圧縮を行うデジタルカメラでは、これらＲＯＩが複数含まれた画像に基づいてサムネイル画像を形成し、画像インデックスとして、デジタルカメラが備えているモニタや、このデジタルカメラに接続されているＴＶ、ＰＣ等の画面上に表示することになる。
【特許文献１】
特開２００１−１２８１０９号公報（第４〜５頁、図３）
【０００５】
【発明が解決しようとする課題】
しかしながら、このようなサムネイル画像は、元の画像を縮小して作成するため、ＲＯＩが含まれた画像のサムネイル画像を表示する場合、「ＲＯＩの部分がいくつあるのか分からない。」「ＲＯＩを含んだ画像がどれであるか分かりにくい」といった、サムネイル画像表示からＲＯＩについての情報を得にくいという問題がある。
【０００６】
また、サムネイル画像をデジタルカメラのモニタに表示する場合、一般にモニタサイズは小さく、限られた面積、限られた画素数で表示を行うため上記問題はさらに顕著なものとなる。
【０００７】
【課題を解決するための手段】
本発明はこのような従来技術の問題点に鑑みなされたものであり、その目的は、関心領域が設定された画像データを縮小表示する画像表示装置及びその制御方法において、設定された関心領域の場所や数、内容等が容易に把握可能に縮小表示を行う画像表示装置及びその制御方法を提供することにある。
【０００８】
すなわち、本発明の要旨は、原画像データを読み込む読み込み手段と、原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得手段と、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小手段と、表示手段と、複数の縮小画像を、選択可能に表示手段に表示させる表示制御手段とを有し、表示制御手段が、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定手段によって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置に存する。
【０００９】
また、本発明の別の要旨は、原画像データを読み込む読み込みステップと、原画像データ中に、関心領域が設定されているか否かを判定する判定ステップと、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得ステップと、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小ステップと、複数の縮小画像を表示手段に表示させる表示制御ステップとを有し、表示制御ステップが、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定ステップによって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置の制御方法に存する。
【００１０】
また、本発明の別の要旨は、コンピュータ装置を、原画像データを読み込む読み込み手段と、原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、関心領域が設定されている場合、当関心領域に関する領域情報を取得する領域情報取得手段と、原画像データ及び領域情報を用いた縮小画像を生成する画像縮小手段と、表示手段と、複数の縮小画像を、選択可能に表示手段に表示させる表示制御手段とを有し、表示制御手段が、表示手段に表示された複数の縮小画像の１つを選択する操作がなされると、選択された縮小画像の原画像データ中に関心領域が設定されているか否かを判定手段によって判定し、設定されていると判定される場合には、選択された縮小画像の関心領域を他の領域と識別可能に表示し、表示手段に表示された複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させる画像表示装置の各手段として機能させるためのプログラムに存する。
【００１１】
また、本発明の別の要旨は、本発明のコンピュータプログラムを格納したことを特徴とするコンピュータ装置読み取り可能な記憶媒体に存する。
【００１２】
【発明の実施の形態】
以下、図面を参照して本発明をその好適な実施形態に基づき詳細に説明する。なお、以下の実施形態においては、本発明に係る画像処理装置をデジタルスチルカメラに適用した場合を例にして説明するが、本発明に係る画像処理装置は画像データを処理する他の任意の装置に対して適用可能である。
【００１３】
■（第１の実施形態）
まず、本発明に係る画像表示装置が使用可能な画像ファイルを生成する画像符号化処理及び復号化処理について説明する。
【００１４】
図１は、本発明に係る画像表示装置が使用可能な画像ファイルを生成する符号化器の全体構成例を示すブロック図である。
【００１５】
図中、本符号化器に入力される画像データには、コンポーネント変換部１で必要に応じて色空間変換を施すことが出来る。変換された各色成分のデータは、必要に応じて所定の間引き処理が行われて出力される。なお、画像データがモノクログレースケールの画像である場合は、コンポーネント変換を行う必要は無く、そのままタイル分割部２へ与えられる。以下の説明は上述の方法にて得られた各色成分毎に行われる処理を説明するものである。
【００１６】
タイル分割部２は、入力した画像データを複数個の所定の大きさの矩形領域（タイル）に分割し出力する。このタイルの大きさは最大で各色成分のデータ全体の大きさとすることができ、この場合は実質的にタイル分割は行われないことになる。以下の説明は上述の方法にて得られた各色成分のタイル毎に行われる処理を説明するものである。
【００１７】
離散ウェーブレット変換部３は入力したタイル単位の画像データに対して２次元の離散ウェーブレット変換を施して周波数成分に分解し、複数の周波数帯域のそれぞれに属する変換係数群（以降サブバンド）を出力する。図２は離散ウェーブレット変換部３により出力されるサブバンドの構成を示したものであり、２次元のウェーブレット変換を低周波帯域に対して再帰的に２レベル行ったものである。なお、離散ウェーブレット変換部３では非可逆符号化を行う場合にはウェーブレット変換後の係数が実数になる実数型のフィルタを、可逆符号化を行う場合にはウェーブレット変換後の係数が整数になる整数型のフィルタが用いられる。非可逆符号化／可逆符号化の何れを行うかは例えば外部から設定可能である。
【００１８】
量子化部４は離散ウェーブレット変換部３から入力したサブバンド毎に、所定の方法により設定された量子化ステップを用いて量子化を行い、量子化インデックスを生成して出力する。なお、離散ウェーブレット変換部３で可逆符号化を行った場合には、量子化部４では量子化を行わず、入力した変換係数そのものが出力される。
【００１９】
エントロピ符号化部５は、図３に示すように、入力したサブバンドをさらに複数の矩形ブロック（以降コードブロックと呼ぶ）に分割（サブバンドと矩形ブロックが同サイズの時は分割しない）し、このコードブロックを単位として独立にエントロピ符号化を行い、符号化データを生成する。この時、量子化インデックスを表すビットは、上位ビットプレーンから順に、算術符号化され符号化データが生成される。
【００２０】
本実施の形態における符号化器では、例えばＪＰＥＧ２０００方式に従って、興味の有る特別な領域（＝Region Of Interest：以降ＲＯＩと呼ぶ）が設定された画像を符号化することができる。ＲＯＩの設定は画像データが符号化器に入力される前に、図示しない領域設定部により設定される。そして、設定されたＲＯＩに対して、図２に示す各サブバンドにおいて、図４に示すような当該ＲＯＩに係る変換係数を特定するためのマスクが生成される。
【００２１】
図４において白く示した部分がＲＯＩに相当しており、この部分に含まれる係数は符号化に先立って、ＲＯＩ以外の領域に係わる係数とビットプレーン上で完全に分離される様な、所定のビット数分だけ上位方向にシフトアップされる。これにより、全てのビットプレーン内のビット１と０の存在を見ることにより、どの領域がＲＯＩかどうかを判別することが可能である。なお、ＲＯＩを他の領域と分離するためのシフトアップ数は後述する符号列の所定のマーカにパラメータとして追加される。
【００２２】
図１に戻って、符号列形成部６は、所定の方法により設定されたプログレッシブ形態に基づいて符号列を形成し出力する。この符号列形成において、符号列形成部６は、採用するプログレッシブ形態に合わせて、各コードブロックの符号化データの上位ビットプレーンから順に適量の符号化データを選択して１つ以上のレイヤを構成する。
【００２３】
例えば、設定されたプログレッシブ形態がＳＮＲスケーラブルである場合、符号列形成部６は図５に示すように、レイヤを単位として上位レイヤから順に下位レイヤに向かい符号化データを配置する。なおこの時、後半のレイヤを省略して下位ビットプレーンに係る符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化できるとともに、省略する符号化データの量によって、符号列を復号し再生される画像の画質を変化させることができる。
【００２４】
一方、設定されたプログレッシブ形態が空間解像度スケーラブルである場合、符号列形成部６は図６示すように低周波サブバンドから高周波サブバンドに向かい符号化データを配置する。この時、後半のサブバンドの符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化できるとともに、省略する符号化データの量によって、符号列を復号し再生された画像の解像度を変化させることができる。
【００２５】
さらに符号列形成部６は上述のように設定された各プログレッシブ形態に応じて形成された符号列に、各種マーカから構成されるヘッダを追加して最終的な符号列を出力する。
【００２６】
図７は符号列形成部６が出力する最終的な符号列の構成例を示す図である。
図７は、図６に示したように、符号化されたビットストリームを解像度の小さいサブバンドから順次解像度が高くなる順番（空間解像度スケーラブル）に配置し、階層的に出力する場合の符号列の構成を表した概略図である。図７（ａ）は符号列の全体の構成を示したものであり、ＭＨはメインヘッダ、ＴＨ0〜ＴＨn-1はタイルヘッダ、ＢＳ0〜ＢＳn-1はビットストリームである。
【００２７】
メインヘッダＭＨは図７（ｂ）に示すように、符号化対象となる画像のサイズ（水平および垂直方向の画素数）、画像を複数の矩形領域であるタイルに分割した際のタイルサイズ（水平および垂直方向の画素数）、色成分数を表すコンポーネント数、各成分の大きさ、ビット精度を表すコンポーネント情報、およびＲＯＩを指定するマスク情報、ビットシフト数から構成されている。マスク情報には、ＲＯＩの位置、大きさ、数などの情報が含まれる。なお、本実施形態では画像はタイルに分割されないものとし、従ってタイルサイズと画像サイズは同じ値を取る。また、対象画像がモノクロ多値画像の場合コンポーネント数は１、Ｒ，Ｇ，Ｂや輝度と２つの色差信号からなるカラー多値画像の場合コンポーネント数は３である。
【００２８】
次にタイルヘッダＴＨの構成例を図７（ｃ）に示す。タイルヘッダＴＨには当該タイルのビットストリーム長とヘッダ長を合わせたタイル長及び、当該タイルに対する符号化パラメータが含まれる。タイルヘッダに含まれる符号化パラメータとしては、離散ウェーブレット変換のレベル、フィルタの種別等がある。
【００２９】
本実施形態におけるビットストリームＢＳの構成例を図７（ｄ）に示す。ビットストリームは各サブバンド毎にまとめられ、解像度の小さいサブバンドを先頭として順次解像度が高くなる順番に配置されている。さらに、各サブバンド内は上位ビットプレーンから下位ビットプレーンに向かい、ビットプレーンを単位として符号が配列されている。
【００３０】
図７（ｅ）は輝度とＢ−Ｙ，Ｒ−Ｙの色差信号からなるカラー画像に図７（ｄ）の構成を適用した場合のビットストリームの構成例を示す図である。輝度の解像度の小さいサブバンドを先頭として各成分毎に順次解像度が高くなる順番に配置されている。
【００３１】
このような構成を有する符号化器で生成された符号列を復号する復号器の全体構成例を図８に示す。
符号列入力部７は符号列を入力し、メインヘッダＭＨから画像やタイルのサイズ、プログレッシブ形態や量子化ステップ等の、後続の復号処理に必要なパラメータを抽出する。メインヘッダを除いた残りの符号列はエントロピ復号部８に出力される。なお、復号対象となる全体の符号列には、上述した図７の形態を持つ複数タイル分の符号列が、上述したコンポーネント変換部１にて得られた色成分毎に含まれる。本実施形態では復号処理は各色成分毎に独立して行うこととし、復号対象となる色成分を構成する各タイルの符号列を順に復号してゆく。
【００３２】
エントロピ復号部８は入力した符号列に対して復号処理を行い、量子化インデックスを出力する。この復号処理ではコードブロック内の量子化インデックスが上位ビットプレーンから順に復号され、量子化インデックスが復元される。
【００３３】
例えば、この時、符号列のプログレッシブ形態がＳＮＲスケーラブル（図５）となっており、所定数の上位レイヤのみが符号化列に含まれる場合には、復号処理は符号化列に含まれるレイヤで打ち切られ、その時点での復元値が量子化インデックスとして出力される。
【００３４】
ここで、メインヘッダにＲＯＩが指定されていた場合は、ヘッダ中のビットシフト数に対応した上位ビットプレーンに係る量子化インデックス値はビットシフト数分、シフトダウンされてから出力される。これにより、ＲＯＩ部分の量子化インデックスは適切な値に復元される。
【００３５】
逆量子化部９は入力した量子化インデックスを、先に符号列から読み込まれた量子化ステップを元に逆量子化し、変換係数を復元して出力する。
【００３６】
逆離散ウェーブレット変換部１０は、入力した変換係数から、２次元の逆離散ウェーブレット変換を施すことにより、これに対応する色成分データ（符号化対象画像がモノクロ画像の時は画像濃度データ）を復元して出力する。
【００３７】
なおこの時、符号列のプログレッシブ形態が空間解像度スケーラブルであり、前半に符号化されるレベル（例えばＬＬのみや、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のみ）のサブバンドのみが復元されている場合は、復元された色成分データの解像度はその復元されたサブバンドのレベルに応じて変化する。
【００３８】
図９はこの様子を示しており、同図においてサブバンドＬＬの係数のみが復号された場合は、逆離散ウェーブレット変換は実質的には行われず、ＬＬの係数が元のデータレンジに収まるように調節された後に出力される。この場合復元された色成分データは、同図ｒ＝０に示すサイズとなり、元のデータサイズに対して水平および垂直方向に１／４のサイズとなっている。
【００３９】
さらに、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のサブバンドまで復号された場合、逆変換を１レベル行うことで同図ｒ＝１に示すように、元の解像度に対して水平及び垂直方向に１／２のサイズの色成分データが復元される。
【００４０】
以上の処理は各タイル単位で行われ、画像構成部１１は復元された各タイルの各色成分データを再度、元の１枚の符号化対象画像を構成する色成分データとして構成してコンポーネント逆変換部１２に出力する。
コンポーネント逆変換部１２は、入力した各色成分データに所定の変換を施すことにより、元の符号化対象画像の色空間を持つ画像データを復元して出力する。この時、元の色成分データがコンポーネント変換部１にて間引き処理されている場合は、逆変換を行う前に必要な解像度に変換（データ補間）される。
【００４１】
以上の説明において、プログレッシブ形態が空間解像度スケーラブルの場合には、復号するレイヤを制限することで、復元される画像の画質を制御することが出来る。また、ＳＮＲスケーラブルの場合には、逆離散ウェーブレット変換するサブバンドのレベル数を制限することで復元される画像の解像度を制御することが出来る。
本発明に係る画像表示装置は、必要に応じてこれらの符号化器、復号化器を有することが可能である。
【００４２】
つづいて、本実施形態に係る画像表示装置の一例としてのデジタルカメラの構成例を説明する。
図１０（ａ）はデジタルカメラを正面方向からみた外観斜視図で、図１０（ｂ）は同じく背面から見た外観斜視図である。また、図１１はデジタルカメラ全体の構成例を示すブロック図である。
【００４３】
図１１において、１００は画像処理装置である。１３は撮影レンズ、１４は絞り機能を備えるシャッター、１５は光学像を電気信号に変換する撮像素子、１６は撮像素子１５のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
【００４４】
１８は撮像素子１５、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。
【００４５】
また、画像処理回路２０は、撮像した画像データを用いて所定の演算処理を行う。この演算結果に基づいて、システム制御回路５０が、露光制御手段４０、測距制御手段４２に対して露光制御、フォーカス制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理及びＡＷＢ（オートホワイトバランス）処理を行っている。
【００４６】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。
Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはメモリ制御回路２２のみを介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００４７】
２８はＴＦＴ ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。また、画像表示部２８は、システム制御回路５０の指示により表示をＯＮ／ＯＦＦすることが可能である。
【００４８】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶容量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。
また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００４９】
圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。圧縮・伸長回路３２の機能構成は、図１及び図８を用いて説明した上述の符号化器、復号化器と同等である。
【００５０】
４０はシャッター１４を制御する露光制御回路であり、フラッシュ４８と連携することによりフラッシュ調光機能も有する。フラッシュ４８は、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。
【００５１】
４１は撮影レンズ１３のフォーカシングを制御する測距制御回路、４４は撮影レンズ１３のズーミングを制御するズーム制御回路、４６はレンズバリア１０２の動作を制御するバリア制御回路である。
【００５２】
露光制御回路４０、測距制御回路４１は、撮像した画像データを画像処理回路２０によって演算した結果に基づき、システム制御回路５０がＴＴＬ方式を用いて制御する。
システム制御回路５０は画像処理装置１００全体を制御する。メモリ５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶する。
【００５３】
５４はシステム制御回路５０でのプログラムの実行に応じて、カメラの動作状態やメッセージ等を表示する表示部である。表示部５４に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、電池残量表示、記録媒体２００の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示等がある。表示部５４は画像表示部２８はどちらか一方で両方の機能を有していても良い。
【００５４】
不揮発性メモリ５６は電気的に消去・記録可能なメモリで、例えばＥＥＰＲＯＭ等が用いられる。
６０、６１、６２、６４、６６、６８及び７０は、システム制御回路５０の各種の動作指示を入力するための入力手段として機能し、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００５５】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することが出来る。
【００５６】
シャッターボタン６１は２つのスイッチ６２、６４を有する。シャッタースイッチＳＷ１（６２）は、シャッターボタン６１の操作途中でＯＮとなり、これによりＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。
【００５７】
シャッタースイッチＳＷ２（６４）は、シャッタースイッチＳＷ１（６２）がＯＮとなった後更に押し込むことによりＯＮとなり、これにより撮影処理が行われる。すなわち、撮像素子１５から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた画像形成処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２が上述した方法で圧縮を行い、記録媒体２００に画像データを書き込む記録処理という一連の処理が行われる。なお、撮影した画像に対するＲＯＩの指定は圧縮・伸長回路３２での画像圧縮前もしくは後に、撮影画像のプレビュー表示時点で行うようにしても良いし、圧縮処理後にユーザが表示させた画像に対して指定を行うようにしても良い。圧縮符号化後にＲＯＩを指定する場合、再度の圧縮符号化が必要となる。
【００５８】
６５は画像表示部２８に表示された画像の任意の領域を指定する領域指定レバーであり、後述のＲＯＩ指定等に用いる。
６６は画像表示ＯＮ／ＯＦＦスイッチで、画像表示部２８のＯＮ／ＯＦＦを設定することが出来る。
【００５９】
６８はクイックレビューＯＮ／ＯＦＦスイッチで、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定する。なお、本実施形態では特に、画像表示部２８をＯＦＦとした場合におけるクイックレビュー機能の設定をする機能を備えるものとする。
【００６０】
７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等がある。
【００６１】
８０は電源制御回路で、電源検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電源の装着の有無、電源の種類、残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。
【００６２】
８２及び８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源である。
【００６３】
９０はメモリカードやハードディスク等の記録媒体とのインタフェース、９２はメモリカードやハードディスク等の記録媒体と接続を行うコネクタ、９８は記録媒体２００が装着されているか否かを検知する記録媒体着脱検知回路である。１０２は、画像処理装置１００のレンズ１３を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである。
【００６４】
１０４は光学ファインダであり、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダ１０４内には、表示部５４で表示されるような、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示等が行われる。
【００６５】
１１０は通信部で、外部機器との有線、無線通信を行うために必要なインタフェース、例えばＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、ＩＥＥＥ１２８４、ＳＣＳＩ、ＩＥＥＥ８０２、１０／１００ＢＡＳＥ−Ｔ、モジュラジャック等と、当該インタフェースを介した通信機能を有する。
【００６６】
１１２は通信部１１０により画像処理装置１００を他の機器と接続する物理的なインタフェースであり、コネクタ（無線通信の場合はアンテナ）である。
２００はメモリカードやハードディスク等の記録媒体である。
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインタフェース２０４、画像処理装置１００のコネクタ９２と接続を行うコネクタ２０６を備えている。
【００６７】
次に、このような構成を有するデジタルカメラが生成する動画ファイルの構造例について説明する。
図１４は動画ファイルの構造例を示す図である。図１４に示すように、動画ファイルは、ヘッダエリア４０１、画像、音声の付帯情報に関する付帯情報エリア４０２、データエリア４０３、インデックスエリア４０４から構成される。
【００６８】
ヘッダエリア４０１には、ファイル全体に関する情報が記録され、フレームレート（１秒当りのフレーム数）や画像データのフォーマット情報（例えばＪＰＥＧ２０００、ＪＰＥＧ、ビットマップ）や音声データのフォーマット情報（例えばＰＣＭ、ＭＰ３）などが記録されている。
【００６９】
付帯情報エリア４０２には、画像データの付帯情報として、画像のサイズ（例えば７２０×４８０画素、１４４０×９６０画素）や画像データの縦横の比率を示すアスペクト比等が、音声データの付帯情報として、サンプリングレート、チャンネル数、ビット数等が記録されている。
【００７０】
データエリア４０３には複数の静止画からなる画像データと、それに対応する音声データがインターリーブされて記録されている。なお、本実施形態においては画像データと音声データを一つのファイルとした構造を取っているが、画像データと音声データは別のファイルとして記録しても良い。
【００７１】
インデックスエリア４０４には、データエリア４０３内の任意の画像データおよび音声データにアクセス可能とするアドレス情報等が記録されている。
【００７２】
（ＲＯＩの指定）
次に、上述のデジタルカメラにおけるＲＯＩ指定方法について図１２及び図１３を用いて説明する。
図１２（ａ）はデジタルカメラに設けられた領域指定レバー６５の詳細図、図１２（ｂ）は領域指定レバー６５の回路図、図１３（ａ）〜（ｃ）はＲＯＩ指定時の画像表示部２８の表示状態例を示す図である。
【００７３】
図１２（ａ）において、６５ａはカーソルを上方向に移動させる指示を与える上方指定レバー、６５ｂはカーソルを右方向に移動させる指示を与える右方指定レバー、６５ｃはカーソルを下方向に移動させる指示を与える下方指定レバー、６５ｄはカーソルを左方向に移動させる指示を与える左方指定レバー、６５ｅはカーソル位置を確定させる指示を出す確定ボタンである。
【００７４】
図１２（ｂ）に示すように、領域指定レバー６５はその内部に、レバー６５ａ〜６５ｅに対応したスイッチを有しており、各スイッチの出力からレバー６５により入力された指示を検出する。すなわち、Ｙ＋は上方指定レバー６５ａの指示を受けシステム制御５０に上方向にカーソル移動の指示を送る上方検出信号、同様にＸ＋は右方指示レバー６５ｂの指示を受けシステム制御５０に右方向にカーソル移動の指示を送る右方検出信号、Ｙ−は下方指示レバー６５ｃの指示を受けシステム制御５０に下方向にカーソル移動の指示を送る下方検出信号、Ｘ−は左方指定レバー６５ｄの指示を受けシステム制御５０に左方向にカーソル移動の指示を送る左方検出信号、Ｃは確定ボタン６５ｅの指示を受けシステム制御５０にカーソル確定の指示を送る確定信号であり、デジタルカメラのユーザは領域指定レバー６５の６５ａ、６５ｂ、６５ｃ、６５ｄの各レバーと確定ボタン６５ｅを操作することにより画像内の任意の領域を指定することが出来る。
【００７５】
図１３を参照して、画像表示部２８に表示された画像に対してＲＯＩを指定する方法についてさらに説明する。まず、領域指定レバー６５の中央の選択スイッチ６５ｅが押されると、領域を指定するカーソルＰ０が画像表示部２８の中心に多重表示される（図１３（ａ））。ユーザは画像表示部２８に表示されたカーソルＰ０を見ながら、カーソルＰ０を移動させたい方向に領域指定レバー６５を操作する。システム制御部５０は、領域指定レバー６５の押圧状態に応じて出力される検出信号に基づいてカーソルの移動量を算出し、算出された位置にカーソルＰ０を移動させる。ここで領域指定レバー６５の確定ボタン６５ｅが押されるとＲＯＩの枠の１頂点が確定される。
【００７６】
同様に、次のポイントを決めるため、領域指定レバーを操作しカーソルを移動させ、この作業を繰り返すことによって４点選択する（図１３（ｂ））。そして再度確定ボタン６５ｅを押すと選択されたポイントＰ１，Ｐ２，Ｐ３，Ｐ４によって結ばれた領域がＲＯＩとして指定される（図１３（ｃ））。
なお、本実施形態におけるデジタルカメラでは、指定された領域が明確となるよう、ＲＯＩ部分は色や輝度を調整するものとする。
【００７７】
また、ここでは、ＲＯＩを四角形と仮定し、その頂点を選択することによって指定するものとして説明したが、ＲＯＩの形状（丸や多角形など）やその決定方法は任意に設定可能である。例えば、ＲＯＩが長方形である場合には、その対角線上にある頂点を指定するように構成することも可能であるし、予め所定の大きさの長方形を重畳表示し、その任意の頂点を移動させることにより領域を決定するように構成することも可能である。また、円形である場合には、その中心と円周上の点を指定することにより領域の設定を行うようにしたり、指定された長方形に内接する円又は楕円が設定されるようにしても良い。あるいは、カーソルを移動させた軌跡によって領域を指定するようにしても良い。
【００７８】
更には画像処理、画像認識手段によりエッジ成分や色成分を用い、画像中の特定の物や人をＲＯＩとして指定することも可能である。また、動き情報を用いて指定することも可能である。更には、領域選択レバー６５の代わりに、が沿表示部２８上に配置されたタッチパネルを用いてもよい。
【００７９】
図１５Ａ、図１５Ｂは、本実施形態に係るデジタルカメラの動作を示すフローチャートである。この処理を実現するプログラムは例えば図１１のメモリ５２に記憶されており、図示しないＣＰＵを有するシステム制御部５０によって実行される。以下図１５Ａ、図１５Ｂ及び図１１を参照して、本実施形態に係るデジタルカメラの動作を説明する。
【００８０】
まず、ユーザがシャッタースイッチＳＷ１（６２）をオン状態にすることによって、デジタルカメラが撮影を開始する。次にステップＳ３０１に進み、４１測距制御手段によりＡＦ（オートフォーカス）動作を、ステップＳ３０２で４０露光制御手段によりＡＥ（自動絞り調整）動作を行う。これらＡＦ動作およびＡＥ動作に際しては、撮像素子１５から電荷信号を読み出し、Ａ／Ｄ変換器１６を介して画像処理回路２０にデジタル撮像信号を逐次読み込む。こうして逐次読み込まれた撮像信号を基に、画像処理回路２０で演算を行い、その演算結果を用いてシステム制御部５０が測距制御手段４２に制御信号を出力してレンズの焦点が合うように撮影レンズ１３を制御したり、露光制御手段４０に制御信号を出力して絞り機能を備えるシャッター１４を制御する。
【００８１】
次にステップＳ３０３に進み、ユーザがシャッタースイッチＳＷ２（６４）をオン状態にすると、撮影のための露光を撮像素子１５により行い、ステップＳ３０４で、その露光によって撮像素子１５に蓄積された電荷を読み出して、その出力信号である撮像信号をＡ／Ｄ変換器１６でＡ／Ｄ変換する。次にステップＳ３０５に進み、Ａ／Ｄ変換された画像信号を画像処理回路２０により信号処理して、その信号処理結果をデジタル画像信号としてメモリ制御回路２２を介してメモリ３０に一時的に保存する。
【００８２】
こうしてメモリ３０に一時的に保存されたデジタル画像信号に対して、ステップＳ３０６で圧縮伸長回路３２による圧縮処理を施し、処理を終えたデータをメモリ３０へ書き込む。このステップＳ３０６における圧縮処理では、ＪＰＥＧ２０００の圧縮方式に代表されるように、画像中のある注目範囲（ＲＯＩ）を指定し、その指定されたＲＯＩ内の画像は他の画像範囲とは異なる圧縮係数（圧縮率）で圧縮する方式をとる。ステップＳ３０７でその圧縮した画像データを画像ファイルとして半導体メモリカードなどの記憶媒体２００に保存する。
【００８３】
なお、図１５Ａに示した以上の動作は、画像ファイルの生成に関するものであり、本発明には直接関係しないことに留意されたい。すなわち、本発明に係る画像表示装置は、例えば図７に示すような、ＲＯＩが指定されうる画像ファイルの表示を目的とした装置であり、画像ファイルの生成そのものは他の装置で行っても良い。
【００８４】
図１５Ｂに示す、ステップＳ３０８以降は、記憶媒体２００に記録された画像の表示に関する処理である。
ステップＳ３０８で、記録媒体２００に保存されている圧縮画像を読み出し、ステップＳ３０９で、圧縮伸長回路３２により圧縮画像の解凍（伸長）を行い、メモリ制御回路２２によりメモリ３０へ書き込む。なお、記録媒体２００に保存されている画像ファイルが非圧縮データであれば、ステップＳ３０９における解凍（伸長）処理は不要である。
【００８５】
ステップＳ３１０で、システム制御部５０により、メモリ３０に書き込まれた画像ファイルのインヘッダＭＨ（図７（ｂ））を参照し、マスク情報からその画像に含まれるＲＯＩの判定を行う。
【００８６】
ステップＳ３１１で、画像に含まれるＲＯＩを抽出し、システム制御部５０はメモリ制御回路２２を介して、原画像に設定されたＲＯＩを単色で塗りつぶし、それ以外の領域は無色（透過）のサムネイル画像（マスクサムネイル）を作成する。例えばサムネイル画像は横１６０画素、縦１２０画素とすることができ、画像を画素間引き等周知の手法により縮小して生成することができる。生成したマスクサムネイルは画像表示メモリ２４に書き込む。
【００８７】
塗りつぶす色は任意に決定可能であり、予め定めた特定の固定値を用いることも可能だが、サムネイル表示において目立つように、領域内の画素値もしくはＲＯＩ周辺の領域の画素値と差が大きくなるよう動的に決定しても良い。この場合、塗りつぶす色は領域内もしくは周辺領域の画素値のヒストグラムや平均値等を用いて決定することが可能である。
【００８８】
また、１つのマスクサムネイルに１つの原画像に対して設定されたＲＯＩを全て含ませるのではなく、ＲＯＩ毎に（ＲＯＩの）サムネイルを生成することも可能である。この場合、生成されたマスクサムネイルには、後で原画像のサムネイルと重畳表示する際に正しい位置に表示されるよう、原画像もしくはそのサムネイル上での位置情報等を付加して画像表示メモリ２４に記憶する。
【００８９】
また、ＲＯＩサムネイルとして、原画像のサムネイルと同じ大きさのサムネイル（この場合、横１６０画素、縦１２０画素）をマスクサムネイルとは別に個々のＲＯＩに対して生成することも可能である。このＲＯＩサムネイルは、第２の実施形態で行うような、ＲＯＩのみをサムネイル画像表示する場合に使用することが可能である。
【００９０】
ステップＳ３１２で、システム制御部５０は、メモリ制御回路２２を介して原画像のサムネイル画像を作成する。例えば原画像が横１２８０画素、縦９６０画素の場合、サムネイル画像を横１６０画素、縦１２０画素というように縮小を行い画像表示メモリ２４に書き込む。なお、縮小率はステップＳ３１１でのマスクサムネイルを生成した際の縮小率と共通にする。
【００９１】
ステップＳ３１３で、図１６に示すように、システム制御部５０は、画像処理回路２０、メモリ制御回路２２を用いて、画像表示メモリ２４に書き込まれた原画像のサムネイル画像と、この原画像に対応する、ＲＯＩ領域を単色で塗りつぶしたマスクサムネイル画像を読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に重畳して表示する。
【００９２】
以上説明したように、本実施形態においては、ＲＯＩ部分が単色で塗りつぶされたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【００９３】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが単色で塗りつぶされたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【００９４】
■（第２の実施形態）
次に、本発明の第２の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【００９５】
図１８は、本実施形態に係るデジタルカメラのサムネイル画像の表示例で、第１の実施形態において説明した図１５ＢのステップＳ３０８〜Ｓ３１４を繰り返すことにより９つのサムネイル画像を表示している。ただし、本実施形態においては、選択されていない画像についてはＲＯＩのマスクサムネイル表示は行わない。すなわち、図１８（ａ）では、左上のサムネイル画像が現在選択されている状態であり、そのサムネイル画像についてはマスクサムネイルが重畳表示されているが、他のサムネイル画像は原画像のサムネイルのみが表示されている。なお、図１８では、枠が他のサムネイル画像の枠より太く示されるサムネイル画像が現在選択されていることを表す。
なお、後述する第３、第４の実施形態に示す表示処理を用いてサムネイル画像表示を行ってもよい。
【００９６】
図１９は、図１２で説明した領域指定レバー６５の操作を説明する図である。図１９において６５ｈはデジタルカメラのユーザーの指であり、図１９（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【００９７】
図１７は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図１７の処理は、サムネイル画像の閲覧状態において実行される。
【００９８】
まず、ステップＳ４０１において、領域指定レバー６５が操作されたか否かをチェックする。操作が検知された場合、ステップＳ４０２においてその操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。
【００９９】
方向指示レバー６５ａ〜６５ｄが操作された場合、ステップＳ４０３へ移行し、現在ＲＯＩサムネイルを表示中でなければ、指定された方向にフォーカスを１つ移動させる（ステップＳ４０４）。
【０１００】
例えば、図１８（ａ）に示すような表示状態（原画像のサムネイルが表示されている状態）において、図１９（ａ）に示すようにユーザが右方向指示レバー６５ｂを押下すると、システム制御部５０はフォーカス（選択されていることを示す太枠の表示）を現在の右に表示されたサムネイルに移動する（ステップＳ４０４）。そして、フォーカスされたサムネイル画像（の原画像）にＲＯＩが指定されているか否かをステップＳ４０５で調べ、ＲＯＩ指定があれば、対応するマスクサムネイルを画像表示メモリ２４から読み出して重畳表示する（ステップＳ４０６）。この状態を図１８（ｂ）に示す。重畳表示が完了したら、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。
【０１０１】
なお、ステップＳ４０５におけるＲＯＩ指定の有無判定は、サムネイル画像に対応する原画像の画像ファイルのメインヘッダＭＨを調べることによって行うことが可能である。
また、ステップＳ４０５においてＲＯＩ指定が無いと判断された場合には、直ちにステップＳ４０１に戻り、次のレバー操作検出を行う。
【０１０２】
次に、図１８（ｂ）の状態で、ユーザが領域指定レバー６５の確定ボタン６５ｅを押下する（図１９（ｂ））と、処理はステップＳ４０１からステップＳ４０２へ移行し、確定ボタン６５ｅは方向指示レバーではないため、処理はステップＳ４０７へ移行する。
【０１０３】
ステップＳ４０７では、現在フォーカスされている表示画像が原画像のサムネイルか、その原画像に含まれるＲＯＩのサムネイル（上述のＲＯＩサムネイル）かを調べる。そして、原画像のサムネイルが表示されている場合（図１８（ｂ））には、その原画像の最初のＲＯＩサムネイルを表示する（ステップＳ４１０）。そして、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。なお、ステップＳ４１０で表示される最初のＲＯＩサムネイルは、例えば原画像で最も左上に位置するＲＯＩのサムネイルを最初に表示する。例えば、図１８（ｂ）でフォーカスされている画像には２箇所のＲＯＩが指定されているが、より左上に位置する画像中央のＲＯＩを最初に表示する（図１８（ｃ））。
【０１０４】
本実施形態に係る画像表示装置では、ＲＯＩサムネイルが表示された状態で領域指定レバー６５ａ〜６５ｄが操作されると、同一画像内に指定されたＲＯＩのサムネイルを巡回的に順次表示する。すなわち、図１８（ｃ）の状態で下方向指示レバー６５ｃが押下されると（図１９（ｃ））、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０３と移行し、ステップＳ４０３において現在ＲＯＩサムネイルが表示されているため、ステップＳ４０８において次のＲＯＩサムネイル表示を行う（図１８（ｄ））。なお、図１７では詳細を省略しているが、上方向指示レバー６５ａが押下された場合には、ステップＳ４０８で前のＲＯＩサムネイルを表示するように構成しても良い。また、左右の方向指示レバー６５ｂ、６５ｄが操作された場合には、無視してもよいし、次又は前のＲＯＩサムネイルを表示するように構成してもよい。
【０１０５】
ＲＯＩサムネイルが表示された状態で確定ボタン６５ｅが操作されると、本実施形態に係る画像表示装置では原画像のサムネイル表示に復帰する。すなわち、図１８（ｃ）又は図１８（ｄ）の状態で確定ボタン６５ｅが押下されると、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０７と移行し、ＲＯＩサムネイルが表示中であるため、ステップＳ４０９へ移行して原画像サムネイル表示を行う（図１８（ｂ））。
【０１０６】
なお、上述の説明においては、サムネイル表示された画像のＲＯＩサムネイルが原画像のサムネイル生成時等に予め作成され、画像表示メモリ２４に記憶されているものとしているが、ＲＯＩサムネイルが未生成の場合には、ＲＯＩサムネイル表示を行う際に生成するように構成しても良い。
【０１０７】
以上説明したように、本実施形態においては、ＲＯＩ部分のみをサムネイル化したＲＯＩサムネイルを指示に応じて表示するように構成することにより、ＲＯＩの内容をサムネイル画像から容易に把握することができる。
【０１０８】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１０９】
■（第３の実施形態）
次に、本発明の第３の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１１０】
図２０は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１１１】
図２０を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、単色塗りつぶしする領域がＲＯＩ以外（非ＲＯＩ）となることのみ第１の実施形態と異なる。
従って、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理に付いての説明は省略する。
【０１１２】
ステップＳ３１５で、塗りつぶし領域を非ＲＯＩとすること以外は第１の実施形態でのステップＳ３１１と同様に、マスクサムネイル（及び必要であればＲＯＩサムネイルも）を生成する。
【０１１３】
そして、ステップＳ３１２で原画像のサムネイルを生成し、ステップＳ３１３で原画像のサムネイル上にマスクサムネイルを重畳表示する。重畳表示の結果例を図２１に示す。図２１に示すように、本実施形態においてはＲＯＩが指定された画像のサムネイルとして、ＲＯＩの内容のみが表示される。
【０１１４】
以上説明したように、本実施形態においては、ＲＯＩでない領域が単色で塗りつぶされたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【０１１５】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが単色で塗りつぶされたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【０１１６】
なお、第２の実施形態における原画像サムネイル画像表示として、本実施形態による表示を適用することも可能である。
【０１１７】
■（第４の実施形態）
次に、本発明の第４の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１１８】
図２２は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１１９】
図２２を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、サムネイル画像の生成時に、ＲＯＩを白黒に変換することのみ第１の実施形態と異なる。
従って、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理に付いての説明は省略する。
【０１２０】
ステップＳ３１７で、塗りつぶしを行う代わりに、ＲＯＩに指定された領域を他の領域よりも少ない色数（ここでは白黒）に変換とすること以外は第１の実施形態でのステップＳ３１１と同様に、マスクサムネイル（及び必要であればＲＯＩサムネイルも）を生成する。
【０１２１】
そして、ステップＳ３１９で非ＲＯＩ部分のサムネイル、すなわち、ＲＯＩ部分は除去した原画像のサムネイルを生成する。なお、マスクサムネイルを原画像のサムネイル上に重畳表示する際、マスクサムネイルの白黒に変換されたＲＯＩ部分が原画像のサムネイルのＲＯＩ相当部分からの影響を受けずに白黒表示可能であれば、本ステップにおいて第１の実施形態と同様に原画像全体のサムネイルを生成しても良い。
【０１２２】
ステップＳ３１３で原画像のサムネイル上にマスクサムネイルを重畳表示する。重畳表示の結果例を図２３に示す。図２３に示すように、本実施形態においてはＲＯＩが指定された画像のサムネイルとして、ＲＯＩの内容のみ白黒で、その他の部分はカラーで表示される。
【０１２３】
以上説明したように、本実施形態においては、ＲＯＩが白黒に変換されたサムネイル画像を表示するため、ＲＯＩがどこにあるのか、いくつあるのかについて、サムネイル画像から容易に把握することができる。
【０１２４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩが白黒に変換されたサムネイル表示を行うことにより、ＲＯＩの有無及びその数、位置についてユーザに分かりやすい表示を行う事が可能となった。
【０１２５】
なお、第２の実施形態における原画像サムネイル画像表示として、本実施形態による表示を適用することも可能である。
【０１２６】
また、上記説明では非ＲＯＩをカラー表示とし、ＲＯＩを白黒表示としたが、非ＲＯＩを白黒表示し、ＲＯＩをカラー表示しても同様な効果が得られる。さらに、視覚上の差異が得られれば、ＲＯＩ又は非ＲＯＩの一方を他方より少ない色数に変換（例えば、非ＲＯＩがフルカラーの場合、ＲＯＩは単色のグレースケールや白黒等２色に変換）することでも本実施形態の効果が得られる。
【０１２７】
■（第５の実施形態）
次に、本発明の第５の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１２８】
図２４は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１２９】
図２４を第１の実施形態における表示処理を示す図１５Ｂと比較すると明らかなように、本実施形態に係る画像表示装置の表示処理は、サムネイル画像とともにその画像に指定されたＲＯＩの数を合わせて表示することを特徴とする。
また、図２４において、第１の実施形態と同一なステップＳ３０８〜Ｓ３１０の処理についての説明は省略する。
【０１３０】
ステップＳ３２０で、画像ファイルのメインヘッダＭＨのマスク情報（図７（ｂ）参照）を参照し、画像に含まれるＲＯＩの数をカウントする。ステップＳ３１２で、メモリ制御部２２を介して原画像のサムネイルを作成する。例えば、原画像が横１２８０画素、縦９６０画素の場合、例えば横１６０画素、縦１２０画素に縮小したサムネイル画像を生成し、画像表示メモリ２４に書き込む。ステップＳ３２１で、ステップＳ３１２で作成され、画像表示メモリ２４に書き込まれたサムネイル画像に、ステップＳ３２０でカウントしたＲＯＩの数を表す画像を重畳して書き込み、そのデータをＤ／Ａ変換器２６を介して画像表示部２８により表示する。
【０１３１】
図２５本実施形態によるサムネイル画像の表示例を示す図で、サムネイル画像の右上に、この画像に指定されているＲＯＩ数が表示されている。図２５の例では、３つのＲＯＩが指定されていることを表している。ＲＯＩの含まれない画像に対しては、「０」と表示するか、数字を表示しないことにより、ＲＯＩの含まれる画像であるか否かも容易に判別可能である。
【０１３２】
なお、ＲＯＩの数を表示するために用いる色は任意に決定可能であり、予め定めた特定の固定値を用いることも可能だが、サムネイル表示において目立つように、領域内の画素値もしくはＲＯＩ周辺の領域の画素値と差が大きくなるよう動的に決定しても良い。この場合、ＲＯＩ数の表示に使用する色は領域内もしくは周辺領域の画素値のヒストグラムや平均値等を用いて決定することが可能である。また、ＲＯＩ数の表示位置についても右上に限らず任意の場所に設定することが可能である。
【０１３３】
以上説明したように、本実施形態においては、指定されているＲＯＩの数をサムネイルと対応づけて表示することにより、その画像に対してＲＯＩが指定されているのか、またいくつ指定されているのかについて、サムネイル画像から容易に把握することができる。
【０１３４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの数を合わせて表示することにより、ＲＯＩの有無及びその数についてユーザに分かりやすい表示を行う事が可能となった。
【０１３５】
■（第６の実施形態）
次に、本発明の第６の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１３６】
図２７は、本実施形態に係るデジタルカメラのサムネイル画像の表示例で、第５の実施形態において説明した図２４の処理を繰り返すことにより９つのサムネイル画像を表示している。図２７では、枠が他のサムネイル画像の枠より太く示されるサムネイル画像が現在選択されていることを表す。
【０１３７】
図２６は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図２６の処理は、サムネイル画像の閲覧状態において実行される。まず、図２６において、第２の実施形態において説明した図１７と同一処理のステップについては同一参照数字を付した。
【０１３８】
第２の実施形態における表示処理の説明に用いた図１７、図１８と本実施形態における図２６、図２７との比較から分かるように、本実施形態は原画像のサムネイル表示が第５の実施形態によるものであること、ＲＯＩサムネイル表示時に同一画像に設定されたＲＯＩの番号／総数が表示されること以外の基本的処理は第２の実施形態と共通である。
【０１３９】
以下、図２６、図２７及び領域指定レバー６５の操作を示す図１９を用いて、本実施形態に係る画像表示処理について説明するが、
ステップＳ４０１において、領域指定レバー６５が操作されたか否かをチェックする。操作が検知された場合、ステップＳ４０２においてその操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。
【０１４０】
方向指示レバー６５ａ〜６５ｄが操作された場合、ステップＳ４０３へ移行し、現在ＲＯＩサムネイルを表示中でなければ、指定された方向にフォーカスを１つ移動させる（ステップＳ４０４）。
【０１４１】
例えば、図２７（ａ）に示すような表示状態（原画像のサムネイルが表示されている状態）において、図１９（ａ）に示すようにユーザが右方向指示レバー６５ｂを押下すると、システム制御部５０はフォーカス（選択されていることを示す太枠の表示）を現在の右に表示されたサムネイルに移動する（ステップＳ４０４）。この状態を図１８（ｂ）に示す。重畳表示が完了したら、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。
【０１４２】
次に、図２７（ｂ）の状態で、ユーザが領域指定レバー６５の確定ボタン６５ｅを押下する（図１９（ｂ））と、処理はステップＳ４０１からステップＳ４０２へ移行し、確定ボタン６５ｅは方向指示レバーではないため、処理はステップＳ４０７へ移行する。
【０１４３】
ステップＳ４０７では、現在フォーカスされている表示画像が原画像のサムネイルか、その原画像に含まれるＲＯＩのサムネイル（上述のＲＯＩサムネイル）かを調べる。そして、原画像のサムネイルが表示されている場合（図２７（ｂ））には、その原画像の最初のＲＯＩサムネイルを表示する（ステップＳ４１０）。そして、ステップＳ４０１へ戻って領域指定レバー６５の操作検出を継続する。なお、ステップＳ４１０で表示されるＲＯＩサムネイルは、原画像のサムネイルを生成する際に生成しておいても良いし、ステップＳ４１０で生成しても良い。
【０１４４】
ステップＳ４１０においてＲＯＩサムネイルを生成する場合には、まず記録媒体２００に保存されている圧縮原画像を読み出し、圧縮伸長回路３２により圧縮画像の解凍（伸長）を行い、メモリ制御回路２２によりメモリ３０へ書き込む。そして、原画像ファイルのメインヘッダＭＨのマスク情報からＲＯＩの有無及び位置を検出し、ＲＯＩ指定がある場合にはＲＯＩの画像を予め定めたサムネイルの大きさに縮小して画像表示メモリ２４に書き込む。そして、メインヘッダＭＨのマスク情報を参照してカウントしたＲＯＩの総数と、表示を行うＲＯＩの番号とを、例えば「（ＲＯＩの番号）／（ＲＯＩの総数）」という形式で画像表示メモリ２４に保持したＲＯＩサムネイルに重畳して書き込み、このＲＯＩサムネイルをＤ／Ａ変換器２６を介して画像表示部２８により表示する。
【０１４５】
なお、ＲＯＩの番号はメインヘッダＭＨのマスク情報に書き込まれた順であっても、原画像中の位置から定めても良い。第２の実施形態では原画像で最も左上に位置するＲＯＩのサムネイルを最初に表示したが、本実施形態ではマスク情報に書き込まれた順で採番する。
【０１４６】
予めＲＯＩサムネイルを生成する場合も同等の処理を行った後、生成したＲＯＩサムネイルを原画像サムネイルと対応づけて例えばメモリ３０または画像表示メモリ２４に格納しておく。
図２７（ｃ）の例では、ＲＯＩサムネイルの表示により、表示中のＲＯＩがその画像に指定された２つのＲＯＩうち１番目のＲＯＩであることが分かる。
【０１４７】
本実施形態に係る画像表示装置では、ＲＯＩサムネイルが表示された状態で領域指定レバー６５ａ〜６５ｄが操作されると、同一画像内に指定されたＲＯＩのサムネイルを巡回的に順次表示する。すなわち、図２７（ｃ）の状態で下方向指示レバー６５ｃが押下されると（図１９（ｃ））、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０３と移行し、ステップＳ４０３において現在ＲＯＩサムネイルが表示されているため、ステップＳ４０８において次のＲＯＩサムネイル表示を行う（図２７（ｄ））。なお、図２６では詳細を省略しているが、上方向指示レバー６５ａが押下された場合には、ステップＳ４０８で前のＲＯＩサムネイルを表示するように構成しても良い。また、左右の方向指示レバー６５ｂ、６５ｄが操作された場合には、無視してもよいし、次又は前のＲＯＩサムネイルを表示するように構成してもよい。
【０１４８】
ＲＯＩサムネイルが表示された状態で確定ボタン６５ｅが操作されると、本実施形態に係る画像表示装置では原画像のサムネイル表示に復帰する。すなわち、図２７（ｃ）又は図２７（ｄ）の状態で確定ボタン６５ｅが押下されると、表示処理はステップＳ４０１、Ｓ４０２、Ｓ４０７と移行し、ＲＯＩサムネイルが表示中であるため、ステップＳ４０９へ移行して原画像サムネイル表示を行う（図２７（ｂ））。
【０１４９】
以上説明したように、本実施形態においては、ＲＯＩ部分のみをサムネイル化したＲＯＩサムネイルを指示に応じて表示するように構成することにより、ＲＯＩの内容をサムネイル画像から容易に把握することができる。また、ＲＯＩサムネイルには同一画像に指定されたＲＯＩの総数及び表示中のＲＯＩの番号が合わせて表示されるため、現在表示されている画像がＲＯＩなのか原画像のサムネイルなのかが判別可能となるほか、何番目のＲＯＩを表示しているのかが直ちに理解される。
【０１５０】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１５１】
■（第７の実施形態）
次に、本発明の第７の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１５２】
図２８は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
図２８のステップＳ３０８〜Ｓ３１０の処理は第１の実施形態と同一なため、これらステップについての説明は省略する。
【０１５３】
ステップＳ３３１で、画像ファイルのメインヘッダＭＨのマスク情報（図７（ｂ）参照）から、画像に含まれるＲＯＩを抽出し、メモリ制御２２を介してＲＯＩのサムネイル画像を作成する。例えば横６４０画素、縦４８０画素の大きさを有するＲＯＩを、予め定められた大きさ、例えば横１６０画素、縦１２０画素の大きさのサムネイルに縮小し、画像表示メモリ２４に書き込む。同一画像中に複数のＲＯＩが指定されている場合には、各ＲＯＩについてサムネイルを生成し、同様に画像表示メモリ２４に書き込む。
【０１５４】
ステップＳ３３２で、メモリ制御２２を介して原画像のサムネイルを作成する。ただし、本実施形態では、原画像サムネイルはＲＯＩサムネイルよりも大きく生成する。例えば原画像が横１２８０画素、縦９６０画素の場合、サムネイル画像を横３２０画素、縦２４０画素というように縮小を行い画像表示メモリ２４に書き込む。
【０１５５】
ステップＳ３３３で、画像処理回路２０、メモリ制御回路２２を介して、画像表示部２８の画面を左右に分割表示する。この時、本実施形態においては左右を均等に分割するのではなく、図２９に示すように左側画面が右側画面より大きくなるように分割する。
【０１５６】
ステップＳ３３４では、図２９に示す様に分割された画面の左側に、画像表示メモリ２４に書き込まれた原画像のサムネイル画像データを、メモリ制御回路２２により画像表示メモリ２４から読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。
【０１５７】
ステップＳ３３５では、図２９に示す様に分割された画面の右側に、画像表示メモリ２４に書き込まれたＲＯＩのサムネイル画像データを、メモリ制御回路２２により画像表示メモリ２４から読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。
【０１５８】
なお、ステップＳ３３１及びステップＳ３３２で生成するサムネイルの大きさは、表示画面の分割比率に応じて適宜定めることが可能である。また、左側画面に表示される元画像（のサムネイル）に設定されたＲＯＩのサムネイルの全てが右側画面に収まるようにＲＯＩサムネイルの大きさを定めると、使い勝手の点から好ましいが、ＲＯＩの数が多くなるとＲＯＩサムネイルの視認性が落ちるので、ＲＯＩの総数に応じて判断しても良い。
【０１５９】
また、画面の分割比率は固定であっても、ユーザが動的に設定可能であっても良い。動的に設定可能である場合には、分割比率が変更される都度図２８のステップＳ３３１以降の処理を実施し、新しい大きさのサムネイルを作成すればよい。また、原画像サムネイルとＲＯＩサムネイルの表示領域を左右入れ替えても良い。さらに、上下に画面を分割しても良い。
【０１６０】
さらに、原画像サムネイルとして、第１、第３及び第４の実施形態で説明したサムネイルを表示するようにしても良い。
【０１６１】
以上説明したように、本実施形態においては、表示画面を分割し、原画像サムネイルの表示領域とＲＯＩサムネイルの表示領域を設けることによって、原画像と指定されたＲＯＩの内容及び数を容易に把握することができる。
【０１６２】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ＲＯＩの内容についてユーザに分かりやすい表示を行う事が可能となった。
【０１６３】
■（第８の実施形態）
次に、本発明の第８の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１６４】
図３１（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第７の実施形態において説明した図２８の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。なお、以下の説明において、分割画面左側を原画像表示領域、右側をＲＯＩ表示領域と呼ぶが、ダウ７の実施形態において説明したように、左右が入れ替わっても、上下に分割される場合でも本実施形態に係る発明を適用可能である。
【０１６５】
図３２は、図１２で説明した領域指定レバー６５の操作を説明する図である。図３２において６５ｈはデジタルカメラのユーザーの指であり、図３２（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０１６６】
図３０は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３０の処理は、サムネイル画像の閲覧状態において実行される。なお、図３０において、図１７と同様の処理については同じ参照数字を付した。
【０１６７】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０１６８】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４２１において、それが右方向指示レバー６５ｂであるかを調べる。図３２（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４２２へ移行する。
【０１６９】
ステップＳ４２２では、現在ＲＯＩ表示領域が拡大表示されているか否かを調べる。既にＲＯＩ表示領域が拡大表示されている場合には、何も行わずステップＳ４０２へ戻る。一方、図３１（ａ）に示すように原画像表示領域が拡大表示されている場合には、ステップＳ４２３において拡大表示領域を入れ替え、ＲＯＩ表示領域を拡大表示領域とする。具体的には、画面表示における表示領域の境界位置を変更（本実施形態では左に移動）し、これまで大きく表示されていた原画像サムネイルを縮小して原画像表示領域に表示するとともに、この原画像サムネイルに対応するＲＯＩサムネイルをＲＯＩ表示領域に拡大表示する（ステップＳ４２４、図３３（ｂ））。
【０１７０】
なお、本実施形態においては、原画像表示領域及びＲＯＩ表示領域の何れにも、表示可能な範囲で複数のサムネイル画像を表示するものとする。複数のサムネイル画像の表示は、上述の実施形態のいずれか、例えば第７の実施形態でのサムネイル画像生成処理（ステップＳ３０８〜Ｓ３３２）を繰り返すことで実現できる。従って、拡大表示領域を入れ替える場合、図３３（ｂ）に示すように、これまで拡大表示されていた原画像を単に縮小表示に切り替えるだけでなく、その前後の原画像についても縮小表示を行っている。また、ＲＯＩ画像を拡大表示する場合、拡大表示に切り替えられた直後は最初のＲＯＩ（複数のＲＯＩがある場合）から表示する。さらに、本実施形態では、複数のＲＯＩが指定された原画像についてＲＯＩ画像を拡大表示する場合、図３３（ｂ）に示すように、ＲＯＩ表示領域の略中央部には全体が表示されるＲＯＩサムネイルを配置するとともに、他のＲＯＩサムネイルの上部又は下部の一部を表示することで、複数のＲＯＩサムネイルが存在することをユーザに認識させることができる。
【０１７１】
このような表示は、ＲＯＩサムネイルのみならず、原画像サムネイルの表示に対して適用しても良い。もちろん、第６の実施形態と本実施形態を組み合わせ、ＲＯＩの数に関する情報を含ませたサムネイルを表示するように構成することも可能であるし、画像が表示されない部分に「（領域中央に表示されている原画像（又はＲＯＩ）の番号）／（原画像（又は同一原画像に指定されたＲＯＩ）の総数）」等の情報を表示するように構成することも可能である。
【０１７２】
図３０の説明に戻って、ステップＳ４２４での処理が終了すると、再びステップＳ４０１へ戻ってレバー操作の検出が行われる。ここで、図３２（ｂ）に示すように下方向指示レバー６５ｃが操作されると、ステップＳ４０１→ステップＳ４０２→ステップＳ４２１→ステップＳ４２５と移行する。ステップＳ４２５では、操作が左方向指示レバー６５ｄの操作かどうかを調べる。この場合、下方向指示レバー６５ｃの操作なので、ステップＳ４２６へ移行する。
【０１７３】
ステップＳ４２６では、現在拡大表示されている画像を、操作された方向指示レバーに応じて変更する。本実施形態においては、上方向指示レバー６５ａが操作された場合には現在の１つ前の画像を、下方向指示レバー６５ｃが操作された場合には現在の１つ後の画像を拡大表示（領域の中央に表示）するものとする。従って、図３１（ｂ）の状態で下方向指示レバー６５ｃが操作された場合、システム制御部５０はＲＯＩ表示領域の中央に表示されるＲＯＩ画像を次の画像に変更する（図３１（ｃ））。ステップＳ４２６の処理が終了すると、ステップＳ４０１へ戻る。
【０１７４】
図３１（ｂ）や図３１（ｃ）のように、ＲＯＩ表示領域が拡大表示された状態で、左方向指示レバー６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４２１→ステップＳ４２５→ステップＳ４２７と移行する。
【０１７５】
ステップＳ４２７では、現在拡大表示されているのが原画像表示領域であるか否かを調べる。原画像表示領域が拡大表示された状態であれば何もせずステップＳ４０１へ戻る。一方、ＲＯＩ表示領域が拡大表示されている場合には、ステップＳ４２３及びステップＳ４２４で行ったように、拡大表示領域の入れ替え処理を行う。
【０１７６】
すなわち、画面表示における表示領域の境界位置を変更（本実施形態では右に移動）し、これまで大きく表示されていたＲＯＩサムネイルを縮小してＲＯＩ表示領域に表示するとともに、このＲＯＩサムネイルに対応する原画像サムネイルを原画像表示領域に拡大表示し、最初の状態に戻る（図３３（ａ））。
【０１７７】
一方、図３１（ａ）のように、原画像表示領域が拡大表示された状態で上方向指示レバー６５ａが操作された場合、処理はステップＳ４０２→ステップＳ４２１→ステップＳ４２５→ステップＳ４２６と移行する。そして、ステップＳ４２６で、ＲＯＩ画像の場合と同様、上方向指示レバー６５ａが操作された場合には現在の１つ前の画像を、下方向指示レバー６５ｃが操作された場合には現在の１つ後の画像を拡大表示（領域の中央に表示）する。従って、図３１（ａ）の状態で上方向指示レバー６５ａが操作された場合、システム制御部５０は原画像表示領域に表示される原画像サムネイルを次の画像に変更する（図３１（ｄ））。なお、表示される原画像サムネイルが変化した場合には、ＲＯＩ表示領域におけるＲＯＩサムネイルの表示も対応するものに更新することは言うまでもない。ステップＳ４２６の処理が終了すると、ステップＳ４０１へ戻る。
【０１７８】
以上説明したように、本実施形態においては、表示画面を分割し、原画像サムネイルの表示領域とＲＯＩサムネイルの表示領域を設けるとともに、ユーザの指示によって原画像サムネイルとＲＯＩサムネイルを選択的に拡大表示することによって、原画像と指定されたＲＯＩのみならず、その内容を容易に把握することができる。
【０１７９】
特に、拡大表示領域を動的に変更可能としたので、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０１８０】
■（第９の実施形態）
次に、本発明の第９の実施形態に係る画像表示装置について説明する。なお、以下の説明においても、上述の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１８１】
図３３は、本実施形態に係るデジタルカメラのにおける画像表示動作を示すフローチャートで、この処理は例えば図１１のメモリ５２に記憶されたプログラムをシステム制御部５０が実行し、必要な制御を行うことにより実現される。
【０１８２】
図３３のステップＳ３０８〜Ｓ３１０の処理は第１の実施形態と、ステップＳ３３１〜Ｓ３３２は第７の実施形態と同一なため、これらステップについての説明は省略する。ただし、ステップＳ３３１〜Ｓ３３２で作成するサムネイルの大きさは、原画像サムネイル、ＲＯＩサムネイルとも予め定められた大きさ（原画像サムネイルの方が大きい）で行うものとする。
【０１８３】
ステップＳ３４１で、ステップＳ３３１において画像表示メモリ２４に書き込まれた原画像のサムネイル画像データを、メモリ制御回路２２により読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。この際、本実施形態においては、図３４に示すように、複数の原画像のサムネイル画像が画像表示部２８の上部に水平に配置して表示を行う。従って、原画像サムネイルの大きさは画像表示部２８の水平方向の表示画素数と、最大同時表示数とから決定することができる。
【０１８４】
次に、ステップＳ３４２で、画像表示メモリ２４に書き込まれたＲＯＩサムネイル画像データを、メモリ制御回路２２により読み出し、Ｄ／Ａ変換器２６を介して画像表示部２８に表示する。本実施形態においては、図３４に示すように、ＲＯＩサムネイルは対応する原画像サムネイルの下に並べて表示する。ＲＯＩサムネイルの大きさは画像表示部２８の垂直方向の表示画素数と、原画像サムネイルの縦方向の大きさ並びにＲＯＩサムネイルの最大同時表示数とから決定することができる。なお、上述したように、本実施形態においては、原画像サムネイルの方がＲＯＩサムネイルよりも大きくなるようにサムネイルの大きさを決定する。
【０１８５】
なお、本実施形態の変形例として、図３５に示すように、原画像サムネイルを画像表示部２８の左右いずれかの端部に垂直に配置し、対応するＲＯＩサムネイルを原画像サムネイルの横に並べて配置するようにしてもよい。この場合、図３３のステップＳ３４１で原画像サムネイルを水平方向ではなく画像表示部２８の左右いずれか（図３５では左）の端部に垂直方向に表示し、ステップＳ３４２でＲＯＩサムネイルを対応する原画像サムネイルの右に水平に並べて表示すればよい。
【０１８６】
従って、この変形例において、ステップＳ３３１で生成する原画像サムネイルの大きさは画像表示部２８の垂直方向の表示画素数と最大同時表示数とから決定することが、ステップＳ３３２で生成するＲＯＩサムネイルの大きさは原画像サムネイルの横方向の大きさ並びにＲＯＩサムネイルの最大同時表示数とから決定することができる。
【０１８７】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、原画像サムネイルをＲＯＩサムネイルよりも大きくすることにより、原画像サムネイルとＲＯＩサムネイルとの主従関係が視覚的に把握できるほか、設定されたＲＯＩの数、内容もＲＯＩサムネイルから同時に把握することが可能となる。
【０１８８】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０１８９】
■（第１０の実施形態）
次に、本発明の第１０の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０１９０】
図３７（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第９の実施形態において説明した図３３の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。
【０１９１】
図３８は、図１２で説明した領域指定レバー６５の操作を説明する図である。図３８において６５ｈはデジタルカメラのユーザーの指であり、図３８（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０１９２】
図３６は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３６の処理は、サムネイル画像の閲覧状態において実行される。なお、図３６において、図１７と同様の処理については同じ参照数字を付した。
【０１９３】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０１９４】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４３１において、それが右又は左方向指示レバー６５ｂ又は６５ｄであるかを調べる。図３８（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４３２へ移行する。
【０１９５】
ステップＳ４３２において、現在拡大表示（最上段に表示）されているサムネイルが、ＲＯＩサムネイルであるか否かを調べる。図３７（ａ）の状態において現在フォーカスされている左上のサムネイル画像は原画像サムネイルであるため、ステップＳ４３４へ移行する。ステップＳ４３４では、操作されたキーに応じてフォーカスの移動を行う。すなわち、図３８（ａ）に示すように右方向指定レバー６５ｂが操作された場合にはフォーカスを１つ右の原画像サムネイルに移動し（図３７（ｂ））、ステップＳ４０１へ戻る。
【０１９６】
図３７（ｂ）の状態で下方向指示レバー６５ｃが操作されると（図３８（ｂ））、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３３と移行する。ステップＳ４３３では、現在フォーカス中の拡大表示サムネイルの内容を、操作された指示レバーの方向に応じて、原画像サムネイルと対応するＲＯＩサムネイルの中で巡回的に変更する。すなわち、図３８（ｂ）に示すように下方向指示レバー６５ｃが操作された場合には、現在拡大表示されているサムネイルの直下に縮小表示されているサムネイルを拡大表示すると共に、これまで拡大表示されていたサムネイルを最下段に移動させて縮小表示し、残りの縮小表示されていたサムネイルの位置を１つずつ上にずらす。表示内容を更新したら、ステップＳ４０１へ戻る。
【０１９７】
また、図３７（ｂ）の状態で上方向指示レバー６５ａが操作された場合には、最下段に縮小表示されていたサムネイルを拡大表示すると共に、これまで拡大表示されていたサムネイルを１つ下に移動させて縮小表示し、残りの縮小表示されていたサムネイルの位置を１つずつ下にずらす。なお、ＲＯＩの数が最大同時表示数よりも多い場合、少なくとも最下段（となるべき）サムネイルは表示されない。拡大表示されるサムネイルの大きさと、縮小表示されるサムネイルの大きさ、及び画像表示部２８の表示領域の大きさは予め分かっているため、このような場合には、実際に表示すべきサムネイルについてのみ表示処理を行う。
【０１９８】
実際に表示すべきサムネイルの管理は、任意の方法で行うことが可能である。例えば、原画像に「０」、指定されたＲＯＩに「１」から順番に番号を付与し、表示中のサムネイルの番号をメモリ３０に格納しておき、表示すべきサムネイルに変更があった場合にはメモリ３０に格納したサムネイルの番号を１つずつ増加又は減少することにより更新する。そして、メモリ３０に格納された番号に対応するサムネイルを表示する。この際、最初に格納されている番号に対応するサムネイルを拡大表示し、残りの番号に対応するサムネイルは縮小表示すれば図３７に示すような表示が可能である。
【０１９９】
図３７（ｃ）のように、ＲＯＩサムネイルが拡大表示（最上段に表示）されている状態で、左右いずれかの方向指示レバー６５ｂ、６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３５と移行する。ステップＳ４３５では、現在拡大表示されているＲＯＩサムネイルに対応する原画像サムネイルが拡大表示されるように表示状態を初期化する。それにより、表示状態は図３７（ｂ）の状態に戻る。
【０２００】
この状態で図３８（ｄ）に示すように右方向指示レバー６５ｂが操作されると、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３４と移行し、右隣の原画像サムネイルにフォーカスを移動させる。
【０２０１】
なお、図３７（ｄ）の状態でさらに右方向指示レバー６５ｂが操作された場合、図３７では原画像サムネイルの総数が３であるので、フォーカスは左端の原画像サムネイルへ移動する。原画像サムネイルの総数が４以上の（最大同時表示数より多い）場合には、新しい原画像サムネイル（及び対応するＲＯＩサムネイル）が右端に表示され、フォーカスがこの新しい原画像サムネイルに移動する。また、同時にこれまで左端に表示されていた原画像サムネイル及び対応するＲＯＩサムネイルは表示されなくなり、残りの原画像サムネイル及び対応するＲＯＩサムネイルは表示位置を１つ左にずらされる。
【０２０２】
さらに、サムネイル表示を図３５に示したように横方向にした場合にも本実施形態を適用可能である。この場合、上述した左右方向指示レバーの操作に対応した処理と、上下方向指示レバーの操作に対応した処理とを入れ替えれば良い。
【０２０３】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、ユーザの指示に応じて原画像サムネイルと対応するＲＯＩサムネイルのうち任意のサムネイルを拡大表示することが可能となるため、サムネイル表示において原画像に設定されたＲＯＩの内容をさらに詳しく確認することが可能となる。
【０２０４】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０２０５】
■（第１１の実施形態）
次に、本発明の第１１の実施形態に係る画像表示装置における表示処理について説明する。なお、以下の説明においても、第１の実施形態と同様、図１０及び図１１に示したデジタルカメラを本実施形態に係る画像表示装置の一例として説明する。
【０２０６】
図４０（ａ）は、本実施形態に係るデジタルカメラのサムネイル画像の初期表示状態で、第９の実施形態において説明した図３３の表示処理を実行して原画像サムネイル及びＲＯＩサムネイル画像を表示したものである。
【０２０７】
図４１は、図１２で説明した領域指定レバー６５の操作を説明する図である。図４１において６５ｈはデジタルカメラのユーザーの指であり、図４１（ａ）〜（ｄ）はそれぞれ、指６５ｈが示された位置のレバー又はボタンが押下される操作がなされたことを意味する。
【０２０８】
図３９は、本実施形態に係るデジタルカメラにおけるサムネイル画像の表示動作を示すフローチャートである。第１０の実施形態で説明した図３６との比較から明らかなように、本実施形態における表示動作は、上下方向指示レバーの操作によってサムネイルの表示位置は変わらずにフォーカスが移動し、フォーカスされたサムネイルが拡大表示される点以外は第１０の実施形態と同一である。
【０２０９】
なお、この処理は例えば図１１のメモリ５２に記憶されているプログラムをシステム制御部５０が実行し、必要な制御を行うことによって実現される。なお、図３９の処理は、サムネイル画像の閲覧状態において実行される。なお、図３９において、図３６と同様の処理については同じ参照数字を付した。
【０２１０】
ステップＳ４０１及びＳ４０２においては、第２の実施形態において説明したように、領域指定レバー６５の操作有無及び操作が方向指示レバー６５ａ〜６５ｄのいずれかの操作であるか、あるいは確定ボタン６５ｅの操作であるかを調べる。操作が確定ボタン６５ｅの押下であった場合には、ステップＳ４０１に戻る。
【０２１１】
操作が方向指示レバー６５ａ〜６５ｄに対するものであった場合、ステップＳ４３１において、それが右又は左方向指示レバー６５ｂ又は６５ｄであるかを調べる。図４１（ａ）に示す例では、右方向指示レバー６５ｂが操作されているので、処理はステップＳ４３２へ移行する。
【０２１２】
ステップＳ４３２において、現在拡大表示されているサムネイルが、ＲＯＩサムネイルであるか否かを調べる。図４０（ａ）の状態において現在フォーカスされている左上のサムネイル画像は原画像サムネイルであるため、ステップＳ４３４へ移行する。ステップＳ４３４では、操作されたキーに応じてフォーカスの移動を行う。すなわち、図４１（ａ）に示すように右方向指定レバー６５ｂが操作された場合にはフォーカスを１つ右の原画像サムネイルに移動し（図４０（ｂ））、ステップＳ４０１へ戻る。
【０２１３】
図４０（ｂ）の状態で下方向指示レバー６５ｃが操作されると（図４１（ｂ））、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３６と移行する。ステップＳ４３６では上下方向指示レバーの操作に応じてフォーカスを上下に移動させる。ここでは下方向指示レバー６５ｃが操作されているため、フォーカスを１つ下に移動する。そして、ステップＳ４３７へ移行し、フォーカスが移動したサムネイルを拡大表示させる。また、同時にこれまで拡大表示されていたサムネイルについては縮小表示に切り替える（図４０（ｃ））。これらサムネイルの拡大、縮小処理は例えば図３３におけるステップＳ３０８〜Ｓ３３２の処理を利用して行うことが可能である。
【０２１４】
また、図４０（ｂ）の状態で上方向指示レバー６５ａが操作された場合には、最下段にフォーカスを移動し、縮小表示されていたサムネイルを拡大表示すると共に、原画像サムネイルを縮小表示する。
【０２１５】
図４０（ｃ）のように、ＲＯＩサムネイルが拡大表示されている状態で、左右いずれかの方向指示レバー６５ｂ、６５ｄが操作された場合、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３５と移行する。ステップＳ４３５では、現在拡大表示されているＲＯＩサムネイルに対応する原画像サムネイルが拡大表示されるように表示状態を初期化する。それにより、表示状態は図４０（ｂ）の状態に戻る。
【０２１６】
なお、ＲＯＩサムネイルが拡大されている状態で左右方向指示レバーが操作された場合には、レバー操作を無視して単にステップＳ４０１へ戻るように構成しても良い。
【０２１７】
図４０（ｂ）の状態で図４１（ｄ）に示すように右方向指示レバー６５ｂが操作されると、処理はステップＳ４０２→ステップＳ４３１→ステップＳ４３２→ステップＳ４３４と移行し、右隣の原画像サムネイルにフォーカスを移動させる。
【０２１８】
なお、ＲＯＩの数が画像表示部２８の縦方向のサムネイル最大同時表示数を超える場合や、原画像の総数が画像表示部２８の横方向のサムネイル最大同時表示数を超える場合には、第１０の実施形態で説明したように、巡回的に表示するＲＯＩサムネイルや原画像サムネイルを変更するように構成することも可能である。
【０２１９】
さらに、サムネイル表示を図３５に示したように横方向にした場合にも本実施形態を適用可能である。この場合、上述した左右方向指示レバーの操作に対応した処理と、上下方向指示レバーの操作に対応した処理とを入れ替えれば良い。
【０２２０】
以上説明したように、本実施形態においては、原画像サムネイルと対応するＲＯＩサムネイルを並べて配置すると共に、ユーザの指示に応じて原画像サムネイルと対応するＲＯＩサムネイルのうち任意のサムネイルを拡大表示することが可能となるため、サムネイル表示において原画像に設定されたＲＯＩの内容をさらに詳しく確認することが可能となる。
【０２２１】
特に、デジタルカメラ等、サムネイルを表示する画像表示部が小型のＬＣＤのように、限られた面積、限られた画素数でサムネイル表示を行う場合においても、ユーザに分かりやすい表示を行う事が可能となった。
【０２２２】
【他の実施形態】
上述の実施形態においては、原画像サムネイルにマスクサムネイル（第１の実施形態の場合）等を重畳表示することによりサムネイル表示を行うように説明したが、マスクサムネイルを利用せず、重畳表示された状態を表す１つのサムネイルを作成し、通常のサムネイルとて切り替え表示するように構成しても良い。
【０２２３】
例えば第１の実施形態においては、原画像のうちＲＯＩ領域を塗りつぶしたサムネイルを生成し、このサムネイルを表示するように構成しても良い。
【０２２４】
また、マスクサムネイルを生成する場合、例えば１つのＲＯＩ毎にマスクサムネイルを生成し、複数のマスクサムネイルを重畳表示するように構成しても良い。
【０２２５】
また、第２の実施形態のように、フォーカスされたサムネイルのみＲＯＩを塗りつぶして表示する場合には、マスクサムネイルの表示を切り替える代わりに、原画像のうちＲＯＩを塗りつぶしたサムネイルと、通常の原画像サムネイルとの表示を切り替えるように構成しても良い。
【０２２６】
上述の実施形態においては、デジタルカメラを本発明に係る画像表示装置の一例として説明したが、デジタルカメラの有する撮像、符号化等の圧縮画像の表示に関わらない機能構成は本発明とは本質的に無関係である。本発明はＪＰＥＧ２０００方式におけるＲＯＩのように、画像中に他の領域と異なる特性での圧縮符号化が指定された領域を部分を有する圧縮画像ファイルに格納された画像を表示する機能を有する任意の機器に適用しうる。なお、本発明に係る画像表示装置において圧縮画像ファイルの復号化処理は必須でない。
【０２２７】
また、実施形態で説明した各種表示動作のいくつかを切り替えて使用可能な画像表示装置もまた本発明に含まれる。
【０２２８】
さらに、本文中でも説明したが、複数の実施形態を組み合わせた構成も又可能であり、そのような組み合わせも又本発明に含まれる。実施形態の組み合わせは、本文中で述べた物に限定されるものではない。例えば、第５及び第６の実施形態で説明したような番号表示は、他の全ての実施形態と組み合わせることが可能である。
【０２２９】
尚、前述した実施形態の機能を実現するソフトウェアのプログラムを、記録媒体から直接、或いは有線／無線通信を用いて当該プログラムを実行可能なコンピュータを有するシステム又は装置に供給し、そのシステム或いは装置のコンピュータが該供給されたプログラムを実行することによって同等の機能が達成される場合も本発明に含む。この場合、例えば領域指定レバー１２はキーボードやマウスなど、コンピュータ装置が利用可能な任意のユーザインタフェースで実現することが可能である。
【０２３０】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータに供給、インストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の機能処理を実現するためのコンピュータプログラム自体も本発明に含まれる。
【０２３１】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【０２３２】
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、磁気テープ等の磁気記録媒体、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ等の光／光磁気記憶媒体、不揮発性の半導体メモリなどがある。
【０２３３】
有線／無線通信を用いたプログラムの供給方法としては、コンピュータネットワーク上のサーバに本発明を形成するコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイル等、クライアントコンピュータ上で本発明を形成するコンピュータプログラムとなりうるデータファイル（プログラムデータファイル）を記憶し、接続のあったクライアントコンピュータにプログラムデータファイルをダウンロードする方法などが挙げられる。この場合、プログラムデータファイルを複数のセグメントファイルに分割し、セグメントファイルを異なるサーバに配置することも可能である。
【０２３４】
つまり、本発明の機能処理をコンピュータで実現するためのプログラムデータファイルを複数のユーザに対してダウンロードさせるサーバ装置も本発明に含む。
【０２３５】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件を満たしたユーザに対して暗号化を解く鍵情報を、例えばインターネットを介してホームページからダウンロードさせることによって供給し、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【０２３６】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０２３７】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【０２３８】
【発明の効果】
以上説明したように、本発明によれば、他の領域とは異なる特性での圧縮符号化がなされた特定領域を含んだ画像データを表示する画像表示装置において、サムネイル表示のような縮小表示状態であっても特定領域の有無や数を容易に把握することが可能になるという効果を有する。
【図面の簡単な説明】
【図１】本発明に係る画像表示装置が使用可能な符号化器の全体構成例を示すブロック図である。
【図２】図１の離散ウェーブレット変換部３により出力されるサブバンドの構成例を示す図である。
【図３】図１のエントロピ符号化部で行われるコードブロック分割を説明する図である。
【図４】ＲＯＩに係る変換係数を特定するためのマスクを説明する図である。
【図５】図１の符号列形成部の処理を説明する図である。
【図６】図１の符号列形成部の処理を説明する図である。
【図７】図１の符号列形成部で生成される符号列の構成例を示す図である。
【図８】図１の符号化器にて得られた符号列を復号する復号器の全体構成例を示すブロック図である。
【図９】図８の符号化器におけるサブバンド復号化を説明する図である。
【図１０】本発明の実施形態に係る画像表示装置としてのデジタルカメラの斜視図である。
【図１１】図１０に示すデジタルカメラの内部構成例を示すブロック図である。
【図１２】図１１における領域指定レバー６５の構成例を示す図である。
【図１３】第１の実施形態に係るデジタルカメラにおける領域指定時の画面表示例を説明する図である。
【図１４】第１の実施形態に係るデジタルカメラで生成される動画ファイルの構成例を示す図である。
【図１５Ａ】第１の実施形態に係るデジタルカメラの撮影及び画像ファイル記録動作を示すフローチャートである。
【図１５Ｂ】第１の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図１６】第１の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図１７】第２の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図１８】第２の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図１９】図１８の説明に用いる、領域指定レバー６５操作を示す図である。
【図２０】第３の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２１】第３の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２２】第４の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２３】第４の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２４】第５の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２５】第５の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２６】第６の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２７】第６の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図２８】第７の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図２９】第７の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３０】第８の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３１】第８の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３２】図３１の説明に用いる、領域指定レバー６５操作を示す図である。
【図３３】第９の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３４】第９の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３５】第９の実施形態の変形例に係るデジタルカメラのサムネイル表示例を示す図である。
【図３６】第１０の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図３７】第１０の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図３８】図３７の説明に用いる、領域指定レバー６５操作を示す図である。
【図３９】第１１の実施形態に係るデジタルカメラの画像表示動作を示すフローチャートである。
【図４０】第１１の実施形態に係るデジタルカメラのサムネイル表示例を示す図である。
【図４１】図４０の説明に用いる、領域指定レバー６５操作を示す図である。
Claims (22)
- 原画像データを読み込む読み込み手段と、
前記原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、
前記関心領域が設定されている場合、当該関心領域に関する領域情報を取得する領域情報取得手段と、
前記原画像データ及び前記領域情報を用いた縮小画像を生成する画像縮小手段と、
表示手段と、
複数の前記縮小画像を、選択可能に前記表示手段に表示させる表示制御手段とを有し、
前記表示制御手段が、前記表示手段に表示された前記複数の縮小画像の１つを選択する操作がなされると、前記選択された縮小画像の前記原画像データ中に前記関心領域が設定されているか否かを前記判定手段によって判定し、設定されていると判定される場合には、前記選択された縮小画像の前記関心領域を他の領域と識別可能に表示し、前記表示手段に表示された前記複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置。 - 前記表示制御手段が、前記選択された縮小画像の原画像データに設定された前記関心領域の数に応じた表示を行わせることを特徴とする請求項１記載の画像表示装置。
- 前記選択された縮小画像の原画像データに関心領域が設定されている場合、前記表示制御手段が、前記関心領域又は前記関心領域以外の領域を所定の単色で塗りつぶした原画像の縮小画像を前記選択された縮小画像として表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。
- 前記画像縮小手段が、前記原画像の縮小画像と、前記原画像の縮小画像と同一サイズを有し、前記関心領域又は前記関心領域以外の領域が所定の色で塗りつぶされたマスク縮小画像とを生成し、
前記選択された縮小画像の原画像データに関心領域が設定されている場合、前記表示制御手段が、前記選択された縮小画像に、対応した前記マスク縮小画像を重畳表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。 - 前記選択された縮小画像の原画像データに関心領域が設定されている場合、前記表示制御手段が、前記関心領域と前記関心領域以外の領域の一方を他方より少ない色数に変換した原画像の縮小画像を前記選択された縮小画像として表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。
- 前記選択された縮小画像の原画像データに関心領域が設定されている場合、前記表示制御手段が、前記関心領域情報に含まれる、原画像中の前記関心領域の数を表す画像を含んだ前記原画像の縮小画像を前記選択された縮小画像として表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。
- 前記画像縮小手段が、前記原画像の縮小画像と、前記原画像の縮小画像と同一サイズを有し、前記関心領域情報に含まれる、原画像中の前記関心領域の数を表す画像を含んだ領域数画像とを生成し、
前記選択された縮小画像の原画像データに関心領域が設定されている場合、前記表示制御手段が、前記選択された縮小画像に、対応した前記領域数画像を重畳表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。 - 前記画像縮小手段が、前記原画像の縮小画像と、前記関心領域の縮小画像を生成し、
前記表示制御手段が、外部からの指示により、前記関心領域又は前記関心領域以外の領域を所定の単色で塗りつぶした原画像の縮小画像の代わりに、当該原画像に対応する前記関心領域の縮小画像を表示させることを特徴とする請求項３記載の画像表示装置。 - 前記画像縮小手段が、前記原画像の縮小画像と、前記関心領域の縮小画像を生成し、
前記表示制御手段が、外部からの指示によって、前記選択された前記縮小画像及び前記マスク縮小画像の代わりに、当該縮小画像に関連する前記関心領域の縮小画像を表示させることを特徴とする請求項４記載の画像表示装置。 - 前記画像縮小手段が、前記原画像の縮小画像と、同一の原画像に含まれる前記関心領域の総数及び同一原画像中の何番目の関心領域であるかを示す番号とを表す画像を含んだ前記関心領域の縮小画像を生成し、
前記表示制御手段が、外部からの指示によって、前記選択された縮小画像の代わりに、当該縮小画像に関連する前記関心領域の縮小画像を表示させることを特徴とする請求項６記載の画像表示装置。 - 前記画像縮小手段が、前記原画像の縮小画像と、前記関心領域の縮小画像と、同一の原画像に含まれる前記関心領域の総数及び同一原画像中の何番目の関心領域であるかを示す番号とを表す画像を有する通し番号画像を生成し、
前記表示制御手段が、外部からの指示によって、前記選択された縮小画像の代わりに、前記関心領域の縮小画像と、前記通し番号画像を重畳表示させることを特徴とする請求項６記載の画像表示装置。 - 前記画像縮小手段が、前記原画像の縮小画像と、前記関心領域の縮小画像を生成し、
前記表示制御手段が、前記選択された縮小画像及び対応する前記関心領域の縮小画像とを、別の表示領域に表示させるとともに、前記選択された縮小画像を前記関心領域の縮小画像よりも大きく表示させることを特徴とする請求項１又は請求項２記載の画像表示装置。 - 前記表示制御手段が、外部からの指示に応じて前記選択された縮小画像と前記関心領域の縮小画像の一方を他方よりも大きく表示させることを特徴とする請求項１２記載の画像表示装置。
- 前記表示制御手段が、前記表示手段の上部領域に前記原画像の縮小画像を水平方向に並べて表示させると共に、前記関心領域の縮小画像を対応する原画像の縮小画像の下に垂直方向に並べて表示させることを特徴とする請求項１２記載の画像表示装置。
- 前記表示制御手段が、前記表示手段の左右いずれかの端部に前記原画像の縮小画像を垂直方向に並べて表示させると共に、前記関心領域の縮小画像を対応する原画像の縮小画像の横に水平方向に並べて表示させることを特徴とする請求項１２記載の画像表示装置。
- 前記表示制御手段が、前記原画像の縮小画像を前記関心領域の縮小画像よりも大きく表示することを特徴とする請求項１４又は請求項１５記載の画像表示装置。
- 前記表示制御手段が、外部からの指示に応じて、前記原画像の縮小画像の代わりに、対応する前記関心領域の縮小画像の１つを大きく表示させることを特徴とする請求項１４又は請求項１５記載の画像表示装置。
- 前記表示制御手段が、前記大きく表示される前記関心領域の縮小画像の表示位置を前記原画像の縮小画像が最初に表示されていた場所に移動させることを特徴とする請求項１７記載の画像表示装置。
- 前記表示制御手段が、前記大きく表示される前記関心領域の縮小画像の表示位置は、大きく表示される前と変わらないことを特徴とする請求項１７記載の画像表示装置。
- 原画像データを読み込む読み込みステップと、
前記原画像データ中に、関心領域が設定されているか否かを判定する判定ステップと、
前記関心領域が設定されている場合、当該関心領域に関する領域情報を取得する領域情報取得ステップと、
前記原画像データ及び前記領域情報を用いた縮小画像を生成する画像縮小ステップと、
複数の前記縮小画像を表示手段に表示させる表示制御ステップとを有し、
前記表示制御ステップが、前記表示手段に表示された前記複数の縮小画像の１つを選択する操作がなされると、前記選択された縮小画像の前記原画像データ中に前記関心領域が 設定されているか否かを前記判定ステップによって判定し、設定されていると判定される場合には、前記選択された縮小画像の前記関心領域を他の領域と識別可能に表示し、前記表示手段に表示された前記複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させることを特徴とする画像表示装置の制御方法。 - コンピュータ装置を、
原画像データを読み込む読み込み手段と、
前記原画像データ中に、関心領域が設定されているか否かを判定する判定手段と、
前記関心領域が設定されている場合、当該関心領域に関する領域情報を取得する領域情報取得手段と、
前記原画像データ及び前記領域情報を用いた縮小画像を生成する画像縮小手段と、
表示手段と、
複数の前記縮小画像を、選択可能に前記表示手段に表示させる表示制御手段とを有し、
前記表示制御手段が、前記表示手段に表示された前記複数の縮小画像の１つを選択する操作がなされると、前記選択された縮小画像の前記原画像データ中に前記関心領域が設定されているか否かを前記判定手段によって判定し、設定されていると判定される場合には、前記選択された縮小画像の前記関心領域を他の領域と識別可能に表示し、前記表示手段に表示された前記複数の縮小画像のうち選択されていないものについては、原画像をそのまま縮小した縮小画像を表示させる画像表示装置の各手段として機能させるためのプログラム。 - 請求項２１記載のコンピュータプログラムを格納したことを特徴とするコンピュータ装置読み取り可能な記憶媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002278112A JP4027196B2 (ja) | 2002-09-24 | 2002-09-24 | 画像表示装置及びその制御方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002278112A JP4027196B2 (ja) | 2002-09-24 | 2002-09-24 | 画像表示装置及びその制御方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2004120134A JP2004120134A (ja) | 2004-04-15 |
| JP2004120134A5 JP2004120134A5 (ja) | 2007-07-19 |
| JP4027196B2 true JP4027196B2 (ja) | 2007-12-26 |
Family
ID=32273506
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002278112A Expired - Fee Related JP4027196B2 (ja) | 2002-09-24 | 2002-09-24 | 画像表示装置及びその制御方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4027196B2 (ja) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6214235B2 (ja) * | 2012-07-02 | 2017-10-18 | キヤノン株式会社 | ファイル生成方法、ファイル生成装置、及びプログラム |
| US9979960B2 (en) | 2012-10-01 | 2018-05-22 | Microsoft Technology Licensing, Llc | Frame packing and unpacking between frames of chroma sampling formats with different chroma resolutions |
| US9661340B2 (en) * | 2012-10-22 | 2017-05-23 | Microsoft Technology Licensing, Llc | Band separation filtering / inverse filtering for frame packing / unpacking higher resolution chroma sampling formats |
| JP6643002B2 (ja) * | 2015-06-11 | 2020-02-12 | キヤノン株式会社 | 医用画像表示装置、医用画像表示方法、およびプログラム |
| US10991137B2 (en) | 2015-06-11 | 2021-04-27 | Canon Kabushiki Kaisha | Information processing apparatus, information processing method, and information processing system for display of medical images |
| US10368080B2 (en) | 2016-10-21 | 2019-07-30 | Microsoft Technology Licensing, Llc | Selective upsampling or refresh of chroma sample values |
| US11037024B1 (en) * | 2016-12-20 | 2021-06-15 | Jayant Ratti | Crowdsourced on-demand AI data annotation, collection and processing |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07288806A (ja) * | 1994-04-20 | 1995-10-31 | Hitachi Ltd | 動画像通信システム |
| JP3623983B2 (ja) * | 1994-04-28 | 2005-02-23 | キヤノン株式会社 | 画像ファイル記録再生装置及びその方法 |
| JPH0838433A (ja) * | 1994-07-31 | 1996-02-13 | Shimadzu Corp | 医用画像診断装置 |
| JPH08331367A (ja) * | 1995-06-01 | 1996-12-13 | Canon Inc | 画像情報の保存システム及び画像表示システム |
| JP2001128109A (ja) * | 1999-10-22 | 2001-05-11 | Canon Inc | 画像処理方法及びその装置 |
| JP4412688B2 (ja) * | 1999-11-24 | 2010-02-10 | キヤノン株式会社 | 画像処理装置及びその方法 |
| JP2001230947A (ja) * | 2000-02-18 | 2001-08-24 | Canon Inc | 画像処理装置およびその処理方法 |
| JP2001313861A (ja) * | 2000-02-21 | 2001-11-09 | Fujitsu Ltd | 画像撮影装置、データ管理装置、媒体、およびプログラム |
-
2002
- 2002-09-24 JP JP2002278112A patent/JP4027196B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004120134A (ja) | 2004-04-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6426771B1 (en) | Image processing apparatus and method and computer readable memory storing the method | |
| US7154544B2 (en) | Digital camera including a zoom button and/or a touch tablet useable for performing a zoom operation | |
| US8848034B2 (en) | Image processing apparatus, control method thereof, and program | |
| US6781629B2 (en) | Digital camera and image reproducing apparatus and method | |
| JP2005223765A (ja) | 撮像装置及びその制御方法 | |
| JPH1127616A (ja) | 撮像装置 | |
| JP2005269563A (ja) | 画像処理装置及び画像再生装置 | |
| US7522777B2 (en) | Image sensing apparatus and control method thereof | |
| JP2008022514A (ja) | 画像表示装置 | |
| JP5352065B2 (ja) | 画像表示装置 | |
| JP4696614B2 (ja) | 画像表示制御装置及びプログラム | |
| JP4027196B2 (ja) | 画像表示装置及びその制御方法 | |
| JPH10313444A (ja) | 情報処理装置および記録媒体 | |
| US20050212943A1 (en) | Digital camera | |
| JP2001333430A (ja) | 画像処理装置、方法、及びコンピュータ読み取り可能な記憶媒体 | |
| JP5942422B2 (ja) | 情報処理装置、その制御方法及びプログラム | |
| WO2003028365A1 (fr) | Appareil de selection de mode et camera numerique | |
| JP3918228B2 (ja) | 情報処理装置および記録媒体 | |
| JP2006287588A (ja) | 画像処理装置、画像処理方法、データファイル構造、コンピュータプログラム及び記憶媒体 | |
| JP5294091B2 (ja) | 撮像装置、その制御方法及びプログラム | |
| JP2003264834A (ja) | 符号化装置、符号化方法、プログラム、記憶媒体 | |
| JP7213657B2 (ja) | 撮像装置及びその制御方法及びプログラム | |
| JP5003803B2 (ja) | 画像出力装置、および、プログラム | |
| JP2009213095A (ja) | 画像ファイル作成装置、画像ファイル作成方法及びプログラム | |
| JP2007259485A (ja) | 情報処理装置および記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050608 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070605 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070629 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070822 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070918 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071009 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101019 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101019 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111019 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111019 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121019 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131019 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |