JP2009080815A - 画像表示方法および画像表示装置 - Google Patents

Abstract

【課題】スライドショーにおいて、個々の写真に固有の情報に基づいて、写真に適し
た表示効果を、自動で設定することができる画像表示方法およびその装置を提供する。
【解決手段】少なくとも１つの画像データを取得した後、この画像のスライドショー
を実行する場合に、画像の顔などの特徴領域を検出し、特徴領域の数および／またはサイズに基づいて、あらかじめ決定している複数の表示効果の中から、表示効果を選択する。この選択した表示効果に基づいて画像を時系列的に変化させて表示する。
【選択図】 図３

Description

この発明は、画像表示方法および画像表示装置に関し、特に、画像データを画面上に表示する画像表示装置に適用して好適なものである。

デジタルハイビジョン放送が開始され、ハイビジョン対応のテレビ受信機の普及により、従来よりも高画質で迫力のある映像を家庭で楽しめるようになってきている。一方電子スチルカメラの普及により、電子化した静止画および動画をパソコンだけでなく、テレビのモニタ画面に表示して楽しむユーザも増えてきている。

こうした状況の中で、撮影した静止画や動画を単にテレビに表示するだけでなく、テレビ番組のように「受動的に」視聴したい、またはテレビ番組や映画などのような演出や映像および音声効果を付加した形式で楽しみたいというユーザの要請も次第に高まってきている。

ここで、デジタル画像データをユーザが操作することなく順次表示する方法として、スライドショー表示を挙げることができる。このスライドショー表示に効果を付加する方法として、特許文献１に記載された方法が提案されている。この特許文献１には、静止画にあらかじめ付与されている表示切替効果設定に従って、表示切替効果を制御する方法が従来例として示されているとともに、ユーザが自由に他の表示切換え効果に変えることができる方法などが提案されている。
特開２００２−２８１４５０号公報

しかしながら、特許文献１において提案された技術においては、スライドショーに効果的な表示効果を付加するために、コンテンツの製作者が効果を付加していく作業が必要となる。そのため、特許文献１の技術では、ユーザ側において、静止画の切換え効果制御命令を、他の切替効果制御命令と交換する程度のことしかできなかった。すなわち、従来技術においては、個々の写真の内容に適した表示効果を、自動または簡便に行うことが困難であるという問題を有していた。

したがって、この発明の目的は、表示装置においてスライドショーを実行する場合において、個々の画像に固有の情報に基づいて、写真に適した表示効果を自動で設定することができる画像表示方法および画像表示装置を提供することにある。

上記目的を達成するために、この発明の第１の発明は、
画像を入力する画像入力ステップと、
上記画像の特徴領域検出を実行する特徴領域検出ステップと、
上記特徴領域の数および／またはサイズに基づいてあらかじめ定められた複数の表示効果の中から、上記表示効果を選択する表示効果選択ステップと、
上記選択された表示効果に従って画像を時系列的に変化させて表示する表示ステップとを有する
ことを特徴とする画像表示方法である。

この第１の発明において、典型的には、表示ステップは、特徴領域検出ステップにより
得られた領域位置情報に基づいて、画像の出力を制御するようにしたステップである。また、この発明において、表示効果選択ステップは、特徴領域のサイズが画像解像度に基づいたしきい値の大小によって異なる表示効果を選択する処理を含む。

また、この第１の発明において、特徴領域検出ステップは、画像中から特定のパターンを検出する処理を含む。そして、この特定のパターンは、好適には、人物の顔であるが、そのほかの特定パターンであっても良い。

この第１の発明において、典型的には、特徴領域検出ステップは、画像データに含まれる撮影情報から被写体位置を検出する処理を含む。そして、この撮影情報は、好適には、合焦位置情報である。

この第１の発明において、典型的には、特徴領域検出ステップは、拡大操作履歴情報の取得処理を含む。

この第１の発明において、特徴領域検出ステップは、画像中の特定パターンを検出する処理、撮影情報から被写体位置を抽出する処理および、拡大操作履歴を取得する処理のうちの少なくとも２つの処理を実行するとともに、表示効果選択ステップは、特徴領域検出ステップの実行結果において、少なくとも２つの処理による結果が重複する領域を含む場合と、含まない場合とにおいて、異なる表示効果を選択するようにする。

また、この第１の発明において、典型的には、複数の表示効果は、特徴領域に対するズーミング処理、複数の特徴領域を通る線上を移動するパニング処理、または特定領域のみを表示するマスキング処理を含む。

この発明の第２の発明は、
画像を表示する表示手段と、
画像データを取得する画像データ取得手段と、
画像の特徴領域検出を行う特徴領域検出手段と、
特徴領域の数および／またはサイズに基づいて、あらかじめ定められた複数の表示効果の中から表示効果を選択する表示効果選択手段と、
選択された表示効果に従って画像を時系列的に変化させて表示手段に表示する表示制御手段とを有する
ことを特徴と画像表示装置である。

この第２の発明において、典型的には、表示制御手段は、特徴領域検出手段により得られた領域位置情報に基づいて、画像の表示を制御するように構成されている。

また、この第２の発明において、典型的には、表示効果選択手段は、特徴領域のサイズが、画像の解像度に基づくしきい値の大小によって、異なる表示効果を選択するように構成されている。

さらに、この第２の発明において、好適には、特徴領域検出手段は、画像中から特定のパターンを検出する処理を行うように構成されている。そして、好適には、この特定のパターンは、人物の顔であるが、そのほかのパターンであっても良い。

この第２の発明において、典型的には、特徴領域検出手段は、画像データに含まれる撮影情報から被写体位置を検出可能に構成され、好適には、この撮影情報は、合焦位置情報である。

この第２の発明において、典型的には、特徴領域検出手段は、拡大操作がされた履歴情報を含む拡大操作履歴情報が供給されるように構成されている。

また、この発明は、上述の組合せに限定されるものではなく、以上の技術的思想を基づいて、上述の技術的思想のあらゆる組み合わせを包含するものである。

以上説明したように、この発明の画像表示方法および画像表示装置によれば、画像をスライドショー表示する場合の表示効果を、ユーザに面倒な設定操作を要求することなく、画像の内容を反映した、より効果的なものにすることができる。

以下、この発明の実施形態について図面を参照しながら説明する。なお、以下の実施形態の全図においては、同一または対応する部分には同一の符号を付す。

（第１の実施形態）
まず、この発明の第１の実施形態による画像表示装置としてのデジタルテレビ受信装置について説明する。図１に、この第１の実施形態によるデジタルテレビ受信装置を示す。

（デジタルテレビ受信装置の構成）
図１に示すように、チューナ部１０１には、アンテナ（図示せず）により受信された信号が入力される。チューナ部１０１は、入力された信号に対して、復調、誤り訂正などの処理を施し、トランスポートストリームと呼ばれる形式のデジタルデータを生成する。チューナ部１０１は、さらに、生成したトランスポートストリーム（ＴＳ）データに対しデスクランブル解除処理を行い、デマルチプレクサ部１０２に出力する。

デマルチプレクサ部１０２には、チューナ部１０１から複数チャンネル分の映像データ、音声データおよび電子番組ガイド（ＥＰＧ）データなどが供給される。また、デマルチプレクサ部１０２は、チューナ部１０１から供給されるデータ放送データなどの時分割多重化されているＴＳデータの中から、映像データおよび音声データを抽出して、映像・音声デコーダ１０３に出力する。映像・音声デコーダによって処理された映像データは、ビデオメモリ１０７に書き込まれて表示合成部１０８を介して表示器１１２に出力される。一方、音声データは、音声出力部１０４に供給される。

この第１の実施形態においては、使用される表示器１１２として、横９６０画素、縦７２０画素（９６０×７２０画素）の画素数からなるものが使用される。なお、この画素数はあくまで一例であり、任意の画素数の表示器１１２を用いることが可能である。

カードスロット１０９は、リムーバブルメモリカードなどを接続し、例えばデジタルカメラとのデータのやり取りを行うために使用されるインターフェースである。画像データ入力部１０５は、カードスロット１０９に接続されたメモリカードからデジタル画像データを読み込むための回路である。また、画像デコーダ１０６は、画像データ入力部より入力したデジタル画像データをデコード処理するための回路である。

表示制御部１１０は、画像データ入力部１０５に対する画像読込の指示、画像デコーダ１０６に対する処理実行の指示、ビデオメモリ１０７への表示データの書き込み、表示合成部１０８に対する合成処理の指示、記憶部１１３に対する情報の記憶指示を行うための処理制御手段である。

また、表示制御部１１０は、ユーザ入力部１１１を介してリモコン１１４からの入力デ
ータの取得、また画像データ入力部１０５を介して、デジタル画像データに付与された撮影データの取得も行う。

このリモコン１１４の一例を図２に示す。なお、図２においては、この第１の実施形態における説明に必要な機能を実現する操作を行うボタンのみを示す。したがって、実際の受信装置においてリモコン１１４に必要なボタンは、この限りでない。

図２に示すように、発光部２０１は、リモコンと図１に示すユーザ入力部１１１の受光部との赤外線通信を行うための発光手段である。電源キー２０２は、電源をＯＮ／ＯＦＦするための切替手段である。カーソル・決定キー２０３は、画面上のカーソルを移動させたり、所定の位置において決定したりするためのキーであり、上下左右ボタンの中央に決定キーが配設されている。アップダウンキー２０４，２０５は、それぞれアップ／ダウン（Ｕｐ／Ｄｏｗｎ）の２つのキーからなる。数字キー２０６は、１，２，…，９，０の数字がマトリクス状に配列されている。カラーキー２０７は、青、赤、緑および黄の４色のボタンが横一列に並んで設けられている。

また、モニターモードキー２０８は、テレビ受信機のモニタの表示モードを切り替えるためのキーである。「ビューワ」キー２０９は、画像ビューア機能を呼び出すためのキーである。

この第１の実施形態において用いられるデジタル画像は、例えばデジタルカメラによって撮影された静止画データである。この静止画データは、デジタルカメラによって、所定の画像圧縮形式データに圧縮処理されたデータ、例えばＪＰＥＧ圧縮処理が施されたデータである。また、静止画データは、圧縮処理が施された後に、静止画像データファイルとしてメモリカードに記録される。なお、以後の説明において、「画像ファイル」とは、静止画像データを示す。また、説明を簡略化するために、この第１の実施形態において用いられる静止画データは、全て１６００×１２００サイズのデータとする。

（処理動作説明）
次に、この第１の実施形態による処理動作について説明する。この第１の実施形態によるデジタルテレビ受信装置１００におけるデジタル画像の表示は、例えばユーザによりカードスロット１０９にメモリカードが装着されて、リモコン操作がされることにより画像ビューア機能が呼び出されることによって開始される。図３に、この第１の実施形態によるデジタルテレビ受信装置の画像ビューア機能の一部の動作を示す。なお、図３においては、表示制御部１１０の動作を中心に示す。

（スライドショーの開始）
ユーザにより図２に示すリモコンの「ビューワ」キー２０９が押下されると、表示制御部１１０により、図３に示す処理が開始される。

まず、ステップＳ３０１において、表示制御部１１０により、画像データ入力部１０５を介してカードスロット１０９に挿入されているメモリカードに格納された画像ファイルの総数が読み出されて、この値が記憶される。次に、ステップＳ３０２およびステップＳ３０３に順次移行して、１枚目の画像ファイルが読み出されて画像サイズが取得される。その後、ステップＳＴ３０４に移行して、表示制御部１１０により、画像デコーダ部１０６に画像データが供給され、この画像デコーダ部１０６において、画像データに対するデコード処理が実行される。続いて、ステップＳ３０５に移行して、デコード処理後の画像を用いた顔検知処理が実行される。ここで、この顔検知処理について以下に詳細に説明する。

（顔検知処理）
すなわち、この第１の実施形態による顔検知処理は、画像中から顔の特徴となる目や口のパターンを検索して、所定のパターンに一致した場合に肌色の有無や輪郭の有無を確認し、顔であるか否かの判定を行う処理である。

この第１の実施形態においては、この顔検知処理は、図３におけるステップＳ３０５ａからステップＳ３０５ｅのように実行される。すなわち、この顔検知処理において、顔であると判定された場合、顔検知数に１が加算され、この顔検知数と顔の位置情報（画像データの左上端を基点とした（Ｘ，Ｙ）座標）とが、それぞれ記憶部１１３に保存される。

（検知数に応じた効果決定処理）
１枚目画像の顔検知処理が終了すると、ステップＳ３０６に移行して、顔検知処理の結果に基づいて１枚目に対する表示効果選択処理が実行される。この第１の実施形態においては、図４に示すテーブルを用いて、検知した顔の数に応じた表示効果が選択される。

具体的には、例えば、検知された顔の数が１つであれば、表示制御部１１０により、図４に示すテーブルに従って、「全体表示→顔位置に対するズーミング」という表示効果処理が選択される。また、検知された顔の数が２つであれば、「ズームした状態で２つの顔を通る線上をパニング」という表示効果が選択される。さらに、検知した顔の数が３つ以上であれば、「全顔位置の重心位置のズーム表示→画像全体までズームアウト」という表示効果が選択される。また、顔が検知されなかった場合には、「全体表示→ズームアウト」という表示効果が選択される。ここで、「ズーム」および「ズーミング」とは、必ずしも画像データの一部を切り出して拡大処理を行う意味に限らない。すなわち、この第１の実施形態において一例として用いている「１６００×１２００」の画像データの場合、この画像データを縮小処理して画面全体（９６０×７２０）に表示した状態を基本とし、この画面全体に対して部分的に拡大したように見える処理をズームまたはズーミングと称することとする。具体的には、「全体表示→顔位置に対するズーミング」とは、「１６００×１２００」の画像データが、最初３／５倍されて画面全体（９６０×７２０）に表示された後、画像の切り出し領域を小さくしながら、常に表示が「９６０×７２０」となるように変倍率を変化させていく処理を示す。

（表示効果処理）
このような表示効果選択処理が終了すると、ステップＳ３０７に移行して、選択された表示効果および記憶部に記憶されていた顔の位置情報に基づいて、ビデオメモリに対して条件を変えながら連続して表示データの描画が行われ、これによる表示効果処理が実行される。なお、以下に説明する表示効果処理が終了すると、ユーザのリモコン操作による終了の指示（終了要求）があるまで、または、順次カウントされる処理した画像数Ｎが画像総数に達するまで、ステップＳ３０３からステップＳ３０７が繰り返される（Ｓ３０８〜Ｓ３１０）。また、処理した画像数Ｎが画像総数を超えた段階で、ステップＳ３０２から表示効果処理が実行される。

表示制御部１１０によって行われる表示効果処理の様子を図５に示す。図５Ａに、画像データを処理した際に顔検知処理によって、
顔検知数：１
顔位置：（６７４，２８８）
という結果が得られた場合を示す。そして、この図５Ａにおいては、上述した処理によって「顔検知数：１」の結果が得られ、これに基づいて「全体表示→顔位置に対するズーミング」という表示効果が選択されている。表示制御部１１０によって、選択された画像に対し、全体表示から顔位置に対するズーミング処理が実行される。

すなわち、まず、図５Ａ中「ａ」で示された領域が画面全体に表示され、ゆっくりと変倍率が増加されながら、ビデオメモリに対して連続した描画が実行される。この描画処理は、表示領域が「ｂ」で示された領域に達した時点で終了する。

この１枚目の表示効果処理を終了すると、表示制御部１１０により、２枚目以降の画像についても同様の処理が実行される。例えば、２枚目の写真が図５Ｂに示されるような画像データである場合、顔検知処理によって、
顔検知数：２、
顔位置：（６５０，４５６）、（８４０，５９６）
という結果が得られる。上述した処理により「顔検知数：２」という結果が得られると、顔検知処理によって「ズームした状態で２つの顔を通る線上をパニング」という表示効果が選択される。これによって、表示制御部１１０により、選択された画像に対してパニング（ＰＡＮＮＩＮＧ）処理が実施される。なお、線上としての線は、直線であることが望ましいが、そのほかの線を設定することも可能である。

すなわち、画像がズームされた状態において、図５Ｂ中「ｃ」で示された２つの顔位置を通る線上を通過しつつ、領域「ｄ」から「ｅ」までゆっくりと移動するように、ビデオメモリに対して連続した描画が実行される。

また、３枚目の写真が図５Ｃに示す画像データである場合、顔検知処理によって、
顔検知数：３、顔位置：（８２６，３２０）、（１１７１，４２１）、（４７６，３９２）
という結果が得られる。この「顔検知数：３」という結果が上述した処理により得られると、顔検知処理によって、「全顔位置の重心位置のズーム表示→画像全体までズームアウト」という表示効果が選択される。これによって、表示制御部１１０により、この画像に対するズームアウト処理が実行される。

すなわち、図５Ｃ中「ｆ」で示される位置を中心とした領域（図５Ｃ中「ｇ」の領域）がズーム表示され、その後、下画像全体（図５中「ｅ」の領域）まで、ゆっくりとズームアウトするように、ビデオメモリに対して連続した描画が行われる。

このような表示制御部１１０の処理による表示結果の一例を図６に示す。図６Ａ〜図６Ｄは、この順に図５Ａに示す画像の表示の状態を示す。また、図６Ｅ〜図６Ｈは、この順に図５Ｂに示す画像の表示の状態を示す。

図６に示すように、この第１の実施形態によれば、表示制御部の動作により、複数の表示効果を選択的に切替可能なスライドショーにおいて、個々の画像に含まれる顔の数を反映した表示効果を選択可能になるとともに、実際の表示効果処理では顔の位置を反映した処理を実行することが可能となる。

（第２の実施形態）
次に、この発明の第２の実施形態による画像表示方法および画像表示装置について説明する。

この第２の実施形態においては、第１の実施形態のように、顔検知処理において「顔の数」と「位置」とを検出して、これらの「顔の数」および「位置」に基づいて表示効果を選択して制御していたのと異なり、「顔の数」および「位置」に加え、「顔領域の大きさ」の情報も検出して記憶部に保存する構成を採用する。

さらに、この第２の実施形態においては、表示効果選択処理について条件を追加する。
図７に、この「顔の数」に対して「顔領域の大きさ」の条件を追加した表示効果選択処理の一例を示す。

すなわち、図７に示すように、顔検知処理の後、顔検知数が１の場合において、顔領域の大きさが一定値以上、例えば、幅が１３０以上であれば、「全体表示→顔位置に対するズーミング」が選択される。他方、顔検知数が１の場合において、顔領域の大きさが一定値未満であれば、「顔領域近傍のみを窓枠表示→枠を広げて全体表示」が選択される。

（表示効果処理）
次に、この第２の実施形態による表示効果処理について説明する。すなわち、上述のようにして実行される顔検知処理において、例えば、図８Ａに示す画像データを処理した際に、例えば、
顔検知数：１
顔位置：（５５７，４９６）
顔領域の大きさ：幅２５２、高さ２２８
という結果が得られたとする。

この場合、この第２の実施形態による上述した処理により「顔検知数：１」、顔領域の大きさが一定値以上という結果から、「全体表示→顔位置に対するズーミング」という表示効果が選択される。そして、表示制御部１１０により、この画像に対して、全体表示から顔位置に対するズーミング処理が実行される。

すなわち、まず、図８Ａに対応する図８Ｃに示す「ａ」により規定される領域が画面全体に表示される。その後、徐々に変倍率が増加されて、ビデオメモリに対し連続した描画が行われる。この描画は、表示領域が、図８Ｃに示す「ｂ」に示す領域に達した時点で終了する。

また、図８Ｂに示す画像データを処理する際、顔検知処理によって、
顔検知数：１
顔位置：（６７４，２８８）
大きさ：幅１２４、高さ１０２
という結果が得られたとする。

この場合、上述の処理により「顔検知数：１」、かつ顔領域の大きさが一定値未満であるという結果から、「顔領域近傍のみを窓枠表示→枠を広げて全体表示」という表示効果が選択される。そして、表示制御部１１０により、この画像に対して、全体表示から顔位置に対するズーミング処理が実行される。

すなわち、まず、図８Ｂに対応する図８Ｄに示す「ｃ」により規定される枠中だけが露出するように表示される。その後、徐々に枠の大きさが拡大されつつビデオメモリに対して連続した描画が実行される。そして、この描画は、画像全体が表示された時点で終了する。

以上のような表示制御部１１０の処理による表示結果は、具体的には、例えば図９に示す表示結果となる。すなわち、図８Ａの画像の表示に関しては、図９Ａ〜図９Ｄに順次示すように表示がされ、図８Ｂの画像の表示に関しては、図９Ｅ〜図９Ｈに順次示すように表示がされる。

以上説明したように、この第２の実施形態によれば、第１の実施形態と同様の効果を得ることができるとともに、表示制御部１１０の動作によって、複数の表示効果を選択的に
切り替えることができるスライドショーにおいて、個々の画像に含まれる顔の数を反映した表示効果を選択可能になるのみならず、顔領域の大きさによって異なる表示効果を施すことも可能となる。

ところが、顔領域が小さい画像の場合においては、顔が十分な大きさになるまでズーミング処理を行っていくと、変倍率が１よりも高くなってしまい、画像圧縮処理、具体的には例えばＪＰＥＧ圧縮処理の際に生じるブロックノイズなどが目立つ場合がある。このような表示上の不具合に対する印象が強くなってしまうと、顔位置に対してズーミングを実施したとしても、ユーザ側にとって「効果的」ではなくなる。

そこで、この第２の実施形態においては、顔領域が一定の値よりも小さい場合、ズーミング処理を実行することなく、図９Ｅ〜図９Ｈに示すような、ほかの表示効果を選択して、顔を強調する描画を実行するように構成する。この描画を実行することにより、顔の強調効果を確保して、上述した表示上の不具合を防ぐことが可能となる。

（第３の実施形態）
次に、この発明の第３の実施形態による画像表示方法について説明する。この第３の実施形態においては、第１および第２の実施形態のように顔検知処理の結果に基づいて表示効果が選択されていたのと異なり、顔検知処理に加え、写真の撮影時に記録された撮影情報と、ユーザが以前に、該当する写真を視聴した際の視聴履歴情報も併せて利用するように構成する。図１０に、この発明を適用するデジタルテレビ受信装置７００の構成を示す。なお、この第３の実施形態において用いられるリモコンは、第１の実施形態におけるリモコン（図２参照）と同様であるので、その説明を省略する。

（各部の説明）
図１０に示すように、この第２の実施形態によるデジタルテレビ受信装置７００を構成する、チューナ部７０１、デマルチプレクサ部７０２、映像・音声デコーダ７０３、音声出力部７０４、画像データ入力部７０５、ビデオメモリ７０７、表示合成部７０８およびカードスロット７０９に関しては、上述の第１の実施形態と同様であるので、その説明を省略する。また、この第３の実施形態において一例として使用される表示器７１２は、横９６０画素、縦７２０の画素（９６０×７２０）からなるものである。

すなわち、図１０に示すように、画像デコーダ７０６は、画像データ入力部７０５から供給されたデジタル画像データに対して、デコード処理を行うための回路である。また、表示制御部７１０は、画像データ入力部７０５に対する画像の読み込みを指示したり、画像デコーダ７０６に対する処理の実行を指示したりするための処理制御手段である。また、表示制御部７１０は、ビデオメモリ７０７に対する表示データの書き込みを実行したり、表示合成部７０８に対する合成処理を指示したり、記憶部７１３に対する情報の記憶を指示したりするための処理制御手段である。また、この表示制御部７１０は、ユーザ入力部７１１を介してリモコン７１４からの入力データの取得も実行可能に構成され、さらに、画像データ入力部７０５に、撮影情報解析部へのデータの供給を指示可能に構成されている。

顔検知部７１６は、第１および第２の実施形態における顔検知処理と同様の処理を実行する回路である。撮影情報解析部７１７は、画像ファイルから撮影時に付加された「合焦位置」情報を取り出すための回路である。また、操作履歴保存部７１８は、写真ごとに過去の拡大操作履歴を保存するための回路である。そして、これらの顔検知部７１６、撮影情報解析部７１７および操作履歴保存部７１８により、注目領域検出部７１５が構成されている。

以上のようなデジタルテレビ受信装置７００におけるモニタ画面について説明する。図１１Ａおよび図１１Ｂに、この第３の実施形態において使用するデジタルカメラのモニタ画面の一例を示す。

すなわち、撮影時に図１１Ａに示す表示がされると、画像ファイルに、左側の矩形領域に焦点が合ったという記録が付加される。他方、撮影時に図１１Ｂに示す表示がされると、画像ファイルに、右側の矩形領域に焦点が合ったという記録が付加される。

また、ユーザが写真を視聴した際に、ユーザによりリモコンのアップキー２０４の「拡大表示」の操作がされた場合、この「拡大表示」の領域情報が操作履歴保存部７１８にデータとして保存される。具体的には、例えば、ユーザのリモコン操作により、図１１Ｃに示す写真が図１１Ｄに示すように拡大表示されると、この時の操作履歴情報が中心座標（４５０，８００）、サイズ（幅Ｗ：８００，高さＨ：６００）という情報として保存される。そのほかの構成については、第１および第２の実施形態におけると同様であるので、その説明を省略する。

（処理動作）
次に、この発明の第３の実施形態による画像表示方法の処理動作について説明する。この第３の実施形態によるデジタルテレビ受信装置７００のデジタル画像の表示は、ユーザにより、カードスロット７０９にメモリカードが装着され、さらにリモコン操作がされて、画像ビューア機能が呼び出されて開始される。なお、以下の説明においては、その簡略化のために、用いられる画像データの画素数を１６００×１２００とする。図１２に、デジタルテレビ受信装置における画像ビューア機能の一部の動作を示す。図１２においては、表示制御部７１０の動作を中心に示す。

（スライドショーの開始）
まず、ユーザにより図２に示すリモコンの「ビューワ」キー２０９が押下されると、表示制御部７１０により、図１２に示す処理が開始される。

図１２に示す処理においては、まず、ステップＳ１２０１において、表示制御部７１０により、画像データ入力部７０５を介してカードスロット７０９に挿入されたメモリカードに格納されている画像ファイルの総数が読み出され、記憶部７１３に記憶される。続いて、ステップＳ１２０２において、画像数Ｎが１にセットされた後、ステップＳ１２０３に移行して、１枚目の画像ファイルが読み出され、画像サイズが取得される。

次に、ステップＳ１２０４に移行して、表示制御部７１０により、画像データ入力部から撮影情報解析部に画像ファイルデータが供給されるとともに、撮影情報解析部７１７に対して撮影時に記録された撮影情報を解析するように要求がされる。この解析の結果、合焦位置が取得されて、この位置が記憶部７１３に保存される。

次に、ステップＳ１２０５に移行して、表示制御部７１０により、画像データが画像デコーダ７０６に供給され、デコード処理が実行される。その後、ステップＳ１２０６に移行して、デコード処理が行われた後の画像が顔検知部に供給されるとともに、顔検知部７１６に、このデコード処理後の画像に対する顔検知処理を実行するように指示される。そして、この顔検知処理の結果として、顔の数、位置および大きさが取得されて、記憶部７１３に保存される。

さらに、ステップＳ１２０７に移行して、表示制御部７１０により、操作履歴保存部７１８に対して、該当する画像に対する操作履歴の有無が検索される。この検索によって、この該当する画像に対する拡大表示が過去に行われた履歴があった場合には、中心座標と
サイズとが取得されて記憶部７１３に保存される。

（効果決定処理）
その後、ステップＳ１２０８に移行して、１枚目画像の顔検知処理、撮影情報解析処理および操作履歴取得処理が終了すると、それらの結果に基づいて、１枚目に対する表示効果選択処理が実行される。この第３の実施形態においては、図１３に示すテーブルが用いられて、それぞれの領域の重複の有無および領域数に応じた表示効果が選択される。

具体的には、例えば、顔検出位置、合焦位置および拡大操作位置の中で重複している領域が１つである場合に、図１３のテーブルに従って「全体表示→重複領域に対するズーミング（倍率：高）」という表示効果処理が選択される。また、重複している領域の数が２つである場合には、「ズームした状態（倍率：高）で２つの重複領域を通る直線上をパニング」という表示効果が選択される。また、重複した領域の数が３つ以上である場合に、「全体表示→１つ目の領域にズーミング（倍率：高）、その後、２つ目以降の領域へパニング」という表示効果が選択される。

また、重複する領域が存在しない場合、かつ顔検知処理、撮影情報解析処理および操作履歴取得処理において領域が１つしか検出できなかった場合には、「全体表示→重複領域に対するズーミング（倍率：低）」が選択される。他方、重複はないが、領域が２つある場合、「ズームした状態（倍率：低）で２つの重複領域を通る直線上をパニング」という表示効果が選択される。また、重複はないが、３つ以上の領域がある場合は、「全領域の重心位置のズーム表示→画像全体までズームアウト」という表示効果が選択される。

（表示効果処理）
次に、表示効果選択処理が終了すると、ステップＳ１２０９に移行され、選択された表示効果および記憶部７１３に記憶された顔の位置情報に基づいて、ビデオメモリに対し条件を変化させながら、連続して表示データの描画が行われて、表示効果処理が実行される。この表示制御部１１０によって行われる表示効果処理の様子を図１４に示す。なお、以下に説明する表示効果処理が終了すると、ユーザによる終了要求がされるまで、または、処理した画像数Ｎが画像総数に達するまで、ステップＳ１２０３からステップＳ１２０９が繰り返される（Ｓ１２１０〜Ｓ１２１２）。また、処理した画像数Ｎが画像総数を超えた段階で、ステップＳ１２０２からの表示効果処理が実行される。

すなわち、例えば、図１４Ａに示す画像データを処理した際、図１４Ａ中「ａ」で示す領域が撮影情報解析部７１７から取得された合焦位置であり、かつ、図１４Ａ中「ｂ」で示された領域が操作履歴保存部７１８から取得された拡大表示領域である場合、図１４Ａ中「ｃ」で示されるように重複する領域は１つである。そのため、図１３に示すテーブルに従って、「全体表示→重複領域に対するズーミング（倍率：高）」という表示効果が選択される。これにより図１４Ｂに示すように、重複領域に対するズーミング処理が実行される。

以上説明したように、この第３の実施形態による顔検知部、撮影情報解析部、操作履歴保存部、および表示制御部の動作によって、複数の表示効果が選択的に切替可能なスライドショーにおいて、個々の画像に含まれる顔検知位置、合焦位置、拡大操作位置の各情報の数と位置、およびそれらの重複関係を反映した表示効果を、選択したり実施したりすることが可能となる。

具体的には、例えば、顔検知位置の情報のみが存在する場合に比して、顔検知位置と同じ領域に合焦位置も重複して存在する場合の方が、その領域をユーザが注目している可能性が高いと考えられる。この場合、顔検知位置情報だけがある場合に比して倍率の高いズ
ーミング表示を行うなど、合焦位置が重複して存在する領域をより強く強調するような表示効果が選択されて実行させることが可能となる。

一方、顔検知位置、合焦位置、拡大操作位置がそれぞれ違う領域であるような場合、ユーザにとっての注目領域が分散している可能性がある。そのため、特定の領域を強く強調する表示を実行することなく、それぞれの領域が常に表示されるような表示効果が選択され、実行させることが可能となる。

以上、この発明の実施形態について具体的に説明したが、この発明は、上述の実施形態に限定されるものではなく、この発明の技術的思想に基づく各種の変形が可能である。

例えば、上述の実施形態において挙げた数値はあくまでも例に過ぎず、必要に応じてこれと異なる数値を用いてもよい。

たとえば、上述の第１の実施形態においては、顔検知処理として、顔であるか否かの判定において肌色を検出する方法を用いたが、この発明の主旨からすればこれに限ることなく、他の方法であっても良い。

また、例えば上述の第１の実施形態においては、画像データの読込処理、顔検知処理、効果決定処理、表示効果処理の順に処理を進行する例について説明したが、この発明の技術的思想に基づいて、必ずしも、この例に限定することなく、例えばＮ番目の表示効果実施処理中に、Ｎ＋１番目の画像データの読込処理と、顔検知処理と、効果決定処理とを並行して行うようにすることも可能である。

また、例えば上述の第２の実施形態においては、顔領域の大きさの大小を判断するしきい値として、「１３０」という値を使用したが、このしきい値は、上述の第２の実施形態において使用された、「１６００×１２００」という画像解像度から定められたしきい値の一例であり、顔領域の大小の判断のしきい値としては、必ずしも１３０という数値に限定するものではなく、この発明の主旨に基づいて、種々の値を選択することが可能である。特に、第２の実施形態において用いられた画像解像度（１６００×１２００）以外の解像度の画像を用いる場合には、他の数値を採用することが望ましい。また、複数の画像解像度が混在する場合においては、個々の画像サイズを取得した後に、その解像度に応じた値が使用される。

また、例えば上述の第３の実施形態においては、撮影時に記録された焦点位置情報という情報を用いる例について説明したが、例えば、デジタルカメラの構成が、撮影シーンモードとして被写体位置または焦点位置が固定されたモードを設定可能な場合においては、この撮影シーンモードの情報を用いるようにしてもよい。具体的に、例えば、図１５に示すように、「人物右」や「人物左」といった撮影シーンモードを備えたデジタルカメラを用いて撮影を行い、画像のＥ×ｉｆヘッダ情報に、「人物右」という情報が存在するような場合、写真の右側を被写体位置として記憶部に保存し、表示効果選択処理に利用するようにしても良い。

上述した実施形態においては、この発明をデジタルテレビ受信装置に適用した例について説明したが、この発明の技術的思想は、このデジタルテレビ受信装置に限定することなく、例えばデジタルカメラで撮影した画像を再生するセットトップボックスなどの形態や、パソコンのソフトウェアなどの形態においても利用可能であり、さらには、スライドショー再生機能を持ったデジタルカメラなどの形態においても利用可能である。

この発明の第１の実施形態によるテレビ受像機の構成を示すブロック図である。 この発明の第１の実施形態によるテレビ受像機のリモコン装置を示す略線図である。 この発明の第１の実施形態による表示制御部の動作を示すフローチャートである。 この発明の第１の実施形態による表示制御部による表示効果のパラメータの決定に用いられる情報テーブルの例を示した略線図である。 この発明の第１の実施形態による表示効果選択処理の作用を示した略線図である。 この発明の第１の実施形態による表示例を示した略線図である。 この発明の第２の実施形態による表示制御部による表示効果のパラメータの決定に用いられる情報テーブルの例を示す略線図である。 この発明の第２の実施形態による表示効果選択処理の作用を示す略線図である。 この発明の第２の実施形態による表示例を示す略線図である。 この発明の第３の実施形態によるデジタルテレビ受信装置を示すブロック図である。 この発明の第３の実施形態において、合焦位置を記録可能なデジカメカメラのモニタモニタの一例を示す図と、操作履歴情報を保存する際の一例を示す略線図である。 この発明の第３の実施形態による表示制御部の動作を示すフローチャートである。 この発明の第３の実施形態による表示制御部による表示効果のパラメータの決定に用いられる情報テーブルの一例を示す略線図である。 この発明の第３の実施形態による表示効果選択処理の作用の一例を示す略線図である。 この発明の第３の実施形態の他の例による被写体位置を指定する撮影モードを有するデジタルカメラのモニタ画面の一例を示す略線図である。

符号の説明

１００，７００ デジタルテレビ受信装置
１０１，７０１ チューナ部
１０２，７０２ デマルチプレクサ部
１０３，７０３ 映像・音声デコーダ
１０４，７０４ 音声出力部
１０５，７０５ 画像データ入力部
１０６，７０６ 画像デコーダ
１０７，７０７ ビデオメモリ
１０８，７０８ 表示合成部
１０９，７０９ カードスロット
１１０，７１０ 表示制御部
１１１，７１１ ユーザ入力部
１１２，７１２ 表示器
１１３，７１３ 記憶部
１１４，７１４ リモコン
２０１ 発光部
２０２ 電源キー
２０３ カーソル・決定キー
２０４ アップキー
２０５ ダウンキー
２０６ 数字キー
２０７ カラーキー
２０８ モニターモードキー
２０９ ビューワ・キー
７１５ 注目領域検出部
７１６ 顔検知部
７１７ 撮影情報解析部
７１８ 操作履歴保存部

Claims (18)

1. 画像を入力する画像入力ステップと、
   上記画像の特徴領域検出を実行する特徴領域検出ステップと、
   上記特徴領域の数および／またはサイズに基づいてあらかじめ定められた複数の表示効果の中から、上記表示効果を選択する表示効果選択ステップと、
   上記選択された表示効果に従って画像を時系列的に変化させて表示する表示ステップとを有する
   ことを特徴とする画像表示方法。
2. 上記表示ステップが、
   上記特徴領域検出ステップにより得られた領域位置情報に基づいて、画像の出力を制御するようにしたステップである
   ことを特徴とする請求項１記載の画像表示方法。
3. 上記表示効果選択ステップが、
   上記特徴領域のサイズが画像解像度に基づいたしきい値の大小によって異なる表示効果を選択する処理を含む
   ことを特徴とする請求項１または２記載の画像表示方法。
4. 上記特徴領域検出ステップが、
   上記画像中から特定のパターンを検出する処理を含む
   ことを特徴とする請求項１乃至３のいずれか１項記載の画像表示方法。
5. 上記特定のパターンが、人物の顔である
   ことを特徴とする請求項４記載の画像表示方法。
6. 上記特徴領域検出ステップが、
   画像データに含まれる撮影情報から被写体位置を検出する処理を含む
   ことを特徴とする請求項１乃至３のいずれか１項記載の画像表示方法。
7. 上記撮影情報が合焦位置情報である
   ことを特徴とする請求項６記載の画像表示方法。
8. 上記特徴領域検出ステップが、拡大操作履歴情報の取得処理を含む
   ことを特徴とする請求項１乃至３のいずれか１項記載の画像表示方法。
9. 上記特徴領域検出ステップが、
   画像中の特定パターンを検出する処理、撮影情報から被写体位置を抽出する処理および、拡大操作履歴を取得する処理のうちの少なくとも２つの処理を実行するとともに、
   上記表示効果選択ステップが、
   上記特徴領域検出ステップの実行結果において、少なくとも２つの処理による結果が重複する領域を含む場合と、含まない場合とにおいて、異なる表示効果を選択する
   ことを特徴とする請求項１乃至３のいずれか１項記載の画像表示方法。
10. 上記複数の表示効果が、特徴領域に対するズーミング処理、複数の特徴領域を通る線上を移動するパニング処理および特定領域のみを表示するマスキング処理のうちの少なくとも１つの処理を含む
    ことを特徴とする請求項１乃至９のいずれか１項記載の画像表示方法。
11. 画像を表示する表示手段と、
    画像データを取得する画像データ取得手段と、
    画像の特徴領域検出を行う特徴領域検出手段と、
    上記特徴領域の数および／またはサイズに基づいてあらかじめ定められた複数の表示効果の中から上記表示効果を選択する表示効果選択手段と、
    上記選択された表示効果に従って画像を時系列的に変化させて上記表示手段に表示する表示制御手段とを有する
    ことを特徴とする画像表示装置。
12. 上記表示制御手段が、上記特徴領域検出手段により得られた領域位置情報に基づいて、画像の表示を制御するように構成されている
    ことを特徴とする請求項１１記載の画像表示装置。
13. 上記表示効果選択手段が、
    上記特徴領域のサイズが、画像の解像度に基づくしきい値の大小によって、異なる表示効果を選択するように構成されている
    ことを特徴とする請求項１１または１２記載の画像表示装置。
14. 上記特徴領域検出手段は、画像中から特定のパターンを検出する処理を行う
    ことを特徴とする請求項１１乃至１３のいずれか１項記載の画像表示装置。
15. 上記特定のパターンが人物の顔である
    ことを特徴とする請求項１４記載の画像表示装置。
16. 上記特徴領域検出手段が、
    画像データに含まれる撮影情報から被写体位置を検出可能に構成されている
    ことを特徴とする請求項１１乃至１３のいずれか１項記載の画像表示装置。
17. 上記撮影情報が合焦位置情報である
    ことを特徴とする請求項１６記載の画像表示装置。
18. 上記特徴領域検出手段に、拡大操作がされた履歴の情報を含む操作履歴情報が供給されるように構成されている
    ことを特徴とする請求項１１乃至１３のいずれか１項記載の画像表示装置。

Images