JP2009169209A - 画像表示装置、画像表示方法、および画像表示用プログラム - Google Patents

Abstract

【課題】撮影画像の再生にあたって、単調とならないようにした画像表示装置、画像表示方法、および画像表示用プログラムを提供する。
【解決手段】人物画像からこの人物画像と関連する補助画像に遷移するように表示する画像表示装置であって、人物画像および補助画像を表示する表示部と、人物画像のみの表示状態から（ｔ１〜ｔ３の状態）、人物画像と補助画像を同時に表示する状態（ｔ４、ｔ５の状態）を経て、補助画像のみの表示状態（ｔ６の状態）に遷移表示するように制御する表示制御部を備える。
【選択図】図２

Description

本発明は、画像表示装置、画像表示方法および画像表示用プログラムに関し、詳しくは、複数の撮影画像を表示するにあたって、効果的に撮影画像を切り換えて表示するようにした画像表示装置、画像表示方法、および画像表示用プログラムに関する。

近年、デジタルカメラの技術革新によって、高感度化、露出制御範囲の拡大など進展し、また、記録メディアの大容量化が進んできている。さらに、フィルム時代のカメラと比較し、格段に連写機能も向上しており、カメラユーザーは、気楽に撮影を楽しむことができ、大量の画像を得るようになってきている。また、近年では、被写体である人物の表情を判定する機能を備えたカメラが登場し、笑顔の写真を撮影することが容易になってきている。

このような大量の画像の楽しみ方としては、従来のようにプリントするか、または、モニタ装置によるスライドショーを鑑賞することが知られている。この中で、スライドショーは、デジタル画像を順次、モニタ表示するだけであり、単調となってしまう。そこで、スライドショーの表示にあたって、変化をつけられるようにした画像再生装置が特許文献１に開示されている。特許文献１に開示の画像再生装置では、撮影画像の中でターゲット範囲の部分を徐々にズームアップしながら表示し、画像内のターゲット範囲が徐々に飛び出して来るような感覚でスライドショーを行うにしている。
特開２００５−３５４３３３号公報

特許文献１に開示の画像再生装置によれば、スライドショーにあたって、変化をつけることは可能となる。しかし、この先行技術は、単に撮影した順に画像を切り換えてスライドショーする際のトランジション効果にすぎない。このため、笑顔撮影等、類似の画像が連続している場合には、相変わらず単調な再生表示になってしまう。

本発明は、このような事情を鑑みてなされたものであり、撮影画像の再生にあたって、単調とならないようにした画像表示装置、画像表示方法、および画像表示用プログラムを提供することを目的とする。

上記目的を達成するため第１の発明に係わる画像表示装置は、人物画像からこの人物画像と関連する補助画像に遷移するように表示する画像表示装置であって、上記人物画像および上記補助画像を表示する表示部と、上記人物画像のみの表示状態から、上記人物画像と上記補助画像を同時に表示する状態を経て、上記補助画像のみの表示状態に遷移表示するように制御する表示制御部と、を備える。

第２の発明に係わる画像表示装置は、上記第１の発明において、上記表示制御部は、上記遷移表示する過程において、上記人物画像を次第に拡大しながら表示する制御と上記人物画像のコントラストを次第に低くしながら表示する制御の少なくとも一つの制御を行う。

第３の発明に係わる画像表示装置は、上記第１の発明において、上記人物画像および上記補助画像は、撮影位置および撮影時刻が略等しい。
第４の発明に係わる画像表示装置は、上記第１の発明において、上記人物画像を分類する画像処理部をさらに備え、上記補助画像は上記人物画像と同じ分類に属し、且つ上記人物画像と撮影位置および撮影時刻が略等しい。

第５の発明に係わる画像表示装置は、上記第１の発明において、上記表示制御部は人物の顔を中心に拡大表示する。
第６の発明に係わる画像表示装置は、上記第１の発明において、上記人物画像は笑顔の人物画像である。
第７の発明に係わる画像表示装置は、上記第１の発明において、上記表示制御部は、上記人物画像から上記補助画像への遷移表示にあたって、上記人物画像の大きさに応じて拡大速度を変化させる。

第８の発明に係わる画像表示方法は、人物画像からこの人物画像と関連する補助画像に遷移するように表示する画像表示方法であって、上記人物画像のみの表示状態から、上記人物画像と上記補助画像を同時に表示する状態を経て、上記補助画像のみの表示状態に遷移表示するように制御する。

第９の発明に係わる画像表示用プログラムは、人物を含む人物画像を表示し、上記人物画像と補助画像を遷移させながら同時に表示し、上記補助画像のみを表示状態にする。

第１０の発明に係わる画像表示用プログラムは、上記第９の発明において、上記人物画像の表示に先立って、複数の撮影画像をイベントごとに分類し、上記イベントに応じて上記複数の撮影画像の中から上記補助画像を選択する。
第１１の発明に係わる画像表示用プログラムは、上記第９の発明において、上記人物画像と補助画像を表示するにあたって、上記人物画像と上記補助画像を同時に表示する前に、上記人物画像の拡大表示およびコントラスト低下の少なくとも一つを行いながら表示する。
第１２の発明に係わる画像表示用プログラムは、上記第１１の発明において、上記人物画像の大きさに応じて、上記拡大表示の拡大速度を変化させる。

第１３の発明に係わる画像表示装置は、人物画像から他の画像に遷移するように表示する画像表示装置であって、上記人物画像および上記他の画像を表示する表示部と、上記人物画像のみの表示状態から、上記人物画像の顔部分を拡大しながら表示し、このとき上記顔部分の大きさに応じて、拡大速度およびコントラストの少なくとも変更しながら遷移表示するように制御する表示制御部と、を備える。

本発明によれば、撮影画像の再生にあたって、人物画像から補助画像に遷移表示されるので、単調とならないようにした画像表示装置、画像表示方法、および画像表示用プログラムを提供することができる。

以下、図面に従って本発明を適用したカメラを用いて好ましい実施形態について説明する。図１は本発明の一実施形態に係わるカメラ１０の構成を示すブロック図である。カメラ１０はデジタルカメラであり、制御部１、撮像部２、光学系制御部３、記録部４、顔検出部５、切出部６、合成処理部７、表示部８、表示制御部８ａ、時計部９、操作判定部１１、位置情報部１２、通信部１４を有し、インターネット網１５を介して外部サーバー内の検索機能付きデータベース２０と接続可能である。

制御部１は、カメラ１０内の各部と接続され、操作判定部１１によって判定された操作部材等の操作に応じ、また、タイミング制御部１ｂによるタイミング制御に従って、カメラ１０の全体制御を行う。本実施形態の特徴は、再生表示にあり、このときの表示切替のタイミングはタイミング制御部１ｂによって行われる。

また、制御部１は画像処理部１ａ、分類部１ｃ、および表示時顔大きさ判定部１ｄを有している。画像処理部１ａは、画像の圧縮処理等の種々の画像処理を行う。分類部１ｃは、後述する撮影日時や撮影位置情報に基づいて撮影画像のシーンを判定し分類する。表示時顔大きさ判定部１ｄは、後述する顔検出部５等における検出に基づいて、撮影画像中の顔の大きさを判定する。

撮像部２は、被写体像を結像するための光学系、および被写体像を光電変換する撮像素子等を含み、画像データを出力する。光学系制御部３は、撮像部２内の光学系のピント合わせ等の制御を行う。記録部４は、制御部１内の画像処理部１ａによって圧縮処理等された画像データを撮影画像として記録する。撮影画像の記録にあたっては、後述する顔検出部５において、人物像の顔の位置と大きさが検出されるので、この情報を撮影画像の画像データに関連付け、ファイル化して記録する。

また、記録部４は、表示用仮記憶部４ａと補助情報記憶部４ｂを有する。表示用仮記憶部４ａは、撮影画像の鑑賞時に、多くの画像を表示させるために、画像処理した画像を仮に記憶する。また、補助情報記憶部４ｂは、撮影した画像データ以外に再生表示する際に使用する関連情報や関連画像などの補助情報を記憶する。

本実施形態においては、例えば、笑顔の撮影画像を表示する際には、この笑顔の撮影画像に引き続いて、笑顔の理由を補足する画像を補助画像として順次表示する。このとき再生表示する画像は、前述の表示用仮記憶部４ａに記憶しておく。また、関連画像はカメラ１０の撮影者が撮影した画像以外にも、検索機能付きデータベース２０から関連画像をダウンロードし、使用してもよい。

顔検出部５は、撮影画像中に人物像が含まれる場合に、顔パターンを判定して、顔の部分を検出する。この検出結果に基づいて、光学系制御部３は露出制御や自動焦点調節（ＡＦ）等を行う。また、顔検出部５は、位置検出部５ａと大きさ判定部５ｂを有する。位置検出部５ａは、顔検出部５によって検出された人物の顔について、画面の中での位置を検出する。大きさ判定部５ｂは、検出された顔の部分の大きさを判定する。

切出部６は、顔検出部５によって検出された人物像の顔の部分に対応する画像データを切り出す。ここで切り出された顔画像のデータは、制御部１の表示時顔大きさ判定部１ｄにおいて判定処理されるほか、合成処理部７において画像の合成処理の際に使用される。合成処理部７は、撮影画像と補助画像との画像合成を行い、この合成された画像は、撮影画像の再生表示に続いて補助画像を表示する際に表示する。例えば、笑顔の撮影画像の再生表示の際には、顔検出部５によって検出され、切出部６によって切り出された顔部を中心にして、笑顔画像を次第に拡大し、この拡大する遷移画像と補助画像を合成して表示する。

表示部８は、カメラ１０の背面等に配置された液晶モニタ等の表示装置で構成され、記録部４に記録されている画像データの再生表示を行い、また光学式ファインダの代わりに、被写体像の観察用のライブビュー表示も行う。また、記録部４に記録されている撮影画像の再生表示や、補助画像と合成した合成画像の再生表示を行う。この再生表示は、詳しくは後述するが、笑顔画像の表示では、最初に笑顔の撮影画像を表示し（図１の画像Ａ）、顔の部分を拡大しながら表示し（図１の画像Ｂ）、笑顔の理由を補足する補助画像を表示する（図１の画像Ｃ）。表示部８の表示制御を行うのが、表示制御部８ａである。

時計部９は計時機能やカレンダ機能を有し、撮影時の日時情報の取得等に用いる。ここで得られた日時情報は、撮影画像を記録部４に記録する際に、撮影画像と一緒にファイル化して記録される。操作判定部１１は、ユーザーによるカメラ１０の操作部材等の操作状態を判定する。この操作状態に応じて、前述したように、制御部１はカメラ１０の制御を行う。

位置情報部１２は、携帯電話の電波情報やＧＰＳによる電波情報を受信してカメラ１０の所在位置に関する情報を取得する。ここで得た情報は、記録部４に撮影画像と一緒にファイル化して記録される。通信部１４は、インターネット網１５等を介してサーバー内の検索機能付きデータベース２０等の機器と送受信を行う。この通信部１４を介して、撮影画像を外部に送信し、また外部から画像等を受信することができる。

次に、このように構成された本実施形態に係わるカメラ１０の詳しい動作を説明する前に、画像表示の基本的なやり方について説明する。スライドショーにおいて、撮影画像を順次、再生表示する場合、例えば、笑顔の場合には、最初に笑顔の撮影画像が表示されただけでは、いったい何があって楽しかったのかが分からない。

そこで、本実施形態においては、最初に、撮影画像を再生表示し（図２（ａ）ｔ１），被写体の眼の部分を中心に拡大しながら、かつコントラストを低下させながら表示する（図２（ａ）ｔ２、ｔ３）。そして、眼に映っているものが再現されるような感じで、その瞳から笑顔の理由が想像できるような別の画像（補助画像）を浮かび上がるような効果で画面の切換を行うようにしている。すなわち、補助画像を拡大しながら、撮影画像に重畳させた合成画像を表示し（図２（ａ）ｔ４、ｔ５）、最終的には、補助画像のみを表示する（図２（ａ）ｔ６）。

このように、図２（ａ）に示した例では、補助画像は古くからの保養地を示す画像であり、撮影画像の鑑賞者は、ｔ１で再生表示された撮影画像の被写体が笑顔であったのは、古くからの保養地に被写体が訪れ、楽しんでいる様子であることを直感的に理解することができる。

また、図２（ｂ）に示す例は、運動会における笑顔の写真である。運動会では、親が子供の画像を集中的に撮影している場合が多く、この場合には、同じ人物の活躍シーンなどを補助画像とする。図２（ｂ）のタイミングｔ１１からｔ１３において、笑顔の撮影画像を次第に拡大しながら且つコントラストを低下させながら表示し、タイミングｔ１４からｔ１５において、被写体の瞳部分を中心として、徒競争のゴールシーンを補助画像として、笑顔の撮影画像に重畳して表示する。

図２（ｂ）の例では、被写体の徒競走のゴールシーンなどを補助画像として表示することにより、なぜ、笑顔であるかを補足説明している。補助画像を合わせて表示することにより、撮影の場にいなかった人も、被写体が何故、笑顔であるかを容易に理解でき、撮影画像の鑑賞に楽しみが増す。

補助画像の光景は、鑑賞者が見た光景ではないが、脳裏にあるイメージでもあることから、被写体の瞳の部分を拡大して、その記憶イメージを呼び起こすような再生表示としている。表示形態としては、このような瞳部分の拡大以外にも、額や胸のあたりを拡大して、そこから記憶が呼び起こされるような効果にしても勿論かまわない。本実施形態の説明では、撮影画像を拡大すると共に、被写体のコントラストを次第に低下させて表示しているが、いずれか一方のみの画像効果でも良く、画面の切替を暗示するような画像効果であれば良いことは勿論である。

なお、撮影画像の拡大時に、被写体のしわやシミなど、人物の肌のあらが拡大されてしまうと、興趣がそがれてしまう。そこで、撮影画像の拡大の際には、所定の拡大率以上になると、撮影画像をぼかして、被写体の肌のあらが目立たないようにしてもよい。この場合には、撮影画像の明暗の差異を小さくし、明るい方向に振って、コントラストを落とすようにする。

このように、本実施形態においては、撮影画像に相応しい補助画像を選択しているが、この補助画像を選択するには、撮影シーンを判定する必要がある。この撮影シーンを判定する機能は、制御部１の中の分類部１ｃによって行われる。図３は、時間情報によって、画像が分類される様子を例示するグラフである。また、顔検出部５によって、顔が検出されたものは、網がけで表示する。

図３から明らかなように、まとまった画像がある場合は、何かイベントがあったということが想定できる。例えば、９月２１日は午前から午後にかけて集中的に撮影がなされ、人物の写真は９月２４日の場合より少ない。また、９月２４日は午後から夕方にかけて集中的に撮影がなされており、しかも人物の写真が多い撮影となっている。これらの情報から、９月２１日は運動会における撮影であり、９月２４日は結婚式における撮影と想定される。また、９月２４日が結婚式だとすれば、９月２５日に撮影した画像を再生させる場合、前日の画像と分類して表示する。９月２４日と９月２５日の画像が混ざると、再生時に、例えば、仕事の画像に突然、プライベート画像が紛れ込むような問題が生じてしまうので、撮影の内容（イベント）の分類分けを行っておく。

このように、本実施形態においては、撮影画像と共に記録されている日時情報、撮影位置を用い、また撮影画像を分析することによって顔が存在するか等の人物在否情報等を用いて、撮影の内容（イベント）の分析を行う。これらの情報や分析内容に基づいて、補助画像を選択し、画像の再生表示を実行する。

以上のような基本的にやり方に沿った本実施形態に係わるカメラ１０の詳しい動作を、図４ないし図７に示すフローチャートを用いて説明する。図４は、カメラ１０のカメラ制御の動作を示すフローチャートであり、このフローに入ると、まず、撮影者が撮影モードに設定したか否かの判定を行う（Ｓ１）。判定の結果、撮影モードに設定していた場合には、レリーズ釦の全押し操作を行ったか否かの判定を行う（Ｓ２）。

ステップＳ２における判定の結果、レリーズ釦の全押し操作がなされていない場合には、ステップＳ１に戻る。一方、判定の結果、レリーズ釦が全押しされた場合には、撮像部２によって撮影を行い、静止画の画像データを取得し、この画像データ（撮影画像）を記録部４に記録する（Ｓ３）。

また、時計部９から日時情報を取得し、画像データと共にファイル化して記録する（Ｓ４）。続いて、顔検出部５の位置検出部５ａから顔位置情報と、大きさ判定部５ｂから大きさ情報を取得し、画像データと共にファイル化して記録する（Ｓ５）。なお、画像データ、日時情報、顔位置情報と大きさ情報は、ファイル化し、一度にまとめて記録部４に記録するようにしても良い。

次に、今回の撮影の直前に撮影した画像があるか否かの判定を行う（Ｓ６）。直前か否かは、画像データと共に記録する日時情報を用いて行い、両撮影の日時が所定時間しか離れていない場合には、直前と判定する。なお、直前か否かの判定値は、適宜設計値として決めておく。ステップＳ６における判定の結果、直前に撮影していない場合には、リターンし、ステップＳ１から実行する。

一方、直前に撮影した画像がある場合には、直前と今回の画像等を用いてイベント判定を行う（Ｓ７）。直前に撮影された画像は、同じ画像グループとして、同じイベントでの画像グループとする。同じ画像グループとすることによって、別の機会の画像を誤って補助画像とすることを防止し、また、第三者が見る際には、補助画像も合わせて鑑賞することによって、どんな時の写真かを知ることができる。つまり、簡単な操作で、カメラをコミュニケーションツールとして利用することが可能となる。なお、補助画像は、カメラ１０によって撮影された画像以外にも、通信部１４を介して外部より取得することも可能である。

このイベント判定では、図３を用いて説明したように、画像データと共に記録されている日時情報、撮影位置を用い、また画像データを分析することによって顔が存在するか等の人物在否情報等を用いて、撮影の内容（イベント）の分析を行う。このイベント判定のルーチンについては、図５を用いて後述する。

ステップＳ１における判定の結果、撮影モードに設定されていなかった場合には、次に、通信か否かの判定を行う（Ｓ１１）。ここでは、操作判定部１１によって、カメラ１０が通信モードに設定されたか否かによって判定する。また、この通信は、通信部１４からインターネット網１５を介して外部の検索機能付きデータベース２０等のサーバーとの通信であり、補助画像等の情報の取得を行う。

ステップＳ１１における判定の結果、通信を行う場合には、旅行の画像が有るか否かの判定を行う（Ｓ１２）。ステップＳ３において撮影画像の記録を行うと、続いて、ステップＳ７においてイベント判定を行って撮影画像の分類を行っている。このイベント判定によって旅行の画像と判定されると、この情報が併せて記録されているので、このステップ１２では、イベント判定結果に基づいて判定する。

ステップＳ１２における判定の結果、旅行画像が無かった場合には、そのままリターンし、ステップＳ１から実行する。一方、旅行画像があった場合には、その旅行画像の撮影した日時情報と撮影した位置情報を発信する（Ｓ１３）。インターネット網１５を通じて検索機能付きデータベース２０にアクセスし、位置が同じ情報が有るか否かの検索を行う（Ｓ１４）。

ステップＳ１４における判定の結果、位置が同じ情報がなかった場合には、そのままリターンし、ステップＳ１から実行する。一方、位置が同じ情報があった場合には、その情報を取得し（Ｓ１５）、その情報に基づいて補助画像化を図り、補助情報記憶部４ｂに記憶する（Ｓ１６）。

このように、撮影画像が旅行画像に分類されている場合には、補助画像として、撮影画像の中から選択するようにしても良いが、旅行先の画像としては、インターネット網１５を通じてアクセス可能なサーバーに種々の画像が蓄積されていることから、これらの画像も利用できるようにしている。

ステップＳ１１において、通信でなかった場合には、笑顔再生か否かの判定を行う（Ｓ２１）。このステップでは、操作判定部１１によって、笑顔再生モードが設定されているかを判定する。判定の結果、笑顔再生が設定されていた場合には、図２（ａ）（ｂ）において説明したような撮影画像と補助画像の組み合わせで再生表示を行う。

まず、画面中心に笑顔のある画像を表示する（Ｓ２２）。ここでは、図２（ａ）のタイミングｔ１や、（ｂ）のタイミングｔ１１のように、笑顔のある画像を表示部８に表示する。続いて、補助画像の読出しを行う（Ｓ２３）。ステップＳ７におけるイベント判定のサブルーチンの中で（旅行画像の場合には、ステップＳ１６の場合もあり）、撮影画像ごとに補助画像が選択されてペアとなっていることから、ステップＳ２２において表示した撮影画像とペアになっている補助画像を補助情報記憶部４ｂから読み出す。

次に、読み出した補助画像を用いて顔の表示遷移を行う（Ｓ２４）。ここでは、図２（ａ）のｔ２からｔ６、または図２（ｂ）のｔ１２からｔ１６のように撮影画像の瞳の部分を中心に拡大しながら表示し、その後、補助画像を次第に拡大して表示する。また、これらの遷移表示を行っている際に、顔の大きさに従って拡大のスピードやぼかし制御を行う。この笑顔再生では、笑顔が撮影された状況を補助表示するようにしているので、鑑賞者は笑顔の理由を納得できる。このサブルーチンの動作は、図７を用いて後述する。

ステップＳ２４における顔の表示遷移のサブルーチンが終わると、ステップＳ２１に戻り、笑顔再生が選択されたままであれば、次の撮影画像について、ステップＳ２２からステップＳ２４を実行する。

ステップＳ２１における判定の結果、笑顔再生ではなかった場合には、通常の画像再生モードを設定し（Ｓ３１）、サムネイル式の再生か否かの判定を行う（Ｓ３２）。通常の画像再生モードには、サムネイル表示と撮影順に順次画像表示する再生表示の２種類であるので、このステップでは、いずれの方式であるかを判定する。

ステップＳ３２における判定の結果、サムネイル式であった場合には、サムネイル表示と選択画像の拡大表示を行う（Ｓ３３）。一方、サムネイル式でなかった場合には、撮影順に撮影画像を順次拡大して表示する（Ｓ３４）。ステップＳ３３またはステップＳ３４における再生表示が終わると、リターンし、ステップＳ１から実行する。

次に、ステップ７におけるイベント判定のサブルーチンについて図５に示すフローチャートを用いて説明する。このフローに入ると、まず、一日（２４時間）を６分割し、撮影画像の整理を行う（Ｓ１０１）。この画像整理は、撮影画像と一緒に記録される日時情報を用い、撮影時間帯によって行う。なお、本実施形態においては、２４時間を６分割して分類を行っているが、これに限らず、４分割でも８分割でも分割値は適宜変更して良い。続いて、選択画像の前後判定を行う（Ｓ１０２）。すなわち、最新の画像数のみを選択するが、ここで、前日の一塊とは別イベントと判定する。

次に、ステップＳ１０３からステップＳ１０５において、撮影画像のイベントの判定を行う。まず、撮影画像の集中の度合いを判定する（Ｓ１０３）。このステップでは、６分割された時間帯に対して、短時間に集中的に撮影がなされているか否かの判定を行う。判定の結果、集中していた場合には、次に、顔検出部５の検出に基づいて、顔アップが少ないか否かの判定を行う（Ｓ１０４）。

判定の結果、顔アップが少ない場合には、運動会等の学校行事と判定し（Ｓ１１１）、一方、顔アップが多い場合にはパーティと判定する（Ｓ１１２）。運動会等の学校行事は短時間に集中的に行われるものが多く、父兄等は子供を遠くから撮影するため顔のアップが少ない傾向にある。パーティは短時間で行われることが多い点は学校行事と同じであるが、顔のアップ写真が多いことから学校行事と区別することが可能である。

ステップＳ１０３における判定の結果、所定時間に集中していなかった場合には、風景画像が多いか否かについて判定する（Ｓ１０５）。判定の結果、風景画像が多い場合には旅行と判定し（Ｓ１１３）、一方、風景画像が多い場合には、その他と判定する（Ｓ１１４）。旅行の場合には、一日に撮影が分散し短時間の集中的撮影となることは少なく、また風景画像が多くなることから、このような判定を行っている。風景画像が少ない場合には、旅行でもなく、また前述の学校行事やパーティでもないことから、その他と判定している。なお、ステップＳ１１１からステップＳ１１４において判定されたイベントは撮影情報として撮影画像と共に記録する。

イベントの選択が終わると、次に、イベントに応じて補助画像の選択を行う（Ｓ１１５）。この補助画像選択のサブルーチンにおいて、カメラ１０に記録されている撮影画像や外部の検索機能付きデータベース２０から取得した画像の中から、判定されたイベントに応じて相応しい補助画像を選択する。補助画像選択のサブルーチンが終わると、元のルーチンに戻る。

ステップＳ１１５の補助画像選択について、図６に示すフローチャートを用いて説明する。このフローに入ると、まず、撮影画像のイベントが学校行事か否かの判定を行う（Ｓ１２１）。判定の結果、学校行事であった場合には、同じシーンで、本人画像を含み背景コントラストの高い画像を検索し、選択する（Ｓ１３１）。この場合には、図２（ｂ）に示したように、同じ学校行事で本人を含むシーンを選択することになる。選択が終わると、元のフローに戻る。

ステップＳ１２１における判定の結果、学校行事でなかった場合には、パーティか否かの判定を行う（Ｓ１２２）。判定の結果、パーティであった場合には、同じシーンで沢山の人物が写っている画像を選択する（Ｓ１３２）。結婚式のパーティ等では、一人一人の写真以外に、多くの参加者等と一緒に撮影することがあるので、そのような画像を選択する。沢山の人物が写っている画像を補助画像とすることにより、パーティの雰囲気を伝えることができる。選択が終わると、元のフローに戻る。

ステップＳ１２２における判定の結果、パーティでなかった場合には、旅行か否かの判定を行う（Ｓ１２３）。判定の結果、旅行であった場合には、同じシーンで風景画像、または対応情報選択を行う（Ｓ１３３）。この場合には、笑顔のある撮影画像と同じエリアで撮影した風景画像、またはステップ１３からステップＳ１６において取得した情報を基にした補助画像を選択する。このような旅行先が分かる画像を補助画像とすることにより、鑑賞者は単なる笑顔だけでなく、その背景をも知ることができる。選択が終わると、元のフローに戻る。どんな状況で笑顔となったかを判定することが可能となる。

ステップＳ１２３における判定の結果、旅行でなかった場合には、ステップＳ１１４のその他に相当し、分類分けができなかったので、この場合には撮影時刻が近接している画像を選択する（Ｓ１３４）。撮影画像に写っている人とは別の人が写っている画像を選択し、状況を別の視点から説明するように補足してもよい。選択が終わると、元のフローに戻る。

次に、ステップＳ２４の顔の表示遷移のサブルーチンにおける動作について、図７に示すフローチャートを用いて説明する。このサブルーチンは、図２（ａ）（ｂ）で説明したように撮影画像から補助画像に切り換えて表示を行う。このフローに入ると、まず、表示時顔大きさ判定部１ｄによって画面内笑顔の人物の顔の大きさの判定を行い、この大きさをＤｆとして設定する（Ｓ２０１）。大きさの表示方法として画面を構成する何画素に相当するかといった形式で設定してもよい。画面内に多くの顔がある場合は、中央に近いものや大きいものを優先して測定し、設定する。

続いて、画面の大きさと比率を算出し、これをｒＤｆとして設定する（Ｓ２０２）。画面の大きさは一定値であることから、ステップＳ２０１で設定したＤｆを用いて算出することができる。ステップＳ２０１において画素数で設定した場合には、顔の大きさを表す画素数が、画面を構成する画素数と比較し、その中のどれくらいを占めるかを算出する。

次に、画像の遷移を開始できるか否かを判定する（Ｓ２０３）。このステップでは、前述した顔の大きさの判定や、補助画像の再生準備ができたかを判定する。準備が整えば、画像の拡大率Ｍの初期値として、１をセットし（Ｓ２０４）、笑顔の人物を中心に画像の拡大を開始する（Ｓ２０５）。開始時には拡大率Ｍは、ステップＳ２０４においてセットしたＭ＝１であるので、等倍でスタートする。

画像の拡大を開始すると、まず、画面の大きさの比率ｒＤｆに拡大率を乗算した値（Ｍ×ｒＤｆ）が０．５より大きいか、すなわち、拡大された顔の大きさが画面の半分より大きいかの判定を行う（Ｓ２０６）。判定の結果、大きくなかった場合には、拡大率を１．１にセットし、ステップＳ２０５に戻り、画像の拡大を行う。

ステップＳ２０６における判定の結果、Ｍ×ｒＤｆが０．５より大きい場合には、次に、Ｍ×ｒＤｆが１より大きいか否か、すなわち拡大された顔の大きさが画面より大きいかの判定を行う（Ｓ２０７）。判定の結果、大きくなかった場合には、拡大率を１．５にセットし、ステップＳ２０５に戻り、画像の拡大を行う。拡大率Ｍが１．５にセットされると、拡大率Ｍが１．１の場合に比較して画像の拡大スピードが速くなる。

ステップＳ２０７における判定の結果、Ｍ×ｒＤｆが１より大きい場合には、次に、Ｍ×ｒＤｆが５より大きいか否か、すなわち拡大された顔の大きさが画面の５倍より大きいかの判定を行う（Ｓ２０８）。判定の結果、大きくなかった場合には、画像にぼかし効果を加えるようにする。すなわち、ステップＳ２０５において、画像をぼかしながら、拡大率Ｍ＝１．５のままで画像の拡大を行う。

ステップＳ２０８における判定の結果、Ｍ×ｒＤｆが５より大きい場合には、撮影画像をフェードアウトする（Ｓ２１４）。すなわち、撮影画像を次第に消失させていく。それと共に、ステップＳ２３で読み出した補助画像を拡大表示する（Ｓ２１５）。これは、図２（ａ）のタイミングｔ４からタイミングｔ６、または図２（ｂ）のタイミングｔ１４からタイミングｔ１６に示したように、補助画像を撮影画像に重畳させ、かつ拡大しながら表示を行う。なお、このときの画像合成は合成処理部７によって行う。補助画像の拡大表示が終わると、元のルーチンに戻る。

このように、顔部分の画像の拡大にあたっては、顔の大きさが画面の半分以下なら、拡大は１回の処理で１．１倍ずつの拡大スピードとし、画面の半分を超えると、拡大のスピードを速めるようにしている。拡大率が大きくなると拡大スピードを速くしているのは、拡大によって、顔の画像の細部がはっきりと見えてしまい、必要以上に顔を拡大すると気恥ずかしく、肌のあらなども目立ってしまうからである。さらに拡大率が大きくなると、ぼかし効果も施すことにより細部等が目立たないようにしている。なお、ステップＳ２０６、Ｓ２０７、Ｓ２０８における判定値や、ステップＳ２１１、Ｓ２１２における拡大率に掛ける係数は、設計思想にしたがって適宜変更しても良い。

以上、説明したように本実施形態においては、人物画像のみの表示状態から（例えば、図２のタイミングｔ１）、人物画像と補助画像を同時に表示する状態を経て（例えば、図２のタイミングｔ４、ｔ５）、補助画像のみの表示状態（例えば、図２のタイミングｔ６）に遷移表示するようにしている。このように、補助画像と組み合わせて表示することから、撮影画像の再生にあたって単調となることがない。例えば、笑顔の写真等、特にアップのものは、どのような状況であったかが分かりにくくなるが、こうした工夫によって、状況の再現が可能となり、スライドショー等の画像再生を鑑賞する楽しみが増す。

また、本実施形態においては、補助画像の選択にあたって、撮影時刻や撮影場所等に基づいて選択するようにしたので、撮影画像とまったく関係のない画像を補助画像として選択することがない。また、旅行画像等の場合には、外部のデータベースから補助画像等の情報を取得するようにしたので、撮影画像に適切な画像が無い場合であっても、撮影画像の適切な補助画像を選択することができる。

さらに、本実施形態においては、撮影画像を撮影時刻や撮影場所等によって分類した上で、補助画像を選択するようにしたので、撮影画像とまったく関係のない画像を補助画像として選択することがない。

さらに、本実施形態においては、補助画像に表示切替を行うにあたって、人物画像を次第に拡大し、また、コントラストを低下させながら表示するようにしているので、撮影画像の状況が想像できるように補助画像が浮かび上がるような効果で画面の切換を行うことができる。

さらに、本実施形態においては、撮影画像の拡大等を行うにあたって、撮影画像の人物の顔を中心に行うようにしている。このため、その人物に鑑賞者の注意が注がれ、補助画像への切り換えがスムーズに行うことができる。

さらに、本実施形態においては、撮影画像再生時の拡大スピードやぼかし具合を顔の大きさに応じて変化させている。このため顔が大きくなり、被写体のしわやシミなど、人物の肌のあらが目立ち興ざめするようなことを防止することができる。

なお、本実施形態においては笑顔の人物の画像表示について説明したが、これに限らず、泣き顔等、他の表情でも良いことは勿論である。この場合には顔検出部で検出した顔部分を画像分析により、笑顔、泣き顔等に分類し、表情に応じた補助画像を選択すれば良い。

また、本実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、また、携帯電話や携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。

さらに、本実施形態においては、カメラが撮影、撮影画像の分類、補助画像の選択、笑顔再生等の画像表示の全てを行っていたが、カメラで撮影した画像の画像データを、パーソナルコンピュータ等に取り込み、撮影画像の分類、補助画像の選択、笑顔再生等の画像表示を行うようにしても良い。この場合、カメラは撮影時に日時情報、撮影位置情報等を撮影画像の画像データと一緒にファイル化して記録しておけば良い。

さらに、本実施形態における遷移表示は、カメラで行う以外にも、カメラから人物画像と補助画像を順次送信し、これらの画像を受信した表示用機器が行うようにしても良い。あるいは、カメラが人物画像、遷移画像、補助画像の順に送信し、これを受信した表示用機器が同様の効果を演出しても良い。

さらに、補助画像を表示するにあたって、画像内の人物の顔の眼、鼻、口等の各パーツを判定する技術を利用し、例えば、被写体が正面を見ていない場合に、各パーツを個々に動かし、正面を見るような画像となるように画像処理を施してから、補助画像を表示し始めるなどの演出を行うようにしてもよい。

本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

本発明の一実施形態に係わるカメラとその周辺の構成を示すブロック図である。 本発明の一実施形態において、カメラの画像再生の基本的なやり方を示す図であり、（ａ）は旅行先での撮影画像の画像再生であり、（ｂ）は運動会での撮影画像の画像再生のやり方を示す。 本発明の一実施形態において、撮影画像の分類について説明する図である。 本発明の一実施形態に係わるカメラにおけるカメラ制御の動作を示すフローチャートである。 本発明の一実施形態に係わるカメラにおけるイベント判定の動作を示すフローチャートである。 本発明の一実施形態に係わるカメラにおける補助画像選択の動作を示すフローチャートである。 本発明の一実施形態に係わるカメラにおける顔の表示遷移の動作を示すフローチャートである。

符号の説明

１・・・制御部、１ａ・・・画像処理部、１ｂ・・・タイミング制御部、１ｃ・・・分類部、１ｄ・・・表示時顔大きさ判定部、２・・・撮像部、３・・・光学系制御部、４・・・記録部、４ａ・・・表示用仮記憶部、４ｂ・・・補助情報記憶部、５・・・顔検出部、５ａ・・・位置検出部、５ｂ・・・大きさ判定部、６・・・切出部、７・・・合成処理部、８・・・表示部、８ａ・・・表示制御部、９・・・時計部、１１・・・操作判定部、１２・・・位置情報部、１４・・・通信部、１５・・・インターネット網、２０・・・検索機能付きデータベース

Claims (12)

1. 人物画像からこの人物画像と関連する補助画像に遷移するように表示する画像表示装置であって、
   上記人物画像および上記補助画像を表示する表示部と、
   上記人物画像のみの表示状態から、上記人物画像と上記補助画像を同時に表示する状態を経て、上記補助画像のみの表示状態に遷移表示するように制御する表示制御部と、
   を備えたことを特徴とする画像表示装置。
2. 上記表示制御部は、上記遷移表示する過程において、上記人物画像を次第に拡大しながら表示する制御と上記人物画像のコントラストを次第に低くしながら表示する制御の少なくとも一つの制御を行うことを特徴とする請求項１に記載の画像表示装置。
3. 上記人物画像および上記補助画像は、撮影位置および撮影時刻が略等しいことを特徴とする請求項１に記載の画像表示装置。
4. 上記人物画像を分類する画像処理部をさらに備え、上記補助画像は上記人物画像と同じ分類に属し、且つ上記人物画像と撮影位置および撮影時刻が略等しいことを特徴とする請求項１に記載の画像表示装置。
5. 上記表示制御部は人物の顔を中心に拡大表示することを特徴とする請求項１に記載の画像表示装置。
6. 上記人物画像は笑顔の人物画像であることを特徴とする請求項１に記載の画像表示装置。
7. 上記表示制御部は、上記人物画像から上記補助画像への遷移表示にあたって、上記人物画像の大きさに応じて拡大速度を変化させることを特徴とする請求項１に記載の画像表示装置。
8. 人物画像からこの人物画像と関連する補助画像に遷移するように表示する画像表示方法であって、
   上記人物画像のみの表示状態から、上記人物画像と上記補助画像を同時に表示する状態を経て、上記補助画像のみの表示状態に遷移表示するように制御することを特徴とする画像表示方法。
9. 人物を含む人物画像を表示し、
   上記人物画像と補助画像を遷移させながら同時に表示し、
   上記補助画像のみを表示状態にする
   ようにしたことを特徴とする画像表示用プログラム。
10. 上記人物画像の表示に先立って、複数の撮影画像をイベントごとに分類し、
    上記イベントに応じて上記複数の撮影画像の中から上記補助画像を選択する
    ことを特徴とする請求項９に記載の画像表示用プログラム。
11. 上記人物画像と補助画像を表示するにあたって、
    上記人物画像と上記補助画像を同時に表示する前に、上記人物画像の拡大表示およびコントラスト低下の少なくとも一つを行いながら表示することを特徴とする請求項９に記載の画像表示用プログラム。
12. 上記人物画像の大きさに応じて、上記拡大表示の拡大速度を変化させることを特徴とする請求項１１に記載の画像表示用プログラム。