JP2009204817A - 画像表示装置およびその制御方法 - Google Patents

Abstract

【課題】カメラを搭載するデジタルフォトフレームにおいて面倒な操作を必要とせずに記憶されている画像を表示する通常表示モードと撮影した画像を鏡像表示する鏡像表示モードとを切り替える。
【解決手段】近接センサにより近接物が感知されなかったときには（Ｓ１３０）、内蔵メモリやメモリカードに保存されている画像ファイルを表示パネルに表示する通常表示モードを実行し、近接センサにより近接物の近接が感知されると共にカメラにより撮影された画像の中から顔認識処理により人物の顔が認識されたときには（Ｓ１３０，Ｓ１８０）、撮影された画像を鏡のように左右反転して表示する鏡像表示モードを実行する（Ｓ２２０）。
【選択図】図２

Description

本発明は、画像表示装置およびその制御方法に関し、詳しくは、画像を記憶する記憶手段と、所定範囲内の近接を感知可能な近接感知手段と、前記所定範囲の画像の撮影が可能な撮影手段と、前記撮影手段により撮影された所定範囲の画像の中から人物の顔を認識する顔認識手段と、を備え、前記画像を表示する画像表示装置およびその制御方法に関する。

従来、この種の画像表示装置としては、撮影レンズやＣＣＤイメージセンサなどからなるカメラユニットを備える携帯電話機に搭載されたものが提案されている（例えば、特許文献１参照）。この装置では、カメラモードの機能の一つとして、カメラユニットにより撮影した映像を鏡と同様に左右に反転して表示するミラーモードを備えており、ミラーモードを起動することにより装置を手鏡として使用できるようになっている。また、カメラモードで撮影された画像をメモリに格納することができるようにもなっており、後でメモリから画像を読み出して液晶ディスプレイに表示して鑑賞することもできる。こうしたモードの切替はユーザによるボタン操作により行なわれるようになっている。
特開２００５−５７９１号公報

ところで、上述したモードの切替はユーザのボタン操作により行なわれており、こうした操作を面倒と感じるユーザも少なくない。特に、表示装置を広告用画像の表示に用いる場合を考えると、客に対して面倒な操作を必要とせずにモードを適切なタイミングで自動切替できるようにすることが望ましい。

本発明の画像表示装置およびその制御方法は、撮影装置を備えるものにおいて、面倒な操作を必要とせずに記憶されている画像を表示する通常表示制御と撮影した画像を鏡像表示する鏡像表示制御とを自動切替することを主目的とする。

本発明の画像表示装置およびその制御方法は、上述の主目的を達成するために以下の手段を採った。

本発明の画像表示装置は、
画像を表示する画像表示装置であって、
前記画像を記憶する記憶手段と、
所定範囲内の近接を感知可能な近接感知手段と、
前記所定範囲の画像の撮影が可能な撮影手段と、
前記撮影手段により撮影された所定範囲の画像の中から人物の顔を認識する顔認識手段と、
通常時には前記記憶手段に記憶されている画像を表示する通常表示制御を実行し、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときには該撮影された画像を鏡像表示する鏡像表示制御を実行する表示制御手段と、
を備えることを要旨とする。

この本発明の画像表示装置では、通常時には記憶手段に記憶されている画像を表示する通常表示制御を実行し、近接感知手段により所定範囲内の近接が感知されると共に撮影手段により撮影された所定範囲の画像の中から顔認識手段により人物の顔が認識されたときにはその撮影された画像を鏡像表示する鏡像表示制御を実行する。したがって、面倒な操作を必要とせずに通常表示制御と鏡像表示制御とを自動切替することができる。ここで、「画像」には、静止画像が含まれる他、動画像も含まれる。

こうした本発明の画像表示装置において、前記表示制御手段は、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときであっても、前記認識された人物の顔が予め登録されている人物の顔と一致するときには、前記通常表示制御を実行する手段であるものとすることもできる。こうすれば、特定の人物に対しては鏡像表示制御へ自動切替しないようにすることができる。

また、本発明の画像表示装置において、前記表示制御手段は、前記鏡像表示制御を実行している最中に前記近接感知手段により所定範囲内の近接は感知されるが前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されなくなったときには、前記撮影された画像を録画すると共に該録画した画像を再生する手段であるものとすることもできる。こうすれば、正面以外の姿勢で撮影された画像を自身により確認することができる。

さらに、本発明の画像表示装置において、前記表示制御手段は、前記鏡像表示制御を実行した後、所定時間に亘って継続して前記近接感知手段により所定範囲内の近接が感知されなくなるまでは前記鏡像表示制御を継続する手段であるものとすることもできる。こうすれば、より適切なタイミングで鏡像表示制御から通常表示制御に戻すことができる。

また、本発明の画像表示装置において、据え置き型の表示装置として構成されてなるものとすることもできる。こうすれば、本発明の効果をより顕著なものとすることができる。

本発明の画像表示装置の制御方法は、
画像を記憶する記憶手段と、所定範囲内の近接を感知可能な近接感知手段と、前記所定範囲の画像の撮影が可能な撮影手段と、前記撮影手段により撮影された所定範囲の画像の中から人物の顔を認識する顔認識手段と、を備え、前記画像を表示する画像表示装置の制御方法であって、
通常時には前記記憶手段に記憶されている画像を表示し、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときには該撮影された画像を鏡像表示する
ことを特徴とする。

この本発明の画像表示装置の制御方法によれば、通常時には記憶手段に記憶されている画像を表示する通常表示制御を実行し、近接感知手段により所定範囲内の近接が感知されると共に撮影手段により撮影された所定範囲の画像の中から顔認識手段により人物の顔が認識されたときにはその撮影された画像を鏡像表示する鏡像表示制御を実行する。したがって、面倒な操作を必要とせずに通常表示制御と鏡像表示制御とを自動切替することができる。

次に、本発明を実施するための最良の形態を図面を用いて説明する。図１は、本発明の画像表示装置の一実施形態としてのデジタルフォトフレーム２０の構成図および機能ブロック図である。

本実施形態のデジタルフォトフレーム２０は、壁掛け型のフォトフレームとして構成されており、図示するように、液晶ディスプレイとしての表示パネル２２と、表示パネル２２の表示制御を司る表示コントローラ２４と、所定範囲内の近接物を感知する近接センサ２６と、対象物からの光を受光して光電変換を行なうことにより撮像するデジタルカメラ３２と、デジタルカメラ３２を駆動するカメラコントローラ３４と、メモリカードスロット３６に挿入されているメモリカード３５とデータのやり取りを行なうためのメモリカードコントローラ３８と、電源をオンオフするための電源ボタンなどユーザにより各種操作を行なうための操作ボタン４０と、セール情報やイベント情報などを掲載した画像ファイルを保存するための内蔵メモリ４２と、装置全体のコントローラを司るメインコントローラ５０とを備える。

近接センサ２６は、例えば１〜２ｍ程度の有効感知範囲を有する赤外線式のセンサとして構成されており、人が発する赤外線をキャッチして人の近接を感知する。なお、近接センサ２６としては、赤外線式のセンサに限定されるものではなく、人の近接を感知できるものであれば、例えば超音波の反射を検出することにより近接物を感知する超音波式のセンサなど如何なる方式のセンサを用いるものとしても構わない。

デジタルカメラ３２は、図示しないが、レンズとＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子とにより構成されており、デジタルフォトフレーム２０を壁掛けした際に人の顔（目線）の高さとなるようフレーム部２１の左右部に１つずつ配置されている。なお、左右のデジタルカメラ３２により撮影されて得られる２つの画像は周知の合成処理により合成されて１つの画像として用いられる。

メモリカードコントローラ３８は、メモリカードスロット３６を介してメモリカード３５とデータをやり取りできるようになっている。このメモリカードコントローラ３８は、メモリカードスロット３６にメモリカード３５が接続されているとき、メモリカード３５に保存されている画像ファイルを読み出してメインコントローラ５０に送信したりメインコントローラ５０からの命令を入力し該命令に基づいてメモリカード３５にデータを書き込んだりする。

メインコントローラ５０は、ＣＰＵ５２を中心としたマイクロプロセッサとして構成されており、ＣＰＵ５２の他に処理プログラムを記憶するＲＯＭ５４と、一時的にデータを記憶するＲＡＭ５６と、入出力ポート（図示せず）とを備える。このメインコントローラ５０には、近接センサ２６からの近接信号やカメラコントローラ３４からの画像信号，操作ボタン４０からの操作信号などが入力ポートを介して入力されており、メインコントローラ５０からは、表示コントローラ２４やカメラコントローラ３４，メモリカードコントローラ３８への制御信号などが出力ポートを介して出力されている。また、メインコントローラ５０は、メモリカードスロット３６に挿入されているメモリカード３５からメモリカードコントローラ３８を介して画像ファイルやデジタルカメラ３２により撮影されて得られた画像ファイル，その他のデータを内蔵メモリ４２に保存したり、内蔵メモリ４２内のファイルを読み出すと共に読み出したファイルをメモリカードコントローラ３８を介してメモリカード３５に保存したりすることができるようになっている。

次に、こうして構成された本実施形態のデジタルフォトフレーム２０の動作について説明する。図２は、メインコントローラ５０により実行される表示処理ルーチンの一例を示すフローチャートである。

表示処理ルーチンが実行されると、メインコントローラ５０のＣＰＵ５２は、まず、近接センサ２６からの近接信号ＮＳを入力すると共に（ステップＳ１００）、カメラコントローラ３４に制御信号を出力してデジタルカメラ３２により撮影し（ステップＳ１１０）、撮影して得られた画像の中から人物の顔を認識する顔認識処理を実行する（ステップＳ１２０）。ここで、顔認識処理は、人の生物学的な特徴を利用して個人を特定するためのものであり、例えば、デジタルカメラ３２で撮影された人物画像から両目や口，鼻などの位置を検出し、これらの特徴量を抽出することにより行なうことができる。

そして、入力した近接信号ＮＳがオンか否か、即ち、近接物を感知したか否かを判定し（ステップＳ１３０）、近接物を感知していないときには、モード判定フラグＦ１が値１か否かを判定する（ステップＳ１４０）。ここで、モード判定フラグＦ１は、後述する通常表示モードか鏡像表示モードかを判別するためのフラグであり、初期値としては通常表示モードを示す値０に設定されている。本ルーチンが開始された直後は、ステップＳ１４０では否定的な判定がなされ、通常表示モードを実行して（ステップＳ１７０）、本ルーチンを終了する。通常表示モードの実行は、実施例では、メモリカードスロット３６に差し込まれているメモリカード３５や内蔵メモリ４２に保存されている画像ファイルを読み出して表示パネル２２上に表示することにより行われる。

ステップＳ１３０で近接信号ＮＳがオン、即ち、近接物を感知したと判定されると、ステップＳ１２０で撮影して得られた画像の中から人物の顔が認識されたか否かを判定し（ステップＳ１８０）、人物の顔が認識されたときには、予め登録されている人物の顔の特徴量のうちステップＳ１２０により認識された顔の特徴量と一致するものがあるか否かを判定し（ステップＳ１９０）、一致するものがないときには、登録者でないと判断し、モード判定フラグＦ２が値０か否かを判定する（ステップＳ２００）。ここで、モード判定フラグＦ２は、後述する録画モードがオンしているかオフしているかを判別するためのフラグであり、初期値としてはオフしていることを示す値０が設定されている。モード判定フラグＦ２が値０と判定されると、モード判定フラグＦ１に値１を設定すると共に（ステップＳ２１０）、ステップＳ１１０で撮影した映像を鏡と同様に左右反転させて表示パネル２２に表示する鏡像表示モードを実行して（ステップＳ２２０）、本ルーチンを終了する。デジタルフォトフレーム２０の正面に人が近づくと、近接信号ＮＳがオンすると共にデジタルカメラ３２で撮影された画像の中から人の顔が認識されるから、これをトリガとして、通常表示モードから鏡像表示モードに自動切替を行なうのである。

一方、ステップＳ１９０で予め登録されている人物の顔の特徴量のうちステップＳ１２０により認識された顔の特徴量と一致するものがあるときには、登録者と判断し、通常表示モードを実行して（ステップＳ１７０）、本ルーチンを終了する。従って、近接信号ＮＳがオンすると共にデジタルカメラ３２で撮影された画像の中から人物の顔が認識されたときであっても、認識された人物が登録者のときには、鏡像表示モードへの自動切替は行なわれない。なお、人物の登録は、操作ボタン４０の操作により人物登録モードを起動することにより、デジタルカメラ３２で人物を撮影すると共に顔認識処理により人物の顔の特徴量を抽出し、抽出した特徴量を内蔵メモリ４２に保存することにより行なわれる。

ステップＳ１８０で撮影された画像の中から人物の顔が認識されなかったときにはモード判定フラグＦ１が値１か否かを判定し（ステップＳ２３０）、モード判定フラグＦ１が値０のときには、近接センサ２６は何らかの近接物を感知したが人物ではないと判断して、前述した通常表示モードを設定して（ステップＳ１７０）、本ルーチンを終了する。一方、モード判定フラグＦ１が値１のときには、モード判定フラグＦ２に値１を設定すると共に（ステップＳ２４０）、ステップＳ１１０で撮影された映像を内蔵メモリ４２に保存する録画モードを実行して（ステップＳ２５０）、本ルーチンを終了する。この場合は、一旦、近接センサ２６で近接物を感知すると共に顔認識処理により人物の顔が認識されて鏡像表示モードに自動切替がなされている状態から近接センサ２６は近接物を感知し続けているが人物の顔が認識されなくなった場合であるから、人物が横向きや後ろ向きに姿勢を変えたものと考えることができる。したがって、こうした場合に録画モードを実行して撮影した映像を保存しておくことにより、後に横姿や後ろ姿を自身で確認することができるようになる。録画モードで録画された映像の再生は、ステップＳ１８０で再び人物の顔が認識され、ステップＳ１９０で登録者でないと判定され、ステップＳ２００でモード判定フラグＦ２が値１と判定されたときに、所定時間Ｔ１（例えば、１０秒や２０秒など）の範囲内で（ステップＳ２６０）、再生モードを実行することにより行なわれる（ステップＳ２７０）。再生モードが実行されてから所定時間Ｔ１が経過すると、モード判定フラグＦ２を値０に設定して鏡像表示モードに戻る（ステップＳ２２０）。

ステップＳ１３０で近接信号ＮＳがオフ、即ち、近接物を感知しなかったと判定され、ステップＳ１４０でモード判定フラグＦ１が値１（鏡像表示モード）と判定されたときには、これが所定時間Ｔ２（例えば、１０秒や２０秒など）に亘って継続したか否かを判定し（ステップＳ１５０）、所定時間Ｔ２に亘って継続していないときには、鏡像表示モードを維持し（ステップＳ２２０）、所定時間Ｔ２に亘って継続しているときには、モード判定フラグＦ１に値０を設定すると共に（ステップＳ１６０）、鏡像表示モードから通常表示モードに切り替えて（ステップＳ１７０）、本ルーチンを終了する。

通常表示モードと鏡像表示モードとの切替の様子を図３に示す。いま、デジタルフォトフレーム２０を衣料品店の試着室に設置されている場合を考える。この場合、試着するために試着室に入った客に対して通常はセール情報やイベント情報を掲載した広告用画像を表示パネル２２上に表示しておき、試着が完了してデジタルフォトフレーム２０の正面を向くことにより鏡として使用して試着の様子を確認することができる。また、店員の顔を予め内蔵メモリ４２に登録するものとすれば、店員以外の客に対してのみ鏡像表示モードへの自動切替を行なうことができるようになる。

ここで、本実施形態の構成要素と本発明の構成要素との対応関係を明らかにする。本実施形態の内蔵メモリ４２やメモリカード３５が本発明の「記憶手段」に相当し、近接センサ２６が「近接感知手段」に相当し、デジタルカメラ３２が「撮影手段」に相当し、図２の表示処理ルーチンのステップＳ１２０の処理を実行するメインコントローラ５０が「顔認識手段」に相当し、図２の表示処理ルーチンのステップＳ１３０〜Ｓ２８０の処理を実行するメインコントローラ５０と表示コントローラ２４とが「表示制御手段」に相当する。なお、本実施形態では、デジタルフォトフレーム２０の動作を説明することにより本発明の画像表示装置の制御方法の一例も明らかにしている。

以上詳述した本実施形態のデジタルフォトフレーム２０によれば、通常時には内蔵メモリ４２やメモリカード３５に保存されている画像ファイルを表示パネル２２に表示する通常表示モードを実行し、近接センサ２６により近接物の近接が感知されると共にデジタルカメラ３２により撮影された画像の中から顔認識処理により人物の顔が認識されたときには撮影された画像を鏡のように左右反転して表示する鏡像表示モードを実行するから、面倒な操作を必要とせずに適切なタイミングで通常表示モードと鏡像表示モードとを自動切替することができる。しかも、鏡像表示モードへ自動切替した後に、近接センサ２６により近接物の近接が感知され続けている状態で撮影された画像の中から顔認識処理により人物の顔が認識されなくなったときには撮影された画像を録画する録画モードを実行するから、後に再生モードを実行することにより横姿や後ろ姿を自身で確認することができる。さらに、顔認識手段により認識された人物の顔が予め登録されている人物の顔と一致しない場合に限って鏡像表示モードへの自動切替を行なうから、特定の人物（例えば店員など）に対しては鏡像表示モードへの自動切替を行なわないようにすることができる。また、鏡像表示モードが実行されている最中に近接センサ２６により近接物が感知されなくなったときには所定時間Ｔ２を待って通常表示モードに切り替えるから、鏡像表示モードと通常表示モードとの頻繁な切替を抑制することができる。

本実施形態では、デジタルカメラ３２をフレーム部２１の左右部に１つずつ配置するものとしたが、いずれか１つだけ配置するものとしてもよい。また、デジタルカメラ３２を配置する位置もフレーム部２１の左右部に限られず、上部に配置するものとしてもよいし下部に配置するものとしても構わない。

本実施形態では、近接センサ２６により近接物が感知されると共にデジタルカメラ３２により撮影された画像の中から人物の顔が認識されたときであっても顔認識手段により認識された人物の顔が予め登録されている人物の顔と一致するときには鏡像表示モードへの自動切替を行なわないものとしたが、鏡像表示モードへの自動切替を行なうものとしてもよい。この場合、人物の顔を予め登録しておく処理を設ける必要はない。

本実施形態では、鏡像表示モードを実行している最中に近接センサ２６により近接物は感知され続けているが顔認識処理により人物の顔が認識されなくなったときには録画モードを実行するものとしたが、録画モードを行なわずに鏡像表示モードを維持するものとしてもよい。

本実施形態では、鏡像表示モードを実行している最中に近接センサ２６により近接物が感知されなくなったときには所定時間Ｔ２を待って通常表示モードに自動切替するものとしたが、所定時間Ｔ２を待たずに直ちに通常表示モードに自動切替するものとしてもよい。

本実施形態では、本発明の画像表示装置を壁掛け型のデジタルフォトフレームに適用して説明したが、これに限定されるものではなく、その他の据え置き型の表示装置とするものとしてもよい。また、画像表示装置の制御方法の形態とするものとしてもよい。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の態様で実施し得ることは勿論である。

デジタルフォトフレーム２０の構成の概略を示す構成図。 表示処理ルーチンの一例を示すフローチャート。 通常表示モードと鏡像表示モードとの切替の様子を示す説明図。

符号の説明

２０ デジタルフォトフレーム、２１ フレーム部、２２ 表示パネル、２４ 表示コントローラ、２６ 近接センサ、３２ デジタルカメラ、３４ カメラコントローラ、３５ メモリカード、３６ メモリカードスロット、３８ メモリカードコントローラ、４０ 操作ボタン、４２ 内蔵メモリ、５０ メインコントローラ、５２ ＣＰＵ、５４ ＲＯＭ、５６ ＲＡＭ。

Claims (6)

1. 画像を表示する画像表示装置であって、
   前記画像を記憶する記憶手段と、
   所定範囲内の近接を感知可能な近接感知手段と、
   前記所定範囲の画像の撮影が可能な撮影手段と、
   前記撮影手段により撮影された所定範囲の画像の中から人物の顔を認識する顔認識手段と、
   通常時には前記記憶手段に記憶されている画像を表示する通常表示制御を実行し、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときには該撮影された画像を鏡像表示する鏡像表示制御を実行する表示制御手段と、
   を備える画像表示装置。
2. 前記表示制御手段は、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときであっても、前記認識された人物の顔が予め登録されている人物の顔と一致するときには、前記通常表示制御を実行する手段である請求項１記載の画像表示装置。
3. 前記表示制御手段は、前記鏡像表示制御を実行している最中に前記近接感知手段により所定範囲内の近接は感知されるが前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されなくなったときには、前記撮影された画像を録画すると共に該録画した画像を再生する手段である請求項１または２記載の画像表示装置。
4. 前記表示制御手段は、前記鏡像表示制御を実行した後、所定時間に亘って継続して前記近接感知手段により所定範囲内の近接が感知されなくなるまでは前記鏡像表示制御を継続する手段である請求項１ないし３いずれか１項に記載の画像表示装置。
5. 据え置き型の表示装置として構成されてなる請求項１ないし４いずれか１項に記載の画像表示装置。
6. 画像を記憶する記憶手段と、所定範囲内の近接を感知可能な近接感知手段と、前記所定範囲の画像の撮影が可能な撮影手段と、前記撮影手段により撮影された所定範囲の画像の中から人物の顔を認識する顔認識手段と、を備え、前記画像を表示する画像表示装置の制御方法であって、
   通常時には前記記憶手段に記憶されている画像を表示し、前記近接感知手段により所定範囲内の近接が感知されると共に前記撮影手段により撮影された所定範囲の画像の中から前記顔認識手段により人物の顔が認識されたときには該撮影された画像を鏡像表示する
   ことを特徴とする画像表示装置の制御方法。

Images