JP7186854B2 - 画像表示装置、画像表示方法、及びプログラム - Google Patents

Description

本発明は、画像表示装置、画像表示方法、及びプログラムに関し、特に検出した対象の範囲を示す対象枠を表示する画像表示装置、画像表示方法、及びプログラムに関する。

従来より、デジタルカメラにより撮影を行う場合に、被写体が人の場合には顔検出が行われ、検出された顔の位置や大きさの情報に基づいて、顔枠（対象枠）の表示が行われている。

デジタルカメラのＬＣＤ（Liquid Crystal Display）で構成される表示部に表示される対象枠を連続して表示する場合に、対象枠を安定的に表示する技術が提案されている。

例えば、撮影待機状態において、顔領域の検出及び非検出が繰り返され、ライブビュー画像（スルー画像）上に顔領域を示すための対象枠（四角枠）が表示されたり、表示されなくなったりする場合がある。特許文献１に記載された技術は、この対象枠の表示及び非表示が繰り返されることを抑制することを目的としている。特許文献１に記載された技術では、被写体領域が検出されなかった場合には、直前に設定された検出被写体領域を継続して検出被写体領域として対象枠を表示する。

特開２００７－２２１３１２号公報

ここで、表示する対象枠は検出する対象の動きによっては不安定な表示となってしまう。例えば検出対象が顔である場合には、顔の微小な移動に対しても対象枠が追従して移動してしまい、対象枠の表示が不安定となってしまう。一方で、対象枠の変動幅を抑えるために、移動量を半分にして対象枠を表示する技術が提案されているが、この場合には対象枠の対象への追従性が損なわれてしまう。

特許文献１に記載の技術は、対象枠の表示及び非表示が繰り返されることを抑制することを目的とした技術であって、対象が移動することによる対象枠の不安定な表示に関しては言及されていない。

本発明はこのような事情に鑑みてなされたもので、その目的は、検出された対象への追従性を損なうことなく、安定的に対象枠を表示する画像表示装置、画像表示方法、及びプログラムを提供することである。

上記目的を達成するための本発明の一の態様である画像表示装置は、連続する画像を取得する画像取得部と、画像から対象を検出する対象検出部と、画像中の最新の画像から対象の範囲である対象枠を決定する対象枠決定部と、対象枠の位置に対する不感帯を決定する不感帯決定部と、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶する記憶部と、対象の位置が、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示する表示制御部と、を備える。

本態様によれば、対象の位置が前回の不感帯の範囲内の場合には、前回に表示した対象枠を表示するので、小さい変動（位置の変動）では対象枠の表示用の位置情報を変えずに安定的に対象枠を表示することができる。また、対象の位置が前回の不感帯の範囲外の場合には、今回検出された対象に対応する対象枠を表示するので、検出された対象への追従性（位置の追従性）が優れた対象枠の表示を行うことができる。

好ましくは、対象検出部は、対象の位置情報を検出し、不感帯決定部は、位置情報に基づいて、不感帯を変更する。

好ましくは、不感帯決定部は、位置情報と前回の不感帯とに基づいて、対象の動き判定を行い、動き判定の結果に基づいて前回の不感帯を変更する。

本発明の他の態様である画像表示装置は、連続する画像を取得する画像取得部と、画像から対象を検出する対象検出部と、画像中の最新の画像から対象の範囲である対象枠を決定する対象枠決定部と、対象枠の大きさに対する不感帯を決定する不感帯決定部と、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶する記憶部と、対象の大きさが、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示する表示制御部と、を備える。

本態様によれば、対象の大きさが前回の不感帯の範囲内の場合には、前回に表示した対象枠を表示するので、小さい変動（大きさの変動）では対象枠の表示用の大きさ情報を変えずに安定的に対象枠を表示することができる。また、対象の位置が前回の不感帯の範囲外の場合には、今回検出された対象に対応する対象枠を表示するので、検出された対象への追従性（大きさの追従性）が優れた対象枠の表示を行うことができる。

好ましくは、対象検出部は、対象の大きさ情報を検出し、不感帯決定部は、大きさ情報に基づいて、不感帯を変更する。

好ましくは、不感帯決定部は、大きさ情報と前回の不感帯とに基づいて、対象の動き判定を行い、動き判定の結果に基づいて前回の不感帯を変更する。

好ましくは、不感帯決定部は、動き判定の結果が第１の方向を示す場合には、第１の方向の不感帯を小さくする。

好ましくは、不感帯決定部は、動き判定の結果が第１の方向を示さない場合には、第１の方向の不感帯を大きくする。

好ましくは、不感帯の変更は、不感帯の位置又は大きさを、対象検出部で検出された対象によって変更する。

本発明の他の態様である画像表示装置は、連続する画像であって、検出された対象の位置、及び対象の範囲である対象枠の位置に関する情報を有する画像を取得する画像取得部と、対象枠の位置に対する不感帯を決定する不感帯決定部と、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶する記憶部と、対象の位置が、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示する表示制御部と、を備える。

本発明の他の態様である画像表示装置は、連続する画像であって、検出された対象の大きさ、及び対象の範囲である対象枠の大きさに関する情報を有する画像を取得する画像取得部と、対象枠の大きさに対する不感帯を決定する不感帯決定部と、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶する記憶部と、対象の大きさが、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示する表示制御部と、を備える。

好ましくは、表示制御部によって、表示された対象枠の位置情報を画像に記録する情報追加部を備える。

好ましくは、不感帯は対象枠に対する不感帯幅であり、不感帯の初期値は、一定である。

好ましくは、対象検出部が検出する対象は物体である。

好ましくは、物体は、顔又は瞳である。

好ましくは、対象枠は矩形である。

好ましくは、対象枠は楕円である。

本発明の他の態様である画像表示方法は、連続する画像を取得するステップと、画像から対象を検出するステップと、画像中の最新の画像から対象の範囲である対象枠を決定するステップと、対象枠の位置に対する不感帯を決定するステップと、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶するステップと、対象の位置が、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示するステップと、を含む。

本発明の他の態様である画像表示方法は、連続する画像を取得するステップと、画像から対象を検出するステップと、画像中の最新の画像から対象の範囲である対象枠を決定するステップと、対象枠の大きさに対する不感帯を決定するステップと、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶するステップと、対象の大きさが、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示するステップと、を含む。

本発明の他の態様であるプログラムは、連続する画像を取得するステップと、画像から対象を検出するステップと、画像中の最新の画像から対象の範囲である対象枠を決定するステップと、対象枠の位置に対する不感帯を決定するステップと、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶するステップと、対象の位置が、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示するステップと、を含む画像表示工程をコンピュータに実行させる。

本発明の他の態様であるプログラムは、連続する画像を取得するステップと、画像から対象を検出するステップと、画像中の最新の画像から対象の範囲である対象枠を決定するステップと、対象枠の大きさに対する不感帯を決定するステップと、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶するステップと、対象の大きさが、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示するステップと、を含む画像表示工程をコンピュータに実行させる。

本発明によれば、対象の位置が、前回の不感帯の範囲内の場合には前回に表示した対象枠を表示するので、対象の多少の変動では対象枠の表示が変わらず安定的に対象枠を表示することができ、また、対象の位置が、前回の不感帯の範囲外の場合には、今回検出された対象に対応する対象枠を表示するので、検出された対象への追従性が優れた対象枠の表示を行うことができる。

図１は、撮像装置の一例を示す斜視図である。 図２は、撮像装置の一例を示す背面図である。 図３は、撮像装置の構成を示す図である。 図４は、画像表示装置の主な機能構成例を示すブロック図である。 図５は、不感帯について説明する図である。 図６は、不感帯について説明する図である。 図７は、不感帯の決定の具体例を示す図である。 図８は、画像表示方法を示すフローチャートである。 図９は、画像表示方法を示すフローチャートである。 図１０は、不感帯処理の具体例を示す図である。 図１１は、対象枠の大きさの不感帯に関して説明する図である。 図１２は、画像表示方法を示すフローチャートである。 図１３は、画像表示方法を示すフローチャートである。 図１４は、スマートフォンの外観を示す図である。 図１５は、スマートフォンの構成を示すブロック図である。

以下、添付図面にしたがって本発明に係る画像表示装置、画像表示方法、及びプログラムの好ましい実施の形態について説明する。

［撮像装置］

図１及び図２は、それぞれ本発明の画像表示装置を搭載する撮像装置の一例（デジタルカメラ）を示す斜視図及び背面図である。

画像表示装置１１（図４を参照）は、撮像装置１０に搭載され、撮像装置１０で撮像されたライブビュー画像（スルー画像）を表示する。なお、画像表示装置１１は、記録された動画も表示することができる。

撮像装置１０は、レンズを通った光を撮像素子で受け、デジタル信号に変換して静止画又は動画の画像データとして記録メディアに記録するデジタルカメラである。

図１に示すように撮像装置１０は、その正面に撮影レンズ１２、ストロボ１等が配設され、上面にはシャッタボタン２、電源／モードスイッチ３、モードダイヤル４等が配設されている。一方、図２に示すように、カメラ背面には、モニタ（ＬＣＤ)３０、ズームボタン５、十字ボタン６、ＭＥＮＵ／ＯＫボタン７、再生ボタン８、ＢＡＣＫボタン９等が配設されている。

撮影レンズ１２は、沈胴式のズームレンズで構成されており、電源／モードスイッチ３によってカメラの作動モードを撮影モードに設定することにより、カメラ本体から繰り出される。ストロボ１は、主要被写体にストロボ光を照射するものである。

シャッタボタン２は、いわゆる「半押し」と「全押し」とからなる２段ストローク式のスイッチで構成され、撮影準備指示部として機能するとともに、画像の記録指示部として機能する。

撮像装置１０は、撮影モードとして静止画撮影モードが選択され、シャッタボタン２が「半押し」されると、ＡＦ（Autofocus）／ＡＥ（Auto Exposure)制御を行う撮影準備動作を行い、シャッタボタン２が「全押し」されると、静止画の撮像及び記録を行う。

また、撮像装置１０は、撮影モードとして動画撮影モードが選択され、シャッタボタン２が「全押し」されると、動画の録画を開始し、シャッタボタン２が再度「全押し」されると、録画を停止して待機状態になる。

電源／モードスイッチ３は、撮像装置１０の電源をＯＮ／ＯＦＦする電源スイッチとしての機能と、撮像装置１０のモードを設定するモードスイッチとしての機能とを併せ持っており、「ＯＦＦ位置」と「再生位置」と「撮影位置」との間をスライド自在に配設されている。撮像装置１０は、電源／モードスイッチ３をスライドさせて、「再生位置」又は「撮影位置」に合わせることにより、電源がＯＮになり、「ＯＦＦ位置」に合わせることにより、電源がＯＦＦになる。そして、電源／モードスイッチ３をスライドさせて、「再生位置」に合わせることにより、「再生モード」に設定され、「撮影位置」に合わせることにより、「撮影モード」に設定される。

モードダイヤル４は、撮像装置１０の撮影モードを設定するモード切替部として機能し、このモードダイヤル４の設定位置により、撮像装置１０の撮影モードが様々なモードに設定される。例えば、静止画撮影を行う「静止画撮影モード」、動画撮影を行う「動画撮影モード」等である。

モニタ３０は、表示部として機能し、撮影モード時のライブビュー画像の表示、再生モード時の静止画又は動画の表示を行うとともに、メニュー画面の表示等を行うことでグラフィカルユーザーインターフェースの一部として機能する。

ズームボタン５は、ズームを指示するズーム指示手段として機能し、望遠側へのズームを指示するテレボタン５Ｔと、広角側へのズームを指示するワイドボタン５Ｗとからなる。撮像装置１０は、撮影モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、撮影レンズ１２の焦点距離が変化する。また、再生モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、再生中の画像が拡大、縮小する。

十字ボタン６は、上下左右の４方向の指示を入力する操作部であり、メニュー画面から項目を選択したり、各メニューから各種設定項目の選択を指示したりするボタン（カーソル移動操作手段）として機能する。左／右キーは再生モード時のコマ送り（順方向／逆方向送り）ボタンとして機能する。

ＭＥＮＵ／ＯＫボタン７は、モニタ３０の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するＯＫボタンとしての機能とを兼備した操作ボタンである。

再生ボタン８は、撮影記録した静止画又は動画をモニタ３０に表示させる再生モードに切り替えるためのボタンである。

ＢＡＣＫボタン９は、入力操作のキャンセルや一つ前の操作状態に戻すことを指示するボタンとして機能する。

なお、本実施形態に係る撮像装置１０において、ボタン／スイッチ類に対して固有の部材を設けるのではなく、タッチパネルを設けこれを操作することでそれらボタン／スイッチ類の機能を実現するようにしてもよい。

［撮像装置の内部構成］

図３は、撮像装置１０の構成を示す図である。撮像装置１０は撮影レンズ１２により被写体像（光学像）を撮像素子２１０に結像させる。

撮影レンズ１２はズームレンズ１１０とフォーカスレンズ１５０とから構成される。また、撮像装置１０は、絞り１３０と、レンズ駆動部１４０とを備える。レンズ駆動部１４０は、制御部としてのＣＰＵ２４０からの指令に応じてズームレンズ１１０、フォーカスレンズ１５０を進退駆動してズーム（光学ズーム）調整、フォーカス調整を行う。ズーム調整及びフォーカス調整は、ＣＰＵ２４０からの指令に応じて行う他に、ユーザが行ったズーム操作、フォーカス操作に応じて行ってもよい。また、レンズ駆動部１４０はＣＰＵ２４０からの指令に応じて絞り１３０を制御し、露出を調整する。一方、ズームレンズ１１０及びフォーカスレンズ１５０の位置、絞り１３０の開放度等の情報がＣＰＵ２４０に入力される。

撮像装置１０は、撮像素子２１０、ＡＦＥ２２０（ＡＦＥ：Analog Front End）、Ａ／Ｄ変換器２３０（Ａ／Ｄ：Analog to Digital）、ＣＰＵ２４０、操作部２５０、記憶部２６０、及びモニタ３０を備える。撮像装置１０は、撮像素子２１０に透過させる光を遮光するためのメカニカルシャッター（不図示）を有していてもよい。撮像素子２１０は、多数の受光素子がマトリクス状に配列された受光面を備え、ズームレンズ１１０、フォーカスレンズ１５０、及び絞り１３０を透過した被写体光が撮像素子２１０の受光面上に結像され、各受光素子によって電気信号に変換される。撮像素子２１０の受光面上にはＲ（赤），Ｇ（緑），又はＢ（青）のカラーフィルタが設けられており、各色の信号に基づいて被写体のカラー画像を取得することができる。なお、撮像素子２１０としては、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）、ＣＣＤ（Charge-Coupled Device）等の様々な光電変換素子を用いることができる。ＡＦＥ２２０は撮像素子２１０から出力されるアナログ画像信号のノイズ除去、増幅等を行い、Ａ／Ｄ変換器２３０は、取り込んだアナログ画像信号を階調幅があるデジタル画像信号に変換する。なお、シャッターは、メカニカルシャッターでも電子シャッターでもよい。電子シャッターの場合、ＣＰＵ２４０によって撮像素子２１０の電荷蓄積期間を制御することで露光時間（シャッタースピード）を調節することができる。

記憶部２６０は各種の光磁気記録媒体、半導体メモリ等の非一時的記録媒体及びその制御回路により構成され、動画（ライブビュー画像を含む）及び静止画を記憶する。記録媒体は撮像装置１０に対し着脱できるタイプを用いることができる。また、記憶部２６０にはプログラム及びＣＰＵ２４０の各種制御に用いる情報等が記憶される。

モニタ３０は、動画（ライブビュー画像、記録動画）及び静止画を表示することができる。撮像装置１０はファインダを備えていてもよく、ファインダはモニタ３０として機能する。ファインダは、例えば液晶表示パネル、プリズム、レンズ等により構成され、ユーザは図示せぬ接眼部を介して動画、静止画を視認することができる。ファインダとしては「光学式ビューファインダ（ＯＶＦ：Optical View Finder）」、「電子式ビューファインダ（ＥＶＦ：Electronic View Finder）」、あるいはこれらの組合せである「ハイブリッド式ビューファインダ（ＨＶＦ：Hybrid View Finder）」を用いることができる。

ＣＰＵ２４０は、記憶部２６０から必要なプログラム及び各種制御に用いる情報を読み出して、ＣＰＵ２４０で行われる各種処理及び各種制御を行う。

ＣＰＵ２４０は各種制御を実行する。ハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の機能部として作用する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の機能部を１つのプロセッサで構成してもよい。複数の機能部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能部として作用させる形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、複数の機能部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

＜第１の実施形態＞

次に第１の実施形態に関して説明する。本例では、対象枠の位置に対して不感帯が設定される。

図４は、撮像装置１０に搭載される画像表示装置１１の主な機能構成例を示すブロック図である。画像表示装置１１は、画像取得部１０１、対象検出部１０３、対象枠決定部１０５、不感帯決定部１０７、表示制御部１０９、情報追加部１１１、記憶部２６０、及びモニタ３０を備える。画像取得部１０１、対象検出部１０３、対象枠決定部１０５、不感帯決定部１０７、表示制御部１０９、及び情報追加部１１１は、ＣＰＵ２４０で実現される。

画像取得部１０１は、連続する画像を取得する。具体的には、画像取得部１０１は、Ａ／Ｄ変換器２３０から出力される連続する画像を取得する。例えば画像取得部１０１は、撮像装置１０で撮影された複数のフレーム画像で構成されたライブビュー画像を取得する。

対象検出部１０３は、取得した画像から対象を検出する。例えば、対象検出部１０３は、公知の技術を使用して人の顔を検出する。対象検出部１０３は、画像において人の顔を検出し、例えば位置座標で構成される位置情報を取得する。また、対象検出部１０３は、顔以外の物体も検出することができる。例えば、対象検出部１０３は、瞳を検出することができる。

対象枠決定部１０５は、画像中の最新の画像から対象の範囲である対象枠を決定する。

対象枠決定部１０５は、画像取得部１０１で取得された複数の画像のそれぞれにおいて検出された対象についての対象枠を決定する。対象枠は、検出された対象をユーザに報知するためのものであり、様々な形状を採用することができる。対象枠は例えば正方形を含む矩形であり、また、対象枠は例えば真円を含む楕円である。

不感帯決定部１０７は、対象枠の表示に関する不感帯を決定する。不感帯決定部１０７は、例えば対象枠の位置に対する不感帯を決定する。ここで対象枠の表示に関する不感帯とは、対象枠（又は対象）が不感帯の範囲内を動く場合には、表示させる対象枠は対象に追従させずに一定とし、対象枠（又は対象）が不感帯の範囲外を動く場合には、表示させる対象枠は対象に追従させる（対象に対応した対象枠とする）。

図５及び図６は、不感帯決定部１０７で決定された不感帯について説明する図である。

図５及び図６には、ｎ番目のフレームにおいて対象検出部１０３で検出された顔１２５、顔１２５に応じて対象枠決定部１０５で決定された対象枠１２１、及び不感帯決定部１０７で決定された不感帯１２０が示されている。また、ｎ＋１番目のフレームにおいて対象検出部１０３で検出された顔１２７、顔１２７に応じて対象枠決定部１０５で決定された対象枠１２３が示されている。なお、本例の場合は、顔１２５及び顔１２７には同様の位置関係で対象枠１２１及び対象枠１２３がそれぞれ決定される。また、本例の場合、対象の位置又は対象枠の位置の基準点は、対象枠の左上隅の基準点Ｂ１（対象枠１２１）及び基準点Ｂ２（対象枠１２３）である。

図５に示した場合では、ｎ番目のフレームにおいて設定された不感帯１２０の範囲内に、ｎ＋１番目のフレームで検出された顔１２７が位置している。すなわち、ｎ＋１番目の基準点Ｂ２は、不感帯１２０の範囲内である。したがって、ｎ＋１番目のフレームにおいても対象枠１２１が表示されることになる。

図６に示した場合では、ｎ番目のフレームにおいて設定された不感帯１２２の範囲外に、ｎ＋１番目のフレームで検出された顔１２７が位置している。すなわち、ｎ＋１番目の基準点Ｂ２は、不感帯１２２の範囲外である。したがって、ｎ＋１番目のフレームにおいては、顔１２７に対応する対象枠１２１が表示されることになる。

このように、検出される対象の位置に対して不感帯を設定することにより、対象の微小の動きには対象枠の表示を移動させずに安定的な表示を行うことができ、且つ不感帯を超える対象の移動には追従性良く対象枠を表示させることができる。

また、不感帯決定部１０７は、不感帯の位置及び／又は大きさを検出された対象によって変更することができる。すなわち、不感帯決定部１０７は検出された対象の位置に応じて、不感帯の位置及び大きさを変更することができる。さらに、不感帯決定部１０７は、対象の動きに応じて不感帯の幅を変更することができる。不感帯決定部１０７は、位置情報と前回の不感帯とに基づいて、対象の動き判定を行い、動き判定の結果に基づいて不感帯（前回の不感帯）を変更する。例えば、不感帯決定部１０７は、動き判定の結果が第１の方向を示す場合には、第１の方向の不感帯を小さくする。すなわち、検出した対象が移動している方向には不感帯の幅を小さく設定して、対象枠の対象への追従性を向上させている。また、不感帯決定部１０７は、動き判定の結果が第１の方向を示さない場合には、第１の方向の不感帯を大きくする。すなわち、検出した対象が移動していない方向には不感帯の幅を大きく設定して、対象枠の表示の安定性を向上させている。

図７は、不感帯決定部１０７が決定する不感帯の具体例を示す図である。なお、図７に示す場合では、図中のＸ軸の正方向と負方向に不感帯が決定されている。

図７（Ａ）に示す場合は、前回の対象枠の表示位置Ｐと正方向と負方向の不感帯の幅が同じ場合である。このように、対象がどちらに動くか不明な場合に、正方向及び負方向で不感帯の幅が同じに設定することにより、適切な対象枠の表示を行うことができる。例えば、不感帯の初期値は一定として、画角の中心から正方向及び負方向で同じ幅の不感帯を設けてもよい。図７（Ｂ）に示す場合は、不感帯の幅を全体的に大きくした場合である。

図７（Ｃ）に示す場合は、不感帯の幅を全体的に小さくした場合である。図７（Ｂ）に示すように、不感帯の幅を全体的に大きくすると対象枠の表示の安定性が向上し、図７（Ｃ）に示すように、不感帯の幅を全体的に小さくすると対象枠の表示の追従性が向上する。

図７（Ｄ）に示す場合は、不感帯決定部１０７の動き判定において、対象が正方向に動いたと判定され、正方向の不感帯の幅を小さくした場合である。また、図７（Ｄ）に示す場合では、対象が負方向に動いていないと判定され、負方向の不感帯の幅を大きくした場合である。図７（Ｅ）に示す場合は、不感帯決定部１０７の動き判定において、対象が負方向に動いたと判定され、負方向の不感帯の幅を小さくした場合である。また、図７（Ｅ）に示す場合では、対象が正方向に動いていないと判定され、正方向の不感帯の幅を大きくした場合である。

このように、不感帯決定部１０７は、対象の動きに応じて不感帯の位置や大きさを変更することにより、対象枠を安定的に且つ追従性が良く表示することができる。

図４に戻って、記憶部２６０は、一画像前の画像から決定した対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した不感帯に相当する前回の不感帯を記憶する。

具体的には図５及び図６で説明したｎ番目のフレームにおける対象枠１２１及び不感帯１２０（不感帯１２２）を記憶する。記憶部２６０に記憶された前回の対象枠及び前回の不感帯は、表示制御部１０９の制御に用いられる。記憶部２６０に記憶される情報は、画像毎に更新されても良いし、各画像の情報が蓄積されても良い。

表示制御部１０９は、モニタ３０への表示を制御する。モニタ３０は、ライブビュー画像、記録動画、及び静止画が表示される。また、表示制御部１０９は、ライブビュー画像又は記録動画に重畳させて対象枠を表示する。表示制御部１０９は、対象の位置が、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象を表示する。

情報追加部１１１は、表示制御部１０９によって、表示された対象枠の位置情報を画像に記録する。具体的には、表示された対象枠の座標値をフレーム毎に付加する。情報追加部１１１での情報追加は、公知の手法により行われる。

次に、画像表示装置１１を使用した画像表示方法（画像表示工程）に関して説明する。

図８及び図９は、画像表示装置１１を使用した画像表示方法を示すフローチャートである。本例は、対象として顔が検出され、検出された顔に対応する顔枠が表示される例である。

先ず、画像取得部１０１により、顔が撮影された連続するフレーム画像を取得する（ステップＳ１０）。その後、対象検出部１０３は、取得されたフレームの各々において、顔を検出し、検出した顔の位置情報を取得する（ステップＳ１１）。

不感帯決定部１０７は、前回の「正（正方向）」の動き判定が「１」であるか否かを判定する（ステップＳ１２）。前回の「正」の動き判定が「１」である場合には、不感帯決定部１０７は正方向に小さい不感帯幅を設定する（ステップＳ１３）。一方、前回の「正」の動き判定が「０」である場合（「１」ではない場合）には、不感帯決定部１０７は正方向に大きい不感帯幅を設定する（ステップＳ１４）。

次に、不感帯決定部１０７は、前回の「負（負方向）」の動き判定が「１」であるか否かを判定する（ステップＳ１５）。前回の「負」の動き判定が「１」である場合には、不感帯決定部１０７は負方向に小さい不感帯幅を設定する（ステップＳ１６）。一方、前回の「負」の動き判定が「０」である場合（「１」ではない場合）には、不感帯決定部１０７は負方向に大きい不感帯幅を設定する（ステップＳ１７）。

次に、不感帯決定部１０７は、上記の処理により設定された不感帯幅を用いて、前回の不感帯処理後の座標を基準に不感帯を設定する（ステップＳ１８）。

図９に移って、不感帯決定部１０７は、取得した今回の顔の位置が上述の説明のように設定された不感帯を超えたか否かを判定する（ステップＳ１９）。取得した今回の顔の位置が設定された不感帯を超えた場合には、不感帯決定部１０７は正の方向に超えたか否かを判定する（ステップＳ２０）。そして、不感帯決定部１０７は、今回の顔の位置が正の方向に超えた場合には、動き判定を「正：１」「負：０」と設定する（ステップＳ２１）

。一方、対象検出部１０３は、今回の顔の位置が負の方向に超えた場合には、動き判定を「正：０」「負：１」と設定する（ステップＳ２２）。その後、表示制御部１０９は、顔枠の表示用に今回の検出された位置情報を使用して、顔枠を表示する（ステップＳ２３）

。

一方で、今回の顔の位置が不感帯を超えていないと判定された場合には、今回の動き判定を「正：０」「負：０」と設定する（ステップＳ２４）。そして、今回の位置情報を前回の位置情報で上書きする（ステップＳ２５）。その後、表示制御部１０９は、顔枠の表示用に前回の位置情報を使用する（ステップＳ２６）。

上述の各構成及び機能は、任意のハードウェア、ソフトウェア、或いは両者の組み合わせによって適宜実現可能である。例えば、上述の処理ステップ（処理手順）をコンピュータに実行させるプログラム、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体（非一時的記録媒体）、或いはそのようなプログラムをインストール可能なコンピュータに対しても本発明を適用することが可能である。

図１０は、不感帯処理の具体例を示す図である。図１０で示されるグラフでは、検出対象が顔であり、検出された顔に応じて顔枠の表示が行われるライブビュー画像について示している。図１０において、横軸はフレーム毎に顔の検出を行った検出回数を示し、縦軸は表示部におけるＸ座標を示す。グラフ上の四角印で表される線は不感帯の上限値を示し、菱形印で表される線は検出された顔の位置（Ｘ座標）を示し、バツ印で表される線は処理後の顔枠の表示用の位置（Ｘ座標）を示し、三角印で表される線は不感帯下限値を示す。なお、顔枠の表示用の位置は枠の中心の位置のＸ座標を示す。また、Ｘ座標が大きくなる方向を正の方向、小さくなる方向を負の方向として以下の説明を行う。

検出回数１７０から矢印Ｔ１で示されるタイミングまでは、不感帯の上限値と不感帯の下限値との間（不感帯内）で、顔位置が検出されている。したがって、顔枠の表示は変化せずに、顔枠は一定の位置で表示されている。

矢印Ｔ２で示されるタイミングでは、顔の位置が不感帯の上限値を超えて検出されているので、顔枠の表示位置は、検出された顔の位置に応じた位置となる。また、矢印Ｔ２で示されるタイミングでは、矢印Ｔ１で示されるタイミングでの不感帯と同じ不感帯が設定されている。これは、矢印Ｔ１で示されるタイミングでは顔の位置が不感帯内で検出されているからである。

矢印Ｔ３で示されるタイミングでは、顔の位置が不感帯の上限値を超えて検出されているので、顔枠の表示位置は、検出された顔の位置に応じた位置となる。また、矢印Ｔ３のタイミングでは不感帯が移動し、不感帯の幅も変更されている。具体的には、矢印Ｔ３のタイミングでは、矢印Ｔ２でのタイミングの顔枠の表示位置を基準に、矢印Ｔ２のタイミングで不感帯の上限値を超えた位置で顔枠が表示されているので、矢印Ｔ３のタイミングでは正方向の不感帯幅は小さく変更される。

このように、顔枠の表示に関して不感帯を設けることにより、安定した顔枠の表示及び検出した顔の位置への追従性を損なわないようにしている。また、上述の態様では、不感帯の幅を前回の顔枠の表示位置を基準にして、不感帯の位置及び不感帯の幅を調節しているので、より安定的で追従性のある顔枠の表示を行うことができる。

＜第２の実施形態＞

第１の実施形態では位置に対する不感帯について説明を行ったが、第２の実施形態においては、対象枠の大きさに対する不感帯を設定する例について説明を行う。図４で説明を行った各部は以下のような機能を本実施形態では有する。なお、以下の説明では第２の実施形態での特徴的な箇所を説明する。

対象検出部１０３は、対象を検出し、対象の大きさ情報を検出する。例えば対象検出部１０３は、対象である顔を検出し、その顔の大きさ情報（面積、長さ）を検出する。

対象枠決定部１０５は、最新の画像から対象の範囲である対象枠を決定する。対象枠は、検出された対象の大きさに応じて大きさが決定される。例えば、顔が検出された場合には、検出された顔の範囲を囲むようにして対象枠の大きさが決定される。

不感帯決定部１０７は、大きさ情報と前回の不感帯とに基づいて、対象の動き判定を行い、動き判定の結果に基づいて前回の不感帯を変更することができる。不感帯決定部１０７は、動き判定の結果が第１の方向を示す場合には、第１の方向の不感帯を小さくする。ここで不感帯決定部１０７は、正方形の顔枠の一辺の長さを数値化し、その数字が大きくなる方向を正方向、小さくなる方向を負方向として動き判定を行うことができる。

表示制御部１０９は、対象の大きさが、前回の不感帯の範囲外の場合には、対象枠を表示し、前回の不感帯の範囲内の場合には、前回の対象枠を表示する。

情報追加部１１１は、表示制御部１０９によって、表示された対象枠の大きさ情報を画像に記録する。具体的には、表示された対象枠の大きさ（面積又は一辺の長さ）をフレーム毎に付加する。情報追加部１１１での情報追加は、公知の手法により行われる。

図１１は、対象枠の大きさの不感帯に関して説明する図である。図１１中では、対象枠１３１は不感帯の下限値を示し、対象枠１３３は不感帯の上限値を示しており、対象枠１３９は表示用の対象枠を示している。例えば、対象枠１３１で示される不感帯の下限値及び対象枠１３３で示される不感帯の上限値の範囲内ある対象枠１３７に対応する対象が検出された場合には、表示制御部１０９は対象枠１３９を表示する。一方、対象枠１３１で示される不感帯の下限値及び対象枠１３３で示される不感帯の上限値の範囲外にある対象枠１３５に対応する対象が検出された場合には、表示制御部１０９は、対象枠１３５を表示用の対象枠として表示する。

次に、画像表示装置１１を使用した画像表示方法（画像表示工程）に関して説明する。

画像表示方法は、連続するフレームにおいて顔を検出し、検出した顔の位置をユーザに報知する顔枠を連続して表示する。

図１２及び図１３は、画像表示装置１１を使用した画像表示方法（画像表示工程）を示すフローチャートである。

先ず、画像取得部１０１により、顔が撮影された連続するフレーム画像を取得する（ステップＳ３０）。その後、対象検出部１０３は、取得されたフレームの各々において、顔を検出し、検出した顔の大きさ情報を取得する（ステップＳ３１）。

不感帯決定部１０７は、前回の「正（正方向）」の動き判定が「１」であるか否かを判定する（ステップＳ３２）。前回の「正」の動き判定が「１」である場合には、不感帯決定部１０７は正方向に小さい不感帯幅を設定する（ステップＳ３３）。一方、前回の「正」の動き判定が「０」である場合（「１」ではない場合）には、不感帯決定部１０７は正方向に大きい不感帯幅を設定する（ステップＳ３４）。なお、正方向は枠が大きくなる方向を示し、負方向は枠が小さくなる方向を示す。

次に、不感帯決定部１０７は、前回の「負」の動き判定が「１」であるか否かを判定する（ステップＳ３５）。前回の「負（負方向）」の動き判定が「１」である場合には、不感帯決定部１０７は負方向に小さい不感帯幅を設定する（ステップＳ３６）。一方、前回の「負」の動き判定が「０」である場合（「１」ではない場合）には、不感帯決定部１０７は負方向に大きい不感帯幅を設定する（ステップＳ３７）。

次に、不感帯決定部１０７は、上記の処理により設定された不感帯幅を用いて、前回の不感帯処理後の大きさを基準に不感帯を設定する（ステップＳ３８）。

図１３に移って、次に、不感帯決定部１０７は、取得した今回の顔の大きさが今回設定された不感帯を超えたか否かを判定する（ステップＳ３９）。取得した今回の顔の大きさが今回設定された不感帯を超えた場合には、不感帯決定部１０７は正方向に超えたか否かを判定する（ステップＳ４０）。そして、不感帯決定部１０７は、今回の顔の大きさが正方向に超えた場合には、動き判定を「正：１」「負：０」と設定する（ステップＳ４１）

。一方、対象検出部１０３は、今回の顔の大きさが負方向に超えた場合には、動き判定を「正：０」「負：１」と設定する（ステップＳ４２）。その後、表示制御部１０９は、顔枠の表示用に今回の検出された大きさ情報を使用して、顔枠を表示する（ステップＳ４３）。

一方で、今回の顔の大きさが不感帯を超えていないと判定された場合には、今回の動き判定を「正：０」「負：０」と設定する（ステップＳ４４）。そして、今回の大きさ情報を前回の大きさ情報で上書きする（ステップＳ４５）。その後、表示制御部１０９は、顔枠の表示用に前回の大きさ情報を使用する（ステップＳ４６）。

以上で説明したように、対象の大きさが、前回の不感帯の範囲内の場合には前回に表示した対象枠を表示するので、小さい変動（大きさの変動）では対象枠の表示用の大きさ情報を変えずに安定的に対象枠を表示することができる。また、対象の大きさが、前回の不感帯の範囲外の場合には、今回検出された対象に対応する対象枠を表示するので、検出された対象への追従性（大きさの追従性）が優れた対象枠の表示を行うことができる。

＜その他＞

［位置及び大きさに対する不感帯］

上述の説明においては、第１の実施形態において対象枠の位置に対する不感帯に関して説明し、第２の実施形態においては対象枠の大きさに対する不感帯に関して説明をした。

本発明では、対象枠の位置及び大きさに対して不感帯を決定することもできる。すなわち、対象枠の位置及び大きさに関して、不感帯が同時に設定される。このように、対象枠の位置と大きさとに関して不感帯を設定することにより、より安定的に対象への追従性が良く対象枠の表示を行うことができる。

［連続する画像］

上述の説明においては、画像取得部１０１が取得した画像に対して、対象検出部１０３により対象が検出され、対象枠決定部１０５により対象枠が決定されていた。しかし、本発明はこの態様に限定されるものではない。例えば画像取得部１０１が取得する連続する画像は、検出された対象の位置、及び対象の範囲である対象枠の位置に関する情報を有していてもよい。また、例えば画像取得部１０１が取得する連続する画像は、検出された対象の大きさ、及び対象の範囲である対象枠の大きさに関する情報を有していてもよい。この場合には、画像表示装置１１において、取得した画像から対象の検出（対象検出部１０３）及び対象枠の決定（対象枠決定部１０５）が不要となる。

＜スマートフォンの構成＞

上述の説明では、図１において撮像装置１０の一例として、カメラを用いて説明をしたが、本発明の適用はこれに限定されるものではない。本発明を適用可能な他の態様としては、例えば、カメラ機能を有する携帯電話機やスマートフォン、ＰＤＡ（Personal Digital Assistants）、携帯型ゲーム機が挙げられる。以下、本発明を適用可能なスマートフォンの一例について説明する。なお、図４におけるＣＰＵ２４０は主制御部５０１に対応し、記憶部２６０は記憶部５５０に対応し、モニタ３０は表示パネル５２１に対応する。

図１４は、スマートフォン５００の外観を示す図である。図１４に示すスマートフォン５００は、平板状の筐体５０２を有し、筐体５０２の一方の面に表示部としての表示パネル５２１と、入力部としての操作パネル５２２とが一体となった表示入力部５２０を備えている。また、係る筐体５０２は、スピーカ５３１と、マイクロホン５３２、操作部５４０と、カメラ部５４１とを備えている。なお、筐体５０２の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造やスライド機構を有する構成を採用することもできる。

図１５は、図１４に示すスマートフォン５００の構成を示すブロック図である。図１５に示すように、スマートフォンの主たる構成要素として、基地局と移動通信網とを介した移動無線通信を行う無線通信部５１０と、表示入力部５２０と、通話部５３０と、操作部５４０と、カメラ部５４１と、記憶部５５０と、外部入出力部５６０と、ＧＰＳ（Global Positioning System）受信部５７０と、モーションセンサ部５８０と、電源部５９０と、主制御部５０１とを備える。

無線通信部５１０は、主制御部５０１の指示にしたがって、移動通信網に収容された基地局に対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信、Ｗｅｂデータ及びストリーミングデータなどの受信を行う。

表示入力部５２０は、主制御部５０１の制御により、画像（静止画及び動画）や文字情報などを表示して視覚的にユーザに情報を伝達し、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル５２１と、操作パネル５２２とを備える。

表示パネル５２１は、ＬＣＤ（Liquid Crystal Display）、ＯＥＬＤ（Organic Electro-Luminescence Display）などを表示デバイスとして用いたものである。操作パネル５２２は、表示パネル５２１の表示面上に表示される画像を視認可能に載置され、ユーザの指や尖筆によって操作される一又は複数の座標を検出するデバイスである。かかるデバイスをユーザの指や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部５０１に出力する。次いで、主制御部５０１は、受信した検出信号に基づいて、表示パネル５２１上の操作位置（座標）を検出する。

図１４に示すように、本発明の撮像装置１０の一実施形態として例示しているスマートフォン５００の表示パネル５２１と操作パネル５２２とは一体となって表示入力部５２０を構成しているが、操作パネル５２２が表示パネル５２１を完全に覆うような配置となっている。かかる配置を採用した場合、操作パネル５２２は、表示パネル５２１外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル５２２は、表示パネル５２１に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル５２１に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。

なお、表示領域の大きさと表示パネル５２１の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル５２２が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。さらに、外縁部分の幅は、筐体５０２の大きさなどに応じて適宜設計されるものである。また、操作パネル５２２で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。

通話部５３０は、スピーカ５３１やマイクロホン５３２を備え、マイクロホン５３２を通じて入力されたユーザの音声を主制御部５０１にて処理可能な音声データに変換して主制御部５０１に出力したり、無線通信部５１０あるいは外部入出力部５６０により受信された音声データを復号してスピーカ５３１から出力するものである。また、図１４に示すように、例えば、スピーカ５３１、マイクロホン５３２を表示入力部５２０が設けられた面と同じ面に搭載することができる。

操作部５４０は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図１４に示すように、操作部５４０は、スマートフォン５００の筐体５０２の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。

記憶部５５０は、主制御部５０１の制御プログラム、制御データ、アプリケーションソフトウェア、通信相手の名称及び電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータ、及びダウンロードしたコンテンツデータを記憶し、又ストリーミングデータなどを一時的に記憶するものである。また、記憶部５５０は、スマートフォン内蔵の内部記憶部５５１と着脱自在な外部メモリスロットを有する外部記憶部５５２により構成される。なお、記憶部５５０を構成するそれぞれの内部記憶部５５１と外部記憶部５５２は、フラッシュメモリタイプ（flash memory type）、ハードディスクタイプ（hard disk type）、マルチメディアカードマイクロタイプ（multimedia card micro type）、カードタイプのメモリ（例えば、Micro SD（登録商標）メモリ等）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）などの記録媒体を用いて実現される。

外部入出力部５６０は、スマートフォン５００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、及びＩＥＥＥ１３９４など）又はネットワーク（例えば、インターネット、無線ＬＡＮ（Local Area Network）、ブルートゥース（Bluetooth）（登録商標）、ＲＦＩＤ（Radio Frequency Identification）、赤外線通信（Infrared Data Association：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ultra Wideband）（登録商標）、ジグビー（ZigBee）（登録商標）など）により直接的又は間接的に接続するためのものである。

スマートフォン５００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Memory card）、ＳＩＭ（Subscriber Identity Module Card）／ＵＩＭ（UserIdentity Module Card）カード、又はオーディオ・ビデオＩ／Ｏ（Input/Output）端子を介して接続される外部オーディオビデオ機器、無線接続される外部オーディオビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるＰＤＡ、及びイヤホンなどがある。外部入出力部５６０は、このような外部機器から伝送を受けたデータをスマートフォン５００の内部の各構成要素に伝達し、又はスマートフォン５００の内部のデータを外部機器に伝送することが可能である。

ＧＰＳ受信部５７０は、主制御部５０１の指示にしたがって、ＧＰＳ衛星ＳＴ１～ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン５００の緯度、経度、及び高度からなる位置を検出する。ＧＰＳ受信部５７０は、無線通信部５１０や外部入出力部５６０（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。

モーションセンサ部５８０は、例えば、３軸の加速度センサ及びジャイロセンサなどを備え、主制御部５０１の指示にしたがって、スマートフォン５００の物理的な動きを検出する。スマートフォン５００の物理的な動きを検出することにより、スマートフォン５００の動く方向や加速度が検出される。この検出結果は、主制御部５０１に出力されるものである。

電源部５９０は、主制御部５０１の指示にしたがって、スマートフォン５００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。

主制御部５０１は、マイクロプロセッサを備え、記憶部５５０が記憶する制御プログラム及び制御データにしたがって動作し、スマートフォン５００の各部を統括して制御するものである。また、主制御部５０１は、無線通信部５１０を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能及びアプリケーション処理機能を備える。

アプリケーション処理機能は、記憶部５５０が記憶するアプリケーションソフトウェアにしたがって主制御部５０１が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部５６０を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Ｗｅｂページを閲覧するＷｅｂブラウジング機能、本発明に係る圧縮処理を行う画像処理機能などがある。

また、主制御部５０１は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画や動画のデータ）に基づいて、映像を表示入力部５２０に表示する等の画像処理機能を備える。画像処理機能とは、主制御部５０１が、上記画像データを復号し、係る復号結果に画像処理を施して、画像を表示入力部５２０に表示する機能のことをいう。

さらに、主制御部５０１は、表示パネル５２１に対する表示制御と、操作部５４０、操作パネル５２２を通じたユーザ操作を検出する操作検出制御を実行する。

表示制御の実行により、主制御部５０１は、アプリケーションソフトウェアを起動するためのアイコン及びスクロールバーなどのソフトウェアキーを表示したり、或いは電子メールを作成するためのウィンドウを表示する。なお、スクロールバーとは、表示パネル５２１の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。

また、操作検出制御の実行により、主制御部５０１は、操作部５４０を通じたユーザ操作を検出したり、操作パネル５２２を通じてアイコンに対する操作、及びウィンドウの入力欄に対する文字列の入力を受け付け、或いはスクロールバーを通じた表示画像のスクロール要求を受け付ける。

さらに、操作検出制御の実行により主制御部５０１は、操作パネル５２２に対する操作位置が、表示パネル５２１に重なる重畳部分（表示領域）か、それ以外の表示パネル５２１に重ならない外縁部分（非表示領域）かを判定し、操作パネル５２２の感応領域及びソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。

また、主制御部５０１は、操作パネル５２２に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、或いはこれらを組合せて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。

カメラ部５４１は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）やＣＣＤ

（Charge-Coupled Device）などの撮像素子を用いて電子撮影するデジタルカメラであり、図１に示した撮像装置１０に相当する。また、カメラ部５４１は、主制御部５０１の制御により、撮影によって得た静止画の画像データを、例えばＪＰＥＧ（Joint Photographic coding Experts Group）で圧縮し、又は動画の画像データを、例えばＨ．２６４／ＡＶＣで圧縮して記憶部５５０に記録したり、外部入出力部５６０や無線通信部５１０を通じて出力することができる。図１４に示すようにスマートフォン５００において、カメラ部５４１は表示入力部５２０と同じ面に搭載されているが、カメラ部５４１の搭載位置はこれに限らず、表示入力部５２０の背面に搭載されてもよいし、或いは、複数のカメラ部５４１が搭載されてもよい。なお、複数のカメラ部５４１が搭載されている場合、撮影に供するカメラ部５４１を切り替えて単独にて撮影したり、或いは、複数のカメラ部５４１を同時に使用して撮影することもできる。

また、カメラ部５４１はスマートフォン５００の各種機能に利用することができる。例えば、表示パネル５２１にカメラ部５４１で取得した画像を表示することや、操作パネル５２２の操作入力のひとつとして、カメラ部５４１の画像を利用することができる。また、ＧＰＳ受信部５７０が位置を検出する際に、カメラ部５４１からの画像を参照して位置を検出することもできる。更には、カメラ部５４１からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサ（ジャイロセンサ）と併用して、スマートフォン５００のカメラ部５４１の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部５４１からの画像をアプリケーションソフトウェア内で利用することもできる。

その他、静止画又は動画の画像データにＧＰＳ受信部５７０により取得した位置情報、マイクロホン５３２により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部５８０により取得した姿勢情報等などを付加して記憶部５５０に記録したり、外部入出力部５６０や無線通信部５１０を通じて出力することもできる。

以上で本発明の例に関して説明してきたが、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。

１ ：ストロボ

２ ：シャッタボタン

３ ：電源／モードスイッチ

４ ：モードダイヤル

５ ：ズームボタン

６ ：十字ボタン

７ ：ＭＥＮＵ／ＯＫボタン

８ ：再生ボタン

９ ：ＢＡＣＫボタン

１０ ：撮像装置

１１ ：画像表示装置

１２ ：撮影レンズ

３０ ：モニタ

１０１ ：画像取得部

１０３ ：対象検出部

１０５ ：対象枠決定部

１０７ ：不感帯決定部

１０９ ：表示制御部

１１０ ：ズームレンズ

１１１ ：情報追加部

１４０ ：レンズ駆動部

１５０ ：フォーカスレンズ

２１０ ：撮像素子

２３０ ：Ａ／Ｄ変換器

２４０ ：ＣＰＵ

２５０ ：操作部

２６０ ：記憶部

Claims (21)

1. 画像表示装置であって、
   連続する画像を取得する画像取得部と、
   前記画像から対象を検出する対象検出部と、
   前記画像中の最新の画像から前記対象の範囲である対象枠を決定する対象枠決定部と、
   前記対象枠の位置に対する不感帯を決定する不感帯決定部と、
   一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶する記憶部と、
   前記対象の位置が、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示する表示制御部と、
   を備える画像表示装置。
2. 前記対象検出部は、前記対象の位置情報を検出し、
   前記不感帯決定部は、前記位置情報に基づいて、前記不感帯を変更する請求項１に記載の画像表示装置。
3. 前記不感帯決定部は、前記位置情報と前記前回の不感帯とに基づいて、前記対象の動き判定を行い、前記動き判定の結果に基づいて前記前回の不感帯を変更する請求項２に記載の画像表示装置。
4. 画像表示装置であって、
   連続する画像を取得する画像取得部と、
   前記画像から対象を検出する対象検出部と、
   前記画像中の最新の画像から前記対象の範囲である対象枠を決定する対象枠決定部と、
   前記対象枠の大きさに対する不感帯を決定する不感帯決定部と、
   一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶する記憶部と、
   前記対象の大きさが、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示する表示制御部と、
   を備える画像表示装置。
5. 前記対象検出部は、前記対象の大きさ情報を検出し、
   前記不感帯決定部は、前記大きさ情報に基づいて、前記不感帯を変更する請求項４に記載の画像表示装置。
6. 前記不感帯決定部は、前記大きさ情報と前記前回の不感帯とに基づいて、前記対象の動き判定を行い、前記動き判定の結果に基づいて前記前回の不感帯を変更する請求項５に記載の画像表示装置。
7. 前記不感帯決定部は、前記動き判定の結果が第１の方向を示す場合には、前記第１の方向の前記不感帯を小さくする請求項３又は６に記載の画像表示装置。
8. 前記不感帯決定部は、前記動き判定の結果が第１の方向を示さない場合には、前記第１の方向の前記不感帯を大きくする請求項７に記載の画像表示装置。
9. 前記不感帯の変更は、前記不感帯の位置又は大きさを、前記対象検出部で検出された前記対象によって変更する請求項２、３、及び５から８のいずれか１項に記載の画像表示装置。
10. 画像表示装置であって、
    連続する画像であって、検出された対象の位置、及び前記対象の範囲である対象枠の位置に関する情報を有する画像を取得する画像取得部と、
    前記対象枠の位置に対する不感帯を決定する不感帯決定部と、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶する記憶部と、
    前記対象の位置が、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示する表示制御部と、
    を備える画像表示装置。
11. 画像表示装置であって、
    連続する画像であって、検出された対象の大きさ、及び前記対象の範囲である対象枠の大きさに関する情報を有する画像を取得する画像取得部と、
    前記対象枠の大きさに対する不感帯を決定する不感帯決定部と、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶する記憶部と、
    前記対象の大きさが、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示する表示制御部と、
    を備える画像表示装置。
12. 前記表示制御部によって、表示された前記対象枠の位置情報又は大きさ情報を画像に記録する情報追加部を備える請求項１から１１のいずれか１項に記載の画像表示装置。
13. 前記不感帯は前記対象枠に対する不感帯幅であり、前記不感帯の初期値は、一定である請求項１から１２のいずれか１項に記載の画像表示装置。
14. 前記対象検出部が検出する前記対象は物体である請求項１から９のいずれか１項に記載の画像表示装置。
15. 前記物体は、顔又は瞳である請求項１４に記載の画像表示装置。
16. 前記対象枠は矩形である請求項１から１５のいずれか１項に記載の画像表示装置。
17. 前記対象枠は楕円である請求項１から１６のいずれか１項に記載の画像表示装置。
18. 画像表示方法であって、
    連続する画像を取得するステップと、
    前記画像から対象を検出するステップと、
    前記画像中の最新の画像から前記対象の範囲である対象枠を決定するステップと、
    前記対象枠の位置に対する不感帯を決定するステップと、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶するステップと、
    前記対象の位置が、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示するステップと、
    を含む画像表示方法。
19. 画像表示方法であって、
    連続する画像を取得するステップと、
    前記画像から対象を検出するステップと、
    前記画像中の最新の画像から前記対象の範囲である対象枠を決定するステップと、
    前記対象枠の大きさに対する不感帯を決定するステップと、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶するステップと、
    前記対象の大きさが、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示するステップと、
    を含む画像表示方法。
20. 画像表示工程をコンピュータに実行させるプログラムであって、
    連続する画像を取得するステップと、
    前記画像から対象を検出するステップと、
    前記画像中の最新の画像から前記対象の範囲である対象枠を決定するステップと、
    前記対象枠の位置に対する不感帯を決定するステップと、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶するステップと、
    前記対象の位置が、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示するステップと、
    を含む画像表示工程をコンピュータに実行させるプログラム。
21. 画像表示工程をコンピュータに実行させるプログラムであって、
    連続する画像を取得するステップと、
    前記画像から対象を検出するステップと、
    前記画像中の最新の画像から前記対象の範囲である対象枠を決定するステップと、
    前記対象枠の大きさに対する不感帯を決定するステップと、
    一画像前の画像から決定した前記対象枠に相当する前回の対象枠、及び、一画像前の画像から決定した前記不感帯に相当する前回の不感帯を記憶するステップと、
    前記対象の大きさが、前記前回の不感帯の範囲外の場合には、前記対象枠を表示し、前記前回の不感帯の範囲内の場合には、前記前回の対象枠を表示するステップと、
    を含む画像表示工程をコンピュータに実行させるプログラム。

Images