JP2015099969A - 撮像装置、撮像制御方法及びプログラム - Google Patents

Abstract

【課題】ユーザが装置から離れた状態で動画像を撮像する際の利便性の向上を図る。
【解決手段】撮像装置１００であって、表示パネル８ａに表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する状態判定部４ａと、所定の状態であると判定された場合に、撮像部による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する終了制御部４ｄと、を備えている。
【選択図】図１

Description

本発明は、被写体の動画像を撮像する撮像装置、撮像制御方法及びプログラムに関する。

従来、折りたたみ式の携帯端末の筐体を閉じる動作が行われることにより、動画像の撮像を自動的に終了させる技術が知られている（例えば、特許文献１参照）。

特許４５５２６９９号公報

しかしながら、上記特許文献１の場合、携帯端末のユーザが自分以外を被写体として動画像を撮像することを想定している。このため、例えば、ユーザが自分を被写体として動画像の撮像を開始して当該撮像を終了させる場合、ユーザが携帯端末自体を直接操作して撮像を終了させる必要があり、利便性が悪いといった問題があった。

本発明は、このような問題に鑑みてなされたものであり、本発明の課題は、ユーザが装置から離れた状態で動画像を撮像する際の利便性の向上を図ることができることを目的とする。

上記課題を解決するため、本発明に係る撮像装置は、
被写体の動画像を撮像する撮像手段と、前記撮像手段により撮像された動画像を表示する表示手段と、前記表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する第一の判定手段と、前記第一の判定手段により前記所定の状態であると判定された場合に、前記撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する第一の制御手段と、を備えたことを特徴としている。

また、本発明に係る撮像制御方法は、
撮像装置を用いた撮像制御方法であって、表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する処理と、前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する処理と、を含むことを特徴としている。

また、本発明に係るプログラムは、
コンピュータを、表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する判定手段、前記判定手段により前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する制御手段、として機能させることを特徴としている。

本発明によれば、ユーザが装置から離れた状態で動画像を撮像する際の利便性の向上を図ることができる。

本発明を適用した一実施形態の撮像装置の概略構成を示すブロック図である。 図１の撮像装置を模式的に示す斜視図である。 図１の撮像装置による撮像処理に係る動作の一例を示すフローチャートである。 図３の撮像処理における撮像制御処理に係る動作の一例を示すフローチャートである。 図３の撮像処理に係るライブビュー画像の一例を模式的に示す図である。 図３の撮像処理に係る動画像の一例を模式的に示す図である。 図３の撮像処理に係るライブビュー画像の一例を模式的に示す図である。 図３の撮像処理における画像特定処理に係る動作の一例を示すフローチャートである。 図８の画像特定処理に係るフレーム画像の一例を模式的に示す図である。

以下に、本発明について、図面を用いて具体的な態様を説明する。ただし、発明の範囲は、図示例に限定されない。

図１は、本発明を適用した一実施形態の撮像装置１００の概略構成を示すブロック図である。また、図２（ａ）は、図１の撮像装置１００を模式的に示す斜視図であり、図２（ｂ）は、撮像装置１００の表示パネル８ａを１８０°回動させた状態を模式的に示す斜視図である。
図１に示すように、本実施形態の撮像装置１００は、中央制御部１と、メモリ２と、撮像部３と、撮像制御部４と、画像データ生成部５と、画像処理部６と、画像記録部７と、表示部８と、操作入力部９とを備えている。
また、中央制御部１、メモリ２、撮像部３、撮像制御部４、画像データ生成部５、画像処理部６、画像記録部７及び表示部８は、バスライン１０を介して接続されている。

また、撮像装置１００は、図２（ａ）及び図２（ｂ）に示すように、撮像部３（等に、レンズ部３ａ；後述）を具備する装置本体部１００Ａに表示部８の表示パネル８ａ（表示手段；後述）が所定の回動機構（例えば、ヒンジ機構等）を介して取りつけられている。具体的には、表示パネル８ａは、光軸Ｘ方向に略直交する一の軸（例えば、水平方向の軸等）周りに略１８０°回動自在に装置本体部１００Ａに軸支されている。つまり、表示パネル８ａを装置本体部１００Ａに対して相対的に略１８０°回動させることで、表示パネル８ａの表示方向を撮像部３の撮像方向と略等しくするように、すなわち、表示パネル８ａをレンズ部３ａの露出面と同様に被写体側に臨むように配置することができるようになっている（図２（ｂ）参照）。そして、表示パネル８ａをレンズ部３ａの露出面と同じ側とした状態では、ユーザが表示パネル８ａに表示されるユーザ自身を含む画像を視認しながら、所謂、自分撮りを行うことができる。
なお、表示パネル８ａは、例えば、装置本体部１００Ａに対して光軸Ｘ方向に略直交する垂直方向の軸周りに略１８０°回動自在に軸支されていても良く、この場合も、表示パネル８ａをレンズ部３ａの露出面と同じ側とした状態では、所謂、自分撮りを行うことができる。

中央制御部１は、撮像装置１００の各部を制御するものである。具体的には、中央制御部１は、図示は省略するが、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）を備え、撮像装置１００用の各種処理プログラム（図示略）に従って各種の制御動作を行う。

メモリ２は、例えば、ＤＲＡＭ（Dynamic Random Access Memory）等により構成され、中央制御部１や撮像制御部４や画像処理部６等の各部によって処理されるデータ等を一時的に記憶するものである。

撮像部（撮像手段）３は、被写体を撮像する。具体的には、撮像部３は、レンズ部３ａと、電子撮像部３ｂとを備えている。

レンズ部３ａは、例えば、ズームレンズやフォーカスレンズ等の複数のレンズから構成されている。
電子撮像部３ｂは、例えば、ＣＭＯＳ（Complementary Metal-oxide Semiconductor）やＣＣＤ（Charge Coupled Device）等のイメージセンサから構成され、レンズ部３ａの各種レンズを通過した光学像を二次元の画像信号に変換する。
なお、図示は省略するが、撮像部３は、レンズ部３ａを通過する光の量を調整する絞りを備えていても良い。

撮像制御部４は、撮像部３による被写体の撮像を制御する。
すなわち、撮像制御部４は、図示は省略するが、タイミング発生器、ドライバなどを備えている。そして、撮像制御部４は、タイミング発生器、ドライバにより電子撮像部３ｂを走査駆動して、所定周期毎に光学像を電子撮像部３ｂにより二次元の画像信号に変換させ、当該電子撮像部３ｂの撮像領域から１画面分ずつフレーム画像を読み出して画像データ生成部５に出力させる。

また、撮像制御部４は、状態判定部４ａと、重畳判定部４ｂと、開始制御部４ｃと、終了制御部４ｄとを具備している。
なお、撮像制御部４の各部は、例えば、所定のロジック回路から構成されているが、当該構成は一例であってこれに限られるものではない。

状態判定部４ａは、当該撮像装置１００の状態を判定する。
すなわち、状態判定部（第一の判定手段）４ａは、撮像部３により撮像されて表示部８に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態（所謂、自分撮りの状態）であるか否かを判定する。
具体的には、状態判定部４ａは、撮像部３による被写体の撮像の際に、撮像部３の撮像方向（レンズ部３ａの露出方向）と表示パネル８ａの表示方向が略等しくなっている状態であるか否かを判定する。例えば、状態判定部４ａは、装置本体部１００Ａに対して表示パネル８ａが略１８０°回動したことを機械的に検出するスイッチ（図示略）の検出信号や、表示パネル８ａの重力方向に対する傾きを検出するセンサ（例えば、加速度センサ等；図示略）の検出信号の入力に基づいて、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっているか否かを判定する。
そして、状態判定部４ａは、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっていると判定した場合に、撮像部３により撮像されて表示部８に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であると特定する。

重畳判定部４ｂは、表示パネル８ａに表示される被写体のライブビュー画像Ｌと指標とが重畳しているか否かを判定する。
すなわち、後述するように、表示部８の表示制御部８ｂは、撮像部３により撮像されて画像データ生成部５により生成された複数の画像フレームを所定の再生フレームレートで逐次更新しながらライブビュー画像Ｌを表示パネル８ａに表示させる（図５参照）。このとき、表示制御部８ｂは、所定の格納手段（例えば、メモリ２等）に格納されている、例えば、ゴルフクラブのクラブヘッドＣやボールＢの初期位置を合わせるための位置指標Ｍ１、Ｍ２並びに撮像開始を指示する開始指標Ｍ３等の画像データを読み出して取得し、ライブビュー画像Ｌに重畳させてＯＳＤ（on-screen display）表示させる。
そして、重畳判定部（第二の判定手段）４ｂは、逐次表示されるライブビュー画像Ｌ内で開始指標Ｍ３がＯＳＤ表示されている検出領域Ａ１内の画素値の変動に基づいて、撮像部３により撮像されて表示パネル８ａに表示される被写体像と開始指標Ｍ３とが重畳しているか否かを判定する。具体的には、重畳判定部４ｂは、ライブビュー画像Ｌを構成する複数のフレーム画像における検出領域Ａ１の画素値の代表値を被写体像（例えば、ゴルフクラブのクラブヘッドＣの画像等）の検出用の閾値として設定する。例えば、ゴルフクラブのクラブヘッドＣの画像と検出領域Ａ１とが重畳していない状態で、重畳判定部４ｂは、複数のフレーム画像の各々について、隣合うフレーム画像との検出領域Ａ１の画素値（例えば、輝度値）の差分二乗和ＳＳＤ（Sum of Squared Differences）を逐次算出していき、その代表値（例えば、平均値、中央値等）を演算して被写体の検出用の閾値として設定する。そして、例えば、ユーザがゴルフクラブのクラブヘッドＣの画像が検出領域Ａ１と重畳するように当該ゴルフクラブを操作すると、検出領域Ａ１の隣合うフレーム画像に対する画素値（例えば、輝度値）の差分二乗和ＳＳＤが閾値に対して大きくなり、重畳判定部４ｂは、ライブビュー画像ＬにおけるクラブヘッドＣの画像と開始指標Ｍ３とが重畳していると判定する。
また、重畳判定部４ｂは、クラブヘッドＣの画像と開始指標Ｍ３とが重畳しているか否かの判定結果を開始制御部４ｃに対して逐次出力する。

開始制御部４ｃは、撮像部３による被写体の記録用の動画像の撮像を開始させる。
すなわち、開始制御部４ｃ（第二の制御手段）は、ライブビュー画像Ｌ内の被写体像（例えば、クラブヘッドＣの画像）と開始指標Ｍ３（検出領域Ａ１）とが重畳していると判定された後、撮像部３による被写体の記録用の動画像の撮像を開始させる。具体的には、重畳判定部４ｂから出力されたクラブヘッドＣの画像と開始指標Ｍ３とが重畳しているとの判定結果が入力されると、開始制御部４ｃは、計時部（図示略）を制御して所定の時間（例えば、５秒等）のカウントダウンを開始し、カウントダウンが終了した（所定の時間が経過した）タイミングで、撮像部３による被写体の記録用の動画像の撮像を開始させる。例えば、開始制御部４ｃは、撮像部３による所定の撮像フレームレート（例えば、１０００ｆｐｓ等）での撮像を開始させる。 これにより、画像データ生成部５は、被写体の一連の動作（例えば、ユーザによるゴルフのスイングの一連の動作等）が撮像部３により連続して撮像された複数のフレーム画像の各々を所定形式（例えば、ＭＰＥＧ形式やモーションＪＰＥＧ形式等）で符号化して、動画像の画像データを生成する。
また、開始制御部４ｃは、被写体の記録用の動画像の撮像を開始させると、その旨を表す信号を終了制御部４ｄに対して出力する。
ここで、所定の時間は、適宜任意に変更可能であり、例えば、ユーザによる操作部の所定操作に基づいて指定するような構成であっても良い。すなわち、例えば、ユーザにより操作部の各種ボタンが操作されて所定の時間が指定されると、操作入力部９は、指定された所定の時間に応じた信号を中央制御部１に出力する。中央制御部１は、操作入力部９から出力され入力された信号に従って所定の時間を設定する。

終了制御部４ｄは、撮像部３による被写体の記録用の動画像の撮像の終了を制御する。
すなわち、終了制御部（第一の制御手段）４ｄは、状態判定部４ａにより撮像部３により撮像されて表示部８に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態（所謂、自分撮りの状態）であると判定された場合に、撮像部３による被写体の動画像の撮像の開始後に所定の撮像時間（例えば、５秒等）が経過すると、当該撮像を終了させるように制御する。具体的には、開始制御部４ｃから出力された被写体の記録用の動画像の撮像を開始した旨を表す信号が入力されると、終了制御部４ｄは、計時部（図示略）を制御して所定の撮像時間（例えば、５秒等）のカウントダウンを開始し、カウントダウンが終了した（所定の撮像時間が経過した）タイミングで、撮像部３による記録用の動画像の撮像を終了させる。
ここで、所定の撮像時間は、適宜任意に変更可能であり、例えば、ユーザによる操作部の所定操作に基づいて指定するような構成であっても良い。すなわち、例えば、ユーザにより操作部の各種ボタンが操作されて撮像時間が指定されると、操作入力部（指定手段）９は、指定された撮像時間に応じた信号を中央制御部１に出力する。中央制御部１は、操作入力部９から出力され入力された信号に従って撮像時間を設定する。

また、終了制御部４ｄは、状態判定部４ａにより所謂、自分撮りの状態でない、つまり、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっていないと判定された場合に、撮像部３による被写体の動画像の撮像の開始後に所定の時間が経過しても、当該撮像を終了させないように制御する。すなわち、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっていない場合には、ユーザ以外の第三者が撮像者となっている状況であると考えられるため、当該第三者による操作部の所定操作（例えば、撮像を終了させる操作等）に基づいて、被写体の動画像の撮像を終了させることができる。

画像データ生成部５は、電子撮像部３ｂから転送されたフレーム画像のアナログ値の信号に対してＲＧＢの各色成分毎に適宜ゲイン調整した後に、サンプルホールド回路（図示略）でサンプルホールドしてＡ／Ｄ変換器（図示略）でデジタルデータに変換し、カラープロセス回路（図示略）で画素補間処理及びγ補正処理を含むカラープロセス処理を行った後、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒ（ＹＵＶデータ）を生成する。
また、画像データ生成部５は、生成した画像データをバッファメモリとして使用されるメモリ２や画像記録部７に転送する。

画像処理部６は、画像取得部６ａと、領域設定部６ｂと、復号部６ｃと、閾値設定部６ｄと、フレーム番号特定部６ｅと、画像特定部６ｆとを具備している。
なお、画像処理部６の各部は、例えば、所定のロジック回路から構成されているが、当該構成は一例であってこれに限られるものではない。

画像取得部６ａは、画像特定処理の処理対象となる画像を取得する。
すなわち、画像取得部（取得手段）６ａは、被写体の動作が連続的に撮像された複数のフレーム画像Ｆ１〜Ｆ５（図６（ａ）〜図６（ｅ）参照）を取得する。具体的には、画像取得部６ａは、例えば、被写体による所定のスポーツの一連の動作（例えば、ゴルフのスイングにおけるクラブヘッドＣの動作等）が撮像部３により撮像されて画像データ生成部５により生成された複数のフレーム画像からなる動画像の画像データを、画像特定処理の処理対象として取得する。
例えば、撮像制御部４は、被写体による所定のスポーツの一連の動作を所定の撮像フレームレート（例えば、１０００ｆｐｓ等）で撮像部３により撮像させ、画像データ生成部５は、フレーム番号が対応付けられた複数のフレーム画像からなる動画像の画像データを生成してメモリ２に転送する。そして、画像取得部６ａは、メモリ２に格納されている動画像の画像データを読み出して、画像特定処理の処理対象として取得する。
なお、画像取得部６ａは、撮像部３による被写体の撮像後に画像記録部７に記録されている動画像の画像データを読み出して、画像特定処理の処理対象として取得しても良い。

領域設定部６ｂは、被写体の検出領域を設定する。
すなわち、領域設定部（領域設定手段）６ｂは、画像取得部６ａにより取得された動画像を構成する複数のフレーム画像の各々について所定位置に、被写体（例えば、クラブヘッドＣ等）が存在する時点のフレーム番号（識別情報）を特定するための複数の検出領域を設定する。具体的には、領域設定部６ｂは、例えば、複数のフレーム画像の各々について上下方向略中央部の左右方向両端寄りの位置に、略矩形状の検出領域を二つ設定する（図９（ａ）〜図９（ｃ）参照）。ここで、被写体の検出領域の位置は、例えば、被写体の一連の動作における当該被写体の移動方向を基準として設定される。つまり、領域設定部６ｂは、例えば、左右方向に移動する被写体に対しては各フレーム画像の左右方向両端寄りの位置に少なくとも二つの検出領域Ａ２、Ａ３を設定し、上下方向に移動する被写体に対しては各フレーム画像の上下方向両端寄りの位置に少なくとも二つの検出領域（図示略）を設定する。
また、領域設定部６ｂは、複数のフレーム画像のうち、最初のフレーム画像Ｆ１（図９（ａ）参照）の所定位置に被写体の検出領域を設定することで、残りのフレーム画像についても同様に、最初のフレーム画像Ｆ１の検出領域に対応する位置に検出領域を適用して設定する。
なお、上記した検出領域の配置、個数、形状等は、一例であってこれに限られるものではなく、適宜任意に変更可能である。

復号部６ｃは、複数のフレーム画像からなる動画像の画像データを復号する。
具体的には、復号部６ｃは、例えば、画像取得部６ａにより取得された所定形式（例えば、ＭＰＥＧ形式やモーションＪＰＥＧ形式等）で符号化されている動画像の画像データに対して、当該動画像データの符号化方式に応じた復号処理を施して、複数のフレーム画像のＹＵＶデータを生成する。
このとき、復号部６ｃは、例えば、表示パネル８ａの表示解像度等に基づいて各フレーム画像を所定サイズ（例えば、ＶＧＡやＱＶＧＡサイズ）に縮小する処理を行っても良い。

閾値設定部６ｄは、被写体の検出用の閾値を設定する。
すなわち、閾値設定部（閾値設定手段）６ｄは、複数のフレーム画像のうち、所定期間内の所定数のフレーム画像における検出領域の画素値の代表値を被写体の検出用の閾値として設定する。具体的には、閾値設定部６ｄは、例えば、復号部６ｃにより復号された最初のフレーム画像Ｆ１から所定数（例えば、ｎ個；ｎは自然数）分のフレーム画像について、検出領域毎に隣合うフレーム画像との画素値（例えば、輝度値）の差分二乗和ＳＳＤを算出する。そして、閾値設定部（算出手段）５ｄは、検出領域毎に、算出された複数（例えば、ｎ−１個）の差分二乗和ＳＳＤの代表値（例えば、平均値、中央値等）を演算して、被写体が検出領域に存在する時点のフレーム番号を特定するための閾値として設定する。

なお、上記した閾値の算出方法は、一例であってこれに限られるものではなく、適宜任意に変更可能である。また、例えば、フレーム画像における背景の色が一色の場合や模様が一様の場合等には、閾値設定部６ｄは、何れか一の検出領域（例えば、左側の検出領域Ａ２等）について算出された代表値（閾値）を他の検出領域（例えば、右側の検出領域Ａ３等）について適用しても良い。

フレーム番号特定部６ｅは、検出領域内に被写体が存在する時点のフレーム番号を特定する。
すなわち、フレーム番号特定部６ｅは、領域設定部６ｂにより設定された複数の検出領域における各検出領域の画素値の変動に基づいて、当該各検出領域内に被写体が存在する時点のフレーム番号（フレームインの時点のフレーム番号及びフレームアウトの時点のフレーム番号）を特定する。具体的には、フレーム番号特定部（判定手段）５ｅは、検出領域毎に、当該検出領域毎の画素値が閾値設定部６ｄにより設定された各閾値に対して大きいか否かを判定する。そして、検出領域毎の画素値が閾値設定部６ｄにより設定された各閾値に対して大きいと判定されると、当該検出領域の画素値が閾値設定部６ｄにより設定された閾値を超えた時点のフレーム番号を特定する（図９（ｂ）及び図９（ｃ）参照）。
例えば、フレーム番号特定部６ｅは、復号部６ｃにより復号された各フレーム画像について隣合うフレーム画像との検出領域の画素値（例えば、輝度値）の差分二乗和ＳＳＤを評価値として算出する。続けて、フレーム番号特定部６ｅは、算出された評価値と閾値設定部６ｄにより設定された閾値とを比較して、評価値が閾値よりも大きいか否かを判定する。当該判定の結果、フレーム番号特定部６ｅは、評価値が閾値を超えた時点のフレーム番号を特定する。例えば、ゴルフのスイングの場合、左右方向に移動するクラブヘッドＣが検出領域を通過することで、評価値が閾値よりも大きくなる。
また、フレーム番号特定部６ｅは、評価値が閾値よりも大きいと判定された時点のフレーム番号のうち、当該閾値に対する相違度が最も大きい時点のフレーム番号を特定する。すなわち、例えば、左右方向に移動するクラブヘッドＣが検出領域を通過することで、評価値が閾値よりも大きくなり、当該クラブヘッドＣと検出領域との重なり領域が最も大きくなると相違度が最も大きくなる。ここで、打ち出されたボールＢが一方の検出領域（後述するフレームアウト側の検出領域Ａ３）を通過する際にも評価値が閾値よりも大きくなるが、クラブヘッドＣが通過する際の評価値の方がボールＢの評価値に比して大きくなるため、閾値に対する相違度が最も大きくなった評価値に対応するフレーム画像の検出領域内には、クラブヘッドＣが存在すると考えられる。

ここで、左右二つの検出領域Ａ２、Ａ３内におけるフレームイン及びフレームアウトの時点のフレーム番号の特定処理は、当該被写体のフレームアウト側に対応する検出領域Ａ３（図９（ｂ）参照）から先に行われても良い。すなわち、例えば、ゴルフのスイングの場合、右利きの人のスイングでは、クラブヘッドＣが左側からフレームインして右側からフレームアウトする軌道を描くことから、右側の検出領域Ａ３から先に特定処理が行われ、その一方で、左利きの人のスイングでは、逆に左側の検出領域Ａ２から先に特定処理が行われる。つまり、動画抽出対象のスイングを行う者が左利きならば、操作入力部９に対する操作を行うことにより、検出領域Ａ２及びＡ３における特定処理の順を変更する設定をするようにすれば良い。
このとき、フレーム番号特定部６ｅは、検出領域Ａ３を用いたフレームアウトの時点のフレーム番号の特定処理については（図９（ｂ）参照）、復号部６ｃにより復号された全てのフレーム画像を処理対象とする。その一方で、フレーム番号特定部６ｅは、検出領域Ａ２を用いたフレームインの時点のフレーム番号の特定処理については（図９（ｂ）参照）、特定されたフレームアウトの時点のフレーム番号を基準とした所定数のフレーム画像を処理対象とする。例えば、フレーム番号特定部６ｅは、ゴルフの標準的なスイングスピード（例えば、３０〜４０ｍ／ｓ等）、撮像部３の撮像フレームレートや画角等を考慮して、検出領域Ａ３を用いて特定されたフレームアウトの時点のフレーム番号に対応するフレーム画像から所定数分のフレームを遡ったフレーム画像を特定し、当該特定されたフレーム画像以降のフレームであって、検出領域Ａ３を用いて特定されたフレームアウトの時点のフレーム番号に対応するフレーム画像の一つ前のフレーム画像までを処理対象とする。
これにより、ゴルフのスイングの場合、テイクバックと振り下ろしの各々の動作にてフレームイン側の検出領域Ａ２を通過することとなるが、テイクバックの際にクラブヘッドＣが当該検出領域Ａ２内に存在するフレーム画像のフレーム番号がフレームインの時点のフレーム番号として誤って特定されることを抑制することができる。

画像特定部６ｆは、被写体の動作における所定の時点を基準とする複数のフレーム画像を特定する。
すなわち、画像特定部（特定手段）６ｆは、フレーム番号特定部６ｅによるフレームイン及びフレームアウトの時点のフレーム番号の特定結果に基づいて、複数の画像内で被写体の動作における所定の時点（例えば、クラブヘッドＣによりボールＢを打った瞬間のインパクト等）に関連するフレーム画像を複数特定する。具体的には、例えば、画像特定部６ｆは、検出領域Ａ２、Ａ３を用いた被写体（例えば、クラブヘッドＣ）のフレームイン及びフレームアウトの時点のフレーム番号の特定結果に基づいて、当該フレームイン及びフレームアウトの時点のフレーム番号に対応するフレーム画像Ｆ２、Ｆ４をそれぞれ特定する。そして、画像特定部６ｆは、所定の時点に関連するフレーム画像Ｆ２、Ｆ４に基づいて、複数のフレーム画像のうち当該所定の時点を基準とする複数のフレーム画像を特定する。例えば、画像特定部（抽出手段）５ｆは、特定された二つのフレーム番号に基づいて、複数のフレーム画像から当該二つのフレーム番号間の複数のフレーム画像を特定し、動画像として抽出する。
このとき、画像特定部６ｆは、フレーム番号特定部６ｅによる複数の検出領域を用いて特定されたフレームイン及びフレームアウトの時点のフレーム番号の順序が所定の順序であった場合に、特定されたフレームイン及びフレームアウトの画像を所定の時点に関連するフレーム画像として判定する。つまり、検出領域Ａ２を用いて特定されたフレームインの時点のフレーム番号の方が、検出領域Ａ３を用いて特定されたフレームアウトの時点のフレーム番号よりも小さい場合に、当該二つのフレーム番号に対応するフレーム画像Ｆ２、Ｆ４間には、クラブヘッドＣによりボールＢを打った瞬間のインパクトの時点（所定の時点）に対応するフレーム画像Ｆ３が含まれていることとなる。

なお、画像特定部６ｆは、例えば、ボールＢや初期状態のクラブヘッドの位置と二つの検出領域Ａ２、Ａ３との相対的な位置関係を考慮して、二つのフレーム画像Ｆ２、Ｆ４間にてボールＢを打った瞬間のインパクトに対応するフレーム画像Ｆ３自体を特定しても良い。例えば、ボールＢが二つの検出領域Ａ２、Ａ３の略中間に配置されている場合には、二つのフレーム画像Ｆ２、Ｆ４間の略中間にボールＢを打った瞬間のインパクトに対応するフレーム画像Ｆ３が存在すると考えられる。

画像記録部７は、例えば、不揮発性メモリ（フラッシュメモリ）等により構成されている。また、画像記録部７は、画像データ生成部５の符号化部（図示略）により所定の符号化方式で符号化された各種の画像の画像データを記録する。
具体的には、画像記録部７は、例えば、撮像部３により被写体の一連の動作が連続して撮像された動画像の画像データや、当該動画像から抽出され、所定の時点を基準とする所定数のフレーム画像からなる動画像の画像データ等を記録する。

なお、画像記録部７は、例えば、記録媒体（図示略）が着脱自在に構成され、装着された記録媒体からのデータの読み出しや記録媒体に対するデータの書き込みを制御する構成であっても良い。

表示部８は、静止画像や動画像を表示する。具体的には、表示部８は、表示パネル８ａと、表示制御部８ｂとを具備している。

表示パネル８ａは、表示領域内に画像を表示する。具体的には、表示パネル８ａは、静止画撮像モードや動画撮像モードにて、撮像部３による被写体の撮像により生成された複数の画像フレームを所定の再生フレームレートで逐次更新しながらライブビュー画像Ｌを表示する。
なお、表示パネル８ａとしては、例えば、液晶表示パネルや有機ＥＬ表示パネルなどが挙げられるが、一例であってこれらに限られるものではない。

表示制御部８ｂは、メモリ２や画像記録部７から読み出され画像処理部６により復号された所定サイズの画像データに基づいて、所定の画像を表示パネル８ａの表示画面に表示させる制御を行う。具体的には、表示制御部８ｂは、ＶＲＡＭ（Video Random Access Memory）、ＶＲＡＭコントローラ、デジタルビデオエンコーダなどを備えている。そして、デジタルビデオエンコーダは、画像処理部６により復号されてＶＲＡＭ（図示略）に記憶されている輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを、ＶＲＡＭコントローラを介してＶＲＡＭから読み出して、これらのデータを元にビデオ信号を発生して表示パネル８ａに出力する。

操作入力部９は、装置本体に対して各種指示を入力するためのものである。
具体的には、操作入力部９は、例えば、シャッタボタン、動作モードや機能等の選択指示に係る上下左右のカーソルボタン、決定ボタン等を具備する操作部（図示略）を備えている。
そして、ユーザにより操作部の各種ボタンが操作されると、操作入力部９は、操作されたボタンに応じた操作指示を中央制御部１に出力する。中央制御部１は、操作入力部９から出力され入力された操作指示に従って所定の動作（例えば、被写体の撮像等）を各部に実行させる。
なお、操作入力部９は、表示部８の表示パネル８ａと一体となって設けられたタッチパネル（図示略）を有して構成されていても良い。

次に、撮像処理について、図３〜図９を参照して説明する。
図３は、撮像処理に係る動作の一例を示すフローチャートである。

以下に説明する撮像処理は、ユーザによる操作入力部９の所定操作に基づいて、メニュー画面（図示略）に表示された複数の動作モードの中からインパクト画像抽出モードが選択指示された場合に実行される処理である。

＜撮像処理＞
図３のフローチャートに示すように、先ず、表示制御部８ｂは、例えば、クラブヘッドＣやボールＢの初期位置を合わせるための位置指標Ｍ１、Ｍ２（例えば、クラブヘッド形状やボール形状の枠表示等）並びに撮像開始を指示する開始指標Ｍ３をライブビュー画像Ｌに重畳させて表示パネル８ａにＯＳＤ表示させる（ステップＳ１；図５参照）。この状態で、ユーザは、クラブヘッドＣやボールＢの初期位置が位置指標Ｍ１、Ｍ２と重なるように、当該装置本体と被写体との距離や撮像部３の画角等を調整する。
そして、ユーザによる操作入力部９の所定操作に基づいて、当該装置本体と被写体との距離や撮像部３の画角等の調整の完了指示が入力されると、表示制御部８ｂは、位置指標Ｍ１、Ｍ２のＯＳＤ表示を停止する。

なお、位置指標Ｍ１、Ｍ２のＯＳＤ表示は、動作する人の利き手に応じて用意されており、図５は右利きの人用である。また、被写体の撮像は、当該装置本体を三脚に固定して行っても良いし、撮像者が手持ちで行っても良い。

次に、撮像制御部４は、ユーザによるゴルフのスイングの一連の動作を撮像部３により撮像させる撮像制御処理（図４参照）を行う（ステップＳ２）。
なお、撮像制御処理については、後述する。

ゴルフのスイングの一連の動作の撮像終了後、表示制御部８ｂは、例えば、クラブヘッドＣやボールＢの初期位置を合わせるための位置指標Ｍ１、Ｍ２（例えば、クラブヘッド形状やボール形状の枠表示等）並びに撮像開始を指示する開始指標Ｍ３に加えて、撮像された動画像の再生を指示する再生指標Ｍ４をライブビュー画像Ｌに重畳させて表示パネル８ａにＯＳＤ表示させる（図７参照）。
ここで、重畳判定部４ｂは、開始指標Ｍ３に関する処理と略同様に、ライブビュー画像Ｌ内で再生指標Ｍ４がＯＳＤ表示されている検出領域Ａ４内の画素値の変動に基づいて、撮像部３により撮像されて表示パネル８ａに表示される被写体像と再生指標Ｍ４とが重畳しているか否かを判定する（ステップＳ３）。そして、例えば、ユーザがゴルフクラブのクラブヘッドＣの画像が検出領域Ａ４と重畳するように当該ゴルフクラブを操作した場合に、重畳判定部４ｂは、ライブビュー画像ＬにおけるクラブヘッドＣの画像と再生指標Ｍ４とが重畳していると判定する。
重畳判定部４ｂによりライブビュー画像ＬにおけるクラブヘッドＣの画像と再生指標Ｍ４とが重畳していると判定されると（ステップＳ３；ＹＥＳ）、表示制御部８ｂは、メモリ２から動画像の画像データを取得して、当該動画像を表示パネル８ａに表示させる（ステップＳ４）。動画像の再生終了後、表示制御部８ｂは、処理をステップＳ３に戻し、ライブビュー画像Ｌを表示パネル８ａに表示させる。

なお、重畳判定部４ｂによりライブビュー画像ＬにおけるクラブヘッドＣの画像と開始指標Ｍ３とが重畳していると判定された場合には、撮像制御部４は、ステップＳ２と略同様の処理を行う。

続けて、画像処理部６は、画像データ生成部５により生成された動画像の画像データから所定数のフレーム画像を特定して抽出する画像特定処理（図８参照）を行う（ステップＳ５）。
なお、画像特定処理については、後述する。

そして、表示制御部８ｂは、画像特定部６ｆにより特定され抽出された所定数のフレーム画像に基づいて、動画像を表示パネル８ａに表示させる（ステップＳ６）。
これにより、撮像処理を終了する。

＜撮像制御処理＞
以下に、撮像制御処理について、図４を参照して詳細に説明する。
図４は、撮像制御処理に係る動作の一例を示すフローチャートである。

図４に示すように、先ず、状態判定部４ａは、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっている状態であるか否かを判定する（ステップＳ１１）。すなわち、状態判定部４ａは、装置本体部１００Ａに対して表示パネル８ａが略１８０°回動した状態とされているか否かを判定する。

ステップＳ１１にて、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっていると判定されると（ステップＳ１１；ＹＥＳ）、重畳判定部４ｂは、ライブビュー画像Ｌ内で開始指標Ｍ３がＯＳＤ表示されている検出領域Ａ１内の画素値の変動に基づいて、被写体像と開始指標Ｍ３とが重畳しているか否かを判定する（ステップＳ１２）。
具体的には、ゴルフクラブのクラブヘッドＣの画像と検出領域Ａ１とが重畳していない状態で、重畳判定部４ｂは、複数のフレーム画像の各々について、隣合うフレーム画像との検出領域Ａ１の画素値の差分二乗和ＳＳＤを逐次算出して、その代表値（例えば、平均値、中央値等）を被写体の検出用の閾値として設定する。そして、重畳判定部４ｂは、検出領域Ａ１の隣合うフレーム画像に対する画素値（例えば、輝度値）の差分二乗和ＳＳＤが閾値に対して大きくなったか否かに応じて、ライブビュー画像ＬにおけるクラブヘッドＣの画像と開始指標Ｍ３とが重畳しているか否かを判定する。

重畳判定部４ｂは、被写体像と開始指標Ｍ３とが重畳していると判定されるまで（ステップＳ１２；ＹＥＳ）、上記の処理を繰り返し実行する。
ステップＳ１２にて、被写体像と開始指標Ｍ３とが重畳していると判定されると（ステップＳ１２；ＹＥＳ）、重畳判定部４ｂは、クラブヘッドＣの画像と開始指標Ｍ３とが重畳しているとの判定結果を開始制御部４ｃに出力し、開始制御部４ｃは、計時部を制御して所定の時間（例えば、５秒等）のカウントダウンを開始し（ステップＳ１３）、カウントダウンが終了したか否かを逐次判定する（ステップＳ１４）。
ステップＳ１４にて、カウントダウンが終了していないと判定されると（ステップＳ１４；ＮＯ）、開始制御部４ｃは、処理をステップＳ１３に戻し、それ以降の各処理を実行する。

ステップＳ１４にて、カウントダウンが終了したと判定されると（ステップＳ１４；ＹＥＳ）、開始制御部４ｃは、撮像部３による被写体の記録用の動画像の撮像を開始させる（ステップＳ１５）。これにより、撮像部３は、ゴルフのスイングの一連の動作を所定の撮像フレームレート（例えば、１０００ｆｐｓ等）で撮像して、画像データ生成部５は、各フレーム画像を所定の符号化方式で符号化する。
また、開始制御部４ｃは、被写体の記録用の動画像の撮像を開始させると、その旨を表す信号を終了制御部４ｄに対して出力する。

続けて、終了制御部４ｄは、開始制御部４ｃから出力された被写体の記録用の動画像の撮像を開始した旨を表す信号が入力されると、計時部を制御して所定の撮像時間（例えば、５秒等）のカウントダウンを開始し（ステップＳ１６）、カウントダウンが終了したか否かを逐次判定する（ステップＳ１７）。
ステップＳ１７にて、カウントダウンが終了していないと判定されると（ステップＳ１７；ＮＯ）、終了制御部４ｄは、処理をステップＳ１６に戻し、それ以降の各処理を実行する。

ステップＳ１７にて、カウントダウンが終了したと判定されると（ステップＳ１７；ＹＥＳ）、終了制御部４ｄは、撮像部３による記録用の動画像の撮像を終了させる（ステップＳ１８）。
続けて、画像データ生成部５は、被写体の一連の動作に対応する複数のフレーム画像Ｆ１〜Ｆ５（図６（ａ）〜図６（ｅ）参照）からなる動画像の画像データを生成し（ステップＳ１９）、画像記録部７は、画像データ生成部５により生成された動画像の画像データを記録する（ステップＳ２０）。

一方、ステップＳ１１にて、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっている状態でないと判定されると（ステップＳ１１；ＮＯ）、撮像制御部４は、被写体の一連の動作の撮像を開始させる指示が入力されたか否かを判定する（ステップＳ２１）。
具体的には、撮像制御部４は、例えば、被写体以外の第三者による操作部（例えば、シャッタボタン）の所定操作が行われたか否かや、上記ステップＳ１２と略同様に第三者の手や指の像と開始指標Ｍ３とが重畳しているか否かを判定する。
撮像制御部４は、撮像を開始させる指示が入力されたと判定されるまで（ステップＳ２１；ＹＥＳ）、上記の処理を繰り返し実行する。

ステップＳ２１にて、撮像を開始させる指示が入力されたと判定されると（ステップＳ２１；ＹＥＳ）、開始制御部４ｃは、撮像部３による被写体の記録用の動画像の撮像を開始させる（ステップＳ２２）。このとき、開始制御部４ｃは、上記ステップＳ１３、Ｓ１４と略同様に、所定の時間（例えば、５秒等）のカウントダウンを行って、カウントダウンの終了後に撮像を開始させても良い。

続けて、終了制御部４ｄは、撮像部３による被写体の記録用の動画像の撮像を終了させる指示が入力されたか否かを判定する（ステップＳ２３）。具体的には、終了制御部４ｄは、例えば、上記ステップＳ１６、Ｓ１７と略同様に所定の撮像時間（例えば、５秒等）のカウントダウンを行って、カウントダウンが終了したか否かや、第三者による操作部の所定操作（例えば、撮像を終了させる所定操作等）が行われたか否かを判定する。
終了制御部４ｄは、撮像を終了させる指示が入力されたと判定されるまで（ステップＳ２３；ＹＥＳ）、上記の処理を繰り返し実行する。

ステップＳ２３にて、撮像を終了させる指示が入力されたと判定されると（ステップＳ２３；ＹＥＳ）、終了制御部４ｄは、処理をステップＳ１８に移行し、撮像部３による記録用の動画像の撮像を終了させる（ステップＳ１８）。
続けて、上記と略同様に、画像データ生成部５は、被写体の一連の動作に対応する複数のフレーム画像Ｆ１〜Ｆ５（図６（ａ）〜図６（ｅ）参照）からなる動画像の画像データを生成し（ステップＳ１９）、画像記録部７は、画像データ生成部５により生成された動画像の画像データを記録する（ステップＳ２０）。

＜画像特定処理＞
以下に、画像特定処理について、図８を参照して詳細に説明する。
図８は、画像特定処理に係る動作の一例を示すフローチャートである。

図８に示すように、画像取得部６ａは、ゴルフのスイングの動作が連続的に撮像された複数のフレーム画像からなる動画像の画像データをメモリ２から読み出して、画像特定処理の処理対象として取得する（ステップＳ３１）。
次に、領域設定部６ｂは、動画像の画像データを構成する複数のフレーム画像の各々について、上下方向略中央部の左右方向両端寄りの位置に略矩形状の検出領域を二つ設定する（ステップＳ３２）。ここで、右利きの人の場合、左側の検出領域Ａ２がフレームイン側となり、右側の検出領域Ａ３がフレームアウト側となる。

続けて、復号部６ｃは、動画像の画像データを構成する最初のフレーム画像Ｆ１から所定数（例えば、ｎ個；ｎは自然数）分のフレーム画像を復号して（ステップＳ３３）、閾値設定部６ｄは、左右の検出領域Ａ２、Ａ３の各々について、隣合うフレーム画像との画素値（例えば、輝度値）の差分二乗和ＳＳＤを算出する（ステップＳ３４）。そして、閾値設定部６ｄは、左右の検出領域Ａ２、Ａ３の各々について、算出された複数（例えば、ｎ−１個）の差分二乗和ＳＳＤの代表値（例えば、平均値又は中央値等）をフレームイン及びフレームアウトの時点のフレーム番号の特定のための閾値として設定する（ステップＳ３５）。

次に、復号部６ｃは、動画像の画像データを構成する全てのフレーム画像を最初のフレーム画像Ｆ１から順次復号していき（ステップＳ３６）、フレーム番号特定部６ｅは、復号されたフレーム画像について、一つ前のフレーム画像とのフレームアウト側に対応する検出領域Ａ３の画素値（例えば、輝度値）の差分二乗和ＳＳＤを評価値として逐次算出する（ステップＳ３７）。続けて、フレーム番号特定部６ｅは、算出された評価値が閾値設定部６ｄにより設定されたフレームアウト側に対応する検出領域Ａ３の閾値よりも大きいか否かを判定する（ステップＳ３８）。
ここで、評価値が閾値よりも大きくないと判定されると（ステップＳ３８；ＮＯ）、画像処理部６は、処理をステップＳ３６に戻し、それ以降の各処理を実行する。つまり、フレームアウト側に対応する検出領域Ａ３内で画素値の変動がないため、クラブヘッドＣが検出領域Ａ３を通過していないと考えられる。これに対して、フレームアウト側に対応する検出領域Ａ３内で画素値の変動があると、検出領域Ａ３にクラブヘッドＣが存在すると考えられる。

ステップＳ３８にて、評価値が閾値よりも大きいと判定されると（ステップＳ３８；ＹＥＳ）、フレーム番号特定部６ｅは、当該評価値と閾値との相違度を算出して、相違度が最大の評価値に対応する時点のフレーム番号を特定し、当該フレーム番号に対応するフレーム画像を識別するためのフレーム番号を、当該フレーム画像のフレーム番号で更新して所定の格納手段（例えば、メモリ２等）に一時的に格納する（ステップＳ３９）。
続けて、画像処理部６は、全てのフレーム画像について上記の各処理を行ったか否かを判定する（ステップＳ４０）。

ステップＳ４０にて、全てのフレーム画像について行っていないと判定されると（ステップＳ４０；ＮＯ）、画像処理部６は、処理をステップＳ３６に戻し、それ以降の各処理を実行する。
上記の各処理は、ステップＳ４０にて、全てのフレーム画像について行ったと判定されるまで（ステップＳ４０；ＹＥＳ）、繰り返し実行される。
これにより、左右方向に移動するクラブヘッドＣとフレームアウト側の検出領域Ａ３との重なり領域が最も大きくなることにより、評価値と閾値との相違度が最大となった時点のフレーム番号のフレーム画像Ｆ４（図９（ｂ）参照）のフレーム番号が特定される。

次に、復号部６ｃは、検出領域Ａ３を用いて特定されたフレームアウトの時点のフレーム番号に対応するフレーム画像Ｆ４から所定数分のフレームを遡ったフレーム画像を復号の開始フレーム画像として指定する（ステップＳ４１）。また、復号部６ｃは、指定された開始フレーム画像以降のフレーム画像であって、特定されたフレームアウトの時点のフレーム番号に対応するフレーム画像Ｆ４の一つ前のフレーム画像までを復号処理の対象画像として指定する。
そして、復号部６ｃは、指定された開始フレーム画像以降のフレーム画像を順次復号していき（ステップＳ４２）、フレーム番号特定部６ｅは、復号されたフレーム画像について、一つ前のフレーム画像とのフレームイン側に対応する検出領域Ａ２の画素値（例えば、輝度値）の差分二乗和ＳＳＤを評価値として逐次算出する（ステップＳ４３）。続けて、フレーム番号特定部６ｅは、算出された評価値が閾値設定部６ｄにより設定されたフレームイン側に対応する検出領域Ａ２の閾値よりも大きいか否かを判定する（ステップＳ４４）。
ここで、評価値が閾値よりも大きくないと判定されると（ステップＳ４４；ＮＯ）、画像処理部６は、処理をステップＳ４２に戻し、それ以降の各処理を実行する。つまり、検出領域Ａ２内で画素値の変動がないため、クラブヘッドＣが検出領域Ａ３を通過していないと考えられる。これに対して、検出領域Ａ２内で画素値の変動があると、クラブヘッドＣが存在すると考えられる。

ステップＳ４４にて、評価値が閾値よりも大きいと判定されると（ステップＳ４４；ＹＥＳ）、フレーム番号特定部６ｅは、当該評価値と閾値との相違度を算出して、相違度が最大の評価値に対応するフレーム番号を特定し、フレームイン側のフレーム画像を識別するためのフレーム番号を、当該フレーム画像のフレーム番号で更新して所定の格納手段（例えば、メモリ２等）に一時的に格納する（ステップＳ４５）。
続けて、画像処理部６は、処理対象の全てのフレーム画像について上記の各処理を行ったか否かを判定する（ステップＳ４６）。

ステップＳ４６にて、処理対象の全てのフレーム画像について行っていないと判定されると（ステップＳ４６；ＮＯ）、画像処理部６は、処理をステップＳ４２に戻し、それ以降の各処理を実行する。
上記の各処理は、ステップＳ４６にて、処理対象の全てのフレーム画像について行ったと判定されるまで（ステップＳ４６；ＹＥＳ）、繰り返し実行される。
これにより、左右方向に移動するクラブヘッドＣと検出領域Ａ２との重なり領域が最も大きくなることで評価値と閾値との相違度が最大となったフレーム画像Ｆ２（図９（ｃ）参照）のフレーム番号が特定される。

次に、画像特定部６ｆは、特定されたフレームイン側及びフレームアウト側の各々のフレーム番号に基づいて、複数のフレーム画像から当該二つのフレーム番号間の所定数のフレーム画像を特定し、動画像として抽出する（ステップＳ４７）。具体的には、例えば、画像特定部６ｆは、特定されたフレームイン側のフレーム番号よりも所定数前のフレーム番号のフレーム画像から、特定されたフレームアウト側のフレーム番号よりも所定数後ろのフレーム番号のフレーム画像までを動画像として抽出する。
ここで、フレームイン側のフレーム番号とフレームアウト側のフレーム番号との間隔、すなわち、二つのフレーム画像Ｆ２、Ｆ４間の画像数が所定値よりも多かったり、対応する時間間隔が所定値よりも長い場合には、クラブヘッドＣ以外のものが検出領域を通過している虞もあるため、画像特定部６ｆは、フレーム画像数や時間間隔が所定値以内であると判定した場合に、動画像を抽出する構成であっても良い。

その後、画像記録部７は、画像特定部６ｆにより抽出された、所定の時点を基準とする所定数のフレーム画像からなる動画像の画像データを記録して（ステップＳ４８）、当該画像特定処理を終了する。

以上のように、本実施形態の撮像装置１００によれば、撮像部３により撮像されて表示パネル８ａに表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態である場合に、撮像部３による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御するので、ユーザが撮像装置１００から離れた状態で当該ユーザを被写体として動画像を撮像する場合に、装置自体を直接操作しなくとも動画像の撮像を終了させることができ、利便性の向上を図ることができる。
特に、所定の撮像時間をユーザによる所定の操作に基づいて指定することで、ユーザ所望の時間を撮像時間として動画像の撮像を行うことができ、利便性をさらに向上させることができる。

また、被写体の動画像を当該被写体自身に視認させることが可能な所定の状態でない場合に、撮像部３による被写体の動画像の撮像の開始後に所定の時間が経過しても、当該撮像を終了させないように制御するので、ユーザ以外の第三者が撮像者となっている状況である場合であっても、当該第三者による任意の操作に基づいて被写体の動画像の撮像を終了させることができる。

また、撮像部３により撮像されて表示パネル８ａに表示される被写体のライブビュー画像Ｌと当該表示部８に表示される開始指標Ｍ３とが重畳していると判定された後、撮像部３による被写体の記録用の動画像の撮像を開始させるので、ユーザが撮像装置１００から離れた状態で当該ユーザを被写体として動画像を撮像する場合に、装置自体を直接操作しなくとも動画像の撮像を開始させることができ、利便性をさらに向上させることができる。

また、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっているか否かに応じて、撮像部３により撮像されて表示パネル８ａに表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かの判定を適正に行うことができる。ここで、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなるように、撮像部３を具備する装置本体部１００Ａに対して表示パネル８ａが回動自在に構成されているので、ユーザが撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなるように撮像部３を具備する装置本体部１００Ａや表示パネル８ａを操作することができ、ユーザが撮像装置１００から離れた状態で当該ユーザを被写体として動画像を撮像する場合の利便性をさらに向上させることができる。

また、被写体の動作が連続的に撮像された複数のフレーム画像間の画素値の変動、特に、各フレーム画像における複数の所定位置に設定された複数の検出領域の各々における複数のフレーム画像間の画素値の変動に基づいて、複数のフレーム画像のうち被写体の動作における所定の時点に関連するフレーム画像を複数特定するので、複数のフレーム画像の画素値の変動を利用することで、特殊なデバイスを用いなくともユーザ所望のフレーム画像（例えば、フレーム画像Ｆ２〜Ｆ４）を特定することができる。
例えば、ゴルフのスイングの場合、実際にボールＢを打たない素振りであっても、仮にボールＢを打ったらインパクトの瞬間となるであろうフレーム画像を含むユーザ所望のフレーム画像を特定することができる。

また、複数の検出領域の各々に被写体が存在するフレーム画像をそれぞれ特定し、特定された各検出領域に被写体が存在するフレーム画像のフレーム番号が所定の順序であった場合に、所定の時点に関連するフレーム画像を複数特定するので、複数の検出領域内からの被写体の検出の順序を利用して、被写体の動作が所定の動作以外であるか否かを判断することができる。
例えば、ゴルフのスイングの動作の場合、一般的に、フレームイン側（例えば、右利きのスイングにおける左側）の検出領域Ａ２からフレームアウト側（例えば、右利きのスイングにおける右側）の検出領域Ａ３へとクラブヘッドＣが動作する。これに対して、単にクラブヘッドＣを左右にぶらぶら動かすと、先にフレームアウト側の検出領域Ａ３にてクラブヘッドＣが検出された後、フレームイン側の検出領域Ａ２にてクラブヘッドＣが検出される虞もあるが、複数の検出領域を用いてクラブヘッドＣが検出される順序がフレームイン側の検出領域Ａ２が先でフレームアウト側の検出領域Ａ３が後である場合に、所定の時点に関連するフレーム画像を複数特定することで、単にクラブヘッドＣを左右にぶらぶら動かす動作（例えば、ワッグル等）に対応するフレーム画像が誤って特定されることを抑制することができる。

また、複数のフレーム画像のうち、所定期間内の所定数の画像における検出領域の画素値の代表値をフレームイン又はフレームアウトの時点のフレーム番号を特定するための閾値として設定し、当該閾値を基準としてフレームイン又はフレームアウトの時点のフレーム番号を特定して、各検出領域に被写体が存在するフレーム画像をそれぞれ特定することができる。特に、閾値よりも各検出領域の画素値が大きいと判定された場合に、検出領域によりフレームイン又はフレームアウトの時点のフレーム番号を適正に検出することができ、これにより、検出領域に被写体が存在するフレーム画像を所定の時点に関連するフレーム画像として特定することができる。
即ち、例えば、被写体が検出領域に存しない状態では、当該検出領域の画素値の変動が生じ難いのに対して、被写体が検出領域に存在する状態では、当該検出領域の画素値の変動が生じるため、当該検出領域の画素値の代表値を閾値とし、検出領域の画素値の変動を利用することで、フレームイン又はフレームアウトの時点のフレーム番号の検出を適正に行うことができる。

なお、本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において、種々の改良並びに設計の変更を行っても良い。
例えば、上記実施形態では、撮像部３により撮像されて表示パネル８ａに表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かの判定にて、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなっているか否かを判定するようにしたが、一例であってこれに限られるものではなく、適宜任意に変更可能である。例えば、表示パネル８ａの表示方向は、ユーザが撮像装置１００から離れた状態で撮像部３により撮像されて表示パネル８ａに表示されるユーザの動画像を当該ユーザ自身に視認させることが可能な方向であれば、撮像部３の撮像方向と略等しくなくても良い。

また、上記実施形態では、撮像部３により撮像されて表示パネル８ａに表示される被写体のライブビュー画像Ｌと当該表示部８に表示される開始指標Ｍ３とが重畳していると判定された場合に、撮像部３による被写体の記録用の動画像の撮像を開始させるようにしたが、一例であってこれに限られるものではなく、被写体の記録用の動画像の撮像を開始させる制御の内容は適宜任意に変更可能である。

さらに、上記実施形態では、撮像部３の撮像方向と表示パネル８ａの表示方向が略等しくなるように、撮像部３を具備する装置本体部１００Ａに対して、表示パネル８ａが回動自在に軸支されている構成を例示したが、一例であってこれに限られるものではなく、例えば、図示は省略するが、装置本体部に表示パネルを搭載して、当該装置本体部に対して撮像部のレンズ部が回動自在に軸支されている構成であっても良い。また、装置本体部に対して、撮像部のレンズ部及び表示パネルがそれぞれ回動自在に軸支された構成であっても良い。

また、上記実施形態では、検出領域に設定された閾値を基準として、フレームイン及びフレームアウトの時点のフレーム番号を特定するようにしたが、一例であってこれに限られるものではなく、フレームイン及びフレームアウトの時点のフレーム番号の特定に際して閾値を設定するか否かは適宜任意に変更可能である。即ち、撮像装置１００は、検出領域の画素値の変動に基づいて、フレームイン及びフレームアウトの時点のフレーム番号を特定可能な構成であれば、必ずしも閾値設定部６ｄを具備する必要はない。

さらに、上記実施形態では、左右二つの検出領域Ａ２、Ａ３内によるフレームイン及びフレームアウトの時点のフレーム番号の特定処理は、当該被写体のフレームアウト側に対応する検出領域Ａ３から先に行うようにしたが、一例であってこれに限られるものではなく、例えば、被写体のフレームイン側に対応する検出領域Ａ２から先に行うようにしても良い。この場合、フレーム番号特定部６ｅは、検出領域Ａ２によるフレームインの時点のフレーム番号の特定処理については、復号部６ｃにより復号された全てのフレーム画像を処理対象とする一方で、検出領域Ａ２によるフレームアウトの時点のフレーム番号の特定処理については、フレームインの時点のフレーム番号を基準としても良い。

また、フレーム番号特定部６ｅは、評価値が閾値よりも大きいと判定されたフレーム番号のうち、当該閾値に対する相違度が最も大きいフレーム番号を特定するようにしたが、閾値も超えた評価値のうち最も大きい評価値に近接する評価値が複数あるときは、所定の処理を行うことでフレームイン及びフレームアウトの時点のフレーム番号を特定するようにしても良い。
つまり、フレームインの時点のフレーム番号の特定においては、最も大きい評価値に近接する複数の評価値のフレーム番号のうち、最も後のフレーム番号をフレームインの時点のフレーム番号として特定するような処理を加えることで、例えば、スイング動作におけるアドレス−トップ間、及びトップ−インパクト間での動作のうち、アドレス−トップ間の動作を所望のフレームインの時点のフレーム番号として誤って検出することを抑制できる。また、フレームアウトの時点のフレーム番号の特定においては、同様に、最も大きい評価値に近接する複数の評価値のフレーム番号のうち、最も後のフレーム番号をフレームアウトの時点のフレーム番号として特定するような処理を加えることで、インパクト以降にボールが検出領域を用いて検出された時点のフレーム番号を所望のフレームアウトの時点のフレーム番号として誤って検出することを抑制できる。

さらに、上記実施形態では、画像特定部６ｆは、所定の時点（例えば、クラブヘッドＣによりボールＢを打った瞬間のインパクト等）に関連するフレーム画像Ｆ２、Ｆ４の識別情報（例えば、フレームイン及びフレームアウトの時点のフレーム番号）を特定した後、当該識別情報に対応するフレーム画像Ｆ２、Ｆ４を特定するようにしたが、一例であってこれに限られるものではなく、必ずしもフレーム画像Ｆ２、Ｆ４を特定する必要はない。また、画像特定部６ｆは、例えば、フレーム番号特定部６ｅによる特定結果に基づいて、直接、動画像の画像データを構成する複数のフレーム画像から被写体の動作における所定の時点に関連するフレーム画像を特定しても良い。

さらに、撮像装置１００の構成は、上記実施形態に例示したものは一例であり、これに限られるものではない。例えば、撮像機能を具備するスマートフォン等の携帯端末から構成されていても良い。具体的には、例えば、携帯端末を用いて本実施形態の自分撮りを行う場合には、当該携帯端末の表示パネル側に露出されている撮像部のレンズ部（所謂、インカメラ）を利用することで、撮像部により撮像されて表示パネルに表示される被写体の動画像を当該被写体自身に視認させることが可能な状態となる。

加えて、上記実施形態にあっては、判定手段、制御手段としての機能を、中央制御部１の制御下にて、状態判定部、終了制御部が駆動することにより実現される構成としたが、これに限られるものではなく、中央制御部１のＣＰＵによって所定のプログラム等が実行されることにより実現される構成としても良い。
すなわち、プログラムを記憶するプログラムメモリ（図示略）に、判定処理ルーチン、制御処理ルーチンを含むプログラムを記憶しておく。そして、判定処理ルーチンにより中央制御部１のＣＰＵを、撮像部３により撮像されて表示パネル８ａに表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する手段として機能させるようにしても良い。また、制御処理ルーチンにより中央制御部１のＣＰＵを、所定の状態であると判定された場合に、撮像部３による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する手段として機能させるようにしても良い。

同様に、第二の判定手段、第二の制御手段、取得手段、特定手段、領域設定手段、閾値設定手段、判定手段、算出手段、抽出手段についても、中央制御部１のＣＰＵによって所定のプログラム等が実行されることにより実現される構成としても良い。

さらに、上記の各処理を実行するためのプログラムを格納したコンピュータ読み取り可能な媒体として、ＲＯＭやハードディスク等の他、フラッシュメモリ等の不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬型記録媒体を適用することも可能である。また、プログラムのデータを所定の通信回線を介して提供する媒体としては、キャリアウェーブ（搬送波）も適用される。

本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
＜請求項１＞
被写体の動画像を撮像する撮像手段と、
前記撮像手段により撮像された動画像を表示する表示手段と、
前記表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する第一の判定手段と、
前記第一の判定手段により前記所定の状態であると判定された場合に、前記撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する第一の制御手段と、
を備えたことを特徴とする撮像装置。
＜請求項２＞
前記第一の制御手段は、更に、
前記第一の判定手段により前記所定の状態でないと判定された場合に、前記撮像手段による被写体の動画像の撮像の開始後に所定の時間が経過しても、当該撮像を終了させないように制御することを特徴とする請求項１に記載の撮像装置。
＜請求項３＞
前記撮像手段により撮像されて前記表示手段に表示される被写体のライブビュー画像と当該表示手段に表示される指標とが重畳しているか否かを判定する第二の判定手段と、
前記第二の判定手段により重畳していると判定された後、前記撮像手段による被写体の記録用の動画像の撮像を開始させる第二の制御手段と、
を更に備えることを特徴とする請求項１又は２に記載の撮像装置。
＜請求項４＞
ユーザによる所定の操作に基づいて前記所定の撮像時間を指定する指定手段を更に備えることを特徴とする請求項１〜３の何れか一項に記載の撮像装置。
＜請求項５＞
前記第一の判定手段は、更に、
前記撮像手段の撮像方向と前記表示手段の表示方向が略等しくなっているか否かに応じて、前記所定の状態であるか否かを判定することを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
＜請求項６＞
前記撮像手段及び前記表示手段のうち、少なくとも一方は、前記撮像手段の撮像方向と前記表示手段の表示方向とが略等しくなるように回動自在に構成されていることを特徴とする請求項５に記載の撮像装置。
＜請求項７＞
前記撮像手段により撮像された被写体の動画像を構成する複数の画像を取得する取得手段と、
前記取得手段により取得された複数の画像間の画素値の変動に基づいて、前記複数の画像のうち前記被写体の動作における所定の時点に関連する複数の画像を特定する特定手段と、
を更に備えたことを特徴とする請求項１〜６の何れか一項に記載の撮像装置。
＜請求項８＞
前記取得手段により取得された各画像の複数の所定位置に領域を設定する領域設定手段を更に備え、
前記特定手段は、前記領域設定手段により設定された複数の領域の各々における前記複数の画像間の画素値の変動に基づいて、前記複数の画像のうち前記被写体の動作における所定の時点に関連する複数の画像を特定することを特徴とする請求項７に撮像装置。
＜請求項９＞
前記特定手段は、前記複数の領域のうち各領域について所定の順に前記被写体の動作における画像を特定することを特徴とする請求項８に記載の撮像装置。
＜請求項１０＞
前記特定手段は、前記被写体の動作の順とは逆の順に前記所定の時点に関連する一の画像を特定し、当該特定された一の画像を基準として他の前記所定の時点に関連する画像を特定することを特徴とする請求項９に記載の撮像装置。
＜請求項１１＞
前記複数の画像のうち、所定期間内の所定数の画像における前記領域の画素値の代表値を被写体の検出用の閾値として設定する閾値設定手段を更に備え、
前記特定手段は、前記閾値設定手段により設定された閾値を基準として、前記各領域に被写体が存在する画像のフレーム番号をそれぞれ特定することを特徴とする請求項８〜１０の何れか一項に記載の撮像装置。
＜請求項１２＞
前記各領域の画素値が前記閾値設定手段により設定された閾値よりも大きいか否かを判定する判定手段を更に備え、
前記特定手段は、前記判定手段により前記各領域の画素値が前記閾値よりも大きいと判定されると、当該領域に被写体が存在する画像を前記所定の時点に関連する画像として特定することを特徴とする請求項１１に記載の撮像装置。
＜請求項１３＞
前記取得手段により取得された複数の画像から所定数の画像における前記領域の画素値の平均値又は中央値を算出する算出手段を更に備え、
前記閾値設定手段は、前記算出手段により算出された平均値又は中央値を前記代表値として設定することを特徴とする請求項１１又は１２に記載の撮像装置。
＜請求項１４＞
前記特定手段により特定された所定の時点に関連する複数の画像を動画像として抽出する抽出手段を更に備えたことを特徴とする請求項７〜１３の何れか一項に記載の撮像装置。
＜請求項１５＞
撮像装置を用いた撮像制御方法であって、
表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する処理と、
前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する処理と、
を含むことを特徴とする撮像制御方法。
＜請求項１６＞
コンピュータを、
表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する判定手段、
前記判定手段により前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する制御手段、
として機能させることを特徴とするプログラム。

１００ 撮像装置
１ 中央制御部
３ 撮像部
４ 撮像制御部
４ａ 状態判定部
４ｂ 重畳判定部
４ｃ 開始制御部
４ｄ 終了制御部
６ａ 画像取得部
６ｆ 画像特定部
８ 表示部
８ａ 表示パネル
９ 操作入力部
Ｍ３ 開始指標

Claims (16)

1. 被写体の動画像を撮像する撮像手段と、
   前記撮像手段により撮像された動画像を表示する表示手段と、
   前記表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する第一の判定手段と、
   前記第一の判定手段により前記所定の状態であると判定された場合に、前記撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する第一の制御手段と、
   を備えたことを特徴とする撮像装置。
2. 前記第一の制御手段は、更に、
   前記第一の判定手段により前記所定の状態でないと判定された場合に、前記撮像手段による被写体の動画像の撮像の開始後に所定の時間が経過しても、当該撮像を終了させないように制御することを特徴とする請求項１に記載の撮像装置。
3. 前記撮像手段により撮像されて前記表示手段に表示される被写体のライブビュー画像と当該表示手段に表示される指標とが重畳しているか否かを判定する第二の判定手段と、
   前記第二の判定手段により重畳していると判定された後、前記撮像手段による被写体の記録用の動画像の撮像を開始させる第二の制御手段と、
   を更に備えることを特徴とする請求項１又は２に記載の撮像装置。
4. ユーザによる所定の操作に基づいて前記所定の撮像時間を指定する指定手段を更に備えることを特徴とする請求項１〜３の何れか一項に記載の撮像装置。
5. 前記第一の判定手段は、更に、
   前記撮像手段の撮像方向と前記表示手段の表示方向が略等しくなっているか否かに応じて、前記所定の状態であるか否かを判定することを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
6. 前記撮像手段及び前記表示手段のうち、少なくとも一方は、前記撮像手段の撮像方向と前記表示手段の表示方向とが略等しくなるように回動自在に構成されていることを特徴とする請求項５に記載の撮像装置。
7. 前記撮像手段により撮像された被写体の動画像を構成する複数の画像を取得する取得手段と、
   前記取得手段により取得された複数の画像間の画素値の変動に基づいて、前記複数の画像のうち前記被写体の動作における所定の時点に関連する複数の画像を特定する特定手段と、
   を更に備えたことを特徴とする請求項１〜６の何れか一項に記載の撮像装置。
8. 前記取得手段により取得された各画像の複数の所定位置に領域を設定する領域設定手段を更に備え、
   前記特定手段は、前記領域設定手段により設定された複数の領域の各々における前記複数の画像間の画素値の変動に基づいて、前記複数の画像のうち前記被写体の動作における所定の時点に関連する複数の画像を特定することを特徴とする請求項７に撮像装置。
9. 前記特定手段は、前記複数の領域のうち各領域について所定の順に前記被写体の動作における画像を特定することを特徴とする請求項８に記載の撮像装置。
10. 前記特定手段は、前記被写体の動作の順とは逆の順に前記所定の時点に関連する一の画像を特定し、当該特定された一の画像を基準として他の前記所定の時点に関連する画像を特定することを特徴とする請求項９に記載の撮像装置。
11. 前記複数の画像のうち、所定期間内の所定数の画像における前記領域の画素値の代表値を被写体の検出用の閾値として設定する閾値設定手段を更に備え、
    前記特定手段は、前記閾値設定手段により設定された閾値を基準として、前記各領域に被写体が存在する画像のフレーム番号をそれぞれ特定することを特徴とする請求項８〜１０の何れか一項に記載の撮像装置。
12. 前記各領域の画素値が前記閾値設定手段により設定された閾値よりも大きいか否かを判定する判定手段を更に備え、
    前記特定手段は、前記判定手段により前記各領域の画素値が前記閾値よりも大きいと判定されると、当該領域に被写体が存在する画像を前記所定の時点に関連する画像として特定することを特徴とする請求項１１に記載の撮像装置。
13. 前記取得手段により取得された複数の画像から所定数の画像における前記領域の画素値の平均値又は中央値を算出する算出手段を更に備え、
    前記閾値設定手段は、前記算出手段により算出された平均値又は中央値を前記代表値として設定することを特徴とする請求項１１又は１２に記載の撮像装置。
14. 前記特定手段により特定された所定の時点に関連する複数の画像を動画像として抽出する抽出手段を更に備えたことを特徴とする請求項７〜１３の何れか一項に記載の撮像装置。
15. 撮像装置を用いた撮像制御方法であって、
    表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する処理と、
    前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する処理と、
    を含むことを特徴とする撮像制御方法。
16. コンピュータを、
    表示手段に表示される被写体の動画像を当該被写体自身に視認させることが可能な所定の状態であるか否かを判定する判定手段、
    前記判定手段により前記所定の状態であると判定された場合に、撮像手段による被写体の動画像の撮像の開始後に所定の撮像時間が経過すると、当該撮像を終了させるように制御する制御手段、
    として機能させることを特徴とするプログラム。

Images