JP2010068475A - 撮像装置及び当該撮像装置における画像再生方法 - Google Patents

Abstract

【課題】 従来技術では、必ずしも使用者が意図するレックレビュー画像が得られないことがあり、また、釦操作が頻繁に行なわれた場合には、確認するシーンの数も多くなりため、確認に要する時間も長くなることが予想される。
【解決手段】 連続的に生成画像信号から動画像を生成し、その動画像を記憶する（Ｓ４０２）とともに、その動画像の中から被写体の輝度値の変化量が閾値よりも大きいシーンを選択して（Ｓ４０４）レックレビュー用画像として抽出し、そのレックレビュー用画像をバッファメモリに記憶する（Ｓ４０９）。そして、動画像の記録終了後に、そのバッファメモリに記憶されたレックレビュー用画像を再生する。
【選択図】 図４

Description

本発明は、動画の撮影後に、その撮影した動画像の一部或は全てを再生表示可能な撮像装置及び当該撮像装置における画像再生方法に関するものである。

メモリカードを記録媒体とし、この記録媒体に撮影した静止画像や動画像を記録し、またこのような記録媒体に記録された画像を再生する電子カメラなどの撮像装置が広く知られている。このような撮像装置では、撮影前の画像を連続して表示し、撮像装置の使用者が、撮影したい画像の構図を確認して決定したり、撮影した画像を再生して表示することができる。

特に、撮影した画像を撮影直後に再生する機能（レビュー機能）は利便性が高く、撮像装置の使用者にとって有益な機能となっている。このレビュー機能は、記録媒体からの画像データの読み出し処理や画像処理、復号処理を行う時間を省略できるため、撮影直後に、素早く撮影した画像を確認できるという利点がある。

従来、このような撮像装置では、静止画の撮影後のレビュー機能は一般的であるが、動画撮影後では、その撮影した動画のレビュー機能は採用されていなかった。通常は、動画撮影の終了時の単一フレームを表示できるだけであり、動画の撮影直後に使用者が重要なシーンをダイジェストで確認できるレビュー機能（以下、レックレビュー）が求められている。

これに対して特許文献１では、動画像の記録開始時のフレームと記録終了時のフレームをメモリに記憶している。そして使用者によりレビュー機能を指示するレビュー釦が押されると、メモリに記憶した動画記録開始時のフレームと記録終了時のフレームとを読み出しレックレビューとしてビューファインダに表示している。この技術を利用することで、使用者は動画像の撮影終了直後にどのシーンからどのシーンまでが撮影されているかを短時間で確認できるようになった。

また特許文献２では、カメラの各釦に対して重要度を割り当てておき、動画の撮影時に行われたカメラの釦操作を基に、自動的に画像の重要度合（優先度）を求めている。そして、その優先度に応じて表示する画像を選択して、動画撮影時の使用者の意図に合わせたレックレビューを可能にする内容が提案されている。この技術を利用すれば、カメラの釦操作に応じたシーンの切り替りごとに抽出されたフレームからダイジェスト画像を生成できる。こうして使用者は、動画の撮影終了後に、その撮影した動画の中の重要なシーンを簡単に確認できるようになった。
特開２００５−３５０１３５号公報 特開平０６−１６５００９号公報

しかしながら上記特許文献１では、動画の記録開始時のフレームと記録終了時のフレームをメモリに記憶するだけであるため、記録開始時と終了時のシーンは確認できるが、その間のシーンは確認できない。また、使用者が重要と考えるシーンも、その動画の撮影終了後に確認できないという課題がある。

また特許文献２に記載のカメラでは、釦操作に応じてシーンの優先度を決定し、優先度の高いシーンを動画像の撮影終了直後に確認できる。しかし、釦操作の発生しない重要なシーンの切り替り（例えば、被写体輝度の急激な変化など）に関しては考慮できないため、必ずしも使用者が意図するレックレビュー画像が得られないことがある。また、釦操作が頻繁に行なわれた場合には、確認するシーンの数も多くなりため、確認に要する時間も長くなることが予想される。この場合は、撮影した動画の内容を短時間で簡潔に確認したいという使用者の意図を満足できないという課題も残る。

本発明の目的は上記従来の問題点を解決することにある。

本願発明の特徴は、動画像の撮影終了後にレックレビュー可能な撮像装置において、撮影した動画像の中から特徴的なシーンを自動的に抽出してレックレビュー用画像として記憶できる撮像装置及び当該装置における画像再生方法を提供することにある。

上記目的を達成するために本発明の一態様に係る撮像装置は以下のような構成を備える。即ち、
被写体像を光電変換し、画像信号を連続的に生成するための撮像手段と、
前記撮像手段により連続的に生成された画像信号から動画像を生成する映像信号処理手段と、
前記映像信号処理手段により生成された動画像を記憶する第１の記憶手段と、
前記動画像の中から被写体の輝度値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出するレビュー画像抽出手段と、
前記レビュー画像抽出手段により抽出されたレックレビュー用画像を記憶する第２の記憶手段と、
前記映像信号処理手段により生成された動画像の記録終了後に、前記第２の記憶手段に記憶されたレックレビュー用画像を再生するためのレビュー再生手段と、
を有することを特徴とする。

また上記目的を達成するために本発明の一態様に係る撮像装置における画像再生方法は以下のような工程を備える。即ち、
被写体像を光電変換し、画像信号を連続的に生成するための撮像手段と、前記撮像手段により連続的に生成された画像信号から動画像を生成する映像信号処理手段と、前記映像信号処理手段により生成された動画像を記憶する第１の記憶手段とを有する撮像装置における画像再生方法であって、
撮影した動画像の中から被写体の輝度値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出するレビュー画像抽出工程と、
前記レビュー画像抽出工程で抽出されたレックレビュー用画像をメモリに記憶する記憶工程と、
前記動画像の記録終了後に、前記メモリに記憶されたレックレビュー用画像を再生するためのレビュー再生工程と、
を有することを特徴とする。

本発明によれば、撮影した動画像の中から特徴的なシーンを自動的に抽出してレックレビュー用画像として記憶できる。

また、抽出されたレックレビュー用画像の表示形態を設定できるという効果がある。

以下、添付図面を参照して本発明の好適な実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る本発明を限定するものでなく、また本実施形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。

図１及び図２は、本発明の実施形態に係る撮像装置の一例であるデジタル一眼レフカメラの外観を示す図である。具体的には、図１はカメラ前面側より見た斜視図で、撮影レンズユニットを外した状態を示し、図２はカメラ背面側より見た斜視図である。

図１において、１はカメラ本体であり、撮影時に使用者がカメラを安定して握り易いように前方に突出したグリップ部１ａが設けられている。２はマウント部であり、着脱可能な撮影レンズユニット（不図示）をカメラ本体に固定させる。マウント接点２１は、カメラ本体と撮影レンズユニットとの間で制御信号、状態信号、データ信号等を通信可能にすると共に、撮影レンズユニット側に電力を供給する機能を有する。また、マウント接点２１は電気通信のみならず、光通信、音声通信などを可能なように構成してもよい。４は撮影レンズユニットを取り外す際に押し込むレンズロック解除釦である。５はカメラ筐体内に配置されたミラーボックスで、撮影レンズを通過した撮影光束はここへ導かれる。ミラーボックス５の内部には、クイックリターンミラー６が配設されている。このクイックリターンミラー６は、撮影光束をペンタプリズム２２（図３）の方向へ導くために撮影光軸に対して４５°の角度に保持される状態と、撮像素子３３（図３）の方向へ導くために撮影光束から退避した位置に保持される状態とを取り得る。この撮像素子３３は、動画撮影時、被写体像を光電変換し画像信号を連続的に生成する。

カメラ上部のグリップ側には、撮影開始の起動スイッチとしてのシャッタボタン７と、撮影時の動作モードに応じてシャッタスピードやレンズ絞り値を設定するためのメイン操作ダイヤル８と、撮影系の上面動作モード設定ボタン１０が配置されている。これら操作部材の操作結果の一部は、ＬＣＤ表示パネル９に表示される。シャッタボタン７は、第１ストロークでＳＷ１（図３の７ａ）がＯＮし、第２ストロークにてＳＷ２（図３の７ｂ）がＯＮする構成となっている。また上面動作モード設定ボタン１０は、シャッタボタン７の１回の押込みで連写になるか１コマのみの撮影となるかの設定や、セルフ撮影モードの設定などを行うものであり、ＬＣＤ表示パネル９にその設定状況が表示される。

カメラ上部中央には、カメラ本体に対してポップアップするストロボユニット１１とフラッシュ取付け用のシュー溝１２とフラッシュ接点１３があり、カメラ上部右よりには撮影モード設定ダイヤル１４が配置されている。

グリップ部１ａの反対側の側面には、開閉可能な外部端子蓋１５が設けられていて、この外部端子蓋１５を開けた内部には、外部インタフェースとしてビデオ信号出力用ジャック１６とＵＳＢ出力用コネクタ１７が納められている。

図２において、カメラ背面側には上方にファインダ接眼窓１８が設けられ、更に背面中央付近には画像表示可能なカラー液晶モニタ１９が設けられている。カラー液晶モニタ１９の横に配置されたサブ操作ダイヤル２０は、メイン操作ダイヤル８の機能の補助的役割を担い、例えばカメラのＡＥモードでは自動露出装置により算出された適正露出値に対する露出補正量を設定するために使用される。シャッタスピードとレンズ絞り値の各々を使用者の意志により設定するマニュアルモードでは、メイン操作ダイヤル８でシャッタスピードを設定し、サブ操作ダイヤル２０でレンズ絞り値を設定するように使用される。また、このサブ操作ダイヤル２０は、カラー液晶モニタ１９に表示される撮影済み画像の表示選択にも用いられる。更に、このサブ操作ダイヤル２０は、メニューの項目選択及びパラメータの設定、動画の撮影直後のレックレビュー時に表示するフレームブロック（シーン）数の選択等にも用いられる。４３はカメラの動作を起動もしくは停止するためのメインＳＷである。４４はメニュー釦、４５は動画スタート釦、４６はセット釦４６である。メニュー釦４４のオン／オフによりカラー液晶モニタ１９にメニュー画面を表示／非表示することができる。また動画スタート釦４５は、撮影待機状態において、１回押すことにより、動画像の記録を開始し、動画記録中にもう一度押されると、動画像の記録を終了する。またセット釦４６はメニュー画面表示時のメニュー項目の選択、パラメータの決定等に使用される。

図３は、本実施形態に係るデジタル一眼レフカメラの主要な電気的構成を示すブロック図である。尚、前述の図面と共通する部分は同じ記号で示している。

１００はカメラ本体に内蔵されたマイクロコンピュータの中央処理装置（以下、ＭＰＵ）である。ＭＰＵ１００は、カメラの動作制御を司るものであり、各要素に対して様々な処理や指示を実行する。ＥＥＰＲＯＭ１００ａはＭＰＵ１００に内蔵されており、時刻計測回路１０９の計時情報やその他の情報を記憶可能である。このＭＰＵ１００には、ミラー駆動回路１０１、焦点検出回路１０２、シャッタ駆動回路１０３、映像信号処理回路１０４、スイッチセンス回路１０５、測光回路１０６が接続されている。また液晶駆動回路１０７、バッテリチェック回路１０８、電源供給回路１１０、音声入力回路１１１、音声出力回路１１２、輝度検知回路１１３も接続されている。これらの回路はＭＰＵ１００の制御により動作するものである。

またＭＰＵ１００は、撮影レンズユニット内に配置されたレンズ制御回路２０１と、マウント接点２１を介して通信を行う。マウント接点２１は撮影レンズユニットが接続されるとＭＰＵ１００へ信号を送信する機能も備えている。これによりレンズ制御回路２０１は、ＭＰＵ１００との間で通信を行い、撮影レンズユニット内の撮影レンズ２００及び絞り２０４の駆動を、ＡＦ駆動回路２０２及び絞り駆動回路２０３を介して行うことが可能となる。尚、本実施の形態では、撮影レンズを便宜上１枚の撮影レンズで示しているが、実際は多数のレンズ群により構成されている。

ＡＦ駆動回路２０２は、例えばステッピングモータを有し、レンズ制御回路２０１の制御により撮影レンズ２００のフォーカスレンズ位置を変化させることにより、撮像素子３３に撮影光束の焦点を合わせるように調整する。２０３は絞り駆動回路であり、例えばオートアイリスなどの機能を有し、レンズ制御回路２０１によって絞り２０４を変化させ、光学的な絞り値を得ている。メインミラー６は、撮影レンズ２００を通過する撮影光束をペンタプリズム２２へ導くとともに、その一部を透過させてサブミラー３０に導く。サブミラー３０は、その透過された撮影光束を焦点検出センサユニット３１へ導く。ミラー駆動回路１０１は、メインミラー６を、ファインダにより被写体像を観察可能とする位置と、撮影光束から待避する位置へ移動するように駆動する。またサブミラー３０を、焦点検出センサユニット３１へ撮影光束を導く位置と、撮影光束から待避する位置へ移動するように駆動する。具体的には、ミラー駆動回路１０１は、例えばＤＣモータとギヤトレインなどを具備している。３１は、結像面近傍に配置されたフィールドレンズ、反射ミラー及び、２次結像レンズ、絞り、複数のＣＣＤ等のラインセンサ等から構成されている周知の位相差方式の焦点検出センサユニットである。この焦点検出センサユニット３１から出力された信号は、焦点検出回路１０２へ供給され、被写体像信号に換算された後、ＭＰＵ１００へ送信される。ＭＰＵ１００は、この被写体像信号に基づいて、位相差検出法による焦点検出演算を行う。そして、デフォーカス量及びデフォーカス方向を求め、これに基づいて、レンズ制御回路２０１及びＡＦ駆動回路２０２を介して、撮影レンズ２００のフォーカスレンズを合焦位置まで駆動する。

２２はペンタプリズムであり、メインミラー６によって反射された撮影光束を正立正像に変換反射する光学部材である。使用者は、ファインダ光学系を介して、ファインダ接眼窓１８から被写体像を観察することができる。このペンタプリズム２２は、撮影光束の一部を測光センサ３７０にも導く。測光回路１０６は、この測光センサ３７０の出力を得て、観察面上の各エリアの輝度信号に変換してＭＰＵ１００に出力する。ＭＰＵ１００は、得られる輝度信号から露出値を算出する。

３２は機械フォーカルプレーンシャッタで、使用者がファインダにより被写体像を観察している時には撮影光束を遮る。また撮像時にはレリーズ信号に応じて、不図示の先羽根群と後羽根群の走行する時間差により所望の露光時間を得るように構成されている。このフォーカルプレーンシャッタ３２は、ＭＰＵ１００の指令を受けたシャッタ駆動回路１０３によって制御される。

撮像素子３３には、撮像デバイスであるＣＭＯＳが用いられる。この撮像デバイスには、ＣＣＤ型、ＣＭＯＳ型及びＣＩＤ型など様々な形態があり、何れの形態の撮像デバイスを採用してもよい。クランプ／ＣＤＳ（相関二重サンプリング）回路３４は、Ａ／Ｄ変換する前の基本的なアナログ処理を行うとともに、クランプレベルの変更も可能である。ＡＧＣ（自動利得調整装置）３５は、Ａ／Ｄ変換する前の基本的なアナログ処理を行うとともに、ＡＧＣ基本レベルの変更も可能である。Ａ／Ｄ変換器３６は、撮像素子３３から出力されるアナログ信号をデジタル信号に変換する。

４１０は光学ローパスフィルタで、水晶からなる複屈折板及び位相板を複数枚貼り合わせて積層し、更に赤外カットフィルタを貼り合わせて構成している。４００は、光学ローパスフィルタ４１０、撮像素子３３とがユニット化された撮像ユニットである。

映像信号処理回路１０４は、デジタル化された画像データに対してガンマ／ニー処理、フィルタ処理、モニタ表示用の情報合成処理など、ハードウエアによる画像処理全般を実行する。この映像信号処理回路１０４から出力されるモニタ表示用の画像データは、カラー液晶駆動回路１２０を介してカラー液晶モニタ１９に表示される。また、映像信号処理回路１０４は、ＭＰＵ１００の指示により、メモリコントローラ３８を通じて、バッファメモリ３７（第２の記憶部）に画像データを保存することも可能である。更に、映像信号処理回路１０４は、ＪＰＥＧなどの画像データ圧縮処理を行う機能も有している。連写撮影など連続して撮影が行われる場合は、一旦バッファメモリ３７に画像データを格納し、メモリコントローラ３８を通して未処理の画像データを順次読み出すことも可能である。これにより映像信号処理回路１０４は、Ａ／Ｄ変換器３６から入力されてくる画像データの速度に関わらず、画像処理や圧縮処理を順次行うことが可能となる。メモリコントローラ３８は、外部インタフェース４０（図１のビデオ信号出力用ジャック１６及びＵＳＢ出力用コネクタ１７に相当）から入力される画像データをメモリ３９（第１の記憶部）に記憶する。またメモリ３９に記憶されている画像データを外部インタフェース４０から出力する機能も有する。尚、メモリ３９は、カメラ本体に対して着脱可能なフラッシュメモリなどである。

スイッチセンス回路１０５は、各スイッチの操作状態に応じて入力信号をＭＰＵ１００に送信する。７ａは、レリーズボタン７の第１ストロークによりオンするスイッチＳＷ１である。７ｂは、レリーズボタン７の第２ストロークによりオンするスイッチＳＷ２である。このスイッチＳＷ２がオンされると、撮影開始の指示がＭＰＵ１００に送信される。また前述のメイン操作ダイヤル８、サブ操作ダイヤル２０、撮影モード設定ダイヤル１４、メインＳＷ４３、メニュー釦４４、動画スタート釦４５、セット釦４６が接続されている。このメニュー釦４４のオン／オフによりカラー液晶モニタ１９にメニュー画面を表示／非表示することができる。また動画スタート釦４５は、撮影待機状態において、１回押すことにより、動画像の記録を開始し、動画記録中にもう一度押されると、動画像の記録を終了する。またセット釦４６はメニュー画面表示時のメニュー項目の選択、パラメータの決定等に使用される。

液晶駆動回路１０７は、ＭＰＵ１００の指示に従って、外部液晶表示装置９やファインダ内液晶表示器４１への表示駆動を行う。バッテリチェック回路１０８は、ＭＰＵ１００からの信号に従って、所定時間バッテリチェックを行い、その検出出力をＭＰＵ１００へ送る。４２は電源部であり、カメラの各要素に対して、必要な電源を供給する。時刻計測回路１０９は、メインＳＷ４３がオフされて次にオンされるまでの時間や日付を計測し、ＭＰＵ１００からの指令により、その計測結果をＭＰＵ１００へ送信できる。５０はマイク部であり、動画像の撮影を行う際に、音声を入力する機能を有する。５１はスピーカ部であり、本実施のデジタル一眼レフカメラで動画像の再生を行なう際に音声出力する機能を有する。輝度センサ５２は、被写体の輝度値を検知する。

図４は、本発明の実施形態に係る撮像装置における第一の動画撮影直後の確認表示（レックレビュー）用の画像データの抽出（レビュー画像抽出）及び記憶方法を示すフローチャートである。この処理を実行するプログラムは、マイクロコンピュータ（ＭＰＵ）１００のＲＯＭ１００ｂに記憶されており、このプログラムに従ってＭＰＵ１００が制御処理を実行することにより実行される。

この処理はカメラのメインＳＷ４３がオンされることにより開始され、撮影待機状態において、ステップＳ４０１で動画スタート釦４５が押されたかを判定する。ここで動画スタート釦４５が押されると動画撮影状態になってステップＳ４０２に進み、動画の撮影と記録処理を開始する。この動画撮影状態では、クイックリターンミラー６がミラーアップされてシャッタ３２が開かれて撮像素子３３に光学像が結像する状態となる。そして動画撮影では、所定のフレームレートで撮像素子３３から出力されるアナログ信号をＡ／Ｄ変換器３６でデジタル信号に変換し、映像信号処理回路１０４で所定の画素補間処理や色変換処理を行って、撮影した動画データをバッファメモリ３７に書き込む。こうしてバッファメモリ３７に書き込まれた動画データは、再度読み出され、映像信号処理回路１０４により表示用の画像データに変換され、カラー液晶駆動回路１２０を介してカラー液晶モニタ１９に表示される。これによりカラー液晶モニタ１９は、ライブビュー表示の状態（電子ビューファインダ）となる。一方、ステップＳ４０１において動画スタート釦４５が押されていない場合は、撮影待機状態に戻り、動画スタート釦４５の信号検出を繰り返す。このステップＳ４０２における動画記録では、ＭＰＵ１００は、バッファメモリ３７に書き込まれた動画データを、メモリコントローラ３８を介してメモリ３９へ動画データとして記録する。また動画の記録が開始されると音声入力回路１１１は、マイク５０から入力された音声データを符号化し、その符号化した音声データをバッファメモリ３７へ一時保存する。こうして一時保存された動画の符号化データと音声の符号化データのデータ量は、時間の経過とともに増加する。よって、ＭＰＵ１００は、これら符号化データを所定のファイルフォーマットに成形して、動画データに関連付けてメモリ３９に書き込む。

図５は、本実施形態に係る動画データからレックレビュー用のフレームブロック（シーン）を抽出する画像処理を説明するブロック図である。

バッファメモリ３７には、動画データ及び静止画像データを記録するための一時書き込み領域３７１と、レックレビュー用の画像データ記憶領域３７２とが設けられている。ここでレックレビュー用の画像データは、一時書き込み領域３７１に書き込まれた後に、メモリ３９に記録されるデータとは別に、レックレビュー用の画像データ記憶領域３７２に記憶される。

図４に戻り、ステップＳ４０２で動画データの記録が開始されるとステップＳ４０３に進み、所定時間ごとに輝度センサ５２で被写体の輝度値を検知し、それを輝度検知回路１１３を介してＭＰＵ１００に入力する。こうしてＭＰＵ１００は、現シーンの直前のシーンに対する被写体の輝度値の変化量Ｘを演算する。

次にステップＳ４０４に進み、ＭＰＵ１００は、ステップＳ４０３で求めた被写体輝度値の変化量Ｘと閾値αとを比較する。この閾値αは、ＥＥＰＲＯＭ１００ａに予め記憶されているが、使用者が変更できるような構成としても構わない。ここで、被写体輝度値が直前のシーンに対して所定の閾値α以上変化した（Ｘ≧α）と判定されるとステップＳ４０５へ進む。ステップＳ４０５では、被写体輝度値の変化量Ｘが所定の閾値α以上であったフレームブロック（シーン）と、既にバッファメモリ３７に記憶されているレックレビュー用フレームブロック（シーン）の被写体輝度値の変化量Ｘとを比較する。そして、その比較結果に基づいて、レックレビュー用フレームブロック（シーン）の表示優先度を演算し、バッファメモリ３７に記憶された全てのレックレビュー用フレームブロック（シーン）に対して、レックレビュー時の表示優先度を決定する。尚、ここでは被写体輝度値の変化量Ｘが大きい程、表示優先度が高くなるものとする。

次にステップＳ４０６に進み、バッファメモリ３７のレックレビュー用画像データ記憶領域３７２にレックレビュー用フレームブロック（シーン）を記憶するのに十分な容量が残っているかを判定する。ここで十分な容量が残っていると判断するとステップＳ４０９に進み、被写体の輝度値が所定の閾値α以上変化したレックレビュー用のフレームブロック（シーン）を、動画データとは別にバッファメモリ３７のレックレビュー用画像データ記憶領域３７２に記憶する。尚、このバッファメモリ３７への記憶は、ＭＰＵ１００と映像信号処理回路１０４にて行われる。またこのフレームブロック（シーン）が撮影された時間と、直前のシーンに対する被写体輝度値の変化量Ｘと、表示優先度とをレックレビュー用画像データ記憶領域３７２に記憶されたフレームブロック（シーン）とを関連付けてバッファメモリ３７に記憶する。

一方、ステップＳ４０６で、バッファメモリ３７にレックレビュー用フレームブロック（シーン）を記憶するのに十分な記憶容量が残っていないと判断した場合はステップＳ４０７に進む。そして、ステップＳ４０４で輝度変化量を求めた最新のフレームブロック（シーン）の表示優先度が最も低いかを判定する。このステップＳ４０７で、最新のフレームブロック（シーン）の表示優先度が最も低いと判断するとステップＳ４１０に進み、バッファメモリ３７には何も記憶しないで、動画データの記録を継続する。

一方、ステップＳ４０７で、最新のフレームブロック（シーン）の表示優先度が最も低くないと判定するとステップＳ４０８の更新処理に進む。ステップＳ４０８では、バッファメモリ３７に記憶されているレックレビュー用フレームブロック（シーン）中から表示優先度の最も低い、即ち輝度の変化量が最も小さいフレームブロック（シーン）をバッファメモリ３７から消去して、ステップＳ４０６に進む。そしてステップＳ４０６で、レックレビュー用画像データ記憶領域３７２の残容量が不足しているときはまたステップＳ４０７に進み、ステップＳ４０７及びステップＳ４０８の動作を繰り返すことになる。

またステップＳ４０４で、被写体輝度値の変化量Ｘが所定の閾値α未満（Ｘ＜α）であると判定すると、この場合はレックレビュー用のフレームでないためステップＳ４１０に進み、動画スタート釦４５が押されたかをを判別する。ここで動画スタート釦４５が押されていない場合には、動画像の記録を継続するためにステップＳ４０３に進む。一方ステップＳ４１０で動画スタート釦４５が押された場合は、動画撮影の終了指示であるためステップＳ４１１に進み、動画の記録動作を終了する。そして、この動画記録終了後のレックレビューに関しては後述する。

次に図８のフローチャートを参照して、本発明の実施形態に係るレックレビュー用の画像データを抽出して記憶する他の方法を説明する。

図８は、本発明の実施形態に係る撮像装置における、動画撮影直後の確認表示（レックレビュー）用の画像データの抽出（レビュー画像抽出）及び記憶を行う他の方法を示すフローチャートである。この処理を実行するプログラムは、マイクロコンピュータ（ＭＰＵ）１００のＲＯＭ１００ｂに記憶されており、このプログラムに従ってＭＰＵ１００が制御処理を実行することにより実行される。

この処理はカメラのメインＳＷ４３がオンされることにより開始され、撮影待機状態において、ステップＳ８０１で動画スタート釦４５が押されたかを判定する。ここで動画スタート釦４５が押されると動画撮影状態になってステップＳ８０２に進み、動画の撮影と記録処理を開始する。この動画撮影状態では、前述の図４のステップＳ４０２の場合と同様にして、撮影した動画データをバッファメモリ３７に書き込み、またカラー液晶駆動回路１２０を介してカラー液晶モニタ１９に表示される。一方、ステップＳ８０１において動画スタート釦４５が押されていない場合は、撮影待機状態に戻り、動画スタート釦４５の信号検出を繰り返す。尚、ステップＳ８０２では、マイク５０から入力された音声データを符号化して、その符号化した音声データをバッファメモリ３７へ一時保存する動作も、前述のステップＳ４０２と同様に行われる。

こうしてステップＳ８０２で動画データの記録が開始されるとステップＳ８０３に進み、所定時間ごとに輝度センサ５２で被写体の輝度値を検知し、それを輝度検出回路１１３を介してＭＰＵ１００に入力する。こうしてＭＰＵ１００は、現シーンの直前のシーンに対する被写体の輝度値の変化量Ｘを演算する。またステップＳ８０３では、前述のステップＳ４０３とは異なり、撮影レンズ２００の絞り値の変化も検知している。この絞り値は、使用者自身が所定の操作によって絞り値を変更する場合と、カメラ自身が光量の変化等に対応するために自動で絞り値を変更する場合があるが、ステップＳ８０３ではこの両方とも検知している。絞り値の変更は、ＭＰＵ１００からの信号を絞り駆動回路２０３がレンズ制御回路２０１を介して受取り絞り２０４を駆動させる。よって、絞り値が変化したか否かの判定はＭＰＵ１００自身で行われる。更に、ＭＰＵ１００は、直前の絞り値からの変化量Ｙも演算する。

次にステップＳ８０４に進み、ＭＰＵ１００は、ステップＳ８０３で求めた被写体輝度値の変化量Ｘと閾値αとを比較する。この閾値αは、ＥＥＰＲＯＭ１００ａに予め記憶されているが、使用者が変更できるような構成としても構わない。ここで、被写体輝度値が直前のシーンに対して所定の閾値α以上変化した（Ｘ≧α）と判定されるとステップＳ８０５へ進む。ステップＳ８０５では、「輝度値変化フラグＡ」の値を「１」に設定してステップＳ８０７に進む。一方、ステップＳ８０４で、その変化量Ｘが閾値αよりも小さいと判断するとステップＳ８０６に進み、「輝度値変化フラグＡ」の値を「０」に設定してステップＳ８０７に進む。

ステップＳ８０７では、絞り値の変化量Ｙと閾値βとを比較する。この絞り値の変化量の判定は、ＭＰＵ１００で行われる。絞り値の変化量の閾値βは、ＥＥＰＲＯＭ１００ａに予め記録されているが、使用者が変更できるような構成としても構わない。ステップＳ８０７で、絞り値が直前の絞り値に対して所定の閾値β以上変化した（Ｙ≧β）と判断するとステップＳ８０８へ進み、「絞り値変化フラグＢ」の値を「１」に設定してステップＳ８１０に進む。一方、ステップＳ８０７で、絞り値が直前の絞り値に対して所定の閾値β以上変化していない（Ｘ＜α）と判断するとステップＳ８０９へ進み、「絞り値変化フラグＢ」の値を「０」に設定してステップＳ８１５に進む。尚、これらフラグは、ＭＰＵ１００のＲＡＭ（不図示）或はバッファメモリ３７に設定されている。

次にステップＳ８１０に進み、ＭＰＵ１００は、フレームブロック（シーン）のシーン変化量ΔＳを表す式（１）を演算する。

ΔＳ＝δＡＸ＋ξＢＹ，δ＋ξ＝１ …式（１）
ここでδ，ξは、それぞれ被写体輝度値変化、レンズの絞り値変化に対する重み係数である。

ここで、被写体輝度値の変化量Ｘが閾値α以上、或は絞り値の変化量Ｙが閾値β以上の少なくともどちらか一方を満たすフレームブロック（シーン）と、既にバッファメモリ３７に記憶されているレックレビュー用フレームブロック（シーン）とを比較する。そしてこれらシーン同士のシーン変化量ΔＳを比較して、レックレビュー用フレームブロック（シーン）の表示優先度を演算する。こうして、バッファメモリ３７に記憶された全てのレックレビュー用フレームブロック（シーン）に対して、レックレビュー時の表示優先度を決定する。

尚、ここではシーン変化量ΔＳの値が大きい程、表示優先度が高くなるようにしている。また被写体輝度値の変化量Ｘ、絞り値の変化量Ｙに対する重み係数δ，ξの値は、ＥＥＰＲＯＭ１００ａに予め記録されているが、使用者が変更できるような構成としても構わない。

次にステップＳ８１１に進み、バッファメモリ３７のレックレビュー用画像データ記憶領域３７２にレックレビュー用フレームブロック（シーン）を記憶するのに十分な容量が残っているかを判定する。ここで十分な容量が残っていると判断するとステップＳ８１４に進む。ステップＳ８１４では、被写体輝度の変化量が閾値α以上、或は絞り値の変化量が閾値β以上の少なくともどちらか一方を満たすフレームブロック（シーン）を、撮影画像とは別にバッファメモリ３７のレックレビュー用画像データ記憶領域３７２に記憶する。このバッファメモリ３７への記憶は、ＭＰＵ１００と映像信号処理回路１０４にて行われる。また、このフレームブロック（シーン）のシーン変化量ΔＳと、表示優先度と、撮影された時間とをレックレビュー用画像データ記憶領域３７２に記憶されたフレームブロック（シーン）と関連付けてバッファメモリ３７に記憶する。

またステップＳ８１１で、バッファメモリ３７内にレックレビュー用フレームブロック（シーン）を記憶するのに十分な容量が残っていないと判断した場合はステップＳ８１２に進む。ステップＳ８１２では、ステップＳ８０４及びステップＳ８０７で判定された最新のフレームブロック（シーン）の表示優先度が最も低いかを判定する。ステップＳ８１２で、ステップＳ８０４或はステップＳ８０７で判定された最新のフレームブロック（シーン）の表示優先度が最も低い場合はステップＳ８１５に進み、バッファメモリ３７には何も記憶しないで、動画像の記録を継続する。

またステップＳ８１２で、ステップＳ８０４及びステップＳ８０７で判定された最新のフレームブロック（シーン）の表示優先度が最も低くない場合はステップＳ８１３に進む。ステップＳ８１３では、バッファメモリ３７に記憶されているレックレビュー用フレームブロック（シーン）の中から表示優先度の最も低いフレームブロック（シーン）をバッファメモリ３７から消去してステップＳ８１１へ進む。ここで、レックレビュー用画像データ記憶領域３７２の残容量が十分でないときは、ステップＳ８１２及びステップＳ８１３の動作を繰り返す。

こうしてステップＳ８０９，Ｓ８１２，Ｓ８１４のいずれかを実行するとステップＳ８１５に進む。ステップＳ８１５では、動画スタート釦４５が押されたかを判別する。動画スタート釦４５が押されていない場合はステップＳ８０３に進んで、動画像の記録を継続する。一方ステップＳ８１５で、動画スタート釦４５が押された場合には、ステップＳ８１６に進み、動画データの記録動作を終了する。

尚、ここでレックレビュー用の画像データは、前述したライブビュー表示用の画像データと同様の方法で作製される。以下、図５を参照して詳しく説明する。

動画撮影時にバッファメモリ３７内の一時書き込み領域３７１に書き込まれた画像データの中から、被写体輝度値（Ｘ）が閾値（α）以上或は絞り値（Ｙ）が閾値（β）以上変化したフレームブロック（シーン）２００４〜２００６を再度読み出す。そして、そのフレームを映像信号処理回路１０４で表示用の画像データに変換し、バッファメモリ３７内のレックレビュー用画像データ記憶領域３７２にレックレビュー用画像データとして記憶する。ここで、レックレビュー用画像データの記憶は、メモリ３９への動画像の記録と並行して行なわれる。

尚、本実施形態では、レックレビュー用の画像データをバッファメモリ３７に記憶するようにしたが、これをメモリ３９に記憶するような構成としても構わない。

このように図４或は図８のフローチャートに従った処理により作成されたレックレビュー用の画像データは、動画撮影終了後、直ぐにバッファメモリ３７から読み出される。そしてＭＰＵ１００と映像信号処理回路１０４とカラー液晶駆動回路１２０を介して、カラー液晶モニタ１９に表示される。

また動画記録時に、被写体の輝度値或はレンズ絞り値の変化量に関係なく、動画記録スタート時と終了時のフレームブロック（シーン）をバッファメモリ３７に記憶しておく。そして所定の条件を満たさない場合であっても、撮影された動画像に対して必ずレックレビュー用画像データが生成されるような構成としても良い。

更に、本実施形態では、被写体輝度値とレンズの絞り値の変化量をレックレビュー用画像データ生成の判定条件としたが、シャッタ速度の変化量、ズーム量等もレックレビュー用画像データ生成の判定条件としても構わない。

次に図６を参照して、レックレビュー時にカラー液晶モニタ１９に表示するフレームブロック（シーン）数の選択方法について説明する。

図６は、本実施形態に係る撮像装置におけるレックレビューの設定を行うための操作画面（ＵＩ画面）例を示す図である。

メニュー釦４４を押してカラー液晶モニタ１９にメニュー画面を表示し、メイン操作ダイヤル８を左右に回転することにより、画面上のメニュー種別タブを選択することができる。いま図６の左から２番目の「再生タブ」６０１を選択した状態でサブ操作ダイヤル２０を左右に回転することにより、上から２番目の『レックレビューフレームブロック数』の項目にカーソル６０２を合わせる。そしてセット釦４６を押すことにより『レックレビューフレームブロック数』の選択状態に入る。この状態でサブ操作ダイヤルＳＷ２０を右に回転すると、表示されているフレームブロック数６０３が減り、左に回転することでフレームブロック数６０３が増加する。図６では「２０」ブロックが表示されている。こうしてフレームブロック数６０３を所望の値にセットした状態でセット釦４６を押すことにより、レックレビュー時にカラー液晶モニタ１９に表示するフレームブロック（シーン）数を設定できる。こうして設定されたフレームブロック（シーン）数は、ＥＥＰＲＯＭ１００ａに記憶される。

また同様に、「再生タブ」６０１を選択した状態で、サブ操作ダイヤルＳＷ２０を左右に回転することにより、一番上の『レックレビュー』の項目にカーソル６０２を合わせてセット釦４６を押すことにより、『レックレビュー』の選択状態に入る。この状態でサブ操作ダイヤル２０を左右に回転することにより、『レックレビューする／しない』が切り替り、セット釦４６で決定することにより、動画撮影後のレックレビューを実施するか否かを設定することができる。

次に図７のフローチャートを参照して、バッファメモリ３７に記憶されたレックレビュー用フレームブロック（シーン）の中から、予め設定したフレームブロック（シーン）数だけを動画撮影終了後にカラー液晶モニタ１９に表示する方法について説明する。

図７は、本発明の実施形態に係る撮像装置におけるレックレビュー処理を説明するフローチャートである。この処理を実行するプログラムは、マイクロコンピュータ（ＭＰＵ）１００のＲＯＭ１００ｂに記憶されており、このプログラムに従ってＭＰＵ１００が制御処理を実行することにより実行される。

この処理は図４或は図８で動画記録の終了が指示されることにより開始される。まずステップＳ７０１で、ＥＥＰＲＯＭ１００ａの設定値が『レックレビューする』に設定されているかを判定する。ここで『レックレビューする』に設定されている場合はステップＳ７０２に進んで、レックレビュー処理を実行するが、そうでないときはそのままステップＳ７１０の待機状態に進む。

ステップＳ７０２では、ＥＥＰＲＯＭ１００ａの設定値から表示するフレームブロック（シーン）数（例えば、５シーン）を取得する。次にステップＳ７０３に進み、バッファメモリ３７のレックレビュー用画像データ記憶領域３７２に記憶されたレックレビュー用フレームブロック（シーン）の数と、表示するフレームブロック（シーン）の数（例えば、５シーン）とを比較する。ここでレックレビュー用画像データ記憶領域３７２に記憶されたレックレビュー用フレームブロック（シーン）の数の方が多い場合はステップＳ７０４に進み、表示するフレームブロック（シーン）の絞込みに移る。一方、ステップＳ７０３でレックレビュー用画像データ記憶領域３７２に記憶されたレックレビュー用フレームブロック（シーン）の数の方が少ない或は等しい場合はステップＳ７１１に進む。ステップＳ７１１では、レックレビュー用画像データ記憶領域３７２に記憶されたレックレビュー用フレームブロック（シーン）の全てをレックレビュー表示するように設定してステップＳ７０５に進む。

ステップＳ７０４では、バッファメモリ３７のレックレビュー用画像データ記憶領域３７２に記憶された複数のレックレビュー用フレームブロック（シーン）の表示優先度を判別する。そして表示優先度の高いものから順に、設定された数（５シーン）のフレームブロック（シーン）を抽出する。

次にステップＳ７０５に進み、ステップＳ７０４で抽出された、或はステップＳ７１１で選択されたフレームブロック（シーン）の撮影時間情報をバッファメモリ３７より取得する。次にステップＳ７０６に進み、バッファメモリ３７に記憶された表示するフレームブロック（シーン）を撮影時間順に並べ替える。そしてステップＳ７０７に進み、ステップＳ７０６で撮影した時間順に並び替えたフレームブロック（シーン）からレックレビュー用の画像データを生成してバッファメモリ３７に記憶する。次にステップＳ７０８に進み、レックレビュー用画像データをバッファメモリ３７から読み出し、ＭＰＵ１００と映像信号処理回路１０４とカラー液晶駆動回路１２０を介して、カラー液晶モニタ１９に表示する。次にステップＳ７０９で、レックレビューが終了したかどうかを判断し、終了するすとステップＳ７１０の撮影待機状態に戻る。一方、レックレビューが終了していないと判断するとステップＳ７０８に進み、レックレビュー用画像データをバッファメモリ３７から読み出して表示する。

尚、本実施形態では、レックレビュー時には表示する各フレームブロック（シーン）間には連続性がないことが多いと考えられるため、スピーカ５１からの音声出力を行なわない構成としている。しかし、レックレビュー画像に関連した音声（撮影日時、場所等）をレックレビュー時にスピーカ５１から出力するような構成としても構わない。

いま例えば前述の図６の例のように、レックレビューフレームブロック数が「２０」でフレームレートが「３０ｆｐｓ」の場合、図７のステップＳ７０８で、２０シーンをフレームレート「３０ｆｐｓ」で表示するようにしても良い。また或はステップＳ７０８で、１シーンだけを表示しステップＳ７０８，Ｓ７０９を２０回繰り返して２０シーンをフレームレート「３０ｆｐｓ」で表示するようにしても良い。

以上説明したように本実施形態によれば、所定の条件（被写体輝度値の変化量、レンズ絞り値の変化量、シャッタ速度の変化量、ズーム値の変化量）に基づいて、自動的にレックレビュー用のフレームブロック（シーン）を選択できる。これにより、動画撮影中のシーンの切り替り（重要なシーン）を、レックレビュー用のフレームブロック（シーン）として自動的に選択することができる。

また、バッファメモリに記憶されたレックレビュー用のフレームブロック（シーン）の内、実際にレックレビューとして表示するフレームブロック（シーン）数を予め選択するできる。

さらに、実際にレックレビューとして表示するフレームブロック（シーン）は、所定条件から算出した表示優先度に従って順位付けられているため、使用者が確認したい重要度の高いシーンをレックレビュー用の画像として採用できる。

また、予め選択した表示するフレームブロック（シーン）の数を多く設定すれば、動画像の詳細確認ができ、少なく設定すれば、簡潔な確認の両方を行なうことができる等の操作の利便性が得られる。

本発明の実施形態に係る撮像装置の一例であるデジタル一眼レフカメラのカメラ前面側より見た斜視図である。 本発明の実施形態に係る撮像装置の一例であるデジタル一眼レフカメラの背面側より見た斜視図である。 本実施形態に係るデジタル一眼レフカメラの主要な電気的構成を示すブロック図である。 本発明の実施形態に係る撮像装置における第一の動画撮影直後の確認表示（レックレビュー）用の画像データの記憶方法を示すフローチャートである。 本実施形態に係る動画データからレックレビュー用のフレームブロック（シーン）を抽出する画像処理を説明するブロック図である。 本実施形態に係る撮像装置におけるレックレビューの設定を行うための操作画面（ＵＩ画面）例を示す図である。 本発明の実施形態に係る撮像装置におけるレックレビュー処理を説明するフローチャートである。 本発明の実施形態に係る撮像装置における、動画撮影直後の確認表示用の画像データの他の記憶方法を示すフローチャートである。

Claims (14)

1. 被写体像を光電変換し、画像信号を連続的に生成するための撮像手段と、
   前記撮像手段により連続的に生成された画像信号から動画像を生成する映像信号処理手段と、
   前記映像信号処理手段により生成された動画像を記憶する第１の記憶手段と、
   前記動画像の中から被写体の輝度値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出するレビュー画像抽出手段と、
   前記レビュー画像抽出手段により抽出されたレックレビュー用画像を記憶する第２の記憶手段と、
   前記映像信号処理手段により生成された動画像の記録終了後に、前記第２の記憶手段に記憶されたレックレビュー用画像を再生するためのレビュー再生手段と、
   を有することを特徴とする撮像装置。
2. 前記レビュー画像抽出手段は更に、絞り値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出することを特徴とする請求項１に記載の撮像装置。
3. 前記レビュー再生手段により再生されるレックレビュー用画像の数を設定するための設定手段を更に有し、
   前記レビュー再生手段は、前記設定手段で設定されたレックレビュー用画像の数に応じて、前記第２の記憶手段に記憶されたレックレビュー用画像の中から画像を再生することを特徴とする請求項１又は２に記載の撮像装置。
4. 前記第２の記憶手段は、少なくとも前記レックレビュー用画像の表示優先度及び撮影時間情報とともに前記レックレビュー用画像を記憶することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記表示優先度は、前記輝度値の変化量、或は前記絞り値の変化量が大きいほど高く設定されることを特徴とする請求項４に記載の撮像装置。
6. 前記レビュー再生手段は、前記第２の記憶手段に記憶されたレックレビュー用画像を撮影時間順に再生することを特徴とする請求項４に記載の撮像装置。
7. 前記第２の記憶手段の記憶容量が不足した場合、前記レックレビュー用画像の前記表示優先度に従って前記第２の記憶手段の内容を更新する更新手段を更に有することを特徴とする請求項４に記載の撮像装置。
8. 被写体像を光電変換し、画像信号を連続的に生成するための撮像手段と、前記撮像手段により連続的に生成された画像信号から動画像を生成する映像信号処理手段と、前記映像信号処理手段により生成された動画像を記憶する第１の記憶手段とを有する撮像装置における画像再生方法であって、
   撮影した動画像の中から被写体の輝度値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出するレビュー画像抽出工程と、
   前記レビュー画像抽出工程で抽出されたレックレビュー用画像をメモリに記憶する記憶工程と、
   前記動画像の記録終了後に、前記メモリに記憶されたレックレビュー用画像を再生するためのレビュー再生工程と、
   を有することを特徴とする撮像装置における画像再生方法。
9. 前記レビュー画像抽出工程は更に、絞り値の変化量が閾値よりも大きいシーンを選択してレックレビュー用画像として抽出することを特徴とする請求項８に記載の撮像装置における画像再生方法。
10. 前記レビュー再生工程で再生されるレックレビュー用画像の数を設定するための設定工程を更に有し、
    前記レビュー再生工程は、前記設定工程で設定されたレックレビュー用画像の数に応じて、前記メモリに記憶されたレックレビュー用画像の中から画像を再生することを特徴とする請求項８又は９に記載の撮像装置における画像再生方法。
11. 前記記憶工程では、少なくとも前記レックレビュー用画像の表示優先度及び撮影時間情報とともに前記レックレビュー用画像を記憶することを特徴とする請求項８乃至１０のいずれか１項に記載の撮像装置における画像再生方法。
12. 前記表示優先度は、前記輝度値の変化量、或は前記絞り値の変化量が大きいほど高く設定されることを特徴とする請求項１１に記載の撮像装置における画像再生方法。
13. 前記レビュー再生工程は、前記メモリに記憶されたレックレビュー用画像を撮影時間順に再生することを特徴とする請求項１１に記載の撮像装置における画像再生方法。
14. 前記メモリの記憶容量が不足した場合、前記レックレビュー用画像の前記表示優先度に従って前記メモリの内容を更新する更新工程を更に有することを特徴とする請求項１１に記載の撮像装置における画像再生方法。

Images