JP2021040217A - 撮像装置及びその制御方法並びにプログラム - Google Patents

Abstract

【課題】複数のカメラにより撮影された、関連性のない画像データを持つ動画と静止画とが同時に記録されることを防ぐことができる撮像装置及びその制御方法並びにプログラムを提供する。【解決手段】静止画記録用のカメラである撮像部１１０及び動画記録用のカメラである撮像部１１２を有する撮像装置１００は、撮像部１１０，１１２の夫々の焦点距離ｆｍ，ｆｉを取得し、撮像部１１０により静止画が撮影された場合、焦点距離ｆｍ，ｆｉに応じて、静止画撮影の待機中に撮像部１１２により撮影された動画の記録媒体１４１への記録を制御する。【選択図】図２

Description

本発明は撮像装置及びその制御方法並びにプログラムに関し、特に、記録媒体に記録された既存の動画ファイルの動画データに、撮影中の動画データを追記することができる撮像装置及びその制御方法並びにプログラムに関する。

従来より、２つのカメラを備え、一方のカメラで動画を撮影しながら、他方のカメラで静止画を撮影することで、静止画と動画を同時に撮影する撮像装置が知られている（例えば、特許文献１参照）。

特開２０１７−６９８９６号公報

しかしながら、特許文献１に記載の撮像装置では、２つのカメラの画角が大きく異なる場合、関連性のない画像データを持つ動画と静止画が同時に記録されてしまうという課題がある。

そこで本発明は、複数のカメラにより撮影された、関連性のない画像データを持つ動画と静止画とが同時に記録されることを防ぐことができる撮像装置及びその制御方法並びにプログラムを提供することを目的とする。

本発明の請求項１に係る撮像装置は、静止画撮影を行うための第１の撮像部、及び動画撮影を行うための第２の撮像部を有する撮像装置において、前記第１及び第２の撮像部の撮影設定を取得する取得手段と、前記第１の撮像部により静止画が撮影された場合、前記取得された前記第１及び第２の撮像部の撮影設定に応じて、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画の記録媒体への記録を制御する制御手段とを備えることを特徴とする。

本発明によれば、複数のカメラにより撮影された、関連性のない画像データを持つ動画と静止画とが同時に記録されることを防ぐことができる。

実施例１に係る撮像装置のハードウェア構成を示すブロック図である。 実施例１に係る、光学ファインダ使用時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。 実施例２に係る、動画用カメラズーム時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。 実施例３に係る、ライブビュー使用時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。

以下、図面を参照して本発明の実施例を詳細に説明するが、この発明は以下の実施の形態に限定されない。また、この発明の実施の形態は発明の好ましい形態を示すものであり、発明の範囲を限定するものではない。

［実施例１］
本実施例では撮像装置としてデジタル一眼レフカメラを例にとって説明するが、２つの撮像部を有し、その一方で静止画撮影を行い他方で動画撮影を行うことが可能な撮像装置であればこれに限定されず、例えば、携帯電話などであってもよい。

本実施例の撮像装置は、特定の記録モード（以下、「プラスムービーオートモード」と呼ぶ）においては、静止画記録の指示が入力されたことに応じて静止画の記録を行い、その指示が入力される直前に撮影された所定単位の動画データにその静止画を挿入する。さらに、プラスムービーオートモードにおいては、静止画記録と同時に上述のような所定秒数の動画データが記録される毎に、その動画データを過去にプラスムービーオートモードにて記録された動画ファイルと結合（追記）する。また、プラスムービーオートモードにて動画ファイルに新たに動画データが追記されるたびに、その新たに追記された動画に対するチャプタが記録される。

以下、図１を用いて、本実施例に係る撮像装置１００の主要なハードウェア構成を説明する。

図１において、撮像装置１００は、制御部１０１、操作部１０２、バス１０３、メモリ１０４、不揮発性メモリ１０５，撮像部１１０，１１２、及び画像処理部１１１を備える。さらに、撮像装置１００は、音声入力部１２０、音声処理部１２１、ＬＣＤ１３０，１３２、表示制御部１３１，１３３、記録再生部１４０、記録媒体１４１、映像出力部１５０、音声出力部１５１、及び通信部１５２を備える。

制御部１０１は、例えば、ＣＰＵ（ＭＰＵ）からなり、不揮発性メモリ１０５に記憶されるプログラムを実行して撮像装置１００の各ブロックを制御したり、各ブロック間でのデータ転送を制御したりする。また、制御部１０１は、ユーザからの操作を受け付ける操作部１０２からの操作信号に応じて、撮像装置１００の各ブロックを制御する。また、制御部１０１は、画像処理部１１１によって得られた画像を解析し、その解析結果に応じて、撮像装置１００の各ブロックを制御する。

操作部１０２は、例えば、電源ボタン、静止画記録ボタン、動画記録開始ボタン、ズーム調整ボタン、オートフォーカスボタン、モード切替スイッチ等を有する。ユーザによりこれらのボタンやスイッチに対して撮影に関連する各種操作がされると、操作部１０２は制御部１０１に操作信号を送信する。また、操作部１０２は、メニュー表示ボタン、決定ボタン、その他カーソルキー、ポインティングデバイス、タッチパネル等を有し、ユーザによりこれらのキーやボタン等が操作されると制御部１０１に操作信号を送信する。

バス１０３は、各種データ、制御信号、指示信号などを撮像装置１００の各ブロックに送るための汎用バスである。

メモリ１０４は、画像処理部１１１、音声処理部１２１により得られた画像信号及び音声信号を一時的に記憶するメモリであり、ＤＲＡＭやＳＲＡＭ等により構成される。

不揮発性メモリ１０５は、電気的に消去・記録可能なメモリであり、制御部１０１の動作用の定数、プログラム等が記憶されるメモリであり、ＥＥＰＲＯＭ等により構成される。

撮像部１１０，１１２は夫々、レンズを含む光学系、絞り、ＣＣＤセンサやＣＭＯＳセンサ等の撮像素子を有する。撮像部１１０，１１２は夫々、その光学系により取り込まれた被写体像を、絞りにより光量を制御して、撮像素子により画像信号に変換し、アナログデジタル変換をして、画像処理部１１１に送信する。撮像部１１０は、着脱可能な交換レンズを介して導光される被写体像を撮影する静止画記録用カメラである。撮像部１１２は撮像部１１０とは異なる専用の光学系を有し、その光学系を介して導光される被写体像を撮影する動画記録用のカメラである。

画像処理部１１１は、撮像部１１０，１１２から入力されたデジタルの画像信号に、設定値に基づいてホワイトバランスや色、明るさなどを調整する画質調整処理を行う。そして、画像処理部１１１で処理された画像信号は、制御部１０１により、メモリ１０４、映像出力部１５０、表示制御部１３１，１３３等に送信される。

本実施例では、撮像部１１０，１１２は「光学ズーム」機能及び「光学防振」機能を有し、画像処理部１１１は「電子ズーム」機能及び「電子防振」機能を有する。ここで、「光学ズーム」機能及び「電子ズーム」機能は、ユーザの操作に応じて、得られる画像を拡大する機能である。また、「光学防振」機能及び「電子防振」機能は、撮像装置１００本体の振動による画像の揺れを防止する機能である。そして、これらの機能は、制御部１０１の制御の下、同時に使用されたり交互に使用されたり、単独で使用されたりする。

ここで、「光学ズーム」機能とは、ユーザにより撮像部１１０，１１２の光学系のズームリングや操作部１０２が操作されたことに応じて、撮像部１１０，１１２の光学系におけるレンズを移動させ、取り込まれる被写体の光学像を拡大／縮小する機能である。

「電子ズーム」機能とは、ユーザにより操作部１０２のズーム調整ボタンが操作されたことに応じて、画像処理部１１１が、撮像部１１０，１１２により生成された画像のうち一部を切り出した画像を拡大した画像信号を生成する処理である。

「光学防振」機能とは、不図示の振動検出部からの加速度信号の値に基づいて、撮像部１１０，１１２の光学系におけるレンズの移動量を算出し、そのレンズを移動させることで、取得される画像の揺れを防止する機能である。

「電子防振」機能とは、不図示の振動検出部からの加速度信号の値に基づいて、撮像部１１０，１１２により取得された画像信号の位置を調整することにより、画像の揺れを防止する機能である。尚、「電子防振」機能は、不図示の振動検出部からの加速度信号の値に基づいて、撮像部１１０，１１２の撮像素子における読み出し位置をずらすことによっても実現できる。これらの機能は公知の技術であるため、詳細な説明は省略する。

また、音声入力部１２０は、例えば、内蔵された無指向性のマイクまたは音声入力端子を介して接続された外部マイク等により、撮像装置１００の周囲の音声を集音（収音）し、アナログデジタル変換をして音声処理部１２１に送信する。

音声処理部１２１は、音声入力部１２０から入力されたデジタルの音声信号に対して、その音声レベルの適正化処理等の音声に関する処理を行う。そして、音声処理部１２１で処理された音声信号は、制御部１０１によりメモリ１０４に送信される。

画像処理部１１１及び音声処理部１２１は、メモリ１０４に一時的に記憶された画像信号や音声信号を読み出して画像信号の符号化、音声信号の符号化などを行い、圧縮画像信号、圧縮音声信号等を生成する。制御部１０１は、これらの圧縮画像信号、圧縮音声信号を、記録再生部１４０に送信する。

記録再生部１４０は、記録媒体１４１に対して画像処理部１１１及び音声処理部１２１で生成された圧縮画像信号、圧縮音声信号、その他撮影に関する制御データ等を記録する。また、音声信号を圧縮符号化しない場合には、制御部１０１は、音声処理部１２１により生成された音声信号と画像処理部１１１により生成された圧縮画像信号とを、記録再生部１４０に送信し記録媒体１４１に記録させる。ここで、記録媒体１４１は、撮像装置１００に内蔵された記録媒体でも、取外し可能な記録媒体でもよく、撮像装置１００で生成した圧縮画像信号、圧縮音声信号、音声信号、及び各種データなどを記録することができればよい。例えば、記録媒体１４１は、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−Ｒ、ＤＶＤ−Ｒ、磁気テープ、不揮発性の半導体メモリ、フラッシュメモリ、などのあらゆる方式の記録媒体を含む。また、記録媒体１４１には、プラスムービーオートモードにおいて生成される動画ファイルも保存される。

また、記録再生部１４０は、記録媒体１４１に記録された圧縮画像信号、圧縮音声信号、音声信号、及び各種データを読み出す（再生する）。そして読み出した圧縮画像信号及び圧縮音声信号を、制御部１０１は画像処理部１１１及び音声処理部１２１に送信する。画像処理部１１１及び音声処理部１２１は、圧縮画像信号、圧縮音声信号を一時的にメモリ１０４に記憶させ、所定の手順で復号し、復号した音声信号を音声出力部１５１へ、復号化した画像信号を映像出力部１５０や表示制御部１３１に送信する。また、音声信号が記録媒体１４１に非圧縮記録されている場合には、制御部１０１は、音声信号を直接音声出力部１５１に送信する。

音声出力部１５１は、例えば音声出力端子からなり、接続されたイヤホンやスピーカなどから音声を出力させるために音声信号を送信する。また、音声出力部１５１は、撮像装置１００に内蔵され、音声信号にかかる音声を出力するスピーカであってもよい。映像出力部１５０は、例えば映像出力端子からなり、接続された外部ディスプレイ等に映像を表示させるために画像信号を送信する。また、音声出力部１５１、映像出力部１５０は、統合された１つの端子、例えばＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）（登録商標）端子のような端子であってもよい。

また、表示制御部１３１は、画像処理部１１１から送信された画像信号による映像や、撮像装置１００の操作をするための操作画面（メニュー画面）等をＬＣＤ１３０に表示させる。

ＬＣＤ１３０は、液晶ディスプレイからなる表示デバイスである。尚、ＬＣＤ１３０は、光学ファインダ１３２より大きな画面を有する表示デバイスであればよく、有機ＥＬディスプレイ、電子ペーパー等であってもよい。

光学ファインダ１３２は、表示制御部１３３は光学ファインダ１３２にスルー画像や、撮影設定情報などの表示をさせる。ユーザが操作部１０２の表示切替ボタンを操作することによって、スルー画像をＬＣＤ１３０に表示させるか、または光学ファインダ１３２に表示させるかを切り替えることができる。

通信部１５２は、撮像装置１００と外部装置との間で通信を行うもので、例えば、音声信号、画像信号、圧縮音声信号、圧縮画像信号などのデータを送信したり受信したりする。また、撮影開始や終了コマンド等の、撮影にかかる制御信号や、その他の情報を送信したり受信したりする。通信部１５２は、例えば、赤外線通信モジュール、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信モジュール、無線ＬＡＮ通信モジュール、ＷｉｒｅｌｅｓｓＵＳＢ、ＧＰＳ受信機等の無線通信モジュールである。

ここで、撮像装置１００の本実施例における動作について説明する。

撮像装置１００は、ユーザが操作部１０２の電源ボタンを操作すると、操作部１０２から制御部１０１に起動指示の操作信号が送信される。この指示を受けて、制御部１０１は、不図示の電源供給部を制御して、電源供給部に撮像装置１００の各ブロックに対して電源を供給させる。

撮像装置１００の各ブロックに対して電源が供給された後、ユーザが操作部１０２のモード切替スイッチを操作すると、操作部１０２から制御部１０１にモード切替指示の操作信号が送信される。この指示を受けて、制御部１０１は、静止画撮影モード、動画撮影モード、再生モード等のいずれかのモードに切り替える。

静止画撮影モードでは、撮像装置１００は撮影待機状態でユーザが操作部１０２の静止画記録ボタンを操作することで撮影を行い、圧縮画像信号が記録媒体１４１に記録される。そして再び撮影待機状態になる。動画撮影モードでは、撮像装置１００は撮影待機状態でユーザが操作部１０２の動画記録開始ボタンを操作することで撮影を開始し、その間、圧縮画像信号と圧縮音声信号または音声信号が記録媒体１４１に記録される。そしてユーザが操作部１０２の動画記録終了ボタンを操作することで撮影を終了し、再び撮影待機状態になる。再生モードでは、ユーザが操作部１０２のタッチパネル等を用いて再生対象の動画ファイルを選択すると、その動画ファイルが記録媒体１４１から読み出され、音声出力部１５１でその音声が再生され、ＬＣＤ１３０でその映像が再生される。

まず、静止画撮影モードの詳細について説明する。操作部１０２のモード切替スイッチに対するユーザ操作により静止画撮影モードが設定されると、まず、制御部１０１は、撮像装置１００の各ブロックを撮影待機状態に設定させる。

撮影待機状態では、画像処理部１１１は、画像信号を表示制御部１３１に送信しＬＣＤ１３０に画像信号に関する映像を表示させる。ユーザはこの様にして表示された画面を見ながら撮影の準備を行う。

撮影待機状態で、ユーザが操作部１０２の静止画記録ボタンを操作することにより撮影指示信号が送信されると、制御部１０１は撮影制御信号を撮像装置１００の各ブロックに送信し、以下のような動作をさせるように制御する。

撮像部１１０は、その光学系を介して取り込まれた被写体の光学像を撮像素子により画像信号に変換し、アナログデジタル変換し、画像処理部１１１に送信する。画像処理部１１１は、入力されたデジタルの画像信号の画質（ホワイトバランスや色、明るさなど）を設定値に基づいて調整する。そして、画像処理部１１１で画質調整された画像信号は、制御部１０１によりメモリ１０４、映像出力部１５０、表示制御部１３１等に送信される。表示制御部１３１は、受信した画像信号に関する映像をＬＣＤ１３０に表示させる。これにより、ユーザは撮影した静止画を確認することができる。

そして、画像処理部１１１は、メモリ１０４に一時的に記憶された画像信号を読み出して所定の符号化を行い、圧縮画像信号を生成し、記録再生部１４０に出力する。記録再生部１４０は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、圧縮画像信号を静止画ファイルとして記録媒体１４１に書き込んでいく。

なお、制御部１０１は、画像処理部１１１による符号化の動作が終了すると、撮影待機状態に移行させるように制御信号を撮像装置１００の各ブロックに送信して、撮影待機状態に戻る。

次に、動画撮影モードの詳細について説明する。操作部１０２のモード切替スイッチに対するユーザ操作により動画撮影モードが設定されると、まず、制御部１０１は、撮像装置１００の各ブロックを撮影待機状態に設定させる。

撮影待機状態では、画像処理部１１１は、画像信号を表示制御部１３１に送信しＬＣＤ１３０に画像信号に関する映像を表示させる。ユーザはこの様にして表示された画面を見ながら撮影の準備を行う。

撮影待機状態で、ユーザが操作部１０２の動画記録開始ボタンを操作することにより撮影開始の指示信号が送信されると、制御部１０１は撮影開始の制御信号を撮像装置１００の各ブロックに送信し、以下のような動作をさせるように制御する。

撮像部１１０，１１２は、夫々の光学系を介して取り込まれた被写体の光学像を撮像素子により画像信号に変換し、アナログデジタル変換し、画像処理部１１１に送信する。画像処理部１１１は、入力されたデジタルの画像信号の画質（ホワイトバランスや色、明るさなど）を設定値に基づいて調整する。そして、画像処理部１１１で画質調整された画像信号は、制御部１０１により表示制御部１３１やメモリ１０４に送信される。表示制御部１３１は、受信した画像信号に関する映像をＬＣＤ１３０に表示させる。これにより、ユーザは撮影した動画を確認することができる。

一方、音声入力部１２０は、マイクにより得られたアナログの音声信号をデジタル変換し、得られたデジタルの音声信号を音声処理部１２１に送信する。音声処理部１２１は、入力されたデジタル音声信号のレベルの適正化等の処理をして音声信号を制御部１０１に出力する。制御部１０１は、音声処理部１２１により処理がされた音声信号をメモリ１０４に送信する。

そして、画像処理部１１１及び音声処理部１２１は、メモリ１０４に一時的に記憶された画像信号や音声信号を読み出して所定の符号化を行い、圧縮画像信号、圧縮音声信号等を生成する。そして、制御部１０１は、これらの圧縮画像信号、圧縮音声信号を合成し、データストリーム（動画データ）を形成し、記録再生部１４０に出力する。記録再生部１４０は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、データストリームを一つの動画ファイルとして記録媒体１４１に書き込んでいく。また、音声を圧縮しない場合には、制御部１０１は、音声処理部１２１で生成した音声信号を画像処理部１１１で生成された圧縮画像信号とともに、記録再生部１４０に出力する。そして、記録再生部１４０は、前述したように、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、データストリームを一つの動画ファイルとして記録媒体１４１に書き込んでいく。

以上の動作を後述の撮影終了の指示信号が制御部１０１に送信されるまで継続する。

また、撮影の間、ユーザによる操作部１０２の操作に応じて、または画像処理部１１１により生成された画像信号の解析結果に応じて、制御部１０１は、撮像部１１０，１１２や画像処理部１１１、音声処理部１２１などに各種制御信号を送信している。例えば、レンズの移動や絞り調整などをさせるための制御信号を撮像部１１０，１１２に送信するとともに、画像や音声を調整するための制御信号を画像処理部１１１、音声処理部１２１に送信する。

また、同様に撮影の間、ユーザにより操作部１０２のズーム調整ボタンを操作することで、制御部１０１により、撮像部１１０，１１２の「光学ズーム」機能や、画像処理部１１１の「電子ズーム」機能を動作させることができる。また、不図示の振動検出部により検出された加速度信号に基づいて、制御部１０１により、撮像部１１０，１１２の「光学防振」機能や、画像処理部１１１の「電子防振」機能が動作している。

そして、ユーザが操作部１０２の動画記録終了ボタンを操作することにより撮影終了の指示信号が制御部１０１に送信されると、制御部１０１は、撮影終了の制御信号を撮像装置１００の各ブロックに送信し、以下のような動作をさせるように制御する。

画像処理部１１１、音声処理部１２１は、それぞれ画像信号、音声信号のメモリ１０４への送信を停止する。そして、メモリ１０４に記憶されている残りの画像信号と音声信号とを読み出して所定の符号化を行い、圧縮画像信号、圧縮音声信号等を生成する。

制御部１０１は、これらの最後の圧縮画像信号、圧縮音声信号を合成し、データストリームを形成し、記録再生部１４０に出力する。音声を圧縮しない場合には、制御部１０１は、音声処理部１２１により生成された音声信号と、圧縮画像信号とを記録再生部１４０に出力する。

記録再生部１４０は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、データストリームを一つの動画ファイルとして記録媒体１４１に書き込んでいく。そして、データストリームの供給が停止したら、制御部１０１はサムネイルを生成するために以下のような動作をさせるように制御する。

記録再生部１４０は記録媒体１４１に記録した動画ファイルの先頭フレームの圧縮画像信号を読み出し、画像処理部１１１に送信する。画像処理部１１１は、圧縮画像信号を一時的にメモリ１０４に記憶させ、所定の手順で復号する。次に画像処理部１１１は得られた画像信号に対してサムネイル用の所定の符号化を行い、サムネイル用圧縮画像信号を生成する。そして、制御部１０１はサムネイル用圧縮画像信号を記録再生部１４０に出力する。記録再生部１４０は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、サムネイル用圧縮画像を、基となる動画ファイルに結合させるように記録媒体１４１に書き込み、動画ファイルを完成させるとともに記録動作を停止する。

制御部１０１は、記録動作が停止すると、撮影待機状態に移行させるように制御信号を撮像装置１００の各ブロックに送信して、撮影待機状態に戻る。

ユーザによる操作部１０２の操作に応じて、著作権者名および作成者名を不揮発性メモリ１０５に記憶させることが可能である。また、操作部１０２が操作されるたびに、不揮発性メモリ１０５に記憶された著作権者名および作成者名を変更することが可能である。不揮発性メモリ１０５に記憶された著作権者名および作成者名は、撮影処理に応じて静止画ファイルまたは動画ファイルにメタデータとして記録される。

次に、再生モードの詳細について説明する。操作部１０２のモード切替スイッチに対するユーザ操作により再生モードが設定されると、制御部１０１は、撮像装置１００の各ブロックを再生状態に設定させる。

再生状態でユーザが操作部１０２のタッチパネルを操作することにより記録媒体１４１にあるファイルから再生対象のファイルを選択すると、制御部１０１はその再生対象のファイルの読出命令を記録再生部１４０に送信する。記録再生部１４０は、制御部１０１からの読出命令に応じて、記録媒体１４１に記録されたその再生対象のファイルである、圧縮画像信号からなる静止画ファイル、または圧縮画像信号と圧縮音声信号または音声信号とからなる動画ファイルを読み出す。制御部１０１は読み出された圧縮画像信号、圧縮音声信号を、画像処理部１１１及び音声処理部１２１に送る。尚、再生対象のファイルには圧縮されていない音声信号が含まれている場合は、制御部１０１は、音声出力部１５１にその音声信号を送信する。

画像処理部１１１及び音声処理部１２１は、圧縮画像信号、圧縮音声を一時的にメモリ１０４に記憶させ、所定の手順で復号する。そして制御部１０１は、復号化した音声信号を音声出力部１５１へ、復号化した画像信号を表示制御部１３１へ送信する。表示制御部１３１は、入力された画像信号にかかる映像をＬＣＤ１３０に表示させ、音声出力部１５１は、入力された音声信号にかかる音声を内蔵されたスピーカや、接続されたイヤホンやスピーカから出力する。

本実施例の撮像装置１００は以上のように、静止画、動画の記録再生を行う。

操作部１０２のモード切替スイッチに対するユーザ操作によりプラスムービーオートモードが設定されると、制御部１０１は図２の撮影記録処理を開始する。本実施例においては、この撮影記録処理が実行されている間、撮像部１１０の光学系を通った光が光学ファインダ１３２に表示される。尚、動画データが撮像部１１２からの画像に基づき生成されるのであれば、光学ファインダ１３２に表示されなくてもよい。例えば、この撮影記録処理が実行されている間、ライブビュー表示がされていてもよい。

図２は、本実施例に係る、光学ファインダ１３２使用時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。本処理は、制御部１０１は不揮発性メモリ１０５よりプログラムを読み出し、そのプログラムに基づき撮像装置１００の各ブロックを制御することによって実行される。

ステップＳ２０１では、前述した動画撮影モードに移行し、ユーザによる操作部１０２の動画記録開始ボタンの操作を待つことなく、撮像部１１２で被写体像を撮影すると共に、音声入力部１２０で音声を集音する。撮影された被写体像の画像信号及び集音された音声は、順次画像処理部１１１及び音声処理部１２１で符号化し、動画データとしてメモリ１０４に一時記憶し、ステップＳ２０２へ進む。

ステップＳ２０２では、メモリ１０４に保存された動画データの秒数が、所定秒数以上かどうかの判定を行い、所定秒数以上と判定した場合はステップＳ２０３へ進み、所定秒数未満と判定した場合はステップＳ２０４へ進む。ここで、所定秒数とはメモリ１０４に一時記憶可能な動画の秒数の上限以下の範囲で予め設定される。

ステップＳ２０３では、メモリ１０４に保存された動画データの中で最も古い動画データ（最古動画データ）の破棄を行い、ステップＳ２０４へ進む。破棄する動画データの単位は、秒単位でもよいし、動画の圧縮形式によってはＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｔｒｅｓ）単位であってもよい。

ステップＳ２０４では、動画記録用のカメラである撮像部１１２の焦点距離ｆｍを取得し、ステップＳ２０５へ進む。

ステップＳ２０５では、静止画記録用のカメラである撮像部１１０の焦点距離ｆｉを取得し、ステップＳ２０６へ進む。

ステップＳ２０６では、撮像部１１０に装着された交換レンズのズーム倍率が変更されたか否かの判定を行う。ズーム倍率が変更されたと判定した場合はステップＳ２０７へ進み、ズーム倍率が変更されていないと判定した場合はステップＳ２０８へ進む。ステップＳ２０７では、撮像部１１０の焦点距離ｆｉを取得更新し、ステップＳ２０８へ進む。

ステップＳ２０８では、操作部１０２の静止画記録ボタンが押されたか否かの判定を行う。静止画記録ボタンが押されたと判定した場合は、静止画撮影が待機中の状態を抜けたと判断してステップＳ２０９へ進む。一方、静止画記録ボタンが押されていないと判定した場合は、まだ静止画撮影が待機中であると判断してステップＳ２０１へ戻る。

ステップＳ２０９では、動画記録用のカメラである撮像部１１２の焦点距離ｆｍと静止画記録用のカメラである撮像部１１０の焦点距離ｆｉの差の絶対値が所定値ＴＨ１未満か否かの判定を行う。所定値ＴＨ１未満と判定した場合はステップＳ２１０へ進み、所定値ＴＨ１以上と判定した場合はステップＳ２１３へ進む。本実施形態では、焦点距離ｆｍ，ｆｉの差の絶対値と所定値ＴＨ１とを比較したが、これに限らず、焦点距離ｆｍ，ｆｉの差が所定以上であるか否か判定できれば他の方法で判定してもよい。尚、所定値ＴＨ１未満と判定した場合は、ユーザに対して動画ファイルの追記は行われない旨を警告するようにしてもよい。尚、この警告方法は特に限定されないが、例えば、ＬＣＤ１３０又は光学ファインダ１３２等においてその旨を表示するようにしてもよい。

ステップＳ２１０では、記録媒体１４１に保存されている各動画ファイルに対し、追記対象の動画データが追記可能か否かの判定を行う。ここで、追記対象の動画データとは、メモリ１０４に現在一時保存されている動画データのうち、ステップＳ２０８で静止画記録開始ボタンが押される直前の所定数秒の間で撮影された動画データを指す。

具体的には、以下の条件（１）〜（１１）のいずれかに当てはまる動画ファイルに対しては追記不可と判定する。
（１）保護属性である場合。
（２）追記後の動画ファイルサイズが記録媒体１４１のファイルシステムの上限のデータサイズを越える場合。
（３）ＧＯＰ単位でない場合。
（４）プラスムービーオートモードで撮影された動画ファイルでない場合。
（５）撮影日がデジタル一眼レフカメラに設定された日と異なる場合。
（６地域設定がデジタル一眼レフカメラに設定された地域と異なる場合。
（７）動画ファイルを撮影したデジタル一眼レフカメラの機種と追記を行うデジタル一眼レフカメラの機種が異なる場合。
（８）フレームレート、画素数、圧縮方法、音声のサンプリングレートやチャンネル数、ビット深度のいずれかがメモリ１０４に保存された動画データと異なる場合。
（９）著作権者名または作成者名が不揮発性メモリ１０５に記憶されたものと異なる場合。
（１０）通信部１５２で受信したデジタル一眼レフカメラの撮影位置と、動画ファイルに記録されている撮影位置とが、ある閾値以上の距離離れている場合。
（１１）拡張子またはファイルフォーマット（コンテナ）が、デジタル一眼レフカメラが記録する動画と異なる場合。また、記録媒体１４１もしくは動画ファイルが壊れているなどの原因により、動画ファイルを正常にチェックすることができなかった場合。

ステップＳ２１０で追記可能と判定した場合はステップＳ２１１へ進み、追記不可と判定した場合はステップＳ２１２へ進む。

ステップＳ２１１では、記録媒体１４１に保存されている動画ファイルに対して追記対象の動画データを追記する追記処理を実行し、ステップＳ２１３へ進む。また、ステップＳ２１２では、追記対象の動画データを、新たに単独の動画ファイルとして記録媒体１４１に新規保存し、ステップＳ２１３へ進む。

ステップＳ２１３では、前述した静止画撮影を実行し、ユーザが操作部１０２の静止画記録ボタンを操作したタイミングで静止画を撮影して、撮影した静止画を静止画ファイルとして記録媒体１４１に記録した後、ステップＳ２１４へ進む。なお、この静止画撮影において取得した静止画は、ステップＳ２１６で使用する場合があるため、メモリ１０４に一時保持される。

ステップＳ２１４では、静止画挿入設定がＯＮかＯＦＦかの判定を行う。静止画挿入設定がＯＮの場合はステップＳ２１５へ進み、静止画挿入設定がＯＦＦの場合は本処理を終了する。

ステップＳ２１５では、ステップＳ２０９と同様に、焦点距離ｆｍ，ｆｉの差の絶対値が所定値ＴＨ２未満か否かを判定し、所定値ＴＨ２未満と判定した場合は、ステップＳ２１６へ進み、所定値ＴＨ２以上と判定した場合は本処理を終了する。本実施形態では、焦点距離ｆｍ，ｆｉの差の絶対値と所定値ＴＨ２とを比較したが、これに限らず、焦点距離ｆｍ，ｆｉの差が所定以上であるか否か判定できれば他の方法で判定してもよい。尚、所定値ＴＨ２未満と判定した場合は、ユーザに対して動画ファイルに静止画は挿入されない旨の警告を警告するようにしてもよい。尚、この警告方法は特に限定されないが、例えば、ＬＣＤ１３０又は光学ファインダ１３２等においてその旨を表示するようにしてもよい。

なお、焦点距離ｆｍ，ｆｉの差が所定値ＴＨ１未満の場合は、動画ファイルが記録されないため、所定値ＴＨ２については、ＴＨ２≦ＴＨ１とする。

ステップＳ２１６では、ステップＳ２１３で撮影された静止画からストップモーション画像を生成し、ステップＳ２１７へ進む。ここで、静止画と動画のアスペクトが異なる場合は、静止画がすべて表示されるようにリサイズ処理をおこない、静止画の表示領域以外は黒塗りする。例えば、静止画のアスペクトが４：３で動画のアスペクトが１６：９の場合、左右の領域を黒塗りしたストップモーション画像を生成する。

ステップＳ２１７では、静止画挿入用の動画データを生成する。具体的には、まず、ステップＳ２１６で生成されたストップモーション画像及び不揮発性メモリ１０５に予め記憶してあるシャッター音データ又は無音データを画像処理部１１１及び音声処理部１２１で所定単位の動画データとして符号化し圧縮する。その後、その動画データを静止画挿入用の動画データとしてメモリ１０４に一時記憶する。尚、上記所定単位は、秒単位でもよいし、動画の圧縮形式によってはＧＯＰ単位であってもよい。

ステップＳ２１８では、ステップＳ２１７で生成された静止画挿入用の動画データをステップＳ２１１またはステップＳ２１２で作成した動画ファイルに挿入し、本処理を終了する。

以上のように、動画記録用のカメラである撮像部１１２の焦点距離と静止画記録用のカメラである撮像部１１０の焦点距離が大きく相違する場合はプラスムービーオートモードにおいて追記処理や静止画挿入処理を行わない。これにより、プラスムービーオートモードにおいて関連性のない画像データを持つ動画と静止画が同時に記録されることを防ぐことができる。言い換えると、プラスムービーオートモードにおいて画角の近い、すなわち関連性がある違和感のない動画と静止画を同時に記録することが可能となる。

尚、本実施例では、プラスムービーオートモードでの静止画撮影の待機中に撮像部１１０，１１２の夫々の焦点距離ｆｍ，ｆｉに基づいて、各撮像部の画角の違いを判定した。だが、プラスムービーオートモードにおいて画角の近い動画と静止画を同時に記録できる撮影設定であれば、予め取得される撮像部１１０，１１２の撮影設定はこれに限定されない。例えば、撮像部１１０，１１２の夫々に対し、ワイド、通常、テレのいずれかの画角をユーザが設定できる場合、その画角設定を静止画撮影の待機中に撮像部１１０，１１２の夫々の撮影設定として取得するようにしてもよい。また、焦点距離ではなく、ズーム率設定により、各撮像部１１０，１１２の画角の違いを判定するようにしてもよい。また、撮影画像被写に含まれる被写体の大きさなどから、画角が大きく異なるかを判定するようにしてもよい。

［実施例２］
本実施例は、プラスムービーオートモードにおいて、静止画用カメラの焦点距離に合わせて動画用カメラの焦点距離が調節される点において、実施例１と異なる。従って、本実施例のハードウェア構成は、実施例１と同様であるので同一の構成には同一の符号を付し、重複した説明は省略する。

図３は、本実施例に係る、動画用カメラズーム時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。本処理は、制御部１０１は不揮発性メモリ１０５よりプログラムを読み出し、そのプログラムに基づき撮像装置１００の各ブロックを制御することによって実行される。

ステップＳ３０１〜Ｓ３０７は、ステップＳ２０１〜Ｓ２０７と同様なので説明を省略する。

ステップＳ３０８では、動画記録用のカメラである撮像部１１２の焦点距離ｆｍと、静止画記録用のカメラである撮像部１１０の焦点距離ｆｉが同じか異なるかの判定を行う。同じと判定した場合はステップＳ３１２へ進み、異なると判定した場合はステップＳ３０９へ進む。

ステップＳ３０９では、制御部１０１（ズーム制御手段）は、動画記録用のカメラである撮像部１１２が静止画記録用のカメラである撮像部１１０の焦点距離ｆｉまで、光学ズームまたは電子ズームでズーム可能か否かの判定を行う。ズーム可能と判定した場合はステップＳ３１０へ進む、ズーム不可能と判定した場合は、ステップＳ３１２へ進む。

ステップＳ３１０では、動画記録用のカメラである撮像部１１２を静止画記録用のカメラである撮像部１１０の焦点距離ｆｉまで、光学ズームまたは電子ズームでズームさせて、ステップＳ３１１へ進む。尚、ステップＳ３０９でズーム不可能と判定された場合も、ステップＳ３１０に進み、可能な範囲で焦点距離ｆｍが焦点距離ｆｉに合う方向にズームさせるようにしてもよい。

ステップＳ３１１では、動画記録用のカメラである撮像部１１２の焦点距離ｆｍを更新し、ステップＳ３１２へ進む。

ステップＳ３１２〜Ｓ３２２は、ステップＳ２０８〜Ｓ２１８と同様なので説明を省略する。

以上のように、プラスムービーオートモードにおいて静止画記録用のカメラである撮像部１１０の焦点距離に合わせて動画記録用のカメラである撮像部１１２の焦点距離を調節する。これにより、静止画記録用のカメラである撮像部１１０を任意の画角にズームさせても関連性のある違和感のない動画と静止画を同時に記録することが可能となる。

［実施例３］
本実施例は、プラスムービーオートモードで撮影記録処理が実行されている間、撮像部１１０で取り込んだスルー画像が、液晶ディスプレイであるＬＣＤ１３０にライブビューとして表示される点において、実施例１と異なる。従って、本実施例のハードウェア構成は、実施例１と同様であるので同一の構成には同一の符号を付し、重複した説明は省略する。

図４は、本実施例に係る、ライブビュー使用時のプラスムービーオートモードにおける撮影記録処理のフローチャートである。本処理は、制御部１０１は不揮発性メモリ１０５よりプログラムを読み出し、そのプログラムに基づき撮像装置１００の各ブロックを制御することによって実行される。

ステップＳ４０１では、静止画記録用のカメラである撮像部１１０で撮影された静止画をスルー画像として取得すると共に、音声入力部１２０で音声を集音する。このスルー画像及び音声を画像処理部１１１および音声処理部１２１で順次動画として符号化すると、この動画を動画データとしてメモリ１０４に一時記憶しステップＳ４０２へ進む。尚、上記スルー画像はＬＣＤ１３０にライブビューとして表示される。

ステップＳ４０２，Ｓ４０３はステップＳ２０２，Ｓ２０３と同様なので説明を省略する。

ステップＳ４０４は、ステップＳ２０８と同様なので説明を省略する。

ステップＳ４０５〜Ｓ４０９は、ステップＳ２１０〜Ｓ２１４と同様なので説明を省略する。

ステップＳ４１０〜Ｓ４１２は、ステップＳ２１６〜Ｓ２１８と同様なので説明を省略する。

以上、プラスムービーオートモードにおいて撮像部１１０を用いてライブビューを表示する場合は、静止画撮影の待機中に撮像部１１０で取り込んだスルー画像から生成した動画データを撮像部１１２からの画像から生成した動画データの代わりに用いる。これにより、プラスムービーオートモードにおいて、同一のカメラにより撮影された同一の画角の静止画及び動画を同時に記録することが可能となる。

［実施例４］
実施例１，２では、プラスムービーオートモードにおいて、静止画記録用のカメラである撮像部１１０と動画記録用のカメラである撮像部１１２の夫々の焦点距離ｆｉ，ｆｍに応じて静止画挿入処理を実行するか否かを判定していたが、これに限定されない。例えば、画像処理部１１１が撮像部１１０，１１２の夫々で撮影された被写体を検出する検出手段を備える場合、この検出手段で検出された撮像部１１０，１１２の夫々で撮影された被写体が同一である場合、静止画挿入処理を実行すると判定してもよい。

［その他の実施例］
本発明の目的は、前述した実施例の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、装置に供給することによっても、達成されることは言うまでもない。このとき、供給された装置の制御部を含むコンピュータ（またはＣＰＵやＭＰＵ）は、記憶媒体に格納されたプログラムコードを読み出し実行する。

この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施例の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。

プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。

また、上述のプログラムコードの指示に基づき、装置上で稼動しているＯＳ（基本システムやオペレーティングシステム）などが処理の一部又は全部を行い、その処理によって前述した実施例の機能が実現される場合も含まれることは言うまでもない。

さらに、記憶媒体から読み出されたプログラムコードが、装置に挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれ、前述した実施例の機能が実現される場合も含まれることは言うまでもない。このとき、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部又は全部を行う。

１００ 撮像装置
１０２ 操作部
１０４ メモリ
１０５ 不揮発性メモリ
１１０，１１２ 撮像部
１１１ 画像処理部
１３１，１３３ 表示制御部
１４０ 記録再生部
１４１ 記録媒体

Claims (14)

1. 静止画撮影を行うための第１の撮像部、及び動画撮影を行うための第２の撮像部を有する撮像装置において、
   前記第１及び第２の撮像部の撮影設定を取得する取得手段と、
   前記第１の撮像部により静止画が撮影された場合に、前記取得された前記第１及び第２の撮像部の撮影設定に応じて、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画の記録媒体への記録を制御する制御手段とを備えることを特徴とする撮像装置。
2. 前記制御手段は、静止画の撮影が指示されたことに応じて、前記第１の撮像部により撮影された静止画を前記記録媒体に記録するように制御すると共に、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画の前記記録媒体への記録を制御することを特徴とする請求項１記載の撮像装置。
3. 前記制御手段は、前記取得された前記第１及び第２の撮像部の撮影設定に応じて、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画を記録するか否かを制御することを特徴とする請求項１または２に記載の撮像装置。
4. 前記制御手段は、前記取得された前記第１及び第２の撮像部の撮影設定に応じて、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画に、前記静止画撮影により得られた静止画を挿入して記録するか否かを制御することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. 前記取得手段は、前記第１及び第２の撮像部の夫々が有する光学系の焦点距離を前記第１及び第２の撮像部の撮影設定として取得することを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
6. 前記制御手段は、前記取得された前記第１及び第２の撮像部の夫々が有する光学系の焦点距離の差が所定以上である場合、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画を記録しないように制御することを特徴とする請求項３記載の撮像装置。
7. 前記制御手段は、前記取得された前記第１及び第２の撮像部の夫々が有する光学系の焦点距離の差が所定以上である場合、前記第１の撮像部により撮影された静止画を挿入することなく前記静止画撮影の待機中に前記第２の撮像部により撮影された動画を記録するように制御することを特徴とする請求項４の記載の撮像装置。
8. 前記取得された前記第１及び第２の撮像部の夫々が有する光学系の焦点距離の差が所定以上である場合、前記第１の撮像部により撮影された静止画は、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画に挿入されない旨を警告する警告手段を更に備える請求項７記載の撮像装置。
9. 前記第２の撮像部が有する光学系をズームするズーム手段と、
   前記取得された前記第１及び第２の撮像部の夫々が有する光学系の焦点距離が異なる場合、前記第２の撮像部が有する光学系の焦点距離が前記第１の撮像部が有する光学系の焦点距離に合う方向に前記第２の撮像部が有する光学系をズームさせるよう前記ズーム手段を制御するズーム制御手段とを更に備えることを特徴とする請求項１乃至８のいずれか１項に記載の撮像装置。
10. 前記第１及び第２の撮像部の夫々で撮影された被写体を検出する検出手段を更に備え、
    前記制御手段は、前記検出された前記第１及び第２の撮像部の夫々で撮影された被写体が同じである場合、前記第１の撮像部により撮影された静止画を前記静止画撮影の待機中に前記第２の撮像部により撮影された動画に挿入して記録するように制御することを特徴とする請求項４記載の撮像装置。
11. 前記取得された前記第１及び第２の撮像部の夫々が有する光学系の撮影設定に応じて、ユーザより前記第１の撮像部による静止画の撮影指示がある毎に、その直前に前記第２の撮像部により撮影され符号化された動画データを、前記第１の動画ファイルに追記することを特徴とする請求項１乃至１０のいずれか１項に記載の撮像装置。
12. 前記第１の撮像部で取り込んだスルー画像をライブビューとして表示する表示手段を更に備え、
    前記制御手段は、前記静止画撮影の待機中に前記ライブビューが表示されている場合、前記静止画撮影の待機中に前記第１の撮像部で取り込んだスルー画像から動画を生成し、当該動画を前記静止画撮影の待機中に前記第２の撮像部により撮影された動画の代わりに用いることを特徴とする請求項１乃至１１のいずれか１項に記載の撮像装置。
13. 静止画撮影を行うための第１の撮像部、及び動画撮影を行うための第２の撮像部を有する撮像装置の制御方法において、
    前記第１及び第２の撮像部の撮影設定を取得する取得ステップと、
    前記第１の撮像部により静止画が撮影された場合、前記取得された前記第１及び第２の撮像部の撮影設定に応じて、前記静止画撮影の待機中に前記第２の撮像部により撮影された動画の記録媒体への記録を制御する制御ステップとを有することを特徴とする制御方法。
14. 請求項１３の制御方法を実行することを特徴とするプログラム。
    
    

Images