JP2004282463A

JP2004282463A - 撮像装置

Info

Publication number: JP2004282463A
Application number: JP2003071897A
Authority: JP
Inventors: Keita Inakura; 啓太稲倉
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2003-03-17
Filing date: 2003-03-17
Publication date: 2004-10-07
Anticipated expiration: 2023-03-17
Also published as: JP4208613B2

Abstract

【課題】大規模なシステムを用意することなく被写体の画像と撮影者の画像とを共に記録可能とする。
【解決手段】本発明によれば、被写体像の撮影用の第１の撮像部と、撮影者の撮影用の第２の撮像部とを備え、第１の撮像部により得られた被写体画像データと第２の撮像部により得られた撮影者画像データとを、それぞれ独立したファイル形式で記録媒体に記録すると共に、被写体画像データと撮影者画像データとを、再生時に合成するための合成手順を示す再生プログラムを生成する構成とした。
【選択図】図４

Description

【０００１】
【発明の属する技術分野】
本発明は撮像装置に関し、特に複数の撮像系にて画像を撮影する装置に関する。
【０００２】
【従来の技術】
従来、画像信号を撮影して記録媒体に記録するビデオカメラが知られている。
【０００３】
この種のビデオカメラでは、一般に一つの撮像系しか持たないので、被写体画像を撮影している場合には撮影者の映像は記録することができない。そのため、撮像者の表情や振る舞いを後で確認する方法が無い。
【０００４】
そこで、特開平６−１６５０２９号公報には、被写体を撮影するためのビデオカメラとは別に、撮影者の映像を撮影するためのカメラを用意しておき、これら二つのビデオカメラからの画像を合成して記録するシステムが開示されている。
【０００５】
【特許文献】
特開平６−１６５０２９号公報
【０００６】
【発明が解決しようとする課題】
しかし、前記公報に記載のシステムでは、撮影者の画像を得るために、別途ビデオカメラを用意しなければならない。
【０００７】
また、被写体の画像と撮影者の画像とを合成した上で記録しているため、再生時に、被写体の画像のみ、あるいは、撮影者の画像のみを取り出して確認することができない。
【０００８】
本発明はこの様な問題を解決し、大規模なシステムを用意することなく被写体の画像と撮影者の画像とを共に記録可能とすることを目的とする。
【０００９】
本発明の他の目的は、撮影された被写体の画像と撮影者の画像とを最適なタイミングで合成、表示可能とする処にある。
【００１０】
【課題を解決するための手段】
本発明においては、第１の撮像手段と、第２の撮像手段と、前記第１の撮像手段により得られた第１の動画像データと前記第２の撮像手段により得られた第２の動画像データとを、それぞれ独立したファイル形式で記録媒体に記録する記録手段と、前記第１の動画像データと第２の動画像データとを、再生時に合成するための合成手順を示す再生プログラムを生成する再生プログラム生成手段とを備える構成とした。
【００１１】
【発明の実施の形態】
本発明の実施形態について説明する。
【００１２】
図１は本発明を適用したビデオカメラ１００の機能構成を示すブロック図であり、図２は図１のビデオカメラ１００の外観図である。図２（ａ）はビデオカメラ１００を保持するためのグリップ側から見た斜視図であり、図２（ｂ）はビデオカメラ１００の側面に取り付けられたＬＣＤユニット側から見た斜視図である。
【００１３】
図２において、２０１はビデオカメラ本体、２０２はズームスイッチであり、このスイッチを操作することで撮影画像の倍率を変更する。２０３は被写体を撮影するためのレンズユニットである。２０４はリストストラップであり、ベルトにより記録再生装置を保持する手の甲を押さえるように設計されている。
【００１４】
また、２０５はビューファインダであり、中に小型ＬＣＤと拡大用レンズを内蔵しており、撮影者が目を近づけることによって撮影画面を確認することができる。２０７は撮影モードを切り換える操作スイッチを構成するモードダイアルであり、図２において右方向の突出した柄の部分を回転させることにより各種の撮影モード、及び再生モードへ切り換えることができる。
【００１５】
２０６はポジションロックツマミ、２０８は録画の開始、停止を指示するためのスタート／ストップボタン、２０９はモードダイアルのロックを解除するアンロックツマミ（アンロック部材）、２１０はモードダイヤルベース、２１１は映像を大きな画面で確認するためのＬＣＤユニットである。また、２１２はユーザの操作を快適にする十字ボタンであり、２１３は意思決定のためのＯＫボタンである。また２１４は後述の様に撮像者を撮影するための小型レンズユニットである。
【００１６】
また、図１において、撮像部１０１はレンズユニットやＣＣＤ等の撮像デバイスを含み、撮影した被写体の画像信号生成する。撮像部１０１は図２のレンズユニット２０３を初めとする撮像機構を有し、被写体撮影に使用する。撮像部１０１は更に、生成した画像信号をデジタル信号に変換すると共にこのデジタル画像信号から輝度信号及び色差信号を抽出して、ガンマ補正、エッジ強調などのカメラ信号処理を施した画像データを生成する。
【００１７】
撮像部１０１で生成された画像データは合成部１１１へ送信される。合成部１１１はこの撮像部１０１からの画像データのサイズを表示部１１２に表示するのに最適な画面サイズに変更する。そして、このサイズ変更した画像データを表示部１１２に出力する。これにより、撮像部１０１にて撮影中の画像を表示部１１２にて確認することができる。
【００１８】
また、撮像部１０１で生成された画像データは符号化処理部１０３にも送信される。符号化処理部１０３は、撮像部１０１から出力された画像データを離散コサイン変換（ＤＣＴ）を用いた可変長符号化などにより符号化してその情報量を圧縮し、記録用データとして記録処理部１０４に出力する。
【００１９】
また、撮像部１０２は撮像部１０１と同様にレンズユニットやＣＣＤ等の撮像デバイスを含む。そして、本形態においては、図２のレンズユニット２１４を初めとする撮像機構を有し、主に撮影者の画像を撮影するために使用する。機能は撮像部１０１とほぼ同等であるが、画角を広角に設定し、光学的なズーム機能を省略してある。本形態では、この様に、撮像部１０１と撮像部１０２は互いに異なる画角を持つ。
【００２０】
また、撮像部１０２は主に撮影者の画像を撮影するために用いられるが、後述の様に、本形態では、撮影者の画像は再生時には小画面として表示するため、通常の被写体を撮影するための撮像部１０１よりも少ない画素数（解像度）とした。
【００２１】
撮像部１０２で生成された画像データは合成部１１１に送信される。合成部１１１は、この撮像部１０２からの画像データのサイズを、図３の子画面３０１に相当するサイズに変換し、撮像部１０１からの画像データと合成して表示部１１２に出力する。
【００２２】
また、撮像部１０２からの画像データは動き判定部１１５にも送られる。動き判定部１１５は、撮像部１０２から送信された画像データ中の動きの有無を判定し、動きありの場合論理Ｈとなり、動きなしの場合論理Ｌとなる２値信号を判定結果として制御部１０７に出力する。
【００２３】
また、撮像部１０２からの画像データは符号化処理部１０３に出力され、符号化処理部１０３は撮像部１０１からの画像データと同様に撮像部１０２からの画像データを符号化し、記録処理部１０４に出力する。
【００２４】
記録処理部１０４は符号化処理部１０３から出力された、撮像部１０１からの画像データ（以下第１の画像データ）と撮像部１０２からの画像データ（以下第２の画像データ）とをそれぞれ独立したファイルにて記録するよう、ファイルヘッダやフッタ、同期データなどを付加し、更にエラー訂正符号化などの処理を施して記録に適した形態に変換して記録再生部１０８に出力する。記録再生部１０８はこれら第１の画像データと第２の画像データとをディスクＤに記録する。
【００２５】
また、音声入力部１０５は、不図示のマイクから入力された音声信号のうち、撮影者記録用の撮像部１０２の方向からの音声信号を検出して音声検出部１０６に出力する。音声検出部１０６は音声入力部１０５から出力された音声信号の音量レベルを検出し、検出した音声レベルを所定の閾値と比較する。そして、閾値よりも大きかった場合論理Ｈとなり、小さかった場合論理Ｌとなる２値信号を比較結果として制御部１０７に出力する。
【００２６】
制御部１０７は、音声検出部１０６からの比較結果の信号に基づいて、撮影者の発言の有無を判断する。そして、制御部１０７は音声検出部１０６で音声レベルの比較結果の変化を検出すると動き判定部１１５からの動き判定の結果を確認し、撮影者の画像に（口を動かしたなどの）変化があった場合、再生時において第２の画像データを子画面表示するための再生手順を記述した再生プログラムを作成する。そして、この作成した再生プログラムデータを記録処理部１０４に出力し、記録処理部１０４はこの再生プログラムデータを一つのファイルとして記録するよう、記録再生部１０８に出力する。記録再生部１０８はこの再生プログラムのファイルを所定のタイミングでディスクＤに記録する。
【００２７】
また、記録再生部１０８は、ディスクＤから前述の第１の画像データ、第２の画像データ及び再生プログラムの各ファイルを再生し、エラー訂正処理などを施し、第１の画像データと第２の画像データを復号処理部１１０に出力すると共に、再生プログラムデータを制御部１０７に出力する。復号処理部１１０は再生された第１の画像データ、第２の画像データを復号し、合成部１１１に出力する。
【００２８】
合成部１１１は制御部１０７からの指示に従い、再生された第１、第２の画像データを処理して表示部１１２及び出力部１１３２出力する。出力部１１３は合成部１１２から出力された画像データを外部のモニタなどに出力する。
【００２９】
制御部１０７は、再生時において、再生処理部１０９から出力された再生プログラムに従い、後述の様に記録再生部１０８による再生動作と合成部１１１による画像データの処理を制御する。
【００３０】
また、１１４は操作部であり、図２のモードダイアル２０７、スタート／ストップボタン２０８、十字ボタン２１２などを含む。
【００３１】
図４は本形態のビデオカメラ１００がディスクＤにデータを記録する際のディレクトリの構成例を示す図である。
【００３２】
本形態では、前述の様に動画データと再生プログラムデータとを扱っている。また、この他に、静止画データや音声データを扱っても良い。このためディレクトリ構造は、ＲＯＯＴから「ＭＯＶＩＥ」（動画データ用ディレクトリ）、「ＳＴＩＬＬ」（静止画データ用ディレクトリ）、「ＳＯＵＮＤ」（音声データ用ディレクトリ）、「ＰＰＤＩＲ」（再生プログラム用ディレクトリ）を配した。このディレクトリ構造は一例であり、例えばＰＰＤＩＲに相当するものを再生機本体内のメモリに持つことや、別のリムーバブル記録メディアに持つことも可能である。
【００３３】
本形態では被写体を撮影した動画データと撮影者を撮影した動画データの記録再生動作について説明するため、ディレクトリ「ＭＯＶＩＥ」とディレクトリ「ＰＰＤＩＲ」の内容の一例を示している。
【００３４】
ディレクトリ「ＭＯＶＩＥ」の下には図示するように、「ＭＡＩＮ００００」「ＭＡＩＮ０１００」「ＭＡＩＮ０２００」「ＭＡＩＮ０３００」「ＳＵＢ＿００００」「ＳＵＢ＿０１００」「ＳＵＢ＿０２００」「ＳＵＢ＿０３００」等の動画データファイルが形成される。「ＭＡＩＮ」で始まる動画データは被写体を撮影した画像データを示し、「ＳＵＢ＿」で始まる動画データは撮影者を撮影した動画データを表している。また、ディレクトリ「ＰＰＤＩＲ」の下には「ＰＲＯＧ０」、「ＰＲＯＧ１」、「ＰＲＯＧ２」、「ＰＲＯＧ３」等が形成される。なお、これらのディレクトリやファイル名（「ＭＯＶＩＥ」や「ＭＡＩＮ００００」や「ＳＵＢ＿００００」、「ＰＰＤＩＲ」や「ＰＲＯＧ０」）、ファイルの種類は、説明上仮に設定したものである。
【００３５】
次に、図５のフローチャートを用いてビデオカメラ１００の撮影時の動作について説明する。図５は制御部１０７による撮影時の制御動作を示すフローチャートである。
【００３６】
図５において、記録スタンバイの状態で操作部１１４により記録開始の指示があると、制御部１０７は記録処理部１０４、記録再生部１０８を制御して、前述の様に撮像部１０１、１０２により得られた第１の画像データと第２の画像データとを別々のファイルとしてディスクＤに対して記録を開始する（ステップＳ５０１）。このとき、記録される第１の画像データのファイル名を「ＭＡＩＮ００００」とし、第２の画像データのファイル名を「ＳＵＢ＿００００」とする。そして、音声検出部１０６からの音声レベルの比較結果の検出を開始する（ステップＳ５０２）。
【００３７】
続いて記録停止か否か判別し（ステップＳ５０３）、記録停止でない場合、音声検出部１０６からの音声レベルの比較結果が論理Ｈとなっているか否かを判別する（ステップＳ５０４）。ここで、論理Ｈとなっているということは、撮影者の音声レベルが大きくなっており、撮影者が大きな声を出していると考えられる。
【００３８】
論理Ｈでない場合にはステップＳ５０２に戻り、論理Ｈであった場合、更に、動き判定部１１５からの出力信号が論理Ｈとなっているか否かを判別する（ステップＳ５０５）。動き判定部１１５は、撮像部１０２から出力された動画像データのフレーム間の画像データの差分を求め、この差分が所定値よりも大きい場合に動きありと判定している。従って、動き判定部１１５により動きありと判定した場合、撮影者がしゃべっていたり、手を振っているなどの動作を行っていると判断できる。
【００３９】
動き検出の結果が動きなしであった場合、ステップＳ５０２に戻り、動きありであった場合、記録開始からの経過時間を検出し、検出した時間を子画面表示開始時間として記憶する（ステップＳ５０６）。
【００４０】
その後、記録停止の指示があったか否かを判別し（ステップＳ５０７）、停止の指示がない場合、撮像部１０２からの動画像データの次のフレームのタイミングでの動きの有無を検出する（ステップＳ５０８）。ここで、まだ動きが継続していた場合、更に、音声検出部１０６による音声レベルの判定結果を検出する（ステップＳ５０９）。ここで、音声レベルがまだ閾値よりも大きい場合にはステップＳ５０７に戻る。
【００４１】
また、ステップＳ５０８で動きなしとなった場合、あるいは、ステップＳ５０９で音声レベルが閾値よりも低くなったと判定した場合、記録開始からの現在の経過時間を子画面表示停止時間として記憶し、ステップＳ５０２に戻る（ステップＳ５１０）。
【００４２】
また、ステップＳ５０３あるいはＳ５０７において記録停止の指示があった場合、更に、子画面表示開始あるいは子画面表示停止時間が記憶され、再生プログラムとして保存すべきデータがあるか否かを判別する（ステップＳ５１１）。ここで、記録開始後、撮影者の音声レベルが閾値よりも大きくなることがなく、また、撮影者の大きな動きが無かった場合には子画面表示すべき場面がなかったと判断し、再生プログラムとして記憶すべきデータがないことになる。一方、ステップＳ５０６やＳ５１０で子画面表示開始時間あるいは子画面表示停止時間を記憶している場合、これらの時間に基づいて再生プログラムデータを生成する（ステップＳ５１３）。なお、ステップＳ５０７で記録停止の指示があった場合には、撮影者の音声レベルや動きが大きい状態で記録停止となり、この場合、再生時には撮影者の画像を子画面表示したまま再生を停止することを指示する再生プログラムを生成することになる。
【００４３】
そして、第１、第２の画像データの記録を停止し（ステップＳ５１４）、再生プログラムがある場合にはこの再生プログラムをディスクＤに記録して終了する（ステップＳ５１５）。
【００４４】
なお、ステップＳ５０２からＳ５１１にかけての処理は、１フレーム毎に制御部１０７により実行される。
【００４５】
図６は図５の処理により作成された再生プログラムの様子を示す図である。Ｐａｒｅｎｔ欄に記述されている「ＭＯＶＩＥ／ＭＡＩＮ００００」（６０１）は第１の画像データであり、被写体の画像データである。この再生プログラムによれば、「ＭＯＶＩＥ／ＭＡＩＮ００００」（６０１）を再生して主画面として表示する。Ｃｈｉｌｄ欄に記述されている「ＭＯＶＩＥ／ＳＵＢ＿００００」（６０２、６０５、６０８、６１１）は第２の画像データであり、この再生プログラムでは子画面に表示される動画データである。
【００４６】
また、ＳＴＡＲＴ欄に記述されている時間（６０３、６０６、６０９、６１２）は、子画面表示を開始するタイミングである。更に、ＥＮＤ欄に記述されている時間（６０４、６０７、６１０）は子画面表示を終了するタイミングである。ただし、図６では子画面表示開始（６０３、６０６、６０９、６１２）と子画面表示終了の時間（６０４、６０７、６１０）は、記録開始からの相対時間で記述している。また、ＳＴＡＲＴ欄（６１２）に対応するＥＮＤ欄が無いのは、図５のステップＳ５０７で記録終了の指示があり、子画面表示状態のまま記録を終了したことを意味する。
【００４７】
次に、このような再生プログラムに従った再生処理について説明する。
【００４８】
図７は再生時における制御部１０７の処理を示すフローチャートである。
【００４９】
操作部１１４により再生プログラムによる再生処理の指示があると、まず、記録再生部１０８によりディスクＤに記録されている再生プログラムのファイルを再生し、再生処理部１０９を介して再生プログラムを入力する（ステップＳ７０１）。そして、この再生プログラムにて指定されている被写体画像データ（第１の画像データ）のファイル名を確認し、対応した動画像データの再生を開始するよう記録再生部１０８を制御する（ステップＳ７０２）。再生された被写体の画像データは、前述の様に処理されて、表示部１１２に表示される。
【００５０】
次に、現在再生中の画像データが終了したか否かを判別し（ステップＳ７０３）、終了でない場合には、再生プログラムにて指定された子画面表示の開始時間となったか否かを判別する（ステップＳ７０４）。本形態では、制御部１０７は、第１の画像データの再生開始と共に内部のタイマによるカウントを開始し、このカウント値と再生プログラムに指定された子画面表示の開始時間とを比較する。
【００５１】
小画面表示の開始時間になっていない場合にはステップＳ７０３に戻り、小画面表示開始時間となった場合には、再生プログラムにて指定されている撮影者の画像データ（第２の画像データ）のファイル名を確認し、対応したファイルの画像データを小画面表示開始時間の位置から再生するよう記録再生部１０８を制御する（ステップＳ７０５）。そして、合成部１１１を制御して、撮影者の画像を小画面として被写体の画像に多重して表示する。
【００５２】
次に、被写体画像の再生終了となったか否かを判別し（ステップＳ７０６）、再生終了の場合には、撮影者の画像を小画面表示したまま画像データの再生を停止する（ステップＳ７０９）。
【００５３】
また、再生終了ではない場合、小画面表示の終了時間となったか否かを判別し（ステップＳ７０７）、終了時間となった場合には、撮影者の画像データの再生を停止して、小画面表示を終了するよう記録再生部１０８と合成部１１１を制御する（ステップＳ７０８）。
【００５４】
図８はこのような被写体画像と撮影者の画像とを再生プログラムに従って再生する際の様子を示す図である。
【００５５】
図８において、８０１が被写体の画像データ（第１の画像データ）を示しており、８０２が撮影者の画像データ（第２の画像データ）を示している。
【００５６】
第２の画像データ８０２のうち、８０３、８０５、８０７、８０９はそれぞれ小画面表示開始点を示しており、８０４、８０６、８０８がそれぞれ小画面表示終了点を示している。そして、図９（ｂ）に示す様に、８０３〜８０４の間、８０５〜８０６の間、８０７〜８０８の間、および８０９から画像データの終了点８１０までの間の画像が小画面として表示され、その他の期間では図９（ａ）に示す様に被写体の画像のみを表示する。
【００５７】
この様に、本形態によれば、被写体を撮影するための撮像部に加え、撮影者を撮影するための撮像部を設け、被写体の画像データに加えて撮影者の画像データも同時に撮影して記録している。
【００５８】
そして、撮影者の音量の変化と被写体像の動きによって、再生時に撮影者の画像を小画面として合成して表示するためのタイミングを決定している。
【００５９】
そのため、撮影者の画像を撮影するためのカメラを新たに設けるという特別なシステム構成をとることなく、再生時において、撮影者の様子を簡単に確認することが可能となる。
【００６０】
なお、本実施形態では、撮影者の画像データの小画面表示開始タイミングと終了タイミングを、撮影者の音量や被写体の動きに基づいて決定していたが、これに限らず、撮影者が小画面表示開始タイミングと終了タイミングとを任意に指定するよう構成してもよい。
【００６１】
例えば、図１のＯＫボタン２１３が操作される度に小画面表示開始点と終了点とを指定するよう構成し、このＯＫボタン２１３の操作に応じて再生プログラムに小画面表示開始タイミングと終了タイミングとを記述するよう構成する。
【００６２】
図１０はこの様に撮影者が任意に小画面表示開始タイミングと終了タイミングとを決定する構成をとった場合の、撮影時における制御部１０７の動作を示すフローチャートである。
【００６３】
図１０において、記録スタンバイの状態で操作部１１４により記録開始の指示があると、制御部１０７は記録処理部１０４、記録再生部１０８を制御して、前述の様に撮像部１０１、１０２により得られた第１の画像データと第２の画像データとを別々のファイルとしてディスクＤに対して記録を開始する（ステップＳ１００１）。
【００６４】
続いて記録停止か否か判別し（ステップＳ１００２）、記録停止でない場合、ＯＫボタン２１３が操作されたか否かを判別する（ステップＳ１００３）。
【００６５】
ＯＫボタン２１３が操作されていない場合にはステップＳ１００２に戻り、操作された場合、記録開始からの経過時間を検出し、検出した時間を子画面表示開始時間として記憶する（ステップＳ１００４）。
【００６６】
その後、記録停止の指示があったか否かを判別し（ステップＳ１００５）、停止の指示がない場合、再びＯＫボタン２１３が操作されたか否かを判別する（ステップＳ１００６）。ＯＫボタン２１３が操作されていない場合にはステップＳ１００５に戻る。
【００６７】
また、ステップＳ１００６でＯＫボタン２１３が操作された場合、記録開始からの現在の経過時間を子画面表示停止時間として記憶し、ステップＳ１００２に戻る（ステップＳ１００７）。
【００６８】
また、ステップＳ１００２あるいはＳ１００５において記録停止の指示があった場合、更に、子画面表示開始あるいは子画面表示停止時間が記憶され、再生プログラムとして保存すべきデータがあるか否かを判別する（ステップＳ１００８）。ここで、記録開始後一度もＯＫスイッチ２１３が操作されない場合、再生プログラムとして記憶すべきデータがないことになる。一方、ステップＳ１００４やＳ１００７で子画面表示開始時間あるいは子画面表示停止時間を記憶している場合、これらの時間に基づいて再生プログラムデータを生成する（ステップＳ１００９）。なお、ステップＳ１００５で記録停止の指示があった場合には、小画面表示の指示がなされたまま記録停止となり、この場合、再生時には撮影者の画像を子画面表示したまま再生を停止することを指示する再生プログラムを生成することになる。
【００６９】
そして、第１、第２の画像データの記録を停止し（ステップＳ１０１０）、再生プログラムがある場合にはこの再生プログラムをディスクＤに記録して終了する（ステップＳ１０１１）。
【００７０】
この様に、再生時に撮影者の画像を小画面として表示するタイミングを撮影者自身が簡単な操作にて指定することが可能となる。
【００７１】
なお、前述の実施形態では、図８に示すように撮影者の画像データのうち、小画面表示しない部分の画像データもそのままディスクＤに記録していたが、必要に応じて、小画面表示しない部分の画像データをディスクＤから削除するよう構成することも可能である。
【００７２】
小画面表示しない部分の画像データを削除することで、ディスクＤの記録容量を有効利用することができる。
【００７３】
この場合には、残った部分の画像データ、例えば図８に示した８０３〜８０４、８０５〜８０６、８０７〜８０８及び８０９〜８１０の各部分の画像データをそれぞれ独立したファイルに変換して記録すると共に、再生プログラムにおいて、元の画像ファイル８０２における小画面表示開始、終了タイミングとして記載するのではなく、各小画面表示開始タイミングにおいて、各部分のファイルを再生するよう記述を変更する。
【００７４】
また、小画面表示開始のタイミングを、図５のステップＳ５０５で動き検出したタイミングよりも所定期間早い時間に設定し、小画面表示停止のタイミングを、ステップＳ５０９あるいはＳ５１０での検出タイミングよりも所定期間遅れた時間に設定してもよい。
【００７５】
また、前述の実施形態では、被写体の画像データと撮影者の画像データとを共に共通のディスクＤに記録していたが、別々の記録媒体に記録してもよい。この場合には、再生プログラムにおいて、被写体の画像データ及び撮影者の画像データのパスを含むファイル名で記述する。
【００７６】
また、小画面表示開始タイミングと停止タイミングの情報として、前述の実施形態では、記録開始からの時間情報をそのまま記述していたが、これ以外にも、例えば、ディスクＤにおける記録セクタ（アドレス）の値など、撮影者の画像データ内において小画面表示を開始及び停止する位置（画面）を特定できる情報であればよい。
【００７７】
また、撮影者の画像を撮影するための撮像部は、図２の様に液晶パネルの横の位置以外にも、撮像者を画角に収めることが出来る位置であれば何処に配置してもよい。
【００７８】
【発明の効果】
以上説明した様に、本発明によれば、大規模なシステムを用意することなく被写体の画像と撮影者の画像とを共に記録可能となり、また、撮影された被写体の画像と撮影者の画像とを最適なタイミングで合成、表示可能となる。
【図面の簡単な説明】
【図１】本発明が適用される撮像装置の機能構成を示すブロック図である。
【図２】本発明が適用される撮像装置の外観図である。
【図３】実施形態の撮像装置において撮影された画像データの表示画面の様子を示す図である。
【図４】実施形態の撮像装置により記録されるデータのディレクトリ構成を示す図である。
【図５】実施形態の撮影時の動作を示すフローチャートである。
【図６】再生プログラムの様子を示す図である。
【図７】再生時の動作を示すフローチャートである。
【図８】再生時の合成動作の様子を示す図である。
【図９】再生時の表示画面を示す図である。
【図１０】他の実施形態における撮影時の動作を示すフローチャートである。

Claims

第１の撮像手段と、
第２の撮像手段と、
前記第１の撮像手段により得られた第１の動画像データと前記第２の撮像手段により得られた第２の動画像データとを、それぞれ独立したファイル形式で記録媒体に記録する記録手段と、
前記第１の動画像データと第２の動画像データとを、再生時に合成するための合成手順を示す再生プログラムを生成する再生プログラム生成手段とを備える撮像装置。
前記１の撮像手段は撮影者を撮影するために用いられ、前記第２の撮像手段は撮影者以外の被写体を撮影するために用いられることを特徴とする請求項１記載の撮像装置。
前記再生プログラム生成手段は、撮影者の音量が所定レベルを超え、且つ、前記第２の画像データに係る画像の動きが所定の閾値よりも大きくなったことに応じて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項２記載の撮像装置。
前記再生プログラム生成手段は、前記第１の動画像データの状態に基づいて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項１記載の撮像装置。
前記再生プログラム生成手段は、前記第１の動画像データに係る画像の動きに基づいて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項１記載の撮像装置。
前記記録手段は、前記再生プログラム生成手段により生成された再生プログラムを前記記録媒体に記録することを特徴とする請求項１記載の撮像装置。
撮影者の音声を検出する音声検出手段を備え、前記再生プログラム生成手段は、前記音声検出手段の出力に基づいて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項１記載の撮像装置。
前記再生プログラム生成手段は、前記撮影者の音量に基づいて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項１記載の撮像装置。
前記記録手段は、前記第２の動画像データのうち、再生時に前記第１の動画像データと合成する部分のみを前記記録媒体に記録することを特徴とする請求項１記載の撮像装置。
前記記録手段は、前記第２の動画像データのうち、再生時に前記第１の動画像データと合成する部分をそれぞれ独立したファイル形式で記録することを特徴とする請求項９記載の撮像装置。
前記記録手段は前記第１の動画像データと前記第２の動画像データとを互いに異なる記録媒体に記録することを特徴とする請求項１記載の撮像装置。
前記再生プログラム生成手段は、前記第１の動画像データが記録されているパス名と、前記第２の動画像データが記録されているパス名を前記再生プログラム中に記述することを特徴とする請求項１１記載の撮像装置。
前記第１の撮像手段と前記第２の撮像手段とは互いに異なる画角を持つことを特徴とする請求項１記載の撮像装置。
前記第１の撮像手段と前記第２の撮像手段は、互いに異なる画素数の画像データを生成することを特徴とする請求項１記載の撮像装置。
前記記録手段は前記第１の動画像データと第２の動画像データとを共通の前記記録媒体に記録することを特徴とする請求項１記載の撮像装置。
前記記録手段による前記第１の動画像データと第２の動画像データの記録中に、再生時における前記第１の動画像データと第２の動画像データとの合成開始タイミングを任意に指示する指示手段を備え、前記再生プログラム生成手段は、前記指示手段の指示基づいて合成開始タイミングを決定して前記再生プログラムを生成することを特徴とする請求項１記載の撮像装置。
前記記録媒体から前記第１の動画像データと第２の動画像データを再生する再生手段と、
前記再生プログラムに応じて前記再生手段の再生動作を制御する制御手段とを備えたことを特徴とする請求項１記載の撮像装置。
前記再生手段により再生された第１の動画像データと第２の動画像データとを合成して表示手段に出力する合成手段を備え、前記制御手段は前記再生プログラムに応じて前記合成手段の合成動作を制御することを特徴とする請求項１７記載の撮像装置。