JP7469329B2 - 映像作成方法 - Google Patents

Description

本発明の一実施形態は、撮影装置を用いて映像を撮影して映像ファイルを作成する映像作成方法に関する。

あるシーンにて複数の被写体の各々の映像を取得する場合に、そのシーンの映像を１台の撮影装置によって撮影し、その撮影映像の中から各被写体の映像を抽出することがある。このような技術の一例としては特許文献１～３に記載の技術が挙げられる。

特許文献１では、１台のカメラにより撮像された元画像の一部を切り出して切り出し画像を生成し、その切り出し位置を制御して、被写体の位置が変わるように切り出し画像を出力する技術が開示されている。

特許文献２では、１台のカメラで撮影した高解像な広角映像に基づいて複数の対象物を検出し、検出された各対象物の映像を広角映像から切り出し、複数の対象物の映像をモニタに並列表示する技術が開示されている。

特許文献３では、１台の撮影装置によって撮像された映像の中から複数の任意のエリアを指定し、指定された複数の任意のエリアに対応した映像を切り出して出力する技術が開示されている。

特開平１１－２２０６５３号公報 特開２００４－１９４３０９号公報 特開２０１４－４２３５７号公報

映像の一部を抽出する場合、抽出映像の画質は、撮影時の露光量、ホワイトバランス及びレンズフォーカス（ピント）等の条件に応じて決まる。これらの条件が適正な値に設定されると、抽出映像が良好な画質となる。

一方、抽出映像に対する適正な条件は、元の映像における抽出領域の位置に応じて決まる。このことを考慮して、抽出領域の位置が変わる場合にも抽出映像について良好な画質を確保することが求められている。
しかし、特許文献１～３に記載の技術は、露光量、ホワイトバランス及びレンズフォーカス等の条件を抽出映像の位置に応じて適正化するものではない。そのため、これらの文献に記載された技術を用いたとしても、抽出映像の画質、特に抽出領域の位置が変わったときの画質が適切に確保されない虞がある。

本発明の一実施形態は、上記の事情に鑑みてなされたものであり、撮影映像の一部を抽出して得られる映像を、抽出領域の位置を変えたときにも良好な画質とすることが可能な映像作成方法を提供することを目的とする。

上記の目的を達成するために、本発明の一実施形態の映像作成方法は、撮影レンズ及び撮像素子を備える撮影装置によって撮影した映像に基づき、映像ファイルを作成する映像作成方法であって、第１画角である第１映像の撮影領域の中に、第１画角よりも小さい第２画角である複数の領域を設定する設定工程と、複数の領域に含まれる第１領域及び第２領域のうち、第１領域よりも適正露光量が小さい第２領域を基準領域として指定する指定工程と、基準領域の適正露光量に基づいて、第１映像を撮影する際の露光時間及び撮影レンズへの入射光に対する絞り量のうち、少なくとも一つの条件を決定する条件決定工程と、を備えることを特徴とする。

また、本発明の一実施形態の映像作成方法は、記録される映像の撮影領域である選択領域を、複数の領域の中から選択する選択工程と、選択工程の後に、選択領域を複数の領域の中から再選択して選択領域を切り替える切り替え工程と、切り替え工程前の選択領域の映像と、切り替え工程後の選択領域の映像とをそれぞれ記録して映像ファイルを作成する作成工程と、を備えてもよい。

また、本発明の一実施形態の映像作成方法において、作成工程では、切り替え工程前の選択領域の映像と、切り替え工程後の選択領域の映像とを結合して映像ファイルとしての動画ファイルを作成してもよい。この場合、切り替え工程前後において良好な画質が維持された映像の動画ファイルを取得することができる。

また、切り替え工程が実施された場合には指定工程が実施され、指定工程が実施される度に条件決定工程が実施されると、好適である。

また、本発明の一実施形態の映像作成方法は、第１領域が選択領域として選択された場合に、撮像素子が備える複数の画素のうち、第１領域と対応する画素の感度を、第１領域の適正露光量、及び条件決定工程にて決定された条件に基づいて決定する感度決定工程をさらに備えてもよい。
なお、感度決定工程では、第１領域と対応する画素の感度を、基準領域である第２領域と対応する画素の感度よりも高くなるように決定すると、好適である。

また、本発明の一実施形態の映像作成方法は、条件を経時的に変化させることで、第１映像を撮影する際の露光量を経時的に調整する調整工程をさらに備えてもよい。この場合、条件決定工程は、基準領域の適正露光量に基づいて、条件を決定する第１決定工程と、選択領域の適正露光量に基づいて、調整工程における露光量の調整量を決定する第２決定工程と、を含むとよい。また、調整工程は、第１決定工程で決められた条件と、第２決定工程で決められた調整量に基づいて実施されるとよい。
なお、切り替え工程が実施された場合に、第１決定工程を実施し、第１決定工程が実施された後の調整工程において第２決定工程を実施すると、好適である。

また、本発明の一実施形態の映像作成方法は、第１映像を表示画面に表示させる表示工程をさらに備えてもよい。この場合、設定工程では、表示画面に表示された第１映像を通じてユーザが行った設定操作に応じて、複数の領域を設定するとよい。

また、本発明の一実施形態によれば、撮影レンズ及び撮像素子を備える撮影装置によって撮影した映像に基づき、映像ファイルを作成する映像作成方法であって、第１画角である第１映像の撮影領域の中に、第１画角よりも小さい第２画角である複数の領域を設定する設定工程と、記録される映像の撮影領域としての選択領域を、複数の領域の中から選択する選択工程と、選択工程の後に、選択領域を複数の領域の中から再選択して選択領域を切り替える切り替え工程と、切り替え工程が実施されてから第１期間が経過するまでの間に実施され、第１期間における選択領域の映像を記録する第１記録工程と、第１期間以外の第２期間に実施され、第２期間における選択領域の映像を記録する第２記録工程と、第１期間及び第２期間のそれぞれにおいて、選択領域の露光量、選択領域の映像のホワイトバランス、及び、撮影レンズのフォーカスのうち、少なくとも一つの条件を調整する調整工程と、第１期間において実施される調整工程では、第２期間において実施される調整工程よりも、条件の調整速度がより速い映像作成方法も実現可能である。

また、上記の映像作成方法において、調整工程では、撮影レンズへの入射光に対する絞り量を変更する絞り駆動部を駆動させて露光量を調整し、第１期間において実施される調整工程では、第２期間において実施される調整工程よりも、絞り駆動部の駆動速度が速いと、より好適である。
また、上記の映像作成方法において、調整工程では、撮影レンズのフォーカス用光学部品を移動させてフォーカスを調整し、第１期間において実施される調整工程では、第２期間において実施される調整工程よりも、フォーカス用光学部品の移動速度がより速いと、より好適である。

また、本発明の一実施形態によれば、撮影レンズ及び撮像素子を備える撮影装置によって撮影した映像に基づいて、映像ファイルを作成する映像作成方法であって、第１画角である第１映像の撮影領域の中に、第１画角よりも小さい第２画角である複数の領域を設定する設定工程と、記録される映像の撮影領域としての選択領域を、複数の領域の中から選択する選択工程と、選択工程の後に、選択領域を再選択して複数の領域の中から選択領域を切り替える切り替え工程と、切り替え工程が実施されてから第１期間が経過するまでの間に実施され、第１期間における選択領域の映像を記録する第１記録工程と、第１期間以外の第２期間に実施され、第２期間における選択領域の映像を記録する第２記録工程と、第１期間において実施され、選択領域の露光量を、第１調整用データを用いて目標露光量に調整する第１調整工程と、第２期間において実施され、選択領域の露光量を、第２調整用データを用いて目標露光量に調整する第２調整工程と、を有し、第１調整工程及び第２調整工程では、露光時間、撮像素子が備える画素の感度、及び、撮影レンズに対する入射光の絞り量を含む複数のパラメータの各々の値を第１調整用データ又は第２調整用データに基づいて決めて、露光量を目標露光量に調整し、第１調整用データと第２調整用データの間では、目標露光量に対して定められた複数のパラメータの各々の値が互いに異なる映像作成方法も実現可能である。

また、上記の映像作成方法において、第１調整用データ及び第２調整用データには、露光量を目標露光量に調整するために複数のパラメータの各々の値を変更させる際の変更パターンが定められているとよい。この場合、第１調整用データには、第２調整用データの変更パターンより、目標露光量に対して絞り量の変更度合いが小さい変更パターンが定められていると、好適である。

また、上記の映像作成方法において、撮影装置には、調光度合いを電子的な方式で変更することが可能な電子減光フィルタが備えられてもよい。また、複数のパラメータには、電子減光フィルタの調光度合いが含まれてもよい。

本発明の一実施形態である第１実施形態に係る撮影装置の外観の一例を示す斜視図である。 本発明の一実施形態である第１実施形態に係る撮影装置の背面側を示す背面図である。 本発明の一実施形態である第１実施形態に係る撮影装置の構成を示すブロック図である。 撮像素子の画素と第１映像の撮影領域との対応関係を示す図である。 第１映像から抽出される映像の領域を設定する手順を示す図である。 第１映像から抽出される映像の領域が複数設定された様子を示す図である。 表示画面に表示された選択領域の映像を示す図である。 記録される映像の動画ファイルについての説明図である。 本発明の一実施形態である第１実施形態に係る映像作成フローの流れを示す図である。 本発明の一実施形態である第２実施形態に係る映像作成フローの流れを示す図である。 本発明の一実施形態である第３実施形態に係る映像作成フローの流れを示す図である。 基準領域及び選択領域の各々の適正露光量の経時変化を示す図である。 基準領域の適正露光量に基づいて調整し続けた場合の選択領域の調整後の露光量を示す図である。 第３実施形態における目標露光量を示す図である。 第３実施形態における基準領域及び選択領域の各々の調整後の露光量の推移を示す図である。 本発明の一実施形態である第４実施形態に係る映像作成フローについての説明図である。 本発明の一実施形態である第５実施形態に係る映像作成フローについての説明図である。 調整用データが定める変更パターンの一例を示す図である。

以下、本発明の好適な実施形態（第１実施形態～第６実施形態）について、添付の図面を参照しながら詳細に説明する。
ただし、以下に説明する実施形態は、本発明の一実施形態の理解を容易にするために挙げた一例に過ぎず、本発明を限定するものではない。すなわち、本発明の一実施形態は、その趣旨を逸脱しない限りにおいて、以下に説明する実施形態から変更又は改良され得る。また、本発明の一実施形態には、その等価物が含まれる。

＜＜第１実施形態＞＞
本発明の一実施形態である第１実施形態は、図１～３に示す撮影装置１０を用いた映像作成方法に関する。図１及び２は、撮影装置１０の外観を示し、図１は、撮影装置１０の斜視図であり、図２は、撮影装置１０を背面側から見た図である。図３は、撮影装置１０の構成を示すブロック図である。

［撮影装置の基本構成］
撮影装置１０は、例えばデジタルカメラであり、映像撮影に用いられる。以降の説明において、「映像」とは、特に断る場合を除き、ライブ映像（ライブビュー画像）、すなわちリアルタイムで撮影される映像を意味する。

図１及び２に示す撮影装置１０は、レンズ交換式のデジタルカメラであり、撮影装置本体１２と撮影レンズ１４を備える。撮影レンズ１４は、撮影装置本体１２のマウント１３に対して交換可能に装着される。ただし、これに限定されるものではなく、撮影装置１０は、レンズ一体式のデジタルカメラであってもよい。

（撮影レンズ）
撮影レンズ１４は、図３に示すように、光学部品ユニット１８、絞り２０、電子減光フィルタ２１、フォーカス用駆動部２２、絞り駆動部２３、及び電圧印加部２４を含む。
光学部品ユニット１８は、複数のレンズを有し、その中にはフォーカス用光学部品１９（フォーカスレンズ）が含まれる。フォーカス用光学部品１９が光軸Ｌ１の方向に移動すると、撮影レンズ１４のフォーカス（ピント）が変わる。

フォーカスの調整モードには、マニュアルフォーカスモードとオートフォーカスモードがある。マニュアルフォーカスモードでは、撮影レンズ１４の鏡筒に設けられたフォーカスリング１６をユーザが手動で回すことで、フォーカス用光学部品１９が光軸Ｌ１の方向に移動する。
オートフォーカスモードでは、制御部４６がフォーカス用駆動部２２を駆動させることでフォーカス用光学部品１９を光軸Ｌ１の方向に移動させて、映像中の被写体に合焦するようにフォーカスが自動的に調整される。なお、オートフォーカスモードの下でのフォーカス調整は、例えば、ユーザが撮影装置本体１２のレリーズボタン２６を半押し状態にすると、これをトリガーとして実施される。

フォーカス用駆動部２２の駆動モータは、超音波モータ等によって構成され、撮影装置本体１２内又は撮影レンズ１４内に設けられる。

光学部品ユニット１８は、広角レンズ、超広角レンズ、３６０度レンズ、又はアナモフィックレンズ等を含んでいる。これにより、撮影装置１０は、横方向に広い画角で映像を撮影することが可能である。ここで、撮影装置１０が映像を撮影するときの最大の画角（以下、第１画角と言う。）は、光学部品ユニット１８及び後述の撮像素子４０の使用等に応じて決まり、第１画角で撮影される映像が本発明の一実施形態での「第１映像」に相当する。

なお、撮影装置１０は、互いに画角が異なる複数の光学部品ユニット１８を備えてもよい。

絞り２０は、撮影レンズ１４の光路中に配置されて開口形状が可変に構成され、撮影レンズ１４への入射光に対する絞り量（具体的には、絞り値又はＦ値）を調整する光学部品である。絞り２０は、例えば、開口の大きさを変化させるための部材を機械的に駆動することにより開口形状が変えられるものである。ただし、これに限定されるものではなく、液晶又はエレクトロクロミック素子を駆動して開口形状が変えられる絞り（物性絞り）であってもよい。

絞り２０の開口形状、すなわち、絞り量は、絞り駆動部２３によって調整される。

電子減光フィルタ２１は、撮影レンズ１４の光路中に配置され、調光度合いを電子的な方式で変更可能なＮＤ（Neutral Density）フィルタである。電子減光フィルタ２１は、例えば、液晶に光を吸収する調光材料を混ぜ込んで構成されており、液晶分子の傾きを変化させて調光度合い（具体的には、光の透過率）をコントロールする。

なお、電子減光フィルタ２１は、液晶型の電子ＮＤフィルタに限定されず、反応物質（例えば、塩化銀）の酸化還元反応を利用する析出型の電子ＮＤフィルタであってもよい。また、電子減光フィルタ２１としては、例えば、特開２０１３－８８５９６号公報、又は特開２０１９－６８４０２号公報に記載の電子ＮＤフィルタが利用可能である。

電子減光フィルタ２１の調光度合いは、電圧印加部２４が電子減光フィルタ２１に印加する電圧（印加電圧）の大きさを変えることで調整される。

（撮影装置本体）
撮影装置本体１２は、図１及び２に示すように、ユーザによって操作される操作部を備える。例えば、撮影装置本体１２の上面には、レリーズボタン２６が配置されている。例えば、ユーザがレリーズボタン２６を全押しすると、撮影装置１０が撮影する映像又は撮影映像に基づく映像の記録が開始される。撮影映像に基づく映像としては、例えば、後述する選択領域の映像等が挙げられる。なお、ユーザのレリーズ指示（すなわち、記録指示）は、ディスプレイ２８によるタッチ操作の検出機能を介して、制御部４６に入力されてもよい。

撮影装置本体１２の背面には、表示画面を構成するディスプレイ２８が配置されており、その周辺には複数のボタン３０、３２、３４が配置されている。

ディスプレイ２８は、例えば、ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）、有機ＥＬ（Organic Electroluminescence）ディスプレイ、ＬＥＤ（Light Emitting Diode）ディスプレイ、又は電子ペーパー等で構成されている。ディスプレイ２８の表示画面には、撮影装置１０が撮影する映像又撮影映像に基づく映像等が表示される。
また、ディスプレイ２８の表示画面には、撮影条件等に関する選択メニュー、警告等を含むユーザへの通知情報、及び過去に取得した映像の再生映像等がさらに表示される。

ディスプレイ２８は、ユーザの指のタッチ操作を検出する機能を備えている。また、透過型のタッチパネル３６がディスプレイ２８に重ねられ、あるいはディスプレイ２８の内部に組み込まれている。タッチパネル３６は、ユーザの指又はスタイラスペン等の接触位置及びその変位を検知し、検知結果に基づく信号を所定の出力先に出力する。例えば、ユーザが、互いに近接させた二本の指でタッチパネル３６に触れた後に指間の間隔を広げる操作（所謂ピンチアウト操作）を行うとする。この場合、タッチパネル３６は、二本の指の各々の、操作開始時点及び操作終了時点の位置を検知し、その検知結果に応じた信号を出力する。

撮影装置本体１２の筐体内には、図３に示すように、シャッタ３８、撮像素子４０、アナログ信号処理回路４４、制御部４６、内部メモリ５０、カードスロット５２、及びバッファ５６が設けられている。

撮像素子４０は、イメージセンサであり、ＣＣＤ（Charged Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor Image Sensor）等の固体撮像素子によって構成されている。撮像素子４０は、図４に示すように升目状に配置された複数の画素４２を有する。図４は、撮像素子４０の画素４２と第１映像の撮影領域との対応関係を示している。

それぞれの画素４２は、オンチップマイクロレンズ、カラーフィルタ、及びフォトダイオード（光電変換素子）を有する。

また、それぞれの画素４２は、図４に示すように映像の撮影領域Ａ１を構成する単位領域Ａ０の一つと対応している。撮影領域Ａ１は、撮影装置１０が第１映像を撮影する際の撮影領域であり、その画角は第１画角に相当する。単位領域Ａ０は、撮影領域Ａ１における最小単位をなす領域であり、撮像素子４０の縦方向及び横方向に並ぶ画素４２と対応する領域である。
換言すると、撮影領域Ａ１に映る第１映像は、単位領域Ａ０の数（すなわち、画素４２の数）と同数の単位映像によって構成されている。なお、本明細書では、第１映像における単位映像の個数を便宜的に「画素数」と呼ぶ。

撮像素子４０は、撮影レンズ１４を通過した被写体からの光を受光し、その受光像を電気信号（画像信号）に変換して出力する。また、撮像素子４０は、所謂電子シャッタによる露光動作が実施可能となるように構成されている。
なお、以下の説明において「露光」とは、特に断る場合を除き、シャッタ３８を開放状態に維持したまま、撮像素子４０にて電子シャッタによる露光を行うことを意味することとする。また、「露光時間」とは、電子シャッタによるシャッタ速度に応じた時間、厳密には電荷蓄積時間を意味することとする。

図３に示す構成において、アナログ信号処理回路４４は、撮像素子４０から出力された１フレーム分の電気信号（画像信号）を画素毎に読み出す。アナログ信号処理回路４４は、読み出した画像信号をＡＧＣ（Auto Gain Controller）によって増幅し、増幅後の信号に対して相関二重サンプリング処理等の信号処理を施す。処理済みの信号は、制御部４６の映像処理部４８に送られる。

制御部４６は、撮影装置１０の各部を制御し、映像ファイルの作成に関する各種の処理を実行する。制御部４６は、図３に示すようにコントローラ４７及び映像処理部４８を含む。

制御部４６は、例えば１つ又は複数のプロセッサからなり、例えばＣＰＵ（Central Processing Unit）と制御プログラムから構成される。ただし、これに限定されるものではなく、上記のプロセッサは、ＦＰＧＡ（Field Programmable Gate Array）、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＧＰＵ（Graphics Processing Unit）、ＭＰＵ（Micro-Processing Unit）、又はその他のＩＣ（Integrated Circuit）によって構成されてもよく、あるいは、これらを組み合わせて構成されてもよい。
また、上記のプロセッサは、ＳｏＣ（System on Chip）等に代表されるように、コントローラ４７及び映像処理部４８を含む制御部４６全体の機能を一つのＩＣ（Integrated Circuit）チップで構成してもよい。
なお、以上に挙げた各プロセッサのハードウェア構成は、半導体素子などの回路素子を組み合わせた電気回路（Circuitry）で実現してもよい。

コントローラ４７は、ユーザの操作又は規定の制御パターンに従って撮影装置１０を統括的に制御する。例えば、コントローラ４７は、所定のフレームレートにて映像（動画像）を撮影するように撮像素子４０及びアナログ信号処理回路４４を制御する。

また、コントローラ４７は、撮影環境に応じて撮影条件を決め、撮影条件が決められた条件になるように各駆動部、撮像素子４０、アナログ信号処理回路４４及び映像処理部４８を制御する。撮影条件には、映像を撮影する際の露光量、ホワイトバランス、及び撮影レンズ１４のフォーカス（ピント）等が含まれる。
さらに、コントローラ４７は、撮影された映像、又は撮影映像に基づく映像が記録媒体に記録されるように映像処理部４８を制御する。

映像処理部４８は、アナログ信号処理回路４４から送られてくる信号をデジタル画像データに変換した後、デジタル画像データに対してガンマ補正、ホワイトバランス補正、及び傷補正等の各種処理を行う。また、映像処理部４８は、処理後のデジタル画像データを、所定の規格に準拠した圧縮形式にて圧縮する。

そして、映像処理部４８は、映像の撮影中、特定のフレームレートにて圧縮デジタル画像データを生成し、そのデータから映像（厳密には、フレーム画像）を取得する。このときに取得される映像（フレーム画像）は、第１画角で撮影される映像、すなわち第１映像に相当する。

また、映像処理部４８は、コントローラ４７による制御の下、取得した映像に対して種々の処理（例えば、後述の抽出処理）を実行し、処理後の映像を特定のフレームレートにて１フレーム毎にディスプレイ２８に出力する。
さらに、映像処理部４８は、処理後の映像を記録媒体に記録し、映像ファイルを作成する。このように映像処理部４８が映像ファイルの作成機能を備えており、映像処理部４８を有する撮影装置１０は、映像作成装置として利用される。

なお、以降では、特に断る場合を除き、コントローラ４７及び映像処理部４８の各々の動作及び処理を、制御部４６の動作及び処理として説明することとする。また、制御部４６による処理については、後の項で詳しく説明する。

撮影装置本体１２に内蔵された内部メモリ５０、及び、カードスロット５２を介して撮影装置本体１２に対して着脱可能なメモリカード５４は、記録媒体であり、制御部４６により映像が記録媒体に記録される。内部メモリ５０及びメモリカード５４は、フラッシュメモリ又は強誘電体メモリ等で構成されている。なお、内部メモリ５０及びメモリカード５４は、撮影装置本体１２の外にあってもよく、その場合、制御部４６は、有線又は無線によって外部の記録媒体に対して映像の記録を行ってもよい。

バッファ５６は、制御部４６のワークメモリとして機能し、例えば、ＤＲＡＭ（Dynamic Random Access Memory）、又は強誘電体メモリ等で構成されている。

［制御部による処理について］
制御部４６による処理には、表示処理、抽出処理、選択処理、切り替え処理、記録処理、露光量調整処理、フォーカス調整処理、及びホワイトバランス調整処理が含まれる。
以下、上述した各処理について個別に説明する。

（表示処理）
表示処理は、各種の映像をディスプレイ２８の表示画面に表示する処理である。例えば、撮影装置１０の起動後に制御部４６が表示処理を開始すると、その時点では、撮影装置１０が第１画角にて撮影する第１映像、つまり、図４に示す撮影領域Ａ１に映る映像が表示される。
また、抽出処理が実行された場合、制御部４６は、表示処理において、後述する選択領域の映像を表示画面に表示する。さらに、選択領域が切り替えられた場合（つまり、後述の切り替え工程が実施された場合）、制御部４６は、表示画面に表示する映像を、切り替え工程後の選択領域の映像に切り替える。

以上のような制御部４６による表示処理の実行動作が表示工程に該当する。なお、本実施形態では、表示処理によってディスプレイ２８に表示される映像が、その時点でリアルタイムに撮影されるライブ映像（ライブビュー画像）であることとする。

（抽出処理）
抽出処理は、第１映像の一部分を抽出する処理である。抽出された映像は、クロップ映像（切り出し映像）とも呼ばれ、記録処理での記録対象となる。
抽出処理に際して、ユーザは、第１映像の撮影領域において抽出する領域を設定するための操作を行う。この設定操作について図５を参照しながら具体的に説明する。図５は、第１映像から抽出される映像の領域を設定する手順を示している。

ユーザは、図５に示すように、ディスプレイ２８の表示画面に第１映像（図５中、記号Ｐ１と表記）が表示された状態で設定操作を行う。具体的に説明すると、第１映像Ｐ１が表示された状態においてユーザが所定のボタン操作を行うと、図５に示すように矩形状の領域設定枠ＦＲが第１映像Ｐ１に重畳されて表示される。この領域設定枠ＦＲによって囲まれる領域Ａ２が、第１映像Ｐ１から抽出される映像の領域となる。抽出される映像の画角は、第１映像Ｐ１の画角、すなわち第１画角よりも小さく、以下では第２画角と呼ぶこととする。

領域設定枠ＦＲは、その位置、サイズ及び縦横比が可変な状態で表示される。例えば、ユーザがタッチパネル３６上で領域設定枠ＦＲの一辺に指で触れ、その指をドラッグすることで領域設定枠ＦＲの表示位置が変えられる。また、ユーザがタッチパネル３６上で領域設定枠ＦＲに二本の指で触れ、その指の間隔を広げたり狭めたりすることで領域設定枠ＦＲのサイズ及び縦横比が変えられる。このように領域設定枠ＦＲの位置、サイズ及び縦横比を変えることで、第１映像Ｐ１から抽出される映像の領域の位置、大きさ及び縦横比（アスペクト比）が変えられる。

以上の操作がユーザによる設定操作に該当する。また、上記一連の操作を複数回繰り返すことで、図６に示すように、抽出される映像の領域Ａ２を、一つの第１映像Ｐ１の撮影領域Ａ１中に複数設定することができる。図６は、第１映像Ｐ１から抽出される映像の領域Ａ２が複数設定された様子を示している。

なお、複数の領域Ａ２が設定される場合、各領域Ａ２のサイズ（第２画角）は、領域Ａ２間で揃ってもよく、あるいは領域Ａ２間で異なってもよい。
また、各領域Ａ２の形状は、矩形（長方形）に限定されず、正方形、平行四辺形、台形、菱形、円状又は楕円状、三角形又は五角形以上の多角形、あるいは不定形であってもよい。
また、設定される領域Ａ２の個数は、特に限定されないが、本実施形態では図６に示すように２個以上であることとする。

ユーザによる設定操作が複数回繰り返された場合、制御部４６は、それぞれの設定操作を受け付け、設定操作の回数に応じた数の領域Ａ２を、第１映像Ｐ１の撮影領域Ａ１中に設定する。このような制御部４６の動作が設定工程に該当する。

なお、第１映像Ｐ１が高画質映像（例えば、画素数が１０００万以上である映像）であるときには、第１映像Ｐ１から抽出される第２画角の映像が十分に高画質な映像となる。

第１映像Ｐ１の画素数については、特に限定されないが、その下限は、１０００万以上とするのがよく、より好ましくは６０００万以上とするのがよい。また、画素数の上限は、１０億以下とするのがよく、より好ましくは５億以下とするのがよい。画素数が上記の下限を上回ると、第１映像Ｐ１から抽出される第２画角の映像の視認性が担保される。画素数が上記の上限を下回ると、第１映像Ｐ１のデータ量が低減し、制御部４６による処理の高速化が図られる。

（選択処理及び切り替え処理）
選択処理は、第１映像Ｐ１の撮影領域Ａ１中に設定された複数の領域Ａ２の中から、記録される映像が映る選択領域を選択する処理である。
切り替え処理は、選択処理の後に、選択領域を複数の領域Ａ２の中から再選択して選択領域を切り替える処理である。
なお、本実施形態において、選択処理及び切り替え処理において選択領域とする領域の数は、１つであるが、これに限定されず、２つ以上の領域を選択領域としてもよい。

選択処理及び切り替え処理の手順について説明すると、ユーザは、前述の設定操作を行って複数の領域Ａ２を設定した後、いずれかの領域Ａ２を選択領域として選ぶ。その後、ユーザが操作ボタン３０、３２、３４又はタッチパネル３６等を通じて選んだ領域Ａ２を入力し、その入力操作を制御部４６が受け付ける。制御部４６は、ユーザの入力操作に基づき、選択領域を複数の領域Ａ２の中から決定する。このような制御部４６による動作が選択工程に該当する。

また、選択工程後に、ユーザが選択領域を別の領域Ａ２に選び直して入力操作を再度行うと、制御部４６が、その再入力操作を受け付けて、その再入力操作に基づき、それまでの選択領域を別の領域Ａ２に切り替える。このような制御部４６による動作が切り替え工程に該当する。
なお、ユーザが選択領域を選び直す際に行う入力操作（再入力操作）は、特に限定されない。例えば、再入力操作は、ディスプレイ２８上で選択したい領域Ａ２をタップする操作でもよいし、十字キーである第１操作ボタン３０における上下ボタン又は左右ボタンのいずれかを押し下げる操作でもよい。

以上のように本実施形態では、選択工程において複数の領域Ａ２の中から選択領域が選択され、選択領域の映像が映像ファイルとして記録される。また、選択工程が実施されると、それに連動して、選択領域の映像が図７に示すようにディスプレイ２８の表示画面に表示される。図７は、表示画面に表示された選択領域の映像を示している。

また、選択工程後に切り替え工程を実施することで、選択領域を切り替えて、記録対象の映像をある被写体の映像から別の被写体の映像に変えることができる。これにより、同一シーン（同じ場所）にある複数の被写体の各々について、個別映像（詳しくは、各被写体にクローズアップした映像）を、複数の装置を用いずに一台の撮影装置１０によって同時に撮影することができる。
また、記録される映像が映る領域Ａ２を、ユーザの操作に応じて時系列に切り替える（スイッチングする）ことができ、且つ、切り替え前後の映像が映った映像ファイルを容易に取得することができる。
さらに、切り替え工程の実施に連動し、ディスプレイ２８の表示画面に表示される映像が、切り替え工程前の選択領域の映像から、切り替え工程後の選択領域の映像に切り替わる。これにより、ユーザは、選択領域の切り替えを表示画面にて確認することができる。

（記録処理）
記録処理は、制御部４６が選択領域の映像を記録媒体に記録し、その映像に関する映像ファイル（詳しくは、動画ファイル）を作成する処理である。記録処理において制御部４６が選択領域の映像を記録する動作は、記録工程に該当する。また、記録処理において制御部４６が映像ファイルを作成する動作は、作成工程に該当する。
なお、本実施形態では、映像の記録及び映像ファイルの作成が同義であり、作成工程が記録工程に相当することとする。

また、制御部４６は、切り替え工程を実施した場合、切り替え工程前の選択領域の映像と、切り替え工程後の選択領域の映像とをそれぞれ記録して映像ファイルを作成する。詳しく説明すると、制御部４６は、作成工程において、切り替え工程前の選択領域の映像（動画像）と、切り替え工程後の選択領域の映像（動画像）とを結合して映像ファイルとしての動画ファイルを作成する。これにより、図８に示すように選択領域の切り替えによって被写体が変わる映像の動画ファイルが取得される。図８は、記録される映像の動画ファイルについての説明図である。

（露光量調整処理）
露光量調整処理は、選択領域の露光量を調整する処理であり、制御部４６のＡＥ（Automatic Exposure）機能を利用して実行される。
露光量は、露光時間（つまり、電子シャッタのシャッタ速度）、撮像素子４０が備える画素４２の感度（ＩＳＯ感度）、及び、撮影レンズ１４に対する入射光の絞り量（Ｆ値）を含む複数のパラメータによって決められる。各パラメータの値を決め、各パラメータが決められた値となるように絞り駆動部２３、撮像素子４０及び映像処理部４８等を制御することで露光量が調整される。ここで、絞り駆動部２３による絞り２０の調整は、公知の自動光量調整（Automatic Light Control：ＡＬＣ）機能を利用して行われる。また、撮像素子４０における電子シャッタのシャッタ速度の調整は、公知の電子光制御（Electronic Light Control：ＥＬＣ）機能を利用して行われる。

また、撮影レンズ１４に電子減光フィルタ２１が備わっている場合には、上記複数のパラメータに電子減光フィルタ２１の調光度合いが含められる。この場合、電子減光フィルタ２１の調光度合いの値を決め、調光度合いが決められた値となるように電圧印加部２４を制御することで、露出量が調整される。

ところで、選択領域の露光量の適正値（適正露光量）は、第１映像Ｐ１の撮影領域Ａ１中に設定された複数の領域Ａ２のうち、どの領域が選択領域であるかに応じて変わる。

より詳しく説明すると、第１映像Ｐ１を撮影するとき、複数の領域Ａ２を含む撮影領域Ａ１の各箇所での露光量は、各箇所に在る被写体及び環境等に応じて変化する。すなわち、撮影領域Ａ１中の各領域Ａ２の適正露光量は、その領域Ａ２の位置に応じて変わり得るので、領域Ａ２毎に決められる。

各領域Ａ２の適正露光量は、公知の手順によって決められる。一例を挙げると、撮像素子４０中、ある領域Ａ２を構成する単位領域Ａ０と対応する画素４２から出力される画像信号から、その領域Ａ２について、Ｒ（Red）、Ｇ（Green）、Ｂ（Blue）の輝度（すなわち、ＲＧＢ画素値）を積算する。ここで、単位領域Ａ０と対応する画素４２は、図４に示す位置関係において当該単位領域Ａ０と同じ配置位置にある画素４２である。例えば、図４中、太枠で囲まれた領域Ａ２中の単位領域Ａ０は、同図中、太枠で囲まれた範囲内にある画素４２と対応している。そして、上記の領域Ａ２について算出したＲＧＢ画素値の積算値（詳しくは、領域Ａ２内の平均値）から、その領域Ａ２の映像を撮影する際の適正露光量が決まる。

選択領域の露光量は、上述の要領で決められる適正露光量に基づいて調整される。具体的に説明すると、制御部４６が、所定領域の適正露光量に基づいて、露光時間（シャッタ速度）及び絞り量（Ｆ値）の各々の値を決める。かかる動作は、制御部４６による条件決定工程に該当する。条件決定工程において決められる各パラメータの値は、選択領域の映像を含む第１映像を撮影する際の露光条件を示す値である。
なお、本実施形態では、露光時間及び絞り量の両方の値を決めるが、これに限定されるものではなく、露光時間又は絞り量のいずれか一方のみを決めてもよい。

また、制御部４６は、露光時間及び絞り量の各々の値を決めた後、これらの値の組み合わせに応じて、選択領域と対応する画素４２の感度（ＩＳＯ感度）の値を決める。厳密には、選択領域と対応する画素４２からの出力信号に対するゲイン（増幅比）が決められる。かかる動作は、制御部４６による感度決定工程に該当する。
なお、ゲインは、例えばアナログ信号処理回路４４等におけるアナログ信号に対するアナログゲインでもよく、映像処理部４８等におけるデジタル変換後の信号（データ）に対するデジタルゲインでもよい。

そして、露光時間、絞り量及び感度が決められた後、これらのパラメータが決められた値になるように制御部４６が絞り駆動部２３、撮像素子４０及び映像処理部４８等を制御する。

映像が記録される間、以上の手順にて露光量調整処理が定期的に（例えば、１フレーム毎に）繰り返し実施される。そして、露光量調整処理が実施される度に露光時間、絞り量及び感度の値が決定される。
具体的に説明すると、映像の撮影中、Ｎ回目（Ｎは自然数）のフレーム画像における所定領域内のＲＧＢ画素値の積算値を求める。その後、求めた積算値に基づく適正露光量を算出し、算出した適正露光量に基づいて、次回（すなわち、Ｎ＋１回目）のフレーム画像を撮影する際の露光時間及び絞り量を決定する。
また、Ｎ回目のフレーム画像における選択領域内のＲＧＢ画素値の積算値を求め、求めた積算値から選択領域の適正露光量を算出する。そして、算出された適正露光量と、その時点での露光時間及び絞り量とに基づいて、Ｎ回目のフレーム画像における選択領域と対応する画素４２の感度を決定する。

また、本実施形態では、露光時間及び絞り量が経時的に変化し、これに伴って、第１映像を撮影する際の露光量が経時的に調整される。さらに、選択領域と対応する画素４２の感度が経時的に変化する結果、選択領域の露光量が経時的に調整されることになる。
なお、本実施形態において、「経時的に調整する」とは、調整対象のパラメータについて１フレーム毎に調整量を決め、１フレーム毎に各パラメータを当該調整量だけ増減させることを意味する。

（フォーカス調整処理）
フォーカス調整処理は、オートフォーカスモードにおいて制御部４６がフォーカス用駆動部２２を制御して撮影レンズ１４のフォーカスを自動的に調整する処理である。オートフォーカスモードによるフォーカス調整には、公知のオートフォーカス技術が利用可能である。

（ホワイトバランス調整処理）
ホワイトバランス調整処理は、選択領域の映像のホワイトバランスを制御部によって自動的に調整する処理である。ホワイトバランス調整処理は、公知のＡＷＢ（Auto White Balance）機能、例えば特開２００９－３３４１０号公報に記載された技術を利用して実行される。

［第１実施形態に係る映像作成の流れについて］
図９を参照しながら、第１実施形態に係る映像作成の流れを説明する。図９は、第１実施形態に係る映像作成フローについての説明図である。
なお、以下では、１つの第１映像（フレーム画像）を撮影する周期を便宜上、「１フレーム」と呼ぶこととする。

映像作成フローに際して、ユーザは、先ず、撮影装置１０を起動する。装置起動後には、制御部４６が、撮影条件及び露光条件を含む各種の条件について初期設定を行う（Ｓ００１）。このステップＳ００１において、露光時間（シャッタ速度）、絞り値（Ｆ値）及び感度（ＩＳＯ感度）等、露光量を決定する複数のパラメータの各々が初期値にプリセットされる。

その後、撮影装置１０による第１画角での映像撮影（すなわち、第１映像の撮影）が開始される。これに連動して、制御部４６による表示工程が実施され、ライブ映像である第１映像がディスプレイ２８の表示画面に表示される（Ｓ００２）。

ユーザが前述した設定操作を複数回行い、制御部４６が、それぞれの設定操作を受け付けて設定工程を実施する（Ｓ００３）。このステップＳ００３では、制御部４６が、表示画面に表示された第１映像を通じてユーザが行った設定操作に応じて、第１映像の撮影領域Ａ１中に複数の領域Ａ２を設定する。

また、ユーザが複数の領域Ａ２の中から選択領域を選択し、その選択結果を、タッチパネル３６等を通じて入力すると、制御部４６が選択工程を実施する（Ｓ００４）。このステップＳ００４では、制御部４６が、ユーザの入力操作に応じて複数の領域Ａ２の中から選択領域を選択する。

その後、ユーザが映像の記録を開始するためにレリーズボタン２６を押す等の操作を行うと、ステップＳ００５以降の工程が実施される。
先ず、ステップＳ００５では、制御部４６が１フレーム分の第１映像（つまり、フレーム画像）を取得する。次のステップＳ００６において、制御部４６は、取得した第１映像中、ステップＳ００３で設定された複数の領域Ａ２の各々について、各領域Ａ２の映像のＲＧＢ画素値の積算値を算出する。その後のステップＳ００７では、制御部４６が、各領域Ａ２について算出したＲＧＢ画素値の積算値に基づき、各領域Ａ２の適正露光量を特定する。

ステップＳ００７の実施後、制御部４６は、感度決定工程を実施し、撮像素子４０のうち、選択領域と対応する画素４２の感度（厳密には、ゲイン）を決定する（Ｓ００８）。映像作成フロー中、最初（１回目）のステップＳ００８では、選択領域の適正露光量、及び、初期値にプリセットされた露光時間及び絞り量に基づいて、選択領域と対応する画素４２の感度が決められる。
また、ステップＳ００８において、制御部４６は、選択領域と対応する画素４２の感度が決められた感度となるようにゲインを変更して選択領域の露光量を調整する。

その後、制御部４６は、記録工程（作成工程）を実施し、選択領域の映像を記録媒体に記録し、その映像ファイルである動画ファイルの作成を開始する（Ｓ００９）。このステップＳ００９において、制御部４６は、ステップＳ００８で決められた感度（ゲイン）で選択領域の映像を記録する。また、制御部４６は、選択領域の映像をディスプレイ２８の表示画面に表示する。

その後、制御部４６は、指定工程を実施し、ステップＳ００３で設定された複数の領域Ａ２のうち、所定の領域を基準領域として指定する（Ｓ０１０）。このステップＳ０１０では、複数の領域Ａ２に含まれる第１領域及び第２領域のうち、第１領域よりも適正露光量が小さい第２領域を基準領域として指定する。ここで、第１領域及び第２領域とは、相対的な概念であり、複数の領域Ａ２を比較して、適正露光量がより大きい領域が第１領域に該当し、適正露光量がより小さい領域が第２領域に該当する。

なお、本実施形態では、複数の領域Ａ２のうち、適正露光量が最小である領域Ａ２が基準領域として指定される。ただし、これに限定されるものではなく、他のいずれかの領域Ａ２よりも適正露光量が小さい領域Ａ２を基準領域として指定してもよい。

基準領域の指定後、制御部４６は、条件決定工程を実施し、次のフレームにて第１映像を撮影する際の露光時間及び絞り量（以下、次回の露光時間及び絞り量）を決定する（Ｓ０１１）。このステップＳ０１１では、制御部４６が、基準領域の適正露光量に基づいて次回の露光時間及び絞り量を決定する。

また、ステップＳ０１１において、制御部４６は、露光時間及び絞り量がステップＳ０１１にて決められた値になるように、これらの値を調整する。これにより、次のフレームでは、第１映像（フレーム画像）が、直前に指定された基準領域の適正露光量に基づく露出時間及び絞り量にて撮影されるようになる。

以上までに説明してきたステップのうち、第１映像を取得するステップＳ００５以降の一連の操作は、映像が記録される期間中、繰り返し実施される。そのため、ステップＳ０１１にて露光時間及び絞り量が決められると、直後のフレーム（すなわち、２回目以降のステップＳ００５）では、上記の露光時間及び絞り量にて第１映像が取得されるようになる。

また、ユーザが選択領域を一度選んだ後に選び直して入力操作を再度行った場合（Ｓ０１２）、制御部４６が切り替え工程を実施する（Ｓ０１３）。このステップＳ０１３では、制御部４６が、ユーザの入力操作に応じて、選択領域を複数の領域Ａ２の中から再選択して切り替える。

ステップＳ０１３が実施されて選択領域が切り替えられた場合、制御部４６は、その直後のフレームにおけるステップＳ００９にて、切り替え工程前の選択領域の映像と、切り替え工程後の選択領域の映像とをそれぞれ記録して映像ファイルを作成する。より詳しく説明すると、制御部４６は、切り替え工程前の選択領域の映像と、切り替え工程後の選択領域の映像とを結合して映像ファイルとしての動画ファイルを作成する。

そして、制御部４６は、ユーザが所定の操作を行って終了指示を行うまで、上述のステップＳ００５～Ｓ０１３を繰り返す（Ｓ０１４）。

以上のように本実施形態では、複数の領域Ａ２のうち、適正露光量がより小さい領域を基準領域とし、基準領域の適正露光量に基づいて次回の露光時間及び絞り量を決定することを特徴とする。これにより、選択映像を切り替える際に過度な露光（露出オーバー）が抑えられ、切り替え後の映像を良好な画質とすることができる。

上記の効果について詳しく説明すると、選択領域が切り替えられると、切り替え後の選択領域の露光量が適正露光量となるように露光時間及び絞り量を決めるのが一般的である。
一方、複数の領域Ａ２のうち、選択領域以外の領域Ａ２（以下、未選択領域）の明るさが選択領域の明るさより大きくなる場合がある。かかる場合、選択領域の露光量をその適正露光量に基づいて決めてしまうと、未選択領域の映像のＲＧＢ画素値が飽和してしまう可能性がある。その結果、各領域Ａ２の適正露光量が正しく計算されなくなる虞がある。また、未選択領域（厳密には、適正露光量が選択領域よりも小さい未選択領域）が選択領域に切り替わったときには過度な露光が生じる可能性がある。

これに対して、本実施形態では、適正露光量がより小さい領域Ａ２（厳密には、適正露光量が最小である領域Ａ２）を基準領域とし、基準領域の適正露光量に基づいて露光時間及び絞り量が決定される。これにより、上述した過度な露光等の不具合を抑えることができ、映像撮影中の露光時間等の条件をより適切に決めることができる。

また、本実施形態では、前述したように、映像が記録される間、上述のステップＳ００５～Ｓ０１３を１フレーム毎に実施する。そして、複数の領域Ａ２のうち、適正露光量がより大きい第１領域が選択領域として選択された場合、２回目以降のフレームでは、直前のフレームで決められた条件に基づいて選択領域の露光量が決められる。

具体的に説明すると、２回目以降のフレームにおいてステップ００８で実施される感度決定工程では、選択領域（すなわち、第１領域）と対応する画素４２の感度（ゲイン）が決められる。このとき、感度は、その時点で選択領域である第１領域の適正露光量と、直前のフレームにおけるステップＳ０１１（すなわち、条件決定工程）にて決定された露光時間及び絞り量とに基づいて決められる。また、本実施形態では、上記の感度が、基準領域である第２領域と対応する画素４２の感度よりも高くなるように決められる。これにより、選択領域と対応する画素４２の感度が適切に決められ、選択領域である第１領域の露光量が、その適正露光量になるように調整される。

なお、選択領域の露光量を増やして適正化する手法としては、上述のように選択領域と対応する画素４２の感度を上げる手法以外にも考えられる。例えば、選択領域の映像に対してフレーム合成を行うことで選択領域の露光量を増やしてもよい。フレーム合成とは、時間軸で連続する複数フレーム分の画像信号を足し合わせて信号加算する信号処理である。
ただし、フレーム合成が行われる映像中に動く被写体が映っていると、フレーム合成に伴って被写体の残像が生じ得る。そのため、フレーム合成による露光量の調整は、被写体が動いていない映像に限って適用するのがよい。

＜＜第２実施形態＞＞
選択領域が切り替えられた場合にのみ基準領域を再指定する第２実施形態について、図１０を参照しながら説明する。図１０は、第２実施形態に係る映像作成フローについての説明図である。
なお、以下では、第２実施形態のうち、第１実施形態と異なる事項を主として説明することとする。

第２実施形態に係る映像作成フロー中の各ステップは、図９及び１０を比較すると分かるように、第１実施形態に係る映像作成フロー中の各ステップと概ね共通する。
具体的に説明すると、第２実施形態に係る映像作成フローにおけるステップＳ０２１～Ｓ０２９は、第１実施形態に係る映像作成フローにおけるステップＳ００１～Ｓ００９と共通する。また、映像が記録される期間中にステップＳ０２５以降のステップがフレーム毎に繰り返される点でも、第２実施形態に係る映像作成フローは、第１実施形態に係る映像作成フローと共通する。

他方、第２実施形態では、指定工程が実施されて基準領域が一度指定されると、その後は、切り替え工程が実施された場合に限り指定工程が実施される。また、第２実施形態では、指定工程が実施される度に条件決定工程が実施される。以上の点において、第２実施形態は第１実施形態と異なる。

第２実施形態に係る映像作成フローについて第１実施形態との相違点を説明すると、図１０に示すように、第２実施形態では、各フレームにおいて、基準領域が既に指定されているかどうかを判定する（Ｓ０３０）。

基準領域が指定されていない場合には、制御部４６が指定工程を実施し、複数の領域Ａ２の中の第２領域（具体的には、適正露光量が最小である領域）を基準領域として指定する（Ｓ０３１）。その後、制御部４６は、条件決定工程を実施し、ステップＳ０３１で指定された基準領域の適正露光量に基づいて、次回の露出時間及び絞り量を決定する（Ｓ０３２）。
なお、通常の場合、撮影映像の記録開始直後（すなわち、１回目のフレーム）に限り、ステップＳ０３１及びＳ０３２が行われる。

基準領域が既に指定されている場合には、ユーザが選択領域を一度選んだ後に選び直して入力操作が再度行われたかどうかを判定する（Ｓ０３３）。選択領域の再選択が行われていない場合には、その時点での基準領域（つまり、現在の基準領域）が維持される。そして、制御部４６は、条件決定工程で次回の露出時間及び絞り量を決定する際に、現在の基準領域の適正露光量に基づいてこれらの値を決定する（Ｓ０３４）。

他方、選択領域の再選択が行われた場合、制御部４６は、切り替え工程を実施し、ユーザの入力操作に応じて、選択領域を複数の領域Ａ２の中から再選択して切り替える（Ｓ０３５）。また、制御部４６は、切り替え工程に連動して指定工程を実施し、当該指定工程にて基準領域を再指定する（Ｓ０３６）。さらに、制御部４６は、直後の条件決定工程において、再指定された基準領域の適正露光量に基づいて次回の露出時間及び絞り量を決定する（Ｓ０３７）。

第２実施形態に係る映像作成フローでは、ユーザが終了指示を行うまでの間、上述のステップＳ０２５～Ｓ０３７が繰り返し実施される（Ｓ０３８）。

以上のように、第２実施形態に係る映像作成フローでは、選択領域が切り替えられた場合に限り、基準領域の再指定を許容する。これにより、基準領域が１フレーム毎に変わる第１実施形態に比べ、選択映像の画質がより安定する。
なお、第２実施形態は、上記の相違点以外の点では第１実施形態と共通しており、第１実施形態で得られる効果と同様の効果を得ることができる。

＜＜第３実施形態＞＞
選択領域の選択又は再選択が行われた直後に基準領域の適正露光量に基づいて露光時間等の条件を決める第３実施形態について、図１１を参照しながら説明する。図１１は、第３実施形態に係る映像作成フローについての説明図である。なお、以下では、第３実施形態のうち、第１実施形態と異なる事項を主として説明することとする。

第３実施形態に係る映像作成フロー中の各ステップは、図１０及び１１から分かるように、第２実施形態に係る映像作成フロー中の各ステップと略共通する。

第３実施形態に係る映像作成フローにおいて、選択領域が最初に選択された直後、又は選択領域が再選択された直後には、制御部４６が指定工程を実施する（Ｓ０５１、Ｓ０５６）。指定工程において、制御部４６は、その時点で第２領域に該当する領域Ａ２（厳密には、適正露光量が最小である領域Ａ２）を基準領域として指定する。そして、指定工程の直後に実施される条件決定工程（すなわち、Ｓ０５２、Ｓ０５７）では、指定工程にて指定された基準領域の適正露光量に基づいて露光時間等の条件を決定する。以下、このような条件決定工程を「第１決定工程」と呼ぶこととする。

他方、選択領域が選択済みであり、且つ、選択領域の再選択（切り替え）がないフレームでは、指定工程を実施しない。このようなフレームにおける条件決定工程（Ｓ０５４）では、選択領域が選択された時点又は再選択された時点の基準領域の適正露光量と、現在の選択領域の適正露光量の変化量に基づいて露出時間等の条件を決定する。以下、このような条件決定工程を「第２決定工程」と呼ぶこととする。

第１決定工程では、その時点での基準領域の適正露光量に基づいて露光時間等の条件を決定する。また、第１決定工程が実施された後の調整工程において第２決定工程が実施される。第２決定工程では、調整工程における露光量（詳しくは、第１映像撮影時の露光量）の調整量を、その時点での選択領域の適正露光量の経時的変化を加味して決定する。調整工程では、第１決定工程で決められた露光時間等の条件と、第２決定工程で決められた調整量とに基づいて、第１映像撮影時の露光量を調整する。

以上の内容について図１２～１５を参照しながら詳しく説明する。
図１２は、基準領域及び選択領域の各々の適正露光量の経時変化を示している。図１３は、基準領域の適正露光量に基づいて調整し続けた場合の選択領域の調整後の露光量を示している。図１４は、第３実施形態における目標露光量を示している。図１５は、第３実施形態における基準領域及び選択領域の各々の調整後の露光量の推移を示している。
なお、図１２～１５の各図において、横軸は、映像記録の開始時点からの経過時間（詳しくは、経過フレーム数）を示しており、縦軸は、露光量の大きさを示している。

ここで、「調整後の露光量」とは、調整工程において１フレーム毎に調整される露光量の、各フレームにて最終的に到達した実際の値を意味する。
また、「目標露光量」は、調整工程において１フレーム毎に調整される露光量の、各フレームにて達成することが期待される目標値であり、適正露光量に応じた値（例えば、適正露光量に相当する値）に設定される。

具体的なケースとして、基準領域及び選択領域の各々の適正露光量が図１２に示すように変化するケースを想定する。このケースでは、選択領域の適正露光量（図中、ＥＩｔと表記）が比較的安定しているのに対し、基準領域の適正露光量（図中、ＥＩｓと表記）が大きく変動している。なお、図１２に示すケースでは、経過時間がｔｃである時点で選択領域が再選択された（切り替わった）こととする。

上記のケースは、第１映像撮影時の露光量を１フレーム毎に調整する際に、各フレームで基準領域の適正露光量に基づいて調整することとする。このとき、基準領域及び選択領域の調整後の露光量は、図１３に示すように推移する。調整後の基準領域の露光量（図中、ＥＲｓと表記）は、その適正露光量と同様に大きく変動する。調整後の選択領域の露光量（図中、ＥＲｔと表記）は、適正露光量になるように選択領域と対応する画素４２の感度（ゲイン）が変更されることで、適正露光量と同様の変化傾向を示す。

しかし、調整後の選択領域の露光量を決める感度（ゲイン）は、調整後の基準領域の露光量、換言すると、基準領域の適正露光量に影響される。このため、基準領域の適正露光量が大きく変更すると、感度（ゲイン）が大きく変わるため、選択領域の映像にてノイズが増減する等の不具合が生じる虞がある。

これに対して、第３実施形態では、選択領域の選択直後又は再選択直後に限り、基準領域を指定して第１決定工程を実施する。第１決定工程では、選択領域の選択時又は再選択時での基準領域の適正露光量（図１２中、ｅ１と表記）に基づいて、露光時間等の条件が決められる。

また、第１決定工程以降の期間（すなわち、選択領域が選択済みであり、且つ、選択領域の再選択が行われていない期間）には、１フレーム毎に第２決定工程を実施する。各フレームの第２決定工程では、選択領域の選択時又は再選択時での基準領域の適正露光量ｅ１と、現在の選択領域の適正露光量の変化量に基づいて露光量の調整量を決定する。ここで、「選択領域の適正露光量の変化量」とは、直前のフレームでの選択領域の適正露光量と、今回のフレームでの選択領域の適正露光量との差分のことであり、図１２中、記号Δにて表記されている。

以上のように第１決定工程が実施され、それ以降には第２決定工程が１フレーム毎に実施されることで、各フレームにおける目標露光量が決められる。より詳しく説明すると、図１４に示すように、選択領域が再選択された時点ｔｃでの目標露光量（図中、ＥＧと表記）は、その時点での基準領域の適正露光量ｅ１に基づいて設定される。それ以降の目標露光量ＥＧは、選択領域の適正露光量の変化に追従して決定され、具体的には、毎フレームにおいて適正露光量の差分Δだけ変化する。

そして、調整工程中の各フレームでは、第１映像撮影時の露光量が各フレームで決められる目標露光量ＥＧとなるように、露光時間等の条件を決める。これにより、調整後の基準領域の露光量ＥＲｓが、図１５に示すように上記の目標露光量ＥＧに応じた露光量となる。ここで、目標露光量ＥＧは、選択領域の適正露光量の変化を反映しているので、調整後の基準領域の露光量ＥＲｓは、図１５に示すように比較的安定して推移するようになる。

また、調整工程中の各フレームでは、選択領域の露光量を各フレームで決められる露光時間等の条件に基づいて調整する。より詳しく説明すると、各フレームでは、選択領域と対応する画素４２の感度（ゲイン）を、各フレームで決められる露光時間等の条件と、各フレームにおける選択領域の適正露光量とに応じて決める。これにより、調整後の選択領域の露光量ＥＲｔは、図１５に示すように、各フレームにおいて適正露光量に相当する露光量となる。

さらに、図１５から分かるように、調整後の選択領域の露光量を決める感度（ゲイン）が比較的安定する。これは、感度を決めるベースとなる目標露光量ＥＧが安定しているためである。この結果、選択領域の映像でのノイズの増減等の不具合が抑えられるようになる。

以上までに説明してきたように、第３実施形態では、選択領域の選択直後又は再選択直後に限り、基準領域の適正露光量に基づいて露光時間等の条件を決める。それ以外の期間については、選択領域の適正露光量の変化に基づいて露光量の調整量を決める。これにより、選択領域の再選択（切り替え）が行われていない間、選択領域の映像の画質を安定させることができる。

＜＜第４実施形態＞＞
切り替え工程の実施直後には、通常より速い調整速度にて露光量を調整する第４実施形態について、図１６を参照しながら説明する。図１６は、第４実施形態に係る映像作成フローについての説明図である。

図１６から分かるように、第４実施形態に係る映像作成フローのうち、ステップＳ０６１～Ｓ０６７は、第１実施形態に係る映像作成フローにおけるステップＳ００１～Ｓ００７と共通する。

以下、第４実施形態に係る映像作成フローのうち、ステップＳ０６８～Ｓ０７４について詳しく説明する。第４実施形態に係る映像作成フローでは、切り替え工程が実施された場合に、その切り替え工程の実施時点からの経過時間に応じて以降のステップが変わる（Ｓ０７０）。

具体的に説明すると、ある時点（あるフレーム）で制御部４６が切り替え工程を実施して選択領域を切り替えたとする。この場合、制御部４６は、ステップＳ０７０において、そのフレームからの経過時間（厳密には、経過フレーム数）を計測する。そして、直前の切り替え工程の実施から第１期間が経過するまでの間、制御部４６は、第１記録工程を実施する（Ｓ０７１）。第１記録工程は、第１期間における選択領域の映像を記録する工程である。第１期間は、任意の期間に決められるが、好ましくは、１秒以内の範囲で決められるとよい。

また、現時点（現フレーム）が第１期間にあるとき、制御部４６は、選択領域の露光量を次のフレームに備えて調整する調整工程を実施する（Ｓ０７２）。このステップＳ０７２では、選択領域の露光量を、その時点での適正露光量に基づき、通常よりも速い調整速度で調整する。具体的には、調整工程において、露光量調整のために絞り駆動部２３を駆動させて絞り量を変更する際に、絞り駆動部２３の駆動速度を通常の駆動速度よりも速く設定する。
なお、第１期間における調整工程での調整速度は、通常の調整速度よりも速い限り、任意に決めることができるが、好ましくは、通常の調整速度に対して１．５倍以上速い速度であるのがよく、より好ましくは、２倍以上速い速度であるとよい。

他方、直前の切り替え工程の実施から第１期間が経過した後、つまり、現時点（現在のフレーム）が第１期間以外の第２期間にある場合、制御部４６は、第２記録工程を実施する（Ｓ０７３）。第２記録工程は、第２期間における選択領域の映像を記録する工程である。

また、現時点（現フレーム）が第２期間にあるとき、制御部４６は、選択領域の露光量を次のフレームに備えて調整する調整工程を実施する（Ｓ０７４）。このステップＳ０７４では、選択領域の露光量を、その時点での適正露光量に基づき、通常の調整速度で調整する。具体的には、露光量調整のために絞り駆動部２３を通常の駆動速度で駆動して絞り量を変更する。

以上のように、第４実施形態では、第１期間に実施される調整工程で、第２期間に実施される調整工程よりも露光量の調整速度（具体的には、絞り駆動部２３の駆動速度）を速く設定する。これにより、切り替え工程が実施された場合に、切り替え工程後の選択領域の露光量を速やかに調整（適正化）することができる。この結果、切り替え工程後の選択領域の映像が適切な露光量にて取得され、その画質が良好になる。

なお、第４実施形態の具体例として挙げた上記のケースでは、調整工程において選択領域の露光量を調整することとした。ただし、切り替え工程の実施後に速やかに調整されるべき条件は、露光量以外にもあり、例えば、選択領域の映像のホワイトバランス、及び撮影レンズ１４のフォーカス等が挙げられる。

第４実施形態では、選択領域の露光量、選択領域の映像のホワイトバランス、及びフォーカスのうち、少なくとも一つの条件を調整する調整工程を、第１期間及び第２期間のそれぞれにおいて実施することができる。この場合、第１期間において実施される調整工程では、第２期間において実施される調整工程よりも条件（調整対象の条件）の調整速度を速くすればよい。

具体的には、調整工程において露光量調整のために絞り駆動部２３を駆動させて絞り量を変更する場合、第１期間における調整工程では、絞り駆動部２３の駆動速度を、第２期間における調整工程よりも速くすればよい。
また、調整工程においてフォーカス調整のためにフォーカス用光学部品１９を移動させる場合、第１期間における調整工程では、フォーカス用光学部品１９の移動速度を、第２期間における調整工程よりも速くすればよい。

＜＜第５実施形態＞＞
切り替え工程の実施直後には絞り量以外のパラメータを優先的に変更して露光量を調整する第５実施形態について、図１７及び１８を参照しながら説明する。図１７は、第５実施形態に係る映像作成フローについての説明図である。図１８は、調整用データが定める変更パターンの一例を示している。
なお、図１８に示す変更パターンの各数値は、説明上の便宜を図るために定められた値であり、実際の変更パターンに規定された値とは異なる。

第５実施形態に係る映像作成フローは、第４実施形態に係る映像作成フローと概ね共通する。すなわち、第５実施形態に係る映像作成フローでは、先ず、各種条件の初期設定を行い、映像の撮影開始に伴って第１映像を表示し、複数の領域Ａ２を設定し、その中から選択領域を選択する（Ｓ０８１～Ｓ０８４）。その後、ユーザによるレリーズボタン２６の押下げ操作等を契機として、ステップＳ０８５以降の工程（ステップＳ０８５～Ｓ０９４）が実施される。

具体的に説明すると、１フレーム分の第１映像を取得し、複数の領域Ａ２の各々についてＲＧＢ画素値の積算値を算出し、その積算値から適正露光量を特定する（Ｓ０８５～Ｓ０８７）。その後、選択領域の映像が記録され（Ｓ０９１、Ｓ０９３）、且つ、選択領域の露光量が次のフレームに備えて調整される（Ｓ０９２、Ｓ０９４）。

また、選択領域の再選択が行われた場合には、切り替え工程を実施して選択領域を切り替える（Ｓ０８８、Ｓ０８９）。切り替え工程実施後のステップは、その切り替え工程の実施時点からの経過時間に応じて変わる（Ｓ０９０）。
具体的には、現時点（現フレーム）が前述の第１期間にある場合には、制御部４６が第１記録工程を実施する（Ｓ０９１）。また、現時点（現フレーム）が第１期間にあるとき、制御部４６は、第１調整工程を実施して、選択領域の露光量を次のフレームに備えて調整する（Ｓ０９２）。

他方、現時点（現フレーム）が前述の第２期間にある場合には、制御部４６が第２記録工程を実施する（Ｓ０９３）。また、現時点（現フレーム）が第２期間にあるとき、制御部４６は、第２調整工程を実施して、選択領域の露光量を次のフレームに備えて調整する（Ｓ０９４）。
以上までの一連の工程（すなわち、ステップＳ０８５～Ｓ０９４）は、ユーザが終了指示を行うまでの間、繰り返し実施される（Ｓ０９５）。

第５実施形態における第１調整工程及び第２調整工程について説明すると、各調整工程では、選択領域の露光量を、その時点での適正露光量に基づき、調整用データを用いて目標露光量に調整する。より詳しく説明すると、各調整工程では、露光時間（シャッタ速度）、画素４２の感度（ＩＳＯ感度）、及び絞り量（Ｆ値）を含む複数のパラメータの各々の値を調整用データに基づいて決める。その後、各パラメータの値を決められた値に変更し、選択領域の露光量を目標露光量になるように調整する。

調整用データは、変更パターンを定めたデータであり、変更パターンと同じ数だけ用意されており、撮影装置本体１２の内部メモリ５０又はバッファ５６に記録されている。変更パターンは、露光量を目標露光量に調整するために複数のパラメータの各々の値を変更させるパターン（変化傾向）を規定したものである。

そして、第５実施形態では、第１調整工程と第２調整工程との間で、同一の目標露光量に調整するために用いられる調整用データが互いに異なっている。すなわち、第１調整工程で用いられる第１調整用データと、第２調整工程で用いられる第２調整用データとの間では、同一の目標露光量に対して定められた複数のパラメータの各々の値が互いに異なっている。

第１調整用データと第２調整用データとの違いについて図１８を参照しながら説明する。図１８に示す２つの調整用データは、いずれも、露光量を値ｅｐから目標値ｅｔ（目標露光量）に調整するための絞り量、露光時間及び感度の各々の変更パターンを規定している。つまり、図１８に示すように、調整用データが規定する変更パターンのうち、調整開始時点における各パラメータの値、及び、調整終了時点における各パラメータの値は、２つの調整用データの間で共通している。

一方、第１調整用データ（図１８中、上側に示す）が定める変更パターンでは、絞り量が段階的に徐々に増える。絞り量以外のパラメータである露光時間は、調整開始直後に急速に増え、その後は絞り量の増加に応じて減少する。
これに対して、第２調整用データ（図１８中、下側に示す）が定める変更パターンでは、絞り量が調整開始直後に最終値まで一気に増加して、その後は最終値で維持される。露光時間は、調整期間中、変化せずに一定値で維持される。

以上のように、第１調整用データに規定される変更パターンでは、第２調整用データの変更パターンに比べて、目標露光量に対する絞り量の変更度合い（時間あたりの変化量）が小さくなっている。
換言すると、第２調整用データを用いた第２調整工程では、露光量の調整時に絞り量を優先的に変更するのに対し、第１調整用データを用いた第１調整工程では、露光量の調整時に絞り量以外のパラメータを優先的に変更する。

以上のように、第５実施形態では、選択領域が切り替えられた直後に露光量を調整する際には、メカ駆動を伴う絞り量の変更よりも、絞り量以外のパラメータ（具体的には、露出時間）の変更を優先する。露出時間、すなわち電子シャッタのシャッタ速度は、デジタル処理によって変えられるため、絞り量よりも素早く変更することができる。これにより、切り替え後の選択領域の露光量を迅速に調整することができる。また、絞り量の急な変更に伴う明るさの微変動が抑えられるので、その微変動に起因する影響が映像の画質に及ぶのを抑制することができる。この結果、切り替え工程後の選択領域の映像を良好な画質とすることができる。

なお、上記のケースでは、第１調整工程において露出時間を絞り量よりも優先して変更したが、これに限定されず、第１調整工程において選択領域と対応する画素４２の感度（ゲイン）を絞り量よりも優先して変更してもよい。
また、電子減光フィルタ２１を備える構成であれば、露光量を調整するための複数のパラメータに、電子減光フィルタ２１の調光度合いを含めてもよい。かかる場合には、電子減光フィルタ２１の調光度合い（より直接的には、電子減光フィルタ２１への印加電圧）を絞り量よりも優先して変更することができる。これにより、絞り量の変更、及びシャッタ速度の高速化を抑えることができる。

＜＜第６実施形態＞＞
前述した５つの実施形態では、映像が動画、すなわち、一定のフレームレートにて連続的に撮影される複数のフレーム画像の集合であることとした。ただし、記録される映像は、動画に限られず、静止画であってもよい。

例えば、制御部４６は、第１映像をスルー画像としてディスプレイ２８に表示し、第１映像の撮影領域Ａ１において部分的な領域Ａ２を複数設定する。そして、ユーザが複数設定された領域Ａ２の一つを選択領域として選択した場合、制御部４６は、選択領域の映像を抽出して図７に示すようにディスプレイ２８に表示する。抽出された選択領域の映像が表示されている状態において、ユーザの記録指示が入力された場合、制御部４６は、記録媒体に選択領域の映像の静止画ファイルを記録する。

なお、記録される映像が静止画である場合、露光時間を規定するシャッタ速度は、電子シャッタのシャッタ速度であってもよく、メカ部品であるシャッタ３８（フォーカルプレンシャッタ）のシャッタ速度であってもよい。

＜＜その他の実施形態＞＞
以上までに説明してきた実施形態は、本発明の一実施形態の映像作成方法を分かり易く説明するために挙げた具体例であり、あくまでも一例に過ぎず、その他の実施形態も考えられ得る。
例えば、上述した実施形態では、電子減光フィルタ２１を備えた撮影装置１０を説明したが、電子減光フィルタ２１を有しない撮影装置であってもよい。
また、上述した実施形態では、撮影装置１０がオートフォーカス機能を有していることとしたが、これに限定されるものではなく、オートフォーカス機能を搭載していない撮影装置であってもよい。すなわち、フォーカス用駆動部２２が設けられてなく、フォーカスリング１６の操作のみ（すなわち、手動のみ）でフォーカスを調整する撮影装置を用いてもよい。

また、上記の実施形態では、撮影装置１０が映像作成装置として映像ファイルを作成することとしたが、これに限定されるものではない。例えば、撮影装置と有線又は無線にて接続された他の機器、例えば、カメラコントローラ又は外付け型のレコーダを映像作成装置として用いてもよい。そして、これらの機器により、撮影装置に撮影された映像の映像ファイルを作成してもよい。

また、上述した実施形態では、撮影装置がデジタルカメラであったが、ビデオカメラ、撮像光学系付きの携帯電話、スマートフォン及びタブレット型端末などの携帯端末であってもよい。
また、撮像レンズは、上述した携帯端末の撮像光学系に外付けされるようなレンズユニットであってもよい。

１０ 撮影装置
１２ 撮影装置本体
１３ マウント
１４ 撮影レンズ
１６ フォーカスリング
１８ 光学部品ユニット
１９ フォーカス用光学部品
２０ 絞り
２１ 電子減光フィルタ
２２ フォーカス用駆動部
２３ 絞り駆動部
２４ 電圧印加部
２６ レリーズボタン
２８ ディスプレイ
３０ 第１操作ボタン
３２ 第２操作ボタン
３４ 第３操作ボタン
３６ タッチパネル
３８ シャッタ
４０ 撮像素子
４２ 画素
４４ アナログ信号処理回路
４６ 制御部
４７ コントローラ
４８ 映像処理部
５０ 内部メモリ
５２ カードスロット
５４ メモリカード
５６ バッファ
Ａ０ 単位領域
Ａ１ 撮影領域
Ａ２ 領域
Ｌ１ 光軸
ＦＲ 領域設定枠

Claims (8)

1. 撮影レンズ及び撮像素子を備える撮影装置によって撮影した映像に基づき、映像ファイルを作成する映像作成方法であって、
   プロセッサが、第１画角である第１映像の撮影領域の中に、前記第１画角よりも小さい第２画角である複数の領域を設定する設定工程と、
   前記プロセッサが、前記複数の領域に含まれる第１領域及び第２領域のうち、前記第１領域よりも適正露光量が小さい前記第２領域を基準領域として指定する指定工程と、
   前記プロセッサが、前記基準領域の前記適正露光量に基づいて、前記第１映像を撮影する際の露光時間及び前記撮影レンズへの入射光に対する絞り量のうち、少なくとも一つの条件を決定する条件決定工程と、
   前記プロセッサが、記録される映像の撮影領域である選択領域を、前記複数の領域の中から選択する選択工程と、
   前記プロセッサが、前記選択工程の後に、前記選択領域を前記複数の領域の中から再選択して前記選択領域を切り替える切り替え工程と、
   前記プロセッサが、前記切り替え工程前の前記選択領域の映像と、前記切り替え工程後の前記選択領域の映像とをそれぞれ記録して前記映像ファイルを作成する作成工程と、を備える、映像作成方法。
2. 前記作成工程では、前記切り替え工程前の前記選択領域の映像と、前記切り替え工程後の前記選択領域の映像とを結合して前記映像ファイルとしての動画ファイルを作成する、請求項１に記載の映像作成方法。
3. 前記切り替え工程が実施された場合には前記指定工程が実施され、
   前記指定工程が実施される度に前記条件決定工程が実施される、請求項１又は２に記載の映像作成方法。
4. 前記第１領域が前記選択領域として選択された場合に、前記プロセッサが、前記撮像素子が備える複数の画素のうち、前記第１領域と対応する前記画素の感度を、前記第１領域の前記適正露光量、及び前記条件決定工程にて決定された前記条件に基づいて決定する感度決定工程をさらに備える、請求項１乃至３のいずれか一項に記載の映像作成方法。
5. 前記感度決定工程では、前記第１領域と対応する前記画素の感度を、前記基準領域である前記第２領域と対応する前記画素の感度よりも高くなるように決定する、請求項４に記載の映像作成方法。
6. 前記プロセッサが、前記条件を経時的に変化させることで、前記第１映像を撮影する際の露光量を経時的に調整する調整工程をさらに備え、
   前記条件決定工程は、
   前記基準領域の前記適正露光量に基づいて、前記条件を決定する第１決定工程と、
   前記選択領域の前記適正露光量に基づいて、前記調整工程における前記露光量の調整量を決定する第２決定工程と、を含み、
   前記調整工程は、前記第１決定工程で決められた前記条件と、前記第２決定工程で決められた前記調整量に基づいて実施される、請求項１乃至５のいずれか一項に記載の映像作成方法。
7. 前記切り替え工程が実施された場合に、前記第１決定工程を実施し、
   前記第１決定工程が実施された後の前記調整工程において前記第２決定工程を実施する、請求項６に記載の映像作成方法。
8. 前記プロセッサが、前記第１映像を表示画面に表示させる表示工程をさらに備え、
   前記設定工程では、前記表示画面に表示された前記第１映像を通じてユーザが行った設定操作に応じて、前記複数の領域を設定する請求項１乃至７のいずれか一項に記載の映像作成方法。