JP7385667B2 - 撮影装置、及び撮影方法 - Google Patents

Description

本発明は、動画像である映像を撮影する撮影装置、及び、撮影装置を用いた撮影方法に関する。

動画像である映像を撮影する撮影装置の中には、特許文献１及び２に記載された撮影装置のように、撮影画角から指定された範囲を抽出し、その抽出範囲の映像を記録するものが存在する。
特許文献１及び２に記載された撮影装置は、画角内における抽出範囲の位置等を所定の速度にて変化させる機能を備える。この機能を利用すれば、例えば、撮影中に撮影装置を人手で動かさなくとも、映像中の被写体を追尾したり、記録映像のアングルを一定方向にスライド移動させたりすることができる。

特開２０１７－４６３５５号公報 特開２０１９－２２０２６号公報

抽出範囲を移動させながら抽出範囲内の映像を記録する場合には、ユーザの入力操作等の手間を極力省き、より簡単に抽出範囲の位置等を変化させることが求められる。
しかし、特許文献１及び２に記載された撮影装置では、抽出範囲の移動開始前、又は抽出範囲の移動中に種々の設定事項を入力する等の操作が必要となる。

本発明は、上記の事情に鑑みてなされたものであり、以下に示す目的を解決することを課題とする。
本発明は、上記従来技術の問題点を解決し、画角内において抽出範囲を移動させながら抽出範囲内の映像を記録することをより容易にする撮影装置及び撮影方法を提供することを目的とする。

上記の目的を達成するために、本発明の撮影装置は、動画像である基準映像を撮影するイメージセンサと、イメージセンサを収容する筐体と、筐体の動きを検出するための検出器と、プロセッサと、を備え、プロセッサは、基準映像を撮影する際の画角内に、画角よりも小さい抽出範囲を設定する設定処理と、抽出範囲内の抽出映像を基準映像から抽出する抽出処理と、検出器により検出された動きに応じて、画角における抽出範囲を経時的に移動させる移動処理と、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する記録処理と、を実行することを特徴とする。
上述した本発明の撮影装置によれば、検出部によって検出された筐体の動きに応じて抽出範囲を移動させることができるため、画角内において抽出範囲を移動させながら抽出映像を記録することが、より容易になる。

また、本発明の撮影装置は、抽出映像を表示する表示器をさらに備えてもよい。この場合、プロセッサは、移動処理において、抽出範囲を移動させ、且つ、抽出範囲が移動している間の抽出映像を表示器に表示させると、より好ましい。

また、プロセッサは、検出器が動きを検出した場合に、抽出範囲の端が画角の端に至ったか否かを判定する判定処理を実行し、プロセッサは、判定処理にて抽出範囲の端が画角の端に至ったと判定した場合に移動処理を実行してもよい。
さらに、検出器が動きとして筐体の水平方向の第１側への移動を検出した場合に、プロセッサは、判定処理にて、第１側とは反対の第２側に位置する抽出範囲の端が、第２側に位置する画角の端に至ったか否かを判定し、プロセッサは、判定処理にて抽出範囲の端が画角の端に至ったと判定した場合、第１側へ抽出範囲を移動させると、より好ましい。

また、プロセッサは、移動処理において、移動の開始から抽出範囲の端が画角の端に至るまでの時間に応じた移動速度で抽出範囲を移動させると、より好ましい。

また、検出器が動きを検出した場合に、プロセッサは、動きの検出前後で抽出映像内に映る被写体を追尾対象として選定し、移動処理において、被写体が抽出範囲内に入るように抽出範囲を移動させてもよい。
さらに、移動処理の実行中、被写体が画角から外れた場合、プロセッサは、移動処理を終了すると、より好ましい。

また、プロセッサは、移動処理において、抽出範囲のサイズに対する被写体の映像の大きさの割合に基づいてサイズを変えながら、抽出範囲を移動させると、より好ましい。

また、プロセッサは、移動処理の実行中に検出器が筐体の動きを検出した場合に、抽出範囲が移動している間の抽出映像に対して手振れ補正を行う手振れ補正処理をさらに実行してもよい。

また、移動処理の実行中、抽出範囲の移動方向とは逆方向への筐体の動きを検出器が検出した場合、プロセッサは、移動処理を終了してもよい。

また、プロセッサは、抽出映像内の被写体の映像に対してズームを行うズーム処理をさらに実行し、移動処理の実行中にズーム処理を実行した場合、移動処理において、抽出範囲の移動速度をズームに応じて調整してもよい。

また、本発明によれば、動画像である基準映像を撮影するイメージセンサと、プロセッサと、を備え、プロセッサは、基準映像を撮影する際の画角内に、画角よりも小さい抽出範囲を設定する設定処理と、抽出範囲の抽出映像を基準映像から抽出する抽出処理と、抽出映像内の被写体の映像に対してズームを行うズーム処理と、画角における抽出範囲を、ズーム処理で行われたズームに応じた移動速度にて経時的に移動させる移動処理と、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する記録処理と、を実行する撮影装置も実現可能である。

また、上記の撮影装置は、抽出映像を表示する表示器をさらに備えてもよい。この場合、プロセッサは、移動処理において、抽出範囲を移動させ、且つ、抽出範囲が移動している間の抽出映像を表示器に表示させると、より好ましい。

また、上記の撮影装置において、ズーム処理は、撮影装置と抽出映像内の被写体との距離に応じて抽出範囲のサイズを変えることにより、被写体の映像に対して電子ズームを行う処理であり、プロセッサは、移動処理において、電子ズームに応じた移動速度にて抽出範囲を移動させてもよい。
また、上記の撮影装置において、ズーム処理は、撮影装置のレンズを光軸に沿って移動させることにより、抽出映像内の被写体の映像に対して光学ズームを行う処理であり、プロセッサは、移動処理において、光学ズームに応じた移動速度にて抽出範囲を移動させてもよい。

また、本発明によれば、動画像である基準映像を撮影するイメージセンサを有する撮影装置を用いた撮影方法であって、基準映像を撮影する際の画角内に、画角よりも小さい抽出範囲を設定する設定工程と、抽出範囲内の抽出映像を基準映像から抽出する抽出工程と、検出器により検出された撮影装置の動きに応じて、画角における抽出範囲を経時的に移動させる移動工程と、移動工程により抽出範囲が移動している間の抽出映像を記録媒体に記録する記録工程と、を含むことを特徴とする撮影方法も実現可能である。

本発明の撮影装置及び撮影方法によれば、画角内において抽出範囲を移動させながら抽出範囲内の映像を記録することが、より容易になる。

本発明の一つの実施形態に係る撮影装置の外観を正面側から見た図である。 本発明の一つの実施形態に係る撮影装置の外観を背面側から見た図である。 本発明の一つの実施形態に係る撮影装置が備える撮影装置本体の構成を示す図である。 撮影装置の動きについての説明図である。 追尾対象の被写体が存在するケースで抽出範囲が移動する様子を示す図である。 図５に示すケースでの抽出映像の遷移を示す図である。 追尾対象の被写体が存在しないケースで抽出範囲が移動する様子を示す図である。 図７に示すケースでの抽出映像の遷移を示す図である。 抽出範囲の移動モードの選択画面の一例を示す図である。 判定処理についての説明図である。 画角端近傍エリアについての説明図である。 追尾モードが選択された場合の処理フローを示す図である（その１）。 追尾モードが選択された場合の処理フローを示す図である（その２）。 ユーザが撮影装置を動かした場合の画角変化を示す図である。 パニングモードが選択された場合の処理フローを示す図である（その１）。 パニングモードが選択された場合の処理フローを示す図である（その２）。 本発明の他の実施形態に係る撮影装置本体の構成を示す図である。

以下、本発明の好適な実施形態（以下、第１実施形態と呼ぶ。）について、添付の図面を参照しながら詳細に説明する。ただし、以下に説明する実施形態は、本発明の理解を容易にするために挙げた一例に過ぎず、本発明を限定するものではない。すなわち、本発明は、その趣旨を逸脱しない限りにおいて、以下に説明する実施形態から変更又は改良され得る。また、本発明には、その等価物が含まれる。

なお、本明細書において、映像とは、動画像であり、動画像は、一定のフレームレートにて連続的に撮影される複数の画像（フレーム画像）の集合を意味する。

＜＜撮影装置の基本構成＞＞
第１実施形態に係る撮影装置（以下、撮影装置１０と呼ぶ。）の基本構成について、図１～４を参照しながら説明する。

撮影装置１０は、携帯可能な撮影装置であり、具体的には、図１及び２に示す外観を有するデジタルカメラであり、静止画像及び動画像を撮影するために用いられる。本明細書では、撮影装置１０の機能のうち、動画像をリアルタイムに撮影する機能について主に説明する。

撮影装置１０は、撮影装置本体１２と筐体１４とによって構成されている。撮影装置本体１２とは、撮影装置１０のうち、筐体１４を除く部分である。筐体１４は、一般的なデジタルカメラの筐体と略同じ構造であり、その内部に、図３に示す撮影部２０及び処理部３０を収容する。

撮影部２０は、映像を撮影し、図３に示すように、レンズユニット１１０、レンズ駆動部１２０、絞り部１３０、シャッタ１４０、イメージセンサ１５０、及びＡ／Ｄ（Analog／Digital）コンバータ１６０を有する。

レンズユニット１１０は、ズームレンズ１１２及びフォーカスレンズ１１４を有し、第１実施形態では、ズームレンズ１１２がアナモフィックレンズを搭載している。そのため、第１実施形態では、横方向に広い画角（例えば、縦横比２．３５：１の画角）で映像を撮影することが可能である。ただし、アナモフィックレンズに限定されず、広角レンズ、超広角レンズ及び３６０度レンズ等の撮影レンズが用いられてもよい。また、レンズユニット１１０は、他のレンズユニットに交換可能に構成されてもよい。また、撮影部２０は、画角が異なる複数のレンズユニット１１０を備えてもよい。
ここで、イメージセンサ１５０によって映像を撮影する際の画角は、レンズユニット１１０及びイメージセンサ１５０の仕様等に応じて決まり、その画角で撮影される映像は、本発明の「基準映像」に相当する。

レンズ駆動部１２０は、不図示の駆動モータと、不図示の駆動機構とによって構成され、レンズユニット１１０のレンズを光軸に沿って移動させる。
絞り部１３０は、ユーザの設定に応じて、あるいは自動的に開口部の大きさを調整し、開口部を通過する光の量を調整する。
シャッタ１４０は、イメージセンサ１５０への透過光を遮断する。

イメージセンサ１５０は、例えばＣＣＤ（Charged Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor Image Sensor）等で構成されており、レンズユニット１１０を介して被写体からの光を受光して結像し、画像データを生成する。具体的には、イメージセンサ１５０は、カラーフィルタを通じて受光した光信号を受光素子にて電気信号に変換し、その電気信号をＡＧＣ（Auto Gain Controller）によって増幅し、増幅後の信号からアナログ画像データを生成する。

Ａ／Ｄコンバータ１６０は、イメージセンサ１５０で生成されたアナログ画像データをデジタル画像データに変換する。このデジタル画像データは、動画像である基準映像を構成するフレーム画像のデータに該当する。
なお、デジタル画像データを構成する画素データの数（すなわち、画素数）は、特に限定されないが、第１実施形態では１０００万以上の画素数であり、好ましくは、画素数の下限が６０００万以上であるとよい。また、第１実施形態における画素数の好ましい上限は、１０億以下であり、より好ましくは５億以下。画素数が下限を上回っていれば、基準映像から抽出される抽出映像（抽出映像については後述する）の視認性が担保できる。また、画素数が上限を下回っていれば、基準映像の画素情報量が低減させることができ、処理部３０の処理が高速化する。

処理部３０は、撮影装置１０に関する各種の処理を実行し、第１実施形態では、図３に示すように制御処理部２１０及び映像処理部２２０を含む。

処理部３０は、例えば１つ又は複数のプロセッサからなり、具体的にはＣＰＵ（Central Processing Unit）と制御プログラムから構成される。ただし、これに限定されるものではなく、上記のプロセッサは、ＦＰＧＡ（Field Programmable Gate Array）、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＧＰＵ（Graphics Processing Unit）、ＭＰＵ（Micro-Processing Unit）、又はその他のＩＣ（Integrated Circuit）によって構成されてもよく、若しくは、これらを組み合わせて構成されてもよい。また、上記のプロセッサは、ＳｏＣ（System on Chip：）等に代表されるように、制御処理部２１０及び映像処理部２２０を含むシステム全体の機能を一つのＩＣ（Integrated Circuit）チップで構成してもよい。さらに、以上に挙げた各プロセッサのハードウェア構成は、半導体素子などの回路素子を組み合わせた電気回路（Circuitry）で実現してもよい。

制御処理部２１０は、ユーザの操作に従って、あるいは自動的に撮影装置本体１２の各部を制御し、例えば、撮影部２０を制御して撮影部２０に基準映像を撮影（取得）させることができる。また、制御処理部２１０は、映像（詳しくは、後述する抽出映像）が記録媒体に記録されるように映像処理部２２０を制御することができる。また、制御処理部２１０は、撮影部２０によって生成されたデジタル画像データが示す画像の全体又は一部のコントラスト等に基づいて、レンズユニット１１０の焦点を画像中の被写体に合焦させるようにレンズ駆動部１２０を制御することができる。また、制御処理部２１０は、撮影部２０によって生成されたデジタル画像データが示す画像の全体又は一部の輝度に基づいて、絞り部１３０を制御し、撮影時の露光量を自動的に調整することができる。

映像処理部２２０は、撮影部２０によって生成されたデジタル画像データに対してガンマ補正、ホワイトバランス補正、及び傷補正等の処理を行い、さらに、所定の規格に準拠した圧縮形式にて圧縮する。そして、映像処理部２２０は、撮影中に順次生成される圧縮デジタル画像データから基準映像を取得し、取得した基準映像に対して種々の処理を実行する。

また、映像処理部２２０は、撮影部２０の画角内において当該画角よりも小さい抽出範囲を設定し、その抽出範囲内に映る抽出映像（いわゆるクロップ画像）を基準映像から抽出することができる（例えば、図６及び８参照）。また、映像処理部２２０は、制御処理部２１０の制御の下、抽出映像を記録媒体に記録（録画）することができる。抽出映像については、後の項で詳しく説明する。

なお、以降の説明では、特に断る場合を除き、制御処理部２１０及び映像処理部２２０の各々の処理を、本発明のプロセッサである処理部３０による処理として説明することとする。処理部３０による処理については、後の項で詳しく説明する。

筐体１４内には、さらに、撮影装置本体１２に内蔵された内蔵メモリ２３０、カードスロット２６０を介して撮影装置本体１２に対して着脱可能なメモリカード２４０、及び、バッファ２５０が収容されている。内蔵メモリ２３０及びメモリカード２４０は、前述の抽出映像が記録される記録媒体であり、フラッシュメモリ又は強誘電体メモリ等で構成されている。なお、記録媒体は、撮影装置本体１２以外の場所にあってもよく、処理部３０は、有線又は無線による通信を介して外部の記録媒体に対して映像の記録を行ってもよい。
バッファ２５０は、処理部３０のワークメモリとして機能し、例えば、ＤＲＡＭ（Dynamic Random Access Memory）又は強誘電体メモリ等で構成されている。

筐体１４の背面には、図２に示すように、表示器４０が取り付けられている。表示器４０は、ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）又は有機ＥＬ（Organic Electroluminescence）ディスプレイ、ＬＥＤ（Light Emitting Diode）ディスプレイ又は電子ペーパー等で構成されている。表示器４０には前述の抽出映像が表示され、また、撮影条件等の設定画面、及び、モード選択用の画面等も適宜表示される。

筐体１４には操作部５０が備わっており、ユーザは、操作部５０を通じて撮影に関する各種の操作を行う。操作部５０は、例えば、図１及び２に示すように、筐体１４の外面に配設されたレリーズボタン３１０、ズームレバー３２０、操作ダイヤル３３０，３４０、及び十字ボタン３５０等を含む。これらの機器は、ユーザに操作されると、処理部３０に向けて種々の制御信号を送信する。例えば、ズームレバー３２０が操作されると、その操作に応じてズーム倍率を変更する制御信号が処理部３０に向けて送信され、処理部３０は、その制御信号に従い、ズームレンズ１１２を移動させるためにレンズ駆動部１２０を制御して駆動させる。

また、第１実施形態では、表示器４０がタッチパネルディスプレイであり、操作部５０として兼用される。ユーザが表示器４０の画面をタッチすると、そのタッチ位置に応じた制御信号が処理部３０に向けて送信される。例えば、後述するモード選択画面（図９参照）が表示器４０に表示され、ユーザが画面中に描画された複数のモード選択ボタンのうち、対応する一つのボタンをタッチすると、選択されたモードに設定するための制御信号が処理部３０に向けて送信される。また、ユーザは、表示器４０の画面中の所定箇所をタッチする操作を通じて、処理部３０にズーム処理又はシャッタ処理（撮影処理）の実行を指示することができる。

第１実施形態では、筐体１４に検出器６０が取り付けられている。検出器６０は、筐体１４を含む撮影装置１０の動きを検出し、詳しくは、筐体１４の水平方向の移動を検出する。筐体１４の水平方向の移動とは、図４に示すように、ユーザが撮影の画角を変えるために、撮影装置１０の正面の向きが変わるように鉛直軸Ｃを中心にして撮影装置１０を移動（厳密には回動）させたときの筐体１４の動きである。なお、図４は、撮影装置１０を上方から見た図である。

第１実施形態に係る検出器６０は、例えば、筐体１４に取り付けられたジャイロセンサによって構成されており、筐体１４が水平方向に移動した場合の角速度、回転量（図４中、記号θで表す）、及び移動方向等を測定し、その測定結果に基づいて筐体１４の動きを検出する。なお、検出器６０は、ジャイロセンサのみに限定されず、ジャイロセンサ以外のモーションセンサ、例えば加速度センサ等で構成されてもよい。また、画像処理装置を検出器６０として利用し、基準映像を解析して画角の変化の有無を判定することで筐体１４の動きを検出してもよい。

＜＜抽出映像について＞＞
次に、前述した抽出映像について図５～８を参照しながら詳しく説明する。
なお、図５、６及び８の各図が示す様子は、いずれも、上段の図の状態、中段の図の状態、及び下段の図の状態の順に移り変わる。また、図５以降の図では、基準映像撮影時の画角に対して記号Ａ１を付し、抽出範囲に対して記号Ａ２を付し、基準映像に対して記号Ｐ１を付し、抽出映像に対して記号Ｐ２を付している。

抽出映像は、画角よりも小さく設定された映像であり、基準映像から抽出されて表示器４０に表示される。第１実施形態では、基準映像が、１０００万以上（好ましくは６０００万以上）の画素からなる高画質映像であるため、その中から抽出される抽出映像も十分に高画質な映像となる。第１実施形態では、図６及び８に示すように、抽出映像の外縁が長方形の形状であるが、外縁の形状については特に限定されず、正方形、平行四辺形、台形、菱形、円状又は楕円状、三角形又は五角形以上の多角形、あるいは不定形であってもよい。

抽出範囲の位置、サイズ及び縦横比（アスペクト比）等は、初期設定されており、通常は、画角内において予め決められた範囲が抽出範囲として設定されている。なお、抽出範囲の位置、サイズ及び縦横比等については、ユーザ側で設定及び変更してもよく、例えば不図示の設定画面を表示器４０に表示し、ユーザが設定画面を通じて設定及び変更を行ってもよい。

第１実施形態では、撮影中に所定の条件が満たされると、処理部３０が抽出範囲を画角内で経時的に移動させる。ここで、「経時的に移動させる」とは、抽出範囲の位置が漸次的に変化するように抽出範囲を画角に対して相対的に動かすことを意味し、途中で移動が停止（中断）する場合も含み得る。

撮影中に抽出範囲を経時的に移動させることにより、例えば、抽出範囲内に映る被写体を追尾対象として設定し、図５に示すように、画角内でその被写体を追尾することができる。つまり、処理部３０の機能により、画角内における被写体の移動に連動させて、抽出範囲内にその被写体が収まるように抽出範囲を自動的に移動させることができる。

また、追尾対象の被写体が奥行き方向（つまり、撮影装置１０に対して近接及び離間する方向）に移動すると、図５に示すように、被写体の映像の大きさが変化する。つまり、抽出範囲のサイズに対する被写体の映像の大きさの割合（以下、被写体映像比率と呼ぶ。）が変化する。そのため、第１実施形態では、図５に示すように、奥行き方向における被写体の移動、すなわち、被写体映像比率の変化に応じて抽出範囲のサイズを変える。具体的には、被写体映像比率が略一定に維持されるように抽出範囲のサイズを調整する。このサイズ調整は、後述する電子ズーム処理に該当する。

以上により、追尾対象の被写体が画角内に存在している限り、表示器４０には、図６に示すように追尾対象の被写体を含む抽出映像を常時表示することができる。また、表示される抽出映像では、追尾対象の被写体の大きさが略一定に維持される。また、追尾対象の被写体を追尾するためにユーザが撮影装置１０を自ら動かす必要がなく、それ故に手動での画角変更がなく、手動での画角変更時に生じる映像の乱れ（映像ブレ等）を回避することもできる。こうした効果は、アナモフィックレンズ等を用いて画角が比較的広くなる場合に特に有効である。

他方、抽出範囲内に映る被写体が追尾対象でない場合（例えば、風景のように静止したものを被写体とする場合）、図７に示すように、画角の横方向の一端から他端まで抽出範囲が自動的にスライド移動（パニング）する。これにより、表示器４０には、図８に示すような撮影アングルを水平方向に連続的に変化させたような映像、言わばパノラマ動画像を表示することができる。また、撮影アングル変更のためにユーザが撮影装置１０を自ら動かす必要がなく、それ故に手動での画角変更がなく、手動での画角変更時に生じる映像の乱れ（映像ブレ等）を回避することもできる。こうした効果は、アナモフィックレンズ等を用いて画角が比較的広くなる場合に特に有効である。

なお、抽出範囲の移動速度は、予め設定されてもよく、抽出範囲の移動中にユーザが例えばボタン操作等を行うことで任意の速度に変更できてもよい。また、抽出範囲の移動開始から抽出範囲の端が画角の端に到達するまでの時間、すなわち移動の所要時間を求めてもよい。この場合、求めた所要時間と移動開始からの経過時間との差分に基づく残り移動時間ｔｒを、図８に示すように表示器４０に表示させてもよい。

また、処理部３０の機能に基づく抽出範囲の自動移動（パニング）と、ユーザによる撮影装置１０の移動動作（画角変更用の操作）とが同時に行われてもよい。

以上のように抽出範囲の移動モードは、追尾対象の被写体を追尾するように抽出範囲を移動させる第１モード（以下、追尾モードと呼ぶ。）と、一定方向に抽出範囲を移動させる第２モード（以下、パニングモードと呼ぶ。）と、を含む。ユーザは、例えば図９に示すモード選択画面にていずれか一つのモードを選択することができ、処理部３０は、ユーザによって選択されたモードに則って抽出範囲を画角内で移動させる。

抽出範囲の移動モードの指定は、ユーザの意思、詳しくは、図９に示すモード選択画面での選択結果に基づいて行われてもよい。
あるいは、撮影装置１０が基準映像を解析して追尾対象の有無を自動的に判定し、その判定結果に基づいて移動モードを自動的に指定してもよい。このケースでは、例えば、追尾対象の被写体が存在した場合には追尾モードを選択し、追尾対象の被写体が存在しない場合にはパニングモードを選択する。
あるいは、ユーザが撮影装置１０を移動させた場合に検出器６０が移動速度（具体的には、角速度）等を検出し、その検出結果に基づいて移動モードを自動的に指定してもよい。このケースでは、例えば、ランダムな移動速度である場合には追尾モードを選択し、一定の移動速度である場合にはパニングモードを選択する。

＜＜処理部による処理について＞＞
次に、処理部３０の処理について説明する。処理部３０の処理は、制御処理部２１０によって実行される処理と、映像処理部２２０によって実行される処理と、に大別される。前者の処理には、例えば、撮影処理、オートフォーカス処理、光学ズーム処理、及び光学手振れ補正等が挙げられる。後者の処理には、電子ズーム処理、電子手振れ補正処理、設定処理、抽出処理、判定処理、移動処理、記録処理、及び警告処理等が挙げられる。以下、上記の各処理の概要について説明する。

［撮影処理］
撮影処理は、処理部３０が撮影部２０を制御して撮影部２０の画角での映像、すなわち基準映像を撮影する処理である。撮影処理は、例えば撮影装置１０が起動すると、それに伴って自動的に開始される。

［オートフォーカス処理］
オートフォーカス処理は、レンズユニット１１０のフォーカスレンズ１１４が光軸に沿って移動するように処理部３０がレンズ駆動部１２０を制御する処理である。オートフォーカス処理は、例えば抽出範囲が移動している間に適時実行される。これにより、移動中の抽出範囲内の被写体に対して合焦することができる。

［光学ズーム処理］
光学ズーム処理は、ズーム処理の一例であり、抽出映像内の被写体の映像に対して光学ズームを行う処理である。具体的には、ユーザがズーム操作部としてのズームレバー３２０を操作した際に光学ズーム処理が実行され、処理部３０がレンズ駆動部１２０を制御してズームレンズ１１２を光軸に沿って移動させる。ズーム操作部の他の例としては、レンズユニット１１０におけるズーム操作用の回転リング等が挙げられる。光学ズーム処理は、電子ズーム処理と併用される。例えば、撮影中に電子ズーム処理を頻繁に実行することで抽出映像の画質が劣化（粗く）なった場合に、画質を改善するために光学ズーム処理が適宜実行される。

［光学手振れ補正］
光学手振れ補正処理は、手振れ補正処理の一例であり、撮影中に撮影装置１０に加わる振動等の影響を抑えて抽出映像を安定させるための処理である。具体的には、処理部３０がレンズ駆動部１２０を制御してレンズユニット１１０を移動させて光軸をシフトさせる。光学手振れ補正は、公知の技術によって実現され、例えば、特許第５５２１５１８号公報に記載された光学手振れ補正の技術を利用することができる。

［電子ズーム処理］
電子ズーム処理は、ズーム処理の一例であり、抽出映像内の被写体の映像に対して電子ズーム（デジタルズーム）を行う処理である。具体的には、処理部３０が画角内に対する抽出範囲のサイズ（換言すると、抽出映像の画素数）を変更する。電子ズーム処理は、例えば抽出範囲が移動している間に適時実行される。例えば、抽出範囲内の被写体が撮影装置１０の奥行き方向に移動して追尾対象の被写体の映像の大きさが変化した場合に、前述した被写体映像比率を調整するために電子ズーム処理が実行される。
電子ズーム処理では、撮影装置１０と抽出映像内の被写体との距離に応じて抽出範囲のサイズを変える。撮影装置１０と抽出映像内の被写体との距離は、一般的なデジタルカメラに搭載される距離計測技術を用いて計測することが可能である。例えば、位相差画素を用いた位相差方式による距離計測方法、若しくは、ＴＯＦ（Time of Flight）方式により光の飛行時間に基づいて被写体までの距離を計測する方法等が利用可能である。
また、電子ズーム処理によれば、抽出範囲が移動している間、抽出映像の解析によって、追尾対象の被写体の大きさ（表示サイズ）を一定に維持することができる。

［電子手振れ補正処理］
電子手振れ補正処理は、手振れ補正処理の一例であり、撮影中に撮影装置１０に加わる振動等の影響を抑えて抽出映像を安定させるために処理部３０が抽出範囲の位置をずらす処理である。電子手振れ補正は、公知の技術、例えば、特許第５５２１５１８号公報又は国際公開第２０１６／１８１７１７号等に記載された電子手振れ補正（Electric Image Stabilization；ＥＩＳ）の技術によって実現される。電子手振れ補正処理の実行にあたり、撮影中、バッファ２５０には、基準映像を構成するフレーム画像のうち、直前のフレーム画像が格納される。処理部３０は、新たなフレーム画像が撮影された段階で、そのフレーム画像と、バッファ２５０に格納された直前のフレーム画像とを比較して、抽出範囲内の画像のずれ量を求める。そして、求めたずれ量が閾値を超える場合に電子手振れ補正処理が実行される。

［設定処理］
設定処理は、処理部３０が基準映像内の画角内に抽出範囲を設定する処理である。通常の場合、撮影装置１０が起動したときに設定処理が実行され、このときの設定処理では、抽出範囲の位置、サイズ及び縦横比（アスペクト比）等が初期値に設定される。ただし、これに限定されるものではなく、ユーザが操作部５０を通じて抽出範囲の位置、サイズ及び縦横比等を設定し、また設定後に適宜変更してもよい。

また、追尾モードが選択された場合には、追尾対象の被写体を基準として抽出範囲が設定される。例えば、画角内に存在する一つの被写体が表示器４０に一定時間以上表示されるようにユーザが撮影装置１０を動かし、具体的には、画角を変えたりズームを行ったりする。この場合、処理部３０は、上記の被写体を追尾対象の被写体として認識し、その被写体が収まるように抽出範囲を設定する。被写体を基準とした抽出範囲の設定手順としては、上述した手順以外の手順であってもよい。例えば基準映像の全画面を表示器４０に表示させ、ユーザが基準映像中に映る被写体をタッチする等し、その被写体が収まるように抽出範囲を設定してもよい。

［抽出処理］
抽出処理は、処理部３０が抽出範囲内に映る抽出映像を基準映像から抽出する（すなわち、切り出す）処理である。例えば、追尾モードが選択された場合には、追尾対象の被写体の映像を含む一定範囲の映像が抽出映像として抽出される。また、パニングモードが選択された場合には、被写体が逐次変化する（スライドする）ように抽出映像が抽出される。抽出映像は、図６及び８に示すように表示器４０に表示され、ユーザは、表示器４０を通じて抽出映像を確認することができる。

［判定処理］
判定処理は、検出器６０が筐体１４の動きを検出した場合に、その動きによって抽出範囲の端が画角の端に至ったか否かを処理部３０が判定する処理である。第１実施形態では、パニングモードが選択された状態で、検出器６０が筐体１４の動きとして筐体１４の水平方向の移動を検出した場合に、判定処理が実行される。

判定処理について図１０を参照しながら具体的に説明する。判定処理に際して、ユーザが撮影装置１０を水平方向（図１０中、太線の矢印にて示す方向）に移動させると、検出器６０がその時の筐体１４の移動を検出する。このとき、水平方向において撮影装置１０が移動時に向かう側を第１側とし、その反対側を第２側とする。なお、図１０に示すケースでは、左側が第１側に該当し、右側が第２側に該当する。
検出器６０が筐体１４の水平方向の第１側への移動を検出した場合、処理部３０は、前述した電子手振れ補正処理（ＥＩＳ）により、筐体１４の移動量に応じた分だけ抽出範囲を水平方向の第２側にずらす。これにより、図１０に示すように、抽出範囲が画角に対して相対的に第２側へ移動する。そして、処理部３０は、判定処理を実行し、第２側に位置する抽出範囲の端が上記の相対移動によって第２側に位置する画角の端に至ったか否かを判定する。判定結果における判定結果は、移動処理の実行の有無に反映される。

［移動処理］
移動処理は、撮影中に実行され、処理部３０が画角における抽出範囲を経時的に移動させる処理である。第１実施形態では、筐体１４の動きが検出器６０によって検出されると、検出された動きに応じて移動処理が実行される。検出器６０によって検出される筐体１４の動きと、移動処理の実行との関係については、後の項で詳しく説明することとする。

また、移動処理の実行中、処理部３０は、抽出範囲が移動している間の抽出映像を表示器４０に表示させる。移動処理の実行中、ユーザ又は地面からの振動が撮影装置１０に伝達される等して筐体１４が動いた（振動した）場合、抽出範囲が移動している間の抽出映像に対して、前述した電子手振れ補正処理又は光学手振れ補正処理が実行される。これにより、表示器４０に表示される抽出映像のブレが減り、表示される映像が安定するようになる。

移動処理における抽出範囲の移動方式は、追尾モード及びパニングモードのうち、選択されたモードに応じて異なる。追尾モードが選択された場合、処理部３０は、抽出範囲内に映る被写体を追尾対象として設定する。そして、移動処理では、処理部３０は、追尾対象の被写体が抽出範囲内に入るように（厳密には、抽出範囲内に収まるように）抽出範囲を移動させる。このように追尾モードが選択された場合の移動処理では、画角内で追尾対象の被写体が探索され、追尾対象の被写体の移動に連動させて抽出範囲を移動させる。

なお、画角内で追尾対象の被写体を探索するアルゴリズムは、特に制限されるものではない。アルゴリズムの一例を挙げると、追尾対象として設定された被写体の画像をテンプレート画像としてバッファ２５０に記憶しておき、公知のテンプレートマッチング技術を適用して、上記のテンプレート画像と基準映像とを比較し、テンプレート画像とマッチングする部分の映像を特定すればよい。

また、追尾モードが選択された場合の移動処理において、抽出範囲の移動速度は、追尾対象の被写体を追尾できるように当該被写体の移動速度に応じた速度に設定されるのが好ましい。抽出範囲の移動速度は、画角を画素単位で区画したときに、移動中の抽出範囲が単位時間において通過する画素数である。

他方、パニングモードが選択された場合の移動処理では、画角の横方向の一端から他端に向けて抽出範囲を移動させる。このときの抽出範囲の移動速度は、一定の速度であってもよく、例えば、検出器６０により検出された筐体１４の水平方向の移動における移動速度（具体的には、角速度）に応じた速度であってもよい。なお、パニングモードが選択された場合の移動処理では、移動処理の実行中（すなわち、抽出範囲の移動中）にユーザが操作部５０を操作する等して抽出範囲の移動速度を変えることができてもよい。

抽出範囲の移動速度について付言しておくと、移動処理の実行中に電子ズーム処理又は光学ズーム処理が実行されると、抽出範囲のサイズ（すなわち、抽出映像の画素数）が変化する。そのため、上記のズーム処理の前後で抽出範囲の移動速度が同一であると、表示器４０を通じて抽出映像を見るユーザにとって、抽出範囲の移動速度が急変したように見えてしまう。そこで、第１実施形態では、移動処理の実行中に上記のいずれかのズーム処理が実行された場合、処理部３０は、移動処理において抽出範囲の移動速度をズーム（具体的には、変更後のズーム倍率）に応じて調整する。詳しくは、処理部３０は、ズームアップの場合には移動速度を減少させ、ズームアウトの場合には移動速度を増加させる。これにより、上述した抽出映像の異常な見え方を解消することができる。

移動処理の説明に戻ると、処理部３０は、下記の終了条件（Ｊ１）～（Ｊ５）のうちのいずれかが成立したときに移動処理を終了する。
（Ｊ１）移動処理の実行中にユーザが操作部５０を通じて移動処理の終了を指示したとき。
（Ｊ２）移動処理の実行中、ユーザが抽出範囲の移動方向とは逆方向に筐体１４を動かし、検出器６０がその動きを検出したとき。
（Ｊ３）追尾モードが選択された場合において、移動処理の実行中に追尾対象の被写体が画角から外れたとき。
（Ｊ４）追尾モードが選択された場合において、移動処理の実行中に追尾対象の被写体が一定時間以上止まっている（静止している）とき。
（Ｊ５）パニングモードが選択された場合において、移動処理の実行中に抽出範囲の端が画角の端に到達したとき。
なお、移動処理の終了条件は、上記５つの条件に限定されず、上記５つの条件以外の条件がさらに含まれてもよく、また、上記５つの条件のうちの１～４つが含まれなくてもよい。

［記録処理］
記録処理は、処理部３０が抽出映像を内蔵メモリ２３０及びメモリカード２４０等を含む記録媒体に記録する処理である。記録処理は、例えばレリーズボタン３１０が一度押された時点で開始され、レリーズボタン３１０が再び押された時点で終了する。第１実施形態では、移動処理が実行されると、処理部３０が、記録処理において、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する。また、移動処理の実行中に光学ズーム処理、電子ズーム処理、光学手振れ補正処理及び電子手振れ処理の少なくとも一つが実行された場合、記録処理では、その処理がなされた後の抽出映像が記録される。なお、第１実施形態では、移動処理が終了すると、これに連動する形で記録処理が終了する。

ちなみに、第１実施形態では、記録処理において抽出映像のみが記録媒体に記録され、それ以外の映像（具体的には、基準映像）については記録されずに破棄される。これにより、基準映像を記録しない分だけ、記録媒体における使用容量を削減することができる。ただし、これに限定されず、抽出映像及び基準映像の両方を記録媒体に記録してもよい。

［警告処理］
警告処理は、移動処理の実行中に所定の状況に至った場合に処理部３０がユーザに向けて警告を発する処理である。例えば、追尾モードで移動処理が実行されているとき、移動中の抽出範囲が画角内の画角端近傍エリアに差し掛かると、その旨をユーザに知らせるために警告処理が行われる。画角端近傍エリアとは、図１１に示すように、画角のうち、画角の端から所定距離だけ離れた位置から端までの範囲が該当し、図１１中のハッチングが施された範囲である。
なお、警告処理における警告方法は、特に限定されないが、例えば、警告メッセージを表示すること、又は抽出映像の外縁枠を所定の色（具体的には、赤など）に変更すること等が挙げられる。

＜＜移動処理の流れについて＞＞
第１実施形態では、本発明の撮影方法を用いて映像の撮影が行われる。そして、撮影中に検出器６０が筐体１４の動きを検出した場合に、処理部３０が、検出された筐体１４の動きに応じて移動処理を実行する。詳しく説明すると、第１実施形態では、ユーザが画角変更等の目的で撮影装置１０を動かすと、検出器６０がその時の筐体１４の動きを検出し、それを契機として処理部３０が移動処理を実行する。

移動処理では、抽出範囲が被写体を追尾するように、あるいは画角の端に向かって自動的に移動する。これにより、検出器６０が筐体１４の動きを検出した後にはユーザが改めて画角変更のために撮影装置１０を動かす必要がなく、この結果、ユーザは、撮影に集中することができる。つまり、ユーザにとって、抽出範囲を移動させながら抽出映像を記録することがより容易になる。

ところで、移動処理を含む各種処理の流れは、追尾モード及びパニングモードのうち、選択されたモードに応じて異なる。以下では、処理の流れについてモード毎に説明する。

（追尾モードが選択された場合の処理の流れ）
追尾モードが選択された場合の処理の流れについて、図１２～１４を参照しながら説明する。

移動処理の実行に際して、ユーザは、先ず、撮影装置１０を起動する。装置起動後には処理部３０が設定処理を実行し（Ｓ００１）、画角内の抽出範囲を初期値又はユーザの入力値等に応じて設定する。このステップＳ００１が設定工程に該当する。
その後、撮影装置１０の画角で基準映像の撮影が開始され、処理部３０が抽出処理を実行して抽出映像を基準映像から抽出する（Ｓ００２）。このステップＳ００２が抽出工程に該当する。また、抽出工程の実行により、表示器４０には抽出映像が表示される（Ｓ００３）。

ユーザは、抽出映像の記録を開始するためにレリーズボタン３１０を押す。これにより、処理部３０が記録処理を実行し、抽出映像の記録を開始する（Ｓ００４）。換言すると、レリーズボタン３１０の押下げにより記録工程が開始される。
さらに、追尾モードが選択された場合には、ユーザが、ある被写体を追尾するために撮影装置１０を動かす（移動させる）。例えば、図１４に示す被写体Ｊが移動した場合、ユーザは、同図に示す通り、その被写体Ｊが抽出範囲内に入り続けるように撮影装置１０を動かす。検出器６０は、この時の筐体１４の動きを検出する（Ｓ００５）。図１４中の上図は、撮影装置１０を動かす直前の画角を示し、図１４中の下図は、撮影装置１０を動かした直後の画角を示している。

検出器６０が筐体１４の動きを検出すると、処理部３０は、検出器６０による動きの検出前後の抽出映像を比較し、両方の抽出映像内に共通して映る被写体Ｊを追尾対象として選定する（Ｓ００６）。このとき、処理部３０は、前述したテンプレートマッチング技術等を利用することで、検出器６０による動きの検出前後において抽出映像に映る被写体Ｊを認識することができる。追尾対象の選定方法は、上記の方法に限定されず、ユーザが表示器４０において被写体の映像をタッチする等して被写体を指定し、その指定操作に基づいて追尾対象が選定されてもよい。あるいは、検出器６０による動きの検出前後の抽出映像を比較し、それぞれの抽出映像に映る被写体のうち、移動量が最も少ない被写体が追尾対象として選定されてもよい。

その後、処理部３０は、移動処理を実行し、図５に示すように上記の被写体Ｊが抽出範囲内に入るように抽出範囲を画角内で移動させる（Ｓ００７）。このステップＳ００７が移動工程に該当する。移動工程において、処理部３０は、事前に設定された移動速度にて抽出範囲を移動させてもよいし、抽出映像を解析して算出した被写体Ｊの速度に応じた移動速度（例えば、被写体Ｊと同じ速度）にて抽出範囲を移動させてもよい。

処理部３０は、移動処理において、抽出範囲を移動させ、且つ、抽出範囲が移動している間の抽出映像を表示器４０に表示させる（図６参照）。また、処理部３０は、移動処理と同時に実行される記録処理において、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する。つまり、移動工程により抽出範囲が移動している間の抽出映像を記録する記録工程が実行される。

また、処理部３０は、移動処理の実行中に検出器６０が筐体１４の動き（具体的には、振動伝達等による動き）を検出すると（Ｓ００８）、前述した電子手振れ補正処理又は光学手振れ補正処理を実行する（Ｓ００９）。このステップＳ００９では、抽出範囲が移動している間の抽出映像に対して手振れ補正を行う。これにより、抽出範囲の移動に伴って変化する抽出映像を安定化させることができ、手振れ等が生じた場合にも抽出映像をスムーズに変化させることができる。

また、被写体Ｊが奥行き方向に移動して抽出範囲のサイズに対する被写体Ｊの映像の大きさの割合（すなわち、被写体映像比率）が変化したとき、その変化量が閾値を超える場合（Ｓ０１０）がある。この場合、処理部３０は、電子ズーム処理を実行し、撮影装置１０と被写体Ｊとの間の距離に応じて抽出範囲のサイズを変える（Ｓ０１１）。このように、処理部３０は、移動処理において、被写体映像比率の変化に基づいて抽出範囲のサイズを変えながら抽出範囲を移動させる。これにより、例えば、被写体映像比率を維持しながら抽出範囲を移動させることができる。この結果、被写体Ｊを追尾している間、図６に示すように被写体Ｊの映像を略一定の大きさで表示器４０に表示することができる。

なお、電子ズーム処理の実行（特に、ズームアップの実行）により抽出範囲のサイズが所定の大きさ未満になった場合、又は抽出範囲に含まれる画素数が所定数未満になった場合には（Ｓ０１２）、抽出映像の画質が粗くなるため、処理部３０は、前述の光学ズーム処理を実行し、抽出映像内の被写体の映像に対して光学ズームを行う（Ｓ０１３）。これにより、電子ズーム処理の実行によって低下した抽出映像の画質を回復することができる。なお、上述のステップＳ０１３では、ユーザに光学ズーム処理を促すような通知を表示器４０に表示してもよい。

また、処理部３０は、移動処理の実行中に電子ズーム処理又は光学ズーム処理を実行した場合、抽出範囲の移動速度を電子ズーム又は光学ズームに応じて調整する（Ｓ０１４）。処理部３０は、Ｓ０１４以降の移動処理では、調整済みの移動速度、すなわち、電子ズーム又は光学ズームに応じた移動速度にて抽出範囲を移動させる。これにより、ズーム処理の実行に伴う不具合（具体的には、表示器４０を通じて抽出映像を見るユーザにとって、抽出範囲の移動速度が急変したように見える状況）を回避することができる。

また、処理部３０は、移動処理において、移動中の抽出範囲が画角において前述の画角端近傍エリアに差し掛かっているかどうかを判定する（Ｓ０１５）。そして、抽出範囲が画角端近傍エリアに差し掛かっている場合、処理部３０は、警告処理を実行する（Ｓ０１６）。これにより、抽出範囲が画角の端近傍に近付いていることをユーザに知らせ、画角変更のための操作、又は撮影終了の指示のための操作等をユーザに促すことができる。

以上までに説明してきた処理のうち、ステップＳ００７～Ｓ０１６は、移動処理中に繰り返し実行される。そして、移動処理の実行中に、前述した終了条件（Ｊ１）～（Ｊ４）のいずれかが成立した時点で（Ｓ０１７）、処理部３０が移動処理を終了する。このとき、移動処理の終了に合わせて記録処理を終了させてもよく、あるいは移動処理の終了後に記録処理を続行させてもよい。

移動処理の終了後、ユーザが再び被写体Ｊを追従するように撮影装置１０を動かし、検出器６０がその時の筐体１４の動きを検出すると、移動処理が再度実行され、上述した一連の処理（Ｓ００６～Ｓ０１７）が繰り返される。

（パニングモードが選択された場合の処理の流れ）
パニングモードが選択された場合の処理の流れについて、図１５及び１６を参照しながら説明する。

パニングモードが選択された場合において、ユーザが撮影装置１０を起動してからレリーズボタン３１０を押して記録処理を実行するまでの手順（Ｓ０２１～Ｓ０２４）は、追尾モードが選択された場合と同様である。つまり、パニングモードが選択された場合にも、設定工程及び抽出工程が実行され、レリーズボタン３１０の押下げにより記録工程が開始される。

パニングモードが選択された場合には、ユーザが、撮影装置１０を水平方向の第１側に移動させる。検出器６０は、その時の筐体１４の動き、すなわち水平方向の第１側への移動を検出する（Ｓ０２５）。検出器６０が筐体１４の移動を検出すると、処理部３０は、前述のＥＩＳを利用して、筐体１４の移動量に応じた分だけ抽出範囲を水平方向の第２側にずらす（Ｓ０２６）。

その後、処理部３０は、判定処理を実行し、抽出範囲の第２側の端が画角の第２側の端に至ったか否かを判定する（Ｓ０２７）。処理部３０は、判定処理にて抽出範囲の第２側の端が画角の第２側の端に至ったと判定した場合に、移動処理を実行し、図７に示すように抽出範囲を水平方向に第１側に向けて移動させる（Ｓ０２８）。このステップＳ０２８が移動工程に該当する。

第１実施形態において、処理部３０は、移動処理の実行に際して抽出範囲の移動速度を設定し、移動処理では、設定された移動速度にて抽出範囲を移動させる。抽出範囲の移動速度は、水平移動時間ｔｘに応じて設定される。水平移動時間ｔｘは、検出器６０により検出された筐体１４の水平移動の開始時点から、抽出範囲の第２側の端が画角の第２側の端に至るまでの時間である。水平移動時間ｔｘは、例えば、検出器６０により検出された筐体１４の水平移動における角速度、若しくは、抽出範囲の第２側の端が画角の第２側の端に向かって移動していた際の移動速度から算出することができる。移動処理の実行中における抽出範囲の速度は、一定であってもよく、あるいは変更されてもよく、例えばユーザが操作部５０を操作する等して任意の速度に変えられてもよい。

処理部３０は、移動処理において、抽出範囲を移動させ、且つ、抽出範囲が移動している間の抽出映像を表示器４０に表示させる（図８参照）。このとき、処理部３０は、移動開始から抽出範囲の端が画角の端に到達するまでの時間（すなわち移動の所要時間）を抽出範囲の移動速度から求めてもよい。さらに、処理部３０は、求めた所要時間と移動開始からの経過時間との差分に基づく残り移動時間ｔｒを表示器４０に表示してもよい。また、処理部３０は、移動処理と同時に実行される記録処理において、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する。つまり、移動工程により抽出範囲が移動している間の抽出映像を記録する記録工程が実行される。

また、パニングモードにおいて、移動処理の実行中に検出器６０が筐体１４の動き（具体的には振動等）を検出すると（Ｓ０２９）、処理部３０が電子手振れ補正処理又は光学手振れ補正処理を実行する（Ｓ０３０）。このステップＳ０３０では、抽出範囲が移動している間の抽出映像に対して手振れ補正が行われる。これにより、抽出範囲の移動に伴って変化する抽出映像を安定化させることができ、手振れ等が生じた場合にも抽出映像をスムーズに変化させることができる。

また、処理部３０は、移動処理において、移動中の抽出範囲が画角内の画角端近傍エリアに差し掛かっているかどうかを判定する（Ｓ０３１）。そして、抽出範囲が画角端近傍エリアに差し掛かっている場合、処理部３０は、警告処理を実行する（Ｓ０３２）。これにより、抽出範囲が画角の端近傍に近付いていることをユーザに知らせることができる。

そして、抽出範囲の水平移動によって抽出範囲の第１側の端が画角の第１側の端に到達した場合、または、前述の終了条件（Ｊ１）及び（Ｊ２）のいずれかが成立した場合（Ｓ０３３、Ｓ０３４）、処理部３０が移動処理を終了する。このとき、移動処理の終了に合わせて記録処理を終了させてもよく、あるいは移動処理の終了後に記録処理を続行させてもよい。

移動処理の終了後、ユーザが再び撮影装置１０を第１側に水平移動させて、検出器６０がその時の筐体１４の動きを検出すると、ステップＳ０２７の判定処理が再度実行される。そして、判定処理にて抽出範囲の第２側の端が画角の第２側の端に至ったと判定されると、移動処理が再度実行され、上述した一連の処理（Ｓ０２８～Ｓ０３４）が繰り返される。

なお、図１５及び１６に示すケースでは説明を省略したが、パニングモードが選択された場合において、移動処理の実行中に、抽出映像内の被写体の映像に対してズーム（具体的には、電子ズーム及び光学ズーム）を行ってもよい。その場合には、抽出範囲の移動速度をズームに応じて調整し、それ以降の移動処理、ズームに応じて調整された移動速度にて抽出範囲を移動させるとよい。

＜＜その他の実施形態＞＞
以上までに本発明の撮影装置について具体的な実施形態を挙げて説明してきたが、上述の第１実施形態は、あくまでも一例に過ぎず、その他の実施形態も考えられる。一例を挙げると、図１７に示すように、撮影装置の撮像装置本体１２Ｘと外部モニタ７０とが有線方式又は無線方式で接続されてもよい。
外部モニタ７０は、液晶モニタ等のディスプレイ装置、モニタ付きのレコーダ、若しくは、パソコン、スマートフォン及びタブレット端末等のようなモニタ付きの情報処理端末で構成されている。
図１７に示す構成では、処理部３０が抽出映像の映像信号を外部モニタ７０に伝送し、外部モニタ７０側で抽出映像が表示される。この場合には、撮影装置の表示器４０（ディスプレイ）に抽出映像を表示する代わりに、外部モニタ７０で抽出映像を表示してもよい。あるいは、撮影装置の表示器４０及び外部モニタ７０の両方に抽出映像を表示してもよい。

また、第１実施形態では、筐体１４が水平方向に移動し、検出器６０が筐体１４の動きとして筐体１４の水平方向の移動を検出するケースを例に挙げて説明した。ただし、これに限定されるものではなく、検出器６０が筐体１４の上下方向の移動を検出してもよい。この場合、処理部３０は、移動処理において、検出器６０が検出した上下方向の筐体１４の移動に応じて抽出範囲を移動させてもよい。

また、第１実施形態では、パニングモードが選択された場合の移動処理において抽出範囲を水平方向にスライド移動させることとしたが、これに限定されるものではない。例えば、移動処理において抽出範囲を上下方向にスライド移動させてもよい。

また、第１実施形態では、追尾モードが選択された場合においてユーザが被写体を追尾するために撮影装置１０を動かすと、検出器６０が、その時の筐体１４の動きを検出する。そして、処理部３０が、撮影装置１０の動きの検出に連動して移動処理を自動的に実行し、被写体を追尾するように抽出範囲を移動させることとした。ただし、これに限定されるものではなく、ユーザがタッチパネル等を操作することで抽出映像内の被写体を追尾対象として設定し、また、ユーザによる処理開始指示の操作に基づいて移動処理が実行されてもよい。かかるケースを本発明の第２実施形態として、以下に詳しく説明する。

第２実施形態に係る撮影装置の基本構成は、前述した撮影装置１０と略同様であり、図３に示す通りである。すなわち、第２実施形態に係る撮影装置は、撮影部２０と処理部３０（プロセッサ）とを備える。処理部３０は、設定処理、抽出処理、移動処理、ズーム処理、及び記録処理を実行する。

設定処理では、初期設定の内容又はユーザの指示操作に基づき、抽出範囲を画角内に設定する。抽出処理は、前述した抽出処理と同様の処理であり、この処理では、抽出範囲に映る抽出映像を抽出する。第２実施形態では、ユーザが、例えば撮影装置を動かして画角を変更させながら抽出映像内の被写体を追尾し、その被写体をタッチパネル上でタッチする等して指定する。これにより、指定された被写体が追尾対象として設定される。

移動処理では、追尾対象の被写体が抽出範囲内に入るように抽出範囲を経時的に移動させる。このような移動処理が実行されることで、抽出範囲が移動している間の抽出映像には、常に被写体の映像が含まれることになる。また、移動処理では、抽出範囲を移動させ、且つ、抽出範囲が移動している間の抽出映像を表示器４０に表示させる。なお、第２実施形態では、ユーザが追尾対象の被写体を指定した後に所定のボタン操作等を行うと、これを契機として処理部３０が移動処理を実行する。

ズーム処理は、電子ズーム処理及び光学ズーム処理であり、いずれのズーム処理においても、抽出映像内の被写体の映像に対してズームを行う。例えば、被写体が奥行き方向に移動することで被写体映像比率が変化した場合、処理部３０は、被写体と撮影装置との距離に応じて抽出範囲のサイズを変えるために電子ズーム処理を実行する。また、電子ズーム処理によって抽出映像の画質が粗くなって画質が低下した場合、処理部３０は、低下した画質を改善するために光学ズーム処理を実行し、若しくは、ユーザに光学ズーム処理を促す通知を表示器４０に表示する。
記録処理では、移動処理により抽出範囲が移動している間の抽出映像を記録媒体に記録する。

ところで、ズーム処理が移動処理中に実行された場合、ズームの前後で抽出範囲のサイズ、つまり、抽出映像の画素数が変化する。一方、抽出範囲の移動速度、つまり、単位時間あたりに抽出範囲が通過する画素数がズーム前後で同一であるとする。その場合、表示器４０を通じて抽出映像を確認するユーザには、抽出範囲の移動速度が急変したように見えてしまう。

第２実施形態では、移動処理中にズーム処理が実行された場合、ズーム処理後の移動処理では、処理部３０が、ズーム処理で行われたズーム（詳しくは、電子ズーム又は光学ズーム）に応じた移動速度にて抽出範囲を移動させる。これにより、上述したズームに起因して抽出範囲の移動速度が急変するように見えてしまう状況を回避することができる。

なお、第２実施形態の移動処理は、上述した被写体を追尾するために抽出範囲を移動させるケースに限定されない。例えば、抽出範囲を画角の一端から他端までスライド移動させるケース、つまり、パニングモードが選択された場合の移動処理であってもよい。このような移動処理の実行中にもズーム処理を実行することができ、ズーム処理後の移動処理では、処理部３０がズームに応じた移動速度にて抽出範囲を移動させるとよい。

以上までに説明してきた第２実施形態によれば、動画像である基準映像を撮影する撮影部２０を有する撮影装置を用いた撮影方法として、設定工程と抽出工程とズーム工程と移動工程と記録工程とを含む撮影方法が実現可能である。設定工程では、イメージセンサ１５０によって基準映像を撮影する際の画角内に、その画角よりも小さい抽出範囲を設定する。抽出工程では、抽出範囲の抽出映像を基準映像から抽出する。ズーム工程では、抽出映像内の被写体の映像に対してズーム（光学的ズーム又は電子的ズーム）を行う。移動工程では、画角における抽出範囲を、ズーム工程で行われたズームに応じた移動速度にて経時的に移動させる。記録工程では、移動工程により抽出範囲が移動している間の抽出映像を記録媒体に記録する。

１０ 撮影装置
１２，１２Ｘ 撮影装置本体
１４ 筐体
２０ 撮影部
３０ 処理部
４０ 表示器
５０ 操作部
６０ 検出器
７０ 外部モニタ
１１０ レンズユニット
１１２ ズームレンズ
１１４ フォーカスレンズ
１２０ レンズ駆動部
１３０ 絞り部
１４０ シャッタ
１５０ イメージセンサ
１６０ Ａ／Ｄコンバータ
２１０ 制御処理部
２２０ 映像処理部
２３０ 内蔵メモリ
２４０ メモリカード
２５０ バッファ
２６０ カードスロット
３１０ レリーズボタン
３２０ ズームレバー
３３０，３４０ 操作ダイヤル
３５０ 十字ボタン
Ｃ 鉛直軸

Claims (13)

1. 動画像である基準映像を撮影するイメージセンサと、
   前記イメージセンサを収容する筐体と、
   前記筐体の動きを検出するための検出器と、
   プロセッサと、を備え、
   前記プロセッサは、
   前記基準映像を撮影する際の画角内に、前記画角よりも小さい抽出範囲を設定する設定処理と、
   前記抽出範囲内の抽出映像を前記基準映像から抽出する抽出処理と、
   前記検出器により検出された前記動きに応じて、前記画角における前記抽出範囲を経時的に移動させる移動処理と、
   前記移動処理により前記抽出範囲が移動している間の前記抽出映像を記録媒体に記録する記録処理と、を実行し、
   前記検出器において、前記動きとして前記筐体の水平方向の第１側への移動を検出した場合に、前記第１側とは反対の第２側に位置する前記抽出範囲の端が、前記第２側に位置する前記画角の端に至ったか否かを判定し、
   前記判定にて前記抽出範囲の端が前記画角の端に至ったと判定した場合、前記第１側へ前記抽出範囲を移動させる、ことを特徴とする撮影装置。
2. 前記抽出映像を表示する表示器をさらに備え、
   前記プロセッサは、前記移動処理において、前記抽出範囲を移動させ、且つ、前記抽出範囲が移動している間の前記抽出映像を前記表示器に表示させる、請求項１に記載の撮影装置。
3. 前記プロセッサは、前記検出器が前記動きを検出した場合に、前記抽出範囲の端が前記画角の端に至ったか否かを判定する判定処理を実行し、
   前記プロセッサは、前記判定処理にて前記抽出範囲の端が前記画角の端に至ったと判定した場合に前記移動処理を実行する、請求項１又は２に記載の撮影装置。
4. 前記プロセッサは、前記移動処理において、前記移動の開始から前記抽出範囲の端が前記画角の端に至るまでの時間に応じた移動速度で前記抽出範囲を移動させる、請求項３に記載の撮影装置。
5. 前記検出器が前記動きを検出した場合に、前記プロセッサは、前記動きの検出前後で前記抽出映像内に映る被写体を追尾対象として選定し、前記移動処理において、前記被写体が前記抽出範囲内に入るように前記抽出範囲を移動させる、請求項１乃至４のいずれか一項に記載の撮影装置。
6. 前記移動処理の実行中、前記被写体が前記画角から外れた場合、前記プロセッサは、前記移動処理を終了する、請求項５に記載の撮影装置。
7. 前記プロセッサは、前記移動処理において、前記抽出範囲のサイズに対する前記被写体の映像の大きさの割合に基づいて前記サイズを変えながら、前記抽出範囲を移動させる、請求項５又は６に記載の撮影装置。
8. 前記プロセッサは、前記移動処理の実行中に前記検出器が前記筐体の動きを検出した場合に、前記抽出範囲が移動している間の前記抽出映像に対して手振れ補正を行う手振れ補正処理をさらに実行する、請求項１～７のいずれか一項に記載の撮影装置。
9. 前記移動処理の実行中、前記抽出範囲の移動方向とは逆方向への前記筐体の動きを前記検出器が検出した場合、前記プロセッサは、前記移動処理を終了する、請求項１～８のいずれか一項に記載の撮影装置。
10. 前記プロセッサは、前記抽出映像内の被写体の映像に対してズームを行うズーム処理をさらに実行し、前記移動処理の実行中に前記ズーム処理を実行した場合、前記移動処理において、前記抽出範囲の移動速度を前記ズームに応じて調整する、請求項１～９のいずれか一項に記載の撮影装置。
11. 動画像である基準映像を撮影するイメージセンサと、
    プロセッサと、を備える撮影装置であって、
    前記プロセッサは、
    前記基準映像を撮影する際の画角内に、前記画角よりも小さい抽出範囲を設定する設定処理と、
    前記抽出範囲内の抽出映像を前記基準映像から抽出する抽出処理と、
    前記抽出映像内の被写体の映像に対して、前記撮影装置と前記抽出映像内の被写体との距離に応じて前記抽出範囲のサイズを変えることにより電子ズームを行うズーム処理と、
    前記画角における前記抽出範囲を、前記ズーム処理で行われた前記電子ズームに応じた移動速度にて経時的に移動させる移動処理と、
    前記移動処理により前記抽出範囲が移動している間の前記抽出映像を記録媒体に記録する記録処理と、を実行することを特徴とする撮影装置。
12. 前記抽出映像を表示する表示器をさらに備え、
    前記プロセッサは、前記移動処理において、前記抽出範囲を移動させ、且つ、前記抽出範囲が移動している間の前記抽出映像を前記表示器に表示させる、請求項１１に記載の撮影装置。
13. 動画像である基準映像を撮影するイメージセンサを有する撮影装置を用いた撮影方法であって、
    前記基準映像を撮影する際の画角内に、前記画角よりも小さい抽出範囲を設定する設定工程と、
    前記抽出範囲内の抽出映像を前記基準映像から抽出する抽出工程と、
    検出器により検出された撮影装置の動きに応じて、前記画角における前記抽出範囲を経時的に移動させる移動工程と、
    前記移動工程により前記抽出範囲が移動している間の前記抽出映像を記録媒体に記録する記録工程を含み、
    前記検出器において、前記動きとして前記撮影装置の水平方向の第１側への移動を検出した場合に、前記第１側とは反対の第２側に位置する前記抽出範囲の端が、前記第２側に位置する前記画角の端に至ったか否かを判定し、前記判定にて前記抽出範囲の端が前記画角の端に至ったと判定した場合、前記第１側へ前記抽出範囲を移動させる、ことを特徴とする撮影方法。