JPWO2018179522A1 - 電子機器、プログラムおよび再生装置 - Google Patents

Abstract

撮像を行い、動画像を生成する電子機器は、被写体を撮像し撮像信号を出力する撮像素子と、前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御して画像を生成する生成部と、を備える。

Description

本発明は、電子機器、プログラムおよび再生装置に関する。

移動する人や物体に取り付けられて、動画像を撮像する撮像装置が知られている（特許文献１参照）。撮像時に撮像装置が移動する場合があるが、移動して撮影するための撮影条件については考慮されているものではなかった。

日本国特開２０１２−２０５１６３号公報

第１の態様によると、電子機器は、撮像を行い、動画像を生成する電子機器であって、被写体を撮像し撮像信号を出力する撮像素子と、前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御して画像を生成する生成部と、を備える。
第２の態様によると、プログラムは、撮像を行い、動画像を生成する電子機器で実行されるプログラムであって、コンピュータに、被写体を撮像し撮像信号を出力させる第１手順と、前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御して画像を生成させる第２手順と、を実行させる。
第３の態様によると、再生装置は、撮像を行い、動画像を生成する電子機器で生成された動画像データを取得する取得部と、前記電子機器の移動に関する情報に基づいて、前記動画像データによる動画像の色情報を制御して動画像を生成する生成部と、前記生成部が生成した動画像を再生する再生部と、を備える。
第４の態様によると、電子機器は、電子機器を移動させながら撮像して生成された動画像を処理する電子機器であって、特定の色成分を調整させるための入力を受け付ける入力部と、前記入力に基づいて、前記動画像のうちの部分領域の色情報を制御した画像を生成する生成部と、前記生成された画像を表示する表示部と、を備える。
第５の態様によると、プログラムは、コンピュータに、撮像を行い、動画像を生成する電子機器で生成された動画像データを取得させる第１手順と、前記電子機器の移動に関する情報に基づいて、前記動画像データによる動画像の色情報を制御して動画像を生成させる第２手順と、生成した動画像を再生させる第３手順と、を実行させる。
第６の態様によると、電子機器は、動画像データを生成する電子機器であって、被写体を撮像し、撮像信号を出力する撮像素子と、前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御する制御部と、を備える。

第１の実施の形態のカメラの構成を示すブロック図 ゲレンデを滑り下りるスキーヤーの頭部にカメラを取り付けた様子を模式的に示す図 図２に示したスキーヤーの頭部に取り付けられたカメラで撮像した動画像のあるフレームにおける画像の一例であり、ゲレンデの様子を示す図 圧縮処理の説明図 圧縮量ｄの変化量制限の説明図 第１の実施の形態のカメラの撮像に関する処理を示したフローチャート 圧縮処理の説明図 トリミング処理の説明図 第３の実施の形態のカメラの撮像に関する処理を示したフローチャート クロップ処理の説明図 第４の実施の形態のカメラ１の撮像に関する処理を示したフローチャート ホワイトバランス調整処理の説明図 第５の実施の形態のカメラ１の撮像に関する処理を示したフローチャート 色調補正処理の説明図 第６の実施の形態のカメラ１の撮像に関する処理を示したフローチャート 色調補正処理の説明図 第８の実施の形態のカメラおよびパーソナルコンピュータの構成を示すブロック図 移動する被写体同士の比較例を模式的に示す図 再生時の調整インタフェースを例示する図

−−−第１の実施の形態−−−
図１〜図６を参照して、撮像装置の第１の実施の形態を説明する。図１は、本実施の形態の撮像装置の一例としてのデジタルカメラの構成を示すブロック図である。本実施の形態のカメラ１は、移動する人や物体に取り付けて被写体を撮像することにより、動画像や静止画像を生成するカメラである。すなわちカメラ１は、例えばアクションカメラ、アクションカム、ウェアラブルカメラ等の名称で呼ばれるカメラである。なお、カメラ１は、アクションカメラ等と呼ばれるものに限らず、デジタルカメラやカメラ機能を有した携帯型の電話機等であってもよい。カメラ１は、撮像光学系３１と、撮像部３３と、制御部３４と、加速度センサ３５と、表示部３６と、操作部材３７と、記録部３８とを有する。

撮像光学系３１は、被写界からの光束を撮像部３３へ導く。撮像光学系３１には、不図示のレンズの他に絞り３２が設けられている。撮像部３３は、撮像素子３３ａおよび駆動部３３ｂを含む。撮像部３３は、撮像光学系３１によって結像された被写体の像を光電変換し、電荷を生成する。駆動部３３ｂは、撮像素子３３ａに露光制御、すなわち電荷の蓄積制御を行わせるために必要な駆動信号を生成する。撮像部３３に対する露光時間（蓄積時間）などの撮像指示は、制御部３４から駆動部３３ｂへ送信される。

制御部３４は、例えばＣＰＵによって構成され、カメラ１による全体の動作を制御する。例えば、制御部３４は、撮像部３３で取得された光電変換信号に基づいて所定の露出演算を行い、適正露出に必要な撮像素子３３ａの露光時間、ＩＳＯ感度、絞り３２の絞り値等の露出条件を決定して駆動部３３ｂや絞り３２へ指示する。

制御部３４は、移動速度算出部３４ｂと、画像処理部３４ｄとを有する。これらの各部は、制御部３４が不図示の不揮発性メモリに格納されているプログラムを実行することにより、ソフトウェア的に実現される。なお、これらの各部をＡＳＩＣ等により構成してもよい。

移動速度算出部３４ｂは、カメラ１の加速度の情報に基づいて、カメラ１の移動速度を算出する。画像処理部３４ｄは、撮像部３３によって取得された画像データに対する画像処理を行う。画像処理には、後述する圧縮処理の他に、例えば、色補間処理、画素欠陥補正処理、輪郭強調処理、ノイズ低減（Noise reduction）処理、ホワイトバランス調整処理、ガンマ補正処理、表示輝度調整処理、彩度調整処理等が含まれる。画像処理部３４ｄは、表示部３６により表示する画像も生成する。

加速度センサ３５は、カメラ１の加速度を検出する。加速度センサ３５は、検出結果を制御部３４の移動速度算出部３４ｂに出力する。移動速度算出部３４ｂは、加速度センサ３５が検出した加速度に基づきカメラ１の移動速度を算出する。
表示部３６は、画像処理部３４ｄによって生成された画像や画像処理された画像、記録部３８によって読み出された画像などを再生表示する。表示部３６は、操作メニュー画面や、撮像条件を設定するための設定画面等を表示する。

操作部材３７は、レリーズボタンやメニューボタン等の種々の操作部材によって構成される。操作部材３７は、各操作に対応する操作信号を制御部３４へ送出する。操作部材３７は、表示部３６の表示面に設けられたタッチ操作部材を含む。
記録部３８は、制御部３４からの指示に応じて、不図示のメモリカードなどで構成される記録媒体に画像データなどを記録する。記録部３８は、制御部３４からの指示に応じて記録媒体に記録されている画像データを読み出す。

このように構成されるカメラ１は、被写体を撮像して静止画像や動画像を生成し、撮像して得られた画像データを記録媒体に記録する。カメラ１は、図２に示すように移動する人物や物体などの移動体に保持されて撮像を行い、動画像を生成するのに適している。ここで、保持とは、人物が持つ場合、人物や物体などの移動体に取り付けられる場合を含む。図２は、スキーヤー（競技者）の頭部にカメラ１を取り付けた様子を模式的に示す図である。ゲレンデを滑り下りるスキーヤーは、移動する人物の一例である。図２に示す例では、カメラ１は、スキーヤーの頭部に取り付けられているが、スキーヤーの胸部や腕部に取り付けられていてもよく、スキー板に取り付けられていてもよい。
図３は、図２に示したスキーヤーの頭部に取り付けられたカメラ１で撮像して生成した動画像のあるフレームにおける画像の一例であり、ゲレンデの様子を示している。この画像５０には、雪が積もっている斜面５１の両脇に複数の木５２が存在している。画像５０では、斜面５１の向こう側には、山５３が写っており、山５３の上には空５４が写っている。

この種のカメラは、一般に、撮影光学系３１が短い焦点距離、即ち画角が広角で撮影され、また、比較的短い露光時間で撮影される場合が多い。撮像時にカメラ１が移動する場合、画角が広角で露光時間が短いと、周囲の風景の像ブレが少なくなる場合があり、再生時に動画像の滑らかさが感じられ難くなることがある。
これにより、撮影して生成された動画像を再生すると、実際に撮影時にスキーヤーが体感している速度感よりも速度感が薄れてしまうおそれがある。例えば、図２に示すように、人物とともにカメラ１が移動する場合を考える。このとき、カメラ１で撮像して得られる動画像では、例えば図３における木５２などの周囲の風景が移動する様子が記録されるが、再生時に滑らかさが感じられ難く、速度感が薄れてしまうおそれがある。

以下の説明において、木５２のように、フレーム間で撮像範囲内における位置が変化する被写体を、移動する被写体と呼ぶことがある。すなわち、移動する被写体の「移動する」とは、その被写体自身が現実に移動することを意味するのではなく、動画像の再生時に画面内を移動することを意味する。

そこで、本実施の形態のカメラ１では、カメラの移動に関する情報に基づいて、生成する動画像を左右方向から中央に向けて圧縮する。ここで、移動に関する情報とは、カメラ１の撮像時の速度情報である。カメラ１の速度情報に基づいて、生成する動画像を左右方向から中央に向けて圧縮する。ここで速度情報とは、例えば、カメラ１の移動速度の情報である。カメラ１の速度情報に基づいて、生成する動画像を左右方向から中央に向けて圧縮する処理を、圧縮処理と称する。圧縮処理は画像処理部３４ｄにより実行される。なお、移動に関する情報とは、カメラ１の撮像時の移動速度を算出できる情報であればよく、ＧＰＳセンサが出力する現在位置の情報やカメラ１と特定対象物との距離の情報などであってもよい。

図４は、圧縮処理の説明図である。図４には、図３に例示した画像５０に対して圧縮処理を施した画像５０ａを例示している。圧縮処理は、画像５０の左右の幅Ｗを、より短い幅Ｗａに縮める処理である。画像処理部３４ｄは、画像５０を左右方向からそれぞれ中央Ｃに向けて圧縮量ｄだけ圧縮する。換言すると、画像処理部３４ｄは、画像５０を横方向に圧縮する。つまり、画像５０の内容は、画像５０ａにおいて、水平方向にｄ×２だけ縮む。動画像の各フレームの幅は統一されていることが望ましい。すなわち、図３に示した画像５０の幅と、図４に示した画像５０ａの幅は一致していることが望ましい。そこで画像処理部３４ｄは、画像の幅を縮めたことにより左右にできるｄ×２の分の空きスペース５５を、所定の色（例えば黒色）で塗りつぶす。

動画像を左右方向から中央Ｃに向けて圧縮すると、圧縮しない場合に比べて、動画像内の木５２は画像の中央Ｃに近づく。動画像の速度感は、木５２のような、フレーム間で移動する被写体が中央Ｃに近いほど向上する。従って、図３に示した画像５０を図４に示した画像５０ａのように圧縮することにより、動画像の速度感が向上する。なお、左右方向からではなく、上下方向から中央Ｃに向けて圧縮してもよい。換言すると、画像処理部３４ｄは、画像５０を縦方向に圧縮してもよい。

画像処理部３４ｄは、速度情報が示す速度が速いほど、圧縮量ｄを大きくする。換言すると、画像処理部３４ｄは、速度情報が示す速度が遅いほど、圧縮量ｄを小さくする。例えば画像処理部３４ｄは、速度情報が示す速度に、所定の変換係数を掛けた値を、圧縮量ｄとする。すなわち、画像処理部３４ｄは、速度情報に基づき、圧縮量ｄを連続的に設定する。または、画像処理部３４ｄは、速度情報が示す速度を所定のしきい値と比較し、速度がしきい値以上であった場合には所定の圧縮量ｄ１を採用し、速度がしきい値を下回る場合にはｄ１よりも小さい圧縮量ｄ２を採用する。すなわち、画像処理部３４ｄは、速度情報に基づき、圧縮量ｄを段階的に（離散的に）設定する。速度情報が示す速度が速いほど圧縮量ｄを大きくするということは、すなわち、撮像時にスキーヤーが高速に動いているほど、生成する動画像のスピード感を増大させるということである。このように、画像処理部３４ｄは、再生する動画像の速度感を増すために画像５０の圧縮を行う。このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、速度情報が示す速度が速いほど、圧縮量ｄを小さくしてもよい。換言すると、速度情報が示す速度が遅いほど、圧縮量ｄを大きくしてもよい。

フレーム間で被写体の幅が急に変化すると、鑑賞者に違和感を覚えさせるおそれがある。そこで画像処理部３４ｄは、フレーム間の圧縮量ｄの変化量を制限する。図５は、圧縮量ｄの変化量制限の説明図である。図５には、紙面上から下に向かって、時刻ｔ１に撮像された画像６１と、時刻ｔ１より後の時刻ｔ２に撮像された画像６２と、時刻ｔ２より後の時刻ｔ３に撮像された画像６３と、時刻ｔ３より後の時刻ｔ４に撮像された画像６４と、時刻ｔ４より後の時刻ｔ５に撮像された画像６５を例示している。

例えば時刻ｔ１において、移動速度算出部３４ｂが、比較的大きな圧縮量ｄｘに対応する移動速度を算出したものとする。時刻ｔ１における圧縮量はゼロである。従って、圧縮量の変化量に制限がかけられていない場合、次のフレームにおいて、圧縮量はｄｘに設定される。いま、圧縮量の変化量の制限値ｄｔｈが、ｄｘよりも小さいものとする。この場合、画像処理部３４ｄは、圧縮量をｄｔｈずつ、ｄｘに達するまで少しずつ増やしていく。例えば時刻ｔ２に撮像された画像６２における圧縮量はｄｔｈである。時刻ｔ３に撮像された画像６３における圧縮量は、ｄｔｈ×２である。時刻ｔ４に撮像された画像６４における圧縮量は、ｄｔｈ×３である。時刻ｔ５に撮像された画像６５において、圧縮量はｄｘに到達する。

図６は、第１の実施の形態のカメラ１の撮像に関する処理を示したフローチャートである。図６に示されるフローチャートの処理は、カメラ１の不図示のメモリ等に記録されている。カメラ１の不図示の電源スイッチがオンされると、図６に示す処理が制御部３４で実行される。ステップＳ１３において、制御部３４は、レリーズボタンが操作されるなどして撮像開始が指示されるまで待機し、撮像開始が指示されると、動画撮影を開始してステップＳ１５へ進む。

ステップＳ１５において、制御部３４は、被写体を撮像するように撮像部３３を制御してステップＳ１７へ進む。ステップＳ１７において、移動速度算出部３４ｂは、加速度センサ３５で検出されたカメラ１の加速度の情報に基づいて、カメラ１の移動速度Ｖを算出してステップＳ１９へ進む。

ステップＳ１９において、画像処理部３４ｄは、カメラ１の移動速度Ｖから圧縮量ｄを算出してステップＳ２３に進む。ステップＳ２３において、画像処理部３４ｄは、現在の圧縮量からステップＳ１９で算出された圧縮量ｄへの変化量の絶対値がしきい値ｄｔｈ以下であるか否かを判断する。ステップＳ２３が肯定判断されるとステップＳ２５へ進み、画像処理部３４ｄは、圧縮量をステップＳ１９で算出された圧縮量ｄに設定してステップＳ２９へ進む。

現在の圧縮量からステップＳ１９で算出された圧縮量ｄへの変化量の絶対値がしきい値ｄｔｈを越える場合にはステップＳ２３が否定判断されてステップＳ２７へ進む。ステップＳ２７において、画像処理部３４ｄは、圧縮量をｄｔｈだけステップＳ１９で算出された圧縮量ｄに近づけてステップＳ２９へ進む。すなわち画像処理部３４ｄは、圧縮量をｄｔｈだけ増減させてステップＳ２９へ進む。

ステップＳ２９において、画像処理部３４ｄは、ステップＳ２５またはステップＳ２７で設定された圧縮量を用いて圧縮処理を実行してステップＳ３５へ進む。
ステップＳ３５において、制御部３４は、動画像の撮像の終了が指示されたか否かを判断する。ステップＳ３５が否定判断されるとステップＳ１５へ戻り、ステップＳ３５が肯定判断されるとステップＳ３７へ進む。

ステップＳ３７において、制御部３４は、不図示の電源スイッチがオフされたか否かを判断する。ステップＳ３７が否定判断されるとステップＳ１３へ戻り、ステップＳ３７が肯定判断されると本プログラムを終了する。

第１の実施の形態のカメラ１では、次の作用効果を奏する。
（１）画像処理部３４ｄは、カメラ１の移動に関する速度情報に基づいて、動画像を構成する画像５０を横方向に圧縮して、表示部に表示させる動画像を生成する。これにより、所望の速度感を覚える動画像が得られる。
（２）画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が第１速度よりも早い第２速度を示す場合には、第１の圧縮量よりも大きい第２の圧縮量で圧縮して動画像を生成する。つまり画像処理部３４ｄは、再生する動画像の速度感を増すために圧縮を行う。これにより、高速移動中に撮像された動画像を鑑賞する鑑賞者に、より強い速度感を覚えさせることができる。
（３）画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が第３速度よりも遅い第４速度を示す場合には、第３の圧縮量よりも小さい第４の圧縮量で圧縮して動画像を生成する。これにより、低速移動中に撮像された動画像を鑑賞する鑑賞者には、より弱い速度感を覚えさせることができる。

−−−第２の実施の形態−−−
図７を参照して、撮像装置の第２の実施の形態を説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。

第２の実施の形態では、画像処理部３４ｄは、第１の実施の形態で説明した内容とは異なる内容の圧縮処理を実行する。第１の実施の形態における圧縮処理は、図４で説明したように、画像を左右方向から中央に向けて縮める処理であった。その結果、例えば図４に示す木５２などは、縦に細長く歪んでいた。第２の実施の形態における圧縮処理は、木５２のように移動する被写体の形状を保ったまま、画像を左右方向から中央に向けて縮める。なお、圧縮量ｄを移動速度Ｖから算出する点などは第１の実施の形態と同様である。

図７は、圧縮処理の説明図である。図７（a）は、動画像を構成する複数の画像うちの一枚の画像７０を示している。図７（ａ）に圧縮処理の対象となる圧縮前の画像７０を、図７（ｂ）には画像７０を圧縮した画像７０ａを、それぞれ例示する。画像処理部３４ｄは、画像７０において、木５２が移動する被写体であることを、周知の技術により認識し検出する。例えば画像処理部３４ｄは、フレーム間の差を演算し、差が一定以上大きい部分にある被写体を移動する被写体として認識し検出する。ここで移動する被写体とは、カメラ１を保持した移動体が移動することにより、カメラ１に対して相対的に移動する被写体である。
なお、移動する被写体は、カメラ１の近くにある被写体と考えることもできる。これは、カメラ１の遠くにある被写体は、カメラ１が移動してもフレーム間で画像内の位置がほとんど変化しないことによる。つまり、カメラ１の近くにある被写体は、カメラ１の移動に伴いフレーム間で大きく動くので、カメラ１の近くにある被写体をフレーム間で移動する被写体と考えることができる。
例えば画像処理部３４ｄは、周知のＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）センサを用いて、カメラ１から被写体までの距離を検出し、カメラ１から一定距離以内に存在する被写体を移動する被写体として認識し検出する。ＴＯＦセンサは、公知のＴＯＦ法に用いるイメージセンサである。ＴＯＦ法は、不図示の光源部から被写体に向けて光パルス（照射光）を発し、被写体で反射された光パルスがＴＯＦセンサへ戻ってくるまでの時間に基づいて、被写体までの距離を検出する技術である。

画像処理部３４ｄは、圧縮処理において、木５２が存在する領域７１および領域７３は圧縮せず、木５２が存在しない領域７２のみを圧縮する。圧縮後の画像７０ａにおいて、木５２は圧縮前の形状をそのまま保っている。一方、領域７２を圧縮した領域７２ａにある被写体は、第１の実施の形態に比べて形状が大きく歪んでいるが、木５２のようにフレーム間で移動しないので、歪みによる違和感は比較的少ない。

なお、例えばシームカービングなどの周知の技術を用いて圧縮処理を実行してもよい。シームカービングは、画像内の個々の被写体を認識して、重要な被写体の形状を維持したまま、背景などの重要でない被写体を変形することにより、画像のサイズを変更する技術である。

第２の実施の形態のカメラ１では、第１の実施の形態のカメラ１の作用効果に加えて、更に次の作用効果を奏する。
（１）画像処理部３４ｄは、被写体の認識結果に基づいて、動画像を生成する。これにより、被写体ごとに最適な動画像を生成することができる。具体的には、画像処理部３４ｄは、カメラ１の移動により、カメラ１に対して相対的に移動する移動物体を認識する。画像処理部３４ｄは、認識結果、すなわち移動物体の位置に基づいて動画像を構成する画像を圧縮する領域を決定する。これにより、重要な被写体の形状を維持したまま、動画像の速度感を高めることができる。

−−−第３の実施の形態−−−
図８および図９を参照して、撮像装置の第３の実施の形態を説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。

第３の実施の形態では、画像処理部３４ｄは、第１の実施の形態で説明した圧縮処理の代わりに、トリミング処理を実行する。トリミング処理は、画像の一部を切出す処理である。具体的には、画像の上下または左右の領域を削除する処理である。換言すると、トリミング処理は、撮像素子３３ａの撮像領域を変更する処理である。トリミング処理によって画像の視野が狭まることにより、動画像への没入感が増すので、動画像の速度感が向上する。

図８は、トリミング処理の説明図である。図８（ａ）にトリミング処理の対象となるトリミング前の画像８０を、図８（ｂ）には画像８０をトリミングした画像８０ａを、それぞれ例示する。画像処理部３４ｄは、移動速度Ｖに基づき、トリミング幅Ｌを算出する。画像処理部３４ｄは、第１の実施の形態における圧縮量ｄと同様にトリミング幅Ｌを算出する。つまり、画像処理部３４ｄは、移動速度Ｖが速いほど、トリミング幅Ｌを大きくする（撮像領域を狭くする）。換言すると、画像処理部３４ｄは、移動速度Ｖが遅いほど、トリミング幅Ｌを小さくする（撮像領域を広くする）。このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、移動速度Ｖが遅いほど、トリミング幅Ｌを大きく（撮像領域を狭く）してもよい。換言すると、移動速度Ｖが速いほど、トリミング幅Ｌを小さく（撮像領域を広く）してもよい。

画像処理部３４ｄは、第２の実施の形態と同様に、画像８０において、木５２が移動する被写体であることを、周知の技術により認識し検出する。例えば画像処理部３４ｄは、フレーム間の差を演算し、差が一定以上大きい部分にある被写体を移動する被写体として検出する。なお、第２の実施の形態で説明した通り、移動する被写体は、カメラ１の近くにある被写体と考えることもできる。

画像処理部３４ｄは、画像８０の上端から下方向にトリミング幅Ｌだけの長さを有する領域８１と、画像８０の下端から上方向にトリミング幅Ｌだけの長さを有する領域８２を設定する。画像処理部３４ｄは、領域８１および領域８２内において、移動する被写体である木５２が占める割合を算出する。図８（ａ）において、領域８１および領域８２内には木５２がほとんど含まれていないので、この割合は極めて小さくなる。

画像処理部３４ｄは、画像８０の左端から右方向にトリミング幅Ｌだけの長さを有する領域８３と、画像８０の右端から左方向にトリミング幅Ｌだけの長さを有する領域８４を設定する。画像処理部３４ｄは、領域８３および領域８４内において、移動する被写体である木５２が占める割合を算出する。図８（ａ）において、この割合は、領域８１および領域８２で算出した割合に比べて大きくなる。

画像処理部３４ｄは、領域８１および領域８２における木５２の割合と、領域８３および領域８４における木５２の割合とを比較する。画像処理部３４ｄは、割合が小さい方の領域８１および領域８２をトリミング（切除、除去）し、図８（ｂ）に示す画像８０ａを生成する。
なお、木５２が占める割合ではなく、各領域内におけるテクスチャの多さを比較してもよい。例えば空５４のように、テクスチャの少ない被写体が多い領域は、トリミングしても速度感にはほとんど影響しない。そこで、テクスチャの少ない方の領域をトリミングすれば、画像の情報量を損ねることなく速度感を向上させることができる。なお、上記のようにテクスチャの多さを比較することのほかに、高周波成分の多さを比較してもよい。

第１の実施の形態と同様に、動画像の各フレームの幅は統一されていることが望ましいので、画像処理部３４ｄは、トリミングにより上下にできるＬ×２の分の空きスペース５５を、所定の色（例えば黒色）で塗りつぶす。

なお、第１の実施の形態における圧縮量ｄと同様に、フレーム間におけるトリミング幅Ｌの変化量に制限を設けてもよい。つまり、フレーム間で空きスペース５５の大きさが急激に変化しないように、トリミング幅を少しずつ変化させてもよい。
また、フレーム間で上下のトリミングと左右のトリミングが頻繁に変化すると、鑑賞者が違和感を覚える恐れがある。そこで、あるフレームにおいて上下のトリミングを実行した場合には、その後一定期間、左右のトリミングを行わずに上下のトリミングのみを実行するようにしてもよい。この一定期間は、事前に決めておいた期間（例えば１秒や３０フレームなど）であってもよいし、トリミング幅Ｌが一定量（例えばゼロ）以下になるまでの期間であってもよい。

図９は、第３の実施の形態のカメラ１の撮像に関する処理を示したフローチャートである。図９に示されるフローチャートの処理は、カメラ１の不図示のメモリ等に記録されている。カメラ１の不図示の電源スイッチがオンされると、図９に示す処理が制御部３４で実行される。ステップＳ１３において、制御部３４は、レリーズボタンが操作されるなどして撮像開始が指示されるまで待機し、撮像開始が指示されると、動画撮影を開始してステップＳ１５へ進む。

ステップＳ１５において、制御部３４は、被写体を撮像するように撮像部３３を制御してステップＳ１７へ進む。ステップＳ１７において、移動速度算出部３４ｂは、加速度センサ３５で検出されたカメラ１の加速度の情報に基づいて、カメラ１の移動速度Ｖを算出してステップＳ４１へ進む。

ステップＳ４１において、画像処理部３４ｄは、カメラ１の移動速度Ｖからトリミング幅Ｌを算出してステップＳ４３へ進む。ステップＳ４３において、画像処理部３４ｄは、画像から移動する被写体を特定してステップＳ４５へ進む。ステップＳ４５において、画像処理部３４ｄは、上下の領域における移動被写体の割合と、左右の領域における移動被写体の割合とを算出してステップＳ４７へ進む。ステップＳ４７において、画像処理部３４ｄは、上下の割合が左右の割合未満であるか否かを判断する。ステップＳ４７が肯定判断されるとステップＳ５１へ進み、画像処理部３４ｄは、上下の領域をトリミングしてステップＳ３５へ進む。

上下の割合が左右の割合以上である場合にはステップＳ４７が否定判断されてステップＳ５３へ進む。ステップＳ５３において、画像処理部３４ｄは、左右の領域をトリミングしてステップＳ３５へ進む。

ステップＳ３５において、制御部３４は、動画像の撮像の終了が指示されたか否かを判断する。ステップＳ３５が否定判断されるとステップＳ１５へ戻り、ステップＳ３５が肯定判断されるとステップＳ３７へ進む。

ステップＳ３７において、制御部３４は、不図示の電源スイッチがオフされたか否かを判断する。ステップＳ３７が否定判断されるとステップＳ１３へ戻り、ステップＳ３７が肯定判断されると本プログラムを終了する。

第３の実施の形態のカメラ１では、次の作用効果を奏する。
（１）画像処理部３４ｄは、カメラ１の移動に関する速度情報に基づいて、動画像を生成する撮像素子３３ａの撮像領域を異ならせる。これにより、所望の速度感を覚える動画像が得られる。
（２）画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が第１速度よりも早い第２速度を示す場合には、第１の撮像領域よりも狭い第２の撮像領域の動画像を生成する。このように、画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が速くなるほど狭い撮像領域の動画像を生成する。つまり画像処理部３４ｄは、再生する動画像の速度感を増すために撮像領域を異ならせる。これにより、高速移動中に撮像された動画像を鑑賞する鑑賞者に、より強い速度感を覚えさせることができる。
（３）画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が第３速度よりも遅い第４速度を示す場合には、第３の撮像領域よりも広い第４の撮像領域の動画像を生成する。このように、画像処理部３４ｄは、速度情報に基づくカメラ１の移動速度が遅くなるほど広い撮像領域の動画像を生成する。これにより、低速移動中に撮像された動画像を鑑賞する鑑賞者には、より弱い速度感を覚えさせることができる。

−−−第４の実施の形態−−−
図１０および図１１を参照して、撮像装置の第４の実施の形態を説明する。以下の説明では、第３の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第３の実施の形態と同じである。

第４の実施の形態では、画像処理部３４ｄは、第３の実施の形態で説明したトリミング処理の代わりに、クロップ処理を実行する。クロップ処理は、画像の一部領域を切り出し、それ以外の領域を除去する処理である。

図１０は、クロップ処理の説明図である。図１０（ａ）にクロップ処理の対象となるクロップ前の画像７８を、図１０（ｂ）には画像７８をクロップした画像７８ａを、それぞれ例示する。画像処理部３４ｄは、移動速度Ｖに基づき、クロップサイズＳを算出する。画像処理部３４ｄは、移動速度Ｖが速いほど、クロップサイズＳを小さくする。換言すると、画像処理部３４ｄは、移動速度Ｖが遅いほど、クロップサイズＳを大きくする。このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、移動速度Ｖが遅いほど、クロップサイズＳを小さくしてもよい。換言すると、移動速度Ｖが速いほど、クロップサイズＳを大きくしてもよい。

画像処理部３４ｄは、第２の実施の形態と同様に、画像７８において、木５２が移動する被写体であることを、周知の技術により検出する。例えば画像処理部３４ｄは、フレーム間の差を演算し、差が一定以上大きい部分にある被写体を移動する被写体として検出する。なお、第２の実施の形態で説明した通り、移動する被写体は、カメラ１の近くにある被写体と考えることもできる。

画像処理部３４ｄは、画像７８と同一の縦横比を有し、長辺の長さがクロップサイズＳである長方形の領域９８を、画像７８内に設定する。画像処理部３４ｄは、領域９８内において、移動する被写体である木５２が占める割合が可能な限り大きくなるように、領域９８の位置を設定する。例えば図１０（ａ）において、領域９８の位置は、領域９８内に木５２ができるだけ多く含まれるような位置に設定されている。

画像処理部３４ｄは、画像７８から領域９８が占める範囲の部分画像を切り出して、画像７８と同一サイズに拡大した画像７８ａを生成する。画像７８ａの例を図１０（ｂ）に示す。なお、画像７８と同一サイズに拡大する代わりに、切り出した部分画像の上下左右にできる空きスペース５５を、所定の色（例えば黒色）で塗りつぶしてもよい。
画像７８ａの全体のうち、移動する被写体である木５２が占める割合は、クロップ前の画像７８の全体のうち、移動する被写体である木５２が占める割合よりも大きい。従って、動画像の速度感が向上する。

なお、第１の実施の形態における圧縮量ｄと同様に、フレーム間におけるクロップサイズＳの変化量に制限を設けてもよい。つまり、フレーム間で領域９８の大きさが急激に変化しないように、クロップサイズを少しずつ変化させてもよい。
また、フレーム間でクロップ位置が頻繁に変化すると、鑑賞者が違和感を覚える恐れがある。そこで、あるフレームにおいてクロップ処理を実行した場合には、その後一定期間、クロップ位置を変更しないようにしてもよい。または、クロップ位置の変化量に制限を設けてもよい。つまり、クロップ位置がフレーム感で急激に変化しないように、クロップ位置を少しずつ変化させてもよい。

図１１は、第４の実施の形態のカメラ１の撮像に関する処理を示したフローチャートである。図１１に示されるフローチャートの処理は、カメラ１の不図示のメモリ等に記録されている。カメラ１の不図示の電源スイッチがオンされると、図１１に示す処理が制御部３４で実行される。ステップＳ１３において、制御部３４は、レリーズボタンが操作されるなどして撮像開始が指示されるまで待機し、撮像開始が指示されると、動画撮影を開始してステップＳ１５へ進む。

ステップＳ１５において、制御部３４は、被写体を撮像するように撮像部３３を制御してステップＳ１７へ進む。ステップＳ１７において、移動速度算出部３４ｂは、加速度センサ３５で検出されたカメラ１の加速度の情報に基づいて、カメラ１の移動速度Ｖを算出してステップＳ５５へ進む。

ステップＳ５５において、画像処理部３４ｄは、カメラ１の移動速度ＶからクロップサイズＳを算出してステップＳ５６へ進む。ステップＳ５６において、画像処理部３４ｄは、画像から移動する被写体を特定してステップＳ５７へ進む。ステップＳ５７において、画像処理部３４ｄは、移動被写体が可能な限り大きく含まれるように、クロップ位置を設定してステップＳ５８へ進む。ステップＳ５８において、画像処理部３４ｄは、クロップ処理を行って、すなわち部分画像を切り出してステップＳ５９へ進む。ステップＳ５９において、画像処理部３４ｄは、ステップＳ５８で切り出した部分画像をクロップ処理前の画像サイズまで拡大してステップＳ３５へ進む。

ステップＳ３５において、制御部３４は、動画像の撮像の終了が指示されたか否かを判断する。ステップＳ３５が否定判断されるとステップＳ１５へ戻り、ステップＳ３５が肯定判断されるとステップＳ３７へ進む。

ステップＳ３７において、制御部３４は、不図示の電源スイッチがオフされたか否かを判断する。ステップＳ３７が否定判断されるとステップＳ１３へ戻り、ステップＳ３７が肯定判断されると本プログラムを終了する。

第４の実施の形態のカメラ１では、第３の実施の形態のカメラ１と同様の作用効果を奏する。

−−−第５の実施の形態−−−
図１２および図１３を参照して、撮像装置の第５の実施の形態を説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。

第５の実施の形態では、画像処理部３４ｄは、第１の実施の形態で説明した圧縮処理の代わりに、ホワイトバランス調整処理を実行する。ホワイトバランス調整処理は、画像の色温度を調整する処理である。ホワイトバランス調整処理によって画像の色温度が変化すると、画像全体における進出色および後退色の割合が変化するので、動画像の速度感が増減する。つまり画像処理部３４ｄは、動画像における所定の色の割合を調整することにより、動画像の速度感を調整する。
なお、進出色とは、暖色寄り（暖色系）の色、明度が高い色、彩度が高い色などのことを言う。例えば、暖色寄りの色とは、赤色、桃色、黄色、オレンジ色などの色である。同様に、後退色とは、寒色寄り（寒色系）の色、明度が低い色、彩度が低い色などのことを言う。例えば、寒色寄りの色とは、青、白、黒、グレーなどの色である。進出色が強い被写体は、より速度感が増して見える。後退色が強い被写体は、より速度感が減じて見える。

図１２は、ホワイトバランス調整処理の説明図である。例えば画像処理部３４ｄは、カメラ１の移動速度がＶ１のとき、色温度を４０００Ｋ（ケルビン）に設定する。画像処理部３４ｄは、カメラ１の移動速度がＶ１よりも遅いＶ２のとき、色温度を５０００Ｋに設定する。画像処理部３４ｄは、カメラ１の移動速度がＶ２よりも遅いＶ３のとき、色温度を６０００Ｋに設定する。
なお、色温度は移動速度Ｖに基づき連続的に設定されてもよいし、段階的に（離散的に）設定されてもよい。また、図１２に示した色温度の数値は一例であり、異なる数値を採用してもよいことは勿論である。

以上のように、画像処理部３４ｄは、移動速度Ｖが遅いほど、色温度を高くする。色温度を高くすると、画像の青が強くなり、赤が弱くなるので、画像は青白くなり、進出色が減って後退色が増える。つまり画像処理部３４ｄは、移動速度Ｖが遅いほど、寒色系の色の割合を増す（多くする）。その結果、動画像の速度感は減る。
また、画像処理部３４ｄは、カメラ１の移動速度Ｖが速いほど、色温度を低くする。色温度を低くすると、画像の赤が強くなり、青が弱くなるので、画像は赤っぽく、ないしは黄色っぽくなり、進出色が増えて後退色が減る。つまり画像処理部３４ｄは、移動速度Ｖが速いほど、暖色系の色の割合を増す（多くする）。その結果、動画像の速度感は増す。
このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、移動速度Ｖが速いほど、色温度を高くしてもよい。換言すると、移動速度Ｖが遅いほど、色温度を低くしてもよい。

図１３は、第５の実施の形態のカメラ１の撮像に関する処理を示したフローチャートである。図１３に示されるフローチャートの処理は、カメラ１の不図示のメモリ等に記録されている。カメラ１の不図示の電源スイッチがオンされると、図１３に示す処理が制御部３４で実行される。ステップＳ１３において、制御部３４は、レリーズボタンが操作されるなどして撮像開始が指示されるまで待機し、撮像開始が指示されると、動画撮影を開始してステップＳ１５へ進む。

ステップＳ１５において、制御部３４は、被写体を撮像するように撮像部３３を制御してステップＳ１７へ進む。ステップＳ１７において、移動速度算出部３４ｂは、加速度センサ３５で検出されたカメラ１の加速度の情報に基づいて、カメラ１の移動速度Ｖを算出してステップＳ６１へ進む。

ステップＳ６１において、画像処理部３４ｄは、カメラ１の移動速度Ｖから色温度を算出してステップＳ６３へ進む。ステップＳ６３において、画像処理部３４ｄは、ステップＳ６１で算出した色温度にホワイトバランスを調整してステップＳ３５へ進む。

ステップＳ３５において、制御部３４は、動画像の撮像の終了が指示されたか否かを判断する。ステップＳ３５が否定判断されるとステップＳ１５へ戻り、ステップＳ３５が肯定判断されるとステップＳ３７へ進む。

ステップＳ３７において、制御部３４は、不図示の電源スイッチがオフされたか否かを判断する。ステップＳ３７が否定判断されるとステップＳ１３へ戻り、ステップＳ３７が肯定判断されると本プログラムを終了する。

第５の実施の形態のカメラ１では、次の作用効果を奏する。
（１）画像処理部３４ｄは、カメラ１の移動に関する情報である速度情報に基づいて、撮像信号の色情報を制御して画像を生成する。これにより、所望の速度感を覚える動画像が得られる。
（２）画像処理部３４ｄは、速度情報に基づいて、所定の色の割合を調整する。これにより、簡易な画像処理のみで、動画像から感じる速度感を調整することができる。
（３）画像処理部３４ｄは、速度情報に基づいて設定された色温度により、所定の色の割合を調整する。これにより、周知のホワイトバランス処理を実行するだけで、動画像から感じる速度感を調整することができる。
（４）画像処理部３４ｄは、カメラ１の移動速度が第１移動速度よりも早い第２移動速度になると、暖色系の色の割合を多くし、カメラ１の移動速度が第３の移動速度よりも遅い第４移動速度になると、寒色系の色の割合を多くする。つまり画像処理部３４ｄは、カメラ１の移動速度が速くなるほど、暖色系の色の割合を多くし、カメラ１の移動速度が遅くなるほど、寒色系の色の割合を多くする。このように、画像処理部３４ｄは、再生する動画像の速度感を増すために所定の色の割合を調整する。これにより、カメラ１を保持していた人物が感じていた速度感を、動画像の閲覧者にも感じさせることができる。

−−−第６の実施の形態−−−
図１４および図１５を参照して、撮像装置の第６の実施の形態を説明する。以下の説明では、第５の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第５の実施の形態と同じである。

第６の実施の形態では、画像処理部３４ｄは、ホワイトバランス調整処理の代わりに、色調補正処理を実行する。色調補正処理は、画像の色調を赤、緑、青の各成分ごとに調整する処理である。すなわち第６の実施の形態に係る画像処理部３４ｄは、画像のホワイトバランス（色温度）を調整する代わりに、画像の色調を調整する。色調補正により画像の赤成分や青成分の強弱が変化すると、画像全体における進出色および後退色の割合が変化するので、動画像の速度感が増減する。つまり画像処理部３４ｄは、動画像における所定の色の割合を調整することにより、動画像の速度感を調整する。

図１４は、色調補正処理の説明図である。画像処理部３４ｄは、カメラ１の移動速度がＶ１のとき、図１４（ａ）に示すトーンカーブに従って色調補正を行う。図１４（ａ）において、Ｒは赤色成分のトーンカーブ、Ｇは緑色成分のトーンカーブ、Ｂは青色成分のトーンカーブをそれぞれ示している。トーンカーブは、横軸を入力値、縦軸を出力値とする、入出力特性を示す曲線である。図１４（ａ）に示すように、カメラ１の移動速度がＶ１のとき、各色のトーンカーブは入力値と出力値が１対１の関係になる。つまり、画像の色調は変化しない。

画像処理部３４ｄは、カメラ１の移動速度がＶ１よりも速いＶ２のとき、図１４（ｂ）に示すトーンカーブに従って色調補正を行う。図１４（ｂ）に示すトーンカーブは、赤色成分について出力値が入力値よりも強められている。つまり、図１４（ｂ）に示すトーンカーブに従って色調補正を行うと、画像は赤みが強くなり、進出色の割合が多くなる。従って、動画像の速度感は向上する。つまり画像処理部３４ｄは、移動速度Ｖが速いほど、暖色系の色の割合を増す（多くする）。

画像処理部３４ｄは、カメラ１の移動速度がＶ１よりも遅いＶ３のとき、図１４（ｃ）に示すトーンカーブに従って色調補正を行う。図１４（ｃ）に示すトーンカーブは、赤色成分について出力値が入力値よりも弱められていると共に、青色成分について出力値が入力値よりも強められている。つまり、図１４（ｃ）に示すトーンカーブに従って色調補正を行うと、画像は赤みが弱くなり、進出色の割合が少なくなると共に、画像は青みが強くなり、後退色の割合が多くなる。従って、動画像の速度感は減衰する。つまり画像処理部３４ｄは、移動速度Ｖが遅いほど、寒色系の色の割合を増す（多くする）。
なお、色調補正は移動速度Ｖに基づき連続的に為されてもよいし、段階的に（離散的に）為されてもよい。

以上のように、画像処理部３４ｄは、カメラ１の移動速度Ｖが遅いほど、画像全体の進出色の割合を減らし、画像全体の後退色の割合を増やす。換言すると、画像処理部３４ｄは、カメラ１の移動速度Ｖが速いほど、画像全体の進出色の割合を増やし、画像全体の後退色の割合を減らす。このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、移動速度Ｖが速いほど、画像全体の進出色の割合を減らし、画像全体の後退色の割合を増やしてもよい。換言すると、移動速度Ｖが遅いほど、画像全体の進出色の割合を増やし、画像全体の後退色の割合を減らしてもよい。

なお、色調補正処理の代わりに、所定の色を置換する処理を実行してもよい。例えば、所定の赤色をより青みの強い色に置き換えたり、その逆を行うことにより、進出色および後退色の割合を変化させ、動画像の速度感を調整してもよい。

また、被写体の種類により、どの進出色を強めるか（弱めるか）を切り替えてもよい。例えば被写体として人物が存在する場合、赤色を強くすると鑑賞の際に違和感を覚えるおそれがあるので、赤色を強めるのではなく橙色を強めることが望ましい。

図１５は、第６の実施の形態のカメラ１の撮像に関する処理を示したフローチャートである。図１５に示されるフローチャートの処理は、カメラ１の不図示のメモリ等に記録されている。カメラ１の不図示の電源スイッチがオンされると、図１５に示す処理が制御部３４で実行される。ステップＳ１３において、制御部３４は、レリーズボタンが操作されるなどして撮像開始が指示されるまで待機し、撮像開始が指示されると、動画撮影を開始してステップＳ１５へ進む。

ステップＳ１５において、制御部３４は、被写体を撮像するように撮像部３３を制御してステップＳ１７へ進む。ステップＳ１７において、移動速度算出部３４ｂは、加速度センサ３５で検出されたカメラ１の加速度の情報に基づいて、カメラ１の移動速度Ｖを算出してステップＳ７１へ進む。

ステップＳ７１において、画像処理部３４ｄは、カメラ１の移動速度Ｖからトーンカーブを選択してステップＳ７３へ進む。例えばカメラ１に設けられた不図示の不揮発性メモリに、移動速度Ｖごとのトーンカーブが記憶されている。画像処理部３４ｄは、移動速度Ｖに対応するトーンカーブを選択して、不揮発性メモリから読み出す。ステップＳ７３において、画像処理部３４ｄは、ステップＳ７１で選択したトーンカーブを用いて画像の色調を調整してステップＳ３５へ進む。

ステップＳ３５において、制御部３４は、動画像の撮像の終了が指示されたか否かを判断する。ステップＳ３５が否定判断されるとステップＳ１５へ戻り、ステップＳ３５が肯定判断されるとステップＳ３７へ進む。

ステップＳ３７において、制御部３４は、不図示の電源スイッチがオフされたか否かを判断する。ステップＳ３７が否定判断されるとステップＳ１３へ戻り、ステップＳ３７が肯定判断されると本プログラムを終了する。

第６の実施の形態のカメラ１では、第５の実施の形態のカメラ１と同様の作用効果を奏する。

−−−第７の実施の形態−−−
図１６を参照して、撮像装置の第７の実施の形態を説明する。以下の説明では、第６の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第６の実施の形態と同じである。

第７の実施の形態では、画像処理部３４ｄは、画像全体に色調補正処理を実行する代わりに、移動する被写体に対して色調補正処理を実行する。色調補正により移動する被写体の赤成分や青成分の強弱が変化すると、移動する被写体における進出色および後退色の割合が変化するので、動画像の速度感が増減する。

図１６は、色調補正処理の説明図である。画像処理部３４ｄは、第２の実施の形態と同様に、画像５０から木５２を移動する被写体として認識し検出する。画像処理部３４ｄは、木５２を含む領域９０に対して、第６の実施の形態と同様の色調補正処理を実行する。つまり、画像処理部３４ｄは、移動する被写体の色調を補正する。なお、カメラ１の移動速度Ｖにより色調補正に用いられるトーンカーブが異なる点については、第６の実施の形態と同様である。

以上のように、画像処理部３４ｄは、カメラ１の移動速度Ｖが遅いほど、移動する被写体における進出色の割合を減らす。換言すると、画像処理部３４ｄは、カメラ１の移動速度Ｖが速いほど、移動する被写体における進出色の割合を増やす。このようにすることで、再生した動画像から鑑賞者が感得するスピード感を、実際にスキーヤーが感じていたスピード感に近づけることができる。
なお、動画像の再生時に、鑑賞者に対して、撮像時の速度によらず常に一定以上のスピード感を感じさせたい場合には、移動速度Ｖが速いほど、移動する被写体における進出色の割合を減らしてもよい。換言すると、移動速度Ｖが遅いほど、移動する被写体における進出色の割合を増やしてもよい。

なお、色調補正処理の代わりに、所定の色を置換する処理を実行してもよい。例えば、移動する被写体における所定の赤色をより青みの強い色に置き換えたり、その逆を行うことにより、移動する被写体における進出色および後退色の割合を変化させ、動画像の速度感を調節してもよい。

なお、移動する被写体とは別に、移動しない被写体を認識し検出して、前者と後者とで別々の色調補正を行ってもよい。例えば、移動する被写体の進出色を増やす際、移動しない被写体の進出色を減らしたり後退色を増やしたりしてもよい。逆に、移動する被写体の後退色を増やす際、移動しない被写体の進出色を増やしたり後退色を減らしたりしてもよい。また、移動しない被写体を認識し検出して、移動しない被写体に対してのみ色調補正を行うことも可能である。

第７の実施の形態のカメラ１では、第５の実施の形態のカメラ１の作用効果に加えて、更に次の作用効果を奏する。
（１）画像処理部３４ｄは、被写体の認識結果に基づいて、撮像信号の色情報を制御する。これにより、特定の被写体に対して特に速度感を強めたり弱めたりすることができ、メリハリのある動画像を生成することができる。

−−−第８の実施の形態−−−
図１７を参照して、第８の実施の形態を説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。

図１７は、本実施の形態の撮像装置および画像処理装置の一例としてのデジタルカメラおよびパーソナルコンピュータの構成を示すブロック図である。第８の実施の形態では、カメラ１に加えて、パーソナルコンピュータ２が存在する。パーソナルコンピュータ２は、カメラ１により撮像された動画像データに対して、事後的に、第１の実施の形態と同様の画像処理（例えば圧縮処理など）を実行する。
カメラ１の制御部３４は、移動速度記録部３４ａを有する。移動速度記録部３４ａは、第１の実施の形態に係る移動速度算出部３４ｂと同様にカメラ１の移動速度を算出する。移動速度記録部３４ａは、不図示のメモリカードなどで構成される記録媒体に、算出した移動速度を示す速度情報を記録する。この記録媒体は、画像データなどが記録される記録媒体と同一の記録媒体であってもよいし、異なる記録媒体であってもよい。

パーソナルコンピュータ２は、制御部１３４と、表示部１３６と、操作部材１３７と、記録部１３８とを有する。制御部１３４は、例えばＣＰＵによって構成され、パーソナルコンピュータ２による全体の動作を制御する。
制御部１３４は、移動速度読出部１３４ａと、第１の実施の形態〜第７の実施の形態と同様の画像処理部３４ｄとを有する。これらの各部は、制御部１３４が不図示の不揮発性メモリに格納されているプログラムを実行することにより、ソフトウェア的に実現される。なお、これらの各部をＡＳＩＣ等により構成してもよい。

移動速度読出部１３４ａは、カメラ１により記録された、動画像の撮像時におけるカメラ１の移動速度を、不図示のメモリカードなどで構成される記録媒体から読み出す。画像処理部３４ｄは、第１の実施の形態などと同様に、記録媒体から読み出された画像データに対する画像処理を行う。

表示部１３６は、画像処理部３４ｄによって画像処理された画像、記録部１３８によって読み出された画像などを再生表示する。表示部１３６は、操作メニュー画面等を表示する。

操作部材１３７は、キーボードやマウス等の種々の操作部材によって構成される。操作部材１３７は、各操作に対応する操作信号を制御部１３４へ送出する。操作部材１３７は、表示部１３６の表示面に設けられたタッチ操作部材を含む。
記録部１３８は、制御部１３４からの指示に応じて、不図示のメモリカードなどで構成される記録媒体に、画像処理が施された画像データなどを記録する。記録部３８は、制御部３４からの指示に応じて、記録媒体に記録されている画像データなどを読み出す。

以上のように構成されたカメラ１およびパーソナルコンピュータ２によれば、第１の実施の形態等と同様の作用効果を奏する。なお、カメラ１がパーソナルコンピュータ２の機能を兼ね備えていてもよい。つまり、カメラ１が画像処理部３４ｄを有しており、撮像した動画像データに対して事後的に画像処理を実行可能にしてもよい。また、カメラ１からパーソナルコンピュータ２への動画像データや速度情報の転送は、不図示の記録媒体を介して行うのではなく、有線や無線によるデータ通信により為されてもよい。

次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。
（変形例１）上述した第１の実施の形態〜第４の実施の形態と、第５の実施の形態〜第７の実施の形態とを組み合わせてもよい。例えば、圧縮処理と色調補正処理の両方を適用することにより、より柔軟に速度感を調節可能にしてもよい。また、一方の処理を適用しただけでは十分な速度感が得られないと判断した場合にのみ、他方の処理を適用するようにしてもよい。その他、第１の実施の形態〜第４の実施の形態と、第５の実施の形態〜第７の実施の形態とを任意に組み合わせることができる。

また、第１の実施の形態〜第４の実施の形態のうち複数のものを組み合わせることも可能である。例えば、圧縮処理を適用した後、更にトリミング処理を適用してもよい。逆に、トリミング処理を適用した後、更に圧縮処理を適用してもよい。

（変形例２）上述した各実施の形態において、移動する被写体を検出して利用する実施の形態を説明したが、移動する被写体が複数存在する場合に、よりフレーム間の差が大きい被写体を優先的に利用するようにしてもよい。

図１８は、移動する被写体同士の比較例を模式的に示す図である。図１８に示す画像９９には、向かって左側に板塀１１０が存在し、向かって右側に柵１１１が存在する。板塀１１０の表面は均一であり、コントラストが小さい。つまり、フレーム間において、板塀１１０の差は小さい。換言すると、フレーム間で、板塀１１０から感じられる速度感は弱い。他方、柵１１１はコントラストが大きい。つまり、フレーム間において、柵１１１の差は大きい。換言すると、フレーム間で、柵１１１から感じられる速度感は強い。

このように、表面のコントラストが小さい被写体は、実際には高速に移動していたとしても、その被写体から感じられる速度感は弱い。そこで、図１８の場合には、板塀１１０よりも柵１１１を優先してトリミングやクロップを行うことが望ましい。例えば、トリミングを行う場合には、柵１１１がトリミングにより失われないよう、柵１１１がある部分を避けてトリミングを行う。また、クロップを行う場合には、柵１１１がクロップにより失われないよう、柵１１１を大きく含むようにクロップを行う。

（変形例３）第８の実施の形態のように、事後的に画像処理を行う場合において、速度感の強弱を利用者が調節可能にしてもよい。例えば図１９（ａ）に例示するように、表示画面１１２において、再生中の画像１１３に重畳して、速度感調節のためのユーザーインタフェース１１４（ＵＩ１１４）を表示する。このＵＩ１１４は、いわゆるスライダーであり、ユーザーはつまみ１１５をタッチ操作等により左右に動かすことができる。つまみ１１５を右方向に動かすと、画像処理部３４ｄは、より速度感が強まるように画像処理を行う。他方、つまみ１１５を左方向に動かすと、画像処理部３４ｄは、より速度感が弱まるように画像処理を行う。なお、ＵＩ１１４の代わりに、物理的なスイッチやスライダー等の操作部材を用いてもよい。

画像処理部３４ｄは、つまみ１１５の移動量により、速度感の強弱を調節する。例えば、つまみ１１５を右方向に大きく動かすと、つまみ１１５を右方向に小さく動かした場合に比べて、再生中の動画像にはより強い速度感が得られるような画像処理が施される。

画像処理部３４ｄは、撮像時のカメラ１の移動速度Ｖが異なる場合、つまみ１１５の移動量が同一であっても、異なる画像処理を施す。例えば画像処理部３４ｄが圧縮処理を行う際、つまみ１１５の移動量が同一であっても、移動速度Ｖがより速いほど、より大きく圧縮処理を施す。つまり画像処理部３４ｄは、つまみ１１５の移動量が動画像から受ける速度感の強さに対応するように、画像処理の強弱を適宜調節する。なお、移動速度Ｖがより遅いほど、より大きく圧縮処理を施すようにしてもよい。

また、上述した各実施の形態では、画像の色を変えて速度感を調節する手法と、それ以外の方法で速度感を調節する手法（圧縮処理やトリミング処理、クロップ処理等を用いる手法）を説明したが、それらを組み合わせてもよい。例えば図１９（ｂ）に例示するように、色に対応するＵＩ１１４ａと、圧縮に対応するＵＩ１１４ｂとを別々に表示してもよい。画像処理部３４ｄは、前者のＵＩ１１４ａが操作された場合には、画像のホワイトバランス調整や色調補正の内容を変更する。画像処理部３４ｄは、後者のＵＩ１１４ｂが操作された場合には、画像の圧縮処理やトリミング処理、クロップ処理等の内容を変更する。

（変形例４）上述した各実施の形態では、制御部３４の移動速度算出部３４ｂは、加速度センサ３５で検出したカメラ１の加速度からカメラ１の移動速度Ｖを算出した。変形例４では、撮像素子からの信号に基づいて求められるデフォーカス量から被写体までの距離を算出し、算出した被写体までの距離の変化からカメラ１の移動速度を求める。
変形例４のカメラ１では、撮像素子３３ａは、像面位相差方式により測距を行うことができる撮像素子である。制御部３４は、撮像素子３３ａからの信号を用いて瞳分割型の位相差検出方式によりデフォーカス量を算出し、算出したデフォーカス量に基づいて被写体までの距離を算出する。そして、制御部３４は、算出した被写体までの距離の変化に基づいて被写体とカメラ１との相対速度を算出し、算出した相対速度をカメラ１の移動速度Ｖとする。

（変形例５）上述した各実施の形態では、カメラ１の移動速度Ｖを算出するために加速度センサ３５を用いた。変形例５では、加速度センサ３５に代えて、いわゆるＴＯＦ（time of flight）センサを用いる。
ＴＯＦセンサは、公知のＴＯＦ法に用いるイメージセンサである。ＴＯＦ法は、不図示の光源部から被写体に向けて光パルス（照射光）を発し、被写体で反射された光パルスがＴＯＦセンサへ戻ってくるまでの時間に基づいて、被写体までの距離を検出する技術である。制御部３４は、検出した被写体までの距離の変化に基づいて被写体とカメラ１との相対速度を算出し、算出した相対速度をカメラ１の移動速度Ｖとする。
なお、撮像素子３３ａをＴＯＦセンサに利用してもよい。

（変形例６）上述した各実施の形態では、カメラ１の移動速度Ｖを算出するために加速度センサ３５を用いた。変形例６では、加速度センサ３５に代えて、ＧＰＳセンサを用いる。
たとえば、ＧＰＳセンサが出力する情報に移動速度の情報が存在すれば、制御部３４は、ＧＰＳセンサから出力された移動速度の情報をカメラ１の移動速度Ｖの情報として扱う。たとえば、ＧＰＳセンサが出力する情報に移動速度の情報が存在しない場合には、制御部３４の移動速度算出部３４ｂは、ＧＰＳセンサが出力する現在位置の情報の変化に基づいてカメラ１の移動速度Ｖを算出する。

上述した各実施の形態では、速度情報として、カメラ１の移動速度を例として説明したが、速度情報はカメラ１の移動速度に限られない。例えば、速度情報は、カメラ１と特定の対象物との距離の情報であってもよい。これは、カメラ１の速度が速くなると、特定の対象物までの距離の変化量が変わるためである。具体的には、カメラ１は、カメラ１と特定対象物との距離の変化の大きさ（変化量、変化率）に基づいて、画像処理を変更する。

このような例では、制御部３４がカメラ１から特定の対象物までの距離情報を取得する。距離情報は、例えば、デフォーカス量から取得（算出）してもよく、上述したＴＯＦセンサの出力から算出してもよい。

上述した各実施の形態では、速度情報として、カメラ１の移動速度を例として説明したが、速度情報はカメラ１の移動速度に限られない。例えば、速度情報は、特定の対象物の大きさの情報であってもよい。これは、カメラ１の速度が速くなると、特定の対象物の大きさの変化量が変わるためである。具体的には、カメラ１は、特定対象物の大きさの変化の大きさ（変化量、変化率）に基づいて、画像処理を変更する。

このような例では、制御部３４が撮影している特定の対象物の大きさの情報を取得する。大きさの情報は、被写体認識（物体認識）の技術やエッジの抽出技術を用いて行えばよい。

上述した各実施の形態では、速度情報として、カメラ１の移動速度を例として説明したが、速度情報はカメラ１の移動速度に限られない。例えば、速度情報は、音の大きさであってもよい。これはカメラ１の速度が速くなるほど、取得する音の大きさ（特に風切音の大きさ）が大きくなるためである。具体的には、カメラ１は、撮影時に取得した音の大きさに基づいて、画像処理を変更する。

このような例では、制御部３４が撮影時の音の大きさの情報を取得する。音の大きさの情報は、撮影して記録する音の解析を行えばよい。また、制御部３４は、風切音に対応する特定の周波数帯域の音の大きさの情報を取得することとしてもよい。

（変形例７）第７の実施の形態では、色調補正処理を、画像の一部分に対して実行する例を説明した。第７の実施の形態において、画像の一部分とは移動する被写体であったが、これとは異なる一部分に対して色調補正処理を実行することも可能である。例えば、カメラ１を装着するスキーヤーの視線を検出するセンサを、例えばスキーヤーが装着するゴーグルなどに設ける。カメラ１は、そのセンサにより検出された視線の先に存在する被写体に対して、色調補正処理を施す。カメラ１を装着するスキーヤーの視線ではなく、そのスキーヤーの同行者など、周囲の人物の視線を用いてもよい。

また、そのセンサにより検出された視線に関する視線情報を、画像データと共に記録しておき、視線情報を用いた色調補正処理を事後的に実行することも可能である（第８の実施の形態）。更に、動画像の再生時に、動画像を鑑賞する鑑賞者の視線を検出し、その視線の先に存在する被写体に対して色調補正処理を施すこともできる。

（変形例８）第７の実施の形態では、色調補正処理を、画像の一部分に対して実行する例を説明した。画像の一部に対して処理を実行する際に被写体の認識結果に基づいて、強弱を変化させる色成分を変えてもよい。ここでは、進出色を増やす例を説明する。例えば、画像内に人物の顔が写っている場合に、被写体認識技術により人物の顔の領域を特定し、人物の顔の領域に対しては、赤成分を増やさず、他の進出色のオレンジの成分を増やすように調整してもよい。これは、顔などの肌色領域の色の変化が多いと違和感を感じやすくなるためである。このように、画像処理部３４ｄが特定の色の部位を認識した場合と認識しない場合とで、割合を多くする色を変更することで、画像の見た目を破綻させることなく速度感を調整することができる。

上記では、種々の実施の形態および変形例を説明したが、本発明はこれらの内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。

次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。
日本国特許出願２０１７年第７１９５０号（２０１７年３月３１日出願）

１…カメラ、３１，３１Ａ…撮像光学系、３２…絞り、３３ａ…撮像素子、３４，１３４…制御部、３４ｂ…移動速度算出部、３４ｄ…画像処理部

Claims (16)

1. 撮像を行い、動画像を生成する電子機器であって、
   被写体を撮像し撮像信号を出力する撮像素子と、
   前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御して画像を生成する生成部と、
   を備える電子機器。
2. 請求項１に記載の電子機器において、
   被写体を認識する認識部を備え、
   前記生成部は、前記認識部の認識結果に基づいて、前記撮像信号の色情報を制御する電子機器。
3. 請求項２に記載の電子機器において、
   前記生成部は、前記認識部が特定の色の部位を認識した場合と認識しない場合とで、割合を多くする色を変更する電子機器。
4. 請求項３に記載の電子機器において、
   前記生成部は、前記認識部が肌色領域を認識した場合と、肌色を認識しない場合とで異なる色の割合を多くする電子機器。
5. 請求項１から請求項４までのいずれか一項に記載の電子機器において、
   前記生成部は、前記情報に基づいて、所定の色の割合を調整する電子機器。
6. 請求項１から請求項５までのいずれか一項に記載の電子機器において、
   前記生成部は、前記情報に基づいて設定された色温度により、所定の色の割合を調整する電子機器。
7. 請求項５または請求項６に記載の電子機器において、
   前記生成部は、前記電子機器の移動速度が第１移動速度よりも早い第２移動速度になると、暖色系の色の割合を多くする電子機器。
8. 請求項５または請求項６に記載の電子機器において、
   前記生成部は、前記電子機器の移動速度が第３の移動速度よりも遅い第４移動速度になると、寒色系の色の割合を多くする電子機器。
9. 請求項７に記載の電子機器において、
   前記生成部は、前記電子機器の移動速度が速くなるほど、前記暖色系の色の割合を多くする電子機器。
10. 請求項８に記載の電子機器において、
    前記生成部は、前記電子機器の移動速度が遅くなるほど、前記寒色系の色の割合を多くする電子機器。
11. 請求項７から請求項１０までのいずれか一項に記載の電子機器において、
    前記生成部は、再生する動画像の速度感を増すために所定の色の割合を調整する電子機器。
12. 撮像を行い、動画像を生成する電子機器で実行されるプログラムであって、
    コンピュータに、
    被写体を撮像し撮像信号を出力させる第１手順と、
    前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御して画像を生成させる第２手順と、
    を実行させるプログラム。
13. 撮像を行い、動画像を生成する電子機器で生成された動画像データを取得する取得部と、
    前記電子機器の移動に関する情報に基づいて、前記動画像データによる動画像の色情報を制御して動画像を生成する生成部と、
    前記生成部が生成した動画像を再生する再生部と、
    を備える再生装置。
14. 電子機器を移動させながら撮像して生成された動画像を処理する電子機器であって、
    特定の色成分を調整させるための入力を受け付ける入力部と、
    前記入力に基づいて、前記動画像のうちの部分領域の色情報を制御した画像を生成する生成部と、
    前記生成された画像を表示する表示部と、
    を備える電子機器。
15. コンピュータに、
    撮像を行い、動画像を生成する電子機器で生成された動画像データを取得させる第１手順と、
    前記電子機器の移動に関する情報に基づいて、前記動画像データによる動画像の色情報を制御して動画像を生成させる第２手順と、
    生成した動画像を再生させる第３手順と、
    を実行させるプログラム。
16. 動画像データを生成する電子機器であって、
    被写体を撮像し、撮像信号を出力する撮像素子と、
    前記電子機器の移動に関する情報に基づいて、前記撮像信号の色情報を制御する制御部と、
    を備える電子機器。

Images