JP6048399B2 - 撮影装置、情報処理装置及びプログラム - Google Patents

Description

本発明は、撮影装置、情報処理装置、及びプログラムに関する。

動画撮影機能を有する小型な電子機器（例えば、スマートフォン、ビデオカメラ等）の普及に伴い、様々な環境下にて動画撮影が行われている。動画撮影時には、ビデオカメラ自体が揺れ動く場合があるため、この変位を補償するべく様々な対策が提案されている。例えば、変位補償用の光学ユニットを装置内に組み込む対策、及び画像処理によって変位補償する対策等が提案されている。

特許文献１には、情報処理装置に関し、ダイジェスト映像の作成を容易化し、かつ編集効率を上げるための技術が開示されている。具体的には、イベントデータに応じてカット信号を生成し、所定期間の動画像をカットする。これによって、動画像を撮影しながら当該動画像を適切な位置で切りだして順次動画像ファイルを生成すること等の効果を得ることができる（例えば、特許文献１の段落００４６参照）。

特許文献２には、被写体がフレームアウトすることなく、正確にフレーム合わせを行う電子カメラが開示されている。具体的には、注目画像の移動から移動速度を求め、注目画像の動きが大きい場合には、注目画像の速度に合わせて、ズーム枠（撮像範囲）を拡大し、逆の場合には、ズーム枠を縮小する点が開示されている。

特開２０１０−１５４３０２号公報 特開２００２−３３９４９号公報

上述のように、様々な環境下にて動画撮影が行われているが、撮影者の動き等に起因して、再生動画を見る者にとって重要ではない映像が取得されることも多い。例えば、頻繁／高速な撮影装置の動きによって、再生時に見づらい映像が取得されてしまう場合がある。また、撮影者による録画モードの解除忘れによって、真に不要な映像（例えば、地面を映す映像）が取得されてしまう場合がある。なお、ここに述べた具体例は、説明内容の充実化のために例示したものであり、この記載を以って、本願発明の技術的範囲を狭く解釈することは許されない。

上記説明から明らかなように、映像を見る者の立場から見て、より価値が高い映像を取得することが強く望まれている。

本発明に係る撮影装置は、撮像手段と、空間的な変位を検出する変位検出手段と、前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理する画像データ処理手段と、を備える。

本発明に係る情報処理装置は、空間的な変位を検出する変位検出手段により検出された前記変位に応じた態様にて、撮像手段から供給される画像データを処理する。

本発明に係る撮影装置の動作方法は、撮像手段は、撮像データを生成し、変位検出手段は、空間的な変位を検出し、画像データ処理手段は、前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理する。本発明に係るプログラムは、上記した手順をコンピュータに実行させる。

本発明によれば、映像を見る者の立場から見て、より価値が高い映像を取得することができる。

実施の形態１にかかる情報処理装置の概略的なブロック図である。 実施の形態２にかかる情報処理装置の概略的なブロック図である。 実施の形態２にかかる情報処理装置の動作を示す概略的なフローチャートである。 実施の形態２にかかる情報処理装置の動作を示す説明図である。 実施の形態２にかかる情報処理装置の動作を示す説明図である。 実施の形態３にかかる情報処理装置の動作を示す概略的なフローチャートである。 実施の形態４にかかる情報処理装置の動作を示す概略的なフローチャートである。 実施の形態５にかかる情報処理装置の動作を示す概略的なフローチャートである。 参考例に係る情報処理装置の動作を説明するための説明図である。 実施の形態６にかかる情報処理装置の動作を説明するための説明図である。 実施の形態６にかかる情報処理装置の動作を説明するための説明図である。 実施の形態７にかかる情報処理装置の概略的なブロック図である。

以下に説明する各実施の形態は、個々に独立したものではなく、互いに組み合わせ可能であり、かつそれらの組み合わせに基づく相乗効果も把握されるものとする。同一の要素には同一の符号を付し、各実施形態間の重複説明／重複図示は適宜省略している。

実施の形態１
以下、図面を参照して本発明の実施の形態について説明する。本実施形態に係る情報処理装置は、空間的な変位を検出する変位検出部（例えば、加速度センサ、角速度センサ等のセンシングデバイスを含む）により検出された変位に応じた態様にて、撮像部から供給される画像データを処理する。これによって、映像を見る者の立場から見て、より価値が高い映像を取得することができる。この点は、後述の説明から、より具体的になる。

図１に示すように、情報処理装置１００は、データ処理部（画像データ処理手段、画像データ処理部）５０を含む。データ処理部５０には、画像データ、及び変位データが入力する。データ処理部５０は、機能回路、ＣＰＵによるプログラムの実行等によって実現される。なお、画像データは、不図示の撮像部からデータ処理部５０に供給される。変位データは、不図示の変位検出部からデータ処理部５０に供給される。

情報処理装置１００は、次のように動作する。なお、撮像部は、被写体を連続撮影し、画像データを出力し、変位検出部は、自身の動きを検知して変位データを出力しているものとする。変位検出部は、撮像部により撮像される撮像範囲の変化を検出するものとする。撮像部と変位検出部とが共通の筐体内に組み込まれていれば、変位検出部は、自身の変位のセンシングによって、撮影部の変位（撮像範囲／撮像対象の変化）を当然にセンシングすることになる。

データ処理部５０は、変位データに応じて、画像データに対する処理動作を変更する。例えば、データ処理部５０は、変位データに応じて、再生時に見づらい映像が取得されてしまうことを抑制するために画像データを加工する。より具体的には、画像の削除、画像の遅延表示処理を実行する。これによって、映像を見る者の立場から見て、より価値が高い映像を取得することが可能になる。

上記例示説明から明らかなように、本実施形態に開示の構成を具備することによって、映像を見る者の立場から見て、より価値が高い映像を取得することができる。

実施の形態２
以下、図２乃至図５を参照して、実施の形態２について説明する。上述の実施形態とは異なり、本実施形態では、情報処理装置１００は、撮影装置１００として機能し、レンズ部（光学系）３０、撮像部（撮像手段）４０、及び位置姿勢検出部６０（変位検出手段、位置姿勢検出手段）６０を更に具備する。このような場合であっても、上述の実施形態で説明したものと同様の効果を得ることができる。なお、レンズ部３０の数／構成、撮像部４０の構成、及び位置姿勢検出部６０の構成は任意である。

図２に模式的に示すように、複数のレンズ部を用意しても良い。一つのレンズ部３０を複数枚のレンズにて構成し、ズームレンズ系としても良い。撮像部４０は、例えば、ＣＣＤ(Charge Coupled Device Image Sensor)イメージャ、ＣＭＯＳ(Complementary Metal Oxide Semiconductor)イメージャ等を画像取得手段として活用すれば良い。位置姿勢検出部６０は、ＭＥＭＳ（Micro Electro Mechanical Systems）等の活用により製造された加速度／角速度センサ及びジャイロセンサ等を含むと良い。

図２に模式的に示すように、被写体像は、レンズ部３０を介して撮像部４０の撮像領域に結像される。撮像部４０は、連続的に画像取得し、レベル補正、Ａ／Ｄ(Analog/Digital)変換、データ圧縮処理等の各種処理をして、画像データをデータ処理部５０に供給する。位置姿勢検出部６０は、加速度センサ及び角加速度センサの少なくとも一方を含み、自身の変位を検知することにより、レンズ部３０／撮像部４０／撮影装置１００の変位を検知する。データ処理部５０は、位置姿勢検出部６０の検知結果に応じて、データ処理モードを変更する。

図３を参照して、撮影装置１００の動作について説明する。まず、撮影者による録画スタートボタン等の押し込み等に応じて、撮影装置１００は、通常撮影を開始する（Ｓ１００）。具体的には、撮像部４０は、レンズ部３０を介して被写体を連続撮像し、生成した画像信号に各種処理をし、画像データを出力する。データ処理部５０は、撮像部４０から供給される画像データを自身が有する記憶装置に書き込む。このようにして、画像データが連続的に蓄積されていくことになる。なお、より好適には、音声データも取得し、画像データと共通のコンテナに格納することが望ましい。

次に、撮影装置１００が任意の方向に高速に変位すると、位置姿勢検出部６０の検出値が閾値以上となる（Ｓ１０１）。具体的には、位置姿勢検出部６０内の加速度センサ又は角加速度センサの出力値が閾値以上となる。データ処理部５０は、位置姿勢検出部６０の検出値を受信し、これと閾値との比較をする。検出値が閾値以上となると、データ処理部５０は、スローモード撮影を実現するべく、データ処理を実行する。なお、データ処理部５０による比較に用いられる値は、加速度の積分値（速度、位置）及び角加速度の積分値（角速度、角度）であっても良い。角変化を加速度から算出しても良い。閾値は、データ処理部５０内のレジスタ等に予め格納すれば良い。外部からデータ処理部５０へ閾値供給しても良い。

検出値が閾値以上であるとき、撮影装置１００は、スローモード撮影を開始する（Ｓ１０２）。換言すれば、撮影装置１００の撮影モードが変更される。ここでは、撮影装置１００の撮影モードの変更は、データ処理部５０は動作モード変更によって実行される。この点について、図４及び図５を参照して説明する。なお、図４及び図５における切替え前は、撮影方向を切り替える前の状態を意味し、切替え後は、撮影方向を切り替えた後の状態を意味する。切替え前〜切替え後の過程（画像１〜６の取得期間）において、撮影装置１００の撮影方向が高速に変化する。

図４に模式的に示すように、加工前の画像１〜１２が時間的に連続記憶されるものとする。画像１〜６の加工前後の比較から明らかなように、スローモード撮影時、データ処理部５０は、ある時点にて再生されるべき画像が時間的に遅れたタイミングで再生されるように画像データを加工する。これによって、レンズ部３０／撮像部４０／撮影装置１００の変位期間に取得される映像が、フレーム内を被写体が高速移動する見づらい映像となることを効果的に抑制することができる。

なお、図４の場合には、画像２〜６の表示タイミングの遅延処理に応じて、画像７、８は破棄されている。具体的には、データ処理部５０は、入力画像データに対して、画像２〜６の遅延処理を為し、かつ画像７、８の除去処理を実行する。なお、データ処理部５０が画像データを記憶装置に書き込む態様／タイミングは任意である。例えば、データ処理部５０は、時間と対応づけて画像データを記憶し、画像２〜６を遅延時刻に対応づけて記憶し、画像７、８は破棄して記憶装置に書き込まない。なお、画像９以降は、通常撮影モードに復帰している。

図５に示すように、画像２〜６の表示タイミングの遅延処理し、画像７〜１０の表示間隔を短くしても良い。具体的には、データ処理部５０は、入力画像データに対して、画像２〜６の遅延処理を為し、かつ画像７〜１０の表示間隔を短時間化する処理を実行する。データ処理部５０が画像データを記憶装置に書き込む態様／タイミングは任意である。例えば、データ処理部５０は、時間と対応づけて画像データを記憶し、画像２〜６を遅延時刻に対応づけて記憶し、画像７〜１０は短い時間間隔の遅延時間に対応づけて記憶する。この場合、オリジナルな画像７〜１０は、破棄されることはないため、撮影動画の信頼性を高めることができる。なお、画像１２以降は、通常撮影モードに復帰している。

本実施形態では、レンズ部３０／撮像部４０／撮影装置１００の高速変位の検知後、ある時点にて再生されるべき画像が時間的に遅れたタイミングで再生されるように画像データが加工される。これによって、レンズ部３０／撮像部４０／撮影装置１００の変位期間に取得される映像が、フレーム内を被写体が高速移動する見づらい映像となることを効果的に抑制することができ、結果として、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

実施の形態３
以下、図６を参照して、実施の形態３について説明する。上述の実施形態とは異なり、本実施形態では、データ処理部５０は、位置姿勢検出部６０の出力に基づいて所定状態を検知し、当該所定状態期間において取得された画像を記憶せずに除去する。これによって、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

図６を参照して、本実施形態に係る撮像装置１００の動作について説明する。まず、通常撮影をする（Ｓ２００）。この点は、図３に示す場合と同様である。

次に、ステップＳ２０１〜Ｓ２０３の動作によって、一時的にレンズ部３０／撮像部４０／撮影装置１００が所定方向を向き、短時間に元の状態に復帰したことを検知する。換言すれば、撮像部４０による撮像方向が所定方向を向き、短時間に元の方向に復帰したことを検知する。

撮影装置１００が任意の方向に高速に回転すると、位置姿勢検出部６０の検出値から算出された角度変化が閾値以上となる（Ｓ２０１）。具体的には、位置姿勢検出部６０内の角加速度センサの出力値から算出された角度変化が閾値以上となる。データ処理部５０は、位置姿勢検出部６０の検出値を受信し、この検出値を積分処理し、この積分値と閾値とを比較をする。なお、角度変化は、初期位置と現在位置間の角度に対応する。初期位置に撮影装置１００が存在するとき、初期位置と現在位置間の角度は０°となる。角度変化の検出／算出方法は任意であり、連続的に検出される角加速度の積分処理によって、現在の角度を順次算出していくとよい。所定方向を正として逆方向を負として角度が算出される場合、算出値を単純に加算処理していくことで初期位置に対する現在の角度、つまり、角度変化を検知することができる。適当なタイミングで加算される誤差を除去しても良い。初期位置は、例えば、撮影装置１００の起動時の位置に対応する。

積分値が閾値以上となると、所定時間経過したか否かを判定する（Ｓ２０２）。具体的には、データ処理部５０は、自身が内蔵するタイマーの参照等によって所定時間が経過したか否かを判断する。

所定時間が経過していない場合、角度変化が閾値以下となったか判定する（Ｓ２０３）。具体的には、データ処理部５０は、位置姿勢検出部６０内の角加速度センサの出力値に基づいて算出された角度変化が閾値以上となるか否かを判定する。

角度変化が閾値以下と判定された場合、動画を部分的にカットする（Ｓ２０４）。具体的には、データ処理部５０は、ステップＳ２０１〜Ｓ２０３間に取得された画像を動画として再生されないように破棄し、これらを記憶装置に書き込まない。Ｓ２０４後、通常撮影モードへ帰還する。これによって、一時的に誤った方向を向いて撮影された画像を除去することが可能となり、結果として、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

なお、Ｓ２０２にて所定時間が経過した場合、その角度にて撮影を継続する確率が高いものと判断できる。従って、ステップＳ２０４へ進まないように動作制御する。また、所定時間経過前に、角度変化が元の角度に戻らなかった場合も同様に考えることができる。本実施形態を実施の形態１、２のいずれか又は双方に対して適応しても良い。

実施の形態４
以下、図７を参照して、実施の形態４について説明する。上述の実施形態とは異なり、本実施形態では、データ処理部５０は、位置姿勢検出部６０の出力に基づいて、レンズ部３０の向きが所定方向であることを検知し、当該状態期間において取得された画像を記憶せずに除去する。これによって、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

図７を参照して、本実施形態に係る撮像装置１００の動作について説明する。まず、通常撮影をする（Ｓ３００）。この点は、図３に示す場合と同様である。

次に、ステップＳ３０１、Ｓ３０２の各動作によって、撮像装置１００は、レンズ部３０が所定方向を向いた状態が継続しているか否かを検知する。

撮影装置１００のレンズ部３０が所定方向を向くと、レンズ向きが所定方向か否かを判断する（Ｓ３０１）。例えば、データ処理部５０は、位置姿勢検出部６０の検出値から算出された角度が所定角度範囲内に含まれるか否かを判断する。なお、この角度も、上述の角度変化と同様に考えれば良く、例えば、初期位置と現在位置間の角度に対応する。

レンズ向きが所定方向と判定されたとき、所定時間が経過したか否かを判断する（Ｓ３０２）。具体的には、データ処理部５０は、自身が内蔵するタイマーの参照等によって所定時間が経過したか否かを判断する。

所定時間が経過した場合、動画をカットする（Ｓ３０３）。具体的には、データ処理部５０は、ステップＳ３０１〜Ｓ３０２間に取得された画像を動画として再生されないように破棄し、これらを記憶装置に書き込まない。Ｓ３０３の後、Ｓ３０１を検知するスタンバイモードに復帰する。なお、このスタンバイモードのときには、Ｓ３００の通常撮影が実行されている。

本実施形態によれば、データ処理部５０は、位置姿勢検出部６０の出力に基づいて、レンズ部３０の向きが所定方向であることを検知し、当該状態期間において取得された画像を記憶せずに除去する。これにより、例えば、撮影者による録画モードの解除忘れによって、真に不要な映像（例えば、地面を映す映像）が取得されてしまうことを抑制することができ、結果として、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

実施の形態５
以下、図８を参照して、実施の形態５について説明する。上述の実施形態とは異なり、本実施形態では、データ処理部５０は、位置姿勢検出部６０の出力/撮像部４０の出力に基づいて、被写体に変化がない静止画を取得していることを検出し、同期間の撮影画像を記憶せずに除去する。これによって、映像を見る者の立場から見て、より価値が高い映像を取得することが可能となる。

図８を参照して、本実施形態に係る撮像装置１００の動作について説明する。まず、通常撮影をする（Ｓ４００）。この点は、図３に示す場合と同様である。

次に、ステップＳ４０１〜Ｓ４０４の動作によって、撮像装置１００は、被写体に変化がない静止画を取得していることを検出する。

まず、撮影装置１００が静止していることを位置姿勢検出部６０の出力から判断する。具体的には、データ処理部５０は、加速度が閾値以下か判断し（Ｓ４０１）、角速度が閾値以下か判断する（Ｓ４０２）。データ処理部５０は、加速度が閾値以下であり、角速度が閾値以下のとき、撮影装置１００が静止していることを検知する。

次に、映像に変化がない状態が継続しているか判断する。具体的には、データ処理部５０は、映像の変化の有無を判断し（Ｓ４０３）、次に所定時間経過したか否かを判断する（Ｓ４０４）。例えば、データ処理部５０は、連続して入力するフレーム間の差分を評価することにより、映像の連続性を判断する。フレーム内に存在する特徴的部分に着眼して、映像の連続性を判断しても良い。所定時間経過したか否かは、データ処理部５０が内蔵するタイマーの参照によって判断すれば良い。

映像に変化がない状態が継続していると判断したとき、動画カットする（Ｓ４０５）。具体的には、具体的には、データ処理部５０は、ステップＳ４０３にて映像変化なしと判断してから所定時間経過する時点間に取得された画像を動画として再生されないように破棄し、これらを記憶装置に書き込まない。なお、Ｓ４０１〜Ｓ４０４には判定結果がＮＯの場合には、ステップＳ４００に帰還する。Ｓ４０１〜Ｓ４０４のループを所定期間に亘って継続することによって、Ｓ４０５のステップが実行されることになる。

本実施形態では、データ処理部５０は、位置姿勢検出部６０の出力/撮像部４０の出力に基づいて、被写体に変化がない静止画を取得していることを検出し、同期間の撮影画像を記憶せずに除去する。これによって、映像を見る者の立場から見て、不要な映像部分を除去することができ、より価値が高い映像を取得することが可能となる。

実施の形態６
以下、図９乃至１１を参照して、実施の形態６について説明する。上述の実施形態とは異なり、本実施形態では、図９に模式的に示すように、レンズ部３０により撮像される撮像範囲Ｐ１００は、データ処理部５０によって抽出して記憶される保存範囲Ｒ１００よりも広い。このような場合であっても、上述の実施形態と同様の効果を得ることができる。本実施形態では、図９との比較から明らかなように、図１０及び図１１に示すように、撮像範囲の移動に対して保存範囲が時間的にゆっくりと変化する。これによって、映像を見る者の立場から見て、見やすい映像とすることができ、より価値が高い映像を取得することが可能となる。

図９に示す場合、時間経過に伴って、撮像範囲は、範囲Ｐ１００、範囲Ｐ１０１、範囲Ｐ１０２、範囲Ｐ１０３と紙面を正面視して左から右へ移動する。また、保存範囲は、撮像範囲の中央付近に設定されており、撮像範囲の移動に同調して移動する。

本実施形態では、データ処理部５０は、位置姿勢検出部６０の出力に基づいて、撮像範囲の移動方向及び移動速度を検知し、これに応じて撮像範囲内における保存範囲を変化させる。

図１０に示すように、撮像範囲が、範囲Ｐ２００から範囲Ｐ２０１へ推移するとき、データ処理部５０は、撮像範囲内の保存範囲の位置を逆方向へ変化させる。範囲Ｐ２０１〜Ｐ２０３へと順次推移するとき、データ処理部５０は、この状態を維持する。範囲Ｐ２０３〜Ｐ２０４へ推移するとき、データ処理部５０は、位置姿勢検出部６０の出力に基づいて、撮像範囲が移動していないことを検知し、これに応じて、撮像範囲内における保存範囲の位置を初期位置に戻す。

図１１に示すように、撮像範囲が、範囲Ｐ３００から範囲Ｐ３０１へ推移するとき、データ処理部５０は、撮像範囲内の保存範囲の位置を逆方向へ変化させる。範囲Ｐ３０１〜Ｐ３０３へと順次推移するとき、データ処理部５０は、この状態を維持する。範囲Ｐ３０３〜Ｐ３０４へ推移するとき、データ処理部５０は、位置姿勢検出部６０の出力に基づいて、撮像範囲が元の方向に戻ったことを検知し、これに応じて、撮像範囲内における保存範囲の位置を初期位置に戻す。

位置姿勢検出部６０の具体的な構成は、任意であるが、好適には、３軸方向の加速度を検知するものとすれば良い。これによって、いずれの方向に対する変位も検知することができ、より的確に撮像範囲内における保存範囲の変更を為すことができる。

実施の形態７
以下、図１２を参照して、実施の形態７について説明する。図１２は、図２に示したブロック図を例示的に詳細に開示したものである。図２に示したブロック構成の具体的構成は任意である。

図１２に示すように、情報処理装置１００は、レンズ部３０、イメージャ（撮像素子）４１、周辺回路４２、インターフェイス５１、バス５２、ＣＰＵ(Central Processing Unit)５３、ＲＯＭ(Read Only Memory)５４、ＲＡＭ(Random Access Memory)５５、データ加工回路５６、記憶装置５７、加速度検出部６１、角速度検出部６２、中継回路６３、レンズ駆動装置７１、及び中継回路７２を備える。
撮像部４０は、例えば、イメージャ４１、及び周辺回路４２から構成される。データ処理部５０は、例えば、インターフェイス５１、バス５２、ＣＰＵ５３、ＲＯＭ５４、ＲＡＭ５５、データ加工回路５６、及び記憶装置５７から構成される。位置姿勢検出部６０は、例えば、加速度検出部６１、角速度検出部６２、及び中継回路６３から構成される。

イメージャ４１は、ＣＣＤセンサ、ＣＭＯＳセンサ等の一般的な半導体撮像装置であり、マトリクス状にピクセルが配置された撮像領域を前面に有する。イメージャ４１は、レンズ部３０を介して被写体を撮像する。周辺回路４２は、イメージャ４１に対して各種の制御信号を供給し、かつイメージャ４１から供給される画像信号に対して各種の処理（例えば、Ａ／Ｄ変換、デジタル信号補正処理、データ圧縮等）を実行する。

インターフェイス５１、バス５２、ＣＰＵ５３、ＲＯＭ５４、ＲＡＭ５５は、コンピュータの基礎を構成する。ＣＰＵ５３は、記憶装置５７（ＲＯＭ５４、ＲＡＭ５５）に格納されたプログラムを実行し、様々な機能を実現する。上述の実施形態にて説明したフローチャートは、ＣＰＵ５３によるプログラムの実行によって実現されるものである。ＲＯＭ５４、ＲＡＭ５５に、上述のフローチャートで示した閾値を格納してもよい。閾値の格納場所は任意であり、図１２に示す場合、記憶装置５７の閾値保持領域５７ｂに格納しても良い。バス５２は、データ、各種制御信号、各種値の伝送路である。インターフェイス５１は、バス５１と外部回路間の接続を制御する機能部分である。

データ加工回路５６は、バス５２を介して周辺回路４２から供給される画像データを加工する機能回路である。例えば、データ加工回路５６は、上述の図４に示したような再生画像が得られるようにオリジナルの画像データを加工する。また、データ加工回路５６は、上述の図５に示したような再生画像が得られるようにオリジナルの画像データを加工する。

なお、データ加工回路５６の具体的な動作方法は任意である。例えば、画像データが時間と関連づけられて供給される場合、データ加工回路５６は、画像データが関連づけられた時間を所定時間だけ加算する。これにより、より遅延したタイミングで画像再生されることになる。図４に示す場合、この遅延処理によって、再生表示できなくなる画像（画像７、８）が存在する。データ加工回路５６は、この点に対処するため、画像７、８を削除する処理をする。このようにしてオリジナルの画像データが加工され、その後、バス５２を介して、記憶装置５７の画像データ保持領域５７ａに格納されることになる。

図５に示す場合、上述の遅延処理によって、再生表示できなくなる画像（画像７、８）が存在する。データ加工回路５６は、この点に対処するため、画像７〜１０が通常表示時間よりも短い時間間隔で再生されるようにオリジナルの画像データを加工する。このようにしてオリジナルの画像データが加工され、その後、バス５２を介して、記憶装置５７の画像データ保持領域５７ａに格納されることになる。なお、データの転送制御等は、ＣＰＵ５３により適宜実行されるが、これに限らず、タイミングコントローラ回路により実行されるものであっても良い。

なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、データ処理部、変位検出部の具体的構成は任意である。画像データの具体的な構成は任意である。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

（付記１）
撮像手段と、空間的な変位を検出する変位検出手段と、前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理する画像データ処理手段と、を備える撮影装置。

（付記２）
前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位速度又は変位角速度が相対的に速いことを検知し、当該検知に応じて前記画像データに対する処理内容を変更することを特徴とする付記１に記載の撮影装置。

（付記３）
前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位速度又は変位角速度が相対的に速いことを検知し、当該検知以降に取得される画像が実際よりも時間的に遅延したタイミングで表示されるように前記画像データを加工することを特徴とする付記１又は２に記載の撮影装置。

（付記４）
前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位又は回転角度が所定角度以上であることを検知し、前記変位検出手段により検出された変位が所定角度以上である期間に取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする付記１乃至３のいずれか一項に記載の撮影装置。

（付記５）
前記画像データ処理手段は、前記変位検出手段が検出した変位により、前記撮像部による撮像方向が所定方向であることを検知し、前記撮像部による撮像方向が所定方向である期間に取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする付記１乃至４のいずれか一項に記載の撮影装置。

（付記６）
前記画像データ処理手段は、前記変位検出手段の出力に基づいて、当該撮影装置が静止していることを検知し、かつ前記撮像手段から供給される前記画像データに基づいて被写体に変化がないことを検知したとき、当該状態時に前記撮像手段により取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする付記１乃至５のいずれか一項に記載の撮影装置。

（付記７）
前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、付記１乃至７のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、撮影方向が所定方向に変化する場合であっても再生される画像が同範囲となるように、前記画像データを処理することを特徴とする付記１乃至６のいずれか一項に記載の撮影装置。

（付記８）
前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、付記１乃至７のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、撮影方向が所定方向に変化する場合、当該所定方向とは逆の方向に前記所定範囲を変更することを特徴とする付記１乃至７のいずれか一項に記載の撮影装置。

（付記９）
前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、付記１乃至８のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、前記撮像手段により撮像される前記画像の縁に対して前記所定範囲が位置するとき、撮影方向の変化の終了に応じて、前記所定範囲を変更することを特徴とする付記１乃至８のいずれか一項に記載の撮影装置。

（付記１０）
空間的な変位を検出する変位検出手段により検出された変位に応じた態様にて、撮像手段から供給される画像データを処理する情報処理装置。

（付記１１）
撮像手段は、撮像データを生成し、変位検出手段は、空間的な変位を検出し、画像データ処理手段は、前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理する、撮影装置の動作方法。

（付記１２）
付記１１に記載の手順をコンピュータに実行させるプログラム。

以上、実施の形態を参照して本願発明を説明したが、本願発明は上記によって限定されるものではない。本願発明の構成や詳細には、発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

上述の実施の形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、任意の処理を、ＣＰＵ（Central Processing Unit）にコンピュータプログラムを実行させることにより実現することも可能である。

プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

この出願は、２０１１年３月１５日に出願された日本出願特願２０１１−０５６２４４を基礎とする優先権を主張し、その開示の全てをここに取り込む。

１００ 情報処理装置
３０ レンズ部
４０ 撮像部
５０ データ処理部
６０ 位置姿勢検出部

Claims (10)

1. 撮像手段と、
   空間的な変位を検出する変位検出手段と、
   前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理する画像データ処理手段と、
   を備え、
   前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位速度又は変位角速度が相対的に速いことを検知し、当該検知以降に取得される画像の一部が実際よりも時間的に遅延したタイミングで表示され、かつ、当該検知以降に取得される残りの画像の表示間隔が実際よりも短くなるように、前記画像データを時間と対応付けて記憶装置に記憶することを特徴とする
   撮影装置。
2. 前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位又は回転角度が所定角度以上であることを検知し、前記変位検出手段により検出された変位が所定角度以上である期間に取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする請求項１に記載の撮影装置。
3. 前記画像データ処理手段は、前記変位検出手段が検出した変位により、前記撮像手段による撮像方向が所定方向であることを検知し、前記撮像手段による撮像方向が所定方向である期間に取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする請求項１又は２に記載の撮影装置。
4. 前記画像データ処理手段は、前記変位検出手段の出力に基づいて、当該撮影装置が静止していることを検知し、かつ前記撮像手段から供給される前記画像データに基づいて被写体に変化がないことを検知したとき、当該状態時に前記撮像手段により取得された画像の少なくとも一部が除かれるように前記画像データを加工することを特徴とする請求項１乃至３のいずれか一項に記載の撮影装置。
5. 前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、請求項１乃至４のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、撮影方向が所定方向に変化する場合であっても再生される画像が同範囲となるように、前記画像データを処理することを特徴とする請求項１乃至４のいずれか一項に記載の撮影装置。
6. 前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、請求項１乃至５のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、撮影方向が所定方向に変化する場合、当該所定方向とは逆の方向に前記所定範囲を変更することを特徴とする請求項１乃至５のいずれか一項に記載の撮影装置。
7. 前記画像データ処理手段は、前記撮像手段により撮像される画像の所定範囲を抽出処理する、請求項１乃至６のいずれか一項に記載の撮影装置であって、前記画像データ処理手段は、前記撮像手段により撮像される前記画像の縁に対して前記所定範囲が位置するとき、撮影方向の変化の終了に応じて、前記所定範囲を変更することを特徴とする請求項１乃至６のいずれか一項に記載の撮影装置。
8. 空間的な変位を検出する変位検出手段により検出された変位に応じた態様にて、撮像手段から供給される画像データを処理し、
   前記画像データの処理では、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位速度又は変位角速度が相対的に速いことを検知し、当該検知以降に取得される画像の一部が実際よりも時間的に遅延したタイミングで表示され、かつ、当該検知以降に取得される残りの画像の表示間隔が実際よりも短くなるように、前記画像データを時間と対応付けて記憶装置に記憶することを特徴とする
   情報処理装置。
9. 撮像手段は、撮像データを生成し、
   変位検出手段は、空間的な変位を検出し、
   画像データ処理手段は、前記変位検出手段により検出された前記変位に応じた態様にて、前記撮像手段から供給される画像データを処理し、
   前記画像データ処理手段は、前記変位検出手段の出力と閾値との比較に基づいて、前記変位検出手段により検出された変位速度又は変位角速度が相対的に速いことを検知し、当該検知以降に取得される画像の一部が実際よりも時間的に遅延したタイミングで表示され、かつ、当該検知以降に取得される残りの画像の表示間隔が実際よりも短くなるように、前記画像データを時間と対応付けて記憶装置に記憶する、
   撮影装置の動作方法。
10. 請求項９に記載の手順をコンピュータに実行させるプログラム。

Images