JP2017168882A - 画像処理装置、画像処理方法及びプログラム - Google Patents

Abstract

【課題】 撮像画像における、処理を実行させる領域を容易かつ適切に特定できるようにする。
【解決手段】 デジタルカメラは、撮像装置１０と本体装置２０を備え、本体装置２０は、撮像装置１０から取得した撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、その縁部分を含む領域を第２の領域として、第１の領域及び第２の領域の何れか一方に対して所定の処理を行う場合に、撮像装置１０の姿勢に基づいて第１の領域を所定の処理の対象とするか、第２の領域を所定の処理の対象とするかを特定する。
【選択図】 図１

Description

本発明は、撮影画像を処理する画像処理装置、画像処理方法及びプログラムに関する。

一般に、デジタルカメラなどの撮像装置において、背景よりも所望する被写体を重視して撮影する場合には撮影画像の真ん中（中央部分）にその被写体が位置するように撮影し、また、所望する被写体と共に背景も重視して撮影する場合には撮影画像の全体に所望する被写体と背景とがバランス良く配置されるように撮影するようにしている。このように目的に応じた構図で撮影を行うようにしているが、撮影画像の中から所望する被写体だけを更にクローズアップすることによって新たな画像（画角を狭めた画像）を得るためには、多数の保存画像（撮影済み画像）の中から所望する撮影画像を探し出し、その撮影画像内の一部を切り出し範囲としてユーザが指定する必要がある。この際、例えば、特許文献１に示すように、切り出し範囲の形状が矩形であれば、その四隅に対応する画面上の各位置をそれぞれユーザが指定するようにしている。

特開２０００−１０６６２３号公報

しかしながら、多数の保存画像（撮影済み画像）の中から所望する撮影画像を探し出してその切り出し範囲をその都度、四隅指定することは、指定の間違いも多くなり、ユーザに大きな負担をかけてしまう。
このことは、撮影画像からその一部の画像を切り出す場合に限らずに、その他の処理、例えば、広角画像の歪曲を補正する処理、コントラスト・ぼかし・シャープネスなどの特殊効果を施す画像処理を行う場合においても同様であった。

本発明の課題は、撮像画像における、処理を実行させる領域を容易かつ適切に特定できるようにすることである。

上述した課題を解決するために本発明は、
撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行う処理手段と、
前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する特定手段と、
を備えることを特徴とする画像処理装置である。

本発明によれば、撮像画像における、処理を実行させる領域を容易かつ適切に特定することが可能となる。

（１）は、画像処理装置として適用したデジタルカメラにおいてそのカメラを構成する撮像装置１０と本体装置２０とを一体的に組み合わせた状態を表した外観図、（２）は、撮像装置１０と本体装置２０とを分離した状態を表した外観図。 （１）は、撮像装置１０の概略構成を示したブロック図、（２）は、本体装置２０の概略構成を示したブロック図。 （１）、（３）は、撮像装置１０を第１の姿勢とした場合と第２の姿勢とした場合を示した図、（２）、（４）は、その第１の姿勢と第２の姿勢の状態において魚眼レンズで撮影された魚眼画像を例示した図。 （１）〜（６）は、撮像装置１０を第１の姿勢のままの状態において、更にその筐体を回転させてその向きを変えた場合とその姿勢で撮影された画像を例示した図。 撮影モードに切り替えられた際に実行開始される本体装置２０側の動作（第１実施形態の特徴的な動作）を説明するためのフローチャート。 図５の動作に続くフローチャート。 第２実施形態において、（１）は、画像処理装置（パーソナルコンピュータ：ＰＣ）３０の概略構成を示したブロック図、（２）は、撮像装置（デジタルカメラ）４０の概略構成を示したブロック図。 第２実施形態において、（１）は、第１の姿勢で撮影した魚眼画像を示し、（２）は、この魚眼画像の第１の領域内から切り出した標準サイズ展開用の画像に対してその歪曲を補正した後の画像を例示した図。 第２実施形態において、（１）は、第２の姿勢で撮影した魚眼画像を示し、（２）は、この魚眼画像の第２の領域内から切り出したパノラマサイズ展開用の画像に対してその歪曲を補正した後の画像を例示した図。 カメラ４０において、撮影指示操作に応じて実行開始される動作（第２実施形態の特徴的な動作）を示したフローチャート。 ＰＣ３０において、画像表示時における動作（第２実施形態の特徴的な動作）を示したフローチャート。

以下、本発明の実施の形態について、図面を参照して詳細に説明する。
（第１実施形態）
まず、図１〜図６を参照して本発明の第１実施形態を説明する。
本実施形態は、画像処理装置としてデジタルカメラに適用した場合を例示したもので、この画像処理装置は、後述する撮像部を備える撮像装置１０と、後述する表示部を備える本体装置２０とに分離可能なセパレート型デジタルカメラである。図１は、画像処理装置（デジタルカメラ）の外観図で、図１（１）は、撮像装置１０と本体装置２０とを一体的に組み合わせた状態を示し、図１（２）は、撮像装置１０と本体装置２０とを分離した状態を示した図である。撮像装置１０は、その筐体全体が箱型を成している。なお、図中、１０ａは、撮像装置１０の一端部に設けられた本体装置２０との接続部を示している。

このセパレート型デジタルカメラを構成する撮像装置１０と本体装置２０とは、それぞれが利用可能な無線通信を用いてペアリング（無線接続認識）が可能なもので、無線通信としては、例えば、無線ＬＡＮ（Ｗｉ−Ｆｉ）又はＢｌｕｅｔｏｏｔｈ（登録商標）を使用している。本体装置２０側では、撮像装置１０側で撮影された画像を受信取得して、この撮影画像をライブビュー画像として表示する。なお、本実施形態において撮影画像とは、保存済みの画像に限らず、ライブビュー画面に表示されている画像（ライブビュー画像：保存前の画像）を含む広義の画像を意味している。

図２（１）は、撮像装置１０の構成を示すブロック図であり、図２（２）は、本体装置２０の構成を示すブロック図である。
図２（１）において、撮像装置１０は、静止画像の撮影の他に、動画像の撮影が可能なもので、制御部１１、電源部１２、記憶部１３、通信部１４、操作部１５、撮像部１６、姿勢検出部１７を備えている。制御部１１は、電源部（二次電池）１２からの電力供給によって動作し、記憶部１３内の各種のプログラムに応じてこの撮像装置１０の全体動作を制御するもので、この制御部１１には図示しないＣＰＵ（中央演算処理装置）やメモリなどが設けられている。

記憶部１３は、例えば、ＲＯＭ、フラッシュメモリなどを有する構成で、本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されている。なお、記憶部１３は、例えば、ＳＤカード、ＵＳＢメモリなど、着脱自在な可搬型メモリ（記録メディア）を含む構成であってもよく、また、その一部が図示しない所定の外部サーバの領域を含むものであってもよい。通信部１４は、撮影画像を本体装置２０側に送信したり、本体装置２０からの操作指示信号などを受信したりする。操作部１５は、電源スイッチなどの基本的な操作キー（ハードウェアキー）を備えている。

撮像部１６は、被写体を高精細に撮影可能なカメラ部を構成するもので、この撮像部１６のレンズユニット１６Ａには、魚眼レンズ１６Ｂ、撮像素子１６Ｃなどが設けられている。なお、本実施形態のカメラは、通常の撮像レンズ（図示省略）と魚眼レンズ１６Ｂとが交換可能なもので、図示の例は、魚眼レンズ１６Ｂを装着した状態を示している。この魚眼レンズ１６Ｂは、例えば、３枚構成のレンズ系からなり、画角が略１８０゜という広範囲な撮影が可能な円周魚眼レンズ（全周魚眼レンズ）であり、この魚眼レンズ１６Ｂによって撮影された広角画像（魚眼画像）の全体は、円形の画像となる。この場合、射影方式を採用しているために、魚眼レンズ１６Ｂで撮影された広角画像（魚眼画像）は、その中心から端部に向かう程、大きく歪んだものとなる。

すなわち、魚眼レンズ１６Ｂは、その画角が略１８０゜という広範囲な撮影が可能な円周魚眼レンズであるため、魚眼画像の全体は、円形の画像となり、その中心部から端部（周辺部）の方に向かうほど、大きく歪んだものとなると共に、魚眼画像の中心部に比べてその周辺部は縮小された画像となるため、ユーザがその周辺部の内容を詳細に目視確認しょうとしてもその確認は極めて困難なものとなる。このような魚眼レンズ１６Ｂによる被写体像（光学像）が撮像素子（例えば、ＣＭＯＳ又はＣＣＤ）１６Ｃに結像されると、この撮像素子１６Ｃによって光電変換された画像信号（アナログ値の信号）は、図示省略のＡ／Ｄ変換部によってデジタル信号に変換されると共に、所定の画像表示処理が施された後、本体装置２０側に送信されてモニタ表示される。

姿勢検出部１７は、撮像装置１０に加わる加速度を検出する３軸加速度センサなどで構成されたもので、撮像装置１０の姿勢に応じて検出されたＸ・Ｙ・Ｚ方向の各加速度成分を制御部１１に与える。なお、撮像装置１０は、上述したようにその筐体全体が箱型であり、その筐体の短辺の方向をＸ軸方向、筐体の長辺の方向をＹ軸方向、筐体の厚さ方向をＺ軸方向としており、制御部１１は、このＸ軸、Ｙ軸、Ｚ軸の加速度成分を比較して撮像装置１０の姿勢（後述する第１の姿勢、第２の姿勢）を検出し、この姿勢情報を通信部１４から本体装置２０側に送信する。

図２（２）において、本体装置２０は、デジタルカメラのコントローラを構成するもので、撮像装置１０によって撮影された画像を表示する再生機能を有し、制御部２１、電源部２２、記憶部２３、通信部２４、操作部２５、タッチ表示部２６を備えている。制御部２１は、電源部（二次電池）２２からの電力供給によって動作し、記憶部２３内の各種のプログラムに応じてこの本体装置２０の全体動作を制御するもので、この制御部２１には図示しないＣＰＵ（中央演算処理装置）やメモリなどが設けられている。記憶部２３は、例えば、ＲＯＭ、フラッシュメモリなどを有する構成で、本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ２３Ａ、この本体装置２０が動作するために必要となる各種の情報（例えば、フラグなど）を一時的に記憶するワークメモリ２３Ｂなどを有している。

通信部２４は、撮像装置１０との間で各種のデータの送受信を行う。操作部２５は、電源ボタン、レリーズボタン、露出やシャッタスピードなどの撮影条件を設定する設定ボタンなど、押しボタン式の各種のキーを備えたもので、制御部２１は、この操作部２５からの入力操作信号に応じた処理を実行したり、入力操作信号を撮像装置１０に対して送信したりする。タッチ表示部２６は、高精細液晶などのディスプレイ２６Ａ上にタッチパネル２６Ｂを積層配置した構成で、その表示画面は、撮影された画像（魚眼画像）をリアルタイムに表示するモニタ画面（ライブビュー画面）となったり、撮影済み画像を再生する再生画面となったりする。

本体装置２０側において制御部２１は、撮像装置１０から受信した撮影画像（魚眼画像）をライブビュー画面に表示させたり、撮像装置１０から受信した姿勢情報に基づいて所定の処理を実行する処理対象の領域を特定すると共に、特定した処理対象領域を明示するための枠（矩形枠）をライブビュー画面上に表示させたりする。すなわち、制御部２１は、撮影画像のうち、撮影画像の周囲に沿った縁部分ではない領域（縁部分を含まない領域）を第１の領域、その縁部分を含む領域を第２の領域とした場合に、撮像装置１０の姿勢情報に基づいて第１の領域及び第２の領域の何れか一方を特定して、その領域の範囲を明示するための矩形枠をライブビュー画面上に表示させるようにしている。

本実施形態において、第２の領域は、撮影画像の周囲に沿った縁部分を含む領域として、撮影画像全体の領域（全画角の領域）を意味している。また、本実施形態において上述の所定の処理とは、魚眼画像からその一部分の画像を切り抜くトリミング処理、魚眼画像の歪曲を補正する歪補正処理、画像保存処理を意味している。なお、この所定の処理（例えば、トリミング処理）は、後で詳述するが、処理対象領域の種類（第１の領域であるか、第２の領域であるか）に応じて実行するようにしている。

図３及び図４は、撮像装置１０の各種の姿勢とその姿勢で撮影された画像を例示した図である。
図３（１）は、撮像装置１０の撮影時の姿勢が第１の姿勢、つまり、撮像装置１０の正面中央部に配置した魚眼レンズ１６Ｂの光軸方向と重力方向とが垂直に対して許容角度範囲内となる姿勢を示した図である。なお、図中、破線で示した半球は、画角が略１８０゜という魚眼レンズ１６Ｂの撮影範囲を示している（以下、同様）。図３（２）は、第１の姿勢で人物を真ん中にして撮影したライブビュー画像（魚眼画像）の表示例を示したもので、このライブビュー画面上には、所定の処理を実行する処理対象の領域（第１の領域）を明示するための矩形枠（図中、破線で示した枠）が重畳表示される。

図３（２）に示した第１の領域の矩形枠は、撮影画像の一部を処理対象の範囲とするもので、撮影画像からその範囲の画像を切り出す際の切り出し範囲を示している。本体装置２０側の制御部２１は、撮影画像から処理対象の領域（第１の領域の矩形枠）内の画像を切り出した後に、その切り出した画像（魚眼画像）の歪曲を補正する処理を施すようにしている。この場合、仮想球面モデル上の任意の点で接する平面をスクリーンとして、仮想球面モデル上の点を平面スクリーン上の点に座標変換することにより魚眼画像の歪を補正する技術を用いて行うようにしているが、魚眼画像の歪を補正する処理（魚眼歪補正処理）は、画像処理において一般的に用いられている周知技術を利用するようにしているためその具体的な説明については省略するものとする。制御部２１は、その補正画像に対して現像処理を行うと共に、画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる。

図３（３）は、撮像装置１０の撮影時の姿勢が第２の姿勢、つまり、撮像装置１０の魚眼レンズ１６Ｂの光軸方向が重力方向に対して光軸方向が平行、又は平行に対して許容角度範囲内となる姿勢を示した図である。図３（４）は、第２の姿勢でビル群を撮影したライブビュー画像（魚眼画像）の表示例を示したもので、このライブビュー画面上には、所定の処理を実行する処理対象の領域（第２の領域）を明示するための矩形枠が重畳表示される。図３（４）に示した第２の領域の矩形枠は、撮影画像の全体（全画角）を所定の処理の処理対象の範囲とするもので、制御部２１は、撮影画像の全体に対して現像処理を行うと共に、画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる。

図４は、撮像装置１０を第１の姿勢のままの状態において更にその筐体を回転させてその向きを変えた場合とその姿勢で撮影された画像を例示した図である。
図４（１）は、図３（１）と同様の姿勢（第１の姿勢）を示し、図４（２）は、図３（２）と同様のライブビュー画面を示している。ここで、撮像装置１０の接続部１０ａが重力方向となる向きを通常の姿勢（第１−１の姿勢：正立）とすると、図４（３）は、この通常の向き（第１−１の姿勢）から時計方向（図中、右方法）に９０°回転させた場合の姿勢（第１−２の姿勢）を示し、図４（４）は、この９０°回転させた向きでのライブビュー画面を例示した図である。この場合、第１の姿勢ではあるが、図４（２）で示したように撮影画像の中央部分を処理対象領域とするのではなく、撮影画像の全体（全画角）を処理対象領域とするために第２の領域の矩形枠がライブビュー画面上に重畳表示される。制御部２１は、撮影画像の全体に対して現像処理を行うと共に、画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる。

図４（５）は、上述の通常の向き（第１−１の姿勢）から反時計方向（図中、左方法）に９０°回転させた場合の姿勢（第１−３の姿勢）を示し、図４（６）は、この９０°回転させた向きでのライブビュー画面を示している。この場合、ライブビュー画面上には第１の領域を明示するための矩形枠が重畳表示されるが、図３（２）で示した第１の領域の矩形枠は、その横縦比が横４：縦３の標準サイズの矩形枠であるのに対し、図４（６）で示した第１の領域の矩形枠は、横縦比が横８：縦３のパノラマサイズの矩形枠となっている。制御部２１は、撮影画像から処理対象の領域（第１の領域の矩形枠）内の画像（パノラマサイズの画像）を切り出した後に、その切り出した画像（魚眼画像）の歪曲を補正する処理を施すようにしている。そして、その補正画像に対して現像処理を行うと共に、画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる。

次に、第１実施形態における画像処理装置（デジタルカメラ）の動作概念を図５及び図６に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他に、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。なお、図５及び図６、本体装置２０側の全体動作のうち、第１実施形態の特徴部分の動作概要を示したフローチャートであり、この図５及び図６のフローから抜けた際には、全体動作のメインフロー（図示省略）に戻る。

図５及び図６は、撮影モードに切り替えられた際に実行開始される本体装置２０側の動作（第１実施形態の特徴的な動作）を説明するためのフローチャートである。
まず、本体装置２０側の制御部２１は、撮像装置１０から取得した画像をライブビュー画像としてタッチ表示部２６に表示させる動作を開始（図５のステップＡ１）すると共に、撮像装置１０の姿勢検出部１７から姿勢情報を取得して（ステップＡ２）、第１の姿勢であるか第２の姿勢であるかを判別する（ステップＡ３）。

いま、図３（１）に示すような第１の姿勢であれば（ステップＡ３）、更に、その姿勢情報に基づいて撮像装置１０の筐体（カメラ筐体）の向きを判別する（ステップＡ４）。すなわち、第１の姿勢の状態においてそのカメラ筐体が回転された場合の向きを判別し、図４（１）に示すような通常の姿勢（第１−１の姿勢）であれば、ステップＡ６に移り、撮影画像に対する処理対象領域として、標準サイズ（横４：縦３）展開用の第１の領域（中央部分の領域）を特定する。また、図４（３）に示すように通常の向きから時計方向に９０°回転させた場合の姿勢（第１−２の姿勢）であれば、ステップＡ７に移り、撮影画像の全体（全画角）を処理対象領域とするために全画角展開用の第２の領域を特定する。

また、図４（５）に示すように通常の向きから反時計方向に９０°回転させた場合の姿勢（第１−３の姿勢）であれば、ステップＡ５に移り、撮影画像に対する処理対象領域として、パノラマサイズ（横８：縦３）展開用の第１の領域（中央部分の領域と一部の周辺領域）を特定する。このように第１の姿勢の場合には更にそのカメラ筐体の向きに応じて第１の領域又は第２の領域を処理対象領域として特定する。そして、図４（２）、（４）、（６）に示すように、特定した領域を明示するための矩形枠をライブビュー画面上に重畳表示させる（ステップＡ８）。

そして、図６のステップＡ９に移り、撮影を指示する操作（レリーズキー操作）が行われたかを調べ、撮影指示操作が行われなければ（ステップＡ９でＮＯ）、図５のステップＡ２に戻り、以下、姿勢情報を取得しながらその姿勢に応じて処理対象領域を特定する処理を撮影指示操作が行われるまで繰り返す。ここで、撮影指示操作が行われると（ステップＡ９でＹＥＳ）、撮像装置１０からその撮影指示操作時の撮影画像（魚眼画像）を受け取り（ステップＡ１０）、その魚眼画像から処理対象領域内の画像（第１の領域又は第２の領域内の画像）を取得する（ステップＡ１１）。

すなわち、図５のステップＡ５又はステップＡ６のように第１の領域を特定した場合には、魚眼画像からその第１の領域内の画像を取得する（切り出す）処理を行う。例えば、ステップＡ６の場合には、第１の領域として標準サイズ展開用の領域を切り出すが、ステップＡ５の場合には、第１の領域としてパノラマサイズ展開用の領域を切り出す。また、図５のステップＡ７に示すように第２の領域を特定した場合には、画像の切り出し処理は行わず、魚眼画像の全体（全画角）を処理対象として取得する。

これによって取得した画像に対してその歪を補正する処理を行うと共に、現像処理及び画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる（ステップＡ１２）。そして、撮影モードが解除されたかを調べるが（ステップＡ１３）、撮影モードのままであれば（ステップＡ１３でＮＯ）、図５のステップＡ１に戻り、以下、上述の動作を繰り返すが、撮影モードが解除された場合には（ステップＡ１３でＹＥＳ）、図５及び図６のフローから抜ける。

一方、図３（３）に示すように第２の姿勢の場合には（図５のステップＡ３）、図６のステップＡ１４に移り、撮影画像の全体（全画角）を処理対象とするために、全画角展開用の第２の領域を特定する。そして、図３（４）に示すように、この第２の領域を明示するための矩形枠をライブビュー画面上に重畳表示（ステップＡ１５）させた後、撮影を指示する操作（レリーズキー操作）が行われたかを調べ（ステップＡ１６）、撮影指示操作が行われなければ（ステップＡ１６でＮＯ）、図５のステップＡ２に戻り、以下、姿勢情報を取得しながらその姿勢に応じて処理対象領域を特定する処理を撮影指示操作が行われるまで繰り返す。

ここで、撮影指示操作が行われると（ステップＡ１６でＹＥＳ）、撮像装置１０からその撮影指示操作時の撮影画像（魚眼画像）を受け取り（ステップＡ１７）、その魚眼画像から処理対象領域内の画像として全画角画像を取得する（ステップＡ１８）。そして、取得した画像に対して歪補正処理、現像処理、画像圧縮処理を施してファイル形式に変換した後、記憶部２３の記録メディアに記録保存させる（ステップＡ１２）。そして、撮影モードが解除されたかを調べ（ステップＡ１３）、撮影モードが解除されるまで図５のステップＡ１に戻り、以下、上述の動作を繰り返す。

以上のように、第１実施形態のデジタルカメラは、撮像装置１０と本体装置２０を備え、本体装置２０は、撮像装置１０から取得した撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、その縁部分を含む領域を第２の領域として、第１の領域及び第２の領域の何れか一方に対して所定の処理を行う場合に、撮像装置１０の姿勢に基づいて第１の領域を所定の処理の対象とするか、第２の領域を所定の処理の対象とするかを特定するようにしたので、ユーザによる煩雑な操作なしに、適切な処理を実行させる領域を容易かつ適切に特定することができる。つまり、ユーザにあっては、撮影時に面倒な操作を行うことなく、所望する構図に適した自然な姿勢で撮影を行うだけで処理を実行させる領域を容易かつ適切に特定することが可能となる。

本体装置２０は、撮像装置１０の姿勢検出部１７によって検出された姿勢情報に基づいて第１の領域及び第２の領域の何れか一方を処理対象として特定するようにしたので、精度の良く検出された姿勢から処理対象の領域を的確に特定することができる。

本体装置２０は、撮像装置１０の光軸方向と重力方向とが垂直に対して許容角度範囲内であれば（第１の姿勢であれば）、第１の領域を処理対象として特定するようにしたので、ユーザは背景よりも所望する被写体を重視した撮影を行う場合には、撮像装置１０を第１の姿勢にしてその被写体が真ん中に来るようにするだけでよく、その被写体撮影に適した第１の領域を処理対象とすることができる。

本体装置２０は、撮像装置１０が第１の姿勢の場合、更に撮像装置１０の筐体の向きに応じて異なる形状の第１の領域を処理対象として特定するようにしたので、ユーザにあっては同じ第１の姿勢であっても筐体を回転させてその向きを変えるだけで、形状の異なる第１の領域、例えば、標準サイズの領域、又はパノラマサイズの領域を処理対象とすることができる。

本体装置２０は、撮像装置１０が第１の姿勢の場合、更に撮像装置１０の筐体の向きに応じて第２の領域を処理対象として特定するようにしたので、ユーザにあっては同じ第１の姿勢のままの状態であっても筐体を回転させてその向きを変えるだけで、第１の領域又は第２の領域を処理対象とすることができる。

本体装置２０は、撮像装置１０の光軸方向と重力方向とが平行に対して許容角度範囲内であれば（第２の姿勢であれば）、第２の領域を処理対象として特定するようにしたので、ユーザは広範囲な撮影を行う場合には、撮像装置１０を第２の姿勢にするだけでよく、その広範囲撮影に適した第２の領域を処理対象とすることができる。

本体装置２０は、撮像装置１０から取得した画像をライブビュー画像として表示すると共に、撮像装置１０から姿勢検出部１７の検出結果（姿勢情報）を取得して撮像装置１０の姿勢を判別し、その姿勢に応じて特定した第１の領域又は第２の領域を明示する枠を表示するようにしたので、ユーザにあっては特定した領域を容易に識別することができる。

本体装置２０は、第１の領域を処理対象として特定した場合に、撮影画像の中からその第１の領域内の画像を切り出して記録する処理を行い、第２の領域を処理対象として特定した場合に、撮影画像の全体を記録保存する処理を行うようにしたので、撮像装置１０の姿勢に応じて撮影画像の全体を記録保存するかその一部を記録するかを容易かつ適切に制御することが可能となる。

本体装置２０は、第１の領域が処理対象として特定した場合に、撮影画像の中からその第１の領域内の画像を切り出す処理を行うようにしたので、背景よりも所望する被写体を重視するためにその被写体を真ん中にする撮影を行った場合に、その被写体が写っている領域を切り出すことができる。

本体装置２０は、魚眼レンズ１６Ｂによって撮影された画像を取得し、処理対象として特定された領域内の画像の歪を補正する処理を行うようにしたので、魚眼レンズ１６Ｂで撮影した画像であってもその歪を補正することができる。

本体装置２０は、特定した領域内の画像をパノラマ展開するようにしたので、撮像装置１０の姿勢に応じてパノラマ画像を得ることができる。

＜変形例１＞
なお、上述した第１実施形態において本体装置２０は、撮像装置１０の姿勢に基づいて撮影画像の中から処理対象として特定した領域内の画像を記録保存する場合を示したが、処理対象として特定した領域内の画像を表示したり、他の外部機器（例えば、外部表示装置）に通信手段を介して送信したりしてもよい。これによってユーザにあっては処理対象の領域内の画像を表示によって容易に確認することが可能となる。

上述した第１実施形態においては、撮像装置１０と本体装置２０とに分離可能なセパレート型デジタルカメラに適用した場合を示したが、それらを一体化したデジタルコンパクトカメラなどに適用するようにしてもよい。

また、上述した実施形態においては、静止画像を撮影する場合を例示したが、動画像を撮影する場合であっても同様に適用可能である。ここで、第１の領域を処理対象領域として特定した場合には、その動画像の標準サイズとして、例えば、縦横比が横１６×縦９の領域を切り出すようにすればよい。

（第２実施形態）
以下、この発明の第２実施形態について図７〜図１１を参照して説明する。
なお、上述した第１実施形態においては、撮像装置１０と本体装置２０とに分離可能なセパレート型デジタルカメラに適用し、本体装置２０は、撮影時において撮像装置１０の姿勢に基づいて撮影画像の中から処理対象として特定した領域内の画像を記録保存するようにしたが、この第２実施形態においては、画像処理装置としてノート型ＰＣ（パーソナルコンピュータ）３０に適用したもので、このＰＣは、撮像装置（デジタルカメラ）４０によって撮影された撮影済み画像（保存画像）を取得して表示する場合に、撮影時におけるカメラの姿勢に基づいて撮影画像の中から処理対象（表示対象）として特定した領域（第１の領域、第２の領域）内の画像を表示するようにしたものである。なお、この第２実施形態においても第１実施形態と同様に、第１の領域は、縁部分ではない領域であり、第２の領域は、縁部分を含む領域を意味している。

図７は、画像処理装置（ＰＣ）３０と撮像装置（デジタルカメラ）４０の構成を示したブロック図である。
ＰＣ３０とカメラ４０は、第１実施形態で示した撮像装置１０と本体装置２０と基本的に同様の構成であるため、その詳細な説明は省略するものとする。図７（１）は、ＰＣ３０の構成を示し、ＰＣ３０は、制御部３１、電源部３２、記憶部３３、通信部３４、操作部３５、表示部３６を備えている。図７（２）は、カメラ４０の構成を示し、カメラ４０は、制御部４１、電源部４２、記憶部４３、通信部４４、操作部４５、魚眼レンズ付の撮像部４６、姿勢検出部４７を備えている。

図８（１）は、カメラ４０の正面方向（魚眼レンズの光軸方向）と重力方向とが垂直に対して許容角度範囲内となる第１の姿勢において、人物を真ん中にして撮影した撮影済み画像（保存画像：魚眼画像）を示している。図中、太線の破線矩形は、第１の姿勢に応じて保存画像上に特定した領域、つまり、所定の処理（表示処理）を実行する処理対象領域（表示領域）として特定した第１の領域を示している。更に、この第１の領域内において、各人物の顔を囲むように配置した細線の破線矩形は、人物の顔を特定被写体としたもので、ＰＣ３０は、この第１の領域内の特定被写体を認識し、その特定被写体が第１の領域の中心部分に配置されるように保存画像上の第１の領域の配置位置を移動させるようにしている。図８（２）は、ＰＣ３０側の再生画面を示し、図８（１）に示した魚眼画像の第１の領域内から切り出した画像に対してその歪曲を補正した画像を示している。

図９（１）は、カメラ４０の正面方向（魚眼レンズの光軸方向）と重力方向とが平行に対して許容角度範囲内となる第２の姿勢において、近くの人物を含めて撮影した撮影済み画像（保存画像：魚眼画像）を示している。図中、破線矩形は、第２の姿勢に応じて保存画像上に特定した領域、つまり、所定の処理（表示処理）を実行する処理対象領域（表示領域）として特定した第２の領域を示している。この第２の領域は、第１実施形態の場合に、魚眼画像の周辺部を含む領域（魚眼画像の全画角）としたが、第２実施形態においては、魚眼画像上の一部の周辺領域（円弧状の領域）とした場合を示している。図９（２）は、ＰＣ３０側の再生画面を示し、図９（１）に示した魚眼画像の第１の領域内から切り出した画像に対してその歪曲を補正したパノラマ画像を示している。

図１０は、カメラ４０において、撮影指示操作に応じて実行開始される動作（第２実施形態の特徴的な動作）を示したフローチャートである。
まず、カメラ４０側の制御部４１は、撮像部４６によって撮影された画像に対して現像処理及び画像圧縮処理を施してファイル形式に変換する撮影処理（ステップＢ１）を行い、その処理後の撮影画像を取得する（ステップＢ２）。そして、姿勢検出部４７から撮影時のカメラ４０の姿勢を取得し（ステップＢ３）、この姿勢情報を撮影画像のＥＸＩＦ情報として付加（ステップＢ４）した後、この姿勢情報付の撮影画像を記憶部２３の記録メディアに記録保存させる（ステップＢ５）。

図１１は、ＰＣ３０において、画像再生時における動作（第２実施形態の特徴的な動作）を示したフローチャートである。
まず、ＰＣ３０側の制御部３１は、カメラ４０によって撮影された画像（魚眼画像）を通信手段又は記録メディア（ＳＤカード、ＵＳＢメモリなど）を介して取り込んでいる状態において、その中からユーザ操作によって表示対象として選択された魚眼画像を取得（ステップＣ１）すると共に、その取得した魚眼画像にＥＸＩＦ情報として付加されている姿勢情報を取得する（ステップＣ２）。

そして、この姿勢情報に基づいて魚眼画像内の表示対象領域（第１の領域、第２の領域）を特定する処理に移るが、それに先立って、表示対象領域がユーザ操作によって選択されたかを調べる（ステップＣ３）。すなわち、第２実施形態においては上述の第１実施形態と同様に、姿勢情報から表示対象領域を自動的に特定する以外に、ユーザ操作によって選択された領域を表示対象領域として特定することも可能としており、ユーザ操作で処理対象領域が選択されなければ（ステップＣ３でＮＯ）、第１実施形態と同様に、姿勢情報に基づいて第１の領域又は第２の領域であるかを判別し、第１の姿勢であれば第１の領域、第２の姿勢であれば第２の領域を処理対象領域（表示対象領域）として自動的に特定する（ステップＣ６）。

一方、ユーザ操作によって処理対象領域（表示対象領域）が任意に選択された場合には（ステップＣ３でＹＥＳ）、このユーザ選択された領域と予め設定されている制限領域とを比較する（ステップＣ４）。ここで、制限領域とは、ユーザ操作によって選択される領域がカメラ４０の姿勢にとって相応しくない場合に、その領域を制限するために予め設定された領域である。例えば、図４（６）に示すようなパノラマ展開用の領域が第１の姿勢に対応する制限領域として設定されている。すなわち、このパノラマ展開用の領域は、図示のように人物が魚眼画像内の真ん中に写っている場合には問題がないとしても、周辺に写っている場合には、その人物が大きく歪んでしまうため、第１の姿勢においては、パノラマ展開用の領域として画像の縁部分を制限領域としている。

いま、ユーザ選択された領域と制限領域とを比較した結果、ユーザ選択された領域が制限領域に該当しているかを調べ（ステップＣ５）、該当する場合には（ステップＣ５でＹＥＳ）、その選択を無効とするために上述のステップＣ３に戻るが、制限領域に該当していなければ（ステップＣ５でＮＯ）、そのユーザ選択された第１の領域又は第２の領域を表示対象領域として特定する（ステップＣ７）。その後、上述のように特定した領域は、第１の領域であるかを調べ（ステップＣ８）、第１の領域であれば（ステップＣ８でＹＥＳ）、この第１の領域内を解析し、第１の領域に対応付けて予め設定されている特定の被写体、例えば、人物の顔、料理などが写っているかを認識する（ステップＣ９）。同様に、第２の領域であれば（ステップＣ８でＮＯ）、第２の領域内を解析し、第２の領域に対応付けて予め設定されている特定の被写体、例えば、人物の顔などが写っているかを認識する（ステップＣ１０）。

その結果、第１又は第２の領域内に特定被写体が写っていなければ（ステップＣ１１でＮＯ）、その特定領域内の画像を表示する処理（ステップＣ１３）に移るが、特定被写体が写っていれば（ステップＣ１１でＹＥＳ）、魚眼画像上での特定被写体の位置を検出し、その検出位置に第１又は第２の領域の中心が来るように第１又は第２の領域を移動させる位置調整処理を行う（ステップＣ１２）。その後、画像表示処理に移る（ステップＣ１３）。このステップＣ１３においては、第１又は第２の領域内の画像を処理して表示部３６に表示させる。例えば、第１の領域を特定した場合には、図８（２）に示すように魚眼画像から第１の領域内の画像（標準サイズの画像）を切り出してその画像の歪を補正した後、拡大表示させる。また、第２の領域が特定された場合には、図９（２）に示すように魚眼画像から第１の領域内の画像（パノラマサイズの画像）を切り出してその画像の歪を補正した後、拡大表示させる。

以上のように、第２実施形態において画像処理装置（ＰＣ）３０は、撮像装置（カメラ）４０の撮影時にその姿勢を示す情報が付加された撮影画像を取得し、この撮影画像に対して所定の処理を行う場合に、その姿勢情報に基づいて第１の領域を所定の処理の対象とするか、第２の領域を所定の処理の対象とするかを特定するようにしたので、ユーザにより煩雑な操作なしに適切な処理を実行させる領域を容易かつ適切に特定することが可能となる。

ＰＣ３０は、撮像装置４０の光軸方向と重力方向とが垂直に対して許容角度範囲内である姿勢（第１の姿勢）であれば、この第１の領域を所定の処理の対象として特定するようにしたので、ユーザは背景よりも所望する被写体を重視した撮影を行う場合には、撮像装置１０を第１の姿勢にしてその被写体が真ん中に来るようにするだけでよく、その被写体撮影に適した第１の領域を処理対象とすることができる。

ＰＣ３０は、撮像装置４０の光軸方向と重力方向とが平行に対して許容角度範囲内である姿勢（第２の姿勢）であれば、この第２の領域を所定の処理の対象として特定するようにしたので、ユーザは広範囲な撮影を行う場合には撮像装置１０を第２の姿勢にするだけでよく、その広範囲撮影に適した第２の領域を処理対象とすることができる。

ＰＣ３０は、第１の領域を処理対象領域として特定した場合に、撮影画像の中からその第１の領域内の画像を切り出す処理を行うようにしたので、背景よりも所望する被写体を重視するためにその被写体を真ん中にする撮影を行った場合に、その被写体が写っている領域を切り出すことができる。

ＰＣ３０は、魚眼レンズ１６Ｂによって撮影された画像を取得して、処理対象として特定された領域内の画像の歪を補正する処理を行うようにしたので、魚眼レンズ１６Ｂで撮影した画像であってもその歪を補正することができる。

ＰＣ３０は、特定した領域内の画像をパノラマ展開するようにしたので、撮像装置１０の姿勢に応じてパノラマ画像を得ることができる。

ＰＣ３０は、処理対象領域がユーザ操作によって選択された場合に、その選択された領域がカメラ姿勢にとって不相応な領域ではないことを条件にその領域を当該姿勢の処理対象として特定するようにしたので、ユーザ操作によって選択された領域を処理対象として特定する場合に、カメラ姿勢にとって不相応な領域の特定を排除することができ、カメラ姿勢に適合した領域だけを特定することができる。

ＰＣ３０は、処理対象として特定した領域内に含まれている特定の被写体の位置を認識し、その被写体の位置に合わせてその領域を移動するようにしたので、予め特定の被写体として人物の顔などを設定しておけば、人物の顔を中心とした画像を容易に得ることが可能となる。

＜変形例２＞
なお、上述した第２実施形態においてＰＣ３０は、カメラ姿勢に基づいて撮影画像の中から処理対象として特定した領域内の画像を表示する場合を示したが、処理対象として特定した領域内の画像を他の外部機器（例えば、外部表示装置）に通信手段を介して送信するようにしてもよい。

上述した第２実施形態においては、特定領域の位置を特定被写体の位置に応じて調整するようにしたが、この位置調整処理（図１１のステップＣ８〜Ｃ１２）を省略するようにしてもよい。

＜変形例３＞
上述した第２実施形態においては、処理対象領域がユーザ操作によって選択された場合に、その選択された領域がカメラ姿勢にとって不相応な制限領域ではないことを条件にその領域を当該姿勢の処理対象として特定するようにしたが、これを第１実施形態においても同様に適用するようにしてもよい。

＜変形例４＞
上述した第２実施形態においては、処理対象として特定した領域内に含まれている特定の被写体の位置を認識し、その被写体の位置に合わせてその領域を移動するようにしたが、これを第１実施形態においても同様に適用するようにしてもよい。

上述した各実施形態においては、カメラ姿勢（第１の姿勢、第２の姿勢）に応じて第１の領域及び第２の領域の何れか一方を処理対象として特定するようにしたが、この２種類の姿勢及び２種類の領域に限らず、例えば、第３の姿勢に応じて第３の領域を処理対象として特定するようにしてもよい。この場合、第１の領域を画像の中央部分、第２の領域を画像の縁部分、第３の領域を画像の中央部分と縁部分の中間部分の領域としてもよい。また、領域の形状も矩形に限らず、更に、三角形、楕円などであってもよい。

また、所定の処理としては、魚眼画像の一部を切り出す処理、歪曲を補正する処理、画像を記録保存する処理、画像を表示する処理に限らず、例えば、コントラスト・ぼかし・シャープネスなどの特殊効果を施す画像処理であってもよい。

また、上述した各実施形態においては、画像処理装置として、デジタルカメラ、ノート型ＰＣに限らず、例えば、ＰＤＡ（個人向け携帯型情報通信機器）、タブレット端末装置、スマートフォンなどの携帯電話機、電子ゲーム、音楽プレイヤーなどであってもよい。

上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。

なお、本実施形態では魚眼画像を対象として説明したが、特にそれに限らず通常の画像や広角画像に適応しても良い。

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行う処理手段と、
前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する特定手段と、
を備えることを特徴とする画像処理装置である。
（請求項２）
請求項２に記載の発明は、請求項１に記載の画像処理装置において、
前記撮影手段の姿勢を示す姿勢情報を検出する検出手段を更に備え、
前記特定手段は、前記検出手段によって検出された姿勢情報に基づいて前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する、
ことを特徴とする。
（請求項３）
請求項３に記載の発明は、請求項１に記載の画像処理装置において、
前記撮像装置の撮影時の姿勢を示す姿勢情報が付加された撮影画像を取得する取得手段を備え、
前記特定手段は、前記取得手段によって取得された撮影画像に付加されている姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する、
ことを特徴とする。
（請求項４）
請求項４に記載の発明は、請求項１乃至３の何れかに記載の画像処理装置において、
前記特定手段は、前記姿勢情報が、前記撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内の姿勢の第１の姿勢であると判断した場合、前記第１の領域を前記所定の処理の対象として特定する、
ことを特徴とする。
（請求項５）
請求項５に記載の発明は、請求項４に記載の画像処理装置において、
前記特定手段は、前記姿勢情報として前記第１の姿勢が判断された状態において更に、その向きに応じて異なる形状の前記第１の領域を前記所定の処理の対象として特定する、
ことを特徴とする。
（請求項６）
請求項６に記載の発明は、請求項４に記載の画像処理装置において、
前記特定手段は、前記姿勢情報として前記第１の姿勢が判断された状態において更に、その向きに応じて異なる形状の前記第１の領域を前記所定の処理の対象として特定、又は前記第２の領域を前記所定の処理の対象として特定する、
ことを特徴とする。
（請求項７）
請求項７に記載の発明は、請求項１乃至６の何れか１項に記載の画像処理装置において、
前記特定手段は、前記姿勢情報が、前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内の姿勢である第２の姿勢と判断した場合に、前記第２の領域を前記所定の処理の対象として特定する、
ことを特徴とする。
（請求項８）
請求項８に記載の発明は、
撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得する姿勢情報取得手段と、
前記姿勢情報取得手段によって、前記姿勢情報として前記第1の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報取得手段によって前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定する特定手段と、
を備えることを特徴とする画像処理装置である。
（請求項９）
請求項９に記載の発明は、請求項１乃至８の何れか１項に記載の画像処理装置において、
前記取得手段によって取得された撮影画像を表示する表示手段と、
前記特定手段によって特定された領域を前記表示手段に識別表示する表示制御手段と、
を更に備る、
ことを特徴とする。
（請求項１０）
請求項１０に記載の発明は、請求項１乃至９の何れか１項に記載の画像処理装置において、
前記処理手段は、前記特定手段によって前記第１の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の中からその第１の領域内の画像記録保存する処理を行い、前記第２の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の前記第２の領域を記録保存する処理を行う、
ことを特徴とする。
（請求項１１）
請求項１１に記載の発明は、請求項１乃至１０の何れか１項に記載の画像処理装置において、
前記処理手段は、前記特定手段によって前記第１の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の中からその第１の領域内の画像を切り出す処理を行う、
ことを特徴とする。
（請求項１２）
請求項１２に記載の発明は、請求項１乃至１１の何れか１項に記載の画像処理装置において、
前記処理手段は、前記特定手段によって所定の処理対象として特定された領域内の画像の歪を補正する処理を行う、
ことを特徴とする。
（請求項１３）
請求項１３に記載の発明は、請求項１乃至１２の何れか１項に記載の画像処理装置において、
前記処理手段は、前記特定手段によって特定された領域内の画像をパノラマ展開する処理を前記所定の処理として行う、
ことを特徴とする。
（請求項１４）
請求項１４に記載の発明は、請求項１乃至１３の何れか１項に記載の画像処理装置において、
前記処理手段は、前記特定手段によって特定された領域内の画像を出力する処理を前記所定の処理として行う、
ことを特徴とする。
（請求項１５）
請求項１５に記載の発明は、請求項１乃至１４の何れか１項に記載の画像処理装置において、
前記特定手段は、前記第１の領域及び前記第２の領域の何れか一方が前記所定の処理の対象としてユーザ操作によって選択された場合に、その選択された領域が前記姿勢にとって不相応な領域ではないことを条件にその領域を当該姿勢の処理対象として特定する、
ことを特徴とする。
（請求項１６）
請求項１６に記載の発明は、請求項１乃至１５の何れか１項に記載の画像処理装置において、
前記特定手段によって特定された領域内に含まれている特定の被写体の位置を認識し、その被写体位置に合わせて当該領域を移動する領域制御手段を更に備える、
ことを特徴とする。
（請求項１７）
請求項１７に記載の発明は、
画像処理装置における画像処理方法であって、
撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行うステップと、
前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定するステップと、
を含むことを特徴とする。
（請求項１８）
請求項１８に記載の発明は、
画像処理装置のコンピュータに対して、
撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行う機能と、
前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する機能と、
を実現させるためのプログラムである。
（請求項１９）
請求項１９に記載の発明は、
画像処理装置における画像処理方法であって、
撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得するステップと、
前記姿勢情報として前記第１の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定するステップと、
を含むことを特徴とする。
（請求項２０）
請求項２０に記載の発明は、
画像処理装置のコンピュータに対して、
撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得する機能と、
前記姿勢情報として前記第１の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定する機能と、
を実現させるためのプログラムである。

１０ 撮像装置
１１、２１、３１、４１ 制御部
１３、２３、３３、４３ 記憶部
１６、４６ 撮像部
１６Ｂ 魚眼レンズ
１７、４７ 姿勢検出部
２０ 本体装置
２６、３６ 表示部
３０ ＰＣ
４０ デジタルカメラ

Claims (20)

1. 撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行う処理手段と、
   前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する特定手段と、
   を備えることを特徴とする画像処理装置。
2. 前記撮影手段の姿勢を示す姿勢情報を検出する検出手段を更に備え、
   前記特定手段は、前記検出手段によって検出された姿勢情報に基づいて前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する、
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記撮像装置の撮影時の姿勢を示す姿勢情報が付加された撮影画像を取得する取得手段を備え、
   前記特定手段は、前記取得手段によって取得された撮影画像に付加されている姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する、
   ことを特徴とする請求項１に記載の画像処理装置。
4. 前記特定手段は、前記姿勢情報が、前記撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内の姿勢の第１の姿勢であると判断した場合、前記第１の領域を前記所定の処理の対象として特定する、
   ことを特徴とする請求項１乃至３の何れかに記載の画像処理装置。
5. 前記特定手段は、前記姿勢情報として前記第１の姿勢が判断された状態において更に、その向きに応じて異なる形状の前記第１の領域を前記所定の処理の対象として特定する、
   ことを特徴とする請求項４に記載の画像処理装置。
6. 前記特定手段は、前記姿勢情報として前記第１の姿勢が判断された状態において更に、その向きに応じて異なる形状の前記第１の領域を前記所定の処理の対象として特定、又は前記第２の領域を前記所定の処理の対象として特定する、
   ことを特徴とする請求項４に記載の画像処理装置。
7. 前記特定手段は、前記姿勢情報が、前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内の姿勢である第２の姿勢と判断した場合に、前記第２の領域を前記所定の処理の対象として特定する、
   ことを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。
8. 撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得する姿勢情報取得手段と、
   前記姿勢情報取得手段によって、前記姿勢情報として前記第１の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報取得手段によって前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定する特定手段と、
   を備えることを特徴とする画像処理装置。
9. 前記取得手段によって取得された撮影画像を表示する表示手段と、
   前記特定手段によって特定された領域を前記表示手段に識別表示する表示制御手段と、
   を更に備る、
   ことを特徴とする請求項１乃至８の何れか１項に記載の画像処理装置。
10. 前記処理手段は、前記特定手段によって前記第１の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の中からその第１の領域内の画像記録保存する処理を行い、前記第２の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の前記第２の領域を記録保存する処理を行う、
    ことを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。
11. 前記処理手段は、前記特定手段によって前記第１の領域が処理対象として特定された場合に、前記取得手段によって取得された撮影画像の中からその第１の領域内の画像を切り出す処理を行う、
    ことを特徴とする請求項１乃至１０の何れか１項に記載の画像処理装置。
12. 前記処理手段は、前記特定手段によって所定の処理対象として特定された領域内の画像の歪を補正する処理を行う、
    ことを特徴とする請求項１乃至１１の何れか１項に記載の画像処理装置。
13. 前記処理手段は、前記特定手段によって特定された領域内の画像をパノラマ展開する処理を前記所定の処理として行う、
    ことを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。
14. 前記処理手段は、前記特定手段によって特定された領域内の画像を出力する処理を前記所定の処理として行う、
    ことを特徴とする請求項１乃至１３の何れか１項に記載の画像処理装置。
15. 前記特定手段は、前記第１の領域及び前記第２の領域の何れか一方が前記所定の処理の対象としてユーザ操作によって選択された場合に、その選択された領域が前記姿勢にとって不相応な領域ではないことを条件にその領域を当該姿勢の処理対象として特定する、
    ことを特徴とする請求項１乃至１４の何れか１項に記載の画像処理装置。
16. 前記特定手段によって特定された領域内に含まれている特定の被写体の位置を認識し、その被写体位置に合わせて当該領域を移動する領域制御手段を更に備える、
    ことを特徴とする請求項１乃至１５の何れか１項に記載の画像処理装置。
17. 画像処理装置における画像処理方法であって、
    撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行うステップと、
    前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定するステップと、
    を含むことを特徴とする画像処理方法。
18. 画像処理装置のコンピュータに対して、
    撮影手段によって取得された撮影画像のうち、その撮影画像の周囲に沿った縁部分ではない領域を第１の領域、前記縁部分を含む領域を第２の領域として前記第１の領域及び第２の領域の何れか一方に対して所定の処理を行う機能と、
    前記撮影手段の前記撮影画像を取得する際の姿勢情報に基づいて、前記第１の領域を前記所定の処理の対象とするか、前記第２の領域を前記所定の処理の対象とするかを特定する機能と、
    を実現させるためのプログラム。
19. 画像処理装置における画像処理方法であって、
    撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得するステップと、
    前記姿勢情報として前記第１の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定するステップと、
    を含むことを特徴とする画像処理方法。
20. 画像処理装置のコンピュータに対して、
    撮影手段の光軸方向と重力方向とが垂直に対して許容角度範囲内である第１の姿勢、又は前記撮影手段の光軸方向と重力方向とが平行に対して許容角度範囲内である第２の姿勢を示す姿勢情報を取得する機能と、
    前記姿勢情報として前記第1の姿勢を取得した場合は前記撮影画像のうち第１の領域を所定の処理の対象と特定し、また前記姿勢情報として前記第２の姿勢を取得した場合は前記撮影画像のうち前記第１の領域とは異なる第２の領域を前記所定の処理の対象と特定する機能と、
    を実現させるためのプログラム。

Images