JP2014120814A - 撮像装置、情報処理装置、情報処理方法、プログラムならびに記憶媒体 - Google Patents

Abstract

【課題】 撮像装置の撮影条件を変えて複数撮影した撮像画像を、撮像装置の小さなディスプレイで確認する場合でも、きれいに写したい部分をきれいに撮影できているかどうかを容易に把握することを可能にする。
【解決手段】
本発明は、被写体を複数スチール撮影する複数撮影する撮像装置であって、複数撮影された撮像画像を一時的に記憶し、一時記憶された撮像画像からユーザの希望撮像画像を判断させるための比較ポイント画像を抽出する。抽出された比較ポイント画像を拡大して並べて表示させ、複数の撮像画像の内、ユーザからの選択を受け付けた撮像画像のみを記憶装置に記憶する。
【選択図】図１

Description

本発明は、デジタルカメラに代表される撮像装置で撮影後、複数の似た画像を判断する撮像装置、情報処理装置、情報処理方法、プログラムならびに記憶媒体に関する。

最近のデジタルカメラに代表される撮像装置は連続撮影が可能であり、また複数枚の画像を撮像装置に付随するディスプレイ上に表示して、それぞれを確認することができる。

特許文献１では、免許証などの顔画像付き証明用媒体に印刷する顔画像を撮影する画像撮影システムにおいて、被撮影者の顔画像を撮影した際、証明用媒体に印刷を行なう前の事前確認として被撮影者自信が顔画像の良否、選択を行なうために、撮影装置とは別に設けられた複数の確認装置で行なうシステムが開示されている。

特開２００５−１８４１２９

しかし、特許文献１では、免許証などの顔画像を撮影する撮像装置において、複数撮影された撮像画像を並べて表示しているだけである。顔画像のように、目を閉じているか開いているかを判断する程度であれば、特許文献１の構成でも良いが、露出やシャッタースピードなどを変えて複数撮影した画像を撮像装置に付随するディスプレイで確認する場合などは、撮像画像を並べただけでは、詳細な違い（ピントやぼけ）は把握できない。

本発明は、上記のような課題を解決するために、撮像装置の撮影条件を変えて複数撮影した撮像画像の比較ポイントを検索し、比較ポイントを拡大して表示することにより、撮像装置の小さなディスプレイであっても、きれいに写したい部分をきれいに撮影できている画像を選択することができることを目的としている。

本発明は、上記の課題を解決するために 被写体を複数スチール撮影する複数撮影手段を有する撮像装置であって、前記複数撮影手段により撮影された複数の撮像画像を記憶する撮像画像一時記憶手段と、前記撮像画像一時記憶手段により記憶された複数の撮像画像の中でユーザの希望撮像画像を判断させるための比較ポイント画像を抽出する比較ポイント抽出手段と、前記比較ポイント抽出手段で抽出された比較ポイント画像を拡大して表示する比較ポイント表示手段と、前記比較ポイント表示手段で表示された複数の撮像画像の内、ユーザからの選択を受け付けた撮像画像を記憶する撮像画像記憶手段とを有する。

本発明では、撮像装置の撮影条件を変えて複数撮影した撮像画像の比較ポイントを検索し、比較ポイントを拡大して表示することにより、撮像装置の小さなディスプレイであっても、きれいに写したい部分をきれいに撮影できている画像を選択することができるという効果を有する。

本願発明で示す情報処理装置１００及び撮像装置３００に適用可能なソフトウェア構成を示すブロック図である。 図１に示した情報処理装置１００に適用可能な情報処理装置のハードウェア構成を示すブロック図である。 図１に示した撮像装置３００に適用可能な撮像装置のハードウェア構成の一例を示すブロック図である。 本発明実施形態における撮像装置３００の制御処理手順の一例を示すフローチャートである。 本発明実施形態における撮像システムの制御処理手順の一例を示すシーケンスチャートである。 本発明実施形態における撮像装置３００の制御処理手順の一例を示すフローチャートである。 本発明実施形態における撮像装置３００が情報処理装置１００に送信する撮影条件および撮影位置情報、撮影時刻情報の一例を示した模式図である。 本発明実施形態における情報処理装置１００に記憶されている撮像画像の撮影位置情報、撮影時刻情報およびその時の撮影条件を示す模式図である。 本発明実施形態における情報処理装置１００において、撮像画像の構図により、撮影条件を検索する処理を説明するための模式図である。 本発明実施形態における情報処理装置１００が生成する撮影条件の一例を示す模式図である。 本発明実施形態における撮像装置３００で被写体をオートブラケット撮影した一連の撮像画像の例を示した模式図である。 本発明実施形態における撮像装置３００で被写体を撮影する際の、撮像装置３００の入出力部３１９が有するディスプレイが表示画面に撮像画像を表示した模式図である。 本発明実施形態における撮像装置３００において、撮像画像を比較するための表示イメージの一例を示した模式図である。 本発明実施形態における撮像装置３００において、撮像画像を比較するための表示イメージの一例を示した模式図である。

以下、図面を参照して、本発明の一実施形態を示す情報処理装置について説明する。

図１は、本願発明で示す情報処理装置１００及び撮像装置３００に適用可能なソフトウェア構成を示すブロック図である。

図１に記載のように、本実施例では、撮像装置３００と情報処理装置（サーバ）１００からなっている。なお、撮像装置３００と情報処理装置１００は、通常は無線ＬＡＮや３Ｇ回線などの無線回線により、通信の都度接続されるが、有線回線によって接続されていても良い。

図１の撮像装置３００は、複数撮影部１０１を有し、撮影条件（本実施例では、シャッタースピード、絞り値Ｆ、ＩＳＯ感度）を撮影条件変更部１０４により変更しながら連写する、いわゆるオートブラケット撮影の機能を有している。オートブラケット撮影の撮影条件は、情報処理装置１００から受信する撮影条件を考慮して、決定する。

なお、初期の撮影条件は、撮像装置３００に備えられている撮影条件設定部１０８により決定される撮影条件である。

また、撮像装置３００は、オートブラケット撮影された画像を一時的に記憶する撮像画像一時記憶部１０６を有し、一時記憶された画像からユーザが比較するためのポイントを抽出する抽出する比較ポイント抽出手段１０２により、複数の撮像画像の比較ポイント画像が抽出される。

また、撮像装置３００は、比較ポイント抽出手段１０２により抽出された比較ポイント画像を同じ倍率で拡大して表示させる比較ポイント表示部１０３を有しており、また、比較ポイントが複数ある撮像画像については、比較ポイント切替受付部１０５により比較ポイント画像を切り替えて表示することが可能である。

また、撮像装置３００は、比較ポイント抽出部１０２により比較ポイント画像を抽出するために、人の顔を検出する検出部１０６や、比較ポイントをユーザに入力させる比較ポイント入力部１０７などを有している。

また、図示していないが、撮像装置３００は、撮像装置３００の位置をＧＰＳや方位コンパスなどで特定する位置検出部も有している。

このようにして、ユーザに複数の撮像画像を表示して、ユーザに保存を希望する画像を選択させて、最終的に撮像画像記憶部１１０にユーザから選択された撮像画像を保存する。

一方、情報処理装置１００は、複数の撮像画像の撮影条件と位置情報、時間情報を記憶した撮影条件記憶部１１５を有している。

また、情報処理装置１００は、撮像装置３００から撮影条件と位置情報、時間情報を取得する撮影条件取得部１１１を有している。

また、情報処理装置１００は、撮影条件取得部１１１により取得した位置情報と時間情報とから、撮影位置や撮影時間が近い撮影条件を撮影条件記憶部１１５から検索抽出する撮影条件抽出部１１２を有する。

また、情報処理装置１００は、撮影条件取得部１１１により取得された撮影条件と、撮影条件抽出部１１２により抽出された撮影条件との間の値を撮影条件として生成する撮影条件補間部１１３を有し、撮影条件補間部１１３により生成された撮影条件および撮影条件抽出部１１２により抽出された撮影条件を撮像装置３００に送信する送信部１１４を有する。

以上の構成により、複数枚の撮影条件が異なる撮影することができ、ユーザが望むような撮像画像を撮影できる可能性が上がり、また、複数枚撮影した画像からユーザが必要な撮像画像を取捨選択することが容易になるという効果を有する。

以下、図２は、図１に示した情報処理装置１００に適用可能な情報処理装置のハードウェア構成を示すブロック図である。

図２において、２０１はＣＰＵで、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ２０２あるいは外部メモリ２１１には、ＣＰＵ２０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、各サーバ或いは各ＰＣの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。

２０３はＲＡＭで、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０２あるいは外部メモリ２１１からＲＡＭ２０３にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。

また、２０５は入力コントローラで、キーボード（ＫＢ）２０９や不図示のマウス等のポインティングデバイス等からの入力を制御する。２０６はビデオコントローラで、ＣＲＴディスプレイ（ＣＲＴ）２１０等の表示器への表示を制御する。なお、図２では、ＣＲＴ２１０と記載しているが、表示器はＣＲＴだけでなく、液晶ディスプレイ等の他の表示器であってもよい。これらは必要に応じて管理者が使用するものである。

２０７はメモリコントローラで、ブートプログラム，各種のアプリケーション，フォントデータ，ユーザファイル，編集ファイル，各種データ等を記憶する外部記憶装置（ハードディスク（ＨＤ））や、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等の外部メモリ２１１へのアクセスを制御する。

２０８は通信Ｉ／Ｆコントローラで、ネットワーク（例えば、図１に示したＬＡＮ４００）を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。

なお、ＣＰＵ２０１は、例えばＲＡＭ２０３内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ＣＲＴ２１０上での表示を可能としている。また、ＣＰＵ２０１は、ＣＲＴ２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。

本発明を実現するための後述する各種プログラムは、外部メモリ２１１に記録されており、必要に応じてＲＡＭ２０３にロードされることによりＣＰＵ２０１によって実行されるものである。さらに、上記プログラムの実行時に用いられる定義ファイル及び各種情報テーブル等も、外部メモリ２１１に格納されており、これらについての詳細な説明も後述する。

図３は、図１に示した撮像装置３００に適用可能な撮像装置のハードウェア構成の一例を示すブロック図である。

図３において、３００は本発明の撮像装置（例えば、デジタルカメラ，デジタルビデオカメラ等）であり、レンズ３１０，レンズ絞り制御部３１１，撮像素子３１２，ＲＯＭ，メモリ３１３，ＣＰＵ３１４，外部記憶メモリ３１５（フラッシュメモリ等），シャッタ速度制御部３１６を備えている。なお、撮像装置３００は、上記３１０〜３１５に示した以外に、焦点距離を合わせるレンズ駆動モータ、シャッタボタン、光学系部材等の多数の部品から構成されるものであるが図２では省略してある。

レンズ絞り制御部３１１は、ＣＰＵ３１４からの指示により、図示しないレンズの光学絞り機構を駆動させて、撮像素子で撮影する被写体の被写界深度や明るさを設定している。シャッタ速度制御部３１６は、ＣＰＵ３１４で指示されたシャッタ速度で、図示しないシャッタ速度調整機構により、撮像素子に入射する被写体光の露出時間を調整している。撮像素子３１２は、例えばＣＣＤ，ＣＯＭＳセンサ等であり、レンズ３１０を透過した光を感知して画像データに変換しメモリ３１３に転送する。

ＣＰＵ３１４は、メモリ３１３に記憶されたプログラムを実行して、メモリ３１３から画像データを読み込み、後述するフローチャートに示す処理を実行して、画像データを外部記憶メモリ３１５に保存する。

通信Ｉ／Ｆ３１７は、外部の情報処理装置１００や画像形成装置などと撮像装置３００を接続するインタフェースであり、現在はＵｎｉｖｅｒｓａｌ
Ｓｅｒｉａｌ Ｂｕｓ（ＵＳＢ）等による接続が主流である。

入出力制御部３１８は、ＣＰＵ３１４からユーザへの情報表示やユーザからのＣＰＵ３１４への情報入力を行うための入出力部３１９への情報入出力を制御する。

位置情報取得部３２０は、ＧＰＳ衛星からの情報により、現在地の位置を特定する情報を生成することが可能であり、その情報を情報処理装置１００に送信する。撮像装置３００から情報処理装置１００に送信された情報を元に、情報処理装置１００では、位置情報が一致もしくは近い撮像画像情報を検索する。なお、位置検知部３０２は必ずしもＧＰＳ衛星による情報でなくても良く、携帯電話基地局を利用した情報やＷｉＦｉ基地局を利用した情報などから撮像装置３００の現在地の位置を測位しても良い。また、撮影方向も検出する場合、位置情報取得部３２０は、ジャイロ機構や方位コンパスなどによって、撮像装置の向きを把握することも可能とする。

撮影時刻登録部３２１は、撮像装置が撮影した時刻を撮影データ内に登録させる登録部であり、撮影時刻情報を情報処理装置１００に送信する。撮像装置３００から情報処理装置１００に送信された撮影時刻情報を元に、情報処理装置１００では、撮影時刻情報が一致もしくは近い撮像画像情報を検索する。

以下、図４〜図１４を参照して、本発明の実施形態における制御動作について説明する。

図４は、本発明実施形態における撮像装置３００の制御処理手順の一例を示すフローチャートである。なお、このフローチャートの各処理は、図３に示した各処理部３１３〜３２１により実行される。すなわち、図３に示したＣＰＵ３１４がメモリ３１３内のプログラム領域に格納されるプログラムを実行することにより実現される。また、図中、Ｓ４０１〜Ｓ４０９は処理の各ステップを示す。

図４のフローチャートは、ユーザが撮像装置３００により撮影すると開始される。

まず、ステップＳ４０１において、撮像装置３００のＣＰＵ３１４は、ユーザにより被写体の複数の撮像画像が撮影する。ステップＳ４０１の詳細を図５を参照して説明する。

図５は、本発明実施形態における撮像システムの制御処理手順の一例を示すシーケンスチャートであり、このシーケンスチャートの各処理は、図２及び図３に示した各処理部２０１〜２０８、３１３〜３２１により実行される。すなわち、図２に示したＣＰＵ２０１や図３に示したＣＰＵ３１４が、それぞれのＲＯＭ２０３や外部メモリ２１１、もしくはメモリ３１３内のプログラム領域に格納されるプログラムを実行することにより実現される。また、図中、Ｓ５０１〜Ｓ５１０は処理の各ステップを示す。

図５のシーケンスチャートは、ユーザが撮像装置により被写体を撮影使用とすると開始される。

ステップＳ５０１において、撮像装置３００のＣＰＵ３１４は、ユーザの指示により被写体の撮影を行う。この撮影の際の撮影条件（シャッタースピードや絞り、ＩＳＯ感度など）は、撮影する被写体の状況から撮像装置３００が自動的に設定する値（いわゆるオート撮影の設定条件）でも良いし、ユーザが撮影前に設定した撮影条件でも良い。撮影された撮影条件は撮像画像にＥｘｉｆ情報などとして付加される。

ステップＳ５０１において、撮像装置３００のＣＰＵ３１４は、ユーザの指示により被写体の撮影を行うと、位置検出部３２０により現在の撮影位置情報を取得し、また、撮影時刻登録部３２１により撮影時刻情報を取得して、それぞれの情報を撮像画像にＥｘｉｆ情報として付加し、撮像画像を情報処理装置１００に送信する。情報処理装置１００に送信する情報の例として、図７を参照して説明する。

図７は、本発明実施形態における撮像装置３００が情報処理装置１００に送信する撮影条件および撮影位置情報、撮影時刻情報の一例を示した模式図である。

図７の７００には、撮像装置の撮影時の撮影条件が記載されており、送信された撮像画像の撮影条件として、７０１のように、ＩＳＯ感度が「２００」、シャッタースピードが「１／２５０ｓ」、絞り値Ｆが「２．８」であることを意味している。

図７の７１０には、撮像装置の撮影位置情報と撮影時刻情報とが記載されており、送信された撮像画像の撮影場所は７１１のように、「東経３６．５５８７０１」、「北緯１３９．８９８２８３」であり、撮影時刻は７１２のようにＧＰＳ時間で「６：００：００」であることを意味している。

なお、情報処理装置１００へ送信する情報は、前記撮影時の撮影条件、撮影位置情報と撮影時刻情報だけでも良く、撮像画像自体は送信しなくても良い。その場合は、以降のステップＳ５０３の処理を省略する。図５のシーケンスチャートの説明に戻る。

次に、ステップＳ５０２において、情報処理装置１００のＣＰＵ２０１は、撮像装置３００から受信した撮像画像および撮影条件、撮影位置情報、撮影時刻情報を取得し、情報処理装置１００で保持している撮像画像の中で、撮影位置情報や撮影時刻情報が一致もしくは近い撮像画像があるか検索する。図７および図８を参照してステップＳ５０２の処理を説明する。

図８は、本発明実施形態における情報処理装置１００に記憶されている撮像画像の撮影位置情報、撮影時刻情報およびその時の撮影条件を示す模式図である。

図８の８００、８１０、８２０はそれぞれ、撮像画像に紐付いて記憶されている撮影位置情報、撮影時刻情報およびその時の撮影条件であり、撮影位置情報が８０１欄、撮影時刻情報が８０２欄に、撮影条件が８０４欄に記載されている。これらのデータの内、撮影位置情報８０１欄や撮影時刻情報８０２欄が、撮像装置３００から送信された撮影位置情報（図７の場合は７１１）および撮影時刻情報（図７の場合は７１２）と一致もしくは近いデータを選択する。

図８のようなデータを情報処理装置１００が記憶している場合に、図７の７１０のような撮影位置情報や撮影時刻情報を撮像装置３００から取得した場合として、以降を考慮する。７１１の撮像位置情報「東経３６．５５８７０１」、「北緯１３９．８９８２８３」と近い撮影位置情報として、８００の「東経３６．５５８７０９」、「北緯１３９．８９８２８３」があり、また撮影時刻情報であるＧＰＳ時間７１２「０６：００：００」と近い撮影時刻情報である８００の「０５：５９：５４」があるので、７１０の撮影位置情報および撮影時刻情報での適する撮影条件の候補としては、８０４のＩＳＯ感度「１００」、シャッタースピード「１／６０ｓ」、絞り値Ｆが「５．６」であることが分かる。

なお、撮影時刻情報は、ある時間帯では共通とすることにより、撮影条件を検索する条件を緩和することができる。すなわち、日本時間で十分明るい時間帯であるＡＭ７時ぐらいからＰＭ４時ぐらいまでの時間は共通の時間帯とみなして検索することなどにより、特定の時間でなくても検索できる条件が緩和される。
図５のシーケンスチャートの説明に戻る。

次に、ステップＳ５０３において、情報処理装置１００のＣＰＵ２０１は、撮影画像の構図によって、さらに撮影条件を絞り込む。なお、撮影条件としてステップＳ５０２で検索した結果、１件しか候補が見つからなかった場合は、この処理は飛ばしても良い。ステップＳ５０３の処理を図９を参照して説明する。

図９は、本発明実施形態における情報処理装置１００において、撮像画像の構図により、撮影条件を検索する処理を説明するための模式図である。

図９の９００と９１０は、たとえば、図８の８０５の撮影位置情報と８０６の撮影時刻情報を有する保存撮像画像の２枚である写真番号Ａ１００と写真番号Ａ１０１の保存撮像画像であり、９２０は、図７の撮影位置情報および撮影時刻情報で撮影された撮像画像であるとする。なお、図面中の丸破線は各画像の一致した特徴点を抽出したものであり、画像データには含まれていない。

ステップＳ５０２において、図８の８０５と図７の７１１との関係、および図８の８０６と図７の７１２との関係から、写真番号Ａ１００およびＡ１０１の保存撮像画像が撮影位置情報や撮影時刻情報が近いと判断されているので、ステップＳ５０３では、８００の条件で撮影された保存撮像画像９００、９１０と、７１０の撮影条件で撮影した撮像画像９１０との構図を比較する。

構図の比較は、たとえば、特徴点を抽出し特徴点の位置がある程度一致している、もしくは特徴点間の距離が一定の割合であるなどにより判断する。なお、構図の比較に関しては他の画像マッチング方法でも良いのは言うまでもない。

構図の比較の結果、ステップＳ５０２で候補に挙がった保存撮像画像の中から、画像の一致率が高い画像を選択して、撮影条件抽出候補画像とする。

図９の場合、撮像画像の特徴点の位置（たとえば、９２０の破線の丸）と保存撮像画像の特徴点（たとえば、９００の破線の丸）の一致率が、写真番号Ａ１０１よりも写真番号Ａ１００の方が高い場合、撮影条件抽出候補画像としては、Ａ１０１ではなくＡ１００となる。図５のシーケンスチャートの説明に戻る。

ステップＳ５０３での撮像画像の構図、もしくはステップＳ５０２での撮影位置情報および撮影時刻情報などの一致から、参考になる保存撮像画像（撮影条件抽出候補画像）を抽出できた場合、情報処理装置１００のＣＰＵ２０１は、ステップＳ５０４の判断分岐において、ステップＳ５０５へと処理を移行する。一方、ステップＳ５０３での撮像画像の構図やステップＳ５０２での撮影位置情報および撮影時刻情報などが一致するもしくは近い保存撮像画像がないと判断された場合は、ステップＳ５０８に処理を移行し、引き続きユーザの指示により撮影を行う。

ステップＳ５０５へと処理が移行すると、情報処理装置１００のＣＰＵ２０１は、ステップＳ５０２で取得した撮影条件（パラメータ）とステップＳ５０２もしくはＳ５０３で選定した保存撮像画像の撮影条件を抽出する。ここで撮影条件とは、ＩＳＯ感度やシャッタースピード、絞り値Ｆなどである。

情報処理装置１００のＣＰＵ２０１は、この２つの撮影条件の値を抽出し、新たなシャッタースピード、絞り値Ｆ、ＩＳＯ感度などの撮影条件を生成し（ステップＳ５０６）、生成した複数の撮影条件を撮像装置３００に送信する（ステップＳ５０７）。

具体的な撮像条件の生成方法を図７、図８、図１０を参照して説明する。

図７の７００は、ステップＳ５０１でユーザが撮影した撮影条件の例である。また、図８の８０７に記載の撮影条件は情報処理装置１００が保持する保存撮像画像の中で、撮影状況がステップＳ５０１で撮影された状況と似ている保存撮像画像の撮影条件である。従って、ユーザが図８の８００の撮影条件の撮像画像（すなわち、図９の９００）のような写真を撮影したい場合は、撮影条件を８０７のような条件にすれば、ある程度は可能である。

しかし、当日の天気や素人が手で持つことによる手ぶれなどの影響も考慮すると、必ずしも８０７のような撮影条件が適切とは限らない。

そこで、ユーザが撮影時に設定したもしくはオート撮影により設定された撮影条件と、図８の８００のような情報処理装置１００に保存されている撮像画像の撮影条件の間の撮影条件を複数作成し、撮像装置に複数の撮像条件でオートブラケット機構での撮影を行わせる。

図１０は、本発明実施形態における情報処理装置１００が生成する撮影条件の一例を示す模式図である。

図１０の７００は、ステップＳ５０１で撮影された撮影条件（以後、仮撮影条件）であり、図７の７００と同じ値である。１０２０の範囲の撮影条件が撮像装置３００に送信され、該撮影条件でユーザにより撮影される。

１０００の欄は、露出値を仮撮影条件７００と同じ条件としてユーザに撮影させるために撮像装置に送信する撮影条件であり、絞り値Ｆとシャッタースピードをそれぞれ、保存撮像画像の撮影条件と仮撮影条件と組み合わせている撮影条件である。

１００１は保存撮像画像の撮影条件（以後、保存撮影条件）であり、保存撮像画像の撮影条件８０４と同じである。１００２は、露出値Ｅｖを７００の仮撮影条件と同じに保ったまま、シャッタースピードを１００１の保存撮影条件の値「１／６０ｓ」とし、絞り値Ｆを仮撮影条件７００の絞り値Ｆの値「２．８」とした場合の撮影条件である。露出を一定に保つため、ＩＳＯ感度は５０まで下げている。また、１００３は、露出Ｅｖを７００の仮撮影条件と同じに保ったまま、シャッタースピードを仮撮影条件７００の値「１／２５０ｓ」とし、絞り値Ｆを保存撮影条件１００１の絞り値Ｆの値「５．６」とした場合の撮影条件である。露出を一定に保つため、ＩＳＯ感度は８００まで上げている。

また、１０１０の欄は、シャッタースピードを仮撮影条件７００と同じ条件としてユーザに撮影させるために撮像装置に送信する撮影条件であり、絞り値Ｆと露出値Ｅｖをそれぞれ、保存撮影条件と仮撮影条件とを組み合わせている撮影条件である。

１０１１は保存撮影条件１００１に、シャッタースピードだけを仮撮影条件７００の値「１／２５０ｓ」に変更した撮影条件である。また、１０１２は、シャッタースピードを仮撮影条件７００の値「１／２５０ｓ」とし、絞り値Ｆが仮撮影条件７００の値「２．８」、露出値Ｅｖが保存撮影条件１００１と同じになるようにＩＳＯ感度を設定した撮影条件である。また、１０１３は、シャッタースピードを仮撮影条件７００の値「１／２５０ｓ」とし、絞り値Ｆが保存撮影条件１００１の値「５．６」、露出値Ｅｖが仮撮影条件７００と同じになるようにＩＳＯ感度を設定した撮影条件である。

なお、本実施例では、仮撮影条件と保存撮影条件のシャッタースピードや絞り値、露出値Ｅｖを一方の条件で揃えて撮影条件としているが、仮撮影条件と保存撮影条件との間の値を使って撮影条件としても良い。たとえば、仮撮影条件のシャッタースピードが「１／２５０ｓ」であり、保存撮影条件のそれが「１／６０ｓ」であった場合、２つのシャッタースピードの間である「１／１２５ｓ」で撮影条件を作成しても良い。その場合、露出値Ｅｖか絞り値Ｆを仮撮影条件の値か保存撮影条件の値に揃えても良いし、シャッタースピードと同様に間の値を取って撮影条件としても良い。

以上のように、サーバ上にある保存撮像画像の撮影条件を流用することにより、撮影者の撮影条件の幅を広げることが容易になり、撮影する状況が多少異なっていても、サーバ上にある保存撮像画像の撮影条件を流用して、適切な撮影が可能となる。
図５のシーケンスチャートの説明に戻る。

情報処理装置１００のＣＰＵ２０１は、ステップＳ５０６で前述のように生成した複数の撮影条件を、ステップＳ５０７において、撮像装置３００に送信する。

次に、ステップＳ５０８において、撮像装置３００のＣＰＵ３１４は、情報処理装置１００から受信した複数の撮影条件を反映して、オートブラケット機構による撮影を行わせるようにユーザに指示し、ユーザはオートブラケット撮影を行う。オートブラケット撮影された画像の一例として、図１１を参照して説明する。

図１１は、本発明実施形態における撮像装置３００で被写体をオートブラケット撮影した一連の撮像画像の例を示した模式図である。

図１１の１１０１から１１０３がそれぞれ、異なる撮影条件で撮影された撮像画像の例である。

この図のような複数の似たような撮像画像を、撮像装置の入出力部３１９が有する小さなディスプレイに表示する画像だけで、撮像画像の善し悪し（ピントが合っているか、もしくはぼけが反映されているかなど）をユーザに判断させるのは困難である。そのため、次から説明する比較画像抽出処理、表示処理により、ユーザが判断しやすいように制御する。

以上の処理により、図５の複数の撮影を行うシーケンスチャートの処理を終える。
図４のフローチャートの説明に戻る。

図４のステップＳ４０１において、オートブラケット撮影による複数の撮像画像を得ると、撮像装置３００のＣＰＵ３１４は、次のステップＳ４０２において、ユーザに画像を比較・選択させるための画像の抽出をおこなう。ステップＳ４０２の処理の詳細を図６のフローチャートを参照して説明する。

図６は、本発明実施形態における撮像装置３００の制御処理手順の一例を示すフローチャートである。なお、このフローチャートの各処理は、図３に示した各処理部３１３〜３２１により実行される。すなわち、図３に示したＣＰＵ３１４がメモリ３１３内のプログラム領域に格納されるプログラムを実行することにより実現される。また、図中、Ｓ６０１〜Ｓ６０８は処理の各ステップを示す。

図６のフローチャートは、図４のステップＳ４０１のオートブラケット撮影が行われた後で開始される処理の流れで、このフローチャートにより、ユーザが撮影した複数の画像を比較する対象となる部分の画像を比較ポイント画像として抽出する。

まず、ステップＳ６０１において、撮像装置３００のＣＰＵ３１４は、撮像画像内に人の顔があるかを判断する。人の顔を検出する手法は記憶している画像とのパターン認識でも良いし、目や鼻の特徴を抽出する方法でも良く、他の顔検出の方法でも構わない。

撮像画像内に人の顔が検出されると、ステップＳ６０２に処理を移行し、人の顔が検出されないとステップＳ６０３へと処理を移行する。

ステップＳ６０２へと処理が移行すると、撮像装置３００のＣＰＵ３１４は、人の顔の周辺の画像を比較ポイントとして抽出し、比較ポイントとして追加し、メモリ３１３に記憶する。人の顔を検出する数は１つでも良いし複数でも良い。複数の場合は１つ１つを比較ポイントとして追加しても良いし、複数の顔検出画像をまとめて１つの比較ポイントとしても良い。

次に、ステップＳ６０３において、撮像装置３００のＣＰＵ３１４は、撮像画像のピントが合う位置を比較ポイントとするための判断をする。ピントが合う位置があれば、ステップＳ６０４へと処理を移行し、ピントが合う位置がなければ、ステップＳ６０５へと処理を移行する。なお、ここで言うピントが合う位置とは、オートフォーカス機能における焦点位置の設定場所であり、いわゆるフォーカスポイントに該当する。

ステップＳ６０４へと処理が移行すると、撮像装置３００のＣＰＵ３１４は、撮像画像のピントが合う位置の周辺の画像を比較ポイントとして抽出し、比較ポイント画像として追加する。ピントが合う位置の周辺を比較ポイント画像として登録する処理を図１２を参照して説明する。

図１２は、本発明実施形態における撮像装置３００で被写体を撮影する際の、撮像装置３００の入出力部３１９が有するディスプレイが表示画面に撮像画像を表示した模式図であり、１２００が撮像装置３００の外観を示す。

１２０１は撮像装置３００が有するディスプレイの画面であり、撮像画像のピントがあっている点が十字の１２０２と１２０４の位置である。

ピントが合っている点１２０２の周辺画像を比較ポイント画像として登録するために、撮像装置３００のＣＰＵ３１４は、ピントが合っている点１２０２を比較ポイントとして追加し、メモリ３１３に記憶する。

図１２では、ピントが合っている点として、他に１２０４がある。そのためピントが合っている点として、１２０４も比較ポイントとして追加し、メモリ３１３に記憶する。図６のフローチャートの説明に戻る。

次に、図６のステップＳ６０５において、撮像装置３００のＣＰＵ３１４は、ユーザが比較したいポイントを選択させるための画面を、撮像装置３００の入出力部３１９が有するディスプレイに表示し、ユーザに比較ポイントの選択を促す。

具体的には、図１２のような画像に１２０４のようなカーソルを表示させ、カーソルボタン１２０６によりカーソルを移動させて、図示しない決定ボタンにより、ユーザが詳細に確認したい比較領域を指定させる。

この処理を行うことにより、たとえば、被写体とバックの東京タワー両方ともにピントを合わせて撮影したい場合、通常は手前の被写体にピントが合うため、ステップＳ６０３では、手前の被写体のみが比較ポイントとして追加されてしまう。したがって、バックの東京タワーは比較ポイントには追加されないため、あらかじめユーザが撮影する画像の指定する位置をディスプレイ上で指定し、その位置は比較ポイントとすることを可能にしている。

次に、ステップＳ６０６において、撮像装置３００のＣＰＵ３１４は、事前にユーザの指定した比較ポイントがあるかの確認をする。ユーザの指定した比較ポイントがある場合は、ステップＳ６０７の処理へと移行し、ユーザの指定した比較ポイントが無い場合は、ステップＳ６０８へと処理を進める。

ステップＳ６０７において、撮像装置３００のＣＰＵ３１４は、事前にユーザにより指定された位置を比較ポイントとして追加し、メモリ３１３に記憶する。

続いて、ステップＳ６０８において、撮像装置３００のＣＰＵ３１４は、ステップＳ６０２，ステップＳ６０４，ステップＳ６０７で取得してメモリ３１３に記憶した比較ポイントを、それぞれオートブラケット撮影された一連の画像に対して抽出し、それぞれの比較ポイントの周辺画像をそれぞれの比較ポイント画像として抽出する。比較ポイント画像の抽出方法を図１２を参照して説明する。

図１２の１２０３は、撮像画像のオートフォーカス機能におけるフォーカスポイントが１２０２である場合の周辺画像を指定する範囲の例である。図１２が図１１のように３枚のオートブラケット撮影により得られた撮像画像の内の１枚である場合は、１２０３の範囲の画像を１１０１から１１０３までの３枚について抽出する。抽出した結果の例は、図１３の１３０１から１３０３に該当する。詳細は後述する。

同様に１２０５は、撮像画像のオートフォーカス機能におけるフォーカスポイントが１２０４である場合の周辺画像を指定する範囲の例である。図１２が図１１のように３枚のオートブラケット撮影により得られた撮像画像の内の１枚である場合は、１２０５の範囲の画像を１１０１から１１０３までの３枚について抽出する。抽出した結果の例は、図１４の１４０１から１４０３に該当する。詳細は後述する。なお、本実施例では抽出する画像の外形は、図１３のように横３列縦１行の３×１で表示させる場合を考え、縦に長い長方形であるが、図１３に該当する画面が２×２の４分割で表示する場合は、横長の画像でも良い。また、縦１列横３列に分けた１×３で表示する場合は、より横長の画像として表示しても良い。これらの設定は図示しないユーザ設定により変更可能とする。

以上の処理により、図６の処理を終えて、図４のフローチャートの説明に戻る。

図４のステップＳ４０２において、複数の比較ポイント画像を抽出すると、ステップＳ４０３において、撮像装置３００のＣＰＵ３１４は、撮像装置３００の入出力部３１９のディスプレイに比較ポイント画像を表示する。比較ポイント画像を撮像装置３００の入出力部３１９のディスプレイに表示した例を、図１３を参照して説明する。

図１３は、本発明実施形態における撮像装置３００において、撮像画像を比較するための表示イメージの一例を示した模式図であり、１３００が撮像装置３００の外観を示す。

図１３の１３０１から１３０３が、オートブラケット撮影された３枚の比較ポイント画像の例であり、ステップＳ６０８で抽出した比較ポイント画像である。図１３は、図１２において、１２０３の領域が選択された場合の例である。

１３０１から１３０３に表示されているように、元の図１２の画像よりも比較ポイント周辺を拡大して表示している。この拡大された画像により、オートブラケット撮影の中で、ユーザが本当に保存したい撮像画像を選択することができるようになる。

図１３の１３００の入出力部３１９のディスプレイに表示されている１３０１から１３０３の画像の中に表示されている各種ボタンが押下されることにより、ユーザが保存したい撮像画像を選択もしくは保留する。図４のフローチャートの説明に戻る。

図４のステップＳ４０３において、比較ポイント画像を表示すると、次にステップＳ４０４へと処理を移行する。ステップＳ４０４では、撮像装置３００のＣＰＵ３１４は、図１３の１３００の入出力部３１９のディスプレイに表示される各種ボタンの入力状況により、次の処理を決定する。

ステップＳ４０４において、全体ボタン１３０４が押下されると、撮像装置３００のＣＰＵ３１４は、全体ボタンの押下された画像の全体像、すなわち、図１２のような画面を表示する処理に遷移する（ステップＳ４０７）。このボタンを押下することにより、ユーザは撮像画面全体のイメージから保存したい撮像画像を選択することができる。

次に、ステップＳ４０８において、撮像装置３００のＣＰＵ３１４は、全体ボタンを部品表示ボタンに切り替えて、ステップＳ４０４へと遷移し、撮像装置３００のＣＰＵ３１４は、再びボタンの入力待ちとなる。

この状態では、図１２の様なイメージの撮像画像が表示されており、表示されているボタンとしては、図示しない部品表示ボタン、選択ボタン１３０５、次ポイントボタン１３０６が表示されており、この段階で部品表示ボタンが押下されると、ステップＳ４０７において、撮像装置３００のＣＰＵ３１４は、ステップＳ４０３で表示した画面（図１３）を表示し、部品表示ボタンを全体ボタンに変えて、ステップＳ４０４へと処理を戻す。

一方、ステップＳ４０４において、次ポイントボタン１３０６が押下されると、撮像装置３００のＣＰＵ３１４は、ステップＳ４０５へと遷移し、現在表示されている比較ポイント画像とは異なる比較ポイント画像を表示する処理を行う。ステップＳ４０５の処理を図１４を参照して説明する。

図１４は、本発明実施形態における撮像装置３００において、撮像画像を比較するための表示イメージの一例を示した模式図であり、１４００が撮像装置３００の外観を示す。

図１４の１４０１から１４０３が、オートブラケット撮影された３枚の比較ポイント画像の例であり、ステップＳ６０８で抽出した比較ポイント画像である。図１４は、図１２において、１２０５の領域が選択された場合の例である。

１４０１から１４０３に表示されているように、図１３の比較ポイント画像とは異なる位置の比較ポイント画像を表示することにより、オートブラケット撮影の中で、ユーザが本当に撮影したい被写体の画像を次々と表示することにより、保存したい撮像画像を確認することが可能となる。

また、図１４で表示されている１４０１から１４０３の画像について、一つの画像を拡大縮小すると、各々の画像の倍率も共通して拡大率を変えて表示させる様にしても良い。これにより、撮像装置３００の入出力部３１９が有する小さなディスプレイに表示する場合でも、各画像を共通の倍率で拡大でき、各画像の詳細な違いを把握しやすくなる。

ステップＳ４０５の処理が終了すると、ステップＳ４０４へと処理を戻す。

また、ステップＳ４０４において、選択ボタン１３０５が押下されると、ステップＳ４０６の処理へと移行し、撮像装置３００のＣＰＵ３１４は、選択ボタンの押下された撮像画像をその撮影条件と共に外部メモリに保存し、他の撮像画像を削除する。

その後、ステップＳ４０９において、撮像装置３００のＣＰＵ３１４は、選択ボタンが押下された撮像画像をその撮影条件と共に情報処理装置１００に送信し、送信された撮像画像とその撮影条件は、今後撮影する際の参考情報として情報処理装置１００に記憶され、以後、ステップＳ５０４などのデータ選定で使われる。
以上で、図４のフローチャートの処理を終える。

なお、上記ボタンはディスプレイ上に配置されていても良いし、ハードウェア的なボタン１３０７やカーソルボタン１３０８により代用されても良い。

以上の構成により、撮像装置３００での撮影条件と異なる撮像条件を情報処理装置１００から取得し、撮影条件の違いを補間する複数の撮影条件で撮影することにより、ユーザが望むような撮像画像を撮影することができ、また、複数枚撮影した、似たような画像も比較するポイントを拡大して表示することにより、取捨選択が容易になるという効果を有する。

なお、上述した各種データの構成及びその内容はこれに限定されるものではなく、用途や目的に応じて、様々な構成や内容で構成されることは言うまでもない。

以上、一実施形態について示したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記録媒体等としての実施態様をとることが可能であり、具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。

なお、特に図示しないが、記録媒体に記憶されるプログラム群を管理する情報、例えばバージョン情報，作成者等も記憶され、かつ、プログラム読み出し側のＯＳ等に依存する情報、例えばプログラムを識別表示するアイコン等も記憶される場合もある。

さらに、各種プログラムに従属するデータも上記ディレクトリに管理されている。また、インストールするプログラムやデータが圧縮されている場合に、解凍するプログラム等も記憶される場合もある。

以上のように、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムコードを読出し実行することによっても、本発明の目的が達成されることは言うまでもない。

この場合、記録媒体から読み出されたプログラムコード自体が本発明の新規な機能を実現することになり、そのプログラムコードを記憶した記録媒体は本発明を構成することになる。

プログラムコードを供給するための記録媒体としては、例えば、フレキシブルディスク，ハードディスク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ−Ｒ，ＤＶＤ−ＲＯＭ，磁気テープ，不揮発性のメモリカード，ＲＯＭ，ＥＥＰＲＯＭ，シリコンディスク等を用いることができる。

また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

さらに、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

また、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器からなる装置に適用してもよい。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。

さらに、本発明を達成するためのソフトウェアによって表されるプログラムをネットワーク上のサーバ，データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。

なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。

１００ 情報処理装置
１０１ 複数撮影部
１０２ 比較ポイント抽出部
１０３ 比較ポイント表示部
１０４ 撮影条件変更部
１０５ 比較ポイント切替受付部
１１６ 検出部
１０７ 比較ポイント入力部
１０８ 撮像条件設定部
１０９ 撮像画像一時記憶部
１１０ 撮像画像記憶部
１１１ 撮像条件取得部
１１２ 撮像条件抽出部
１１３ 撮像条件補間部
１１４ 送信部
１１５ 撮像条件記憶部
３００ 撮像装置

Claims (10)

1. 被写体を複数スチール撮影する複数撮影手段を有する撮像装置であって、
   前記複数撮影手段により撮影された複数の撮像画像を記憶する撮像画像一時記憶手段と、
   前記撮像画像一時記憶手段により記憶された複数の撮像画像の中でユーザの希望撮像画像を判断させるための比較ポイント画像を抽出する比較ポイント抽出手段と、
   前記比較ポイント抽出手段で抽出された比較ポイント画像を拡大して表示する比較ポイント表示手段と、
   前記比較ポイント表示手段で表示された複数の撮像画像の内、ユーザからの選択を受け付けた撮像画像を記憶する撮像画像記憶手段と
   を有することを特徴とする撮像装置。
2. 前記複数撮影手段は、被写体を撮影条件を変えて連続撮影することが可能な撮影条件変更手段を有し、
   前記比較ポイント抽出手段は、前記複数の撮像画像毎に複数の比較ポイント画像を抽出し、
   前記比較ポイント表示手段は、前記複数の撮像画像の１箇所の比較ポイント画像について、同じサイズで該複数の撮像画像を拡大して表示することを特徴とする請求項１に記載の撮像装置。
3. 前記比較ポイント表示手段は、前記比較ポイント抽出手段により抽出された複数の比較ポイント画像の表示を切り替える入力を受け付ける比較ポイント切替受付手段を有し、
   前記比較ポイント切替受付手段により、比較ポイント画像の表示切り替え入力を受け付けると、前記比較ポイント表示手段は、次の比較ポイント画像を表示することを特徴とする請求項２に記載の撮像装置。
4. 前記撮像画像の人の顔を検出する検出手段と、
   前記比較ポイント抽出手段は、前記検出手段で検出された人の顔の周辺画像を比較ポイント画像として抽出することを特徴とする請求項１乃至３に記載の撮像装置。
5. 前記撮像画像は、撮像画像上の焦点が合う座標情報を有しており、
   前記比較ポイント抽出手段は、前記撮像画像が有する焦点が合う座標情報の座標の周辺画像を比較ポイント画像として抽出することを特徴とする請求項１乃至４に記載の撮像装置。
6. 前記撮像画像の比較ポイント画像を抽出すべく、比較ポイント入力画面から比較ポイントを指定させる比較ポイント入力手段と、
   前記比較ポイント抽出手段は、前記入力手段により入力された比較ポイントの周辺画像を比較ポイント画像として抽出することを特徴とする請求項１乃至５に記載の撮像装置。
7. 被写体を複数スチール撮影する複数撮影手段を有する撮像装置から前記複数撮影手段により撮影された複数の撮像画像を受信する受信手段を有する情報処理装置であって、
   前記複数の撮像画像を記憶する撮像画像一時記憶手段と、
   前記撮像画像一時記憶手段により記憶された複数の撮像画像の中でユーザの希望撮像画像を判断させるための比較ポイント画像を抽出する比較ポイント抽出手段と、
   前記比較ポイント抽出手段で抽出された比較ポイント画像を拡大して表示する比較ポイント表示手段と、
   前記比較ポイント表示手段で表示された複数の撮像画像の内、ユーザからの選択を受け付けた撮像画像を記憶する撮像画像記憶手段と
   を有することを特徴とする情報処理装置。
8. 被写体を複数スチール撮影する複数撮影手段を有する撮像装置から前記複数撮影手段により撮影された複数の撮像画像を受信する受信手段を有する情報処理装置における情報処理方法であって、
   前記複数の撮像画像を撮像画像一時記憶手段に登録する撮像画像一時登録ステップと、
   前記撮像画像一時登録ステップにより記憶された複数の撮像画像の中でユーザの希望撮像画像を判断させるための比較ポイント画像を抽出する比較ポイント抽出ステップと、
   前記比較ポイント抽出ステップで抽出された比較ポイント画像を拡大して表示する比較ポイント表示ステップと、
   前記比較ポイント表示ステップで表示された複数の撮像画像の内、ユーザからの選択を受け付けた撮像画像を撮像画像記憶手段に登録する撮像画像登録ステップと
   を有することを特徴とする情報処理方法。
9. 請求項８に記載された情報処理方法をコンピュータが実行するためのプログラム。
10. 請求項８に記載された情報処理方法をコンピュータが実行するためのプログラムをコンピュータが読み取り可能に記憶した記録媒体

Images