JP5655821B2 - カメラ、カメラ制御プログラム及び撮影方法 - Google Patents

Description

本発明は、撮影条件を自動的に設定して撮影を行うカメラ、及びこのカメラに用いられる撮影制御プログラム及び撮影方法に関する。

従来より、撮影条件を自動的に設定して撮影を行うカメラが知られている。このカメラは、撮影時に、撮影フレーム内の画像の人物の顔を検出し、検出した顔の特徴データを抽出する。そして、この抽出した顔の特徴データに基づき、当該顔の人物が予め登録されているか否かを判定する。登録されている場合には、当該被写体人物に対応して記憶されているパラメータを撮影条件として自動設定し撮影を実行することにより、特定された被写体人物に応じた品質の撮影を行なうものである（特許文献１参照）。

特開２００７−２７４２６４号公報

しかしながら、かかる従来技術にあっては、撮影フレーム内に存在する人物の顔を検出し、しかる後に検出した顔の特徴を有する人物が予め登録されているか否かを判定する。したがって、撮影フレーム内から検出された顔が予め登録されていない場合には、撮影条件が自動設定されないことから、撮影条件が自動設定される可能性が低いという問題がある。

また、人物の顔の検出結果に基づき撮影条件の自動設定を行うことから、名所などの撮影場所にある有名な建造物や風景など、人物以外を主要被写体としては、撮影条件を自動することができない。

本発明は、かかる従来の課題に鑑みなされたものであり、撮影条件が自動設定される確率を高め、かつ人物以外を主要被写体として撮影条件を自動設定することのできるカメラ、カメラ制御プログラム及び撮影方法を提供することを目的とする。

前記課題を解決するため本発明は、複数の異なる位置の各々に対応させて被写体の特徴を示す特徴情報を記憶する手段であって、位置と特徴情報とを関連付けた被写体情報を複数記憶する記憶手段と、撮影して画像を取得するとともに、この撮影時のカメラの位置に対応する特徴情報を前記記憶手段より取得する取得手段と、前記取得手段により取得した特徴情報に対応する被写体が前記撮影した画像内に存在するか否かを判定する判定手段と、前記判定手段により取得した特徴情報に対応する被写体が前記画像内に存在すると判定された場合には、この被写体がメインの撮影対象となるように撮影条件を変化させるように、前記判定手段の判定結果に応じて撮影処理の内容を変化させる撮影制御手段と、撮影して画像を取得したときに、この撮影された画像内でメインとなる被写体の特徴情報を生成し、この生成された特徴情報と当該画像の撮影時の撮影位置とを関連付けた被写体情報を、前記記憶手段に追加して記憶する記憶制御手段とを備え、前記取得手段は、カメラの位置又は方向が変化している間、逐次撮影して画像を取得するとともに、各撮影時のカメラの位置に対応する特徴情報を前記記憶手段より逐次取得し、前記判定手段は、カメラの位置又は方向の変化に応じて逐次変化する特徴情報に対応する被写体が、カメラの位置又は方向の変化に応じて逐次変化する画像内に存在するか否かを逐次判定し、前記撮影制御手段は、前記判定手段による判定結果に応じてメインの撮影対象となる被写体を逐次変化させることを特徴とするカメラ、撮影方法、プログラムとした。

本発明によれば、予め記憶されている特徴情報に対応する被写体が存在するか否かを判定し、存在する場合には当該被写体を主要被写体として撮影条件を設定することから、従来よりも、撮影条件が自動設定される確率を高めることができる。また、人物以外を主要被写体として撮影条件を自動設定することができ、これにより、名所などの撮影場所にある有名な建造物や風景なども適切な撮影条件で撮影を行うことが可能となる。

本発明の第１の実施の形態に係るシステムを示すシステム構成図である。 管理サーバの構成を示すブロック図である。 被写体データ管理テーブルを示すメモリ構成図である。 第１の実施の形態におけるデジタルカメラのブロック図である。 （ａ）はデジタルカメラ側の処理手順を示すフローチャートであり、（ｂ）は管理サーバ側の処理手順を示すフローチャートである。 本発明の第２の実施の形態に係るデジタルカメラのブロック図である。 同デジタルカメラの処理手順を示すフローチャートである。

以下、本発明の一実施の形態を図に従って説明する。
（第１の実施の形態）
図１は、本発明の第１の実施の形態に係る被写体情報送受信システムの構成を示す図である。図において、端末装置として機能するデジタルカメラ１は、撮影機能のみならず情報送受信機能を備える。無線基地局２は、デジタルカメラ１を当該デジタルカメラ１が加入する通信サービス会社（インターネットプロバイダを含む）４に接続する。

通信サービス会社４は、通信サービスに必要とする通信回路処理部４１の他、後述のＷＷＷ（インターネット）５に接続するためのシステム（Ｗｅｂサーバ４３）、メールシステム（メールサーバ４２）を備えている。また、無線基地局２をＡＰ（アクセス・ポイント）として、デジタルカメラ１をＷＷＷ５に接続させるための機能も備えている。被写体情報提供サービス会社６は、ＷＷＷ５に接続するためのシステム（Ｗｅｂサーバ６１）、及び管理サーバ６３を備えている。

図２は、前記管理サーバ６３の詳細を示すブロック図であり、前記Ｗｅｂサーバ６１は、ハブ６４を介して管理サーバ６３に接続されている。管理サーバ６３は、入力操作部（キーボード、マウス等）６３１、制御部（メインフレーム）６３２、システムプログラム記憶部６３３、地図データ記憶部６３４、後述する被写体データ管理テーブル６２、表示部６３５、及び通信制御部６３６がシステムバスにより相互に接続されたシステムである。

地図データ記憶部６３４には地図データが、地図内に存在する建造物、山、河川などの被写体となり得る存在物の名称、及びその位置情報とともに記憶されている。また、制御部６３２は、ワーク用のＲＡＭ６３７を備えている。そして、登録者が操作するデジタルカメラ１に対し有料あるいは無料で、被写体データ管理テーブル６２内に格納されている被写体情報を配信したりダウンロードさせ、あるいはデジタルカメラ１から送信される被写体情報を受信しアップロードするなどのサービスを行う。システムプログラム記憶部６３３には、後述するフローチャートにより示すプログラム等が格納されている。

図３は、前記被写体データ管理テーブル６２のメモリ構成を示す図である。この被写体データ管理テーブル６２は、位置情報エリア６２１、レンズ方向エリア６２２、及び特徴情報エリア６２３を備えている。

位置情報エリア６２１には、位置情報Ａ、Ｂ、・・・が緯度・経度で予め記憶されている。レンズ方向エリア６２２には、各位置情報に対応してレンズの向きを示すレンズ方向ａ，ｂ，ｃ，ｄ（例えば、東、西、南、北）が予め記憶されている。なお、本実施の形態においては、各位置情報に対応して４方向のレンズ方向ａ，ｂ，ｃ，ｄを記憶させるようにしているが、８方向や１６方向等、より多くのレンズ方向を記憶さるようにしてもよい。

特徴情報エリア６２３には、当該位置情報が示す位置であってレンズ方向が示す方向でメイン被写体とすることが好ましい被写体「被写体（１）」「被写体（２）」・・・の特徴を示す特徴情報が記憶されている。

図４は、デジタルカメラ１の回路構成を示す図である。このデジタルカメラ１は、基本モードである撮影モードにおいて、ズームレンズ１２−１を移動させて光学ズーム動作を行わせるズーム駆動部１１−１、フォーカスレンズ１２−２を移動させて合焦動作を行わせるＡＦ駆動部１１−２、ズームレンズ１２−１及びフォーカスレンズ１２−２を含む撮像レンズを構成するレンズ光学系１２を備えている。

また、デジタルカメラ１は、このレンズ光学系１２の光軸上に配置された絞り３２、この絞り３２を駆動する絞り駆動部３３、撮像素子であるＣＣＤ１３、タイミング発生器（ＴＧ）１４、垂直ドライバ１５、サンプルホールド回路（Ｓ／Ｈ）１６、Ａ／Ｄ変換器１７、カラープロセス回路１８、ＤＭＡ（Direct Memory Access）コントローラ１９、ＤＲＡＭインターフェイス（Ｉ／Ｆ）２０、ＤＲＡＭ２１を備えていている。

さらにデジタルカメラ１は、制御部２２、ＶＲＡＭコントローラ２３、ＶＲＡＭ２４、デジタルビデオエンコーダ２５、表示部２６、ＪＰＥＧ（Joint Photograph cording Experts Group）回路２７、保存メモリ２８を備えているとともに、ＧＰＳ（Global Positioning System）モジュール２９、キー入力部３０、ジャイロ部３１及び無線通信部３２を備えている。

撮影モードでのモニタリング状態においては、ズーム駆動部１１−１は、光学ズーム指示があると制御部２２からの制御信号に基づいて、図示しないズームレンズ駆動モータを駆動してズームレンズ１２−１を光軸に沿って前後に移動させることによりＣＣＤ１３に結像させる画像の倍率そのものを変化させる。また、ＡＦ駆動部１１−２は図示しないフォーカスレンズ駆動モータを駆動してフォーカスレンズ１２−２を移動させる。そして、撮像レンズを構成するレンズ光学系１２の撮影光軸後方に配置された撮像素子であるＣＣＤ１３が、タイミング発生器（ＴＧ）１４、垂直ドライバ１５によって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力を１フレーム分出力する。

ＣＣＤ１３は被写体の二次元画像を撮像する固体撮像デバイスであり、典型的には毎秒数十フレームの画像を撮像する。なお、撮像素子はＣＣＤに限定されずＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像デバイスでもよい。

この光電変換出力は、アナログ値の信号の状態でＲＧＢの原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路（Ｓ／Ｈ）１６でサンプルホールドされ、Ａ／Ｄ変換器１７でデジタルデータ（画素）に変換され、カラープロセス回路１８で画素補間処理及びγ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒが生成され、ＤＭＡ（Direct Memory Access）コントローラ１９に出力される。

ＤＭＡコントローラ１９は、カラープロセス回路１８の出力する輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒを、同じくカラープロセス回路１８からの複合（composite）同期信号、メモリ書き込みイネーブル信号、及びクロック信号を用いてＤＲＡＭインターフェイス（Ｉ／Ｆ）２０を介してバッファメモリとして使用されるＤＲＡＭ２１にＤＭＡ転送する。

制御部２２は、このデジタルカメラ１全体の制御動作を司るものであり、ＣＰＵ若しくはＭＰＵ（以下、ＣＰＵ）と、後述するフローチャートに示す処理を実行するためのプログラム等を記憶したフラッシュメモリ等のプログラム格納メモリ、及びワークメモリとして使用されるＲＡＭ等により構成される。そして、前記輝度及び色差信号のＤＲＡＭ２１へのＤＭＡ転送終了後に、この輝度及び色差信号を、ＤＲＡＭインターフェイス２０を介してＤＲＡＭ２１から読み出し、ＶＲＡＭコントローラ２３を介してＶＲＡＭ２４に書込む。

また、制御部２２は、キー入力部３０からの状態信号に対応してフラッシュメモリ等のプログラム格納用メモリに格納されている各モードに対応の処理プログラムやメニューデータを取り出して、デジタルカメラ１の各機能の実行制御、具体的には撮影動作や、光学ズーム時のズームレンズの動作制御や、ライブビュー画像表示、自動合焦、撮影、記録、及び記録した画像の再生・表示等の実行制御等や機能選択時の機能選択メニューの表示制御、設定画面の表示制御等を行う。

デジタルビデオエンコーダ２５は、前記輝度及び色差信号を、ＶＲＡＭコントローラ２３を介してＶＲＡＭ２４から定期的に読み出し、これらのデータを基にビデオ信号を生成して前記表示部２６に出力する。表示部２６は、撮影モード時にはモニタ表示部（電子ファインダ）として機能するもので、デジタルビデオエンコーダ２５からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラ２３から取り込んでいる画像情報に基づくライブビュー画像をリアルタイムに表示する。

また、制御部２２は撮影指示に応じて、撮影記録処理を実行する。この撮影記録処理においては、制御部２２は、シャッターキーの操作をトリガとして、ＣＣＤ１３、垂直ドライバ１５、サンプルホールド回路１６、カラープロセス回路１８、ＤＭＡコントローラ１９に対してスルー画撮影モードから静止画撮影モードへの切り替えを指示し、この静止画撮影モードによる撮影記録処理により得られた画像データをＤＲＡＭ２１に一時記憶する。

この保存記録の状態では、制御部２２がＤＲＡＭ２１に書き込まれている１フレーム分の輝度及び色差信号を、ＤＲＡＭインターフェイス２０を介してＹ、Ｃｂ、Ｃｒのコンポーネント毎に縦８画素×横８画素の基本ブロックと呼称される単位で読み出してＪＰＥＧ回路２７に書き込み、このＪＰＥＧ回路２７でＡＤＣＴ（Adaptive Discrete Cosine Transform：適応離散コサイン変換）、エントロピー符号化方式であるハフマン符号化等の処理によりデータ圧縮する。そして得た符号データを１画像のデータファイルとしてＪＰＥＧ回路２７から読み出し、保存メモリ２８に記録保存する。また、１フレーム分の輝度及び色差信号の圧縮処理及び保存メモリ２８への全圧縮データの書き込み終了に伴って、制御部２２は前記静止画撮影モードからスルー画撮影モードへの切り替えを指示する。

また、基本モードである再生モード時には、制御部２２が保存メモリ２８に記録されている画像データを選択的に読み出し、ＪＰＥＧ回路２７で撮影モード時にデータ圧縮した手順と全く逆の手順で圧縮されている画像データを伸張し、伸張した画像データを、ＶＲＡＭコントローラ２３を介してＶＲＡＭ２４に展開して記憶させた上で、このＶＲＡＭ２４から定期的に読み出し、これらの画像データを元にビデオ信号を生成して表示部２６で再生出力させる。

保存メモリ２８は、内蔵メモリ（フラッシュメモリ）やハードディスク、あるいは着脱可能なメモリカード等の記録媒体からなり画像データや撮影情報等を保存記録する。

キー入力部３０は、モードダイアル、カーソルキー、ＳＥＴキー、ズームボタン（Ｗボタン、Ｔボタン）、シャッターキー、クリアキー及び電源ボタン等と、それらのキーが操作されると操作されたキーの操作信号を生成して制御部２２に送出するキー処理部（図示せず）等から構成されている。

ＧＰＳモジュール２９は、測地衛星からのＬ１帯のＣ／Ａコードを受信して復調・解読し現在位置の緯度・経度を割り出すものである。ＧＰＳモジュール２９により割り出された緯度・経度の情報（位置情報）は制御部２２に取り込まれる。

ジャイロ部３１には、このデジタルカメラ１をユーザが手に持って撮像レンズの方向を変化させた際にその方向を検出するジャイロセンサを備え、このジャイロセンサの検出出力を制御部２２へ出力する。したがって、制御部２２は、ＧＰＳモジュール２９からの当該デジタルカメラ１の位置情報を撮影位置として取得し、ジャイロ部３１からのレンズ方向を撮影方向として取得することが可能である。

無線通信部３２は、アンテナ３３に接続されており、ＰＳＫ方式に基づく変復調と、ＣＤＭＡ方式に基づく端末認証処理を含む通信処理を行う。また、無線通信部３２は、ＷＷＷ接続制御を行うものであって、パケットデータ生成回路、及びパケットデータ復元回路を含み、通信プロトコルに沿ったデータ処理を行う。

なお、後述の被写体検索モードにおいて設定される撮影条件において、「ＡＦ（Auto Focus）」は、ＡＦ駆動部１１−２がフォーカスレンズ１２−２を駆動する制御である。また、「ＡＥ（Auto Exposure）」は絞り駆動部３３が絞り３２を駆動する制御であり、「画角調整」は、ズーム駆動部１１−１がズームレンズ１２−１を駆動する制御である。

次に、図５に従って、本実施形態の動作について説明する。デジタルカメラ１の制御部２２は、ＲＯＭに記憶されているプログラムに基づき、同図（ａ）に示すように処理を実行し、このデジタルカメラ１と接続される管理サーバ６３は、システムプログラム記憶部６３３に記憶されているプログラムに基づき、同図（ｂ）に示すように処理を実行する。

すなわち、デジタルカメラ１は、ＧＰＳモジュール２９からの情報に基づきデジタルカメラ１の現在の位置を検出する（ステップＳＡ１）。そして、今回検出した位置と前回検出した位置とを比較することにより、デジタルカメラ１に位置の変化があったか否かを判断する（ステップＳＡ２）。

デジタルカメラ１に位置の変化があったならば、ステップＳＡ１で検出した位置を示す位置情報（緯度・経度）と、被写体情報の送信要求とを無線通信部３２及びアンテナ３３を介して外部に送信する（ステップＳＡ３）。これら送信情報は、基地局２、通信サービス会社４の前記システム、ＷＷＷ５を介して被写体情報提供サービス会社６のシステムに送信される。

一方、被写体情報提供サービス会社６のシステムを構成する管理サーバ６３は、被写体情報の送信要求があったか否かを判断する（ステップＳＢ１）。被写体情報の送信要求があったならば、前述のようにこの被写体情報の送信要求と同時にデジタルカメラ１側から送信されてくる位置情報に基づき、被写体データ管理テーブル６２にて、受信した位置情報に対応する被写体情報を検索する（ステップＳＢ２）。しかる後に、検索された被写体情報を送信する（ステップＳＢ３）。

すなわち、デジタルカメラ１から送信された位置情報が示す位置が図３に示す「位置Ａ」であったとすると、位置Ａに属する下記４種の情報が被写体情報として検索されて送信される。
・方向ａ 被写体（１）の特徴を示す特徴情報
・方向ｂ 被写体（２）の特徴を示す特徴情報
・方向ｃ 被写体（３）の特徴を示す特徴情報
・方向ｄ 被写体（４）の特徴を示す特徴情報

すると、デジタルカメラ１の制御部２２は、これら被写体情報を受信し、その時点までＲＡＭに記憶していた前回の被写体情報は削除して、今回受信した被写体情報をＲＡＭに記憶する（ステップＳＡ４）。また、ジャイロ部３１によりデジタルカメラ１の撮像レンズの向きであるレンズ方向を検出する（ステップＳＡ５）。

なお、各位置情報に対応するレンズ方向は、前述のように８方向や１６方向等、より多くのレンズ方向であることが好ましいが、本実施の形態においては説明の簡単化を図るべく、４種のレンズ方向ａ，ｂ，ｃ，ｄのみを用いている。したがって、ジャイロ部３１は、詳細な角度までは検出する必要は無く、撮像レンズの方向がレンズ方向ａ，ｂ，ｃ，ｄのいずれであるかを検出すればよい。

次に、制御部２２は、被写体検索モードが設定されているか否かを判断する（ステップＳＡ６）。被写体検索モードが設定されていない場合には、ステップＳＡ７からステップＳＡ１１の処理を行うことなく、ステップＳＡ１２に処理を進める。

また、被写体検索モードが設定されている場合には、ＶＲＡＭコントローラ２３から取り込んでいる画像情報に基づくライブビュー画像を取得する（ステップＳＡ７）。引き続き、現在の位置、レンズ方向に対応してＲＡＭに記憶されている被写体特徴を抽出する（ステップＳＡ８）。つまり、前述のように、ステップＳＡ４での処理により、制御部２２のＲＡＭには、デジタルカメラ１の現在位置に対応して、方向ａ、ｂ、ｃ、ｄ毎に被写体特徴が記憶されている。したがって、例えばレンズ方向が「方向ｃ」であるならば、ＲＡＭから、「方向ｃ」の被写体特徴情報である「被写体（３）の特徴を示す特徴情報」を抽出する。

次に、この抽出した被写体特徴情報に合致する被写体部分をライブビュー画像内より検索する（ステップＳＡ９）。そして、ライブビュー画像内に特徴情報と合致した被写体部分が存在する否かを判断する（ステップＳＡ１０）。このとき、ライブビュー画像内に被写体（３）が存在すると、その特徴情報が示す被写体部分がライブビュー画像内に存在することとなり、ステップＳＡ１０の判断がＹＥＳとなる。

したがって、制御部２２はステップＳＡ１１に処理を進めて、合致した被写体部分をメイン被写体として、ＡＦ、ＡＥ、画角調整等を実行する。すなわち、制御部２２は、ライブビュー画像内の合致した被写体部分に、該被写体がオートフォーカスの対象となったことを示すＡＦ枠を表示させる。そして、ＡＦ駆動部１１−２を制御してフォーカスレンズ１２−２を駆動し、メイン被写体としたＡＦ枠内の被写体部分にピントが合うような撮影条件を設定する。

また、絞り駆動部３３を制御して絞り３２を駆動し、メイン被写体としたＡＦ枠内の被写体部分の露出が適正となるような撮影条件を設定する。さらにズーム駆動部１１−１を制御してズームレンズ１２−１を駆動し、例えば画角内においてメイン被写体とした被写体部分の占める割合がより多くなるようなズーム倍率からなる撮影条件を設定する。そして、全ての撮影条件の設定が完了した後、ブザーやＬＥＤ表示などにより設定完了を報知する。

このように、制御部２２は特徴情報に対応する被写体がライブビュー画像内に存在するか否かを判定し、存在する場合には当該被写体をメイン被写体として撮影条件を設定することから、従来よりも、撮影条件が自動設定される確率を高めることができる。また、人物以外をメイン被写体として撮影条件を自動設定することができ、これにより、名所などの撮影場所にある有名な建造物や風景なども適切な撮影条件で撮影を行うことができる。

つまり、人物などの被写体は存在する場所が固定ではないが、建造物などの被写体は存在する場所が固定しているため、撮影位置や撮影方向の情報を利用して検索対象となる被写体を絞り込むことが可能となり、被写体候補が数多く登録されている場合であってもメイン被写体を特定する処理の効率を向上させることが可能となる。

しかも、本実施の形態においては、デジタルカメラ１の撮影位置と撮影方向とを検出して、この検出した位置と方向に対応する特徴情報で主要被写体を特定することから、撮影条件が自動設定される確率を一層高めることができる。

しかる後に、制御部２２はシャッターキーが押下されたか否かを判断する（ステップＳＡ１２）。シャッターキーが押下されたならば、撮影記録処理を実行する（ステップＳＡ１３）。すなわち、制御部２２は、前述のようにシャッターキーの操作をトリガとして、ＣＣＤ１３、垂直ドライバ１５、サンプルホールド回路１６、カラープロセス回路１８、ＤＭＡコントローラ１９に対してスルー画撮影モードから静止画撮影モードへの切り替えを指示し、この静止画撮影モードによる撮影記録処理により得られた画像データをＤＲＡＭ２１に一時記憶する。また、ＤＲＡＭ２１に書き込まれている１フレーム分の輝度及び色差信号を、このＪＰＥＧ回路２７でデータ圧縮し、保存メモリ２８に記録保存する。

この保存メモリ２８に記録された画像データで表される画像にあっては、前記ステップＳＡ１１でメイン被写体に対して、ＡＦ、ＡＥ、画角調整等を実行されている。したがって、メイン被写体にピントが合い、適正な露出であって画角も適切な画像を記録することができる。

なお、上記ステップＳＡ１２において、シャッターキーの押下を待ってから撮影記録処理を実行しているが、自動撮影モードが設定されている場合には、シャッターキーの押下を待たずに撮影記録処理を実行する。

また、シャッターキーが押下される前に、キャンセル指示操作が行われた場合には、設定されている撮影条件のキャンセル、又は設定されているオートフォーカス対象被写体のキャンセルを行う。ことのき、ステップＳＡ８において抽出された被写体特徴が複数あった場合には、オートフォーカス対象被写体がキャンセルされたことに応じて、次の被写体特徴に合致する被写体部分を新たなオートフォーカス対象被写体として設定する。

他方、ステップＳＡ６での判断の結果、被写体検索モードが設定されていない場合には、前述したステップＳＡ７〜ＳＡ１１の処理が行われることなく、ステップＳＡ６からステップＳＡ１２に処理が進められる。したがって、この場合、ステップＳＡ１１でのＡＦやＡＥが行われずに、オートモードが設定されている場合には、撮影フレーム内の中心に位置する被写体部分に対しＡＦやＡＥが行われ、マニュアルモードが設定されている場合には、ユーザの操作に応じてフォーカスレンズ１２−２、絞り３２が駆動されることとなる。また、オートモード及びマニュアルモードのいずれの場合も、ユーザの操作に応じてズーム駆動部１１−１がズームレンズ１２−１を駆動することにより画角が決定される。しかる後に、前述したステップＳＡ１２、ステップＳＡ１３の処理が実行されて、撮影画像が保存メモリ２８に記録保存される。

すると、制御部２２は、ステップＳＡ１３からステップＳＡ１４に処理を進めて、被写体登録モードが設定されているか否かを判断する。被写体登録モードが設定されている場合には、フォーカス情報などに基づいて撮影画像内のメイン被写体を特定する（ステップＳＡ１５）。

つまり、前述のように、被写体検索モードが設定されてない場合には、オートモードが設定されている場合には、撮影フレーム内の中心に位置する被写体部分に対しＡＦやＡＥが行われ、マニュアルモードが設定されている場合には、ユーザの操作に応じてフォーカスレンズ１２−２や絞り３２が駆動されて、ユーザが意図するメイン被写体にピントが合わせられて撮影記録（ステップＳＡ１３）が実行される。したがって、この撮影記録により記録された撮影画像において、ピントが最も合っている被写体部分、露出が最も適正な被写体部分、あるいはピントが最も合っておりかつ露出が最も適正な被写体部分等が、ユーザが意図したメイン被写体であると特定することができる。

したがって、この特定されたユーザが意図したメイン被写体の特徴を抽出して、その特徴を示す特徴情報を生成する（ステップＳＡ１６）。さらに、この特徴情報、当該デジタルカメラ１の位置を示す位置情報（ステップＳＡ１で検出済み）、レンズ方向（ステップＳＡ５で検出済み）とともに、被写体登録要求をサーバに送信する（ステップＳＡ１７）。引き続き、再生モード等への移行や電源オフ等の撮影終了指示が発生したか否かを判断する（ステップＳＡ１８）。撮影終了指示が発生するまで、ステップＳＡ１からの処理を繰り返し、撮影終了指示が発生したならば、このフローに従った処理を終了する。

他方、管理サーバ６３は、デジタルカメラ１からの被写体登録要求を受信したか否かを判断する（ステップＳＢ４）。被写体登録要求を受信したならば、前述のようにこれと同時に受信した位置情報、レンズ方向、特徴情報を関連付けて被写体情報として被写体データ管理テーブル６２に登録する。つまり、例えば受信した位置情報が「位置Ｂ」、レンズ方向が「方向ｄ」、特徴情報が「被写体（ｇ）の特徴を示す特徴情報」であったとする。すると、図３に示すように、管理テーブル６２の位置情報エリア６２１の「位置Ｂ」であってレンズ方向エリア６２２に「方向ｄ」に対応させて、特徴情報エリア６２３に「被写体（ｇ）の特徴を示す特徴情報」を書き込む。

したがって、ユーザが被写体登録モードを設定して撮影を行うことにより、被写体データ管理テーブル６２に記憶される被写体情報の情報量を増大させることができる。また、複数のユーザが各々このデジタルカメラ１を使用することにより、あるユーザが登録した被写体情報を他のユーザが利用することができる。

また、本実施の形態においてデジタルカメラ１は、管理サーバ６３との送受信により被写体情報を取得することから、メモリ容量の圧迫を伴うことなく、多くの被写体情報を利用して、従来よりも、撮影条件が自動設定される確率を一層高めることができる。

なお、本実施形態においては、被写体登録モードを設けて、デジタルカメラ１側から管理サーバ６３に被写体情報を送信するようにしたが、被写体検索モードのみを設けて、デジタルカメラ１は被写体情報を管理サーバ６３から得る動作のみを行うようにしてもよい。これにより、デジタルカメラ１の処理負担を軽減することができる。

（第２の実施の形態）

図６は、本発明の第２の実施の形態に係るデジタルカメラ１の回路構成を示す図である。本実施の形態においては、前述した実施の形態のように被写体情報送受信システムを用いることなく、デジタルカメラ１のみを用いる。したがって、デジタルカメラ１には、図１に示したアンテナ３３を有する無線通信部３２は設けられることなく、これに代わって被写体データ管理テーブル６２が設けられている。被写体データ管理テーブル６２は、図３に示した第１の実施の形態と同様のメモリ構成である。

次に、図７に従って、本実施形態の動作について説明する。デジタルカメラ１の制御部２２は、ＲＯＭに記憶されているプログラムに基づき、同図に示すように処理を実行する。 すなわち、デジタルカメラ１は、ＧＰＳモジュール２９からの情報に基づきデジタルカメラ１の現在の位置を検出すとともに（ステップＳ２０１）、ジャイロ部３１によりデジタルカメラ１の撮像レンズの向きであるレンズ方向を検出する（ステップＳ２０２）。

次に、制御部２２は、被写体検索モードが設定されているか否かを判断する（ステップＳ２０３）。被写体検索モードが設定されていない場合には、ステップＳ２０４からステップＳ２０６の処理を行うことなく、ステップＳ２０７に処理を進める。

また、被写体検索モードが設定されている場合には、ＶＲＡＭコントローラ２３から取り込んでいる画像情報に基づくライブビュー画像を取得する（ステップＳ２０４）。引き続き、現在の位置、レンズ方向に対応して被写体データ管理テーブル６２から被写体特徴を抽出する（ステップＳ２０５）。つまり、例えばデジタルカメラ１の現在の位置が「位置Ａ」であり、レンズ方向が「方向ｃ」であるならば、被写体データ管理テーブル６２から「位置Ａ」であって「方向ｃ」の被写体特徴情報である「被写体（３）の特徴を示す特徴情報」を抽出する。

次に、この抽出した被写体特徴情報に合致する被写体部分をライブビュー画像内より検索する（ステップＳ２０６）。そして、ライブビュー画像内に特徴情報と合致した被写体部分が存在する否かを判断する（ステップＳ２０７）。このとき、ライブビュー画像内に被写体（３）が存在すると、その特徴情報が示す被写体部分がライブビュー画像内に存在することとなり、ステップＳ２０７の判断がＹＥＳとなる。

したがって、制御部２２はステップＳ２０８に処理を進めて、合致した被写体部分をメイン被写体として、ＡＦ、ＡＥ、画角調整等を実行する。すなわち、制御部２２は、ＡＦ駆動部１１−２を制御してフォーカスレンズ１２−２を駆動し、メイン被写体とした被写体部分にピントが合うような撮影条件を設定する。また、絞り駆動部３３を制御して絞り３２を駆動し、メイン被写体とした被写体部分の露出が適正となるような撮影条件を設定する。さらにズーム駆動部１１−１を制御してズームレンズ１２−１を駆動し、例えば画角内においてメイン被写体とした被写体部分の占める割合がより多くなるような撮影条件を設定する。

このように、制御部２２は特徴情報に対応する被写体がライブビュー画像内に存在するか否かを判定し、存在する場合には当該被写体をメイン被写体として撮影条件を設定することから、従来よりも、撮影条件が自動設定される確率を高めることができる。また、人物以外をメイン被写体として撮影条件を自動設定することができ、これにより、名所などの撮影場所にある有名な建造物や風景なども適切な撮影条件で撮影を行うことができる。

しかる後に、シャッターキーが押下されたか否かを判断する（ステップＳ２０９）。シャッターキーが押下されたならば、撮影記録処理を実行する（ステップＳ２１０）。すなわち、制御部２２は、前述のようにシャッターキーの操作をトリガとして、ＣＣＤ１３、垂直ドライバ１５、サンプルホールド回路１６、カラープロセス回路１８、ＤＭＡコントローラ１９に対してスルー画撮影モードから静止画撮影モードへの切り替えを指示し、この静止画撮影モードによる撮影記録処理により得られた画像データをＤＲＡＭ２１に一時記憶する。また、ＤＲＡＭ２１に書き込まれている１フレーム分の輝度及び色差信号を、このＪＰＥＧ回路２７でデータ圧縮し、保存メモリ２８に記録保存する。

他方、ステップＳ２０３での判断の結果、被写体検索モードが設定されていない場合には、前述したステップＳ２０４〜Ｓ２０８の処理が行われることなく、ステップＳ２０３からステップＳ２０９に処理が進められる。したがって、この場合、ステップＳ２１１でのＡＦやＡＥが行われずに、オートモードが設定されている場合には、撮影フレーム内の中心に位置する被写体部分に対しＡＦやＡＥが行われ、マニュアルモードが設定されている場合には、ユーザの操作に応じてフォーカスレンズ１２−２、絞り３２が駆動されることとなる。また、ユーザの操作に応じてズーム駆動部１１−１がズームレンズ１２−１を駆動することにより、ユーザが意図する画角が決定される。しかる後に、前述したステップＳ２１２、ステップＳ２１３の処理が実行されて、撮影画像が保存メモリ２８に記録保存される。

すると、制御部２２は、ステップＳ２１０らステップＳ２１１に処理を進めて、被写体登録モードが設定されているか否かを判断する。被写体登録モードが設定されている場合には、フォーカス情報などに基づいて撮影画像内のメイン被写体を特定する（ステップＳ２１２）。

つまり、前述のように、被写体検索モードが設定されてない場合には、オートモードが設定されている場合には、撮影フレーム内の中心に位置する被写体部分に対しＡＦやＡＥが行われ、マニュアルモードが設定されている場合には、ユーザの操作に応じてフォーカスレンズ１２−２や絞り３２が駆動されて、ユーザが意図するメイン被写体にピントが合わせられて撮影記録（ステップＳ２１０）が実行される。したがって、この撮影記録により記録された撮影画像において、ピントが最も合っている被写体部分、露出が最も適正な被写体部分、あるいはピントが最も合っておりかつ露出が最も適正な被写体部分等が、ユーザが意図したメイン被写体であると特定することができる。

したがって、この特定されたユーザが意図したメイン被写体の特徴を抽出して、その特徴を示す特徴情報を生成する（ステップＳ２１３）。さらに、この特徴情報、当該デジタルカメラ１の位置を示す位置情報（ステップＳ２０１で検出済み）、レンズ方向（ステップＳ２０２で検出済み）を被写体データ管理テーブル６２に登録する（ステップＳ２１４）。つまり、例えばデジタルカメラ１の位置が「位置Ｂ」、レンズ方向が「方向ｄ」、特徴情報が「被写体（ｇ）の特徴を示す特徴情報」であったとする。すると、図３に示すように、管理テーブル６２の位置情報エリア６２１の「位置Ｂ」であってレンズ方向エリア６２２に「方向ｄ」に対応させて、特徴情報エリア６２３に「被写体（ｇ）の特徴を示す特徴情報」を書き込んで登録する。

したがって、ユーザが被写体登録モードを設定して撮影を行うことにより、被写体データ管理テーブル６２に記憶される被写体情報の情報量を増大させることができる。よって、１台のデジタルカメラ１を家族等で複数のユーザが使用する場合、あるユーザが登録した被写体情報を他のユーザが利用することができる。

引き続き、再生モード等への移行や電源オフ等の撮影終了指示が発生したか否かを判断する（ステップＳ２１５）。撮影終了指示が発生するまで、ステップＳ２０１からの処理を繰り返し、撮影終了指示が発生したならば、このフローに従った処理を終了する。

なお、本実施の形態においては、デジタルカメラ１の撮影位置と撮影方向とを検出して、この検出した位置と方向に対応する特徴情報で主要被写体を特定するようにした。しかし、デジタルカメラ１の撮影位置のみを検出して、この検出した位置に対応する特徴情報で主要被写体を特定するようにしてもよい。この場合であっても、従来よりも、撮影条件が自動設定される確率を高めることができる。

また、本実施形態においては、被写体登録モードを設けて、デジタルカメラ１が被写体情報の登録機能を有するものとしたが、被写体検索モードのみを設けるようにしてもよい。これにより、デジタルカメラ１の処理負担を軽減することができる。

１ デジタルカメラ
１１−１ ズーム駆動部
１１−２ ＡＦ駆動部
１２ レンズ光学系
１２−１ ズームレンズ
１２−２ フォーカスレンズ
１３ ＣＣＤ
１９ ＤＭＡコントローラ
２１ ＤＲＡＭ
２２ 制御部
２４ ＶＲＡＭ
２５ デジタルビデオエンコーダ
２６ 表示部
２７ ＪＰＥＧ回路
２８ 保存メモリ
２９ ＧＰＳモジュール
３０ キー入力部
３１ ジャイロ部
３２ 無線通信部
３３ 絞り駆動部
４１ 通信回路処理部
６２ 被写体データ管理テーブル
６３ 管理サーバ
６２１ 位置情報エリア
６２２ レンズ方向エリア
６２３ 特徴情報エリア
６３２ 制御部

Claims (13)

1. 複数の異なる位置の各々に対応させて被写体の特徴を示す特徴情報を記憶する手段であって、位置と特徴情報とを関連付けた被写体情報を複数記憶する記憶手段と、
   撮影して画像を取得するとともに、この撮影時のカメラの位置に対応する特徴情報を前記記憶手段より取得する取得手段と、
   前記取得手段により取得した特徴情報に対応する被写体が前記撮影した画像内に存在するか否かを判定する判定手段と、
   前記判定手段により取得した特徴情報に対応する被写体が前記画像内に存在すると判定された場合には、この被写体がメインの撮影対象となるように撮影条件を変化させるように、前記判定手段の判定結果に応じて撮影処理の内容を変化させる撮影制御手段と、
   撮影して画像を取得したときに、この撮影された画像内でメインとなる被写体の特徴情報を生成し、この生成された特徴情報と当該画像の撮影時の撮影位置とを関連付けた被写体情報を、前記記憶手段に追加して記憶する記憶制御手段と
   を備え、
   前記取得手段は、カメラの位置又は方向が変化している間、逐次撮影して画像を取得するとともに、各撮影時のカメラの位置に対応する特徴情報を前記記憶手段より逐次取得し、
   前記判定手段は、カメラの位置又は方向の変化に応じて逐次変化する特徴情報に対応する被写体が、カメラの位置又は方向の変化に応じて逐次変化する画像内に存在するか否かを逐次判定し、
   前記撮影制御手段は、前記判定手段による判定結果に応じてメインの撮影対象となる被写体を逐次変化させる
   ことを特徴とするカメラ。
2. 前記記憶手段は、位置および方向と特徴情報とを関連付けた被写体情報を複数記憶し、
   前記取得手段は、カメラの位置又は方向が変化している間、逐次撮影して画像を取得するとともに、各撮影時のカメラの位置および方向に対応する特徴情報を前記記憶手段より逐次取得し、
   前記記憶制御手段は、撮影して画像を取得したときに、この撮影された画像内でメインとなる被写体の特徴情報を生成し、この生成された特徴情報と当該画像の撮影時の撮影位置および撮影方向とを関連付けた被写体情報を、前記記憶手段に追加して記憶する
   ことを特徴とする請求項１記載のカメラ。
3. 前記撮影制御手段は、撮影記録の待機時において、前記判定手段による判定結果に応じてメインの撮影対象となる被写体を逐次変化させ、撮影記録が指示された場合に、この指示タイミングでメインの撮影対象となっている被写体に撮影条件を合わせて撮影記録を行うことを特徴とする請求項１または２記載のカメラ。
4. 設定されたモードに応じて、前記撮影制御手段による前記判定結果に応じた撮影条件の変化動作と、前記記憶制御手段による新たな被写体情報の追加記憶動作とを切り換え制御する制御手段を更に備えることを特徴とする請求項１乃至３のいずれかに記載のカメラ。
5. 前記判定手段は、画像認識処理によって前記特徴情報に対応する画像部分が前記画像内に存在するか否かを判定することを特徴とする請求項１乃至４のいずれかに記載のカメラ。
6. 前記判定手段は、画像認識処理によって前記特徴情報に対応する画像部分が前記画像内に存在する位置を判定し、
   前記撮影制御手段は、前記判定手段により判定された画像内の位置を対象として自動的なフォーカス調整または自動的な露出調整を行うように撮影条件を変化させることを特徴とする請求項５記載のカメラ。
7. 前記撮影制御手段は、前記判定手段により判定された被写体を対象として、当該被写体を合焦させる光学系の焦点、露出、画角の少なくとも１つを含む撮影条件を自動設定することを特徴とする請求項１乃至６のいずれかに記載のカメラ。
8. 前記記憶手段は、１つの位置に対応させて複数の被写体の特徴情報を記憶し、
   前記判定手段は、前記撮影時のカメラの位置に対応する複数の特徴情報を前記記憶手段より取得し、この取得した複数の特徴情報のいずれかに対応する被写体が前記画像内に存在するか否かを判定することを特徴とする請求項１乃至３に記載のカメラ。
9. カメラの現在位置に対応した被写体の特徴情報をネットワークを介して受信する受信手段を更に備え、
   前記判定手段は、前記受信手段により受信した特徴情報を用いて、この特徴情報に対応する被写体が前記画像内に存在するか否かを判定することを特徴とする請求項１乃至３に記載のカメラ。
10. 前記記憶制御手段は、前記受信手段により受信した特徴情報を前記記憶手段に記憶し、
    前記判定手段は、前記受信手段により受信して前記記憶手段に記憶した特徴情報を用いて、この特徴情報に対応する被写体が前記画像内に存在するか否かを判定することを特徴とする請求項９記載のカメラ。
11. 前記受信手段は、カメラの現在位置に対応した被写体の特徴情報であり、複数の方向の各々に対応した複数の被写体の特徴情報をネットワークを介して受信し、
    前記判定手段は、前記受信手段により受信して前記記憶手段に記憶した複数の特徴情報のうち、カメラの向きに対応する特徴情報を用いて、この特徴情報に対応する被写体が前記画像内に存在するか否かを判定することを特徴とする請求項１０記載のカメラ。
12. カメラが有するコンピュータを、
    複数の異なる位置の各々に対応させて被写体の特徴を示す特徴情報を記憶する手段であって、位置と特徴情報とを関連付けた被写体情報を複数記憶する記憶手段と、
    撮影して画像を取得したときに、この撮影時のカメラの位置に対応する特徴情報を前記記憶手段より取得する取得手段と、
    前記取得手段により取得した特徴情報に対応する被写体が前記撮影した画像内に存在するか否かを判定する判定手段と、
    前記判定手段により取得した特徴情報に対応する被写体が前記画像内に存在すると判定された場合には、この被写体がメインの撮影対象となるように撮影条件を変化させるように、前記判定手段の判定結果に応じて撮影処理の内容を変化させる撮影制御手段と、
    撮影して画像を取得したときに、この撮影された画像内でメインとなる被写体の特徴情報を生成し、この生成された特徴情報と当該画像の撮影時の撮影位置とを関連付けた被写体情報を、前記記憶手段に追加して記憶する記憶制御手段と
    として機能させ、
    前記取得手段は、カメラの位置又は方向が変化している間、逐次撮影して画像を取得するとともに、各撮影時のカメラの位置に対応する特徴情報を前記記憶手段より逐次取得し、
    前記判定手段は、カメラの位置又は方向の変化に応じて逐次変化する特徴情報に対応する被写体が、カメラの位置又は方向の変化に応じて逐次変化する画像内に存在するか否かを逐次判定し、
    前記撮影制御手段は、前記判定手段による判定結果に応じてメインの撮影対象となる被写体を逐次変化させる
    ことを特徴とするプログラム。
13. 複数の異なる位置の各々に対応させて被写体の特徴を示す特徴情報を記憶する手段であって、位置と特徴情報とを関連付けた被写体情報を複数記憶する記憶手段を備えたカメラの撮影方法であって、
    撮影して画像を取得したときに、この撮影時のカメラの位置に対応する特徴情報を前記記憶手段より取得する取得ステップと、
    前記取得ステップにより取得した特徴情報に対応する被写体が前記撮影した画像内に存在するか否かを判定する判定ステップと、
    前記判定ステップにより取得した特徴情報に対応する被写体が前記画像内に存在すると判定された場合には、この被写体がメインの撮影対象となるように撮影条件を変化させるように、前記判定ステップの判定結果に応じて撮影処理の内容を変化させる撮影制御ステップと、
    撮影して画像を取得したときに、この撮影された画像内でメインとなる被写体の特徴情報を生成し、この生成された特徴情報と当該画像の撮影時の撮影位置とを関連付けた被写体情報を、前記記憶手段に追加して記憶する記憶制御ステップと
    を含み、
    前記取得ステップは、カメラの位置又は方向が変化している間、逐次撮影して画像を取得するとともに、各撮影時のカメラの位置に対応する特徴情報を前記記憶手段より逐次取得し、
    前記判定ステップは、カメラの位置又は方向の変化に応じて逐次変化する特徴情報に対応する被写体が、カメラの位置又は方向の変化に応じて逐次変化する画像内に存在するか否かを逐次判定し、
    前記撮影制御ステップは、前記判定ステップによる判定結果に応じてメインの撮影対象となる被写体を逐次変化させる
    ことを特徴とする撮影方法。

Images