JP2016051939A - 撮影装置、制御方法、及びプログラム - Google Patents

Abstract

【課題】撮影者に対して、移動する被写体を特定しつつ、当該被写体の動態を行慮して提示することで、撮影の支援を行うことが可能な撮影装置、制御方法、及びプログラムを提供することを目的とする。
【解決手段】撮影者が撮影装置１００を用いて撮影する際に、撮影したい被写体（物体３０５）を選択し、この選択した被写体に対して基準物体を定めることで、被写体と基準物体との位置関係から、被写体の移動距離や移動方向を求め、この求めた移動距離や移動方向に応じた記号（矢印３０９）を表示する。
【選択図】図８

Description

本発明は、被写体を追尾して撮影を行う装置において、特に被写体の追尾方向を撮影者へ提示して撮影を支援する装置に関する。

撮影者が被写体の撮影を支援する１方法として、ズームアップされた移動する被写体を撮影するために、被写体の撮影状態に応じて、適宜、ズームイン、ズームアウトする方法等があげられるが、ある程度の技術的な熟練度を持ったものでなければ、撮影が困難であるという問題を抱えている。

そこで、このような問題を解決する１方法として、撮影者へ撮影するフレーム外のエリアも視覚確認させることで、被写体を追尾しやすくする方法が示された発明が開示されている（耐えば、特許文献１参照）。

特開２００６−１９８８２号公報

しかしながら、特許文献１に記載の方法では、撮影範囲内であれば、被写体の撮影を支援することは可能であるものの、例えば、被写体の移動速度が高く、多くの物体が撮影範囲内に存在する場合、撮影したい被写体を特定し難いという問題がある、

そこで、本発明では、撮影者に対して、移動する被写体を特定しつつ、当該被写体の動態を行慮して提示することで、撮影の支援を行うことが可能な撮影装置、制御方法、及びプログラムを提供することを目的とする。

上記目的を達成するための第１の発明は、撮影者の被写体撮影を支援する撮影装置であって、撮影して得られた撮影画像を取得する撮影画像取得手段と、前記撮影画像から被写体を選択するための位置を受け付ける受付手段と、前記撮影画像から複数の被写体を取得する取得手段と、前記受付手段によって受け付けた位置から前記取得手段によって取得した被写体から追跡対象とする被写体と特定する被写体特定手段と、前記被写体特定手段によって特定された追跡対象となる被写体と、前記取得手段によって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定手段と、前記被写体特定手段によって特定された追跡対象となる被写体と、前記基準物体特定手段によって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出手段と、前記距離算出手段によって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示手段と、を備えたことを特徴とする。

上記目的を達成するための第２の発明は、撮影者の被写体撮影を支援する撮影装置の制御方法であって、前記撮影装置は、撮影して得られた撮影画像を取得する撮影画像取得ステップと、前記撮影画像から被写体を選択するための位置を受け付ける受付ステップと、前記撮影画像から複数の被写体を取得する取得ステップと、前記受付ステップによって受け付けた位置から前記取得ステップによって取得した被写体から追跡対象とする被写体と特定する被写体特定ステップと、前記被写体特定ステップによって特定された追跡対象となる被写体と、前記取得ステップによって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定ステップと、前記被写体特定ステップによって特定された追跡対象となる被写体と、前記基準物体特定ステップによって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出ステップと、前記距離算出ステップによって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示ステップと、を実行することを特徴とする。

上記目的を達成するための第３の発明は、撮影者の被写体撮影を支援する撮影装置で読取実行可能なプログラムであって、前記撮影装置を、撮影して得られた撮影画像を取得する撮影画像取得手段と、前記撮影画像から被写体を選択するための位置を受け付ける受付手段と、前記撮影画像から複数の被写体を取得する取得手段と、前記受付手段によって受け付けた位置から前記取得手段によって取得した被写体から追跡対象とする被写体と特定する被写体特定手段と、前記被写体特定手段によって特定された追跡対象となる被写体と、前記取得手段によって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定手段と、前記被写体特定手段によって特定された追跡対象となる被写体と、前記基準物体特定手段によって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出手段と、前記距離算出手段によって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示手段と、して機能させることを特徴とする。

本発明では、撮影者に対して、移動する被写体に対して、当該被写体の動態を行慮した指示情報を提示することで、撮影の支援を行うことが可能となる、という効果を奏する。

本発明の実施形態に係る撮影装置の構成を示す構成図である。 本発明の実施形態に係る撮影装置のハードウェアの構成を示すハードウェア構成図である。 本発明の実施形態に係る撮影装置における撮影方法の概略の処理を示すフローチャートである。 本発明の実施形態に係る撮影装置における被写体の選択処理を示すフローチャートである。 本発明の実施形態に係る撮影装置における被写体を追尾する機能が起動された状態での撮影画像のファインダーへの表示処理を示すフローチャートである。 本発明の実施形態に係る撮影装置におけるズーム指示処理を示すフローチャートである。 本発明の実施形態に係る撮影装置で撮影された撮影画像の例を示す構成図である。 本発明の実施形態に係る撮影装置で撮影された撮影画像に指示情報が付与された例を示す構成図である。 本発明の実施形態に係る撮影装置で実行される処理で利用されるデータを記憶するためのテーブルの構成を示す構成図である。

以下、図面を参照して、本発明の実施形態を詳細に説明する。

［第１の実施形態］
図１には、本発明の実施形態に係る撮影装置１００が示されており、この撮影装置１００については、デジタルスチルカメラやカメラ機能を備えた携帯端末等の情報処理装置等でも良い。

次に、図２を参照して、本発明を実施する撮影装置１００のハードウェア構成について説明する。

撮影装置１００は、撮影用のレンズ２０１、撮像素子（以下、「ＣＣＤ」と称する）２０２、カメラ信号処理部（以下、「ＡＤＣ」と称する）２０３、画像処理部２０４、システムコントローラ２１０、バッファメモリ２１１、フラッシュＲＯＭ２１２、インターフェース回路（以下、「Ｉ／Ｆ回路」と称する）２１３、カードホルダ２１４、メモリカード２１５、ディスプレイドライバ２１６、および操作部２２０を備える。

レンズ２０１は、レンズ等であり、対物レンズ、ズームレンズ、およびフォーカスレンズなどで構成される。ズームレンズおよびフォーカスレンズについては、不図示の駆動機構により光軸方向へ駆動される。撮像素子２０２は、レンズ２０１から入射した撮像光を結像し、電気信号（アナログ信号）に変換して出力するＣＣＤイメージセンサで構成される。

カメラ信号処理部（ＡＤＣ）２０３は、撮像素子２０２から受けた電気信号にデジタル変換やホワイトバランス調整などの信号処理を行なって、デジタル信号に変換する機能を有する。システムコントローラ２１０は、画像処理部２０４、バッファメモリ２１１、フラッシュＲＯＭ２１２、Ｉ／Ｆ回路２１３、ディスプレイドライバ２１６、サウンドドライバ２１８、ＬＥＤドライバ２２８、操作部２２０、磁気センサ２３１、加速度センサ２３２、および角速度センサ２３３に接続されている

画像処理部２０４は、前処理部２０５、ＹＣ処理部２０６、電子ズーム処理部２０７、圧縮部２０８、および伸長部２０９を備え、ＡＤＣ２０３から出力されるデジタル信号から画像データを生成し、各種画像処理を行う機能を有する。

前処理部２０５は、入力される画像データに基づく画像のホワイトバランスを調整するホワイトバランス処理や画像のガンマ補正処理を行う機能を有する。ホワイトバランス処理は、画像の色合いを、実物の色合いに近くなるように調整したり、光源（蛍光灯や太陽光など）に合った適正な色に調整したりする処理である。ガンマ補正処理は、画像のコントラストを調整する処理である。なお、前処理部２０５は、ホワイトバランス処理およびガンマ補正処理以外の画像処理を実行することも可能である。

ＹＣ処理部２０６は、入力される画像データに基づく画像を、輝度情報「Ｙ」と、輝度信号と青色の色差情報「Ｃｂ」と、輝度信号と赤色の色差情報「Ｃｒ」とに分離する機能を有する。電子ズーム処理部２０７は、画像の一部（例えば中央部）を所定の大きさでトリミングし、トリミングした画像を信号処理で元画像の大きさに拡大する機能を有する。

電子ズーム処理部２０７は、例えば、撮影された１６００×１２００ドットの画像から中央の１０２４×７６８ドットの画像を切り出し、データ補間を行いながら１６００×１２００ドットのサイズに拡大することができる。

圧縮部２０８は、画像データをＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）方式などの圧縮形式によって圧縮する機能を有する。伸長部２０９は、圧縮されている画像データを伸長する機能を有する。例えば、画像データをＪＰＥＧ方式で圧縮する場合、まず、画像データの高周波成分と低周波成分の割合を数値化する離散コサイン変換処理が行われる（ＤＣＴ処理）。次に、画像の階調やグラデーションを表現する段階を数値（量子化ビット数）で表現する量子化処理が行われる。最後に、ハフマン符号化処理で画像データが圧縮される。

具体的には、画像データの信号文字列が一定のビット毎に区切られ、出現頻度が高い文字列に対してより短い符号が与えてられてゆく。なお、圧縮処理を行わないで画像データを記録する方式の場合は、圧縮部２０８および伸長部２０９を省略することができる。また、画像データの圧縮形式は、ＪＰＥＧ方式に限らず、ＧＩＦ（Ｇｒａｐｈｉｃａｌ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）形式などであっても、同様に処理を行うことができる。

バッファメモリ２１１には、画像処理部２０４で画像処理が行われる際に、一時的に画像データが保存される。フラッシュＲＯＭ２１２には、撮影装置１００の各種設定情報や、後述するユーザ認証情報が保存される。Ｉ／Ｆ回路２１３は、システムコントローラ２１０から出力される画像データを、メモリカード２１５に記録可能なデータ形式に変換する。また、Ｉ／Ｆ回路２１３は、メモリカード２１５から読み出された画像データ等を、システムコントローラ２１０で処理可能なデータ形式に変換する。

カードホルダ２１４は、記録媒体であるメモリカード２１５を撮影装置１００に着脱可能にする機構を備えると共に、メモリカード２１５との間でデータ通信が可能な電気接点を備える。また、カードホルダ２１４は、撮影装置１００で利用される記録媒体の種類に応じた構造を有する。メモリカード２１５は、フラッシュメモリなどの半導体記憶素子を内蔵し、カードホルダ２１４に着脱可能なカード型の記録媒体である。メモリカード２１５には、撮影装置１００で撮影された画像データを記録することができる。

ディスプレイドライバ２１６は、システムコントローラ２１０から出力される画像データを液晶ディスプレイ２１７で表示可能な信号に変換する。具体的には、ディスプレイドライバ２１６は、システムコントローラ２１０から出力されるデジタルの画像データをアナログ画像信号に変換する処理を行い、次に画像サイズを液晶ディスプレイ２１７の表示可能エリアのサイズに適したサイズに変換する処理を行う。

サウンドドライバ２１８は、システムコントローラ２１０から出力される音声データをスピーカ２１９で鳴動可能な信号に変換する処理を行う。ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ドライバ２２８は、システムコントローラ２１０から出力される命令に従いランプ２２９の制御を行う。

操作部２２０は、電源スイッチ２２１、モードダイヤル２２２、撮影ボタン２２３、カーソルキー２２４、ズームボタン２２５、および閲覧（再生）ボタン２２６を備え、ユーザからの操作入力を受け付けて、操作内容に応じた信号をシステムコントローラ２１０に出力する。なお、操作部２２０には、図示の操作ボタン以外の操作ボタン類も含まれるが、それらの説明は省略する。

モードダイヤル（選択ボタン）２２２は、撮影動作のモードを切り替えるための回転可能なダイヤルである。ユーザはモードダイヤル２２２を操作することで、複数の撮影動作モードを選択することが可能である。なお、本発明の実施形態で、モードダイヤルは、ダイヤル式機構として記載をするが、例えば、ダイヤルではなくスライド式のボタンであってもよい。つまり、モードダイヤル２２２について、その機構はダイヤルに限定されず、カメラのモードを切り替えられるための機構を備えていることが本質である。

閲覧ボタン２２６は、撮影した画像データを閲覧する閲覧モード（再生モード）に切り替えるためのボタンである。閲覧ボタン２２６が押下されると、撮影モードから閲覧モードに移行する。なお、閲覧モードへの切替方法については、閲覧ボタン２２６の押下に限定されず、液晶ディスプレイ２１７上のタッチパネル（不図示）などによる移行方法であってもよい。

閲覧モードでは、システムコントローラ２１０が、Ｉ／Ｆ回路２１３を介して、カードホルダ１１４に装着されているメモリカード２１５から設定情報と画像データを読み出す。設定情報は、現在装着されているメモリカード２１５に記録されている画像の枚数および記録されている画像データの容量などである。読み出される画像データは、例えば、画像１枚分の画像データまたはサムネイルデータである。なお、メモリカード２１５から読み出される画像データは、上述したように所定の圧縮形式で圧縮されている。

メモリカード２１５から読み出された画像データは、Ｉ／Ｆ回路２１３およびシステムコントローラ２１０を介して、ディスプレイドライバ２１６へ入力される。ディスプレイドライバ２１６は、入力された画像データを液晶ディスプレイ２１７に表示させる。

カーソルキー２２４は、ユーザが撮影装置１００に対する所定の指示や機能選択を行うためのキーである。ユーザは、カーソルキー２２４により、撮影装置１００に対する各種設定情報やユーザ認証情報などの操作入力を行うことができる。

また、カーソルキー２２４により、液晶ディスプレイ２１７にメニュー画面や撮影装置１００に対して各種設定情報を設定するための画面を表示したり、本発明における被写体を追尾するための機能を選択することも可能であり、更に、撮影装置１００が有する他の所定の機能を選択することができる。

さらに、カーソルキー２２４により、撮影装置１００で撮影された画像データを液晶ディスプレイ２１７上にプレビュー表示させることができる。プレビュー表示とは、撮影装置１００で撮影した画像を、その直後に液晶ディスプレイ２１７に表示させる機能である。

なお、プレビュー表示については、液晶ディスプレイ２１７上に撮影した画像を１枚のみ表示する構成に限定されず、サムネイル画像を含む複数の画像を表示するように構成してもよい。また、プレビュー表示の切り替えについては、カーソルキー２２４の押下に限らず、他のボタンの押下などの一般的な方法を利用して切り替えられる構成にしてもよい。また、プレビュー表示画面で、プレビュー表示画像の削除や編集などが行えるように構成してもよい。

レンズ制御部２２７は、レンズ２０１のレンズに対して、ズーム、フォーカス、絞り等の制御を行う。また、撮影装置１００は、被写体を撮像して画像データを得る撮影モードと当該撮影モードで得た画像データを表示する閲覧（再生）モードとを備える。

なお、音声についてはマイクやスピーカを用いることで、撮影装置１００と同様に記録、及び再生が可能である。また、映像（動画）記録時には、通常音声記録も同時に行われ、圧縮部２０８および伸長部２０９で、映像と音声が多重化される。

また、撮影装置１００における撮影動作について図１を用いて説明する。まず、ユーザが電源スイッチ２２１を操作し、撮影装置１００の電源をＯＮにする。すると、撮影装置１００に内蔵されているバッテリー（不図示）から各回路へ電源供給されて、撮影装置１００の起動処理（レンズバリアを開く動作制御およびマイクロコンピューターのリセット処理など）が行われる。

撮影装置１００は、電源ＯＦＦ時に電源スイッチ２２１が押下されると電源ＯＮとなり、自動的に撮影モードとなるように構成されている。また、電源ＯＦＦ時に閲覧ボタンが押下されると電源ＯＮとなり、自動的に閲覧モードとなるように構成されている。

撮影装置１００が撮影モードに移行すると、光学画像がレンズ２０１を介して撮影装置１００内へ入射し、撮像素子（ＣＣＤ）２０２に結像される。ＣＣＤ２０２は、入射される光学画像を電気信号に変換して、カメラ信号処理部（ＡＤＣ）２０３へ出力する。ＡＤＣ２０３は、入力される電気信号（アナログ信号）をデジタル信号に変換する。ＡＤＣ２０３から出力されるデジタル信号は画像処理部２０４に入力される。

画像処理部２０４内の前処理部２０５では、入力されるデジタル信号に基づき画像データを生成し、ホワイトバランス処理およびガンマ補正処理などが行われる。画像処理部２０４内のＹＣ処理部２０６では、画像データが輝度信号Ｙと色差信号ＣｒおよびＣｂとに分離され、色差信号ＣｒおよびＣｂの情報量を減らす処理が行われる。

色差信号ＣｒおよびＣｂの情報量の削減処理は、例えば、画像の主走査方向の色情報を間引く「４：２：２ダウンサンプリング処理」や、画像の縦横方向の色情報を間引く「４：１：１ダウンサンプリング処理」などがある。なお、前処理部２０５およびＹＣ処理部２０６で画像処理を行う際は、画像データを一時的にバッファメモリ２１１に保存し、随時バッファメモリ２１１に保存されている画像データを読み出しながら画像処理が行われる。

画像処理部２０４から出力される画像データ（非圧縮）はシステムコントローラ２１０に入力される。システムコントローラ２１０は、画像処理部２０４から出力される画像データを、ディスプレイドライバ２１６へ出力する。

ディスプレイドライバ２１６は、入力される画像データ（デジタル信号）をアナログ画像信号に変換すると共に、アナログ画像信号に基づく画像のサイズを液晶ディスプレイ２１７で表示可能なサイズに調整する。

また、ディスプレイドライバ２１６は、液晶ディスプレイ２１７に画像を表示させるよう制御する。このとき、液晶ディスプレイ２１７に表示される画像は、ＣＣＤ２０２、ＡＤＣ２０３、および画像処理部２０４で、連続的に信号処理されて生成される画像（スルー画像）である。

液晶ディスプレイ２１７にスルー画像が表示されている状態で、ユーザが希望のタイミングで撮影ボタン２２３を操作すると、システムコントローラ２１０は画像処理部２０４に制御信号を出力する。画像処理部２０４に制御信号が入力されると、圧縮部２０８は、前処理部２０５およびＹＣ処理部２０６で画像処理された画像データをバッファメモリ２１１へ保存し、圧縮処理を行う。

具体的には、画像データの高周波成分と低周波成分の割合を数値化する離散コサイン変換処理（ＤＣＴ処理）や、画像の階調やグラデーションを表現する段階を量子化ビット数で表現する量子化処理や、画像データの信号文字列を一定のビット毎に区切り、出現頻度が高い文字列に対して、より短い符号を与えてゆくハフマン符号化処理などが実行される。圧縮された画像データは、システムコントローラ２１０およびディスプレイドライバ２１６を介して液晶ディスプレイ２１７に表示される。また、圧縮された画像データは、カードホルダ２１４を介してメモリカード２１５に記録される。

撮影ボタン２２３が操作される前にズームボタン２２５が操作されると、システムコントローラ２１０は光学ズーム処理や電子ズーム処理を実行し、画像の大きさを拡大または縮小させることができる。そして、ズームボタン２２５の操作後、撮影ボタン２２３が操作されると、拡大または縮小された画像の画像データがメモリカード２１５へ記録される。

書込み部２３０は、カーソルキー２２４により指示入力された設定情報を用いて、画像データに対して、書込みを行う。例えば、デジタルカメラの機種名や、撮影年月日、露出情報、撮影位置等が入力されたＥｘｉｆ（Exchangeable Image File Format）に対して、書込み編集を行う。

磁気センサ２３１は、磁場の大きさ・方向を計測するセンサであり、結果をシステムコントローラ２１０に出力する。撮影装置１００の方位角（後述）を計測するために用いる。

加速度センサ２３２は、撮影装置１００の加速度を計測するセンサであり、結果をシステムコントローラ２１０に出力する。撮影装置１００の水平線（地面に対する水平線、以下、同じ）に対する傾き、高度を計測し、角速度等で示される移動速度を補正するために用いる（後述）。

角速度センサ２３３は、撮影装置１００の角速度を計測するセンサであり、結果をシステムコントローラ２１０に出力する。撮影装置１００の移動速度を計測し、傾き、高度を補正するために用いる。

次に、図３を用いて、この撮影装置１００を用いて、本発明における撮影方法の概略の処理を説明する。尚、本処理は、システムコントローラ２１０の制御の下、処理が実行される。

ステップＳ１０１では、撮影装置１００において発生したイベントを検知し、当該イベントが、タイムアウトを検知した場合であれば、ステップＳ１０２へ処理を進め、被写体が選択されたことを検知した場合であれば、ステップＳ１０５へ処理を進め、ズームの指示を検知した場合は、ステップＳ１０７へ処理を進め、さらに、電源がＯＦＦされたことを検知した場合は、処理を終了する。また、記載以外のイベントを検知した場合、イベントに対応する通常の処理を行うものとする。

尚、本ステップにおけるタイムアウトとは、外部からのイベントを待機する経過時間が所定時間経過したことを示している。

ステップＳ１０２では、カーソルキー２２４により、液晶ディスプレイ２１７に表示された被写体を追尾する機能（追っかけＳＷ、不図示）が選択されたか否かを判定し、選択されていた場合（追っかけＳＷがＯＮの場合）、ステップＳ１０３へ処理を進め、選択されていない場合（追っかけＳＷがＯＦＦの場合）、ステップＳ１０４へ処理を進める。

ステップＳ１０３では、被写体を追尾する機能が起動された状態での撮影画像のファインダーへの表示処理を行うが、詳細は、図５を用いて後述する。
ステップＳ１０４では、通常の撮影画像のファインダーへの表示処理を行う。

ステップＳ１０５では、前述と同じく、追っかけＳＷがＯＮの場合、ステップＳ１０６へ処理を進め、追っかけＳＷがＯＦＦの場合、ステップＳ１０１へ処理を進める。

ステップＳ１０６では、被写体の選択処理を行うが、詳細は、図４を用いて後述する。

ステップＳ１０７では、ズームの指示を受けて、その指示に応じたズームイン、ズームアウトを行うが、詳細は、図６を用いて後述する。

ステップＳ１０１からステップＳ１０７については、電源ＯＦＦのイベントを検知するまで、所定時間の間隔で実行される。

次に、図４を用いて、この撮影装置１００を用いて、本発明における被写体の選択処理について説明する。尚、本処理は、システムコントローラ２１０の制御の下、処理が実行される。

ステップＳ２０１では、被写体の選択位置を取得する。この選択位置は、図７に示すような撮影画像が液晶ディスプレイ２１７へ表示された状態で、ユーザが指などでタッチ操作を行なって被写体を選択した際のタッチ位置を取得するものである。

例えば、物体３０１から物体３０８が液晶ディスプレイ２１７へ表示された状態で、ユーザが物体３０５に対してタッチ操作を行った場合、そのタッチ位置が、この被写体の選択位置に該当する。

ここで、選択された被写体が、ユーザが、以降、追跡対象とする被写体として特定される。

ステップＳ２０２では、撮影して得られた撮影画像を取得し、ステップＳ２０３では、ステップＳ２０２において取得した撮影画像に対して存在する物体を判別する物体判定を行う。

この判定方法としては、建物、木、ポール、人間等の図形パターンによりパターンマッチング等の既存技術を適用する方法を用いる。また、この判定の際に、物体が静物か動物かの判別も行うようにする。

本実施形態では、図７に示すように物体３０１から物体３０８が、判別された物体となる。

ステップＳ２０４では、ステップＳ２０３で物体と判別された物体３０１から物体３０８に関しての情報を物体判定情報として物体判定テーブル（図９）に記憶する。

物体判定テーブルは、物体を位置に識別する名称、物体の分野属性を示す分類、物体が表示されている座標系における位置Ｘ（Ｘ座標）及び位置Ｙ（Ｙ座標）、及び被写体からの距離、被写体か、あるいは、被写体の移動速度を計測するための基準となる物体かを示す種別に関する情報を物体判定情報として記憶している。

尚、座標系における各位置は、物体として判定された基準位置（例えば、中心となる位置）を設定しておいても良いし、物体を矩形に含まれるように特定し、この矩形の４点の座標を記憶しても良く、物体の位置が特定できる方法であれば何れでも良い。

ステップＳ２０５では、ステップＳ２０１の被写体の選択位置と物体判定情報の座標系における位置情報を用いて、被写体を決定する。選択位置に最も近いところに位置する物体や、選択位置の範囲内に含まれる物体などを被写体として決定する。

そして、被写体として決定された物体に関しては、物体判定テーブルの種別にその旨を記憶する。図９では、物体５（物体３０５）が被写体であることが、記憶されている。

ステップＳ２０６では、被写体と各物体との距離を、位置情報を用いて算出して、その結果を物体判定テーブルの距離へ記憶する。

ステップＳ２０７では、ステップＳ２０６で算出した距離を用いて、最も短いものであり、かつ、建物、木、ポールなどの静物を基準物体として特定し、その旨を物体判定テーブルの種別に記憶する。図９では、物体２（物体３０２）が被写体であることが、記憶されている。

次に、図５を用いて、この撮影装置１００を用いて、本発明における被写体を追尾する機能が起動された状態での撮影画像のファインダーへの表示処理について説明する。尚、本処理は、システムコントローラ２１０の制御の下、処理が実行される。

ステップＳ３０１では、撮影して得られた撮影画像を取得し、ステップＳ３０２では、ステップＳ２０３と同様に物体判定を行い、ステップＳ３０３では、ステップＳ３０２における物体判定における結果を物体判定情報（今回）として、物体判定テーブル（図９の下段）に記憶する。

ステップＳ３０４では、被写体と各物体との距離を、位置情報を用いて算出して、その結果を物体判定テーブルの物体判定情報（今回）における距離へ記憶する。

ステップＳ３０５では、選択した被写体が物体判定情報（今回）に含まれているか否かを判定し、含まれていると判定した場合は、ステップＳ３０６へ処理を進め、含まれていると判定しない場合は、ステップＳ３１０へ処理を進める。

ステップＳ３０６では、前回、物体判定テーブルへ記憶した物体判定情報（図９の上段）を取得し、ステップＳ３０７では、今回と前回との物体判定情報の被写体の位置情報を用いて移動距離を求め、今回と前回との物体判定情報を取得した時刻から、被写体の移動速度及び移動方向を求める。

ステップ３０８では、ステップＳ３０７において求めた移動距離（速度）及び移動方向を、今回と前回との物体判定情報の基準物体の位置情報を用いて補正を行う。

補正の例としては、今回と前回との物体判定情報の基準物体の位置情報を用いて、今回と前回との、基準物体の位置の変化量を求めて、被写体の移動距離からこの変化量を減算する補正の方法があげられる。

そして、この補正された移動距離を用いて、今回と前回との物体判定情報を取得した時刻から、被写体の移動速度及び移動方向を求める。

ステップＳ３０９では、ステップＳ３０８で求めた被写体の移動速度に応じた記号などを移動方向の向きを示すように撮影画像へ付与する。この記号を撮影画像へ付与する例としては、移動速度が大きいほど、太い矢印を撮影画像へ付与したり、色別の矢印を付与したり、矢印の点滅回数を増やしたりすることもあげられる。例えば、図８に示す被写体に対して矢印３０９のような表示を行う。この記号などが、ユーザに対して、何れの撮影方向で撮影すべくきかを指示するための指示情報として表示される。

ステップＳ３１０では、設定情報の解除を行うが、本ステップにおける設定情報とは、物体判定テーブルの種別に設定された情報、つまり、被写体を削除する。

ステップＳ３１１では、ズームの指示に関する情報があるか否かを判定し、あると判定した場合、ステップＳ３１２へ処理を進め、あると判定しない場合、ステップＳ３１４へ処理を進める。

ステップＳ３１２では、ズームに関する情報（３倍ズーム等）を取得し、ステップＳ３１３では、撮影画像の被写体に対して、ズーム枠を付与する。例えば、図８に示す被写体に対してズーム枠３１０のような表示を行う。ステップＳ３１４では、撮影画像を液晶ディスプレイ２１７へ出力する。

次に、図６を用いて、この撮影装置１００を用いて、本発明におけるズーム指示処理について説明する。尚、本処理は、システムコントローラ２１０の制御の下、処理が実行される。

ステップＳ４０１では、ズームボタン２２５の押下により、ズームの指示に関する情報を取得（拡大、縮小、３倍ズームなど）し、ステップＳ４０２では、ステップ４０１で取得したズームに関する情報を記憶する。

［第２の実施形態］
次に、第２の実施形態について説明する。第１の実施形態では、被写体が選択された際に基準物体が撮影画像の何れかの位置に存在する場合を想定しているが、被写体が移動するにあたり、基準物体が撮影範囲から外れることも想定されるため、第２の実施形態では、基準物体が変遷する態様を示している。

尚、基本的な構成及び処理については、第１の実施形態と同様なため説明は省略する。

第１の実施形態と異なる点は、ステップＳ３０３において物体判定情報（今回）を取得した際に、基準物体が存在しなければ、ステップＳ２０７と同一の処理を行い、基準物体を新たに設定し、物体判定テーブルへ物体判定情報（前回）として記憶を行った後、ステップＳ３１１へ処理を進める。

このような態様を備える、次回、新たに、前回と今回との物体判定情報を用いて、被写体の移動方向等を求めることが可能である。

また、本実施形態では、基準物体は、１つの物体として設定されたが、複数の物体を設定することが可能である。

このような態様を備えることで、ステップＳ３０７では、前回と今回との物体判定情報に含まれる、何れかの同一の基準物体の位置情報を用いて、被写体の移動方向等を求めることができる。

更に、全ての基準物体を設定するのではなく、それぞれの基準物体の候補となる物体間の距離が離れた物体同士を、正式な基準物体として設定することも可能である。この場合、最も離れた距離を有する物体同士を基準物体として設定する。更に、中心から、東西南北などの四方向であって、最も物体同士が離れたものを、それぞれの方向に対して設定しても良い

以上、本発明では、撮影者に対して、移動する被写体に対して、当該被写体の動態を行慮した指示情報を提示することで、撮影の支援を行うことが可能となる、という効果を奏する。

また、本発明におけるプログラムは、各処理方法をコンピュータが実行可能（読取可能）なプログラムであり、本発明の記憶媒体は、各処理方法をコンピュータが実行可能なプログラムが記憶されている。

なお、本発明におけるプログラムは、各装置の処理方法ごとのプログラムであってもよい。

以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、装置に供給し、その装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読取り実行することによっても、本発明の目的が達成されることは言うまでもない。

この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記憶した記録媒体は本発明を構成することになる。プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク，ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＤＶＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＥＥＰＲＯＭ、シリコンディスク等を用いることができる。

また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータで稼働しているＯＳ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

また、本発明は、装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。

この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。

さらに、本発明を達成するためのプログラムをネットワーク上のサーバ，データベース等から通信プログラムによりダウンロードして読み出すことによって、その装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。

１００ 撮影装置
２０１ レンズ
２０２ 撮像素子
２０３ カメラ信号処理部
２０４ 画像処理部
２０５ 前処理部
２０６ ＹＣ処理部
２０７ 電子ズーム処理部
２０８ 圧縮部
２０９ 伸長部
２１０ システムコントローラ
２１１ バッファメモリ
２１２ フラッシュメモリ
２１３ Ｉ／Ｆ回路
２１４ カードホルダ
２１５ メモリカード
２１６ ディスプレイドライバ
２１７ ディスプレイ
２１８ サウンドドライバ
２１９ スピーカ
２２０ 操作部
２２１ 電源スイッチ
２２２ モードダイヤル
２２３ 撮影ボタン
２２４ カーソルキー
２２５ ズームボタン
２２６ 閲覧ボタン
２２７ レンズ制御部
２２８ ＬＥＤドライバ
２２９ ランプ
２３０ 書込み部
２３１ 磁気センサ
２３２ 加速度センサ
２３３ 角速度センサ

Claims (9)

1. 撮影者の被写体撮影を支援する撮影装置であって、
   撮影して得られた撮影画像を取得する撮影画像取得手段と、
   前記撮影画像から被写体を選択するための位置を受け付ける受付手段と、
   前記撮影画像から複数の被写体を取得する取得手段と、
   前記受付手段によって受け付けた位置から前記取得手段によって取得した被写体から追跡対象とする被写体と特定する被写体特定手段と、
   前記被写体特定手段によって特定された追跡対象となる被写体と、前記取得手段によって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定手段と、
   前記被写体特定手段によって特定された追跡対象となる被写体と、前記基準物体特定手段によって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出手段と、
   前記距離算出手段によって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示手段と、
   を備えたことを特徴とする撮影装置。
2. 前記撮影画像取得手段と、前記取得手段と、前記距離算出手段と、前記表示手段と、を所定時間の間隔で実行することを特徴とする請求項１に記載の撮影装置。
3. 前記距離算出手段は、前回と今回との被写体の移動距離に対して、前回と今回との基準物体との移動距離で補正したものを前記被写体の移動速度とすることを特徴とする請求項２に記載の撮影装置。
4. 前記基準物体特定手段は、前記基準物体が、前記取得手段によって取得した撮影画像に存在しない場合、新たな基準物体を特定することを特徴とする請求項２または３に記載の撮影装置。
5. 前記基準物体特定手段は、複数の基準物体を特定し、
   前記距離算出手段は、前回と今回との同一となる基準物体の移動距離を用いて、前記被写体の移動速度を求めることを特徴とする請求項２乃至３の何れか１項に記載の撮影装置。
6. 前記基準物体特定手段は、前記取得手段で取得した被写体であって、最も離れた被写体同士を基準物体として設定することを特徴とする請求項５に記載の撮影装置。
7. 前記指示情報は、矢印であって、
   前記表示手段は、前記移動距離から求まる移動速度に応じて、矢印の太さを変更することを特徴とする請求項１乃至６の何れか１項に記載の撮影装置。
8. 撮影者の被写体撮影を支援する撮影装置の制御方法であって、
   前記撮影装置は、
   撮影して得られた撮影画像を取得する撮影画像取得ステップと、
   前記撮影画像から被写体を選択するための位置を受け付ける受付ステップと、
   前記撮影画像から複数の被写体を取得する取得ステップと、
   前記受付ステップによって受け付けた位置から前記取得ステップによって取得した被写体から追跡対象とする被写体と特定する被写体特定ステップと、
   前記被写体特定ステップによって特定された追跡対象となる被写体と、前記取得ステップによって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定ステップと、
   前記被写体特定ステップによって特定された追跡対象となる被写体と、前記基準物体特定ステップによって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出ステップと、
   前記距離算出ステップによって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示ステップと、
   を実行することを特徴とする撮影装置の制御方法。
9. 撮影者の被写体撮影を支援する撮影装置で読取実行可能なプログラムであって、
   前記撮影装置を、
   撮影して得られた撮影画像を取得する撮影画像取得手段と、
   前記撮影画像から被写体を選択するための位置を受け付ける受付手段と、
   前記撮影画像から複数の被写体を取得する取得手段と、
   前記受付手段によって受け付けた位置から前記取得手段によって取得した被写体から追跡対象とする被写体と特定する被写体特定手段と、
   前記被写体特定手段によって特定された追跡対象となる被写体と、前記取得手段によって取得した前記追跡対象となる被写体と異なる被写体と、前記追跡対象となる被写体との距離から、前記追跡対象となる被写体の移動距離を求めるための基準物体を特定する基準物体特定手段と、
   前記被写体特定手段によって特定された追跡対象となる被写体と、前記基準物体特定手段によって特定された基準物体と、の距離から、追跡対象となる被写体の移動距離及び移動速度を求める距離算出手段と、
   前記距離算出手段によって求めた移動速度に応じて、撮影方向を示す指示情報を表示部へ表示する表示手段と、
   して機能させることを特徴とするプログラム。

Images