JP6623568B2 - 撮像装置、撮像制御方法及びプログラム - Google Patents

Description

本発明は、撮像装置、撮像制御方法及びプログラムに関する。

従来、撮像装置によって撮像を行う際に、画像内に個人が含まれているか否かを特定するために、顔画像の認識を利用する方法が知られている。ところが、このような方法では、顔画像を認識する上で画像認識精度が十分でないという問題や、撮像装置に予め顔画像を登録しておかなければならず、プライバシー保護の観点から望ましくないといった問題があった。
ここで、特許文献１には、撮影した画角の領域（撮影位置）において検出された識別子のうち、識別子と関連づけて記憶された特徴情報と一致する被写体が撮影画像内に存在するか否かを判定することによって、個人を特定する方法が記載されている。

特開２０１３−０８５２００号公報

しかしながら、特許文献１に記載された技術においては、予め登録された特徴情報との一致を判定する際の困難性等の問題があった。

本発明は、このような状況に鑑みてなされたものであり、撮影を行う際に、特定の個人が撮影画像に含まれているか否かをより容易に判定することを目的とする。

前記目的を達成するため、本発明の撮像装置の一態様は、
撮像手段と、
前記撮像手段による撮像時の自装置の位置の情報を取得する第１の情報取得手段と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得手段と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得手段と、
前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離を取得する第４の情報取得手段と、
前記第１の情報取得手段によって取得された前記自装置の位置の情報と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、前記第４の情報取得手段によって取得した前記被写体の前記自装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得手段によって取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する、特定手段と、
を備える、
ことを特徴とする。
また、前記目的を達成するため、本発明の撮像制御方法の一態様は、
撮像手段を備える撮像装置において実行される撮像制御方法であって、
前記撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得ステップと、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得ステップと、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得ステップと、
前記撮像手段によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得ステップと、
前記第１の情報取得ステップにおいて取得された前記撮像装置の位置の情報と、前記第２の情報取得ステップにおいて取得された前記画像における前記被写体の方向と、前記第４の情報取得ステップにおいて取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得ステップにおいて取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定ステップと、
を含む、
ことを特徴とする。
また、前記目的を達成するため、本発明のプログラムの一態様は、
撮像手段を備えたコンピュータに、
前記撮像手段による撮像時の前記コンピュータの位置の情報を取得する第１の情報取得機能と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得機能と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得機能と、
前記撮像手段によって撮像された前記画像の前記被写体の前記コンピュータからの距離を取得する第４の情報取得機能と、
前記第１の情報取得機能によって取得された前記撮像時の位置の情報と、前記第２の情報取得機能によって取得された前記画像における前記被写体の方向と、前記第４の情報取得機能において取得された前記被写体の前記コンピュータからの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得機能において取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定機能と、
を実現させる、
ことを特徴とする。

本発明によれば、撮影を行う際に、特定の個人が撮影画像に含まれているか否かをより容易に判定することができる。

本発明の一実施形態に係る撮影システム１のシステム構成を示す模式図である。 撮像装置のハードウェアの構成を示すブロック図である。 無線装置のハードウェア構成を示すブロック図である。 撮像装置の機能的構成のうち、被写体特定処理を実行するための機能的構成を示す機能ブロック図である。 被写体までの地表距離を示す模式図である。 無線装置を備えた被写体が遮蔽されることなく撮影画像に撮影された状態を示す模式図である。 無線装置を備えた被写体の一部が撮影画像において遮蔽されている状態を示す模式図である。 図４の機能的構成を有する図２の撮像装置が実行する被写体特定処理の流れを説明するフローチャートである。

以下、本発明の実施形態について、図面を用いて説明する。

図１は、本発明の一実施形態に係る撮影システム１のシステム構成を示す模式図である。
撮影システム１は、撮像装置２と、無線装置３とを含んで構成され、撮像装置２と無線装置３とは、無線通信（ＢＬＥ（Ｂｌｕｅtｏｏｔｈ（登録商標） Ｌｏｗ Ｅｎｅｒｇｙ）、ｉＢｅａｃｏｎ等）によって通信可能に構成されている。
図２は、撮像装置２のハードウェアの構成を示すブロック図である。
撮像装置２は、例えばデジタルカメラとして構成される。

撮像装置２は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）部１７と、加速度センサ部１８と、地磁気センサ部１９と、距離センサ部２０と、入力部２１と、出力部２２と、記憶部２３と、通信部２４と、ドライブ２５と、を備えている。

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、または、記憶部２３からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。

ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、ＧＰＳ部１７、加速度センサ部１８、地磁気センサ部１９、距離センサ部２０、入力部２１、出力部２２、記憶部２３、通信部２４及びドライブ２５が接続されている。

撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。

光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。

イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力される。
このような撮像部１６の出力信号を、以下、「撮像画像のデータ」と呼ぶ。撮像画像のデータは、ＣＰＵ１１等に適宜供給される。

ＧＰＳ部１７は、ＧＰＳ衛星から受信したＧＰＳ信号に基づいて、撮像装置２の位置（緯度、経度、高度）及びＧＰＳによって示される現在時刻を検出する。
加速度センサ部１８は、撮像装置２における３軸方向の加速度をそれぞれ検出する。
地磁気センサ部１９は、地磁気の向きを検出する。
距離センサ部２０は、距離画像センサあるいはステレオカメラ等の装置によって構成され、撮像装置２の被写体までの距離を検出する。このとき、距離センサ部２０は、撮像装置２の画角内における複数の位置の被写体について、距離を検出する。なお、被写体までの距離は、距離センサ部２０によって検出することの他、撮像部１６におけるＡＦ（Ａｕｔｏ Ｆｏｃｕｓ）制御の測距機能を用いて検出することとしてもよい。

入力部２１は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。
出力部２２は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
記憶部２３は、ハードディスクあるいはＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成され、各種画像のデータを記憶する。
通信部２４は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。また、通信部２４は、ＢＬＥあるいはｉＢｅａｃｏｎ等の無線通信によって、無線装置３との間で行う通信を制御する。

ドライブ２５には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア２６が適宜装着される。ドライブ２５によってリムーバブルメディア２６から読み出されたプログラムは、必要に応じて記憶部２３にインストールされる。また、リムーバブルメディア２６は、記憶部２３に記憶されている画像のデータ等の各種データも、記憶部２３と同様に記憶することができる。

図３は、無線装置３のハードウェア構成を示すブロック図である。
無線装置３は、ＣＰＵ３１と、ＲＯＭ３２と、ＲＡＭ３３と、バス３４と、入出力インターフェース３５と、ＧＰＳ部３６と、入力部３７と、通信部３８とを備えている。
これら各機能部の構成は、図２に示す撮像装置２の各機能部と同様である。

図４は、このような撮像装置２の機能的構成のうち、被写体特定処理を実行するための機能的構成を示す機能ブロック図である。
被写体特定処理とは、撮像装置２において検出された被写体の方向及び距離と、無線装置３から送信された無線装置３の位置とに基づいて、撮影された被写体を特定する一連の処理をいう。なお、撮像装置２において、被写体特定処理が実行される場合、無線装置３において、予め設定された時間（例えば１秒毎）に、無線装置３の位置を取得し、取得した位置を、通信時刻を示す情報と共に撮像装置２に送信する処理が繰り返される。

被写体特定処理を実行する場合には、図４に示すように、ＣＰＵ１１において、位置取得部５１と、方位取得部５２と、姿勢取得部５３と、距離取得部５４と、装置情報取得部５５と、被写体特定部５６と、記録制御部５７と、撮影制御部５８とが機能する。
また、記憶部２３の一領域には、画像記憶部６１と、装置情報記憶部６２とが設定される。
画像記憶部６１には、撮像装置２において撮影された撮像画像のデータが記憶される。
装置情報記憶部６２には、撮像装置２が無線通信を行った無線装置３に関する情報（無線装置３のＩＤ、通信時刻、位置情報等）が記憶される。

位置取得部５１は、ＧＰＳ部１７によって検出された撮像装置２の位置（緯度、経度及び高度）を取得する。
方位取得部５２は、地磁気センサ部１９によって検出された地磁気の向きに基づいて、撮像装置２が向いている方位を取得する。
姿勢取得部５３は、加速度センサ部１８によって検出された撮像装置２における３軸方向の加速度に基づいて、撮像装置２の姿勢を取得する。本実施形態においては、姿勢取得部５３は、水平方向を基準とした撮像装置２の仰角または俯角を検出する。
距離取得部５４は、距離センサ部２０によって検出された距離に基づいて、被写体までの地表における距離（地表距離）を取得する。

図５は、被写体までの地表距離を示す模式図である。
図５に示すように、距離取得部５４は、距離センサ部２０によって検出された被写体までの距離ｄに対して、撮像装置２の俯角（または仰角）θの余弦を取得することにより、被写体までの距離（地表距離）を取得する（被写体までの距離＝ｄｃｏｓθ）。
図４に戻り、装置情報取得部５５は、通信部２４を介して無線装置３に関する情報（無線装置３のＩＤ、通信時刻、位置情報等）を取得する。
被写体特定部５６は、撮像装置２において撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の位置と、に基づいて、被写体の方向を算出し、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出する。
また、被写体特定部５６は、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）と、が一致するか否か（具体的には、設定された範囲内にあるか否か）を判定し、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
これにより、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。

図６は、無線装置３を備えた被写体が遮蔽されることなく撮影画像に撮影された状態を示す模式図である。
図６に示すように、撮像装置２における撮影画像の範囲において、無線装置３を備えた被写体が含まれる場合、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。図６に示す例では、被写体となっているユーザＡ及びユーザＢまでの距離が、距離取得部５４によって取得された各被写体までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離と、で一致しているため、ユーザＡ及びユーザＢが撮影画像に写されているものと判定される。

図７は、無線装置３を備えた被写体の一部が撮影画像において遮蔽されている状態を示す模式図である。
図７に示すように、撮像装置２における撮影画像の範囲において、無線装置３を備えた被写体が含まれる場合、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置とに基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）とから、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。図７に示す例では、被写体となっているユーザＡまでの距離が、距離取得部５４によって取得された被写体までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離と、で一致しているため、ユーザＡが撮影画像に写されているものと判定される。一方、ユーザＢまでの距離が、距離取得部５４によって取得された被写体（遮蔽物）までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離とで一致していないため、ユーザＢは撮影画像に写されていないものと判定される。

図４に戻り、記録制御部５７は、撮像装置２において撮影された撮像画像のデータに対して、被写体特定部５６によって無線装置３を備えた被写体であると特定された場合に、無線装置３に関する情報（例えば、無線装置３のＩＤ）を付加する。これにより、ユーザは、撮影画像に無線装置３を備えた被写体が写されていることを把握することができる。また、このとき、記録制御部５７が、画角内の位置と無線装置３に関する情報とを対応付けて付加することとしてもよい。この場合、撮影画像に無線装置３を備えた被写体が写されていることのみならず、いずれの位置の被写体が無線装置３を備えた被写体であるかを把握することができる。
撮影制御部５８は、ユーザの設定に応じて、撮像装置２における撮影の制御を行う。例えば、撮影制御部５８は、ユーザによって設定された撮影間隔及び撮影時間によってインターバル撮影を行うよう制御する。

図８は、図４の機能的構成を有する図２の撮像装置２が実行する被写体特定処理の流れを説明するフローチャートである。
被写体特定処理は、ユーザによる入力部２１への被写体特定処理の開始の操作により開始される。なお、本実施形態においては、被写体特定処理がインターバル撮影において実行される場合を例として説明する。

ステップＳ１において、装置情報取得部５５は、無線装置３に関する情報を取得する。なお、無線装置３に関する情報は、逐次受信され、装置情報記憶部６２に記憶される。
ステップＳ２において、撮影制御部５８は、撮影を実行する。
ステップＳ３において、撮影制御部５８は、撮影画像、撮影時刻、画角の情報、撮像装置２の位置、方位角及び仰角または俯角を記憶する。

ステップＳ４において、被写体特定部５６は、撮影時刻と、無線装置３に関する情報における通信時刻と、が一致するか否かの判定を行う。
撮影時刻と、無線装置３に関する情報における通信時刻と、が一致する場合、ステップＳ４においてＹＥＳと判定されて、処理はステップＳ５に移行する。
一方、撮影時刻と、無線装置３に関する情報における通信時刻と、が一致しない場合、ステップＳ４においてＮＯと判定されて、処理はステップＳ９に移行する。

ステップＳ５において、被写体特定部５６は、撮影時刻と通信時刻とが一致する時刻における撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向を算出する。

ステップＳ６において、被写体特定部５６は、算出された方向と、距離取得部５４によって取得された距離（地表距離）とから、被写体の位置を算出する。
ステップＳ７において、被写体特定部５６は、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かの判定を行う。
算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致する場合、ステップＳ６においてＹＥＳと判定されて、処理はステップＳ８に移行する。
一方、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致しない場合、ステップＳ７においてＮＯと判定されて、処理はステップＳ９に移行する。

ステップＳ８において、被写体特定部５６は、撮影画像に無線装置３に関する情報（ここでは無線装置３のＩＤとする）を付加して画像記憶部６１に記憶する。
ステップＳ９において、撮影制御部５８は、撮影の終了が指示されているか否かの判定を行う。
撮影の終了が指示されていない場合、ステップＳ９においてＮＯと判定されて、処理はステップＳ１０に移行する。
一方、撮影の終了が指示されている場合、ステップＳ９においてＹＥＳと判定されて、被写体特定処理は終了となる。

ステップＳ１０において、撮影制御部５８は、インターバル撮影の撮影間隔（インターバル時間）を経過しているか否かの判定を行う。
インターバル撮影の撮影間隔を経過していない場合、ステップＳ１０においてＮＯと判定されて、ステップＳ１０の処理が繰り返される。
インターバル撮影の撮影間隔を経過している場合、ステップＳ１０においてＹＥＳと判定されて、処理はステップＳ２に移行する。

このような処理により、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置とに基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
そのため、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。
したがって、撮像を行う際に、特定の個人が撮像画像に含まれているか否かをより容易に判定することができる。
なお、このように被写体のＩＤが付加された撮影画像とすることにより、記憶された画像が検索される場合、無線装置３のＩＤを指定することによって、ＩＤを付加して記憶された画像のみが索出される。即ち、ユーザは自らが写った画像のみを選択することができる。

［変形例１］
上述の実施形態において、被写体特定部５６における被写体の特定処理は、以下のような処理とすることも可能である。
即ち、被写体特定部５６は、撮像装置２において撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向を算出する。
また、被写体特定部５６は、撮像装置２の位置と、無線装置３に関する情報（無線装置３の位置）とに基づいて、撮像装置２から無線装置３までの方向及び距離を算出する。
そして、被写体特定部５６は、算出された被写体の方向と、距離取得部５４によって取得された距離（地表距離）とが、算出された撮像装置２から無線装置３までの方向及び距離と一致するか否かを判定し、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
このような処理によっても、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。

［変形例２］
上述の実施形態及び変形例において、撮影された被写体を特定する際に、撮影画像における被写体の距離が無線装置３に関する情報から取得される無線装置３までの距離と一致するか否かを判定することとしたが、これに限られない。
即ち、被写体までの距離の一致を判定することなく、撮影画像における被写体の方位が、無線装置３に関する情報から取得される無線装置３の方位と一致するか否かを判定し、一致している場合に、その被写体が撮影画像に写されているものとしてもよい。
これにより、無線装置３が撮影画像におけるいずれの位置に対応するかを特定することができる。
したがって、遮蔽物に遮蔽されている場合等であっても、被写体が画角内に存在していた場合には、撮影されているものとして、撮影画像に無線装置３のＩＤを付加し、被写体として特定することができる。

［変形例３］
上述の実施形態において、遮蔽物に遮蔽されている場合等、被写体が視認できない場合であっても、ユーザが画角内の方向に存在している場合には、撮影画像のそのユーザが備えるＩＤを付加して記憶することとしてもよい。そして、ユーザの設定に応じて、遮蔽物等に遮蔽された位置にユーザが存在していることを、ユーザが存在していることを示すメッセージ（吹き出しの形態で表示されたＩＤ等）を表示することとしてもよい。
これにより、被写体として視認できない場合であっても、ユーザが存在していた状況を撮影した撮影画像に、そのユーザを対応付けることができる。

以上のように構成される撮像装置２は、撮像部１６と、位置取得部５１と、方位取得部５２と、装置情報取得部５５と、被写体特定部５６とを備える。
位置取得部５１は、撮像部１６による撮像時の撮像装置２の位置の情報を取得する。
方位取得部５２は、撮像部１６によって撮像された画像の方向を取得する。
装置情報取得部５５は、撮像部１６による撮像時の被写体が備える無線装置３の位置の情報を取得する。
被写体特定部５６は、位置取得部５１によって取得した撮像装置２の位置の情報と、方位取得部５２によって取得した画像の方向と、装置情報取得部５５によって取得した無線装置３の位置の情報とに基づいて、撮像部１６によって撮像された画像の被写体を特定する。
これにより、無線装置３が撮影画像におけるいずれの位置に対応するかを特定することができる。
したがって、画角内に存在していた被写体を特定することができ、撮影を行う際に、特定の個人が撮影画像に含まれているか否かをより容易に判定することができる。

また、被写体特定部５６は、位置取得部５１によって取得した撮像装置２の位置の情報と、方位取得部５２によって取得した画像の方向とに基づいて算出された被写体が位置する方向に、装置情報取得部５５によって位置の情報を取得した無線装置３が位置している場合に、被写体が無線装置３を備えた被写体と特定する。
これにより、被写体の位置に関する情報の一致性に基づいて、無線装置３を備える被写体を特定することができる。

また、撮像装置２は、距離取得部５４を備える。
距離取得部５４は、撮像部１６によって撮像された画像の被写体の撮像装置２からの距離を取得する。
被写体特定部５６は、位置取得部５１によって取得した撮像装置２の位置の情報と、当該位置の情報と方位取得部５２によって取得した画像の方向とに基づいて算出された被写体が位置する方向と、距離取得部５４によって取得した被写体の撮像装置２からの距離とに基づいて算出された被写体の位置と、装置情報取得部５５によって取得した無線装置３の位置とが、所定の範囲内である場合に、被写体が無線装置３を備えた被写体と特定する。
これにより、被写体の距離の一致性に基づいて、無線装置３を備える被写体を特定することができる。

また、撮像装置２は、姿勢取得部５３を備える。
姿勢取得部５３は、撮像装置２の仰角または俯角のいずれかを取得する。
方位取得部５２は、被写体が位置する方位を取得する。
画像の方向は、仰角または俯角のいずれか及び方位角によって表される。
これにより、撮像時に撮像装置２が仰角あるいは俯角をもって撮像を行った場合であっても、適切に被写体を特定することが可能となる。

また、被写体特定部５６は、被写体が位置する方向を、画像の方向と、撮像部１６によって撮像された画像内の被写体の画像位置と、から算出する。
これにより、撮像装置２において検出される情報に基づいて、被写体の方向を算出する

また、無線装置３には、無線装置３を識別できる識別番号が設定されている。
撮像装置２は、特定された被写体が含まれる撮影画像を、該識別番号と共に記録する。
これにより、撮影画像において、被写体を識別して記録することができる。

なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

上述の実施形態では、撮像装置２において被写体特定処理を実行するものとして説明したが、これに限られない。
即ち、撮影画像及び撮影時に撮像装置２において取得された情報を用いて、撮像機能を有していない情報処理装置等によって、被写体特定処理を実行することも可能である。

また、上述の実施形態では、撮影画像を撮影した後に被写体特定処理を実行する場合を例に挙げて説明したが、これに限られない。
即ち、画像の撮影時に、被写体特定処理を実行し、撮影完了と同時に、撮影画像に写されている被写体の無線装置３のＩＤを撮影画像に付加することとしてもよい。

また、上述の実施形態では、本発明が適用される撮像装置２は、デジタルカメラを例として説明したが、特にこれに限定されない。
例えば、本発明は、情報処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図４の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置２に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図４の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア２６により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア２６は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ），Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｃ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図２のＲＯＭ１２や、図２の記憶部２３に含まれるハードディスク等で構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段等により構成される全体的な装置を意味するものとする。

以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
撮像手段と、
前記撮像手段による撮像時の自装置の位置の情報を取得する第１の情報取得手段と、
前記撮像手段によって撮像された画像の方向を取得する第２の情報取得手段と、
前記撮像手段による撮像時の被写体が備える無線装置の位置の情報を取得する第３の情報取得手段と、
前記第１の情報取得手段によって取得した前記自装置の位置の情報と、前記第２の情報取得手段によって取得した前記画像の方向と、前記第３の情報取得手段によって取得した前記無線装置の位置の情報とに基づいて、前記撮像手段によって撮像された画像の被写体を特定する特定手段と、
を備えることを特徴とする撮像装置。
［付記２］
前記特定手段は、前記第１の情報取得手段によって取得した前記自装置の位置の情報と、前記第２の情報取得手段によって取得した前記画像の方向とに基づいて算出された前記被写体が位置する方向に、前記第３の情報取得手段によって前記位置の情報を取得した前記無線装置が位置している場合に、前記被写体が前記無線装置を備えた被写体と特定することを特徴とする付記１に記載の撮像装置。
［付記３］
前記撮像手段によって撮像された画像の被写体の前記撮像装置からの距離を取得する第４の情報取得手段を、さらに備え、
前記特定手段は、
前記第１の情報取得手段によって取得した前記自装置の位置の情報と、当該自装置の位置の情報と前記第２の情報取得手段によって取得した前記画像の方向とに基づいて算出された前記被写体が位置する方向と、前記第４の情報取得手段によって取得した前記被写体の前記撮像装置からの距離とに基づいて算出された前記被写体の位置と、前記第３の情報取得手段によって取得した前記無線装置の位置とが、所定の範囲内である場合に、前記被写体が前記無線装置を備えた被写体と特定することを特徴とする付記１に記載の撮像装置。
［付記４］
前記第２の情報取得手段によって取得する前記画像の方向は、仰角または俯角のいずれか及び方位であることを特徴とする付記１から３のいずれか１つに記載の撮像装置。
［付記５］
前記特定手段は、前記被写体が位置する方向を、前記画像の方向と、前記撮像手段によって撮像された画像内の被写体の位置とから算出することを特徴とする付記１から４のいずれか１つに記載の撮像装置。
［付記６］
前記無線装置には、固体を識別できる識別番号が設定されており、
前記撮像装置は特定された被写体が含まれる撮影画像を、該識別番号と共に記録することを特徴とする付記１から５のいずれか１つに記載の撮像装置。
［付記７］
撮像手段を備える撮像装置において実行される撮像制御方法であって、
前記撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得ステップと、
前記撮像手段によって撮像された画像の方向を取得する第２の情報取得ステップと、
前記撮像手段による撮像時の被写体が備える無線装置の位置の情報を取得する第３の情報取得ステップと、
前記第１の情報取得ステップにおいて取得した前記撮像装置の位置の情報と、前記第２の情報取得ステップにおいて取得した前記画像の方向と、前記第３の情報取得ステップにおいて取得した前記無線装置の位置の情報とに基づいて、前記撮像手段によって撮像された画像の被写体を特定する特定ステップと、
を含むことを特徴とする撮像制御方法。
［付記８］
コンピュータに、
撮像手段による撮像時の位置の情報を取得する第１の情報取得機能と、
前記撮像手段によって撮像された画像の方向を取得する第２の情報取得機能と、
前記撮像手段による撮像時の被写体が備える無線装置の位置の情報を取得する第３の情報取得機能と、
前記第１の情報取得機能によって取得した前記撮像時の位置の情報と、前記第２の情報取得機能によって取得した前記画像の方向と、前記第３の情報取得機能とによって取得した前記無線装置の位置の情報とに基づいて、前記撮像手段によって撮像された画像の被写体を特定する特定機能と、
を実現させることを特徴とするプログラム。

１・・・撮影システム，２・・・撮像装置，３・・・無線装置，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・撮像部，１７・・・ＧＰＳ部，１８・・・加速度センサ部，１９・・・地磁気センサ部，２０・・・距離センサ部，２１・・・入力部，２２・・・出力部，２３・・・記憶部，２４・・・通信部，２５・・・ドライブ，２６・・・リムーバブルメディア，５１・・・位置取得部，５２・・・方位取得部，５３・・・姿勢取得部，５４・・・距離取得部，５５・・・装置情報取得部，５６・・・被写体特定部，５７・・・記録制御部，５８・・・撮影制御部，６１・・・画像記憶部，６２・・・装置情報記憶部

Claims (16)

1. 撮像手段と、
   前記撮像手段による撮像時の自装置の位置の情報を取得する第１の情報取得手段と、
   前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得手段と、
   前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得手段と、
   前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離を取得する第４の情報取得手段と、
   前記第１の情報取得手段によって取得された前記自装置の位置の情報と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、前記第４の情報取得手段によって取得した前記被写体の前記自装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得手段によって取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する、特定手段と、
   を備える、
   ことを特徴とする撮像装置。
2. 前記第２の情報取得手段によって取得する前記画像における前記被写体の方向は、仰角または俯角のいずれか及び方位角によって表されることを特徴とする請求項１に記載の撮像装置。
3. 前記特定手段は、前記被写体の位置を、前記画像における前記被写体の方向と、前記撮像手段によって撮像された前記画像内の前記被写体の位置と、画角の情報と、から算出することを特徴とする請求項１又は２に記載の撮像装置。
4. 前記無線装置には、前記無線装置を識別できる識別番号が設定されており、
   前記自装置は、特定された前記被写体が含まれる前記画像を、前記識別番号と共に記録することを特徴とする請求項１から３のいずれか１項に記載の撮像装置。
5. 前記特定手段は、算出された前記被写体の位置と、前記第３の情報取得手段によって取得された前記無線装置の位置と、が前記所定の範囲内でない場合に、前記被写体が遮蔽物によって遮蔽されている被写体であると特定する、
   請求項１から４のいずれか１項に記載の撮像装置。
6. 前記第１の情報取得手段は、ＧＰＳ部を有し、ＧＰＳ衛星から受信したＧＰＳ信号に基づいて、前記撮像手段による撮像時における、前記自装置の緯度、経度、高度を含む位置の情報及び現在時刻を検出する、
   請求項１に記載の撮像装置。
7. 前記第２の情報取得手段は、地磁気センサ部を有し、前記地磁気センサ部によって検出された地磁気の向きに基づいて、前記撮像手段による撮像時における前記自装置が向いている方位を取得する、
   請求項１に記載の撮像装置。
8. 前記第２の情報取得手段は、加速度センサ部を有し、前記加速度センサ部によって検出された３軸方向の加速度に基づいて、前記撮像手段による撮像時における前記自装置の姿勢を取得する、
   請求項１に記載の撮像装置。
9. 前記第３の情報取得手段は、通信部を有し、前記通信部を介して前記無線装置の識別番号、通信時刻、位置情報を含む前記無線装置に関する情報を取得する、
   請求項１に記載の撮像装置。
10. 前記第４の情報取得手段は、距離センサ部を有し、前記自装置の画角内における複数の前記被写体について、前記撮像手段による撮像時における前記被写体の前記自装置からの前記距離を検出する、
    請求項１に記載の撮像装置。
11. 前記距離センサ部は、距離画像センサ又はステレオカメラ又は前記撮像手段の自動焦点制御機能を実現する測距センサである、
    請求項１０に記載の撮像装置。
12. 前記第４の情報取得手段は、距離センサ部を有し、前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、から前記被写体の前記自装置からの地表距離を取得する、
    請求項１に記載の撮像装置。
13. 前記第４の情報取得手段は、前記距離センサ部によって検出された前記被写体までの前記距離ｄと、前記自装置の俯角又は仰角θの余弦と、から、前記被写体までの前記地表距離ｄ・ｃｏｓθを取得する、
    請求項１２に記載の撮像装置。
14. 前記画像のデータを記憶する記憶手段と、
    前記記憶手段を制御する記録制御手段と、
    を更に備え、
    前記記録制御手段は、前記自装置において撮影された前記画像のデータに対して、前記特定手段によって前記無線装置を備えた前記被写体であると特定された場合に、前記無線装置の識別番号、画角内の位置を含む前記無線装置に関する情報を付加して、前記記憶手段に前記画像のデータを記憶する、
    請求項１に記載の撮像装置。
15. 撮像手段を備える撮像装置において実行される撮像制御方法であって、
    前記撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得ステップと、
    前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得ステップと、
    前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得ステップと、
    前記撮像手段によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得ステップと、
    前記第１の情報取得ステップにおいて取得された前記撮像装置の位置の情報と、前記第２の情報取得ステップにおいて取得された前記画像における前記被写体の方向と、前記第４の情報取得ステップにおいて取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得ステップにおいて取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定ステップと、
    を含む、
    ことを特徴とする撮像制御方法。
16. 撮像手段を備えたコンピュータに、
    前記撮像手段による撮像時の前記コンピュータの位置の情報を取得する第１の情報取得機能と、
    前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得機能と、
    前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得機能と、
    前記撮像手段によって撮像された前記画像の前記被写体の前記コンピュータからの距離を取得する第４の情報取得機能と、
    前記第１の情報取得機能によって取得された前記撮像時の位置の情報と、前記第２の情報取得機能によって取得された前記画像における前記被写体の方向と、前記第４の情報取得機能において取得された前記被写体の前記コンピュータからの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得機能において取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定機能と、
    を実現させる、
    ことを特徴とするプログラム。

Images