JP2011082770A - Data generation apparatus, method of controlling the same, and program - Google Patents
Data generation apparatus, method of controlling the same, and program Download PDFInfo
- Publication number
- JP2011082770A JP2011082770A JP2009232868A JP2009232868A JP2011082770A JP 2011082770 A JP2011082770 A JP 2011082770A JP 2009232868 A JP2009232868 A JP 2009232868A JP 2009232868 A JP2009232868 A JP 2009232868A JP 2011082770 A JP2011082770 A JP 2011082770A
- Authority
- JP
- Japan
- Prior art keywords
- data
- movement state
- generated
- position information
- data generation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
Description
本発明は、データ生成装置及びその制御方法、プログラムに関する。 The present invention relates to a data generation apparatus, a control method therefor, and a program.
近年、デジタルカメラの普及等により、大量の電子化された画像データが蓄積されるようになってきている。そのため、画像の検索や整理をより容易に行えたり、煩雑になりがちな画像を利用者にとって分かり易く表示したりできる技術に対する要求が高い。これらの要求に応えるためには、画像の所有者の記憶や印象と画像とを結びつける情報を扱えることが重要になる。この情報は、撮影時間であったり、撮影場所であったり、被写体であったりと様々である。このような背景において、撮影機器によっては、位置情報を測定する機構を搭載したものも出てきており、測定した位置情報を画像に自動で付与することができる(特許文献1参照)。 In recent years, with the spread of digital cameras and the like, a large amount of digitized image data has been accumulated. For this reason, there is a high demand for a technique capable of more easily searching and organizing images and displaying images that tend to be complicated for the user. In order to meet these demands, it is important to be able to handle information that links the memory and impression of the image owner with the image. This information varies depending on the shooting time, the shooting location, and the subject. Against this background, some photographic devices are equipped with a mechanism for measuring position information, and the measured position information can be automatically added to an image (see Patent Document 1).
しかしながら、位置情報が確定するまでには時間がかかることが多い。例えば、位置の測定手段として一般的なGPS(Global Positioning System)では、測定開始から確定までに、概ね次のような手順を踏む。まず、GPS受信機で信号を受信可能なGPS衛星を調べる。衛星は3機乃至4機必要である。次に、該GPS衛星から受信した信号から、各衛星と受信機の距離をそれぞれ算出する。そして、該受信した信号から各々の衛星の位置を取得し、該衛星位置上で算出した距離等から、受信機の位置を計算する。このようにGPS衛星の発見や、距離や位置を求める計算処理が必要になるため、これらの一連の処理には、分オーダーの時間を要する。あるいは、携帯電話のように他の通信手段をさらに持つことができれば、該通信手段が通信している基地局から情報を取得する。これにより、GPSによる位置測定を加速することができる場合もあるが、それであっても概ね数十秒程度の時間を要する。 However, it often takes time to determine the position information. For example, in a general GPS (Global Positioning System) as a position measuring means, the following procedure is generally performed from the start of measurement to the determination. First, GPS satellites that can receive signals with a GPS receiver are examined. Three or four satellites are required. Next, the distance between each satellite and the receiver is calculated from the signal received from the GPS satellite. Then, the position of each satellite is acquired from the received signal, and the position of the receiver is calculated from the distance calculated on the satellite position. As described above, since it is necessary to perform a calculation process for finding a GPS satellite and obtaining a distance and a position, a series of processes requires a minute order time. Or if it can have another communication means like a mobile telephone, information will be acquired from the base station which this communication means is communicating. Thereby, the position measurement by GPS may be accelerated, but even so, it takes about several tens of seconds.
一方、撮影機器は、電源を入れてからすぐに撮影を開始できる。このため、位置確定まで時間がかかるようだと、位置が未確定の間に撮影が行われることも少なくない。場合によっては、位置が未確定の間に相当数の撮影が行われることも考えられる。従来は、このように位置が未確定の間に撮影された画像については、正しい撮影位置が分からないため、画像に撮影位置情報を関連付けることができないという問題があった。 On the other hand, the photographing device can start photographing immediately after the power is turned on. For this reason, if it takes time to determine the position, it is often the case that shooting is performed while the position is not yet determined. In some cases, a considerable number of images may be taken while the position is uncertain. Conventionally, there has been a problem in that, with respect to an image shot while the position has not been determined in this manner, the correct shooting position cannot be known, so that shooting position information cannot be associated with the image.
また、同様の問題は画像生成に限定されるものではなく、生成したデータを、データ生成を行った位置の情報と共に管理するデータ生成装置においても生ずるものである。 The same problem is not limited to image generation, but also occurs in a data generation apparatus that manages generated data together with information on the position where the data was generated.
そこで、本発明は、上記の課題に鑑み、位置が未確定の間に撮影された画像や生成されたデータにつき、撮影位置や生成位置を推定する技術を提供することを目的とする。 In view of the above problems, an object of the present invention is to provide a technique for estimating a shooting position and a generation position for an image and data generated while a position has not been determined.
上記課題を解決するための本発明は、自装置内に保存可能なデータを生成するデータ生成装置であって、
前記データ生成装置の位置情報を算出する算出手段と、
前記算出手段における算出により位置情報が確定したか否かを判定する位置確定判定手段と、
前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測手段と、
前記位置確定判定手段が前記位置情報が未確定と判定している間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測手段が計測した第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測手段が計測した第2の移動状態を管理する、機器移動状態管理手段と、
前記位置確定判定手段が前記位置情報が確定したと判定した場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定手段と
を備えることを特徴とする。
The present invention for solving the above problems is a data generation device for generating data that can be stored in the device itself,
Calculating means for calculating position information of the data generating device;
Position determination determination means for determining whether or not position information has been determined by calculation in the calculation means;
An apparatus movement state measuring means for measuring a movement state of the data generation device based on an output from an acceleration sensor for detecting an acceleration of the data generation device;
Each data of the plurality of data generated while the position determination determination unit determines that the position information is not determined is generated from the time immediately before the data is generated until the data is generated. And the second moving state measured by the device moving state measuring unit after the latest data is generated from among the plurality of data is managed in association with the first moving state measured by the device moving state measuring unit. Equipment movement state management means for managing the movement state of
When the position determination determining unit determines that the position information has been determined, the plurality of data is generated based on the determined position information, the first movement state, and the second movement state. And a position estimating means for estimating the position.
本発明によれば、データ生成装置において、位置が未確定の間に撮影された画像や生成されたデータにつき、撮影位置や生成位置を推定する技術を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, in the data generation apparatus, the technique which estimates an imaging | photography position and a production | generation position can be provided about the image image | photographed and the produced | generated data while the position was not decided.
以下、添付図面を参照し、本発明の好適な実施形態について説明する。なお、以下説明する実施形態は、本発明を具体的に実施した場合の一例を示すもので、特許請求の範囲に記載の構成の具体的な実施形態の1つである。 Preferred embodiments of the present invention will be described below with reference to the accompanying drawings. The embodiment described below shows an example when the present invention is specifically implemented, and is one of the specific embodiments having the configurations described in the claims.
[実施形態1]
本実施形態のデータ生成装置を示す回路構成について、図1のブロック図を参照して説明する。当該データ生成装置は、例えば、デジタルカメラや、デジタルビデオカメラ、カメラを搭載した携帯端末(携帯電話を含む)として実施することができる。また、カメラが搭載、或いは接続された携帯可能なパーソナルコンピュータ等として実施することができる。本実施形態では、このうちデジタルカメラやデジタルビデオカメラのような撮影機器を例として説明するが、当該説明は他のタイプのデータ生成装置にも適用可能である。
[Embodiment 1]
A circuit configuration showing the data generation apparatus of the present embodiment will be described with reference to the block diagram of FIG. The data generation apparatus can be implemented as, for example, a digital camera, a digital video camera, or a mobile terminal (including a mobile phone) equipped with the camera. In addition, the present invention can be implemented as a portable personal computer equipped with or connected to a camera. In the present embodiment, a photographing device such as a digital camera or a digital video camera will be described as an example, but the description is applicable to other types of data generation apparatuses.
図1において、CPU101は撮影機器100全体の制御を担う制御部である。ROM102は変更を必要としないプログラムやパラメータを格納する読出専用の記憶装置である。RAM103は外部記憶装置などから供給されるプログラムやデータを一時記憶する記憶装置である。外部記憶装置104は、撮影画像等を保存する。撮影機器100に固定して設置されたハードディスクドライブ(HDD)やフラッシュメモリドライブ(SSD)、あるいは撮影機器100から着脱可能なメモリカードや光ディスクなどを含む。位置情報受信部105は、GPS衛星からの信号を受信可能なGPS受信機や、アクセスポイントの位置情報を取得可能な無線LAN受信機等である。
In FIG. 1, a
内蔵センサ106は、撮影画像の上下方向を判定するために撮影時の重力方向を検出するセンサである。これは、撮影機器100で利用することを目的として撮影機器が備える。例えば、加速度センサや手ブレ防振用のジャイロスコープなどが挙げられる。本実施形態においては、内蔵センサ106として加速度センサを備える場合を考える。加速度センサは、撮影機器100では、主に重力方向を検知するために使用されている。これにより撮影機器100を縦・横どちらを上にして撮影したかが分かり、画像の上下の向きを判断することができるため、搭載する撮影機器も多い。撮影機器の中には、3軸の加速度センサを搭載して、機器を振ったり、傾けたりといった利用者の動作を計測し、該動作に応じた機能を実行するようなものもある。
The built-in
本実施形態では、撮影機器100が3軸の加速度センサを搭載しているものと仮定する。なお、3軸の加速度センサは、現在汎用的な歩数計などでも利用されてきており、機器の姿勢などを問わずに歩行状態を検知し、ユーザの歩数の計測を行える特徴がある。入力部107は、利用者の操作を受けてデータ入力や機器設定を行ったり、機器の動作を制御したりするための、ポインティングデバイスやキーボード、ボタンなどの入力部である。出力部108は、撮影機器100の保持するデータや供給されたデータ、撮影結果、機器のパラメータ等を出力するためのモニタなどである。
In the present embodiment, it is assumed that the photographing
撮影部109は、CCDやCMOS等の撮像素子、レンズ、A/Dコンバータなどで構成され、撮影動作を行って画像を生成する。システムバス110は、101〜108の各ユニットを通信可能に接続する。
The
次に、本実施形態のデータ生成装置としての撮影機器100の機能構成について、図2のブロック図を参照して説明する。図2に示す各機能ブロックは、CPU101がROMや外部記憶装置104に記憶されたプログラムを実行することにより実現される。
Next, the functional configuration of the photographing
位置情報計測部201は、画像を撮影する撮影機器100の現在位置を特定するための情報を位置情報受信部105で受信し、該取得した情報を解析して、撮影機器の現在位置を算出する。本実施形態においては、位置情報受信部105としてGPS受信機が搭載されている場合を説明する。この場合、GPS受信機は撮影機器100の現在位置を特定するための情報としてGPS信号を受信する。但し、GPS受信機は撮影機器100に搭載されていなければならない訳ではなく、撮影機器100に外付けで接続することで、連動動作するようなものであっても良い。
The position
位置確定判定部202は、位置情報計測部201を監視し、現在位置計測が完了した状態(確定状態)であるか否かを判定する。本実施形態では、GPS受信機で現在位置を算出するまでの間が、未確定状態であり、現在位置が算出できた時が、確定状態となる。
The position
機器移動状態計測部203は、位置確定判定部202で未確定状態を検知している間、内蔵センサ106からの該撮影機器の移動状態を計測、記録する。本実施形態においては、内蔵センサ106として3軸の加速度センサを用いて、撮影機器100を携帯した人が移動(歩行)したか否かを判定し、移動の有無を移動状態として保持しておく。移動しているか否かを判定する方法は、例えば、一般的な歩数計などで行われているような、加速度センサを利用した歩数計測の方法を利用して構わない。すなわち、通常の歩行時に計測される、重力加速度の3〜5倍程度の加速度変化を監視し、一定期間の該加速度変化が規則的に行われていることを検知した場合は、移動(歩行)しているとみなす。そして、それ以外は停止しているとみなす、といった方法で行えば良い。
The device movement
撮影検知部204は、撮影部109において撮影が行われたことを検知する。撮影部109による撮影により画像が生成され、得られた画像が外部記憶装置104に保存された場合に、撮影が行われたとみなせば良い。
The photographing detection unit 204 detects that photographing has been performed in the photographing
機器移動状態管理部205は、位置が未確定の間に撮影された画像と、該撮影時の移動状態とを関連付けて管理する。後に現在位置が確定した際に、各撮影時の移動状態から撮影位置を推定することになるので、ここでは各撮影時の移動状態を辿れるように管理する。本実施形態では、前回の撮影時から今回の撮影時までの移動状態を、撮影画像と関連付けて管理しておく。なお、前回、今回どちらの撮影画像と関連付けるようにしておいても構わない。あらかじめどちらと関連付けるかを決めておけば、順番に辿ることで移動状態を辿れるため、どちらと関連付けて管理しておいても良い。ここでは、前回撮影時の撮影画像と関連付けておくものとする。即ち、図4のような管理テーブルにより情報を管理する。
The device movement
図4の管理テーブル400では、位置確定までの撮影画像401についての情報としてファイル名(001.jpg〜012.jpg)を保持する。各撮影画像の移動状態402として、画像を撮影するまでに移動したか否かのフラグ情報を保持している。なお、図4では、移動状態を、それぞれ「1」、「0」の二値で「移動の有無」として表現している。即ち、位置未確定の間に撮影された画像につき、各画像の直前の画像が撮影されてから該各画像が撮影されるまでに計測した移動状態(第1の移動状態)が、「1」または「0」の二値で与えられる。例えば、002.jpgと010.jpgは第1の移動状態が「1」である。これは、001.jpgの撮影時から002.jpgが撮影されるまでの間と、009.jpgの撮影時から010.jpgが撮影されるまでの間に、それぞれ移動が行われたことを意味する。
In the management table 400 of FIG. 4, file names (001.jpg to 012.jpg) are held as information about the captured
また、フラグ403は最新の画像012.jpgの撮影されてから以降、現在までの移動状態(第2の移動状態)を示す。次に013.jpgが撮影された場合には、第1の移動状態として013.jpgに関連付けられる。ここでは、値が0であるので、012.jpg撮影時から現在まで移動が行われていないことを示す。現在位置がこの移動状態で確定した場合は、フラグ403に示す第2の移動状態を、012.jpg撮影位置を推定するために利用する。なお、管理の仕方は特に限定するものではない。
The
図4に相当する情報は、撮影画像とは別に、撮影画像と関連づけて外部記憶装置104等に保存して管理しても構わないし、画像のメタデータとして付与して画像と共に管理しても構わない。また、本実施形態では、撮影が行われる毎に関連付けを行うものとするが、これについても限定するものではない。例えば、位置が未確定の間の移動状態を撮影時間の情報と共に保持しておき、その間に撮影された画像の撮影時間から、後で関連付けるようにしても構わない。
The information corresponding to FIG. 4 may be stored and managed in the
撮影位置推定部206は、未確定時に撮影された各画像の撮影位置を、各画像に関連付けて管理しておいた移動状態をもとに、確定した現在位置を起点として推定する。例えば、機器移動状態計測部203において、移動しているか否かを検知したのであれば、最近の停止していた状態で撮影された画像については、確定した現在位置を、撮影位置として推定する。
The shooting
図4の例で言えば、009.jpgと010.jpgの間で最後に移動があったことになるので、010.jpg〜012.jpgが最近の停止していた状態で撮影された画像に該当する。よって、例えば、確定した現在位置が(N35.56564、E139.68129)であったとすると、図5に示すように、010.jpg〜012.jpgの撮影位置を該確定位置と同一と推定する。一方、それ以前に撮影された画像は何らかの移動を経ているので、001.jpg〜009.jpgの撮影位置については不明(unknown)と推定する。なお、図5の推定撮影位置管理テーブル500は、撮影画像501と各撮像画像の撮影位置推定結果502が登録されている。
In the example of FIG. jpg and 010. Since there was a last movement between jpgs, 010. jpg to 012. This corresponds to an image photographed with jpg being stopped recently. Therefore, for example, if the determined current position is (N35.56564, E139.68129), as shown in FIG. jpg to 012. It is estimated that the shooting position of jpg is the same as the determined position. On the other hand, since images taken before that have undergone some movement, 001. jpg to 009. It is estimated that the shooting position of jpg is unknown. In the estimated shooting position management table 500 of FIG. 5, a
なお、図1、及び、図2では、データ生成装置としての撮影機器100に各構成要素が搭載された構成を示した。しかし、発明の実施形態はこの構成に限るものではなく、データ生成装置の実現形態に応じて複数の装置に各機能を分散して実現するようにしてもよい。例えば、撮影位置推定部206が行う処理を撮影機器100で行う必要は無く、別の装置(PCなど)のCPUやRAMを利用して行っても構わない。
1 and 2 show a configuration in which each component is mounted on the photographing
次に、本実施形態のデータ生成装置としての撮影機器100における、現在位置が未確定の間に撮影された画像の撮影位置を推定する処理の手順について、図3のフローチャートを参照して説明する。
Next, a procedure of processing for estimating the shooting position of an image shot while the current position has not been determined in the
S301では、位置情報計測部201が撮影機器100の現在位置の計測を開始する。ここでは、撮影のために撮影機器100の電源をONした時点で撮影位置の計測が開始される場合を考える。ただし、この例に限定されるものではなく、例えば、一時的にGPS衛星を捕捉できない状況になった後、再度捕捉できた場合に、位置情報の計測を再度行う場合であっても構わない。
In step S <b> 301, the position
S302では、位置確定判定部202が位置情報の確定状態を監視し、確定したか否かの判定を継続的に行う。同時に、撮影検知部204が撮影部109での撮影行為を監視し、撮影行為があったか否かの判定も継続的に行う。S302で、位置情報の確定状態の監視結果から、位置が確定状態になったことと判定されれば(S303で「YES」)、S307に移行する。一方、未確定状態の場合は(S303で「NO」)、S304に移行する。
In S302, the position
S304では、機器移動状態計測部203が、撮影機器100の移動状態を計測し、保持する。なお、内蔵センサ106は、移動状態の計測用途では、位置が未確定状態の間のみ動作させる。これにより、機器の電力の消費を極力抑えるようにする。
In S304, the device movement
S305では、位置が未確定の間に撮影が行われたか否かを撮影検知部204が検知する。撮影が行われた場合は(S305で「YES」)、S306を実施する。一方、撮影が行われていない場合は、S302での判定を継続的に行う。 In step S <b> 305, the photographing detection unit 204 detects whether or not photographing has been performed while the position is not yet determined. When shooting is performed (“YES” in S305), S306 is performed. On the other hand, if shooting has not been performed, the determination in S302 is continuously performed.
S306では、機器移動状態管理部205が、機器移動状態計測部203が計測した前回の撮影時から今回の撮影時までの移動状態を、撮影画像と関連付けて管理する。本実施形態においては、最近の移動していなかった間に撮影された画像が分かるように、管理しておく。
In step S <b> 306, the device movement
S307では、位置の確定状態検知に応じて、移動状態を測定する目的で動作させていた内蔵センサ106の本フロー中における同目的での利用を停止する。
In S307, the use of the built-in
S308では、撮影位置推定部206が、位置が未確定の間に撮影された各撮影画像の撮影位置を推定し、推定撮影位置管理テーブル500を生成する。本実施形態においては、管理テーブル400において位置確定時を含む移動が検知されなかった期間に撮影された画像が分かっているので、確定時の位置を、該画像の撮影位置として推定する。それ以外の画像については、撮影位置を不明(unknown)とする。
In S <b> 308, the shooting
このように本実施形態では、位置が未確定の間は、センサを利用して機器の移動状態を計測し、その間に撮影された画像と、該移動状態を関連付けて管理しておく。その後、位置が確定した後で、確定した位置と移動状態とから、各画像の撮影位置を推定する。これにより、従来は撮影位置を付与することが困難だった位置が未確定の間に撮影された画像についても、正しい撮影位置を自動で付与できる可能性が高くなる。 As described above, in this embodiment, while the position is not yet determined, the movement state of the device is measured using the sensor, and the image captured during that time is associated with the movement state and managed. Thereafter, after the position is determined, the shooting position of each image is estimated from the determined position and the moving state. As a result, there is a high possibility that the correct shooting position can be automatically given even for an image shot while the position where it was difficult to give the shooting position in the past has been determined.
[実施形態2]
実施形態1では、内蔵センサ106により移動の有無を検知して、0/1の二値表現する場合を述べたが、発明の実施形態は移動の有無を二値表現するものに限定されない。例えば、先の実施形態で述べたように、歩行状態を検知できる場合は、ユーザのおよその歩数をカウントし、移動の有無を歩数により表してもよい。即ち、移動がない場合は歩数「0」、移動がある場合は歩数は「1以上の整数」となる。この場合、撮影画像には、該歩数の情報を関連づけておく。
[Embodiment 2]
In the first embodiment, the case where the presence / absence of movement is detected by the built-in
例えば、009.jpgの撮影時から010.jpgが撮影されるまでの間に、88歩の歩行を検知した場合は、図6のように、010.jpgと該歩数を関連づけておく。その後、位置が確定した時点で、撮影画像を撮影順とは逆に辿りながら、それぞれ関連付けられた歩数の情報から、確定した位置から各画像の撮影位置までのおよその距離を推定する。図6で言えば、009.jpgから現在位置確定までの間に88歩+0歩+6歩+5歩=99歩の移動があったことになるので、009.jpgは、現在位置から99歩程度の距離の位置での撮影と推定する。なお、推定結果の出力については、特に限定するものではない。現在位置情報から歩数にしてどの程度離れているかという形で出力しても良いし、歩数を平均的な体型の人物の歩幅(例えば、65cm等)から距離に置き換えて出力しても構わない。あるいは、利用者の身長などのプロファイル情報が得られているのであれば、身長から推定した歩幅(身長−100cm等)から距離に置き換える等しても良い。距離に置き換えた場合、確定した位置を中心として半径Nメートル等と表すことができる。 For example, 009. From the time of shooting jpg. If 88 steps of walking are detected before jpg is photographed, as shown in FIG. Jpg is associated with the number of steps. After that, when the position is determined, the approximate distance from the determined position to the shooting position of each image is estimated from the information on the number of steps associated with each other while tracing the captured image in the reverse order of the shooting order. In FIG. 6, 009. Since there were 88 steps + 0 steps + 6 steps + 5 steps = 99 steps from jpg to the determination of the current position, 009. jpg is estimated to be taken at a position at a distance of about 99 steps from the current position. The output of the estimation result is not particularly limited. It may be output in the form of how many steps are away from the current position information, or the number of steps may be output by replacing the step length of an average figure person (for example, 65 cm) with the distance. Alternatively, if profile information such as the height of the user is obtained, the step length estimated from the height (height-100 cm, etc.) may be replaced with a distance. When the distance is replaced, it can be expressed as a radius N meter or the like with the determined position as the center.
得られた結果に基づいて、撮影位置推定部206は推定撮影位置管理テーブル500において不明(unknown)とされた画像につき、歩幅、或いは、歩幅から算出された距離を登録する。
Based on the obtained result, the shooting
以上述べた実施形態2により、先の実施形態では不明(unknown)としていた撮影位置について、およその位置を示すことができる効果が得られる。 According to the second embodiment described above, an effect can be obtained in which an approximate position can be indicated with respect to the shooting position that has been unknown in the previous embodiment.
[実施形態3]
上述の実施形態では、内蔵センサ106として加速度センサを搭載し、これにより移動の有無、或いは、歩数を検知する例を述べた。しかし、内蔵センサ106は、加速度センサの他に、撮影機器100の向く方向を検知する地磁気センサ(方位センサ)を有することができる。この場合、方位センサが検出した撮影機器100が向く方向をその移動方向と見なし、先の実施形態のように移動量が分かる場合は、方向と移動量を合わせて関連付けておく。例えば、図6の例で言えば、88歩の移動の内訳を、(N22+E14+S25+W27)のように、いずれの方位に何歩づつそれぞれ移動したかを記録しておくなどすれば良い。
[Embodiment 3]
In the above-described embodiment, an example has been described in which an acceleration sensor is mounted as the built-in
こうすることで、位置確定後に各撮影位置を方向も含めて推定するようにしても構わない。なお、内蔵センサ106は上記のセンサに限定するものではない。上記以外のセンサを搭載した場合に、該センサによって、機器の移動の有無、移動量、移動方向などが測定可能な場合には、該センサを利用しても構わない。
In this way, each shooting position including the direction may be estimated after the position is determined. The built-in
以上述べた実施形態3により、先の実施形態での推定よりも、詳細な撮影位置の推定が行えるようになる効果が得られる。 According to the third embodiment described above, it is possible to obtain an effect that the photographing position can be estimated in more detail than the estimation in the previous embodiment.
[実施形態4]
上述の実施形態では、位置情報受信部105がGPS受信機の場合を説明したが、発明の実施形態はこれに限定されるものではない。確定状態になるまで時間がかかる他の位置測定装置であっても構わない。例えば、GPS受信機以外の、IEEE802.11x(xは、a,b,g,n等)の通信規格に対応した無線LAN通信用の受信機(無線LANカード等)であってもよい。この場合、無線LANのアクセスポイント(基地局)から受信した無線信号に含まれる該アクセスポイントの位置情報と、受信無線信号の電波強度から求めた距離とに基づいて位置情報を算出することができる。具体的には、接続可能なアクセスポイントの探索から、アクセスポイントの持つ位置情報の取得、電波強度からの機器とアクセスポイント間の距離の算出を行った上で、機器の位置を求めることになる。その際、電波強度が最も強いアクセスポイントの位置を利用したり、GPSと同様に3つ以上のアクセスポイントからの電波強度に基づいて、位置を決定しても良い。アクセスポイントから提供される情報及び電波強度に基づく位置の決定方法は公知の技術を用いることができるので、ここではこれ以上の詳細な内容の説明は省略する。
[Embodiment 4]
In the above-described embodiment, the case where the position
本実施形態でも、位置情報計測部201が撮影機器100の現在位置を算出する処理中に撮影が行われることが考えられるため、位置情報受信部105が無線LANカード等の場合にも、本発明は適用可能である。また、GPS受信機と他の通信装置の併用により、GPSによる位置測定の精度向上・時間短縮が可能な撮影機器がある。しかし、このような機器であっても、位置測定のために何らかの処理を行う必要はあり、現在位置が未確定の期間は存在する。これらの機器においても、位置が確定するまでの間に撮影された画像の位置推定に本発明を適用することができる。
Even in this embodiment, since it is conceivable that shooting is performed during the process in which the position
[実施形態5]
上述の実施形態では、位置情報計測部201が一つの場合を説明したが、位置情報計測部201は、位置情報受信部105の種類に応じて複数あっても良い。例えば、GPS受信機用の位置情報計測部201−1と、無線LAN受信機用の位置情報計測部201−2が存在しても良い。この場合、位置情報計測部201−1及び201−2は、位置を確定した時点で各計測結果とともに確信度も出力する。確信度がより高い方の位置情報計測部から得られた現在位置の位置情報を起点として、撮影位置を推定する。
[Embodiment 5]
In the above-described embodiment, the case where there is one position
より具体的には、例えばGPS受信機において受信した信号の強度に基づいて、受信強度が所定の閾値以上の場合には位置情報計測部201−1での測定結果に対する確信度を予め定めた一定値としてもよい。当該閾値は、GPS受信機における受信信号により有効に位置が特定可能となる値として設定できる。また、一定値は確信度を0から100の範囲で表す場合に、80等のように相当に高い数値とすることができる。その一方、受信信号の強度が閾値未満の場合、例えば悪天候や室内環境などで受信強度が稼げない場合は確信度を20のように低い値に設定してもよい。 More specifically, for example, based on the intensity of a signal received by a GPS receiver, when the reception intensity is equal to or greater than a predetermined threshold, a certainty factor for the measurement result in the position information measurement unit 201-1 is set in advance. It may be a value. The threshold value can be set as a value at which the position can be effectively identified by the received signal in the GPS receiver. Further, when the certainty value is expressed in the range of 0 to 100, the constant value can be a considerably high value such as 80. On the other hand, when the intensity of the received signal is less than the threshold, for example, when the reception intensity cannot be achieved due to bad weather or indoor environment, the certainty factor may be set to a low value such as 20.
このようにしてGPS受信機での受信信号強度が高い場合にはGPS信号を優先的に使用するための確信度を与え、GPS受信機で精度が稼げない環境では無線LAN受信機を利用するように確信度を与える。なお閾値を利用せずに、測定された受信強度と比例する確信度を与えても良い。一方、無線LAN受信機に基づいて現在位置を求める場合、測定された受信強度に合わせた確信度を例えば0から100の間で算出する。この算出方法は、受信強度に比例した値を割り当てても良いし、それ以外の任意の方法を採用することもできる。算出された確信度は、GPS受信機に基づく現在位置について得られた確信度と比較され、確信度がより大きい現在位置が採用される。 In this way, when the received signal strength at the GPS receiver is high, a certainty factor is given for preferential use of the GPS signal, and the wireless LAN receiver is used in an environment where the accuracy cannot be achieved with the GPS receiver. Give confidence to Note that a certainty factor proportional to the measured reception intensity may be given without using the threshold value. On the other hand, when the current position is obtained based on the wireless LAN receiver, a certainty factor according to the measured reception intensity is calculated between 0 and 100, for example. As this calculation method, a value proportional to the reception intensity may be assigned, or any other method may be employed. The calculated certainty factor is compared with the certainty factor obtained with respect to the current position based on the GPS receiver, and a current position having a higher certainty factor is adopted.
なお、現在位置が複数の位置情報計測部において異なるタイミングで確定する場合、時間的に後に確定できた現在位置の確信度が、先に確定していたものより高いとき、後に確定できた位置を起点として撮影位置を推定しなおしてもよい。 In addition, when the current position is determined at different timings in a plurality of position information measurement units, when the certainty of the current position that can be determined later in time is higher than that determined earlier, the position that can be determined later The shooting position may be re-estimated as a starting point.
以上によれば、複数の位置情報計測部からの位置情報のうち、より精度の高い情報を利用して撮影機器100の現在位置を特定し、撮影位置を推定することができる。
According to the above, it is possible to specify the current position of the
[実施形態6]
上記実施形態では、内蔵センサ106として3軸の加速度センサを搭載している場合について説明したが、これに限定するものではない。加速度センサであれば、撮影機器の縦・横の状態を検知する目的で1軸乃至2軸のものが搭載されることもある。それぞれのセンサの有する機能に応じて移動状態を獲得するようにすれば、いずれのセンサを利用しても構わない。例えば、1軸であれば、撮影機器が、重力方向の加速度を検知できる姿勢であるかを判定する。この姿勢で検知できている間に、該重力方向の加速度の規則的な変化がある場合に、移動しているか否かの判定を行うようにする。それ以外の場合は、撮影機器が移動時の加速度の変化を検知するのが困難な姿勢で携帯されている可能性があるので、推定には利用しないようにするなどすれば良い。
[Embodiment 6]
In the above-described embodiment, the case where a three-axis acceleration sensor is mounted as the built-in
[実施形態7]
以上では、本発明の実施形態をカメラ機能を有するデータ生成装置について記載してきた。しかし、例えば、データ生成(計測によるデータ生成も含む)の機能を有する他の機器において、生成データと計測位置の情報とを関連づけて管理する必要がある場合に、本願発明を適用することができる。その場合、上述の実施形態において、「画像」の語を「データ」に置き換え、「撮影」の語を「生成」に置き換えるだけでよい。なお、ここで生成可能なデータは、例えば音声データ、文書データ、温度や湿度その他の環境条件を示す環境データ、所定の計測器に従って計測した計測データなど、自装置内に保存可能なデータが考えられる。但し当該機器は、GPS受信機などの位置を測定する装置と、機器の移動を検出可能な内蔵センサとが搭載、或いは、接続されていることが必要となる。
[Embodiment 7]
In the above, the embodiment of the present invention has been described with respect to a data generation apparatus having a camera function. However, for example, in another device having a function of data generation (including data generation by measurement), the present invention can be applied when it is necessary to manage the generated data and the information on the measurement position in association with each other. . In this case, in the above-described embodiment, the word “image” may be replaced with “data” and the word “photographing” may be replaced with “generation”. Examples of data that can be generated here include data that can be stored in the device itself, such as voice data, document data, environmental data indicating temperature, humidity, and other environmental conditions, and measurement data measured according to a predetermined measuring instrument. It is done. However, the device needs to have a device for measuring the position such as a GPS receiver and a built-in sensor capable of detecting the movement of the device mounted or connected.
[その他の実施形態]
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
[Other Embodiments]
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media. Then, the computer (or CPU, MPU, etc.) of the system or apparatus reads out and executes the program.
Claims (10)
前記データ生成装置の位置情報を算出する算出手段と、
前記算出手段における算出により位置情報が確定したか否かを判定する位置確定判定手段と、
前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測手段と、
前記位置確定判定手段が前記位置情報が未確定と判定している間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測手段が計測した第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測手段が計測した第2の移動状態を管理する、機器移動状態管理手段と、
前記位置確定判定手段が前記位置情報が確定したと判定した場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定手段と
を備えることを特徴とするデータ生成装置。 A data generation device that generates data that can be stored in its own device,
Calculating means for calculating position information of the data generating device;
Position determination determination means for determining whether or not position information has been determined by calculation in the calculation means;
An apparatus movement state measuring means for measuring a movement state of the data generation device based on an output from an acceleration sensor for detecting an acceleration of the data generation device;
Each data of the plurality of data generated while the position determination determination unit determines that the position information is not determined is generated from the time immediately before the data is generated until the data is generated. And the second moving state measured by the device moving state measuring unit after the latest data is generated from among the plurality of data is managed in association with the first moving state measured by the device moving state measuring unit. Equipment movement state management means for managing the movement state of
When the position determination determining unit determines that the position information has been determined, the plurality of data is generated based on the determined position information, the first movement state, and the second movement state. A data generation apparatus comprising: position estimation means for estimating a position.
前記位置推定手段は、前記第2の移動状態が、前記データ生成装置の移動が無かったことを示す場合に、
前記複数のデータのうち最新に生成されたデータと、
該最新に生成されたデータより前に生成され、かつ、前記第1の移動状態が前記データ生成装置の移動が有ったことを示す最も新しいデータまでのデータと
が生成された位置を前記確定した位置情報と同一と推定することを特徴とする請求項1に記載のデータ生成装置。 The device movement state measuring means measures the movement state as the presence or absence of movement of the data generation device,
The position estimation means, when the second movement state indicates that the data generation device has not moved,
The most recently generated data of the plurality of data; and
The position where the data up to the newest data generated before the most recently generated data and the first moving state indicating that the data generating device has moved is generated is determined. The data generation apparatus according to claim 1, wherein the position information is estimated to be the same as the position information.
前記第1の移動状態は、前記複数のデータの各データについて、該各データの直前のデータが生成されてから該各データが生成されるまでの間の前記ユーザの歩数を示し、
前記位置推定手段は、前記複数のデータのうち、生成された位置が前記確定した位置情報と同一と推定されたデータを除く他のデータが生成された位置を、該データに対応する前記第1の移動状態に含まれる歩数の情報に基づいて推定することを特徴とする請求項2に記載のデータ生成装置。 The device movement state measuring means measures the presence or absence of the movement as the number of steps of the user of the data generation device,
The first movement state indicates, for each data of the plurality of data, the number of steps of the user between generation of the data immediately before the data and generation of the data.
The position estimation unit is configured to determine, from the plurality of data, a position where other data is generated except for data in which the generated position is estimated to be the same as the determined position information. The data generation apparatus according to claim 2, wherein the estimation is based on information on the number of steps included in the movement state.
前記機器移動状態計測手段は、前記移動の有無を、前記方位センサで検知された方位ごとの前記ユーザの歩数として計測し、
前記第1の移動状態は、前記複数のデータの各データについて、該各データの直前のデータが生成されてから該各データが生成されるまでの間の前記ユーザの方位ごとの歩数を示し、
前記位置推定手段は、前記複数のデータのうち、生成された位置が前記確定した位置情報と同一と推定されたデータを除く他のデータが生成された位置を、該データに対応する前記第1の移動状態に含まれる方位ごとの歩数の情報に基づいて推定することを特徴とする請求項2に記載のデータ生成装置。 Further comprising an azimuth sensor for detecting an azimuth facing the data generation device;
The device movement state measuring means measures the presence / absence of the movement as the number of steps of the user for each direction detected by the direction sensor,
The first movement state indicates, for each data of the plurality of data, the number of steps for each direction of the user from the time immediately before the data is generated until the data is generated,
The position estimation unit is configured to determine, from the plurality of data, a position where other data is generated except for data in which the generated position is estimated to be the same as the determined position information. The data generation apparatus according to claim 2, wherein the estimation is based on information on the number of steps for each direction included in the movement state.
前記算出手段は、前記GPS受信機で受信したGPS信号に基づき前記位置情報を算出することを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。 The data generation device includes a GPS receiver,
5. The data generation apparatus according to claim 1, wherein the calculation unit calculates the position information based on a GPS signal received by the GPS receiver. 6.
前記算出手段は、前記無線LAN受信機で受信した無線信号に基づき前記位置情報を算出することを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。 The data generation device includes a wireless LAN receiver,
5. The data generation apparatus according to claim 1, wherein the calculation unit calculates the position information based on a wireless signal received by the wireless LAN receiver.
前記算出手段は、
前記GPS受信機で受信したGPS信号に基づく前記位置情報を算出し、
前記GPS信号の受信強度に基づき、該GPS信号に基づき算出された前記位置情報の確信度を算出し、
前記無線LAN受信機で受信した無線信号に基づく前記位置情報を算出し、
前記無線信号の受信強度に基づき、該無線信号に基づき算出された前記位置情報の確信度を算出し、
前記GPS信号と前記無線信号とのそれぞれに基づいて算出された確信度を比較して、より高い確信度を有する位置情報を、前記データ生成装置の現在の位置を示す位置情報とする
ことを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。 The data generation device includes a GPS receiver and a wireless LAN receiver,
The calculating means includes
Calculating the position information based on the GPS signal received by the GPS receiver;
Based on the received intensity of the GPS signal, calculate the certainty of the position information calculated based on the GPS signal,
Calculating the position information based on a wireless signal received by the wireless LAN receiver;
Based on the reception strength of the radio signal, calculate the certainty of the position information calculated based on the radio signal,
Comparing the certainty calculated based on each of the GPS signal and the radio signal, the position information having a higher certainty is used as position information indicating the current position of the data generating device. The data generation device according to any one of claims 1 to 4.
前記データは撮影手段が生成した画像であることを特徴とする請求項1乃至7のいずれか1項に記載のデータ生成装置。 It further comprises a photographing means for photographing an image,
The data generation apparatus according to claim 1, wherein the data is an image generated by a photographing unit.
算出手段が、前記データ生成装置の位置情報を算出する算出工程と、
位置確定判定手段が、前記算出工程において、算出により位置情報が確定したか否かを判定する位置確定判定工程と、
機器移動状態計測手段が、前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測工程と、
機器移動状態管理手段が、前記位置確定判定工程において前記位置情報が未確定と判定されている間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測工程で計測された第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測工程で計測された第2の移動状態を管理する、機器移動状態管理工程と、
位置推定手段が、前記位置確定判定工程で前記位置情報が確定したと判定された場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定工程と
を備えることを特徴とするデータ生成装置の制御方法。 A method of controlling a data generation device that generates data that can be stored in the device,
A calculating step for calculating position information of the data generating device;
A position confirmation determining step for determining whether or not the position information is confirmed by calculation in the calculation step;
A device movement state measurement unit that measures a movement state of the data generation device based on an output from an acceleration sensor that detects an acceleration of the data generation device; and
The device movement state management means uses each data of the plurality of data generated while the position information is determined to be indeterminate in the position determination determination step after the data immediately before the data is generated. Management is performed in association with the first movement state measured in the device movement state measurement step until each data is generated, and the device movement is performed after the latest data is generated among the plurality of data. A device movement state management step for managing the second movement state measured in the state measurement step;
When the position estimation means determines that the position information has been determined in the position determination determination step, the plurality of positions are determined based on the determined position information and the first movement state and the second movement state. And a position estimation step of estimating a position where the data is generated.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009232868A JP2011082770A (en) | 2009-10-06 | 2009-10-06 | Data generation apparatus, method of controlling the same, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009232868A JP2011082770A (en) | 2009-10-06 | 2009-10-06 | Data generation apparatus, method of controlling the same, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011082770A true JP2011082770A (en) | 2011-04-21 |
Family
ID=44076367
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009232868A Withdrawn JP2011082770A (en) | 2009-10-06 | 2009-10-06 | Data generation apparatus, method of controlling the same, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011082770A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012249016A (en) * | 2011-05-26 | 2012-12-13 | Canon Inc | Imaging apparatus and imaging method |
JP2013009204A (en) * | 2011-06-24 | 2013-01-10 | Olympus Imaging Corp | Imaging device, imaging method and program |
JP2013013070A (en) * | 2011-05-31 | 2013-01-17 | Canon Inc | Imaging apparatus, imaging system, imaging apparatus control method, imaging system control method, and program |
JP2017535086A (en) * | 2015-07-31 | 2017-11-24 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Method, imaging system, and program for image processing |
-
2009
- 2009-10-06 JP JP2009232868A patent/JP2011082770A/en not_active Withdrawn
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012249016A (en) * | 2011-05-26 | 2012-12-13 | Canon Inc | Imaging apparatus and imaging method |
JP2013013070A (en) * | 2011-05-31 | 2013-01-17 | Canon Inc | Imaging apparatus, imaging system, imaging apparatus control method, imaging system control method, and program |
JP2013009204A (en) * | 2011-06-24 | 2013-01-10 | Olympus Imaging Corp | Imaging device, imaging method and program |
JP2017535086A (en) * | 2015-07-31 | 2017-11-24 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | Method, imaging system, and program for image processing |
US10567651B2 (en) | 2015-07-31 | 2020-02-18 | SZ DJI Technology Co., Ltd. | System and method for image processing |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5200780B2 (en) | Imaging apparatus and method, and program | |
KR101990073B1 (en) | Method and apparatus for shooting and storing multi-focused image in electronic device | |
US9721346B2 (en) | Image assessment device, method, and computer readable medium for 3-dimensional measuring and capturing of image pair range | |
US10582105B2 (en) | Changing camera parameters based on wireless signal information | |
US8891823B2 (en) | Apparatus, control method, and storage medium for acquiring and storing position information in association with image data | |
JP2010514044A (en) | Automatic image direction change based on face detection on display | |
CN108616691B (en) | Photographing method and device based on automatic white balance, server and storage medium | |
JP2007218896A (en) | Imaging device, position information recording method and program | |
CN103369229B (en) | The synchronous shooting method and system of many devices | |
JP2006513657A (en) | Adding metadata to images | |
JP2011082770A (en) | Data generation apparatus, method of controlling the same, and program | |
JPH10239055A (en) | Portable information collecting device | |
JP3706907B2 (en) | Method for estimating the current position and orientation of a user | |
CN102238320A (en) | Shooting device and shooting method thereof | |
JP2008199319A (en) | Imaging apparatus, and method for controlling the same | |
US20220051005A1 (en) | Walking estimation system, walking estimation method, and computer readable-medium | |
JP4058454B1 (en) | Camera shooting support system | |
JP5666007B2 (en) | Position correction method and apparatus | |
JP2011139352A (en) | Information processing method, program, and photographic device | |
JP5773753B2 (en) | Imaging apparatus and control method | |
WO2017130360A1 (en) | Portable terminal apparatus, device management method and device management program | |
JP2009224900A (en) | Photography device and photography method | |
JP2017229036A (en) | Electronic apparatus, imaging system, composition determination method and program | |
JP2013026711A (en) | Photographing device, control method for photographing device, and computer program | |
JP6391006B2 (en) | Material inspection device, material inspection method, and material inspection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20130108 |