JP2011082770A - Data generation apparatus, method of controlling the same, and program - Google Patents

Data generation apparatus, method of controlling the same, and program Download PDF

Info

Publication number
JP2011082770A
JP2011082770A JP2009232868A JP2009232868A JP2011082770A JP 2011082770 A JP2011082770 A JP 2011082770A JP 2009232868 A JP2009232868 A JP 2009232868A JP 2009232868 A JP2009232868 A JP 2009232868A JP 2011082770 A JP2011082770 A JP 2011082770A
Authority
JP
Japan
Prior art keywords
data
movement state
generated
position information
data generation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009232868A
Other languages
Japanese (ja)
Inventor
Tomoyuki Shimizu
智之 清水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2009232868A priority Critical patent/JP2011082770A/en
Publication of JP2011082770A publication Critical patent/JP2011082770A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a technique that estimates a shooting position and generation position for a captured image and generated data while the positions are not fixed. <P>SOLUTION: A data generation apparatus measures a moving state of equipment using a sensor in the apparatus, and manages the generation data and moving state by associating the data with the state while the positions are not fixed. After the positions are fixed, the apparatus estimates where data is generated by dating back to each moving state from the fixed position. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、データ生成装置及びその制御方法、プログラムに関する。   The present invention relates to a data generation apparatus, a control method therefor, and a program.

近年、デジタルカメラの普及等により、大量の電子化された画像データが蓄積されるようになってきている。そのため、画像の検索や整理をより容易に行えたり、煩雑になりがちな画像を利用者にとって分かり易く表示したりできる技術に対する要求が高い。これらの要求に応えるためには、画像の所有者の記憶や印象と画像とを結びつける情報を扱えることが重要になる。この情報は、撮影時間であったり、撮影場所であったり、被写体であったりと様々である。このような背景において、撮影機器によっては、位置情報を測定する機構を搭載したものも出てきており、測定した位置情報を画像に自動で付与することができる(特許文献1参照)。   In recent years, with the spread of digital cameras and the like, a large amount of digitized image data has been accumulated. For this reason, there is a high demand for a technique capable of more easily searching and organizing images and displaying images that tend to be complicated for the user. In order to meet these demands, it is important to be able to handle information that links the memory and impression of the image owner with the image. This information varies depending on the shooting time, the shooting location, and the subject. Against this background, some photographic devices are equipped with a mechanism for measuring position information, and the measured position information can be automatically added to an image (see Patent Document 1).

特開平07−064169号公報Japanese Patent Application Laid-Open No. 07-064169

しかしながら、位置情報が確定するまでには時間がかかることが多い。例えば、位置の測定手段として一般的なGPS(Global Positioning System)では、測定開始から確定までに、概ね次のような手順を踏む。まず、GPS受信機で信号を受信可能なGPS衛星を調べる。衛星は3機乃至4機必要である。次に、該GPS衛星から受信した信号から、各衛星と受信機の距離をそれぞれ算出する。そして、該受信した信号から各々の衛星の位置を取得し、該衛星位置上で算出した距離等から、受信機の位置を計算する。このようにGPS衛星の発見や、距離や位置を求める計算処理が必要になるため、これらの一連の処理には、分オーダーの時間を要する。あるいは、携帯電話のように他の通信手段をさらに持つことができれば、該通信手段が通信している基地局から情報を取得する。これにより、GPSによる位置測定を加速することができる場合もあるが、それであっても概ね数十秒程度の時間を要する。   However, it often takes time to determine the position information. For example, in a general GPS (Global Positioning System) as a position measuring means, the following procedure is generally performed from the start of measurement to the determination. First, GPS satellites that can receive signals with a GPS receiver are examined. Three or four satellites are required. Next, the distance between each satellite and the receiver is calculated from the signal received from the GPS satellite. Then, the position of each satellite is acquired from the received signal, and the position of the receiver is calculated from the distance calculated on the satellite position. As described above, since it is necessary to perform a calculation process for finding a GPS satellite and obtaining a distance and a position, a series of processes requires a minute order time. Or if it can have another communication means like a mobile telephone, information will be acquired from the base station which this communication means is communicating. Thereby, the position measurement by GPS may be accelerated, but even so, it takes about several tens of seconds.

一方、撮影機器は、電源を入れてからすぐに撮影を開始できる。このため、位置確定まで時間がかかるようだと、位置が未確定の間に撮影が行われることも少なくない。場合によっては、位置が未確定の間に相当数の撮影が行われることも考えられる。従来は、このように位置が未確定の間に撮影された画像については、正しい撮影位置が分からないため、画像に撮影位置情報を関連付けることができないという問題があった。   On the other hand, the photographing device can start photographing immediately after the power is turned on. For this reason, if it takes time to determine the position, it is often the case that shooting is performed while the position is not yet determined. In some cases, a considerable number of images may be taken while the position is uncertain. Conventionally, there has been a problem in that, with respect to an image shot while the position has not been determined in this manner, the correct shooting position cannot be known, so that shooting position information cannot be associated with the image.

また、同様の問題は画像生成に限定されるものではなく、生成したデータを、データ生成を行った位置の情報と共に管理するデータ生成装置においても生ずるものである。   The same problem is not limited to image generation, but also occurs in a data generation apparatus that manages generated data together with information on the position where the data was generated.

そこで、本発明は、上記の課題に鑑み、位置が未確定の間に撮影された画像や生成されたデータにつき、撮影位置や生成位置を推定する技術を提供することを目的とする。   In view of the above problems, an object of the present invention is to provide a technique for estimating a shooting position and a generation position for an image and data generated while a position has not been determined.

上記課題を解決するための本発明は、自装置内に保存可能なデータを生成するデータ生成装置であって、
前記データ生成装置の位置情報を算出する算出手段と、
前記算出手段における算出により位置情報が確定したか否かを判定する位置確定判定手段と、
前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測手段と、
前記位置確定判定手段が前記位置情報が未確定と判定している間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測手段が計測した第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測手段が計測した第2の移動状態を管理する、機器移動状態管理手段と、
前記位置確定判定手段が前記位置情報が確定したと判定した場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定手段と
を備えることを特徴とする。
The present invention for solving the above problems is a data generation device for generating data that can be stored in the device itself,
Calculating means for calculating position information of the data generating device;
Position determination determination means for determining whether or not position information has been determined by calculation in the calculation means;
An apparatus movement state measuring means for measuring a movement state of the data generation device based on an output from an acceleration sensor for detecting an acceleration of the data generation device;
Each data of the plurality of data generated while the position determination determination unit determines that the position information is not determined is generated from the time immediately before the data is generated until the data is generated. And the second moving state measured by the device moving state measuring unit after the latest data is generated from among the plurality of data is managed in association with the first moving state measured by the device moving state measuring unit. Equipment movement state management means for managing the movement state of
When the position determination determining unit determines that the position information has been determined, the plurality of data is generated based on the determined position information, the first movement state, and the second movement state. And a position estimating means for estimating the position.

本発明によれば、データ生成装置において、位置が未確定の間に撮影された画像や生成されたデータにつき、撮影位置や生成位置を推定する技術を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, in the data generation apparatus, the technique which estimates an imaging | photography position and a production | generation position can be provided about the image image | photographed and the produced | generated data while the position was not decided.

発明の実施形態の撮影機器のハードウェア構成を示す図。The figure which shows the hardware constitutions of the imaging device of embodiment of invention. 発明の実施形態の撮影機器の機能ブロック図。The functional block diagram of the imaging device of embodiment of invention. 発明の実施形態の処理のフローチャート。The flowchart of the process of embodiment of invention. 発明の実施形態の撮影画像と移動状態とを関連付けた管理テーブルの図。The figure of the management table which linked | related the picked-up image and movement state of embodiment of invention. 発明の実施形態の撮影画像の撮影位置を推定結果を示す図。The figure which shows the estimation result of the imaging position of the picked-up image of embodiment of invention. 発明の実施形態の移動状態を歩数として表した管理テーブルの図。The figure of the management table which represented the movement state of embodiment of invention as the number of steps.

以下、添付図面を参照し、本発明の好適な実施形態について説明する。なお、以下説明する実施形態は、本発明を具体的に実施した場合の一例を示すもので、特許請求の範囲に記載の構成の具体的な実施形態の1つである。   Preferred embodiments of the present invention will be described below with reference to the accompanying drawings. The embodiment described below shows an example when the present invention is specifically implemented, and is one of the specific embodiments having the configurations described in the claims.

[実施形態1]
本実施形態のデータ生成装置を示す回路構成について、図1のブロック図を参照して説明する。当該データ生成装置は、例えば、デジタルカメラや、デジタルビデオカメラ、カメラを搭載した携帯端末(携帯電話を含む)として実施することができる。また、カメラが搭載、或いは接続された携帯可能なパーソナルコンピュータ等として実施することができる。本実施形態では、このうちデジタルカメラやデジタルビデオカメラのような撮影機器を例として説明するが、当該説明は他のタイプのデータ生成装置にも適用可能である。
[Embodiment 1]
A circuit configuration showing the data generation apparatus of the present embodiment will be described with reference to the block diagram of FIG. The data generation apparatus can be implemented as, for example, a digital camera, a digital video camera, or a mobile terminal (including a mobile phone) equipped with the camera. In addition, the present invention can be implemented as a portable personal computer equipped with or connected to a camera. In the present embodiment, a photographing device such as a digital camera or a digital video camera will be described as an example, but the description is applicable to other types of data generation apparatuses.

図1において、CPU101は撮影機器100全体の制御を担う制御部である。ROM102は変更を必要としないプログラムやパラメータを格納する読出専用の記憶装置である。RAM103は外部記憶装置などから供給されるプログラムやデータを一時記憶する記憶装置である。外部記憶装置104は、撮影画像等を保存する。撮影機器100に固定して設置されたハードディスクドライブ(HDD)やフラッシュメモリドライブ(SSD)、あるいは撮影機器100から着脱可能なメモリカードや光ディスクなどを含む。位置情報受信部105は、GPS衛星からの信号を受信可能なGPS受信機や、アクセスポイントの位置情報を取得可能な無線LAN受信機等である。   In FIG. 1, a CPU 101 is a control unit that controls the entire photographing apparatus 100. The ROM 102 is a read-only storage device that stores programs and parameters that do not need to be changed. The RAM 103 is a storage device that temporarily stores programs and data supplied from an external storage device. The external storage device 104 stores captured images and the like. It includes a hard disk drive (HDD) and a flash memory drive (SSD) that are fixedly installed in the photographing apparatus 100, or a memory card and an optical disk that are removable from the photographing apparatus 100. The position information receiving unit 105 is a GPS receiver that can receive a signal from a GPS satellite, a wireless LAN receiver that can acquire position information of an access point, or the like.

内蔵センサ106は、撮影画像の上下方向を判定するために撮影時の重力方向を検出するセンサである。これは、撮影機器100で利用することを目的として撮影機器が備える。例えば、加速度センサや手ブレ防振用のジャイロスコープなどが挙げられる。本実施形態においては、内蔵センサ106として加速度センサを備える場合を考える。加速度センサは、撮影機器100では、主に重力方向を検知するために使用されている。これにより撮影機器100を縦・横どちらを上にして撮影したかが分かり、画像の上下の向きを判断することができるため、搭載する撮影機器も多い。撮影機器の中には、3軸の加速度センサを搭載して、機器を振ったり、傾けたりといった利用者の動作を計測し、該動作に応じた機能を実行するようなものもある。   The built-in sensor 106 is a sensor that detects the gravitational direction at the time of shooting in order to determine the vertical direction of the shot image. This is provided in the photographing device for the purpose of being used in the photographing device 100. For example, an acceleration sensor or a gyroscope for image stabilization is available. In the present embodiment, a case where an acceleration sensor is provided as the built-in sensor 106 is considered. The acceleration sensor is mainly used in the photographing apparatus 100 to detect the direction of gravity. As a result, it is possible to determine whether the photographing device 100 is photographed in the vertical or horizontal direction and to determine the vertical direction of the image, so that many photographing devices are mounted. Some photographic devices are equipped with a triaxial acceleration sensor, measure a user's motion such as shaking or tilting the device, and execute a function corresponding to the motion.

本実施形態では、撮影機器100が3軸の加速度センサを搭載しているものと仮定する。なお、3軸の加速度センサは、現在汎用的な歩数計などでも利用されてきており、機器の姿勢などを問わずに歩行状態を検知し、ユーザの歩数の計測を行える特徴がある。入力部107は、利用者の操作を受けてデータ入力や機器設定を行ったり、機器の動作を制御したりするための、ポインティングデバイスやキーボード、ボタンなどの入力部である。出力部108は、撮影機器100の保持するデータや供給されたデータ、撮影結果、機器のパラメータ等を出力するためのモニタなどである。   In the present embodiment, it is assumed that the photographing apparatus 100 is equipped with a triaxial acceleration sensor. The triaxial acceleration sensor is currently used in general-purpose pedometers and the like, and has a feature that it can detect the walking state regardless of the posture of the device and measure the number of steps of the user. The input unit 107 is an input unit such as a pointing device, a keyboard, and a button for performing data input and device setting in response to a user's operation and controlling operation of the device. The output unit 108 is a monitor for outputting data held by the imaging device 100, supplied data, imaging results, device parameters, and the like.

撮影部109は、CCDやCMOS等の撮像素子、レンズ、A/Dコンバータなどで構成され、撮影動作を行って画像を生成する。システムバス110は、101〜108の各ユニットを通信可能に接続する。   The imaging unit 109 is configured by an imaging element such as a CCD or CMOS, a lens, an A / D converter, and the like, and performs an imaging operation to generate an image. The system bus 110 connects the units 101 to 108 so that they can communicate with each other.

次に、本実施形態のデータ生成装置としての撮影機器100の機能構成について、図2のブロック図を参照して説明する。図2に示す各機能ブロックは、CPU101がROMや外部記憶装置104に記憶されたプログラムを実行することにより実現される。   Next, the functional configuration of the photographing apparatus 100 as the data generation apparatus of the present embodiment will be described with reference to the block diagram of FIG. Each functional block shown in FIG. 2 is realized by the CPU 101 executing a program stored in the ROM or the external storage device 104.

位置情報計測部201は、画像を撮影する撮影機器100の現在位置を特定するための情報を位置情報受信部105で受信し、該取得した情報を解析して、撮影機器の現在位置を算出する。本実施形態においては、位置情報受信部105としてGPS受信機が搭載されている場合を説明する。この場合、GPS受信機は撮影機器100の現在位置を特定するための情報としてGPS信号を受信する。但し、GPS受信機は撮影機器100に搭載されていなければならない訳ではなく、撮影機器100に外付けで接続することで、連動動作するようなものであっても良い。   The position information measuring unit 201 receives information for specifying the current position of the imaging device 100 that captures an image by the position information receiving unit 105, analyzes the acquired information, and calculates the current position of the imaging device. . In the present embodiment, a case where a GPS receiver is mounted as the position information receiving unit 105 will be described. In this case, the GPS receiver receives a GPS signal as information for specifying the current position of the imaging device 100. However, the GPS receiver does not have to be mounted on the photographing apparatus 100, but may be linked to the photographing apparatus 100 by being connected externally.

位置確定判定部202は、位置情報計測部201を監視し、現在位置計測が完了した状態(確定状態)であるか否かを判定する。本実施形態では、GPS受信機で現在位置を算出するまでの間が、未確定状態であり、現在位置が算出できた時が、確定状態となる。   The position confirmation determination unit 202 monitors the position information measurement unit 201 and determines whether or not the current position measurement has been completed (determined state). In the present embodiment, the time until the current position is calculated by the GPS receiver is in an undetermined state, and the time when the current position can be calculated is the determined state.

機器移動状態計測部203は、位置確定判定部202で未確定状態を検知している間、内蔵センサ106からの該撮影機器の移動状態を計測、記録する。本実施形態においては、内蔵センサ106として3軸の加速度センサを用いて、撮影機器100を携帯した人が移動(歩行)したか否かを判定し、移動の有無を移動状態として保持しておく。移動しているか否かを判定する方法は、例えば、一般的な歩数計などで行われているような、加速度センサを利用した歩数計測の方法を利用して構わない。すなわち、通常の歩行時に計測される、重力加速度の3〜5倍程度の加速度変化を監視し、一定期間の該加速度変化が規則的に行われていることを検知した場合は、移動(歩行)しているとみなす。そして、それ以外は停止しているとみなす、といった方法で行えば良い。   The device movement state measurement unit 203 measures and records the movement state of the photographing device from the built-in sensor 106 while the position determination determination unit 202 detects the unconfirmed state. In the present embodiment, a triaxial acceleration sensor is used as the built-in sensor 106 to determine whether or not the person carrying the imaging device 100 has moved (walked), and the presence or absence of movement is held as a movement state. . As a method for determining whether or not the user is moving, for example, a method for measuring the number of steps using an acceleration sensor, which is performed by a general pedometer or the like, may be used. That is, when an acceleration change of about 3 to 5 times the gravitational acceleration measured during normal walking is monitored, and it is detected that the acceleration change is regularly performed for a certain period of time, the movement (walking) It is assumed that And what is necessary is just to carry out the method of considering that it has stopped other than that.

撮影検知部204は、撮影部109において撮影が行われたことを検知する。撮影部109による撮影により画像が生成され、得られた画像が外部記憶装置104に保存された場合に、撮影が行われたとみなせば良い。   The photographing detection unit 204 detects that photographing has been performed in the photographing unit 109. When an image is generated by shooting by the shooting unit 109 and the obtained image is stored in the external storage device 104, it may be considered that shooting has been performed.

機器移動状態管理部205は、位置が未確定の間に撮影された画像と、該撮影時の移動状態とを関連付けて管理する。後に現在位置が確定した際に、各撮影時の移動状態から撮影位置を推定することになるので、ここでは各撮影時の移動状態を辿れるように管理する。本実施形態では、前回の撮影時から今回の撮影時までの移動状態を、撮影画像と関連付けて管理しておく。なお、前回、今回どちらの撮影画像と関連付けるようにしておいても構わない。あらかじめどちらと関連付けるかを決めておけば、順番に辿ることで移動状態を辿れるため、どちらと関連付けて管理しておいても良い。ここでは、前回撮影時の撮影画像と関連付けておくものとする。即ち、図4のような管理テーブルにより情報を管理する。   The device movement state management unit 205 associates and manages an image captured while the position is uncertain and the movement state at the time of the photographing. When the current position is determined later, the shooting position is estimated from the movement state at the time of each shooting, so here, the management is performed so that the movement state at the time of each shooting can be traced. In the present embodiment, the movement state from the previous photographing to the current photographing is managed in association with the photographed image. It should be noted that it may be associated with either of the previous and current captured images. If determine whether to associate with either in advance, in order to traced the movement state by following in order, both as may have been managed in association with. Here, it is assumed that the image is associated with the image captured at the previous image capture. That is, information is managed by a management table as shown in FIG.

図4の管理テーブル400では、位置確定までの撮影画像401についての情報としてファイル名(001.jpg〜012.jpg)を保持する。各撮影画像の移動状態402として、画像を撮影するまでに移動したか否かのフラグ情報を保持している。なお、図4では、移動状態を、それぞれ「1」、「0」の二値で「移動の有無」として表現している。即ち、位置未確定の間に撮影された画像につき、各画像の直前の画像が撮影されてから該各画像が撮影されるまでに計測した移動状態(第1の移動状態)が、「1」または「0」の二値で与えられる。例えば、002.jpgと010.jpgは第1の移動状態が「1」である。これは、001.jpgの撮影時から002.jpgが撮影されるまでの間と、009.jpgの撮影時から010.jpgが撮影されるまでの間に、それぞれ移動が行われたことを意味する。   In the management table 400 of FIG. 4, file names (001.jpg to 012.jpg) are held as information about the captured image 401 until the position is determined. As the moving state 402 of each photographed image, flag information indicating whether or not the photographed image has been moved is captured. In FIG. 4, the movement state is expressed as “presence / absence of movement” by binary values “1” and “0”, respectively. That is, for an image captured while the position is not yet determined, the movement state (first movement state) measured from when the image immediately before each image is captured until each image is captured is “1”. Or it is given as a binary value of “0”. For example, 002. jpg and 010. The first movement state of jpg is “1”. This is 001. 002. from the time of jpg shooting. Until jpg is shot, and 009. From the time of shooting jpg. It means that each movement has been performed until jpg is photographed.

また、フラグ403は最新の画像012.jpgの撮影されてから以降、現在までの移動状態(第2の移動状態)を示す。次に013.jpgが撮影された場合には、第1の移動状態として013.jpgに関連付けられる。ここでは、値が0であるので、012.jpg撮影時から現在まで移動が行われていないことを示す。現在位置がこの移動状態で確定した場合は、フラグ403に示す第2の移動状態を、012.jpg撮影位置を推定するために利用する。なお、管理の仕方は特に限定するものではない。   The flag 403 indicates the latest image 012. A movement state (second movement state) up to the present after jpg is photographed is shown. Next, 013. When jpg is photographed, the first movement state is 013. associated with jpg. Here, since the value is 0, 012. This indicates that no movement has been performed from the time of jpg shooting to the present time. When the current position is determined in this movement state, the second movement state indicated by the flag 403 is changed to 012. This is used to estimate the jpg shooting position. The management method is not particularly limited.

図4に相当する情報は、撮影画像とは別に、撮影画像と関連づけて外部記憶装置104等に保存して管理しても構わないし、画像のメタデータとして付与して画像と共に管理しても構わない。また、本実施形態では、撮影が行われる毎に関連付けを行うものとするが、これについても限定するものではない。例えば、位置が未確定の間の移動状態を撮影時間の情報と共に保持しておき、その間に撮影された画像の撮影時間から、後で関連付けるようにしても構わない。   The information corresponding to FIG. 4 may be stored and managed in the external storage device 104 or the like in association with the photographed image separately from the photographed image, or may be provided as image metadata and managed together with the image. Absent. In this embodiment, the association is performed every time shooting is performed, but this is not limited. For example, the moving state while the position is not yet determined may be held together with information on the shooting time, and may be associated later from the shooting time of an image shot during that time.

撮影位置推定部206は、未確定時に撮影された各画像の撮影位置を、各画像に関連付けて管理しておいた移動状態をもとに、確定した現在位置を起点として推定する。例えば、機器移動状態計測部203において、移動しているか否かを検知したのであれば、最近の停止していた状態で撮影された画像については、確定した現在位置を、撮影位置として推定する。   The shooting position estimation unit 206 estimates the shooting position of each image shot at the time of uncertain based on the determined current position based on the movement state managed in association with each image. For example, if the device movement state measurement unit 203 detects whether or not the device is moving, an estimated current position is estimated as a shooting position for an image shot in a recently stopped state.

図4の例で言えば、009.jpgと010.jpgの間で最後に移動があったことになるので、010.jpg〜012.jpgが最近の停止していた状態で撮影された画像に該当する。よって、例えば、確定した現在位置が(N35.56564、E139.68129)であったとすると、図5に示すように、010.jpg〜012.jpgの撮影位置を該確定位置と同一と推定する。一方、それ以前に撮影された画像は何らかの移動を経ているので、001.jpg〜009.jpgの撮影位置については不明(unknown)と推定する。なお、図5の推定撮影位置管理テーブル500は、撮影画像501と各撮像画像の撮影位置推定結果502が登録されている。   In the example of FIG. jpg and 010. Since there was a last movement between jpgs, 010. jpg to 012. This corresponds to an image photographed with jpg being stopped recently. Therefore, for example, if the determined current position is (N35.56564, E139.68129), as shown in FIG. jpg to 012. It is estimated that the shooting position of jpg is the same as the determined position. On the other hand, since images taken before that have undergone some movement, 001. jpg to 009. It is estimated that the shooting position of jpg is unknown. In the estimated shooting position management table 500 of FIG. 5, a shot image 501 and a shooting position estimation result 502 of each captured image are registered.

なお、図1、及び、図2では、データ生成装置としての撮影機器100に各構成要素が搭載された構成を示した。しかし、発明の実施形態はこの構成に限るものではなく、データ生成装置の実現形態に応じて複数の装置に各機能を分散して実現するようにしてもよい。例えば、撮影位置推定部206が行う処理を撮影機器100で行う必要は無く、別の装置(PCなど)のCPUやRAMを利用して行っても構わない。   1 and 2 show a configuration in which each component is mounted on the photographing apparatus 100 as a data generation device. However, the embodiment of the present invention is not limited to this configuration, and each function may be distributed and implemented in a plurality of apparatuses according to the implementation form of the data generation apparatus. For example, the processing performed by the shooting position estimation unit 206 need not be performed by the shooting device 100, and may be performed using a CPU or RAM of another device (such as a PC).

次に、本実施形態のデータ生成装置としての撮影機器100における、現在位置が未確定の間に撮影された画像の撮影位置を推定する処理の手順について、図3のフローチャートを参照して説明する。   Next, a procedure of processing for estimating the shooting position of an image shot while the current position has not been determined in the shooting device 100 as the data generation apparatus of the present embodiment will be described with reference to the flowchart of FIG. .

S301では、位置情報計測部201が撮影機器100の現在位置の計測を開始する。ここでは、撮影のために撮影機器100の電源をONした時点で撮影位置の計測が開始される場合を考える。ただし、この例に限定されるものではなく、例えば、一時的にGPS衛星を捕捉できない状況になった後、再度捕捉できた場合に、位置情報の計測を再度行う場合であっても構わない。   In step S <b> 301, the position information measurement unit 201 starts measuring the current position of the imaging device 100. Here, a case is considered where measurement of the shooting position is started when the power of the imaging device 100 is turned on for shooting. However, the present invention is not limited to this example. For example, the position information may be measured again when the GPS satellite can be temporarily captured after the GPS satellite can be captured again.

S302では、位置確定判定部202が位置情報の確定状態を監視し、確定したか否かの判定を継続的に行う。同時に、撮影検知部204が撮影部109での撮影行為を監視し、撮影行為があったか否かの判定も継続的に行う。S302で、位置情報の確定状態の監視結果から、位置が確定状態になったことと判定されれば(S303で「YES」)、S307に移行する。一方、未確定状態の場合は(S303で「NO」)、S304に移行する。   In S302, the position determination determination unit 202 monitors the position information determination state and continuously determines whether or not the position information has been determined. At the same time, the photographing detection unit 204 monitors the photographing action at the photographing unit 109 and continuously determines whether or not there has been a photographing action. If it is determined in S302 that the position is in the confirmed state from the monitoring result of the confirmed state of the position information ("YES" in S303), the process proceeds to S307. On the other hand, if it is in the indefinite state (“NO” in S303), the process proceeds to S304.

S304では、機器移動状態計測部203が、撮影機器100の移動状態を計測し、保持する。なお、内蔵センサ106は、移動状態の計測用途では、位置が未確定状態の間のみ動作させる。これにより、機器の電力の消費を極力抑えるようにする。   In S304, the device movement state measurement unit 203 measures and holds the movement state of the imaging device 100. Note that the built-in sensor 106 is operated only when the position is in an undetermined state in the moving state measurement application. As a result, the power consumption of the device is minimized.

S305では、位置が未確定の間に撮影が行われたか否かを撮影検知部204が検知する。撮影が行われた場合は(S305で「YES」)、S306を実施する。一方、撮影が行われていない場合は、S302での判定を継続的に行う。   In step S <b> 305, the photographing detection unit 204 detects whether or not photographing has been performed while the position is not yet determined. When shooting is performed (“YES” in S305), S306 is performed. On the other hand, if shooting has not been performed, the determination in S302 is continuously performed.

S306では、機器移動状態管理部205が、機器移動状態計測部203が計測した前回の撮影時から今回の撮影時までの移動状態を、撮影画像と関連付けて管理する。本実施形態においては、最近の移動していなかった間に撮影された画像が分かるように、管理しておく。   In step S <b> 306, the device movement state management unit 205 manages the movement state from the previous shooting time to the current shooting time measured by the device movement state measurement unit 203 in association with the shot image. In the present embodiment, management is performed so that an image taken while the user has not moved recently can be seen.

S307では、位置の確定状態検知に応じて、移動状態を測定する目的で動作させていた内蔵センサ106の本フロー中における同目的での利用を停止する。   In S307, the use of the built-in sensor 106, which has been operated for the purpose of measuring the movement state, for the same purpose in the main flow is stopped in response to detection of the determined state of the position.

S308では、撮影位置推定部206が、位置が未確定の間に撮影された各撮影画像の撮影位置を推定し、推定撮影位置管理テーブル500を生成する。本実施形態においては、管理テーブル400において位置確定時を含む移動が検知されなかった期間に撮影された画像が分かっているので、確定時の位置を、該画像の撮影位置として推定する。それ以外の画像については、撮影位置を不明(unknown)とする。   In S <b> 308, the shooting position estimation unit 206 estimates the shooting position of each shot image shot while the position has not been determined, and generates the estimated shooting position management table 500. In the present embodiment, since an image captured in a period in which no movement including the time of position determination is not detected in the management table 400 is known, the position at the time of determination is estimated as the image capturing position of the image. For the other images, the shooting position is unknown.

このように本実施形態では、位置が未確定の間は、センサを利用して機器の移動状態を計測し、その間に撮影された画像と、該移動状態を関連付けて管理しておく。その後、位置が確定した後で、確定した位置と移動状態とから、各画像の撮影位置を推定する。これにより、従来は撮影位置を付与することが困難だった位置が未確定の間に撮影された画像についても、正しい撮影位置を自動で付与できる可能性が高くなる。   As described above, in this embodiment, while the position is not yet determined, the movement state of the device is measured using the sensor, and the image captured during that time is associated with the movement state and managed. Thereafter, after the position is determined, the shooting position of each image is estimated from the determined position and the moving state. As a result, there is a high possibility that the correct shooting position can be automatically given even for an image shot while the position where it was difficult to give the shooting position in the past has been determined.

[実施形態2]
実施形態1では、内蔵センサ106により移動の有無を検知して、0/1の二値表現する場合を述べたが、発明の実施形態は移動の有無を二値表現するものに限定されない。例えば、先の実施形態で述べたように、歩行状態を検知できる場合は、ユーザのおよその歩数をカウントし、移動の有無を歩数により表してもよい。即ち、移動がない場合は歩数「0」、移動がある場合は歩数は「1以上の整数」となる。この場合、撮影画像には、該歩数の情報を関連づけておく。
[Embodiment 2]
In the first embodiment, the case where the presence / absence of movement is detected by the built-in sensor 106 and the binary representation of 0/1 is described. However, the embodiment of the invention is not limited to the binary representation of the presence / absence of movement. For example, as described in the previous embodiment, when the walking state can be detected, the approximate number of steps of the user may be counted and the presence or absence of movement may be represented by the number of steps. That is, the number of steps is “0” when there is no movement, and the number of steps is “an integer greater than or equal to 1” when there is movement. In this case, the number of steps is associated with the captured image.

例えば、009.jpgの撮影時から010.jpgが撮影されるまでの間に、88歩の歩行を検知した場合は、図6のように、010.jpgと該歩数を関連づけておく。その後、位置が確定した時点で、撮影画像を撮影順とは逆に辿りながら、それぞれ関連付けられた歩数の情報から、確定した位置から各画像の撮影位置までのおよその距離を推定する。図6で言えば、009.jpgから現在位置確定までの間に88歩+0歩+6歩+5歩=99歩の移動があったことになるので、009.jpgは、現在位置から99歩程度の距離の位置での撮影と推定する。なお、推定結果の出力については、特に限定するものではない。現在位置情報から歩数にしてどの程度離れているかという形で出力しても良いし、歩数を平均的な体型の人物の歩幅(例えば、65cm等)から距離に置き換えて出力しても構わない。あるいは、利用者の身長などのプロファイル情報が得られているのであれば、身長から推定した歩幅(身長−100cm等)から距離に置き換える等しても良い。距離に置き換えた場合、確定した位置を中心として半径Nメートル等と表すことができる。   For example, 009. From the time of shooting jpg. If 88 steps of walking are detected before jpg is photographed, as shown in FIG. Jpg is associated with the number of steps. After that, when the position is determined, the approximate distance from the determined position to the shooting position of each image is estimated from the information on the number of steps associated with each other while tracing the captured image in the reverse order of the shooting order. In FIG. 6, 009. Since there were 88 steps + 0 steps + 6 steps + 5 steps = 99 steps from jpg to the determination of the current position, 009. jpg is estimated to be taken at a position at a distance of about 99 steps from the current position. The output of the estimation result is not particularly limited. It may be output in the form of how many steps are away from the current position information, or the number of steps may be output by replacing the step length of an average figure person (for example, 65 cm) with the distance. Alternatively, if profile information such as the height of the user is obtained, the step length estimated from the height (height-100 cm, etc.) may be replaced with a distance. When the distance is replaced, it can be expressed as a radius N meter or the like with the determined position as the center.

得られた結果に基づいて、撮影位置推定部206は推定撮影位置管理テーブル500において不明(unknown)とされた画像につき、歩幅、或いは、歩幅から算出された距離を登録する。   Based on the obtained result, the shooting position estimation unit 206 registers the step length or the distance calculated from the step length for an image that is unknown in the estimated shooting position management table 500.

以上述べた実施形態2により、先の実施形態では不明(unknown)としていた撮影位置について、およその位置を示すことができる効果が得られる。   According to the second embodiment described above, an effect can be obtained in which an approximate position can be indicated with respect to the shooting position that has been unknown in the previous embodiment.

[実施形態3]
上述の実施形態では、内蔵センサ106として加速度センサを搭載し、これにより移動の有無、或いは、歩数を検知する例を述べた。しかし、内蔵センサ106は、加速度センサの他に、撮影機器100の向く方向を検知する地磁気センサ(方位センサ)を有することができる。この場合、方位センサが検出した撮影機器100が向く方向をその移動方向と見なし、先の実施形態のように移動量が分かる場合は、方向と移動量を合わせて関連付けておく。例えば、図6の例で言えば、88歩の移動の内訳を、(N22+E14+S25+W27)のように、いずれの方位に何歩づつそれぞれ移動したかを記録しておくなどすれば良い。
[Embodiment 3]
In the above-described embodiment, an example has been described in which an acceleration sensor is mounted as the built-in sensor 106, thereby detecting the presence or absence of movement or the number of steps. However, the built-in sensor 106 can include a geomagnetic sensor (orientation sensor) that detects the direction in which the photographing apparatus 100 faces in addition to the acceleration sensor. In this case, the direction in which the imaging device 100 detected by the azimuth sensor faces is regarded as the movement direction, and when the movement amount is known as in the previous embodiment, the direction and the movement amount are associated together. For example, in the example of FIG. 6, the breakdown of the 88 steps may be recorded as how many steps each move in which direction, such as (N22 + E14 + S25 + W27).

こうすることで、位置確定後に各撮影位置を方向も含めて推定するようにしても構わない。なお、内蔵センサ106は上記のセンサに限定するものではない。上記以外のセンサを搭載した場合に、該センサによって、機器の移動の有無、移動量、移動方向などが測定可能な場合には、該センサを利用しても構わない。   In this way, each shooting position including the direction may be estimated after the position is determined. The built-in sensor 106 is not limited to the above sensor. When a sensor other than the above is mounted and the sensor can measure the presence / absence, movement amount, movement direction, and the like of the device, the sensor may be used.

以上述べた実施形態3により、先の実施形態での推定よりも、詳細な撮影位置の推定が行えるようになる効果が得られる。   According to the third embodiment described above, it is possible to obtain an effect that the photographing position can be estimated in more detail than the estimation in the previous embodiment.

[実施形態4]
上述の実施形態では、位置情報受信部105がGPS受信機の場合を説明したが、発明の実施形態はこれに限定されるものではない。確定状態になるまで時間がかかる他の位置測定装置であっても構わない。例えば、GPS受信機以外の、IEEE802.11x(xは、a,b,g,n等)の通信規格に対応した無線LAN通信用の受信機(無線LANカード等)であってもよい。この場合、無線LANのアクセスポイント(基地局)から受信した無線信号に含まれる該アクセスポイントの位置情報と、受信無線信号の電波強度から求めた距離とに基づいて位置情報を算出することができる。具体的には、接続可能なアクセスポイントの探索から、アクセスポイントの持つ位置情報の取得、電波強度からの機器とアクセスポイント間の距離の算出を行った上で、機器の位置を求めることになる。その際、電波強度が最も強いアクセスポイントの位置を利用したり、GPSと同様に3つ以上のアクセスポイントからの電波強度に基づいて、位置を決定しても良い。アクセスポイントから提供される情報及び電波強度に基づく位置の決定方法は公知の技術を用いることができるので、ここではこれ以上の詳細な内容の説明は省略する。
[Embodiment 4]
In the above-described embodiment, the case where the position information receiving unit 105 is a GPS receiver has been described. However, the embodiment of the invention is not limited to this. It may be another position measuring device that takes time to reach a definite state. For example, a receiver (wireless LAN card or the like) for wireless LAN communication corresponding to the communication standard of IEEE802.11x (x is a, b, g, n, etc.) other than the GPS receiver may be used. In this case, the location information can be calculated based on the location information of the access point included in the radio signal received from the access point (base station) of the wireless LAN and the distance obtained from the radio wave intensity of the received radio signal. . Specifically, the position of the device is obtained after searching for connectable access points, obtaining the location information of the access points, and calculating the distance between the devices and the access points from the radio wave intensity. . At that time, the position of the access point having the strongest radio wave intensity may be used, or the position may be determined based on the radio wave intensity from three or more access points as in the case of GPS. A known technique can be used for the position determination method based on the information provided from the access point and the radio wave intensity. Therefore, detailed description of the details is omitted here.

本実施形態でも、位置情報計測部201が撮影機器100の現在位置を算出する処理中に撮影が行われることが考えられるため、位置情報受信部105が無線LANカード等の場合にも、本発明は適用可能である。また、GPS受信機と他の通信装置の併用により、GPSによる位置測定の精度向上・時間短縮が可能な撮影機器がある。しかし、このような機器であっても、位置測定のために何らかの処理を行う必要はあり、現在位置が未確定の期間は存在する。これらの機器においても、位置が確定するまでの間に撮影された画像の位置推定に本発明を適用することができる。   Even in this embodiment, since it is conceivable that shooting is performed during the process in which the position information measuring unit 201 calculates the current position of the photographing device 100, the present invention is also applicable to the case where the position information receiving unit 105 is a wireless LAN card or the like. Is applicable. In addition, there is a photographing apparatus that can improve the accuracy of position measurement by GPS and shorten the time by using a GPS receiver in combination with another communication device. However, even in such a device, it is necessary to perform some processing for position measurement, and there is a period in which the current position is uncertain. Also in these devices, the present invention can be applied to position estimation of an image taken before the position is determined.

[実施形態5]
上述の実施形態では、位置情報計測部201が一つの場合を説明したが、位置情報計測部201は、位置情報受信部105の種類に応じて複数あっても良い。例えば、GPS受信機用の位置情報計測部201−1と、無線LAN受信機用の位置情報計測部201−2が存在しても良い。この場合、位置情報計測部201−1及び201−2は、位置を確定した時点で各計測結果とともに確信度も出力する。確信度がより高い方の位置情報計測部から得られた現在位置の位置情報を起点として、撮影位置を推定する。
[Embodiment 5]
In the above-described embodiment, the case where there is one position information measuring unit 201 has been described. However, a plurality of position information measuring units 201 may be provided depending on the type of the position information receiving unit 105. For example, a position information measurement unit 201-1 for a GPS receiver and a position information measurement unit 201-2 for a wireless LAN receiver may exist. In this case, the position information measuring units 201-1 and 201-2 also output the certainty factor together with each measurement result when the position is determined. The shooting position is estimated from the position information of the current position obtained from the position information measuring unit with the higher certainty factor.

より具体的には、例えばGPS受信機において受信した信号の強度に基づいて、受信強度が所定の閾値以上の場合には位置情報計測部201−1での測定結果に対する確信度を予め定めた一定値としてもよい。当該閾値は、GPS受信機における受信信号により有効に位置が特定可能となる値として設定できる。また、一定値は確信度を0から100の範囲で表す場合に、80等のように相当に高い数値とすることができる。その一方、受信信号の強度が閾値未満の場合、例えば悪天候や室内環境などで受信強度が稼げない場合は確信度を20のように低い値に設定してもよい。   More specifically, for example, based on the intensity of a signal received by a GPS receiver, when the reception intensity is equal to or greater than a predetermined threshold, a certainty factor for the measurement result in the position information measurement unit 201-1 is set in advance. It may be a value. The threshold value can be set as a value at which the position can be effectively identified by the received signal in the GPS receiver. Further, when the certainty value is expressed in the range of 0 to 100, the constant value can be a considerably high value such as 80. On the other hand, when the intensity of the received signal is less than the threshold, for example, when the reception intensity cannot be achieved due to bad weather or indoor environment, the certainty factor may be set to a low value such as 20.

このようにしてGPS受信機での受信信号強度が高い場合にはGPS信号を優先的に使用するための確信度を与え、GPS受信機で精度が稼げない環境では無線LAN受信機を利用するように確信度を与える。なお閾値を利用せずに、測定された受信強度と比例する確信度を与えても良い。一方、無線LAN受信機に基づいて現在位置を求める場合、測定された受信強度に合わせた確信度を例えば0から100の間で算出する。この算出方法は、受信強度に比例した値を割り当てても良いし、それ以外の任意の方法を採用することもできる。算出された確信度は、GPS受信機に基づく現在位置について得られた確信度と比較され、確信度がより大きい現在位置が採用される。   In this way, when the received signal strength at the GPS receiver is high, a certainty factor is given for preferential use of the GPS signal, and the wireless LAN receiver is used in an environment where the accuracy cannot be achieved with the GPS receiver. Give confidence to Note that a certainty factor proportional to the measured reception intensity may be given without using the threshold value. On the other hand, when the current position is obtained based on the wireless LAN receiver, a certainty factor according to the measured reception intensity is calculated between 0 and 100, for example. As this calculation method, a value proportional to the reception intensity may be assigned, or any other method may be employed. The calculated certainty factor is compared with the certainty factor obtained with respect to the current position based on the GPS receiver, and a current position having a higher certainty factor is adopted.

なお、現在位置が複数の位置情報計測部において異なるタイミングで確定する場合、時間的に後に確定できた現在位置の確信度が、先に確定していたものより高いとき、後に確定できた位置を起点として撮影位置を推定しなおしてもよい。   In addition, when the current position is determined at different timings in a plurality of position information measurement units, when the certainty of the current position that can be determined later in time is higher than that determined earlier, the position that can be determined later The shooting position may be re-estimated as a starting point.

以上によれば、複数の位置情報計測部からの位置情報のうち、より精度の高い情報を利用して撮影機器100の現在位置を特定し、撮影位置を推定することができる。   According to the above, it is possible to specify the current position of the imaging device 100 using more accurate information among the position information from the plurality of position information measurement units, and estimate the imaging position.

[実施形態6]
上記実施形態では、内蔵センサ106として3軸の加速度センサを搭載している場合について説明したが、これに限定するものではない。加速度センサであれば、撮影機器の縦・横の状態を検知する目的で1軸乃至2軸のものが搭載されることもある。それぞれのセンサの有する機能に応じて移動状態を獲得するようにすれば、いずれのセンサを利用しても構わない。例えば、1軸であれば、撮影機器が、重力方向の加速度を検知できる姿勢であるかを判定する。この姿勢で検知できている間に、該重力方向の加速度の規則的な変化がある場合に、移動しているか否かの判定を行うようにする。それ以外の場合は、撮影機器が移動時の加速度の変化を検知するのが困難な姿勢で携帯されている可能性があるので、推定には利用しないようにするなどすれば良い。
[Embodiment 6]
In the above-described embodiment, the case where a three-axis acceleration sensor is mounted as the built-in sensor 106 has been described. However, the present invention is not limited to this. In the case of an acceleration sensor, one or two axes may be mounted for the purpose of detecting the vertical / horizontal state of the photographing device. Any sensor may be used as long as the movement state is acquired according to the function of each sensor. For example, in the case of one axis, it is determined whether the photographing device is in a posture capable of detecting acceleration in the direction of gravity. While there is a regular change in acceleration in the gravitational direction during detection in this posture, it is determined whether or not the vehicle is moving. In other cases, the photographing device may be carried in a posture in which it is difficult to detect a change in acceleration during movement.

[実施形態7]
以上では、本発明の実施形態をカメラ機能を有するデータ生成装置について記載してきた。しかし、例えば、データ生成(計測によるデータ生成も含む)の機能を有する他の機器において、生成データと計測位置の情報とを関連づけて管理する必要がある場合に、本願発明を適用することができる。その場合、上述の実施形態において、「画像」の語を「データ」に置き換え、「撮影」の語を「生成」に置き換えるだけでよい。なお、ここで生成可能なデータは、例えば音声データ、文書データ、温度や湿度その他の環境条件を示す環境データ、所定の計測器に従って計測した計測データなど、自装置内に保存可能なデータが考えられる。但し当該機器は、GPS受信機などの位置を測定する装置と、機器の移動を検出可能な内蔵センサとが搭載、或いは、接続されていることが必要となる。
[Embodiment 7]
In the above, the embodiment of the present invention has been described with respect to a data generation apparatus having a camera function. However, for example, in another device having a function of data generation (including data generation by measurement), the present invention can be applied when it is necessary to manage the generated data and the information on the measurement position in association with each other. . In this case, in the above-described embodiment, the word “image” may be replaced with “data” and the word “photographing” may be replaced with “generation”. Examples of data that can be generated here include data that can be stored in the device itself, such as voice data, document data, environmental data indicating temperature, humidity, and other environmental conditions, and measurement data measured according to a predetermined measuring instrument. It is done. However, the device needs to have a device for measuring the position such as a GPS receiver and a built-in sensor capable of detecting the movement of the device mounted or connected.

[その他の実施形態]
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
[Other Embodiments]
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media. Then, the computer (or CPU, MPU, etc.) of the system or apparatus reads out and executes the program.

Claims (10)

自装置内に保存可能なデータを生成するデータ生成装置であって、
前記データ生成装置の位置情報を算出する算出手段と、
前記算出手段における算出により位置情報が確定したか否かを判定する位置確定判定手段と、
前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測手段と、
前記位置確定判定手段が前記位置情報が未確定と判定している間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測手段が計測した第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測手段が計測した第2の移動状態を管理する、機器移動状態管理手段と、
前記位置確定判定手段が前記位置情報が確定したと判定した場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定手段と
を備えることを特徴とするデータ生成装置。
A data generation device that generates data that can be stored in its own device,
Calculating means for calculating position information of the data generating device;
Position determination determination means for determining whether or not position information has been determined by calculation in the calculation means;
An apparatus movement state measuring means for measuring a movement state of the data generation device based on an output from an acceleration sensor for detecting an acceleration of the data generation device;
Each data of the plurality of data generated while the position determination determination unit determines that the position information is not determined is generated from the time immediately before the data is generated until the data is generated. And the second moving state measured by the device moving state measuring unit after the latest data is generated from among the plurality of data is managed in association with the first moving state measured by the device moving state measuring unit. Equipment movement state management means for managing the movement state of
When the position determination determining unit determines that the position information has been determined, the plurality of data is generated based on the determined position information, the first movement state, and the second movement state. A data generation apparatus comprising: position estimation means for estimating a position.
前記機器移動状態計測手段は、前記移動状態を前記データ生成装置の移動の有無として計測し、
前記位置推定手段は、前記第2の移動状態が、前記データ生成装置の移動が無かったことを示す場合に、
前記複数のデータのうち最新に生成されたデータと、
該最新に生成されたデータより前に生成され、かつ、前記第1の移動状態が前記データ生成装置の移動が有ったことを示す最も新しいデータまでのデータと
が生成された位置を前記確定した位置情報と同一と推定することを特徴とする請求項1に記載のデータ生成装置。
The device movement state measuring means measures the movement state as the presence or absence of movement of the data generation device,
The position estimation means, when the second movement state indicates that the data generation device has not moved,
The most recently generated data of the plurality of data; and
The position where the data up to the newest data generated before the most recently generated data and the first moving state indicating that the data generating device has moved is generated is determined. The data generation apparatus according to claim 1, wherein the position information is estimated to be the same as the position information.
前記機器移動状態計測手段は、前記移動の有無を前記データ生成装置のユーザの歩数として計測し、
前記第1の移動状態は、前記複数のデータの各データについて、該各データの直前のデータが生成されてから該各データが生成されるまでの間の前記ユーザの歩数を示し、
前記位置推定手段は、前記複数のデータのうち、生成された位置が前記確定した位置情報と同一と推定されたデータを除く他のデータが生成された位置を、該データに対応する前記第1の移動状態に含まれる歩数の情報に基づいて推定することを特徴とする請求項2に記載のデータ生成装置。
The device movement state measuring means measures the presence or absence of the movement as the number of steps of the user of the data generation device,
The first movement state indicates, for each data of the plurality of data, the number of steps of the user between generation of the data immediately before the data and generation of the data.
The position estimation unit is configured to determine, from the plurality of data, a position where other data is generated except for data in which the generated position is estimated to be the same as the determined position information. The data generation apparatus according to claim 2, wherein the estimation is based on information on the number of steps included in the movement state.
前記データ生成装置が向いている方位を検知する方位センサをさらに備え、
前記機器移動状態計測手段は、前記移動の有無を、前記方位センサで検知された方位ごとの前記ユーザの歩数として計測し、
前記第1の移動状態は、前記複数のデータの各データについて、該各データの直前のデータが生成されてから該各データが生成されるまでの間の前記ユーザの方位ごとの歩数を示し、
前記位置推定手段は、前記複数のデータのうち、生成された位置が前記確定した位置情報と同一と推定されたデータを除く他のデータが生成された位置を、該データに対応する前記第1の移動状態に含まれる方位ごとの歩数の情報に基づいて推定することを特徴とする請求項2に記載のデータ生成装置。
Further comprising an azimuth sensor for detecting an azimuth facing the data generation device;
The device movement state measuring means measures the presence / absence of the movement as the number of steps of the user for each direction detected by the direction sensor,
The first movement state indicates, for each data of the plurality of data, the number of steps for each direction of the user from the time immediately before the data is generated until the data is generated,
The position estimation unit is configured to determine, from the plurality of data, a position where other data is generated except for data in which the generated position is estimated to be the same as the determined position information. The data generation apparatus according to claim 2, wherein the estimation is based on information on the number of steps for each direction included in the movement state.
前記データ生成装置はGPS受信機を備え、
前記算出手段は、前記GPS受信機で受信したGPS信号に基づき前記位置情報を算出することを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。
The data generation device includes a GPS receiver,
5. The data generation apparatus according to claim 1, wherein the calculation unit calculates the position information based on a GPS signal received by the GPS receiver. 6.
前記データ生成装置は無線LAN受信機を備え、
前記算出手段は、前記無線LAN受信機で受信した無線信号に基づき前記位置情報を算出することを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。
The data generation device includes a wireless LAN receiver,
5. The data generation apparatus according to claim 1, wherein the calculation unit calculates the position information based on a wireless signal received by the wireless LAN receiver.
前記データ生成装置はGPS受信機と、無線LAN受信機とを備え、
前記算出手段は、
前記GPS受信機で受信したGPS信号に基づく前記位置情報を算出し、
前記GPS信号の受信強度に基づき、該GPS信号に基づき算出された前記位置情報の確信度を算出し、
前記無線LAN受信機で受信した無線信号に基づく前記位置情報を算出し、
前記無線信号の受信強度に基づき、該無線信号に基づき算出された前記位置情報の確信度を算出し、
前記GPS信号と前記無線信号とのそれぞれに基づいて算出された確信度を比較して、より高い確信度を有する位置情報を、前記データ生成装置の現在の位置を示す位置情報とする
ことを特徴とする請求項1乃至4のいずれか1項に記載のデータ生成装置。
The data generation device includes a GPS receiver and a wireless LAN receiver,
The calculating means includes
Calculating the position information based on the GPS signal received by the GPS receiver;
Based on the received intensity of the GPS signal, calculate the certainty of the position information calculated based on the GPS signal,
Calculating the position information based on a wireless signal received by the wireless LAN receiver;
Based on the reception strength of the radio signal, calculate the certainty of the position information calculated based on the radio signal,
Comparing the certainty calculated based on each of the GPS signal and the radio signal, the position information having a higher certainty is used as position information indicating the current position of the data generating device. The data generation device according to any one of claims 1 to 4.
画像を撮影する撮影手段をさらに備え、
前記データは撮影手段が生成した画像であることを特徴とする請求項1乃至7のいずれか1項に記載のデータ生成装置。
It further comprises a photographing means for photographing an image,
The data generation apparatus according to claim 1, wherein the data is an image generated by a photographing unit.
自装置内に保存可能なデータを生成するデータ生成装置の制御方法であって、
算出手段が、前記データ生成装置の位置情報を算出する算出工程と、
位置確定判定手段が、前記算出工程において、算出により位置情報が確定したか否かを判定する位置確定判定工程と、
機器移動状態計測手段が、前記データ生成装置の加速度を検出する加速度センサからの出力に基づき、前記データ生成装置の移動状態を計測する機器移動状態計測工程と、
機器移動状態管理手段が、前記位置確定判定工程において前記位置情報が未確定と判定されている間に生成された複数のデータの各データを、該各データの直前のデータが生成されてから該各データが生成されるまでに前記機器移動状態計測工程で計測された第1の移動状態と関連づけて管理し、かつ、前記複数のデータのうち最新のデータが生成されてから以降に前記機器移動状態計測工程で計測された第2の移動状態を管理する、機器移動状態管理工程と、
位置推定手段が、前記位置確定判定工程で前記位置情報が確定したと判定された場合に、確定した前記位置情報と、前記第1の移動状態及び第2の移動状態とに基づいて、前記複数のデータが生成された位置を推定する位置推定工程と
を備えることを特徴とするデータ生成装置の制御方法。
A method of controlling a data generation device that generates data that can be stored in the device,
A calculating step for calculating position information of the data generating device;
A position confirmation determining step for determining whether or not the position information is confirmed by calculation in the calculation step;
A device movement state measurement unit that measures a movement state of the data generation device based on an output from an acceleration sensor that detects an acceleration of the data generation device; and
The device movement state management means uses each data of the plurality of data generated while the position information is determined to be indeterminate in the position determination determination step after the data immediately before the data is generated. Management is performed in association with the first movement state measured in the device movement state measurement step until each data is generated, and the device movement is performed after the latest data is generated among the plurality of data. A device movement state management step for managing the second movement state measured in the state measurement step;
When the position estimation means determines that the position information has been determined in the position determination determination step, the plurality of positions are determined based on the determined position information and the first movement state and the second movement state. And a position estimation step of estimating a position where the data is generated.
コンピュータを、請求項1乃至8のいずれか1項に記載のデータ生成装置の各手段として機能させることを特徴とするプログラム。   A program that causes a computer to function as each unit of the data generation device according to any one of claims 1 to 8.
JP2009232868A 2009-10-06 2009-10-06 Data generation apparatus, method of controlling the same, and program Withdrawn JP2011082770A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009232868A JP2011082770A (en) 2009-10-06 2009-10-06 Data generation apparatus, method of controlling the same, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009232868A JP2011082770A (en) 2009-10-06 2009-10-06 Data generation apparatus, method of controlling the same, and program

Publications (1)

Publication Number Publication Date
JP2011082770A true JP2011082770A (en) 2011-04-21

Family

ID=44076367

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009232868A Withdrawn JP2011082770A (en) 2009-10-06 2009-10-06 Data generation apparatus, method of controlling the same, and program

Country Status (1)

Country Link
JP (1) JP2011082770A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012249016A (en) * 2011-05-26 2012-12-13 Canon Inc Imaging apparatus and imaging method
JP2013009204A (en) * 2011-06-24 2013-01-10 Olympus Imaging Corp Imaging device, imaging method and program
JP2013013070A (en) * 2011-05-31 2013-01-17 Canon Inc Imaging apparatus, imaging system, imaging apparatus control method, imaging system control method, and program
JP2017535086A (en) * 2015-07-31 2017-11-24 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Method, imaging system, and program for image processing

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012249016A (en) * 2011-05-26 2012-12-13 Canon Inc Imaging apparatus and imaging method
JP2013013070A (en) * 2011-05-31 2013-01-17 Canon Inc Imaging apparatus, imaging system, imaging apparatus control method, imaging system control method, and program
JP2013009204A (en) * 2011-06-24 2013-01-10 Olympus Imaging Corp Imaging device, imaging method and program
JP2017535086A (en) * 2015-07-31 2017-11-24 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Method, imaging system, and program for image processing
US10567651B2 (en) 2015-07-31 2020-02-18 SZ DJI Technology Co., Ltd. System and method for image processing

Similar Documents

Publication Publication Date Title
JP5200780B2 (en) Imaging apparatus and method, and program
KR101990073B1 (en) Method and apparatus for shooting and storing multi-focused image in electronic device
US9721346B2 (en) Image assessment device, method, and computer readable medium for 3-dimensional measuring and capturing of image pair range
US10582105B2 (en) Changing camera parameters based on wireless signal information
US8891823B2 (en) Apparatus, control method, and storage medium for acquiring and storing position information in association with image data
JP2010514044A (en) Automatic image direction change based on face detection on display
CN108616691B (en) Photographing method and device based on automatic white balance, server and storage medium
JP2007218896A (en) Imaging device, position information recording method and program
CN103369229B (en) The synchronous shooting method and system of many devices
JP2006513657A (en) Adding metadata to images
JP2011082770A (en) Data generation apparatus, method of controlling the same, and program
JPH10239055A (en) Portable information collecting device
JP3706907B2 (en) Method for estimating the current position and orientation of a user
CN102238320A (en) Shooting device and shooting method thereof
JP2008199319A (en) Imaging apparatus, and method for controlling the same
US20220051005A1 (en) Walking estimation system, walking estimation method, and computer readable-medium
JP4058454B1 (en) Camera shooting support system
JP5666007B2 (en) Position correction method and apparatus
JP2011139352A (en) Information processing method, program, and photographic device
JP5773753B2 (en) Imaging apparatus and control method
WO2017130360A1 (en) Portable terminal apparatus, device management method and device management program
JP2009224900A (en) Photography device and photography method
JP2017229036A (en) Electronic apparatus, imaging system, composition determination method and program
JP2013026711A (en) Photographing device, control method for photographing device, and computer program
JP6391006B2 (en) Material inspection device, material inspection method, and material inspection system

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130108