JP2015230420A - Projection type display device - Google Patents

Projection type display device Download PDF

Info

Publication number
JP2015230420A
JP2015230420A JP2014117227A JP2014117227A JP2015230420A JP 2015230420 A JP2015230420 A JP 2015230420A JP 2014117227 A JP2014117227 A JP 2014117227A JP 2014117227 A JP2014117227 A JP 2014117227A JP 2015230420 A JP2015230420 A JP 2015230420A
Authority
JP
Japan
Prior art keywords
information
projection
position information
distance
measuring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014117227A
Other languages
Japanese (ja)
Inventor
健介 稲垣
Kensuke Inagaki
健介 稲垣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2014117227A priority Critical patent/JP2015230420A/en
Publication of JP2015230420A publication Critical patent/JP2015230420A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To provide a projection type display device capable of displaying information associated with position information of an accurate projection position when the information associated with the plurality of position information is present in the vicinity in an extension reality software.SOLUTION: The projection type display device includes position measurement means for measuring a position of the device body, direction measurement means for measuring a direction of the device body, distance measurement means for measuring a distance from the device body to the projection surface, communication means, and information acquisition means for acquiring information associated with the position information by using the communication means. Position information of the projection surface is calculated on the basis of the information acquired by the position measurement means, the direction measurement means, and the distance measurement means, and the information associated with the position information acquired by the information acquisition means and the position information of the projection surface are switched. The projector is capable of projecting and displaying an air tag and determines a projection priority of the air tag according to GPS information and the projection parameter.

Description

本発明は、投射型表示装置に関し、特に位置情報に関連図けられた情報を表示する投射型表示装置に関する。   The present invention relates to a projection display device, and more particularly to a projection display device that displays information related to position information.

近年、デジタルカメラや携帯において、セカイカメラ(登録商標)に代表される拡張現実ソフトウェアが普及し、その利便性が一般に認知されつつある。拡張現実ソフトウェアでは、現実世界の位置情報に関連付けて情報を付加することが可能であり、付加された情報は端末の表示部で現実世界の画像に重畳表示される。   In recent years, augmented reality software represented by Sekai Camera (registered trademark) has become widespread in digital cameras and mobile phones, and its convenience is generally recognized. In augmented reality software, information can be added in association with location information in the real world, and the added information is superimposed on the real world image on the display unit of the terminal.

このような拡張現実に関する技術として、特許文献1では、ユーザーの現在位置に応じてナビゲーション情報と共に周囲に存在する施設などの情報を合わせて表示する技術が開示されている。また、特許文献2では投射表示する対象物を認識し、対象上に対象物に関連する情報を表示する技術が開示されている。   As a technique relating to such augmented reality, Patent Document 1 discloses a technique for displaying information such as facilities existing in the vicinity together with navigation information according to the current position of the user. Patent Document 2 discloses a technique for recognizing an object to be projected and displaying information related to the object on the object.

特開2004−093358号公報JP 2004-093358 A 特開2009−008905号公報JP 2009-008905 A

しかしながら、特許文献1および特許文献2に開示されている技術では、位置情報に関連付けられた情報が近傍に多数存在するような場合に、複数の位置情報に関連付けられた情報の位置を正確に表示することが困難であった。   However, in the techniques disclosed in Patent Document 1 and Patent Document 2, when there are many pieces of information associated with position information in the vicinity, the positions of information associated with a plurality of pieces of position information are accurately displayed. It was difficult to do.

上記目的を達成するため、本発明の投射型表示装置は、
本体の位置を計測する位置計測手段と、
本体の方向を計測する方向計測手段と、
本体から投影面までの距離を計測する距離計測手段と、
通信手段と、
前記通信手段を用いて位置情報に関連付けられた情報を取得する情報取得手段を有し、
前記位置計測手段、方向計測手段、距離計測手段から得られた情報を元に投影面の位置情報を算出し、
前記情報取得手段によって得られた位置情報に関連付けられた情報と投影面の位置情報に応じて、投影する位置情報に関連付けられた情報を切り替えることを特徴とする。
In order to achieve the above object, a projection display device according to the present invention provides:
Position measuring means for measuring the position of the main body;
Direction measuring means for measuring the direction of the main body,
Distance measuring means for measuring the distance from the main body to the projection surface;
Communication means;
Comprising information acquisition means for acquiring information associated with the position information using the communication means;
Based on the information obtained from the position measuring means, the direction measuring means, and the distance measuring means, the position information of the projection plane is calculated,
The information associated with the position information to be projected is switched according to the information associated with the position information obtained by the information acquisition means and the position information of the projection plane.

本発明によれば、位置情報に関連付けられた情報が近傍に複数存在する場合にも、正確に情報表示を行うことが可能となる。   According to the present invention, it is possible to accurately display information even when a plurality of pieces of information associated with position information exist in the vicinity.

本発明に係る実施例の構成を説明するための構成図である。It is a block diagram for demonstrating the structure of the Example which concerns on this invention. 本発明に掛かる実施例の処理を示したフローチャートである。It is the flowchart which showed the process of the Example concerning this invention. 本発明に掛かる実施例のタグ選択処理を説明するための図である。It is a figure for demonstrating the tag selection process of the Example concerning this invention. 本発明に掛かる実施例のプロジェクタと投影面の位置のずれを説明するための図である。It is a figure for demonstrating the shift | offset | difference of the position of the projector of the Example concerning this invention, and a projection surface. 本発明に掛かる実施例の第2のタグ選択処理を説明するための図である。It is a figure for demonstrating the 2nd tag selection process of the Example concerning this invention. 本発明に掛かる実施例の第3のタグ選択処理を説明するための図である。It is a figure for demonstrating the 3rd tag selection process of the Example concerning this invention.

[実施例1]
以下、図面を参照して本発明の実施例を詳細に説明する。
[Example 1]
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は本発明のプロジェクタ10の構成を説明するための構成図である。プロジェクタ10はプロジェクタ全体の動作を制御するCPUとメモリから成る制御部11、光源や液晶パネルから構成される投射制御部12、プロジェクタの投影方向を判断する電子コンパス13、投影面までの距離を測定する投射距離計測部14を備える。更に、外部のサーバーと通信を行うための通信部15、GPS受信機などから成るプロジェクタの位置情報を計測する位置計測部16から構成されている。   FIG. 1 is a configuration diagram for explaining the configuration of a projector 10 according to the present invention. The projector 10 includes a control unit 11 including a CPU and a memory for controlling the operation of the entire projector, a projection control unit 12 including a light source and a liquid crystal panel, an electronic compass 13 for determining the projection direction of the projector, and a distance to the projection surface. A projection distance measuring unit 14 is provided. Furthermore, it comprises a communication unit 15 for communicating with an external server, and a position measurement unit 16 for measuring position information of a projector including a GPS receiver.

次に図2を用いてプロジェクタ10が位置情報に関連付けられた情報(以降タグと表記)を表示する動作の説明を行う。まず、表示処理が開始されると、位置計測部16を用いてプロジェクタ10の位置情報を取得する(S11)。位置情報の一例としては、経度、緯度を利用することが可能である。経度、緯度を用いることにより、プロジェクタ10がどこに存在するか特定可能となる。なお、位置情報としては、経度、緯度以外にも携帯電話の基地局情報など、その他の情報を用いても良い。   Next, an operation of displaying information (hereinafter referred to as a tag) associated with the position information by the projector 10 will be described with reference to FIG. First, when the display process is started, the position information of the projector 10 is acquired using the position measurement unit 16 (S11). As an example of position information, longitude and latitude can be used. By using the longitude and latitude, it is possible to specify where the projector 10 exists. In addition to the longitude and latitude, other information such as mobile phone base station information may be used as the position information.

次に取得した位置情報を元に、通信部15を介して外部のサーバーからプロジェクタ近傍のタグを取得する(S12)。なお、外部のサーバーはiPhone(登録商標)のセカイカメラ(登録商標)で実現している処理と同様に、タグのデータベースを保持しており、位置情報を受信すると、近傍に存在する複数のタグを返信する仕組みが実装されている。次に投射距離計測部14を用いてプロジェクタから画像を投影している位置までの距離を取得する(S13)。距離の計測方法の一例としては、レーザーによる距離測定方法などを使用する。   Next, based on the acquired position information, a tag near the projector is acquired from an external server via the communication unit 15 (S12). The external server maintains a tag database, similar to the processing realized by the Sekai Camera (registered trademark) of iPhone (registered trademark). When receiving location information, multiple tags exist in the vicinity. A mechanism to reply is implemented. Next, the distance from the projector to the position where the image is projected is acquired using the projection distance measuring unit 14 (S13). As an example of the distance measurement method, a laser distance measurement method or the like is used.

次に電子コンパス13を用いてプロジェクタ10の投影方向を取得し(S14)、S11で得られたプロジェクタの位置情報、S13で得られたプロジェクタ10から投影面までの距離、S14で得られたプロジェクタの投影方向から、投影面の位置情報を算出する(S15)。次にS15で得られた投影面の位置情報と、S12でサーバーから得られた複数のタグを用い、表示するべきタグの選択処理を行い(S16)、選択されたタグを表示する(S17)。最後にユーザーから終了指示があるか判断し(S18)、終了指示あるまでS11〜S17までの表示処理を繰り返す。S18で終了指示があった場合は処理を終了する。   Next, the projection direction of the projector 10 is acquired using the electronic compass 13 (S14), the position information of the projector obtained in S11, the distance from the projector 10 to the projection plane obtained in S13, and the projector obtained in S14. The position information of the projection plane is calculated from the projection direction (S15). Next, using the position information of the projection plane obtained in S15 and the plurality of tags obtained from the server in S12, a tag to be displayed is selected (S16), and the selected tag is displayed (S17). . Finally, it is determined whether there is an end instruction from the user (S18), and the display processing from S11 to S17 is repeated until the end instruction is received. If there is an end instruction in S18, the process ends.

図3を用いてS16のタグの選択処理を詳しく説明する。S12において、外部のサーバーから得られたタグがタグA〜タグEまでの5つだった場合を例に挙げて説明する。図3(a)は、プロジェクタ10とタグの位置関係を示した図である。図3の(a)に示すように、タグA、タグCはプロジェクタの投影面から一定距離Rの範囲内に存在し、タグB、タグD、タグEは範囲外に存在している。図3(a)のような状態の場合、プロジェクタ10はタグA、タグCのみを選択し、図3(b)のようにタグAとタグCを表示する。図3(b)では、プロジェクタにより近い位置にあるタグCをタグAよりも拡大して表示している様子を示している。図3(b)では、投影面やプロジェクタのからの距離に応じて、タグの大きさを変更して表示しているが、色や形状などその他の表示変更を行うように構成しても良い。また、タグの表示、非表示に用いている一定距離Rは、ユーザーの設定により任意に設定可能である。   The tag selection process in S16 will be described in detail with reference to FIG. The case where there are five tags from tag A to tag E in S12 will be described as an example. FIG. 3A shows the positional relationship between the projector 10 and the tag. As shown in FIG. 3A, the tag A and the tag C exist within a certain distance R from the projection plane of the projector, and the tag B, the tag D, and the tag E exist outside the range. In the state as shown in FIG. 3A, the projector 10 selects only the tag A and the tag C, and displays the tag A and the tag C as shown in FIG. FIG. 3B shows a state in which the tag C located closer to the projector is displayed in an enlarged manner than the tag A. In FIG. 3B, the size of the tag is changed and displayed according to the distance from the projection surface and the projector, but other display changes such as color and shape may be made. . Further, the fixed distance R used for displaying and hiding the tag can be arbitrarily set by a user setting.

また、S16のタグの選択処理では、投影面からタグまでの距離のみだけでなく、表示している投影面の位置情報を用いてタグの選択を行っても良い。例えば、図5(a)のように住宅の壁などに投影した場合は、斜線部の住宅内部に存在するタグは、プライバシー保護の観点から図5(b)に示すように、表示しないように制御しても良い。投影面の位置が住宅であるかの判定は、通信部15を介して外部の地図情報を有するサーバーに問い合わせを行い、投影位置が公共の施設や道路であるか判定し、表示、非表示を制御する。   Further, in the tag selection processing in S16, the tag may be selected using not only the distance from the projection plane to the tag but also the position information of the displayed projection plane. For example, when projected on the wall of a house as shown in FIG. 5 (a), the tag present inside the house in the shaded area is not displayed as shown in FIG. 5 (b) from the viewpoint of privacy protection. You may control. To determine whether the position of the projection plane is a house, an inquiry is made to a server having external map information via the communication unit 15 to determine whether the projection position is a public facility or road, and display or non-display is performed. Control.

また、S16のタグの選択処理に、タグの属性情報などを用いても良い。タグの属性情報とは、例えばタグの画像に含まれる撮影時のパラメータなどである。図6を用いて撮影時のパラメータを用いたタグの選択処理を説明する。図6(a)はマクロモードで撮影された画像、図6(b)はパンフォーカスで撮影された画像を表している。前述の例では、投影面から距離Rの範囲内にタグが存在するかどうかで、タグの表示、非表示を切り替えたが、判定に用いる距離Rを画像ごとに切り替えても良い。例えば、図6(c)に示すように、マクロモードで撮影された画像では前述のRより短い距離R1を判定に用い、パンフォーカスで撮影された画像では前述のRよりも長い距離R2を判定に用いる。   Also, tag attribute information or the like may be used in the tag selection processing in S16. The tag attribute information is, for example, shooting parameters included in the tag image. A tag selection process using parameters at the time of shooting will be described with reference to FIG. 6A shows an image shot in the macro mode, and FIG. 6B shows an image shot in the pan focus. In the above example, whether or not the tag is displayed is switched depending on whether or not the tag exists within the range of the distance R from the projection plane. However, the distance R used for determination may be switched for each image. For example, as shown in FIG. 6C, a distance R1 shorter than R is used for determination in an image shot in macro mode, and a distance R2 longer than R is determined in an image shot in pan focus. Used for.

判定の結果、図6(c)に示すように、マクロモードで撮影された画像(a)は非表示となり、パンフォーカスで撮影された画像(b)は表示される結果となる。一般的にマクロモードで撮影された画像は、撮影された対象物に近づかないと認識できない。一方、パンフォーカスで撮影された風景などの画像は、比較的遠くからでも認識可能である。撮影パラメータをタグの表示、非表示の判定に用いることによって、ユーザーが認識しやすいタグのみを選択的に表示することが可能となる。   As a result of the determination, as shown in FIG. 6C, the image (a) photographed in the macro mode is not displayed, and the image (b) photographed in the pan focus is displayed. In general, an image captured in the macro mode cannot be recognized unless it is close to the captured object. On the other hand, an image such as a landscape photographed with pan focus can be recognized from a relatively long distance. By using shooting parameters for tag display / non-display determination, only tags that are easily recognized by the user can be selectively displayed.

なお、本実施例ではプロジェクタ本体の位置情報、投射方向、投影面までの距離情報を用いて投影面の位置情報を算出したが、図4に示すようにプロジェクタ10を傾けて投影した場合は、投影面の位置情報がずれてしまう。傾けて投射した場合に対応するために、さらに傾きセンサを設けて、傾きセンサから得られた角度値と、投影距離計測部14から得られた投影面までの距離を用いて、投影面とプロジェクタの位置のずれを算出するように構成しても良い。傾きセンサを用いる場合は、投影面までの距離の代わりに、算出された投影面とプロジェクタの位置のずれを用い、プロジェクタの位置情報、投影方向から、投影面の位置情報を算出しても良い。   In this embodiment, the position information of the projection surface is calculated using the position information of the projector body, the projection direction, and the distance information to the projection surface. However, when the projector 10 is tilted and projected as shown in FIG. The position information of the projection plane is shifted. In order to deal with the case of tilting and projecting, a tilt sensor is further provided, and the projection surface and the projector are used by using the angle value obtained from the tilt sensor and the distance to the projection surface obtained from the projection distance measuring unit 14. It may also be configured to calculate the position shift. When using an inclination sensor, the position information of the projection plane may be calculated from the position information of the projector and the projection direction by using the calculated deviation of the position of the projection plane and the projector instead of the distance to the projection plane. .

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。   As mentioned above, although preferable embodiment of this invention was described, this invention is not limited to these embodiment, A various deformation | transformation and change are possible within the range of the summary.

10 プロジェクタ、11 制御部、12 投射制御部、13 電子コンパス、
14 投射距離計測部、15 通信部、16 位置計測部
10 projector, 11 control unit, 12 projection control unit, 13 electronic compass,
14 projection distance measurement unit, 15 communication unit, 16 position measurement unit

Claims (5)

本体の位置を計測する位置計測手段と、
本体の方向を計測する方向計測手段と、
本体から投影面までの距離を計測する距離計測手段と、
通信手段と、
前記通信手段を用いて位置情報に関連付けられた情報を取得する情報取得手段を有し、
前記位置計測手段、方向計測手段、距離計測手段から得られた情報を元に投影面の位置情報を算出し、
前記情報取得手段によって得られた位置情報に関連付けられた情報と投影面の位置情報に応じて、投影する位置情報に関連付けられた情報を切り替えることを特徴とする投射型表示装置。
Position measuring means for measuring the position of the main body;
Direction measuring means for measuring the direction of the main body,
Distance measuring means for measuring the distance from the main body to the projection surface;
Communication means;
Comprising information acquisition means for acquiring information associated with the position information using the communication means;
Based on the information obtained from the position measuring means, the direction measuring means, and the distance measuring means, the position information of the projection plane is calculated,
A projection type display apparatus, wherein information associated with position information to be projected is switched according to information associated with position information obtained by the information acquisition means and position information of a projection plane.
さらに傾きセンサを備え、前記位置計測手段、方向計測手段、距離計測手段、傾きセンサから得られた情報を元に投影面の位置情報を算出することを特徴とする請求項1に記載の投射型表示装置。 The projection type according to claim 1, further comprising an inclination sensor, wherein position information of the projection plane is calculated based on information obtained from the position measurement means, the direction measurement means, the distance measurement means, and the inclination sensor. Display device. 投影面の位置から一定の範囲内に存在する位置情報に関連付けられた情報を選択的に表示することを特徴とする請求項1又は請求項2に記載の投射型表示装置。 The projection display apparatus according to claim 1 or 2, wherein information associated with position information existing within a certain range from the position of the projection plane is selectively displayed. 投影面の位置情報を元に投影面の位置の属性情報を取得し、前記投影面の位置の属性情報に応じて位置情報に関連付けられた情報を選択的に表示することを特徴とする請求項1乃至請求項3の何れか一項に記載の投射型表示装置。 The attribute information of the position of the projection plane is acquired based on the position information of the projection plane, and information associated with the position information is selectively displayed according to the attribute information of the position of the projection plane. The projection display device according to any one of claims 1 to 3. 位置情報に関連付けられた情報の属性情報を取得し、前記位置情報に関連付けられた情報の属性情報に応じて位置情報に関連付けられた情報を選択的に表示することを特徴とする請求項1乃至請求項4の何れか一項に記載の投射型表示装置。 The attribute information of the information associated with the position information is acquired, and the information associated with the position information is selectively displayed according to the attribute information of the information associated with the position information. The projection display device according to claim 4.
JP2014117227A 2014-06-06 2014-06-06 Projection type display device Pending JP2015230420A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014117227A JP2015230420A (en) 2014-06-06 2014-06-06 Projection type display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014117227A JP2015230420A (en) 2014-06-06 2014-06-06 Projection type display device

Publications (1)

Publication Number Publication Date
JP2015230420A true JP2015230420A (en) 2015-12-21

Family

ID=54887203

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014117227A Pending JP2015230420A (en) 2014-06-06 2014-06-06 Projection type display device

Country Status (1)

Country Link
JP (1) JP2015230420A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105954961A (en) * 2016-05-06 2016-09-21 联想(北京)有限公司 Information processing method and projection equipment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105954961A (en) * 2016-05-06 2016-09-21 联想(北京)有限公司 Information processing method and projection equipment

Similar Documents

Publication Publication Date Title
KR102414587B1 (en) Augmented reality data presentation method, apparatus, device and storage medium
US11776185B2 (en) Server, user terminal, and service providing method, and control method thereof for displaying photo images within a map
JP6484587B2 (en) Method and system for determining spatial characteristics of a camera
US10043314B2 (en) Display control method and information processing apparatus
JP6025433B2 (en) Portable navigation device
CN108226906A (en) A kind of scaling method, device and computer readable storage medium
US20120026088A1 (en) Handheld device with projected user interface and interactive image
US8928584B2 (en) Display apparatus, display method, and storage medium
CN103002208A (en) Electronic device and image pickup apparatus
US9818196B2 (en) Method and device for positioning and navigating
US20110183684A1 (en) Mobile communication terminal and method
KR20150088662A (en) Method and apparatus for providing mobile navigation service used augmented reality singularity
KR20120009638A (en) Method for Managing Virtual-Object Data about Non-Recognition Reality-Object, Augmented Reality Device and Recording Medium
CN107193820B (en) Position information acquisition method, device and equipment
US20160343156A1 (en) Information display device and information display program
CN114286066A (en) Projection correction method, projection correction device, storage medium and projection equipment
TWI400467B (en) Electronic device with object guidance function and its object guidance method
CN114608591B (en) Vehicle positioning method and device, storage medium, electronic equipment, vehicle and chip
JP2015230420A (en) Projection type display device
KR101135525B1 (en) Method for updating panoramic image and location search service using the same
JP2010171664A (en) Personal digital assistant, information display control method, and information display control program
KR20150096127A (en) Method and apparatus for calculating location of points captured in image
CN114339179A (en) Projection correction method, projection correction device, storage medium and projection equipment
JP2010063076A (en) Image processing apparatus and image processing apparatus program
JP6537189B2 (en) Map display device and map display method