JP2011209622A - Device and method for providing information, and program - Google Patents

Device and method for providing information, and program Download PDF

Info

Publication number
JP2011209622A
JP2011209622A JP2010079218A JP2010079218A JP2011209622A JP 2011209622 A JP2011209622 A JP 2011209622A JP 2010079218 A JP2010079218 A JP 2010079218A JP 2010079218 A JP2010079218 A JP 2010079218A JP 2011209622 A JP2011209622 A JP 2011209622A
Authority
JP
Japan
Prior art keywords
information
celestial
display
coordinates
attribute
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010079218A
Other languages
Japanese (ja)
Other versions
JP5649842B2 (en
Inventor
Noboru Anbara
昇 庵原
Kazuhiro Sasao
和宏 笹尾
Ko Yokoyama
甲 横山
Arata Sakurai
新 櫻井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NS Solutions Corp
Original Assignee
NS Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NS Solutions Corp filed Critical NS Solutions Corp
Priority to JP2010079218A priority Critical patent/JP5649842B2/en
Publication of JP2011209622A publication Critical patent/JP2011209622A/en
Application granted granted Critical
Publication of JP5649842B2 publication Critical patent/JP5649842B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Instructional Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To facilitate astronomical observations of a user.SOLUTION: An information providing method includes the steps of: acquiring device position information calculated from the information on the position of an information providing device; acquiring orientation information calculated from the information on the orientation of the information providing device; acquiring attitude information calculated from the information on the attitude of the information providing device; reading astronomical information of a celestial body included in a field of view of a display part based on the device position information, the orientation information, the attitude information, internal parameters of the display part, and current time, from the astronomical information including the positional information for calculating the coordinates of the celestial body on the display part corresponding to the position of the celestial body position in a real space, and the attribute information on the attribute regarding the celestial body stored in a storage part; generating an image indicating the attribute regarding the celestial body based on the attribute information included in the astronomical information; calculating the display coordinates of the celestial body in the display part based on the position information, the device position information and the current time included in the astronomical information; and displaying the generated image based on the display coordinates.

Description

本発明は、情報提供装置、情報提供方法、及びプログラムに関する。   The present invention relates to an information providing apparatus, an information providing method, and a program.

天体観察を行うには、一般に星座早見盤が用いられる。また、近年では、ゲーム機器(非特許文献1)やモバイル端末(非特許文献2)にGPS等が備えられ、利用者は、その場から見える星座をゲーム機やモバイル端末のディスプレイに表示させることができる。   A constellation quick-view board is generally used for astronomical observation. Further, in recent years, game machines (Non-Patent Document 1) and mobile terminals (Non-Patent Document 2) are equipped with a GPS or the like, and a user can display a constellation seen from the spot on a display of a game machine or a mobile terminal. Can do.

インターネット<URL:http://www.astroarts.co.jp/products/hoshizora-navi/index-j.shtml>Internet <URL: http://www.astroarts.co.jp/products/hoshizora-navi/index-j.shtml> インターネット<URL:http://ipodtouchlab.com/2008/08/gps-starmap-220.html>Internet <URL: http://ipodtouchlab.com/2008/08/gps-starmap-220.html>

しかしながら、非特許文献1及び非特許文献2に開示されている技術では、星などの情報を得ることは可能であるが、画面と実際の空とを交互に見ることが要求されるため、例えば一等星など特徴のある星の確認はしやすいものの、星が多く見える地域では実際の星が多いが故に、どれがどの星であるかを特定しにくい問題がある。   However, in the technologies disclosed in Non-Patent Document 1 and Non-Patent Document 2, it is possible to obtain information such as stars, but since it is required to see the screen and the actual sky alternately, for example, Although it is easy to identify characteristic stars such as first-class stars, there are many actual stars in areas where many stars can be seen, which makes it difficult to identify which star is which.

本発明はこのような問題点に鑑みなされたもので、ユーザによる天体観察をより容易にすることを目的とする。   The present invention has been made in view of such problems, and an object thereof is to make it easier for a user to observe an astronomical object.

そこで、本発明に係る情報提供装置は、表示部及び記憶部を有する情報提供装置であって、位置検出装置で検出された当該情報提供装置の位置を示す情報から算出された装置位置情報を取得する位置情報取得手段と、方位検出装置で検出された当該情報提供装置の方位を示す情報から算出された方位情報を取得する方位情報取得手段と、姿勢検出装置で検出された当該情報提供装置の姿勢を示す情報から算出された姿勢情報を取得する姿勢情報取得手段と、前記記憶部に記憶された、現実空間の天体の位置に対応する前記表示部における前記天体の座標を算出するための位置情報と前記天体に関する属性を示す属性情報とを含む天体情報から、前記位置情報取得手段で取得された装置位置情報、前記方位情報取得手段で取得された方位情報、前記姿勢情報取得手段で取得された姿勢情報、前記表示部の内部パラメータ、及び現在の時刻に基づいて、前記表示部の視野に含まれる天体の天体情報を読み込む読込手段と、前記天体情報に含まれる属性情報に基づいて前記天体に関する属性を表す画像を生成し、前記天体情報に含まれる位置情報、前記装置位置情報、及び現在の時刻に基づいて、前記表示部における前記天体の表示座標を算出し、生成した画像を、前記表示座標に基づいて表示する表示制御手段と、を有する。   Therefore, the information providing apparatus according to the present invention is an information providing apparatus having a display unit and a storage unit, and acquires device position information calculated from information indicating the position of the information providing device detected by the position detecting device. Position information obtaining means for obtaining the azimuth information calculated from the information indicating the azimuth of the information providing apparatus detected by the azimuth detecting apparatus, and the information providing apparatus detected by the attitude detecting apparatus. Position information acquisition means for acquiring posture information calculated from information indicating the posture, and a position for calculating coordinates of the celestial body in the display unit corresponding to the position of the celestial body in the real space, stored in the storage unit From celestial information including information and attribute information indicating attributes related to the celestial object, apparatus position information acquired by the position information acquisition means, azimuth information acquired by the azimuth information acquisition means, Based on posture information acquired by the posture information acquisition means, internal parameters of the display unit, and current time, reading means for reading celestial body information included in the field of view of the display unit, and included in the celestial information Based on the attribute information generated, an image representing the attribute related to the celestial object is generated, and the display coordinates of the celestial object in the display unit are calculated based on the position information included in the celestial object information, the device position information, and the current time. Display control means for displaying the generated image based on the display coordinates.

ここで、「位置情報取得手段」は、例えば、後述する計測部40に対応する。「方位情報取得手段」は、例えば、後述する方位情報取得部45に対応する。「姿勢情報取得手段」は、例えば、後述する姿勢情報取得部50に対応する。「読込手段」は、例えば、後述する天体情報読込部60に対応する。「表示制御手段」は、例えば、後述する表示制御部75に対応する。   Here, the “position information acquisition unit” corresponds to, for example, a measurement unit 40 described later. The “azimuth information acquisition unit” corresponds to, for example, an orientation information acquisition unit 45 described later. “Attitude information acquisition means” corresponds to, for example, an attitude information acquisition unit 50 described later. The “reading unit” corresponds to, for example, an astronomical information reading unit 60 described later. The “display control unit” corresponds to, for example, a display control unit 75 described later.

本発明によれば、ユーザによる天体観察をより容易にすることができる。   According to the present invention, astronomical observation by a user can be made easier.

AR提供装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of AR provision apparatus. AR提供装置の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of AR provision apparatus. AR制御処理に係るフローチャートの一例を示す図である。It is a figure which shows an example of the flowchart which concerns on AR control processing. 拡張画像表示処理に係るフローチャートの一例を示す図である。It is a figure which shows an example of the flowchart which concerns on an extended image display process. 拡張画像が表示されたときの一例を示す図である。It is a figure which shows an example when an extended image is displayed. 拡張画像が表示されたときの一例を示す図である。It is a figure which shows an example when an extended image is displayed. 拡張画像が表示されたときの一例を示す図である。It is a figure which shows an example when an extended image is displayed. 拡張画像が表示されたときの一例を示す図である。It is a figure which shows an example when an extended image is displayed. 拡張画像が表示されたときの一例を示す図である。It is a figure which shows an example when an extended image is displayed.

以下、本発明の実施形態について図面に基づいて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本実施形態に係るAR提供装置100のハードウェア構成の一例を示す図である。
AR提供装置100は、情報提供装置(コンピュータ)の一例であり、HMD(Head Mounted Display)等であり、AR提供装置100を介して知覚できる現実空間に整合する位置に、AR提供装置100で生成した画像(コンピュータグラフィックス画像)を表示することにより、拡張された現実感(AR:Augmented Reality)を提供する。より具体的には、AR提供装置100は、AR提供装置100を介して知覚できる現実空間の天体に整合する位置に、天体に関する各種の情報を表す画像(拡張画像)を表示する。
FIG. 1 is a diagram illustrating an example of a hardware configuration of the AR providing apparatus 100 according to the present embodiment.
The AR providing apparatus 100 is an example of an information providing apparatus (computer), such as an HMD (Head Mounted Display), and is generated by the AR providing apparatus 100 at a position that matches the real space that can be perceived through the AR providing apparatus 100. By displaying the processed image (computer graphics image), an augmented reality (AR) is provided. More specifically, the AR providing apparatus 100 displays an image (an extended image) representing various types of information regarding the celestial object at a position that matches the celestial object in the real space that can be perceived via the AR providing apparatus 100.

AR提供装置100は、制御装置5、記憶装置10、通信装置15、表示装置20、方位検出装置25、姿勢検出装置30、及び撮影装置35を有する。
制御装置5は、例えばCPU(Central Processing Unit)であり、必要に応じて、記憶装置10よりプログラムを読み出して、プログラムを実行する。プログラムが実行されることで、AR提供装置100における後述の機能、及び後述のフローチャートに係る処理が実現される。
The AR providing apparatus 100 includes a control device 5, a storage device 10, a communication device 15, a display device 20, an orientation detection device 25, an attitude detection device 30, and an imaging device 35.
The control device 5 is a CPU (Central Processing Unit), for example, and reads a program from the storage device 10 and executes the program as necessary. By executing the program, a function to be described later in the AR providing apparatus 100 and a process according to a flowchart to be described later are realized.

記憶装置10は、記憶部の一例であり、ROM(Read Only Memory)、RAM(Random Access Memory)、HD(Hard Disk)等であり、各種の情報を記憶する。より詳細に説明すると、記憶装置10(ROM)は、AR提供装置100の電源投入時に最初に読み込まれるプログラム等を記憶する。また、記憶装置10(RAM)は、AR提供装置100のメインメモリとして機能する。また、記憶装置10(HD)は、プログラム以外に制御装置5により算出された数値データ等を記憶する。なお、AR提供装置100は、記憶装置10に記憶される各種の情報を、CD−ROM等の記録媒体から取得してもよいし、ネットワーク等を通じてダウンロードしてもよい。   The storage device 10 is an example of a storage unit, and is a ROM (Read Only Memory), a RAM (Random Access Memory), an HD (Hard Disk), or the like, and stores various types of information. More specifically, the storage device 10 (ROM) stores a program that is read first when the AR providing device 100 is powered on. The storage device 10 (RAM) functions as a main memory of the AR providing device 100. In addition to the program, the storage device 10 (HD) stores numerical data calculated by the control device 5 and the like. The AR providing apparatus 100 may acquire various types of information stored in the storage device 10 from a recording medium such as a CD-ROM, or may download the information via a network or the like.

通信装置15は、位置検出装置の一例である衛星と通信を行い、軌道情報を取得する。また、通信装置15は、天体に関する各種の情報(天体情報)を記憶した記憶装置を有する情報処理装置(サーバ等)と通信を行い、天体情報を取得する。通信装置15で取得された天体情報は、記憶装置10に記憶される。また、通信装置15は、サーバ等を介して取得した人工衛星の一覧情報に基づいて、各人工衛星を管理しているサーバ等から、各人工衛星の軌道要素を取得する。通信装置15で取得された軌道要素は、記憶装置10に記憶される。なお、天体情報、及び軌道要素については、通信装置15を介して取得される構成に限られるものでなはく、例えば、記憶装置10に予め記憶されていてもよい。
表示装置20は、表示部の一例であり、透過型の液晶ディスプレイ等であり、各種の画像を表示する。
The communication device 15 communicates with a satellite that is an example of a position detection device, and acquires orbit information. In addition, the communication device 15 communicates with an information processing device (such as a server) having a storage device that stores various types of information regarding celestial bodies (celestial information), and acquires celestial information. The astronomical information acquired by the communication device 15 is stored in the storage device 10. Further, the communication device 15 acquires the orbital element of each artificial satellite from the server or the like that manages each artificial satellite based on the artificial satellite list information acquired via the server or the like. The trajectory element acquired by the communication device 15 is stored in the storage device 10. The astronomical information and the orbital elements are not limited to the configuration acquired via the communication device 15, and may be stored in advance in the storage device 10, for example.
The display device 20 is an example of a display unit, and is a transmissive liquid crystal display or the like, and displays various images.

方位検出装置25は、例えば電子コンパスであり、微弱な地磁気(例えば前後方向の地磁気及び左右方向の地磁気)を検知し、地磁気の強さから北の方向を計算してAR提供装置100の方位(方位情報)を算出する。
姿勢検出装置30は、例えばジャイロセンサであり、物体の角速度を検知し、角速度を積分などして角度(AR提供装置100の姿勢(姿勢情報))を算出する。
撮影装置35は、現実空間の撮影を行う。
The direction detection device 25 is, for example, an electronic compass, detects weak geomagnetism (for example, front-rear direction geomagnetism and left-right direction geomagnetism), calculates the north direction from the strength of the geomagnetism, and calculates the direction of the AR providing device 100 ( (Azimuth information) is calculated.
The posture detection device 30 is, for example, a gyro sensor, and detects an angular velocity of an object and calculates an angle (posture (posture information) of the AR providing device 100) by integrating the angular velocity.
The imaging device 35 captures a real space.

なお、AR提供装置100のハードウェア構成は、これに限られるものではない。例えば、方位検出装置25及び姿勢検出装置30に代えて、方位検出装置25及び姿勢検出装置30の機能を一体とした機能を有する方位姿勢検出装置を採用してもよい。   Note that the hardware configuration of the AR providing apparatus 100 is not limited to this. For example, instead of the azimuth detection device 25 and the posture detection device 30, an azimuth posture detection device having a function in which the functions of the azimuth detection device 25 and the posture detection device 30 are integrated may be employed.

図2は、AR提供装置100の機能構成の一例を示す図である。
AR提供装置100は、計測部40、方位情報取得部45、姿勢情報取得部50、映像取得部55、天体情報読込部60、軌道計測部65、座標補正部70、及び表示制御部75を有する。
計測部40は、位置情報取得手段の一例であり、通信装置15を介して衛星から取得された軌道情報から、AR提供装置100の現在の位置を示す情報(装置位置情報の一例であるAR位置情報)を計測(算出して取得)する。
FIG. 2 is a diagram illustrating an example of a functional configuration of the AR providing apparatus 100.
The AR providing apparatus 100 includes a measurement unit 40, an orientation information acquisition unit 45, an attitude information acquisition unit 50, a video acquisition unit 55, an astronomical information reading unit 60, a trajectory measurement unit 65, a coordinate correction unit 70, and a display control unit 75. .
The measurement unit 40 is an example of position information acquisition means, and information indicating the current position of the AR providing apparatus 100 (AR position that is an example of apparatus position information) from orbit information acquired from a satellite via the communication device 15. Information) is measured (calculated and acquired).

方位情報取得部45は、方位検出装置25で算出された方位情報を取得する。なお、方位情報取得部45は、方位検出装置25から地磁気などの検出された情報を受け取り、方位情報を算出してもよい。
姿勢情報取得部50は、姿勢検出装置30で算出された姿勢情報を取得する。なお、姿勢情報取得部50は、姿勢検出装置30から角速度などの検出された情報を受け取り、姿勢情報を算出してもよい。
映像取得部55は、映像データ取得手段の一例であり、撮影装置35で撮影された現実空間の映像データを取得する。
The azimuth information acquisition unit 45 acquires the azimuth information calculated by the azimuth detection device 25. Note that the azimuth information acquisition unit 45 may receive detected information such as geomagnetism from the azimuth detection device 25 and calculate the azimuth information.
The posture information acquisition unit 50 acquires the posture information calculated by the posture detection device 30. Note that the posture information acquisition unit 50 may receive detected information such as angular velocity from the posture detection device 30 and calculate posture information.
The video acquisition unit 55 is an example of a video data acquisition unit, and acquires video data of a real space photographed by the photographing device 35.

天体情報読込部60は、記憶装置10から天体情報を読み込む。より詳細に説明すると、天体情報読込部60は、まず、計測部40で計測されたAR位置情報、方位情報取得部45で取得された方位情報、及び姿勢情報取得部50で取得された姿勢情報、及び現在の時刻などに基づいて、AR提供装置100を装着しているユーザの視野(AR視野)を特定(推定)する。
本実施形態では、表示装置20の内部パラメータ(焦点距離など)が既知であるので、AR視野は、方位情報、及び姿勢情報により定められる地平座標系における範囲とする。次に、AR視野に含まれる天体を特定し、特定した天体に対応する天体情報を記憶装置10から読み込む。
The celestial information reading unit 60 reads celestial information from the storage device 10. More specifically, the astronomical information reading unit 60 firstly includes the AR position information measured by the measuring unit 40, the azimuth information acquired by the azimuth information acquiring unit 45, and the posture information acquired by the posture information acquiring unit 50. Based on the current time and the like, the visual field (AR visual field) of the user wearing the AR providing apparatus 100 is specified (estimated).
In the present embodiment, since internal parameters (such as focal length) of the display device 20 are known, the AR field of view is a range in the horizon coordinate system defined by the azimuth information and the posture information. Next, a celestial body included in the AR visual field is specified, and celestial information corresponding to the specified celestial body is read from the storage device 10.

ここで、天体は、宇宙空間にある物体であり、星(恒星、惑星、彗星、流星)、人工衛星などである。また、天体情報には、天体に関する属性を示す属性情報として、天体を識別する天体ID、天体の名称、天体が属する星座名、星座に関する形状、天体の位置(赤経、赤緯)、天体を観測(視認)したときの天体の直径(実視直径)、実際の天体の直径(実直径)、天体の明るさを表す等級(絶対等級)、天体を観測したときの等級(実視等級)、等級の種別、及び天体を発見した者の氏名の情報が含まれる。   Here, a celestial body is an object in outer space, such as a star (a star, a planet, a comet, a meteor), or an artificial satellite. The celestial information includes, as attribute information indicating attributes related to the celestial object, a celestial ID that identifies the celestial object, the name of the celestial object, the name of the constellation to which the celestial object belongs, the shape related to the constellation, the position of the celestial object (red longitude, declination), Observed (viewed) celestial diameter (actual visual diameter), actual celestial diameter (actual diameter), celestial brightness class (absolute grade), celestial object class (actual visual class) , Class type, and name of the person who found the celestial body.

ここで、本実施形態で採用している座標系について説明する。本実施形態では、天体の絶対位置を示す(赤経、赤緯)を座標値とする赤道座標系、天体の相対位置を示す(方位角、高度)を座標値とする地平座標系、天体に係る拡張画像の表示装置20の画面上での表示位置を示す(x、y)を座標値とする仮想座標系(表示座標系)を採用している。なお、各天体は、AR提供装置と非常に離れて位置しているので、観測者にとってみれば各天体が平面上に映し出されている。そこで、仮想座標系では、2次元の座標系を採用している。   Here, the coordinate system employed in the present embodiment will be described. In this embodiment, an equatorial coordinate system that uses absolute values of the celestial bodies (ascension, declination) as coordinate values, a horizon coordinate system that uses the azimuths as relative coordinates (azimuth and altitude) as coordinate values, A virtual coordinate system (display coordinate system) is adopted in which (x, y) indicating the display position of the extended image on the screen of the display device 20 is a coordinate value. Since each celestial body is located very far from the AR providing device, each celestial object is projected on a plane for the observer. Therefore, the virtual coordinate system employs a two-dimensional coordinate system.

軌道計測部65は、位置情報算出手段の一例であり、AR位置情報、現在の時刻、及び人工衛星の軌道要素に基づいて、人工衛星の位置を計測(算出して取得)する。
座標補正部70は、AR位置情報、方位情報、及び姿勢情報などを用いて算出された、拡張画像を表示装置20に表示する位置を示す座標(表示座標)を、映像取得部55で取得された映像データに基づいて補正する。
表示制御部75は、方位情報、姿勢情報、及び天体情報などに基づいて、拡張画像を生成して表示装置20に表示する。
The orbit measurement unit 65 is an example of position information calculation means, and measures (calculates and acquires) the position of the artificial satellite based on the AR position information, the current time, and the orbital element of the artificial satellite.
In the coordinate correction unit 70, the video acquisition unit 55 acquires the coordinates (display coordinates) indicating the position at which the extended image is displayed on the display device 20 calculated using the AR position information, the azimuth information, the posture information, and the like. Correct based on recorded video data.
The display control unit 75 generates an extended image based on the azimuth information, the posture information, the astronomical information, and the like, and displays the extended image on the display device 20.

図3は、AR提供装置100における各機能により行われるAR制御処理に係るフローチャートの一例を示す図である。
はじめに、ステップS5では、計測部40は、通信装置15を介して衛星から取得された軌道情報から、いわゆるGPSを利用してAR提供装置100の現在の位置を示す情報(AR位置情報)を特定(測定)する。
次に、ステップS10では、向き特定部(方位情報取得部45及び姿勢情報取得部50)は、AR提供装置100の向き(方位及び姿勢)を特定する。すなわち、方位情報取得部45は、方位検出装置25で算出された方位情報を取得する。姿勢情報取得部50は、姿勢検出装置30で算出された姿勢情報を取得する。
FIG. 3 is a diagram illustrating an example of a flowchart relating to an AR control process performed by each function in the AR providing apparatus 100.
First, in step S5, the measurement unit 40 identifies information (AR position information) indicating the current position of the AR providing apparatus 100 using so-called GPS from orbit information acquired from the satellite via the communication device 15. (taking measurement.
Next, in step S <b> 10, the orientation specifying unit (the orientation information acquisition unit 45 and the orientation information acquisition unit 50) specifies the orientation (azimuth and orientation) of the AR providing device 100. That is, the azimuth information acquisition unit 45 acquires the azimuth information calculated by the azimuth detection device 25. The posture information acquisition unit 50 acquires the posture information calculated by the posture detection device 30.

次に、ステップS15では、天体情報読込部60は、AR提供装置100の位置及び向き、並びに現在の時刻に基づいて、AR視野に含まれる天体の天体情報を記憶装置10から読み込む(抽出する)。
より具体的には、まず、天体情報読込部60は、表示装置20の内部パラメータ、AR位置情報、方位情報取得部45で取得された方位情報、及び姿勢情報取得部50で取得された姿勢情報に基づいて、方位角及び高度により特定される地平座標上の範囲をAR視野として特定する。
次に、天体情報読込部60は、AR位置情報及び現在の時刻に基づいて、天体情報に含まれる天体の位置(赤経、赤緯)の情報を地平座標系における位置(方位角及び高度)の情報に変換する。そして、天体情報読込部60は、変換した位置(方位角及び高度)がAR視野に含まれるか否かを判定し、含まれると判定した位置(方位角及び高度)の天体の天体情報を抽出する。
次に、ステップS20では、表示制御部75は、拡張画像表示処理を行う。なお、ステップS5〜S20までの処理は、AR提供装置の電源がONであるときは、繰り返して行われる。また、AR提供装置の電源がONであるときは、映像取得部55により撮影装置35で撮影された現実空間の映像データが取得されているものとする。
Next, in step S15, the astronomical information reading unit 60 reads (extracts) the celestial body information included in the AR visual field from the storage device 10 based on the position and orientation of the AR providing apparatus 100 and the current time. .
More specifically, first, the astronomical information reading unit 60 includes internal parameters of the display device 20, AR position information, orientation information acquired by the orientation information acquisition unit 45, and orientation information acquired by the orientation information acquisition unit 50. The range on the horizontal coordinate specified by the azimuth angle and the altitude is specified as the AR field of view.
Next, based on the AR position information and the current time, the astronomical information reading unit 60 converts the information on the position of the celestial body (red longitude, declination) included in the celestial information to the position (azimuth and altitude) in the horizon coordinate system. Convert to information. Then, the astronomical information reading unit 60 determines whether or not the converted position (azimuth and altitude) is included in the AR visual field, and extracts astronomical information of the celestial body at the position (azimuth and altitude) determined to be included. To do.
Next, in step S20, the display control unit 75 performs an extended image display process. Note that the processing from steps S5 to S20 is repeatedly performed when the power of the AR providing apparatus is ON. In addition, when the power of the AR providing device is ON, it is assumed that the video data of the real space captured by the imaging device 35 is acquired by the video acquisition unit 55.

図4は、AR提供装置100における各機能により行われる拡張画像表示処理に係るフローチャートの一例を示す図である。
はじめに、表示制御部75は、各種の表示モードを記憶装置10から読み込む(ステップS25)。
本実施形態では、表示モードとして、星に関する属性を表す画像を表示するか否かを判断可能な星属性表示モード、星座の情報を表す画像を表示するか否かを判断可能な星座表示モード、星を強調する画像を表示するか否かを判断可能な星強調表示モード、人工衛星に関する属性等を表す画像を表示するか否かを判断可能な人工衛星属性表示モード、風景を手前にして拡張画像を表示するか否かを判断可能な風景表示モードが設けられている。
各表示モードの情報(ON/OFF)は、入力デバイスを介して(例えば、AR提供装置100の任意の個所(例えばフレーム部分)に表示モード毎に設けられるボタンをユーザが押下することにより)、予め設定されている。
FIG. 4 is a diagram illustrating an example of a flowchart relating to an extended image display process performed by each function in the AR providing apparatus 100.
First, the display control unit 75 reads various display modes from the storage device 10 (step S25).
In the present embodiment, as a display mode, a star attribute display mode capable of determining whether or not to display an image representing a star attribute, a constellation display mode capable of determining whether or not to display an image representing constellation information, Star highlight display mode that can determine whether or not to display an image that emphasizes stars, satellite attribute display mode that can determine whether or not to display an image representing attributes related to satellites, etc. A landscape display mode is provided that can determine whether or not to display an image.
Information (ON / OFF) of each display mode is input via an input device (for example, when a user presses a button provided for each display mode at an arbitrary position (for example, a frame portion) of the AR providing apparatus 100). It is set in advance.

ステップS30では、表示制御部75は、星属性表示モードがONであるか否か(星に関する属性を表す画像を表示する旨の設定がされているか否か)を判別する。このとき、表示制御部75は、星属性表示モードがONであると判別した場合は、続いて、ステップS35の処理を行い、他方、星属性表示モードがOFFであると判別した場合は、続いて、ステップS40の処理を行う。
ステップS35では、表示制御部75は、抽出された天体情報に基づいて、星に関する属性を表す拡張画像を生成する。より具体的には、表示制御部75は、天体情報に含まれる星の名称、等級の種別、及び天体を発見した者の氏名の情報を読み出し、星の名称、星の等級、天体を発見した者の氏名の少なくとも1つを表す拡張画像を生成する。複数の天体情報が抽出された場合は、夫々の天体情報に対応して拡張画像を生成する。
なお、抽出された全ての天体情報について拡張画像を生成する構成に限られるものではない。例えば、予め定めた、或いは観測者により入力装置を介して指定された等級の星についてのみ拡張画像を生成してもよい。また、例えば、星の名称が設定されている星についてのみ拡張画像を生成してもよい。図5Aに、星に関する属性を表す拡張画像110が表示されたときの一例を示す。
In step S <b> 30, the display control unit 75 determines whether or not the star attribute display mode is ON (whether or not a setting for displaying an image representing an attribute related to a star is set). At this time, if it is determined that the star attribute display mode is ON, the display control unit 75 performs the process of step S35. If it is determined that the star attribute display mode is OFF, the display control unit 75 continues. Then, the process of step S40 is performed.
In step S <b> 35, the display control unit 75 generates an extended image that represents attributes related to stars based on the extracted astronomical information. More specifically, the display control unit 75 reads the name of the star included in the celestial information, the classification of the grade, and the name of the person who found the celestial object, and found the name of the star, the magnitude of the star, and the celestial object. An expanded image representing at least one of the names of the persons is generated. When a plurality of celestial body information is extracted, an extended image is generated corresponding to each celestial body information.
Note that the present invention is not limited to the configuration for generating the extended image for all extracted astronomical information. For example, an extended image may be generated only for stars of a predetermined grade or specified by an observer via an input device. Further, for example, an extended image may be generated only for a star for which a star name is set. FIG. 5A shows an example when the extended image 110 representing the attributes related to stars is displayed.

ステップS40では、表示制御部75は、星座表示モードがONであるか否か(星座の情報を表す画像を表示する旨の設定がされているか否か)を判別する。このとき、表示制御部75は、星座表示モードがONであると判別した場合は、続いて、ステップS45の処理を行い、他方、星座表示モードがOFFであると判別した場合は、続いて、ステップS50の処理を行う。
ステップS45では、表示制御部75は、抽出された天体情報に基づいて、星座の情報を表す拡張画像を生成する。より具体的には、表示制御部75は、天体情報に含まれる星座に関する形状の情報(星座情報の一例)として規定されている、星(起点)の位置情報、及び該星と星座線により結ばれる星(終点)の位置情報を読み出して座標変換、投影変換を行い、星座線を表す拡張画像を生成する。複数の天体情報が抽出された場合は、夫々の天体情報に対応して拡張画像を生成する。なお、表示制御部75は、天体情報に含まれる星座情報(星座に関する形状の情報及び天体が属する星座名の情報)に基づいて、星座線と星座の名称とを表す拡張画像を生成してもよい。図5Bに、星座の情報を表す拡張画像120が表示されたときの一例を示す。
In step S40, the display control unit 75 determines whether or not the constellation display mode is ON (whether or not a setting for displaying an image representing constellation information is set). At this time, if the display control unit 75 determines that the constellation display mode is ON, it subsequently performs the process of step S45. On the other hand, if it is determined that the constellation display mode is OFF, The process of step S50 is performed.
In step S45, the display control unit 75 generates an extended image representing constellation information based on the extracted astronomical information. More specifically, the display control unit 75 is connected by the position information of the star (starting point) defined as shape information (an example of constellation information) regarding the constellation included in the celestial body information, and the star and the constellation line. The position information of the star (end point) to be read is read out, coordinate conversion and projection conversion are performed, and an extended image representing the constellation line is generated. When a plurality of celestial body information is extracted, an extended image is generated corresponding to each celestial body information. The display control unit 75 may generate an extended image representing the constellation line and the name of the constellation based on the constellation information included in the celestial information (information on the shape of the constellation and information on the constellation name to which the celestial body belongs). Good. FIG. 5B shows an example when the extended image 120 representing constellation information is displayed.

ステップS50では、表示制御部75は、星強調表示モードがONであるか否か(星を強調する画像を表示する旨の設定がされているか否か)を判別する。このとき、表示制御部75は、星強調表示モードがONであると判別した場合は、続いて、ステップS55の処理を行い、他方、星強調表示モードがOFFであると判別した場合は、続いて、ステップS60の処理を行う。
ステップS55では、表示制御部75は、抽出された天体情報に基づいて、星を強調する拡張画像を生成する。より具体的には、表示制御部75は、天体情報に含まれる実視直径の情報(サイズ情報の一例)、及び実視等級の情報(等級情報の一例)に基づいて、本来視認される星の大きさよりも大きく、及び本来視認される星の明るさよりも明るくした、星を強調する拡張画像を生成する。なお、観測者が星を視認できないときは、すなわち、実施直径が「0」であるときは、観測者が識別可能な直径とし、実施等級が「0」であるときは、観測者が識別可能な等級として、星を強調する拡張画像を生成する。
図5Cに、星を強調する拡張画像130が表示されたときの一例を示す。この構成によれば、都市部など、空が明るい地域や、月夜などで空が明るい時間帯であっても、ユーザが星を確認しやすくなる。
なお、ここでは星強調表示モードがON/OFFである例を述べたが、ON/OFFの二値での設定だけなく、スライダーバーのように無段階で強調の度合いを調整するようにしてもよい。
In step S50, the display control unit 75 determines whether or not the star emphasis display mode is ON (whether or not a setting for displaying an image emphasizing a star is set). At this time, if it is determined that the star emphasis display mode is ON, the display control unit 75 performs the process of step S55. If it is determined that the star emphasis display mode is OFF, the display control unit 75 continues. Then, the process of step S60 is performed.
In step S55, the display control unit 75 generates an extended image that emphasizes stars based on the extracted celestial body information. More specifically, the display control unit 75 recognizes the star that is originally visually recognized based on the information on the real vision diameter (an example of the size information) included in the celestial body information and the information on the real vision grade (an example of the grade information). An expanded image that emphasizes the star is generated, which is larger than the size of the star and brighter than the brightness of the star that is originally visually recognized. In addition, when the observer cannot visually recognize the star, that is, when the implementation diameter is “0”, the diameter is identifiable by the observer, and when the implementation class is “0”, the observer is identifiable. An extended image that emphasizes stars is generated as a high grade.
FIG. 5C shows an example when an extended image 130 that emphasizes stars is displayed. According to this configuration, the user can easily check the star even in a bright area such as an urban area or in a time zone where the sky is bright such as a moonlit night.
Here, an example in which the star emphasis display mode is ON / OFF has been described. However, not only the binary setting of ON / OFF but also the degree of emphasis can be adjusted steplessly like a slider bar. Good.

ステップS60では、表示制御部75は、人工衛星属性表示モードがONであるか否か(人工衛星に関する属性等を表す画像を表示する旨の設定がされているか否か)を判別する。このとき、表示制御部75は、人工衛星属性表示モードがONであると判別した場合は、続いて、ステップS65の処理を行い、他方、人工衛星属性表示モードがOFFであると判別した場合は、続いて、ステップS70の処理を行う。
ステップS65では、表示制御部75は、抽出された天体情報に基づいて、人工衛星に関する属性等を表す拡張画像を生成する。
より具体的には、表示制御部75は、軌道計測部65により計測された人工衛星の位置、及び現在の時刻に基づいて、AR視野に人工衛星が存在するか否かを判断する。このとき、表示制御部75は、AR視野に人工衛星が存在すると判断したときは、記憶装置10に記憶されている人工衛星属性情報(人工衛星を表すための情報、人工衛星の名称の情報、及び人工衛星の軌道を表すための情報)に基づいて、人工衛星、人工衛星の名称、及び人工衛星の軌道を表す拡張画像を生成する。他方、表示制御部75は、AR視野に人工衛星が存在しないと判断したときは、続いて、ステップS70の処理を行う。図5Dに、人工衛星に関する属性等を表す拡張画像140が表示されたときの一例を示す。
なお、AR視野に人工衛星が存在しないと判断したときは、予め定められた時間(例えば、5分)内に、AR視野に人工衛星が含まれるか否かを判断し、AR視野に人工衛星が含まれると判断した場合は、人工衛星が接近している旨のメッセージ、及び人工衛星の軌道を表す拡張画像を生成してもよい。
また、人工衛星属性情報は、記憶装置10に予め記憶されている構成であってもよいし、通信装置15を介してサーバ等から取得されて記憶装置10に記憶される構成であってもよい。
In step S60, the display control unit 75 determines whether or not the artificial satellite attribute display mode is ON (whether or not a setting for displaying an image representing an attribute related to the artificial satellite is set). At this time, if the display control unit 75 determines that the satellite attribute display mode is ON, it subsequently performs the process of step S65, and if it determines that the satellite attribute display mode is OFF. Subsequently, the process of step S70 is performed.
In step S65, the display control unit 75 generates an extended image representing an attribute related to the artificial satellite based on the extracted astronomical information.
More specifically, the display control unit 75 determines whether or not the artificial satellite exists in the AR view based on the position of the artificial satellite measured by the orbit measuring unit 65 and the current time. At this time, when the display control unit 75 determines that an artificial satellite exists in the AR field of view, artificial satellite attribute information (information for representing the artificial satellite, information on the name of the artificial satellite, And an information for representing the orbit of the artificial satellite), an extended image representing the artificial satellite, the name of the artificial satellite, and the orbit of the artificial satellite is generated. On the other hand, when the display control unit 75 determines that there is no artificial satellite in the AR field of view, the display control unit 75 subsequently performs the process of step S70. FIG. 5D shows an example when an extended image 140 representing attributes and the like related to artificial satellites is displayed.
When it is determined that there is no artificial satellite in the AR field of view, it is determined whether or not an artificial satellite is included in the AR field of view within a predetermined time (for example, 5 minutes). May be generated, a message indicating that the artificial satellite is approaching and an extended image representing the orbit of the artificial satellite may be generated.
The satellite attribute information may be stored in advance in the storage device 10 or may be acquired from a server or the like via the communication device 15 and stored in the storage device 10. .

ステップS70では、表示制御部75は、風景表示モードがONであるか否か(風景を手前にして拡張画像を表示する旨の設定がされているか否か)を判別する。このとき、表示制御部75は、風景表示モードがONであると判別した場合は、続いて、ステップS80の処理を行い、他方、風景表示モードがOFFであると判別した場合は、続いて、ステップS75の処理を行う。
ステップS75では、表示制御部75は、生成した拡張画像を表示装置20に表示する。
より具体的には、表示制御部75は、拡張画像を生成する際に用いた天体情報に含まれる天体の位置(赤道座標系での位置)の情報、AR位置情報、現在の時刻、歳差運動等に基づいて、赤道座標系での天体の位置を地平座標系での天体の位置に座標変換し、座標変換した位置について投影変換することで仮想座標系における天体の座標(表示座標)を算出する。
In step S70, the display control unit 75 determines whether or not the landscape display mode is ON (whether or not the setting for displaying the extended image with the landscape in front is set). At this time, if it is determined that the landscape display mode is ON, the display control unit 75 performs the process of step S80. If it is determined that the landscape display mode is OFF, the display control unit 75 continues. The process of step S75 is performed.
In step S <b> 75, the display control unit 75 displays the generated extended image on the display device 20.
More specifically, the display control unit 75 includes information on the position of the celestial body (position in the equatorial coordinate system) included in the celestial body information used when generating the extended image, AR position information, the current time, and the precession. Based on the motion, etc., the coordinates of the celestial body in the virtual coordinate system (display coordinates) are converted by converting the position of the celestial body in the equator coordinate system to the position of the celestial body in the horizon coordinate system and projecting the converted position. calculate.

他方、座標補正部70は、映像取得部55により取得された映像データを解析して、AR視野に含まれる天体の座標(仮想座標系の座標)を算出する。
このとき、座標補正部70は、映像データの一の画像データでは天体を特定することが困難である場合(十分な輝度がない場合)、複数の画像データの各画素の輝度を累積する。続いて、座標補正部70は、画像データ(AR視野)を小さな領域(小領域)に分割して小領域ごとに輝度を統合(付近の画素を統合)することで、天体を特定する。続いて、座標補正部70は、小領域の中心(或いは、累積した輝度の重心)に座標を割当てることで、天体の座標(映像座標の一例である補正座標)を算出する。
そして、座標補正部70は、基準とする天体について、例えば最も明るい天体(なお、表示座標の天体については絶対等級などにより特定でき、補正座標の天体については輝度などにより特定できる。)について、表示制御部75が算出した表示座標と補正座標とを比較して、夫々の座標にずれがあると判断した場合は、補正座標(換言するならば表示座標と補正座標と)に基づいて表示座標を補正する。例えば、基準とする天体の表示座標が(x,y)であり、補正座標が(x+1,y+1)であり、ずれがあると判断した場合は、他の天体の表示座標が(s,t)であるときは(s+1,t+1)と補正する。この構成によれば、磁場の影響等によって、拡張画像の表示の位置と実際の天体の位置との間にズレが生じてしまい、ユーザが違和感を覚える事態を回避することができる。
On the other hand, the coordinate correction unit 70 analyzes the video data acquired by the video acquisition unit 55, and calculates the coordinates of the celestial body included in the AR visual field (coordinates in the virtual coordinate system).
At this time, the coordinate correction unit 70 accumulates the luminance of each pixel of the plurality of image data when it is difficult to specify the celestial object with one image data of the video data (when there is not enough luminance). Subsequently, the coordinate correction unit 70 identifies the astronomical object by dividing the image data (AR visual field) into small regions (small regions) and integrating the luminance for each small region (integrating neighboring pixels). Subsequently, the coordinate correction unit 70 calculates the coordinates of the celestial body (corrected coordinates, which is an example of video coordinates) by assigning coordinates to the center of the small area (or the center of gravity of the accumulated luminance).
Then, the coordinate correction unit 70 displays the reference celestial object, for example, the brightest celestial object (the celestial object with display coordinates can be specified by an absolute grade or the like, and the celestial object with correction coordinates can be specified by brightness or the like). When the display coordinates calculated by the control unit 75 are compared with the correction coordinates and it is determined that there is a difference between the coordinates, the display coordinates are calculated based on the correction coordinates (in other words, the display coordinates and the correction coordinates). to correct. For example, when the display coordinates of the reference celestial body are (x, y), the correction coordinates are (x + 1, y + 1), and it is determined that there is a deviation, the display coordinates of the other celestial bodies are (s, t). Is corrected to (s + 1, t + 1). According to this configuration, it is possible to avoid a situation in which the user feels uncomfortable due to a difference between the display position of the extended image and the actual position of the celestial body due to the influence of the magnetic field or the like.

ここで、座標補正部70は、ずれが規定値を超えたと判断した場合(映像データの天体を特定できなかった場合を含む。)、すなわち、建物や、雲などの障害物により、一部又は全部の天体が見えていない場合は、全ての天体について表示座標と補正座標とを平行移動、回転移動等を行い、表示座標と補正座標とが一致するか否か(拡張画像と画像データとが整合するか否か)を判断する。このとき、一致しないと判断した場合は、座標補正部70は、補正を行わない。
そして、表示制御部75は、表示装置20を透過制御し(天体を視認可能にし)、表示座標(或いは補正された表示座標)に拡張画像を表示する。この構成によれば、建物や、雲などの障害物により、一部又は全部の天体が見えていない場合であっても、観測者は、見えていない天体を把握することができるようになる。なお、表示制御部75は、生成した拡張画像を映像データに重畳して表示装置20に表示してもよい。
Here, when the coordinate correction unit 70 determines that the deviation exceeds the specified value (including the case where the celestial body of the video data cannot be specified), that is, partly or by an obstacle such as a building or a cloud. If all the celestial objects are not visible, the display coordinates and the correction coordinates are translated, rotated, etc. for all the celestial bodies, and whether or not the display coordinates and the correction coordinates match (the extended image and the image data are Judgment is made or not. At this time, if it is determined that they do not match, the coordinate correction unit 70 does not perform correction.
Then, the display control unit 75 controls the display device 20 to transmit (makes the celestial body visible), and displays the extended image on the display coordinates (or the corrected display coordinates). According to this configuration, even when some or all of the celestial bodies are not visible due to obstacles such as buildings and clouds, the observer can grasp the invisible celestial bodies. The display control unit 75 may display the generated extended image on the display device 20 by superimposing it on the video data.

ステップS80では、表示制御部75は、風景を手前にして拡張画像を表示する。
より具体的には、表示制御部75(座標補正部70)は、ステップS75と同様に、表示座標を算出する。そして、表示制御部75は、映像取得部55により取得された映像データを解析して、天体以外の対象(建物、雲などの風景)を特定し、特定した対象の範囲の座標(風景座標)を算出する。そして、表示制御部75は、表示装置20を透過制御し、風景座標に基づいて、拡張画像から、特定した対象と重なる部分の画像を除去した拡張画像を表示する。図5Eに、風景150を手前にして拡張画像120が表示されたときの一例を示す。
なお、ここでは映像取得部55により取得された映像データを解析して、AR視野に含まれる天体の座標(仮想座標系の座標)を算出したが、例えば記憶装置10に3次元の地図情報をさらに記憶しておき、AR提供装置100の位置・方位・姿勢に基づいてAR視野に建物や山などの障害物が存在しているかどうかを判別してもよい。
In step S80, the display control unit 75 displays the extended image with the landscape in front.
More specifically, the display control unit 75 (coordinate correction unit 70) calculates display coordinates in the same manner as in step S75. Then, the display control unit 75 analyzes the video data acquired by the video acquisition unit 55, specifies a target (landscape such as a building or a cloud) other than a celestial body, and coordinates (landscape coordinates) of the range of the specified target. Is calculated. Then, the display control unit 75 controls transmission of the display device 20 and displays an extended image obtained by removing an image of a portion overlapping with the specified target from the extended image based on the landscape coordinates. FIG. 5E shows an example when the extended image 120 is displayed with the landscape 150 in front.
Here, the video data acquired by the video acquisition unit 55 is analyzed, and the coordinates of the celestial bodies included in the AR visual field (coordinates in the virtual coordinate system) are calculated. For example, three-dimensional map information is stored in the storage device 10. Further, it may be stored and it may be determined whether an obstacle such as a building or a mountain exists in the AR view based on the position / orientation / posture of the AR providing apparatus 100.

(その他の実施形態)
上述した実施形態では、AR提供装置100が撮影装置35を有する構成を採用したが、AR提供装置100が撮影装置35を有していない構成を採用してもよい。この場合において、AR提供装置100は、機能構成としては、映像取得部55、及び座標補正部70を有していない。換言するならば、表示座標の補正を行う以外の構成は、上述した実施形態に示す構成と同様である。
また、上述した実施形態では、AR提供装置100は、HMD等の装着型の形態を採用したが、例えば、携帯端末型のAR提供装置を採用してもよい。この場合、透過型の液晶ディスプレイに代えて、非透過型の液晶ディスプレイを採用してもよい。なお、携帯端末型のAR提供装置では、焦点(ユーザと表示装置の距離)を特定するために、ユーザの目の位置を検知するセンサを有する構成を採用してもよいし、映像データを解析(画像データをズーム、平行移動、回転移動などの処理を)して実際の天体と拡張画像との位置合わせを行う構成を採用してもよいし、焦点を予め設定(プリセット)し、携帯端末型のAR提供装置とユーザとの距離をユーザに提示しておく構成を採用してもよい。また、例えば、光学的に透過して映し出される現実空間の対象物に拡張画像を合成表示するヘッドアップディスプレイ型のAR提供装置を採用してもよい。
上述した実施形態の構成によれば、ユーザによる天体観察をより容易にすることができる。
(Other embodiments)
In the above-described embodiment, the configuration in which the AR providing device 100 includes the imaging device 35 is employed, but a configuration in which the AR providing device 100 does not include the imaging device 35 may be employed. In this case, the AR providing apparatus 100 does not include the video acquisition unit 55 and the coordinate correction unit 70 as a functional configuration. In other words, the configuration other than the correction of the display coordinates is the same as the configuration shown in the above-described embodiment.
Moreover, in embodiment mentioned above, although the AR provision apparatus 100 employ | adopted mounting | wearing type forms, such as HMD, you may employ | adopt a portable terminal type AR provision apparatus, for example. In this case, a non-transmissive liquid crystal display may be employed instead of the transmissive liquid crystal display. In addition, in order to specify the focal point (distance between the user and the display device), the mobile terminal type AR providing device may employ a configuration having a sensor that detects the position of the user's eyes, or may analyze video data. A configuration may be adopted in which the actual celestial body and the extended image are aligned by performing processing such as zooming, parallel movement, and rotational movement of the image data, or the focus is set (preset) in advance, and the portable terminal You may employ | adopt the structure which shows the distance of a type AR provision apparatus and a user to a user. Further, for example, a head-up display type AR providing apparatus that synthesizes and displays an extended image on an object in real space that is optically transmitted and projected may be employed.
According to the configuration of the above-described embodiment, astronomical observation by the user can be made easier.

以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。   The preferred embodiments of the present invention have been described in detail above, but the present invention is not limited to such specific embodiments, and various modifications can be made within the scope of the gist of the present invention described in the claims.・ Change is possible.

5 制御装置
10 記憶装置
15 通信装置
20 表示装置
25 方位検出装置
30 姿勢検出装置
35 撮影装置
100 AR提供装置
DESCRIPTION OF SYMBOLS 5 Control apparatus 10 Memory | storage device 15 Communication apparatus 20 Display apparatus 25 Direction detection apparatus 30 Attitude detection apparatus 35 Imaging apparatus 100 AR providing apparatus

Claims (8)

表示部及び記憶部を有する情報提供装置であって、
位置検出装置で検出された当該情報提供装置の位置を示す情報から算出された装置位置情報を取得する位置情報取得手段と、
方位検出装置で検出された当該情報提供装置の方位を示す情報から算出された方位情報を取得する方位情報取得手段と、
姿勢検出装置で検出された当該情報提供装置の姿勢を示す情報から算出された姿勢情報を取得する姿勢情報取得手段と、
前記記憶部に記憶された、現実空間の天体の位置に対応する前記表示部における前記天体の座標を算出するための位置情報と前記天体に関する属性を示す属性情報とを含む天体情報から、前記位置情報取得手段で取得された装置位置情報、前記方位情報取得手段で取得された方位情報、前記姿勢情報取得手段で取得された姿勢情報、前記表示部の内部パラメータ、及び現在の時刻に基づいて、前記表示部の視野に含まれる天体の天体情報を読み込む読込手段と、
前記天体情報に含まれる属性情報に基づいて前記天体に関する属性を表す画像を生成し、前記天体情報に含まれる位置情報、前記装置位置情報、及び現在の時刻に基づいて、前記表示部における前記天体の表示座標を算出し、生成した画像を、前記表示座標に基づいて表示する表示制御手段と、
を有する情報提供装置。
An information providing apparatus having a display unit and a storage unit,
Position information acquisition means for acquiring apparatus position information calculated from information indicating the position of the information providing apparatus detected by the position detection apparatus;
Orientation information acquisition means for acquiring orientation information calculated from information indicating the orientation of the information providing device detected by the orientation detection device;
Posture information acquisition means for acquiring posture information calculated from information indicating the posture of the information providing device detected by the posture detection device;
From the celestial body information including position information for calculating the coordinates of the celestial body in the display unit corresponding to the position of the celestial body in real space and attribute information indicating an attribute related to the celestial body, stored in the storage unit, the position Based on the apparatus position information acquired by the information acquisition means, the orientation information acquired by the orientation information acquisition means, the attitude information acquired by the attitude information acquisition means, the internal parameters of the display unit, and the current time, Reading means for reading celestial information of celestial bodies included in the field of view of the display unit;
An image representing an attribute related to the celestial object is generated based on the attribute information included in the celestial information, and the celestial object in the display unit is generated based on the position information included in the celestial object information, the device position information, and the current time. Display control means for calculating the display coordinates, and displaying the generated image based on the display coordinates;
An information providing apparatus.
前記表示制御手段は、星座の情報を表す画像を表示する旨の設定がされている場合、前記属性情報として含まれる星座に関する星座情報に基づいて前記星座の情報を表す画像を生成する請求項1に記載の情報提供装置。   The display control means generates an image representing the constellation information based on the constellation information related to the constellation included as the attribute information when the image representing the constellation information is set to be displayed. The information providing device described in 1. 前記表示制御手段は、天体を強調する画像を表示する旨の設定がされている場合、前記属性情報として含まれる天体の明るさを示す等級情報及び前記天体の大きさを示すサイズ情報に基づいて前記天体を強調する画像を生成する請求項1又は2に記載の情報提供装置。   When the display control means is set to display an image that emphasizes a celestial object, the display control means is based on grade information indicating the brightness of the celestial object included as the attribute information and size information indicating the size of the celestial object. The information providing apparatus according to claim 1, wherein an image that emphasizes the celestial body is generated. 前記装置位置情報、現在の時刻、及び人工衛星を管理する情報処理装置で管理されている前記人工衛星の軌道要素に基づいて、前記人工衛星の位置情報を算出する位置情報算出手段を更に有し、
前記表示制御手段は、前記人工衛星に関する属性を表す画像を表示する旨の設定がされている場合、前記位置情報算出手段で算出された前記人工衛星の位置情報に基づいて、前記視野に前記人工衛星が含まれると判断した場合、前記人工衛星に対応する、前記記憶部に記憶されている前記人工衛星に関する属性を示す人工衛星属性情報に基づいて、前記人工衛星に関する属性を表す画像を生成する請求項1乃至3の何れか1項に記載の情報提供装置。
Position information calculating means for calculating the position information of the artificial satellite based on the orbital element of the artificial satellite managed by the information processing apparatus that manages the apparatus position information, the current time, and the artificial satellite. ,
When the display control unit is set to display an image representing an attribute related to the artificial satellite, the display control unit is configured to display the artificial satellite in the visual field based on the positional information of the artificial satellite calculated by the positional information calculation unit. If it is determined that a satellite is included, an image representing the attribute related to the artificial satellite is generated based on the artificial satellite attribute information indicating the attribute related to the artificial satellite stored in the storage unit corresponding to the artificial satellite. The information providing apparatus according to any one of claims 1 to 3.
撮影装置により撮影された映像データを取得する映像データ取得手段を更に有し、
前記表示制御手段は、前記映像データ取得手段で取得された映像データを解析して、前記視野に含まれる天体の前記表示部における映像座標を算出し、前記映像座標と前記表示座標とを比較して、夫々の座標にずれがあると判断した場合は、前記映像座標に基づいて前記表示座標を補正する請求項1乃至4の何れか1項に記載の情報提供装置。
It further has video data acquisition means for acquiring video data captured by the imaging device,
The display control means analyzes the video data acquired by the video data acquisition means, calculates video coordinates on the display unit of the celestial body included in the visual field, and compares the video coordinates with the display coordinates. The information providing apparatus according to any one of claims 1 to 4, wherein when it is determined that there is a difference between the respective coordinates, the display coordinates are corrected based on the video coordinates.
前記表示制御手段は、前記映像データ取得手段で取得された映像データを解析して、天体以外の対象を特定し、特定した対象の範囲の座標を算出し、生成した画像から特定した対象と重なる部分の画像を除去する請求項5に記載の情報提供装置。   The display control unit analyzes the video data acquired by the video data acquisition unit, specifies a target other than a celestial body, calculates coordinates of a range of the specified target, and overlaps the target specified from the generated image The information providing apparatus according to claim 5, wherein an image of a part is removed. 表示部及び記憶部を有する情報提供装置が実行する情報提供方法であって、
位置検出装置で検出された前記情報提供装置の位置を示す情報から算出された装置位置情報を取得する位置情報取得工程と、
方位検出装置で検出された前記情報提供装置の方位を示す情報から算出された方位情報を取得する方位情報取得工程と、
姿勢検出装置で検出された前記情報提供装置の姿勢を示す情報から算出された姿勢情報を取得する姿勢情報取得工程と、
前記記憶部に記憶された、現実空間の天体の位置に対応する前記表示部における前記天体の座標を算出するための位置情報と前記天体に関する属性を示す属性情報とを含む天体情報から、前記位置情報取得工程で取得された装置位置情報、前記方位情報取得工程で取得された方位情報、前記姿勢情報取得工程で取得された姿勢情報、前記表示部の内部パラメータ、及び現在の時刻に基づいて、前記表示部の視野に含まれる天体の天体情報を読み込む読込工程と、
前記天体情報に含まれる属性情報に基づいて前記天体に関する属性を表す画像を生成し、前記天体情報に含まれる位置情報、前記装置位置情報、及び現在の時刻に基づいて、前記表示部における前記天体の表示座標を算出し、生成した画像を、前記表示座標に基づいて表示する表示制御工程と、
を有する情報提供方法。
An information providing method executed by an information providing apparatus having a display unit and a storage unit,
A position information acquisition step of acquiring apparatus position information calculated from information indicating the position of the information providing apparatus detected by the position detection apparatus;
An azimuth information acquisition step of acquiring azimuth information calculated from information indicating the azimuth of the information providing device detected by the azimuth detection device;
A posture information acquisition step of acquiring posture information calculated from information indicating the posture of the information providing device detected by the posture detection device;
From the celestial body information including position information for calculating the coordinates of the celestial body in the display unit corresponding to the position of the celestial body in real space and attribute information indicating an attribute related to the celestial body, stored in the storage unit, the position Based on the apparatus position information acquired in the information acquisition step, the direction information acquired in the direction information acquisition step, the posture information acquired in the posture information acquisition step, the internal parameters of the display unit, and the current time, A reading step of reading celestial information of the celestial bodies included in the visual field of the display unit;
An image representing an attribute related to the celestial object is generated based on attribute information included in the celestial information, and the celestial object in the display unit is generated based on position information included in the celestial object information, the apparatus position information, and a current time. A display control step of calculating the display coordinates and displaying the generated image based on the display coordinates;
A method for providing information.
表示部及び記憶部を有するコンピュータを、
位置検出装置で検出された前記コンピュータの位置を示す情報から算出された装置位置情報を取得する位置情報取得手段と、
方位検出装置で検出された前記コンピュータの方位を示す情報から算出された方位情報を取得する方位情報取得手段と、
姿勢検出装置で検出された前記コンピュータの姿勢を示す情報から算出された姿勢情報を取得する姿勢情報取得手段と、
前記記憶部に記憶された、現実空間の天体の位置に対応する前記表示部における前記天体の座標を算出するための位置情報と前記天体に関する属性を示す属性情報とを含む天体情報から、前記位置情報取得手段で取得された装置位置情報、前記方位情報取得手段で取得された方位情報、前記姿勢情報取得手段で取得された姿勢情報、前記表示部の内部パラメータ、及び現在の時刻に基づいて、前記表示部の視野に含まれる天体の天体情報を読み込む読込手段と、
前記天体情報に含まれる属性情報に基づいて前記天体に関する属性を表す画像を生成し、前記天体情報に含まれる位置情報、前記装置位置情報、及び現在の時刻に基づいて、前記表示部における前記天体の表示座標を算出し、生成した画像を、前記表示座標に基づいて表示する表示制御手段と、
として機能させるプログラム。
A computer having a display unit and a storage unit,
Position information acquisition means for acquiring apparatus position information calculated from information indicating the position of the computer detected by the position detection apparatus;
Direction information acquisition means for acquiring direction information calculated from information indicating the direction of the computer detected by the direction detection device;
Attitude information acquisition means for acquiring attitude information calculated from information indicating the attitude of the computer detected by the attitude detection device;
From the celestial body information including position information for calculating the coordinates of the celestial body in the display unit corresponding to the position of the celestial body in real space and attribute information indicating an attribute related to the celestial body, stored in the storage unit, the position Based on the apparatus position information acquired by the information acquisition means, the orientation information acquired by the orientation information acquisition means, the attitude information acquired by the attitude information acquisition means, the internal parameters of the display unit, and the current time, Reading means for reading celestial information of celestial bodies included in the field of view of the display unit;
An image representing an attribute related to the celestial object is generated based on attribute information included in the celestial information, and the celestial object in the display unit is generated based on position information included in the celestial object information, the apparatus position information, and a current time. Display control means for calculating the display coordinates, and displaying the generated image based on the display coordinates;
Program to function as.
JP2010079218A 2010-03-30 2010-03-30 Information providing apparatus, information providing method, and program Active JP5649842B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010079218A JP5649842B2 (en) 2010-03-30 2010-03-30 Information providing apparatus, information providing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010079218A JP5649842B2 (en) 2010-03-30 2010-03-30 Information providing apparatus, information providing method, and program

Publications (2)

Publication Number Publication Date
JP2011209622A true JP2011209622A (en) 2011-10-20
JP5649842B2 JP5649842B2 (en) 2015-01-07

Family

ID=44940724

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010079218A Active JP5649842B2 (en) 2010-03-30 2010-03-30 Information providing apparatus, information providing method, and program

Country Status (1)

Country Link
JP (1) JP5649842B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013531223A (en) * 2010-05-07 2013-08-01 クアルコム,インコーポレイテッド Azimuth sensor calibration
GB2615532A (en) * 2022-02-09 2023-08-16 Rhizomenet Pty Ltd Content presentation service

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110199324B (en) 2017-01-31 2023-12-29 株式会社和冠 Display device and control method thereof

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11344922A (en) * 1998-06-01 1999-12-14 Osaka Gas Co Ltd Visual field information display
JP2002202718A (en) * 2001-10-22 2002-07-19 Matsushita Electric Ind Co Ltd Scenery display device
JP2004013066A (en) * 2002-06-11 2004-01-15 Yamaha Corp Portable terminal equipment
JP2004062757A (en) * 2002-07-31 2004-02-26 Canon Inc Image processing method and method for estimating imaging part position and attitude
WO2004107013A1 (en) * 2003-05-30 2004-12-09 Vixen Co., Ltd. Automatic introduction device for celestial bodies, terminal device, and astronomical telescope control system
JP2005037393A (en) * 2003-07-14 2005-02-10 Asulab Sa Astronomical watch
WO2006043319A1 (en) * 2004-10-20 2006-04-27 Fujitsu Limited Terminal and server
JP2007018456A (en) * 2005-07-11 2007-01-25 Nikon Corp Information display device and information display method
JP2008046687A (en) * 2006-08-10 2008-02-28 Canon Inc Photographic environment calibration method and information processor
JP2009210875A (en) * 2008-03-05 2009-09-17 Casio Comput Co Ltd Celestial body observation apparatus

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11344922A (en) * 1998-06-01 1999-12-14 Osaka Gas Co Ltd Visual field information display
JP2002202718A (en) * 2001-10-22 2002-07-19 Matsushita Electric Ind Co Ltd Scenery display device
JP2004013066A (en) * 2002-06-11 2004-01-15 Yamaha Corp Portable terminal equipment
JP2004062757A (en) * 2002-07-31 2004-02-26 Canon Inc Image processing method and method for estimating imaging part position and attitude
WO2004107013A1 (en) * 2003-05-30 2004-12-09 Vixen Co., Ltd. Automatic introduction device for celestial bodies, terminal device, and astronomical telescope control system
JP2005037393A (en) * 2003-07-14 2005-02-10 Asulab Sa Astronomical watch
WO2006043319A1 (en) * 2004-10-20 2006-04-27 Fujitsu Limited Terminal and server
JP2007018456A (en) * 2005-07-11 2007-01-25 Nikon Corp Information display device and information display method
JP2008046687A (en) * 2006-08-10 2008-02-28 Canon Inc Photographic environment calibration method and information processor
JP2009210875A (en) * 2008-03-05 2009-09-17 Casio Comput Co Ltd Celestial body observation apparatus

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSNJ200710042195; 青柳貴洋 阿部央 清水康敬: 'HMDを用いた星座観察補助システムの開発' 2002年電子情報通信学会総合大会講演論文集 , 20020412, pp.195, 社団法人電子情報通信学会 *
JPN6014011872; 青柳貴洋 阿部央 清水康敬: 'HMDを用いた星座観察補助システムの開発' 2002年電子情報通信学会総合大会講演論文集 , 20020412, pp.195, 社団法人電子情報通信学会 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013531223A (en) * 2010-05-07 2013-08-01 クアルコム,インコーポレイテッド Azimuth sensor calibration
GB2615532A (en) * 2022-02-09 2023-08-16 Rhizomenet Pty Ltd Content presentation service

Also Published As

Publication number Publication date
JP5649842B2 (en) 2015-01-07

Similar Documents

Publication Publication Date Title
US10366511B2 (en) Method and system for image georegistration
US11710322B2 (en) Surveillance information generation apparatus, imaging direction estimation apparatus, surveillance information generation method, imaging direction estimation method, and program
JP6687204B2 (en) Projection image generation method and apparatus, and mapping method between image pixels and depth values
AU2015265416B2 (en) Method and system for image georegistration
KR101285360B1 (en) Point of interest displaying apparatus and method for using augmented reality
US20160055671A1 (en) Techniques for Enhanced Accurate Pose Estimation
EP3070680A1 (en) Image-generating device and method
Veas et al. Extended overview techniques for outdoor augmented reality
RU2749643C1 (en) Head-mounted display device and method performed by them
JP2005091298A (en) Global coordinate acquisition device using image processing
JP5649842B2 (en) Information providing apparatus, information providing method, and program
KR20150077607A (en) Dinosaur Heritage Experience Service System Using Augmented Reality and Method therefor
EP3903285B1 (en) Methods and systems for camera 3d pose determination
JP2007226580A (en) Image output device and image output method
EP3591609B1 (en) Horizontal calibration method and system for panoramic image or video, and portable terminal
US10614308B2 (en) Augmentations based on positioning accuracy or confidence
JP2011022662A (en) Portable telephone terminal and information processing system
KR20170021689A (en) System and method for supporting design/manufacture of marine structure using argumented reality
JP5670092B2 (en) Topographic display system, portable terminal, topographic display method and program
JP2011053439A (en) System for displaying celestial body by mobile terminal
JP6879350B2 (en) Image display systems, image display devices, image display methods, and programs
US20240087157A1 (en) Image processing method, recording medium, image processing apparatus, and image processing system
JP2023062983A (en) Virtual iron tower display system
JP2021157458A (en) Information processor and information processing method
CN117768599A (en) Method, device, system, electronic equipment and storage medium for processing image

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140408

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140604

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140708

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140909

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140917

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141028

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141112

R150 Certificate of patent or registration of utility model

Ref document number: 5649842

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250