JP7226332B2 - 情報処理装置、情報処理方法及びプログラム - Google Patents
情報処理装置、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JP7226332B2 JP7226332B2 JP2019560814A JP2019560814A JP7226332B2 JP 7226332 B2 JP7226332 B2 JP 7226332B2 JP 2019560814 A JP2019560814 A JP 2019560814A JP 2019560814 A JP2019560814 A JP 2019560814A JP 7226332 B2 JP7226332 B2 JP 7226332B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- virtual object
- orientation
- display device
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 144
- 238000003672 processing method Methods 0.000 title claims description 5
- 230000007704 transition Effects 0.000 claims description 244
- 230000008859 change Effects 0.000 claims description 119
- 238000012937 correction Methods 0.000 claims description 100
- 238000001514 detection method Methods 0.000 claims description 15
- 238000012545 processing Methods 0.000 description 39
- 238000000034 method Methods 0.000 description 31
- 238000010586 diagram Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 26
- 239000003550 marker Substances 0.000 description 16
- 238000005516 engineering process Methods 0.000 description 15
- 230000033001 locomotion Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 9
- 230000036544 posture Effects 0.000 description 8
- 230000001133 acceleration Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 210000003128 head Anatomy 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000001028 reflection method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Description
情報処理装置が提供される。
情報処理方法が提供される。
1.表示装置の構成
2.情報処理装置の動作
2-1.処理の全体的な流れ
2-2.遷移表示制御
2-2-1.第1遷移表示制御
2-2-2.第2遷移表示制御
2-2-3.第3遷移表示制御
2-2-4.補足
3.情報処理装置の効果
4.まとめ
まず、図1~図4を参照して、本開示の実施形態に係る表示装置1の構成について説明する。
続いて、図5~図22を参照して、本実施形態に係る情報処理装置100の動作について説明する。
まず、図5を参照して、本実施形態に係る情報処理装置100が行う処理の全体的な流れについて説明する。
続いて、図6~図22を参照して、本実施形態に係る情報処理装置100の制御部150が行う遷移表示制御に関する処理について説明する。遷移表示制御に関する処理は、例えば、図5に示される処理フローにおけるステップS600の処理と対応する。
まず、図7~図13を参照して、本実施形態に係る情報処理装置100の制御部150が行う第1遷移表示制御について説明する。
続いて、図14~図18を参照して、本実施形態に係る情報処理装置100の制御部150が行う第2遷移表示制御について説明する。
続いて、図19~図21を参照して、本実施形態に係る情報処理装置100の制御部150が行う第3遷移表示制御について説明する。
上記では、図6を参照して、仮想オブジェクト70が遷移表示の開始直前及び遷移表示の終了直後の双方において表示領域50内に表示されないと判定される場合に、遷移表示制御が実行されない例について説明したが、制御部150は、そのような場合に遷移表示制御を実行してもよい。例えば、制御部150は、そのような場合に仮想オブジェクト70の重畳位置を位置姿勢情報の補正前の通常表示制御における重畳位置から補正後の通常表示制御における重畳位置へ徐々に変化させてもよい。
続いて、本実施形態に係る情報処理装置100の効果について説明する。
以上説明したように、本実施形態に係る情報処理装置100では、実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置姿勢情報に基づいて実空間に重畳するよう表示装置1を制御する制御部150を備える。また、制御部150は、位置姿勢情報が、第1の位置姿勢情報から当該第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、第1の位置姿勢情報に基づいて仮想オブジェクト70が表示される第1の表示状態から第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう表示装置1を制御する。それにより、ユーザによるAR技術の利用を円滑化することができる。
(1)
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
を備え、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理装置。
(2)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの重畳位置を徐々に変化させるよう前記表示装置を制御する、
前記(1)に記載の情報処理装置。
(3)
前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
前記(2)に記載の情報処理装置。
(4)
前記制御部は、前記遷移表示において、前記仮想オブジェクトが動的オブジェクトである場合、前記仮想オブジェクトが非動的オブジェクトである場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
前記(2)又は(3)に記載の情報処理装置。
(5)
前記制御部は、前記遷移表示において、前記移動体の位置と前記重畳位置とを結ぶ直線に沿った方向へ前記重畳位置を優先的に変化させるよう前記表示装置を制御する、
前記(2)~(4)のいずれか一項に記載の情報処理装置。
(6)
前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において前記表示装置の表示領域内に表示されると判定される場合、前記遷移表示において、前記重畳位置を徐々に変化させるよう前記表示装置を制御する、
前記(2)~(5)のいずれか一項に記載の情報処理装置。
(7)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの視認性を徐々に変化させるよう前記表示装置を制御する、
前記(1)~(6)のいずれか一項に記載の情報処理装置。
(8)
前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記視認性の変化速度が大きくなるよう前記表示装置を制御する、
前記(7)に記載の情報処理装置。
(9)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの透明度を徐々に変化させることによって前記視認性を徐々に変化させるよう前記表示装置を制御する、
前記(7)又は(8)に記載の情報処理装置。
(10)
前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において表示領域内に表示されると判定される場合、前記遷移表示において、前記視認性を徐々に変化させるよう前記表示装置を制御する、
前記(7)~(9)のいずれか一項に記載の情報処理装置。
(11)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの表示状態を、前記第1の位置姿勢情報に基づく前記第1の表示状態から前記第2の位置姿勢情報に基づく前記第2の表示状態に瞬間的に変更するとともに前記遷移表示の実行を通知する通知オブジェクトを表示するよう前記表示装置を制御する、
前記(1)~(10)のいずれか一項に記載の情報処理装置。
(12)
前記制御部は、前記遷移表示において、テキストオブジェクトを前記通知オブジェクトとして表示するよう前記表示装置を制御する、
前記(11)に記載の情報処理装置。
(13)
前記制御部は、前記仮想オブジェクトが前記遷移表示の開始直前において表示領域内に表示され、かつ、前記遷移表示の終了直後において当該表示領域内に表示されないと判定された場合、前記遷移表示において、前記通知オブジェクトを表示するよう前記表示装置を制御する、
前記(11)又は(12)に記載の情報処理装置。
(14)
前記制御部は、ユーザが前記仮想オブジェクトを視認しているか否かの判定結果に基づいて、前記遷移表示を実行するよう前記表示装置を制御する、
前記(1)~(13)のいずれか一項に記載の情報処理装置。
(15)
前記制御部は、前記ユーザの視線の検出結果に基づいて、前記ユーザが前記仮想オブジェクトを視認しているか否かを判定する、
前記(14)に記載の情報処理装置。
(16)
前記制御部は、前記ユーザが前記仮想オブジェクトを視認していないと判定された場合に前記遷移表示を停止し、その後、前記ユーザが前記仮想オブジェクトを視認していると判定された場合に前記遷移表示を再開するよう前記表示装置を制御する、
前記(14)又は(15)に記載の情報処理装置。
(17)
前記表示装置は、ヘッドマウントディスプレイである、
前記(1)~(16)のいずれか一項に記載の情報処理装置。
(18)
前記位置姿勢情報は、前記移動体の位置及び姿勢を検出する位置姿勢センサによって検出され、
前記補正部は、前記位置姿勢センサにより検出される前記位置姿勢情報の誤差が閾値以上である場合に、前記位置姿勢情報を補正する、
前記(1)~(17)のいずれか一項に記載の情報処理装置。
(19)
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう情報処理装置によって表示装置を制御することと、
前記位置姿勢情報を補正することと、
を含み、
前記位置姿勢情報が第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理方法。
(20)
コンピュータを、
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
として機能させるためのプログラムであって、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
プログラム。
20 カメラ
30 位置姿勢センサ
50 表示領域
70 仮想オブジェクト
100 情報処理装置
110 通信部
120 記憶部
130 更新部
140 補正部
150 制御部
Claims (20)
- 実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
を備え、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御し、
さらに、前記制御部は、前記第1の位置姿勢情報の際、前記第1の位置姿勢情報から前記第2の位置姿勢情報に補正される際、前記第2の位置姿勢情報に補正された際のそれぞれの場合において、前記仮想オブジェクトが前記表示装置の表示領域内に存在するか否かを判定し、判定結果に応じて前記遷移表示の態様を異ならせるよう前記表示装置を制御する、
情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの重畳位置を徐々に変化させるよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトが動的オブジェクトである場合、前記仮想オブジェクトが非動的オブジェクトである場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置と前記重畳位置とを結ぶ直線に沿った方向へ前記重畳位置を優先的に変化させるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において前記表示装置の表示領域内に表示されると判定される場合、前記遷移表示において、前記重畳位置を徐々に変化させるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの視認性を徐々に変化させるよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記視認性の変化速度が大きくなるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの透明度を徐々に変化させることによって前記視認性を徐々に変化させるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において表示領域内に表示されると判定される場合、前記遷移表示において、前記視認性を徐々に変化させるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの表示状態を、前記第1の位置姿勢情報に基づく前記第1の表示状態から前記第2の位置姿勢情報に基づく前記第2の表示状態に瞬間的に変更するとともに前記遷移表示の実行を通知する通知オブジェクトを表示するよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、テキストオブジェクトを前記通知オブジェクトとして表示するよう前記表示装置を制御する、
請求項11に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の開始直前において表示領域内に表示され、かつ、前記遷移表示の終了直後において当該表示領域内に表示されないと判定された場合、前記遷移表示において、前記通知オブジェクトを表示するよう前記表示装置を制御する、
請求項11に記載の情報処理装置。 - 前記制御部は、ユーザが前記仮想オブジェクトを視認しているか否かの判定結果に基づいて、前記遷移表示を実行するよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記ユーザの視線の検出結果に基づいて、前記ユーザが前記仮想オブジェクトを視認しているか否かを判定する、
請求項14に記載の情報処理装置。 - 前記制御部は、前記ユーザが前記仮想オブジェクトを視認していないと判定された場合に前記遷移表示を停止し、その後、前記ユーザが前記仮想オブジェクトを視認していると判定された場合に前記遷移表示を再開するよう前記表示装置を制御する、
請求項14に記載の情報処理装置。 - 前記表示装置は、ヘッドマウントディスプレイである、
請求項1に記載の情報処理装置。 - 前記位置姿勢情報は、前記移動体の位置及び姿勢を検出する位置姿勢センサによって検出され、
前記補正部は、前記位置姿勢センサにより検出される前記位置姿勢情報の誤差が閾値以上である場合に、前記位置姿勢情報を補正する、
請求項1に記載の情報処理装置。 - 実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう情報処理装置によって表示装置を制御することと、
前記位置姿勢情報を補正することと、
を含み、
前記位置姿勢情報が第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御し、
さらに、前記第1の位置姿勢情報の際、前記第1の位置姿勢情報から前記第2の位置姿勢情報に補正される際、前記第2の位置姿勢情報に補正された際のそれぞれの場合において、前記仮想オブジェクトが前記表示装置の表示領域内に存在するか否かを判定し、判定結果に応じて前記遷移表示の態様を異ならせるよう前記表示装置を制御する、
情報処理方法。 - コンピュータを、
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
として機能させるためのプログラムであって、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御し、
さらに、前記制御部は、前記第1の位置姿勢情報の際、前記第1の位置姿勢情報から前記第2の位置姿勢情報に補正される際、前記第2の位置姿勢情報に補正された際のそれぞれの場合において、前記仮想オブジェクトが前記表示装置の表示領域内に存在するか否かを判定し、判定結果に応じて前記遷移表示の態様を異ならせるよう前記表示装置を制御する、
プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017244026 | 2017-12-20 | ||
JP2017244026 | 2017-12-20 | ||
PCT/JP2018/037084 WO2019123770A1 (ja) | 2017-12-20 | 2018-10-03 | 情報処理装置、情報処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019123770A1 JPWO2019123770A1 (ja) | 2021-03-11 |
JP7226332B2 true JP7226332B2 (ja) | 2023-02-21 |
Family
ID=66992558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019560814A Active JP7226332B2 (ja) | 2017-12-20 | 2018-10-03 | 情報処理装置、情報処理方法及びプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US11468868B2 (ja) |
EP (1) | EP3731066A4 (ja) |
JP (1) | JP7226332B2 (ja) |
KR (1) | KR102477842B1 (ja) |
CN (1) | CN111512272A (ja) |
WO (1) | WO2019123770A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112702643B (zh) * | 2019-10-22 | 2023-07-21 | 上海哔哩哔哩科技有限公司 | 弹幕信息显示方法、装置、移动终端 |
WO2023026634A1 (ja) * | 2021-08-25 | 2023-03-02 | 株式会社Nttドコモ | 表示制御装置 |
WO2023189580A1 (ja) * | 2022-03-31 | 2023-10-05 | ソニーグループ株式会社 | 画像処理装置及び画像処理システム |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003216552A (ja) | 2002-01-23 | 2003-07-31 | Equos Research Co Ltd | 情報種別表示プログラム |
WO2014188512A1 (ja) | 2013-05-21 | 2014-11-27 | 三菱電機株式会社 | 音声認識装置、認識結果表示装置および表示方法 |
WO2014203592A1 (ja) | 2013-06-17 | 2014-12-24 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2015090635A (ja) | 2013-11-07 | 2015-05-11 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
JP2016018213A (ja) | 2014-07-10 | 2016-02-01 | セイコーエプソン株式会社 | 直接幾何学的モデル化によるhmdのキャリブレーション |
JP2017015485A (ja) | 2015-06-30 | 2017-01-19 | 明伸興産株式会社 | 装着型ナビゲーションシステム |
WO2017061388A1 (ja) | 2015-10-09 | 2017-04-13 | ソニー株式会社 | 情報処理装置、位置および/または姿勢の推定方法、およびコンピュータプログラム |
JP2017111723A (ja) | 2015-12-18 | 2017-06-22 | 株式会社ブリリアントサービス | バイク用ヘッドマウントディスプレイ、バイク用ヘッドマウントディスプレイの制御方法およびバイク用ヘッドマウントディスプレイの制御プログラム。 |
JP2017120558A (ja) | 2015-12-28 | 2017-07-06 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2017129904A (ja) | 2016-01-18 | 2017-07-27 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
WO2017134886A1 (ja) | 2016-02-02 | 2017-08-10 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3486536B2 (ja) * | 1997-09-01 | 2004-01-13 | キヤノン株式会社 | 複合現実感提示装置および方法 |
US6522312B2 (en) | 1997-09-01 | 2003-02-18 | Canon Kabushiki Kaisha | Apparatus for presenting mixed reality shared among operators |
US8521411B2 (en) * | 2004-06-03 | 2013-08-27 | Making Virtual Solid, L.L.C. | En-route navigation display method and apparatus using head-up display |
JP2011203823A (ja) | 2010-03-24 | 2011-10-13 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
US20160216521A1 (en) * | 2013-10-22 | 2016-07-28 | Nippon Seiki Co., Ltd. | Vehicle information projection system and projection device |
EP3109744B1 (en) * | 2014-02-17 | 2020-09-09 | Sony Corporation | Information processing device, information processing method and program |
KR102391860B1 (ko) * | 2014-05-09 | 2022-04-29 | 소니그룹주식회사 | 정보 처리 시스템 및 정보 처리 방법 |
GB2528699B (en) * | 2014-07-29 | 2017-05-03 | Sony Computer Entertainment Europe Ltd | Image processing |
WO2016138178A1 (en) * | 2015-02-25 | 2016-09-01 | Brian Mullins | Visual gestures for a head mounted device |
US9852547B2 (en) * | 2015-03-23 | 2017-12-26 | International Business Machines Corporation | Path visualization for augmented reality display device based on received data and probabilistic analysis |
JP6596883B2 (ja) * | 2015-03-31 | 2019-10-30 | ソニー株式会社 | ヘッドマウントディスプレイ及びヘッドマウントディスプレイの制御方法、並びにコンピューター・プログラム |
CN106330200B (zh) | 2015-07-09 | 2019-09-10 | 华邦电子股份有限公司 | 执行于通量图形处理器的低密度奇偶校验解码方法 |
US10586464B2 (en) * | 2015-07-29 | 2020-03-10 | Warren F. LeBlanc | Unmanned aerial vehicles |
US10373392B2 (en) * | 2015-08-26 | 2019-08-06 | Microsoft Technology Licensing, Llc | Transitioning views of a virtual model |
-
2018
- 2018-10-03 US US16/770,731 patent/US11468868B2/en active Active
- 2018-10-03 WO PCT/JP2018/037084 patent/WO2019123770A1/ja unknown
- 2018-10-03 JP JP2019560814A patent/JP7226332B2/ja active Active
- 2018-10-03 EP EP18891366.9A patent/EP3731066A4/en active Pending
- 2018-10-03 KR KR1020207016033A patent/KR102477842B1/ko active IP Right Grant
- 2018-10-03 CN CN201880080507.9A patent/CN111512272A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003216552A (ja) | 2002-01-23 | 2003-07-31 | Equos Research Co Ltd | 情報種別表示プログラム |
WO2014188512A1 (ja) | 2013-05-21 | 2014-11-27 | 三菱電機株式会社 | 音声認識装置、認識結果表示装置および表示方法 |
WO2014203592A1 (ja) | 2013-06-17 | 2014-12-24 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2015090635A (ja) | 2013-11-07 | 2015-05-11 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
JP2016018213A (ja) | 2014-07-10 | 2016-02-01 | セイコーエプソン株式会社 | 直接幾何学的モデル化によるhmdのキャリブレーション |
JP2017015485A (ja) | 2015-06-30 | 2017-01-19 | 明伸興産株式会社 | 装着型ナビゲーションシステム |
WO2017061388A1 (ja) | 2015-10-09 | 2017-04-13 | ソニー株式会社 | 情報処理装置、位置および/または姿勢の推定方法、およびコンピュータプログラム |
JP2017111723A (ja) | 2015-12-18 | 2017-06-22 | 株式会社ブリリアントサービス | バイク用ヘッドマウントディスプレイ、バイク用ヘッドマウントディスプレイの制御方法およびバイク用ヘッドマウントディスプレイの制御プログラム。 |
JP2017120558A (ja) | 2015-12-28 | 2017-07-06 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2017129904A (ja) | 2016-01-18 | 2017-07-27 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
WO2017134886A1 (ja) | 2016-02-02 | 2017-08-10 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2019123770A1 (ja) | 2021-03-11 |
EP3731066A1 (en) | 2020-10-28 |
KR102477842B1 (ko) | 2022-12-16 |
US20210166661A1 (en) | 2021-06-03 |
WO2019123770A1 (ja) | 2019-06-27 |
EP3731066A4 (en) | 2021-01-27 |
US11468868B2 (en) | 2022-10-11 |
CN111512272A (zh) | 2020-08-07 |
KR20200098509A (ko) | 2020-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9459692B1 (en) | Virtual reality headset with relative motion head tracker | |
US10409365B2 (en) | Method of providing a virtual space image subjected to blurring processing based on detected displacement, and system therefor | |
JP7226332B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US20140160170A1 (en) | Provision of an Image Element on a Display Worn by a User | |
JP6002286B1 (ja) | ヘッドマウントディスプレイ制御方法、および、ヘッドマウントディスプレイ制御プログラム | |
JP6087453B1 (ja) | 仮想空間の提供方法、およびプログラム | |
EP3588447B1 (en) | Image processing device, image processing method, and image system | |
KR20160147735A (ko) | 헤드부 위치 검출 장치 및 헤드부 위치 검출 방법, 화상 처리 장치 및 화상 처리 방법, 표시 장치, 및 컴퓨터 프로그램 | |
US11609428B2 (en) | Information processing apparatus and information processing method | |
WO2020003860A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US20200404179A1 (en) | Motion trajectory determination and time-lapse photography methods, device, and machine-readable storage medium | |
WO2019142560A1 (ja) | 視線を誘導する情報処理装置 | |
JP2021060627A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP7320736B2 (ja) | 表示システム | |
US9751607B1 (en) | Method and system for controlling rotatable device on marine vessel | |
JP7450230B2 (ja) | 表示システム | |
US20220244726A1 (en) | Information processing apparatus, information processing method, and program | |
WO2020208883A1 (ja) | 表示システム | |
JPWO2020032189A1 (ja) | 表示システム | |
US20230376109A1 (en) | Image processing apparatus, image processing method, and storage device | |
WO2022004483A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US11947119B2 (en) | Display control device, display control method, and recording medium | |
TWI757872B (zh) | 整合動作感測器的擴增實境系統與擴增實境顯示方法 | |
WO2024000189A1 (zh) | 控制方法、头戴式显示设备、控制系统及存储介质 | |
JP6503407B2 (ja) | コンテンツ表示プログラム、コンピュータ装置、コンテンツ表示方法、及びコンテンツ表示システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230123 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7226332 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |