TW201626167A - 虛擬實境系統以及虛擬實境系統之操作模式的控制方法 - Google Patents

虛擬實境系統以及虛擬實境系統之操作模式的控制方法 Download PDF

Info

Publication number
TW201626167A
TW201626167A TW104139595A TW104139595A TW201626167A TW 201626167 A TW201626167 A TW 201626167A TW 104139595 A TW104139595 A TW 104139595A TW 104139595 A TW104139595 A TW 104139595A TW 201626167 A TW201626167 A TW 201626167A
Authority
TW
Taiwan
Prior art keywords
information
head mounted
mounted display
user
display device
Prior art date
Application number
TW104139595A
Other languages
English (en)
Other versions
TWI560580B (en
Inventor
張維志
曾孟鈺
育根 蔡
曾莞如
武景龍
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Publication of TW201626167A publication Critical patent/TW201626167A/zh
Application granted granted Critical
Publication of TWI560580B publication Critical patent/TWI560580B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一種虛擬實境系統。上述虛擬實境系統包括一主機裝置、一傳輸線以及由一使用者所佩戴且經由上述傳輸線耦接於上述主機裝置之一頭戴式顯示裝置。一多媒體模組係經由上述傳輸線接收來自上述主機裝置之一多媒體內容，並顯示上述多媒體內容的一視頻部分。一多感測模組得到關於上述頭戴式顯示裝置、上述使用者以及一障礙物之一感測資訊。一週邊集線器係經由上述傳輸線提供上述感測資訊至上述主機裝置。上述多媒體內容的上述視頻部分的至少一虛擬物件係回應於上述感測資訊而調整。

Description

虛擬實境系統以及虛擬實境系統之操作模式的控制方法
本發明係有關於一種虛擬實境系統，特別是有關於一種虛擬實境系統之頭戴式顯示裝置。
具有虛像產生作用之顯示裝置經常被用於非常靠近眼睛的顯示裝置(亦稱為近眼顯示器)。這類顯示裝置也稱為頭戴式顯示器(head mounted display，HMD)。
頭戴式顯示器係為了直接顯示於眼睛前方而佩戴於使用者頭上的顯示裝置。頭戴式顯示器亦被稱作近眼顯示器。頭戴式顯示器具有一或兩個小的電子射線管(CRT)、液晶顯示(LCD)或有機發光二極體(OLED)顯示器，這些顯示器具有放大透鏡以及其他光學元件。顯示器及光學元件通常嵌入於使用者可佩戴之頭盔、眼鏡或護目鏡(visor)中。透鏡及其他光學組件用以讓使用者感覺到影像來自較大距離，以防止眼疲勞(eyestrain)。在使用單一顯示器之頭戴式顯示器中，通常經由將影像分割成兩個相同影像之光學元件來投影影像，並將每一影像重新導向至各眼。藉由兩個顯示器，頭戴式顯示器可顯示立體影像。立體影像試圖藉由模擬由每一眼在觀 看物件時觀賞到之影像之間的角差(由眼經之不同位置所引起)來產生影像的深度。此角差為人腦在處理影像時用來建造深度感或人類視覺距離之關鍵參數中的一者。
本發明提供一種虛擬實境系統。上述虛擬實境系統包括一主機裝置、一傳輸線以及一頭戴式顯示裝置。上述頭戴式顯示裝置係由一使用者所佩戴，且經由上述傳輸線耦接於上述主機裝置。上述頭戴式顯示裝置包括一多媒體模組、一多感測模組以及一週邊集線器。上述多媒體模組係經由上述傳輸線接收來自上述主機裝置之一多媒體內容，並顯示上述多媒體內容的一視頻部分。上述多感測模組得到關於上述頭戴式顯示裝置、上述使用者以及一障礙物之一感測資訊。上述週邊集線器係經由上述傳輸線提供上述感測資訊至上述主機裝置。上述多媒體內容的上述視頻部分的至少一虛擬物件係回應於上述感測資訊而調整。
再者，本發明提供一種虛擬實境系統之操作模式的控制方法。一虛擬實境系統包括一主機裝置、由一使用者所佩戴之一頭戴式顯示裝置以及耦接於上述主機裝置以及上述頭戴式顯示裝置之間的一傳輸線。經由上述傳輸線，藉由上述頭戴式顯示裝置之一多媒體模組，接收來自上述主機裝置之一多媒體內容。藉由上述頭戴式顯示裝置之上述多媒體模組，顯示上述多媒體內容的一視頻部分。藉由上述頭戴式顯示裝置之一多感測模組，得到關於上述頭戴式顯示裝置、上述使用者以及一障礙物之一感測資訊。經由上述傳輸線，藉由上述頭戴式 顯示裝置之一週邊集線器，提供上述感測資訊至上述主機裝置。回應於上述感測資訊，調整上述多媒體內容的上述視頻部分的至少一虛擬物件。
10、20‧‧‧虛擬實境系統
101、103‧‧‧介面單元
102‧‧‧主機裝置
104‧‧‧頭戴式顯示裝置
106‧‧‧傳輸線
107‧‧‧虛擬物件
20A‧‧‧第一主機介面
20B‧‧‧第二主機介面
20C‧‧‧第三主機介面
202‧‧‧多感測模組
204‧‧‧多媒體模組
206‧‧‧微控制單元
208‧‧‧週邊集線器
210‧‧‧電源管理裝置
30A‧‧‧第一從屬介面
30B‧‧‧第二從屬介面
30C‧‧‧第三從屬介面
302‧‧‧位置感測裝置
304‧‧‧使用者感測裝置
306‧‧‧環境感測裝置
308‧‧‧感測器
310‧‧‧量測裝置
312‧‧‧攝影機
408‧‧‧顯示部分
410‧‧‧多媒體橋接器
412‧‧‧透鏡
414‧‧‧顯示模組
416‧‧‧音頻單元
502‧‧‧計算裝置
504‧‧‧連接控制單元
610、620‧‧‧視野
630‧‧‧使用者
710‧‧‧傾斜角度
720‧‧‧水平線
730‧‧‧視野的中心線
740、920A-920D、930A-930D‧‧‧障礙物
800、910‧‧‧影像
810‧‧‧警示物件
820‧‧‧高度
CXT‧‧‧多媒體內容
CZ1、CZ2‧‧‧淨空區
DAT‧‧‧通訊資料
INFOE‧‧‧環境資訊
INFOS‧‧‧感測資訊
INFOP‧‧‧位置資訊
INFOU‧‧‧使用者資訊
P1-P5‧‧‧位置
PWR‧‧‧電源電壓
VO1-VO10‧‧‧虛擬物件
第1圖係顯示根據本發明一實施例所述之虛擬實境系統；第2圖係顯示根據本發明一實施例所述之第1圖之頭戴式顯示裝置的示範例；第3圖係顯示根據本發明一實施例所述之第2圖之多感測模組的示範例；第4圖係顯示根據本發明一實施例所述之第2圖之多媒體模組的示範例；第5圖係顯示根據本發明一實施例所述之第1圖之主機裝置的示範例；第6圖係顯示頭戴式顯示裝置之攝影機之視野之示範上視圖；第7圖係顯示頭戴式顯示裝置之攝影機之傾斜角度之示意圖；第8圖係顯示當使用者接近第7圖之障礙物時，配戴著頭戴式顯示裝置之使用者所觀看到的影像之示範例；第9A圖係顯示小房間之上視圖之示範例；第9B圖係顯示大房間之上視圖之示範例；第10A圖係顯示佩戴著頭戴式顯示裝置之使用者所觀看到的影像之示範例； 第10B圖係顯示佩戴著頭戴式顯示裝置之使用者所觀看到的影像之另一示範例；第11圖係顯示佩戴著頭戴式顯示裝置之使用者所觀看到的影像之另一示範例。
為讓本發明之上述和其他目的、特徵、和優點能更明顯易懂，下文特舉出較佳實施例，並配合所附圖式，作詳細說明如下：第1圖係顯示根據本發明一實施例所述之虛擬實境系統10。虛擬實境系統10包括主機裝置102、欲被使用者所佩戴之頭戴式顯示裝置(head mounted display，HMD)104以及連接於主機裝置102之介面單元101以及頭戴式顯示裝置104之介面單元103之間的傳輸線106(可選擇性)。主機裝置102之介面單元101包括用以提供多媒體內容(content)CXT至頭戴式顯示裝置104的第一主機介面20A、用以提供通訊資料DAT至頭戴式顯示裝置104的第二主機介面20B以及用以提供電源電壓PWR對頭戴式顯示裝置104進行供電之第三主機介面20C。再者，頭戴式顯示裝置104之介面單元103具有經由傳輸線106耦接於第一主機介面20A之第一從屬(slave)介面30A、經由傳輸線106耦接於第二主機介面20B之第二從屬介面30B以及經由傳輸線106耦接於第三主機介面20C之第三從屬介面30C。頭戴式顯示裝置104能播放來自主機裝置102之多媒體內容CXT，並得到關於頭戴式顯示裝置104及/或使用者之感測資訊INFOS。根據由頭戴式顯示裝置104所感測到的資訊，主機裝置102能及 時地調整多媒體內容CXT。在一實施例中，主機裝置102能對多媒體來源進行處理，並根據多媒體來源以及由頭戴式顯示裝置104所感測到的資訊而產生多媒體內容CXT。
第2圖係顯示根據本發明一實施例所述之第1圖之頭戴式顯示裝置104的示範例。在此實施例中，頭戴式顯示裝置104更包括多感測模組202、多媒體模組204、微控制單元206、週邊集線器(hub)208以及電源管理裝置210。當使用者佩戴頭戴式顯示裝置104時，多感測模組202能感測到使用者之位置、使用者的生物狀態及/或頭戴式顯示裝置104周圍的環境，以產生感測資訊INFOS。在一示範實施例中，感測資訊INFOS包括位置資訊INFOP、使用者資訊INFOU及/或環境資訊INFOE。位置資訊INFOP可包括關於頭戴式顯示裝置104之移動(movement)資訊、定位(orientation)資訊、傾斜角(tilt angle)資訊及/或位置資訊。使用者資訊INFOU可包括關於使用者之生物資訊及/或由多感測模組202所感測的眼睛視野(eye view)資訊。再者，環境資訊INFOE可包括由多感測模組202所擷取之影像/視頻及/或深度資訊。
在第2圖中，多媒體模組204可經由頭戴式顯示裝置104之第一從屬介面30A接收到來自第1圖之主機裝置102之第一主機介面20A的多媒體內容CXT。多媒體模組204可處理並播放多媒體內容CXT，例如音頻、影像或視頻內容。多媒體模組204可耦接於多感測模組202，以便得到感測資訊INFOS。於是，多媒體模組204可根據感測資訊INFOS來調整播放參數，例如亮度及更新時間。再者，微控制單元206係電性耦接於多感 測模組202以及多媒體模組204。微控制單元206可根據來自主機裝置102之通訊資料DAT來發送控制資訊，以協調多感測模組202以及多媒體模組204的功能。微控制單元206可接收來自多感測模組202之感測資訊INFOS，並經由週邊集線器208以及第二從屬介面30B而將感測資訊INFOS傳送至主機裝置102。
同時參考第1圖與第2圖，週邊集線器208可經由頭戴式顯示裝置104之第二從屬介面30B而接收到來自主機裝置102之第二主機介面20B的通訊資料DAT。週邊集線器208係耦接於多感測模組202，以便接收感測資訊INFOS。再者，週邊集線器208亦耦接於微控制單元206，以便接收控制資訊。週邊集線器208可耦接於頭戴式顯示裝置104的複數週邊裝置。週邊集線器208可經由頭戴式顯示裝置104之第二從屬介面30B而提供感測資訊INFOS至主機裝置102之第二主機介面20B。再者，電源管理裝置210可經由頭戴式顯示裝置104之第三從屬介面30C而連接至主機裝置102之第三主機介面20C，以便接收來自主機裝置102之電源電壓PWR。在此實施例中，電源管理裝置210係連接於頭戴式顯示裝置104的各元件，用以對各元件供電，其中元件包括多感測模組202、多媒體模組204、微控制單元206及週邊集線器208等。電源管理裝置210包括複數電源電路，其中各電源電路能根據來自主機裝置102的電源電壓PWR而調整供應電源，並根據來自微控制單元206的控制資訊而提供該供應電源對所對應之元件進行供電。具體而言，電源管理裝置210能根據來自微控制單元206的控制資訊而執行電源管理控制以及週邊控制。
第3圖係顯示根據本發明一實施例所述之第2圖之多感測模組202的示範例。多感測模組202包括用以得到對應於頭戴式顯示裝置104之位置資訊INFOP之位置感測裝置302、用以得到使用者資訊INFOU的使用者感測裝置304及/或用以得到環境資訊INFOE之環境感測裝置306，其中多感測模組202係根據位置資訊INFOP、使用者資訊INFOU以及環境資訊INFOE而提供感測資訊INFOS。位置感測裝置302包括複數感測器308，用以感測頭戴式顯示裝置104之位置資訊INFOP。位置參考裝置可以設置在相距頭戴式顯示裝置104一段距離的地方，以便無線地提供參考資訊給位置感測裝置302。於是，位置感測裝置302可使用參考資訊來產生位置資訊INFOP。再者，使用者感測裝置304包括至少一量測裝置310，用以感測使用者資訊INFOU，例如瞳距(Inter-pupillary distance，IPD)量測裝置，其中瞳距量測裝置可量測使用者之眼睛視野(eye view)資訊，例如使用者的視角。環境感測裝置306包括至少兩攝影機312，用以擷取頭戴式顯示裝置104所面對之物件的影像/視頻，並得到物件相對於頭戴式顯示裝置104之深度資訊。根據深度資訊，頭戴式顯示裝置104或是主機裝置102可計算出深度映射(depth map)。再者，微控制單元206可移動攝影機312的鏡頭，以便得到更多的深度資訊，以作為深度映射。攝影機312在空間上係彼此分離。攝影機312可擷取影像，並產生所擷取之影像的視差(parallax)資訊，其中兩攝影機312的視野(field of view，FOV)至少部分地重疊，使得視差資訊可以產生。視差資訊會提供至主機裝置102以作為深度資訊，其可由主機裝置102所計 算，以便產生頭戴式顯示裝置104所面對之空間或物件的深度映射或是深度模型。在一實施例中，兩攝影機312係設置在一直線上。此外，兩攝影機312係根據一傾斜角度設置在頭戴式顯示裝置104上。隨著該傾斜角度，攝影機312可感測到頭戴式顯示裝置104所面對的較低區域。此外，主機裝置102能根據深度資訊來監測頭戴式顯示裝置104所面對的淨空區域(clear zone)。於是，當淨空區域落入短距離範圍時，虛擬實境系統10可以警告使用者。舉例來說，頭戴式顯示裝置104以及主機裝置102可提醒使用者要注意房間內的障礙物。
第4圖係顯示根據本發明一實施例所述之第2圖之多媒體模組204的示範例。多媒體模組204可以處理並播放多媒體內容CXT，例如音頻、影像或視頻內容。多媒體模組204包括至少一顯示部分408、多媒體橋接器410以及音頻單元416。顯示部分408包括透鏡412及顯示模組414。音頻單元416可傳送多媒體內容CXT(例如多媒體內容CXT的音頻部分)或是紀錄來自使用者聲音或是環境之音頻聲音。音頻單元416係耦接於多媒體橋接器410，以作為音頻錄放功能。再者，同時參考第4圖與第2圖，當麥克風耦接於週邊集線器208時，音頻單元416係耦接於週邊集線器208，以作為麥克風功能。音頻單元416可包括音頻編解碼器，用以對多媒體內容CXT之音頻信號進行編碼/解碼，並對耦接於週邊集線器208之麥克風及/或揚聲器/耳機之信號進行編碼/解碼。多媒體橋接器410係耦接於頭戴式顯示裝置104之第一從屬介面30A以及顯示部分408之間，用以將多媒體內容CXT(例如多媒體內容CXT的視頻部分)轉換成顯 示部分408可讀取之顯示信號。
頭戴式顯示裝置104可包括感測器(未顯示)，用以監測頭戴式顯示裝置104是否被使用者所佩戴。再者，根據頭戴式顯示裝置104並未被使用者所佩戴之監測結果，感測器亦能傳送觸發信號至微控制單元206。感測器可以是內嵌在頭戴式顯示裝置104且朝向裡面的電容式感測器，用以偵測頭戴式顯示裝置104是否被使用者所佩戴。此外，傳輸線106係耦接於主機裝置102以及頭戴式顯示裝置104之間，且傳輸線106能將來自主機裝置102之多媒體內容CXT、通訊資料DAT以及電源電壓PWR傳送至頭戴式顯示裝置104。再者，傳輸線106可將來自頭戴式顯示裝置104的感測資訊INFOS傳送至主機裝置102。此外，可使用無線通訊技術，例如WiGig，使得多媒體內容CXT、通訊資料DAT或是感測資訊INFOS能在主機裝置102以及頭戴式顯示裝置104之間無線地傳送。
第5圖係顯示根據本發明一實施例所述之第1圖之主機裝置102的示範例。主機裝置102包括計算裝置502，用以產生多媒體內容CXT。計算裝置502可以是個人電腦、筆記型電腦、智慧型手機或是其他內建強大處理器的可攜式裝置。計算裝置502可從儲存單元或是網際網路接收到多媒體來源，以及計算裝置502可根據多媒體來源以及來自頭戴式顯示裝置104之感測資訊INFOS而產生多媒體內容CXT。計算裝置502能根據感測資訊INFOS來產生通訊資料DAT。主機裝置102更包括耦接於第1圖之計算裝置502以及傳輸線106之間的連接控制單元504，其中連接控制單元504可以增強在計算裝置502以及連 接控制單元504之間通訊之通訊資料DAT及/或感測資訊INFOS之信號強度。再者，連接控制單元504可連接至電源，使得連接控制單元504能傳送電源電壓PWR至傳輸線106的電源路徑。連接控制單元504包括一開關，其係用來控制是否提供多媒體內容CXT、通訊資料DAT及/或電源電壓PWR至傳輸線106。
第6圖係顯示頭戴式顯示裝置104之攝影機312之視野(FOV)之示範上視圖。在第6圖中，使用者630正佩戴著頭戴式顯示裝置104，其中頭戴式顯示裝置104的一攝影機312係設置在靠近使用者630的左眼，而另一攝影機312係設置在靠近使用者630的右眼。再者，兩攝影機312係設置在同一直線上。靠近左眼的攝影機312具有視野610，而靠近右眼的攝影機312具有視野620。因此，根據兩攝影機312所擷取的影像，頭戴式顯示裝置104可以得到視差(parallax)資訊，以便產生使用者630所處空間的深度映射或是深度模型。
第7圖係顯示頭戴式顯示裝置104之攝影機312之傾斜角度710之示意圖。在第7圖中，攝影機312係根據傾斜角度710而設置在頭戴式顯示裝置104上，其中傾斜角度710係根據水平線720以及攝影機312之視野的中心線730所決定。水平線720係平行於地表線。順著傾斜角度710的方向，攝影機312能感測到頭戴式顯示裝置104所面對之較低的區域，以便對會妨礙使用者移動的任何障礙物740進行偵測。於是，當佩戴著頭戴式顯示裝置104的使用者移動且靠近障礙物740時，虛擬實境系統10可根據感測資訊INFOS而經由顯示部分408之顯示模組414及/或音頻單元416來警示使用者。例如，當使用者接近 障礙物740時，會出現警示物件，其中警示物件所顯示之速度以及放大倍數係根據使用者的移動速度及/或使用者至障礙物740的距離而決定。
第8圖係顯示當使用者接近第7圖之障礙物740時，配戴著頭戴式顯示裝置104之使用者所觀看到的影像800之示範例。同時參考第7圖與第8圖，當使用者位於位置P1時，沒有警示物件會出現在影像800，其中位置P1與障礙物740之間的距離是安全的並且足夠使用者進行移動。假如使用者朝著障礙物740前進以及使用者與障礙物740之間的距離減少且短於特定距離時，警示物件810會出現在影像800中。在部分實施例中，使用者與障礙物740之間的距離係根據位置資訊INFOP、使用者資訊INFOU及/或環境資訊INFOE所得到。在第8圖中，警示物件810為虛擬牆。再者，虛擬牆的高度820係根據使用者與障礙物740之間的距離而決定。例如，當使用者位於位置P2與位置P3之間時，虛擬牆會出現在影像800中，其中當使用者靠近位置P2時，虛擬牆的高度820會減少，以及當使用者靠近位置P3時，虛擬牆的高度820會增加。
根據深度資訊以及障礙物，主機裝置102會對頭戴式顯示裝置104所面對之淨空區進行監控，其中淨空區係使用者能安全移動的區域，即在淨空區內使用者不會遇到任何障礙物。第9A圖係顯示小房間之上視圖之示範例，以及第9B圖係顯示大房間之上視圖之示範例。當使用者在第9A圖之小房間內佩戴著頭戴式顯示裝置104時，頭戴式顯示裝置104的攝影機312能得到深度資訊以及障礙物920A-920D的位置(例如傢具及 /或家電)，於是主機裝置102會得到淨空區CZ1。再者，當使用者在第9B圖之大房間內佩戴著頭戴式顯示裝置104時，頭戴式顯示裝置104的攝影機312可得到深度資訊以及障礙物930A-930D的位置，於是主機裝置102會得到淨空區CZ2。在第9A圖與第9B圖中，標號910係表示佩戴著頭戴式顯示裝置104之使用者所觀看到的影像。
第10A圖係顯示佩戴著頭戴式顯示裝置104之使用者所觀看到的影像910之示範例，以及第10B圖係顯示佩戴著頭戴式顯示裝置104之使用者所觀看到的影像910之另一示範例。在虛擬實境系統10中，可以對顯示於影像910之虛擬物件的尺寸進行調整，以配合淨空區。例如，對相同的虛擬物件來說，因為第9B圖之淨空區CZ2係大於第9A圖之淨空區CZ1，所以顯示於影像910且對應於淨空區CZ2之虛擬物件(例如第10A之VO1)係大於顯示於影像910且對應於淨空區CZ1之虛擬物件(例如第10A之VO2)。具體而言，顯示於影像910之虛擬物件的尺寸/大小係與淨空區的尺寸/大小成正比的。再者，在虛擬實境系統10中，顯示於影像910之虛擬物件的數量可根據淨空區的大小而調整。例如，以對應於使用者欲選擇之項目/選項之虛擬物件VO3-VO9而言，三個虛擬物件(例如第10B圖之VO3-VO5)係顯示在對應於淨空區CZ1之影像910，而七個虛擬物件(例如第10B圖之VO3-VO9)係顯示在對應於淨空區CZ2之影像910。於是，顯示於影像910且對應於淨空區CZ1之虛擬物件的數量係少於顯示於影像910且對應於淨空區CZ2之虛擬物件。具體而言，顯示於影像910之虛擬物件的數量係與淨空 區的大小成正比的。藉由顯示較少的虛擬物件並將這些虛擬物件安排在影像910的中間，使用者可以安全地在較小的淨空區進行移動，因此可預防使用者碰撞到障礙物。
再者，當佩戴著頭戴式顯示裝置104之使用者在淨空區移動時，顯示於影像910之虛擬物件的尺寸可以被調整，以便對使用者提供真實感。第11圖係顯示佩戴著頭戴式顯示裝置104之使用者所觀看到的影像910之另一示範例。同時參考第9A圖以及第11圖，當使用者從第9A圖之淨空區CZ1的位置P4移動到位置P5時，在位置P4所觀看到之影像910的虛擬物件VO10會逐漸增加，直到使用者到達位置P5。於是，使用者能在位置P5觀看到影像910之較大虛擬物件VO11，其中虛擬物件之尺寸的調整速度係根據使用者的移動速度、淨空區的大小以及使用者與虛擬物件的距離所決定。例如，假如虛擬物件VO10係由虛擬實境系統10所執行之應用所提供的虛擬桌，則虛擬桌將逐漸變大，以便表明使用者正靠近虛擬桌，因此增加虛擬桌的存在感如同使用者所察覺。再者，對虛擬物件之尺寸的調整速度來說，對應於小房間或是小淨空區之調整速度係快於對應於較大房間或是較大淨空區之調整速度。例如，當使用者與虛擬物件之間的距離減少時，對應於小房間之虛擬物件之尺寸的增加速度係快於對應於較大房間之虛擬物件之尺寸的增加速度。具體而言，當使用者與虛擬物件之間的距離減少時，虛擬物件之尺寸的調整速度係與淨空區的大小成反比的。
雖然本發明已以較佳實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中包括通常知識者，在不 脫離本發明之精神和範圍內，當可作些許之更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
10‧‧‧虛擬實境系統
101、103‧‧‧介面單元
102‧‧‧主機裝置；
104‧‧‧頭戴式顯示裝置
106‧‧‧傳輸線
20A‧‧‧第一主機介面
20B‧‧‧第二主機介面
20C‧‧‧第三主機介面
30A‧‧‧第一從屬介面
30B‧‧‧第二從屬介面
30C‧‧‧第三從屬介面

Claims (20)

  1. 一種虛擬實境系統，包括：一主機裝置；一傳輸線；以及一頭戴式顯示裝置，經由上述傳輸線耦接於上述主機裝置，包括：一多媒體模組，經由上述傳輸線接收來自上述主機裝置之一多媒體內容，並顯示上述多媒體內容的一視頻部分；一多感測模組，得到一感測資訊；以及一週邊集線器，經由上述傳輸線提供上述感測資訊至上述主機裝置，其中上述多媒體內容的上述視頻部分的至少一虛擬物件係回應於上述感測資訊而調整。
  2. 如申請專利範圍第1項所述之虛擬實境系統，其中上述多感測模組包括：一位置感測裝置，得到對應於上述頭戴式顯示裝置之一位置資訊；一使用者感測裝置，得到一使用者之一使用者資訊；以及一環境感測裝置，得到對應於一障礙物之一環境資訊，其中上述多感測模組係根據上述位置資訊、上述使用者資訊以及上述環境資訊而得到上述感測資訊。
  3. 如申請專利範圍第2項所述之虛擬實境系統，其中上述位置資訊包括上述頭戴式顯示裝置之移動資訊、定位資訊、傾斜角資訊及/或位置資訊；以及上述使用者資訊包括關於上述 使用者之生物資訊及/或眼睛視野資訊；以及上述環境資訊包括由上述環境感測裝置所擷取的影像/視頻及/或深度資訊。
  4. 如申請專利範圍第2項所述之虛擬實境系統，其中上述環境感測裝置包括設置在同一直線之至少兩攝影機，以及上述兩攝影機係根據一傾斜角度設置在上述頭戴式顯示裝置，其中每一上述攝影機之上述傾斜角度係根據一水平線以及上述攝影機之一視野之一中心線所決定。
  5. 如申請專利範圍第1項所述之虛擬實境系統，其中當上述感測資訊係指示佩戴著上述頭戴式顯示裝置之一使用者與一障礙物之間的距離少於一特定距離時，一警示物件會出現。
  6. 如申請專利範圍第5項所述之虛擬實境系統，其中由上述多媒體模組所顯示之上述警示物件之速度與放大倍數係根據佩戴著上述頭戴式顯示裝置之上述使用者之移動速度或是佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離所決定。
  7. 如申請專利範圍第5項所述之虛擬實境系統，其中上述警示物件為一虛擬牆，以及當佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離增加時，上述虛擬牆的一高度會降低，以及當佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離減少時，上述虛擬牆的上述高度會增加。
  8. 如申請專利範圍第1項所述之虛擬實境系統，其中對應於一障礙物之一淨空區係根據上述感測資訊而得到，以及上述虛 擬物件之尺寸係與上述淨空區的大小成正比。
  9. 如申請專利範圍第8項所述之虛擬實境系統，其中上述虛擬物件之數量係與上述淨空區的大小成正比。
  10. 如申請專利範圍第1項所述之虛擬實境系統，其中對應於一障礙物之一淨空區係根據上述感測資訊而得到，其中上述虛擬物件之尺寸係根據一調整速度而調整，其中上述調整速度係根據一使用者的移動速度、上述淨空區的大小以及上述使用者與上述虛擬物件之間的距離所決定。
  11. 如申請專利範圍第10項所述之虛擬實境系統，其中當上述使用者與上述虛擬物件之間的距離減少時，上述調整速度係與上述淨空區的大小成反比。
  12. 一種控制一虛擬實境系統之操作模式之方法，其中上述虛擬實境系統包括一主機裝置、一頭戴式顯示裝置以及耦接於上述主機裝置以及上述頭戴式顯示裝置之間的一傳輸線，上述方法包括：經由上述傳輸線，藉由上述頭戴式顯示裝置之一多媒體模組，接收來自上述主機裝置之一多媒體內容；藉由上述頭戴式顯示裝置之上述多媒體模組，顯示上述多媒體內容的一視頻部分；藉由上述頭戴式顯示裝置之一多感測模組，得到一感測資訊；經由上述傳輸線，藉由上述頭戴式顯示裝置之一週邊集線器，提供上述感測資訊至上述主機裝置；以及回應於上述感測資訊，調整上述多媒體內容的上述視頻部分 的至少一虛擬物件。
  13. 如申請專利範圍第12項所述之方法，其中上述多感測模組包括：一位置感測裝置，得到對應於上述頭戴式顯示裝置之一位置資訊；一使用者感測裝置，得到一使用者之一使用者資訊；以及一環境感測裝置，得到對應於一障礙物之一環境資訊，其中上述多感測模組係根據上述位置資訊、上述使用者資訊以及上述環境資訊而得到上述感測資訊。
  14. 如申請專利範圍第13項所述之方法，其中上述位置資訊包括上述頭戴式顯示裝置之移動資訊、定位資訊、傾斜角資訊及/或位置資訊；以及上述使用者資訊包括關於上述使用者之生物資訊及/或眼睛視野資訊；以及上述環境資訊包括由上述環境感測裝置所擷取的影像/視頻及/或深度資訊。
  15. 如申請專利範圍第13項所述之方法，其中上述環境感測裝置包括設置在同一直線之至少兩攝影機，以及上述兩攝影機係根據一傾斜角度設置在上述頭戴式顯示裝置，其中每一上述攝影機之上述傾斜角度係根據一水平線以及上述攝影機之一視野之一中心線所決定。
  16. 如申請專利範圍第12項所述之方法，其中當上述感測資訊係指示佩戴著上述頭戴式顯示裝置之一使用者與一障礙物之間的距離少於一特定距離時，一警示物件會出現。
  17. 如申請專利範圍第16項所述之方法，其中由上述多媒體模組所顯示之上述警示物件之速度與放大倍數係根據佩戴著 上述頭戴式顯示裝置之上述使用者之移動速度或是佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離所決定。
  18. 如申請專利範圍第16項所述之方法，其中上述警示物件為一虛擬牆，以及當佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離增加時，上述虛擬牆的一高度會降低，以及當佩戴著上述頭戴式顯示裝置之上述使用者與上述障礙物之間的距離減少時，上述虛擬牆的上述高度會增加。
  19. 如申請專利範圍第12項所述之方法，更包括：根據上述感測資訊，得到對應於一障礙物之一淨空區，其中上述虛擬物件之尺寸係與上述淨空區的大小成正比。
  20. 如申請專利範圍第12項所述之方法，更包括：根據上述感測資訊，得到對應於一障礙物之一淨空區，其中上述虛擬物件之尺寸係根據一調整速度而調整，其中上述調整速度係根據一使用者的移動速度、上述淨空區的大小以及上述使用者與上述虛擬物件之間的距離所決定。
TW104139595A 2014-12-04 2015-11-27 Virtual reality system and method for controlling operation modes of virtual reality system TWI560580B (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462087593P 2014-12-04 2014-12-04
US14/943,721 US9881422B2 (en) 2014-12-04 2015-11-17 Virtual reality system and method for controlling operation modes of virtual reality system

Publications (2)

Publication Number Publication Date
TW201626167A true TW201626167A (zh) 2016-07-16
TWI560580B TWI560580B (en) 2016-12-01

Family

ID=54771047

Family Applications (2)

Application Number Title Priority Date Filing Date
TW104139595A TWI560580B (en) 2014-12-04 2015-11-27 Virtual reality system and method for controlling operation modes of virtual reality system
TW104140073A TWI621967B (zh) 2014-12-04 2015-12-01 虛擬實境系統

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW104140073A TWI621967B (zh) 2014-12-04 2015-12-01 虛擬實境系統

Country Status (4)

Country Link
US (2) US9881422B2 (zh)
EP (2) EP3029550B1 (zh)
CN (2) CN105677011B (zh)
TW (2) TWI560580B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI658376B (zh) * 2017-05-12 2019-05-01 宏碁股份有限公司 模擬攜帶式裝置之感測訊號的虛擬實境系統、虛擬實境系統之控制方法、頭戴式顯示裝置、主機、攜帶式裝置

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106062862B (zh) 2014-10-24 2020-04-21 杭州凌感科技有限公司 用于沉浸式和交互式多媒体生成的系统和方法
US10256859B2 (en) 2014-10-24 2019-04-09 Usens, Inc. System and method for immersive and interactive multimedia generation
US9544054B1 (en) * 2015-08-10 2017-01-10 Facebook, Inc. Multidirectional communication system
CN106110654B (zh) * 2016-06-16 2019-12-24 联想(北京)有限公司 一种输入电子设备及电子设备
CN106200981B (zh) * 2016-07-21 2019-06-28 北京小鸟看看科技有限公司 一种虚拟现实系统及其无线实现方法
CN106249883B (zh) * 2016-07-26 2019-07-30 努比亚技术有限公司 一种数据处理方法及电子设备
CN109069921B (zh) * 2016-07-29 2022-08-30 惠普发展公司，有限责任合伙企业 虚拟现实插接站
CN106139587B (zh) * 2016-08-05 2020-06-09 惠州Tcl移动通信有限公司 一种基于vr游戏用来规避现实环境障碍物的方法及系统
TWI635316B (zh) * 2016-08-09 2018-09-11 陳台國 External near-eye display device
TWI596509B (zh) * 2016-08-11 2017-08-21 拓景科技股份有限公司 虛擬實境環境中之特定資訊展示方法及系統，及其相關電腦程式產品
WO2018044073A1 (en) * 2016-09-01 2018-03-08 Samsung Electronics Co., Ltd. Image streaming method and electronic device for supporting the same
CN106507083B (zh) * 2016-09-14 2018-12-25 北京小鸟看看科技有限公司 一种无线通信装置、虚拟现实光球及虚拟现实系统
TWI605329B (zh) * 2016-09-22 2017-11-11 建準電機工業股份有限公司 頭戴式顯示裝置
US10678397B2 (en) 2016-09-26 2020-06-09 Htc Corporation Method for providing demonstration information in simulation environment, and associated simulation system
US10896544B2 (en) * 2016-10-07 2021-01-19 Htc Corporation System and method for providing simulated environment
US10198029B2 (en) 2016-11-03 2019-02-05 Smolding Bv Wearable computer case and wearable computer
USD803212S1 (en) 2016-11-03 2017-11-21 Smolding Bv Wearable computer case
US10282859B2 (en) * 2016-12-12 2019-05-07 The Boeing Company Intra-sensor relative positioning
CN106656299A (zh) * 2016-12-12 2017-05-10 上海拆名晃信息科技有限公司 一种虚拟现实设备与计算机主机的数据传输方法与装置
US10652364B2 (en) * 2016-12-28 2020-05-12 Intel Corporation Shared display links in a user system
WO2018152689A1 (zh) * 2017-02-22 2018-08-30 深圳市卓梦科技有限责任公司 一种探测障碍物技术的数据采集方法以及vr头盔
US10666923B2 (en) * 2017-02-24 2020-05-26 Immervision, Inc. Wide-angle stereoscopic vision with cameras having different parameters
TWI678555B (zh) * 2017-03-13 2019-12-01 宏達國際電子股份有限公司 通訊系統及通訊方法
US10405374B2 (en) * 2017-03-17 2019-09-03 Google Llc Antenna system for head mounted display device
CN108881706B (zh) * 2017-05-16 2023-10-10 北京三星通信技术研究有限公司 控制多媒体设备工作的方法及装置
CN108958457A (zh) * 2017-05-19 2018-12-07 宏碁股份有限公司 模拟携带式装置的感测信号的虚拟实境系统及其控制方法
CN107315250A (zh) * 2017-05-23 2017-11-03 杭州蓝斯特科技有限公司 一种低延时的头戴式无线显示装置及其实现方法
CN108958461A (zh) * 2017-05-24 2018-12-07 宏碁股份有限公司 具自适性控制的虚拟实境系统及其控制方法
CN109844694B (zh) * 2017-06-15 2020-08-25 腾讯科技（深圳）有限公司 使用集线器连接两个不同环境的系统和方法
US20190033989A1 (en) * 2017-07-31 2019-01-31 Google Inc. Virtual reality environment boundaries using depth sensors
US10803663B2 (en) * 2017-08-02 2020-10-13 Google Llc Depth sensor aided estimation of virtual reality environment boundaries
WO2019040066A1 (en) * 2017-08-24 2019-02-28 Hewlett-Packard Development Company, L.P. COLLISION AVOIDANCE FOR PORTABLE DEVICES
TWI633326B (zh) * 2017-09-11 2018-08-21 宏碁股份有限公司 多人定位系統以及多人定位方法
EP3454300A1 (en) 2017-09-12 2019-03-13 HTC Corporation Three dimensional reconstruction method, apparatus and non-transitory computer readable storage medium thereof
EP3676687A1 (en) 2017-10-20 2020-07-08 Huawei Technologies Co., Ltd. Wearable device and method therein
JP7252965B2 (ja) * 2018-02-15 2023-04-05 マジック リープ， インコーポレイテッド 複合現実のための二重聴取者位置
US11508249B1 (en) 2018-03-05 2022-11-22 Intelligent Technologies International, Inc. Secure testing using a smartphone
CN108646925B (zh) * 2018-06-26 2021-01-05 朱光 一种分体式头戴显示器系统及交互方法
WO2020073023A1 (en) 2018-10-05 2020-04-09 Magic Leap, Inc. Near-field audio rendering
CN109407959B (zh) * 2018-10-31 2020-11-10 腾讯科技（深圳）有限公司 虚拟场景中的虚拟对象控制方法、设备以及存储介质
CN115631323A (zh) * 2021-01-22 2023-01-20 四川智能小子科技有限公司 Ar导览系统及ar导览方法
CN112988107A (zh) * 2021-04-25 2021-06-18 歌尔股份有限公司 一种音量调节方法、系统及头戴式设备
WO2022271499A1 (en) * 2021-06-25 2022-12-29 Innopeak Technology, Inc. Methods and systems for depth estimation using fisheye cameras

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4440613C1 (de) * 1994-11-14 1996-07-25 Leica Ag Vorrichtung und Verfahren zur Detektion und Demodulation eines intensitätsmodulierten Strahlungsfeldes
JPH09114543A (ja) * 1995-10-02 1997-05-02 Xybernaut Corp ハンドフリーコンピュータ装置
US6127990A (en) * 1995-11-28 2000-10-03 Vega Vista, Inc. Wearable display and methods for controlling same
US20030210228A1 (en) * 2000-02-25 2003-11-13 Ebersole John Franklin Augmented reality situational awareness system and method
GB2376397A (en) 2001-06-04 2002-12-11 Hewlett Packard Co Virtual or augmented reality
AU2003225228A1 (en) * 2002-05-03 2003-11-17 Donnelly Corporation Object detection system for vehicle
US6834232B1 (en) * 2003-07-30 2004-12-21 Ford Global Technologies, Llc Dual disimilar sensing object detection and targeting system
WO2005045729A1 (de) * 2003-11-10 2005-05-19 Siemens Aktiengesellschaft System und verfahren zur durchführung und visualisierung von simulationen in einer erweiterten realität
US20060132492A1 (en) * 2004-12-17 2006-06-22 Nvidia Corporation Graphics processor with integrated wireless circuits
US9101279B2 (en) * 2006-02-15 2015-08-11 Virtual Video Reality By Ritchey, Llc Mobile user borne brain activity data and surrounding environment data correlation system
CN200972613Y (zh) * 2006-09-01 2007-11-07 路尧 基于头戴显示器和便携式主机的随身计算机平台
US8855719B2 (en) 2009-05-08 2014-10-07 Kopin Corporation Wireless hands-free computing headset with detachable accessories controllable by motion, body gesture and/or vocal commands
JP4857196B2 (ja) * 2007-05-31 2012-01-18 キヤノン株式会社 頭部装着型表示装置、及びその制御方法
JP5067850B2 (ja) * 2007-08-02 2012-11-07 キヤノン株式会社 システム、頭部装着型表示装置、その制御方法
US20090290033A1 (en) * 2007-11-16 2009-11-26 Tenebraex Corporation Systems and methods of creating a virtual window
CN103119512A (zh) 2008-11-02 2013-05-22 大卫·乔姆 近眼式显示系统和装置
JP2010141538A (ja) * 2008-12-10 2010-06-24 Toshiba Corp 電子機器、及び表示制御方法
CN101995941B (zh) * 2009-08-13 2012-05-23 昆山扬明光学有限公司 头戴式显示系统
DE102009046158A1 (de) * 2009-10-29 2011-05-05 Robert Bosch Gmbh Verfahren zur Erkennung von Objekten mit geringer Höhe
TWI502468B (zh) * 2009-11-10 2015-10-01 Acer Inc 行動電子裝置及其三維操作介面的控制方法
US8937930B2 (en) * 2009-11-19 2015-01-20 Qualcomm, Incorporated Virtual peripheral hub device and system
US8665177B2 (en) * 2010-02-05 2014-03-04 Kopin Corporation Touch sensor for controlling eyewear
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
WO2011129907A1 (en) * 2010-04-13 2011-10-20 Sony Computer Entertainment America Llc Calibration of portable devices in a shared virtual space
US8648702B2 (en) * 2010-08-20 2014-02-11 Denso International America, Inc. Combined time-of-flight and image sensor systems
WO2012040086A1 (en) 2010-09-20 2012-03-29 Kopin Corporation Miniature communications gateway for head mounted display
EP2625845B1 (en) * 2010-10-04 2021-03-03 Gerard Dirk Smits System and method for 3-d projection and enhancements for interactivity
US9122053B2 (en) * 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US9113047B2 (en) * 2010-10-22 2015-08-18 Hitachi Construction Machinery Co., Ltd. Peripheral monitoring device for working machine
US9348141B2 (en) * 2010-10-27 2016-05-24 Microsoft Technology Licensing, Llc Low-latency fusing of virtual and real content
US9497388B2 (en) * 2010-12-17 2016-11-15 Pelco, Inc. Zooming factor computation
JP5691568B2 (ja) 2011-01-28 2015-04-01 ソニー株式会社 情報処理装置、報知方法及びプログラム
US8670000B2 (en) * 2011-09-12 2014-03-11 Google Inc. Optical display system and method with virtual image contrast control
US9255813B2 (en) * 2011-10-14 2016-02-09 Microsoft Technology Licensing, Llc User controlled real object disappearance in a mixed reality display
US9183676B2 (en) * 2012-04-27 2015-11-10 Microsoft Technology Licensing, Llc Displaying a collision between real and virtual objects
US9122321B2 (en) 2012-05-04 2015-09-01 Microsoft Technology Licensing, Llc Collaboration environment using see through displays
US9165381B2 (en) 2012-05-31 2015-10-20 Microsoft Technology Licensing, Llc Augmented books in a mixed reality environment
US9035970B2 (en) 2012-06-29 2015-05-19 Microsoft Technology Licensing, Llc Constraint based information inference
US9429912B2 (en) * 2012-08-17 2016-08-30 Microsoft Technology Licensing, Llc Mixed reality holographic object development
IN2015KN00682A (zh) * 2012-09-03 2015-07-17 Sensomotoric Instr Ges Für Innovative Sensorik Mbh
US8922041B1 (en) * 2012-10-03 2014-12-30 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Tethered vehicle control and tracking system
US9173171B2 (en) * 2012-10-05 2015-10-27 Htc Corporation Portable device with subscriber identity cards and method for controlling transmission power thereof
JP5818773B2 (ja) * 2012-11-22 2015-11-18 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US9189021B2 (en) * 2012-11-29 2015-11-17 Microsoft Technology Licensing, Llc Wearable food nutrition feedback system
TWI581173B (zh) * 2013-03-14 2017-05-01 茱麗安 麥克 爾巴哈 用以擴增實境及虛擬實境之目鏡系統及使用該系統之方法
JP6160154B2 (ja) * 2013-03-22 2017-07-12 セイコーエプソン株式会社 頭部装着型表示装置を利用した情報表示システム、頭部装着型表示装置を利用した情報表示方法、および、頭部装着型表示装置
JP6357737B2 (ja) * 2013-07-24 2018-07-18 富士通株式会社 車流計測装置、方法及びプログラム
US20150326774A1 (en) * 2014-05-06 2015-11-12 Comanche Outfitters LLC Device with two wireless protocols

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI658376B (zh) * 2017-05-12 2019-05-01 宏碁股份有限公司 模擬攜帶式裝置之感測訊號的虛擬實境系統、虛擬實境系統之控制方法、頭戴式顯示裝置、主機、攜帶式裝置

Also Published As

Publication number Publication date
EP3029550B1 (en) 2018-10-17
US20160163283A1 (en) 2016-06-09
US9881422B2 (en) 2018-01-30
CN105677011B (zh) 2018-08-28
EP3029552B1 (en) 2018-10-17
TWI621967B (zh) 2018-04-21
CN105677015B (zh) 2019-01-15
CN105677015A (zh) 2016-06-15
TW201621557A (zh) 2016-06-16
US20160163110A1 (en) 2016-06-09
EP3029552A1 (en) 2016-06-08
CN105677011A (zh) 2016-06-15
US9779555B2 (en) 2017-10-03
TWI560580B (en) 2016-12-01
EP3029550A1 (en) 2016-06-08

Similar Documents

Publication Publication Date Title
EP3029552B1 (en) Virtual reality system and method for controlling operation modes of virtual reality system
US9952652B2 (en) Virtual reality system and method for controlling operation modes of virtual reality system
US10908421B2 (en) Systems and methods for personal viewing devices
US9395543B2 (en) Wearable behavior-based vision system
JP6337418B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
US10692300B2 (en) Information processing apparatus, information processing method, and image display system
US10078366B2 (en) Head-mountable apparatus and system
JP6369005B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
WO2013166362A2 (en) Collaboration environment using see through displays
KR101203921B1 (ko) 안구 추적과 위치 기반 서비스를 이용한 정보 제공 장치
US20170337736A1 (en) Threat warning system adapted to a virtual reality display system and method thereof
EP2583131B1 (en) Personal viewing devices
US9372346B2 (en) Directional light beams for angle detection
JP2023510455A (ja) 高感度角度検出器を含むヘッドマウントディスプレイシステムのための位置追跡システム
CN103914128A (zh) 头戴式电子设备和输入方法
KR20140037730A (ko) 착용형 정보 제공 시스템
WO2020050186A1 (ja) 情報処理装置、情報処理方法及び記録媒体
EP3673348B1 (en) Data processing device, method and non-transitory machine-readable medium for detecting motion of the data processing device
TW202344958A (zh) 用於預測性下載體積資料的系統和方法
US20220230357A1 (en) Data processing