CN105677011A - 虚拟实境系统以及虚拟实境系统的操作模式的控制方法 - Google Patents

虚拟实境系统以及虚拟实境系统的操作模式的控制方法 Download PDF

Info

Publication number
CN105677011A
CN105677011A CN201510876193.1A CN201510876193A CN105677011A CN 105677011 A CN105677011 A CN 105677011A CN 201510876193 A CN201510876193 A CN 201510876193A CN 105677011 A CN105677011 A CN 105677011A
Authority
CN
China
Prior art keywords
user
information
mounted display
head
display apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510876193.1A
Other languages
English (en)
Other versions
CN105677011B (zh
Inventor
张维志
曾孟钰
蔡育根
曾莞如
武景龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HTC Corp
Original Assignee
High Tech Computer Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by High Tech Computer Corp filed Critical High Tech Computer Corp
Publication of CN105677011A publication Critical patent/CN105677011A/zh
Application granted granted Critical
Publication of CN105677011B publication Critical patent/CN105677011B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明涉及虚拟实境系统以及虚拟实境系统的操作模式的控制方法。上述虚拟实境系统包括一主机装置、一传输线以及由一使用者所佩戴且经由上述传输线耦接于上述主机装置之一头戴式显示装置。一多媒体模块系经由上述传输线接收来自上述主机装置之一多媒体内容，并显示上述多媒体内容的一视频部分。一多感测模块得到关于上述头戴式显示装置、上述使用者以及一障碍物之一感测信息。一外围集线器系经由上述传输线提供上述感测信息至上述主机装置。上述多媒体内容的上述视频部分的至少一虚拟对象系响应于上述感测信息而调整。

Description

虚拟实境系统以及虚拟实境系统的操作模式的控制方法
技术领域
本发明涉及一种虚拟实境系统，特别是有关于一种虚拟实境系统之头戴式显示装置。
背景技术
具有虚像产生作用之显示装置经常被用于非常靠近眼睛的显示装置(亦称为近眼显示器)。这类显示装置也称为头戴式显示器(headmounteddisplay，HMD)。
头戴式显示器系为了直接显示于眼睛前方而佩戴于使用者头上的显示装置。头戴式显示器亦被称作近眼显示器。头戴式显示器具有一或两个小的电子射线管(CRT)、液晶显示(LCD)或有机发光二极管(OLED)显示器，这些显示器具有放大透镜以及其它光学组件。显示器及光学组件通常嵌入于使用者可佩戴之头盔、眼镜或护目镜(visor)中。透镜及其它光学组件用以让使用者感觉到影像来自较大距离，以防止眼疲劳(eyestrain)。在使用单一显示器之头戴式显示器中，通常经由将影像分割成两个相同影像之光学组件来投影影像，并将每一影像重新导向至各眼。藉由两个显示器，头戴式显示器可显示立体影像。立体影像试图藉由仿真由每一眼在观看对象时观赏到之影像之间的角差(由眼经之不同位置所引起)来产生影像的深度。此角差为人脑在处理影像时用来建造深度感或人类视觉距离之关键参数中的一者。
发明内容
本发明的任务是提供一种虚拟实境系统。上述虚拟实境系统包括一主机装置、一传输线以及一头戴式显示装置。上述头戴式显示装置系由一使用者所佩戴，且经由上述传输线耦接于上述主机装置。上述头戴式显示装置包括一多媒体模块、一多感测模块以及一外围集线器。上述多媒体模块系经由上述传输线接收来自上述主机装置之一多媒体内容，并显示上述多媒体内容的一视频部分。上述多感测模块得到关于上述头戴式显示装置、上述使用者以及一障碍物之一感测信息。上述外围集线器系经由上述传输线提供上述感测信息至上述主机装置。上述多媒体内容的上述视频部分的至少一虚拟对象系响应于上述感测信息而调整。
再者，本发明提供一种虚拟实境系统之操作模式的控制方法。一虚拟实境系统包括一主机装置、由一使用者所佩戴之一头戴式显示装置以及耦接于上述主机装置以及上述头戴式显示装置之间的一传输线。经由上述传输线，藉由上述头戴式显示装置之一多媒体模块，接收来自上述主机装置之一多媒体内容。藉由上述头戴式显示装置之上述多媒体模块，显示上述多媒体内容的一视频部分。藉由上述头戴式显示装置之一多感测模块，得到关于上述头戴式显示装置、上述使用者以及一障碍物之一感测信息。经由上述传输线，藉由上述头戴式显示装置之一外围集线器，提供上述感测信息至上述主机装置。响应于上述感测信息，调整上述多媒体内容的上述视频部分的至少一虚拟对象。
附图说明
图1系显示根据本发明一实施例所述的虚拟实境系统；
图2系显示根据本发明一实施例所述的图1之头戴式显示装置的示范例；
图3系显示根据本发明一实施例所述的图2之多感测模块的示范例；
图4系显示根据本发明一实施例所述的图2之多媒体模块的示范例；
图5系显示根据本发明一实施例所述的图1之主机装置的示范例；
图6系显示头戴式显示装置之摄影机之视野之示范上视图；
图7系显示头戴式显示装置之摄影机之倾斜角度之示意图；
图8系显示当使用者接近图7之障碍物时，配戴着头戴式显示装置之使用者所观看到的影像之示范例；
图9A系显示小房间之上视图之示范例；
图9B系显示大房间之上视图之示范例；
图10A系显示佩戴着头戴式显示装置之使用者所观看到的影像之示范例；
图10B系显示佩戴着头戴式显示装置之使用者所观看到的影像之另一示范例；
图11系显示佩戴着头戴式显示装置之使用者所观看到的影像之另一示范例。
附图标记说明
10、20～虚拟实境系统；101、103～接口单元；
102～主机装置；104～头戴式显示装置；
106～传输线；107～虚拟对象；
20A～第一主机接口；20B～第二主机接口；
20C～第三主机接口；202～多感测模块；
204～多媒体模块；206～微控制单元；
208～外围集线器；210～电源管理装置；
30A～第一从属界面；30B～第二从属界面；
30C～第三从属界面；302～位置感测装置；
304～使用者感测装置；306～环境感测装置；
308～传感器；310～量测装置；
312～摄影机；408～显示部分；
410～多媒体桥接器；412～透镜；
414～显示模块；416～音频单元；
502～计算装置；504～连接控制单元；
610、620～视野；630～使用者；
710～倾斜角度；720～水平线；
730～视野的中心线；
740、920A-920D、930A-930D～障碍物；
800、910～影像；
810～警示物件；820～高度；
CXT～多媒体内容；CZ1、CZ2～净空区；
DAT～通讯数据；INFOE～环境信息；
INFOS～感测信息；INFOP～位置信息；
INFOU～使用者信息；P1-P5～位置；
PWR～电源电压；VO1-VO10～虚拟对象。
具体实施方式
为让本发明之上述和其它目的、特征、和优点能更明显易懂，下文特举出较佳实施例，并配合所附图式，作详细说明如下：
第1图系显示根据本发明一实施例所述的虚拟实境系统10。虚拟实境系统10包括主机装置102、欲被使用者所佩戴之头戴式显示装置(headmounteddisplay，HMD)104以及连接于主机装置102之接口单元101以及头戴式显示装置104之接口单元103之间的传输线106(可选择性)。主机装置102之接口单元101包括用以提供多媒体内容(content)CXT至头戴式显示装置104的第一主机接口20A、用以提供通讯数据DAT至头戴式显示装置104的第二主机接口20B以及用以提供电源电压PWR对头戴式显示装置104进行供电之第三主机接口20C。再者，头戴式显示装置104之接口单元103具有经由传输线106耦接于第一主机接口20A之第一从属(slave)接口30A、经由传输线106耦接于第二主机接口20B之第二从属接口30B以及经由传输线106耦接于第三主机接口20C之第三从属接口30C。头戴式显示装置104能播放来自主机装置102之多媒体内容CXT，并得到关于头戴式显示装置104及/或使用者之感测信息INFOS。根据由头戴式显示装置104所感测到的信息，主机装置102能及时地调整多媒体内容CXT。在一实施例中，主机装置102能对多媒体来源进行处理，并根据多媒体来源以及由头戴式显示装置104所感测到的信息而产生多媒体内容CXT。
第2图系显示根据本发明一实施例所述的第1图之头戴式显示装置104的示范例。在此实施例中，头戴式显示装置104更包括多感测模块202、多媒体模块204、微控制单元206、外围集线器(hub)208以及电源管理装置210。当使用者佩戴头戴式显示装置104时，多感测模块202能感测到使用者之位置、使用者的生物状态及/或头戴式显示装置104周围的环境，以产生感测信息INFOS。在一示范实施例中，感测信息INFOS包括位置信息INFOP、使用者信息INFOU及/或环境信息INFOE。位置信息INFOP可包括关于头戴式显示装置104之移动(movement)信息、定位(orientation)信息、倾斜角(tiltangle)信息及/或位置信息。使用者信息INFOU可包括关于使用者之生物信息及/或由多感测模块202所感测的眼睛视野(eyeview)信息。再者，环境信息INFOE可包括由多感测模块202所采集之影像/视频及/或深度信息。
在第2图中，多媒体模块204可经由头戴式显示装置104之第一从属接口30A接收到来自第1图之主机装置102之第一主机接口20A的多媒体内容CXT。多媒体模块204可处理并播放多媒体内容CXT，例如音频、影像或视频内容。多媒体模块204可耦接于多感测模块202，以便得到感测信息INFOS。于是，多媒体模块204可根据感测信息INFOS来调整播放参数，例如亮度及更新时间。再者，微控制单元206系电性耦接于多感测模块202以及多媒体模块204。微控制单元206可根据来自主机装置102之通讯数据DAT来发送控制信息，以协调多感测模块202以及多媒体模块204的功能。微控制单元206可接收来自多感测模块202之感测信息INFOS，并经由外围集线器208以及第二从属接口30B而将感测信息INFOS传送至主机装置102。
同时参考第1图与第2图，外围集线器208可经由头戴式显示装置104之第二从属接口30B而接收到来自主机装置102之第二主机接口20B的通讯数据DAT。外围集线器208系耦接于多感测模块202，以便接收感测信息INFOS。再者，外围集线器208亦耦接于微控制单元206，以便接收控制信息。外围集线器208可耦接于头戴式显示装置104的复数外围装置。外围集线器208可经由头戴式显示装置104之第二从属接口30B而提供感测信息INFOS至主机装置102之第二主机接口20B。再者，电源管理装置210可经由头戴式显示装置104之第三从属接口30C而连接至主机装置102之第三主机接口20C，以便接收来自主机装置102之电源电压PWR。在此实施例中，电源管理装置210系连接于头戴式显示装置104的各组件，用以对各组件供电，其中组件包括多感测模块202、多媒体模块204、微控制单元206及外围集线器208等。电源管理装置210包括复数电源电路，其中各电源电路能根据来自主机装置102的电源电压PWR而调整供应电源，并根据来自微控制单元206的控制信息而提供该供应电源对所对应之组件进行供电。具体而言，电源管理装置210能根据来自微控制单元206的控制信息而执行电源管理控制以及外围控制。
第3图系显示根据本发明一实施例所述的第2图之多感测模块202的示范例。多感测模块202包括用以得到对应于头戴式显示装置104之位置信息INFOP之位置感测装置302、用以得到使用者信息INFOU的使用者感测装置304及/或用以得到环境信息INFOE之环境感测装置306，其中多感测模块202系根据位置信息INFOP、使用者信息INFOU以及环境信息INFOE而提供感测信息INFOS。位置感测装置302包括复数传感器308，用以感测头戴式显示装置104之位置信息INFOP。位置参考装置可以设置在相距头戴式显示装置104一段距离的地方，以便无线地提供参考信息给位置感测装置302。于是，位置感测装置302可使用参考信息来产生位置信息INFOP。再者，使用者感测装置304包括至少一量测装置310，用以感测使用者信息INFOU，例如瞳距(Inter-pupillarydistance，IPD)量测装置，其中瞳距量测装置可量测使用者之眼睛视野(eyeview)信息，例如使用者的视角。环境感测装置306包括至少两摄影机312，用以采集头戴式显示装置104所面对之对象的影像/视频，并得到对象相对于头戴式显示装置104之深度信息。根据深度信息，头戴式显示装置104或是主机装置102可计算出深度映射(depthmap)。再者，微控制单元206可移动摄影机312的镜头，以便得到更多的深度信息，以作为深度映像。摄影机312在空间上系彼此分离。摄影机312可采集影像，并产生所采集之影像的视差(parallax)信息，其中两摄影机312的视野(fieldofview，FOV)至少部分地重迭，使得视差信息可以产生。视差信息会提供至主机装置102以作为深度信息，其可由主机装置102所计算，以便产生头戴式显示装置104所面对之空间或对象的深度映像或是深度模型。在一实施例中，两摄影机312系设置在一直在线。此外，两摄影机312系根据一倾斜角度设置在头戴式显示装置104上。随着该倾斜角度，摄影机312可感测到头戴式显示装置104所面对的较低区域。此外，主机装置102能根据深度信息来监测头戴式显示装置104所面对的净空区域(clearzone)。于是，当净空区域落入短距离范围时，虚拟实境系统10可以警告使用者。举例来说，头戴式显示装置104以及主机装置102可提醒使用者要注意房间内的障碍物。
第4图系显示根据本发明一实施例所述的第2图之多媒体模块204的示范例。多媒体模块204可以处理并播放多媒体内容CXT，例如音频、影像或视频内容。多媒体模块204包括至少一显示部分408、多媒体桥接器410以及音频单元416。显示部分408包括透镜412及显示模块414。音频单元416可传送多媒体内容CXT(例如多媒体内容CXT的音频部分)或是纪录来自使用者声音或是环境之音频声音。音频单元416系耦接于多媒体桥接器410，以作为音频录放功能。再者，同时参考第4图与第2图，当麦克风耦接于外围集线器208时，音频单元416系耦接于外围集线器208，以作为麦克风功能。音频单元416可包括音频编译码器，用以对多媒体内容CXT之音频信号进行编码/译码，并对耦接于外围集线器208之麦克风及/或扬声器/耳机之信号进行编码/译码。多媒体桥接器410系耦接于头戴式显示装置104之第一从属接口30A以及显示部分408之间，用以将多媒体内容CXT(例如多媒体内容CXT的视频部分)转换成显示部分408可读取之显示信号。
头戴式显示装置104可包括传感器(未显示)，用以监测头戴式显示装置104是否被使用者所佩戴。再者，根据头戴式显示装置104并未被使用者所佩戴之监测结果，传感器亦能传送触发信号至微控制单元206。传感器可以是内嵌在头戴式显示装置104且朝向里面的电容式传感器，用以侦测头戴式显示装置104是否被使用者所佩戴。此外，传输线106系耦接于主机装置102以及头戴式显示装置104之间，且传输线106能将来自主机装置102之多媒体内容CXT、通讯数据DAT以及电源电压PWR传送至头戴式显示装置104。再者，传输线106可将来自头戴式显示装置104的感测信息INFOS传送至主机装置102。此外，可使用无线通讯技术，例如WiGig，使得多媒体内容CXT、通讯数据DAT或是感测信息INFOS能在主机装置102以及头戴式显示装置104之间无线地传送。
第5图系显示根据本发明一实施例所述的第1图之主机装置102的示范例。主机装置102包括计算装置502，用以产生多媒体内容CXT。计算装置502可以是个人计算机、笔记型计算机、智能型手机或是其它内建强大处理器的可携式装置。计算装置502可从储存单元或是因特网接收到多媒体来源，以及计算装置502可根据多媒体来源以及来自头戴式显示装置104之感测信息INFOS而产生多媒体内容CXT。计算装置502能根据感测信息INFOS来产生通讯数据DAT。主机装置102更包括耦接于第1图之计算装置502以及传输线106之间的连接控制单元504，其中连接控制单元504可以增强在计算装置502以及连接控制单元504之间通讯之通讯数据DAT及/或感测信息INFOS之信号强度。再者，连接控制单元504可连接至电源，使得连接控制单元504能传送电源电压PWR至传输线106的电源路径。连接控制单元504包括一开关，其系用来控制是否提供多媒体内容CXT、通讯数据DAT及/或电源电压PWR至传输线106。
第6图系显示头戴式显示装置104之摄影机312之视野(FOV)之示范上视图。在第6图中，使用者630正佩戴着头戴式显示装置104，其中头戴式显示装置104的一摄影机312系设置在靠近使用者630的左眼，而另一摄影机312系设置在靠近使用者630的右眼。再者，两摄影机312系设置在同一直在线。靠近左眼的摄影机312具有视野610，而靠近右眼的摄影机312具有视野620。因此，根据两摄影机312所采集的影像，头戴式显示装置104可以得到视差(parallax)信息，以便产生使用者630所处空间的深度映像或是深度模型。
第7图系显示头戴式显示装置104之摄影机312之倾斜角度710之示意图。在第7图中，摄影机312系根据倾斜角度710而设置在头戴式显示装置104上，其中倾斜角度710系根据水平线720以及摄影机312之视野的中心线730所决定。水平线720系平行于地表线。顺着倾斜角度710的方向，摄影机312能感测到头戴式显示装置104所面对之较低的区域，以便对会妨碍使用者移动的任何障碍物740进行侦测。于是，当佩戴着头戴式显示装置104的使用者移动且靠近障碍物740时，虚拟实境系统10可根据感测信息INFOS而经由显示部分408之显示模块414及/或音频单元416来警示使用者。例如，当使用者接近障碍物740时，会出现警示对象，其中警示对象所显示之速度以及放大倍数系根据使用者的移动速度及/或使用者至障碍物740的距离而决定。
第8图系显示当使用者接近第7图之障碍物740时，配戴着头戴式显示装置104之使用者所观看到的影像800之示范例。同时参考第7图与第8图，当使用者位于位置P1时，没有警示对象会出现在影像800，其中位置P1与障碍物740之间的距离是安全的并且足够使用者进行移动。假如使用者朝着障碍物740前进以及使用者与障碍物740之间的距离减少且短于特定距离时，警示对象810会出现在影像800中。在部分实施例中，使用者与障碍物740之间的距离系根据位置信息INFOP、使用者信息INFOU及/或环境信息INFOE所得到。在第8图中，警示对象810为虚拟墙。再者，虚拟墙的高度820系根据使用者与障碍物740之间的距离而决定。例如，当使用者位于位置P2与位置P3之间时，虚拟墙会出现在影像800中，其中当使用者靠近位置P2时，虚拟墙的高度820会减少，以及当使用者靠近位置P3时，虚拟墙的高度820会增加。
根据深度信息以及障碍物，主机装置102会对头戴式显示装置104所面对之净空区进行监控，其中净空区系使用者能安全移动的区域，即在净空区内使用者不会遇到任何障碍物。第9A图系显示小房间之上视图之示范例，以及第9B图系显示大房间之上视图之示范例。当使用者在第9A图之小房间内佩戴着头戴式显示装置104时，头戴式显示装置104的摄影机312能得到深度信息以及障碍物920A-920D的位置(例如家具及/或家电)，于是主机装置102会得到净空区CZ1。再者，当使用者在第9B图之大房间内佩戴着头戴式显示装置104时，头戴式显示装置104的摄影机312可得到深度信息以及障碍物930A-930D的位置，于是主机装置102会得到净空区CZ2。在第9A图与第9B图中，标号910系表示佩戴着头戴式显示装置104之使用者所观看到的影像。
第10A图系显示佩戴着头戴式显示装置104之使用者所观看到的影像910之示范例，以及第10B图系显示佩戴着头戴式显示装置104之使用者所观看到的影像910之另一示范例。在虚拟实境系统10中，可以对显示于影像910之虚拟对象的尺寸进行调整，以配合净空区。例如，对相同的虚拟对象来说，因为第9B图之净空区CZ2系大于第9A图之净空区CZ1，所以显示于影像910且对应于净空区CZ2之虚拟对象(例如第10A之VO1)系大于显示于影像910且对应于净空区CZ1之虚拟对象(例如第10A之VO2)。具体而言，显示于影像910之虚拟对象的尺寸/大小系与净空区的尺寸/大小成正比的。再者，在虚拟实境系统10中，显示于影像910之虚拟对象的数量可根据净空区的大小而调整。例如，以对应于使用者欲选择之项目/选项之虚拟对象VO3-VO9而言，三个虚拟对象(例如第10B图之VO3-VO5)系显示在对应于净空区CZ1之影像910，而七个虚拟对象(例如第10B图之VO3-VO9)系显示在对应于净空区CZ2之影像910。于是，显示于影像910且对应于净空区CZ1之虚拟对象的数量系少于显示于影像910且对应于净空区CZ2之虚拟对象。具体而言，显示于影像910之虚拟对象的数量系与净空区的大小成正比的。藉由显示较少的虚拟对象并将这些虚拟对象安排在影像910的中间，使用者可以安全地在较小的净空区进行移动，因此可预防使用者碰撞到障碍物。
再者，当佩戴着头戴式显示装置104之使用者在净空区移动时，显示于影像910之虚拟对象的尺寸可以被调整，以便对使用者提供真实感。第11图系显示佩戴着头戴式显示装置104之使用者所观看到的影像910之另一示范例。同时参考第9A图以及第11图，当使用者从第9A图之净空区CZ1的位置P4移动到位置P5时，在位置P4所观看到之影像910的虚拟对象VO10会逐渐增加，直到使用者到达位置P5。于是，使用者能在位置P5观看到影像910之较大虚拟对象VO11，其中虚拟对象之尺寸的调整速度系根据使用者的移动速度、净空区的大小以及使用者与虚拟对象的距离所决定。例如，假如虚拟对象VO10系由虚拟实境系统10所执行之应用所提供的虚拟桌，则虚拟桌将逐渐变大，以便表明使用者正靠近虚拟桌，因此增加虚拟桌的存在感如同使用者所察觉。再者，对虚拟对象之尺寸的调整速度来说，对应于小房间或是小净空区之调整速度系快于对应于较大房间或是较大净空区之调整速度。例如，当使用者与虚拟对象之间的距离减少时，对应于小房间之虚拟对象之尺寸的增加速度系快于对应于较大房间之虚拟对象之尺寸的增加速度。具体而言，当使用者与虚拟对象之间的距离减少时，虚拟对象之尺寸的调整速度系与净空区的大小成反比的。
虽然本发明已以较佳实施例揭露如上，然其并非用以限定本发明，任何所属技术领域中的普通技术人员，在不脱离本发明之精神和范围内，当可作些许之更动与润饰，因此本发明之保护范围当视后附之申请专利范围所界定者为准。

Claims (20)

1.一种虚拟实境系统，包括：
主机装置；
传输线；以及
头戴式显示装置，经由上述传输线耦接于所述主机装置，包括：
多媒体模块，经由所述传输线接收来自所述主机装置的多媒体内容，并显示所述多媒体内容的视频部分；
多感测模块，得到感测信息；以及
外围集线器，经由所述传输线提供所述感测信息至所述主机装置，
其中所述多媒体内容的所述视频部分的至少一个虚拟对象是响应于所述感测信息而调整的。
2.如权利要求1所述的虚拟实境系统，其中所述多感测模块包括：
位置感测装置，得到对应于所述头戴式显示装置的位置信息；
使用者感测装置，得到使用者的使用者信息；以及
环境感测装置，得到对应于障碍物的环境信息，
其中所述多感测模块系根据所述位置信息、所述使用者信息以及所述环境信息而得到所述感测信息。
3.如权利要求2所述的虚拟实境系统，其中所述位置信息包括所述头戴式显示装置的移动信息、定位信息、倾斜角信息及/或位置信息；以及所述使用者信息包括关于所述使用者的生物信息及/或眼睛视野信息；以及所述环境信息包括由所述环境感测装置所采集的影像/视频及/或深度信息。
4.如权利要求2所述的虚拟实境系统，其中所述环境感测装置包括设置在同一直线的至少两个摄影机，以及所述两摄影机系根据倾斜角度设置在所述头戴式显示装置，其中每一所述摄影机的倾斜角度是根据水平线以及所述摄影机的视野的中心线决定的。
5.如权利要求1所述的虚拟实境系统，其中当所述感测信息是指示佩戴着所述头戴式显示装置的使用者与障碍物之间的距离少于特定距离时，警示对象会出现。
6.如权利要求5所述的虚拟实境系统，其中由所述多媒体模块所显示的所述警示对象的速度与放大倍数是根据佩戴着所述头戴式显示装置的所述使用者的移动速度或是佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离决定的。
7.如权利要求5所述的虚拟实境系统，其中所述警示对象为虚拟墙，以及当佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离增加时，所述虚拟墙的高度会降低，以及当佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离减少时，所述虚拟墙的所述高度会增加。
8.如权利要求1所述的虚拟实境系统，其中对应于障碍物的净空区是根据所述感测信息而得到的，以及所述虚拟对象的尺寸与所述净空区的大小成正比。
9.如权利要求8所述的虚拟实境系统，其中所述虚拟对象的数量与所述净空区的大小成正比。
10.如权利要求1所述的虚拟实境系统，其中对应于障碍物的净空区是根据所述感测信息而得到的，其中所述虚拟对象的尺寸是根据调整速度而调整的，其中所述调整速度是根据使用者的移动速度、所述净空区的大小以及所述使用者与所述虚拟对象之间的距离决定的。
11.如权利要求10所述的虚拟实境系统，其中当所述使用者与所述虚拟对象之间的距离减少时，所述调整速度与所述净空区的大小成反比。
12.一种控制虚拟实境系统的操作模式的方法，其中所述虚拟实境系统包括主机装置、头戴式显示装置以及耦接于所述主机装置以及所述头戴式显示装置之间的传输线，所述方法包括：
经由所述传输线，藉由所述头戴式显示装置的多媒体模块，接收来自所述主机装置的多媒体内容；
藉由所述头戴式显示装置的所述多媒体模块，显示所述多媒体内容的视频部分；
藉由所述头戴式显示装置的多感测模块，得到感测信息；
经由所述传输线，藉由所述头戴式显示装置的外围集线器，提供所述感测信息至所述主机装置；以及
响应于所述感测信息，调整所述多媒体内容的所述视频部分的至少一个虚拟对象。
13.如权利要求12所述的方法，其中所述多感测模块包括：
位置感测装置，得到对应于所述头戴式显示装置的位置信息；
使用者感测装置，得到使用者的使用者信息；以及
环境感测装置，得到对应于障碍物的环境信息，
其中所述多感测模块根据所述位置信息、所述使用者信息以及所述环境信息而得到所述感测信息。
14.如权利要求13所述的方法，其中所述位置信息包括所述头戴式显示装置的移动信息、定位信息、倾斜角信息及/或位置信息；以及所述使用者信息包括关于所述使用者的生物信息及/或眼睛视野信息；以及所述环境信息包括由所述环境感测装置所采集的影像/视频及/或深度信息。
15.如权利要求13所述的方法，其中所述环境感测装置包括设置在同一直线的至少两摄影机，以及所述两摄影机系根据倾斜角度设置在所述头戴式显示装置，其中每一所述摄影机的倾斜角度是根据水平线以及所述摄影机的视野的中心线所决定的。
16.如权利要求12所述的方法，其中当所述感测信息系指示佩戴着所述头戴式显示装置的使用者与障碍物之间的距离少于特定距离时，警示对象会出现。
17.如权利要求16所述的方法，其中由所述多媒体模块所显示的所述警示对象的速度与放大倍数是根据佩戴着所述头戴式显示装置的所述使用者的移动速度或是佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离所决定的。
18.如权利要求16所述的方法，其中所述警示对象为虚拟墙，以及当佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离增加时，所述虚拟墙的高度会降低，以及当佩戴着所述头戴式显示装置的所述使用者与所述障碍物之间的距离减少时，所述虚拟墙的高度会增加。
19.如权利要求12所述的方法，更包括：
根据所述感测信息，得到对应于障碍物的净空区，
其中所述虚拟对象的尺寸与所述净空区的大小成正比。
20.如权利要求12所述的方法，更包括：
根据所述感测信息，得到对应于障碍物的净空区，
其中所述虚拟对象的尺寸是根据调整速度而调整的，其中所述调整速度是跟据使用者的移动速度、所述净空区的大小以及所述使用者与所述虚拟对象之间的距离决定的。
CN201510876193.1A 2014-12-04 2015-12-03 虚拟实境系统以及虚拟实境系统的操作模式的控制方法 Active CN105677011B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201462087593P 2014-12-04 2014-12-04
US62/087,593 2014-12-04
US14/943,721 2015-11-17
US14/943,721 US9881422B2 (en) 2014-12-04 2015-11-17 Virtual reality system and method for controlling operation modes of virtual reality system

Publications (2)

Publication Number Publication Date
CN105677011A true CN105677011A (zh) 2016-06-15
CN105677011B CN105677011B (zh) 2018-08-28

Family

ID=54771047

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510876193.1A Active CN105677011B (zh) 2014-12-04 2015-12-03 虚拟实境系统以及虚拟实境系统的操作模式的控制方法
CN201510883728.8A Active CN105677015B (zh) 2014-12-04 2015-12-04 虚拟实境系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510883728.8A Active CN105677015B (zh) 2014-12-04 2015-12-04 虚拟实境系统

Country Status (4)

Country Link
US (2) US9881422B2 (zh)
EP (2) EP3029550B1 (zh)
CN (2) CN105677011B (zh)
TW (2) TWI560580B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106249883A (zh) * 2016-07-26 2016-12-21 努比亚技术有限公司 一种数据处理方法及电子设备
CN107315250A (zh) * 2017-05-23 2017-11-03 杭州蓝斯特科技有限公司 一种低延时的头戴式无线显示装置及其实现方法
WO2018152689A1 (zh) * 2017-02-22 2018-08-30 深圳市卓梦科技有限责任公司 一种探测障碍物技术的数据采集方法以及vr头盔
CN109407959A (zh) * 2018-10-31 2019-03-01 腾讯科技（深圳）有限公司 虚拟场景中的虚拟对象控制方法、设备以及存储介质
CN112988107A (zh) * 2021-04-25 2021-06-18 歌尔股份有限公司 一种音量调节方法、系统及头戴式设备

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106062862B (zh) 2014-10-24 2020-04-21 杭州凌感科技有限公司 用于沉浸式和交互式多媒体生成的系统和方法
US10256859B2 (en) 2014-10-24 2019-04-09 Usens, Inc. System and method for immersive and interactive multimedia generation
US9544054B1 (en) * 2015-08-10 2017-01-10 Facebook, Inc. Multidirectional communication system
CN106110654B (zh) * 2016-06-16 2019-12-24 联想(北京)有限公司 一种输入电子设备及电子设备
CN106200981B (zh) * 2016-07-21 2019-06-28 北京小鸟看看科技有限公司 一种虚拟现实系统及其无线实现方法
CN109069921B (zh) * 2016-07-29 2022-08-30 惠普发展公司，有限责任合伙企业 虚拟现实插接站
CN106139587B (zh) * 2016-08-05 2020-06-09 惠州Tcl移动通信有限公司 一种基于vr游戏用来规避现实环境障碍物的方法及系统
TWI635316B (zh) * 2016-08-09 2018-09-11 陳台國 External near-eye display device
TWI596509B (zh) * 2016-08-11 2017-08-21 拓景科技股份有限公司 虛擬實境環境中之特定資訊展示方法及系統，及其相關電腦程式產品
WO2018044073A1 (en) * 2016-09-01 2018-03-08 Samsung Electronics Co., Ltd. Image streaming method and electronic device for supporting the same
CN106507083B (zh) * 2016-09-14 2018-12-25 北京小鸟看看科技有限公司 一种无线通信装置、虚拟现实光球及虚拟现实系统
TWI605329B (zh) * 2016-09-22 2017-11-11 建準電機工業股份有限公司 頭戴式顯示裝置
US10678397B2 (en) 2016-09-26 2020-06-09 Htc Corporation Method for providing demonstration information in simulation environment, and associated simulation system
US10896544B2 (en) * 2016-10-07 2021-01-19 Htc Corporation System and method for providing simulated environment
US10198029B2 (en) 2016-11-03 2019-02-05 Smolding Bv Wearable computer case and wearable computer
USD803212S1 (en) 2016-11-03 2017-11-21 Smolding Bv Wearable computer case
US10282859B2 (en) * 2016-12-12 2019-05-07 The Boeing Company Intra-sensor relative positioning
CN106656299A (zh) * 2016-12-12 2017-05-10 上海拆名晃信息科技有限公司 一种虚拟现实设备与计算机主机的数据传输方法与装置
US10652364B2 (en) * 2016-12-28 2020-05-12 Intel Corporation Shared display links in a user system
US10666923B2 (en) * 2017-02-24 2020-05-26 Immervision, Inc. Wide-angle stereoscopic vision with cameras having different parameters
TWI678555B (zh) * 2017-03-13 2019-12-01 宏達國際電子股份有限公司 通訊系統及通訊方法
US10405374B2 (en) * 2017-03-17 2019-09-03 Google Llc Antenna system for head mounted display device
TWI658376B (zh) * 2017-05-12 2019-05-01 宏碁股份有限公司 模擬攜帶式裝置之感測訊號的虛擬實境系統、虛擬實境系統之控制方法、頭戴式顯示裝置、主機、攜帶式裝置
CN108881706B (zh) * 2017-05-16 2023-10-10 北京三星通信技术研究有限公司 控制多媒体设备工作的方法及装置
CN108958457A (zh) * 2017-05-19 2018-12-07 宏碁股份有限公司 模拟携带式装置的感测信号的虚拟实境系统及其控制方法
CN108958461A (zh) * 2017-05-24 2018-12-07 宏碁股份有限公司 具自适性控制的虚拟实境系统及其控制方法
CN109844694B (zh) * 2017-06-15 2020-08-25 腾讯科技（深圳）有限公司 使用集线器连接两个不同环境的系统和方法
US20190033989A1 (en) * 2017-07-31 2019-01-31 Google Inc. Virtual reality environment boundaries using depth sensors
US10803663B2 (en) * 2017-08-02 2020-10-13 Google Llc Depth sensor aided estimation of virtual reality environment boundaries
WO2019040066A1 (en) * 2017-08-24 2019-02-28 Hewlett-Packard Development Company, L.P. COLLISION AVOIDANCE FOR PORTABLE DEVICES
TWI633326B (zh) * 2017-09-11 2018-08-21 宏碁股份有限公司 多人定位系統以及多人定位方法
EP3454300A1 (en) 2017-09-12 2019-03-13 HTC Corporation Three dimensional reconstruction method, apparatus and non-transitory computer readable storage medium thereof
EP3676687A1 (en) 2017-10-20 2020-07-08 Huawei Technologies Co., Ltd. Wearable device and method therein
JP7252965B2 (ja) * 2018-02-15 2023-04-05 マジック リープ， インコーポレイテッド 複合現実のための二重聴取者位置
US11508249B1 (en) 2018-03-05 2022-11-22 Intelligent Technologies International, Inc. Secure testing using a smartphone
CN108646925B (zh) * 2018-06-26 2021-01-05 朱光 一种分体式头戴显示器系统及交互方法
WO2020073023A1 (en) 2018-10-05 2020-04-09 Magic Leap, Inc. Near-field audio rendering
CN115631323A (zh) * 2021-01-22 2023-01-20 四川智能小子科技有限公司 Ar导览系统及ar导览方法
WO2022271499A1 (en) * 2021-06-25 2022-12-29 Innopeak Technology, Inc. Methods and systems for depth estimation using fisheye cameras

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110205965A1 (en) * 2009-11-19 2011-08-25 Sprigg Stephen A Virtual peripheral hub device and system
US20130063550A1 (en) * 2006-02-15 2013-03-14 Kenneth Ira Ritchey Human environment life logging assistant virtual esemplastic network system and method
US20130093788A1 (en) * 2011-10-14 2013-04-18 James C. Liu User controlled real object disappearance in a mixed reality display
CN103930818A (zh) * 2011-09-12 2014-07-16 谷歌公司 具有虚拟图像对比度控制的光学显示系统和方法
CN104062759A (zh) * 2013-03-22 2014-09-24 精工爱普生株式会社 信息显示系统、信息显示方法、以及头戴式显示装置

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4440613C1 (de) * 1994-11-14 1996-07-25 Leica Ag Vorrichtung und Verfahren zur Detektion und Demodulation eines intensitätsmodulierten Strahlungsfeldes
JPH09114543A (ja) * 1995-10-02 1997-05-02 Xybernaut Corp ハンドフリーコンピュータ装置
US6127990A (en) * 1995-11-28 2000-10-03 Vega Vista, Inc. Wearable display and methods for controlling same
US20030210228A1 (en) * 2000-02-25 2003-11-13 Ebersole John Franklin Augmented reality situational awareness system and method
GB2376397A (en) 2001-06-04 2002-12-11 Hewlett Packard Co Virtual or augmented reality
AU2003225228A1 (en) * 2002-05-03 2003-11-17 Donnelly Corporation Object detection system for vehicle
US6834232B1 (en) * 2003-07-30 2004-12-21 Ford Global Technologies, Llc Dual disimilar sensing object detection and targeting system
WO2005045729A1 (de) * 2003-11-10 2005-05-19 Siemens Aktiengesellschaft System und verfahren zur durchführung und visualisierung von simulationen in einer erweiterten realität
US20060132492A1 (en) * 2004-12-17 2006-06-22 Nvidia Corporation Graphics processor with integrated wireless circuits
CN200972613Y (zh) * 2006-09-01 2007-11-07 路尧 基于头戴显示器和便携式主机的随身计算机平台
US8855719B2 (en) 2009-05-08 2014-10-07 Kopin Corporation Wireless hands-free computing headset with detachable accessories controllable by motion, body gesture and/or vocal commands
JP4857196B2 (ja) * 2007-05-31 2012-01-18 キヤノン株式会社 頭部装着型表示装置、及びその制御方法
JP5067850B2 (ja) * 2007-08-02 2012-11-07 キヤノン株式会社 システム、頭部装着型表示装置、その制御方法
US20090290033A1 (en) * 2007-11-16 2009-11-26 Tenebraex Corporation Systems and methods of creating a virtual window
CN103119512A (zh) 2008-11-02 2013-05-22 大卫·乔姆 近眼式显示系统和装置
JP2010141538A (ja) * 2008-12-10 2010-06-24 Toshiba Corp 電子機器、及び表示制御方法
CN101995941B (zh) * 2009-08-13 2012-05-23 昆山扬明光学有限公司 头戴式显示系统
DE102009046158A1 (de) * 2009-10-29 2011-05-05 Robert Bosch Gmbh Verfahren zur Erkennung von Objekten mit geringer Höhe
TWI502468B (zh) * 2009-11-10 2015-10-01 Acer Inc 行動電子裝置及其三維操作介面的控制方法
US8665177B2 (en) * 2010-02-05 2014-03-04 Kopin Corporation Touch sensor for controlling eyewear
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
WO2011129907A1 (en) * 2010-04-13 2011-10-20 Sony Computer Entertainment America Llc Calibration of portable devices in a shared virtual space
US8648702B2 (en) * 2010-08-20 2014-02-11 Denso International America, Inc. Combined time-of-flight and image sensor systems
WO2012040086A1 (en) 2010-09-20 2012-03-29 Kopin Corporation Miniature communications gateway for head mounted display
EP2625845B1 (en) * 2010-10-04 2021-03-03 Gerard Dirk Smits System and method for 3-d projection and enhancements for interactivity
US9122053B2 (en) * 2010-10-15 2015-09-01 Microsoft Technology Licensing, Llc Realistic occlusion for a head mounted augmented reality display
US9113047B2 (en) * 2010-10-22 2015-08-18 Hitachi Construction Machinery Co., Ltd. Peripheral monitoring device for working machine
US9348141B2 (en) * 2010-10-27 2016-05-24 Microsoft Technology Licensing, Llc Low-latency fusing of virtual and real content
US9497388B2 (en) * 2010-12-17 2016-11-15 Pelco, Inc. Zooming factor computation
JP5691568B2 (ja) 2011-01-28 2015-04-01 ソニー株式会社 情報処理装置、報知方法及びプログラム
US9183676B2 (en) * 2012-04-27 2015-11-10 Microsoft Technology Licensing, Llc Displaying a collision between real and virtual objects
US9122321B2 (en) 2012-05-04 2015-09-01 Microsoft Technology Licensing, Llc Collaboration environment using see through displays
US9165381B2 (en) 2012-05-31 2015-10-20 Microsoft Technology Licensing, Llc Augmented books in a mixed reality environment
US9035970B2 (en) 2012-06-29 2015-05-19 Microsoft Technology Licensing, Llc Constraint based information inference
US9429912B2 (en) * 2012-08-17 2016-08-30 Microsoft Technology Licensing, Llc Mixed reality holographic object development
IN2015KN00682A (zh) * 2012-09-03 2015-07-17 Sensomotoric Instr Ges Für Innovative Sensorik Mbh
US8922041B1 (en) * 2012-10-03 2014-12-30 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Tethered vehicle control and tracking system
US9173171B2 (en) * 2012-10-05 2015-10-27 Htc Corporation Portable device with subscriber identity cards and method for controlling transmission power thereof
JP5818773B2 (ja) * 2012-11-22 2015-11-18 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
US9189021B2 (en) * 2012-11-29 2015-11-17 Microsoft Technology Licensing, Llc Wearable food nutrition feedback system
TWI581173B (zh) * 2013-03-14 2017-05-01 茱麗安 麥克 爾巴哈 用以擴增實境及虛擬實境之目鏡系統及使用該系統之方法
JP6357737B2 (ja) * 2013-07-24 2018-07-18 富士通株式会社 車流計測装置、方法及びプログラム
US20150326774A1 (en) * 2014-05-06 2015-11-12 Comanche Outfitters LLC Device with two wireless protocols

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130063550A1 (en) * 2006-02-15 2013-03-14 Kenneth Ira Ritchey Human environment life logging assistant virtual esemplastic network system and method
US20110205965A1 (en) * 2009-11-19 2011-08-25 Sprigg Stephen A Virtual peripheral hub device and system
CN103930818A (zh) * 2011-09-12 2014-07-16 谷歌公司 具有虚拟图像对比度控制的光学显示系统和方法
US20130093788A1 (en) * 2011-10-14 2013-04-18 James C. Liu User controlled real object disappearance in a mixed reality display
CN104062759A (zh) * 2013-03-22 2014-09-24 精工爱普生株式会社 信息显示系统、信息显示方法、以及头戴式显示装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106249883A (zh) * 2016-07-26 2016-12-21 努比亚技术有限公司 一种数据处理方法及电子设备
CN106249883B (zh) * 2016-07-26 2019-07-30 努比亚技术有限公司 一种数据处理方法及电子设备
WO2018152689A1 (zh) * 2017-02-22 2018-08-30 深圳市卓梦科技有限责任公司 一种探测障碍物技术的数据采集方法以及vr头盔
CN107315250A (zh) * 2017-05-23 2017-11-03 杭州蓝斯特科技有限公司 一种低延时的头戴式无线显示装置及其实现方法
CN109407959A (zh) * 2018-10-31 2019-03-01 腾讯科技（深圳）有限公司 虚拟场景中的虚拟对象控制方法、设备以及存储介质
CN112988107A (zh) * 2021-04-25 2021-06-18 歌尔股份有限公司 一种音量调节方法、系统及头戴式设备

Also Published As

Publication number Publication date
EP3029550B1 (en) 2018-10-17
US20160163283A1 (en) 2016-06-09
US9881422B2 (en) 2018-01-30
CN105677011B (zh) 2018-08-28
EP3029552B1 (en) 2018-10-17
TW201626167A (zh) 2016-07-16
TWI621967B (zh) 2018-04-21
CN105677015B (zh) 2019-01-15
CN105677015A (zh) 2016-06-15
TW201621557A (zh) 2016-06-16
US20160163110A1 (en) 2016-06-09
EP3029552A1 (en) 2016-06-08
US9779555B2 (en) 2017-10-03
TWI560580B (en) 2016-12-01
EP3029550A1 (en) 2016-06-08

Similar Documents

Publication Publication Date Title
CN105677011A (zh) 虚拟实境系统以及虚拟实境系统的操作模式的控制方法
US10671849B2 (en) System and method for sensor based visual adjustments
EP3029551A1 (en) Virtual reality system and method for controlling operation modes of virtual reality system
US10078366B2 (en) Head-mountable apparatus and system
CN205726125U (zh) 一种新型机器人远程监视系统
CN104076512A (zh) 头部佩戴型显示装置以及头部佩戴型显示装置的控制方法
GB2523554A (en) Head-mountable apparatus and systems
GB2517056A (en) Head-mountable apparatus and systems
EP3169068B1 (en) Portable device that controls photography mode, and control method therefor
EP2244170A1 (en) Stereo imaging touch device
EP3729235B1 (en) Data processing
GB2558284A (en) Virtual reality
US20150237338A1 (en) Flip-up stereo viewing glasses
US20210065435A1 (en) Data processing
KR20240026503A (ko) X선 효과를 갖는 증강 현실 아이웨어
EP3547081A1 (en) Data processing
WO2018115842A1 (en) Head mounted virtual reality display
JP6287399B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
US20190324283A1 (en) Display device and display method
JP2012182752A (ja) 立体画像用メガネ、画像表示装置、画像表示システム、電子機器、プログラム、及びコンピュータ読取可能な記録媒体
US20100283836A1 (en) Stereo imaging touch device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant