CN113544766A - 在第一和第二增强现实观看器之间配准本地内容 - Google Patents

在第一和第二增强现实观看器之间配准本地内容 Download PDF

Info

Publication number
CN113544766A
CN113544766A CN202080018919.7A CN202080018919A CN113544766A CN 113544766 A CN113544766 A CN 113544766A CN 202080018919 A CN202080018919 A CN 202080018919A CN 113544766 A CN113544766 A CN 113544766A
Authority
CN
China
Prior art keywords
user
dcf
coordinate system
real
ucf
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080018919.7A
Other languages
English (en)
Inventor
M·A·麦考尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magic Leap Inc
Original Assignee
Magic Leap Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magic Leap Inc filed Critical Magic Leap Inc
Publication of CN113544766A publication Critical patent/CN113544766A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147—Details of sensors, e.g. sensor lenses
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Abstract

公开了一种观看本地内容的图像数据的方法。增强现实视图是通过存储第一设备坐标系(DCF)、移动第一配准标记以选择用户可通过显示器观看的至少一个现实世界对象上的第一特征点(FP1)和第二特征点(FP2)来创建的。统一坐标系(UCS)对准模块存储在选择FP1和FP2时配准标记的位置，在选择FP1和FP2时基于第一个配准标记的位置来确定用户坐标系(UCF)，转换DCF到UCF，以及基于从第一DCF到第一UCF的转换，通过显示器向用户显示第一数据源上的用投影仪接收到的本地内容的图像数据。

Description

在第一和第二增强现实观看器之间配准本地内容
相关申请的交叉引用
本申请要求于2019年3月12日提交的美国临时专利申请第62/817,318号和2019年4月19日提交的美国临时专利申请第62/836,417号的优先权，每个申请的全部内容通过引用并入本文。
技术领域
本发明涉及具有第一和第二增强现实观看器以及配准(registration)本地内容以供观看器(viewer)观看的观看系统。
背景技术
现代计算和显示技术促进了包括“增强现实”观看器的用户交互系统的开发。这种观看器通常具有带有头戴式框架的头部单元，用户可以将其固定到他们的头部，并且通常包括两个波导，一个波导在用户的每只眼睛前面。波导是透明的，以使得来自现实世界对象的环境光可以传输(transmit)通过波导，用户可以看到现实世界对象。每个波导还用于将来自投影仪的投射光传输到用户的相应眼睛。投射光在眼睛的视网膜上形成图像。眼睛的视网膜因此接收环境光和投射光。用户同时看到现实世界对象和由投影光创建的一个或多个虚拟对象。
以这种方式，用户可以看到本地内容在现实世界中的渲染。房间内的两个用户将各自显示自己的本地内容。有时可能需要两个用户看到相同位置的相同本地内容。例如，两个用户在合作项目、玩游戏、观看体育赛事等时可能希望看到相同位置的相同本地内容。
发明内容
本发明提供了一种观看系统，包括第一增强现实观看器，包括：第一显示器，允许第一用户看到现实世界对象，第一数据源，用于保存本地内容的图像数据，第一投影仪，在所述第一用户观看所述现实世界对象时，通过所述第一显示器向所述第一用户显示所述本地内容的图像数据，第一处理器，连接到所述第一处理器的第一计算机可读介质，在所述第一计算机可读介质上并且由所述处理器可执行的第一组视觉数据和算法，其包括：第一设备坐标系DCF，第一配准标记，由所述第一用户可操作以在所述现实世界对象中的至少一个现实世界对象上选择第一特征点FP1和第二特征点FP2，第一统一坐标系UCS对准模块，具有：第一特征点存储模块，存储在选择所述FP1和所述FP2时所述第一配准标记的位置，第一用户坐标系计算器，基于在选择所述FP1和所述FP2时所述第一配准标记的所述位置来确定第一用户坐标系UCF，第一转换器，用于将所述第一DCF转换为所述第一UCF，以及第一渲染引擎，基于从所述第一DCF到所述第一UCF的转换来显示所述第一数据源上的所述本地内容的图像数据。
本发明还提供了一种观看本地内容的图像数据的方法，包括：创建第一增强现实视图，包括：在第一计算机可读介质上存储第一设备坐标系DCF，由所述第一用户移动第一配准标记以在由所述用户通过第一显示器可观看的至少一个所述现实对象上选择第一特征点FP1和第二特征点FP2，通过以下来执行第一统一坐标系UCS对准模块：存储在选择所述FP1和所述FP2时所述第一配准标记的位置，基于在选择所述FP1和所述FP2时所述第一配准标记的所述位置，确定第一用户坐标系UCF，将所述第一DCF转换为所述第一UCF，以及基于从所述第一DCF到所述第一UCF的转换，在所述第一用户观看所述现实世界对象时，通过所述第一显示器向所述第一用户显示第一数据源上的用第一投影仪接收到的本地内容的图像数据。
附图说明
本发明通过示例参考附图进一步描述，其中：
图1是根据本发明的实施例的由第一和第二用户使用的观看系统以及仅对用户可见的桌子和渲染的透视图；
图2是示意图，其以横截面平面图示出了增强现实观看器的部件和一个用户的眼睛、以框图形式示出了增强现实观看器的其他部件、以及桌子内部视图；
图3是类似于图2的视图，重点是基于运动的调整系统；
图4是类似于图3的视图，重点是用于在用户之间配准本地内容的系统；
图5是示出了驻留在相应增强现实观看器的视觉数据和算法内的桌子和各种坐标系的透视图，并且进一步示出了重力方向；
图6是类似于图5的视图，示出了用户如何选择第一和第二特征点；
图7是类似于图6的视图，示出了如何转换坐标系；以及
图8是根据本发明的一个实施例的可以在本发明系统中找到应用的计算机形式的机器的框图。
具体实施方式
附图的图1示出了根据本发明的一个或多个实施例的与观看系统14进行交互的第一用户10和第二用户12。观看系统14包括用于每个用户10和12的相应增强现实观看器16、网络18和服务器20。第一和第二用户位于具有桌子22形式的现实对象的环境中。用户10和12使用增强现实观看器16可观看各种渲染，包括本地内容24的渲染和配准标记26的渲染。
每个增强现实观看器16包括头部单元30、腰包32、线缆连接34、以及六自由度(6dof)控制器36。相应的用户10或12将头部单元30固定到他们的头部以及将远离头部单元30的腰包32固定在他们的腰部(或其他合适的位置，例如背包)。线缆连接34将头部单元30连接到腰包32。头部单元30包括用于向用户显示一个或多个虚拟对象同时允许用户看到诸如桌子22的现实对象的技术。腰包32主要包括增强现实观看器16的处理和通信能力。在另一个实施例中，处理和通信能力可以完全驻留在头部单元30中，因此不需要腰包32。
腰包32通过无线连接被连接到网络18。服务器20被连接到网络18并保存表示本地内容的数据。腰包32通过网络18从服务器20下载本地内容。腰包32通过线缆连接34向头部单元30提供数据。头部单元30通常包括：包括光源的显示器以及波导，光源可以是激光或LED光(light)或任何其他合适的光，波导引导光以使得光被相应用户10或12的每只眼睛的视网膜接收。头部单元30的显示器为用户10或12的左眼和右眼产生略微不同的图像，以便用户10或12的大脑将光感知为本地内容24的三维图像。本地内容24的比例及其位置和距用户10或12的距离由表示本地内容24的数据和用于向相应用户10或12显示本地内容24的各种坐标系来确定。
在相对于桌子22的相同位置向用户10和12显示本地内容24。在给定的示例中，本地内容24是从第一用户10的视点和第二用户12的视点面向第一用户10的角色的头部。
6dof控制器36包括位置发射器，并且头部单元30包括位置接收器。位置发射器发射位置信号，位置接收器接收位置信号。位置信号包括表示位置发射器(并且因此是6dof控制器36)相对于位置接收器(并且因此是头部单元30)的位置的数据。
在使用中，用户10或12将头部单元30安装到他们的头部并且将腰包32安装到他们的腰部。腰包32通过网络18从服务器20下载图像数据。用户10或12可以通过头部单元30的显示器看到桌子22。形成头部单元30的一部分的投影仪从腰包32接收图像数据并基于图像数据生成光。光行进通过形成头部单元30的显示器的一部分的一个或多个波导。然后光离开波导并传播到用户10或12的眼睛的视网膜上。投影仪以如下模式(pattern)生成光：被复制到用户10或12的眼睛的视网膜上。落在用户10或12的眼睛的视网膜上的光具有选定的景深，使得用户10或12感知在波导后面的预选深度处的图像。此外，双眼接收稍微不同的图像，以使得用户10或12的大脑感知距头部单元30所选距离处的一个或多个三维图像。在本示例中，用户10和12两者感知本地内容24作为对桌子22的增强。
每个用户10或12还可以在三个维度上感知配准标记26之一。配准标记26的位置总是在相对于由相应用户10或12持有的6dof控制器36的设定方向上。因此当相应6dof控制器36被左右移动和前后移动时，配准标记26从左向右移动和前后移动。配准标记26将其自身附接到现实对象的表面。当用户因此移动6dof控制器36时，配准标记26可以例如跨桌子22的表面移动。然后用户10或12可以选择桌子22上的特定点，例如桌子22的一个或多个角。
本地内容24和配准标记26从绘图的角度来看是不可见的，并且由于用户10和12使用了增强现实观看器16，因此它们仅对用户10和12可见。本地内容24和配准标记26是最初数据结构，其驻留在腰包32中的视觉数据和算法内。然后在头部单元30中的投影仪基于数据结构产生光时，数据结构自身表现(manifest)为光。尽管本地内容24和配准标记26在用户10和12前面的三维空间中不存在(例如是虚拟对象)，但是它们在图1中以三维空间表示。在整个描述中使用计算机数据在三维空间中的可视化来说明促进被用户10和12感知的渲染的数据结构如何在腰包32中的视觉算法的数据结构内相互关联。
图2更详细地示出了增强现实观看器16之一，其包括头部单元30、6dof控制器36、以及视觉数据和算法38。在一些实施例中，视觉数据和算法38主要驻留在图1中的腰包32。在其他实施例中，视觉数据和算法38可以完全驻留在头部单元内或者可以在头部单元和腰包之间分开。
图2还包括数据源40。在本示例中，数据源40包括从图1中的服务器20接收并且然后存储在腰包32的存储设备上的图像数据。图像数据例如可以是可用于渲染本地内容24的三维图像数据。图像数据可以是时间序列数据，其允许创建以预定或非预定序列以二维或三维进行移动的视频，并且可以位于现实世界对象(例如图1中的桌子22)上。
视觉数据和算法38包括渲染引擎42、立体分析器44、基于运动的调整(Pixelstick)系统46、以及统一(uniform)坐标系(UCS)对准模块48。
渲染引擎42被连接到数据源40、基于运动的调整系统46、以及UCS对准模块48。渲染引擎42能够接收来自各种系统的输入，在本示例中为基于运动的调整系统46和UCS对准模块48。
如图3所示，基于运动的调整系统46包括同时定位和映射(SLAM)系统52、头部单元到世界坐标系(frame)转换器(transformer)54、以及显示调整算法56。渲染引擎42被连接到显示调整算法56。显示调整算法56接收来自头部单元到世界坐标系转换器54的输入。头部单元到世界坐标系转换器54被连接到SLAM系统52。SLAM系统52能够接收图像数据，分析图像数据以确定图像数据的图像内的对象，并记录图像数据的位置。头部单元到世界坐标系转换器54能够将头部单元坐标系转换为世界坐标系。
立体分析器44被连接到渲染引擎42。立体分析器44能够根据由渲染引擎42提供的数据流来确定左图像数据集和右图像数据集。
头部单元30包括头部单元主体60和显示系统62。头部单元主体60具有戴在用户头部上的形状。显示系统62固定在头部单元主体60上。
显示系统62包括左投影仪66A和右投影仪66B、左波导70A和右波导70B、以及检测设备72。左投影仪66A和右投影仪66B被连接到电源。每个投影仪66A或66B具有用于提供给相应投影仪66A或66B的图像数据的相应输入。相应投影仪66A或66B在通电时产生二维图案的光并从其发出光。左波导70A和右波导70B被定位成分别从左投影仪66A和右投影仪66B接收光。左波导70A和右波导70B是透明波导。
检测设备72包括头部单元惯性运动单元(IMU)80和一个或多个头部单元相机82。头部单元IMU 80包括加速度计84(或多于一个加速度计)、陀螺仪86(或多个一个陀螺仪)、以及一个重力传感器88。IMU的部件通常形成在半导体芯片中。加速度计和陀螺仪能够检测头部单元IMU 80和头部单元主体60的运动，包括沿着三个正交轴的运动和围绕正交轴的旋转。重力传感器88能够检测重力方向。
头部单元相机82从头部单元主体60周围的环境连续捕获图像。图像可以相互比较以检测头部单元主体60和佩戴头部单元主体60的用户的头部的运动。
SLAM系统52被连接到头部单元相机82。头部单元到世界坐标系转换器54依赖于来自SLAM系统52和头部单元IMU 80的数据，以将头部单元30的坐标系转换为世界坐标系，即包含现实对象(诸如图1中的桌子22)的坐标系。
在使用中，用户将头部单元主体60安装到他们的头部。例如，头部单元主体60的部件可以包括缠绕在用户的后脑勺周围的带子(未示出)。左波导70A和右波导70B然后位于用户的左眼120A和右眼120B的前面。
渲染引擎42从数据源40接收图像数据。渲染引擎42将图像数据输入到立体分析器44。图像数据是图1中的本地内容24的三维图像数据。立体分析器44分析图像数据以基于图像数据确定左图像数据集和右图像数据集。左图像数据集和右图像数据集是表示彼此略微不同的二维图像的数据集，目的在于给予用户10三维渲染的感知。
立体分析器44将左图像数据集和右图像数据集输入到左投影仪66A和右投影仪66B中。左投影仪66A和右投影仪66B然后产生左光图案和右光图案。显示系统62的部件以平面图示出，但应当理解，当以正视图示出时，左光图案和右光图案是二维图案。每个光图案包括多个像素。出于说明的目的，来自两个像素的光线124A和126A被示出离开左投影仪66A并进入左波导70A。光线124A和126A从左波导70A的侧面反射。示出了光线124A和126A在左波导70A内通过内反射从左到右传播，但应当理解，光线124A和126A也使用耐火(refractory)和反射系统在进入纸面的方向上传播。
光线124A和126A通过光瞳(pupil)128A离开左光波导70A，然后通过左眼120A的瞳孔130A进入左眼120A。光线124A和126A然后落在左眼120A的视网膜132A上。以此方式，左光图案落在左眼120A的视网膜132A上。用户被给予这样的感觉，即形成在视网膜132A上的像素是用户感觉在左波导70A的与左眼120A相对的一侧有一定距离的像素134A和136A。深度感知是通过操纵光的焦距来创建的。
以类似的方式，立体分析器44将右图像数据集输入右投影仪66B。右投影仪66B传输右光图案，其由光线124B和126B形式的像素表示。光线124B和126B在右波导70B内反射并通过光瞳128B离开。光线124B和126B然后通过右眼120B的瞳孔130B进入并落在右眼120B的视网膜132B上。光线124B和126B的像素被感知为右波导70B后面的像素134B和136B。
在视网膜132A和132B上产生的图案被分别地感知为左图像和右图像。由于立体分析器44的功能，左图像和右图像彼此略有不同。左图像和右图像在用户的脑海中被感知为三维渲染。
如上所述，左波导70A和右波导70B是透明的。来自左波导70A和右波导70B的与眼睛120A和120B相对的一侧的现实对象的光可以投射通过左波导70A和右波导70B并落在视网膜132A和132B上。
头部单元IMU 80检测用户的头部的每次移动。例如，如果用户10逆时针移动他们的头部并同时将他们的身体连同他们的头部一起向右移动，则这种移动将被头部单元IMU80中的加速度计84和陀螺仪86检测到。头部单元IMU 80将来自加速度计84和陀螺仪86的测量值提供给显示调整算法56。显示调整算法56计算放置值并将放置值提供给渲染引擎42。渲染引擎42修改从数据源40接收的图像数据以补偿用户头部的移动。渲染引擎42将修改后的图像数据提供给立体分析器44以显示给用户10。
当用户移动他们的头部时，头部单元相机82连续地捕获图像。SLAM系统52分析图像并标识图像内的对象的图像。SLAM系统52分析对象的移动以确定头部单元主体60的姿态位置。SLAM系统52向显示调整算法56提供姿态位置。显示调整算法56使用姿态位置来进一步细化显示调整算法56提供给渲染引擎42的放置值。渲染引擎42因此基于头部单元IMU 80中的运动传感器和头部单元相机82拍摄的图像的组合来修改从数据源40接收的图像数据。作为一个实际示例，如果用户将他们的头部向右旋转，则本地内容24的位置在用户的视野内向左旋转，从而给用户这样的印象：本地内容24的位置相对于桌子22和其他现实世界对象保持静止。
参考图4，UCS对准模块48包括设备坐标系(DCF)150、控制器到头部单元转换器152、用户坐标系(UCF)建立系统154、UCF 156、以及DCF到UCF转换器158。
DCF 150通过硬件、软件和固件的组合被连接到重力传感器88。重力传感器88测量相对于头部单元主体60的重力方向。DCF 150是具有三个正交轴的坐标系，其中一个轴与重力方向对准。
UCF建立系统154包括图1所示的配准标记26、特征点位置计算器162、特征点存储模块164、以及用户坐标系计算器166。特征点位置计算器162通过例程被连接并且调用控制器到头部单元转换器152，并且接收来自配准标记26的输入。配准标记26用于选择第一特征点(FP1)和第二特征点(FP2)。特征点存储模块164被连接到特征点位置计算器162并存储第一特征点FP1和第二特征点FP2的位置。用户坐标系计算器166从存储器接收特征点FP1和FP2的位置，并基于第一特征点FP1和第二特征点FP2的位置计算UCF 156。
6dof控制器36包括控制器主体170、位置发射器172和控制器IMU 174。控制器主体170具有便于用户抓握的形状。位置发射器172和控制器IMU 174被安装在控制器主体170内。控制器主体170内的电池(未示出)用于为位置发射器172和控制器IMU 174供电。
头部单元30包括位置接收器176。位置接收器176在固定位置被安装到头部单元主体60。
在使用中，用户将控制器主体170握在他们的一只手中。用户可以在三个正交方向上移动控制器主体170，并且围绕三个正交轴旋转控制器主体170。位置发射器172连续地发射位置波并且位置接收器176接收位置波。位置波包括指示位置发射器172相对于位置接收器176的位置的数据。因为位置发射器172在6dof控制器36内是静止的并且位置接收器176在头部单元30内是静止的，所以位置波包括表示6dof控制器36与头部单元30之间关系的数据。控制器到头部单元转换器152从位置接收器176接收数据并计算6dof控制器36相对于头部单元30的位置。控制器IMU 174包括一个或多个加速度计和一个或多个陀螺仪。来自控制器IMU 174的数据从6dof控制器36无线传输，并由控制器到头部单元转换器152经由硬件、固件和软件的组合接收。控制器到头部单元转换器152将来自位置接收器176和控制器IMU174的数据组合在“融合”例程中。通过融合来自位置发射器172和控制器IMU 174的数据，与单独使用位置发射器172相比，抖动减少。
配准标记26被提供给渲染引擎42并且以与来自数据源40的图像数据类似的方式向用户可视化。如上所述，用户可以通过移动6dof控制器36来移动配准标记26。用户使用配准标记26来选择第一特征点FP1和第二特征点FP2。当用户选择第一特征点FP1和第二特征点FP2时，特征点位置计算器162计算相应的特征点FP1或FP2在世界坐标系内的位置。特征点存储模块164存储第一特征点FP1和第二特征点FP2的位置。UCF计算器166然后基于第一特征点FP1和第二特征点FP2的位置来计算UCF 156。UCF计算器166然后将UCF 156存储在存储器中。
DCF到UCF转换器158将DCF 150转换到UCF 156，导致DCF转换到UCF 178。
图1中的用户10和12中的每一个用户具有不同的DCF 150和不同的UCF 156，并且因此具有转换为UCF 178的不同DCF。用户10和12对桌子22上的他们选择第一特征点FP1和第二特征点FP2的位置达成一致(例如口头上同意)。第一特征点FP1和第二特征点FP2的位置从每个用户10和12的视角看来是不同的，并且它们的数学位置在每个增强现实观看器16的特征点位置计算器162内也被计算为不同。然而，因为用户10和12在现实世界中选择相同的特征点FP1和FP2，即在桌子22上，从用户10和12双方的角度来看，本地内容24可以在相对于桌子22的相同位置被渲染。
图5示出了在任一用户建立统一坐标系之前的相应坐标系。每个增强现实观看器都具有相应的DCF(DCF1和DCF2)。其中一个轴(Y轴)与重力(g)方向对准，另外两个轴(X轴和Z轴)相对于头部单元30是固定的。用户都没有建立UCF。仅出于说明的目的，图中示出了任意UCF(UCF1和UCF2)并且仅将其包括在图中以示出第一用户10和第二用户12使用的增强现实观看器16之间的坐标系不统一(图1)。
图6示出了为每个增强现实观看器建立UCF(UCF1和UCF2)。每个用户10和12从他们的角度选择桌子22上的第一特征点FP1和第二特征点FP2。然后相应用户的相应增强现实观看器计算相应UCF(UCF1和UCF2)。两个UCF(UCF1和UCF2)都位于和定向在桌子22上的相同位置。
图7示出了由相应增强现实观看器的相应DCF到UCF转换器158(图4)进行的转换。每个增强现实观看器分别将其相应DCF(DCF1或DCF2)转换为其相应UCF(UCF1或UCF2)。基于从相应DCF(DCF1或DCF2)到相应UCF(UCF1或UCF2)的相应转换，将本地内容24(图1)显示给相应用户。
观看系统14可以容易地扩展以供由三个、四个或更多个用户使用的三个、四个或更多个观看增强现实观看器使用。每个增强现实观看器都有自己的DCF(DCF1、DCF2、DCF3...Dafne)并使用相应的一对特征点(FP1和FP2)计算相应的UCF(UCF1、UCF2、UCF3...UCFn)。然后，每个增强现实观看器将其相应DCF(例如，DCF4)转换为相应UCF(例如，UCF4)，如上所述。
图8示出了计算机系统900的示例性形式的机器的图解表示，其中可以执行一组指令，用于使机器根据一些实施例执行这里讨论的任何一个或多个方法。在替代实施例中，机器作为独立设备操作或可以连接(例如，联网)到其他机器。此外，虽然仅示出了单个机器，但术语“机器”也应被视为包括单独或联合执行一组(或多组)指令以执行本文中讨论的任何一种或多种方法的机器的任何集合.
示例性计算机系统900包括处理器902(例如，中央处理单元(CPU)、图形处理单元(GPU)或两者)、主存储器904(例如，只读存储器(ROM)、闪存、动态随机存取存储器(DRAM)，例如同步DRAM(SDRAM)或Rambus DRAM(RDRAM)等)、以及静态存储器906(例如闪存、静态随机存取存储器(SRAM)等)，其通过总线908相互通信。
计算机系统900还可以包括磁盘驱动单元916和网络接口设备920。
磁盘驱动单元916包括机器可读介质922，其上存储了体现本文所述的方法或功能中的任何一个或多个的一组或多组指令924(例如，软件)。该软件还可以在由计算机系统900执行期间完全或至少部分地驻留在主存储器904和/或处理器902内，主存储器904和处理器902也构成机器可读介质。
还可以经由网络接口设备920在网络18上发送或接收软件。
计算机系统900包括用于驱动投影仪以产生光的驱动器芯片950。驱动器芯片950包括它自己的数据存储960和它自己的处理器962。
虽然机器可读介质922在示例性实施例中被示为单个介质，但是术语“机器可读介质”应当被认为包括存储一组或多组指令的单个介质或多个介质(例如，集中式或分布式数据库、和/或相关联的缓存和服务器)。术语“机器可读介质”还应理解为包括能够存储、编码或携带一组由机器执行的指令并且使机器执行本发明任何一种或多种方法的任何介质。因此，术语“机器可读介质”应理解为包括但不限于固态存储器、光和磁介质、以及载波信号。
虽然在附图中已经描述和示出了某些示例性实施例，但是应当理解，这些实施例仅是说明性的而不是对本发明的限制，并且本发明不限于所示和描述的具体构造和布置，因为本领域的普通技术人员可以想到修改。

Claims (20)

1.一种观看系统，包括：
第一增强现实观看器，包括：
第一显示器，其允许第一用户看到现实世界对象；
第一数据源，用于保存本地内容的图像数据；
第一投影仪，其在所述第一用户观看所述现实世界对象时，通过所述第一显示器向所述第一用户显示所述本地内容的图像数据；
第一处理器；
连接到所述第一处理器的第一计算机可读介质；以及
在所述第一计算机可读介质上并且由所述处理器可执行的第一组视觉数据和算法，其中，所述第一组视觉数据和算法包括：
第一设备坐标系DCF；
第一配准标记，其由所述第一用户可操作以在所述现实世界对象中的至少一个现实世界对象上选择第一特征点FP1和第二特征点FP2；以及
第一统一坐标系UCS对准模块，包括：
第一特征点存储模块，其存储在选择所述FP1和所述FP2时所述第一配准标记的位置；
第一用户坐标系计算器，其基于在选择所述FP1和所述FP2时所述第一配准标记的所述位置来确定第一用户坐标系UCF；
第一转换器，用于将所述第一DCF转换为所述第一UCF；以及
第一渲染引擎，其基于从所述第一DCF到所述第一UCF的转换来显示所述第一数据源上的所述本地内容的图像数据。
2.根据权利要求1所述的观看系统，还包括：
第二增强现实观看器，包括：
第二显示器，其允许第二用户看到现实世界对象；
第二数据源，用于保存本地内容的图像数据；
第二投影仪，其在所述第二用户观看所述现实世界对象时，通过所述第二显示器向所述第二用户显示所述本地内容的图像数据；
第二处理器；
连接到所述第二处理器的第二计算机可读介质；以及
在所述第二计算机可读介质上并且由所述处理器可执行的第二组视觉数据和算法，其包括：
第二设备坐标系DCF；
第二配准标记，其由所述第二用户可操作以在所述现实世界对象中的所述至少一个现实世界对象上选择所述FP1和所述FP2；以及
第二统一坐标系UCS对准模块，包括：
第二特征点存储模块，其存储在选择所述FP1和所述FP2时所述第二配准标记的位置；
第二用户坐标系计算器，其基于在选择所述FP1和所述FP2时所述第二配准标记的所述位置来确定第二用户坐标系UCF；
第二转换器，用于将所述第二DCF转换为所述第二UCF；以及
第二渲染引擎，其基于从所述第二DCF到所述第二UCF的转换来显示所述第二数据源上的所述本地内容的图像数据。
3.根据权利要求2所述的观看系统，其中，所述第一增强现实观看器包括：
第一头戴式框架，其可佩戴在所述第一用户的头部上；以及
第一六自由度6dof控制器，其由所述第一用户相对于所述第一头戴式框架可移动以选择所述FP1和所述FP2，
其中，所述第一组视觉数据和算法包括：
第一特征点位置计算器，其通过确定在选择所述FP1和所述FP2时所述第一6dof控制器相对于所述第一头戴式框架的位置，确定在选择所述FP1和所述FP2时所述第一配准标记的所述位置；以及
第一特征存储模块，其存储所述6dof控制器在所述第一DCF中的所述位置。
4.根据权利要求3所述的观看系统，其中，所述第二增强现实观看器包括：
第二头戴式框架，其可佩戴在所述第二用户的头部上；以及
第二六自由度6dof控制器，其由所述第二用户相对于所述第二头戴式框架可移动以选择所述FP1和所述FP2，
其中，所述第二组视觉数据和算法包括：
第二特征点位置计算器，其通过确定在选择所述FP1和所述FP2时所述6dof控制器相对于所述第二头戴式框架的位置，确定在选择所述FP1和所述FP2时所述第二配准标记的所述位置；以及
第二特征存储模块，其存储所述第二6dof控制器在所述第二DCF中的所述位置。
5.根据权利要求1所述的观看系统，其中，所述第一观看设备还包括：
第一DCF确定例程，其由所述第一处理器可执行以计算随着所述第一头戴式框架的移动而改变的所述第一DCF；以及
第一DCF存储指令，其由所述第一处理器可执行以将所述第一DCF存储在所述第一计算机可读介质上。
6.根据权利要求5所述的观看系统，其中，所述第一观看设备还包括：
第一现实对象检测设备，其检测至少一个现实对象的定位；
第一世界对象标识例程，其由所述第一处理器可执行以标识至少一个点在所述现实对象的表面上的定位；
第一世界坐标系确定例程，其由所述第一处理器可执行以基于所述至少一个点来计算第一世界坐标系；以及
第一世界坐标系存储指令，其由所述第一处理器可执行以将所述世界坐标系存储在所述计算机可读介质上，其中，所述DCF确定例程相对于所述世界坐标系确定所述DCF。
7.根据权利要求6所述的观看系统，其中，所述第一现实对象检测设备是相机。
8.根据权利要求6所述的观看系统，其中，所述第一现实对象检测设备检测多个现实对象的定位。
9.根据权利要求6所述的观看系统，其中，所述第一世界对象标识例程标识多个点在所述现实对象的表面上的定位。
10.根据权利要求9所述的观看系统，其中，所述第一世界坐标系确定例程基于所述多个点来计算所述第一世界坐标系。
11.根据权利要求5所述的观看系统，其中，所述第一观看设备还包括：
被固定到所述第一头戴式框架的第一惯性测量单元IMU，所述第一IMU包括相对于所述第一头戴式框架检测第一重力方向的第一重力传感器，所述DCF确定例程基于所述第一重力方向来计算所述DCF坐标系。
12.根据权利要求11所述的观看系统，其中，所述第一IMU包括以下中的至少一个：第一加速度计和第一陀螺仪。
13.一种观看本地内容的图像数据的方法，包括：
创建第一增强现实视图，包括：
在第一计算机可读介质上存储第一设备坐标系DCF；
由第一用户移动第一配准标记以在由所述第一用户通过第一显示器可观看的至少一个现实对象上选择第一特征点FP1和第二特征点FP2；
通过以下来执行第一统一坐标系UCS对准模块：
存储在选择所述FP1和所述FP2时所述第一配准标记的位置；
基于在选择所述FP1和所述FP2时所述第一配准标记的所述位置，确定第一用户坐标系UCF；
将所述第一DCF转换为所述第一UCF；以及
基于从所述第一DCF到所述第一UCF的转换，在所述第一用户观看现实世界对象时，通过所述第一显示器向所述第一用户显示第一数据源上的用第一投影仪接收到的本地内容的图像数据。
14.根据权利要求13所述的方法，还包括：
创建第二增强现实视图，包括：
在第二计算机可读介质上存储第二设备坐标系DCF；
由第二用户移动第二配准标记以在由所述用户通过第二显示器可观看的至少一个所述现实对象上选择第一特征点FP1和第二特征点FP2；
通过以下来执行第二统一坐标系UCS对准模块：
存储在选择所述FP1和所述FP2时所述第二配准标记的位置；
基于在选择所述FP1和所述FP2时所述第二配准标记的所述位置，确定第二用户坐标系UCF；
将所述第二DCF转换为所述第二UCF；以及
基于从所述第二DCF到所述第二UCF的转换，在所述第二用户观看所述现实世界对象时，通过所述第二显示器向所述第二用户显示第二数据源上的用第二投影仪接收到的本地内容的图像数据。
15.根据权利要求16所述的方法，还包括：
在所述第一用户的头部佩戴第一头戴式框架；以及
由所述第一用户相对于所述第一头戴式框架移动第一六自由度6dof控制器以选择所述FP1和所述FP2；
执行第一特征点位置计算器，以通过确定在选择所述FP1和所述FP2时所述第一6dof控制器相对于所述第一头戴式框架的位置，确定在选择所述FP1和所述FP2时所述第一配准标记的所述位置；以及
执行第一特征存储模块以将所述6dof控制器的所述位置存储在所述第一DCF中。
16.根据权利要求15所述的方法，还包括：
在所述第二用户的头部佩戴第二头戴式框架；以及
由所述第二用户相对于所述第二头戴式框架移动第二六自由度6dof控制器以选择所述FP1和所述FP2；
执行第二特征点位置计算器，以通过确定在选择所述FP1和所述FP2时所述第二6dof控制器相对于所述第二头戴式框架的位置，确定在选择所述FP1和所述FP2时所述第二配准标记的所述位置；以及
执行第二特征存储模块以将所述6dof控制器的所述位置存储在所述第二DCF中。
17.根据权利要求13所述的方法，还包括：
用第一处理器执行第一DCF确定例程以计算随着所述第一头戴式框架的移动而改变的所述第一DCF；以及
用所述第一处理器执行由所述第一处理器可执行的第一DCF存储指令以将所述第一DCF存储在所述第一计算机可读介质上。
18.根据权利要求17所述的方法，还包括：
用第一现实对象检测设备检测至少一个现实对象的定位；
用由所述第一处理器可执行的第一世界对象标识例程标识至少一个点在所述现实对象的表面上的定位；
用由所述第一处理器可执行的第一世界对象标识例程，基于所述至少一个点来计算第一世界坐标系；以及
用由所述第一处理器可执行的第一世界坐标系存储指令将所述世界坐标系存储在所述计算机可读介质上，其中，所述DCF确定例程相对于所述世界坐标系确定所述DCF。
19.根据权利要求18所述的方法，其中，所述第一现实对象检测设备是相机。
20.根据权利要求18所述的方法，其中，所述第一现实对象检测设备检测多个现实对象的定位。
CN202080018919.7A 2019-03-12 2020-02-26 在第一和第二增强现实观看器之间配准本地内容 Pending CN113544766A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962817318P 2019-03-12 2019-03-12
US62/817,318 2019-03-12
US201962836417P 2019-04-19 2019-04-19
US62/836,417 2019-04-19
PCT/US2020/019871 WO2020185405A1 (en) 2019-03-12 2020-02-26 Registration of local content between first and second augmented reality viewers

Publications (1)

Publication Number Publication Date
CN113544766A true CN113544766A (zh) 2021-10-22

Family

ID=72426312

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080018919.7A Pending CN113544766A (zh) 2019-03-12 2020-02-26 在第一和第二增强现实观看器之间配准本地内容

Country Status (5)

Country Link
US (1) US11762623B2 (zh)
EP (1) EP3939030A4 (zh)
JP (1) JP2022523852A (zh)
CN (1) CN113544766A (zh)
WO (1) WO2020185405A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11948265B2 (en) 2021-11-27 2024-04-02 Novarad Corporation Image data set alignment for an AR headset using anatomic structures and data fitting
US20230169696A1 (en) * 2021-11-27 2023-06-01 Novarad Corporation Transfer of Alignment Accuracy Between Visible Markers Used with Augmented Reality Displays

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6662103B1 (en) * 1999-03-22 2003-12-09 Arc Second Inc. Method and system for creating a user-selectable arbitrary coordinate frame
KR20120017783A (ko) * 2010-08-20 2012-02-29 한국과학기술원 증강 현실에서 위치 정보를 표시하는 방법 및 장치
CN104205175A (zh) * 2012-03-29 2014-12-10 索尼公司 信息处理装置，信息处理系统及信息处理方法
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
CN106462232A (zh) * 2014-05-01 2017-02-22 微软技术许可有限责任公司 在动态环境中确定坐标框架
US20170185823A1 (en) * 2014-04-07 2017-06-29 Eyeways Systems Ltd. Apparatus And Method For Image-Based Positioning, Orientation And Situational Awareness
US20180190017A1 (en) * 2017-01-04 2018-07-05 Daqri, Llc Environmental Mapping System
US20180218545A1 (en) * 2017-01-31 2018-08-02 Daqri, Llc Virtual content scaling with a hardware controller

Family Cites Families (479)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6541736B1 (en) 2001-12-10 2003-04-01 Usun Technology Co., Ltd. Circuit board/printed circuit board having pre-reserved conductive heating circuits
US4344092A (en) 1980-10-21 1982-08-10 Circon Corporation Miniature video camera means for video system
US4652930A (en) 1984-11-19 1987-03-24 Rca Corporation Television camera structure
US4810080A (en) 1987-09-03 1989-03-07 American Optical Corporation Protective eyewear with removable nosepiece and corrective spectacle
US5142684A (en) 1989-06-23 1992-08-25 Hand Held Products, Inc. Power conservation in microprocessor controlled devices
US4997268A (en) 1989-07-24 1991-03-05 Dauvergne Hector A Corrective lens configuration
US5074295A (en) 1989-08-03 1991-12-24 Jamie, Inc. Mouth-held holder
US5007727A (en) 1990-02-26 1991-04-16 Alan Kahaney Combination prescription lens and sunglasses assembly
US5396635A (en) 1990-06-01 1995-03-07 Vadem Corporation Power conservation apparatus having multiple power reduction levels dependent upon the activity of the computer system
US5240220A (en) 1990-09-12 1993-08-31 Elbex Video Ltd. TV camera supporting device
EP0697614A2 (en) 1991-03-22 1996-02-21 Nikon Corporation Optical apparatus for correcting image deviation
WO1993001743A1 (en) 1991-07-22 1993-02-04 Adair Edwin Lloyd Sterile video microscope holder for operating room
US5251635A (en) 1991-09-03 1993-10-12 General Electric Company Stereoscopic X-ray fluoroscopy system using radiofrequency fields
US5224198A (en) 1991-09-30 1993-06-29 Motorola, Inc. Waveguide virtual image display
US5497463A (en) 1992-09-25 1996-03-05 Bull Hn Information Systems Inc. Ally mechanism for interconnecting non-distributed computing environment (DCE) and DCE systems to operate in a network system
US5410763A (en) 1993-02-11 1995-05-02 Etablissments Bolle Eyeshield with detachable components
US5937202A (en) 1993-02-11 1999-08-10 3-D Computing, Inc. High-speed, parallel, processor architecture for front-end electronics, based on a single type of ASIC, and method use thereof
US5682255A (en) 1993-02-26 1997-10-28 Yeda Research & Development Co. Ltd. Holographic optical devices for the transmission of optical signals of a plurality of channels
US6023288A (en) 1993-03-31 2000-02-08 Cairns & Brother Inc. Combination head-protective helmet and thermal imaging apparatus
EP0632360A1 (en) 1993-06-29 1995-01-04 Xerox Corporation Reducing computer power consumption by dynamic voltage and frequency variation
US5455625A (en) 1993-09-23 1995-10-03 Rosco Inc. Video camera unit, protective enclosure and power circuit for same, particularly for use in vehicles
US5835061A (en) 1995-06-06 1998-11-10 Wayport, Inc. Method and apparatus for geographic-based communications service
US5826092A (en) 1995-09-15 1998-10-20 Gateway 2000, Inc. Method and apparatus for performance optimization in power-managed computer systems
US5864365A (en) 1996-01-26 1999-01-26 Kaman Sciences Corporation Environmentally controlled camera housing assembly
US6064749A (en) 1996-08-02 2000-05-16 Hirota; Gentaro Hybrid tracking for augmented reality using both camera motion detection and landmark tracking
US5854872A (en) 1996-10-08 1998-12-29 Clio Technologies, Inc. Divergent angle rotator system and method for collimating light beams
US8005254B2 (en) 1996-11-12 2011-08-23 Digimarc Corporation Background watermark processing
US6012811A (en) 1996-12-13 2000-01-11 Contour Optik, Inc. Eyeglass frames with magnets at bridges for attachment
JP3465528B2 (ja) 1997-04-22 2003-11-10 三菱瓦斯化学株式会社 新規な光学材料用樹脂
KR100584706B1 (ko) 1997-08-29 2006-05-30 가부시키가이샤 세가 화상 처리 시스템 및 화상 처리 방법
JPH11142783A (ja) 1997-11-12 1999-05-28 Olympus Optical Co Ltd 画像表示装置
US6385735B1 (en) 1997-12-15 2002-05-07 Intel Corporation Method and apparatus for limiting processor clock frequency
US6191809B1 (en) 1998-01-15 2001-02-20 Vista Medical Technologies, Inc. Method and apparatus for aligning stereo images
US6076927A (en) 1998-07-10 2000-06-20 Owens; Raymond L. Adjustable focal length eye glasses
JP2000099332A (ja) 1998-09-25 2000-04-07 Hitachi Ltd 遠隔手続き呼び出し最適化方法とこれを用いたプログラム実行方法
US6415388B1 (en) 1998-10-30 2002-07-02 Intel Corporation Method and apparatus for power throttling in a microprocessor using a closed loop feedback system
US6918667B1 (en) 1998-11-02 2005-07-19 Gary Martin Zelman Auxiliary eyewear attachment apparatus
US6487319B1 (en) 1998-11-18 2002-11-26 Sarnoff Corporation Apparatus and method for identifying the location of a coding unit
US7111290B1 (en) 1999-01-28 2006-09-19 Ati International Srl Profiling program execution to identify frequently-executed portions and to assist binary translation
US6556245B1 (en) 1999-03-08 2003-04-29 Larry Allan Holmberg Game hunting video camera
US7119819B1 (en) 1999-04-06 2006-10-10 Microsoft Corporation Method and apparatus for supporting two-dimensional windows in a three-dimensional environment
US6375369B1 (en) 1999-04-22 2002-04-23 Videolarm, Inc. Housing for a surveillance camera
WO2001056007A1 (en) 2000-01-28 2001-08-02 Intersense, Inc. Self-referenced tracking
JP4921634B2 (ja) 2000-01-31 2012-04-25 グーグル インコーポレイテッド 表示装置
KR100487543B1 (ko) 2000-09-01 2005-05-03 엘지전자 주식회사 시피유 스케쥴링 방법
JP4646374B2 (ja) 2000-09-29 2011-03-09 オリンパス株式会社 画像観察光学系
TW522256B (en) 2000-12-15 2003-03-01 Samsung Electronics Co Ltd Wearable display system
US6715089B2 (en) 2001-01-22 2004-03-30 Ati International Srl Reducing power consumption by estimating engine load and reducing engine clock speed
US20020108064A1 (en) 2001-02-07 2002-08-08 Patrick Nunally System and method for optimizing power/performance in network-centric microprocessor-controlled devices
US6807352B2 (en) 2001-02-11 2004-10-19 Georgia Tech Research Corporation Optical waveguides with embedded air-gap cladding layer and methods of fabrication thereof
US6931596B2 (en) 2001-03-05 2005-08-16 Koninklijke Philips Electronics N.V. Automatic positioning of display depending upon the viewer's location
US20020140848A1 (en) 2001-03-30 2002-10-03 Pelco Controllable sealed chamber for surveillance camera
EP1249717A3 (en) 2001-04-10 2005-05-11 Matsushita Electric Industrial Co., Ltd. Antireflection coating and optical element using the same
WO2002088913A1 (fr) 2001-04-27 2002-11-07 International Business Machines Corporation Procede et appareil pour reguler la vitesse d'execution d'un processeur
JP4682470B2 (ja) 2001-07-16 2011-05-11 株式会社デンソー スキャン型ディスプレイ装置
US6622253B2 (en) 2001-08-02 2003-09-16 Scientific-Atlanta, Inc. Controlling processor clock rate based on thread priority
US6762845B2 (en) 2001-08-23 2004-07-13 Zygo Corporation Multiple-pass interferometry
US7101048B2 (en) 2001-09-25 2006-09-05 Cambridge Flat Protection Displays Limited Flat-panel projection display
US6833955B2 (en) 2001-10-09 2004-12-21 Planop Planar Optics Ltd. Compact two-plane optical device
US20040238732A1 (en) 2001-10-19 2004-12-02 Andrei State Methods and systems for dynamic virtual convergence and head mountable display
JP3834615B2 (ja) 2001-11-02 2006-10-18 独立行政法人産業技術総合研究所 画像表示方法及びシステム
US7076674B2 (en) 2001-12-19 2006-07-11 Hewlett-Packard Development Company L.P. Portable computer having dual clock mode
JP2003329873A (ja) 2001-12-27 2003-11-19 Fujikura Ltd 位置決め機構を備えた光ファイバ把持具、光ファイバアダプタ、及び光ファイバ加工装置
US6592220B1 (en) 2002-01-30 2003-07-15 Lak Cheong Eyeglass frame with removably mounted lenses
US7305020B2 (en) 2002-02-04 2007-12-04 Vizionware, Inc. Method and system of reducing electromagnetic interference emissions
US6999087B2 (en) 2002-03-12 2006-02-14 Sun Microsystems, Inc. Dynamically adjusting sample density in a graphics system
EP1351117A1 (en) 2002-04-03 2003-10-08 Hewlett-Packard Company Data processing system and method
KR100818826B1 (ko) 2002-04-25 2008-04-01 에이알씨 인터내셔널 집적회로의 설계를 발생하기 위한 컴퓨터처리되는 장치 및 복수의 성분을 갖는 집적회로 설계 내에 계층을 발생하기 위한 방법
US6849558B2 (en) 2002-05-22 2005-02-01 The Board Of Trustees Of The Leland Stanford Junior University Replication and transfer of microstructures and nanostructures
KR100382232B1 (en) 2002-05-31 2003-05-09 Palm Palm Tech Mobile terminal having enhanced power managing function and power managing method thereof
US7046515B1 (en) 2002-06-06 2006-05-16 Raytheon Company Method and apparatus for cooling a circuit component
US7155617B2 (en) 2002-08-01 2006-12-26 Texas Instruments Incorporated Methods and systems for performing dynamic power management via frequency and voltage scaling
US6714157B2 (en) 2002-08-02 2004-03-30 The Boeing Company Multiple time-interleaved radar operation using a single radar at different angles
KR100480786B1 (ko) 2002-09-02 2005-04-07 삼성전자주식회사 커플러를 가지는 집적형 광 헤드
WO2004023325A1 (en) 2002-09-04 2004-03-18 Mentor Graphics (Holdings) Ltd. Polymorphic computational system and method
KR20050085281A (ko) 2002-12-04 2005-08-29 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 마이크로프로세서 전력 소비를 제어하는 회로 장치,집적회로 및 프로그램 제품, 프로그램 코드 실행과 발생방법
US7306337B2 (en) 2003-03-06 2007-12-11 Rensselaer Polytechnic Institute Calibration-free gaze tracking under natural head movement
DE10311972A1 (de) 2003-03-18 2004-09-30 Carl Zeiss HMD-Vorrichtung
AU2003901272A0 (en) 2003-03-19 2003-04-03 Martin Hogan Pty Ltd Improvements in or relating to eyewear attachments
US7294360B2 (en) 2003-03-31 2007-11-13 Planar Systems, Inc. Conformal coatings for micro-optical elements, and method for making the same
US20040205757A1 (en) 2003-04-09 2004-10-14 Pering Trevor A. Performance scheduling using multiple constraints
WO2004109349A2 (en) 2003-06-10 2004-12-16 Elop Electro-Optics Industries Ltd. Method and system for displaying an informative image against a background image
US20040268159A1 (en) 2003-06-30 2004-12-30 Microsoft Corporation Power profiling
US7134031B2 (en) 2003-08-04 2006-11-07 Arm Limited Performance control within a multi-processor system
US7434083B1 (en) 2004-01-06 2008-10-07 Apple Inc. Method and apparatus for the generation and control of clock signals
JP4699699B2 (ja) 2004-01-15 2011-06-15 株式会社東芝 ビーム光走査装置及び画像形成装置
US7269590B2 (en) 2004-01-29 2007-09-11 Yahoo! Inc. Method and system for customizing views of information associated with a social network user
EP3462227A3 (en) 2004-03-29 2019-06-19 Sony Corporation Optical device, and virtual image display device
CN100350792C (zh) 2004-04-14 2007-11-21 奥林巴斯株式会社 摄像装置
JP4364047B2 (ja) 2004-04-14 2009-11-11 オリンパス株式会社 表示装置、撮像装置
US7219245B1 (en) 2004-06-03 2007-05-15 Advanced Micro Devices, Inc. Adaptive CPU clock management
US20060019723A1 (en) 2004-06-29 2006-01-26 Pieter Vorenkamp Automatic control of power save operation in a portable communication device utilizing historical usage information
GB0416038D0 (en) 2004-07-16 2004-08-18 Portland Press Ltd Document display system
US20070189669A1 (en) 2004-07-22 2007-08-16 Maurizio Tormen Integrated wavelength selective grating-based filter
WO2006020846A2 (en) 2004-08-11 2006-02-23 THE GOVERNMENT OF THE UNITED STATES OF AMERICA as represented by THE SECRETARY OF THE NAVY Naval Research Laboratory Simulated locomotion method and apparatus
WO2006016366A2 (en) 2004-08-12 2006-02-16 Elop Electro-Optical Industries Ltd. Integrated retinal imager and method
US9030532B2 (en) 2004-08-19 2015-05-12 Microsoft Technology Licensing, Llc Stereoscopic image display
US7029114B2 (en) 2004-09-03 2006-04-18 E'lite Optik U.S. L.P. Eyewear assembly with auxiliary frame and lens assembly
EP1791002A4 (en) 2004-09-16 2010-06-09 Nikon Corp MGF <SB> 2 </ SB> THIN OPTICAL FILM CONTAINING AMORPHOUS SILICON OXIDE BINDER, OPTICAL DEVICE CONTAINING THE SAME, AND PROCESS FOR PRODUCING MGF <SB> 2 THIN OPTICAL FILM </ SB>
US20060090092A1 (en) 2004-10-25 2006-04-27 Verhulst Anton H Clock timing adjustment
US7536567B2 (en) 2004-12-10 2009-05-19 Hewlett-Packard Development Company, L.P. BIOS-based systems and methods of processor power management
US20060126181A1 (en) 2004-12-13 2006-06-15 Nokia Corporation Method and system for beam expansion in a display device
US8619365B2 (en) 2004-12-29 2013-12-31 Corning Incorporated Anti-reflective coating for optical windows and elements
GB0502453D0 (en) 2005-02-05 2005-03-16 Cambridge Flat Projection Flat panel lens
US7573640B2 (en) 2005-04-04 2009-08-11 Mirage Innovations Ltd. Multi-plane optical apparatus
US20060250322A1 (en) 2005-05-09 2006-11-09 Optics 1, Inc. Dynamic vergence and focus control for head-mounted displays
US7948683B2 (en) 2006-05-14 2011-05-24 Holochip Corporation Fluidic lens with manually-adjustable focus
US7644148B2 (en) 2005-05-16 2010-01-05 Hewlett-Packard Development Company, L.P. Historical data based workload allocation
US20090303599A1 (en) 2005-06-03 2009-12-10 Nokia Corporation General diffractive optics method for expanding an exit pupil
US7364306B2 (en) 2005-06-20 2008-04-29 Digital Display Innovations, Llc Field sequential light source modulation for a digital display system
JP4776285B2 (ja) 2005-07-01 2011-09-21 ソニー株式会社 照明光学装置及びこれを用いた虚像表示装置
JP4660787B2 (ja) 2005-08-25 2011-03-30 隆広 西岡 眼鏡
US7739524B2 (en) 2005-08-29 2010-06-15 The Invention Science Fund I, Inc Power consumption management
US20070058248A1 (en) 2005-09-14 2007-03-15 Nguyen Minh T Sport view binocular-zoom lens focus system
US20080043334A1 (en) 2006-08-18 2008-02-21 Mirage Innovations Ltd. Diffractive optical relay and method for manufacturing the same
WO2007037089A1 (ja) 2005-09-27 2007-04-05 Konica Minolta Holdings, Inc. 頭部装着型映像表示装置
EP1938141A1 (en) 2005-09-28 2008-07-02 Mirage Innovations Ltd. Stereoscopic binocular system, device and method
US8696113B2 (en) 2005-10-07 2014-04-15 Percept Technologies Inc. Enhanced optical and perceptual digital eyewear
US9658473B2 (en) 2005-10-07 2017-05-23 Percept Technologies Inc Enhanced optical and perceptual digital eyewear
US20070081123A1 (en) 2005-10-07 2007-04-12 Lewis Scott W Digital eyewear
US11428937B2 (en) 2005-10-07 2022-08-30 Percept Technologies Enhanced optical and perceptual digital eyewear
KR101193331B1 (ko) 2005-10-14 2012-10-19 엘지전자 주식회사 그래픽장치의 전력소모를 관리하는 시스템 및 방법
DE602006005177D1 (de) 2005-11-03 2009-03-26 Mirage Innovations Ltd Binokulare optische relaiseinrichtung
JP5266059B2 (ja) 2005-11-18 2013-08-21 ナノコンプ オイ リミテッド 回折格子の製造方法
US7736006B2 (en) 2005-11-21 2010-06-15 Microvision, Inc. Substrate-guided display with improved image quality
US7917573B2 (en) 2005-11-30 2011-03-29 International Business Machines Corporation Measuring and reporting processor capacity and processor usage in a computer system with processors of different speed and/or architecture
JP2007199841A (ja) 2006-01-24 2007-08-09 Seiko Epson Corp 電子機器のコントローラ、バス制御装置
ES2605367T3 (es) 2006-01-26 2017-03-14 Nokia Technologies Oy Dispositivo de seguimiento ocular
JP2007219106A (ja) 2006-02-16 2007-08-30 Konica Minolta Holdings Inc 光束径拡大光学素子、映像表示装置およびヘッドマウントディスプレイ
US7461535B2 (en) 2006-03-01 2008-12-09 Memsic, Inc. Multi-temperature programming for accelerometer
IL174170A (en) 2006-03-08 2015-02-26 Abraham Aharoni Device and method for two-eyed tuning
US7353134B2 (en) 2006-03-09 2008-04-01 Dean A. Cirielli Three-dimensional position and motion telemetry input
WO2007109054A1 (en) 2006-03-15 2007-09-27 Google Inc. Automatic display of resized images
JP2007273733A (ja) 2006-03-31 2007-10-18 Tdk Corp 固体電解コンデンサの製造方法
WO2007141587A1 (en) 2006-06-02 2007-12-13 Nokia Corporation Color distribution in exit pupil expanders
US7692855B2 (en) 2006-06-28 2010-04-06 Essilor International Compagnie Generale D'optique Optical article having a temperature-resistant anti-reflection coating with optimized thickness ratio of low index and high index layers
US9015501B2 (en) 2006-07-13 2015-04-21 International Business Machines Corporation Structure for asymmetrical performance multi-processors
US7724980B1 (en) 2006-07-24 2010-05-25 Adobe Systems Incorporated System and method for selective sharpening of images
US8214660B2 (en) 2006-07-26 2012-07-03 International Business Machines Corporation Structure for an apparatus for monitoring and controlling heat generation in a multi-core processor
US7640449B2 (en) 2006-08-17 2009-12-29 Via Technologies, Inc. Systems and methods for dynamic clock frequencies for low power design
US9582060B2 (en) 2006-08-31 2017-02-28 Advanced Silicon Technologies Llc Battery-powered device with reduced power consumption based on an application profile data
US20080068557A1 (en) 2006-09-20 2008-03-20 Gilbert Menduni Lens holding frame
WO2008038058A1 (en) 2006-09-28 2008-04-03 Nokia Corporation Beam expansion with three-dimensional diffractive elements
AU2007316111A1 (en) 2006-10-31 2008-05-08 Oy Modines Ltd. Light outcoupling structure for a lighting device
US20080146942A1 (en) 2006-12-13 2008-06-19 Ep Medsystems, Inc. Catheter Position Tracking Methods Using Fluoroscopy and Rotational Sensors
EP2095171A4 (en) 2006-12-14 2009-12-30 Nokia Corp DISPLAY DEVICE HAVING TWO OPERATING MODES
JP4847351B2 (ja) 2007-01-11 2011-12-28 キヤノン株式会社 回折光学素子及びそれを用いた回折格子
US7418368B2 (en) 2007-01-18 2008-08-26 International Business Machines Corporation Method and system for testing processor cores
JP4348441B2 (ja) 2007-01-22 2009-10-21 国立大学法人 大阪教育大学 位置検出装置、位置検出方法、データ判定装置、データ判定方法、コンピュータプログラム及び記憶媒体
US8726681B2 (en) 2007-01-23 2014-05-20 Hewlett-Packard Development Company, L.P. Method and system of cooling components of a computer system
US20090017910A1 (en) 2007-06-22 2009-01-15 Broadcom Corporation Position and motion tracking of an object
JP5194530B2 (ja) 2007-04-09 2013-05-08 凸版印刷株式会社 画像表示装置及び画像表示方法
EP2153266B1 (en) 2007-06-04 2020-03-11 Magic Leap, Inc. A diffractive beam expander and a virtual display based on a diffractive beam expander
US8060759B1 (en) 2007-06-29 2011-11-15 Emc Corporation System and method of managing and optimizing power consumption in a storage system
JP2009090689A (ja) 2007-10-03 2009-04-30 Calsonic Kansei Corp ヘッドアップディスプレイ
WO2009077802A1 (en) 2007-12-18 2009-06-25 Nokia Corporation Exit pupil expanders with wide field-of-view
DE102008005817A1 (de) 2008-01-24 2009-07-30 Carl Zeiss Ag Optisches Anzeigegerät
US8494229B2 (en) 2008-02-14 2013-07-23 Nokia Corporation Device and method for determining gaze direction
JP2009244869A (ja) 2008-03-11 2009-10-22 Panasonic Corp 表示装置、表示方法、眼鏡型ヘッドマウントディスプレイ、及び自動車
US8246408B2 (en) 2008-06-13 2012-08-21 Barco, Inc. Color calibration system for a video display
JP5181860B2 (ja) 2008-06-17 2013-04-10 セイコーエプソン株式会社 パルス幅変調信号生成装置およびそれを備えた画像表示装置、並びにパルス幅変調信号生成方法
US8250389B2 (en) 2008-07-03 2012-08-21 International Business Machines Corporation Profiling an application for power consumption during execution on a plurality of compute nodes
US10885471B2 (en) 2008-07-18 2021-01-05 Disney Enterprises, Inc. System and method for providing location-based data on a wireless portable device
US7850306B2 (en) 2008-08-28 2010-12-14 Nokia Corporation Visual cognition aware display and visual data transmission architecture
US7885506B2 (en) 2008-09-26 2011-02-08 Nokia Corporation Device and a method for polarized illumination of a micro-display
CN102224476B (zh) 2008-10-14 2017-08-01 奥布隆工业有限公司 多进程交互系统和方法
EP2348982B1 (en) 2008-12-03 2020-03-25 St. Jude Medical, Atrial Fibrillation Division, Inc. System for determining the positioin of the tip of a medical catheter within the body of a patient
US20100153934A1 (en) 2008-12-12 2010-06-17 Peter Lachner Prefetch for systems with heterogeneous architectures
US8325088B2 (en) 2009-02-04 2012-12-04 Google Inc. Mobile device battery management
US8699141B2 (en) 2009-03-13 2014-04-15 Knowles Electronics, Llc Lens assembly apparatus and method
JP5121764B2 (ja) 2009-03-24 2013-01-16 株式会社東芝 固体撮像装置
US9764376B2 (en) 2009-04-01 2017-09-19 David L. LeMieux System for rivet fastening
US9095436B2 (en) 2009-04-14 2015-08-04 The Invention Science Fund I, Llc Adjustable orthopedic implant and method for treating an orthopedic condition in a subject
US9383823B2 (en) 2009-05-29 2016-07-05 Microsoft Technology Licensing, Llc Combining gestures beyond skeletal
US20110022870A1 (en) 2009-07-21 2011-01-27 Microsoft Corporation Component power monitoring and workload optimization
US8758125B2 (en) 2009-07-24 2014-06-24 Wms Gaming, Inc. Controlling event-driven behavior of wagering game objects
JP2011033993A (ja) 2009-08-05 2011-02-17 Sharp Corp 情報提示装置、および情報提示方法
JP5316391B2 (ja) 2009-08-31 2013-10-16 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
US8738949B2 (en) 2009-08-31 2014-05-27 Empire Technology Development Llc Power management for processor
US20110050640A1 (en) 2009-09-03 2011-03-03 Niklas Lundback Calibration for a Large Scale Multi-User, Multi-Touch System
US11320571B2 (en) 2012-11-16 2022-05-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view with uniform light extraction
EP2494454A4 (en) 2009-10-30 2013-05-15 Intel Corp TWO-WAY COMMUNICATION SUPPORT FOR HETEROGENIC PROCESSORS ENERGY COMPUTER PLATFORM
US8305502B2 (en) 2009-11-11 2012-11-06 Eastman Kodak Company Phase-compensated thin-film beam combiner
US8605209B2 (en) 2009-11-24 2013-12-10 Gregory Towle Becker Hurricane damage recording camera system
US8909962B2 (en) 2009-12-16 2014-12-09 Qualcomm Incorporated System and method for controlling central processing unit power with guaranteed transient deadlines
US9244533B2 (en) 2009-12-17 2016-01-26 Microsoft Technology Licensing, Llc Camera navigation for presentations
US8751854B2 (en) 2009-12-21 2014-06-10 Empire Technology Development Llc Processor core clock rate selection
US8565554B2 (en) 2010-01-09 2013-10-22 Microsoft Corporation Resizing of digital images
KR101099137B1 (ko) 2010-01-29 2011-12-27 주식회사 팬택 이동 통신 시스템에서 증강 현실 정보를 제공하기 위한 장치 및 방법
US8549339B2 (en) 2010-02-26 2013-10-01 Empire Technology Development Llc Processor core communication in multi-core processor
US8467133B2 (en) 2010-02-28 2013-06-18 Osterhout Group, Inc. See-through display with an optical assembly including a wedge-shaped illumination system
US11275482B2 (en) 2010-02-28 2022-03-15 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
WO2011107831A1 (en) 2010-03-04 2011-09-09 Nokia Corporation Optical apparatus and method for expanding an exit pupil
US9547910B2 (en) 2010-03-04 2017-01-17 Honeywell International Inc. Method and apparatus for vision aided navigation using image registration
JP5499854B2 (ja) 2010-04-08 2014-05-21 ソニー株式会社 頭部装着型ディスプレイにおける光学的位置調整方法
US8118499B2 (en) 2010-05-19 2012-02-21 LIR Systems, Inc. Infrared camera assembly systems and methods
US20110291964A1 (en) 2010-06-01 2011-12-01 Kno, Inc. Apparatus and Method for Gesture Control of a Dual Panel Electronic Device
JP2012015774A (ja) 2010-06-30 2012-01-19 Toshiba Corp 立体視映像処理装置および立体視映像処理方法
US8560876B2 (en) 2010-07-06 2013-10-15 Sap Ag Clock acceleration of CPU core based on scanned result of task for parallel execution controlling key word
US8601288B2 (en) 2010-08-31 2013-12-03 Sonics, Inc. Intelligent power controller
US8854594B2 (en) 2010-08-31 2014-10-07 Cast Group Of Companies Inc. System and method for tracking
KR101479262B1 (ko) 2010-09-02 2015-01-12 주식회사 팬택 증강현실 정보 이용 권한 부여 방법 및 장치
JP5632693B2 (ja) 2010-09-28 2014-11-26 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理方法および情報処理システム
US20120081392A1 (en) 2010-09-30 2012-04-05 Apple Inc. Electronic device operation adjustment based on face detection
US8688926B2 (en) 2010-10-10 2014-04-01 Liqid Inc. Systems and methods for optimizing data storage among a plurality of solid state memory subsystems
KR101260576B1 (ko) 2010-10-13 2013-05-06 주식회사 팬택 Ａｒ 서비스를 제공하기 위한 사용자 단말기 및 그 방법
EP2633341B1 (en) 2010-10-26 2019-12-25 Optotune AG Variable focus lens having two liquid chambers
US9406166B2 (en) 2010-11-08 2016-08-02 Seereal Technologies S.A. Display device, in particular a head-mounted display, based on temporal and spatial multiplexing of hologram tiles
US20120113235A1 (en) 2010-11-08 2012-05-10 Sony Corporation 3d glasses, systems, and methods for optimized viewing of 3d video content
JP5854593B2 (ja) 2010-11-17 2016-02-09 キヤノン株式会社 積層型回折光学素子
US9304319B2 (en) 2010-11-18 2016-04-05 Microsoft Technology Licensing, Llc Automatic focus improvement for augmented reality displays
US9213405B2 (en) 2010-12-16 2015-12-15 Microsoft Technology Licensing, Llc Comprehension and intent-based content for augmented reality displays
US20160187654A1 (en) 2011-02-28 2016-06-30 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a light transmissive wedge shaped illumination system
US8949637B2 (en) 2011-03-24 2015-02-03 Intel Corporation Obtaining power profile information with low overhead
EP3654147A1 (en) 2011-03-29 2020-05-20 QUALCOMM Incorporated System for the rendering of shared digital interfaces relative to each user's point of view
KR101210163B1 (ko) 2011-04-05 2012-12-07 엘지이노텍 주식회사 광학 시트 및 이를 포함하는 표시장치
US8856571B2 (en) 2011-04-05 2014-10-07 Apple Inc. Adjusting device performance over multiple time domains
US8856355B2 (en) 2011-05-09 2014-10-07 Samsung Electronics Co., Ltd. Systems and methods for facilitating communication between mobile devices and display devices
US20150077312A1 (en) 2011-05-13 2015-03-19 Google Inc. Near-to-eye display having adaptive optics
KR101547740B1 (ko) 2011-06-01 2015-08-26 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 증강 현실에서 모션 검출을 위한 구조화 광 투사
US9087267B2 (en) 2011-06-10 2015-07-21 Image Vision Labs, Inc. Image scene recognition
US10606066B2 (en) 2011-06-21 2020-03-31 Gholam A. Peyman Fluidic light field camera
US20120326948A1 (en) 2011-06-22 2012-12-27 Microsoft Corporation Environmental-light filter for see-through head-mounted display device
WO2013001388A1 (en) 2011-06-27 2013-01-03 Koninklijke Philips Electronics N.V. Live 3d angiogram using registration of a surgical tool curve to an x-ray image
US9100587B2 (en) 2011-07-22 2015-08-04 Naturalpoint, Inc. Hosted camera remote control
US8548290B2 (en) 2011-08-23 2013-10-01 Vuzix Corporation Dynamic apertured waveguide for near-eye display
US10670876B2 (en) 2011-08-24 2020-06-02 Digilens Inc. Waveguide laser illuminator incorporating a despeckler
US9342610B2 (en) 2011-08-25 2016-05-17 Microsoft Technology Licensing, Llc Portals: registered objects as virtualized, personalized displays
US9400395B2 (en) 2011-08-29 2016-07-26 Vuzix Corporation Controllable waveguide for near-eye display applications
US9213163B2 (en) 2011-08-30 2015-12-15 Microsoft Technology Licensing, Llc Aligning inter-pupillary distance in a near-eye display system
US9025252B2 (en) 2011-08-30 2015-05-05 Microsoft Technology Licensing, Llc Adjustment of a mixed reality display for inter-pupillary distance alignment
KR101407670B1 (ko) 2011-09-15 2014-06-16 주식회사 팬택 증강현실 기반 모바일 단말과 서버 및 그 통신방법
US8998414B2 (en) 2011-09-26 2015-04-07 Microsoft Technology Licensing, Llc Integrated eye tracking and display system
US9835765B2 (en) 2011-09-27 2017-12-05 Canon Kabushiki Kaisha Optical element and method for manufacturing the same
US8847988B2 (en) 2011-09-30 2014-09-30 Microsoft Corporation Exercising applications for personal audio/visual system
US9125301B2 (en) 2011-10-18 2015-09-01 Integrated Microwave Corporation Integral heater assembly and method for carrier or host board of electronic package assembly
US8782454B2 (en) 2011-10-28 2014-07-15 Apple Inc. System and method for managing clock speed based on task urgency
US9678102B2 (en) 2011-11-04 2017-06-13 Google Inc. Calibrating intertial sensors using an image sensor
US8891918B2 (en) 2011-11-17 2014-11-18 At&T Intellectual Property I, L.P. Methods, systems, and products for image displays
US20130162940A1 (en) 2011-12-27 2013-06-27 Zoom Focus Eyeware, LLC Spectacles With Removable Optics
US8608309B2 (en) 2011-12-30 2013-12-17 A New Vision Llc Eyeglass system
US9333044B2 (en) 2011-12-30 2016-05-10 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for detection and avoidance of collisions of robotically-controlled medical devices
KR101655137B1 (ko) 2012-02-04 2016-09-07 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 칩 멀티프로세서에서 코어-수준 동적 전압과 주파수 스케일링
JP5942456B2 (ja) 2012-02-10 2016-06-29 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
GB2499635B (en) 2012-02-23 2014-05-14 Canon Kk Image processing for projection on a projection screen
US9704220B1 (en) 2012-02-29 2017-07-11 Google Inc. Systems, methods, and media for adjusting one or more images displayed to a viewer
CN103534748B (zh) 2012-03-22 2017-05-17 索尼公司 显示装置、图像处理装置和图像处理方法
US10013511B2 (en) 2012-04-09 2018-07-03 Purdue Research Foundation System and method for energy usage accounting in software applications
US20130278633A1 (en) 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Method and system for generating augmented reality scene
EP2834698B1 (en) 2012-05-03 2021-06-23 Nokia Technologies Oy Image providing apparatus, method and computer program
WO2013177310A2 (en) 2012-05-22 2013-11-28 Xockets IP, LLC Offloading of computation for rack level servers and corresponding methods and systems
US8989535B2 (en) 2012-06-04 2015-03-24 Microsoft Technology Licensing, Llc Multiple waveguide imaging structure
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9113291B2 (en) 2012-06-18 2015-08-18 Qualcomm Incorporated Location detection within identifiable pre-defined geographic areas
US8848741B2 (en) 2012-06-21 2014-09-30 Breakingpoint Systems, Inc. High-speed CLD-based TCP segmentation offload
US9645394B2 (en) 2012-06-25 2017-05-09 Microsoft Technology Licensing, Llc Configured virtual environments
US9767720B2 (en) 2012-06-25 2017-09-19 Microsoft Technology Licensing, Llc Object-centric mixed reality space
US9696547B2 (en) 2012-06-25 2017-07-04 Microsoft Technology Licensing, Llc Mixed reality system learned input and functions
TW201403299A (zh) 2012-07-04 2014-01-16 Acer Inc 中央處理器控制方法
US8605764B1 (en) 2012-07-09 2013-12-10 Microvision, Inc. Laser diode junction temperature compensation
US9031283B2 (en) 2012-07-12 2015-05-12 Qualcomm Incorporated Sensor-aided wide-area localization on mobile devices
EP2885708A4 (en) 2012-08-20 2016-11-09 D Kevin Cameron ASSIGNMENT OF TREATMENT RESOURCE
CN102829880B (zh) 2012-08-23 2014-04-16 江苏物联网研究发展中心 基于黒硅的高性能mems热电堆红外探测器及其制备方法
EP2893388B1 (en) 2012-09-03 2016-08-03 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Head mounted system and method to compute and render a stream of digital images using a head mounted system
KR102044054B1 (ko) 2012-09-12 2019-11-12 소니 주식회사 화상 제어 장치 및 화상 제어 방법
KR101923723B1 (ko) 2012-09-17 2018-11-29 한국전자통신연구원 사용자 간 상호작용이 가능한 메타버스 공간을 제공하기 위한 메타버스 클라이언트 단말 및 방법
US9177404B2 (en) 2012-10-31 2015-11-03 Qualcomm Incorporated Systems and methods of merging multiple maps for computer vision based tracking
US9576183B2 (en) 2012-11-02 2017-02-21 Qualcomm Incorporated Fast initialization for monocular visual SLAM
US9584382B2 (en) 2012-11-28 2017-02-28 At&T Intellectual Property I, L.P. Collecting and using quality of experience information
US20140168260A1 (en) 2012-12-13 2014-06-19 Paul M. O'Brien Waveguide spacers within an ned device
US8988574B2 (en) 2012-12-27 2015-03-24 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information using bright line image
WO2014100891A1 (en) 2012-12-31 2014-07-03 Esight Corp. Apparatus and method for fitting head mounted vision augmentation systems
US10716469B2 (en) 2013-01-25 2020-07-21 Wesley W. O. Krueger Ocular-performance-based head impact measurement applied to rotationally-centered impact mitigation systems and methods
US9336629B2 (en) 2013-01-30 2016-05-10 F3 & Associates, Inc. Coordinate geometry augmented reality process
GB201301764D0 (en) 2013-01-31 2013-03-20 Adlens Ltd Actuation of fluid-filled lenses
WO2014124706A1 (en) 2013-02-15 2014-08-21 Adlens Limited Adjustable lens and article of eyewear
US8884663B2 (en) 2013-02-25 2014-11-11 Advanced Micro Devices, Inc. State machine for low-noise clocking of high frequency clock
US9600068B2 (en) 2013-03-13 2017-03-21 Sony Interactive Entertainment Inc. Digital inter-pupillary distance adjustment
US9854014B2 (en) 2013-03-14 2017-12-26 Google Inc. Motion data sharing
KR20160005680A (ko) 2013-03-15 2016-01-15 임미 인크. 비동공 형성 광 경로를 갖는 헤드마운트 디스플레이
WO2014144035A1 (en) 2013-03-15 2014-09-18 Brian Adams Ballard Method and system for representing and interacting with augmented reality content
US20160033770A1 (en) 2013-03-26 2016-02-04 Seiko Epson Corporation Head-mounted display device, control method of head-mounted display device, and display system
US9079399B2 (en) 2013-05-16 2015-07-14 Océ-Technologies B.V. Method for operating a printing system
US20140359590A1 (en) 2013-05-30 2014-12-04 National Instruments Corporation Development and Deployment of Parallel Floating-Point Math Functionality on a System with Heterogeneous Hardware Components
JP6232763B2 (ja) 2013-06-12 2017-11-22 セイコーエプソン株式会社 頭部装着型表示装置および頭部装着型表示装置の制御方法
JP5967597B2 (ja) 2013-06-19 2016-08-10 パナソニックＩｐマネジメント株式会社 画像表示装置および画像表示方法
US9256987B2 (en) 2013-06-24 2016-02-09 Microsoft Technology Licensing, Llc Tracking head movement when wearing mobile device
US9998863B2 (en) 2013-08-19 2018-06-12 Estimote Polska Sp. Z O. O. System and method for providing content using beacon systems
AU2014312373A1 (en) 2013-08-27 2016-03-17 Frameri Inc. Removable eyeglass lens and frame platform
US9965014B2 (en) 2013-09-27 2018-05-08 Intel Corporation Techniques for tracing wakelock usage
US9256072B2 (en) 2013-10-02 2016-02-09 Philip Scott Lyren Wearable electronic glasses that detect movement of a real object copies movement of a virtual object
US20150097719A1 (en) 2013-10-03 2015-04-09 Sulon Technologies Inc. System and method for active reference positioning in an augmented reality environment
US20150123966A1 (en) 2013-10-03 2015-05-07 Compedia - Software And Hardware Development Limited Interactive augmented virtual reality and perceptual computing platform
US9996797B1 (en) 2013-10-31 2018-06-12 Leap Motion, Inc. Interactions with virtual objects for machine control
KR102189115B1 (ko) 2013-11-11 2020-12-09 삼성전자주식회사 대칭형 다중 프로세서를 구비한 시스템 온-칩 및 이를 위한 최대 동작 클럭 주파수 결정 방법
US9286725B2 (en) 2013-11-14 2016-03-15 Nintendo Co., Ltd. Visually convincing depiction of object interactions in augmented reality images
WO2015075767A1 (ja) 2013-11-19 2015-05-28 日立マクセル株式会社 投射型映像表示装置
WO2015079610A1 (ja) 2013-11-26 2015-06-04 ソニー株式会社 ヘッドマウントディスプレイ
CN107219628B (zh) 2013-11-27 2020-05-01 奇跃公司 虚拟和增强现实系统与方法
WO2015100714A1 (en) 2014-01-02 2015-07-09 Empire Technology Development Llc Augmented reality (ar) system
US9524580B2 (en) 2014-01-06 2016-12-20 Oculus Vr, Llc Calibration of virtual reality systems
US11103122B2 (en) 2014-07-15 2021-08-31 Mentor Acquisition One, Llc Content presentation in head worn computing
US10228562B2 (en) 2014-02-21 2019-03-12 Sony Interactive Entertainment Inc. Realtime lens aberration correction from eye tracking
US9383630B2 (en) 2014-03-05 2016-07-05 Mygo, Llc Camera mouth mount
US9871741B2 (en) 2014-03-10 2018-01-16 Microsoft Technology Licensing, Llc Resource management based on device-specific or user-specific resource usage profiles
US9251598B2 (en) 2014-04-10 2016-02-02 GM Global Technology Operations LLC Vision-based multi-camera factory monitoring with dynamic integrity scoring
US11137601B2 (en) 2014-03-26 2021-10-05 Mark D. Wieczorek System and method for distanced interactive experiences
US20170123775A1 (en) 2014-03-26 2017-05-04 Empire Technology Development Llc Compilation of application into multiple instruction sets for a heterogeneous processor
JP6442149B2 (ja) 2014-03-27 2018-12-19 オリンパス株式会社 画像表示装置
US20150301955A1 (en) 2014-04-21 2015-10-22 Qualcomm Incorporated Extending protection domains to co-processors
US10424103B2 (en) 2014-04-29 2019-09-24 Microsoft Technology Licensing, Llc Display device viewer gaze attraction
AU2015297035B2 (en) 2014-05-09 2018-06-28 Google Llc Systems and methods for biomechanically-based eye signals for interacting with real and virtual objects
KR102193052B1 (ko) 2014-05-30 2020-12-18 매직 립, 인코포레이티드 가상 또는 증강 현실 장치로 가상 콘텐츠 디스플레이를 생성하기 위한 방법들 및 시스템들
EP2952850A1 (en) 2014-06-03 2015-12-09 Optotune AG Optical device, particularly for tuning the focal length of a lens of the device by means of optical feedback
JP2017153498A (ja) 2014-06-17 2017-09-07 日本電産コパル電子株式会社 感圧センサと感圧カテーテル
CN106464826B (zh) 2014-07-01 2020-02-07 索尼公司 信息处理装置及方法
RU2603238C2 (ru) 2014-07-15 2016-11-27 Самсунг Электроникс Ко., Лтд. Световодная структура, голографическое оптическое устройство и система формирования изображений
US9865089B2 (en) 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US10225506B2 (en) * 2014-08-01 2019-03-05 Sony Corporation Information processing apparatus and information processing method
EP3188482B1 (en) 2014-08-28 2019-09-04 Sony Corporation Image processing device and image processing system
US20160077338A1 (en) 2014-09-16 2016-03-17 Steven John Robbins Compact Projection Light Engine For A Diffractive Waveguide Display
US9494799B2 (en) 2014-09-24 2016-11-15 Microsoft Technology Licensing, Llc Waveguide eye tracking employing switchable diffraction gratings
US10176625B2 (en) 2014-09-25 2019-01-08 Faro Technologies, Inc. Augmented reality camera for use with 3D metrology equipment in forming 3D images from 2D camera images
US20160093269A1 (en) 2014-09-26 2016-03-31 Pixtronix, Inc. Laser-Pumped Phosphor Backlight and Methods
AU2015323940B2 (en) 2014-09-29 2021-05-20 Magic Leap, Inc. Architectures and methods for outputting different wavelength light out of waveguides
US9652124B2 (en) 2014-10-31 2017-05-16 Microsoft Technology Licensing, Llc Use of beacons for assistance to users in interacting with their environments
US10371936B2 (en) 2014-11-10 2019-08-06 Leo D. Didomenico Wide angle, broad-band, polarization independent beam steering and concentration of wave energy utilizing electronically controlled soft matter
IL235642B (en) 2014-11-11 2021-08-31 Lumus Ltd A compact head-up display system is protected by an element with a super-thin structure
US20170243403A1 (en) 2014-11-11 2017-08-24 Bent Image Lab, Llc Real-time shared augmented reality experience
US10794728B2 (en) 2014-12-19 2020-10-06 Invensense, Inc. Device and method for sensor calibration
US10096162B2 (en) * 2014-12-22 2018-10-09 Dimensions And Shapes, Llc Headset vision system for portable devices that provides an augmented reality display and/or a virtual reality display
US10154239B2 (en) 2014-12-30 2018-12-11 Onpoint Medical, Inc. Image-guided surgery with surface reconstruction and augmented reality visualization
US10018844B2 (en) 2015-02-09 2018-07-10 Microsoft Technology Licensing, Llc Wearable image display system
US9696795B2 (en) 2015-02-13 2017-07-04 Leap Motion, Inc. Systems and methods of creating a realistic grab experience in virtual reality/augmented reality environments
US10180734B2 (en) 2015-03-05 2019-01-15 Magic Leap, Inc. Systems and methods for augmented reality
US10459145B2 (en) 2015-03-16 2019-10-29 Digilens Inc. Waveguide device incorporating a light pipe
US9955862B2 (en) 2015-03-17 2018-05-01 Raytrx, Llc System, method, and non-transitory computer-readable storage media related to correction of vision defects using a visual display
US20160287337A1 (en) 2015-03-31 2016-10-06 Luke J. Aram Orthopaedic surgical system and method for patient-specific surgical procedure
EP3745167A1 (en) 2015-04-07 2020-12-02 Magic Leap, Inc. Diffraction grating and method of manufacture
US9779554B2 (en) 2015-04-10 2017-10-03 Sony Interactive Entertainment Inc. Filtering and parental control methods for restricting visual activity on a head mounted display
CN111506132B (zh) 2015-04-20 2022-04-05 深圳市大疆创新科技有限公司 用于对传感器操作进行热调节的系统和方法
CN107533255A (zh) 2015-04-23 2018-01-02 镭亚股份有限公司 基于双光导光栅的背光以及使用该背光的电子显示器
US10909464B2 (en) 2015-04-29 2021-02-02 Microsoft Technology Licensing, Llc Semantic locations prediction
US9664569B2 (en) 2015-05-15 2017-05-30 Google Inc. Circuit board configurations facilitating operation of heat sensitive sensor components
KR20160139727A (ko) 2015-05-28 2016-12-07 엘지전자 주식회사 글래스타입 단말기 및 이의 제어방법
GB2539009A (en) 2015-06-03 2016-12-07 Tobii Ab Gaze detection method and apparatus
CN107683497B (zh) 2015-06-15 2022-04-08 索尼公司 信息处理设备、信息处理方法及程序
US10178560B2 (en) 2015-06-15 2019-01-08 The Invention Science Fund I Llc Methods and systems for communication with beamforming antennas
FR3037672B1 (fr) 2015-06-16 2017-06-16 Parrot Drone comportant des moyens perfectionnes de compensation du biais de la centrale inertielle en fonction de la temperature
US9519084B1 (en) 2015-06-18 2016-12-13 Oculus Vr, Llc Securing a fresnel lens to a refractive optical element
CA2991644C (en) 2015-07-06 2022-03-01 Frank Jones Methods and devices for demountable head mounted displays
US11190681B1 (en) 2015-07-10 2021-11-30 Snap Inc. Systems and methods for DSP fast boot
US20170100664A1 (en) 2015-10-12 2017-04-13 Osterhout Group, Inc. External user interface for head worn computing
US20170038607A1 (en) 2015-08-04 2017-02-09 Rafael Camara Enhanced-reality electronic device for low-vision pathologies, and implant procedure
US9781246B2 (en) 2015-08-28 2017-10-03 Qualcomm Incorporated Augmenting reality using a small cell
US9880611B2 (en) 2015-08-31 2018-01-30 Google Llc Energy saving mode for electronic devices
US20170061696A1 (en) 2015-08-31 2017-03-02 Samsung Electronics Co., Ltd. Virtual reality display apparatus and display method thereof
US9489027B1 (en) 2015-08-31 2016-11-08 Wave Resource Strategies, Inc. System and method for the accurate recordation of power consumption in a computing device utilizing power profiles
JP6615541B2 (ja) 2015-09-02 2019-12-04 株式会社バンダイナムコアミューズメント 投影システム
US20150378407A1 (en) 2015-09-04 2015-12-31 Mediatek Inc. Loading-Based Dynamic Voltage And Frequency Scaling
AU2016319754B2 (en) 2015-09-11 2019-02-21 Amazon Technologies, Inc. System, method and computer-readable storage medium for customizable event-triggered computation at edge locations
AU2016323982A1 (en) 2015-09-18 2018-04-12 Auris Health, Inc. Navigation of tubular networks
US10082865B1 (en) 2015-09-29 2018-09-25 Rockwell Collins, Inc. Dynamic distortion mapping in a worn display
GB2542853B (en) 2015-10-02 2021-12-15 Cambridge Consultants Processing apparatus and methods
US10241332B2 (en) 2015-10-08 2019-03-26 Microsoft Technology Licensing, Llc Reducing stray light transmission in near eye display using resonant grating filter
US10067346B2 (en) 2015-10-23 2018-09-04 Microsoft Technology Licensing, Llc Holographic display
US9983709B2 (en) 2015-11-02 2018-05-29 Oculus Vr, Llc Eye tracking using structured light
WO2017079333A1 (en) 2015-11-04 2017-05-11 Magic Leap, Inc. Light field display metrology
US9671615B1 (en) 2015-12-01 2017-06-06 Microsoft Technology Licensing, Llc Extended field of view in near-eye display using wide-spectrum imager
US10025060B2 (en) 2015-12-08 2018-07-17 Oculus Vr, Llc Focus adjusting virtual reality headset
US10445860B2 (en) 2015-12-08 2019-10-15 Facebook Technologies, Llc Autofocus virtual reality headset
DE102015122055B4 (de) 2015-12-17 2018-08-30 Carl Zeiss Ag Optisches System sowie Verfahren zum Übertragen eines Quellbildes
US20170185261A1 (en) 2015-12-28 2017-06-29 Htc Corporation Virtual reality device, method for virtual reality
US10838116B2 (en) 2016-01-06 2020-11-17 University Of Utah Research Foundation Low-power large aperture adaptive lenses for smart eyeglasses
EP3190447B1 (en) 2016-01-06 2020-02-05 Ricoh Company, Ltd. Light guide and virtual image display device
US9978180B2 (en) 2016-01-25 2018-05-22 Microsoft Technology Licensing, Llc Frame projection for augmented reality environments
US9891436B2 (en) 2016-02-11 2018-02-13 Microsoft Technology Licensing, Llc Waveguide-based displays with anti-reflective and highly-reflective coating
JP6686504B2 (ja) 2016-02-15 2020-04-22 セイコーエプソン株式会社 頭部装着型画像表示装置
JP6686505B2 (ja) 2016-02-15 2020-04-22 セイコーエプソン株式会社 頭部装着型画像表示装置
CN109348738B (zh) 2016-02-18 2021-11-16 富士电机株式会社 信号传输装置
US10667981B2 (en) 2016-02-29 2020-06-02 Mentor Acquisition One, Llc Reading assistance system for visually impaired
US9880441B1 (en) 2016-09-08 2018-01-30 Osterhout Group, Inc. Electrochromic systems for head-worn computer systems
US20170256096A1 (en) 2016-03-07 2017-09-07 Google Inc. Intelligent object sizing and placement in a augmented / virtual reality environment
CA3016604A1 (en) 2016-03-12 2017-09-21 Philipp K. Lang Devices and methods for surgery
US10223605B2 (en) 2016-03-18 2019-03-05 Colorvision International, Inc. Interactive virtual aquarium simulation system and associated methods
WO2017173213A1 (en) 2016-03-31 2017-10-05 Zoll Medical Corporation Systems and methods of tracking patient movement
NZ746486A (en) 2016-04-07 2023-05-26 Magic Leap Inc Systems and methods for augmented reality
EP3236211A1 (en) 2016-04-21 2017-10-25 Thomson Licensing Method and apparatus for estimating a pose of a rendering device
US10197804B2 (en) 2016-04-25 2019-02-05 Microsoft Technology Licensing, Llc Refractive coating for diffractive optical elements
AU2017257549B2 (en) 2016-04-26 2021-09-09 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems
US20170312032A1 (en) 2016-04-27 2017-11-02 Arthrology Consulting, Llc Method for augmenting a surgical field with virtual guidance content
JP6961619B2 (ja) 2016-05-06 2021-11-05 マジック リープ, インコーポレイテッドMagic Leap, Inc. 光を再指向させるための非対称格子を有するメタ表面および製造方法
US10241346B2 (en) 2016-05-07 2019-03-26 Microsoft Technology Licensing, Llc Degrees of freedom for diffraction elements in wave expander
US10215986B2 (en) 2016-05-16 2019-02-26 Microsoft Technology Licensing, Llc Wedges for light transformation
US11228770B2 (en) 2016-05-16 2022-01-18 Qualcomm Incorporated Loop sample processing for high dynamic range and wide color gamut video coding
GB201609027D0 (en) 2016-05-23 2016-07-06 Bae Systems Plc Waveguide manufacturing method
US10078377B2 (en) 2016-06-09 2018-09-18 Microsoft Technology Licensing, Llc Six DOF mixed reality input by fusing inertial handheld controller with hand tracking
US9939647B2 (en) 2016-06-20 2018-04-10 Microsoft Technology Licensing, Llc Extended field of view in near-eye display using optically stitched imaging
US10114440B2 (en) 2016-06-22 2018-10-30 Razer (Asia-Pacific) Pte. Ltd. Applying power management based on a target time
US10372184B2 (en) 2016-06-28 2019-08-06 Renesas Electronics America Inc. Method and apparatus for implementing power modes in microcontrollers using power profiles
WO2018008232A1 (ja) 2016-07-04 2018-01-11 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
CN109417608B (zh) 2016-07-07 2021-02-02 日立乐金光科技株式会社 影像显示装置
TW201803289A (zh) 2016-07-11 2018-01-16 原相科技股份有限公司 可利用較小電路面積並同時考量節能省電以偵測空氣中之干擾訊號之功率來控制放大器之增益值的無線收發機裝置及方法
CA3031771A1 (en) 2016-07-25 2018-02-01 Magic Leap, Inc. Imaging modification, display and visualization using augmented and virtual reality eyewear
PL3494695T3 (pl) 2016-08-04 2024-02-19 Dolby Laboratories Licensing Corporation Rozwiązania akomodacji-wergencji ze śledzeniem pojedynczej głębi
CA3032812A1 (en) 2016-08-04 2018-02-08 Reification Inc. Methods for simultaneous localization and mapping (slam) and related apparatus and systems
US10676345B2 (en) 2016-08-15 2020-06-09 Y-Sensors Ltd. Temperature stabilized MEMS device
KR102450386B1 (ko) 2016-08-22 2022-09-30 매직 립, 인코포레이티드 웨어러블 디스플레이 디바이스를 위한 디더링 방법들 및 장치
US10690936B2 (en) 2016-08-29 2020-06-23 Mentor Acquisition One, Llc Adjustable nose bridge assembly for headworn computer
US20180067779A1 (en) 2016-09-06 2018-03-08 Smartiply, Inc. AP-Based Intelligent Fog Agent
US20180082480A1 (en) 2016-09-16 2018-03-22 John R. White Augmented reality surgical technique guidance
US11839433B2 (en) 2016-09-22 2023-12-12 Medtronic Navigation, Inc. System for guided procedures
AU2017330454B2 (en) 2016-09-26 2022-08-18 Magic Leap, Inc. Calibration of magnetic and optical sensors in a virtual reality or augmented reality display system
US10134192B2 (en) 2016-10-17 2018-11-20 Microsoft Technology Licensing, Llc Generating and displaying a computer generated image on a future pose of a real world object
US10373297B2 (en) 2016-10-26 2019-08-06 Valve Corporation Using pupil location to correct optical lens distortion
CN109788992B (zh) 2016-11-02 2022-11-11 直观外科手术操作公司 用于图像引导的外科手术的连续配准的系统和方法
US10735691B2 (en) 2016-11-08 2020-08-04 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
EP3320829A1 (en) 2016-11-10 2018-05-16 E-Health Technical Solutions, S.L. System for integrally measuring clinical parameters of visual function
KR102573744B1 (ko) 2016-11-23 2023-09-01 삼성디스플레이 주식회사 표시 장치 및 그 구동 방법
EP3545675A4 (en) 2016-11-24 2020-07-01 The University of Washington CAPTURE AND RESTITUTION OF LIGHT FIELD FOR HEADSETS
JP6917701B2 (ja) 2016-11-30 2021-08-11 キヤノン株式会社 情報処理装置、情報処理装置の制御方法及びプログラム
WO2018101394A1 (ja) 2016-12-01 2018-06-07 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US10185151B2 (en) 2016-12-20 2019-01-22 Facebook Technologies, Llc Waveguide display with a small form factor, a large field of view, and a large eyebox
WO2018113740A1 (en) 2016-12-21 2018-06-28 Zyetric Technologies Limited Combining virtual reality and augmented reality
EP3563215A4 (en) 2016-12-29 2020-08-05 Magic Leap, Inc. AUTOMATIC CONTROL OF A WEARABLE DISPLAY DEVICE BASED ON EXTERNAL CONDITIONS
US10203252B2 (en) 2016-12-29 2019-02-12 Industrial Technology Research Institute Microelectromechanical apparatus having a measuring range selector
JP7268879B2 (ja) 2017-01-02 2023-05-08 ガウス サージカル，インコーポレイテッド 重複撮像を予測した手術アイテムの追跡
US10436594B2 (en) 2017-01-17 2019-10-08 Blind InSites, LLC Devices, systems, and methods for navigation and usage guidance in a navigable space using wireless communication
US9978118B1 (en) 2017-01-25 2018-05-22 Microsoft Technology Licensing, Llc No miss cache structure for real-time image transformations with data compression
US20180255285A1 (en) 2017-03-06 2018-09-06 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
EP3376279B1 (en) 2017-03-13 2022-08-31 Essilor International Optical device for a head-mounted display, and head-mounted device incorporating it for augmented reality
US10452123B2 (en) 2017-03-30 2019-10-22 Google Llc Predictive power saving and screen dimming for computing devices
US10642045B2 (en) 2017-04-07 2020-05-05 Microsoft Technology Licensing, Llc Scanner-illuminated LCOS projector for head mounted display
US10241545B1 (en) 2017-06-01 2019-03-26 Facebook Technologies, Llc Dynamic distortion correction for optical compensation
US11132533B2 (en) 2017-06-07 2021-09-28 David Scott Dreessen Systems and methods for creating target motion, capturing motion, analyzing motion, and improving motion
US11236993B1 (en) 2017-06-08 2022-02-01 Facebook Technologies, Llc Depth sensing using a time of flight system including a scanning beam in combination with a single photon avalanche diode array
GB201709199D0 (en) 2017-06-09 2017-07-26 Delamont Dean Lindsay IR mixed reality and augmented reality gaming system
WO2018235075A1 (en) 2017-06-18 2018-12-27 Moovit App Global Ltd. SYSTEM AND METHOD FOR DETERMINING TRANSIT STOP LOCATION
US20190196690A1 (en) 2017-06-23 2019-06-27 Zyetric Virtual Reality Limited First-person role playing interactive augmented reality
US10402448B2 (en) 2017-06-28 2019-09-03 Google Llc Image retrieval with deep local feature descriptors and attention-based keypoint descriptors
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
US20190056591A1 (en) 2017-08-18 2019-02-21 Microsoft Technology Licensing, Llc Optical waveguide with multiple antireflective coatings
US9948612B1 (en) 2017-09-27 2018-04-17 Citrix Systems, Inc. Secure single sign on and conditional access for client applications
US10437065B2 (en) 2017-10-03 2019-10-08 Microsoft Technology Licensing, Llc IPD correction and reprojection for accurate mixed reality object placement
US20190137788A1 (en) 2017-11-08 2019-05-09 Interstol Trading Co. Inc. Lens assembly including magnet assembly components for mounting onto an eye glass frame
US10317680B1 (en) 2017-11-09 2019-06-11 Facebook Technologies, Llc Optical aberration correction based on user eye position in head mounted displays
DK3482802T3 (da) 2017-11-13 2021-03-01 Vr Coaster Gmbh & Co Kg Indretning til oplevelse af en virtual reality-simulering i en undervandsverden
US10599259B2 (en) 2017-11-20 2020-03-24 Google Llc Virtual reality / augmented reality handheld controller sensing
KR102411287B1 (ko) 2017-11-22 2022-06-22 삼성전자 주식회사 미디어 출력 제어 장치 및 방법
AU2018375665A1 (en) 2017-12-01 2020-05-14 Rhodan Marine Systems Of Florida, Llc Dynamic augmented reality headset system
US10916059B2 (en) 2017-12-06 2021-02-09 Universal City Studios Llc Interactive video game system having an augmented virtual representation
US10636198B2 (en) 2017-12-28 2020-04-28 Beijing Jingdong Shangke Information Technology Co., Ltd. System and method for monocular simultaneous localization and mapping
US10620430B2 (en) 2018-01-12 2020-04-14 Microsoft Technology Licensing, Llc Geometrically multiplexed RGB lasers in a scanning MEMS display system for HMDS
US10773169B2 (en) * 2018-01-22 2020-09-15 Google Llc Providing multiplayer augmented reality experiences
WO2019148154A1 (en) 2018-01-29 2019-08-01 Lang Philipp K Augmented reality guidance for orthopedic and other surgical procedures
WO2019152617A1 (en) * 2018-02-03 2019-08-08 The Johns Hopkins University Calibration system and method to align a 3d virtual scene and 3d real world for a stereoscopic head-mounted display
US10422989B2 (en) 2018-02-06 2019-09-24 Microsoft Technology Licensing, Llc Optical systems including a single actuator and multiple fluid-filled optical lenses for near-eye-display devices
GB201805301D0 (en) 2018-03-29 2018-05-16 Adlens Ltd Improvements In Or Relating To Variable Focusing Power Optical Devices
US10997746B2 (en) 2018-04-12 2021-05-04 Honda Motor Co., Ltd. Feature descriptor matching
US10504288B2 (en) 2018-04-17 2019-12-10 Patrick Piemonte & Ryan Staake Systems and methods for shared creation of augmented reality
JP6779939B2 (ja) 2018-04-19 2020-11-04 グリー株式会社 ゲーム装置、制御方法及び制御プログラム
US10969486B2 (en) 2018-04-26 2021-04-06 SCRRD, Inc. Augmented reality platform and method for use of same
US10740966B2 (en) 2018-05-14 2020-08-11 Microsoft Technology Licensing, Llc Fake thickness on a two-dimensional object
CN112400157A (zh) 2018-06-05 2021-02-23 奇跃公司 观看系统的基于单应性变换矩阵的温度校准
EP3810015A1 (en) 2018-06-19 2021-04-28 Tornier, Inc. Mixed-reality surgical system with physical markers for registration of virtual models
WO2020010226A1 (en) 2018-07-03 2020-01-09 Magic Leap, Inc. Systems and methods for virtual and augmented reality
US10854004B2 (en) * 2018-08-24 2020-12-01 Facebook, Inc. Multi-device mapping and collaboration in augmented-reality environments
US10902678B2 (en) 2018-09-06 2021-01-26 Curious Company, LLC Display of hidden information
CN110942518B (zh) 2018-09-24 2024-03-29 苹果公司 上下文计算机生成现实(cgr)数字助理
US11017217B2 (en) 2018-10-09 2021-05-25 Midea Group Co., Ltd. System and method for controlling appliances using motion gestures
US10678323B2 (en) 2018-10-10 2020-06-09 Plutovr Reference frames for virtual environments
US10516853B1 (en) 2018-10-10 2019-12-24 Plutovr Aligning virtual representations to inputs and outputs
US10838488B2 (en) 2018-10-10 2020-11-17 Plutovr Evaluating alignment of inputs and outputs for virtual environments
US10776933B2 (en) 2018-12-06 2020-09-15 Microsoft Technology Licensing, Llc Enhanced techniques for tracking the movement of real-world objects for improved positioning of virtual objects
US10970547B2 (en) 2018-12-07 2021-04-06 Microsoft Technology Licensing, Llc Intelligent agents for managing data associated with three-dimensional objects
US11216150B2 (en) 2019-06-28 2022-01-04 Wen-Chieh Geoffrey Lee Pervasive 3D graphical user interface with vector field functionality
GB2600289A (en) 2019-07-11 2022-04-27 Elo Labs Inc Interactive personal training system
US11174153B2 (en) 2019-08-21 2021-11-16 Invensense, Inc. Package level thermal gradient sensing
US11209656B1 (en) 2020-10-05 2021-12-28 Facebook Technologies, Llc Methods of driving light sources in a near-eye display

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6662103B1 (en) * 1999-03-22 2003-12-09 Arc Second Inc. Method and system for creating a user-selectable arbitrary coordinate frame
KR20120017783A (ko) * 2010-08-20 2012-02-29 한국과학기술원 증강 현실에서 위치 정보를 표시하는 방법 및 장치
CN104205175A (zh) * 2012-03-29 2014-12-10 索尼公司 信息处理装置，信息处理系统及信息处理方法
US20150070389A1 (en) * 2012-03-29 2015-03-12 Sony Corporation Information processing apparatus, information processing system, and information processing method
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
US20170185823A1 (en) * 2014-04-07 2017-06-29 Eyeways Systems Ltd. Apparatus And Method For Image-Based Positioning, Orientation And Situational Awareness
CN106462232A (zh) * 2014-05-01 2017-02-22 微软技术许可有限责任公司 在动态环境中确定坐标框架
US20180190017A1 (en) * 2017-01-04 2018-07-05 Daqri, Llc Environmental Mapping System
US20180218545A1 (en) * 2017-01-31 2018-08-02 Daqri, Llc Virtual content scaling with a hardware controller

Also Published As

Publication number Publication date
WO2020185405A1 (en) 2020-09-17
JP2022523852A (ja) 2022-04-26
US20220130116A1 (en) 2022-04-28
EP3939030A1 (en) 2022-01-19
EP3939030A4 (en) 2022-11-30
US11762623B2 (en) 2023-09-19

Similar Documents

Publication Publication Date Title
JP7068562B2 (ja) 拡張現実データを記録するための手法
EP3051525B1 (en) Display
EP2979127B1 (en) Display method and system
JP6860488B2 (ja) 複合現実システム
US8704882B2 (en) Simulated head mounted display system and method
US10269139B2 (en) Computer program, head-mounted display device, and calibration method
US7427996B2 (en) Image processing apparatus and image processing method
US11609645B2 (en) Unfused pose-based drift correction of a fused pose of a totem in a user interaction system
KR20150093831A (ko) 혼합 현실 환경에 대한 직접 상호작용 시스템
CN107844196A (zh) 视频处理设备、视频处理方法和视频处理系统
KR20110070326A (ko) 머리 위치 추적을 이용한 입체 영상 표시 장치 및 이의 동작 방법
US11762623B2 (en) Registration of local content between first and second augmented reality viewers
JPH10198506A (ja) 座標検出システム
JP4708590B2 (ja) 複合現実感システム、ヘッドマウントディスプレイ装置、複合現実感実現方法及びプログラム
US20170300121A1 (en) Input/output device, input/output program, and input/output method
US20220230357A1 (en) Data processing
EP4206867A1 (en) Peripheral tracking system and method
JP2024056844A (ja) ユーザ相互作用システムにおけるトーテムの融合姿勢の非融合姿勢ベースのドリフト補正
CN117452637A (zh) 头戴式显示器和图像显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination