CN103765366A - 使头部移动和在用户界面上显示的项目相关联的方法及系统 - Google Patents

使头部移动和在用户界面上显示的项目相关联的方法及系统 Download PDF

Info

Publication number
CN103765366A
CN103765366A CN201280042503.4A CN201280042503A CN103765366A CN 103765366 A CN103765366 A CN 103765366A CN 201280042503 A CN201280042503 A CN 201280042503A CN 103765366 A CN103765366 A CN 103765366A
Authority
CN
China
Prior art keywords
project
user
head
measurement result
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280042503.4A
Other languages
English (en)
Other versions
CN103765366B (zh
Inventor
G.陶布曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN103765366A publication Critical patent/CN103765366A/zh
Application granted granted Critical
Publication of CN103765366B publication Critical patent/CN103765366B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了用于与用户头部的移动相关联地移动和选择在用户界面上的一行中的项目的系统及方法。一个实施例可以包括测量用户头部的方位以及将测量结果传递给设备。接下来,所述设备可以被配置成执行使所述测量结果与在用户界面上显示的一行项目的移位相关联的指令,并且执行依据相关引起项目移动的指令。所述设备也可以接收对用户头部移动的加速度的测量结果,并且可以被配置成执行引起项目以与所测量的加速度相当的加速度移动的指令。

Description

使头部移动和在用户界面上显示的项目相关联的方法及系统
背景技术
除非这里另有指示,否则本部分中描述的材料不是本申请中权利要求的现有技术,也并不因包含在本部分中而被承认为现有技术。
可以利用许多技术来向系统的用户显示信息。用于显示信息的一些系统可以利用“抬头(heads-up)”显示器。抬头显示器典型地位于用户眼睛附近以允许用户在少量或者没有头部移动的情况下观看显示的图像或者信息。为了在显示器上生成图像,可以使用计算机处理系统。这种抬头显示器具有各种各样的应用,比如航空信息系统、车辆导航系统和视频游戏。
一类抬头显示器是头戴式显示器。头戴式显示器可以包含在一副眼镜、头盔或者用户佩戴在头上的任何其它项目中。另一类抬头显示器可以是在屏幕上的投影。
用户可能期望从诸如头戴式显示器或者投影屏显示器的抬头显示器获得与用户在利用诸如计算机和蜂窝电话的各种其它系统时所获得的相同的功能。例如,用户可能想要使用滚动功能来在显示器上来回移动各种项目,并且用户可能想要从一列或者一行项目中选择项目。
发明内容
本申请公开了用于依据用户头部的移动和位置来操作用户界面的系统及方法等。
在一个实施例中,提供一种用于使头部移动与在用户界面上显示的项目相关联(的方法。所述方法包括:接收指示用户头部的第一方位的第一测量(measurement)结果,接收指示用户头部的第二方位的第二测量结果,基于第二测量结果确定在用户界面上显示的至少一个项目的移动,以及依据所述确定引起所述至少一个项目移动。
在又一个实施例中,提供一种制品。所述制品包括在其上编码有计算机可读指令的有形计算机可读介质。所述指令包括:接收指示用户头部的第一方位的第一测量结果,接收指示用户头部的第二方位的第二测量结果,基于所接收到的指示用户头部的第二方位的测量结果确定在用户界面上显示的至少一个项目的移动,以及依据所述确定引起所述至少一个项目移动。
在又一个实施例中,提供一种系统。所述系统包括处理器、至少一个传感器、数据存储装置以及可由处理器执行的、在所述数据存储装置上存储的机器语言指令。所述机器语言指令被配置成:从至少一个传感器接收指示用户头部的第一方位的第一测量结果,从至少一个传感器接收指示用户头部的第二方位的第二测量结果,基于第二测量结果确定在用户界面上显示的至少一个项目的移动,以及依据所述确定引起所述至少一个项目移动。
上述发明内容仅仅是说明性的,并不意图以任何方式进行限制。除了如上所述的说明性的方面、实施例和特征之外,通过参考附图及其后的详细描述,进一步的方面、实施例和特征将变得更加清楚。
附图说明
附图中:
图1A是根据本申请的示例实施例的计算机网络基础设施的示意图;
图1B是根据本申请的示例实施例的计算机网络基础设施的示意图;
图1C是图示示例设备的功能框图;
图2图示了用于接收、发送以及显示数据的示例系统;
图3图示了图2的系统的替换视图;
图4是依据本申请的一个方面的用于将用户头部移动传送到用户界面的说明性的方法的流程图;
图5是依据申请的一个方面的用于将用户头部移动传送到用户界面的说明性的方法的流程图;
图6A是在第一位置的设备的示例用户界面;
图6B是在第二位置的图6A的设备的示例用户界面;
图6C是在可替换的第二位置的图6A的设备的示例用户界面;
图7是图示示例计算设备的功能框图;以及
图8是图示示例计算机程序的概念性部分视图的示意图,
所有附图依据本公开的至少一些实施例来安排。
具体实施方式
一下的具体实施方式部分参照附图描述了公开的系统和方法的各种特征和功能。在附图中,类似的符号一般标识类似的组件,除非上下文中另有指示。这里描述的说明性的系统和方法实施例并非意图是限制性的。将容易理解:可以以各式各样的不同配置来安排和组合公开的系统和方法的某些方面,这里考虑了所有这些。
1、用于在用户界面上显示项目的系统的概述
图1A是根据本申请的示例实施例的计算机网络基础设施的示意图。在一个系统100中,具有用户界面的设备104利用通信链路106耦接到计算设备102。具有用户界面的设备104可以包含使能无线通信链路的硬件。计算设备102可以是例如台式计算机、电视机设备或者便携式电子设备,比如便携式计算机或者蜂窝电话。通信链路106可以被用来将图像或者文本数据传送到用户界面104或者可以被用来传送例如未处理的数据。
具有用户界面的设备104可以是头戴式显示器,比如用户头上戴着的一副眼镜或者其它头盔型设备。传感器可以被包括在设备104上。这样的传感器可以包括陀螺仪或者加速度计。这里将参照例如图1C和图2-3描述设备104的更多细节。
此外,将计算设备102与具有用户界面的设备104连接的通信链路106可以是许多通信技术之一。例如,通信链路106可以是经由比如USB的串行总线或者并行总线的有线链路。有线连接也可以是专有连接。通信链路106也可以是使用例如
Figure BDA0000471344570000031
无线技术、在IEEE802.11(包括任意IEEE802.11修订版)中描述的通信协议、蜂窝技术(比如GSM、CDMA、UMTS、EV-DO、WiMAX或者LTE)、或者
Figure BDA0000471344570000032
技术等等的无线连接。
图1B是根据本申请的示例实施例的计算机网络基础设施的示意图。在系统150中,计算设备152经由第一通信链路154耦接到网络156。网络156可以经由第二通信链路158耦接到具有用户界面的设备160。用户界面160可以包含使能无线通信链路的硬件。第一通信链路154可以被用来将图像数据传送到网络156或者可以传送未处理的数据。具有用户界面的设备160可以包含基于所接收到的数据计算显示的图像的处理器。
虽然通信链路154被图示为无线连接,但是也可以使用有线连接。例如,通信链路154可以是经由比如通用串行总线的串行总线或者并行总线的有线链路。有线连接也可以是专有连接。通信链路154也可以是使用例如,
Figure BDA0000471344570000033
Figure BDA0000471344570000041
无线电技术、在IEEE802.11(包括任意IEEE802.11修订版)中描述的通信协议、蜂窝技术(比如GSM、CDMA、UMTS、EV-DO、WiMAX或者LTE)、或者技术等等的无线连接。此外,网络156可以通过不同的基于射频的网络提供第二通信链路158,并且可以是具有足以传送例如图像或者数据的带宽的任意通信链路。
系统100或者150可以被配置成接收与图像相对应的数据。接收到的数据可以是计算机图像文件、计算机视频文件、编码的视频或者数据流、三维绘制(rendering)数据或者用于绘制的openGL数据。在一些实施例中,数据也可以作为纯文本被发送。所述文本可以被绘制成对象或者系统可以将所述文本翻译成对象。为了绘制图像,系统100或者150在呈现图像以用于显示之前,可以例如,处理与图像相关联的信息并将其写入数据文件。
图1C是图示示例设备170的功能框图。在一个示例中,图1A中的设备104或者图1B中的设备160可以采取图1C中所示的设备的形式。设备170可以是可佩戴计算设备,比如一副护目镜或者眼镜,如图2-3中所示。然而,可以考虑设备的其它示例。
如图所示,设备170包括传感器172、处理器174、存储逻辑178的数据存储装置176、输出接口180和显示器184。示出了通过系统总线或者其它机制182耦接设备170的元件。
传感器172、处理器174、数据存储装置176、逻辑178、输出接口180以及显示器184中的每一个被示出为集成在设备170内,然而,在一些实施例中,设备170可以包括多个设备,设备170的元件分布在所述多个设备之中。例如,传感器172可以与设备170的剩余元件分离(但是可通信地连接到它们),或者传感器172、处理器174、输出接口180以及显示器184可以被集成到第一设备中,而数据存储装置176和逻辑178可以被集成到可通信地耦接到第一设备的第二设备中。其它示例也是可能的。
传感器172可以是陀螺仪或者加速度计,并且可以被配置成确定和测量设备170的方位和/或加速度。
处理器174可以是或者可以包括一个或多个通用处理器和/或专用处理器,并且可以被配置成基于所接收到的数据计算显示的图像。处理器174可以被配置成对传感器172确定的方位、移动或者加速度进行分析从而产生输出。
在一个示例中,逻辑178可以由处理器174执行以执行图形用户界面(GUI)的功能。GUI、或其它类型的界面可以包括项目,比如显示器上的图形图标。项目可以对应于应用图标,其中,如果用户选择特定图标,则由那个图标表示的应用将显现。因此,当选择了图标时,指令被处理器174执行,以便执行包括例如运行程序或者显示应用在内的功能。因此,处理器174可以被配置成基于设备170的移动而引起所述项目移动。在这个示例中,处理器174可以使设备170的移动与项目的移动相关联。
输出接口180可以被配置成将输出发送到显示器184。为此,输出接口180可以通过有线的或者无线的链路可通信地耦接到显示器184。在从输出接口180接收到所述输出之时,显示器184可以向用户显示所述输出。
在一些实施例中,设备170也可以包括电源,比如电池或者电源适配器。在一个实施例中,设备170可以通过有线的或者无线的链路连接到电源。其它示例也是可能的。设备170可以包括代替那些示出的元件的元件或者除了那些示出的元件之外的元件。
图2图示了用于接收、发送以及显示数据的示例设备200。以可佩戴计算设备的形式示出了设备200,并且设备200可以用作图1A和图1B的设备104或者设备160。虽然图2图示了眼镜202作为可佩戴计算设备的示例,但是可以附加地或者可替换地使用其它类型的可佩戴计算设备。如图2中图示的,眼镜202包括框架元件、透镜元件210和212以及延伸侧臂214和216,所述框架元件包括透镜框架204和206以及中心框架支撑208。中心框架支撑208以及延伸侧臂214和216被配置成分别经由用户的鼻子和耳朵将眼镜202固定到用户面部。框架元件204、206和208以及延伸侧臂214和216中的每一个可以由塑料或者金属的实心结构形成,或者可以由类似材料的空心结构形成,从而允许配线和组件互连在内部按一定路线通过眼镜202。透镜元件210和212中的每一个可以由能够合适地显示投影的图像或者图形的任意材料形成。透镜元件210和212中的每一个也可以充分地透明以允许用户看穿透镜元件。组合透镜元件的这两个特征可以促进增强现实或者抬头显示,其中,投影的图像或者图形被叠加在用户通过透镜元件感知到的真实世界的视图上。
延伸侧臂214和216各自是分别从框架元件204和206延伸开的突出物,并且被定位在用户的耳后以将眼镜202固定到用户。延伸侧臂214和216还可以通过绕着用户头部的后部延伸来将眼镜202固定到用户。附加地或者可替换地,例如,设备200可以连接到头戴式头盔结构或者附着到头戴式头盔结构内。也存在其它可能性。
设备200也可以包括机载计算系统218、摄像机220、传感器222以及手指可操作触摸板224、226。机载计算系统218被示出为位于眼镜202的延伸侧臂214上;然而,机载计算系统218可以设在眼镜202的其它部件上。机载计算系统218例如可以包括处理器以及存储器。机载计算系统218可以被配置成接收并分析来自摄像机220和手指可操作触摸板224、226(以及可能来自其它传感设备、用户接口或者这两者)的数据并且生成图像以用于从透镜元件210和212输出。
摄像机220被示出为位于眼镜202的延伸侧臂214上;然而,摄像机220可以设在眼镜202的其它部件上。摄像机220可以被配置成以各种分辨率或者以不同的帧速率捕获图像。例如,许多具有小成形要素的摄像机,比如在蜂窝电话或者网络摄像头中使用的那些摄像机,可以被包含到设备200的示例中。虽然图2图示了一个摄像机220,但是可以使用多个摄像机,并且每一个可以被配置成捕获相同的视图,或者捕获不同的视图。例如,摄像机220可以是前向的以捕获用户感知的真实世界视图的至少一部分。然后,这个摄像机120捕获的前向图像可以被用来生成增强现实,其中,计算机生成的图像看起来与用户感知的真实世界视图交互。
传感器222被示出为装配在眼镜202的延伸侧臂216上;然而,传感器222可以设在眼镜202的其它部件上。传感器222例如可以包括陀螺仪或者加速度计中的一个或多个。在传感器222内可以包括其它感测器件或者传感器222可以执行其它感测功能。
手指可操作触摸板224、226被示出为装配在眼镜202的延伸侧臂214、216上。手指可操作触摸板224、226中的每一个可以被用户用来输入命令。手指可操作触摸板224、226可以经由电容感测、电阻感测或者表面声波处理等等感测手指的位置和移动中的至少一者。手指可操作触摸板224、226可以能够感测在与板表面平行或在同一平面内的方向上、在与板表面垂直的方向上或者在这两个方向上的手指移动,并且也可以能够感测施加的压力水平。手指可操作触摸板224、226可以由一个或多个半透明的或者透明的绝缘层以及一个或多个半透明的或者透明的导电层组成。手指可操作触摸板224、226的边缘可以被形成为具有凸起的、内凹的或者粗糙的表面,从而在用户的手指到达手指可操作触摸板224、226的边缘时向用户提供触觉反馈。手指可操作触摸板224、226中的每一个可以被独立地操作,并且可以提供不同的功能。
图3图示了图2的设备200的替换视图。如图3中所示,透镜元件210和212可以充当显示元件。眼镜202可以包括第一投影仪228,所述第一投影仪228耦接到延伸侧臂216的内表面并且被配置成将显示230投影到透镜元件212的内表面上。附加地或者可替换地,第二投影仪232可以耦接到延伸侧臂214的内表面并且被配置成将显示234投影到透镜元件210的内表面上。
透镜元件210和212可以充当光投影系统中的组合器(combiner)并且可以包括涂层,所述涂层反射从投影仪228和232投影到它们之上的光。在一些实施例中,可以不使用特殊涂层(例如,当投影仪228和232是扫描激光设备时)。
在替换实施例中,也可以使用其它类型的显示元件。例如,透镜元件210、212本身可以包括:比如电致发光显示器或者液晶显示器的透明的或者半透明的矩阵显示器,用于将图像输送到用户眼睛的一个或多个波导、或者能够将焦距对准的近眼式图像输送给用户的其它光学元件。相应的显示驱动器可以被布置在框架元件204和206内以用于驱动这种矩阵显示器。可替换地或者附加地,激光器或者LED光源和扫描系统可用于将光栅显示直接描画到用户的一只或者两只眼睛的视网膜上。也存在其它可能性。
2、显示方法的示例实施例
图4是依据本申请的一个方面的用于将用户头部移动传送到用户界面通信的说明性的方法400的流程图。图4中示出的方法400呈现了方法的实施例,所述实施例例如能够与系统100和150一起使用。方法400可以包括如块410-490中的一个或多个所图示的一个或多个操作、功能或者动作。虽然按先后顺序图示了所述块,但是也可以并行地和/或以与这里描述的那些顺序不同的顺序执行这些块。此外,所述各种块可以基于期望的实现方式被组合成更少的块、分解成附加的块、和/或被去除。
另外,对于这里公开的方法400及其它过程和方法,所述流程图示出了本实施例的一个可能的实现方式的功能和操作。在这点上,每个块可以表示程序代码的模块、片段、或者部分,所述程序代码包括可由处理器执行以用于实现过程中的特定逻辑功能或者步骤的一个或多个指令。所述程序代码可以被存储在任意类型的计算机可读介质上,诸如例如,包括磁盘或者硬盘驱动器在内的存储设备。所述计算机可读介质可以包括非暂态计算机可读介质,诸如例如,像寄存器存储器、处理器高速缓存和随机存取存储器(RAM)那样的短时间存储数据的计算机可读介质。所述计算机可读介质也可以包括非暂态介质,诸如例如像只读存储器(ROM)、光盘或者磁盘、致密盘只读存储器(CD-ROM)那样的次级或永久性长期存储装置。所述计算机可读介质也可以是任意其它易失性的或者非易失性的存储系统。所述计算机可读介质例如可以被认为是计算机可读存储介质、有形存储设备或者其它制品。
另外,对于这里公开的方法400及其它过程和方法,图4中的每个块可以代表被接线以执行过程中的特定逻辑功能的电路。
最初,方法400包括,在块410中,确定在第一位置的头部方位。传感器可以被配置成进行所述确定。所述传感器可以是被配置成测量用户头部方位的陀螺仪。所述陀螺仪可以以各种各样的配置装配在用户的头部上,并且可以是如先前参照图1C和图2-3所述的设备的一部分。例如,所述陀螺仪可以在用户佩戴的一副护目镜或者眼镜上。
然后,方法400包括,在块420中,接收对在第一位置的头部方位的测量结果。
方法400包括,在块430中,确定在第二位置的头部方位。用户可以进行移动,比如移动他或她的头。举例来说,用户可以将他或她的头从第一位置倾斜到第二位置。在一个示例中,头部倾斜的方向是使用户的耳朵向用户的肩部移动的方向。如先前所讨论的,传感器可以被配置成进行对头部方位的确定。所述传感器可以被配置成:如果用户向特定侧倾斜,诸如例如朝用户的右肩倾斜,则确定对用户头部的测量结果。然而,在替换实施例中,所述传感器可以被配置成:当头部向任一方向倾斜时都确定对用户头部位置的测量结果,从而当用户朝左肩或者朝右肩倾斜头部时都可以进行测量。
方法400包括在块440中接收对第二位置的头部方位的测量结果。计算设备,诸如例如图1A和1B的计算设备102或者152,可以接收这个对头部移动的指示。
方法400包括使在第二位置的头部方位与一行项目的移动相关联;这在块450中示出。在计算设备内的处理器可以被配置成处理方位数据并且执行关联(correlation)。所述关联可以基于第二测量结果与第一测量结果的比较,从而基于第一测量结果和第二测量结果之间的差来确定该行项目将被确定移动的量。
接着,在块460中,所述处理器可以被配置成执行引起该行项目移动的指令。所述处理器可以被配置成执行引起该行项目在头部方位的相同方向上移动的指令,从而使头部方位与该行项目相关联。
所述关联可以是,不管倾斜度是多少,用户头部的倾斜将导致该行项目移位预定数量的项目或者移位预定距离。在本实施例中,不考虑用户头部在第二位置的精确方位。
在替换实施例中,所述关联可以使得头部倾斜度与在所述行中移位的项目的数量相关联。然后,在处理器内,各种倾斜度可以被分配给移位的项目数量。结果,如果用户将他或她的头部倾斜特定程度,则处理器将基于该特定程度或者头部位置来确定应当移位一行项目中的多少项目。在本实施例中,可以将头部倾斜度或者头部位置的范围分配给将该行项目移位的项目数量。可以提供这样的表:其将头部倾斜或者头部方位的特定程度与将该行项目移位的项目数量相关联。
另外,所述处理器可以被配置成使用关于用户头部方位的数据来确定旋转用户界面的度数。
此外,可以在用户界面上突出显示该行项目中的项目之一。突出显示功能可以被配置成突出显示存在于界面上的特定位置处的项目。当该行中的项目移位时,随着新项目移入突出显示的位置,可以突出显示新项目。在移位中同样被移动的先前突出显示的项目不再处于突出显示的位置中,因此不再被突出显示。
在一个示例中,如果用户想要选择突出显示的项目,则用户可以点头(例如,用户头部的向下运动,其中,用户的下巴向用户的颈部移动)从而头部移动到第三位置。可以考虑其它头部移动来选择项目,诸如例如用户摇头。然后,方法400包括在块470中确定在第三位置的头部方位。
方法400包括在块480中接收对在第三位置的头部方位的测量结果。如上所述,计算设备,诸如例如图1A和1B的计算设备102或者152,可以接收这个对头部移动的指示。
接下来,方法400包括执行引起对项目的选择的指令,如块490中所示。
图5是依据申请的一个方面的用于将用户头部移动传动到用户界面的说明性的方法500的流程图。图5中示出的方法500呈现了方法的实施例,所述实施例例如能够与系统100和150一起使用。方法500可以包括如块510-560中的一个或多个图示的一个或多个操作、功能或者动作。虽然按先后顺序图示了所述块,但是也可以并行地和/或以与这里描述的那些顺序不同的顺序执行这些块。此外,各个块可以基于期望的实现方式被组合成更少的块、分解成附加的块、和/或被去除。
最初,方法500包括在块510中确定在第一位置的头部移动的加速度。例如,比如加速度计的仪器可以被用来确定用户头部的动作的加速度。在块510中,所述加速度很可能是可以忽略的,因为假定用户还没有倾斜或者以另外的方式移动他或她的头。所述加速度计可以以各种各样的配置装配在用户的头部上,并且可以是如先前参照图1C和图2-3的传感器所述的设备的一部分。
方法500包括在块520中接收对在第一位置的移动加速度的确定。
然后,所述方法包括在块530中确定从第一位置到第二位置的头部移动的加速度。用户可以进行移动,比如移动头部。举例来说,用户可以将头部从第一位置倾斜到第二位置。在一个示例中,头部倾斜的方向使得用户的耳朵向用户的肩部移动。所述传感器可以被配置成随着用户倾斜头部,跟踪用户移动的加速度。
所述方法包括在块540中接收对从第一位置到第二位置的移动的加速度的确定。
所述方法包括在块550中将确定的从第一位置到第二位置的加速度与显示器上的一行项目的移动相关联。在计算设备内的处理器可以被配置成处理加速度数据并且执行使所述加速度与该行项目的移动相关联的指令。所述关联使得当用户头部方位为第一位置并且加速度是零或者可以忽略时,该行项目是静止的。
接着,所述方法包括在块560中执行引起该行项目移动的指令。例如,处理器可以执行引起用户界面上显示的该行项目中的项目以与块530中确定的加速度相当的速率移位的指令。
在替换实施例中,陀螺仪和加速度计两者都可以存在,从而陀螺仪确定不同的头部方位而加速度计确定头部移动的不同加速度。计算设备,比如参照图1A和图1B所讨论的计算设备,可以被配置成接收所述确定并且执行使一行项目的移动与所述确定相关联的指令,如图4和图5中所叙述的。计算设备还可以被配置成执行以下指令:其引起该行项目的移动以及对项目的选择,如关于图4所讨论的,并且引起所述移动以与所确定的加速度相当的加速度发生,如关于图5所讨论的。因此,当在实施例中存在陀螺仪和加速度计两者时,可以组合图4和图5的方法。
3、在用户界面上的项目的示例显示
图6A是在第一位置中的设备600的示例用户界面。在一个实施例中,设备600可以是在其上显示用户界面610的可佩戴的物品,比如一副护目镜或者眼镜。例如,设备600可以是比如参照图1C和图2-3所述的设备。在替换实施例中,用户界面610可以被投影到分离的屏幕上,并且因此用户界面610可以不存在于任意用户可佩戴的设备上。
多个项目612可以存在于用户界面610上,并且可以在一行中显示项目612。图6A中示出了七个项目612,但是在用户界面610上可以显示任意数量的项目。项目612被编号为1-7;这个编号仅仅是为了示出项目如何从它们在图6A中的位置移动到它们在图6B中的位置。项目612可以对应于应用图标,从而如果用户选择特定图标,则那个图标所代表的应用将显现在用户界面610上。当选择了图标时,处理器执行指令以执行包括运行程序或者显示应用在内的功能。
图6A图示了在设备的处理器执行引起项目612移位的指令之前(诸如例如在图4中的块460或者图5中的块560之前)的用户界面610。
图6B是在第二位置的图6A的设备的示例用户界面。在图6B中,示出了在处理器执行了引起项目612移位或者移动的指令(诸如例如像在图4中的块460或者图5中的块560那样)之后的用户界面610。在图6B中,项目612已经在箭头614的方向上或者向右移位了一个项目。因此,被标注为“0”的新的项目612显现,其取代被标注为“1”的项目612成为在用户界面610上可见的最左的项目。类似地,被标注为“7”的项目612不再显现在用户界面612上,因为它已经向右移位并且离开用户界面610,所以被标注为“6”的项目612现在是在用户界面610上的最后的可见的项目。
在图6B中示出的实施例中,对于用户来说,好像该行项目612已经在用户头部方位的方向上进行了移动(在这种情形下,用户头部向右倾斜)。
图6C是在示例性的可替换的第二位置的图6A的设备的示例用户界面。图6C图示了对于用户来说好像是显示器与用户头部移动相对应移动、而不是该行项目移动的实施例。在图6C中示出的示例中,示出了在处理器执行了引起项目612移位或者移动的指令(诸如例如像在图4中的块460或者图5中的块560那样)之后的用户界面610。在图6C中,项目612已经在箭头615的方向上或者向左移位了一个项目。因此,被标注为“1”的项目612不再是用户界面610上可见的最左的项目,被标注为“2”的项目612现在是可见的最左的项目。被标注为“1”的项目612不再显现在用户界面612上,因为它已经向左移位并且离开用户界面610。类似地,被标注为“7”的项目612不再是可见的最右的项目,被标注为“8”的新项目612显现在用户界面610上并且现在是最右的可见的项目。在本实施例中,对于用户来说,好像是屏幕、而不是该行项目612在用户头部方位的方向上进行了移动(在这种情形下,用户头部向右倾斜)。
图7是图示依据这里描述的至少一些实施例安排的计算系统中使用的示例计算设备的功能框图。所述计算设备可以是个人计算机、移动设备、蜂窝电话、视频游戏系统或者全球定位系统。在非常基本的配置701中,计算设备700典型地可以包括一个或多个处理器710和系统存储器720。存储器总线730能被用于处理器710和系统存储器720之间的通信。取决于所期望的配置,处理器710可以属于包括但不限于微处理器(μP)、微控制器(μC)、数字信号处理器(DSP)或者它们的任意组合的任意类型。存储控制器715可以与处理器710一起使用,或者在一些实现方式中,存储控制器715可以是处理器710的内部部件。
取决于所期望的配置,系统存储器720可以属于包括但不限于易失性存储器(比如RAM)、非易失性存储器(比如ROM、快闪存储器等等)或者它们的任意组合的任意类型。系统存储器720典型地包括一个或多个应用722以及程序数据724。依据本公开,应用722可以包括被安排为将输入提供给电子电路的显示确定723。程序数据724可以包括能够将图像数据提供到所述电子电路的图像数据725。在一些示例实施例中,应用722可以被安排为在操作系统721上与程序数据724一起工作。在图7中,虚线701内的这些组件图示了所述的基本配置。
计算设备700可以具有附加的特征或者功能以及促进基本配置701与任何设备和接口之间的通信的附加的接口。例如,数据存储设备750可以是可移除存储设备751、不可移除存储设备752或者它们的组合。仅举几个例子,可移除存储设备和不可移除存储设备的示例包括:磁盘设备,比如软盘驱动器和硬盘驱动器(HDD);光盘驱动器,比如致密盘(CD)驱动器或者数字多功能盘(DVD)驱动器;固态驱动器(SSD);以及磁带驱动器。计算机存储介质可以包括用于信息存储的以任意方法或者技术实现的易失性的和非易失性的、可移除的和不可移除的介质,所述信息比如计算机可读指令、数据结构、程序模块或者其它数据。
系统存储器720、可移除存储装置751以及不可移除存储装置752全部都是计算机存储介质的示例。计算机存储介质包括但是不局限于RAM、ROM、EEPROM、快闪存储器或者其它存储器技术;CD-ROM、数字多功能盘(DVD)或者其它光学存储装置;盒式磁带、磁带、磁盘存储装置或者其它磁存储装置;或者可用于存储所期望的信息并且可被计算设备700访问的任意其它介质。任意这样的计算机存储介质可以是设备700的一部分。
计算设备700还可以包括输出接口760,所述输出接口760可以包括图形处理单元761,所述图形处理单元761可以被配置成经由一个或多个A/V端口763或者通信接口780向比如显示设备792或者扬声器的各种外部设备通信。通信接口780可以包括网络控制器781,所述网络控制器781可以被安排为便利经由一个或多个通信端口782、通过网络通信与一个或多个其它计算设备790的通信。通信连接是通信介质的一个示例。通信介质典型地可以通过比如载波或者其它传送机制的经调制的数据信号中的计算机可读指令、数据结构、程序模块或者其它数据来具体实现,并且包括任意信息输送介质。“经调制的数据信号”可以是如下信号:其特性中的一个或多个被以在该信号中编码信息的方式设置或者改变。作为示例而非限制,通信介质可以包括:有线介质,比如有线网络或者直接有线连接(direct-wired connection);以及无线介质,比如声音、射频(RF)、红外(IR)及其它无线介质。这里使用的术语“计算机可读介质”可以包括存储介质及通信介质两者。
计算设备700可以被实现为小形状要素(small-form factor)的便携式(或者移动)电子设备的一部分,所述小形状要素的便携式(或者移动)电子设备比如蜂窝电话、个人数据助理(PDA)、个人媒体播放器设备、无线网络监视设备(wireless web-watch device)、个人头戴式耳机设备(personal headsetdevice)、特定应用设备或者包括任意上述功能的混合设备。计算设备700也可以被实现为包括膝上型计算机和非膝上型计算机配置两者的个人计算机。
在一些实施例中,所公开的方法可以被实现为以机器可读的格式编码在计算机可读存储介质上的计算机程序指令。图8是图示示例计算机程序产品800的概念性部分视图的示意图,所述计算机程序产品800包括用于在根据这里呈现的至少一些实施例安排的计算设备上执行计算机过程的计算机程序。在一个实施例中,使用信号承载介质(signal bearing medium)801来提供示例计算机程序产品800。信号承载介质801可以包括当由一个或多个处理器执行时可以提供上面关于图1-7所述的功能或者功能的一部分的一个或多个编程指令802。因此,参考图4和图5中所示的实施例,块400-495和500-595中的一个或多个特征可以通过与信号承载介质801关联的一个或多个指令来进行。
在一些示例中,信号承载介质801可以包含计算机可读介质803,比如但不限于硬盘驱动器、致密盘(CD)、数字视频盘(DVD)、数字磁带、存储器等等。在一些实现方式中,信号承载介质801可以包括计算机可记录介质804,比如但不限于存储器、读/写(R/W)CD、R/W DVD等等。在一些实现方式中,信号承载介质801可以包括通信介质805,比如但不限于数字和/或模拟通信介质(例如,光缆、波导、有线通信链路、无线通信链路等等)。因此,例如,信号承载介质801可以通过无线形式的通信介质805(例如,符合IEEE802.11标准或者其它传输协议的无线通信介质)来传送。
一个或多个编程指令802例如可以是计算机可执行的和/或逻辑实现的指令。在一些示例中,比如图7的计算设备700那样的计算设备可以被配置成响应于通过计算机可读介质803、计算机可记录介质804和/或通信介质805中的一个或多个传送到计算设备700的编程指令802来提供各种操作、功能或者动作。
在一些示例中,上述实施例使用户能够无须用手地与用户界面通信,从而给用户提供不用在进行其它任务的同时在设备上打字的自由,以及以更自然的方式收集和传递信息的能力。
还应当理解,这里描述的安排仅仅是出于示例的目的。因而,本领域技术人员将理解,可以代替地使用其它安排及其它元件(例如机器、接口、功能、顺序以及功能的分组等等),并且可以根据所期望的结果而完全省略一些元件。此外,所述的元件中的许多元件是可以以任意适当的组合和位置被实现为分立的或者分布式的组件或者与其它组件结合的功能实体。
本公开不受本申请中描述的意图作为各种方面的例示的特定实施例的术语的限制。本领域技术人员将清楚,可以在不脱离本公开的精神和范围的情况下进行许多更改和变化。除了那些这里枚举的方法及装置之外,对于本领域技术人员来说,根据上述描述,在本公开的范围内的功能上等同的方法及装置将是明显的。这样的更改和变化的意图落入权利要求的范围内。
尽管这里公开了各种方面和实施例,但其它方面和实施例对本领域技术人员来说将是明显的。这里公开的各种方面和实施例是出于例示的目的,并不意图限制,其中,权利要求指示真实的范围和精神以及这样的权利要求有权要求的等同物的完整范围。也将会理解,这里使用的术语仅仅出于描述特定实施例的目的,并非意图限制。

Claims (22)

1.一种使头部移动与在用户界面上显示的项目列表相关联的方法,所述方法包括:
接收指示用户头部的第一方位的第一测量结果;
接收指示用户头部的第二方位的第二测量结果;
基于第二测量结果确定在用户界面上的至少一个项目的移动;以及
基于所述确定引起所述至少一个项目移动。
2.如权利要求1所述的方法,其中,所述用户界面在抬头显示器上。
3.如权利要求1所述的方法,还包括:将第二测量结果与第一测量结果进行比较,以及基于第一测量结果和第二测量结果之间的差确定所述至少一个项目的移动。
4.如权利要求1所述的方法,还包括:依据第二测量结果执行旋转用户界面的指令。
5.如权利要求1所述的方法,其中,接收指示用户头部的第二方位的第二测量结果是接收指示用户头部的倾斜、从而用户一侧的耳朵向用户同侧的肩部移动的测量结果。
6.如权利要求1所述的方法,其中,引起所述至少一个项目移动包括移动一行项目中的每个项目。
7.如权利要求1所述的方法,还包括:从陀螺仪接收第一测量结果和第二测量结果。
8.如权利要求1所述的方法,还包括:从加速度计接收当用户头部从第一方位移动到第二方位之时用户头部移动的加速度。
9.如权利要求8所述的方法,还包括:
接收对用户头部移动的加速度的测量结果;
基于对用户头部移动的加速度的测量结果来确定在用户界面上的所述至少一个项目的移动的加速度;以及
引起所述至少一个项目以所确定的加速度移动。
10.如权利要求8所述的方法,其中,引起所述至少一个项目移动包括:基于第一测量结果和第二测量结果之间的差来使所述至少一个项目移位。
11.如权利要求1所述的方法,其中,基于所述确定引起所述至少一个项目移动包括:在一方向上使一行项目中的至少一个项目移位,其中,所述方向是依据第二方位的。
12.如权利要求1所述的方法,其中,基于所述确定引起所述至少一个项目移动包括向左移动一行项目中的每个项目。
13.如权利要求11所述的方法,还包括:
接收指示用户头部的第三方位的第三测量结果;
基于第三测量结果确定对用户界面上的给定项目的选择;以及
引起所述给定项目被选择。
14.一种包括在其上编码有计算机可读指令的有形计算机可读介质的制品,所述指令包括:
接收指示用户头部的第一方位的第一测量结果;
接收指示用户头部的第二方位的第二测量结果;
基于所接收到的指示用户头部的第二方位的测量结果确定在用户界面上显示的一行项目中的至少一个项目的移动;以及
依据所述确定引起所述至少一个项目移动。
15.如权利要求14所述的制品,其中,所述制品是抬头显示器设备。
16.如权利要求14所述的制品,其中,所述指令还包括用于从陀螺仪接收用户头部的第一方位和第二方位的指令。
17.如权利要求14所述的制品,所述指令还包括:从加速度计接收当用户头部从第一方位移动到第二方位之时用户头部移动的加速度。
18.如权利要求17所述的制品,所述指令还包括:
接收对用户头部移动的加速度的测量结果;
基于对用户头部移动的加速度的测量结果来确定在用户界面上的至少一个项目的移动的加速度;以及
引起所述至少一个项目以与所确定的加速度相当的加速度移动。
19.如权利要求14所述的制品,其中,依据所述确定引起所述至少一个项目移动的指令包括:在一方向上使一行项目中的至少一个项目移位,其中,所述方向是依据所述方位的。
20.一种系统,包括:
处理器;
至少一个传感器;
数据存储装置;以及
机器语言指令,其被存储在所述数据存储装置上,可由所述处理器执行以执行包括以下各项的功能:
从所述至少一个传感器接收指示用户头部的第一方位的第一测量结果;
从所述至少一个传感器接收指示用户头部的第二方位的第二测量结果;
基于第二测量结果确定在用户界面上的列表中显示的至少一个项目的移动;以及
依据所述确定引起所述至少一个项目移动。
21.如权利要求19所述的系统,其中,所述用户界面存在于抬头显示器设备上。
22.如权利要求19所述的系统,其中,所述至少一个传感器包括陀螺仪以及加速度计,并且其中,所述指令还包括:
当用户头部从第一方位移动到第二方位之时,使用加速度计获得对用户头部移动的加速度的测量结果;
接收对用户头部移动的加速度的测量结果;
基于对用户头部移动的加速度的测量结果来确定在用户界面上显示的至少一个项目的移动的加速度;以及
引起所述至少一个项目以所确定的加速度移动。
CN201280042503.4A 2011-06-28 2012-06-27 使头部移动和在用户界面上显示的项目相关联的方法及系统 Active CN103765366B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/170,949 US20130007672A1 (en) 2011-06-28 2011-06-28 Methods and Systems for Correlating Head Movement with Items Displayed on a User Interface
US13/170,949 2011-06-28
PCT/US2012/044323 WO2013003414A2 (en) 2011-06-28 2012-06-27 Methods and systems for correlating head movement with items displayed on a user interface

Publications (2)

Publication Number Publication Date
CN103765366A true CN103765366A (zh) 2014-04-30
CN103765366B CN103765366B (zh) 2017-05-03

Family

ID=47392036

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280042503.4A Active CN103765366B (zh) 2011-06-28 2012-06-27 使头部移动和在用户界面上显示的项目相关联的方法及系统

Country Status (4)

Country Link
US (1) US20130007672A1 (zh)
EP (1) EP2726968A4 (zh)
CN (1) CN103765366B (zh)
WO (1) WO2013003414A2 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105867608A (zh) * 2015-12-25 2016-08-17 乐视致新电子科技(天津)有限公司 虚拟现实头盔的功能菜单翻页方法、装置及头盔
CN105955470A (zh) * 2016-04-26 2016-09-21 乐视控股(北京)有限公司 一种头盔显示器的控制方法及装置
CN106200954A (zh) * 2016-07-06 2016-12-07 捷开通讯(深圳)有限公司 虚拟现实系统和虚拟现实眼镜的控制方法
CN106249870A (zh) * 2015-06-15 2016-12-21 哈曼国际工业有限公司 无源磁性头部跟踪器
CN108475117A (zh) * 2016-04-13 2018-08-31 谷歌有限责任公司 在虚拟现实环境内导航的方法和装置
CN110968188A (zh) * 2018-09-28 2020-04-07 苹果公司 基于头部位置的应用程序放置
CN112789586A (zh) * 2018-10-03 2021-05-11 索尼公司 信息处理设备、信息处理方法和程序
US11521581B2 (en) 2019-09-26 2022-12-06 Apple Inc. Controlling displays
US11800059B2 (en) 2019-09-27 2023-10-24 Apple Inc. Environment for remote communication
US12003890B2 (en) 2023-08-08 2024-06-04 Apple Inc. Environment for remote communication

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130265169A1 (en) * 2012-04-10 2013-10-10 Russell F. Mates Eyewear Device Configured To Track Head Movement
US20130339859A1 (en) 2012-06-15 2013-12-19 Muzik LLC Interactive networked headphones
US9977492B2 (en) * 2012-12-06 2018-05-22 Microsoft Technology Licensing, Llc Mixed reality presentation
US9041741B2 (en) * 2013-03-14 2015-05-26 Qualcomm Incorporated User interface for a head mounted display
US9401048B2 (en) 2013-03-15 2016-07-26 Qualcomm Incorporated Methods and apparatus for augmented reality target detection
US9213403B1 (en) 2013-03-27 2015-12-15 Google Inc. Methods to pan, zoom, crop, and proportionally move on a head mountable display
JP5983499B2 (ja) * 2013-03-29 2016-08-31 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
US9361501B2 (en) 2013-04-01 2016-06-07 Ncr Corporation Headheld scanner and POS display with mobile phone
US9146618B2 (en) 2013-06-28 2015-09-29 Google Inc. Unlocking a head mounted device
KR102161510B1 (ko) * 2013-09-02 2020-10-05 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
CN103699219B (zh) * 2013-12-06 2017-07-14 中国科学院深圳先进技术研究院 一种智能眼镜交互系统及智能交互方法
US9442631B1 (en) 2014-01-27 2016-09-13 Google Inc. Methods and systems for hands-free browsing in a wearable computing device
GR20140100195A (el) * 2014-04-07 2015-12-09 Μιλτο Λαζαρ Νανουσης Γυαλια ποντικι και πληκτρολογιο
US9323983B2 (en) 2014-05-29 2016-04-26 Comcast Cable Communications, Llc Real-time image and audio replacement for visual acquisition devices
WO2016168786A1 (en) 2015-04-17 2016-10-20 Tulip Interfaces, Inc. Augmented interface authoring
DE102015116862A1 (de) * 2015-10-05 2017-04-06 Knorr-Bremse Systeme für Schienenfahrzeuge GmbH Vorrichtung und Verfahren zur adaptiven Gleitschutzsteuerung
JP6518582B2 (ja) * 2015-12-21 2019-05-22 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および操作受付方法
US10044925B2 (en) 2016-08-18 2018-08-07 Microsoft Technology Licensing, Llc Techniques for setting focus in mixed reality applications
US10936872B2 (en) 2016-12-23 2021-03-02 Realwear, Inc. Hands-free contextually aware object interaction for wearable display
US11507216B2 (en) 2016-12-23 2022-11-22 Realwear, Inc. Customizing user interfaces of binary applications
US10437070B2 (en) 2016-12-23 2019-10-08 Realwear, Inc. Interchangeable optics for a head-mounted display
US10620910B2 (en) 2016-12-23 2020-04-14 Realwear, Inc. Hands-free navigation of touch-based operating systems
US11099716B2 (en) 2016-12-23 2021-08-24 Realwear, Inc. Context based content navigation for wearable display
US10393312B2 (en) 2016-12-23 2019-08-27 Realwear, Inc. Articulating components for a head-mounted display
CA3052869A1 (en) 2017-02-17 2018-08-23 Nz Technologies Inc. Methods and systems for touchless control of surgical environment
US10489951B2 (en) 2017-09-29 2019-11-26 Qualcomm Incorporated Display of a live scene and auxiliary object
US11797081B2 (en) * 2021-08-20 2023-10-24 Huawei Technologies Co., Ltd. Methods, devices and media for input/output space mapping in head-based human-computer interactions

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579026A (en) * 1993-05-14 1996-11-26 Olympus Optical Co., Ltd. Image display apparatus of head mounted type
US20050256675A1 (en) * 2002-08-28 2005-11-17 Sony Corporation Method and device for head tracking
US20060048076A1 (en) * 2004-08-31 2006-03-02 Microsoft Corporation User Interface having a carousel view
CN101751219A (zh) * 2008-12-05 2010-06-23 索尼爱立信移动通信日本株式会社 终端装置、显示控制方法和显示控制程序
US20100259471A1 (en) * 2007-11-16 2010-10-14 Nikon Corporation Control device, head-mount display device, program, and control method

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69432199T2 (de) * 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
US6157382A (en) * 1996-11-29 2000-12-05 Canon Kabushiki Kaisha Image display method and apparatus therefor
AU2211799A (en) * 1998-01-06 1999-07-26 Video Mouse Group, The Human motion following computer mouse and game controller
GB9917591D0 (en) * 1999-07-28 1999-09-29 Marconi Electronic Syst Ltd Head tracker system
KR101534789B1 (ko) * 2008-05-28 2015-07-07 구글 인코포레이티드 모바일 컴퓨팅 디바이스에서의 모션-컨트롤 뷰
CN102112943A (zh) * 2008-08-07 2011-06-29 皇家飞利浦电子股份有限公司 确定用户头部运动/注视关系的方法和系统以及交互式显示系统
US20110214082A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579026A (en) * 1993-05-14 1996-11-26 Olympus Optical Co., Ltd. Image display apparatus of head mounted type
US20050256675A1 (en) * 2002-08-28 2005-11-17 Sony Corporation Method and device for head tracking
US20060048076A1 (en) * 2004-08-31 2006-03-02 Microsoft Corporation User Interface having a carousel view
US20100259471A1 (en) * 2007-11-16 2010-10-14 Nikon Corporation Control device, head-mount display device, program, and control method
CN101751219A (zh) * 2008-12-05 2010-06-23 索尼爱立信移动通信日本株式会社 终端装置、显示控制方法和显示控制程序

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106249870A (zh) * 2015-06-15 2016-12-21 哈曼国际工业有限公司 无源磁性头部跟踪器
CN105867608A (zh) * 2015-12-25 2016-08-17 乐视致新电子科技(天津)有限公司 虚拟现实头盔的功能菜单翻页方法、装置及头盔
CN108475117B (zh) * 2016-04-13 2021-11-23 谷歌有限责任公司 在虚拟现实环境内导航的方法和装置
CN108475117A (zh) * 2016-04-13 2018-08-31 谷歌有限责任公司 在虚拟现实环境内导航的方法和装置
CN105955470A (zh) * 2016-04-26 2016-09-21 乐视控股(北京)有限公司 一种头盔显示器的控制方法及装置
CN106200954B (zh) * 2016-07-06 2019-08-23 捷开通讯(深圳)有限公司 虚拟现实系统和虚拟现实眼镜的控制方法
CN106200954A (zh) * 2016-07-06 2016-12-07 捷开通讯(深圳)有限公司 虚拟现实系统和虚拟现实眼镜的控制方法
CN110968188B (zh) * 2018-09-28 2022-05-03 苹果公司 基于头部位置的应用程序放置
CN110968188A (zh) * 2018-09-28 2020-04-07 苹果公司 基于头部位置的应用程序放置
US11366514B2 (en) 2018-09-28 2022-06-21 Apple Inc. Application placement based on head position
US11960641B2 (en) 2018-09-28 2024-04-16 Apple Inc. Application placement based on head position
CN112789586A (zh) * 2018-10-03 2021-05-11 索尼公司 信息处理设备、信息处理方法和程序
US11521581B2 (en) 2019-09-26 2022-12-06 Apple Inc. Controlling displays
US11893964B2 (en) 2019-09-26 2024-02-06 Apple Inc. Controlling displays
US11800059B2 (en) 2019-09-27 2023-10-24 Apple Inc. Environment for remote communication
US12003890B2 (en) 2023-08-08 2024-06-04 Apple Inc. Environment for remote communication

Also Published As

Publication number Publication date
EP2726968A4 (en) 2015-02-25
CN103765366B (zh) 2017-05-03
EP2726968A2 (en) 2014-05-07
US20130007672A1 (en) 2013-01-03
WO2013003414A3 (en) 2013-02-28
WO2013003414A2 (en) 2013-01-03

Similar Documents

Publication Publication Date Title
CN103765366A (zh) 使头部移动和在用户界面上显示的项目相关联的方法及系统
US11670267B2 (en) Computer vision and mapping for audio applications
CN108156441B (zh) 头戴式设备及在其中的计算机实现的方法
CN104423583B (zh) 头部佩戴型显示装置、图像显示系统及信息处理装置
KR20230026505A (ko) 객체 조작을 사용한 증강 현실 경험들
CN105339870B (zh) 用于提供虚拟输入界面的方法和可穿戴装置
US9235051B2 (en) Multi-space connected virtual data objects
US8866852B2 (en) Method and system for input detection
US11747915B2 (en) Smart ring for manipulating virtual objects displayed by a wearable device
EP3019964B1 (en) Mobile device, head mounted display and method of controlling therefor
KR20210058969A (ko) 웨어러블 또는 모바일 디바이스에서 제스처, 착용, 활동 또는 휴대 검출을 위한 신경 네트워크 시스템
CN106468950B (zh) 电子系统、便携式显示装置及导引装置
EP3521981A1 (en) Virtual object orientation and visualization
CN103718082A (zh) 具有集成的手指跟踪输入传感器的可穿戴式平视显示器
CN103733115A (zh) 具有弯曲显示和导航工具的可佩戴计算机
JP6492419B2 (ja) 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム、画像表示システム、および、情報処理装置
JP2015204616A (ja) ヘッドマウントディスプレイの提示の調整
CN104081256A (zh) 具有可调整的边界的图形界面
CN111352239A (zh) 增强现实显示设备及应用增强现实显示设备的交互方法
US11900058B2 (en) Ring motion capture and message composition system
CN117616381A (zh) 语音控制的设置和导航
EP3779893A1 (en) Image processing system showing jig arrangement
CN107924276B (zh) 电子设备及其文本输入方法
US20240143067A1 (en) Wearable device for executing application based on information obtained by tracking external object and method thereof
US20220308749A1 (en) Control apparatus, display system, method, and non-transitory computer readable medium storing program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: American California

Patentee after: Google limited liability company

Address before: American California

Patentee before: Google Inc.