CN104115100A - 头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法 - Google Patents

头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法 Download PDF

Info

Publication number
CN104115100A
CN104115100A CN201380008827.0A CN201380008827A CN104115100A CN 104115100 A CN104115100 A CN 104115100A CN 201380008827 A CN201380008827 A CN 201380008827A CN 104115100 A CN104115100 A CN 104115100A
Authority
CN
China
Prior art keywords
application program
head mounted
frontal
display
mounted display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380008827.0A
Other languages
English (en)
Other versions
CN104115100B (zh
Inventor
栗屋志伸
上野正俊
桦泽宪一
川上大介
后藤哲郎
菅野尚子
塚原翼
中川俊之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104115100A publication Critical patent/CN104115100A/zh
Application granted granted Critical
Publication of CN104115100B publication Critical patent/CN104115100B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种包括显示器和检测器的头戴式显示器。检测器被配置为检测头戴式显示器和视线中的至少一个的方向。显示器被配置为显示应用程序的输出图像，其中，应用程序基于存在正面方向的范围外的方向来选择。

Description

头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法
技术领域
本发明涉及切换和显示应用程序的输出图像的头戴式显示器、控制头戴式显示器的程序、以及头戴式显示器的控制方法。
背景技术
已知的头戴式显示器(下文称为HMD)安装在用户的头部并在用户眼前设置的显示单元上显示图像。HMD包括：不允许外部光透过显示单元并且仅允许显示图像被用户视觉识别的非透视型HMD，以及允许外部光透过显示单元并且允许显示图像被重叠在用户的视界上的透视型HMD。例如，以下PTL 1公开了作为非透视型HMD的一种“视觉装置”。
引用列表
专利文献
PTL 1：日本专利申请公开第HEI06-78248号
发明内容
技术问题
通常，诸如以上专利文献1中所描述的这种非透视型HMD等HMD可由控制器操作。但是，佩戴HMD的人在很多情况下具有有限的视界，从而由控制器操作HMD引起可用性的问题。
鉴于上述情况，期望提供一种可用性优异的头戴式显示器、用于控制头戴式显示器的程序、以及头戴式显示器的控制方法。
问题解决方案
头戴式显示器包括：显示器和检测器。检测器被配置为检测头戴式显示器和视线中的至少一个的方向。显示器被配置为显示应用程序的输出图像，其中，基于存在正面方向(front direction)的范围之外的方向选择应用程序。
效果
如上所述，根据本发明的实施方式，可提供一种可用性优异的头戴式显示器、用于控制头戴式显示器的程序、和头戴式显示器的控制方法。
附图说明
图1为示出根据本发明第一实施方式的头戴式显示器的外观的示意图。
图2为示出头戴式显示器的功能配置的方框图。
图3为示出头戴式显示器的操作的顺序图。
图4为示出头戴式显示器的方向和显示的应用程序的输出图像的示例的示意图。
图5为示出头戴式显示器的方向和以滑动方式显示的应用程序的输出图像的示意图。
图6A到图6C为示出在头戴式显示器中显示成菜单形式的应用程序的示意图。
图7为示出根据本发明第二实施方式的头戴式显示器的功能配置的方框图。
图8为示出头戴式显示器的操作的顺序图。
图9为将要显示在头戴式显示器上的应用程序的转变(transition)的示意图。
具体实施方式
(第一实施方式)
将对根据第一实施方式的头戴式显示器(下文称为HMD)进行描述。
(头戴式显示器的配置)
图1为示出HMD 100的外观的示意图，图2为示出HMD 100的功能配置的方框图。
如图1所示，HMD 100具有安装构件(mounting member，装具)102、显示单元103和壳体104。由安装构件102支撑显示单元103和壳体104。此外，安装构件102配备有耳机121。如图2所示，壳体104在其中容纳有信息管理单元141、应用程序选择器142和检测器143。
安装构件102安装在用户的头部并支撑用户眼前的显示单元103。安装构件102的形状没有特别的限制，只要能支撑显示单元103，可形成为除图1所示的眼镜形状之外的任何形状。
显示单元103可以是能够将图像显示在用户眼前的显示器并且是允许外部光透过的透视型显示器。透视型显示器的实例包括：显示由其上的摄像头所捕捉的周围图像以允许周围的视觉识别的视频透视型，并且包括具有透光性自身的光学透视型。在该实施方式中，可采用那些透视型显示器的任何类型。
显示单元103与容纳在壳体104内的信息管理单元141连接，并且能够显示由信息管理单元141在其上生成的图像。图像显示在显示单元103上的详细说明将在后面给出。
壳体104在其中容纳信息管理单元141、应用程序选择器142和检测器143。通过诸如处理器和存储器的硬件与程序之间的配合实现信息管理单元141和应用程序选择器142。如下面所详细描述的，应用程序选择器142基于检测器143的输出选择应用程序，并且信息管理单元141在显示单元103上显示由选择的应用程序生成的图像。
检测器143检测自身的方向(即，HMD 100的方向)并通过信息管理单元141向应用程序选择器142提供检测的输出。当佩戴HMD 100的用户改变头部或身体的方向时，HMD 100的方向发生变动。具体来说，检测器143可以是由加速度传感器、陀螺仪传感器和磁场传感器构成的运动传感器。另外，检测器143并不限于运动传感器，还可以是能检测HMD100的方向的传感器，比如：通过对摄像头捕捉的周围图像执行图像处理来检测HMD 100的方向的传感器。
注意，在该实施方式中，信息管理单元141、应用程序选择器142和检测器143被收纳在壳体104中。但是，他们并非必须被收纳在壳体104中。比如，信息管理单元141和应用程序选择器142可以被嵌入另一信息处理装置(例如，个人计算机(PC)和智能电话等)中，并以有线或无线方式与检测器143和显示单元103连接。
(头戴式显示器的操作)
下面将描述因此被配置的HMD 100的操作。图3为示出HMD 100的操作的顺序图。
现在假设在用户佩戴HMD 100的状态下在显示单元103上显示应用程序A的输出图像。如果显示单元103为透视型显示器，因为在显示单元103上没有图像被显示，所以用户可能处于通过显示单元103透视外部的状态。此时，HMD100的方向定义为“正面方向”。
信息管理单元141经每预定时间从检测器143获取表示HMD 100的方向的传感器值。然后，信息管理单元141向应用程序选择器142提供传感器值。
应用程序选择器142基于传感器值选择应用程序。具体来说，如果传感器值包含在表示“正面方向”的值的范围内，则应用程序选择器142实际上选择应用程序A。另一方面，如果传感器值未包含在表示“正面方向”的值的范围内(即，“非正面方向”)，则应用程序选择器142可选择另一应用程序(应用程序B)。
然后，应用程序选择器142通知信息管理单元141因此所选择的应用程序B。接着，信息管理单元141从通知的应用程序B获取显示图像，并在显示单元103上显示获取的显示图像。
从用户的角度来说，上述操作按照下面的方式执行。即，当用户佩戴HMD 100并打开电源或进行预定的输入操作时，HMD 100的方向定义为“正面方向”。此时，在显示单元103上显示应用程序A的输出图像。
当用户头部转向任意方向时，HMD 100的方向也发生变更。此时，如果HMD 100的方向超过正面方向的范围，则应用程序B的输出图像显示在显示单元103，而不是应用程序A的输出图像。比如，在移动图像(moving-image)再生应用程序被设定为应用程序A并且时间显示应用程序被设定为应用程序B的状态下，用户在移动图像再生期间可通过改变头部方向并将HMD 100引向非正面方向来确认时间。当用户将头部恢复到正面方向时，应用程序A的输出图像再次显示在显示单元103上。
另外，如果显示单元103为透视型显示器，则可不在HMD 100的显示单元103上显示图像(包括应用程序A的输出图像)。在这种情况下，用户处于通过显示单元103透视外部的状态，然后用户可通过改变HMD100的方向视觉识别应用程序B的输出图像。
输出图像可通过改变HMD 100的方向视觉识别的应用程序(应用程序B)的实例包括下面的应用程序。即，这些应用程序包括显示天气、时钟、一行新闻、股价、外汇、时间表、日历、相框、拍卖价格、高频检索词、地图和当前地的信息等的应用程序。
在上述描述中，当HMD 100的方向发生从正面方向到非正面方向的转变时，在显示单元103上显示应用程序B的输出图像。但是，针对HMD100至另一非正面方向的各个转变方向也可在显示单元103上显示不同应用程序的输出图像。图4为示出HMD 100的方向和显示的应用程序的输出图像示例的示意图。
应用程序选择器142可针对HMD 100的各个转变方向选择不同的应用程序。比如，当HMD 100从正面方向朝向右手方向时，应用程序选择器142可选择应用程序B，当HMD 100从正面方向朝向左手方向时，可选择应用程序C，当HMD 100从正面方向朝向向上的方向时，可选择应用程序D。这样，用户可通过将头部朝向不同的方向来看见不同应用程序的输出图像。
另外，在上述描述中，如果HMD 100的方向超出正面方向的范围，则在显示单元103上显示应用程序B等的输出图像。但是，此时可能会产生一种效果。图5为示出HMD 100的方向和在显示单元103上显示的图像示例的示意图。
当应用程序选择器142选择应用程序B时，信息管理单元141根据HMD 100的方向的程度以滑动方式从屏幕外显示应用程序B的输出图像。因此，根据用户头部的扭转程度逐渐显示应用程序B的输出图像，并且用户感觉好像他/她在很自然地获取信息。
同样，当HMD 100恢复到正面方向时，信息管理单元141可将应用程序B的输出图像以滑动方式显示在屏幕外。另外，一旦HMD 100的方向超出正面方向范围，不管HMD 100的方向的程度如何，信息管理单元141可以滑动方式从屏幕外显示应用程序B的输出图像。
此外，在上述描述中，根据HMD 100的方向选择要在显示单元103上显示的应用程序。但是，用户可从菜单选择应用程序。图6A到图6C为示出从菜单选择应用程序的示例的示意图。
如图6A所示，当HMD 100从正面方向指向预定方向(比如：向上的方向)时，在显示单元103上并排显示多个应用程序(以菜单形式显示)。当用户倾斜头部以倾斜HMD 100时，如图6B所示，以菜单形式显示的应用程序被显示成滑动方式。用户可利用好像菜单随重力滑动的感觉直观选择其中一个应用程序。或者，当HMD 100指向预定方向(比如：右手方向)时，应用程序可被显示成滑动方式。当用户恢复头部以将HMD 100指向正面方向时，如图6C所示，选择其中一个应用程序。
如上所述，根据该实施方式，用户可通过转动头部并改变HMD 100的方向来切换将要显示在显示单元103上的应用程序。因此，可以说HMD100的可用性优异。
(第二实施方式)
下面对根据第二实施方式的头戴式显示器(HMD)进行描述。在该实施方式中，与第一实施方式相同的配置由相同的符号表示，因此，省略其描述。
(头戴式显示器的配置)
图7为根据第二实施方式的HMD 200的功能配置的方框图。注意，HMD 200的外观可以与根据第一实施方式的HMD 100的外观相同。
HMD 200除了信息管理单元241、应用程序选择器242和检测器243之外还具有计时器244。计时器244与信息管理单元241连接。在接收信息管理单元241的请求时，计时器244开始计时并把计时器值返回信息管理单元241。
在上述第一实施方式中，应用程序选择器142基于从检测器143输出的传感器值选择应用程序。但是，在该实施方式中，除了传感器值之外，应用程序选择器242还基于从计时器244输出的计时器值选择应用程序。
与第一实施方式一样，信息管理单元241、应用程序选择器242和计时器244可被容纳在壳体中，或者可被嵌入另一信息处理装置(比如：PC和智能电话)中并与检测器243和显示单元203以有线或无线方式连接。
(头戴式显示器的操作)
下面将对因此配置的HMD 200的操作进行描述。图8为示出HMD200的操作的顺序图。
现在假设在用户佩戴HMD 200的状态下在显示单元203上显示应用程序A的输出图像。如果显示单元203为透视型显示器，因为在显示单元203上没有图像被显示，所以用户可处于通过显示单元203透视外部的状态。此时，HMD 200的方向定义为“正面方向”。
信息管理单元241每预定时间从检测器243获取表示HMD 200的方向的传感器值。然后，信息管理单元241向应用程序选择器242提供传感器值。另外，应用程序选择器242从计时器244获取计时器值。
应用程序选择器242基于传感器值和计时器值选择应用程序。具体来说，如果传感器值不包含在表示“正面方向”的值的范围内(“非正面方向”)，则应用程序选择器242选择另一应用程序(应用程序B)。另一方面，如果传感器值包含在表示“正面方向”的值的范围内，则应用程序选择器242参考计时器值。然后，如果计时器值超过预定时间，则应用程序选择器242选择应用程序B，如果计时器值小于或等于预定时间，则选择应用程序A。
与选择应用程序同时，应用程序选择器242指示计时器244开始计时。应用程序选择器242从计时器244获取的计时器值为开始至此时被计时的时间。即，如果选择应用程序B超过预定时间，则应用程序选择器242选择应用程序B，即使传感器值被包含在表示“正面方向”的值的范围内。
换句话说，如果HMD 200朝向非正面方向和应用程序选择器242选择应用程序B的时间持续预定时间，则选择(固定)应用程序B，而不是应用程序A，即使HMD 200恢复到正面方向。这是因为，如果在HMD 200朝向非正面方向的状态经过了预定时间，可确定用户在注视应用程序B的输出图像。
另一方面，如果HMD 200朝向正面方向和应用程序B固定的状态经过预定时间，则解除应用程序B的固定，并选择初始的应用程序A。
然后，应用程序选择器242通知信息管理单元241选择了应用程序B。接着，信息管理单元241从通知的应用程序B获取显示图像，并在显示单元203上显示获取的显示图像。
从用户的角度来说，上述操作是按照下面的方式进行的。图9为示出将要在显示单元203上显示的应用程序的转移示意图。当用户佩戴HMD200并打开电源或进行预定的输入操作时，HMD 200的方向定义为“正面方向”。此时，在显示单元203上显示应用程序A的输出图像(T1)。如果用户保持头部处于正面方向，持续显示应用程序A的输出图像(T1 RT1)。
当用户头部转向任意方向时，HMD 200的方向也发生变更。此时，如果HMD 200的方向超出正面方向的范围(“非正面方向”)，则在显示单元203显示的不是应用程序A的输出图像，而是应用程序B的输出图像(T1 R T2)。如果HMD 200在经过预定时间前恢复到正面方向，则再次显示应用程序A的显示图像(T2 R T1)。
这里，如果用户把HMD 200朝向非正面方向达预定时间(计时器的停止时间)以上，则如上所述固定应用程序B(T2 R T3)。如果在这个状态下经过预定时间(计时器的停止时间)，在显示单元203上显示应用程序A的输出图像，而不是应用程序B的输出图像(T3 R T5)。另一方面，如果HMD 200在预定时间前指向正面方向，则因为应用程序B是固定的，在显示单元203上持续显示应用程序B的输出图像(T3 R T4)。
如果HMD 200朝向正面方向的状态经过预定时间(计时器的停止时间)，则解除应用程序B的固定，并再次在显示单元203上显示应用程序A的输出图像。然后，当与第一实施方式一样HMD 200朝向另一非正面方向时，在显示单元203上显示另一应用程序(应用程序C等)的输出图像(T2 R T2，T4 R T2)。
输出图像可通过改变HMD 200的方向视觉识别的应用程序(应用程序B)的实例包括下面的应用程序。即，这些应用程序包括显示天气、时钟、一行新闻、股价、外汇、时间表、日历、相框、拍卖价格、高频检索词、地图和当前地的信息等的应用程序。
在该实施方式中，如果HMD 200朝向非正面方向的状态经过预定时间，固定正在显示的应用程序。因此，如果用户希望注视应用程序的输出图像，则该实施方式的可用性优异。注意，与第一实施方式一样，该实施方式还应用菜单形式、滑动效果等显示的应用程序的选择。
(变形例)
在上述第一和第二实施方式中，基于HMD的方向执行应用程序的选择。但是，还可采用用户视线上的信息。具体来说，应用程序选择器可采用用户的视线作为固定和解除上述应用程序的姿势。因此，它变得能够容易的将用户的意图反映在应用程序的选择上。例如，可通过有设置在对HMD内的摄像头所捕捉的用户眼球图像进行图像处理来进行用户视线的识别。
另外，HMD的位置信息也可以被用于应用程序的选择。具体来说，当检测到HMD以恒定或更快的速度移动(即，用户在移动)时，应用程序选择器停止选择应用程序，并能够在显示单元上不显示图像。这样，它能够防止用户在移动过程中陷入危险。比如，可以从设置在HMD内的GPS(全球定位系统)和加速度传感器的输出获取位置信息。
在上述第二实施方式中，由计时器计时的停止时间确定固定和解除应用程序。但是，可根据HMD方向的转变速度确定计时器的停止时间。另外，对于每个应用程序来说，计时器的停止时间可以是不同的。
此外，可通过设置在HMD内的输入操作单元(比如：按钮和触摸传感器)固定和解除应用程序。此外，还可通过当用户移动头部时作出的姿势固定和解除应用程序。具体来说，比如，当用户点头时固定应用程序，当用户转头时固定应用程序，当用户倾斜头时固定应用程序，当用户快速摇头时解除应用程序，当用户缓慢摇头时不解除应用程序，头部固定在正面方向的状态下移动头部时解除应用程序。
此外，可基于用户的视线上信息执行应用程序的固定和解除。即，通过基于用户的视线等的姿势固定和解除应用程序。比如，当用户眼睛闭上一段时间时固定或解除应用程序，当用户闭上眼睛转动头部时固定应用程序，当用户将眼睛调整到焦点时固定应用程序，当用户将眼睛离开焦点时解除应用程序。此外，可通过用户的身体动作(比如：用手弹掉、紧咬、跺脚和跳跃)进行固定或解除。此外，可根据外部情况进行固定或解除。比如，当用户前面出现汽车或人时，解除应用程序。
(应用例)
下面对根据本发明实施方式的HMD的应用例进行描述。
(字典)
当用户佩戴HMD阅览书籍等文章的状态下HMD朝向正面方向时，没有图像被显示在显示单元(透视型显示器)。但是，设置在HMD内的摄像头进行文字识别，从而提取文章中的词语。当HMD朝向非正面方向时，在显示单元上显示字典应用程序的输出结果(比如：词语的意思和翻译)。与用户的视线组合，可提取在被用户所注视位置上的词语。
(字幕)
当HMD朝向正面方向时，在显示单元上显示移动图像，比如：电影。然后，当HMD朝向非正面方向时，显示与移动图像再生的场景对应的字幕。注意，当HMD朝向正面方向时，没有图像被显示在显示单元(透视型显示器)上，使得用户通过显示单元看到实际移动的图像。在这种情况下，通过图像识别或经由网络获取字幕。
(学习)
当HMD朝向正面方向时，在显示单元上显示“问题”。然后，当HMD朝向非正面方向时，在显示单元上显示问题的答案或提示。比如，当HMD从正面方向朝向向上的方向时，可显示问题的提示，并且当HMD从正面方向朝向向下的方向时，可显示问题的答案。
(通知)
当HMD朝向正面方向时，没有图像被显示在显示单元上或在上面显示任意应用程序的输出图像。收到电子邮件(e-mail)或社交服务(SNS)后，在显示单元上显示接收通知。当用户把HMD朝向非正面方向时，在显示单元上显示E-mail或SNS的消息。可只在显示单元的一端而不是整个显示单元上显示消息。此外，当没有新消息时，即使HMD朝向非正面方向显示单元的显示可以不变不会做出变更。
(后方识别)
当HMD朝向正面方向时，用户可通过显示单元(透视型显示器)视觉识别前方，因为显示单元上没显示图像。当HMD朝向非正面方向时，在显示单元上显示设置的摄像头捕捉的后方图像。后方图像可以是动作识别获得的移动物体的高亮图像或热像图。另外，可根据正面方向到非正面方向的转变方向显示这些图像的每个。
(工作辅助)
当HMD朝向正面方向时，用户可通过显示单元(透视型显示器)视觉识别前方，因为显示单元上没显示图像。当HMD朝向非正面方向时，在显示单元上显示工作步骤，比如：食谱。因为在HMD朝向正面方向的状态下未显示工作步骤，所以不妨碍用户的工作。
(其它)
根据HMD的方向移动辞典的显示范围(基于词语关系排列词语的示意图)，这样使得用户可轻易检索相关词语。另外，根据HMD的方向移动天文图的显示范围，使得允许用户执行模拟天文观测。此外，还可提供用户根据HMD的方向倾斜虚拟游戏板的游戏。
本发明并不限于上述各个实施方式，但是可在不脱离本发明主旨的情况下进行修改。
注意，本发明还可采用下列配置。
(1)一种头戴式显示器，包括：
检测器，被配置为检测所述头戴式显示器和视线中的至少一个的方向；以及
显示器，被配置为显示应用程序的输出图像，
其中，所述应用程序基于存在正面方向范围外的方向来选择。
(2)根据(1)所述的头戴式显示器，其中，当所述头戴式显示器面向所述正面方向时，所述正面方向的范围设定成至少足以包含所述显示器。
(3)根据(1)或(2)所述的头戴式显示器，其中，当所述头戴式显示器面向所述正面方向时，所述正面方向的范围设定成至少足以包含所述显示器的一部分。
(4)根据(1)至(3)中的任一项所述的头戴式显示器，其中，所述显示器的一部分显示所述应用程序的所述输出图像。
(5)根据(1)至(4)中的任一项所述的头戴式显示器，其中，所述正面方向被设定为当所述头戴式显示器上电时或当执行预定输入操作时的所述头戴显示器的方向。
(6)根据(1)至(5)中的任一项所述的头戴式显示器，其中，所述显示器为透视型显示器。
(7)根据(1)至(6)中的任一项所述的头戴式显示器，进一步包括：
处理器；以及
存储设备，存储在被处理器执行时使所述处理器选择所述应用程序的指令。
(8)根据(1)至(7)中的任一项所述的头戴式显示器，其中，所述检测器被配置为检测所述头戴显示器的方向。
(9)根据(1)至(8)中的任一项所述的头戴式显示器，其中，第一应用程序基于作为所述正面方向范围外的第一方向的方向来选择，并且第二应用程序基于作为所述正面方向范围外的第二方向的方向来选择，所述第一应用程序与所述第二应用程序不同。
(10)根据(1)至(9)中的任一项所述的头戴式显示器，其中，所述应用程序基于方向和计时器值来选择。
(11)根据(1)至(10)中的任一项所述的头戴式显示器，其中，
第一应用程序基于从所述正面方向范围内移动到所述正面方向范围外的方向来选择，并且所述显示器被配置为显示所述第一应用程序的输出图像。
(12)根据(1)至(11)中的任一项所述的头戴式显示器，其中，基于从所述正面方向范围外移动到所述正面方向范围内的方向选择第二应用程序或不选择应用程序，并且所述显示器被配置为显示所述第二应用程序的输出图像或不显示输出图像。
(13)根据(1)至(12)中的任一项所述头戴式显示器，其中，基于计时器值和从所述正面方向范围外移动到所述正面方向范围内的方向固定所述第一应用程序的选择，并且所述显示器被配置为持续显示所述第一应用程序的输出图像。
(14)根据(1)至(13)中的任一项所述的头戴式显示器，其中，基于计时器值解除第一应用程序的固定。
(15)根据(1)至(14)中的任一项所述的头戴式显示器，其中，基于头戴式显示器内包含的GPS和加速度传感器中的至少一个的输出选择应用程序。
(16)根据(1)至(15)中的任一项所述的头戴式显示器，其中，应用程序的输出图像为文本、移动图像和静态图像中的至少一个。
(17)根据(1)至(16)中的任一项所述的头戴式显示器，其中，显示器以菜单形式显示多个应用程序。
(18)根据(1)至(17)中的任一项所述的头戴式显示器，其中，基于由检测器所检测的方向以滑动方式显示被显示成菜单形式的多个应用程序。
(19)一种头戴式显示器的操作方法，包括：
检测头戴式显示器和视线中的至少一个的方向；
基于存在正面方向的范围外的方向选择应用程序；以及
显示应用程序的输出图像。
(20)一种非暂存性计算机可读渡村介质，存储用于引起头戴式显示器执行以下的计算机程序：
检测头戴式显示器和视线中的至少一个的方向；
基于存在正面方向的范围外的方向选择应用程序；以及
显示应用程序的输出图像。
本申请包括与2012年2月17日向日本专利局提交的日本在先专利申请2012-032647所公开的主题相关的主题，其全部内容通过引用结合在本申请中。
参考符号列表
102 安装构件
103、203 显示单元
104 壳体
121 耳机
141、241 信息管理单元
142、242 应用程序选择器
143、243 检测器
244 计时器
100、200 HMD

Claims (20)

1.一种头戴式显示器，包括：
检测器，被配置为检测所述头戴式显示器和视线中的至少一个的方向；以及
显示器，被配置为显示应用程序的输出图像，
其中，所述应用程序基于存在于正面方向的范围外的方向来选择。
2.根据权利要求1所述的头戴式显示器，其中，当所述头戴式显示器面向所述正面方向时，所述正面方向的范围设定成至少大到足以包含所述显示器。
3.根据权利要求1所述的头戴式显示器，其中，当所述头戴式显示器面向所述正面方向时，所述正面方向的范围设定成至少大到足以包含所述显示器的一部分。
4.根据权利要求3所述的头戴式显示器，其中，所述显示器的一部分显示所述应用程序的所述输出图像。
5.根据权利要求1所述的头戴式显示器，其中，所述正面方向被设定为当所述头戴式显示器上电时或当执行预定输入操作时的所述头戴显示器的方向。
6.根据权利要求1所述的头戴式显示器，其中，所述显示器为透视型显示器。
7.根据权利要求1所述的头戴式显示器，进一步包括：
处理器；以及
存储设备，存储在被所述处理器执行时使所述处理器选择所述应用程序的指令。
8.根据权利要求1所述的头戴式显示器，其中，所述检测器被配置为检测所述头戴显示器的方向。
9.根据权利要求1所述的头戴式显示器，其中，基于作为所述正面方向的范围外的第一方向的方向选择第一应用程序，并且基于作为所述正面方向的范围外的第二方向的方向选择第二应用程序，所述第一应用程序与所述第二应用程序不同。
10.根据权利要求1所述的头戴式显示器，其中，基于方向和计时器值选择所述应用程序。
11.根据权利要求1所述的头戴式显示器，其中，
基于从所述正面方向的范围内移动到所述正面方向的范围外的方向来选择第一应用程序，并且所述显示器被配置为显示所述第一应用程序的输出图像。
12.根据权利要求11所述的头戴式显示器，其中，基于从所述正面方向的范围外移动到所述正面方向的范围内的方向选择第二应用程序或不选择应用程序，并且所述显示器被配置为显示所述第二应用程序的输出图像或不显示输出图像。
13.根据权利要求11所述头戴式显示器，其中，基于计时器值和从所述正面方向的范围外移动到所述正面方向的范围内的方向固定所述第一应用程序的选择，并且所述显示器被配置为持续显示所述第一应用程序的所述输出图像。
14.根据权利要求13所述的头戴式显示器，其中，基于计时器值解除所述第一应用程序的固定。
15.根据权利要求1所述的头戴式显示器，其中，基于所述头戴式显示器内包含的GPS和加速度传感器中的至少一个的输出来选择所述应用程序。
16.根据权利要求1所述的头戴式显示器，其中，所述应用程序的所述输出图像为文本、移动图像、和静态图像中的至少一个。
17.根据权利要求1所述的头戴式显示器，其中，所述显示器将多个应用程序显示成菜单形式。
18.根据权利要求17所述的头戴式显示器，其中，基于由所述检测器所检测的方向以滑动方式显示被显示成菜单形式的所述多个应用程序。
19.一种头戴式显示器的操作方法，包括：
检测所述头戴式显示器和视线中的至少一个的方向；
基于存在于正面方向的范围外的方向选择应用程序；并且
显示所述应用程序的输出图像。
20.一种非暂存性计算机可读存储介质，存储用于引起头戴式显示器执行以下的计算机程序：
检测所述头戴式显示器和视线中的至少一个的方向；
基于存在于正面方向的范围外的方向选择应用程序；并且
显示所述应用程序的输出图像。
CN201380008827.0A 2012-02-17 2013-02-01 头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法 Active CN104115100B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012032647A JP5880115B2 (ja) 2012-02-17 2012-02-17 ヘッドマウントディスプレイ、ヘッドマウントディスプレイ制御プログラム及びヘッドマウントディスプレイの制御方法
JP2012-032647 2012-02-17
PCT/JP2013/000557 WO2013121730A1 (en) 2012-02-17 2013-02-01 Head-mounted display, program for controlling head-mounted display, and method of controlling head-mounted display

Publications (2)

Publication Number Publication Date
CN104115100A true CN104115100A (zh) 2014-10-22
CN104115100B CN104115100B (zh) 2018-01-26

Family

ID=47720704

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380008827.0A Active CN104115100B (zh) 2012-02-17 2013-02-01 头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法

Country Status (5)

Country Link
US (3) US9523854B2 (zh)
EP (1) EP2815291A1 (zh)
JP (1) JP5880115B2 (zh)
CN (1) CN104115100B (zh)
WO (1) WO2013121730A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105224186A (zh) * 2015-07-09 2016-01-06 北京君正集成电路股份有限公司 一种智能眼镜的屏幕显示方法及智能眼镜
CN105786167A (zh) * 2014-12-26 2016-07-20 联想(北京)有限公司 一种信息处理方法及电子设备
CN105867608A (zh) * 2015-12-25 2016-08-17 乐视致新电子科技（天津）有限公司 虚拟现实头盔的功能菜单翻页方法、装置及头盔
CN106066537A (zh) * 2015-04-24 2016-11-02 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
CN106125902A (zh) * 2015-05-07 2016-11-16 松下知识产权经营株式会社 显示控制方法和头戴式显示器
CN107003522A (zh) * 2014-11-07 2017-08-01 三星电子株式会社 用于显示对象的基于方向的电子设备及其方法
WO2017036429A3 (en) * 2016-12-01 2017-09-21 Viewtrix Technology Co., Ltd. Zone-based display data processing and transmission
CN107526164A (zh) * 2016-05-31 2017-12-29 Fove股份有限公司 图像提供系统
CN108027987A (zh) * 2016-09-08 2018-05-11 Colopl株式会社 信息处理方法、用于使计算机实施该信息处理方法的程序、实施该信息处理方法的信息处理装置及信息处理系统
CN108476033A (zh) * 2015-12-24 2018-08-31 索尼互动娱乐股份有限公司 频带确定装置、头戴式显示器、频带确定方法和程序
CN108521816A (zh) * 2017-04-17 2018-09-11 深圳市柔宇科技有限公司 头戴式显示设备及其传感器功率调节方法
CN110968188A (zh) * 2018-09-28 2020-04-07 苹果公司 基于头部位置的应用程序放置
US11521581B2 (en) 2019-09-26 2022-12-06 Apple Inc. Controlling displays
US11800059B2 (en) 2019-09-27 2023-10-24 Apple Inc. Environment for remote communication

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130339859A1 (en) 2012-06-15 2013-12-19 Muzik LLC Interactive networked headphones
WO2014128752A1 (ja) * 2013-02-19 2014-08-28 株式会社ブリリアントサービス 表示制御装置、表示制御プログラム、および表示制御方法
US20140280502A1 (en) 2013-03-15 2014-09-18 John Cronin Crowd and cloud enabled virtual reality distributed location network
US20140280505A1 (en) 2013-03-15 2014-09-18 John Cronin Virtual reality interaction with 3d printing
US20140280503A1 (en) 2013-03-15 2014-09-18 John Cronin System and methods for effective virtual reality visitor interface
US20140280644A1 (en) 2013-03-15 2014-09-18 John Cronin Real time unified communications interaction of a predefined location in a virtual reality location
US20140267581A1 (en) 2013-03-15 2014-09-18 John Cronin Real time virtual reality leveraging web cams and ip cams and web cam and ip cam networks
US20140280506A1 (en) 2013-03-15 2014-09-18 John Cronin Virtual reality enhanced through browser connections
US9838506B1 (en) 2013-03-15 2017-12-05 Sony Interactive Entertainment America Llc Virtual reality universe representation changes viewing based upon client side parameters
US10001645B2 (en) 2014-01-17 2018-06-19 Sony Interactive Entertainment America Llc Using a second screen as a private tracking heads-up display
US9588343B2 (en) 2014-01-25 2017-03-07 Sony Interactive Entertainment America Llc Menu navigation in a head-mounted display
US9437159B2 (en) 2014-01-25 2016-09-06 Sony Interactive Entertainment America Llc Environmental interrupt in a head-mounted display and utilization of non field of view real estate
US10613642B2 (en) * 2014-03-12 2020-04-07 Microsoft Technology Licensing, Llc Gesture parameter tuning
KR20160033376A (ko) * 2014-09-18 2016-03-28 (주)에프엑스기어 시선에 의해 제어되는 헤드 마운트형 디스플레이 장치, 이의 제어 방법 및 이의 제어를 위한 컴퓨터 프로그램
KR101836374B1 (ko) * 2014-11-25 2018-03-12 주식회사 이랜텍 보안 성능이 강화된 스마트 안경
JP5767386B1 (ja) 2014-12-15 2015-08-19 株式会社コロプラ ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム
KR101653591B1 (ko) * 2015-02-04 2016-09-12 강릉원주대학교산학협력단 헤드 마운트 디스플레이 장치 및 그 동작 방법
US9965029B2 (en) * 2015-03-30 2018-05-08 Sony Corporation Information processing apparatus, information processing method, and program
EP3076287A1 (de) * 2015-03-31 2016-10-05 SITEC GmbH Sicherheitseinrichtungen und technische Geräte Verfahren zum navigieren durch die auf der anzeigeeinheit eines mobilen elektronischen geräts dargestellten inhalte und mobiles elektronisches gerät mit einer anzeigeeinheit
KR102313485B1 (ko) * 2015-04-22 2021-10-15 삼성전자주식회사 가상현실 스트리밍 서비스를 위한 영상 데이터를 송수신하는 방법 및 장치
JP2016218268A (ja) 2015-05-21 2016-12-22 セイコーエプソン株式会社 可搬型表示装置、表示システム、表示方法
KR101740806B1 (ko) * 2015-08-26 2017-05-29 한양대학교 에리카산학협력단 가상 현실을 이용한 인테리어 디자인 서비스 제공 방법 및 장치
KR102524641B1 (ko) * 2016-01-22 2023-04-21 삼성전자주식회사 Hmd 디바이스 및 그 제어 방법
JP5996138B1 (ja) * 2016-03-18 2016-09-21 株式会社コロプラ ゲームプログラム、方法およびゲームシステム
KR101879235B1 (ko) * 2016-08-04 2018-07-17 (주)에프엑스기어 시선에 의해 제어되는 헤드 마운트형 디스플레이 장치, 이의 제어 방법 및 이의 제어를 위한 컴퓨터 프로그램
US10620910B2 (en) 2016-12-23 2020-04-14 Realwear, Inc. Hands-free navigation of touch-based operating systems
US10437070B2 (en) 2016-12-23 2019-10-08 Realwear, Inc. Interchangeable optics for a head-mounted display
US11099716B2 (en) 2016-12-23 2021-08-24 Realwear, Inc. Context based content navigation for wearable display
US10936872B2 (en) 2016-12-23 2021-03-02 Realwear, Inc. Hands-free contextually aware object interaction for wearable display
US10393312B2 (en) 2016-12-23 2019-08-27 Realwear, Inc. Articulating components for a head-mounted display
US11507216B2 (en) 2016-12-23 2022-11-22 Realwear, Inc. Customizing user interfaces of binary applications
JP6684746B2 (ja) * 2017-05-12 2020-04-22 株式会社コロプラ 情報処理方法、コンピュータ及びプログラム
US20200005791A1 (en) * 2018-06-29 2020-01-02 International Business Machines Corporation Audio content visualized by pico projection of text for interaction
WO2020084625A1 (en) 2018-10-25 2020-04-30 Beyeonics Surgical Ltd. Ui for head mounted display system
US11055923B2 (en) 2018-12-19 2021-07-06 Samsung Electronics Co., Ltd. System and method for head mounted device input
JP6813640B2 (ja) * 2019-08-19 2021-01-13 株式会社コロプラ ヘッドマウントディスプレイシステム、ヘッドマウントディスプレイへ表示するための方法、及びプログラム
TWI750818B (zh) * 2020-09-24 2021-12-21 宏達國際電子股份有限公司 動態調整使用者界面方法、電子裝置及電腦可讀儲存媒體
US11175791B1 (en) * 2020-09-29 2021-11-16 International Business Machines Corporation Augmented reality system for control boundary modification

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3326820B2 (ja) 1992-08-28 2002-09-24 ソニー株式会社 視覚装置
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
US6091378A (en) * 1998-06-17 2000-07-18 Eye Control Technologies, Inc. Video processing methods and apparatus for gaze point tracking
JP2002525769A (ja) * 1998-09-22 2002-08-13 ヴェガ ヴィスタ インコーポレイテッド 携帯型データディスプレイの直接的コントロール方法
CN100359363C (zh) * 2004-05-06 2008-01-02 奥林巴斯株式会社 头戴式显示装置
US20070052672A1 (en) * 2005-09-08 2007-03-08 Swisscom Mobile Ag Communication device, system and method
JP2007134785A (ja) * 2005-11-08 2007-05-31 Konica Minolta Photo Imaging Inc 頭部装着型の映像表示装置
JP4927631B2 (ja) * 2006-06-27 2012-05-09 パナソニック株式会社 表示装置、その制御方法、プログラム、記録媒体および集積回路
US7928926B2 (en) * 2006-06-27 2011-04-19 Panasonic Corporation Display apparatus and method for hands free operation that selects a function when window is within field of view
JP2009296228A (ja) * 2008-06-04 2009-12-17 Nikon Corp ヘッドマウントディスプレイ装置
JP5125779B2 (ja) * 2008-06-04 2013-01-23 株式会社ニコン ヘッドマウントディスプレイ装置
JPWO2009150747A1 (ja) * 2008-06-13 2011-11-10 パイオニア株式会社 視線入力によるユーザーインターフェース装置、ユーザーインターフェース方法、ユーザーインターフェースプログラム、及びユーザーインターフェースプログラムが記録された記録媒体
WO2011106797A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece
US10031576B2 (en) * 2010-06-09 2018-07-24 Dynavox Systems Llc Speech generation device with a head mounted display unit

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10642041B2 (en) 2014-11-07 2020-05-05 Samsung Electronics Co., Ltd Direction based electronic device for displaying object and method thereof
CN107003522A (zh) * 2014-11-07 2017-08-01 三星电子株式会社 用于显示对象的基于方向的电子设备及其方法
CN107003522B (zh) * 2014-11-07 2020-04-28 三星电子株式会社 用于显示对象的基于方向的电子设备及其方法
CN105786167A (zh) * 2014-12-26 2016-07-20 联想(北京)有限公司 一种信息处理方法及电子设备
CN105786167B (zh) * 2014-12-26 2019-11-26 联想(北京)有限公司 一种信息处理方法及电子设备
US10747488B2 (en) 2015-04-24 2020-08-18 Panasonic Intellectual Property Corporation Of America Head-mounted display apparatus worn on user's head
CN106066537A (zh) * 2015-04-24 2016-11-02 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
CN106066537B (zh) * 2015-04-24 2020-07-24 松下电器（美国）知识产权公司 头戴式显示器和头戴式显示器的控制方法
CN106125902B (zh) * 2015-05-07 2020-12-01 松下知识产权经营株式会社 显示控制方法和头戴式显示器
CN106125902A (zh) * 2015-05-07 2016-11-16 松下知识产权经营株式会社 显示控制方法和头戴式显示器
CN105224186A (zh) * 2015-07-09 2016-01-06 北京君正集成电路股份有限公司 一种智能眼镜的屏幕显示方法及智能眼镜
CN108476033A (zh) * 2015-12-24 2018-08-31 索尼互动娱乐股份有限公司 频带确定装置、头戴式显示器、频带确定方法和程序
CN105867608A (zh) * 2015-12-25 2016-08-17 乐视致新电子科技（天津）有限公司 虚拟现实头盔的功能菜单翻页方法、装置及头盔
CN107526164A (zh) * 2016-05-31 2017-12-29 Fove股份有限公司 图像提供系统
CN108027987B (zh) * 2016-09-08 2020-01-17 Colopl株式会社 信息处理方法、信息处理装置及信息处理系统
CN108027987A (zh) * 2016-09-08 2018-05-11 Colopl株式会社 信息处理方法、用于使计算机实施该信息处理方法的程序、实施该信息处理方法的信息处理装置及信息处理系统
US10614764B2 (en) 2016-12-01 2020-04-07 Shanghai Yunyinggu Technology Co., Ltd. Zone-based display data processing and transmission
WO2017036429A3 (en) * 2016-12-01 2017-09-21 Viewtrix Technology Co., Ltd. Zone-based display data processing and transmission
CN108521816A (zh) * 2017-04-17 2018-09-11 深圳市柔宇科技有限公司 头戴式显示设备及其传感器功率调节方法
CN110968188A (zh) * 2018-09-28 2020-04-07 苹果公司 基于头部位置的应用程序放置
CN110968188B (zh) * 2018-09-28 2022-05-03 苹果公司 基于头部位置的应用程序放置
US11366514B2 (en) 2018-09-28 2022-06-21 Apple Inc. Application placement based on head position
US11960641B2 (en) 2018-09-28 2024-04-16 Apple Inc. Application placement based on head position
US11521581B2 (en) 2019-09-26 2022-12-06 Apple Inc. Controlling displays
US11893964B2 (en) 2019-09-26 2024-02-06 Apple Inc. Controlling displays
US11800059B2 (en) 2019-09-27 2023-10-24 Apple Inc. Environment for remote communication
US12003890B2 (en) 2019-09-27 2024-06-04 Apple Inc. Environment for remote communication

Also Published As

Publication number Publication date
CN104115100B (zh) 2018-01-26
US9857886B2 (en) 2018-01-02
EP2815291A1 (en) 2014-12-24
US9523854B2 (en) 2016-12-20
US20150009132A1 (en) 2015-01-08
WO2013121730A1 (en) 2013-08-22
JP2013168910A (ja) 2013-08-29
US20170068336A1 (en) 2017-03-09
US20180081451A1 (en) 2018-03-22
JP5880115B2 (ja) 2016-03-08

Similar Documents

Publication Publication Date Title
CN104115100A (zh) 头戴式显示器、用于控制头戴式显示器的程序及控制头戴式显示器的方法
KR102411100B1 (ko) 디바이스를 이용한 화면 처리 방법 및 장치
US9900498B2 (en) Glass-type terminal and method for controlling the same
EP3364645A2 (en) Mobile terminal and method of controlling the same
US9058054B2 (en) Image capture apparatus
US10416835B2 (en) Three-dimensional user interface for head-mountable display
RU2638004C2 (ru) Устройство обработки информации, способ управления отображением и программа
US8941721B2 (en) Mobile terminal and method for controlling operation of the mobile terminal
US9507426B2 (en) Using the Z-axis in user interfaces for head mountable displays
US20140098102A1 (en) One-Dimensional To Two-Dimensional List Navigation
CN110546601B (zh) 信息处理装置、信息处理方法和程序
US9939642B2 (en) Glass type terminal and control method thereof
KR20180002208A (ko) 단말기 및 그 제어 방법
KR20180028211A (ko) 헤드 마운티드 디스플레이 및 그 제어 방법
KR20180004112A (ko) 안경형 단말기 및 이의 제어방법
US8854452B1 (en) Functionality of a multi-state button of a computing device
WO2015136952A1 (ja) ジェスチャー認識装置、ヘッドマウントディスプレイ、および携帯端末
EP3109734A1 (en) Three-dimensional user interface for head-mountable display
US20160299641A1 (en) User Interface for Social Interactions on a Head-Mountable Display
KR20180103866A (ko) 이동 단말기 및 그 제어 방법
US20230400958A1 (en) Systems And Methods For Coordinating Operation Of A Head-Wearable Device And An Electronic Device To Assist A User In Interacting With The Electronic Device
CN116033227A (zh) 视频播放方法、装置、电子设备和可读存储介质
Starner 2 Wearable Computing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant