CN108885497B - 信息处理装置、信息处理方法和计算机可读介质 - Google Patents

信息处理装置、信息处理方法和计算机可读介质 Download PDF

Info

Publication number
CN108885497B
CN108885497B CN201780019336.4A CN201780019336A CN108885497B CN 108885497 B CN108885497 B CN 108885497B CN 201780019336 A CN201780019336 A CN 201780019336A CN 108885497 B CN108885497 B CN 108885497B
Authority
CN
China
Prior art keywords
display
information processing
information
processing apparatus
display object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780019336.4A
Other languages
English (en)
Other versions
CN108885497A (zh
Inventor
冈山贵广
深泽辽
鸟居邦在
近藤一臣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108885497A publication Critical patent/CN108885497A/zh
Application granted granted Critical
Publication of CN108885497B publication Critical patent/CN108885497B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Position Input By Displaying (AREA)

Abstract

提供了一种信息处理装置，包括：处理单元，被配置成基于示出用户视线的视线信息，从与用户的视野内的特定位置对应的多个候选对象中选择显示对象，并且执行使所选择的显示对象与特定位置相关联地显示在显示画面上的显示控制处理。

Description

信息处理装置、信息处理方法和计算机可读介质
技术领域
本公开内容涉及信息处理装置、信息处理方法和计算机可读介质。
背景技术
开发了一种技术，其评估与用户的视线位置对应的显示位置并且基于所评估的显示位置使得在该位置执行显示。例如，给出了下述专利文献1中描述的技术，其是基于视野特性和车辆驾驶员的视线位置来评估显示位置并且使得在所评估的显示位置或该显示位置附近执行警报显示。
引用列表
专利文献
专利文献1：JP H7-329657A
发明内容
技术问题
通过使用例如增强现实(AR)技术等，可以将示出字符(或字符串；下文中同样适用)和图像、这些的组合等的各种显示对象显示在显示画面上，同时将其叠加在真实空间(或者示出真实空间的图像，例如其中对真实空间成像的捕获图像；下文中同样适用)上。
此外，在如上所述将显示对象叠加在真实空间上的情况下，需要使得用户能够更容易地识别出叠加的显示对象所示的内容。
本公开内容提出了一种新的且经改进的信息处理装置、一种新的且经改进的信息处理方法以及一种可以有助于用户识别显示对象的新的且经改进的计算机可读介质。
问题的技术方案
根据本公开内容，提供了一种信息处理装置。该信息处理装置包括：处理单元，其被配置成从与用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且执行基于示出该用户视线的视线信息使得所选择的显示对象与该特定位置相关联地显示在显示画面上的显示控制处理。
此外，根据本公开内容，提供了一种信息处理方法，其包括由信息处理装置执行显示控制处理。该显示控制处理基于示出用户的视线的视线信息从与用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且使得所选择的显示对象与该特定位置相关联地显示在显示画面上。
此外，根据本公开内容，提供了一种计算机可读介质，其包括：能够在信息处理装置上操作以执行信息处理方法的指令。该信息处理方法包括执行下述显示控制处理：基于示出用户视线的视线信息从与用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且使得所选择的显示对象与该特定位置相关联地显示在显示画面上。
发明的有益效果
根据本公开内容，可以有助于用户识别显示对象。
注意，以上描述的效果并不一定是限制性的。与上述效果一起或替代上述效果，可以实现本说明书中描述的任一效果或者可以从本说明书中领会的其他效果。
附图说明
[图1]图1是用于描述根据本实施方式的信息处理方法的示例的说明图。
[图2]图2是用于描述根据本实施方式的信息处理方法的示例的说明图。
[图3]图3是示出依照根据本实施方式的信息处理方法的处理的示例的流程图。
[图4A]图4A是示出通过依照根据本实施方式的信息处理方法的处理显示的显示对象的显示示例的说明图。
[图4B]图4B是示出通过依照根据本实施方式的信息处理方法的处理显示的显示对象的显示示例的说明图。
[图4C]图4C是示出通过依照根据本实施方式的信息处理方法的处理显示的显示对象的显示示例的说明图。
[图5]图5是示出依照根据本实施方式的信息处理方法的处理的示例的流程图。
[图6]图6是用于描述依照根据本实施方式的信息处理方法的处理的示例的说明图。
[图7]图7是示出根据本实施方式的信息处理装置的配置的示例的框图。
[图8]图8是示出根据本实施方式的信息处理装置的硬件配置的示例的说明图。
具体实施方式
在下文中，将参照附图详细描述本公开内容的(一个或多个)优选实施方式。注意，在本说明书和附图中，使用相同的附图标记来表示具有基本相同的功能和结构的结构要素，并且省略了对这些结构要素的重复说明。
此外，在下文中，以以下所示的顺序给出描述。
1.根据本实施方式的信息处理方法
2.根据本实施方式的信息处理装置
3.根据本实施方式的计算机可读介质
(根据本实施方式的信息处理方法)
首先，描述根据本实施方式的信息处理方法。在下文中，利用作为示例的情况来描述根据本实施方式的信息处理方法，该情况为由根据本实施方式的信息处理装置依照根据本实施方式的信息处理方法执行处理的情况。
[1]根据本实施方式的信息处理方法的概述
图1是用于描述根据本实施方式的信息处理方法的示例的说明图，并且示出了人的视野特性的示例。这里，图1所示的“H”表示水平方向，并且图1所示的“V”表示竖直方向。此外，图1所示的
Figure BDA0001808222870000031
表示视线方向的方向角。
例如，人的视野特性可以被如下分类。
-辨别视野：人能够识别任意类型的显示对象的形状和内容的范围。
-字辨识极限：人能够读取字符(显示对象的示例)的有限范围。
-有效视野：人能够辨识除字符(显示对象的示例)之外的显示对象的形状的范围。
-其他范围(除上述辨别视野、字辨识极限或有效视野之外的范围)：既不能辨识显示对象的形状也不能辨识显示对象的内容，但是能够注意到基于显示对象的动画显示等的显示对象的移动的范围。
注意，可以假定将从用户的观看点的位置到字辨识极限的距离或者到有效视野的边界的(与方向角对应的)距离定义为“第一值”。此外，可以假定，对于用户的观看点的位置，将示出作为叠加视野的满意范围的距离或者示出可以实现双目视觉的视觉限制的距离定义为“第二值”。可以假定根据本实施方式的信息处理装置基于有关观看点的位置与特定位置(目标对象)之间的距离是否小于或等于第一值或者该距离是否大于第一值且小于或等于第二值的评估来从多个候选对象中选择与该特定位置对应的显示对象。稍后参照图5描述细节。
例如在使用专利文献1中描述的技术的情况下，当辨别视野内部的范围被视为与视线位置相关联的适当显示位置时，执行警报显示。这里，如以上所示，用户可以识别出辨别视野中的任意类型的显示对象的形状和内容。因此，例如，如果像专利文献1中描述的技术中那样在辨别视野中执行警报显示，则可能使得用户识别警报显示的内容。
这里，例如，设想了下述用例，使得与真实空间中包括的目标对象对应的显示对象显示在显示画面上的同时将其叠加在真实空间上。注意，可以假定目标对象与用户视野中的特定位置对应。
根据本实施方式的显示画面的示例包括诸如眼镜型可佩戴设备的眼部佩戴型可佩戴设备(在下文中有时被简称为“眼部佩戴装置”)的显示画面以及诸如头戴式显示器(HMD)的通过安装在用户头部来使用的可佩戴设备的显示画面。HMD可以是透射型设备，或者可以是非透射型设备。作为透射类型，给出了下述任意类型：例如使成像设备捕获的图像显示在显示画面上从而以电子方式示出外部场景的视频透射型；以及光学透射型。此外，用于实现透射型的显示系统的示例包括能够实现透射型的任意显示系统，例如全息系统、半反射镜系统和光瞳分割系统。
此外，根据本实施方式的显示画面可以例如是诸如智能手机或平板电脑的任意设备的显示画面。
根据本实施方式的目标对象的示例包括诸如人的生物体、物体等。
例如，通过使用对捕获图像执行的任意识别技术例如面部识别技术或物体识别技术的处理来辨识根据本实施方式的目标对象。
此外，例如可以通过使用示出用户位置的位置信息和将位置与目标对象链接在一起的数据库来辨识根据本实施方式的目标对象。位置信息的示例包括由用于根据本实施方式的显示画面的装置中包括的位置辨识设备获得的位置数据和由连接至用于根据本实施方式的显示画面的装置的外部位置辨识设备获得的位置数据。位置辨识设备的示例包括能够辨识位置的任意设备，诸如用于全球导航卫星系统(GNSS)的设备。
根据本实施方式的显示对象的示例包括能够显示在显示画面上的任意显示对象，例如字符和图像(动态图像或静态图像)以及它们的组合。根据本实施方式的显示对象的具体示例包括以下示出的示例。注意，不言自明的是，根据本实施方式的显示对象的示例不限于以下示出的具体示例。
-文本标签(例如，小于或等于设定的字符数的字符串)
-文本(例如，字符数大于设定的字符数的字符串)
-非动画图标
-动画图标
-照片
-照片的缩略图
-动态图像
在设想以上提及的用例的情况下，即使使得与目标对象对应的显示对象显示在用户的辨别视野中，也存在用户不能容易地掌握显示对象与目标对象之间的关系或者显示对象的内容的担忧。具体示例包括在例如下述情况下用户不能容易地掌握显示对象与目标对象之间的关系或者显示对象的内容的担忧。
-存在多个目标对象并且使得与这些目标对象分别对应的多个显示对象被显示的情况(使得显示的信息量大的情况)
-目标对象处于上述其他范围内的情况
因此，在使得与目标对象对应的显示对象被显示的情况下，并不一定是“始终使显示对象显示在用户的辨别视野中是用于显示显示对象的期望方法”的情况。
因此，根据本实施方式的信息处理装置执行“使得基于视线信息从与目标对象对应的显示对象的多个候选(候选对象)中选择的显示对象被显示的处理”(在下文中有时被称为“显示控制处理”)。可替选地，可以假定根据本实施方式的信息处理装置是执行“从与用户的视野中的特定位置对应的多个候选对象中选择显示对象并且使所选择的显示对象与该特定位置相关联地显示在显示画面上的显示控制处理”的信息处理装置。
此外，显示对象的显示方式基于视线信息而改变，其中根据本实施方式的信息处理装置通过显示控制处理使该显示对象被显示。
这里，根据本实施方式的视线信息是示出用户的视线的数据。根据本实施方式的视线信息的示例包括“示出用户视线位置的数据”和“可用于辨识用户视线位置的数据”(或者可用于推断用户的视线位置的数据；下文中同样适用)。
示出根据本实施方式的用户视线位置的数据的示例包括“示出显示画面上的用户视线位置的坐标数据”。例如，通过具有显示画面上的参考位置处的原点的坐标系中的坐标示出显示画面上的用户视线位置。根据本实施方式的显示画面上的参考位置例如可以是预先设置的固定位置，或者可以是可以基于用户操作等来设置的位置。
在关于根据本实施方式的用户视线位置的信息是示出显示画面上的用户视线位置的坐标数据的情况下，根据本实施方式的信息处理装置例如从已经通过使用视线检测技术辨识(或推断)出用户视线位置的外部装置获取示出显示画面上的用户视线位置的坐标数据。此外，在上述情况下，根据本实施方式的信息处理装置例如可以通过使用视线检测技术的辨识(或推断)用户视线位置来获取示出显示画面上的用户视线位置的坐标数据。
根据本实施方式的视线检测技术的示例包括基于眼睛的可移动点(例如，与眼睛的可移动部分如虹膜和瞳孔对应的点)相对于眼睛的参考点(例如，与眼睛的不可移动部分如内眼角和角膜反射对应的点)的位置来检测视线的方法。注意，根据本实施方式的视线检测技术不限于以上示例。例如，根据本实施方式的信息处理装置或外部装置可以通过使用利用诸如“瞳孔角膜反射方法”、“巩膜反射方法”、“检测面部然后跟随从眼、鼻、嘴等获得的特征点的活动外观模型(AAM)”等的“角膜反射方法”的任意视线检测技术来检测用户的视线。
注意，示出根据本实施方式的用户视线位置的数据不限于上述“示出显示画面上的用户视线位置的坐标数据”。
例如，在用户佩戴透射型眼部佩戴设备或HMD的情况下或者在类似情况下，示出根据本实施方式的用户视线位置的数据可以是“示出用户看到的真实空间中的真实对象中的位置的坐标数据”。
用户看到的真实空间中的真实对象中的位置是例如基于真实对象的三维图像和通过使用视线检测技术辨识(或推断)出的视线矢量来辨识(或推断)的。注意，用于辨识用户看到的真实空间中的真实对象中的位置的方法不限于上述方法，并且可以使用能够辨识用户看到的真实空间中的真实对象中的位置的任意技术。
在关于根据本实施方式的用户视线位置的信息是示出用户看到的真实空间中的真实对象中的位置的坐标数据的情况下，根据本实施方式的信息处理装置例如从外部装置获取示出用户看到的真实空间中的真实对象中的位置的坐标数据。此外，在上述情况下，根据本实施方式的信息处理装置例如可以通过使用视线检测技术等辨识(或推断)用户看到的真实空间中的真实对象中的位置来获取示出用户看到的真实空间中的真实对象中的位置的坐标数据。
此外，根据本实施方式的可用于辨识用户视线位置的数据的示例包括其中对在显示画面上显示图像的一侧成像的捕获图像数据(其中从显示画面侧对面向显示画面的一侧成像的捕获图像数据)。此外，根据本实施方式的可用于辨识用户视线位置的数据还可以包括任意传感器的检测数据，该任意传感器获得可用于提高对用户视线位置的推断准确度的检测值，例如检测在显示画面上显示图像的一侧的红外光的红外传感器的检测数据。
此外，根据本实施方式的可用于辨识用户视线位置的数据可以是例如真实对象的三维图像和用于辨识用户的视线矢量的数据。
例如在使用可以用于辨识用户视线位置的数据的情况下，根据本实施方式的信息处理装置执行例如如上所述的用于辨识根据本实施方式的用户视线位置的方法的处理，并且辨识(或推断)用户视线位置。
图2是用于描述根据本实施方式的信息处理方法的示例的说明图，并且示出了显示对象的显示方式基于视线信息而改变的示例。
图2的A示出了在显示画面S上针对目标对象O显示的显示对象的示例。此外，图2的B示出了在显示画面S上针对目标对象O显示的显示对象的另一示例。
图2的A中的显示画面S和图2的B中的显示画面S示出了例如HMD(通过安装在用户头部来使用的可佩戴设备的显示画面的示例)的显示画面。此外，在图2中，假定用户的视线指向显示画面S的中心周围。
使用将与目标对象O对应的显示对象显示在显示画面S上的目标对象O的上方的情况作为示例。
例如在如图2的A所示的情况下，目标对象O存在于用户视线的前方，根据本实施方式的信息处理装置例如使得在显示画面S上显示“图标(图像的示例；下文中同样适用)和字符的组合”(与目标对象O对应的显示对象的示例)。
这里，考虑到以上描述的人的视野特性，用户难以辨识既不是辨别视野也不是字辨识极限的范围内的字符。因此，在图2的A所示的示例中，根据本实施方式的信息处理装置例如使字符显示在字辨识极限中，而使图标显示在有效视野中。
此外，在例如如图2的B所示的情况下，目标对象O未存在于用户的视线前方，因而在显示画面S上显示“图标”(与目标对象O对应的显示对象的另一示例)。
这里，在如图2的B所示的目标对象O未存在于用户的视线前方的情况下，即使使得与图2的A中的显示对象类似的显示对象被显示，用户也难以识别所显示的字符。此外，在其他范围中，用户难以辨识显示对象的形状。因此，在图2的B所示的示例中，例如，根据本实施方式的信息处理装置使图标显示在有效视野中。
根据本实施方式的信息处理装置例如如图2所示考虑视野特性来基于视线信息所示的用户视线改变显示对象的显示方式。
通过改变显示对象的显示方式，例如如图2所示，可以缩短用户识别显示画面S上显示的显示对象所花费的时间。
因此，根据本实施方式的信息处理装置可以有助于用户识别显示对象。
[2]依照根据本实施方式的信息处理方法的处理
接下来，更具体地描述依照根据本实施方式的信息处理方法的处理。
如上所述，根据本实施方式的信息处理装置执行显示控制处理(“使得基于视线信息从与目标对象对应的显示对象的多个候选中选择的显示对象被显示的处理”)，作为依照根据本实施方式的信息处理方法的处理。
根据本实施方式的信息处理装置使所选择的显示对象叠加并显示在真实空间或示出真实空间的图像上。这里，示出真实空间的图像的示例包括对真实空间成像的捕获图像和虚拟地示出由计算机图形(CG)技术生成的真实空间的图像。
根据本实施方式的信息处理装置使用例如能够使显示对象叠加并显示在真实空间上的任意技术(如AR技术)或者能够使显示对象叠加并显示在示出真实空间的图像上的任意技术(如图像处理技术)来使显示对象被显示。
具体地，根据本实施方式的信息处理装置执行例如根据下述(2-1)所示的第一示例的处理和根据下述(2-2)所示的第二示例的处理作为显示控制处理。
(2-1)显示控制处理的第一示例：用于改变显示对象的显示方式的处理
根据本实施方式的信息处理装置例如基于视线信息来改变显示对象的显示方式。
这里，根据本实施方式的信息处理装置改变的显示对象的显示方式的示例包括下述(A)至(D)所示的示例。
(A)改变显示对象的显示方式的第一示例
根据本实施方式的信息处理装置通过改变显示对象的布局来改变显示对象的显示方式。
例如，如参照图2的A和图2的B所示，根据本实施方式的信息处理装置考虑视野特性通过基于由视线信息所示的用户视线放置和布置显示对象来改变显示对象的布局。
(B)改变显示对象的显示方式的第二示例
根据本实施方式的信息处理装置通过改变显示对象上的装饰方式来改变显示对象的显示方式。
根据本实施方式的信息处理装置改变的显示对象上的装饰方式的示例包括以下所示的示例。注意，不言自明的是，显示对象上的装饰的示例不限于以下所示的示例。
-使字符(显示对象的示例)加粗。
-用彩色边缘标记图像(显示对象的示例)。
-使字符或图像闪烁。
根据本实施方式的信息处理装置例如以下述方式执行对改变显示对象上的装饰方式的突出显示。
-在使得字符(显示对象的示例)显示在既不是辨别视野也不是字辨识极限的有效视野的范围内的情况下，根据本实施方式的信息处理装置使字符加粗。此外，在使得字符显示在辨别视野或字辨识极限的范围内的情况下，根据本实施方式的信息处理装置不会使字符加粗。
-在使得图像(显示对象的示例)显示在其他范围内的情况下，根据本实施方式的信息处理装置用彩色边缘标记该图像或者使该图像闪烁。此外，在使得图像显示在辨别视野、字辨识极限或有效视野内的情况下，根据本实施方式的信息处理装置既不用彩色边缘标记该图像也不使该图像闪烁。(即，使作为显示对象的图像自身被显示)。
(C)改变显示对象的显示方式的第三示例
根据本实施方式的信息处理装置通过改变显示对象的省略方式来改变显示对象的显示方式。
例如在并非所有字符(显示对象的示例)都能够显示在字辨识极限内的情况下，根据本实施方式的信息处理装置以任意省略格式例如用三点引导段(“...”)进行省略来执行对字符的省略。此外，例如在所有字符都能够显示在字辨识极限内的情况下，根据本实施方式的信息处理装置不执行对字符的省略。也就是说，可以假定在所选择的显示对象的属性信息包括文本信息的情况下，根据本实施方式的信息处理装置基于视线信息改变所显示的文本信息的字符的数量。
(D)改变显示对象的显示方式的第四示例
根据本实施方式的信息处理装置可以通过例如将根据上述(A)中所示的第一示例的显示方式的改变至根据上述(C)中所示的第三示例的显示方式的改变中的两个或更多个显示方式的改变进行组合来改变显示对象的显示方式。
例如，如根据上述(A)中所示的第一示例的显示方式的改变至根据上述(D)中所示的第四示例的显示方式的改变所示，根据本实施方式的信息处理装置考虑视野特性来基于由视线信息所示的用户视线来改变显示对象的显示方式。
注意，用于改变显示对象的显示方式的处理不限于以上所示的示例。例如，根据本实施方式的信息处理装置可以执行如下述(i)至(iv)所示的处理。
(i)
例如，根据本实施方式的信息处理装置还基于状态信息改变显示对象的显示方式。
这里，根据本实施方式的状态信息是示出用户状态的数据。根据本实施方式的状态信息的示例包括示出对用户行为的识别结果的数据、示出用户会话状态的数据等。
示出对用户行为的识别结果的数据示出了例如对用户行为如静止、步行、行进、上下楼梯以及驾驶交通工具的识别结果。例如基于能够检测移动并且包括在用于根据本实施方式的显示画面的装置中的传感器(例如加速度传感器或陀螺仪传感器)的检测结果来推断用户行为。注意，可以通过能够识别用户行为的任意技术来推断用户行为。用于推断用户行为的处理可以由根据本实施方式的信息处理装置来执行，或者可以在根据本实施方式的信息处理装置的外部装置中执行。
例如，根据本实施方式的信息处理装置参考将行为与显示方式链接在一起的表(或数据库)，并且使显示对象以与所识别的行为对应的显示方式显示。用于改变与所识别的行为对应的显示方式的方法的示例包括下述方法：根据所识别的行为的移动程度改变显示对象的大小、省略程度以及由动画、闪烁导致的移动等中的一个或两个或更多个。作为具体示例，例如在目标对象存在于用户的有效视野中并且用户处于运动状态的情况下，根据本实施方式的信息处理装置采用仅有图标(显示对象的示例)的布局。
此外，示出用户会话状态的数据的示例包括示出用户是否进行会话的数据。示出用户会话状态的数据是通过例如基于用于根据本实施方式的显示画面的装置中包括的诸如麦克风的语音检测设备的检测结果检测到的会话而推断出的。用于推断用户会话状态的处理可以由根据本实施方式的信息处理装置来执行，或者可以在根据本实施方式的信息处理装置的外部装置中执行。
例如，根据本实施方式的信息处理装置使显示对象以与由示出用户会话状态的数据所示的会话状态对应的显示方式被显示。用于改变与会话状态对应的显示方式的方法的示例包括下述方法：在用户进行会话的情况下，改变显示对象的大小、省略程度以及由动画、闪烁导致的移动等中的一个或两个或更多个。
注意，不言自明的是，基于状态信息改变显示对象的显示方式的示例不限于以上所示的示例。
(ii)
例如，根据本实施方式的信息处理装置还基于环境信息改变显示对象的显示方式。
这里，根据本实施方式的环境信息是示出用户的周围环境的数据。根据本实施方式的示出周围环境的数据的示例包括示出照度的数据、示出亮度的数据等。
示出照度的数据的示例包括示出用于根据本实施方式的显示画面的装置中包括的照度传感器的检测结果的数据。
例如在目标对象存在于用户的有效视野中并且照度大于规定阈值的情况下，根据本实施方式的信息处理装置通过使字符(显示对象的示例)加粗等使得更易于观看到显示对象。注意，不言自明的是，用于在使用示出照度的数据的情况下改变显示方式的方法不限于以上所示的示例。
此外，示出亮度的数据的示例包括示出用于根据本实施方式的显示画面的装置中包括的亮度传感器的检测结果的数据。在根据本实施方式的用于显示画面的装置是眼部佩戴设备或HMD的情况下，布置亮度传感器以便检测用户面对的一侧的亮度。
例如在目标对象存在于用户的有效视野中并且亮度大于规定阈值的情况下，根据本实施方式的信息处理装置通过使字符(显示对象的示例)加粗等使得更易于观看到显示对象。注意，不言自明的是，用于在使用示出亮度的数据的情况下改变显示方式的方法不限于以上所示的示例。
注意，不言自明的是，基于环境信息改变显示对象的显示方式的示例不限于以上所示的示例。
(iii)
例如，根据本实施方式的信息处理装置还基于从显示对象的多个候选中选择的显示对象来改变显示对象的显示方式。例如，根据本实施方式的信息处理装置基于示出所选择的显示对象的属性的属性信息来改变显示对象的显示方式。
根据本实施方式的属性信息的示例包括：包括显示对象的类型、重要程度和优先程度中的一个或两个或更多个的数据。
例如，在目标对象存在于用户的有效视野之外并且由属性信息所示的显示对象的重要程度大于规定阈值的情况下，根据本实施方式的信息处理装置通过使显示对象闪烁、用彩色边缘标记显示对象等更进一步地强调显示对象。注意，不言自明的是，用于在使用属性信息的情况下改变显示方式的方法不限于以上所示的示例。
注意，不言自明的是，基于显示对象来改变该显示对象的显示方式的示例不限于以上所示的示例。
(iv)
根据本实施方式的信息处理装置例如可以通过执行组合了上述(i)中所示的处理至上述(iii)中所示的处理中的两个或更多个处理的处理来改变显示对象的显示方式。
(2-2)显示控制处理的第二示例：用于显示对象的选择的处理
根据本实施方式的信息处理装置从与目标对象对应的显示对象的多个候选中选择显示对象。
根据本实施方式的信息处理装置例如基于下述来选择与目标对象对应的显示对象：基于视线信息辨识出的显示画面上的被观看点的位置、显示画面上的目标对象的位置以及示出视野特性的信息。可替选地，可以假定根据本实施方式的信息处理装置基于根据视线信息辨识出的观看点的位置与(与目标对象对应的)特定位置之间的关系从多个候选对象中选择与特定位置对应的显示对象。根据本实施方式的示出视野特性的信息的示例包括参照图1所示的示出人的视野特性的数据。
更具体地，根据本实施方式的信息处理装置计算上述观看点的位置与上述目标对象的位置之间的距离。然后，根据本实施方式的信息处理装置基于计算出的距离和示出视野特性的信息来选择与目标对象对应的显示对象。
根据计算出的距离，根据本实施方式的信息处理装置评估上述目标对象的位置落入视野特性的范围。然后，根据本实施方式的信息处理装置从与目标对象对应的显示对象的多个候选中选择与所评估的范围对应的显示对象。
例如，在所评估的范围在有效视野内的情况下，即，在目标对象存在于用户的有效视野中的情况下，根据本实施方式的信息处理装置选择包括字符的显示对象。此外，例如，在所评估的范围在有效视野之外的情况下，即，在目标对象存在于用户的有效视野之外的情况下，根据本实施方式的信息处理装置选择排除了字符的显示对象。
此外，在已针对显示对象的多个候选中的每个设定了优先程度的情况下，根据本实施方式的信息处理装置可以优先选择具有高优先程度的显示对象的候选。例如，根据本实施方式的信息处理装置可以通过参考属性信息来掌握优先程度。
例如，根据本实施方式的信息处理装置通过执行根据上述(2-1)所示的第一示例的处理和根据上述(2-2)所示的第二示例的处理使得从与目标对象对应的显示对象的多个候选中选择的显示对象显示在显示画面上。此外，显示对象的显示方式基于视线信息等动态地改变。
注意，根据本实施方式的显示控制处理不限于根据上述(2-1)所示的第一示例的处理或者根据上述(2-2)所示的第二示例的处理。
例如，根据本实施方式的信息处理装置还可以基于视线信息等执行用于抑制显示的动态改变的处理。
根据本实施方式的信息处理装置例如以设定的时间间隔执行根据本实施方式的显示控制处理。
根据本实施方式的时间间隔的示例包括每个设定的秒数、与设定数量的帧对应的间隔等。根据本实施方式的时间间隔可以是预先设定的固定时间间隔，或者可以是能够基于用户的操作等改变的可变时间间隔。例如，根据本实施方式的信息处理装置可以以1秒或更长的间隔执行根据本实施方式的显示控制处理。可替选地，根据本实施方式的信息处理装置可以例如关于60fps的显示帧速率每2帧或更多帧执行根据本实施方式的显示控制处理。也就是说，根据本实施方式的信息处理装置可以以比显示1帧的时间间隔更长的时间间隔来执行根据本实施方式的显示控制处理。
通过以设定的时间间隔执行根据本实施方式的显示控制处理，使得显示画面上的显示对象的显示动态改变的频率小于针对每一帧执行根据本实施方式的显示控制处理的情况下的频率。因此，通过以设定的时间间隔执行根据本实施方式的显示控制处理，抑制了显示画面上的显示对象的显示的切换，并且因此可以减轻用户的负担。注意，就减轻用户的负担而言，可以以如上作为示例所示的1秒或更长的间隔来执行根据本实施方式的显示控制处理作为示例。
此外，例如，根据本实施方式的信息处理装置可以执行下述处理：在不执行根据本实施方式的显示控制处理的时段中维持已经显示的显示对象的布局。
根据本实施方式的信息处理装置计算基于视线信息辨识出的显示画面上的被观看点的位置与显示画面上的目标对象的位置之间的距离。然后，根据本实施方式的信息处理装置通过基于计算出的距离放大或缩小显示对象来维持已经显示的显示对象的布局。
通过维持已经显示的显示对象的布局，可以在不执行根据本实施方式的显示控制处理的时段中减少看到已经显示的显示对象的用户能够感受到的不协调感。
例如，根据本实施方式的信息处理装置执行如上所述的显示控制处理，作为依照根据本实施方式的信息处理方法的处理。
注意，为了方便起见，上述显示控制处理是规定了依照根据本实施方式的信息处理方法的处理的处理。因此，例如，依照根据本实施方式的信息处理方法的处理可以(基于任意的切割和划分方式)将上述显示控制处理作为两个或更多个处理来掌握。
[3]根据本实施方式的信息处理方法的处理的示例
接下来，示出了依照根据本实施方式的信息处理方法的处理的具体示例。
图3是示出依照根据本实施方式的信息处理方法的处理的示例的流程图。
根据本实施方式的信息处理装置搜索目标对象并检测该目标对象(S100)。根据本实施方式的信息处理装置例如通过“对捕获的图像执行根据诸如面部识别技术或物体识别技术的任意识别技术的处理”或“使用位置信息和将位置与目标对象链接在一起的数据库”或这些的组合来检测目标对象。
注意，步骤S100的处理例如可以在下述装置中执行：根据本实施方式的信息处理装置的外部装置，例如可以与根据本实施方式的信息处理装置进行通信的服务器。在外部装置中执行步骤S100的处理的情况下，根据本实施方式的信息处理装置使用从该外部装置获取的对目标对象的检测结果执行步骤S102的处理和稍后描述的后续步骤。
根据本实施方式的信息处理装置评估是否检测到目标对象(S102)。
在步骤S102中未评估出检测到目标对象的情况下，根据本实施方式的信息处理装置结束图3所示的处理。此外，在步骤S102中评估出检测到目标对象的情况下，根据本实施方式的信息处理装置执行步骤S104的处理和稍后描述的后续步骤。
在步骤S102中评估出检测到目标对象的情况下，根据本实施方式的信息处理装置基于视线信息计算显示画面上的被观看点(注视点)的位置(S104)。根据本实施方式的信息处理装置例如将从视线信息辨识出的视线方向上的直线与显示画面的交叉点视作显示画面上的被观看点的位置。注意，用于计算显示画面上的被观看点的位置的方法不限于上述方法，并且根据本实施方式的信息处理装置可以使用能够辨识显示画面上的被观看点的位置的任意方法。
根据本实施方式的信息处理装置从诸如存储单元(稍后描述)的记录介质中读出与检测到的目标对象链接的显示对象的数据(S106)。
根据本实施方式的信息处理装置计算显示画面上的检测到的目标对象的位置(S108)。在步骤S100中检测到多个目标对象的情况下，根据本实施方式的信息处理装置计算每个检测到的目标对象的位置。
例如，当在显示画面上显示包括目标对象的捕获图像时，根据本实施方式的信息处理装置将该目标对象的显示画面上的坐标视作显示画面上的目标对象的位置。注意，用于计算显示画面上的目标对象的位置的方法不限于上述方法，并且根据本实施方式的信息处理装置可以使用能够辨识显示画面上的目标装置的位置的任意方法。
根据本实施方式的信息处理装置计算在步骤S104中计算的显示画面上的被观看点的位置与在步骤S108中计算的显示画面上的目标对象的位置之间的距离(S110)。在步骤S100中检测到多个目标对象的情况下，根据本实施方式的信息处理装置针对每个检测到的目标对象计算该距离。
根据本实施方式的信息处理装置基于视野特性的信息和在步骤S110中计算的距离来选择要被被显示在显示画面上的显示对象(S112)。在步骤S100中检测到多个目标对象的情况下，根据本实施方式的信息处理装置例如针对每个目标对象选择显示对象。然后，根据本实施方式的信息处理装置计算所选择的显示对象的布局，并且使该显示对象显示在显示画面上(S114)。注意，稍后描述步骤S112的处理和步骤S114的处理的示例。
例如，根据本实施方式的信息处理装置通过执行图3所示的处理使得从与目标对象对应的显示对象的多个候选中选择的显示对象显示在显示画面上。此外，例如通过执行如图3所示的处理，显示对象的显示方式基于视线信息等动态地改变。
注意，依照根据本实施方式的信息处理方法的处理不限于图3所示的示例。
例如，在应用执行了除根据本实施方式的显示控制处理之外的描绘的情况下，作为异常处理，可以停止图3所示的显示控制处理。这里，用于评估是否在上述情况下停止显示控制处理的数据(例如，示出中断的开启(ON)或关闭(OFF)的标志等)例如包括在该应用的元数据中。
图4A至图4C中的每个是示出通过依照根据本实施方式的信息处理方法的处理显示的显示对象的显示示例的说明图。图4A示出了组合了图标和字符的显示对象的显示示例。此外，图4B示出了示出字符的显示对象的显示示例。此外，图4C示出了组合了标题、字符和图标的显示对象的显示示例。
与目标对象对应的显示对象所示的内容可以是例如关于人的内容(例如，姓名、昵称、家乡、照片等或者这些的组合)和关于对象的内容(例如，“食物的营养价值”、“书籍的作者和封面”、“商店的名称、地点和电话号码”等)中的一者或两者。注意，与目标对象对应的显示对象所示的内容不限于以上所示的示例，而可以是任意内容。
注意，尽管图4A至图4C为了方便起见示出了与多个目标对象对应的显示对象，但是在图4A至图4C所示的显示对象中可以存在不是基于视线信息而显示的显示对象。
图5是示出依照根据本实施方式的信息处理方法的处理的示例的流程图，并且示出了图3中的步骤S112的处理和步骤S114的处理的示例。此外，图6是用于描述依照根据本实施方式的信息处理方法的处理的示例的说明图，并且示出了根据本实施方式的属性信息的示例。
根据本实施方式的信息处理装置确定显示画面上的能够使所选择的显示对象被显示的显示范围(可显示区域)(S200)。注意，在步骤S200中，根据本实施方式的信息处理装置还确定使得显示对象被显示的显示范围中的显示位置。例如，如图2所示，确定显示对象的显示位置处于目标对象附近。注意，在多个字符串被显示为显示对象的情况下，可以按照字符串的优先程度的顺序沿显示范围的竖直方向布置这些字符串。此外，在显示对象是字符串的情况下，可以将字符串优先布置在辨别视野或字辨识极限中。
根据本实施方式的信息处理装置例如基于以下来确定显示画面上的能够使显示对象被显示的显示范围：基于视线信息辨识出的显示画面上的被观看点的位置和示出视野特性的信息。根据本实施方式的信息处理装置例如基于通过观看点的位置和示出视野特性的信息而辨识出的有效视野来确定显示范围。注意，可以假定显示范围大于有效视野并且涵盖有效视野。此外，可以假定显示范围是小于显示画面S的范围。
根据本实施方式的信息处理装置参考图6所示的属性信息并且从与具有最高优先程度的字段对应的显示对象的候选开始依次执行稍后描述的步骤S202至步骤S206中的处理。此外，在不存在显示对象的候选的情况下，根据本实施方式的信息处理装置结束图5所示的处理。
根据本实施方式的信息处理装置评估字段的值是否是字符串并且步骤S200中确定的显示位置是否在有效视野的范围之外(S202)。
在步骤S202中评估出字段的值是字符串并且步骤S200中确定的显示位置在有效视野的范围之外的情况下，根据本实施方式的信息处理装置对与另一字段对应的显示对象执行从步骤S202开始的处理。也就是说，可以假定在步骤S202的评估结果是肯定性评估(“是”)的情况下，实际上禁止选择包括存在于有效视野的范围之外的字符串的候选对象作为显示对象。
此外，在步骤S202中未评估出字段的值是字符串并且在步骤S200中确定的显示位置在有效视野的范围之外的情况下，根据本实施方式的信息处理装置将显示对象布置在所确定的显示范围内(S204)。也就是说，在评估出字段的值不是字符串的情况下或者在评估出所确定的显示位置在有效视野的范围内的情况下，显示对象被布置在所确定的显示范围内。注意，在将字符串作为显示对象布置在如上述的第二示例中描述的既不是辨别视野也不是字辨识极限的有效视野的范围内的情况下，根据本实施方式的信息处理装置可以使字符加粗。此外，在将字符串布置在辨别视野或字辨识极限的范围内的情况下，根据本实施方式的信息处理装置可以不使字符加粗。然后，根据本实施方式的信息处理装置评估是否由于布置显示对象导致所布置的显示对象突出步骤S200中确定的显示范围之外(S206)。
在步骤S206中未评估出所布置的显示对象突出所确定的显示范围之外的情况下，根据本实施方式的信息处理装置对与另一字段对应的显示对象执行从步骤S202开始的处理。
此外，在步骤S206中评估出所布置的显示对象突出所确定的显示范围之外的情况下，根据本实施方式的信息处理装置结束图5所示的处理。即，重复步骤S206中的评估直到实际上难以或不可能在所确定的显示范围内布置另一显示对象。注意，在由于布置显示对象导致该显示对象的一部分突出有效视野之外的情况下，可以显示该显示对象的突出部分。
通过图5的处理，实际上禁止在有效视野的范围之外布置字符串，并且仅在有效视野的范围内布置字符串。因此，字符串仅被布置在有效视野的范围内；因此，减少了用户进行识别的负担并且缩短了用户识别信息的时间。注意，作为次要效果，减少了显示范围中的信息量并且因此还可以减少作为系统的处理负担。
根据本实施方式的信息处理装置执行例如图5所示的处理作为图3中的步骤S112的处理和步骤S114的处理。例如，通过执行图5所示的处理，显示对象被显示在所确定的显示范围中。
注意，图3中的步骤S112的处理和步骤S114的处理不限于图5所示的处理。例如，如上所述，在既不是辨别视野也不是字辨识极限的范围内用户难以辨识字符；因此，在图5的步骤S202中会看到“辨别视野或字辨识极限的范围”而不是“有效视野的范围”。
此外，根据本实施方式的信息处理装置例如可以使用超文本标记语言(HTML)的流布局来布置显示对象。
此外，如上所述，根据本实施方式的信息处理装置例如可以进一步基于状态信息、环境信息和所选择的显示对象中的一个或两个或更多个来改变显示对象的显示方式。
(根据本实施方式的信息处理装置)
接下来，描述能够执行以上所述的依照根据本实施方式的信息处理方法的处理的、根据本实施方式的信息处理装置的配置的示例。
图7是示出根据本实施方式的信息处理装置100的配置的示例的框图。信息处理装置100包括例如通信单元102和控制单元104。
此外，信息处理装置100可以包括例如只读存储器(ROM，未示出)、随机存取存储器(RAM，未示出)、存储单元(未示出)、用户能够操作的操作单元(未示出)、在显示画面上显示各种画面的显示单元(未示出)等。信息处理装置100例如借助于作为数据传输路径的总线将上述部件连接在一起。
ROM(未示出)存储用于控制的数据，例如待由控制单元104使用的程序和操作参数。RAM(未示出)临时存储待由控制单元104执行的程序等。
存储单元(未示出)是信息处理装置100中包括的存储装置，并且例如存储各种应用和各种数据，例如用于根据本实施方式的信息处理方法的数据如属性信息和显示对象。这里，存储单元(未示出)的示例包括诸如硬盘的磁记录介质、诸如闪速存储器的非易失性存储器等。此外，存储单元(未示出)可以是可附接至信息处理装置100并且可从信息处理装置100拆卸的。
作为操作单元(未示出)，给出了稍后描述的操作输入设备。此外，作为显示单元(未示出)，给出了稍后描述的显示设备。
[信息处理装置100的硬件配置的示例]
图8是示出根据本实施方式的信息处理装置100的硬件配置的示例的说明图。信息处理装置100包括例如MPU 150、ROM 152、RAM 154、记录介质156、输入/输出接口158、操作输入设备160、显示设备162和通信接口164。此外，信息处理装置100例如借助于作为数据传输路径的总线166将部件连接在一起。
MPU 150包括例如包括诸如MPU的运算电路的一个或两个或更多个处理器、各种处理电路等，并且用作控制整个信息处理装置100的控制单元104。此外，MPU 150例如在信息处理装置100中起到稍后描述的处理单元110的作用。注意，处理单元110可以包括能够执行处理单元110的处理的专用(或通用)电路(例如，与MPU 150分开设置的处理器等)。
ROM 152存储用于控制的数据，例如待由MPU 150使用的程序和操作参数等。RAM154临时存储例如待由MPU 150执行的程序等。
记录介质156例如用作存储单元(未示出)，并且存储各种应用和各种数据，例如用于根据本实施方式的信息处理方法的数据如属性信息。这里，记录介质156的示例包括诸如硬盘的磁记录介质和诸如闪速存储器的非易失性存储器。此外，记录介质156可以是可附接至信息处理装置100并且可从信息处理装置100拆卸的。
输入/输出接口158例如连接操作输入设备160和显示设备162。操作输入设备160用作操作单元(未示出)，并且此外显示设备162用作显示单元(未示出)。这里，输入/输出接口158的示例包括通用串行总线(USB)端子、数字视频接口(DVI)端子、高清晰度多媒体接口(HDMI)(注册商标)端子、各种处理电路等。
此外，操作输入设备160设置在信息处理装置100上，并且例如连接至信息处理装置100内部的输入/输出接口158。操作输入设备160的示例包括按钮、方向键和旋转选择器如微动拨盘、这些的组合等。
此外，显示设备162设置在信息处理装置100上，并且例如连接至信息处理装置100内部的输入/输出接口158。显示设备162的示例包括液晶显示器、有机电致发光显示器(有机EL显示器；也被称为有机发光二极管显示器(OLED显示器))等。
注意，不言自明的是，输入/输出接口158可以连接至外部设备，例如信息处理装置100的外部操作输入设备(例如，键盘、鼠标等)或外部显示设备。此外，显示设备162例如可以是其中可以进行显示和用户操作的设备，例如触摸板。
通信接口164是包括在信息处理装置100中的通信装置，并且用作通信单元102，例如用于经由网络(或者直接)无线或有线地与诸如成像设备的外部设备或诸如服务器的外部装置进行通信。这里，通信接口164的示例包括通信天线和射频(RF)电路(无线通信)、IEEE 802.15.1端口和发送/接收电路(无线通信)、IEEE 802.11端口和发送/接收电路(无线通信)、局域网(LAN)端子和发送/接收电路(有线通信)等。
信息处理装置100例如借助于图8所示的配置执行依照根据本实施方式的信息处理方法的处理。注意，根据本实施方式的信息处理装置100的硬件配置不限于图8所示的配置。
例如，在经由连接的外部通信设备执行与外部装置等的通信的情况下或者在作为以独立的方式执行处理的配置的情况下，信息处理装置100可以不包括通信接口164。此外，通信接口164可以是能够借助于多个通信系统与一个或两个或更多个外部装置等执行通信的配置。
此外，信息处理装置100可以具有例如不包括记录介质156、操作输入设备160或显示设备162的配置。
此外，例如，可以使用一个或更多个IC来获得图8所示的配置(或根据修改示例的配置)的部分或全部。
现在将再次参照图7描述信息处理装置100的配置的示例。通信单元102是包括在信息处理装置100中的通信装置，并且经由网络(或者直接)无线或有线地与诸如成像设备的外部设备和诸如服务器的外部装置进行通信。此外，通信单元102的通信例如由控制单元104控制。
这里，通信单元102的示例包括通信天线和RF电路、LAN终端和发送/接收电路等，但是通信单元102的配置不限于此。例如，通信单元102可以具有与能够执行通信的任意标准对应的配置例如USB端子和发送/接收电路，或者能够经由网络与外部装置执行通信的任意配置。此外，通信单元102可以是能够借助于多个通信系统与一个或两个或更多个外部装置等执行通信的配置。
控制单元104包括例如MPU等，并且起到控制整个信息处理装置100的作用。此外，控制单元104包括例如处理单元110，并且起到主要执行依照根据本实施方式的信息处理方法的处理的作用。
处理单元110起到主要执行根据本实施方式的显示控制处理的作用，并且基于视线信息使得从与目标对象对应的显示对象的多个候选中选择的显示对象显示在显示画面上。
此外，处理单元110例如基于视线信息改变显示对象的显示方式，例如如上述(A)至上述(D)所示。处理单元110可以进一步基于状态信息、环境信息和所选择的显示对象中的一个或两个或更多个来改变显示对象的显示方式。
更具体地，处理单元110例如执行根据上述(2-1)所示的第一示例的处理和根据上述(2-2)所示的第二示例的处理；从而使所选择的显示对象显示在显示画面上，并且进一步动态地改变显示对象的显示方式。此外，如上所述，处理单元110还可以执行用于抑制显示的动态改变等的处理。
此外，处理单元110例如如参照图3所述执行检测目标对象的处理；并且在检测到目标对象的情况下，处理单元110执行根据本实施方式的显示控制处理。
例如，通过包括处理单元110，控制单元104主要执行依照根据本实施方式的信息处理方法的处理(例如，根据本实施方式的显示控制处理)。
信息处理装置100例如借助于图7所示的配置执行依照根据本实施方式的信息处理方法的处理(例如，根据本实施方式的显示控制处理)。
因此，信息处理装置100例如可以借助于图7所示的配置来促进用户对显示对象的识别。
此外，信息处理装置100可以例如借助于图7所示的配置来呈现通过执行如上所述的依照根据本实施方式的信息处理方法的处理而获得的效果。
注意，根据本实施方式的信息处理装置的配置不限于图7所示的配置。
例如，根据本实施方式的信息处理装置可以将图7所示的处理单元110与控制单元104分开地包括在内(例如，通过使用另一处理电路获得处理单元110)。
此外，如上所述，为了方便起见，根据本实施方式的显示控制处理是规定了依照根据本实施方式的信息处理方法的处理的处理。因此，用于执行依照根据本实施方式的信息处理方法的处理的配置不限于图7所示的配置，并且可以具有与依照根据本实施方式的信息处理方法的处理的切割和划分方式一致的配置。
此外，例如，在经由具有与通信单元102类似功能和类似配置的外部通信设备执行与外部装置通信的情况下或者以独立方式执行处理的情况下，根据本实施方式的信息处理装置可以不包括通信单元102。
以上，使用作为本实施方式的信息处理装置进行了说明；但是本实施方式不限于这种形式。本实施方式例如可以用于可以执行依照根据本实施方式的信息处理方法的处理的各种设备，例如通过安装在用户头部来使用诸如眼部佩戴设备和HMD的可佩戴设备、诸如个人计算机(PC)和服务器的计算机、诸如移动电话和智能电话的通信设备、以及平板电脑型设备。此外，本实施方式例如还可以用于可以并入如上所述的设备中的处理IC。
此外，根据本实施方式的信息处理装置例如可以用于预设了与网络的连接(或装置之间的通信)的信息处理系统，例如云计算等。执行依照根据本实施方式的信息处理方法的处理的信息处理系统的示例包括由执行根据本实施方式的显示控制处理的装置控制另一装置的显示画面上的显示的系统。
(根据本实施方式的程序)
可以通过由计算机系统中的处理器等执行用于使计算机系统用作根据本实施方式的信息处理装置的程序(例如，可以执行依照根据本实施方式的信息处理方法的处理如根据本实施方式的显示控制处理的程序)来促进用户对显示对象的识别。这里，作为根据本实施方式的计算机系统，给出了单个计算机或多个计算机。根据本实施方式的计算机系统执行依照根据本实施方式的信息处理方法的一系列处理。
此外，通过由使计算机系统中的处理器等执行用于使计算机系统用作根据本实施方式的信息处理装置的程序，可以呈现出上述依照根据本实施方式的信息处理方法的处理获得的效果。
以上已经参照附图描述了本公开内容的一个或多个优选实施方式，然而本公开内容不限于以上示例。本领域技术人员可以在所附权利要求书的范围内发现各种变化和修改，并且应当理解的是，这些变化和修改将自然地归入本公开内容的技术范围内。
例如，尽管在上文中陈述了提供用于使计算机系统用作根据本实施方式的信息处理装置的程序(计算机程序)，但是本实施方式还可以进一步提供存储有上述程序的记录介质(计算机可读介质)。
上述配置示出了本实施方式的示例并且显然包括在本公开内容的技术范围内。
此外，本说明书中描述的效果仅是说明性或示例性效果，而并非限制性的。也就是说，结合或替代上述效果，根据本公开内容的技术可以实现本领域技术人员根据本说明书的描述而清楚的其他效果。
此外，本技术还可以被如下配置。
(1)
一种信息处理装置，包括：
处理单元，所述处理单元被配置成：基于示出用户视线的视线信息，从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且执行使所选择的显示对象与所述特定位置相关联地显示在显示画面上的显示控制处理。
(2)
根据(1)所述的信息处理装置，
其中，所示处理单元基于所述视线信息改变所述显示对象的显示方式。
(3)
根据(2)所述的信息处理装置，
其中，所述处理单元通过改变所述显示对象的布局、所述显示对象上的装饰方式以及所述显示对象的省略方式中的至少一个来改变所述显示对象的所述显示方式。
(4)
根据(2)或(3)所述的信息处理装置，
其中，所述处理单元还基于示出所述用户的运动状态和会话状态中的至少一个的状态信息来改变所述显示对象的所述显示方式。
(5)
根据(1)至(4)中任一项所述的信息处理装置，
其中，所述多个候选对象包括属性信息，并且
所述处理单元还基于所选择的所述显示对象的所述属性信息来改变所述显示对象的显示方式。
(6)
根据(5)所述的信息处理装置，
其中，所述处理单元基于有关所选择的所述显示对象的所述属性信息是否包括文本信息或者所选择的所述显示对象的所述属性信息是否不包括文本信息的评估来确定所述显示对象的所述显示方式。
(7)
根据(6)所述的信息处理装置，
其中，在所选择的所述显示对象的所述属性信息包括文本信息的情况下，所述处理单元基于所述视线信息改变所显示的所述文本信息的字符的数量。
(8)
根据(6)或(7)所述的信息处理装置，
其中，在所选择的所述显示对象的所述属性信息包括文本信息的情况下，所述处理单元基于所述视线信息执行对所述文本信息的突出显示。
(9)
根据(5)至(8)中任一项所述的信息处理装置，
其中，所述多个候选对象中的每个包括示出优先程度的信息作为所述属性信息，并且
所述处理单元从所述多个候选对象中优先选择具有相对高的优先程度的候选对象作为所述显示对象。
(10)
根据(1)至(9)中任一项所述的信息处理装置，
其中，所述处理单元基于根据所述视线信息辨识的被观看点的位置与所述特定位置之间的关系从所述多个候选对象中选择与所述特定位置对应的显示对象。
(11)
根据(10)所述的信息处理装置，
其中，所述处理单元基于有关所述观看点的所述位置与所述特定位置之间的距离是否小于或等于第一值或者所述观看点的所述位置与所述特定位置之间的所述距离是否大于所述第一值并且小于或等于第二值的评估来从所述多个候选对象中选择与所述特定位置对应的显示对象。
(12)
根据(11)所述的信息处理装置，
其中，所述处理单元基于评估出所述观看点的所述位置与所述特定位置之间的所述距离大于所述第一值并且小于或等于所述第二值来禁止从所述多个候选对象中选择包括文本信息的候选对象。
(13)
根据(11)或(12)所述的信息处理装置，
其中，所述第一值和所述第二值是基于视野特性的值。
(14)
根据(10)至(13)中任一项所述的信息处理装置，
其中，所述处理单元
基于所述观看点的所述位置与所述特定位置之间的所述关系，确定使得所述显示对象被显示的显示画面的显示范围，并且
基于视野特性和所确定的所述显示范围来限制对于待被显示在所述显示画面上的所述显示对象的布置。
(15)
根据(1)至(14)中任一项所述的信息处理装置，
其中，所述处理单元
执行检测与所述特定位置对应的目标对象的处理，并且
根据对所述目标对象的检测执行所述显示控制处理。
(16)
根据(1)至(15)中任一项所述的信息处理装置，
其中，所述处理单元
以比显示1帧的时间间隔更长的时间间隔来执行所述显示控制处理，并且
在不执行所述显示控制处理的时段中执行维持已经显示的显示对象的布局的布局处理。
(17)
根据(16)所述的信息处理装置，
其中，所述处理单元
基于根据所述视线信息辨识的被观看点的位置与所述特定位置之间的距离执行所述布局处理。
(18)
根据(1)至(17)中任一项所述的信息处理装置，
其中，所述处理单元使所选择的显示对象叠加并显示在真实空间或示出所述真实空间的图像上。
(19)
一种信息处理方法，包括：
由信息处理装置执行下述显示控制处理：基于示出用户视线的视线信息从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且使所选择的显示对象与所述特定位置相关联地显示在显示画面上。
(20)
一种计算机可读介质，包括：
能够在信息处理装置上操作以执行信息处理方法的指令，
其中，所述信息处理方法包括
由所述信息处理装置执行下述显示控制处理：基于示出用户视线的视线信息从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且使所选择的显示对象与所述特定位置相关联地显示在显示画面上。
(II-1)
一种信息处理装置，包括：处理单元，所述处理单元被配置成执行下述处理：使得基于示出用户视线的视线信息从与目标对象对应的显示对象的多个候选中选择的显示对象被显示，
其中，所述处理单元基于所述视线信息改变所述显示对象的显示方式。
(II-2)
根据(II-1)所述的信息处理装置，其中所述处理单元通过改变所述显示对象的布局来改变所述显示对象的所述显示方式。
(II-3)
根据(II-1)或(II-2)所述的信息处理装置，其中，所述处理单元通过改变所述显示对象上的装饰方式来改变所述显示对象的所述显示方式。
(II-4)
根据(II-1)至(II-3)中任一项所述的信息处理装置，其中，所述处理单元通过改变所述显示对象的省略方式来改变所述显示对象的所述显示方式。
(II-5)
根据(II-1)至(II-4)中任一项所述的信息处理装置，其中，所述处理单元还基于示出所述用户的状态的状态信息来改变所述显示对象的所述显示方式。
(II-6)
根据(II-1)至(II-5)中任一项所述的信息处理装置，其中，所述处理单元还基于示出所述用户的周围环境的环境信息来改变所述显示对象的所述显示方式。
(II-7)
根据(II-1)至(II-6)中任一项所述的信息处理装置，其中，所述处理单元还基于所选择的所述显示对象来改变所述显示对象的显示方式。
(II-8)
根据(II-1)至(II-7)中任一项所述的信息处理装置，其中，所述处理单元基于下述来选择与所述目标对象对应的所述显示对象：基于所述视线信息辨识的显示画面上的被观看点的位置、所述显示画面上的所述目标对象的位置以及示出视野特性的信息的基础。
(II-9)
根据(II-8)所述的信息处理装置，其中，所述处理单元
计算所述观看点的位置与所述目标对象的位置之间的距离，以及
基于计算出的所述距离和示出视野特性的所述信息来选择与所述目标对象对应的所述显示对象。
(II-10)
根据(8)或(II-9)所述的信息处理装置，其中，针对所述显示对象的多个候选中的每个设定优先程度，并且
所述处理单元优先选择具有高优先程度的所述显示对象的候选。
(II-11)
根据(II-8)至(II-10)中任一项所述的信息处理装置，其中，所述处理单元
基于所述观看点的位置和示出视野特性的所述信息来确定显示画面上的使所述显示对象被显示的显示范围，并且
使所述显示对象显示在所确定的显示范围内。
(II-12)
根据(II-1)至(II-11)中任一项所述的信息处理装置，其中，所述处理单元
执行检测所述目标对象的处理，并且
在检测到所述目标对象的情况下，执行使所述显示对象被显示的处理。
(II-13)
根据(II-1)至(II-12)中任一项所述的信息处理装置，其中，所述处理单元以设定的时间间隔执行使所述显示对象被显示的处理。
(II-14)
根据(II-13)所述的信息处理装置，其中，在不执行使所述显示对象被显示的处理的时段中，所述处理单元
计算基于所述视线信息辨识的所述显示画面上的被观看点的位置与所述显示画面上的所述目标对象的位置之间的距离，并且
基于计算出的所述距离来执行维持已显示的显示对象的布局的处理。
(II-15)
根据(II-1)至(II-14)中任一项所述的信息处理装置，其中，所述处理单元使所选择的所述显示对象叠加并显示在真实空间或示出真实空间的图像上。
(II-16)
一种由信息处理装置执行的信息处理方法，包括：
执行下述处理的步骤：使得基于示出用户的视线的视线信息从与目标对象对应的显示对象的多个候选中选择的显示对象被显示，
其中，基于所述视线信息来改变所述显示对象的显示方式。
(II-17)
一种程序，所述程序用于使计算机系统执行下述功能：执行基于示出用户的视线的视线信息从与目标对象对应的显示对象的多个候选中选择的显示对象被显示的处理，
其中，通过执行使所述显示对象被显示的处理的功能，所述显示对象的显示方式基于所述视线信息而改变。
附图标记列表
100信息处理装置
102通信单元
104控制单元
110处理单元。

Claims (19)

1.一种信息处理装置，包括：
处理单元，所述处理单元被配置成：基于示出用户的视线的视线信息，从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，并且执行使所选择的显示对象与所述特定位置相关联地显示在显示画面上的显示控制处理，其中，所述特定位置是与目标对象对应的位置，
其中，所述处理单元基于根据所述视线信息辨识出的被观看点的位置与所述特定位置之间的关系，确定使得所述显示对象被显示的所述显示画面的显示范围，并且基于视野特性和所确定的显示范围来限制要被显示在所述显示画面上的所述显示对象的布置。
2.根据权利要求1所述的信息处理装置，
其中，所述处理单元基于所述视线信息改变所述显示对象的显示方式。
3.根据权利要求2所述的信息处理装置，
其中，所述处理单元通过改变所述显示对象的布局、所述显示对象上的装饰方式以及所述显示对象的省略方式中的至少一个来改变所述显示对象的显示方式。
4.根据权利要求2所述的信息处理装置，
其中，所述处理单元还基于示出所述用户的运动状态和会话状态中的至少一个的状态信息来改变所述显示对象的显示方式。
5.根据权利要求1所述的信息处理装置，
其中，所述多个候选对象包括属性信息，并且
所述处理单元还基于所选择的显示对象的属性信息来改变所述显示对象的显示方式。
6.根据权利要求5所述的信息处理装置，
其中，所述处理单元基于有关所选择的显示对象的属性信息是否包括文本信息或者所选择的显示对象的属性信息是否不包括文本信息的评估来确定所述显示对象的显示方式。
7.根据权利要求6所述的信息处理装置，
其中，在所选择的显示对象的属性信息包括文本信息的情况下，所述处理单元基于所述视线信息改变所显示的所述文本信息的字符的数量。
8.根据权利要求6所述的信息处理装置，
其中，在所选择的显示对象的属性信息包括文本信息的情况下，所述处理单元基于所述视线信息执行对所述文本信息的突出显示。
9.根据权利要求5所述的信息处理装置，
其中，所述多个候选对象中的每个包括示出优先程度的信息作为所述属性信息，并且
所述处理单元从所述多个候选对象中优先选择具有相对高的优先程度的候选对象作为所述显示对象。
10.根据权利要求1所述的信息处理装置，
其中，所述处理单元基于所述特定位置与所述被观看点的位置之间的关系从所述多个候选对象中选择与所述特定位置对应的显示对象。
11.根据权利要求10所述的信息处理装置，
其中，所述处理单元基于有关所述被观看点的位置与所述特定位置之间的距离是否小于或等于第一值或者所述被观看点的位置与所述特定位置之间的距离是否大于所述第一值并且小于或等于第二值的评估来从所述多个候选对象中选择与所述特定位置对应的显示对象。
12.根据权利要求11所述的信息处理装置，
其中，所述处理单元基于有关所述被观看点的所述位置与所述特定位置之间的所述距离大于所述第一值并且小于或等于所述第二值的评估来禁止对所述多个候选对象中的包括文本信息的候选对象的选择。
13.根据权利要求11所述的信息处理装置，
其中，所述第一值和所述第二值是基于视野特性的值。
14.根据权利要求1所述的信息处理装置，
其中，所述处理单元
执行检测所述目标对象的处理，并且
根据对所述目标对象的检测执行所述显示控制处理。
15.根据权利要求1所述的信息处理装置，
其中，所述处理单元
以比显示1帧的时间间隔更长的时间间隔来执行所述显示控制处理，并且
在不执行所述显示控制处理的时段中执行维持已经显示的显示对象的布局的布局处理。
16.根据权利要求15所述的信息处理装置，
其中，所述处理单元
基于根据所述视线信息辨识出的被观看点的位置与所述特定位置之间的距离执行所述布局处理。
17.根据权利要求1所述的信息处理装置，
其中，所述处理单元使所选择的显示对象叠加并显示在真实空间或示出真实空间的图像上。
18.一种信息处理方法，包括：
由信息处理装置执行下述显示控制处理：基于示出用户的视线的视线信息从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，其中，所述特定位置是与目标对象对应的位置，并且使所选择的显示对象与所述特定位置相关联地显示在显示画面上，基于根据所述视线信息辨识出的被观看点的位置与所述特定位置之间的关系，确定使得所述显示对象被显示的所述显示画面的显示范围，并且基于视野特性和所确定的显示范围来限制要被显示在所述显示画面上的所述显示对象的布置。
19.一种计算机可读介质，包括：
能够在信息处理装置上操作以执行信息处理方法的指令，
其中，所述信息处理方法包括：
由所述信息处理装置执行下述显示控制处理：基于示出用户的视线的视线信息从与所述用户的视野中的特定位置对应的多个候选对象中选择显示对象，其中，所述特定位置是与目标对象对应的位置，并且使所选择的显示对象与所述特定位置相关联地显示在显示画面上，基于根据所述视线信息辨识出的被观看点的位置与所述特定位置之间的关系，确定使得所述显示对象被显示的所述显示画面的显示范围，并且基于视野特性和所确定的显示范围来限制要被显示在所述显示画面上的所述显示对象的布置。
CN201780019336.4A 2016-03-29 2017-02-24 信息处理装置、信息处理方法和计算机可读介质 Active CN108885497B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-065218 2016-03-29
JP2016065218A JP2017182247A (ja) 2016-03-29 2016-03-29 情報処理装置、情報処理方法、およびプログラム
PCT/JP2017/007239 WO2017169400A1 (ja) 2016-03-29 2017-02-24 情報処理装置、情報処理方法、およびコンピュータ可読媒体

Publications (2)

Publication Number Publication Date
CN108885497A CN108885497A (zh) 2018-11-23
CN108885497B true CN108885497B (zh) 2022-07-05

Family

ID=59964217

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780019336.4A Active CN108885497B (zh) 2016-03-29 2017-02-24 信息处理装置、信息处理方法和计算机可读介质

Country Status (5)

Country Link
US (1) US10861181B2 (zh)
JP (1) JP2017182247A (zh)
CN (1) CN108885497B (zh)
DE (1) DE112017001660T5 (zh)
WO (1) WO2017169400A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107992814A (zh) * 2017-11-28 2018-05-04 北京小米移动软件有限公司 对象寻找方法及装置
JP2021096490A (ja) * 2018-03-28 2021-06-24 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
WO2020110270A1 (ja) * 2018-11-29 2020-06-04 マクセル株式会社 映像表示装置および方法
JP7263825B2 (ja) * 2019-02-19 2023-04-25 オムロン株式会社 情報処理装置、情報処理方法、および情報処理プログラム
JP7476866B2 (ja) 2021-11-22 2024-05-01 トヨタ自動車株式会社 ウェアラブル端末の画像表示制御装置及び画像表示制御方法及び画像表示システム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3119076B2 (ja) 1994-06-02 2000-12-18 日産自動車株式会社 車両用警報表示装置
JP4875843B2 (ja) * 2004-10-20 2012-02-15 オリンパス株式会社 情報端末装置
US9229227B2 (en) * 2010-02-28 2016-01-05 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a light transmissive wedge shaped illumination system
US8773467B2 (en) * 2011-06-13 2014-07-08 International Business Machines Corporation Enhanced asset management and planning system
JP5482808B2 (ja) * 2012-01-30 2014-05-07 コニカミノルタ株式会社 管理システム、管理サーバおよびプログラム
JP2014106445A (ja) 2012-11-29 2014-06-09 Toshiba Corp 電子機器および表示制御方法
CN107656618B (zh) * 2013-03-15 2021-03-23 奇跃公司 显示系统和方法
KR20170031223A (ko) * 2014-07-31 2017-03-20 세이코 엡슨 가부시키가이샤 표시 장치, 표시 장치의 제어 방법 및, 프로그램을 갖는 컴퓨터 판독 가능 기록 매체
JP6488786B2 (ja) * 2015-03-17 2019-03-27 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム
CN105425971B (zh) * 2016-01-15 2018-10-26 中意工业设计（湖南）有限责任公司 一种眼动界面的交互方法、装置和近眼显示器

Also Published As

Publication number Publication date
CN108885497A (zh) 2018-11-23
DE112017001660T5 (de) 2018-12-13
WO2017169400A1 (ja) 2017-10-05
US20190066325A1 (en) 2019-02-28
JP2017182247A (ja) 2017-10-05
US10861181B2 (en) 2020-12-08

Similar Documents

Publication Publication Date Title
CN108885497B (zh) 信息处理装置、信息处理方法和计算机可读介质
CN108027652B (zh) 信息处理设备、信息处理方法以及记录介质
US10489981B2 (en) Information processing device, information processing method, and program for controlling display of a virtual object
JP5732988B2 (ja) 画像処理装置、表示制御方法及びプログラム
CN108369482B (zh) 信息处理设备、信息处理方法和程序
US9933853B2 (en) Display control device, display control program, and display control method
CN108885856B (zh) 信息处理设备、信息处理方法和程序
JP5236423B2 (ja) 表示システム、表示方法およびプログラム
US11244496B2 (en) Information processing device and information processing method
US20190064528A1 (en) Information processing device, information processing method, and program
US11922594B2 (en) Context-aware extended reality systems
US11004273B2 (en) Information processing device and information processing method
EP3438938B1 (en) Information processing device, information processing method, and program
US11302285B1 (en) Application programming interface for setting the prominence of user interface elements
JP7400721B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN115698923A (zh) 信息处理装置、信息处理方法和程序

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant