CN108700982A - 信息处理设备、信息处理方法以及程序 - Google Patents

信息处理设备、信息处理方法以及程序 Download PDF

Info

Publication number
CN108700982A
CN108700982A CN201680080710.7A CN201680080710A CN108700982A CN 108700982 A CN108700982 A CN 108700982A CN 201680080710 A CN201680080710 A CN 201680080710A CN 108700982 A CN108700982 A CN 108700982A
Authority
CN
China
Prior art keywords
notification information
output
level
user
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680080710.7A
Other languages
English (en)
Other versions
CN108700982B (zh
Inventor
深泽辽
田中友久
塚原翼
矢野茜
杉原贤次
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108700982A publication Critical patent/CN108700982A/zh
Application granted granted Critical
Publication of CN108700982B publication Critical patent/CN108700982B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/64—Constructional details of receivers, e.g. cabinets or dust covers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/373—Details of the operation on graphic patterns for modifying the size of the graphic pattern

Abstract

为了提供一种信息处理装置、信息处理方法和程序，通过其能够以根据输出呈现水平选择的输出格式来输出通知信息，从而提高可用性。一种信息处理装置，设置有：确定单元，其确定要向用户呈现的通知信息的输出呈现水平；以及输出控制单元，其执行控制以使用根据所确定的输出呈现水平选择的输出系统来输出通知信息，其中，该输出控制单元根据输出呈现水平来执行控制以使用将通知信息与显示环境相融合的显示系统来输出通知信息。

Description

信息处理设备、信息处理方法以及程序
技术领域
本公开内容涉及信息处理设备，信息处理方法和程序。
背景技术
近年来，已经开发出设置有操作装置的头戴式显示器(在下文中也被称为“HMD”)。当HMD被佩戴在用户头部上时，具有位于用户眼睛前方的显示器的HMD在用户面前显示显示对象。这种HMD包括非透射式显示器或透射式显示器。
在透射式显示器的情况下，通过将显示对象叠加在可通过该显示器看到的真实空间上来显示上述显示对象。例如，在下述专利文献1中的HMD中，公开了一种技术，其通过显示器向用户通知诸如与用户的当前位置对应的电影的内容(显示内容的缩略图图像)。
引用列表
专利文献
专利文献1：JP 2014-90386A
发明内容
技术问题
这里，信息处理设备中的推送通知主要以使用诸如对话框和状态栏的图形用户界面(GUI)的方法来表达。然而，如果在透射式显示器中使用这种表达方法，则要在眼睛前方或用户视野的中心显示信息，这会导致眼睛前方的空间被覆盖并且可能会阻碍用户的行为，或者显示的信息不适合周围环境并且可能损害正在运行的应用的全局视图。
因此，本公开内容提出了一种信息处理设备、信息处理方法和程序，其可以通过以根据输出明确性水平的输出样式输出通知信息来提高可用性。
问题的解决方案
根据本公开内容，提供了一种信息处理设备，包括：确定单元，其被配置成确定给至用户的通知信息的输出明确性水平；以及输出控制单元，其被配置成执行控制使得以根据所确定的输出明确性水平的输出模式输出通知信息。该输出控制单元根据输出明确性水平以将通知信息同化到显示环境中的显示模式来执行输出控制。
根据本公开内容，提供了一种信息处理方法，包括由处理器：确定给至用户的通知信息的输出明确性水平；并且执行控制使得以根据所确定的输出明确性水平的输出模式输出通知信息。该控制包括以将通知信息同化到显示环境中的显示模式来执行输出控制。
根据本公开内容，提供了一种程序，其使计算机用作：确定单元，被配置成确定给至用户的通知信息的输出明确性水平；以及输出控制单元，被配置成执行控制使得以根据所确定的输出明确性水平的输出模式输出通知信息。该输出控制单元根据输出明确性水平以将通知信息同化到显示环境中的显示模式来执行输出控制。
发明的有益效果
如上所述，根据本公开内容，可以通过以根据输出明确性水平的输出样式输出通知信息来提高可用性。
注意，上述效果并非是限制性的。与上述效果一起或替代上述效果，可以实现本说明书中描述的效果中的任一效果或者可以从本说明书理解的其他效果。
附图说明
[图1]说明根据实施方式的信息处理设备的概要的图。
[图2]示出根据本实施方式的信息处理设备的配置示例的框图。
[图3]示出根据本实施方式的输出控制处理的流程图。
[图4]说明根据本实施方式的第二输出模式的图。
[图5]说明根据本实施方式的第三输出模式的图。
[图6]说明根据本实施方式的第四输出模式的图。
[图7]说明根据本实施方式的第五输出模式的图。
[图8]说明根据本实施方式的第六输出模式的图。
具体实施方式
在下文中，将参照附图详细描述本公开内容的优选实施方式。注意，在本说明书和附图中，用相同的附图标记表示具有基本相同的功能和结构的结构元件，并且省略对这些结构元件的重复说明。
此外，将按照以下顺序提供描述。
1.根据本公开内容的一个实施方式的信息处理设备的概述
2.信息处理设备的配置
3.操作处理
4.通知信息的输出示例
4-1.明确输出的示例
4-2.同化到环境中的输出的示例
5.结论
<<1.根据本公开内容的一个实施方式的信息处理设备的概述>>
首先，将描述根据本公开内容的实施方式的信息处理设备的概要。图1是说明根据本实施方式的信息处理设备1的概要的图。如图1所示，根据本实施方式的信息处理设备1通过例如安装在用户头部的眼镜型头戴式显示器(HMD)来实现。当用户佩戴信息处理设备1时，与位于用户眼睛前方的眼镜的镜片对应的显示单元13可以是透视型显示单元或非透视型显示单元。信息处理设备1在显示单元13处显示显示对象，从而可以在用户的视线前呈现显示对象。此外，作为信息处理设备1的一个示例的HMD不限于向双眼呈现图像的HMD，而可以是仅在一只眼睛处显示图像的HMD。例如，HMD可以是单眼型，在其中设置有在一只眼睛处显示图像的显示单元13。
此外，在信息处理设备1处设置有向外相机110，其拍摄用户的视线方向，即当用户佩戴信息处理设备1时的外部方向。更进一步，尽管在图1中未示出，但在信息处理设备1处设置有各种类型的传感器，诸如在用户佩戴信息处理设备1时拍摄用户的眼睛的向内相机和麦克风(在下文中被称为“麦克”)。可以设置多个向外相机110和向内相机。注意，当存在多个向外相机110时，可以通过视差信息获得深度图像(距离图像)，从而可以感测周围环境。
注意，信息处理设备1的形状不限于图1所示的示例。例如，信息处理设备1可以是头带型HMD(其中信息处理设备1佩戴有围绕头部的整个外周起作用的带部或者具有既在头部的侧面也在头部的顶部起作用的带部)或头盔型HMD(其中头盔的遮阳板部分对应于显示器)。此外，信息处理设备1可以用诸如腕带型可穿戴设备(例如智能手表，包括有显示器或没有显示器的情况)、(没有显示器的)耳机型可穿戴设备和颈部电话型可穿戴设备(围绕脖子佩戴，包括有显示器或没有显示器的情况)的可穿戴设备来实现。
此外，因为根据本实施方式的信息处理设备1是利用如上所述的可穿戴设备来实现的并且可以由用户佩戴，所以假设在各种状态下输入操作，例如当用户停止时以及当用户走路时、当用户跑步时以及当用户骑自行车时等。因此，除了按钮、开关(操作构件的示例)等之外，信息处理设备1还包括各种输入方法，如声音输入、使用手部或头部的姿势输入和使用视线的输入。
这里，如果使用相关技术中使用诸如对话框和状态栏的GUI的显示方法向用户通知诸如推送通知的通知信息，则该信息被显示在眼睛前方或用户的视野中心，这会导致眼睛前方的空间被覆盖并且可能会阻碍用户的行为，或者显示的信息不适合周围环境并且可能损害正在运行的应用的全局视图。
因此，根据本实施方式的信息处理设备1能够通过以根据输出明确性水平的输出样式输出通知信息来提高可用性。具体地，信息处理设备1根据通知信息的特性切换诸如通知输出方法(显示、声音)、显示样式和放置通知的位置(显示位置)的输出模式。
以上已经描述了根据本实施方式的信息处理设备1的概要。随后将参考图2描述根据本实施方式的信息处理设备1的配置。
<<2.信息处理设备的配置>>
图2是示出根据本实施方式的信息处理设备1的配置的示例的框图。如图2所示，信息处理设备1具有传感器单元11、控制单元12、显示单元13、扬声器14、通信单元15、操作输入单元16和存储单元17。
(控制单元12)
用作算术处理单元和控制设备的控制单元12根据各种类型的程序控制信息处理设备1内的整体操作。控制单元12例如通过诸如中央处理单元(CPU)和微处理器的电子电路来实现。此外，控制单元12可以包括：只读存储器(ROM)，其存储要使用的程序、操作参数等；以及随机存取存储器(RAM)，其临时存储会适当变化的参数等。
此外，如图2所示，根据本实施方式的控制单元12用作通知信息获取单元120、明确性水平确定单元121、信息转换单元122和输出控制单元123。
通知信息获取单元120获取给至用户的通知信息，即所谓的推送通知信息。
明确性水平确定单元121确定特性，即由通知信息获取单元120获取的通知信息的明确性水平(输出明确性水平)，并将确定结果输出到信息转换单元122。在本实施方式中，例如可以使用通知信息的重要程度或紧急程度作为明确性水平，或者可以基于重要程度和紧急程度来计算明确性水平。
例如，假定将下表1中所示的那些作为通知信息的重要程度。
[表1]
此外，例如，假定将下表2中指示的那些作为通知信息的紧急程度(关于希望传达信息的定时或时间的请求)。
[表2]
信息转换单元122具有根据由明确性水平确定单元121确定的明确性水平(具体地，例如重要程度、紧急程度、用户状态、用户的周围环境、设备状况等)来确定通知信息的输出模式并将通知信息转换为输出模式的功能。“输出模式”包括与输出有关的各种类型的参数，例如输出方法(显示、声音、振动等)、显示样式(明确显示、适合于(同化到)环境的显示等)和放置信息的位置(在用户眼前、在用户周围、在场景中等)。注意，在输出模式是“显示输出”的情况下，与显示有关的各种类型的参数将被称为显示模式，而在输出模式是“声音输出”的情况下，与声音输出有关的各种类型的参数将被称为声音输出模式。信息转换单元122可以在输出明确性水平超过预定阈值的情况下将通知信息转换为明确输出模式，并且可以在输出明确性水平低于预定阈值的情况下将通知信息转换为将通知信息同化到显示环境中的输出模式。
更具体地，信息转换单元122可以根据重要程度确定输出方法和显示样式，并且可以根据紧急程度确定放置通知信息的位置。例如，在重要程度高于第一阈值的情况下，因为需要将信息可靠地传达给用户，所以信息转换单元122将通知信息转换为明确显示样式，例如推送通知(对话框、注释)到用户视野内。同时，在重要程度低的情况下，优先考虑不打断用户的行为或视野，并且例如，如果通知信息是消息通知，则信息转换单元122通过例如自然地显示模仿用户桌子上的真实信件的样式的虚拟对象将通知信息转换为使通知信息适合于用户周围的环境或由应用呈现的全局视图的显示样式。
此外，在紧急程度高于第二阈值的情况下，信息转换单元122将通知信息布置在无论用户的行为或当前状态如何用户都可以容易地找到该信息的位置处(例如在用户的眼睛前方和用户附近)。在这种情况下，信息转换单元122可以伴随着显示立即使用声音或者通过显示的可视性来鼓励用户注意到通知信息。同时，在紧急程度低的情况下，信息转换单元122将通知信息布置在一个位置处或者将通知信息转换为使得该通知信息适合于(同化到)环境(场景)的显示样式。通过这种方式，可以在不干扰用户行为的情况下给出等待直到用户注意到该通知的通知。
在确定信息的位置时，可以参考用户的注视点。用户的注视点是视线的方向并且包括在可以测量焦距的情况下的深度位置。信息处理设备1的控制单元12可以通过例如对由向内相机111拍摄的用户眼睛的图像进行分析来计算该用户的注视点。信息转换单元122将紧急程度高的通知信息布置在用户可以在短时间段内找到该通知信息的位置，即注视点附近。
输出控制单元123执行控制使得根据确定的参数将由信息转换单元122转换的信息从显示单元13或扬声器14输出。
(传感器单元11)
传感器单元11具有获取与用户或周围环境有关的各种类型的信息的功能。例如，传感器单元11包括向外相机110、向内相机111、麦克风112、陀螺仪传感器113、加速度传感器114、方位传感器115、位置测量单元116和生物传感器117。注意，在此描述的传感器单元11的具体示例为示例，并且本实施方式不限于这些。此外，可以设置多个传感器作为每种传感器。
向外相机110和向内相机111各自具有：镜头系统，其由成像镜头、光圈、变焦镜头、聚焦镜头等构成；驱动系统，其使镜头系统执行聚焦操作或变焦操作；固态成像元件阵列，其对由镜头系统获得的成像光执行光电转换以生成成像信号；等。固态成像元件阵列可以用例如电荷耦合器件(CCD)传感器阵列或互补金属氧化物半导体(CMOS)传感器阵列来实现。
麦克风112拾取用户声音或周围环境声音，并将该声音输出到控制单元12作为声音数据。
利用例如三轴陀螺仪传感器实现的陀螺仪传感器113检测角速度(旋转速度)。
利用例如三轴加速度传感器(也被称为“G传感器”)实现的加速度传感器114检测行驶时的加速度。
利用例如三轴地磁传感器(罗盘)实现的方位传感器115检测绝对方向(方位)。
位置测量单元116具有基于从外部获取的信号来检测信息处理设备1的当前位置的功能。具体地，例如，利用全球定位系统(GPS)测量单元实现的位置测量单元116从GPS卫星接收无线电波，检测信息处理设备1所在的位置，并且向控制单元12输出检测到的位置信息。此外，除GPS之外，位置测量单元116可以通过例如使用Wi-Fi(注册商标)、Bluetooth(注册商标)、移动电话、PHS、智能电话等进行发送/接收，或者通过近场通信等检测位置。
生物传感器117检测用户的生物信息。具体地，可以检测例如心率、体温、排汗、血压、排汗、脉搏、呼吸、眨眼、眼球运动、注视时段、瞳孔直径的大小、血压、脑波、身体运动、身体位置、皮肤温度、皮肤电阻、微振动(MV)、肌电位、血氧饱和度(SPO2)等。
(显示单元13)
显示单元13利用透镜单元(透射型显示单元的一个示例)来实现，其使用例如全息光学技术、液晶显示(LCD)设备、有机发光二极管(OLED)设备等来执行显示。此外，显示单元13可以是透射单元、半透射单元或非透射单元。
(扬声器14)
扬声器14根据控制单元12的控制再生声音信号。
(通信单元15)
通信单元15是用于以有线/无线方式向/从其他设备发送/接收数据的通信模块。通信单元15使用诸如例如有线局域网(LAN)、无线LAN、无线保真(Wi-Fi，注册商标)、红外通信、Bluetooth(注册商标)和近场/非接触通信的方法直接或通过网络接入点与外部设备进行无线通信。
(存储单元17)
存储单元17存储用于上述控制单元12的程序或参数以执行每个功能。例如，在存储单元17中，存储有待由明确性水平确定单元121使用以确定处理的各种类型的阈值、根据明确性水平的输出模式的参数等。
(操作输入单元16)
操作输入单元16由具有物理结构的操作构件(例如开关、按钮和控制杆)来实现。
以上已经具体描述了根据本实施方式的信息处理设备1的配置。根据本实施方式的信息处理设备1的配置不限于图2所示的示例。例如，可以在经由通信单元15连接的云上的服务器上执行信息处理设备1的控制单元12中的至少一部分处理。
<<3.操作处理>>
图3是示出根据本实施方式的输出控制处理的流程图。如图3所示，首先，信息处理设备1的控制单元12通过通知信息获取单元120获取通知信息(步骤S103)。假设通知信息的输出源是例如经由网络或者在信息处理设备1上运行的应用连接到信息处理设备1的服务器。
然后，控制单元12通过明确性水平确定单元121获取通知信息的重要程度和紧急程度(步骤S106)，并且确定明确性水平(步骤S109)。明确性水平确定单元121可以将通知信息的重要程度和紧急程度中的至少一个设定为明确性水平，或者在设定有预定权重的情况下，可以考虑该权重来计算明确性水平。可以通过例如通知信息的输出源来预先设定通知信息的重要程度和紧急程度并将其作为元数据嵌入通知信息中。
下面将描述明确性水平计算示例。
在输出源或用户针对通知信息的每种类型的重要程度预先设定了权重的情况下，例如，可以通过下面的等式1来计算具有特定类型A的通知信息的明确性水平SA。这里，重要程度的类型是上述表1中指示的“致命错误”、“错误”、“通知”、“信息”或“日志”。假设类型A的权重为wA，类型B的权重为wB。此外，在下面的等式1中，a是任意常数。
[数学式.1]
SA＝a·wA...等式1
此外，在输出源或用户以类似的方式也针对通知信息的每种类型的紧急程度(“紧急通知”、“稳定通知、连续状态通知”、“定期通知、参考信息通知”、“关于位置和对象的通知”)设定了权重的情况下，可以考虑该权重以类似的方式计算明确性水平。
此外，明确性水平确定单元121可以使用基于重要程度计算的明确性水平S1和基于紧急程度计算的明确性水平S2通过下面的等式2计算最终明确性水平。在下面的等式2中，假设各个明确性水平的权重为w1和w2(任意常数)。
[数学式.2]
S＝S1·w1+S2·w2...等式2
此外，尽管明确性水平确定单元121基于重要程度和紧急程度使用上述等式2来计算单个明确性水平，但是本实施方式不限于此，并且可以将重要程度和紧急程度分别作为不同的明确性水平来处理，并且可以根据稍后将描述的信息转换单元122处的多个明确性水平(重要程度和紧急程度)来确定输出模式。在这种情况下，例如，信息转换单元122根据重要程度确定显示样式(明确显示样式、其中通知信息被同化到环境中的显示样式)并且根据紧急程度确定显示位置(用户可以容易地找到通知信息的位置、通知信息不会干扰用户的视野的位置例如远离用户的位置)。
以上已经详细描述了基于重要程度和紧急程度来确定明确性水平的处理。
注意，在没有预先设定通知信息的重要程度和紧急程度的情况下，明确性水平确定单元121可以基于用户的当前状态、用户周围的环境、设备状况、通知信息的类型等来确定明确性水平(重要程度、紧急程度)。
可以基于由传感器单元11中的各种类型的传感器检测到的信息来分析用户的当前状态。例如，假定以下作为用户的状态。
-行为识别结果(静止、行走、奔跑、上下楼梯、驾驶汽车)、移动速度(用户的移动状态或移动速度)：明确性水平确定单元121确定较低的明确性水平(重要程度、紧急程度)以防止通知在用户正高速移动的情况下或在用户的运动量大的情况下阻碍用户的行为。通过这种方式，可以在远离用户的位置处或者以将通知信息同化到环境中的显示样式来输出通知信息，而不是在用户眼前或在通知信息会干扰视野的位置处输出通知信息，从而可以防止通知信息阻碍用户的行为。
-生物信息(心率、体温、排汗、血压)：可以通过对生物信息的分析来测量用户的紧张状态或运动量。在紧张程度高或运动量大的情况下，明确性水平确定单元121确定较低的明确性水平(重要程度、紧急程度)。通过这种方式，可以在远离用户的位置处或者以将通知信息同化到环境中的显示样式来输出通知信息，而不是在用户眼前或在通知信息会干扰视野的位置处输出通知信息，从而可以防止通知信息阻碍用户的行为。
可以基于由传感器单元11中的各种类型的传感器检测到的信息来分析用户周围的环境。例如，假定以下作为用户周围的环境。
-场景(出现在用户视野中的真实空间)：可以通过对由向外相机110拍摄的图像的分析来提取真实空间中的对象。例如在重要信息位于该场景中的情况下，明确性水平确定单元121确定较低的明确性水平。通过这种方式，可以在远离用户的位置处或以将通知信息同化到环境中的显示样式输出通知信息，而不是在用户眼前或在通知信息会干扰视野的位置处输出通知信息，从而可以防止通知信息阻碍用户的行为。
-位置(室内、室外)、情形(是否存在其他人、汽车等、密度)：在用户位于室外的情况下或者在用户周围存在其他人、汽车等的情况下，明确性水平确定单元121确定较低的明确性水平。通过这种方式，可以在远离用户的位置处或以将通知信息同化到环境中的显示样式输出通知信息，而不是在用户眼前或在通知信息会干扰视野的位置处输出通知信息，从而可以防止通知信息阻碍用户的行为。
设备状况是设备(这里为信息处理设备1)的状况，其给出对信息的通知，诸如剩余电池水平和屏幕的大小。
可以根据通知信息的元数据分析出通知信息的类型。假定例如新闻、天气、消息、警报、通知等作为通知信息的类型。明确性水平确定单元121根据通知信息的类型或该类型与用户的当前行为之间的相关性来确定明确性水平。例如，可以基于由系统侧或用户预先设定的每个类型的权重来设定明确性水平被设定为高或低的类型。此外，考虑到类型与用户的当前行为之间的相关性，例如在用户位于室外的情况下，可以将“天气”类型的重要程度设置得较高，并且在用户正乘坐火车(静止)的情况下，可以将“消息”和“新闻”类型的重要程度设定得较高(因为假定用户有时间阅读消息)。
以上已经描述了根据本实施方式的明确性水平的确定。注意，根据本实施方式的明确性水平确定单元121可以基于重要程度、紧急程度以及通知信息的类型、用户状态和用户周围的环境中的至少一个或更多个来计算输出明确性水平。
随后，信息转换单元122根据由明确性水平确定单元121确定的明确性水平来执行转换通知信息的处理。具体地，例如，信息转换单元122根据明确性水平是否超过任意阈值来确定显示样式(步骤S112)。
然后，在明确性水平等于或高于阈值T的情况下(步骤S112：是)，信息转换单元122将通知信息转换为显示样式A(步骤S115)。同时，在明确性水平低于阈值T的情况下(步骤S112：否)，信息转换单元122将通知信息转换为显示样式B(步骤S118)。
注意，可以设定多个阈值。例如，信息转换单元122可以基于多个确定标准(诸如作为明确性水平的重要程度是否超过阈值T1并且作为明确性水平的紧急程度是否超过阈值T2)来确定转换通知信息的显示样式。
此外，信息转换单元122还可以考虑用户的当前状态和用户周围的环境来对显示样式的各种类型的参数进行调整。
然后，输出控制单元123执行控制以使用对应的输出方法(例如，从显示单元13输出的显示、从扬声器14输出的声音)输出由信息转换单元122转换的信息(步骤S121)。注意，尽管未在图2中示出，但输出控制可以是来自诸如振动器的振动单元的触觉呈现控制。
<<4。通知信息的输出示例>>
随后，将参照图4至图8描述根据本实施方式的通知信息的输出示例。这里，作为示例，将描述使用基于多个明确性水平(即重要程度和紧急程度)确定的输出样式的输出示例。信息转换单元122可以基于重要程度是高还是低以及紧急程度是高还是低来确定如下表3中所示的输出样式。
[表3]
<4-1.明确输出的示例>
(4-1-1.第一输出模式)
例如，在重要程度高于第一阈值并且紧急程度高于第二阈值的情况下，信息转换单元122确定用于执行明确输出的第一输出模式。在第一输出模式中，例如，使用相关技术中的UI(例如对话框和注释)给出通知。
(4-1-2.第二输出模式)
此外，在重要程度高于第一阈值并且紧急程度在第二阈值与第三阈值之间(第二阈值>紧急程度>第三阈值)的情况下，信息转换单元122确定作为明确输出的另一示例的第二输出模式。在第二输出模式中，给出组合了声音输出和视觉输出的强制通知。
具体地，第二输出模式是“在将正在运行的应用的UI隐藏的同时使用声音给出对信息的通知的模式”、“通过在使正在运行的应用的UI半透明的同时覆盖显示通知的对话等并且通过使用声音给出对信息的通知的模式”或者“通过在保持正在运行的应用的UI不变的同时覆盖显示通知的对话等给出对信息的通知的模式”。作为要覆盖显示的通知信息，除了诸如对话的相关技术中的UI之外，可以使用可以漂浮在视野中的虚拟对象(虚拟物)，例如无人机的和漂浮在空中的字符。作为虚拟对象，可以准备作为系统的通用对象，或者可以使用在正在运行的应用中设定的字符。此外，可以根据信息的重要程度使在得对正在运行的应用的UI的处理不同(隐藏UI、使UI半透明、不改变UI)。更进一步地，虽然期望通知信息包括文本和声音，但是在通知信息仅包括文本的情况下，通过由信息转换单元122执行的文本分析来执行到声音的转换(声音的合成)。
这里，图4示出了说明根据本实施方式的第二输出模式的图。图4所示的示例与上述第二输出模式中的“在将正在运行的应用的UI隐藏的同时使用声音给出对信息的通知的模式”对应。此外，在图4所示的示例中，示出了通过显示单元13的视野，显示单元13是设置在由用户佩戴的眼镜型可佩戴设备的镜头部分处的透射式显示器。在视野中出现了自行车的方向盘20。
如图4的上部所示，如果例如当作为当前正在运行的应用(例如自行车应用)的UI的虚拟角色30是在前方显示的增强现实(AR)时获取通知信息，则如图4的下部所示，可以在隐藏虚拟角色30的同时使用声音50给出信息通知(“来自Y先生的消息”)。
通过这种方式，可以实现使得无论用户正在做什么该用户都能够注意到通知信息的强制通知。
(4-1-3.第三输出模式)
然后，在重要程度高于第一阈值并且紧急程度低于第三阈值的情况下，信息转换单元122确定执行目明确输出的第三输出模式。在第三输出模式中，通过布置在用户周围的环境中的空白空间中的信息给出通知。
具体地，信息转换单元122在诸如位于用户周围的墙壁表面、桌子和道路表面上的平坦空间中展开通知信息以进行布置(作为通知信息的内容的文本或图像)。通过这种方式，用户可以在不执行特殊操作的情况下掌握通知信息的内容。可以从通过对由多个向外相机110获取的拍摄图像的分析或通过图像识别获得的深度信息中检测到平坦空间。
因为紧急程度低，所以用户可以在任何时刻查看信息。当用户在视觉上确认信息的内容之后，当该用户有时间时，该用户可以执行诸如详细浏览和响应的交互。
这里，图5示出了说明根据本实施方式的第三输出模式的图。根据第三输出模式，如图5所示，例如，当用户操作个人计算机(PC)时，通知信息32是在桌子22(真实对象)的平面空间中显示的AR。通知信息32以叠加的方式沿着桌子22的平面空间显示。尽管由于用户专注于PC因而用户没有立即注意到通知信息32，但是在用户有空闲时间的情况下，在桌子22上展开的通知信息32可以引起用户的注意。因为重要程度高，所以通知信息32被置于用户可以在不执行操作的情况下确认内容的状态。
<4-2.被同化到环境中的输出的示例>
随后，将描述在重要程度低于第一阈值的情况下被同化到环境中的输出的示例(第四输出示例到第六输出示例)。可以例如考虑以下几点来设定将通知信息同化到环境中的输出方法。
(1)应用依赖度(实现全局视图的延续)
(2)根据真实对象的位置的布置(例如在桌子上和看起来好像贴在墙上的便签图像)
(3)根据环境(场景、色调)的通知信息图像的颜色、大小、动作
(4)通知信息图像(虚拟对象)在现实空间中不奇怪(例如，在场景中存在诸如字符的文本信息或仅图标就是奇怪的)
下面将参照图6至图8具体描述这些示例。
(4-2-1。第四输出模式)
在重要程度低于第一阈值并且紧急程度高于第二阈值的情况下，信息转换单元122确定将通知信息同化到环境中来输出通知信息的第四输出模式。在第四输出模式中，在不损害正在运行的应用的全局视图的情况下向用户通知信息。在不损害应用的氛围的情况下通过所设定的根据应用的全局视图进行通知的角色向用户通知信息，例如，在自行车应用正在运行的情况下，通过骑乘自行车的信使出现并使用声音向用户通知信息，在用户正在玩游戏的情况下，通过在游戏中设定的角色(化身)出现并使用声音向用户通知信息，或者在用户正在使用文字处理应用进行工作情况下，通过使流传的备忘录出现。在这种情况下，控制单元12可以将通知信息输出到应用侧，并且在应用中的适当时刻作为该应用的处理使用唯一字符等向用户通知信息。
这里，图6示出了说明根据本实施方式的第四输出模式的图。如图6的上部所示，例如当作为当前正在运行的自行车应用的UI的虚拟角色30是在前方显示的增强现实(AR)时，如图6的中间部分所示，使骑乘自行车的信使34出现。然后，如图6的下部所示，执行控制使得信使34使用声音52给出对信息的通知。因为在这里通知的信息的紧急程度高，所以如图6所示，信息的内容可以展开为“我将阅读来自Y先生的消息“明天的日程是……””。
(4-2-2.第五输出模式)
然后，在重要程度低于第一阈值并且紧急程度在第二阈值与第三阈值之间(第二阈值>紧急程度>第三阈值)的情况下，信息转换单元122确定将通知信息同化到环境中来输出通知信息的第五输出模式。在第五输出模式中，在环境内布置指示通知的图标对象。具体地，在环境中布置可以与之执行交互的虚拟对象，诸如例如闪亮的水晶或宝盒以及时空的断裂，并且在用户执行与虚拟对象的交互(执行触摸水晶等的姿势、移动到放置对象的位置、窥视时空的断裂等)的情况下，展开通知信息的内容。这里，因为重要程度低，所以使用将通知信息同化到环境中的显示方法来显示通知信息，因为通知信息具有中等紧急程度，所以通过被显示为具有多少会吸引用户注意的形状的虚拟对象来强调通知。可以将这些虚拟对象设定为当前系统侧的公共虚拟对象，而与应用无关。
这里，图7示出了说明根据本实施方式的第五输出模式的图。如图7中的上部所示，例如，在周围环境中布置有闪亮的水晶36并且用户执行针对水晶36的某种类型的交互的情况下，如图7中的下部所示，显示在其中展开信息内容的图像38。这里，因为所通知的信息具有中等紧急程度，所以如图7中的上部所示，向用户做出通知但是不向用户通知信息内容，并且在用户执行交互的情况下展开信息内容。
(4-2-3.第六输出模式)
随后，在重要程度低于第一阈值并且紧急程度低于第三阈值的情况下，信息转换单元122确定将通知信息同化到环境中来输出通知信息的第六输出模式。在第六输出模式中，使用可以存在于真实空间中的对象的形状使通知信息适合于环境。具体地，执行控制使得使用具有真实对象(例如便利贴、便条和信)的形状的虚拟对象在空间中展开通知的内容。用户无需进行特殊操作即可理解信息内容。可以根据例如通知信息的类型来确定使用什么类型的虚拟对象。例如，如果通知信息的类型是“消息”，则使用便利贴、便笺簿、信等，如果类型是“日程信息”，则使用日历，并且如果该类型是“新闻”，则使用报纸或传单。
这里，图8示出了说明根据本实施方式的第六输出模式的图。根据第六输出模式，如图8所示，例如，当用户操作个人计算机(PC)时，通过粘贴在PC(真实对象)上的便利贴40(虚拟对象)或放置在桌子22(真实物体)上的纸42(虚拟对象)来执行AR显示。
在本示例中处理的通知信息是具有低紧急程度的通知信息，其可以由用户在任何时间查看。信息的呈现会引起用户的注意，并且用户可以执行交互以在该用户有空闲时间时例如详细浏览并进行响应。显示器假定用户的移动量小的情况或者在诸如办公室的确定空间中执行显示的情况。
注意，即使某种类型的应用正在运行，也可以以诸如便利贴和便条的样式以类似方式向用户通知信息。在存在多个通知的情况下，还可以仅呈现预定数量的最新通知。此外，控制单元12可以识别用户的手部动作并且可以执行显示控制以允许用户拿取并确认便利贴40或纸张42。此外，如果控制单元12检测到用户拿取并确认了便利贴40或纸张42并且注视持续特定时段，则控制单元12可以将模式切换到可以进行响应(通过例如由麦克风112输入的声音来实现响应)的模式以接受来自该用户的转换，或者如果自确认起已经过了特定时段，则可以删除便利贴40或纸张42。
<<5.结论>>
如上所述，根据本公开内容的实施方式的信息处理设备1，可以通过转换通知信息的输出样式来提高可用性。
以上已经参照附图描述了本公开内容的优选实施方式，然而本公开内容不限于上述示例。本领域技术人员可以在所附权利要求书的范围内发现各种变更和修改，并且应该理解，它们将自然地落入本公开内容的技术范围内。
例如，还可以创建一种计算机程序，用于使包含在上述信息处理设备1中的诸如CPU、ROM和RAM的硬件运用信息处理设备1的功能。此外，还提供了其中存储有计算机程序的计算机可读存储介质。
此外，本说明书中描述的效果仅是说明性或示例性而并非限制性的效果。也就是说，与上述效果一起或替代上述效果，根据本公开内容的技术可以从本说明书的描述中实现对于本领域技术人员而言清楚的其他效果。
此外，本技术还可以被如下配置。
(1)
一种信息处理设备，包括：
确定单元，被配置成确定给至用户的通知信息的输出明确性水平；以及
输出控制单元，被配置成执行控制使得以根据所确定的输出明确性水平的输出模式输出所述通知信息，
其中，所述输出控制单元根据所述输出明确性水平以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
(2)
根据(1)所述的信息处理设备，还包括：
转换单元，被配置成根据所述输出明确性水平来转换所述通知信息的输出模式。
(3)
根据(2)所述的信息处理设备，
其中，在所述输出明确性水平超过预定阈值的情况下，所述转换单元执行到明确通知所述通知信息的显示模式的转换，并且在所述输出明确性水平低于预定阈值的情况下，所述转换单元执行到将所述通知信息同化到显示环境中的显示模式的转换。
(4)
根据(1)至(3)中任一项的信息处理设备，
其中，所述输出明确性水平基于所述通知信息的重要程度和紧急程度中的至少任何一者。
(5)
根据(1)至(4)中任一项的信息处理设备，
其中，所述输出明确性水平基于所述用户的状态和所述用户周围的环境中的至少任何一者。
(6)
根据(1)至(5)中任一项的信息处理设备，
其中，所述确定单元基于所述通知信息的重要程度、所述通知信息的紧急程度、所述用户的状态、所述用户周围的环境以及设备状况中的至少任一个或更多个来确定所述输出明确性水平。
(7)
根据(4)至(6)中任一项的信息处理设备，
其中，所述确定单元考虑每个用户的权重来确定所述输出明确性水平。
(8)
根据(2)至(7)中任一项的信息处理设备，
其中，所述显示模式包括显示样式、显示位置和显示定时。
(9)
根据(8)的信息处理设备，
其中，所述显示样式是对显示的透射率、显示的颜色或显示大小的控制、对字符显示的利用或对图标显示的利用。
(10)
根据(8)的信息处理设备，
其中，所述转换单元根据所述通知信息的重要程度确定显示样式，并且根据所述通知信息的紧急程度确定显示位置。
(11)
根据(2)至(10)中任一项的信息处理设备，
其中，所述输出控制单元执行控制使得经转换的通知信息被输出至眼镜型可佩戴终端的透射式显示器。
(12)
根据(11)的信息处理设备，
其中，所述转换单元通过根据经由所述透射式显示器看到的真实对象的位置来布置所述通知信息，从而将所述通知信息同化到显示环境中。
(13)
根据(11)的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度超过第一阈值并且所述紧急程度超过第二阈值的情况下，所述转换单元执行到下述明确输出模式的转换：不显示正在运行的应用的显示图像并且通过声音来通知所述通知信息。
(14)
根据(11)的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平；并且
在所述重要程度超过第一阈值并且所述紧急程度低于第二阈值的情况下，所述转换单元执行到下述明确输出模式的转换：在所述用户周围的真实对象的平面上显示所述通知信息。
(15)
根据(11)的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度低于第一阈值并且所述紧急程度超过第二阈值的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换，在该输出模式中，通过使用基于正在运行的应用的虚拟对象，通过显示或声音向所述用户通知所述通知信息。
(16)
根据(11)的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度低于第一阈值并且所述紧急程度在第二阈值和低于所述第二阈值的第三阈值之间的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换，在该输出模式中，在经由所述透射式显示器看到的场景中布置有虚拟对象，并且在所述用户选择了所述虚拟对象的情况下通过显示或声音向所述用户通知所述通知信息。
(17)
根据(11)的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，以及
在所述重要程度低于第一阈值并且所述紧急程度低于第三阈值的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换，在该输出模式中，布置有用于在与所述用户周围的真实对象对应的位置处显示所述通知信息的虚拟对象。
(18)
一种信息处理方法，包括由处理器：
确定给至用户的通知信息的输出明确性水平；并且
执行控制使得以根据所确定的输出明确性水平的输出模式输出所述通知信息，
其中，所述控制包括以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
(19)
一种程序，所述程序使计算机用作：
确定单元，被配置成确定给至用户的通知信息的输出明确性水平；以及
输出控制单元，被配置成执行控制使得以根据所确定的输出明确性水平的输出模式输出所述通知信息，
其中，所述输出控制单元根据所述输出明确性水平以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
附图标记列表
1 信息处理设备
12 控制单元
120 通知信息获取单元
121 明确性水平确定单位
122 信息转换单元
123 输出控制单元
11 传感器单元
110 向外相机
111 向内相机
112 麦克风
113 陀螺仪传感器
114 加速度传感器
115 方位传感器
116 位置测量单元
117 生物传感器
13 显示单元
14 扬声器
15 通信单元
16 操作输入单元
17 存储单元

Claims (19)

1.一种信息处理设备，包括：
确定单元，被配置成确定给至用户的通知信息的输出明确性水平；以及
输出控制单元，被配置成执行控制使得以根据所确定的输出明确性水平的输出模式来输出所述通知信息，
其中，所述输出控制单元根据所述输出明确性水平以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
2.根据权利要求1所述的信息处理设备，还包括：
转换单元，被配置成根据所述输出明确性水平来转换所述通知信息的输出模式。
3.根据权利要求2所述的信息处理设备，
其中，在所述输出明确性水平超过预定阈值的情况下，所述转换单元执行到明确通知所述通知信息的显示模式的转换，并且在所述输出明确性水平低于预定阈值的情况下，所述转换单元执行到将所述通知信息同化到显示环境中的显示模式的转换。
4.根据权利要求1所述的信息处理设备，
其中，所述输出明确性水平基于所述通知信息的重要程度和紧急程度中的至少任何一者。
5.根据权利要求1所述的信息处理设备，
其中，所述输出明确性水平基于所述用户的状态和所述用户周围的环境中的至少任何一者。
6.根据权利要求1所述的信息处理设备，
其中，所述确定单元基于所述通知信息的重要程度、所述通知信息的紧急程度、所述用户的状态、所述用户周围的环境以及设备状况中的至少任一个或更多个来确定所述输出明确性水平。
7.根据权利要求4所述的信息处理设备，
其中，所述确定单元考虑每个用户的权重来确定所述输出明确性水平。
8.根据权利要求2所述的信息处理设备，
其中，所述显示模式包括显示样式、显示位置和显示定时。
9.根据权利要求8所述的信息处理设备，
其中，所述显示样式是对显示的透射率、显示的颜色或显示大小的控制、对字符显示的利用或对图标显示的利用。
10.根据权利要求8所述的信息处理设备，
其中，所述转换单元根据所述通知信息的重要程度确定显示样式，并且根据所述通知信息的紧急程度确定显示位置。
11.根据权利要求2所述的信息处理设备，
其中，所述输出控制单元执行控制使得经转换的通知信息被输出至眼镜型可佩戴终端的透射式显示器。
12.根据权利要求11所述的信息处理设备，
其中，所述转换单元通过根据经由所述透射式显示器看到的真实对象的位置来布置所述通知信息，从而将所述通知信息同化到显示环境中。
13.根据权利要求11所述的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度超过第一阈值并且所述紧急程度超过第二阈值的情况下，所述转换单元执行到下述明确输出模式的转换：不显示正在运行的应用的显示图像并且通过声音来通知所述通知信息。
14.根据权利要求11所述的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度超过第一阈值并且所述紧急程度低于第二阈值的情况下，所述转换单元执行到下述明确输出模式的转换：在所述用户周围的真实对象的平面上显示所述通知信息。
15.根据权利要求11所述的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度低于第一阈值并且所述紧急程度超过第二阈值的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换：在该输出模式中，通过使用基于正在运行的应用的虚拟对象，通过显示或声音向所述用户通知所述通知信息。
16.根据权利要求11所述的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度低于第一阈值并且所述紧急程度在第二阈值和低于所述第二阈值的第三阈值之间的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换：在该输出模式中，在经由所述透射式显示器看到的场景中布置有虚拟对象，并且在所述用户选择了所述虚拟对象的情况下通过显示或声音向所述用户通知所述通知信息。
17.根据权利要求11所述的信息处理设备，
其中，所述确定单元将所述通知信息的重要程度和紧急程度确定为所述输出明确性水平，并且
在所述重要程度低于第一阈值并且所述紧急程度低于第三阈值的情况下，所述转换单元执行到下述将所述通知信息同化到显示环境中的输出模式的转换：在该输出模式中，布置有用于在与所述用户周围的真实对象对应的位置处显示所述通知信息的虚拟对象。
18.一种信息处理方法，包括由处理器：
确定给至用户的通知信息的输出明确性水平；以及
执行控制使得以根据所确定的输出明确性水平的输出模式来输出所述通知信息，
其中，所述控制包括以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
19.一种程序，所述程序使计算机用作：
确定单元，被配置成确定给至用户的通知信息的输出明确性水平；以及
输出控制单元，被配置成执行控制使得以根据所确定的输出明确性水平的输出模式来输出所述通知信息，
其中，所述输出控制单元根据所述输出明确性水平以将所述通知信息同化到显示环境中的显示模式来执行输出控制。
CN201680080710.7A 2016-02-08 2016-11-18 信息处理设备、信息处理方法以及程序 Active CN108700982B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016022025 2016-02-08
JP2016-022025 2016-10-11
PCT/JP2016/084361 WO2017138212A1 (ja) 2016-02-08 2016-11-18 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN108700982A true CN108700982A (zh) 2018-10-23
CN108700982B CN108700982B (zh) 2021-11-23

Family

ID=59562991

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680080710.7A Active CN108700982B (zh) 2016-02-08 2016-11-18 信息处理设备、信息处理方法以及程序

Country Status (5)

Country Link
US (1) US11037532B2 (zh)
EP (1) EP3416034A4 (zh)
JP (1) JP6841241B2 (zh)
CN (1) CN108700982B (zh)
WO (1) WO2017138212A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111385411A (zh) * 2018-12-28 2020-07-07 Jvc建伍株式会社 通知控制装置、通知控制方法以及存储介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6440910B2 (ja) * 2016-07-29 2018-12-19 三菱電機株式会社 表示装置、表示制御装置および表示制御方法
US10812689B2 (en) * 2017-08-16 2020-10-20 Veritaz Inc. Personal display headset for mitigating user access to disallowed resources
US10841534B2 (en) * 2018-04-12 2020-11-17 Microsoft Technology Licensing, Llc Real-world awareness for virtual reality
JP2019197497A (ja) * 2018-05-11 2019-11-14 Ｎｅｃパーソナルコンピュータ株式会社 ヘッドマウントディスプレイシステム、通知制御装置、通知制御方法、及びプログラム
JP2021165864A (ja) * 2018-06-18 2021-10-14 ソニーグループ株式会社 情報処理装置、情報処理方法、及びプログラム
JP2021182174A (ja) * 2018-08-07 2021-11-25 ソニーグループ株式会社 情報処理装置、情報処理方法およびプログラム
JP7060544B6 (ja) * 2019-04-26 2022-05-23 塁 佐藤 運動用設備
US10983751B2 (en) * 2019-07-15 2021-04-20 Bose Corporation Multi-application augmented reality audio with contextually aware notifications
US11016723B2 (en) * 2019-07-15 2021-05-25 Bose Corporation Multi-application control of augmented reality audio
US11934623B2 (en) 2020-03-03 2024-03-19 Nippon Telegraph And Telephone Corporation Information presentation apparatus, method, and program
WO2023145273A1 (ja) * 2022-01-31 2023-08-03 株式会社Ｎｔｔドコモ 表示制御装置
WO2023149031A1 (ja) * 2022-02-01 2023-08-10 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報通知方法、情報通知装置及びプログラム
WO2023149256A1 (ja) * 2022-02-02 2023-08-10 株式会社Ｎｔｔドコモ 表示制御装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110267374A1 (en) * 2009-02-05 2011-11-03 Kotaro Sakata Information display apparatus and information display method
US20150170482A1 (en) * 2013-12-12 2015-06-18 Nokia Corporation Causing display of a notification on a wrist worn apparatus
EP2981070A1 (en) * 2013-03-29 2016-02-03 Sony Corporation Information processing device, notification state control method, and program

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4878083B2 (ja) * 2001-03-13 2012-02-15 キヤノン株式会社 画像合成装置及び方法、プログラム
US8577983B2 (en) * 2002-07-12 2013-11-05 Pace Plc System and method for notifying an instant message recipient of receipt of a message
US20050285878A1 (en) * 2004-05-28 2005-12-29 Siddharth Singh Mobile platform
JP4330545B2 (ja) * 2005-02-18 2009-09-16 シャープ株式会社 データ処理装置、誤操作報知方法、プログラム、及び記録媒体
JP2010079121A (ja) 2008-09-29 2010-04-08 Brother Ind Ltd シースルー型ディスプレイ装置
US8963805B2 (en) * 2012-01-27 2015-02-24 Microsoft Corporation Executable virtual objects associated with real objects
US8957916B1 (en) * 2012-03-23 2015-02-17 Google Inc. Display method
US9030505B2 (en) * 2012-05-17 2015-05-12 Nokia Technologies Oy Method and apparatus for attracting a user's gaze to information in a non-intrusive manner
US9813882B1 (en) * 2012-06-25 2017-11-07 Amazon Technologies, Inc. Mobile notifications based upon notification content
US9152211B2 (en) * 2012-10-30 2015-10-06 Google Technology Holdings LLC Electronic device with enhanced notifications
US8954037B2 (en) * 2013-02-28 2015-02-10 Dell Products L.P. System and method of signaling the importance of a transmission in a wireless communications network
US20160054563A9 (en) * 2013-03-14 2016-02-25 Honda Motor Co., Ltd. 3-dimensional (3-d) navigation
US9699375B2 (en) * 2013-04-05 2017-07-04 Nokia Technology Oy Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
KR102153646B1 (ko) * 2013-12-24 2020-09-08 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
WO2015184359A2 (en) * 2014-05-30 2015-12-03 Interdigital Technology Corporation Personalized notifications for mobile applications users
US9865089B2 (en) * 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
WO2016021747A1 (ko) * 2014-08-05 2016-02-11 엘지전자 주식회사 헤드 마운티드 디스플레이 장치 및 그것의 제어 방법
US10896543B2 (en) * 2014-08-25 2021-01-19 X Development Llc Methods and systems for augmented reality to display virtual representations of robotic device actions
US9892105B2 (en) * 2014-08-28 2018-02-13 Google Llc Systems and methods for annotating messages with reminders
JP6443677B2 (ja) * 2015-03-12 2018-12-26 日本精機株式会社 ヘッドマウントディスプレイ装置
JP6596883B2 (ja) * 2015-03-31 2019-10-30 ソニー株式会社 ヘッドマウントディスプレイ及びヘッドマウントディスプレイの制御方法、並びにコンピューター・プログラム
EP3314924A4 (en) * 2015-06-25 2019-02-20 Websafety, Inc. MOBILE COMPUTING DEVICE MANAGEMENT AND CONTROL USING LOCAL AND REMOTE SOFTWARE AGENTS
US9749268B2 (en) * 2015-12-08 2017-08-29 International Business Machines Corporation System and method for message delivery
US10446009B2 (en) * 2016-02-22 2019-10-15 Microsoft Technology Licensing, Llc Contextual notification engine
JP6620669B2 (ja) * 2016-05-12 2019-12-18 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
US9990778B2 (en) * 2016-08-12 2018-06-05 Tyco Safety Products Canada Ltd. Notification system for virtual reality devices
US10127731B1 (en) * 2017-08-30 2018-11-13 Daqri, Llc Directional augmented reality warning system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110267374A1 (en) * 2009-02-05 2011-11-03 Kotaro Sakata Information display apparatus and information display method
EP2981070A1 (en) * 2013-03-29 2016-02-03 Sony Corporation Information processing device, notification state control method, and program
US20150170482A1 (en) * 2013-12-12 2015-06-18 Nokia Corporation Causing display of a notification on a wrist worn apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111385411A (zh) * 2018-12-28 2020-07-07 Jvc建伍株式会社 通知控制装置、通知控制方法以及存储介质

Also Published As

Publication number Publication date
JPWO2017138212A1 (ja) 2018-12-06
CN108700982B (zh) 2021-11-23
EP3416034A1 (en) 2018-12-19
WO2017138212A1 (ja) 2017-08-17
EP3416034A4 (en) 2019-03-13
US20190066630A1 (en) 2019-02-28
JP6841241B2 (ja) 2021-03-10
US11037532B2 (en) 2021-06-15

Similar Documents

Publication Publication Date Title
CN108700982A (zh) 信息处理设备、信息处理方法以及程序
JP6844542B2 (ja) 情報処理装置、情報処理方法及びプログラム
US11055913B2 (en) Directional instructions in an hybrid reality system
CN107656615B (zh) 大量同时远程数字呈现世界
US10019962B2 (en) Context adaptive user interface for augmented reality display
CN116615686A (zh) 用于语音翻译的包括手语的护目镜
JP6770536B2 (ja) 仮想画像生成システムにおけるテキストをより効率的に表示するための技法
US20160196693A1 (en) Display system, control method for display device, and computer program
CN108431667A (zh) 信息处理装置、信息处理方法和程序
US20200202161A1 (en) Information processing apparatus, information processing method, and program
US20170337034A1 (en) Information processing device, method of information processing, and program
WO2015068440A1 (ja) 情報処理装置、制御方法およびプログラム
CN113223129B (zh) 一种图像渲染方法、电子设备及系统
WO2021103990A1 (zh) 显示方法、电子设备及系统
CN115668105A (zh) 包括聚类的眼戴器
CN111630852A (zh) 信息处理设备、信息处理方法和程序
US20200143774A1 (en) Information processing device, information processing method, and computer program
JP6582403B2 (ja) 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム
WO2019021573A1 (ja) 情報処理装置、情報処理方法、及びプログラム
CN106031135A (zh) 可穿戴设备和通信控制方法
CN111768507A (zh) 图像融合方法、装置、计算机设备及存储介质
JP6790769B2 (ja) 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法
CN112835445B (zh) 虚拟现实场景中的交互方法、装置及系统
US20220323286A1 (en) Enabling the visually impaired with ar using force feedback
US20230168522A1 (en) Eyewear with direction of sound arrival detection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant