CN110100257A - 信息处理设备、信息处理方法和程序 - Google Patents

Abstract

[问题]期望提供如下技术：利用该技术能够更适当地确定要优先处理的请求。[解决方案]提供了一种信息处理设备，其被配置有：检测单元，其用于检测属于用户的情境；以及请求处理单元，其用于基于该情境来确定应优先处理第一请求和第二请求中的哪一者。

Description

信息处理设备、信息处理方法和程序

技术领域

本公开涉及信息处理设备、用于处理信息的方法和程序。

背景技术

近年来，已知作为处理来自用户的请求的技术的各种技术。例如，如下技术，其在除了处理中的请求之外还输入新请求的情况下，根据是否允许中断来确定是否允许新请求执行中断(例如，参见专利文献1)。

引用列表

专利文献

专利文献1：日本专利特许公报No.H7-121226

发明内容

本发明要解决的问题

然而，期望提供一种能够更适当地确定要优先处理的请求的技术。问题的解决方案

根据本公开，提供了一种信息处理设备，包括：检测单元，其检测与用户相关联的情境；以及请求处理单元，其基于该情境确定应优先处理第一请求和第二请求中的哪一者。

根据本公开，提供了一种用于处理信息的方法，该方法包括：检测与用户相关联的情境；以及基于该情境确定应优先处理第一请求和第二请求中的哪一者。

根据本公开，提供了一种使得计算机用作如下信息处理设备的程序，该信息处理设备包括：检测单元，其检测与用户相关联的情境；以及请求处理单元，其基于情境确定应优先处理第一请求和第二请求中的哪一者。发明效果

如上所述，根据本公开，提供了一种能够更适当地确定要优先处理的请求的技术。注意，上述效果不必然是限制性的，并且除了上述效果之外或者代替上述效果，还可以发挥本说明书中描述的任何效果或者可以从本说明书理解的其他效果。

附图说明

图1是示出根据第一实施方式的信息处理系统的示例性配置的图。

图2是示出代理的示例性功能配置的图。

图3是示出控制单元的示例性详细配置的图。

图4是示出根据第一实施方式的服务器装置的示例性功能配置的框图。

图5是示出示例性情境列表信息的图。

图6是示出其中情境、属性信息和优先级彼此相关联的相关信息的示例性配置的图。

图7是示出示例性请求队列表的图。

图8是示出在已经发生中断的情况下呈现给用户的示例性屏幕的图。

图9是示出在已经发生中断的情况下呈现给用户的示例性语音消息的图。

图10是用于示出在已经检测到多个情境且属性类型是单个的情况下的请求的优先级计算的示例的图。

图11是用于示出在已经检测到多个情境且属性类型是多个的情况下的请求的优先级计算的示例的图。

图12是用于示出转移其他用户的相关信息的示例的图。

图13是示出其中基于来自用户的反馈的确信度被进一步关联的示例性相关信息的图。

图14是示出从请求队列中连续提取请求并处理请求的示例性操作的流程图。

图15是示出在存在处理中的请求的情形下输入新请求的情况下的示例性操作的流程图。

图16是示出根据第二实施方式的信息处理系统的示例性配置的图。

图17是示出控制单元的示例性详细配置的图。

图18是示出根据第二实施方式的服务器装置的示例性功能配置的图。

图19是示出示例性任务状态表的图。

图20是示出确定是否要在代理中执行请求的示例性操作的流程图。

图21是示出在服务器装置中确定是否要执行请求的示例性操作的流程图。

图22是示出在服务器装置中选择代理以执行请求的另一示例性操作的流程图。

图23是示出根据第三实施方式的信息处理系统的示例性配置的图。

图24是示出控制单元的示例性详细配置的图。

图25是示出确定是否要在代理(从装置)中执行请求的示例性操作的流程图。

图26是示出在代理(主装置)中选择代理以执行请求的示例性操作的流程图。

图27是示出在代理(主装置)中选择代理以执行请求的另一示例性操作的流程图。

图28是示出根据第四实施方式的信息处理系统的示例性配置的图。

图29是示出控制单元的示例性详细配置的图。

图30是示出每个条件与呈现模式之间的示例性对应关系的图。

图31是示出每个用户的每个条件与呈现模式之间的示例性对应关系的图。

图32是示出每个用户的每个条件与呈现模式之间的示例性对应关系的另一图。

图33是示出基于音频的呈现模式下的示例性呈现的图。

图34是示出音频视频呈现模式下的示例性呈现的图。

图35是示出音频视频呈现模式下的示例性呈现的另一图。

图36是示出基于音频的呈现模式下的另一示例性呈现的图。

图37是示出音频视频呈现模式下的另一示例性呈现的图。

图38是示出音频视频呈现模式下的又一示例性呈现的图。

图39是示出响应于由用户输入的请求向用户呈现呈现信息的示例性操作的流程图。

图40是示出显示单元和屏幕的第一变型的图。

图41是示出显示单元和屏幕的第二变型的图。

图42是示出显示单元和屏幕的第三变型的图。

图43是示出显示单元和屏幕的第四变型的图。

图44是示出显示单元和屏幕的第五变型的图。

图45是示出考虑多个用户的状况的呈现信息的示例性呈现的图。

图46是示出信息处理设备的示例性硬件配置的框图。

具体实施方式

在下文中，将参照附图详细描述本公开的优选实施方式。注意，在本说明书和附图中，具有基本相同的功能配置的组成元素将由相同的附图标记表示，并且将省略其重复描述。

此外，在本说明书和附图中，具有基本相同或相似的功能配置的多个组成元素可以通过在相同的附图标记之后附接的不同数字来区分。然而，在不特别需要区分具有基本相同或相似功能配置的多个组成元素中的每一个的情况下，仅给出相同的附图标记。此外，不同实施方式的相似组成元素可以通过在相同附图标记之后附接的不同字母来区分。然而，在不特别需要区分相似组成元素中的每一个的情况下，仅给出相同的附图标记。

注意，将按以下顺序给出描述。

0.概述(要优先处理的请求)

1.第一实施方式

1.1.示例性系统配置

1.2.代理的示例性功能配置

1.3.服务器装置的示例性功能配置

1.4.信息处理系统的功能细节

1.5.示例性操作

2.第二实施方式

2.1.示例性系统配置

2.2.代理的示例性功能配置

2.3.服务器装置的示例性功能配置

2.4.信息处理系统的功能细节

2.5.示例性操作

3.第三实施方式

3.1.示例性系统配置

3.2.主装置的示例性功能配置

3.3.示例性操作

4.概述(对用户的呈现信息的控制)

5.第四实施方式

5.1.示例性系统配置

5.2.代理的示例性功能配置

5.3.信息处理系统的功能细节

5.4.示例性操作

5.5.来自代理的自主呈现

5.6.显示单元和屏幕的变型

5.7.与多个用户对应的示例性呈现

6.示例性硬件配置

7.结论

<0.概述(要优先处理的请求)>

首先，将描述确定要优先处理的请求的技术的概述。近年来，已知作为处理来自用户的请求的技术的各种技术。例如，已经公开了如下技术：其在除了处理中的请求之外还输入新请求的情况下，根据是否允许中断来确定是否允许新请求执行中断。

另外，还已知如下技术，其基于与请求相关联的优先级来确定要优先处理的请求。这种优先级由用户预先手动登记在初始设置等中。然而，在预先登记的优先级没有改变的情况下，难以更适当地确定要优先处理的请求。

为了利用具体示例进行描述，假设孩子和母亲在早晨开始工作之前一直在使用代理。此时，假设父亲已经向代理询问交通报告。在这种情况下，虽然应将父亲输入的请求的优先级设置为高的，但是在父亲的优先级没有被设置为高的情况下，有时可能忽略或推迟来自父亲的请求。

鉴于上述，在本说明书中，将主要描述一种能够更适当地确定要优先处理的请求的技术。

在上文中，已经描述了确定要优先处理的请求的技术的概述。

<1.第一实施方式>

首先，将描述第一实施方式。

[1.1.示例性系统配置]

首先，将参照附图描述根据第一实施方式的信息处理系统的示例性配置。图1是示出根据第一实施方式的信息处理系统的示例性配置的图。如图1所示，根据第一实施方式的信息处理系统1A包括信息处理设备10A、控制器20-1至20-N(N是自然数)和服务器装置30A。信息处理设备10A和服务器装置30A能够经由通信网络931执行通信。

此外，在本说明书中，将主要描述如下情况，其中，信息处理设备10A是代表用户U-1至U-N控制对请求(例如，下面要描述的第一请求和第二请求)的处理的执行的代理。因此，在以下描述中，信息处理设备10A将主要被称为“代理”。信息处理设备10A能够处理用户U-1至U-N输入的请求。然而，信息处理设备10A不限于代理。

在本说明书中，将主要描述用户U-1至U-N中的每一个可以单独使用控制器20的情况。然而，用户U-1至U-N中的一部分或全部可能能够使用多个控制器20，或者可能不能使用控制器20中的任何控制器。在从用户U接收到输入操作时，控制器20将与该操作对应的请求传送到代理10A。控制器20可以是远程控制器，或者可以是智能电话。

此外，用户U-1至U-N中的每一个能够通过话语(utterance)向代理10输入请求。注意，在以下描述中，语音/话音(voice/speech)和声音(sound)彼此区分并且被使用。例如，语音/话音可以主要指示由代理10收集的声音之中的用户的话语，并且除了用户的话语之外，声音还可以包括噪声等。

此外，假设服务器装置30A是诸如服务器装置的计算机。服务器装置30A管理代理10A。注意，在第一实施方式中主要假设存在一个代理10A的情况。然而，在第一实施方式中，可以以与第二实施方式和随后实施方式类似的方式存在多个代理10A。在这种情况下，服务器装置30A可以管理多个代理10A。

上面已经描述了根据第一实施方式的信息处理系统1A的示例性配置。

[1.2.代理的示例性功能配置]

接下来，将描述代理10A的示例性功能配置。图2是示出代理10A的示例性功能配置的图。如图2所示，代理10A包括声音收集单元113、成像单元114、距离检测单元115、接收单元116、控制单元120A、存储单元130、通信单元140、显示单元150和声音输出单元160。代理10A和控制器20能够经由网络(例如，无线局域网(LAN)等)执行通信。此外，代理10A经由通信网络931连接到服务器装置30A。通信网络931包括例如因特网。

声音收集单元113具有通过声音收集获得声音的功能。例如，声音收集单元113包括麦克风，并且使用麦克风收集声音。包括在声音收集单元113中的麦克风的数目不受特别限制，只要它是一个或更多个即可。另外，设置声音收集单元113中包括的一个或更多个麦克风中的每一个的位置也没有特别限制。注意，声音收集单元113可以包括除麦克风之外的形式的声音收集装置，只要其具有收集声音信息的功能即可。

成像单元114具有通过成像输入图像的功能。例如，成像单元114包括相机(包括图像传感器)，并且输入由相机捕获的图像。相机的类型不受限制。例如，相机可以是广角相机、深度相机或获得能够检测用户U的视线的图像的相机。成像单元114中包括的相机的数目不受特别限制，只要它是一个或更多个即可。另外，设置成像单元114中包括的一个或更多个相机中的每一个的位置也没有特别限制。此外，一个或更多个相机可以包括单目相机，或者可以包括立体相机。

距离检测单元115具有检测到用户U的距离的功能。例如，距离检测单元115包括距离测量传感器，并且获得由距离测量传感器检测到的到用户U的距离。设置距离测量传感器的位置不受特别限制。此外，距离测量传感器的类型不受特别限制。例如，距离测量传感器可以是红外距离传感器，或者可以是超声波距离传感器。可替选地，距离检测单元115可以基于由声音收集单元113收集的用户U的语音的大小来检测距离，或者可以基于由成像单元114捕获的图像中出现的用户U的尺寸来检测距离。

接收单元116包括通信电路，并且接收从控制器20传送的请求。注意，接收单元116与从控制器20传送的无线信号的类型对应。换言之，在从控制器20传送的无线信号的类型是无线电波的情况下，可以接收无线电波。可替选地，在从控制器20传送的无线信号的类型是红外线的情况下，可以接收红外线。

通信单元140包括通信电路，并且具有经由通信网络931从连接到通信网络931的服务器装置30A获得数据并向服务器装置30A提供数据的功能。例如，通信单元140包括通信接口。注意，要连接到通信网络931的服务器装置30A的数目可以是一个或可以是多个。

存储单元130包括存储器，并且是存储要由控制单元120A执行的程序并存储该程序的执行所需的数据的记录介质。此外，存储单元130临时存储用于由控制单元120A执行的计算的数据。存储单元130包括磁存储单元装置、半导体存储装置、光存储装置、磁光装置等。

显示单元150具有显示各种屏幕的功能。尽管在本说明书中主要假设显示单元150是投影仪(例如，单焦点投影仪)的情况，但是显示单元150的类型不受限制。例如，显示单元150可以是液晶显示器，或者可以是有机电致发光(EL)显示器，只要它是能够执行可以由用户在视觉上识别的显示的显示器即可。此外，尽管在本说明书中主要假设显示单元150在相对高的位置(例如，墙面等)上执行显示或在相对低的位置(例如，代理的腹部、用户的手等)上执行显示的情况，但是显示单元150执行显示的位置也不受限制。

控制单元120A执行对代理10A的每个单元的控制。图3是示出控制单元120A的示例性详细配置的图。如图3所示，控制单元120A包括检测单元121、请求处理单元122A和执行控制单元123。稍后将描述这些功能块中的每一个的细节。注意，控制单元120A可以包括例如一个或更多个中央处理单元(CPU)等。在控制单元120A包括诸如CPU的处理装置的情况下，处理装置可以包括电子电路。

返回图2，将继续描述。声音输出单元160具有输出声音的功能。例如，声音输出单元160包括扬声器，并且使用扬声器输出声音。包括在声音输出单元160中的扬声器的数目不受特别限制，只要它是一个或更多个即可。另外，设置声音输出单元160中包括的一个或更多个扬声器中的每一个的位置也没有特别限制。注意，声音输出单元160可以包括除扬声器之外的形式的声音输出装置(例如，耳机、头戴式听筒等)，只要其具有输出声音的功能即可。

以上已经描述了根据第一实施方式的代理10A的示例性功能配置。

[1.3.服务器装置的示例性功能配置]

接下来，将描述根据第一实施方式的服务器装置30A的示例性功能配置。图4是示出根据第一实施方式的服务器装置30A的示例性功能配置的框图。如图4所示，服务器装置30A包括控制单元310A、通信单元340和存储单元350。在下文中，将描述服务器装置30A的那些功能框。

控制单元310A执行对服务器装置30A的每个单元的控制。注意，控制单元310A可以包括例如诸如一个或多个中央处理单元(CPU)的处理装置。在控制单元310A包括诸如CPU的处理装置的情况下，处理装置可以包括电子电路。

通信单元340包括通信电路，并且具有经由网络931(图1)与其他装置进行通信的功能。例如，通信单元340包括通信接口。例如，通信单元340能够经由网络931(图1)与代理10A通信。

存储单元350包括存储器，并且是存储要由控制单元310A执行的程序并存储该程序的执行所需的数据的记录装置。此外，存储单元350临时存储用于由控制单元310A执行的计算的数据。注意，存储单元350可以是磁存储单元装置、半导体存储装置、光存储装置或磁光存储装置。

以上已经描述了根据第一实施方式的服务器装置30A的示例性功能配置。

[1.4.信息处理系统的功能细节]

接下来，将描述根据第一实施方式的信息处理系统1A的功能细节。在第一实施方式中，检测单元121检测与用户相关联的情境。然后，请求处理单元122A基于由检测单元121检测到的情境确定应优先处理第一请求和第二请求中的哪一者。根据这样的配置，可以更适当地确定要优先处理的请求。

与用户相关联的情境不受特别限制。例如，与用户相关联的情境可以包括与用户相关联的时间信息、与用户相关联的天气信息、与用户相关联的环境信息或与用户相关联的话语内容中的至少之一。图5是示出示例性情境列表信息的图。参照图5，示出了情境列表信息151，并且示出了与用户相关联的示例性情境。

在此，与用户相关联的时间信息可以是用户所处的当前时间所属的时间信息。时间信息可以是指示时间区段(例如，上午6点至上午11点、早晨、白天等)的信息，或者可以是指示一周中的某天(例如，工作日、节假日、星期一、星期日等)的信息。当前时间可以从存在于代理10A中或代理10A外部的装置(例如，服务器装置30A等)中的时钟获得。此外，可以从代理10A的内部或代理10A外部的装置(例如，服务器装置30A等)适当地获得与用户相关联的时间信息。

与用户相关联的天气信息可以是关于用户所处位置的天气信息。天气信息可以是指示天气(例如，晴天、阴天、下雨等)的信息。用户所处的位置可以通过某种定位功能获得，或者可以由用户预先设置。此外，可以从代理10A的内部或代理10A外部的装置(例如，服务器装置30A等)适当地获得与用户相关联的天气信息。

与用户相关联的环境信息可以是指示用户所处位置的周围环境的信息。环境信息可以是指示亮度(例如，10lx或更小的周围亮度等)的信息，或者可以是指示音量(例如，60db或更高的周围环境声音等)的信息。如果代理10A包括光传感器，则可以通过光传感器检测指示亮度的信息。此外，如果代理10A包括声音传感器，则可以通过声音传感器检测指示音量的信息。

可以通过对由声音收集单元113检测到的声音信息进行语音识别来获得与用户相关联的话语内容。语音识别可以由代理10A执行，或者可以由代理10A外部的装置(例如，服务器装置30A等)执行。此外，与用户相关联的话语内容可以是通过语音识别获得的文本数据本身，或者可以是从通过语音识别获得的文本数据识别的关键字。

更具体地，请求处理单元122A可以基于第一请求的优先级与第二请求的优先级之间的比较来确定应优先处理第一请求和第二请求中的哪一者。例如，请求处理单元122A可以确定应优先处理具有第一请求的优先级和第二请求的优先级中的较高优先级的请求。

可以以任何方式确定第一请求的优先级和第二请求的优先级。图6是示出其中情境、属性信息和优先级彼此相关联的相关信息的示例性配置的图。如图6所示，相关信息152包括彼此相关联的情境、属性信息(图6所示的示例中的属性类型“属性”和属性值“值”的组合)和优先级(图6所示的示例中的“优先级”)。

可以通过请求处理单元122A从代理10A的内部或代理10A外部的装置(例如，服务器装置30A等)适当地获得这样的相关信息152。例如，请求处理单元122A可以基于第一请求的属性信息和由检测单元121检测到的情境获得第一请求的优先级，并且可以基于第二请求的属性信息和情境获得第二请求的优先级。

在此，第一请求和第二请求中的每一个的属性信息可以包括属性类型和与属性类型对应的属性值。此时，例如，请求处理单元122A可以获得第一请求和第二请求中的每一个的属性信息(属性类型和属性值的组合)，并且可以从相关信息152获得与第一请求和第二请求中的每一个的属性信息(属性类型和属性值的组合)和由检测单元121检测到的情境对应的优先级。

属性类型可以包括指示用户的信息(图6中示出的示例中的“人”)，或者指示装置的信息(图6中示出的“模态(modal)”)。此外，在图6所示的示例中，“用户A(父亲)”和“用户B(说话者)”被指示为与属性类型“人”对应的属性值。此外，“控制器”和“语音”被指示为与属性类型“模态”对应的属性值。

作为示例，在情境是“工作日早晨”的情况下，认为应优先考虑来自上班之前的父亲的请求。因此，在相关信息152中，属性类型“人”和属性值“用户A(父亲)”优选地与情境“工作日早晨”相关联。

作为另外的示例，在情境是“周围亮度为10lx或更小”的情况下，由于控制器倾向于错误地操作的情况，所以认为基于模态“语音”的请求应被优先考虑。因此，在相关信息152中，属性类型“模态”和属性值“语音”优选地与情境“周围亮度为10lx或更小”相关联。

相反，在情境是“周围环境声音为60db或更高”的情况下，由于语音倾向于被错误识别的情况，所以认为基于模态“控制器”的请求应被优先考虑。因此，在相关信息152中，属性类型“模态”和属性值“控制器”优选地与情境“周围环境声音为60db或更高”相关联。

作为另外的示例，在情境是“关键字“帮助”被包括在通过语音识别获得的文本数据中”的情况下，认为来自关键字的说话者“用户B(说话者)”的请求应被优先考虑。因此，在相关信息152中，属性类型“人”和属性值“用户B(说话者)”优选地与情境“关键字“帮助”被包括在通过语音识别获得的文本数据中”相关联。

作为另外的示例，在情境是“天气多雨”的情况下，由于周围环境趋于暗的情况，所以认为基于模态“语音”的请求应被优先考虑。因此，在相关信息152中，属性类型“模态”和属性值“语音”优选地与情境“天气多雨”相关联。

另外，在情境是“某个用户的视线朝向代理”、“某个用户正在睁大他/她的眼睛(绝对地或相对于用户的标准眼睛大小)”、“某个用户的话语音量正在增加”、“某个用户的语音是高音”或“某个用户的表情是严肃的”的情况下，认为应优先考虑来自这些用户的请求。因此，在相关信息152中，属性类型“人”和那些用户优选地与那些情境相关联。

注意，在请求的属性类型包括“人”的情况下，可以以任何方式识别与请求的属性类型“人”对应的属性值“用户A”等。例如，在属性类型包括“人”的情况下，请求处理单元122A可以获得基于语音识别的结果识别的属性值。可替选地，请求处理单元122A可以获得基于面部识别的结果识别的属性值。此时，可以预先登记用于识别的语音和面部图像。此外，在识别出未登记用户的语音或面部的情况下，可以新登记用户。

在下文中，将在处理中的请求被描述为第一请求的示例并且新输入的请求被描述为第二请求的示例的情况下给出描述。然而，第一请求不限于处理中的请求。此外，第二请求不限于新输入的请求。例如，第一请求或第二请求中的至少一个可以是尚未处理的请求(它可以是存在于请求队列中的请求)。

新输入到代理10A的请求被添加到请求队列，除非发生关于处理中的请求的中断。此外，请求处理单元122A可以从请求队列中连续地提取具有最高优先级的请求并处理该请求。请求队列中存在的请求在代理10A内作为请求队列表而被管理。

图7是示出请求队列表的示例的图。如图7所示，请求的处理顺序、与请求对应的任务、已经做出请求的用户、模态和状态在请求队列表153中彼此相关联。如图7所示，状态为“处理中”的请求是具有最高优先级的请求，该请求是从消息队列中提取的且当前正在处理的请求。此外，状态为“等待(pending)”的请求是消息队列中存在的请求。

在此，请求处理单元122A比较处理中的请求和新输入的请求中的每一个的优先级，并且在确定应优先处理该处理中的请求的情况下，它继续处理该处理中的请求。

另一方面，在执行控制单元123比较处理中的请求和新输入的请求中的每一个的优先级，并且确定应优先处理新输入的请求的情况下，新输入的请求可以中断处理中的请求。在已经发生这种中断的情况下，执行控制单元123可以控制预定输出信息的输出。输出信息可以呈现给已经做出处理中的请求的用户，或者可以呈现给已经做出新输入的请求的用户。

在此，输出信息的类型不受限制。例如，可以可视地呈现输出信息。视觉呈现可以通过预定手势(例如，将手掌指向已经做出要被中断的请求的用户的手势等)呈现给代理10A，或者可以用诸如灯的发光(例如，红灯的发光等)的硬件来呈现。可替选地，输出信息可以是由代理10A管理的请求队列表153本身的呈现。

图8是示出在已经发生中断的情况下呈现给用户的示例性屏幕的图。如图8所示，执行控制单元123可以控制显示单元150，使得显示单元150呈现请求队列表153。此时，为了便于在已经执行中断的请求与已被中断的请求之间进行区分，执行控制单元123可以在请求队列表153之中将预定动画(例如，闪烁等)添加至已经执行中断的请求和已被中断的请求中的每一行。

可替选地，输出信息可以通过语音呈现。图9是示出在已经发生中断的情况下呈现给用户的示例性语音消息的图。如图9所示，执行控制单元123可以控制预定语音消息161的输出(在图9所示的示例中，语音消息“已经接收到优先级高于处理中的请求的优先级的请求，所以处理中的请求将停止。”)。然而，语音消息161不受特别限制。

在上文的描述中，已经主要描述了检测单元121检测到一个情境的情况。然而，可能存在检测单元121检测到多个情境的情况。例如，假设检测单元121检测到第一情境和第二情境并且与第一情境和第二情境对应的属性类型相同的情况。在这种情况下，请求处理单元122A可以基于与第一情境和第二情境中的每一个所对应的相同属性信息相关联的相应的优先级的计算来获得第一请求和第二请求中的每一个的优先级。

图10是用于示出在已经检测到多个情境且属性类型是单个的情况下请求的优先级计算的示例的图。在图10所示的示例中，假设已经检测到情境“早晨”和情境“工作日”的情况。

对应表154-1包括与情境“早晨”(属性类型、属性值和优先级)对应的各种种类的信息以及与情境“工作日”对应的各种种类的信息。此时，如对应表155-1所示，通过将与相同属性信息(例如，属性类型“人”和属性值“用户A”)相关联的优先级“0.9”和“0.8”相乘，具有该属性信息的请求的优先级可以计算为“0.72”。注意，相应的优先级的计算不限于相应的优先级的相乘，而是，可以是相应的优先级的相加，或者可以是相应的优先级的平均值。

此外，还假设检测单元121检测到第一情境和第二情境并且与第一情境和第二情境对应的属性类型不同的情况。在这种情况下，请求处理单元122A可以基于与第一情境和第二情境中的每一个所对应的不同属性信息相关联的相应的优先级的计算来获得第一请求和第二请求中的每一个的优先级。

图11是用于示出在已经检测到多个情境且属性类型是多个的情况下请求的优先级计算的示例的图。在图11所示的示例中，假设已经检测到情境“早晨”和情境“周围亮度为10lx或更小”的情况。

对应表154-2包括与情境“早晨”(属性类型、属性值和优先级)对应的各种种类的信息以及与情境“周围亮度为10lx或更小”对应的各种种类的信息。此时，如对应表155-2所示，通过将与不同属性信息(例如，属性类型“人”和属性值“用户A”以及属性类型“模态”和属性值“语音UI”)相关联的优先级“0.9”和“0.9”相乘，具有那些属性信息的请求的优先级可以被计算为“0.81”。注意，相应的优先级的计算不限于相应的优先级的相乘，而是，可以是相应的优先级的相加，或者可以是相应的优先级的平均值。

在上文的描述中，已经描述了情境的示例。情境可以包括特定参数与阈值之间的关系。例如，情境“周围环境声音为60db或更大”包括参数“周围环境声音”与阈值“60db”之间的关系。这样的阈值可以由用户预先设置，或者可以动态地改变。例如，认为周围环境声音等的最佳阈值可以根据代理10A的位置而改变，由此阈值优选地动态地改变。

具体地，在放置代理10A的环境中，声音收集单元113可以在预定时间段内持续检测周围环境声音。然后，请求处理单元122A可以在将该预定时间段内检测到的周围环境声音的平均值设置为基准的情况下，将从该基准偏离x％的值设置为阈值(异常值)。

在上文的描述中，已经描述了其中属性信息和优先级彼此相关联的相关信息152的示例(图6)。可以以任何方式设置这样的相关信息152。例如，相关信息152可以在提供产品(服务)之前由代理10A的产品(服务)提供者设置。可替选地，相关信息152可以由用户设置。然而，还假设相关信息152将相关信息152设置为更适合于放置代理10A的环境以及代理10A的用户。

具体地，假设在服务器装置30A中还管理其他用户的相关信息的情况。因此，请求处理单元122A可以获得与代理10A的用户具有预定类似关系的其他用户的相关信息作为相关信息152。预定类似关系不受特别限制。

例如，预定类似关系可以是与代理10A的用户相关联的信息和与其他用户相关联的信息之间的相似度超过阈值的关系，或者可以是与其他用户相关联的信息和与代理10A的用户相关联的信息最相似的关系。与代理10A的用户相关联的信息和与其他用户相关联的信息之间的相似度不受特别限制，但可以是余弦相似度等。

图12是用于示出转移其他用户的相关信息的示例的图。如图12所示，在服务器装置30A中，存储单元350存储与多个用户相关联的信息156。在图12所示的示例中，假设其他用户是“家庭成员A”。此外，假设代理10A的用户是“家庭成员B”。此时，控制单元310A参考与多个用户相关联的信息156，并且确定与其他用户“家庭成员A”相关联的信息和与代理10A的用户“家庭成员B”相关联的信息具有预定类似关系。

因此，如图12所示，通信单元340可以将其他用户“家庭成员A”的相关信息152-1作为代理10A的用户“家庭成员B”的相关信息传送给代理10A。此时，在代理10A中，通信单元140可以接收其他用户“家庭成员A”的相关信息152-1，并且请求处理单元122A可以基于其他用户“家庭成员A”的相关信息152-1确定请求的优先级。

此外，基于来自用户的反馈的确信度可以与代理10A的相关信息(例如，其他用户“家庭成员A”的相关信息152-1)相关联，并且可以基于确信度确定是否要被采用。更具体地，请求处理单元122A将基于来自用户的反馈的确信度与代理10A的相关信息相关联。然后，在与第一请求或第二请求中的每一个的属性信息中的至少之一相关联的确信度低于预定阈值的情况下，请求处理单元122A不需要确定应优先处理第一请求和第二请求中的哪一者。

在此，预定阈值可以是伪随机数。例如，确信度可以取0≤确信度≤1的范围。此外，确信度的初始值可以被设置为0到1范围内的可选值(例如，0.5等)。

然后，在检测单元121检测到来自用户的正反馈的情况下，请求处理单元122A可以将“+1”设置为奖励。此外，在检测单元121检测到来自用户的负反馈的情况下，请求处理单元122A可以将“0”设置为奖励。此外，在检测单元121检测到来自多个用户的不同反馈的情况下，如果存在做出负反馈的任何用户，则请求处理单元122A可以将反馈视为负反馈。

可以由请求处理单元122A基于总奖励值/总试验次数来计算确信度。图13是示出其中基于来自用户的反馈的确信度被进一步关联的示例性相关信息152-2的图。

例如，正反馈可以是指示正面的UI操作(例如，按下指示正面的按钮等)，可以是指示感谢的预定语音(例如，诸如“谢谢”的消息)(来自已经执行中断的用户)，或者可以是与此类似的隐式行为(例如，表达诸如微笑的预定表情的行为等)。

例如，负反馈可以是指示负面的UI操作(例如，按下指示负面的按钮等)，可以是指示排斥的预定语音(由已被中断的用户表达)(例如，诸如“不要中断”的消息)，或者可以是与此类似的隐式行为(例如，表达不满表情的行为等)。

此外，可能存在新用户(例如，未登记用户等)进行请求的情况。例如，假设如下情况：在通常仅父亲、母亲和孩子使用代理10A的情况下，住在远处的祖母已来到他们家。在这种情况下，请求处理单元122A可以获得与新用户具有预定类似关系的其他用户的优先级作为新用户的优先级。如上所述，预定类似关系不受特别限制。

以上已经描述了根据第一实施方式的信息处理系统1A的功能细节。

[1.5.示例性操作]

接下来，将描述根据第一实施方式的信息处理系统1A的示例性操作。图14是示出从请求队列中连续提取请求并处理请求的示例性操作的流程图。如图14所示，在请求队列大小为“0”(S11中的“否”)的情况下，请求处理单元122A终止操作。

另一方面，在请求队列大小超过“0”(S11中的“是”)的情况下，请求处理单元122A提取具有最高优先级的请求，并且处理所提取的请求(S12)。在处理该请求之后，请求处理单元122A从请求队列中删除该请求(S13)，并返回S11。

图15是示出在存在处理中的请求的情形下输入新请求的情况下的示例性操作的流程图。如图15所示，在输入新请求的情况下，请求处理单元122A确定其他请求是否在处理中(S21)。在其他请求不在处理中(S21中的“否”)的情况下，请求处理单元122A进行到S26。另一方面，在其他请求在处理中(S21中的“是”)的情况下，请求处理单元122A获得由检测单元121检测到的情境(S22)。

随后，请求处理单元122A确定由检测单元121检测到的情境是否存在于相关信息152中(S23)。在不存在对应请求(S23中的“否”)的情况下，请求处理单元122A进行到S26。另一方面，在存在对应请求(S23中的“是”)的情况下，请求处理单元122A从相关信息152获得与情境相关联的属性(S24)。

随后，请求处理单元122A确定相关信息152中是否存在与属性对应的属性值(S25)。在不存在对应属性值(S25中的“否”)的情况下，请求处理单元122A将新输入的请求添加到请求队列(S26)。另一方面，在存在对应属性值(S25中的“是”)并且与对应属性值相关联的确信度小于伪随机数(rand)(S251中的“否”)的情况下，请求处理单元122A将新输入的请求添加到请求队列(S26)。另一方面，在存在对应属性值(S25中的“是”)并且与对应属性值相关联的确信度等于或大于伪随机数(rand)(S251中的“是”)的情况下，请求处理单元122A获得与属性值相关联的优先级，并且通过比较优先级来确定应优先考虑新输入的请求和处理中的请求中的哪一者(S27)。

在通过比较优先级确定新输入的请求应被优先考虑(即，处理中的任务已经发生中断)(S28中的“是”)的情况下，执行控制单元123通知用户发生中断(S29)，并进行到S30。另一方面，在请求处理单元122A通过比较优先级确定处理中的请求应被优先考虑(即，处理中的任务没有发生中断)(S28中的“否”)的情况下，它更新请求队列表(S30)，并终止操作。

以上已经描述了根据第一实施方式的信息处理系统1A的示例性操作。

在上文中，已经描述了第一实施方式。

<2.第二实施方式>

接下来，将描述第二实施方式。在第一实施方式中，已主要假设存在一个代理10的情况。在第二实施方式中，将主要描述存在多个代理10的情况。

[2.1.示例性系统配置]

首先，将参照附图描述根据第二实施方式的信息处理系统的示例性配置。图16是示出根据第二实施方式的信息处理系统的示例性配置的图。如图16所示，根据第二实施方式的信息处理系统1B包括代理10B-1至10B-N、控制器20-1至20-N(N是自然数)和服务器装置30B。注意，尽管代理10的数目和控制器20的数目在图16所示的示例中是相同的，但是代理10的数目和控制器20的数目可以不同。

如图16所示，在用户U-2已经做出请求“告诉我日程表”的情况下，需要指定代理10B-1至10B-N中的哪一个应处理该请求。注意，在第二实施方式中，服务器装置30B存储任务状态表157。任务状态表157管理代理10B-1至10B-N中的每一个的任务。将在后面描述任务状态表157。

上面已经描述了根据第二实施方式的信息处理系统1B的示例性配置。

[2.2.代理的示例性功能配置]

接下来，将描述根据第二实施方式的代理10B的示例性功能配置。根据第二实施方式的代理10B与根据第一实施方式的代理10A的不同之处在于包括控制单元120B而不是控制单元120A。在下文中，将主要描述控制单元120B的示例性功能配置。图17是示出控制单元120B的示例性详细配置的图。如图17所示，控制单元120B包括检测单元121、请求处理单元122B和执行控制单元123。下文中，将主要描述请求处理单元122B。

以上已经描述了根据第二实施方式的代理10B的示例性功能配置。

[2.3.服务器装置的示例性功能配置]

接下来，将描述根据第二实施方式的服务器装置30B的示例性功能配置。图18是示出根据第二实施方式的服务器装置30B的示例性功能配置的图。如图18所示，根据第二实施方式的服务器装置30B与根据第一实施方式的服务器装置30A的不同之处在于包括控制单元310B而不是控制单元310A。具体地，控制单元310B包括距离获取单元311、选择单元312和执行命令输出单元313。在下文中，将主要描述控制单元310B的示例性功能配置。

以上已经描述了根据第二实施方式的服务器装置30B的示例性功能配置。

[2.4.信息处理系统的功能细节]

接下来，将描述根据第二实施方式的信息处理系统1B的功能细节。图19是示出任务状态表的示例的图。如图19所示，在任务状态表157中，代理ID、状态(例如，对请求的响应是否在处理中、是否不存在要处理的请求(是否空闲)等)、要被响应的用户的标识信息和与处理中的请求对应的任务的类型彼此相关联。

此时，例如，在服务器装置30B确定代理10B-1至10B-2之中的代理10B-1应处理来自用户U-2的请求的情况下，代理10B-1的请求处理单元122B可以执行来自用户U-2的请求(例如，可以将来自用户U-2的请求添加到请求队列)。

另一方面，在未确定代理10B-1至10B-2之中的代理10B-1应处理来自用户U-2的请求的情况下，代理10B-1的请求处理单元122B不需要执行来自用户U-2的请求(例如，不需要将来自用户U-2的请求添加到请求队列)。

例如，在代理10B-1至10B-2之中的代理10B-1最接近用户U-2的情况下，服务器装置30B可以确定代理10B-1应处理来自用户U-2的请求。可替选地，在代理10B-1至10B-2之中的代理10B-1没有要处理的请求(与请求对应的任务)的情况下，服务器装置30B可以确定代理10B-1应处理来自用户U-2的请求。

以这种方式，在代理10B-1没有要处理的请求(与请求对应的任务)的情况下，虽然可以确定代理10B-1应处理来自用户U-2的请求，仍可以假设代理10B-1远离用户U-2的情况。因此，在这种情况下，代理10B-1的请求处理单元122B可以改变对该请求的响应。例如，请求处理单元122B可以将对请求的响应设置为语音和屏幕显示的组合，可以将对请求的响应设置为语音并使语音响亮，并且可以将对请求的响应设置为屏幕显示并放大屏幕的显示字符。

以上已经描述了根据第二实施方式的信息处理系统1B的功能细节。

[2.5.示例性操作]

接下来，将描述根据第二实施方式的信息处理系统1B的示例性操作。图20是示出确定是否要在代理10B-1中执行请求的示例性操作的流程图。注意，也可以在代理10B-2至10B-N中执行类似的操作。如图20所示，当代理10B-1的请求处理单元122B接收到来自用户U-2的请求(S41)时，它将用户U-2与代理10B-1之间的距离传送到服务器装置30B(S42)。

当通信单元140从服务器装置30B接收到关于请求的响应执行命令(S43中的“是”)时，请求处理单元122B执行对该请求的响应(S44)。另一方面，当通信单元140没有从服务器装置30B接收到关于请求的响应执行命令(S43中的“否”)时，请求处理单元122B终止操作而不执行对请求的响应。

图21是示出在服务器装置30B中选择代理以执行请求的示例性操作的流程图。如图21所示，在服务器装置30B中，通信单元340从代理10B-1接收代理10B-1与用户U-2之间的距离(S51)。还以类似的方式从代理10B-2到10B-N接收距离。距离获取单元311获得这样的距离。

随后，选择单元312从代理10B-1至10B-N之中选择最接近用户U-2的代理(S52)。执行命令输出单元313使得由选择单元312选择的代理传送响应执行命令(S53)。当响应执行命令的传输完成时，操作终止。

图22是示出在服务器装置30B中选择代理以执行请求的另一示例性操作的流程图。如图22所示，在服务器装置30B中，通信单元340从代理10B-1接收代理10B-1与用户U-2之间的距离(S51)。还以类似的方式从代理10B-2到10B-N接收距离。距离获取单元311获得这样的距离。

随后，选择单元312确定是否存在空闲代理(S54)。在不存在空闲代理(S54中的“否”)的情况下，选择单元312选择最接近用户U-2的代理(S52)，并且进行到S53。另一方面，在存在空闲代理(S54中的“是”)的情况下，选择单元312从空闲代理当中选择最接近用户U-2的代理(S55)。执行命令输出单元313使由选择单元312选择的代理传送响应执行命令(S53)。当响应执行命令的传输完成时，操作终止。

以上已经描述了根据第二实施方式的信息处理系统1B的示例性操作。

在上文中，已经描述了第二实施方式。

<3.第三实施方式>

接下来，将描述第三实施方式。同样在第三实施方式中，以与第二实施方式类似的方式，存在多个代理10。

[3.1.示例性系统配置]

首先，将参照附图描述根据第三实施方式的信息处理系统的示例性配置。图23是示出根据第三实施方式的信息处理系统的示例性配置的图。如图23所示，根据第三实施方式的信息处理系统1C包括代理10C-1至10C-N、控制器20-1至20-N(N是自然数)和服务器装置30A。注意，尽管代理10的数目和控制器20的数目在图23所示的示例中是相同的，但是以与第二实施方式类似的方式，代理10的数目和控制器20的数目可以不同。

如图23所示，以与第二实施方式类似的方式，在用户U-2已经做出请求“告诉我日程表”的情况下，需要指定代理10C-1到10C-N中的哪一者应处理该请求。注意，在第三实施方式中，代理10C-G(主装置)存储任务状态表157。此外，在多个代理10之中，除了代理10C-G(主装置)之外的代理用作从装置。

可以以任何方式确定代理10C-G(主装置)。例如，代理10C-G(主装置)可以由用户手动确定。可替选地，代理10C-G(主装置)可以由系统(例如，服务器装置30A等)从通信范围内存在的代理之中自动确定。例如，代理10C-G(主装置)可以随机确定，或者可以被确定为与用户具有最高接触频率的代理。此外，从装置能够使用短距离无线通信等彼此通信。

以上已经描述了根据第三实施方式的信息处理系统1C的示例性配置。

[3.2.主装置的示例性功能配置]

接下来，将描述根据第三实施方式的代理10C-G(主装置)的示例性功能配置。根据第三实施方式的代理10C-G(主装置)与根据第二实施方式的代理10B的不同之处在于包括控制单元120C而不是控制单元120B。在下文中，将主要描述控制单元120C的示例性功能配置。图24是示出控制单元120C的示例性详细配置的图。

如图24所示，代理10C-G(主装置)的控制单元120C包括检测单元121、请求处理单元122B和执行控制单元123。此外，代理10C-G(主装置)的控制单元120C包括距离获取单元311、选择单元312和执行命令输出单元313。

上面已经描述了根据第三实施方式的代理10C-G(主装置)的示例性功能配置。

[3.3.示例性操作]

接下来，将描述根据第三实施方式的信息处理系统1C的示例性操作。图25是示出确定是否要在代理10C-1(从装置)中执行请求的示例性操作的流程图。注意，可以在其他从装置中执行类似的操作。如图25所示，当代理10C-1(从装置)的请求处理单元122B接收到来自用户U-2的请求(S61)时，它将用户U-2与代理10C-1(从装置)之间的距离传送到代理10C-G(主装置)(S62)。

当通信单元140从代理10C-G(主装置)接收到关于请求的响应执行命令(S63中的“是”)时，请求处理单元122B执行对该请求的响应(S64)。另一方面，当通信单元140没有从代理10C-G(主装置)接收到关于请求的响应执行命令(S63中的“否”)时，请求处理单元122B终止操作而不执行对请求的响应。

图26是示出在代理10C-G(主装置)中选择代理以执行请求的示例性操作的流程图。如图26所示，在代理10C-G(主装置)中，通信单元340从代理10C-1(从装置)接收代理10C-1与用户U-2之间的距离(S71)。还以类似的方式从其他从装置接收距离。距离获取单元311获得这样的距离。

随后，选择单元312从所有从装置当中选择最接近用户U-2的代理(S72)。执行命令输出单元313使由选择单元312选择的代理传送响应执行命令(S73)。当响应执行命令的传输完成时，操作终止。

图27是示出在代理10C-G(主装置)中选择代理以执行请求的另一示例性操作的流程图。如图27所示，在代理10C-G(主装置)中，通信单元340从代理10C-1(从装置)接收代理10C-1(从装置)与用户U-2之间的距离(S71)。还以类似的方式从其他从装置接收距离。距离获取单元311获得这样的距离。

随后，选择单元312确定是否存在空闲代理(S74)。在不存在空闲代理(S74中的“否”)的情况下，选择单元312选择最接近用户U-2的代理(S72)，并且进行到S73。另一方面，在存在空闲代理(S74中的“是”)的情况下，选择单元312从空闲代理之中选择最接近用户U-2的代理(S75)。执行命令输出单元313使由选择单元312选择的代理传送响应执行命令(S73)。当响应执行命令的传输完成时，操作终止。

上面已经描述了根据第三实施方式的信息处理系统1C的示例性操作。

在上文中，已经描述了第三实施方式。

<4.概述(对用户的呈现信息的控制)>

在上文的描述中，已经主要描述了确定要优先处理的请求的技术。在下文中，将主要描述控制对用户的呈现信息的技术。近年来，已知与用于与用户进行对话的机器人设备相关联的技术。例如，已经公开了如下技术，其根据从用户的话语内容确定的用户的情绪和预先登记的与用户的亲密度将呈现信息呈现给用户。

此外，还已知与如下代理相关联的技术，其基于主要包括音频信息的呈现信息与用户进行对话。还已知与如下代理相关联的技术，其不仅向用户呈现音频信息而且还向用户呈现视频信息作为呈现信息。以这种方式，在音频信息和视频信息两者均可以作为呈现信息呈现给用户的情况下，认为通过有效地呈现给用户的音频信息和视频信息来进行用户期望的对话。

在此，将描述两个具体示例。作为第一示例，假设用户已请求代理呈现与天气相关联的信息的情况。在这种情况下，可设想，响应于来自处于无法观看屏幕的状态的用户的请求，仅呈现音频信息(例如，音频信息“明天将是晴天”等)。另一方面，处于能够观看屏幕的状态的用户不仅可以使用音频信息，还可以使用屏幕上显示的视频信息。然而，如果具有与可以由视频信息呈现的内容相同的内容的音频信息被呈现给用户，则向用户的呈现可能是冗余的。

作为第二示例，假设用户已请求代理呈现关于访问目的地的推荐信息的情况。在这种情况下，可设想，推荐的点通过例如音频信息“推荐点是A、B、C等”的音频信息从开始到结束顺序地呈现给处于无法观看屏幕的状态的用户。另一方面，如果仅向处于能够观看屏幕的状态的用户呈现类似的音频信息，则尽管可以使用视频信息，但是用户被迫等待直到听到所有推荐的点。

假设这样的示例性情况，例如，优选地根据用户当前是否正在观看屏幕来控制要呈现给用户的音频信息和视频信息。例如，在第一示例中，当与天气相关联的信息通过视频信息被呈现给当前在观看屏幕的用户时，附加信息(例如，诸如“今天很热，所以保持水分”的附加信息)由音频信息呈现，由此可以执行适合于用户的呈现。另一方面，响应于来自当前未在观看屏幕的用户的请求，可以仅呈现音频信息。

在第二示例中，当推荐信息的列表通过视频信息被呈现给当前在观看屏幕的用户时，通过音频信息简明地呈现指示(例如，诸如“存在任何你感兴趣的地方吗？”的指示)，由此可以执行适合于用户的呈现。另一方面，响应于来自当前未在观看屏幕的用户的请求，可以仅呈现音频信息。

如上所述，例如，考虑优选地根据用户当前是否正在观看屏幕来控制要呈现给用户的视频信息和音频信息。在下文中，将主要描述能够根据用户的需要控制要呈现给用户的多条呈现信息的技术。注意，尽管多条呈现信息中的每一条的类型不受限制，但是以与上述示例性情况类似的方式，将主要假设多条呈现信息包括视频信息和音频信息的情况。视频信息可以是静止图像，或者可以是运动图像。

在上文中，已经描述了控制对用户的呈现信息的技术的概述。

<5.第四实施方式>

接下来，将描述第四实施方式。在第一实施方式中，已经主要假设存在一个代理10的情况。同样在第四实施方式中，将主要描述存在一个代理10的情况。然而，可以存在多个代理10而不是一个。

[5.1.示例性系统配置]

首先，将参照附图描述根据第四实施方式的信息处理系统的示例性配置。图28是示出根据第四实施方式的信息处理系统的示例性配置的图。如图28所示，根据第四实施方式的信息处理系统1D包括代理10D。注意，尽管在第四实施方式中将主要假设不存在能够经由通信网络与代理10D通信的服务器装置的情况，但是信息处理系统1D可以包括这样的服务器装置。

此外，在第四实施方式中，将主要假设响应于请求将呈现信息呈现给用户U-1的情况。然而，无论请求是否来自用户U-1，均可以将呈现信息呈现给用户U-1。此外，在第四实施方式中，将主要描述由用户U-1基于话语进行请求的情况。然而，可以以与第一至第三实施方式类似的方式基于对控制器执行的操作来进行请求。注意，呈现信息也可以以与用户U-1的方式类似的方式呈现给用户U-2至U-N。

以上已经描述了根据第四实施方式的信息处理系统1D的示例性配置。

[5.2.代理的示例性功能配置]

接下来，将描述根据第四实施方式的代理10D的示例性功能配置。根据第四实施方式的代理10D与根据第一实施方式的代理10A的不同之处在于包括控制单元120D而不是控制单元120A。在下文中，将主要描述控制单元120D的示例性功能配置。图29是示出控制单元120D的示例性详细配置的图。如图29所示，控制单元120D包括姿势确定单元124、姿势信息获取单元125、呈现控制单元126和学习处理单元127。

以上已经描述了根据第四实施方式的代理10D的示例性功能配置。

[5.3.信息处理系统的功能细节]

接下来，将描述根据第四实施方式的信息处理系统1D的功能细节。在第四实施方式中，姿势确定单元124通过获得传感器数据并基于传感器数据确定用户U-1的姿势来获得用户U-1的姿势信息。尽管在第四实施方式中将主要假设传感器数据是由成像单元114捕获的图像的情况，但是传感器数据不限于由成像单元114捕获的图像。例如，在传感器(例如，加速度传感器等)附接到用户U-1的情况下，传感器数据可以由附接到用户U-1的传感器检测。注意，姿势确定单元124可以存在于服务器装置中而不是代理10D中。

用户U-1的姿势信息可以是基于用户U-1的身体的一部分或全部的朝向的信息。例如，用户U-1的姿势信息可以包括用户U-1的面部朝向或用户U-1的视线。此外，用户U-1的姿势信息可以包括用户U-1的姿态信息。姿态信息可以是体形数据(例如，骨架信息等)本身，或者可以是体形数据的分类结果(例如，站立状态、就座状态等)。此外，用户U-1的姿势信息可以包括用户U-1的行为信息(例如，阅读、清洁、用餐等)。

姿势信息获取单元125获得由姿势确定单元124确定的用户U-1的姿势信息。然后，呈现控制单元126控制对用户U-1的呈现信息的呈现。此时，呈现控制单元126基于用户U-1的姿势信息控制具有不同方面的多条呈现信息。根据这样的配置，变得可以根据用户U-1的需要进一步控制要呈现给用户U-1的多条呈现信息。注意，如上所述，在第四实施方式中主要假设多条呈现信息包括视频信息和音频信息的情况。

将具体描述用户U-1的姿势信息与视频信息和音频信息之间的示例性对应关系。在第四实施方式中，假设基于“音频视频呈现模式”的呈现和基于“基于音频的呈现模式”的呈现。换言之，在用户U-1的姿势信息满足第一条件(下文中也称为“屏幕观看条件”)的情况下，呈现控制单元126控制基于与屏幕观看条件相关联的“音频视频呈现模式”的呈现。同时，在用户U-1的姿势信息满足第二条件(下文中也称为“屏幕非观看条件”)的情况下，呈现控制单元126控制基于与屏幕非观看条件相关联的“基于音频的呈现模式”的呈现。

在此，“音频视频呈现模式”是用于将视频信息和音频信息两者呈现给用户U-1的模式。换言之，在满足屏幕观看条件的情况下，呈现控制单元126控制对用户U-1的与屏幕观看条件相关联的视频信息和音频信息两者的呈现。可以以任何方式执行音频信息的呈现。例如，音频信息的呈现可以通过文本到语音(TTS)来执行。然而，在“音频视频呈现模式”下，音频信息可能不会呈现给用户U-1(优选地呈现)。

同时，“基于音频的呈现模式”是用于向用户U-1呈现音频信息的模式。换言之，在满足屏幕非观看条件的情况下，呈现控制单元126控制对用户U-1的与屏幕非观看条件相关联的音频信息的呈现。然而，在“基于音频的呈现模式”下，除了音频信息之外，还可以将视频信息呈现给用户U-1。换言之，在满足屏幕非观看条件的情况下，呈现控制单元126还控制对用户U-1的与屏幕非观看条件相关联的视频信息的呈现。然而，即使在将视频信息呈现给用户U-1的情况下，也优选地呈现音频信息，使得用户U-1仅通过音频信息就可以充分理解响应内容。

图30是示出每个条件与呈现模式之间的示例性对应关系的图。如图30所示，屏幕观看条件可以包括用户U-1当前正在观看显示视频信息的屏幕(下文中也简称为“屏幕”)的条件。此外，屏幕观看条件可以包括用户U-1处于能够观看屏幕的状态的条件。此外，屏幕观看条件可以包括屏幕的观看不妨碍用户U-1的动作的条件。

同时，如图30所示，屏幕非观看条件可以包括用户U-1当前没有在观看屏幕的条件。此外，屏幕非观看条件可以包括用户U-1处于不能观看屏幕的状态的条件。此外，屏幕非观看条件可以包括屏幕的观看妨碍用户U-1的动作的条件。

例如，如图30所示，呈现控制单元126可以基于用户U-1的面部的朝向或用户U-1的视线来确定用户U-1当前是否正在观看屏幕(模式1)。具体地，在用户U-1的面部的朝向或视线与屏幕具有预定位置关系的情况下，呈现控制单元126可以确定用户U-1当前正在观看屏幕。另一方面，在用户U-1的面部的朝向或视线与屏幕不具有预定位置关系的情况下，呈现控制单元126可以确定用户U-1当前没有在观看屏幕。

在此，可以以任何方式设置屏幕的位置。例如，在已经基于由成像单元114捕获的图像自动识别屏幕的位置的情况下，可以自动设置所识别的屏幕的位置。可替选地，可以预先手动设置屏幕的位置。

更具体地，在用户U-1的面部的朝向或视线(或基于面部的朝向的平截头体，或基于视线的平截头体)与屏幕相交的情况下，呈现控制单元126可以确定用户U-1当前正在观看屏幕。另一方面，在用户U-1的面部的朝向或视线(或基于面部的朝向的平截头体，或基于视线的平截头体)不与屏幕相交的情况下，呈现控制单元126可以确定用户U-1当前没有在观看屏幕。

此外，即使在用户U-1的面部的朝向或视线(或基于面部的朝向的平截头体，或基于视线的平截头体)与屏幕相交的情况下，在用户U-1不在最大可观距离内的情形下，呈现控制单元126可以确定用户U-1当前没有在观看屏幕。例如，在当前屏幕上显示字符的情况下，呈现控制单元126可以基于字符的显示尺寸来计算最大可视距离。

此外，即使在用户U-1的面部的朝向或视线(或基于面部的朝向的平截头体，或基于视线的平截头体)与屏幕相交的情况下，在用户U-1与屏幕之间存在遮挡对象的情形下，呈现控制单元126可以确定用户U-1当前没有在观看屏幕。例如，在基于由成像单元114捕获的图像在用户U-1与屏幕之间检测到对象的情况下，呈现控制单元126可以确定在用户U-1与屏幕之间存在遮挡对象。

此外，如图30所示，呈现控制单元126可以基于用户U-1的姿态信息确定用户U-1是否处于能够观看屏幕的状态(模式2)。具体地，在计算根据用户U-1的姿态信息的用户U-1的可视范围(例如，面部朝向的角向宽度等)且可视范围与屏幕具有预定位置关系的情况下，呈现控制单元126可以确定用户U-1处于能够观看屏幕的状态。另一方面，在可视范围与屏幕不具有预定位置关系的情况下，呈现控制单元126可以确定用户U-1处于不能观看屏幕的状态。

例如，可以预先确定用户U-1的姿态信息与用户U-1的可视范围之间的关系。例如，在用户U-1的姿态信息指示“站立状态”的情况下，可视范围可以比用户U-1的姿态信息指示“就座状态”的情况下的可视范围更宽。

更具体地，在根据用户U-1的姿态信息的用户U-1的可视范围与屏幕相交的情况下，呈现控制单元126可以确定用户U-1处于能够观看屏幕的状态。另一方面，在根据用户U-1的姿态信息的用户U-1的可视范围不与屏幕相交的情况下，呈现控制单元126可以确定用户U-1处于不能观看屏幕的状态。

此外，即使在根据用户U-1的姿态信息的用户U-1的可视范围与屏幕相交的情况下，在用户U-1不在最大可视距离内的情形下，呈现控制单元126也可以确定用户U-1处于不能观看屏幕的状态。可替选地，即使在根据用户U-1的姿态信息的用户U-1的可视范围与屏幕相交的情况下，在用户U-1与屏幕之间存在遮挡对象的情况下，呈现控制单元126也可以确定用户U-1处于不能观看屏幕的状态。

此外，如图30所示，呈现控制单元126可以基于用户U-1的行为信息来确定屏幕的观看是否妨碍用户U-1的动作(模式3)。具体地，在用户U-1的行为信息是第一行为信息(例如，坐在沙发上的状态等)的情况下，呈现控制单元126可以确定屏幕的观看不妨碍用户U-1的动作。另一方面，在用户U-1的行为信息是第二行为信息(例如，阅读、清洁、用餐等)的情况下，呈现控制单元126可以确定屏幕的观看妨碍用户U-1的动作。

如上所述，可以一致地执行屏幕观看条件与“音频视频呈现模式”之间的关联以及屏幕非观看条件与“基于音频的呈现模式”之间的关联，而不取决于用户。然而，用户在满足哪种条件的情况下期望哪种呈现模式可以取决于用户而不同。鉴于上述，可以针对每个用户执行屏幕观看条件与“音频视频呈现模式”之间的关联以及屏幕非观看条件与“基于音频的呈现模式”之间的关联。此外，这些关联可以针对每个用户改变。

例如，在控制基于与屏幕观看条件相关联的音频视频呈现模式的对用户U-1的呈现之后检测到用户U-1的第一状态的情况下，学习处理单元127可以改变音频视频呈现模式与对应于用户U-1的屏幕观看条件之间的关联。然后，学习处理单元127可以重新将基于音频的呈现模式与对应于用户U-1的屏幕观看条件相关联。

在此，第一状态可以是由用户U-1执行的预定改变操作。例如，改变操作可以是指示改变的预定手势，可以是指示改变的话语，或者可以是其他操作。可替选地，第一状态可以是用户U-1没有在观看屏幕的状态(用户U-1的面部朝向或视线与屏幕不具有预定位置关系的状态)。

同时，在控制基于与屏幕非观看条件相关联的基于音频的呈现模式的对用户U-1的呈现之后检测到用户U-1的第二状态的情况下，学习处理单元127可以改变基于音频的呈现模式与对应于用户U-1的屏幕非观看条件之间的关联。然后，学习处理单元127可以重新将音频视频呈现模式与用户U-1的屏幕非观看条件相关联。

在此，第二状态可以是由用户U-1执行的预定改变操作。例如，改变操作可以是指示改变的预定手势，可以是指示改变的话语，或者可以是其他操作。可替选地，第二状态可以是用户U-1正在观看屏幕的状态(用户U-1的面部的朝向或视线与屏幕具有预定位置关系的状态)。

图31和图32是示出每个用户的每个条件与呈现模式之间的示例性对应关系的图。参照图31，示出了在与姿态信息对应的范围(可视范围)内不存在屏幕的条件作为屏幕非观看条件的示例。对于用户U-1至U-N中的每一个，基于音频的呈现模式和与姿态信息对应的范围(可视范围)内不存在屏幕的条件相关联。另外，参照图31，示出了存在遮挡对象的条件。对于用户U-1至U-N中的每一个，基于音频的呈现模式与在用户与屏幕之间存在遮挡对象的条件相关联。

此外，参照图31，示出了屏幕位于远处的条件。对于用户U-1和用户U-N，进行改变，使得音频视频呈现模式与用户远离屏幕(用户不在距屏幕的最大可视距离内)的条件相关联。对于其他用户U-2至U-(N-1)，基于音频的呈现模式与用户远离屏幕(用户不在距屏幕的最大可视距离内)的条件相关联。

参照图32，示出了用户的行为信息是第二行为信息(例如，阅读、清洁和用餐中的任何)的条件作为屏幕非观看条件的示例。对于用户U-N，进行改变，使得音频视频呈现模式与用户的行为信息是“阅读”的条件相关联。对于用户U-1至U-(N-1)中的每一个，基于音频的呈现模式与用户的行为信息是“阅读”的条件相关联。

此外，对于用户U-1至U-N中的每一个，基于音频的呈现模式与用户的行为信息是“清洁”的条件相关联。此外，对于用户U-1至U-(N-1)，进行改变，使得音频视频呈现模式与用户的行为信息是“用餐”的条件相关联。对于用户U-N，基于音频的呈现模式与用户的行为信息是“用餐”的条件相关联。

在下文中，将描述呈现信息的具体示例。图33是示出基于音频的呈现模式下的示例性呈现的图。在此，假设用户U-1通过“告诉我今天的日程表”的话语输入请求“今天的日程表的呈现”的情况。在图33中，墙面Wa被示为在其上呈现视频信息的屏幕。然而，用户U-1没有在观看屏幕(例如，因为他/她正进行清洁)。因此，呈现控制单元126确定用户U-1的姿势信息满足屏幕非观看条件，并且控制基于音频的呈现模式下的呈现。

如上所述，在基于音频的呈现模式下，呈现控制单元126可以仅将音频信息呈现给用户U-1(可以不呈现视频信息)。此时，优选地呈现音频信息，使得用户U-1仅通过音频信息就可以充分理解响应内容。在图33所示的示例中，音频信息168-1包括今天的日程表。

图34和图35是示出音频视频呈现模式下的示例性呈现的图。在此，再次假设用户U-1通过“告诉我今天的日程表”的话语输入请求“今天的日程表的呈现”的情况。在图34和图35中所示的示例中，用户U-1正在观看屏幕。因此，呈现控制单元126确定用户U-1的姿势信息满足屏幕观看条件，并且控制音频视频呈现模式下的呈现。

如上所述，在音频视频呈现模式下，呈现控制单元126可以将视频信息和音频信息两者均呈现给用户U-1。此时，由于满足屏幕观看条件，因此音频视频呈现模式下呈现的视频信息的信息量可以大于基于音频的呈现模式下呈现的视频信息的信息量。另一方面，音频视频呈现模式下呈现的音频信息的信息量可以小于基于音频的呈现模式下呈现的音频信息的信息量。

例如，音频视频呈现模式下呈现的视频信息可以包括图形或文本数据中至少之一。在图34所示的示例中，呈现控制单元126使用图形和文本数据两者作为视频信息158-1来控制日程表(饼图)的呈现。此时，音频视频呈现模式下呈现的音频信息可以是简要音频信息(它可以包括指示或缩写中的至少一个)。在图34所示的示例中，呈现控制单元126控制包括指示“这”的简要音频信息168-2的呈现。

在图35所示的示例中，呈现控制单元126使用文本数据作为视频信息158-2来控制日程表的呈现。此外，在图35所示的示例中，以与图34所示的示例类似的方式，呈现控制单元126控制包括指示“这”的简要音频信息168-2的呈现。

另外，在音频视频呈现模式下，呈现控制单元126可以执行控制，使得通过视频信息呈现难以以单词描述的内容。例如，假设找到该请求的候选的情况。在这种情况下，在呈现控制单元126控制诸如“这如何？”的简要音频信息的呈现的同时，它可以执行控制，使得通过图形呈现候选的图像。

此外，在呈现控制单元126控制诸如“该尺寸如何？”的简要音频信息的呈现的同时，它可以控制呈现，使得通过图形理解候选的尺寸感。更具体地，通过其理解候选的尺寸感的呈现可以是尺寸与候选的尺寸类似的对象(例如，东京巨蛋的尺寸的三倍、A4尺寸的笔记本等)的图像的呈现。尺寸与候选的尺寸类似的对象的图像优选地以实际尺寸呈现。

此外，在呈现控制单元126控制诸如“该色调如何？”的简要音频信息的呈现的同时，它可以通过图形来控制候选的颜色的呈现。此外，在呈现控制单元126控制诸如“该重量如何？”的简要音频信息的呈现的同时，它可以控制呈现，使得通过图形理解候选的重量。更具体地，通过其理解候选的重量的呈现可以是重量与候选的重量类似的对象的图像的呈现。

接下来，将描述呈现信息的另一具体示例。图36是示出基于音频的呈现模式下的另一示例性呈现的图。在此，假设用户U-1通过“告诉我今天的天气”的话语输入请求“今天的天气报告的呈现”的情况。在图36中，墙面Wa被示为在其上呈现视频信息的屏幕。然而，用户U-1没有在观看屏幕(例如，因为他/她正进行清洁)。因此，呈现控制单元126确定用户U-1的姿势信息满足屏幕非观看条件，并且控制基于音频的呈现模式下的呈现。

如上所述，在基于音频的呈现模式下，呈现控制单元126可以仅将音频信息呈现给用户U-1(可以不呈现视频信息)。此时，优选地呈现音频信息，使得用户U-1仅通过音频信息就可以充分理解响应内容。在图36所示的示例中，音频信息168-3包括今天的天气报告。

图37和图38是示出音频视频呈现模式下的另一示例性呈现的图。在此，再次假设用户U-1通过“告诉我今天的天气”的话语输入请求“今天的天气报告的呈现”的情况。在图37和图38中所示的示例中，用户U-1正在观看屏幕。因此，呈现控制单元126确定用户U-1的姿势信息满足屏幕观看条件，并且控制音频视频呈现模式下的呈现。

如上所述，在音频视频呈现模式下，呈现控制单元126可以将视频信息和音频信息两者均呈现给用户U-1。例如，音频视频呈现模式下呈现的视频信息可以包括图形或文本数据中至少之一。在图37所示的示例中，呈现控制单元126使用图形作为视频信息158-3来控制天气报告的呈现。此时，音频视频呈现模式下呈现的音频信息可以包括附加音频信息。在图37所示的示例中，呈现控制单元126控制包括附加音频信息“当你洗涤时要小心”的音频信息168-4的呈现。

在图38所示的示例中，呈现控制单元126使用文本数据作为视频信息158-4来控制天气报告的呈现。此外，在图38所示的示例中，以与图37所示的示例类似的方式，呈现控制单元126控制包括附加音频信息“当你洗涤时要小心”的音频信息168-4的呈现。

以上已经描述了根据第四实施方式的信息处理系统1D的功能细节。

[5.4.示例性操作]

接下来，将描述根据第四实施方式的信息处理系统1D的示例性操作。图39是示出响应于由用户U-1输入的请求向用户U-1呈现呈现信息的示例性操作的流程图。注意，尽管在此将主要描述在用户U-1输入请求的情况下响应于该请求将呈现信息呈现给用户U-1的示例，但是，无论是否如上所述的那样输入请求，呈现信息均可以被呈现给用户U-1。

如图39所示，姿势确定单元124获得传感器数据(S101)，并且基于传感器数据确定用户U-1的姿势(S102)。因此，姿势确定单元124获得用户U-1的姿势信息。如上所述，姿势信息可以包括视线或面部的朝向，可以包括姿态信息，或者可以包括行为信息。姿势信息获取单元125获得由姿势确定单元124确定的用户U-1的姿势信息。

然后，在用户U-1没有输入请求(S103中的“否”)的情况下，呈现控制单元126终止操作。另一方面，在用户U-1输入请求(S103中的“是”)的情况下，呈现控制单元126指定与用户U-1的姿势对应的呈现模式(S104)。具体地，在姿势信息满足屏幕观看条件的情况下，呈现控制单元126指定与屏幕观看条件相关联的音频视频呈现模式。另一方面，在姿势信息满足屏幕非观看条件的情况下，呈现控制单元126指定与屏幕非观看条件相关联的基于音频的呈现模式。

呈现控制单元126根据指定的呈现模式来控制对请求的响应(呈现信息的呈现)(S105)。然后，学习处理单元127在执行根据指定的呈现模式的对请求的响应之后获得用户U-1的状态。然后，在用户U-1的状态处于预定状态的情况下，学习处理单元127执行改变条件与呈现模式之间的关联的学习处理(S106)，并且终止操作。

例如，在根据与屏幕观看条件相关联的音频视频呈现模式执行响应之后检测到由用户U-1执行的预定改变操作或用户U-1未在观看屏幕的状态的情况下，学习处理单元127执行改变，使得基于音频的呈现模式与屏幕观看条件相关联。另一方面，在根据与屏幕非观看条件相关联的基于音频的呈现模式执行响应之后检测到由用户U-1执行的预定改变操作或用户U-1正观看屏幕的状态的情况下，学习处理单元127执行改变，使得音频视频呈现模式与屏幕非观看条件相关联。

以上已经描述了根据第四实施方式的信息处理系统1D的示例性操作。

[5.5.来自代理的自主呈现]

如上所述，可以呈现针对用户U-1的呈现信息，而不管用户U-1是否输入请求。换言之，即使用户U-1没有输入请求，代理10D也可以自主地将呈现信息呈现给用户U-1。即使在这种情况下，呈现控制单元126也可以根据与用户U-1的姿势信息对应的呈现模式来控制对用户U-1的呈现信息的呈现。

然而，在代理10D在没有预先通知的情况下将呈现信息呈现给用户U-1的情况下，用户U-1被认为在呈现呈现信息的时刻没有在观看屏幕。鉴于以上所述，呈现控制单元126可以使用预定的语音输出(例如，声音效果(SE)、TTS等)引导用户U-1观看屏幕，然后基于用户U-1的姿势信息指定呈现模式。

[5.6.显示单元和屏幕的变型]

在上文的描述中，已经主要假设显示单元150是固定投影仪(例如，单焦点投影仪)的情况。然而，放置显示单元150的位置不受限制。此外，已经主要假设显示单元150在其上显示视频信息的屏幕的位置是墙面的情况。然而，显示单元150或显示单元150在其上显示视频信息的屏幕的位置不限于墙面。在下文中，将描述显示单元150和屏幕的变型。

图40是示出显示单元150和屏幕的第一变型的图。如图40所示，显示单元150可以是电视装置。参照图40，视频信息158由作为显示单元150的示例的电视装置显示。此时，显示单元150在其上显示视频信息158的屏幕是电视装置的正面。

图41是示出显示单元150和屏幕的第二变型的图。如图41所示，显示单元150可以是安装在天花板上的投影仪。此时，安装在天花板上的投影仪可以是单焦点投影仪，可以是能够在所有方向上投影图像的全朝向投影仪，或者可以是能够控制显示位置(投影方向)的驱动型投影仪。此时，如图41所示，显示单元150在其上显示视频信息的屏幕的位置可以是墙面Wa。

图42是示出显示单元150和屏幕的第三变型的图。如图42所示，显示单元150可以是放置在桌子Ta上的固定投影仪(例如，单焦点投影仪)。此时，如图42所示，显示单元150在其上显示视频信息的屏幕的位置可以是桌子Ta的上表面。

图43是示出显示单元150和屏幕的第四变型的图。如图43所示，显示单元150可以是安装在桌子Ta上方的天花板上的投影仪。此时，安装在天花板上的投影仪可以是单焦点投影仪，或者可以是能够控制显示位置(投影方向)的驱动型投影仪。此时，如图43所示，显示单元150在其上显示视频信息的屏幕的位置可以是桌子Ta的上表面。

图44是示出显示单元150和屏幕的第五变型的图。如图44所示，显示单元150可以是附接到桌子Ta使得视频从桌子Ta的上部向下投射的投影仪(例如，单焦点投影仪)。此时，如图44所示，显示单元150在其上显示视频信息的屏幕的位置可以是桌子Ta的上表面。

[5.7.与多个用户对应的示例性呈现]

在上文的描述中，已经描述了考虑一个用户(用户U-1)的呈现信息的示例性呈现。在下文中，将描述考虑多个用户(用户U-1至U-N)的呈现信息的示例性呈现。更具体地，将描述考虑多个用户的状况的呈现信息的示例性呈现。

用户的状况不受限制。例如，用户的状况可以包括用户的姿势(例如，姿势信息满足屏幕观看条件和屏幕非观看条件中的哪一者等)。可替选地，用户的状况可以包括用户的位置(例如，距屏幕的距离等)。可替选地，用户的状况可以包括用户的属性(例如，性别、年龄(例如，成人或儿童)、用户是否属于代理中设置的家庭成员、语言等)。可替选地，用户的状况可以包括用户是否是已经输入请求的人(说话者)、用户是否是要从代理接收呈现信息的呈现的人等。

例如，可以以上述方式检测用户的姿势和位置(例如，距屏幕的距离等)。此外，用户的标识信息预先与用户的属性相关联，并且在使用面部识别技术从由成像单元114捕获的图像识别用户的情况下，可以检测与用户的标识信息相关联的属性。可以基于检测到的话语语音的进入方向来检测用户是否是说话者。可以基于呈现信息的内容来检测用户是否是要接收呈现信息的呈现的人。

图45是示出考虑多个用户的状况的呈现信息的示例性呈现的图。例如，呈现控制单元126可以执行控制，使得呈现与多个用户中的每一个的状况对应的呈现信息。参照图45，存在作为多个用户的示例的用户U-1和用户U-2。此时，呈现控制单元126可以控制与用户U-1的状况对应的第一呈现信息的呈现和与用户U-2的状况对应的第二呈现信息的呈现。

具体地，在图45所示的示例中，用户U-1是成人，并且用户U-2是儿童。然后，假设成人用户U-1通过“告诉我今天的天气”的话语输入请求“今天的天气报告的呈现”的情况。在这种情况下，呈现控制单元126可以针对成人用户U-1控制针对成人的呈现信息(例如，详细显示天气的视频信息158-4等)的呈现。针对成人的呈现信息可以是音频信息。同时，对于儿童用户U-2，可以控制针对儿童的呈现信息(例如，其中主要绘制天气标记的视频信息158-3)的呈现。

此时，可以在成人用户U-1附近(在图45所示的示例中，放置在成人用户U-1附近的桌子Ta的上表面)呈现针对成人的呈现信息(例如，详细显示天气的视频信息158-4等)。同时，可以在儿童用户U-2附近(在图45所示的示例中，位于儿童用户U-2附近的墙面Wa)呈现针对儿童的呈现信息(例如，其中主要绘制天气标记的视频信息158-3)。

可替选地，呈现控制单元126可以从多个用户当中选择要优先考虑的用户，并且可以基于所选择的用户的姿势信息来控制多条呈现信息。可以以上述方式对与用户的姿势信息对应的多条呈现信息进行控制。换言之，在用户的姿势信息满足屏幕观看条件的情况下，呈现控制单元126可以根据音频视频呈现模式来控制呈现。此外，在用户的姿势信息满足屏幕非观看条件的情况下，呈现控制单元126可以根据基于音频的呈现模式来控制呈现。

可以以任何方式选择要优先考虑的用户。例如，呈现控制单元126可以从多个用户之中选择说话者作为要优先考虑的用户。可替选地，呈现控制单元126可以从多个用户之中选择要接收呈现信息的呈现的人作为要优先考虑的用户。

可替选地，呈现控制单元126可以从多个用户之中选择最接近屏幕的人作为要优先考虑的用户。

此外，呈现控制单元126可以从多个用户之中选择成人作为要优先考虑的用户。可替选地，呈现控制单元126可以从多个用户之中选择儿童作为要优先考虑的用户。例如，可以基于呈现信息的内容来确定是选择成人还是选择儿童。

此外，呈现控制单元126可以从多个用户之中选择最难以观看屏幕的人作为要优先考虑的用户。换言之，在即使存在一个满足屏幕非观看条件的人的情况下，呈现控制单元126也可以选择基于音频的呈现模式。另一方面，如果所有用户均满足屏幕观看条件，则呈现控制单元126可以选择音频视频呈现模式。

此外，呈现控制单元126可以从多个用户之中选择属于代理中设置的家庭成员的人作为要优先考虑的用户。换言之，可以不要求呈现控制单元126选择不属于代理中设置的家庭成员的人(例如，房屋中的访客等)。

此外，呈现控制单元126可以从多个用户之中选择使用与代理中设置的语言(代理用于呈现信息的语言)相同的语言的人作为要优先考虑的用户。例如，在代理将日语用于呈现信息的情况下，呈现控制单元126可以从多个用户之中选择使用日语的人作为要优先考虑的用户。

在上文中，已经描述了第四实施方式。

<6.示例性硬件配置>

接下来，将参照图46描述根据本公开的实施方式的信息处理设备(代理)10的示例性硬件配置。图46是示出根据本公开的实施方式的信息处理设备10的示例性硬件配置的框图。注意，还可以以与图46中所示的信息处理设备10的示例性硬件配置类似的方式来实现根据本公开的实施方式的服务器装置30的硬件配置。

如图46所示，信息处理设备10包括中央处理单元(CPU)901、只读存储器(ROM)903和随机存取存储器(RAM)905。此外，信息处理设备10可以包括主机总线907、桥接器909、外部总线911、接口913、输入装置915、输出装置917、存储装置919、驱动器921、连接端口923和通信装置925。此外，信息处理设备10可以根据需要包括成像装置933和传感器935。代替CPU901或除CPU 901之外，信息处理设备10可以包括称为数字信号处理器(DSP)或专用集成电路(ASIC)的处理电路。

CPU 901用作算术处理单元和控制单元，并根据记录在ROM 903、RAM 905、存储装置919或可移除记录介质927中的各种程序来控制信息处理设备10的整体操作或其一部分。ROM 903存储CPU 901要使用的程序、操作参数等。RAM 905临时存储要在CPU 901的执行中使用的程序、在执行中适当改变的参数等。CPU 901、ROM 903和RAM 905通过包括诸如CPU总线的内部总线的主机总线907相互连接。此外，主机总线907经由桥接器909连接到外部总线911，例如外围部件互连/接口(PCI)总线。

输入装置915是由用户操作的装置，其例如是鼠标、键盘、触摸板、按钮、开关、控制杆等。输入装置915可以包括用于检测用户语音的麦克风。输入装置915可以是例如使用红外线或其他无线电波的远程控制装置，或者可以是支持信息处理设备10的操作的外部连接设备929，诸如移动电话。输入装置915包括输入控制电路，其基于用户输入的信息来生成输入信号并将其输出到CPU 901。用户操作输入装置915以在信息处理设备10上输入各种种类的数据或提供用于处理操作的指令。此外，稍后描述的成像装置933还可以通过对用户的手的动作、用户的手指等进行成像来用作输入装置。此时，可以根据手的运动或手指的朝向来确定指向位置。

输出装置917包括能够在视觉上或听觉上向用户通知所获得的信息的装置。输出装置917可以是例如诸如液晶显示器(LCD)、等离子显示面板(PDP)、有机电致发光(EL)显示器和投影仪的显示装置、全息图的显示装置、诸如扬声器和耳机的语音输出装置、打印机装置等。输出装置917将通过信息处理设备10的处理获得的结果输出为文本、图像等的视频或者输出为语音、音频声音等的语音。此外，输出装置917可以包括用于对周围进行照明的灯等。

存储装置919是用于存储数据的装置，其是信息处理设备10的存储单元的示例。存储装置919包括例如诸如硬盘驱动器(HDD)的磁存储单元装置、半导体存储装置、光学存储装置、磁光存储装置等。存储装置919存储要由CPU 901执行的程序、各种种类的数据、从外部获得的各种种类的数据等。

驱动器921是用于例如磁盘、光盘、磁光盘或半导体存储器的可移除记录介质927的读取器/写入器，可移除记录介质927并入信息处理设备10中或从外部附接至信息处理设备10。驱动器921读取记录在附接的可移除记录介质927中的信息，并将其输出到RAM 905。此外，驱动器921将记录写入附接的可移除记录介质927中。

连接端口923是用于将装置直接连接到信息处理设备10的端口。连接端口923可以是例如通用串行总线(USB)端口、IEEE 1394端口、小型计算机系统接口(SCSI)端口等。此外，连接端口923可以是RS-232C端口、光学音频端子、高清晰度多媒体接口(HDMI)(注册商标)端口等。通过将外部连接设备929连接到连接端口923，信息处理设备10可以与外部连接设备929交换各种种类的数据。

通信装置925例如是包括用于连接到通信网络931的通信装置等的通信接口。通信装置925可以是例如用于有线或无线局域网(LAN)、蓝牙(注册商标)、无线USB(WUSB)等的通信卡。此外，通信装置925可以是用于光通信的路由器、用于非对称数字用户线(ADSL)的路由器、用于各种种类的通信的调制解调器等。例如，通信装置925使用诸如TCP/IP的预定协议与因特网和其他通信装置传送和接收信号等。此外，连接到通信装置925的通信网络931是有线或无线地连接的网络，其是例如因特网、家庭LAN、红外通信、无线电波通信、卫星通信等。

成像装置933例如是使用各种构件对真实空间成像以生成捕获图像的装置，各种构件例如是诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)的成像元件以及用于控制对象图像在成像元件上的成像的透镜。成像装置933可以对静止图像进行成像，或者可以对运动图像进行成像。

传感器935例如是各种传感器，例如距离测量传感器、加速度传感器、陀螺仪传感器、地磁传感器、光传感器和声音传感器。传感器935获得与例如信息处理设备10的壳体的姿势等的信息处理设备10自身的状态相关联的信息，以及与例如信息处理设备10周围的亮度和噪声的信息处理10的周围环境相关联的信息。此外，传感器935可以包括全球定位系统(GPS)传感器，其接收GPS信号并测量装置的纬度、经度和海拔。

<7.结论>

如上所述，根据本公开的实施方式，提供了一种信息处理设备，其包括：检测单元，其检测与用户相关联的情境；以及请求处理单元，其基于该情境确定应优先处理第一请求和第二请求中的哪一者。根据这样的配置，提供了能够更适当地确定要优先处理的请求的技术。

此外，根据本公开的实施方式，提供了一种信息处理设备，其包括：姿势信息获取单元，其获得用户的姿势信息；以及呈现控制单元，该呈现控制单元控制对用户的呈现信息的呈现，并且该呈现控制单元基于该姿势信息来控制具有不同方面的多条呈现信息。根据这样的配置，提供了如下技术，其能够根据用户的进一步期望来控制要呈现给用户的多条呈现信息。

如上所述，尽管已经参照附图详细描述了本公开的优选实施方式，但是本公开的技术范围不限于这些示例。显然，本公开的技术领域的技术人员可以在所附权利要求的范围内找到各种改变和修改，并且应理解，这样的改变和修改也自然地在本公开的技术范围内。

例如，可以适当地组合上述实施方式。更具体地，第一实施方式至第三实施方式中的任一个可以与第四实施方式组合。更具体地，在第一实施方式至第三实施方式中的任一个中，确定应优先处理哪个请求，并且基于应优先处理哪个请求的确定结果，可以在第四实施方式中向用户呈现对请求的响应作为呈现信息。

此外，还可以创建用于使得例如CPU、ROM、RAM等的包含在计算机中的硬件发挥与上述控制单元120的功能类似的功能的程序。此外，还可以提供记录有该程序的计算机可读记录介质。

例如，每个配置的位置不受特别限制，只要可以实现信息处理设备10和服务器装置30的上述操作即可。信息处理设备10中的每个单元的处理的一部分可以由服务器装置30执行。作为具体示例，信息处理设备10中的控制单元110的块的一部分或全部可以存在于服务器装置30等中。此外，服务器装置30中的每个单元的处理的一部分可以由信息处理设备10执行。

此外，本说明书中描述的效果仅是说明性或示例性的，而非限制性的。也就是说，与上述效果一起或者代替上述效果，根据本公开的技术可以发挥根据本说明书的公开对本领域技术人员而言明显的其他效果。

注意，以下配置也在本公开的技术范围内。

(1)一种信息处理设备，包括：

检测单元，其检测与用户相关联的情境；以及

请求处理单元，其基于所述情境确定应优先处理第一请求和第二请求中的哪一者。

(2)根据上述(1)所述的信息处理设备，其中

与所述用户相关联的情境包括与所述用户相关联的时间信息、与所述用户相关联的天气信息、与所述用户相关联的环境信息或与所述用户相关联的话语内容中至少之一。

(3)根据上述(1)或(2)所述的信息处理设备，其中，

所述请求处理单元基于所述第一请求的优先级与所述第二请求的优先级之间的比较来确定应优先处理所述第一请求和所述第二请求中的哪一者。

(4)根据上述(3)所述的信息处理设备，其中

所述请求处理单元基于所述情境和所述第一请求的属性信息获得所述第一请求的优先级，并且基于所述情境和所述第二请求的属性信息获得所述第二请求的优先级。

(5)根据上述(4)所述的信息处理设备，其中

所述第一请求和所述第二请求中的每一个的属性信息包括属性类型和与所述属性类型对应的属性值。

(6)根据上述(5)所述的信息处理设备，其中，

所述属性类型包括指示用户的信息或指示装置的信息。

(7)根据上述(6)所述的信息处理设备，其中，

在所述属性类型包括指示所述用户的信息的情况下，所述请求处理单元获得基于语音识别结果或面部识别结果识别的所述属性值。

(8)根据上述(5)至(7)中任一项所述的信息处理设备，其中，

在所述检测单元检测到第一情境和第二情境并且与所述第一情境和所述第二情境对应的属性类型相同的情况下，所述请求处理单元基于对与所述第一情境和所述第二情境中的每一个所对应的相同属性信息相关联的相应的优先级的计算来获得所述第一请求和所述第二请求中的每一个的优先级。

(9)根据上述(5)至(7)中任一项所述的信息处理设备，其中，

在所述检测单元检测到第一情境和第二情境并且与所述第一情境和所述第二情境对应的属性类型不同的情况下，所述请求处理单元基于对与所述第一情境和所述第二情境中的每一个所对应的不同属性信息相关联的相应的优先级的计算来获得所述第一请求和所述第二请求中的每一个的优先级。

(10)根据上述(4)至(9)中任一项所述的信息处理设备，其中

所述请求处理单元获得与所述信息处理设备的用户具有预定类似关系的其他用户的相关信息作为如下相关信息，在该相关信息中，所述情境、所述属性信息和所述优先级彼此相关联。

(11)根据上述(10)所述的信息处理设备，其中，

所述请求处理单元将基于来自所述用户的反馈的确信度与所述相关信息相关联，并且在与所述第一请求或所述第二请求中的每一个的属性信息中的至少之一相关联的确信度低于预定阈值的情况下，所述请求处理单元不确定应优先处理所述第一请求和所述第二请求中的哪一者。

(12)根据上述(1)至(11)中任一项所述的信息处理设备，其中

所述第一请求是处理中的请求，并且

所述第二请求是新输入的请求。

(13)根据上述(12)所述的信息处理设备，还包括：

执行控制单元，所述执行控制单元在确定应优先处理所述新输入的请求的情况下，控制预定输出信息的输出。

(14)根据上述(12)所述的信息处理设备，还包括：

执行控制单元，所述执行控制单元在所述请求处理单元确定应优先处理所述处理中的请求的情况下继续处理所述处理中的请求。

(15)根据上述(1)至(14)中任一项所述的信息处理设备，其中，

所述信息处理设备是代理，所述代理代表所述用户控制对所述第一请求和所述第二请求的处理的执行。

(16)根据上述(1)至(15)中任一项所述的信息处理设备，其中，

在确定应当由多个信息处理设备之中的所述信息处理设备来处理来自所述用户的请求的情况下，所述请求处理单元将来自所述用户的请求设置为执行目标。

(17)根据上述(16)所述的信息处理设备，其中，

在所述多个信息处理设备之中的所述信息处理设备最接近所述用户的情况下，确定所述信息处理设备应处理来自所述用户的所述请求。

(18)根据上述(16)或(17)所述的信息处理设备，其中，

在所述多个信息处理设备之中的所述信息处理设备不具有要处理的请求的情况下，确定所述信息处理设备应处理来自所述用户的请求。

(19)一种用于处理信息的方法，包括：

检测与用户相关联的情境；以及

使用处理器，基于所述情境确定应优先处理第一请求和第二请求中的哪一者。

(20)一种用于使得计算机用作信息处理设备的程序，所述信息处理设备包括：

检测单元，其检测与用户相关联的情境；以及

请求处理单元，其基于所述情境确定应优先处理第一请求和第二请求中的哪一者。

附图标记列表

1(1A至1D) 信息处理系统

10(10A至10D) 代理(信息处理设备)

20 控制器

30(30A至30B) 服务器装置

110 控制单元

113 声音收集单元

114 成像单元

115 距离检测单元

116 接收单元

120 控制单元

120 控制单元

121 检测单元

122 请求处理单元

123 执行控制单元

124 姿势确定单元

125 姿势信息获取单元

126 呈现控制单元

127 学习处理单元

130 存储单元

140 通信单元

150 显示单元

160 声音输出单元

310 控制单元

311 距离获取单元

312 选择单元

313 执行命令输出单元

340 通信单元

350 存储单元

Claims (20)

1.一种信息处理设备，包括：

检测单元，其检测与用户相关联的情境；以及

请求处理单元，其基于所述情境确定应优先处理第一请求和第二请求中的哪一者。

2.根据权利要求1所述的信息处理设备，其中

与所述用户相关联的情境包括与所述用户相关联的时间信息、与所述用户相关联的天气信息、与所述用户相关联的环境信息或与所述用户相关联的话语内容中的至少之一。

3.根据权利要求1所述的信息处理设备，其中，

所述请求处理单元基于所述第一请求的优先级与所述第二请求的优先级之间的比较来确定应优先处理所述第一请求和所述第二请求中的哪一者。

4.根据权利要求3所述的信息处理设备，其中

所述请求处理单元基于所述情境和所述第一请求的属性信息获得所述第一请求的优先级，并且基于所述情境和所述第二请求的属性信息获得所述第二请求的优先级。

5.根据权利要求4所述的信息处理设备，其中

所述第一请求和所述第二请求中的每一个的属性信息包括属性类型以及与所述属性类型对应的属性值。

6.根据权利要求5所述的信息处理设备，其中，

所述属性类型包括指示用户的信息或指示装置的信息。

7.根据权利要求6所述的信息处理设备，其中，

在所述属性类型包括指示所述用户的信息的情况下，所述请求处理单元获得基于语音识别结果或面部识别结果而识别的所述属性值。

8.根据权利要求5所述的信息处理设备，其中，

在所述检测单元检测到第一情境和第二情境并且与所述第一情境和所述第二情境对应的属性类型相同的情况下，所述请求处理单元基于对与所述第一情境和所述第二情境中的每一个所对应的相同属性信息相关联的相应的优先级的计算来获得所述第一请求和所述第二请求中的每一个的优先级。

9.根据权利要求5所述的信息处理设备，其中，

在所述检测单元检测到第一情境和第二情境并且与所述第一情境和所述第二情境对应的属性类型不同的情况下，所述请求处理单元基于对与所述第一情境和所述第二情境中的每一个所对应的不同属性信息相关联的相应的优先级的计算来获得所述第一请求和所述第二请求中的每一个的优先级。

10.根据权利要求4所述的信息处理设备，其中

所述请求处理单元获得与所述信息处理设备的用户具有预定类似关系的其他用户的相关信息作为如下相关信息，在该相关信息中，所述情境、所述属性信息和所述优先级彼此相关联。

11.根据权利要求10所述的信息处理设备，其中，

所述请求处理单元将基于来自所述用户的反馈的确信度与所述相关信息相关联，并且在与所述第一请求或所述第二请求中的每一个的属性信息中的至少之一相关联的确信度低于预定阈值的情况下，所述请求处理单元不确定应优先处理所述第一请求和所述第二请求中的哪一者。

12.根据权利要求1所述的信息处理设备，其中

所述第一请求是处理中的请求，并且

所述第二请求是新输入的请求。

13.根据权利要求12所述的信息处理设备，还包括：

执行控制单元，所述执行控制单元在确定应优先处理所述新输入的请求的情况下，控制预定输出信息的输出。

14.根据权利要求12所述的信息处理设备，还包括：

执行控制单元，所述执行控制单元在所述请求处理单元确定应优先处理所述处理中的请求的情况下，继续处理所述处理中的请求。

15.根据权利要求1所述的信息处理设备，其中，

所述信息处理设备是代理，所述代理代表所述用户控制对所述第一请求和所述第二请求的处理的执行。

16.根据权利要求1所述的信息处理设备，其中

在确定应当由多个信息处理设备中的所述信息处理设备来处理来自所述用户的请求的情况下，所述请求处理单元将来自所述用户的请求设置为执行目标。

17.根据权利要求16所述的信息处理设备，其中，

在所述多个信息处理设备中的所述信息处理设备最接近所述用户的情况下，确定所述信息处理设备应处理来自所述用户的请求。

18.根据权利要求16所述的信息处理设备，其中，

在所述多个信息处理设备中的所述信息处理设备不具有要处理的请求的情况下，确定所述信息处理设备应处理来自所述用户的请求。

19.一种用于处理信息的方法，包括：

检测与用户相关联的情境；以及

使用处理器，基于所述情境确定应优先处理第一请求和第二请求中的哪一者。

20.一种用于使得计算机用作信息处理设备的程序，所述信息处理设备包括：

检测单元，其检测与用户相关联的情境；以及

请求处理单元，其基于所述情境确定应优先处理第一请求和第二请求中的哪一者。