CN113196228A - 信息处理装置、信息处理方法和程序 - Google Patents

Abstract

提供了一种信息处理装置，包括控制器(130)，该控制器用于基于装置的状态来控制由检测的装置输出的声音，其中该控制器根据状态的变化量，连续地改变在正常状态下可以由装置输出的合成声音的输出方式。进一步提供了一种信息处理方法，包括由处理器基于装置的状态来控制由检测的装置输出的声音，所述控制进一步包括根据状态的变化量，连续地改变在正常状态下可以由装置输出的合成声音的输出方式。

Description

信息处理装置、信息处理方法和程序

技术领域

本公开涉及信息处理装置、信息处理方法和程序。

背景技术

近年来，基于电气控制输出声音的各种装置已经得到广泛使用。还开发了基于收集的传感器信息控制声音输出的装置。例如，专利文献1公开了一种电子装置，其利用加速度传感器检测装置的移动并输出多种声音。

现有技术文献

专利文献

专利文献1：JP 2007-184834 A

发明内容

技术问题

在基于装置的状态来控制输出声音的情况下，当基于给定状态的检测来输出与正常状态不同类型的声音时，根据装置的使用或概念，还假定了听起来不自然的情况。

问题的解决方案

根据本公开，提供了一种信息处理装置，包括控制器，该控制器被配置为基于所检测到的装置的状态来控制由该装置执行的声音的输出，其中，控制器被配置为根据该状态的变化量，连续地改变输出合成声音的模式，该合成声音能够由该装置在正常状态下输出。

此外，根据本公开，提供了一种信息处理方法，该方法包括：由处理器基于所检测到的装置的状态，控制由该装置执行的声音输出，其中，该控制包括根据该状态的变化量，连续地改变输出合成声音的模式，该合成声音能够由装置在正常状态下输出。

此外，根据本公开，提供了一种程序，用于使计算机用作信息处理装置，该信息处理装置包括控制器，该控制器被配置为基于装置的检测状态来控制由装置执行的声音的输出，其中，该控制器被配置为根据状态的变化量来连续地改变输出合成声音的模式，该合成声音能够由装置在正常状态下输出。

附图说明

图1是用于解释本公开的实施方式的概述的示意图。

图2是示意性示出根据实施方式的信息处理装置的物理配置的示例的示意图。

图3是图示根据实施方式的信息处理装置的功能配置的示例的框图。

图4是表示根据根据实施方式的状态变化量的输出模式控制的流程的流程图。

图5是用于解释根据实施方式的根据用户行为类型的合成声音输出控制的示意图。

图6是用于解释根据实施方式的与接触检测相关联的动作停止控制的示意图。

图7是用于解释根据实施方式的与合成声音相关的参数的示意图。

图8是示出根据该实施方式通过控制音调和速度可以表达的情绪的示例的示意图。

图9是用于解释根据实施方式的基于移动物体上的负载变化量的合成发动机声音输出模式控制的示意图。

图10是用于解释根据实施方式的基于移动物体的安全变化量的合成发动机声音输出模式控制的示意图。

图11是用于解释根据实施方式的基于相对位置的变化量的合成声音输出模式控制的示意图。

图12A是用于解释根据实施方式的根据对象的接近的环境声音叠加控制的示意图。

图12B是用于解释根据实施方式的根据对象的接近的环境声音叠加控制的示意图。

图13A是用于解释根据实施方式在信息处理装置是耳戴式终端装置的情况下的环境声音叠加控制的示意图。

图13B是用于解释根据实施方式在信息处理装置是耳戴式终端装置的情况下的环境声音叠加控制的示意图。

图14是示出硬件配置的示例的示意图，其中根据本公开的实施方式的信息处理装置被实现耳戴式终端装置或智能手机。

具体实施方式

参考附图，下面将详细描述本公开的优选实施方式。在说明书和附图中，具有基本相同的功能配置的组件用相同的数字表示，并且省略其冗余描述。

将按以下顺序进行描述。

1.第一实施方式

1.1.概述

1.2.信息处理装置10的物理配置的示例

1.3.信息处理装置10的功能配置的示例

1.4.功能详述

1.5.合成声音的产生

1.6.应用示例

2.硬件配置示例

3.总结

1.第一实施方式

1.1.概述

首先，将描述本公开的实施方式的概述。如上所述，近年来，基于电动控制输出声音的各种装置已经得到广泛使用。如根据专利文献1的装置那样，这种装置包括基于收集的传感器信息控制声音输出的装置。

例如，假设根据装置的检测状态发出某种警报或警告的情况。在这种情况下，例如，也考虑通过使用在正常状态下不输出的特殊蜂鸣声来增加对用户的吸引力的效果。

根据装置的用途或概念，还假设了上述蜂鸣声输出听起来不自然的情况。

例如，在机器人装置模仿生物的情况下，通常，在正常状态下输出根据概念的形式的声音(例如，年轻女性的声音或狗的叫声)。另一方面，当根据机器人装置进入给定状态的事实输出机械嘟嘟声时，有可能前述概念将被反驳，并且用户将会感到非常不舒服或感到不必要的尴尬。

根据本公开的实施方式的技术思想是以上述方面为焦点来实现的，并且使得用户能够通过做出更自然的声音输出来感知装置的状态。为此，根据本公开实施方式的信息处理装置10包括控制器130，控制器130基于装置的检测状态来控制由装置执行的声音输出。根据本公开实施方式的控制器130具有根据状态变化量连续地改变输出合成声音的模式的特性，当装置处于正常状态时，可以输出合成声音。

例如，在上述机器人装置的情况下，可以在正常状态下输出的合成声音可以是根据该概念的形式的非语言声音或语言声音。换言之，根据该实施方式的控制器130能够通过连续地改变由机器人装置常规地进行的输出语音或喊叫的模式，而不是嘟嘟声，来让用户更自然地知道装置的状态。

图1是用于解释实施方式概述的图。图1示出了根据实施方式的信息处理装置10是模仿虚拟生物的机器人装置的情况的示例。例如，如图1所示，根据实施方式的信息处理装置10可以是机器人装置，其具有接近椭圆形的形状，并且经由非语言声音和自主动作与用户通信。通过动态改变与FM(调频)声源相关的各种参数，根据该实施方式的信息处理装置10能够表达各种情绪的声音，就像生物说话一样，但是这些声音是非语言。

根据该实施方式，诸如硅树脂的柔性材料可以用于信息处理装置10的外部的一部分。在图1所示的示例的情况下，柔性材料用于除底部之外的信息处理装置10的整个外部。这允许根据实施方式的信息处理装置10根据用户进行的接触(例如，拾取或掐捏)灵活地改变其形状。

然而，存在这样的风险，因为在外部内部有不同的部件，取决于上述这种接触的强度，内部部件将会被损坏。例如，在内部布置实心结构可以防止与过度变形相关的部件损坏。然而，在这种情况下，因为最初可柔性变形的柔性材料的特征被抵消并且用户的操作感觉丧失，所以需要在用户将信息处理装置10变形到最大限度之前停止用户操作信息处理装置10的措施。为此，当由于用户的行为(例如接触)而检测到装置上不可忽视的负载(例如部件损坏)时，根据该实施方式的信息处理装置10可以通过连续改变合成声音输出模式来隐含地通知用户装置上的负载状态。

在图1所示的例子的情况下，当外部由于用户的接触而从左侧示出的正常状态变形到中央示出的正常状态时，根据该实施方式的控制器130动态地并且连续地改变合成声音，即，基于与接触相关联的负载的变化量而引起喊叫的声音。

根据该实施方式的合成声音输出模式例如包括音色、音调和声压。例如，控制器130能够通过控制与合成声音相关的频率来改变音色。这种控制使得可以表示信息处理装置10响应于用户进行的接触而感到疼痛，并抑制用户进行过度接触。

当由用户进行的接触导致的负载变化量已经达到预定阈值(以下可称为极限)时，根据该实施方式的控制器130以对应于该阈值的输出模式输出合成声音，如图中右侧所示。在这种情况下，控制器130可以例如输出引起尖叫的合成声音。

由根据该实施方式的控制器130执行的上述控制使得能够使用户比当输出特殊嘟嘟声时更自然和本能地感知装置上的负载极限。

1.2.信息处理装置10的物理配置的示例

接下来将描述根据实施方式的信息处理装置10的物理配置的示例。图2是示意性示出根据实施方式的信息处理装置10的物理配置的示例的图。如图2所示，根据该实施方式的信息处理装置10包括可变形结构510、电容传感器520、压力传感器530、致动器540、麦克风550、扬声器560和光源570。

(可变形结构510)

根据该实施方式的可变形结构510是其形状根据外力而改变的结构。根据该实施方式的可变形结构510例如由上述柔性材料实现。根据该实施方式的可变形结构510可以包含接头等。根据该实施方式的信息处理装置10具有在至少部分外部具有可变形结构510的特征。在这种情况下，根据该实施方式的控制器130根据与用户与可变形结构510的接触相关联的装置上的负载的变化量来动态地控制合成声音输出模式。

(电容传感器520)

根据该实施方式的电容传感器520检测用户进行的接触，例如抚摸。下面将分别详细描述根据实施方式的电容传感器520执行的接触检测。

(压力传感器530)

根据该实施方式的压力传感器530检测用户在自上而下方向上的接触。根据该实施方式的压力传感器530例如能够检测用户进行的接触，例如通过手指推动。如上所述的这种接触是向信息处理装置10的底部施加力的运动，因此根据该实施方式的压力传感器530可以布置在信息处理装置10的底部附近。这种布置使得可以容易地检测用户在自上而下方向上的接触，而无需按照椭圆形布置传感器。

(致动器540)

根据该实施方式的致动器540被配置为实现信息处理装置10的移动和旋转运动。

(麦克风550)

根据该实施方式的麦克风550检测声音，例如用户的语音。信息处理装置10能够响应于麦克风550检测到的用户的语音而采取行动或输出声音。

(扬声器560)

根据该实施方式的扬声器560基于控制器130的控制输出合成声音。

(光源570)

根据该实施方式的光源570基于控制器130的控制发光。光源570由例如LED实现。根据该实施方式的光源570可以例如如图所示，具有对应于信息处理装置10的眼睛的配置。

已经描述了根据实施方式的信息处理装置10的物理配置的代表性示例。请注意，图2所示的配置仅是示例，并且除了上述配置之外，根据该实施方式的信息处理装置10还包括例如处理器等的其他配置。根据该实施方式的信息处理装置10的物理配置可以根据规范灵活地进行修改。

1.3.信息处理装置10的功能配置的示例

将描述根据实施方式的信息处理装置10的功能配置的示例。图3是图示根据实施方式的信息处理装置10的功能配置的示例的框图。如图3所示，根据实施方式的信息处理装置10包括音频输入单元110、传感器单元120、控制器130、音频输出单元140和驱动器150。

(音频输入单元110)

根据实施方式的音频输入单元110收集用户的语音和环境声音。为此，根据该实施方式的音频输入单元110包括麦克风550。

(传感器单元120)

根据实施方式的传感器单元120收集各种类型的传感器信息。为此，根据该实施方式的传感器单元120包括例如电容传感器520和压力传感器530。根据该实施方式的传感器单元120可以包括大气压力传感器或位移传感器。根据实施方式的传感器单元120可以包括对应于要感测的对象的各种传感器。

(控制器130)

根据实施方式的控制器130控制信息处理装置10包括的每个配置。根据该实施方式的控制器130由诸如CPU的处理器实现。

根据实施方式的控制器130基于例如由传感器单元120所检测到的信息处理装置10的状态来控制由音频输出单元140执行的声音输出。在这种情况下，根据该实施方式的控制器130具有根据状态变化量动态改变当信息处理装置10处于正常状态时能够输出的合成声音的输出模式的特性。下面将分别描述根据实施方式的控制器130具有的功能的细节。

(音频输出单元140)

根据该实施方式的音频输出单元140基于控制器130的控制输出合成声音。为此，根据该实施方式的音频输出单元140包括例如扬声器560和放大器。

驱动器150

根据实施方式的驱动器150基于控制器130的控制采取各种动作。为此，根据该实施方式的驱动器150例如包括致动器。

已经描述了根据实施方式的信息处理装置10的功能配置的示例。图3所示的配置仅是示例，并且根据实施方式的信息处理装置10的功能配置不限于该示例。例如，根据实施方式的信息处理装置10可以进一步包括显示各种类型的视觉信息的显示单元和捕获用户图像的成像单元。根据该实施方式的控制器130可以实现为与上述其他配置分开的装置。在这种情况下，控制器130通过网络接收声音信息和传感器信息，并远程控制音频输出单元140和驱动器150。根据实施方式的信息处理装置10的功能配置可以根据规范和操作灵活地进行修改。

1.4.功能详述

接下来将详细描述根据实施方式的控制器130具有的功能。如上所述，例如，根据该实施方式的控制器130具有这样的特性，即，基于由于用户进行接触而改变的信息处理装置10上的负载的变化量，动态地并且连续地改变输出要由音频输出单元140输出的合成声音的模式。该特征使得用户能够更自然和本能地感知装置的状态。

在这种情况下，根据该实施方式的信息处理装置10以如图4所示的流程执行处理。图4是表示根据根据实施方式的状态变化量的输出模式控制的流程的流程图。

参考图4，首先，传感器单元120检测信息处理装置10的状态的变化量(S1101)。如上所述，上述状态包含由于用户行为而改变的信息处理装置10上的负载。传感器单元120可以检测由压力传感器530检测到的用户的推动量，作为前述负载变化量。

控制器130然后确定在步骤S1101检测到的变化量是否固定在阈值(S1102)。

当变化量等于或低于阈值时(S1102：否)，信息处理装置10返回到步骤S1101，并重复执行检测变化量。

另一方面，当变化量高于阈值时(S1102：是)，控制器130随后确定变化量是否已经达到极限(S1103)。该极限可以是对应于信息处理装置10允许的最大负载的值。例如，在由用户推动导致负载的情况下，可将可导致结构(例如布置在可变形结构510中的电容传感器520)损坏的推动量(压力)设定为极限。

当变化量没有达到极限时(S1103：否)，控制器130根据变化量识别并连续地改变要由音频输出单元140输出的合成声音(S1104)。

另一方面，当变化量已经达到极限时(S1103：是)，控制器130使音频输出单元140输出表示变化量已经达到极限的合成声音(S1105)。换言之，控制器130以对应于极限的输出模式输出合成声音，例如前述的尖叫。

在步骤S1104或S1105的处理之后，信息处理装置10返回到步骤S1101并重复执行上述处理。

已经详细描述了根据实施方式的根据状态变化量(例如装置上的负载)的输出模式控制的流程。根据该实施方式的状态变化量不限于装置上的负载，并且包括例如用户的操作量，例如抚摸或触摸，以及其他各种状态。接下来将描述根据实施方式的根据用户行为对合成声音输出模式的控制。根据该实施方式的控制器130能够根据传感器单元120所检测到的用户的行为，控制由音频输出单元140输出的合成声音的输出模式。例如，根据实施方式的控制器130可以根据所检测到的行为的类型和强度或强度以不同的输出模式输出合成声音。

图5是用于解释根据实施方式的根据用户的行为类型对合成声音输出模式的控制的示意图。如上所述，使用电容传感器520和压力传感器530，根据实施方式的传感器单元120能够检测用户进行的接触。

如图中左侧所示，使用布置在信息处理装置10底部附近的压力传感器530，根据实施方式的传感器单元120能够检测用户在自上而下方向上进行的接触，例如推动。

例如，如图中右侧所示，使用布置在信息处理装置10的上部的电容传感器520，传感器单元120能够检测用户进行的接触，例如抚摸。根据该实施方式的信息处理装置10例如包括如图所示的彼此平行的多个电容传感器520a至520c。如上所述的这种布置使得能够通过电容传感器520、520b和520c连续地检测接触，从而能够检测接触区域从左向右的移动，即向右划动。

图5所示的电容传感器520的布置只是一个示例。例如，根据的电容传感器520可以布置在网格中。根据该实施方式的信息处理装置10可以包括可检测其接触坐标组的装置，例如触摸面板，而不是电容传感器520。

如上所述，根据实施方式的传感器单元120能够通过使用多个传感器来检测用户进行的接触的类型。在这种情况下，根据实施方式的控制器130可以根据由传感器单元120检测到的接触类型等以不同的输出模式输出合成声音。

例如，控制器130可以在检测到推动的情况和检测到轻抚的情况之间输出不同音色、音调和声压的合成声音。例如，控制器130可以在检测到推动时以对应于不愉快的输出模式输出合成声音，并且可以在检测到轻抚行为时以对应于愉快的输出模式输出合成声音。

例如，控制器130可以根据接触的速度或强度来控制合成声音输出模式。在一个示例中，控制器130可以在接触速度相对较高时输出频率较高的合成声音，并且可以在速度相对较低时输出频率较低的合成声音。

控制器130能够考虑当接触速度太高时信息处理装置10感觉不愉快，而当速度低时感觉愉快，并且以对应于各个情况的输出模式输出合成声音。

已经描述了根据实施方式的根据接触对合成声音输出模式的控制。根据该实施方式的控制器130的上述功能使得可以根据接触以各种输出模式输出合成声音，给用户带来新鲜感，并且吸引用户长时间的兴趣。

将描述根据实施方式的与接触检测相关联的动作停止控制。除了合成声音输出控制之外，根据该实施方式的控制器130可以对由驱动器150实现的各种动作执行控制。在这种情况下，根据该实施方式的控制器130可以基于检测到用户进行的接触的事实，使驱动器150停止给定的动作。

例如，根据该实施方式的信息处理装置10能够在水平方向上移动，在垂直方向上进行自上向下的运动，并且在水平方向上进行旋转运动。当用户在上述动作期间与信息处理装置10接触时，根据动作的类型或速度，用户的手掌等可能移动，使得手掌被强制变形，这引起用户不愉快的情绪。当信息处理装置10是相对较大的装置时，用户可能会受伤或感到疼痛。为了避免这种情况，根据该实施方式的控制器130可以根据检测到用户进行接触的方向使给定的运动方向的动作停止。

图6是用于解释根据实施方式的与接触检测相关联的动作停止控制的图。例如，在图的上部，示出了当信息处理装置10在水平方向上进行旋转运动时，由用户进行推动(即，在自上而下方向上的接触)的情况。在这种情况下，因为用户的手指可能会由于信息处理装置10的因为推动位置的旋转运动而被迫变形，所以控制器130可以控制驱动器150停止旋转运动，以防止引起用户不愉快的情绪。

在图的下部，示出了当信息处理装置10在水平方向上移动时，由用户执行推动的情况，即，在自上而下方向上的接触。同样在这种情况下，存在用户的手指由于信息处理装置10的移动而被强制变形的可能性。为此，控制器130可以控制驱动器150停止在水平方向上的移动，以防止引起用户不愉快的情绪。

另一方面，当信息处理装置10在垂直方向上进行上限运动时，假设不太可能引起用户不愉快的情绪，并且用户也不太可能受到伤害，因为外部使用了柔性材料。为此，根据该实施方式的控制器130可以保持执行自上而下的运动。

已经描述了根据实施方式的与接触检测相关联的动作停止控制。如上所述，根据该实施方式的控制器130通过根据接触的检测方向和运动方向停止信息处理装置10的动作，使得可以确保用户的安全，而不会引起用户不愉快的情绪。

上述动作的类型仅是示例，由控制器130执行的停止控制根据信息处理装置10的重量和形状、材料和运动速度来适当设计。根据该实施方式的控制器130例如可以响应于接触而对动作反馈执行控制，诸如使信息处理装置10采取在推动完成后回头看用户的动作等。

1.5.合成声音的产生

接下来将详细描述根据实施方式的合成声音的生成。如上所述，根据该实施方式的控制器130根据信息处理装置10的状态的变化量动态地并且连续地改变合成声音输出模式。在这种情况下，控制器130能够通过动态地和连续地改变与FM声源的合成相关的各种参数来不同地表达合成声音的印象和情感意义。

图7是用于解释根据实施方式的与合成声音相关的参数的图。图7表示合成FM声源的合成器所包括的配置和通过改变与每个配置相关的参数所表示的输出模式之间的关系。

控制器130能够通过改变与振荡器相关的参数来改变声音的基本纹理。在一个示例中，正弦波可以产生柔和的印象，锯齿波可以产生刺耳的印象。

控制器130能够通过控制音高控制器的参数，即音高，来产生情绪、性别和语调的水平。

图8是示出根据该实施方式通过控制音调和速度可以表达的情绪的示例的示意图。图中的阴影区域代表音量。众所周知，声音的音高和速度强烈影响声音对感情的唤起。例如，控制器130能够通过将音高和速度设置得相对较高来产生喜悦或愤怒的程度。相反，通过把音高和速度设置得相对较低，可以表达悲伤。以这种方式，根据该实施方式的控制器130能够通过控制音调和速度来产生各种情绪和不同程度的情绪。

将再参照图7继续描述。控制器130还能够通过控制滤波器的参数来表示声音的清晰度(开口)。例如，控制器130能够通过增加或降低低通滤波器的频率来产生低沉的声音和开放的声音。

控制器130还能够通过放大器随时间的变化来改变音量的重音以及上升和结束的印象。

控制器130可以通过控制调制器的参数来表达声音的平稳和流畅。

如上所述，根据实施方式的控制器130能够通过改变与振荡器、调制器、音调控制器、滤波器或放大器相关的每个参数来不同地表达印象和情感含义。

1.6.应用示例

已经描述了根据实施方式的信息处理装置10的基本功能。在以上描述中，已经作为示例描述了根据实施方式的信息处理装置10是模仿生物的机器人装置的情况；然而，根据实施方式的信息处理装置10的模式不限于该示例。根据实施方式的技术思想可广泛应用于各种装置。

例如，根据实施方式的信息处理装置10可以是诸如车辆的移动物体，以及安装在移动物体中的装置。图9是用于解释根据实施方式的基于移动物体上的负载变化量的合成发动机声音输出模式控制的示意图。

例如，在图9左侧所示的示例的情况下，用户正在执行与当前速度一致的缓慢推动加速器的操作。这种操作导致燃料效率的提高，因此控制器130可以使音频输出单元140在正常状态下输出合成引擎声音。

另一方面，在图9右侧所示的示例的情况下，用户正在执行快速强力推动加速器的操作。当检测到导致燃料效率降低的这种操作时，控制器130估计负载在移动物体上，并且动态地并且连续地改变合成引擎声音输出模式。在这种情况下，控制器130例如可以控制滤波器，从而执行控制以增加高频分量并输出具有刺耳印象的合成引擎声音并增加音量。

根据该实施方式的移动物体的状态不限于负载，并且可以包含安全性。图10是用于解释根据实施方式的基于移动物体的安全变化量的合成引擎声音输出模式控制的示意图。

例如，在图10左侧所示的示例的情况下，用户通过转向行驶，使得移动物体在行驶车道的中间行驶。在这种情况下，控制器130可以估计移动物体和用户的安全得到维护，并且使得音频输出单元140在正常状态下输出合成引擎声音。

另一方面，在图10右侧所示的示例的情况下，移动物体正在中心线附近行进。当如上所述检测到具有降低安全性的效果的驾驶时，控制器130根据安全性的降低程度(例如，与中心线的临近程度)动态且连续地改变合成声音输出模式。例如，控制器130可以使音频输出单元140输出合成引擎声音，该合成引擎声音通过改变音调来唤起愤怒或恐惧。

根据实施方式的移动物体的状态可以包含移动物体的位置。更具体地，根据实施方式的控制器130可以根据指定地点(例如目的地)和移动物体之间的相对位置的变化量来动态地改变要输出的合成声音的声音。

图11是用于解释根据实施方式的基于相对位置的变化量的合成声音输出模式控制的示意图。在图11的上部，示出了移动物体正在行进到离登记为指定地点的目的地相对较远的区域的情况。在这种情况下，控制器130可以使音频输出单元140在正常状态下输出合成引擎声音和导航声音。

另一方面，在图11的下部，示出了移动物体正在接近目的地的情况。在这种情况下，根据实施方式的控制器130可以基于目的地和移动物体之间的相对距离接近阈值的事实来动态地和连续地控制输出合成引擎声音或导航声音的模式。例如，控制器130可以执行控制以增加音量或输出柔和的声音或舒适的声音。

当移动物体远离目的地时，控制器130也可以控制输出模式。在这种情况下，控制器130可以执行控制以降低音量或输出更尖锐的声音。当到达目的地的时间由于停车等原因而落后时，控制器130也能够执行类似的控制。

已经描述了在根据实施方式的信息处理装置10被实现为移动物体和安装在移动物体中的装置的情况下的输出模式控制的示例。根据实施方式的合成声音可以基于除环境声音和操作对象之外的事件来生成。根据该实施方式的控制器130可以根据对象事件的差异来改变合成声音输出模式。

根据该实施方式的控制器130可以使音频输出单元140输出引起客观操作的合成声音。例如，当移动物体在道路上左转时，控制器130能够执行控制以随着移动物体接近十字路口而增加合成转向信号声音和合成引擎声音。

此外，根据该实施方式的控制器130能够控制触觉反馈输出模式。在移动物体的情况下，例如，前述触觉反馈可以由加速器或方向盘来表示。在这种情况下，控制器130动态地和连续地改变振动的持续时间、间隔和强度。

例如，当安全性高时，控制器130执行控制，使得重复“1秒振动和2秒停止”的循环。另一方面，当安全性低于阈值时，控制器130可以执行控制，使得重复“2.5秒振动和0.5秒再现”的循环，并且根据安全性降低的程度改变振动时间的比率。可选地，控制器130可以具有紧密的间隔，例如“0.25秒的振动和0.5秒的停止”。

随后，将描述根据实施方式的环境声音在合成声音上的叠加。除了合成声音输出控制之外，根据该实施方式的控制器130能够执行对合成声音上的环境声音的叠加的控制。在这种情况下，根据该实施方式的控制器130能够动态地控制合成声音和环境声音之间的平衡，并且通过根据状态变化量控制环境声音的结合量来实现各种类型的通知和产生。

例如，根据该实施方式的控制器130可以根据信息处理装置10和对象之间的相对位置的变化量来动态地改变合成声音输出模式和环境声音的结合量。前述对象包括接近信息处理装置10的其他物体。

图12A和图12B是用于解释根据实施方式的基于对象的接近的环境声音叠加控制的图。在图12A的上部，示出了作为前述对象的紧急车辆EV正在接近作为移动物体的信息处理装置10的情况。

在信息处理装置10和紧急车辆EV之间仍然存在足够的距离，因此控制器130可以如图12A的下部所示，以与正常状态相同的方式控制导航声音NS的音量和环境声音ES的结合量，例如由紧急车辆EV产生的警报。

另一方面，在图12B的上部，示出了紧急车辆EV进一步接近移动物体并且移动物体和紧急车辆EV之间的距离低于阈值的情况。

在这种情况下，根据该实施方式的控制器130执行对于环境声音ES(例如由紧急车辆EV产生的警报声或指令声)的可听度的控制。例如，控制器130能够通过降低导航声音NS的音量并增加环境声音ES的结合量来创建用户容易听到环境声音ES的情况。在以上描述中，表示了移动物体是汽车的情况的示例，并且可选地，根据实施方式的移动物体可以是自行车等。在自行车的情况下，增加环境声音的结合量预期具有用户迅速注意到接近的车辆并防止危险等的效果。

如上所述的这种环境声音叠加控制也适用于除移动物体之外的装置。图13A和图13B是用于解释在根据实施方式的信息处理装置10是耳戴式终端装置的情况下的环境声音叠加控制的示意图。

图13A和图13B示出了佩戴信息处理装置10的用户正在进入电动火车ET的情况，该信息处理装置10实现为诸如耳机或耳麦的耳戴式终端装置。

在图13A所示的示例中，示出了用户进入的电动列车ET和作为用户目的地的车站之间的距离仍然足够的情况。在这种情况下，根据实施方式的控制器130可以基于作为对象的站和信息处理装置10之间的距离高于阈值的事实，以与正常状态下相同的方式控制由音频输出单元140播放的音乐的音量和环境声音ES的结合量。

另一方面，在图13B所示的示例中，示出了电动列车ET和作为对象的车站之间的距离低于阈值的情况。在这种情况下，根据该实施方式的控制器130能够执行控制以提高环境声音ES的可听度，包括到达车站时的列车通知，并且有效地防止用户错过车站。具体地，控制器130可以执行控制以降低由音频输出单元140播放的音乐的音量或者增加环境声音ES的结合量。

已经描述了根据实施方式的环境声音叠加控制。如上所述，根据该实施方式的控制器130使得可以动态控制合成声音和环境声音之间的平衡并实现各种类型的通知和产生。

2.硬件配置示例

将描述根据本公开的实施方式的信息处理装置10被实现为耳戴式终端装置或智能手机的情况下的硬件配置的示例。图14是示出根据本公开实施方式的信息处理装置10的硬件配置的示例的框图。参考图14，信息处理装置10例如包括处理器871、ROM 872、RAM873、主机总线874、桥接器875、外部总线876、接口877、输入设备878、输出设备879、存储器880、驱动器881、连接端口882和通信设备883。这里所示的硬件配置是一个示例，并且可以部分省略这些组件。可以进一步包括除了这里所示的组件之外的组件。

(处理器871)

处理器871例如用作算术处理器或控制设备，并且根据记录在ROM 872、RAM 873、存储器880或可移动记录介质901中的各种程序来控制每个组件的全部或部分操作。

(ROM 872和RAM 873)

ROM 872是存储要加载到处理器871中的程序和用于计算的数据等的单元。在RAM873中，例如，暂时或永久保存要加载到处理器871中的程序和当程序被执行时适当变化的各种参数等。

(主机总线874、桥接器75、外部总线876和接口877)

例如，处理器871、ROM 872和RAM 873通过主机总线874相互连接，实现高速数据传输。另一方面，主机总线874例如通过桥接器875连接到数据传输速率相对较低的外部总线876。外部总线876通过接口877连接到各种组件。

(输入设备878)

例如，使用鼠标、键盘、触摸板、按钮、开关、控制杆等作为输入设备878。此外，能够通过红外线或其他无线电波发送控制信号的遥控器(以下称为遥控器)可以用作输入设备878。输入设备878还包括音频输入设备，例如麦克风。

(输出设备879)

输出设备879例如是能够在视觉或听觉上向用户通知所获取的信息的设备，诸如像CRT(阴极射线管)、LCD或有机EL显示器的显示装置、像扬声器或耳机的音频输出设备、打印机、移动电话或传真机。根据本公开的输出设备879包括能够输出触觉刺激的各种振动设备。

存储器880

存储器880是用于存储各种类型的数据的设备。例如，诸如硬盘驱动器(HDD)、半导体存储装置、光存储装置、磁光存储装置等磁存储装置可以用作存储器880。

(驱动器881)

驱动器881例如是读取记录在诸如磁盘、光盘、磁光盘或半导体存储器的可移动记录介质901中的信息，或者将信息写入可移动记录介质901中的设备。

(可移动记录介质901)

可移除记录介质901例如是DVD介质、蓝光(商标)介质、HD DVD介质或各种类型的半导体存储介质。可移除记录介质901可以是例如其上安装有非接触式IC芯片的IC卡或电子设备。

(连接端口882)

连接端口882例如是用于连接外部连接设备902的端口，例如USB(通用串行总线)端口、IEEE1394端口、SCSI(小型计算机系统接口)、RS-232C端口或光学音频终端。

(外部连接设备902)

外部连接设备902例如是打印机、便携式音乐播放器、数码相机、数码摄像机或IC记录器。

(通信设备883)

通信设备883是用于连接到网络的通信设备，并且例如是有线或无线LAN、用于蓝牙(商标)或WUSB(无线USB)的通信卡、用于光通信的路由器、用于ADSL(不对称数字用户线路)的路由器或用于各种类型通信的调制解调器。

3.总结

如上所述，根据本公开实施方式的信息处理装置10包括控制器130，控制器130基于装置的检测状态来控制装置执行的声音输出。根据本公开实施方式的控制器130具有根据状态变化量连续地改变输出合成声音的模式的特性，当装置处于正常状态时，该合成声音可以由装置输出。该配置使得用户能够通过产生更自然的声音输出来感知装置的状态。

已经参照附图详细描述了本公开的优选实施方式；然而，本公开的技术范围不限于这些示例。显然，具有本领域技术人员可以在权利要求中描述的技术思想的范围内获得各种修改示例或校正示例，并且应当理解，其自然属于本公开的技术范围。

例如，根据本公开的实施方式的信息处理装置10能够通过感测人体的状态(例如呼吸、脑电波、脉动和体温)并基于状态的变化量动态混合环境声音、环境产生声音和噪声来引导用户进入放松状态或深度睡眠。例如，当用户处于唤醒状态时，控制器130能够使用户较少意识到外部噪声，并且通过让用户听到混合的白噪声分量来自然地引导用户进入深度睡眠。

本文公开的效果仅是解释性和示例性的，因此不是决定性的。换言之，根据本文的描述，根据本公开的技术可以与上述效果一起或者代替上述效果，实现对本领域技术人员来说显而易见的其他效果。

还可以创建用于使诸如CPU、ROM或RAM之类的硬件结合在计算机中以实现与信息处理装置10的配置等同的功能的程序，并且可以提供其中记录有程序的计算机可读记录介质。

由这里的信息处理装置10执行的处理的每个步骤不需要按照流程图中所示的顺序按时间顺序处理。例如，根据由信息处理服务器20执行的处理的每个步骤可以以不同于流程图中所示的顺序来处理，或者可以并行处理。

以下配置也属于本公开的技术范围。

(1)一种信息处理装置，包括控制器，所述控制器被配置为基于所检测到的装置的状态来控制由所述装置执行的声音的输出，

其中，所述控制器被配置为根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

(2)根据(1)所述的信息处理装置，其中，所述控制器被配置为当所述变化量达到预定阈值时，以对应于所述阈值的输出模式输出所述合成声音。

(3)根据(1)或(2)所述的信息处理装置，其中，所述状态包括由于用户对所述装置的行为而改变的所述装置上的负载，并且

所述控制器被配置为根据所述负载的变化量，连续地改变输出所述合成声音的模式。

(4)根据(3)所述的信息处理装置，其中，所述装置包括机器人装置，并且

所述控制器被配置为根据由于所述用户与所述机器人装置的接触而改变的所述负载的所述变化量，连续地改变所述机器人装置能够在所述正常状态下输出的声音的输出模式。

(5)根据(4)所述的信息处理装置，其中，所述机器人装置具有可变形结构，所述可变形结构的形状在外部的至少一部分中是可变形的，并且

所述控制器被配置为根据与所述用户与所述可变形结构的接触相关联的所述负载的变化量，动态地改变输出所述声音的模式。

(6)根据(5)所述的信息处理装置，其中，所述可变形结构包括柔性材料和间接性中的至少任一者。

(7)根据(1)至(6)中任一项所述的信息处理装置，其中，所述状态包括所述装置的位置，并且

所述控制器被配置为根据所述位置的变化量，连续地改变输出所述合成声音的模式。

(8)根据(7)所述的信息处理装置，其中，所述位置包括所述装置和指定地点之间的相对位置，并且

所述控制器被配置为根据所述相对位置的变化量，动态地改变输出所述合成声音的模式。

(9)根据(1)至(8)中任一项所述的信息处理装置，其中，所述控制器被配置为控制环境声音在所述合成声音上的叠加。

(10)根据(9)所述的信息处理装置，其中，所述控制器被配置为根据所述条件的变化量来改变所述环境声音的结合量。

(11)根据(9)或(10)所述的信息处理装置，其中，所述控制器被配置为根据所述装置和对象之间的相对位置的变化量，动态地改变输出所述合成声音的模式和所述环境声音的结合量。

(12)根据(10)或(11)所述的信息处理装置，其中，所述控制器被配置为当所述装置和所述对象之间的距离低于阈值时，执行控制以提高所述环境声音的可听度。

(13)根据(1)至(12)中任一项所述的信息处理装置，其中，所述控制器被配置为根据所述状态的变化量，连续地改变与所述合成声音的合成相关的参数。

(14)根据(13)所述的信息处理装置，其中，所述控制器被配置为改变与振荡器、调制器、音调控制器、滤波器和放大器中的至少任一者相关的参数。

(15)根据(1)至(14)中任一项所述的信息处理装置，其中，所述控制器被配置为根据用户对所述装置的行为，以不同的输出模式输出所述合成声音。

(16)根据(1)至(15)中任一项所述的信息处理装置，其中，所述控制器被配置为进一步控制所述装置的动作。

(17)根据(16)所述的信息处理装置，其中，所述控制器被配置为当检测到所述用户与所述装置的接触时，使所述装置停止动作。

(18)根据(17)所述的信息处理装置，其中，所述控制器被配置为根据检测到所述用户进行的接触的方向，使具有给定的运动方向的动作停止。

(19)一种信息处理方法，包括：

由处理器基于所检测到的装置的状态，控制由所述装置执行的声音输出，

其中，所述控制包括根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

(20)一种程序，用于使计算机用作信息处理装置，所述信息处理装置包括控制器，所述控制器被配置为基于所述装置的检测状态来控制由所述装置执行的声音的输出，

其中，所述控制器被配置为根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

符号说明

10信息处理装置

110音频输入单元

120传感器单元

130控制器

140音频输出单元

150驱动器。

Claims (20)

1.一种信息处理装置，包括控制器，所述控制器被配置为基于所检测到的装置的状态来控制由所述装置执行的声音的输出，

其中，所述控制器被配置为根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

2.根据权利要求1所述的信息处理装置，其中，所述控制器被配置为当所述变化量达到预定阈值时，以对应于所述阈值的输出模式输出所述合成声音。

3.根据权利要求1所述的信息处理装置，其中，所述状态包括由于用户对所述装置的行为而改变的所述装置上的负载，并且

所述控制器被配置为根据所述负载的变化量，连续地改变输出所述合成声音的模式。

4.根据权利要求3所述的信息处理装置，其中，所述装置包括机器人装置，并且

所述控制器被配置为根据由于所述用户与所述机器人装置的接触而改变的所述负载的所述变化量，连续地改变所述机器人装置能够在所述正常状态下输出的声音的输出模式。

5.根据权利要求4所述的信息处理装置，其中，所述机器人装置具有可变形结构，所述可变形结构的形状在外部的至少一部分中是可变形的，并且

所述控制器被配置为根据与所述用户与所述可变形结构的接触相关联的所述负载的变化量，动态地改变输出所述声音的模式。

6.根据权利要求5所述的信息处理装置，其中，所述可变形结构包括柔性材料和间接性中的至少任一者。

7.根据权利要求1所述的信息处理装置，其中，所述状态包括所述装置的位置，并且

所述控制器被配置为根据所述位置的变化量，连续地改变输出所述合成声音的模式。

8.根据权利要求7所述的信息处理装置，其中，所述位置包括所述装置和指定地点之间的相对位置，并且

所述控制器被配置为根据所述相对位置的变化量，动态地改变输出所述合成声音的模式。

9.根据权利要求1所述的信息处理装置，其中，所述控制器被配置为控制环境声音在所述合成声音上的叠加。

10.根据权利要求9所述的信息处理装置，其中，所述控制器被配置为根据条件的变化量来改变所述环境声音的结合量。

11.根据权利要求9所述的信息处理装置，其中，所述控制器被配置为根据所述装置和对象之间的相对位置的变化量，动态地改变输出所述合成声音的模式和所述环境声音的结合量。

12.根据权利要求10所述的信息处理装置，其中，所述控制器被配置为当所述装置和对象之间的距离低于阈值时，执行控制以提高所述环境声音的可听度。

13.根据权利要求1所述的信息处理装置，其中，所述控制器被配置为根据所述状态的变化量，连续地改变与所述合成声音的合成相关的参数。

14.根据权利要求13所述的信息处理装置，其中，所述控制器被配置为改变与振荡器、调制器、音调控制器、滤波器和放大器中的至少任一者相关的参数。

15.根据权利要求1所述的信息处理装置，其中，所述控制器被配置为根据用户对所述装置的行为，以不同的输出模式输出所述合成声音。

16.根据权利要求1所述的信息处理装置，其中，所述控制器被配置为进一步控制所述装置的动作。

17.根据权利要求16所述的信息处理装置，其中，所述控制器被配置为当检测到用户与所述装置的接触时，使所述装置停止动作。

18.根据权利要求17所述的信息处理装置，其中，所述控制器被配置为根据检测到所述用户进行的接触的方向，使具有给定的运动方向的动作停止。

19.一种信息处理方法，包括：

由处理器基于所检测到的装置的状态，控制由所述装置执行的声音输出，

其中，所述控制包括根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

20.一种程序，用于使计算机用作信息处理装置，所述信息处理装置包括控制器，所述控制器被配置为基于所述装置的检测状态来控制由所述装置执行的声音的输出，

其中，所述控制器被配置为根据所述状态的变化量，连续地改变输出合成声音的模式，所述合成声音能够由所述装置在正常状态下输出。

Images