CN114981756A - 声音输出控制装置、声音输出系统、声音输出控制方法以及程序 - Google Patents

Abstract

声音输出控制装置(20)包括：朝向检测部(21)，检测用户的脸部朝向的状态；周边声音获取部(24)，获取周边声音；周边声音降低处理部(25)，基于周边声音获取部(24)所获取的周边声音，进行降低周边声音的处理；以及声音输出控制部(26)，在由朝向检测部(21)检测出用户的脸部朝向的状态为第一状态的情况下，输出由周边声音降低处理部(25)降低了周边声音的声音，在用户的脸部朝向的状态从第一状态变化为第二状态的情况下，设为与由周边声音降低处理部(25)降低了周边声音的状态相比更容易听到周边声音的状态。

Description

声音输出控制装置、声音输出系统、声音输出控制方法以及 程序

技术领域

本发明涉及声音输出控制装置、声音输出系统、声音输出控制方法以及程序。

背景技术

已知有如可输出声音的电子书、游戏等那样的除了在显示画面上显示内容细节以外还输出声音的技术(例如，参照专利文献1)。

在先技术文献

专利文献

专利文献1：日本特开2016-192211号公报。

发明内容

发明要解决的问题

但是，在例如乘坐公共交通工具等时使用这样的装置的情况下，存在难以听到车内广播等周边声音的情况等。

本发明是鉴于上述情况而完成的，其目的在于能够适当地确认周边声音。

用于解决问题的手段

为了解决上述问题并实现目的，本发明涉及的声音输出控制装置包括：朝向检测部，检测用户的脸部朝向的状态；周边声音获取部，获取所述用户的周边声音；周边声音降低处理部，基于所述周边声音获取部所获取的周边声音，进行降低周边声音的处理；以及声音输出控制部，在由所述朝向检测部检测出所述用户的脸部朝向的状态为第一状态的情况下，输出由所述周边声音降低处理部降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

本发明涉及的声音输出控制装置包括：视线检测部，检测用户的视线方向；周边声音获取部，获取所述用户的周边声音；注视判断部，基于所述视线检测部的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及声音输出控制部，在所述注视判断部判断为所述用户注视显示了内容的显示画面的情况和判断为未注视的情况下，变更所述周边声音获取部所获取的周边声音的输出的状态并输出声音。

本发明涉及的声音输出系统包括：上述声音输出控制装置；拾音部，对周边声音进行拾音；以及声音输出部，输出声音。

本发明涉及的声音输出控制方法包括如下步骤：对使用声音输出装置的用户的脸部朝向的状态进行检测；获取所述用户的周边声音；以及在所述用户的脸部朝向的状态为第一状态的情况下，基于所获取的周边声音而输出降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与降低了周边声音的状态相比更容易听到周边声音的状态。

本发明涉及的程序使计算机执行以下步骤：对使用声音输出装置的用户的脸部朝向的状态进行检测；获取所述用户的周边声音；以及在所述用户的脸部朝向的状态为第一状态的情况下，基于所获取的周边声音而输出降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与降低了周边声音的状态相比更容易听到周边声音的状态。

本发明涉及的声音输出控制方法包括如下步骤：对使用声音输出装置的用户的视线方向进行检测；获取所述用户的周边声音；基于视线方向的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及在判断为所述用户没有注视显示了内容的显示画面的情况和判断为未注视的情况下，变更周边声音的输出的状态并输出声音。

本发明涉及的程序使计算机执行以下步骤：对正在使用声音输出装置的用户的视线方向进行检测；获取所述用户的周边声音；基于视线方向的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及在判断为所述用户没有注视显示了内容的显示画面的情况和判断为未注视的情况下，变更周边声音的输出的状态并输出声音。

发明效果

根据本发明，起到能够适当地确认周边声音的效果。

附图说明

图1是示出作为第一实施方式涉及的声音输出系统的声音输出装置的框图；

图2是说明声音输出装置的朝向的概略图；

图3是说明声音输出装置的朝向的概略图；

图4是示出第一实施方式涉及的声音输出系统中的处理流程的一个示例的流程图；

图5是示出第一实施方式涉及的声音输出系统中的处理流程的其他示例的流程图；

图6是第二实施方式涉及的声音输出系统的概略图；

图7是第二实施方式涉及的声音输出系统的框图；

图8是第三实施方式涉及的声音输出系统的框图；

图9是示出第三实施方式涉及的声音输出系统中的处理流程的一个示例的流程图；

图10是示出第四实施方式涉及的内容输出系统的框图；

图11是示出第四实施方式涉及的内容输出系统中的处理流程的示例的流程图；

图12是示出第四实施方式涉及的内容输出系统中的处理流程的其他示例的流程图；

图13是第五实施方式涉及的内容输出系统的框图；

图14是示出第五实施方式涉及的内容输出系统中的处理流程的示例的流程图；

图15是第六实施方式涉及的内容输出系统的框图；

图16是示出第六实施方式涉及的内容输出系统中的处理流程的一个示例的流程图；

图17是示出第七实施方式涉及的内容输出系统的框图；

图18是示出第七实施方式涉及的内容输出系统中的处理流程的一个示例的流程图；

图19是示出第七实施方式涉及的内容输出系统中的处理流程的其他示例的流程图；

图20是第八实施方式涉及的内容输出系统的框图；

图21是示出第八实施方式涉及的内容输出系统中的处理流程的一个示例的流程图；

图22是第九实施方式涉及的内容输出系统的框图；

图23是示出第九实施方式涉及的内容输出系统中的处理流程的一个示例的流程图。

具体实施方式

以下，参照附图，详细说明本发明涉及的声音输出系统1的实施方式。此外，本发明并不局限于以下的实施方式。

[第一实施方式]

<声音输出系统>

图1是示出作为第一实施方式涉及的声音输出系统1的声音输出装置10的框图。声音输出装置例如是头戴式耳机10。在本实施方式中，声音输出系统1由头戴式耳机10单体构成。

<头戴式耳机>

头戴式耳机10输出声音，或者消除周边声音的噪声。头戴式耳机10例如是顶置式的佩戴于用户的头部。头戴式耳机10基于从声音输出控制装置20输出的声音数据来输出声音。头戴式耳机10能够基于从声音输出控制装置20输出的控制信号来消除周边的噪声。头戴式耳机10内置有声音输出控制装置20。头戴式耳机10具有左声音输出部11、右声音输出部12、声音输入部13、左麦克风14、右麦克风15、传感器16以及声音输出控制装置20。

左声音输出部11是用于左耳的声音输出部。左声音输出部11具有覆盖左耳的框体。左声音输出部11输出在左耳中视听的声音。左声音输出部11从声音输出控制装置20获取声音数据。左声音输出部11输出声音数据的左声道数据。左声音输出部11将对声音数据的左声道数据进行D/A(Digital to Analog，数模)转换而得到的电信号转换为声音并输出。

右声音输出部12是用于右耳的声音输出部。右声音输出部12输出在右耳中视听的声音。右声音输出部12从声音输出控制装置20获取声音数据。右声音输出部12输出声音数据的右声道数据。右声音输出部12将对声音数据的右声道数据进行D/A转换而得到的电信号转换为声音并输出。

声音输入部13例如被输入音乐或影像等内容的声音数据。声音输入部13例如也可以被输入存储于未图示的存储部的声音数据。声音输入部13例如也可以通过有线或无线从未图示的电子书籍终端、智能手机、平板终端、便携用音乐再现装置以及便携用游戏机等电子设备输入声音数据。

左麦克风14配置于左声音输出部11的框体。左麦克风14获取周边声音。周边声音例如是包含第三者的说话声音以及交通工具的噪声等的环境声音。左麦克风14将所获取的声音输出至周边声音获取部24。

右麦克风15配置于右声音输出部12的框体。右麦克风15获取周边声音。右麦克风15将所获取的声音输出至周边声音获取部24。

传感器16检测头戴式耳机10的姿势，换言之，检测头戴式耳机10的朝向。换言之，传感器16检测佩戴了头戴式耳机10的用户的脸部朝向。传感器16例如利用3轴加速度传感器等各种传感器来检测头戴式耳机10的姿势。从各种传感器计算姿势的方法可以使用公知的任意方法。传感器16将检测结果输出至朝向检测部21。传感器16优选分别配置于左声音输出部11的框体及右声音输出部12的框体。由此，能够高精度地检测头戴式耳机10的姿势。

<声音输出控制装置>

声音输出控制装置20从头戴式耳机10输出声音，或者消除周边的噪声。声音输出控制装置20根据用户的脸部朝向，输出降低了周边声音的声音，或者设为与降低了周边声音的状态相比更容易听到周边声音的状态。声音输出控制装置20例如是由CPU(CentralProcessing Unit，中央处理器)或声音处理用处理器等构成的运算处理装置(控制部)。声音输出控制装置20将存储在未图示的存储部中的程序加载到存储器中，执行包含在程序中的命令。声音输出控制装置20包括朝向检测部21、声音处理部22以及作为内部存储器的存储部。声音处理部22具有声音获取部23、周边声音获取部24、周边声音降低处理部25以及声音输出控制部26。声音输出控制装置20可以由一个或多个装置构成。

朝向检测部21根据传感器16的检测结果，检测头戴式耳机10的姿势，换言之，检测头戴式耳机10的朝向。由此，朝向检测部21检测佩戴了头戴式耳机10的用户的脸部朝向。更详细而言，朝向检测部21检测用户的脸部朝向为第一状态、用户的脸部朝向为与第一状态不同的第二状态。朝向检测部21例如检测用户的脸部朝向朝下方的状态、用户的脸部朝向不朝下方的状态。朝向检测部21例如能够检测由于用户的脸部朝向的变化而产生的加速度小于阈值的情况、由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况。

在用户的脸部朝向从第一状态变为第二状态的情况下，用户环顾周边等用户的注意朝向周边的可能性高。在用户的脸部朝向从朝下方的状态变为不朝下方的状态的情况下，用户抬高脸部而确认周边等用户的注意朝向周边的可能性高。在由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况下，表示用户使脸部的朝向急剧变化，用户的注意朝向周边的可能性高。这样，在用户的注意朝向周边的可能性高的情况下，优选将降低周边声音的噪声消除的功能设为关闭(OFF)，成为容易听到周边声音的状态。

图2和图3是示出当用户将头戴式耳机10的头带101佩戴在用户的头顶部时的头戴式耳机的朝向的示意图。图2是示出从横方向观察头戴式耳机10时的姿势的图，具体而言，是示出从用户佩戴头戴式耳机10的状态的横向右侧的右声音输出部12侧观察头戴式耳机10时的姿势的图。在该情况下，佩戴头戴式耳机10的用户的脸部朝向+Y方向，不是朝向下方而是朝向前方。图3是示出从横向观察头戴式耳机10时的姿势的图，具体而言，是示出从用户佩戴头戴式耳机10的状态的横向右侧观察头戴式耳机10时的姿势的图。在这种情况下，佩戴有头戴式耳机10的用户的脸部朝向作为+Y方向的下方。

如图2和图3所示，佩戴有头戴式耳机10的用户的脸部朝向通过头戴式耳机10的Y轴方向和Z轴方向相对于检测出重力加速度G的方向的倾斜来规定。佩戴了头戴式耳机10的用户从笔直朝前的状态变为朝向下方的状态时，头戴式耳机10的姿势从图2所示的状态变成图3所示的状态。

例如，在头戴式耳机10佩戴于用户的头部的状态下，根据头戴式耳机10的角度，判断用户脸部是否朝下。例如，如图2所示的状态那样，在检测出重力加速度G的方向为从-Z方向处于±20度以内时，判断为用户的脸部朝向不朝下方而朝前方。另外，如图3所示的状态那样，在检测出重力加速度G的方向为从-Z起处于±20度以上时，判断为用户的脸部的朝向为朝向下方。此外，不局限于Z轴，也可以使用Y轴或者Z轴与Y轴的合成矢量等。

关于头戴式耳机10是否佩戴于用户的头部，能够根据传感器16的检测结果来判断。传感器16的X轴方向的检测结果表示大致水平，在从+Y轴方向或-Y轴方向例如处于±10度以内未检测出重力加速度的情况下，判断为头戴式耳机10佩戴于用户的头部。并且，例如也可以使用检测头带101的打开程度或对耳垫的压力等的其他传感器。

声音获取部23从声音输入部13获取用于从左声音输出部11和右声音输出部12输出的声音数据。

周边声音获取部24从左麦克风14和右麦克风15获取用户的周边声音。

周边声音降低处理部25基于周边声音获取部24所获取的周边声音，进行周边声音的噪声消除并降低周边声音。噪声消除的方法能够应用公知的方法，将使周边声音的相位相反的信号与声音输入部13所获取的声音数据合成，并输出到声音输出控制部26。

声音输出控制部26进行将声音数据作为声音而从头戴式耳机10输出的控制。更详细而言，声音输出控制部26使对声音数据的左声道数据进行D/A转换并放大后的信号从左声音输出部11输出。声音输出控制部26使对声音数据的右声道数据进行D/A转换并放大后的信号从右声音输出部12输出。

声音输出控制部26在朝向检测部21检测到用户的脸部朝向为第一状态的情况下，输出由周边声音降低处理部25降低了周边声音的声音，在用户的脸部朝向从第一状态变化为第二状态的情况下，设为与由周边声音降低处理部25降低了周边声音的状态相比更容易听到周边声音的状态。

声音输出控制部26在用户的脸部朝向是朝向下方的状态的情况下，输出由周边声音降低处理部25降低了周边声音的声音，在用户的脸部朝向从朝向下方的状态变化为不朝向下方的状态的情况下，设为与由周边声音降低处理部25降低了周边声音的状态相比更容易听到周边声音的状态。

声音输出控制部26在由于用户的脸部朝向的变化而产生的加速度为比阈值小的状态的情况下，输出由周边声音降低处理部25降低了周边声音的声音，在由于用户的脸部朝向的变化而产生的加速度变化为阈值以上的状态的情况下，设为与由周边声音降低处理部25降低了周边声音的状态相比更容易听到周边声音的状态。

作为与由周边声音降低处理部25降低了周边声音的状态相比更容易听到周边声音的状态，声音输出控制部26可以设为不进行周边声音降低处理部25的周边声音降低处理。在该情况下，声音输出控制部26将噪声消除设为关闭。由此，佩戴有头戴式耳机10的用户容易听到周边声音。

作为与由周边声音降低处理部25降低了周边声音的状态相比更容易听到周边声音的状态，声音输出控制部26可以不进行周边声音降低处理部25的周边声音降低处理，而是将周边声音获取部24所获取的周边声音从左声音输出部11和右声音输出部12输出。由此，佩戴有头戴式耳机10的用户能够从左声音输出部11和右声音输出部12听到周边声音。

接着，使用图4、图5，对头戴式耳机10中的信息处理进行说明。图4是示出第一实施方式涉及的声音输出系统1中的处理流程的一个示例的流程图。图5是示出第一实施方式涉及的声音输出系统1中的处理流程的其他示例的流程图。例如，在头戴式耳机10的电源接通(ON)的情况下、在头戴式耳机10佩戴于用户的头部的情况下、在头戴式耳机10具备对内容的声音进行输出的功能的情况下、在从头戴式耳机10开始输出声音的情况下、或者在进行了声音输出控制处理的开始操作的情况下等，执行图4、图5所示的流程图的处理。另外，在图4、图5所示的流程图的处理开始时，以进行噪声消除处理为前提。

首先，对图4所示的处理进行说明。声音输出控制装置20判定用户的脸部朝向的状态是否发生了变化(步骤S101)。更详细而言，朝向检测部21根据传感器16的检测结果，检测头戴式耳机10的姿势，换言之，检测头戴式耳机10的朝向，并判定头戴式耳机10的朝向是否变化。在通过朝向检测部21判定为用户的脸部朝向的状态有变化的情况下(步骤S101中的“是”)，进入步骤S102。在通过朝向检测部21未判定为用户的脸部朝向的状态有变化的情况下(步骤S101中的“否”)，进入步骤S104。在步骤S101中判定的用户的脸部朝向的状态有无变化是指，在用户的脸部朝向在X轴方向、Y轴方向或者Z轴方向中的至少任意一个存在例如10度以上的变化的情况下，判定为用户的脸部朝向的状态有变化。或者，在步骤S101中判定的用户的脸部朝向的状态有无变化是指，在用户的脸部朝向发生了变化时的加速度为阈值以上的情况下，判定为用户的脸部朝向的状态有变化。该情况下的阈值是检测在用户脸部突然朝向不同的方向时产生的加速度那样的阈值。

在判定为用户的脸部朝向的状态有变化的情况下(步骤S101中的“是”)，声音输出控制装置20判定在步骤S101中检测出的用户的脸部朝向的状态的变化是否为从第一状态向第二状态的变化(步骤S102)。更详细而言，声音输出控制部26判定在步骤S101中检测出的用户的脸部朝向的状态的变化是否是从用户的脸部朝向下方的第一状态向用户的脸部不朝向下方的第二状态的变化。或者，声音输出控制部26判定在步骤S101中检测出的用户的脸部朝向的状态的变化是否是从由于用户的脸部朝向的变化而产生的加速度比阈值小的第一状态向由用户的脸部朝向的变化而产生的加速度比阈值大的第二状态的变化。

在判定为用户的脸部朝向的状态的变化是从第一状态向第二状态的变化的情况下(步骤S102中的“是”)，声音输出控制装置20进入步骤S103。在未判定为用户的脸部朝向的状态的变化是从第一状态向第二状态的变化的情况下(步骤S102中的“否”)，声音输出控制装置20进入步骤S104。

在判定为用户的脸部朝向的状态的变化是从第一状态向第二状态的变化的情况下(步骤S102中的“是”)，声音输出控制装置20将噪声消除设为关闭(步骤S103)。更详细而言，声音输出控制部26将周边声音降低处理部25的噪声消除设为关闭。此外，声音输出控制部26也可以将内容的声音从左声音输出部11和右声音输出部12输出。在该状态下，在容易听到周围声音的状态下，从左声音输出部11和右声音输出部12输出内容的声音。声音输出控制装置20进入步骤S104。

声音输出控制装置20判定是否结束头戴式耳机10的使用(步骤S104)。例如，在头戴式耳机10的电源断开的情况下、在头戴式耳机10从用户头部移除的情况下、在从头戴式耳机10停止了声音的输出的情况下、或者在进行了声音输出控制处理的结束操作的情况下等，判定为结束使用(步骤S104中的“是”)，结束处理。声音输出控制装置20在不符合上述的情况下，不判定为结束使用(步骤S104中的“否”)，进入步骤S105。

声音输出控制装置20在未判定为结束使用的情况下(步骤S104中的“否”)，判定是否经过了预定期间(步骤S105)。更详细而言，声音输出控制部26在步骤S103中噪声消除变为关闭之后，例如判定是否经过了从30秒起1分钟左右的预先设定的期间。该情况下的预定期间是为了用户确认周边声音而适当的期间。在未由声音输出控制部26判定为经过了预定期间的情况下(步骤S105中的“否”)，再次进行步骤S105的判定，在判定为经过了预定期间的情况下(步骤S105中的“是”)，进入步骤S106。

在步骤S105中，在判定为经过了预定期间的情况下(步骤S105中的“是”)，声音输出控制装置20将噪声消除设为打开(ON)(步骤S106)，进入步骤S101。

接下来，对图5所示的处理进行说明。图5所示的流程图的步骤S111、步骤S112、步骤S114、步骤115进行与图4所示的流程图的步骤S102、步骤S102、步骤S104、步骤S105相同的处理。

在判定为用户的脸部朝向的状态是从第一状态向第二状态的变化的情况下(步骤S112中的“是”)，声音输出控制装置20将噪声消除设为关闭，输出周边声音(步骤S113)。更详细而言，声音输出控制部26将周边声音降低处理部25的噪声消除设为关闭，将周边声音获取部24所获取的周边声音从左声音输出部11和右声音输出部12输出。此外，声音输出控制部26也可以将内容的声音从左声音输出部11和右声音输出部12输出。在该状态下，在容易听到周围声音的状态下，从左声音输出部11和右声音输出部12输出内容的声音和周边声音。声音输出控制装置20进入步骤S114。

在步骤S115中，在判定为经过了预定期间的情况下(步骤S115中的“是”)，声音输出控制装置20将噪声消除设为打开，并且停止周边声音的输出(步骤S116)，进入步骤S111。

这样，在佩戴有头戴式耳机10的用户的脸部朝向的状态从第一状态变为第二状态的情况下、在用户的脸部朝向从朝向下方的状态变为不朝向下方的状态的情况下、或者在由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况下，成为与降低了周边声音的状态相比更容易听到周边声音的状态。

<效果>

如上所述，在本实施方式中，在用户的脸部朝向的状态从第一状态变为第二状态的情况下、在用户的脸部朝向从朝向下方的状态变为不朝向下方的状态的情况下、或者在由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况下，与降低了周边声音的状态相比，能够容易听到周边声音。根据本实施方式，在成为估计为用户注意到周边的状态的情况下，与周边声音被进行噪声消除的状态相比，能够适当地确认周边声音。这样，根据本实施方式，在用户想要听到周边声音时，能够适当地确认周边声音。

在本实施方式中，在用户的脸部朝向的状态从第一状态变为第二状态的情况下、在用户的脸部朝向从朝向下方的状态变为不朝向下方的状态的情况下、或者在由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况下，与降低了周边声音的状态相比，容易听到周边声音。在这些情况下，用户的注意朝向周边的可能性都高。根据本实施方式，在用户的注意朝向周边的可能性高的情况下，将噪声消除的功能设为关闭，能够成为容易听到周边声音的状态。

在本实施方式中，作为与降低了周边声音的状态相比更容易听到周边声音的状态，不进行周边声音降低处理部25的周边声音降低处理，或者，不进行周边声音降低处理，而从左声音输出部11和右声音输出部12输出周边声音获取部24所获取的周边声音。根据本实施方式，能够容易听到周边声音。

在用户的脸部朝向的状态从第一状态变为第二状态的情况下，例如，在用户使用头戴式耳机10听音乐等的同时乘坐在交通工具的座位上并在朝向下方的状态下，用户想要通过交通工具内的广播来知道停车车站等信息，从而进行抬高脸部的动作。通过进行这样的动作，用户的脸部朝向的状态从第一状态变为第二状态。

[第二实施方式]

图6是第二实施方式涉及的声音输出系统1A的概略图。图7是第二实施方式涉及的声音输出系统1A的框图。声音输出系统1A包括作为声音输出装置的头戴式耳机10A、以及例如电子书终端、智能手机、平板终端、便携用音乐再现装置及便携用游戏机等电子设备30A。换言之，声音输出系统1A是作为声音输出装置的头戴式耳机10A与电子设备30A的组合。

头戴式耳机10A与电子设备30A以能够通过有线或者无线收发数据的方式连接。头戴式耳机10A输出从电子设备30A输出的声音信号。

电子设备30A包括具有与声音输入部13相同的功能的声音输入部31A、以及具有与声音输出控制装置20相同的功能的声音输出控制装置40A。

图7中的头戴式耳机10A的结构与图1所示的头戴式耳机10的结构中包含的结构相同。另外，图7中的电子设备30A的结构相对于图1所示的头戴式耳机10的结构所包含的结构，声音输出控制装置40A与声音输出控制装置20对应，声音处理部42A与声音处理部22对应。同样地，声音获取部43A与声音获取部23对应，周边声音获取部44A与周边声音获取部24对应，周边声音降低处理部45A与周边声音降低处理部25对应，声音输出控制部46A与声音输出控制部26对应，朝向检测部41A与朝向检测部21对应，分别为相同的结构。

如上所述，如本实施方式那样，即使将作为声音输出装置的头戴式耳机10A与电子设备30A的组合，也能够与第一实施方式同样地适当地确认周边声音。

[第三实施方式]

参照图8、图9，对本实施方式涉及的声音输出系统1B进行说明。图8是第三实施方式涉及的声音输出系统1B的框图。图9是示出第三实施方式涉及的声音输出系统1B中的处理流程的一个示例的流程图。声音输出系统1B的基本结构与第二实施方式的声音输出系统1A相同。在本实施方式中，电子设备30B具有GNSS(Global Navigation Satellite System，全球导航卫星系统)接收部32B、位置信息计算部47B及判断部48B。

GNSS接收部32B由接收来自GNSS卫星的GNSS信号的GNSS接收机等构成。GNSS接收部32B将所接收的GNSS信号输出到位置信息计算部47B。

位置信息计算部47B从GNSS接收部32B接收GNSS信号。位置信息计算部47B基于GNSS信号，计算当前位置信息。位置信息计算部47B及GNSS接收部32B不限于GNSS信号，也可以与其他方式的定位卫星系统对应。

判断部48B判断用户是否使用了交通工具。例如，判断部48B也可以基于位置信息计算部47B计算出的位置信息，并基于佩戴了头戴式耳机10B的用户的当前位置与未图示的地图信息的交通工具的位置信息相符的情况或者移动历史或移动速度，判断为使用交通工具。判断部48B并不限定判断是否使用交通工具的方法，例如，也可以通过使用头戴式耳机10B的周边噪声或振动的其他方法来判断。

接着，使用图9，对声音输出系统1B中的信息处理进行说明。图9所示的流程图的步骤S122至步骤S124、步骤S126以及步骤S127进行与图4所示的流程图的步骤S101至步骤S103、步骤S105以及步骤S106相同的处理。

声音输出控制装置40B判断是否使用交通工具(步骤S121)。更详细而言，通过判断部48B，基于位置信息计算部47B计算出的位置信息，基于用户的当前位置符合地图信息的交通工具的位置信息的情况等的判断结果，判断为使用交通工具。在由判断部48B判断为使用交通工具的情况下(步骤S121中的“是”)，进入步骤S122。在由判断部48B未判断为使用交通工具的情况下(步骤S121中的“否”)，结束处理。

在步骤S125中的使用结束的判断中，除了头戴式耳机10B或电子设备30B的使用结束的判断以外，声音输出控制装置40B还判断是否结束交通工具的使用(步骤S125)。更详细而言，通过判断部48B，基于位置信息计算部47B计算出的位置信息，在用户的当前位置偏离地图信息的交通工具的位置信息的情况下等，通过检测到交通工具的使用结束这一情况，判断为结束交通工具的使用。在由判断部48B判断为结束使用交通工具的情况下(步骤S125中的“是”)，结束处理。在由判断部48B未判断为结束使用交通工具的的情况下(步骤S125中的“否”)，进入步骤S126。

<效果>

如上所述，在本实施方式中，在佩戴了头戴式耳机10B的用户使用交通工具的情况下、在用户的脸部朝向从第一状态变为第二状态的情况下、在用户的脸部朝向从朝向下方的状态变为不朝向下方的状态的情况下、或者在由于用户的脸部朝向的变化而产生的加速度为阈值以上的情况下，与降低了周边声音的状态相比，能够容易听到周边声音。根据本实施方式，在佩戴了头戴式耳机10B的用户在交通工具的使用中，为了听到广播等而抬高了脸部的情况下等，能够容易听到广播等周边声音。根据本实施方式，能够抑制不小心关闭噪声消除。

[第四实施方式]

<内容输出系统>

图10是示出第四实施方式涉及的内容输出系统1T的框图。在本实施方式中，对作为声音输出控制装置的一个实施方式的内容输出控制装置40T进行说明。内容输出系统1T是声音输出系统的一个实施方式。在以下的实施方式中也相同。内容输出控制装置40T与声音输出控制装置对应，内容输出系统1T与声音输出系统对应。在以下的说明中，对与第一实施方式至第三实施方式的声音输出系统及声音输出控制装置相同的构成要素标注相同的符号或对应的符号，或记载对应关系，省略其详细的说明。内容输出系统1T包括作为声音输出装置的头戴式耳机10T、以及例如电子书终端、智能手机、平板终端、便携用音乐再现装置及便携用游戏机等的由影像和声音构成的内容的再现、显示等的电子设备30T。换言之，内容输出系统1T是作为声音输出装置的头戴式耳机10T与电子设备30T的组合。内容输出系统1T根据用户的视线方向，从头戴式耳机10T输出声音，或者消除周边声音的噪声。

<头戴式耳机>

头戴式耳机10T基于从电子设备30T的内容输出控制装置40T输出的声音数据，输出与显示在显示画面36上的内容相关的声音。头戴式耳机10T能够基于从内容输出控制装置40T输出的控制信号来消除周边的噪声。头戴式耳机10T与电子设备30T以能够通过有线或者无线收发数据的方式连接。头戴式耳机10T具有左声音输出部11、右声音输出部12、左麦克风14、右麦克风15以及内容输出控制装置40T。头戴式耳机10T与第二实施方式的头戴式耳机10A同样地构成，在不具有传感器这一点上不同。

<电子设备>

电子设备30T具有内容输入部31T、显示部32T(参照图6)、视线传感器33T以及内容输出控制装置40T。

内容输入部31T与第二实施方式的声音输入部31A对应。输入到内容输入部31T的内容数据例如是伴随声音输出的内容数据，是动态图像内容、游戏内容、WEB(网络)内容等。

内容数据包括与内容相关的影像数据和声音数据。与内容相关的影像数据是显示在显示画面36上的内容的影像数据。与内容相关的声音数据是与显示在显示画面36上的内容的影像数据对应地输出的声音的声音数据。与内容相关的声音数据例如可以是电子书的文本朗读的声音、WEB页面的文本朗读声音以及解说声音等。

视线传感器33T以朝向与电子设备30T的显示画面36相同方向的方式配置。视线传感器33T是检测与电子设备30T的显示画面36相对的人物的视线的传感器。视线传感器33T在用户视觉确认显示画面36的状态下，配置于与用户脸部面对的位置。视线传感器33T例如配置于电子设备30T的显示画面36的上部。视线传感器33T将所拍摄的拍摄数据向内容输出控制装置40T的视线检测部43T输出。

视线传感器33T例如包括由红外LED(Light Emitting Diode，发光二极管)组构成的红外光发光部、以及一对红外线相机。在本实施方式中，视线传感器33T用一对红外光发光部向用户脸部方向照射红外光，用红外线相机拍摄。这样，根据由红外线相机拍摄到的拍摄影像，后述的视线检测部43T基于用户的瞳孔和角膜反射的位置，判断用户的视线是否朝向显示画面36。进而，基于用户的瞳孔和角膜反射的位置，判断显示画面36上的用户的视线的位置。视线传感器33T也可以是可见光相机等具有相同功能的其他结构。

显示部32T显示被输入到内容输入部31T的内容的影像。显示部32T是包含液晶显示器(LCD：Liquid Crystal Display)或有机EL(Organic Electro-Luminescence，有机电致发光)显示器等的显示器。显示部32T基于从显示控制部42T输出的显示数据，显示内容的影像。显示部32T具备显示影像的显示画面36。

头戴式耳机10T可以具备用于检测头戴式耳机10T是否佩戴于用户头部的传感器。具体而言，头戴式耳机10T具备3轴加速度传感器，基于检测出重力加速度的方向，判断为头戴式耳机10T佩戴于用户头部。并且，例如也可以使用检测头带的打开程度或对耳垫的压力等的其他传感器。传感器例如也可以是与第二实施方式的传感器16相同的结构。

<内容输出控制装置>

内容输出控制装置40T从头戴式耳机10T输出声音，或者消除周边的噪声。内容输出控制装置40T根据用户的视线方向，输出降低了周边声音的声音，或者设为与降低了周边声音的状态相比更容易听到周边声音的状态。内容输出控制装置40T包括影像获取部41T、显示控制部42T、视线检测部43T、注视判断部44T、声音处理部50T以及作为内部存储器的存储部。声音处理部50T与第一实施方式的声音处理部22对应。内容输出控制装置40T也可以由一个或多个装置构成。

影像获取部41T从内容输入部31T获取用于向显示部32T的显示画面36输出的内容的影像数据。

显示控制部42T将影像获取部41T所获取的内容的影像数据显示在显示部32T的显示画面36上。

视线检测部43T基于视线传感器33T所拍摄的拍摄数据，检测用户的视线方向。检测视线的方法不被限定，但在本实施方式中，通过角膜反射来检测视线。

注视判断部44T基于视线检测部43T的检测结果，判断用户是否注视显示了内容的电子设备30T的显示画面36。注视显示画面36是指，显示画面36位于用户的视线方向的状态、换言之用户的视线方向与显示画面36交叉的状态持续第一预定期间以上。第一预定期间例如为5秒左右。未注视显示画面36是指，用户的视线方向朝向与显示画面36不同的方向的状态、换言之用户的视线方向与显示画面36不交叉的状态持续第二预定期间以上。第二预定期间例如为5秒左右。

周边声音降低处理部54T基于周边声音获取部52所获取的周边声音，对向用户输出声音的左声音输出部11和右声音输出部12输出的声音进行降低周边声音的处理。周边声音降低处理部54T基于周边声音获取部52所获取的周边声音，进行周边声音的噪声消除而降低周边声音。噪声消除的方法能够应用公知的方法，使将周边声音的相位相反的信号输出到声音输出控制部26。

声音输出控制部53T在注视判断部44T判断为用户注视显示了内容的显示画面36的情况和判断为未注视的情况下，变更周边声音获取部52所获取的周边声音的输出的状态并输出声音。在本实施方式中，声音输出控制部53T在由注视判断部44T判断为用户注视显示了内容的显示画面36的情况下，输出由周边声音降低处理部54T降低了周边声音的声音，在判断为用户未注视显示了内容的显示画面36的情况下，成为与由周边声音降低处理部54T降低了周边声音的状态相比更容易听到周边声音的状态。

接下来，使用图11、图12，对头戴式耳机10T中的信息处理进行说明。图11是示出第四实施方式涉及的内容输出系统1T中的处理流程的一个示例的流程图。图12是示出第四实施方式涉及的内容输出系统1T中的处理流程的其他示例的流程图。例如，在头戴式耳机10T的电源接通的情况下、在头戴式耳机10T佩戴于用户头部的情况下、在从头戴式耳机10T开始了声音的输出的情况下、或者进行了内容输出控制处理的开始操作的情况下等，执行图11、图12所示的流程图的处理。

首先，对图11所示的处理进行说明。内容输出控制装置40T判断伴随着声音输出的内容是否显示在显示部32T上(步骤ST101)。更详细而言，判断输入到内容输入部31T的由声音和影像构成的内容是否被再现、内容的影像是否被显示在显示部32T上、内容的声音是否被输出到头戴式耳机10T。换言之，判断由声音和影像构成的内容是否被再现。伴随声音输出的内容被显示在显示部32T上的状态是指，内容的影像被显示在显示部32T上、内容的声音被输出到头戴式耳机10T的状态，这些输出持续到内容的再现结束为止。

在判断为伴随声音输出的内容被显示在显示部32T上的情况下(步骤ST101中的“是”)，进入步骤ST102。在未判断为伴随声音输出的内容被显示在显示部32T上的情况下(步骤ST101中的“否”)，结束本处理。在判断为伴随声音输出的内容被显示在显示部32T的情况下(步骤ST101中的“是”)，判断用户是否注视显示画面36(步骤ST102)。更详细而言，通过注视判断部44T，根据视线检测部43T的检测结果，判断用户是否注视显示了内容的电子设备30T的显示画面36。在通过注视判断部44T判断为用户正注视显示画面36的情况下(步骤ST102中的“是”)，进入步骤ST103。在通过注视判断部44T未判断为用户正注视显示画面36的情况下(步骤ST102中的“否”)，进入步骤ST104。

在判断为用户正注视显示画面36的情况下(步骤ST102中的“是”)，内容输出控制装置40T将噪声消除设为打开(步骤ST102)。更详细而言，声音输出控制部53T进行周边声音降低处理部54T的噪声消除。此外，声音输出控制部53T也可以将内容的声音从左声音输出部11和右声音输出部12输出。在该状态下，从左声音输出部11和右声音输出部12输出内容的声音。内容输出控制装置40T进入步骤ST105。

步骤ST103的处理在步骤ST101中为“是”时噪声消除已经成为打开的情况下持续噪声消除为打开的状态，在步骤ST101中为“是”时噪声消除为关闭的情况下将噪声消除设为打开。

在未判断为用户正注视显示画面36的情况下(步骤ST102中的“否”)，内容输出控制装置40T将噪声消除设为关闭(步骤ST104)。更详细而言，声音输出控制部53T将周边声音降低处理部54T的噪声消除设为关闭。此外，声音输出控制部53T也可以将内容的声音从左声音输出部11和右声音输出部12输出。在该状态下，在容易听到周围的声音的状态下，从左声音输出部11和右声音输出部12输出内容的声音。内容输出控制装置40T进入步骤ST105。

步骤ST104的处理在步骤ST101中为“是”时噪声消除已经成为打开的情况下将噪声消除设为关闭，在步骤ST101中为“是”时噪声消除为关闭的情况下持续噪声消除为关闭的状态。

内容输出控制装置40T判断是否结束头戴式耳机10T、电子设备30T等内容输出系统1T的使用(步骤ST105)。例如，在头戴式耳机10T、电子装置30T的电源断开的情况下、在头戴式耳机10T从用户头部移除的情况下、在停止对头戴式耳机10T的声音输出的情况下、或者在进行了内容输出控制处理的结束操作的情况下，判断为结束使用(步骤ST105中的“是”)，结束处理。内容输出控制装置40T在不符合上述的情况下，不会判断为结束使用(步骤ST105中的“否”)，再次执行步骤ST101的处理。

接下来，对图12所示的处理进行说明。图12所示的流程图的步骤ST111、步骤ST112、步骤ST113、步骤ST115进行与图11所示的流程图的步骤ST101、步骤ST102、步骤ST103、步骤ST105相同的处理。

在未判断为用户注视显示画面36的情况下(步骤ST112中的“否”)，内容输出控制装置40T将噪声消除设为关闭，并输出周边声音(步骤ST114)。更详细而言，声音输出控制部53T将周边声音降低处理部54T的噪声消除设为关闭，将周边声音获取部52所获取的周边声音从左声音输出部11和右声音输出部12输出。此外，声音输出控制部53T也可以将内容的声音从左声音输出部11和右声音输出部12输出。在该状态下，在容易听到周围的声音的状态下，从左声音输出部11和右声音输出部12输出内容的声音的同时还输出周边声音。内容输出控制装置40T进入步骤ST115。

步骤ST113的处理在步骤ST111中为“是”时噪声消除已经成为打开的情况下持续噪声消除为打开的状态，在步骤ST111中为“是”时噪声消除为关闭成为输出周边声音的状态的情况下，将噪声消除设为打开而停止周边声音的输出。

步骤ST114的处理在步骤ST111中为“是”时噪声消除已经成为打开的情况下，将噪声消除设为关闭而输出周边声音，在步骤ST111中为“是”时噪声消除为关闭而成为输出周边声音的状态的情况下，持续噪声消除为关闭的状态和周边声音的输出。

这样，在佩戴有头戴式耳机10T的用户注视显示画面36的情况下，降低周边声音，在佩戴有头戴式耳机10T的用户未注视显示画面36的情况下，成为与降低了周边声音的状态相比更容易听到周边声音的状态。

<效果>

如上所述，在本实施方式中，在佩戴有头戴式耳机10T的用户正注视显示画面36的情况下，降低周边声音，在用户未注视显示画面36的情况下，与降低了周边声音的状态相比，能够容易听到周边声音。根据本实施方式，在用户中断注视显示画面36而成为估计为用户注意到周边的状态的情况下，与周边声音被进行了噪声消除的状态相比，能够适当地确认周边声音。这样，根据本实施方式，在用户想要听到周边声音时，即使用户不进行操作，也能够适当地确认周边声音。

在本实施方式中，作为与降低了周边声音的状态相比更容易听到周边声音的状态，不进行周边声音降低处理部54T的周边声音降低处理，或者，不进行周边声音降低处理，而从左声音输出部11和右声音输出部12输出周边声音获取部52所获取的周边声音。根据本实施方式，能够容易听到周边声音。

[第五实施方式]

参照图13、图14，对本实施方式涉及的内容输出系统1TA进行说明。图13是第五实施方式涉及的内容输出系统1TA的框图。图14是示出第五实施方式涉及的内容输出系统1TA中的处理流程的一个示例的流程图。内容输出系统1TA的基本结构与第四实施方式的内容输出系统1T相同。在以下的说明中，对与内容输出系统1T相同的构成要素标注相同的附图标记或者对应的附图标记，并省略其详细的说明。在本实施方式中，与第四实施方式的区别在于，电子设备30TA具有拍摄部33TA和内容输出控制装置40TA的脸部检测部48TA这一点、以及声音输出控制部53TA中的处理。

拍摄部33TA是拍摄与电子设备30TA的显示画面36相对的人物的可见光相机。拍摄部33TA拍摄用户的脸部。拍摄部33TA在用户视觉确认显示画面36的状态下被配置于能够拍摄用户脸部的位置。拍摄部33TA例如配置于电子设备30TA的显示画面36的上部。拍摄部33TA将所拍摄的拍摄数据向内容输出控制装置40TA的脸部检测部48TA输出。拍摄部33TA和视线传感器33T可以是相同的可见光相机。

脸部检测部48TA从拍摄部33TA所拍摄的拍摄数据中识别用户的脸部，检测识别出的脸部的朝向。更详细而言，脸部检测部48TA检测脸部检测部48TA检测出的脸部的朝向是否为与显示画面36对置的朝向。例如，在用户注视显示了内容的显示画面36的情况下，用户的脸部朝向是与显示画面36对置的朝向。例如，在用户注意到周边而环顾周围的情况下，用户的脸部朝向不是与显示画面36对置的朝向。

与显示画面36对置的朝向是指，用户能够视觉确认显示于显示画面36的内容的图像等的朝向。关于与显示画面36对置的朝向，例如，只要定义成在从上下方向观察和从左右方向观察时，穿过用户的两眼的中心并向用户的前方延伸的直线、以及与显示画面36交叉的角度例如为90°±30°左右的范围等用户能够清楚地观看显示画面36的朝向即可。

声音输出控制部53TA在由注视判断部44T判断为用户正注视显示了内容的显示画面36、且脸部检测部48TA检测出的脸部朝向是与显示画面36对置的朝向的情况下，输出由周边声音降低处理部54T降低了周边声音的声音。声音输出控制部53TA在由注视判断部44T判断为用户未注视显示了内容的显示画面36、且脸部检测部48TA检测出的脸部朝向不是与显示画面36对置的朝向的情况下，成为与由周边声音降低处理部54T降低了周边声音的状态相比更容易听到周边声音的状态。即使在用户未注视显示了内容的显示画面36的情况下，当用户的脸部朝向与显示画面36对置时，也估计为用户有继续视听内容的意思。在该情况下，优选继续降低周边声音。与此相对，在用户未注视显示了内容的显示画面36、且用户的脸部朝向不与显示画面36对置的情况下，估计为用户对周边进行了较高的注意。在该情况下，优选能够确认周边声音。

接着，使用图14，对内容输出系统1TA中的信息处理进行说明。图14所示的流程图的步骤ST121、步骤ST122、步骤ST124至步骤ST126进行与图11所示的流程图的步骤ST101、步骤ST102、步骤ST103至步骤ST105相同的处理。

内容输出控制装置40TA判断用户脸部是否对置(步骤ST123)。更详细而言，在脸部检测部48TA检测出的脸部朝向是与显示画面36对置的朝向的情况下(步骤ST123中的“是”)，进入步骤ST124。在脸部检测部48TA检测出的脸部朝向不是与显示画面36对置的朝向的情况下(步骤ST123中的“否”)，进入步骤ST125。

<效果>

如上所述，在本实施方式中，在用户注视显示画面36且用户的脸部朝向与显示画面36对置的情况下，降低周边声音，在用户未注视显示画面36、且用户的脸部朝向不是与显示画面36对置的朝向的情况下，与降低了周边声音的状态相比，能够容易听到周边声音。根据本实施方式，在用户的脸部朝向为不与显示画面36对置的朝向而用户注意到周边的状态下，能够适当地确认周边声音。

[第六实施方式]

参照图15、图16，对本实施方式涉及的内容输出系统1TB进行说明。图15是第六实施方式涉及的内容输出系统1TB的框图。图16是示出第六实施方式涉及的内容输出系统1TB中的处理流程的一个示例的流程图。内容输出系统1TB的基本结构与图13所示的第五实施方式的内容输出系统1TA相同。在本实施方式中，与第四实施方式的区别在于，电子设备30TB具有GNSS接收部34TB、内容输出控制装置40TB的位置信息计算部49TB和判断部50TB这一点、以及声音输出控制部53TB中的处理。

GNSS接收部34TB与第三实施方式的GNSS接收部32B同样地构成。

位置信息计算部49TB与第三实施方式的位置信息计算部47B同样地构成。

判断部50TB与第三实施方式的判断部48B同样地构成。

声音输出控制部53TB在用户使用交通工具的情况下，当判断为用户注视显示了内容的显示画面36时，输出由周边声音降低处理部54T降低了周边声音的声音，在判断为用户未注视显示了内容的显示画面36的情况下，成为与由周边声音降低处理部54T降低了周边声音的状态相比更容易听到周边声音的状态。

接着，使用图16，对内容输出系统1TB中的信息处理进行说明。图16所示的流程图的步骤ST131、步骤ST136进行与图9所示的流程图的步骤S121、步骤S125相同的处理。图16所示的流程图的步骤ST132至步骤ST135进行与图11所示的流程图的步骤ST101至步骤ST104相同的处理。

<效果>

如上所述，在本实施方式中，在佩戴了头戴式耳机10T的用户使用交通工具的情况下，在用户注视显示画面36的情况下，降低周边声音，在用户未注视显示画面36的情况下，与降低了周边声音的状态相比，能够容易听到周边声音。根据本实施方式，在佩戴了头戴式耳机10T的用户在交通工具的使用中，为了听到广播等而将脸部朝向从与显示画面36对置的朝向改变的情况下等，能够容易听到广播等周边声音。根据本实施方式，能够抑制不小心关闭噪声消除。

[第七实施方式]

<内容输出系统>

图17是示出第七实施方式涉及的内容输出系统1U的框图。内容输出系统1U根据用户是否注视显示画面36，从头戴式耳机10U输出与在显示画面36上显示的内容相关的声音，或者输出周边的声音。内容输出系统1U的内容输出控制装置40U的声音处理部50U与第四实施方式不同。

<内容输出控制装置>

内容输出控制装置40U根据用户是否正注视显示画面36，从头戴式耳机10U输出与内容相关的声音，或输出周边声音。

声音处理部50U具有与第四实施方式同样地构成的声音获取部51、周边声音获取部52、以及声音输出控制部53U。

声音输出控制部53U在注视判断部44U判断为用户正注视显示了内容的显示画面36的情况和判断为未注视的情况下，变更周边声音获取部52所获取的周边声音的输出的状态并输出声音。在本实施方式中，声音输出控制部53U在注视判断部44U判断为用户正注视显示了内容的显示画面36的情况下，输出与声音获取部51所获取的内容相关的声音，在判断为用户未注视显示了内容的显示画面36的情况下，输出周边声音获取部52所获取的周边声音。

声音输出控制部53U在注视判断部44U判断为用户未注视显示了内容的显示画面36的情况下，除了声音获取部51所获取的与内容相关的声音以外，还可以输出周边声音获取部52所获取的周边声音。在该情况下，从头戴式耳机10U输出与内容相关的声音的同时，还输出周边声音。

接下来，使用图18、图19，对头戴式耳机10U中的信息处理进行说明。图18是示出第七实施方式涉及的内容输出系统1U中的处理流程的一个示例的流程图。图19是示出第七实施方式涉及的内容输出系统1U中的处理流程的其他示例的流程图。例如，在头戴式耳机10U的电源接通的情况下、在头戴式耳机10U佩戴于用户头部的情况下、在从头戴式耳机10U开始了声音的输出的情况下、或者进行了内容输出控制处理的开始操作的情况下等，执行图18、图19所示的流程图的处理。图18所示的流程图的步骤SU101、步骤SU102、步骤SU105进行与图11所示的流程图的步骤ST101、步骤ST102、步骤ST105相同的处理。

在判断为用户正注视显示画面36的情况下(步骤SU102中的“是”)，内容输出控制装置40U输出内容的声音(步骤SU103)。更详细而言，声音输出控制部53U从头戴式耳机10U输出声音获取部51所获取的与内容相关的声音。由此，从头戴式耳机10U的左声音输出部11和右声音输出部12输出内容的声音。内容输出控制装置40U进入步骤SU105。

步骤SU103的处理在步骤SU101中为“是”时不输出周边声音的状态的情况下，继续输出内容声音，在步骤SU101中为“是”时输出周边声音的状态的情况下，继续输出内容声音，并停止输出周边声音。

在未判断为用户注视显示画面36的情况下(步骤SU102中的“否”)，内容输出控制装置40U输出周边声音(步骤SU104)。更详细而言，声音输出控制部53U输出周边声音获取部52所获取的周边声音。由此，从头戴式耳机10U的左声音输出部11和右声音输出部12输出周边声音。内容输出控制装置40U进入步骤SU105。

步骤SU104的处理在步骤SU101中为“是”时不输出周边声音的状态的情况下，开始输出周边声音，在步骤SU101中为“是”时输出周边声音的状态的情况下，维持输出周边声音。

接下来，对图19所示的处理进行说明。图19所示的流程图的步骤SU111、步骤SU112、步骤SU113、步骤SU115进行与图18所示的流程图的步骤SU101、步骤SU102、步骤SU103、步骤SU105相同的处理。

在未判断为用户注视显示画面36的情况下(步骤SU112中的“否”)，内容输出控制装置40U输出与内容相关的声音，同时还输出周边声音(步骤SU114)。更详细而言，将周边声音获取部52获取的周边声音与声音获取部51所获取的内容相关的声音一起从头戴式耳机10U的左声音输出部11和右声音输出部12输出。内容输出控制装置40U进入步骤SU115。

步骤SU113的处理在步骤SU111中为“是”时不输出周边声音的状态的情况下，继续输出内容声音，在步骤SU111中为“是”时输出内容声音和周边声音的状态的情况下，继续输出内容声音，并停止输出周边声音。

步骤SU114的处理在步骤SU111中为“是”时输出内容声音而不输出周边声音的状态的情况下，在维持内容声音的输出的状态下开始输出周边声音，在步骤SU111中为“是”时输出内容声音和周边声音的状态的情况下，维持输出内容声音和周边声音。

在步骤SU114中，在与内容声音一起输出周边声音的情况下，内容声音的音量也可以是用户设定的音量的状态，也可以使输出周边声音的期间的内容声音的音量比用户设定的音量低。

这样，在佩戴头戴式耳机10U的用户注视显示画面36的情况下，输出与内容相关的声音，在用户未注视显示画面36的情况下，能输出周边声音。

<效果>

如上所述，在本实施方式中，在佩戴有头戴式耳机10U的用户注视显示画面36的情况下，输出内容的声音，在用户未注视显示画面36的情况下，能够输出周边声音。根据本实施方式，在用户中断注视显示画面36而成为估计为用户注意到周边的状态的情况下，能够适当地确认周边声音。这样，根据本实施方式，在用户想要听到周边声音时，即使用户不进行操作，也能够适当地确认周边声音。

在本实施方式中，在用户未注视显示画面36的情况下，能够与内容的声音一起输出周边声音。根据本实施方式，能够在继续视听内容的同时确认周边声音。

[第八实施方式]

参照图20、图21，对本实施方式的内容输出系统1UA进行说明。图20是第八实施方式涉及的内容输出系统1UA的框图。图21是示出第八实施方式涉及的内容输出系统1UA中的处理流程的一个示例的流程图。内容输出系统1UA的基本结构与第七实施方式的内容输出系统1U相同。在以下的说明中，对与内容输出系统1U相同的构成要素标注相同的附图标记或者对应的附图标记，并省略其详细的说明。在本实施方式中，与第七实施方式的区别在于，电子设备30UA具有GNSS接收部34UA、内容输出控制装置40UA的位置信息计算部45UA和判断部46AU这一点、以及声音输出控制部53UA中的处理。

GNSS接收部34UA与第三实施方式的GNSS接收部32B同样地构成。

位置信息计算部45UA与第三实施方式的位置信息计算部47B同样地构成。

判断部46UA与第三实施方式的判断部48B同样地构成。

声音输出控制部53UA在用户使用交通工具的情况下，在判断为用户注视显示了内容的显示画面36的情况下，输出与声音获取部51所获取的内容相关的声音，在判断为用户未注视显示了内容的显示画面36的情况下，输出周边声音获取部52所获取的周边声音。

接着，使用图21，对内容输出系统1UA中的信息处理进行说明。图21所示的流程图的步骤SU121、步骤SU126进行与图9所示的流程图的步骤S121、步骤S125相同的处理。图21所示的流程图的步骤SU122至步骤SU125进行与图18所示的流程图的步骤SU101至步骤SU104相同的处理。

<效果>

如上所述，在本实施方式中，在佩戴了头戴式耳机10U的用户使用交通工具的情况下，在用户未注视显示画面36的情况下，输出周边声音。根据本实施方式，在佩戴了头戴式耳机10U的用户在交通工具的使用中，为了听到广播等而不再注视内容的显示画面36的情况下等，能够使用头戴式耳机10U来听到广播等周边声音。根据本实施方式，能够抑制无意地输出周边声音。

[第九实施方式]

参照图22、图23，对本实施方式涉及的内容输出系统1UB进行说明。图22是第九实施方式涉及的内容输出系统1UB的框图。图23是示出第九实施方式涉及的内容输出系统1UB中的处理流程的一个示例的流程图。内容输出系统1UB的基本结构与第七实施方式的内容输出系统1U相同。在本实施方式中，与第七实施方式的区别在于，电子设备30UB具有拍摄部35UB和内容输出控制装置40UB的脸部检测部47UB这一点、以及声音输出控制部53UB中的处理。

拍摄部35UB与第五实施方式的拍摄部33TA同样地构成。

脸部检测部47UB与第五实施方式的脸部检测部48TA同样地构成。

声音输出控制部53UB除了由注视判断部44U判断为用户注视显示了内容的显示画面36之外，在脸部检测部47UB检测出的脸部朝向是与显示画面36对置的朝向的情况下，输出与声音获取部51所获取的内容相关的声音。声音输出控制部53UB除了由注视判断部44U判断为用户未注视显示了内容的显示画面36之外，在脸部检测部47UB检测出的脸部朝向不是与显示画面36对置的朝向的情况下，输出周边声音获取部52所获取的周边声音。即使在用户未注视显示了内容的显示画面36的情况下，当用户的脸部朝向与显示画面36对置时，也估计为用户有继续视听内容的意思。在该情况下，优选继续视听内容。与此相对，在用户未注视显示了内容的显示画面36、且用户的脸部朝向不与显示画面36对置的情况下，估计为用户高度注意到周边。在该情况下，优选能够确认周边声音。

接着，使用图23，对内容输出系统1UB中的信息处理进行说明。图23所示的流程图的步骤SU131、步骤SU132、步骤SU134至步骤SU136进行与图18所示的流程图的步骤SU101、步骤SU102、步骤SU103至步骤SU105相同的处理。图23所示的流程图的步骤SU133进行与图14所示的流程图的步骤ST123相同的处理。

<效果>

如上所述，在本实施方式中，在用户注视显示画面36且用户的脸部朝向与显示画面36对置的情况下，输出内容的声音，在用户未注视显示画面36且用户的脸部朝向不是与显示画面36对置的朝向的情况下，能够输出周边声音获取部52所获取的周边声音。根据本实施方式，在用户将脸部朝向设为不与显示画面36对置的朝向而是设为用户注意到周边的状态时，能够适当地确认周边声音。

图示的声音输出系统1的各构成要素是功能概念性的，也可以不必如物理上图示那样构成。即，各装置的具体方式不限于图示的方式，也可以根据各装置的处理负担、使用状况等，将其全部或一部分以任意的单位功能性或物理性地分散或整合。

声音输出系统1的结构例如通过作为软件加载到存储器中的程序等来实现。在上述实施方式中，作为通过这些硬件或软件的协作而实现的功能块进行了说明。即，这些功能块能够仅通过硬件、仅通过软件、或者通过它们的组合而以各种形式实现。

在上述记载的构成要素中包含本领域技术人员能够容易想到的要素、实质上相同的要素。进而，上述记载的结构能够适当组合。另外，在不脱离本发明的主旨的范围内能够进行结构的各种省略、置换或变更。

在上述中，作为容易听到周边声音的状态的示例，示出了不进行周边声音降低处理的状态的示例、以及不进行周边声音降低处理而输出周边声音的示例。作为容易听到周边声音的状态的示例，除了上述以外，也可以降低周边声音降低等级、即降低噪声消除等级的效果。另外，作为其他示例，也可以在降低噪声消除等级的效果的同时输出周边声音。降低周边声音降低等级的处理是使从左麦克风14和右麦克风15获取的周边声音的相位相反，将降低了声压等级的信号与声音输入部13所获取的声音数据合成，并输出到声音输出控制部26。

另外，在上述中，对左声音输出部11和右声音输出部12进行了设为容易听到周边声音的状态的处理，但也可以对左声音输出部11和右声音输出部12中的任一者进行。例如，也可以设定为，对用户在自己的惯用耳朵中使用的声音输出部进行成为容易听到周边声音的状态的处理。

在上述中，作为声音输出装置的一个示例，对头戴式耳机10进行了说明，但不限于此。声音输出装置例如也可以是耳机及颈挂式扬声器等。声音输出装置也能够应用于不具备声音输入部13而仅具有噪声消除功能的电子耳塞装置。

符号说明

1：声音输出系统；

10：头戴式耳机(声音输出装置)；

11：左声音输出部；

12：右声音输出部；

13：声音输入部；

14：左麦克风；

15：右麦克风；

16：传感器；

20：声音输出控制装置；

21：朝向检测部；

22：声音处理部；

23：声音获取部；

24：周边声音获取部；

25：周边声音降低处理部；

26：声音输出控制部。

Claims (17)

1.一种声音输出控制装置，包括：

朝向检测部，检测用户的脸部朝向的状态；

周边声音获取部，获取所述用户的周边声音；

周边声音降低处理部，基于所述周边声音获取部所获取的周边声音，进行降低周边声音的处理；以及

声音输出控制部，在由所述朝向检测部检测出所述用户的脸部朝向的状态为第一状态的情况下，输出由所述周边声音降低处理部降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

2.根据权利要求1所述的声音输出控制装置，其中，

所述第一状态是所述用户的脸部朝向为朝下的状态，

所述第二状态是所述用户的脸部朝向为不朝下的状态。

3.根据权利要求1所述的声音输出控制装置，其中，

所述第一状态是由于所述用户的脸部朝向的变化而产生的加速度小于阈值的状态，

所述第二状态是由于所述用户的脸部朝向的变化而产生的加速度为阈值以上的状态。

4.根据权利要求1至3中任一项所述的声音输出控制装置，其中，还包括判断部，判断所述用户正在使用交通工具，

所述声音输出控制部在所述用户正在使用交通工具的情况下，当所述用户的脸部朝向的状态为所述第一状态时，输出由所述周边声音降低处理部降低了周边声音的声音，当所述用户的脸部朝向的状态从所述第一状态变化为所述第二状态时，设为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

5.一种声音输出控制装置，包括：

视线检测部，检测用户的视线方向；

周边声音获取部，获取所述用户的周边声音；

注视判断部，基于所述视线检测部的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及

声音输出控制部，在所述注视判断部判断为所述用户注视显示了内容的显示画面的情况和判断为未注视的情况下，变更所述周边声音获取部所获取的周边声音的输出的状态并输出声音。

6.根据权利要求5所述的声音输出控制装置，其中，

还包括周边声音降低处理部，其基于所述周边声音获取部所获取的周边声音，对向用户输出声音的声音输出部要输出的声音进行降低周边声音的处理，

所述声音输出控制部在所述注视判断部判断为所述用户正在注视显示了内容的显示画面的情况下，输出由所述周边声音降低处理部降低了周边声音的声音，在判断为所述用户没有注视显示了内容的显示画面的情况下，设为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

7.根据权利要求1至3、6中任一项所述的声音输出控制装置，其中，

所述声音输出控制部不进行所述周边声音降低处理部的周边声音降低处理，来作为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

8.根据权利要求1至3、6中任一项所述的声音输出控制装置，其中，

所述声音输出控制部在不进行所述周边声音降低处理部的周边声音降低处理的情况下输出所述周边声音获取部所获取的周边声音，来作为与由所述周边声音降低处理部降低了周边声音的状态相比更容易听到周边声音的状态。

9.根据权利要求5所述的声音输出控制装置，其中，

还包括声音获取部，获取与所述内容相关的声音，

所述声音输出控制部在所述注视判断部判断为所述用户正在注视显示了内容的显示画面的情况下，输出与所述声音获取部所获取的所述内容相关的声音，在判断为所述用户没有注视显示了内容的显示画面的情况下，输出所述周边声音获取部所获取的周边声音。

10.根据权利要求9所述的声音输出控制装置，其中，

所述声音输出控制部在判断为所述用户没有注视显示了内容的显示画面的情况下，除了所述声音获取部所获取的与所述内容相关的声音以外，还输出所述周边声音获取部所获取的周边声音。

11.根据权利要求5至10中任一项所述的声音输出控制装置，其中，

还包括脸部检测部，其识别所述用户的脸部，并检测识别出的脸部的朝向，

所述声音输出控制部根据判断为所述用户正在注视显示了内容的显示画面、且所述脸部检测部检测出的脸部的朝向是与所述显示画面对置的朝向的情况下、以及在判断为所述用户没有注视显示了内容的显示画面、且所述脸部检测部检测出的脸部的朝向不是与所述显示画面对置的朝向的情况下，变更所述周边声音获取部所获取的周边声音的输出的状态并输出声音。

12.根据权利要求5至11中任一项所述的声音输出控制装置，其中，还包括判断部，判断所述用户正在使用交通工具，当所述用户正在使用交通工具时，所述声音输出控制部根据判断为所述用户注视显示了内容的显示画面的情况、和判断为所述用户没有注视显示了内容的显示画面的情况，而变更所述周边声音获取部所获取的周边声音的输出状态并输出声音。

13.一种声音输出系统，包括：

权利要求1至12中任一项所述的声音输出控制装置；

拾音部，对周边声音进行拾音；以及

声音输出部，输出声音。

14.一种声音输出控制方法，由声音输出控制装置执行，包括以下步骤：

对使用声音输出装置的用户的脸部朝向的状态进行检测；

获取所述用户的周边声音；以及

在所述用户的脸部朝向的状态为第一状态的情况下，基于所获取的周边声音而输出降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与降低了周边声音的状态相比更容易听到周边声音的状态。

15.一种程序，使计算机执行以下步骤：

对使用声音输出装置的用户的脸部朝向的状态进行检测；

获取所述用户的周边声音；以及

在所述用户的脸部朝向的状态为第一状态的情况下，基于所获取的周边声音而输出降低了周边声音的声音，在所述用户的脸部朝向的状态从所述第一状态变化为第二状态的情况下，设为与降低了周边声音的状态相比更容易听到周边声音的状态。

16.一种声音输出控制方法，包括以下步骤：

对使用声音输出装置的用户的视线方向进行检测；

获取所述用户的周边声音；

基于视线方向的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及

在判断为所述用户没有注视显示了内容的显示画面的情况和判断为未注视的情况下，变更周边声音的输出的状态并输出声音。

17.一种程序，使计算机执行以下步骤：

对正在使用声音输出装置的用户的视线方向进行检测；

获取所述用户的周边声音；

基于视线方向的检测结果，判断所述用户是否正在注视显示了内容的显示画面；以及

在判断为所述用户没有注视显示了内容的显示画面的情况和判断为未注视的情况下，变更周边声音的输出的状态并输出声音。

Images