CN115776630A - 在音频输出设备处用信号发送改变事件 - Google Patents

Abstract

公开了一种用于在音频输出设备处用信号发送改变事件的装置、方法和计算机程序。该装置可以包括用于在第一用户设备和第二用户设备之间的音频通信会话期间检测与第一用户设备相关联的第一耳机设备处的改变事件的部件，该第一耳机设备包括第一耳机和第二耳机。该装置还可以包括用于将检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备的部件。

Description

在音频输出设备处用信号发送改变事件

技术领域

示例实施例涉及用于在音频输出设备处用信号发送改变事件的装置、方法和计算机程序，例如在第一用户设备和第二用户设备之间的音频通信会话期间在耳机设备处执行的改变事件。

背景技术

在第一用户设备和第二用户设备之间的音频通信会话期间，用户设备的每个相应用户可以使用输出设备，该输出设备可以包括链接到他们的用户设备的耳机设备。耳机设备可以包括第一耳机和第二耳机，每个耳机被放置在用户的左耳和右耳上、上方或部分入内，并且被配置为输出音频信号，例如作为立体声或空间化音频数据。改变事件，诸如一个用户从他们的耳朵中移除其中一个耳机，可能会影响该用户能够听到的内容，特别是在音频信号包括立体声或空间化音频数据的情况下。

发明内容

本发明的各种实施例寻求的保护范围由独立权利要求来规定。在本说明书中描述的不属于独立权利要求的范围的实施例和特征(如果有的话)将被解释为对理解本发明的各种实施例有用的示例。

根据第一方面，本说明书描述了一种装置，包括用于执行以下操作的部件：在第一用户设备和第二用户设备之间的音频通信会话期间，检测与第一用户设备相关联的第一耳机设备处的改变事件，第一耳机设备包括第一耳机和第二耳机；以及检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备。

第一耳机设备可以被配置为从第二用户设备接收表示立体声或空间化音频内容的第一和第二接收通道，其中检测到的改变事件是降低用户感知接收到的立体声或空间化音频内容的能力的事件。

检测部件可以被配置为检测与第一耳机设备的第一耳机和第二耳机之一被从其耳朵移除相对应的改变事件。

检测部件可以被配置为检测与用户发起使第一和第二接收通道之一静音或衰减的功能相对应的改变事件。

该功能可以是主动降噪系统的直通模式。

信号发送部件可以被配置为通过修改或导致修改由第一用户设备传输到第二用户设备的至少一些音频内容，来用信号发送检测到的改变事件。

第一用户设备可以被配置为将表示立体声或空间化音频内容的第一和第二传输通道传输到第二用户设备，以用于使用第二音频输出设备进行输出，该第二音频输出设备是包括第一耳机和第二耳机的第二耳机设备。

信号发送部件可以被配置为通过修改或导致修改立体声音频内容变成单声道音频内容来用信号发送检测到的改变事件。

信号发送部件可以被配置为通过将单声道音频内容输出到第二耳机设备的第一耳机和第二耳机之一，来指示改变事件与第一耳机设备的第一耳机和第二耳机中的哪一个相关联。

信号发送部件可以被配置为通过修改或导致修改空间化音频内容以变成立体声音频内容，来用信号发送检测到的改变事件。

空间化音频内容可以包括表示第一音频对象要被从特定方向感知的第一通道和表示环境要被从一系列方向感知的第二通道，其中信号发送部件可以被配置为修改或导致修改空间化音频内容变成第一和第二单声道通道，以用于由第二耳机设备的相应第一耳机和第二耳机中的特定耳机输出。

信号发送部件可以被配置为通过第二耳机设备的第一耳机和第二耳机中的特定耳机对第一和第二单声道通道的输出，来指示改变事件与第一耳机设备的第一耳机和第二耳机中的哪一个相关联。

第一通道可以表示用于主要从第一耳机设备的第一耳机的方向输出的语音音频对象，其中响应于检测到改变事件与第一耳机设备的所述第一耳机相关，信号发送部件被配置为通过从第二耳机设备的第二耳机输出第一通道作为单声道通道，来指示所述改变事件。

该装置还可以被配置为使得在检测到第一耳机设备的第一耳机和第二耳机之一被移除之后，它检测由被移除的耳机的一个或多个麦克风对音频信号的拾取高于预定水平，并且响应于此，至少暂时地重新空间化第一和第二通道以供第二耳机设备输出。

信号发送部件可以被配置为引起由第二用户设备的修改。

根据第二方面，本说明书描述了一种方法，包括：在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备处的改变事件，第一耳机设备包括第一耳机和第二耳机；将检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备。

第一耳机设备可以从第二用户设备接收表示立体声或空间化音频内容的第一和第二接收通道，其中检测到的改变事件是降低用户感知接收到的立体声或空间化音频内容的能力的事件。检测可以包括检测与第一耳机设备的第一耳机和第二耳机之一被从其耳朵移除相对应的改变事件。检测可以包括检测与用户发起使第一和第二接收通道之一静音或衰减的功能相对应的改变事件。该功能可以是主动降噪系统的直通模式。

信号发送可以包括通过修改或导致修改由第一用户设备传输到第二用户设备的至少一些音频内容，来用信号发送检测到的改变事件。

第一用户设备可以将表示立体声或空间化音频内容的第一和第二传输通道传输到第二用户设备，以用于使用第二音频输出设备进行输出，该第二音频输出设备是包括第一耳机和第二耳机的第二耳机设备。

信号发送可以包括通过修改或导致修改立体声音频内容以变成单声道音频内容，来用信号发送检测到的改变事件。

信号发送可以包括通过将单声道音频内容输出到第二耳机设备的第一耳机和第二耳机之一，来发信号指示改变事件与第一耳机设备的第一耳机和第二耳机中的哪一个相关联。

信号发送可以包括通过修改或导致修改空间化音频内容以变成立体声音频内容，来用信号发送检测到的改变事件。

空间化音频内容可以包括表示第一音频对象要从特定方向被感知的第一通道和表示环境要从一系列方向被感知的第二通道，其中信号发送可以修改或导致修改空间化音频内容以变成第一和第二单声道通道，以用于由第二耳机设备的相应第一耳机和第二耳机中的特定耳机输出。

信号发送可以包括通过第二耳机设备的第一耳机和第二耳机中的特定耳机对第一和第二单声道通道的输出，来指示改变事件与第一耳机设备的第一耳机和第二耳机中的哪一个相关联。

第一通道可以表示用于主要从第一耳机设备的第一耳机的方向输出的语音音频对象，其中响应于检测到改变事件与第一耳机设备的所述第一耳机相关，信号发送可以通过从第二耳机设备的第二耳机输出第一声道作为单声道通道，来指示所述改变事件。

该方法还可以包括，在检测到第一耳机设备的第一耳机和第二耳机之一被移除之后，检测由被移除的耳机的一个或多个麦克风对音频信号的拾取高于预定水平，并且响应于此，至少暂时地重新空间化第一和第二通道以供第二耳机设备输出。

信号发送可以被配置为引起由第二用户设备的修改。

根据第三方面，本说明书描述了一种计算机程序，包括用于使装置至少执行以下操作的指令：在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备处的改变事件，第一耳机设备包括第一耳机和第二耳机；将检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备。

第三方面的示例实施例还可以提供第二方面的任何特征。

根据第四方面，本说明书描述了一种计算机可读介质(诸如非暂时性计算机可读介质)，包括存储在其上的程序指令，用于执行至少以下操作：在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备处的改变事件，第一耳机设备包括第一耳机和第二耳机；将检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备。

根据第五方面，本说明书描述了一种装置，包括：至少一个处理器；包括计算机程序代码的至少一个存储器，计算机程序代码在由至少一个处理器执行时使装置：在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备处的改变事件，第一耳机设备包括第一耳机和第二耳机；以及将检测到的改变事件用信号发送给第二用户设备、和/或与第二用户设备相关联的第二音频输出设备。

附图说明

现在将参考附图以非限制性示例的方式描述示例实施例，其中：

图1A是第一用户和第二用户用各自的第一耳机设备和第二耳机设备参与通信会话的示意图；

图1B是基于图1A的示意图，指示了第一耳机设备的耳机被移除；

图2是示出可以根据一些示例实施例执行的操作的流程图；

图3是当根据一些示例实施例显示视觉警报时在图1中指示的第二用户设备的平面图；

图4是示出可以根据一些示例实施例执行的操作的又一流程图；

图5A是第一用户和第二用户用各自的第一耳机设备和第二耳机设备参与另一个通信会话的示意图；

图5B是基于图5A的示意图，指示了如何响应于第一耳机设备的耳机被移除而在第二耳机设备处修改音频；

图6A是第一用户和第二用户用各自的第一耳机设备和第二耳机设备参与另一个通信会话的示意图；

图6B是基于图6A的示意图，指示了如何响应于第一耳机设备的耳机拾取声音而在第二耳机设备处修改音频；

图6C是基于图6B的示意图，指示了第二耳机设备如何响应高于预定水平的声音来修改音频；

图7示出了根据示例实施例的装置；和

图8示出了根据示例实施例的非暂时性介质。

具体实施方式

示例实施例可以涉及用于在音频输出设备处用信号发送改变事件的装置、方法和计算机程序，诸如但不限于在通信会话期间在耳机设备处被检测到的改变事件。

具有各自的第一用户设备和第二用户设备的第一用户和第二用户可以在音频通信会话中通过网络进行通信。第一用户和第二用户中的每一个可以使用例如由一对第一耳机和第二耳机组成的耳机设备形式的音频输出设备，例如一个耳机用于右耳，一个耳机用于左耳。示例实施例可以关注于耳机设备的使用，但是应当了解，示例实施例不限于耳机设备的使用，并且可以是本文所提到的音频输出设备，至少对于第二用户来说，可以包括其他形式的音频输出换能器，诸如一对扬声器。

如本文中所使用的，术语耳机设备和耳机可以被广义地解释为涵盖被配置为定位在用户耳朵或耳道上方、邻近或部分位于用户耳朵或耳道内的任何形式的输出换能器，包括作为可佩戴耳机的一部分而被安置的那些输出换能器，诸如虚拟现实(VR)耳机、耳塞组等等。

取决于接收到的音频信号，包括一对这样的耳机的耳机设备可以被用来向用户输出立体声(左声道和右声道)甚至是空间化音频。例如，音频信号可以表示用于经由一个耳机进行单声道输出的一个通道中的单声道音频、用于经由两个耳机作为立体声输出进行输出的两个单声道通道、或由两个双耳化通道组成的空间化音频，其中一个或两个通道还可以包括指示在声场中的何处由相关用户感知音频的元数据。

示例实施例了解，当音频通信会话中涉及的第一用户和第二用户之一影响一事件——诸如移除他们的耳机之一，或者可能调用可能影响他们的耳机之一的音频输出的功能时，针对他们的音频体验可能会变得更加有限。例如，立体声或空间化音频输出可能变成单声道。音频通信会话中的其他用户可能不了解这一点。另一个用户可能正在传达在另一端处无法感知的重要信息。

图1A和图1B示出了对理解示例实施例有用的实际场景。

参考图1A，第一用户100和第二用户102可以通过各自的第一用户设备110和第二用户设备112在通信网络114上建立音频通信会话。

音频通信会话还可以包括伴随的视频数据，即作为视频呼叫的一部分，并且音频通信会话可以不限于仅涉及第一用户100和第二用户102的会话。例如，音频通信会话可以包括涉及三个或更多用户的电话会议或视频电话会议。通信网络114可以包括互联网协议(IP)网络或另一种形式的网络，诸如涉及使用连接到核心网络的一个或多个传输点(TRP)的蜂窝无线电接入网络(RAN)。

第一用户100可以使用包括第一耳机120A和第二耳机120B的第一耳机设备120听到来自第二用户102的音频。可以通过第一耳机120A和/或第二耳机120B的一个或多个麦克风或其附件，来捕获来自第一用户100的音频以作为通信会话的一部分进行传输。替代地或附加地，音频可以由第一用户设备110的一个或多个麦克风捕获。实际上，在示例实施例中，从第一用户100捕获的音频可以包括涉及使用在第一耳机120A、第二耳机120B和/或第一用户设备110中的一个或多个上的多个麦克风来捕获的立体声或空间化音频。第一耳机设备120可以与第一用户设备110相关联，例如通过有线连接或使用根据合适的无线协议配对或链接的无线连接，例如蓝牙、Zigbee或WiFi，例如使用IEEE802.11通信标准。

在示例实施例中，第二用户102可以使用包括第一耳机122A和第二耳机122B的第二耳机设备122听到来自第一用户100的音频。为避免疑问，并且与上述类似，可以由第一耳机122A和/或第二耳机122B的一个或多个麦克风进行来自第二用户102的音频捕获，以用于作为音频通信会话的一部分进行传输。替代地或附加地，音频可以由第二用户设备112的一个或多个麦克风捕获。实际上，在示例实施例中，从第二用户102捕获的音频可以包括涉及使用在第一耳机122A、第二耳机122B和/或第二用户设备112中的一个或多个上的多个麦克风捕获的立体声或空间化音频。第二耳机设备122可以与第二用户设备112相关联，例如通过有线连接或使用根据合适的无线协议配对或链接的无线连接，例如蓝牙、Zigbee或WiFi，例如使用IEEE802.11通信标准。

第一用户设备110和第二用户设备112可以包括能够至少向它们各自的耳机设备提供音频数据的任何处理设备，即120、122，用于输出，并且用于将所捕获的音频数据传输到通信网络114以用于作为音频通信会话的一部分向前传输。

第一用户设备110和第二用户设备112中的每一个可以是例如智能手机、数字助理、数字音乐播放器、个人计算机、膝上型计算机、平板计算机或诸如智能手表之类的可穿戴设备。

第一用户设备110和第二用户设备112还可以包括一个或多个处理器或控制器、一个或多个存储器以及用于编码/解码音频数据的编码器/解码器。第一用户设备110和第二用户设备112可以能够经由网络来与第三方建立通信会话，例如，音频或视频会议或语音通话。第一用户设备110和第二用户设备112可以被配置为使用用于3G、4G、LTE、5G的协议或任何下一代通信协议通过通信网络114传输和接收数据。第一用户设备110和第二用户设备112可以包括用于与外部设备通信的一个或多个天线。

第一耳机设备120和第二耳机设备122中的一者或二者还可以包括用于阻止至少一些环境声音到达用户耳朵的被动和/或主动降噪(ANR)特征或功能。如将了解的，来自耳机设备外部的噪声产生源的环境声音可能会分散注意力。ANR特征可以包括ANR系统，它是与一个或多个麦克风和一个或多个扬声器相关联的电气或电子系统。ANR系统执行信号处理，例如通过处理由一个或多个麦克风接收的环境声音，以便生成用于由一个或多个扬声器输出的抵消信号。抵消信号通过相消干涉的方式在其被输出时起到减少或抵消用户对环境声音的感知的作用。例如，ANR系统可以生成与接收到的环境声音反相的抵消信号。一些ANR系统还提供直通模式(有时被称为直通收听或透明模式)，其中允许一些环境声音通过而不被抵消。

在图1A的场景中，第一用户设备110可以从第二用户设备112接收作为音频通信会话的一部分的立体声或空间化音频(反之亦然)。

例如，对于立体声音频，所接收的信号可以包括用于由第一耳机设备120的第一耳机120A和第二耳机120B分别输出的第一和第二接收通道。例如，第一通道可以主要包括第二用户的语音的单声道表示并且第二声道可以包括第二用户102周围的环境的环境声音的单声道表示。这种布置可以被称为近远立体声。

例如，对于空间化音频，空间信息可以与第一和第二通道中的一者或二者相关联，使得通道中的一者或两者的输出“放置”音频信号的双耳化版本，以被感知为来自相对于用户的特定方向。例如，空间信息可以包括与第一通道相关联的元数据，使得当由第一耳机设备120渲染时，第二用户的语音的双耳化版本被感知为来自特定方向。在这方面，一种已知的编解码器是沉浸式语音和音频服务(IVAS)编解码器，它可以使用元数据辅助空间音频(MASA)以将音频放置在接收用户的空间场中。

现在参考图1B，可以看出第一耳机设备120的第一耳机120A已经从第一用户的耳朵中被移除，如箭头124所指示。这个改变事件可能是因为第一用户100希望与第三人130交谈，同时保持音频通信会话。然而，这可能意味着一些立体声或空间化音频内容无法被听到，并且通过第二耳机120B将其感知为单声道回放。

这对于可能认为第一用户100仍在体验立体声或空间化回放的第二用户102来说并不明显，并且可能第一用户100因此错过了一些重要或有趣的信息。同时，第二用户102可能会继续体验来自第一用户100的立体声或空间化回放。

示例实施例可以缓解或缓和这个问题，使得(在这种情况下)第二用户102能够意识到这样的改变，以改进可能彼此远离的第一用户和第二用户之间的通信、交互和一般环境意识。这可以在第一用户100不必口头通知第二用户102改变事件的情况下而被执行。

参考图2，示出了根据一个或多个示例实施例的指示例如可以由第一用户设备110执行的处理操作的流程图。处理操作可以通过硬件、软件、固件或它们的组合来执行。在一些实施例中，可能在存储在存储器上的计算机可读指令(软件代码)的控制下，处理操作可以由第一用户设备110的一个或多个控制器或处理器执行。第二用户设备112也可以执行处理操作，但是以下将关注于第一用户设备110的操作。

第一操作201可以包括：在第一用户设备110和第二用户设备112之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备120处的改变事件。第一耳机设备可以包括第一耳机120A和第二耳机120B。

第二操作202可以包括将检测到的改变事件用信号发送给第二用户设备112和/或与第二用户设备相关联的第二音频输出设备。包括第一耳机122A和第二耳机122B的上述第二耳机设备122是与第二用户设备112相关联的第二音频输出设备的示例。

在一些示例实施例中，第一耳机设备120被配置为从第二用户设备112接收表示立体声或空间化音频内容的第一和第二接收通道，其中检测到的改变事件是降低用户感知接收到的立体声或空间化的音频内容的能力的事件。换句话说，检测到的改变事件可以是导致在第一耳机设备120的呈现能力或呈现模式发生改变的事件。

例如，第一操作201可以包括检测与用户(所示示例中的第一用户100)从其耳朵移除第一耳机120A和第二耳机120B之一相对应的改变事件。第一操作201可以类似地包括检测第一耳机120A和第二耳机120B之一意外地从其耳朵脱离。

例如，第一操作201可以附加地或替代地包括检测与用户发起使第一和第二接收通道之一静音或衰减的功能相对应的改变事件。例如，该功能可以是ANR系统的直通模式。

在一些示例实施例中，第二操作202可以涉及将音频和/或视觉警报用信号发送给第二用户设备112。

例如，信号发送可以涉及向第二用户设备112发出音调，以用于经由第二耳机设备122的第一耳机122A和第二耳机122B中的一者或两者进行输出。

例如，并参考图3，信号发送可以包括在第二用户设备112的用户界面302上显示指示改变事件的第一视觉警报304。在任一情况下，音频警报和/或第一视觉警报304的性质可以指示特定的改变事件，例如发声或显示“用户A已移除右耳机”或类似内容。

在音频警报的情况下，可以仅由第一耳机122A和第二耳机122B之一输出音频警报，以指示另一端处的改变事件。例如，这可以通过在与在另一端处的(未移除的)第二耳机120B相对应的第二耳机122B中发出警报，或者反之亦然，只要惯例是已知的。

参考图4，示出了根据一个或多个其他示例实施例的指示例如可以由第一用户设备110执行的处理操作的流程图。处理操作可以通过硬件、软件、固件或它们的组合来执行。在一些实施例中，处理操作可以由第一用户设备110的一个或多个控制器或处理器执行。第二用户设备112也可以执行处理操作，但是以下将关注于第一用户设备110的操作。

第一操作401，参照图2的方法，可以包括：在第一用户设备110和第二用户设备112之间的音频通信会话期间，检测在与第一用户设备相关联的第一耳机设备120处的改变事件。第一耳机设备可以包括第一耳机120A和第二耳机120B。

第二操作402可以包括：通过修改或导致修改由第一用户设备110传输到第二用户设备112的作为音频通信会话的一部分(即，包括语音)的至少一些音频内容，来将检测到的改变事件用信号发送给第二用户设备112和/或与第二用户设备相关联的第二音频输出设备。

可以在第一用户设备110处执行要在本文中描述的修改。替代地或附加地，可以响应于来自第一用户设备110的信号发送，来在第二用户设备112处执行修改。第二用户设备112可以接收在第一和第二通道中最初被传输的音频内容，但是响应于接收到的信号发送以修改的方式渲染通道。

例如，第一用户设备110可以被配置为将表示立体声或空间化音频内容的第一和第二传输通道传输到第二用户设备112，以用于使用包括第一耳机122A和第二耳机122B的第二耳机设备122输出。

例如，信号发送可以通过修改或导致修改立体声音频内容以变成单声道音频内容，来用信号发送检测到的改变事件。也就是说，第一和第二传输信道中的一者可能不被传输，或者所述传输信道可能被第二用户设备112静音、衰减或根本不渲染。

例如，信号发送可以被配置为通过将单声道音频内容输出到第二耳机设备122的第一耳机122A和第二耳机122B中的一个，来指示改变事件与该第一耳机设备120的第一耳机120A和第二耳机120B中的哪一个相关联。

以图1B为示例，改变事件与第一耳机设备120的第一耳机120A相关联，并且因此信号发送可以修改或导致修改以使得第一通道不由第二耳机设备122的第一耳机122A输出。第一通道可能根本不被输出，或者它可以被移动到第二耳机122B以取代第二通道。

例如，信号发送可以通过修改或导致修改空间化音频内容以变成立体声音频内容(例如，上面提及的近远立体声)，来用信号发送所检测到的改变事件。

例如，空间化音频内容可以包括表示第一音频对象要从特定方向被感知的第一通道、以及表示环境要从一系列方向被感知的第二通道。信号发送可以修改或导致修改以使得空间化音频内容被转换为第一和第二单声道通道，以用于由第二耳机设备122的相应第一耳机122A和第二耳机122B中的特定耳机输出。

信号发送可以被配置为通过由第二耳机设备122的第一耳机122A和第二耳机122B中的特定耳机对第一和第二单声道通道的输出，来指示改变事件与该第一耳机设备120的第一耳机120A和第二耳机120B中的哪一个相关联。

例如，并参考图5A，考虑第一传输通道表示用于主要从第二耳机设备122的第一耳机122A的方向输出的语音音频对象500，并且第二传输通道表示要从第二用户102周围的一系列方向被感知的环境502的情况。

现在，参考图5B，响应于检测到改变事件与第一耳机设备120的第一耳机120A相关，在这种情况下，所述耳机被移除，信号发送可以被配置为通过如下方式来指示所述改变事件：从第二耳机设备122的第二耳机122B将第一通道作为单声道输出，以指示在第一耳机设备120处的事件。第二用户102可以按照惯例理解这意味着什么。此外，表示环境502的第二传输通道可以作为单声道通道，而从第二耳机设备122的第一耳机122A被输出。总的来说，从空间化音频到近远立体声音频的切换向用户指示事件已经发生，并且将第一语音音频固定到第二耳机122B指示该事件与第一耳机设备120的第一耳机120A相关。

在检测到包括第一耳机设备120的第一耳机120A和第二耳机120B之一被移除的改变事件之后，可以被执行的另一个示例实施例中，另一个操作可以包括：检测由被移除的耳机的一个或多个麦克风对音频信号的拾取。例如，所拾取的音频信号可以在单声道传输通道中被传输到第二耳机设备122的对应的耳机122A、122B。例如，如果所拾取的音频信号高于预定水平，和/或，对于预定时间段内，它可以触发第一和第二单声道通道的重新空间化，以供第二耳机设备122的第一耳机122A和第二耳机122B输出。这可以暂时地被执行。

例如，参考图6A-图6C，将可以看出图6A对应于图5B，其中第一耳机设备120的第一耳机120A已被移除。参考图6B，第一用户100可以注意到一些有趣的音频对象600并且使用所述第一耳机120A作为特写麦克风(close-up microphone)将来自音频对象的声音传达到第二用户102。在这种情况下，除了环境502之外，这可以通过第一传输通道将声音传输到第二用户102的第一耳机122A，来输出对应的音频对象602。参考图6C，当高于预定水平时，可以至少暂时地执行重新空间化，使得返回到图5A的场景，附加音频对象602被放置在第二用户102的空间声场中。重新空间化的暂时性质用于提醒第二用户102：第一用户100尚未将耳机120A重新放置在他们的耳朵里。

为了完整性，为了检测第一耳机120A和第二耳机120B中的一个已经从用户的耳朵中被移除，可以采用各种方法。

例如，可以提供安装在耳机的耳塞部分处或耳塞部分内的光电检测器。当与用户的耳朵正确接合时，光电检测器被覆盖，并且因此将接收到很少的光或者不接收光，并且因此很少或没有信号被发送到控制器以感测移除。当耳机被移除时，一些环境光将被光电检测器接收，并且因此一些信号被发送到控制器。如果高于阈值，控制器可以发出移除信号。

附加地或替代地，耳机被移除的检测可以基于音频处理。例如，控制器可以被配置为基于音频处理来测量耳机的耳塞部分的参考部分与用户的耳鼓之间的距离，并监控该距离以识别指示已移除状况的特定距离。

附加地或替代地，可以在每个耳机中提供定向传感器以确定使用中或移除状态。

因此，示例实施例提供了一种直观的方式来通知远程用户关于可能影响另一个用户理解或了解一部分音频通信会话的能力的事件。示例实施例可以涉及用信号不仅发送事件，而且还基于从它们接收到的音频如何被修改来用信号发送事件的性质。

示例装置

图7示出了根据一些示例实施例的装置，如果被配置为执行本文公开的操作，则该装置可以包括第一用户设备110和第二用户设备112中的一者或两者。该装置可以被配置为执行本文所描述的操作，例如参考任何公开过程所描述的操作。该装置包括至少一个处理器700和至少一个与处理器直接或紧密连接的存储器701。存储器701包括至少一个随机存取存储器(RAM)701a和至少一个只读存储器(ROM)701b。计算机程序代码(软件)705被存储在ROM 701b中。该装置可以连接到发射器(TX)和接收器(RX)。该装置可以可选地与用于指使该装置和/或用于输出数据的用户界面(UI)连接。具有至少一个存储器701和计算机程序代码705的至少一个处理器700被布置成使该装置至少执行根据任何前述过程的至少方法，例如正如关于图2和/或4的流程图及其相关特征所公开的。

图8示出了根据一些实施例的非暂时性介质800。非暂时性介质800是计算机可读存储介质。它可以是例如CD、DVD、USB记忆棒、蓝光光盘等。非暂时性介质800存储计算机程序代码，使装置执行任何前述过程的方法，例如如关于图2和/或4的流程图及其相关特征所公开的。

网络元件、协议和方法的名称基于当前标准。在其他版本或其他技术中，这些网络元件和/或协议和/或方法的名称可以不同，只要它们提供对应的功能性即可。例如，实施例可以被部署在2G/3G/4G/5G网络和3GPP的其他世代中，但是也可以被部署在诸如WiFi之类的非3GPP无线电网络中。

存储器可以是易失性或非易失性的。它可以是例如RAM、SRAM、闪存、FPGAblockram、DCD、CD、USB记忆棒和蓝光光盘。

如果没有另外说明或从上下文中明确说明，两个实体不同的陈述意味着它们执行不同的功能。这并不一定意味着它们基于不同的硬件。也就是说，本说明书中描述的每个实体可以基于不同的硬件，或者一些或所有实体可以基于相同的硬件。这并不一定意味着它们基于不同的软件。也就是说，本说明书中描述的每个实体可以基于不同的软件，或者一些或所有实体可以基于相同的软件。本说明书中描述的每个实体可以被体现在云中。

作为非限制性示例，任何上述块、装置、系统、技术或方法的实现包括作为硬件、软件、固件、专用电路或逻辑、通用硬件或控制器或其他计算设备的实现或它们的一些组合。一些实施例可以在云中实现。

应当理解，以上描述的是目前认为的优选实施例。然而，应当注意，优选实施例的描述仅作为示例被给出，并且可以在不脱离所附权利要求限定的范围的情况下进行各种修改。

Claims (15)

1.一种控制音频信号的装置，包括用于执行以下操作的部件：

在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与所述第一用户设备相关联的第一耳机设备处的改变事件，所述第一耳机设备包括第一耳机和第二耳机；

将检测到的改变事件用信号发送给所述第二用户设备、和/或与所述第二用户设备相关联的第二音频输出设备。

2.根据权利要求1所述的装置，其中所述第一耳机设备被配置为从所述第二用户设备接收表示立体声或空间化音频内容的第一和第二接收通道，其中所述检测到的改变事件是降低用户感知接收到的立体声或空间化音频内容的能力的事件。

3.根据权利要求2所述的设备，其中所述检测部件被配置为检测与所述第一耳机设备的所述第一耳机和所述第二耳机之一被从其耳朵移除相对应的改变事件。

4.根据权利要求2或3所述的设备，其中所述检测部件被配置为检测与用户发起使所述第一和第二接收通道之一静音或衰减的功能相对应的改变事件。

5.根据权利要求4所述的装置，其中所述功能是主动降噪系统的直通模式。

6.根据权利要求3所述的装置，其中所述信号发送部件被配置为通过修改或导致修改由所述第一用户设备传输到所述第二用户设备的至少一些音频内容，来用信号发送检测到的改变事件。

7.根据权利要求6所述的装置，其中所述第一用户设备被配置为将表示立体声或空间化音频内容的第一和第二传输通道传输到所述第二用户设备，以用于使用所述第二音频输出设备进行输出，所述第二音频输出设备是包括第一耳机和第二耳机的第二耳机设备。

8.根据权利要求7所述的装置，其中所述信号发送部件被配置为通过修改或导致修改立体声音频内容以变成单声道音频内容，来用信号发送检测到的改变事件。

9.根据权利要求8所述的装置，其中所述信号发送部件被配置为通过将所述单声道音频内容输出到所述第二耳机设备的所述第一耳机和第二耳机之一，来指示所述改变事件与所述第一耳机设备的所述第一耳机和第二耳机中的哪一个相关联。

10.根据权利要求7所述的装置，其中所述信号发送部件被配置为通过修改或导致修改空间化音频内容以变成立体声音频内容，来用信号发送所述检测到的改变事件。

11.根据权利要求10所述的装置，其中所述空间化音频内容包括表示第一音频对象要从特定方向被感知的第一通道、以及表示环境要从一系列方向被感知的第二通道，其中所述信号发送部件被配置为修改或导致修改所述空间化音频内容以变成第一和第二单声道通道，以用于由所述第二耳机设备的相应的所述第一耳机和第二耳机中的特定耳机输出。

12.根据权利要求11所述的装置，其中所述信号发送部件被配置为通过由所述第二耳机设备的所述第一耳机和第二耳机中的特定耳机对所述第一和第二单声道通道的输出，来指示所述改变事件与所述第一耳机设备的所述第一耳机和第二耳机中的哪一个相关联。

13.根据权利要求12所述的装置，其中所述第一通道表示用于主要从所述第一耳机设备的所述第一耳机的方向输出的语音音频对象，其中响应于检测到所述改变事件与所述第一耳机设备的所述第一耳机相关，所述信号发送部件被配置为通过从所述第二耳机设备的所述第二耳机输出所述第一通道作为单声道通道，来指示所述改变事件。

14.根据权利要求11至13中任一项所述的装置，还包括：在检测到所述第一耳机设备的所述第一耳机和第二耳机之一被移除之后，检测由被移除的耳机的一个或多个麦克风对音频信号的拾取高于预定水平，并且响应于此，至少暂时地重新空间化所述第一和第二通道以供所述第二耳机设备输出。

15.一种控制音频信号的方法，所述方法包括：

在第一用户设备和第二用户设备之间的音频通信会话期间，检测在与所述第一用户设备相关联的第一耳机设备处的改变事件，所述第一耳机设备包括第一耳机和第二耳机；

将检测到的改变事件用信号发送给所述第二用户设备、和/或与所述第二用户设备相关联的第二音频输出设备。

Images