CN111818418A - 一种耳机背景显示方法与系统 - Google Patents

Abstract

本发明涉及一种耳机背景显示方法与系统。本发明首先判断耳机正在播放的内容是否是用户需要集中精神听的内容，若是，提示他人不要打扰；若否，提示可以与用户对话；当耳机检测到有语音输入，判断说话者是否正在与戴耳机的用户对话，所述耳机对说话者和用户进行提示；戴耳机的人都会给人一种距离感，让人不敢打扰这样的用户。但是如果耳机能够根据身边的人给于相应的提示，鼓励他人打招呼，或者提示别人不要打扰，则能给他人更多的决策权利。本发明基于这个出发点，让耳机具有更好的提示功能，并根据不同的人给于不同的提示。

Description

一种耳机背景显示方法与系统

技术领域

本发明涉及计算机应用技术领域，尤其涉及一种耳机背景显示方法与系统。

背景技术

带耳机在地铁、教室、或者具有社交场合的地点，都容易遗漏别人与你的对话。 可能因为别人以为用户会听不见或者怕打扰了用户接听电话听音乐等，不敢对用户说话。或者因为确实耳机内的音乐或者英语或者节目等会影响听清楚身边的人的对话内容。因此戴耳机时要进行沟通其实对旁人来说，是需要考虑一下是否会打扰戴耳机的人的。

发明专利201611192853.5耳机监听环境音的方法，在生活中带上耳机就能听到别人的声音，不需要取下耳机给用户造成麻烦和避免不能听到身边人的谈话声，还有很方便就可以与周围人沟通。在需要与身边人沟通时它通过先打开耳机监听环境音的开关，接着采集到了周围的声音，先将声音从第一模拟信号转换为第一数字信号，接着侧音模块调用SBC音频编码算法将第一数字信号转换为第二数字信号，最后将第二数字信号再处理为模拟信号通过扬声器播放，就成功实现了对环境音的监听。但他只是从自身角度去解决旁人的对话问题，没有给身边的人显示提示信息，让身边的人可以放心与用户交流或者根据身边的人的说话意图自动调整等功能。

本发明实施例提供的技术方案可以包括以下有益效果：

因此，需要被别人了解自己是否希望被打扰。当希望别人可以直接跟自己对话时。耳机要显示相应的显示屏。例如‘音量小，可以对我说话’等，让别人愿意跟你说话。或根据别人的说话声，调低音乐声。

在耳机上设置屏幕，或者 颜色，展示音量和是否接受打扰。显示屏也可以用于显示正在听什么音乐，因为这种显示还可能遇到志同道合有共同爱好的朋友。

本发明能够让耳机变得更有亲和力，避免了戴耳机就导致拒人千里的感觉。而是让别人知道我依然在接收外界信息的，可以跟我对话交流。但是当用户不想被打扰，也可以关闭该功能，给出“不接受打扰”的提示，减少被别人打扰。

发明内容

本发明提供了一种耳机背景显示方法与系统用于通过耳机背景显示屏提醒别人当前是否接受打扰。

本发明提供了一种耳机背景显示方法与系统，主要包括以下步骤：

判断耳机正在播放的内容是否是用户需要集中精神听的内容，若是，提示他人不要打扰；若否，提示可以与用户对话；当耳机检测到有语音输入，判断说话者是否正在与戴耳机的用户对话，所述耳机对说话者和用户进行提示；所述用户是指，佩戴耳机的人，所述说话者是指对戴耳机的用户说话的旁人。

进一步可选地，如上所述的方法中，所述判断耳机正在播放的内容是否是用户需要集中精神听的内容，主要包括：

在耳机上设置有‘免打扰’按钮，或者在手机播放器上设计有‘免打扰’按钮；当用户在听节目过程中，按下‘免打扰’按钮，则将所述节目标注为重要内容，确定用户此时不希望被打扰；并且耳机背景显示屏显示文字为‘请勿打扰’。

进一步可选地，如上所述的方法中，所述判断耳机正在播放的内容是否是用户需要集中精神听的内容，主要还包括：

获取耳机正在播放的内容，通过训练好的机器学习模型判断正在播放的内容，是否是用户需要集中精神去听；

所述机器学习模型训练数据的获得，是根据用户在播放节目时，是否按下“免打扰”按钮作为标注值，并基于所述标注数据，进行训练。

进一步可选地，如上所述的方法中，所述若是，提示他人不要打扰；若否，提示可以与用户对话，主要包括：

若不接受打扰，通过耳机背景显示屏，显示不希望被打扰的文本信息；

若接受打扰，通过耳机背景显示屏，显示可以与用户进行对话的文本信息。

进一步可选地，如上所述的方法中，所述当检测到有语音输入，判断说话者是否正在与戴耳机的用户对话，主要包括：

通过耳机话筒检测是否能够接受到语音内容输入，所述语音内容排除用户本身的语音；

当检测到有语音输入，通过耳机的摄像头检测周围是否有人面向用户说话，若有，确定有人在对用户讲话。

进一步可选地，如上所述的方法中，所述耳机对说话者和用户进行提示，主要包括：

判断说话者的身份，根据身份信息给于说话者和用户不同的提示内容；

进一步可选地，如上所述的方法中，所述判断说话者的身份，主要包括：

通过手机API接口，获取用户所有手机照片，对所述照片进行人脸识别，对识别出的人脸出现次数最多的人物，确定为用户最熟悉的人；并对所有识别到的人物做熟悉程度排序。

进一步可选地，如上所述的方法中，所述根据身份信息给于说话者和用户不同的提示内容 ，主要包括：

根据说话者与用户的熟悉程度或者根据用户自定义设置，对不同身份的人给于不同的提醒；

所述提醒，采用耳机背景显示屏对说话者进行提醒，或者将文本转化为语音进行提醒；当说话者说的话，用户没有答复，则对用户进行提示。

进一步可选地，如上所述的方法中，所述当用户没有答复，对用户进行再次提示，主要包括：

判断用户是否对耳机有语音输入，来确定用户是否对说话者做出答复；若没有答复，通过自动调低耳机音量，录制对话者的对话内容，并再次播放说话者说的话的内容，对用户进行提醒。

本发明提供了一种耳机背景显示系统，所述系统包括：

根据节目内容进行背景显示模块，用于根据耳机佩戴者正在听的节目内容，确定是否可以接收打扰；

对话者检测模块，用于检测是否有人对耳机佩戴者讲话，并识别身份特征；

对话者提示模块，用于根据身份特征调整提示内容；

耳机佩戴者提示模块，用于对佩戴者进行提示。

本发明实施例提供的技术方案可以包括以下有益效果：

当前的戴耳机的人都会给人一种距离感，让人不敢打扰这样的用户。但是如果耳机能够根据身边的人给于相应的提示，鼓励他人打招呼，或者提示别人不要打扰，则能给他人更多的决策权利。本发明基于这个出发点，让耳机具有更好的提示功能，并根据不同的人给于不同的提示。

附图说明

图1为本发明的耳机背景显示方法实施例的流程图。

图2为本发明的耳机背景显示系统实施例的结构图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。

图1为本发明的一种耳机背景显示方法的流程图。如图1所示，本实施例一种耳机背景显示方法具体可以包括如下步骤：

步骤101，训练机器学习模型用于判断正在播放的内容，是否是用户需要集中精神去听的内容。

所述的用户是指，佩戴耳机的人，所述说话者是指对戴了耳机的用户说话的旁人。

具体的，获取耳机播放节目内容，当内容是属于需要聚精会神听的节目时，用户通过按下耳机上或者手机播放器上的标注按钮，进行标注。例如，当用户在听学英语听对话时，用户通过点击或者按下按钮进行数据标注，所述按钮用于对获取到的节目内容进行记录和对正在播放的节目打上相应标签。当按了按钮之后，通过耳机获取用户是否在播放节目的时候，与他人对话或者是否切换或者是否关闭节目，来结束标注的节目内容。所述对话排除外语学习的口语练习，当用户输入的语音为外语，并且检测到用户说话的时间和节奏持续稳定时，判断为正在进行口语练习。另一个例子，假如用户打开一段交响乐，并按下“免打扰”的按钮，于是交响乐类型的音乐被标注为重要节目。十分钟后，用户切换节目或者开始与其他人对话，则系统自动结束标注，系统将这段音频节目的内容和标注结果记录到数据库中，所述播放时长，作为所述节目内容的重要度特征，一并存储。假如用户播放音乐时，没有按下“免打扰”的按钮，则所述音乐会被标注为不重要的内容，表示播放这种类型的内容时可以被打扰。在预设的时间段内，用户需要通过按钮标注数据，以提供模型训练。例如，在最初使用该耳机的一个月时间段内，需要标注。过了一个月后，就可以基于模型自动判断了。所述数据样例类似下面的数据内容：

在预设时间段，例如1个月结束之后，系统获得了大量的用户习惯和标注数据，因此不需要再次学习。用户无需再自己标注数据。

所述训练方法，采用线性回归模型。训练好的模型，可以在用户再次输入一个节目片段时，通过回归算法y = w'x+e，e为误差服从均值为0的正态分布，来判断针对用户来说，该节目对用户的重要程度。确实是否愿意接受打扰。

步骤102，判断耳机正在播放的内容是否是用户需要集中精神听的内容。通过步骤101训练好的模型，判断当前用户播放的节目是否是重要内容，判断是否接受打扰，

若不接受打扰，通过耳机背景显示屏显示不希望被打扰的文本信息；例如“正在背英语，请勿打扰” 或者如果耳机较小，则在较小的屏幕中，显示‘勿扰’。

若接受打扰，通过耳机背景显示屏显示可以与用户进行对话的文本信息；“声音很小，你可以跟我讲话的”

步骤103，当检测到周围有语音输入，判断说话者是否正在与戴耳机的用户对话，主要包括：

通过耳机的话筒检测是否有语音内容输入，所述语音内容排除用户本身的语音；首先获取用户本身的说话音色，通过librosa工具包对用户自身的音频信号进行识别，对音频信息进行采样，通过调用MFCC函数，提取出音色特征，当获得的语音输入的音色与用户自身音色一致，则确定语音来自用户自身，若输入的语音音色与用户自身语音音色有差异，则确定附近有人在讲话。但是还不清楚是否是在对用户讲话。可能是对其他人说话跟用户无关的。

进一步的，当检测到周围有语音输入，通过安装在耳机上的摄像头检测周围是否有人面向用户说话，若有，确定有人在对用户讲话。通过耳机上的摄像头，获取周围的图像信息，确定是否存在人脸，而且人脸角度正对着用户。通过opencv中的人脸识别模块，识别摄像头获取的人脸图像，并基于人脸图像，再通过cvGetAffineTransform函数，对人脸图像进行角度判断，以判断对话者是否是正在对着用户讲话。

步骤104，判断说话者的身份。

当确定附近有对话者正对着用户讲话，通过人脸识别技术，判断对话者是否是用户熟悉的人；

所述判断方法，通过手机API接口，获取用户所有手机照片，对所述照片进行人脸识别，对识别出的人脸出现次数最多的人物，确定为用户最熟悉的人；并对所有识别到的人物做熟悉程度排序。具体的，通过获取手机照片中的所有照片，对照片中的人物进行人脸识别，对识别到的人脸进行编号，并统计识别到的各个编号的频率。对人脸编号进行降序排序。人脸识别到最多次数的，确定为对用户最重要或者最熟悉的人。当所述对话者的人脸没有出现在手机照片中，则确定为陌生人或者不常接触的人。例如，手机中有大量的照片是拍摄用户的丈夫和同事的工作情景的，通过人脸识别，丈夫有100张照片，丈夫的人脸编号为01，同事A的编号为02，拍摄到是人脸照片9张，同事B的编号为03，拍摄到他的人脸照片3张，通过排序可以知道，熟悉程度排序为，丈夫大于同事A，同事A大于同事B。

步骤105，根据说话者与用户的熟悉程度或者根据用户自定义设置，对不同身份的人给于不同的提醒；

所述提醒，采用耳机背景显示屏对说话者进行提醒，或者将文本转化为语音进行提醒；当获取了用户的身份后，可以根据预设的提醒规则对打招呼的人，在耳机背景显示屏上进行提醒。例如，系统根据用户的喜好，设置熟悉程度大于排序前50%时，提醒内容为‘稍等，我听完很快答复你’，当熟悉程度小于排序前50%时，提醒内容为‘请勿打扰’

或者针对用户设置针对性的提醒，例如针对陌生人，耳机背景屏幕显示“稍等”或“先不要打扰我”的提醒。针对特定的重要的人显示“我在的，请您继续说”

步骤106，当用户没有对说话者进行答复，则对用户进行提示；

当说话者对戴耳机的用户说话，但是带耳机的用户因为音量过大或者分神而没有听到，这时耳机需要对用户进行提醒。判断用户是否对耳机有语音输入，来确定用户是否对说话者做出答复；若没有答复，通过自动调低耳机音量，录制对话者的对话内容，并再次播放说话者说的话的内容，对用户进行提醒。例如，当对话者对用户说了一句话，“请问你是明明吗”在N秒内用户依然没有回答，可能是因为他真的专注在听耳机内的音频内容，没有注意到，或者音量过大，他没有听到别人的打招呼信息。这时耳机通过识别用户身份，并通过语音的方式在耳机内播放，提醒用户有“熟人”正向其打招呼。接着通过软件的内部音量控制，自动将耳机音量调小，通过对已经录下来的对话者说的对话内容，把说话内容重新播放出来，让用户可以更加清楚再次听到对话内容，无需再让对话者再重复一次。这样能够方便用户做出反应和回答。

用于实现本发明进行信息控制的程序，可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、python、C++，还包括常规的过程式程序设计语言—诸如C语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机（例如利用因特网服务提供商来通过因特网连接）。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）或处理器（processor）执行本发明各个实施例所述方法的部分步骤。

而前述的存储介质包括：U盘、移动硬盘、只读存储器（Read-Only Memory，ROM）、随机存取存储器（Random Access Memory，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (10)

1.一种耳机背景显示方法，其特征在于，所述方法包括：

判断耳机正在播放的内容是否是用户需要集中精神听的内容，若是，提示他人不要打扰；若否，提示可以与用户对话；当耳机检测到有语音输入，判断说话者是否正在与戴耳机的用户对话，所述耳机对说话者和用户进行提示；所述用户是指，佩戴耳机的人，所述说话者是指对戴耳机的用户说话的旁人。

2.根据权利要求1所述的方法，其中，所述判断耳机正在播放的内容是否是用户需要集中精神听的内容，主要包括：

在耳机上设置有‘免打扰’按钮，或者在手机播放器上设计有‘免打扰’按钮；当用户在听节目过程中，按下‘免打扰’按钮，则将所述节目标注为重要内容，确定用户此时不希望被打扰；并且耳机背景显示屏显示文字为‘请勿打扰’。

3.根据权利要求1所述的方法，其中，所述判断耳机正在播放的内容是否是用户需要集中精神听的内容，主要还包括：

获取耳机正在播放的内容，通过训练好的机器学习模型判断正在播放的内容，是否是用户需要集中精神去听；

所述机器学习模型训练数据的获得，是根据用户在播放节目时，是否按下“免打扰”按钮作为标注值，并基于所述标注数据，进行训练。

4.根据权利要求1所述的方法，其中，所述若是，提示他人不要打扰；若否，提示可以与用户对话，主要包括：

若不接受打扰，通过耳机背景显示屏，显示不希望被打扰的文本信息；

若接受打扰，通过耳机背景显示屏，显示可以与用户进行对话的文本信息。

5.根据权利要求1所述的方法，其中，所述当检测到有语音输入，判断说话者是否正在与戴耳机的用户对话，主要包括：

通过耳机话筒检测是否能够接受到语音内容输入，所述语音内容排除用户本身的语音；

当检测到有语音输入，通过耳机的摄像头检测周围是否有人面向用户说话，若有，确定有人在对用户讲话。

6.根据权利要求1所述的方法，其中，所述耳机对说话者和用户进行提示，主要包括：

判断说话者的身份，根据身份信息给于说话者和用户不同的提示内容。

7.根据权利要求6所述的方法，其中，所述判断说话者的身份，主要包括：

通过手机API接口，获取用户所有手机照片，对所述照片进行人脸识别，对识别出的人脸出现次数最多的人物，确定为用户最熟悉的人；并对所有识别到的人物做熟悉程度排序。

8.根据权利要求6所述的方法，其中，所述根据身份信息给于说话者和用户不同的提示内容 ，主要包括：

根据说话者与用户的熟悉程度或者根据用户自定义设置，对不同身份的人给于不同的提醒；

所述提醒，采用耳机背景显示屏对说话者进行提醒，或者将文本转化为语音进行提醒；当说话者说的话，用户没有答复，则对用户进行提示。

9.根据权利要求1所述的方法，其中，所述当用户没有答复，对用户进行再次提示，主要包括：

判断用户是否对耳机有语音输入，来确定用户是否对说话者做出答复；若没有答复，通过自动调低耳机音量，录制对话者的对话内容，并再次播放说话者说的话的内容，对用户进行提醒。

10.一种耳机背景显示系统，其特征在于，所述系统包括：

根据节目内容进行背景显示模块，用于根据耳机佩戴者正在听的节目内容，确定是否可以接收打扰；

对话者检测模块，用于检测是否有人对耳机佩戴者讲话，并识别身份特征；

对话者提示模块，用于根据身份特征调整提示内容；

耳机佩戴者提示模块，用于对佩戴者进行提示。

Images