CN110191220A - 一种语音处理方法及终端设备 - Google Patents
一种语音处理方法及终端设备 Download PDFInfo
- Publication number
- CN110191220A CN110191220A CN201910470103.7A CN201910470103A CN110191220A CN 110191220 A CN110191220 A CN 110191220A CN 201910470103 A CN201910470103 A CN 201910470103A CN 110191220 A CN110191220 A CN 110191220A
- Authority
- CN
- China
- Prior art keywords
- voice signal
- terminal device
- signal
- acquisition
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/19—Arrangements of transmitters, receivers, or complete sets to prevent eavesdropping, to attenuate local noise or to prevent undesired transmission; Mouthpieces or receivers specially adapted therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
- H04M1/72433—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
Abstract
本发明提供一种语音处理方法及终端设备，涉及通信技术领域。该方法包括：获取终端设备中振动检测装置采集的声音信号；确定终端设备在当前通话时的工作模式，所述工作模式包括人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式；在终端设备处于第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；在终端设备处于第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。本发明的方案用于解决现有的降噪方案在噪声较大的通话环境下，无法得到更为清晰的用户语音的问题。
Description
技术领域
本发明涉及通信领域，特别涉及一种语音处理方法及终端设备。
背景技术
目前，大部分手机等智能终端，在其通话功能中加入了上行降噪功能。其降噪方案是配置至少1个辅助拾音器，用于拾取用户嘴部之外位置、方向的环境噪声，然后从主拾音器信号中剔除环境噪声即可得到信噪比较高的语音信号。
然而，上述的降噪方案中，无论辅助拾音器还是主拾音器，其实都能拾取到环境噪音和用户语音，差异仅仅在于用户语音的信噪比不一样。虽然能够通过处理来提高最终获得的用户语音信噪比，但是在噪声较大的通话环境(如：公共交通上、演唱会现场等)下，并不能通过处理来得到更为清晰的用户语音。
发明内容
本发明实施例提供一种语音处理方法及终端设备，以解决现有的降噪方案在噪声较大的通话环境下，无法得到更为清晰的用户语音的问题。
为了解决上述技术问题，本发明是这样实现的：
第一方面，本发明的实施例提供了一种语音处理方法，包括：
获取终端设备中振动检测装置采集的声音信号；
确定所述终端设备在当前通话时的工作模式，所述工作模式包括人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式；
在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；
在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
第二方面，本发明的实施例还提供了一种终端设备，包括：
获取模块，用于获取终端设备中振动检测装置采集的声音信号；
确定模块，用于确定所述终端设备在当前通话时的工作模式，所述工作模式包括将所述声音信号作为语音参考信号的第一模式和将所述声音信号作为噪声参考信号的第二模式；
第一处理模块，用于在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；
第二处理模块，用于在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
第三方面，本发明实施例还提供了一种终端设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的语音处理方法的步骤。
第四方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的语音处理方法的步骤。
这样，本发明实施例中，通过获取终端设备中振动检测装置采集的声音信号，以及确定该终端设备在当前通话时的工作模式，即人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式，在该终端设备处于第一模式的情况下，将声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将声音信号作为待传输的语音信号；在终端设备处于第二模式的情况下，将声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。就能够针对不同的工作模式，基于该声音信号来获得待传输的语音信号，由于该声音信号是基于振动检测得到，能够有效应用于外界噪声较大的场景，保证通话对端接收到更为清晰的语音。
附图说明
图1为本发明实施例的语音处理方法的流程示意图；
图2为应用本发明实施例的方法的终端设备示意图之一；
图3为应用本发明实施例的方法的终端设备使用示意图；
图4为应用本发明实施例的方法的终端设备示意图之二；
图5为本发明实施例的终端设备的结构示意图；
图6为本发明另一实施例的终端设备的结构示意图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。
如图1所示，本发明实施例的一种语音处理方法，应用于终端设备，包括：
步骤101，获取终端设备中振动检测装置采集的声音信号。
这里，终端设备的振动检测装置能够通过振动检测采集声音信号。在通话开始后，就可通过获取该声音信号，为后续的语音处理做好准备。
步骤102，确定所述终端设备在当前通话时的工作模式，所述工作模式包括人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式。
这里，考虑到振动的来源可能是用户，也可能是外界其它物体，为了有效的使用步骤101获取的声音信号完成语音处理，还会对终端设备在当前通话时的工作模式进行确定，即确定该终端设备是处于人脸与显示屏接触的第一模式，还是处于人脸未与显示屏接触的第二模式。
步骤103，在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号。
本步骤中，在经步骤102确定终端设备处于第一模式的情况下，可了解到振动检测装置检测的振动来源为用户，因此，可将步骤101获取的声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，也可直接将该声音信号作为待传输的语音信号。
步骤104，在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
本步骤中，在经步骤102确定终端设备处于第二模式的情况下，可了解到振动检测装置检测的振动来源为外界物体，因此，可将步骤101获取的声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
这样，通过上述步骤101-104，在获取振动检测装置采集到的声音信号，以及确定终端设备在当前通话时的工作模式后，就能够针对不同的工作模式，基于该声音信号来获得待传输的语音信号，由于该声音信号是基于振动检测得到，能够有效应用于外界噪声较大的场景，保证通话对端接收到更为清晰的语音。
该实施例中，考虑到终端设备处理第一模式的情况下，声音信号往往是振动检测装置检测到人脸骨骼振动所得，可以直接将其作为待传输给通话对端的语音。但是，为了保证通话的语音质量，优选的，在确定终端设备处于第一模式的情况下，且该声音信号的信号强度大于预设阈值时，直接将其作为待传输的语音信号。当然，若终端设备处于第一模式，该声音信号的信号强度小于或等于该预设阈值，由于无法保证对端用户能够听清仅具有该声音信号的语音，所以，就需要将声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到更高质量的、待传输的语音信号。
应该知道的是，声音是由于振动产生的。人脸骨骼振动信号正是与声带振动信号同步的，也就与用户发出的声音同步。通过人脸骨骼振动信号，完全可以还原出用户发出的声音信号。显示屏通常会与人脸骨骼部位接触，人脸骨骼将振动传递给显示屏，且带动其振动。该实施例中，为了更好地检测到人脸骨骼部位的振动，来采集到高质量的声音信息，可选地，所述振动检测装置设置在与显示屏的第一表面接触的位置，用于检测所述显示屏的振动，并将所述振动转换为声音信号；其中，所述显示屏的第二表面为用户接触面，所述第一表面为与所述第二表面背离设置的表面。
例如，用于检测显示屏的振动，并将振动转换为声音信号的振动检测装置可使用MEMS微机电系统传感器。如图2所示，MEMS传感器201设置在显示屏202远离可操作面一侧(终端设备内部)的表面接触位置，使得显示屏202的振动能够进一步传递给MEMS传感器201。MEMS传感器201便可以间接采集到声源的振动。而终端设备中与MEMS传感器201和拾音器205连接信号处理装置204，就能够进行对应的信号处理。该信号处理装置204还连接听筒203，可将接收到的对端语音信号处理后传输到听筒203。这样，如图3所示，在用户脸部接触显示屏通话，终端设备处于第一模式，可由MEMS传感器采集到的声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将该声音信号作为待传输的语音信号。
另外，可选地，步骤102包括：
通过显示屏上的接触传感器，检测当前通话过程中人脸与显示屏是否接触。
这里，将使用显示屏上的接触传感器来检测当前通话过程中人脸与显示屏是否接触。其中，为了区别人脸和手指的接触，会基于预设的人脸接触区域面积阈值，在接触区域面积大于该人脸接触区域面积阈值时，确定人脸与显示屏接触，即终端设备处于第一模式；反之，终端设备处于第二模式。
其中，该接触传感器可以是红外传感器、激光传感器等。当然，该显示屏可以是经由接触传感器而得到的触摸屏。
可选地，所述将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，包括：
将所述语音参考信号与所述拾音器采集的语音信号叠加；或者，
获取所述拾音器采集的语音信号中与所述语音参考信号对应的有效语音信号，删减所述拾音器采集的语音信号中除所述有效语音信号之外的语音信号。
这里，在将步骤101获取的声音信号作为语音参考信号时，一方面，可通过该语音参考信号与拾音器采集的语音信号叠加，来加强拾音器采集的语音信号中的用户通话的实际语音部分(不包括噪音)；另一方面，可基于该语音参考信号，获取拾音器采集的语音信号中与语音参考信号对应的有效语音信号(用户通话的实际语音部分)，从而将之外的语音信号(噪音)删减，提升待传输语音信号的信噪比。
另外，可选地，所述将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，包括：
删减所述拾音器采集的语音信号中对应所述噪声参考信号的噪声信号；或者，
获取所述拾音器采集的语音信号中与所述噪声参考信号对应的噪声信号，放大所述拾音器采集的语音信号中除所述噪声信号之外的语音信号。
这里，在将步骤101获取的声音信号作为噪声参考信号时，一方面，可基于该噪声参考信号，删除拾音器采集的语音信号中对应的噪声信号，来提升待传输语音信号的信噪比；另一方面，可基于该噪声参考信号，在获取拾音器采集的语音信号中与噪声参考信号对应的噪声信号后，放大拾音器采集的语音信号中除该噪声信号之外的语音信号，从而将所需语音信号(用户通话的实际语音部分)加强。
还应该知道的是，上述处理过程中，可通过衰减信号来实现删减。这样，最终待传输的语音信号将实现用户通话的实际语音部分突出于环境噪声，甚至不存在环境噪声，保证对端用户听到更为清晰的用户语音，而不会听到较大的环境噪声。
应该了解的是，该实施例中，人脸未与显示屏接触，步骤101获取的声音信号作为噪声参考信号的情况，是振动检测装置采集到外界物体的振动而获得，往往是终端设备放置的支撑面上，其他物体的移动、放落、敲击等事件产生的噪声。因此，为了基于该噪声参考信号对拾音器采集的语音信号进行处理，该实施例中，可选地，在步骤102之后，还包括：
在所述终端设备处于所述第二模式的情况下，生成提示信息，所述提示信息用于提示用户将所述终端设备的显示屏朝向支撑面。
这样，通过该提示信息，能够提示用户将终端设备的显示屏朝向支撑面。例如支撑面为图4所示的桌面，在显示屏与桌面充分接触后，MEMS传感器采集到的振动信号(如对桌面的敲击)将更强，更好做信号处理，提升待传输的语音信号的信噪比。
在该实施例中，步骤101和步骤102并不存在先后顺序，可以先执行步骤101再执行步骤102，或者先执行步骤102后执行步骤101，又或者同时进行。
综上所述，本发明实施例的语音处理方法，通过获取终端设备中振动检测装置采集到的声音信号，以及确定该终端设备在当前通话时的工作模式，即人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式，在该终端设备处于第一模式的情况下，将声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将声音信号作为待传输的语音信号；在终端设备处于第二模式的情况下，将声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。就能够针对不同的工作模式，基于该声音信号来获得待传输的语音信号，由于该声音信号是基于振动检测得到，能够有效应用于外界噪声较大的场景，保证通话对端接收到更为清晰的语音。
图5是本发明一个实施例的终端设备的框图。图5所示的终端设备500包括获取模块501、确定模块502、第一处理模块503和第二处理模块504。
获取模块501，用于获取终端设备中振动检测装置采集的声音信号；
确定模块502，用于确定所述终端设备在当前通话时的工作模式，所述工作模式包括将所述声音信号作为语音参考信号的第一模式和将所述声音信号作为噪声参考信号的第二模式；
第一处理模块503，用于在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；
第二处理模块504，用于在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
可选地，所述振动检测装置设置在与显示屏的第一表面接触的位置，用于检测所述显示屏的振动，并将所述振动转换为声音信号；其中，所述显示屏的第二表面为用户接触面，所述第一表面为与所述第二表面背离设置的表面。
可选地，所述确定模块还用于：
通过显示屏上的接触传感器，检测当前通话过程中人脸与显示屏是否接触。
可选地，所述第一处理模块还用于：
将所述语音参考信号与所述拾音器采集的语音信号叠加；或者，
获取所述拾音器采集的语音信号中与所述语音参考信号对应的有效语音信号，删减所述拾音器采集的语音信号中除所述有效语音信号之外的语音信号。
可选地，所述第二处理模块还用于：
删减所述拾音器采集的语音信号中对应所述噪声参考信号的噪声信号；或者，
获取所述拾音器采集的语音信号中与所述噪声参考信号对应的噪声信号，放大所述拾音器采集的语音信号中除所述噪声信号之外的语音信号。
可选地，所述终端设备还包括：
提示模块，用于在所述终端设备处于所述第二模式的情况下，生成提示信息，所述提示信息用于提示用户将所述终端设备的显示屏朝向支撑面。
终端设备500能够实现图1至图4的方法实施例中终端设备实现的各个过程，为避免重复，这里不再赘述。本发明实施例的终端设备，通过获取终端设备中振动检测装置采集的声音信号，以及确定该终端设备在当前通话时的工作模式，即人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式，在该终端设备处于第一模式的情况下，将声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将声音信号作为待传输的语音信号；在终端设备处于第二模式的情况下，将声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。就能够针对不同的工作模式，基于该声音信号来获得待传输的语音信号，由于该声音信号是基于振动检测得到，能够有效应用于外界噪声较大的场景，保证通话对端接收到更为清晰的语音。
图6为实现本发明各个实施例的一种终端设备的硬件结构示意图，该终端设备600包括但不限于：射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、处理器610、以及电源611等部件。本领域技术人员可以理解，图6中示出的终端设备结构并不构成对终端设备的限定，终端设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，终端设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端设备、可穿戴设备、以及计步器等。
其中，处理器610，用于获取终端设备中振动检测装置采集的声音信号；确定所述终端设备在当前通话时的工作模式，所述工作模式包括人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式；在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
可见，该终端设备通过获取终端设备中振动检测装置采集到的声音信号，以及确定该终端设备在当前通话时的工作模式，即人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式，在该终端设备处于第一模式的情况下，将声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将声音信号作为待传输的语音信号；在终端设备处于第二模式的情况下，将声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。就能够针对不同的工作模式，基于该声音信号来获得待传输的语音信号，由于该声音信号是基于振动检测得到，能够有效应用于外界噪声较大的场景，保证通话对端接收到更为清晰的语音。
应理解的是，本发明实施例中，射频单元601可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器610处理；另外，将上行的数据发送给基站。通常，射频单元601包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元601还可以通过无线通信系统与网络和其他设备通信。
终端设备通过网络模块602为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元603可以将射频单元601或网络模块602接收的或者在存储器609中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元603还可以提供与终端设备600执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元603包括扬声器、蜂鸣器以及受话器等。
输入单元604用于接收音频或视频信号。输入单元604可以包括图形处理器(Graphics Processing Unit，GPU)6041和麦克风6042，图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元606上。经图形处理器6041处理后的图像帧可以存储在存储器609(或其它存储介质)中或者经由射频单元601或网络模块602进行发送。麦克风6042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元601发送到移动通信基站的格式输出。
终端设备600还包括至少一种传感器605，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板6061的亮度，接近传感器可在终端设备600移动到耳边时，关闭显示面板6061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器605还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元606用于显示由用户输入的信息或提供给用户的信息。显示单元606可包括显示面板6061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板6061。
用户输入单元607可用于接收输入的数字或字符信息，以及产生与终端设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板6071上或在触控面板6071附近的操作)。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器610，接收处理器610发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板6071。除了触控面板6071，用户输入单元607还可以包括其他输入设备6072。具体地，其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步的，触控面板6071可覆盖在显示面板6061上，当触控面板6071检测到在其上或附近的触摸操作后，传送给处理器610以确定触摸事件的类型，随后处理器610根据触摸事件的类型在显示面板6061上提供相应的视觉输出。虽然在图6中，触控面板6071与显示面板6061是作为两个独立的部件来实现终端设备的输入和输出功能，但是在某些实施例中，可以将触控面板6071与显示面板6061集成而实现终端设备的输入和输出功能，具体此处不做限定。
接口单元608为外部装置与终端设备600连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元608可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到终端设备600内的一个或多个元件或者可以用于在终端设备600和外部装置之间传输数据。
存储器609可用于存储软件程序以及各种数据。存储器609可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器609可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器610是终端设备的控制中心，利用各种接口和线路连接整个终端设备的各个部分，通过运行或执行存储在存储器609内的软件程序和/或模块，以及调用存储在存储器609内的数据，执行终端设备的各种功能和处理数据，从而对终端设备进行整体监控。处理器610可包括一个或多个处理单元；优选的，处理器610可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器610中。
终端设备600还可以包括给各个部件供电的电源611(比如电池)，优选的，电源611可以通过电源管理系统与处理器610逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外，终端设备600包括一些未示出的功能模块，在此不再赘述。
优选的，本发明实施例还提供一种终端设备，包括处理器、存储器及存储在存储器上并可在所述处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述语音处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述语音处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。
Claims (14)
1.一种语音处理方法，应用于终端设备，其特征在于，包括：
获取终端设备中振动检测装置采集的声音信号；
确定所述终端设备在当前通话时的工作模式，所述工作模式包括人脸与显示屏接触的第一模式和人脸未与显示屏接触的第二模式；
在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；
在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
2.根据权利要求1所述的方法，其特征在于，所述振动检测装置设置在与显示屏的第一表面接触的位置，用于检测所述显示屏的振动，并将所述振动转换为声音信号；其中，所述显示屏的第二表面为用户接触面，所述第一表面为与所述第二表面背离设置的表面。
3.根据权利要求1所述的方法，其特征在于，所述确定所述终端设备在当前通话时的工作模式，包括：
通过显示屏上的接触传感器，检测当前通话过程中人脸与显示屏是否接触。
4.根据权利要求1所述的方法，其特征在于，所述将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，包括：
将所述语音参考信号与所述拾音器采集的语音信号叠加；或者，获取所述拾音器采集的语音信号中与所述语音参考信号对应的有效语音信号，删减所述拾音器采集的语音信号中除所述有效语音信号之外的语音信号。
5.根据权利要求1所述的方法，其特征在于，所述将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，包括：
删减所述拾音器采集的语音信号中与所述噪声参考信号对应的噪声信号；或者，
获取所述拾音器采集的语音信号中与所述噪声参考信号对应的噪声信号，放大所述拾音器采集的语音信号中除所述噪声信号之外的语音信号。
6.根据权利要求2所述的方法，其特征在于，在所述确定所述终端设备在当前通话时的工作模式之后，还包括：
在所述终端设备处于所述第二模式的情况下，生成提示信息，所述提示信息用于提示用户将所述终端设备的显示屏朝向支撑面。
7.一种终端设备，其特征在于，包括：
获取模块，用于获取终端设备中振动检测装置采集的声音信号；
确定模块，用于确定所述终端设备在当前通话时的工作模式，所述工作模式包括将所述声音信号作为语音参考信号的第一模式和将所述声音信号作为噪声参考信号的第二模式；
第一处理模块，用于在所述终端设备处于所述第一模式的情况下，将所述声音信号作为语音参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号，或者，将所述声音信号作为待传输的语音信号；
第二处理模块，用于在所述终端设备处于所述第二模式的情况下，将所述声音信号作为噪声参考信号，对拾音器采集的语音信号进行处理，得到待传输的语音信号。
8.根据权利要求7所述的装置，其特征在于，所述振动检测装置设置在与显示屏的第一表面接触的位置，用于检测所述显示屏的振动，并将所述振动转换为声音信号；其中，所述显示屏的第二表面为用户接触面，所述第一表面为与所述第二表面背离设置的表面。
9.根据权利要求7所述的装置，其特征在于，所述确定模块还用于：
通过显示屏上的接触传感器，检测当前通话过程中人脸与显示屏是否接触。
10.根据权利要求7所述的装置，其特征在于，所述第一处理模块还用于：
将所述语音参考信号与所述拾音器采集的语音信号叠加；或者，
获取所述拾音器采集的语音信号中与所述语音参考信号对应的有效语音信号，删减所述拾音器采集的语音信号中除所述有效语音信号之外的语音信号。
11.根据权利要求7所述的装置，其特征在于，所述第二处理模块还用于：
删减所述拾音器采集的语音信号中对应所述噪声参考信号的噪声信号；或者，
获取所述拾音器采集的语音信号中与所述噪声参考信号对应的噪声信号，放大所述拾音器采集的语音信号中除所述噪声信号之外的语音信号。
12.根据权利要求8所述的装置，其特征在于，还包括：
提示模块，用于在所述终端设备处于所述第二模式的情况下，生成提示信息，所述提示信息用于提示用户将所述终端设备的显示屏朝向支撑面。
13.一种终端设备，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至6中任一项所述的语音处理方法的步骤。
14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的语音处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910470103.7A CN110191220B (zh) | 2019-05-31 | 2019-05-31 | 一种语音处理方法及终端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910470103.7A CN110191220B (zh) | 2019-05-31 | 2019-05-31 | 一种语音处理方法及终端设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110191220A true CN110191220A (zh) | 2019-08-30 |
| CN110191220B CN110191220B (zh) | 2021-09-10 |
Family
ID=67719416
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910470103.7A Active CN110191220B (zh) | 2019-05-31 | 2019-05-31 | 一种语音处理方法及终端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110191220B (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN203435044U (zh) * | 2013-08-08 | 2014-02-12 | 联想(北京)有限公司 | 腕带式电子设备 |
| CN103700373A (zh) * | 2013-12-21 | 2014-04-02 | 刘兴超 | 一种穿戴式设备的声音降噪系统及其降噪处理方法 |
| CN104702787A (zh) * | 2015-03-12 | 2015-06-10 | 深圳市欧珀通信软件有限公司 | 一种应用于移动终端的声音采集方法和移动终端 |
| CN106231088A (zh) * | 2016-07-27 | 2016-12-14 | 宇龙计算机通信科技(深圳)有限公司 | 一种语音通话的方法、装置及终端 |
| CN106953952A (zh) * | 2017-04-25 | 2017-07-14 | 捷开通讯(深圳)有限公司 | 一种具有压电陶瓷片的移动终端 |
| CN206686251U (zh) * | 2017-04-28 | 2017-11-28 | 苏州科技大学 | 一种双麦克风降噪的手机通话装置 |
| CN107580125A (zh) * | 2017-08-31 | 2018-01-12 | 维沃移动通信有限公司 | 一种移动终端的数据处理方法和移动终端 |
| CN108156291A (zh) * | 2017-12-29 | 2018-06-12 | 广东欧珀移动通信有限公司 | 语音信号采集方法、装置、电子设备及可读存储介质 |
| CN108965579A (zh) * | 2018-06-05 | 2018-12-07 | Oppo广东移动通信有限公司 | 基于tof摄像头实现测距的方法及其装置、终端和存储介质 |
| CN109413253A (zh) * | 2017-08-17 | 2019-03-01 | 西安中兴新软件有限责任公司 | 一种实现移动终端的消噪方法及装置 |
| CN109445640A (zh) * | 2018-12-18 | 2019-03-08 | 昆山龙腾光电有限公司 | 显示屏及具有该显示屏的电子设备 |
-
2019
- 2019-05-31 CN CN201910470103.7A patent/CN110191220B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN203435044U (zh) * | 2013-08-08 | 2014-02-12 | 联想(北京)有限公司 | 腕带式电子设备 |
| CN103700373A (zh) * | 2013-12-21 | 2014-04-02 | 刘兴超 | 一种穿戴式设备的声音降噪系统及其降噪处理方法 |
| CN104702787A (zh) * | 2015-03-12 | 2015-06-10 | 深圳市欧珀通信软件有限公司 | 一种应用于移动终端的声音采集方法和移动终端 |
| CN106231088A (zh) * | 2016-07-27 | 2016-12-14 | 宇龙计算机通信科技(深圳)有限公司 | 一种语音通话的方法、装置及终端 |
| CN106953952A (zh) * | 2017-04-25 | 2017-07-14 | 捷开通讯(深圳)有限公司 | 一种具有压电陶瓷片的移动终端 |
| CN206686251U (zh) * | 2017-04-28 | 2017-11-28 | 苏州科技大学 | 一种双麦克风降噪的手机通话装置 |
| CN109413253A (zh) * | 2017-08-17 | 2019-03-01 | 西安中兴新软件有限责任公司 | 一种实现移动终端的消噪方法及装置 |
| CN107580125A (zh) * | 2017-08-31 | 2018-01-12 | 维沃移动通信有限公司 | 一种移动终端的数据处理方法和移动终端 |
| CN108156291A (zh) * | 2017-12-29 | 2018-06-12 | 广东欧珀移动通信有限公司 | 语音信号采集方法、装置、电子设备及可读存储介质 |
| CN108965579A (zh) * | 2018-06-05 | 2018-12-07 | Oppo广东移动通信有限公司 | 基于tof摄像头实现测距的方法及其装置、终端和存储介质 |
| CN109445640A (zh) * | 2018-12-18 | 2019-03-08 | 昆山龙腾光电有限公司 | 显示屏及具有该显示屏的电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110191220B (zh) | 2021-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107799125A (zh) | 一种语音识别方法、移动终端及计算机可读存储介质 | |
| CN108108007B (zh) | 一种降低功耗的处理方法及移动终端 | |
| CN108427876A (zh) | 一种指纹识别方法及移动终端 | |
| CN108540655A (zh) | 一种来电显示处理方法及移动终端 | |
| CN107911445A (zh) | 一种消息推送方法、移动终端和存储介质 | |
| CN109547054A (zh) | 信号控制电路、终端设备及信号控制方法 | |
| CN108391190B (zh) | 一种降噪方法、耳机及计算机可读存储介质 | |
| CN110062104A (zh) | 应用程序启动方法、装置及移动终端 | |
| CN107808084A (zh) | 一种触控操作方法及移动终端 | |
| CN109215683A (zh) | 一种提示方法及终端 | |
| CN108135033A (zh) | 一种蓝牙连接方法及移动终端 | |
| CN108196815A (zh) | 一种通话声音的调节方法和移动终端 | |
| CN109327668A (zh) | 一种视频处理方法和装置 | |
| CN110246513A (zh) | 语音信号的处理方法及移动终端 | |
| CN107786751A (zh) | 一种多媒体文件播放方法及移动终端 | |
| CN109451144A (zh) | 一种消息处理方法及终端设备 | |
| CN108509141A (zh) | 一种控件的生成方法及移动终端 | |
| CN109348035A (zh) | 一种电话号码的识别方法和终端设备 | |
| CN109743454A (zh) | 一种通话处理方法及移动终端 | |
| CN110138963A (zh) | 一种消息处理方法及移动终端 | |
| CN109831582A (zh) | 未响应事件处理方法及终端 | |
| CN108307075A (zh) | 一种来电处理方法及移动终端 | |
| CN109451158A (zh) | 一种提醒方法和装置 | |
| CN108632535A (zh) | 一种图像处理方法及移动终端 | |
| CN108419283A (zh) | 一种wifi热点扫描的方法及移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |