CN110995921A - 通话处理方法、电子设备及计算机可读存储介质 - Google Patents

通话处理方法、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110995921A
CN110995921A CN201911137643.XA CN201911137643A CN110995921A CN 110995921 A CN110995921 A CN 110995921A CN 201911137643 A CN201911137643 A CN 201911137643A CN 110995921 A CN110995921 A CN 110995921A
Authority
CN
China
Prior art keywords
output device
audio output
audio
electronic equipment
call
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911137643.XA
Other languages
English (en)
Inventor
彭义军
唐志伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201911137643.XA priority Critical patent/CN110995921A/zh
Publication of CN110995921A publication Critical patent/CN110995921A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72433User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)

Abstract

本发明实施例提供了一种通话处理方法、电子设备和计算机可读存储介质,所述方法包括:在通话过程中,确定所述电子设备的音频输出器件是否发生异常;在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;显示所述文本信息。在上述方法中,电子设备在音频输出器件发生异常的情况下,将语音信号转换为文本信息,使用户可以通过文本信息获取对方的通话信息,从而增加语音交流的流畅度、提升通话质量。

Description

通话处理方法、电子设备及计算机可读存储介质
技术领域
本发明涉及电子设备领域,特别是涉及一种通话处理方法、电子设备及计算机可读存储介质。
背景技术
当今社会,电子设备已经成为人们日常生活中最常用的消费型电子产品之一,使用电子设备进行通话,是大多数用户对于电子设备最基本的要求。
用户在使用电子设备通话时,有时会出现对方的声音变小、模糊不清等问题,导致通话质量变差,用户无法获取通话信息。
发明内容
本发明提供一种通话处理方法、电子设备及计算机可读存储介质,旨在解决电子设备通话质量变差时用户无法获取通话信息的问题。
第一方面,本发明实施例提供一种通话处理方法,应用于电子设备,所述方法包括:
在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示所述文本信息。
第二方面,本发明实施例提供一种电子设备,所述电子设备包括:
异常确定模块,用于在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
语音识别模块,用于在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示模块,用于显示所述文本信息。
第三方面,本发明实施例提供一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的通话处理方法的步骤。
第四方面,本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的通话处理方法的步骤。
本发明实施例具有以下有益效果:
在本发明实施例中,在通话过程中,确定所述电子设备的音频输出器件是否发生异常;在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;显示所述文本信息。在上述方法中,电子设备在音频输出器件发生异常的情况下,将语音信号转换为文本信息,使用户可以通过文本信息获取对方的通话信息,从而增加语音交流的流畅度、提升通话质量。
附图说明
图1是本发明实施例中提供的通话处理方法的流程图之一;
图2是本发明实施例中提供的通话处理方法的流程图之二;
图3是本发明实施例中提供的电子设备的结构框图之一;
图4是本发明实施例中提供的电子设备的结构框图之二;
图5是实现本发明各个实施例中的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1,示出了本发明实施例中提供的通话处理方法的流程图之一。该方法应用于电子设备,在本发明实施例中描述的电子设备可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant, PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航装置、可穿戴设备、智能手环、计步器等电子设备。
该通话处理方法具体可以包括如下步骤:
步骤101,在通话过程中,确定所述电子设备的音频输出器件是否发生异常。
在本发明实施例中,该通话过程可以是所有包括有语音信号传输的通话过程,例如在电子设备上利用移动通信网络进行的拨打电话、利用社交软件进行的语音通话或视频通话、主播和观众利用直播软件进行的包括语音的视频互动等。具体通话过程可以包括二人之间进行的语音通话、多人之间进行的语音通话,本发明实施例对此不做具体限定。
电子设备的音频输出器件是可以将电子设备的射频单元或网络模块接收的、或者在存储器中存储的声音数据转换成声音信号并输出为声音的设备。电子设备的音频输出器件可以包括扬声器、听筒、蜂鸣器等。
在通话过程中,若音频输出器件发生异常,将会使来自射频单元或网络模块接收到的语音数据转换成语音信号的过程受到影响,或声音信号输出为声音的过程受到影响,从而使用户无法听到对方的声音,或使对方的声音变小、模糊不清,这会导致用户无法通过音频输出器件获取信息。
因此,可以在通话开启时,确定电子设备的音频输出器件是否发生异常,以此来预测用户可获得的通话质量。
具体地,确定音频输出器件是否发生异常,可以通过检测设备是否有软硬件损坏、出声孔是否被堵等方法来判定。
步骤102,在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息。
在本发明实施例中,若检测到音频输出器件发生异常,则可以预测用户的通话质量将会受到影响,例如可能会出现无法听到对方的声音、对方的声音变小、模糊不清等问题。
即使音频输出器件发生异常,但电子设备通过射频单元或网络模块接收对方语音数据的功能是正常的,为了让用户准确获得通话信息,提升通话质量,此时电子设备可以对下行语音信号进行识别。下行语音信号是从基站到电子设备的信号,通话过程中对方的语音数据通过基站到达用户的电子设备,对下行语音信号进行识别即对接收到的对方的语音数据进行识别。识别完成后可以通过文本显示的方式使用户获得通话信息。
具体地,可以采用声纹匹配的方式进行语音识别。不同的发音具有不同的频谱,频谱也叫声纹,只要预先记录下声纹信息和文字的对应关系,在电子设备捕捉到新的语音数据后,将该语音数据的声纹信息和预先记录的与文字的对应关系进行比对,就可以得到声纹信息对应的文字了。在连续捕捉到多个声纹信息的情况下,电子设备还可以将语音识别得到的文字进行组合,得到文本信息,并根据文本信息的上下文对识别有误差的文字进行调整,以提高语音识别的准确性。
步骤103,显示所述文本信息。
在本发明实施例中,在得到声纹对应的文本信息后,电子设备将该文本信息显示在指定的区域,以供用户查看。这样,在音频输出器件发生异常的情况下,用户虽然不能在通话过程中准确获取对方的语音信息,但是通过查看文本信息的方式,也仍然能够准确获取通话信息,从而有效提升了通话质量。
综上所述,在本发明实施例中,在通话过程中,确定所述电子设备的音频输出器件是否发生异常;在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;显示所述文本信息。在上述方法中,电子设备在音频输出器件发生异常的情况下,将语音信号转换为文本信息,使用户可以通过文本信息获取对方的通话信息,从而增加了语音交流的流畅度、提升了通话质量。
参照图2,示出了本发明实施例中提供的通话处理方法的流程图之二,所述方法应用于电子设备,具体可以包括如下步骤。
步骤201,在通话过程中,确定所述通话过程的通话模式。
具体地,不同的通话过程具有不同的通话模式,通话模式不同,则使用的声音输出设备也不同。在用户利用移动通信网络拨打电话时,若开启了免提功能,则通话模式为免提通话模式,若未开启免提,正常接听,则为听筒通话模式;在用户利用社交软件进行语音通话时,一般为听筒通话模式,而进行视频通话时,一般为免提通话模式;主播和观众利用直播软件进行的包括语音的视频互动,一般也为免提通话模式。
要确定通话过程的通话模式,则首先需要确定用户的通话属于上述哪种通话类型,进而可以确定通话模式。
步骤202,若所述通话模式为听筒通话模式,则将所述电子设备的听筒作为音频输出器件。
若为听筒通话模式,则通话过程的音频输出器件为电子设备的听筒。
听筒一般位于电子设备正面屏幕的上方,类型有焊线式、弹片式,外观有长方形,也有圆形的。听筒的发声原理是:听筒里也有一个薄膜,薄膜连接着一个线圈和一块永磁铁。特定形式的电流(比如话筒刚刚“编码”完成的电流)流过听筒的线圈,这样就使得线圈产生的磁场发生变化,于是永磁铁和线圈之间的磁力发生变化,于是永磁铁和线圈的距离会发生变化。这样就带动了薄膜振动,发出声音。
步骤203,若所述通话模式为免提通话模式,则将所述电子设备的扬声器作为音频输出器件。
若为免提通话模式,则通话过程的音频输出器件为电子设备的扬声器。
扬声器可以位于电子设备正面屏幕的下方、电子设备的侧面或背面等,常见的有电动式扬声器、舌簧式扬声器、晶体式扬声器和励磁式扬声器等。扬声器的外部形状有圆形、椭圆形及超薄形等。
听筒是扬声器的一种,因此扬声器的原理与听筒类似,是电流通过由磁铁组成的磁电路内的线圈,在上和下的方向上产生驱动力使振动体振动,继而使空气振动,发出声音。
在步骤202-步骤203确定通话过程的音频输出器件之后,可以通过执行步骤204-步骤207来确定音频输出器件是否发生异常,也可以通过执行步骤 208-步骤209来确定音频输出器件是否发生异常。
步骤204,控制所述音频输出器件播放预设音频文件,所述预设音频文件为超声波文件。
在本发明实施例中,预设音频文件为预先存储在电子设备存储设备中的测试文件,该测试文件为音频格式,可以用来检测音频输出器件是否发生异常。
为了使检测过程不影响用户的正常体验,预设音频文件一般为超声波文件。超声波是一种频率高于20000赫兹的声波,其每秒的振动频率非常高,超出了人耳听觉的一般上限,人们是听不见超声波的。因此,电子设备播放预设音频文件时,用户是感知不到的,不会对用户的通话过程产生影响。
步骤205,用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到目标音频数据。
音频采集器件,一般包括麦克风,也叫话筒、传声器,是将声音信号转换为电信号的能量转换器件。具体地,声音的振动传到麦克风的振膜上,推动里边的磁铁形成变化的电流。
在本发明实施例中,音频输出器件播放预设音频文件,产生的声音振动传到电子设备自带的音频采集器件的振膜上,推动音频采集器件中的磁铁形成变化的电流,该变化的电流形成变化的电信号,目标音频数据即是该变化的电信号。
步骤206,获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,所述参考音频数据为所述预设音频文件在正常播放时所述音频采集器件收集的音频数据。
在本发明实施例中,参考音频数据为预设音频文件在电子设备的音频输出器件正常的情况下播放时音频采集器件收集的音频数据,其也是变化的电信号。应注意,作为参考的音频输出器件与步骤202或步骤203中确定的音频输出器件应一致。
不同的音频文件播放得到的频谱是不同的,同一个音频文件使用不同状态的音频输出器件播放得到的频谱也是不同的。因此,可以通过同一个音频文件播放得到的频谱的差异来判断音频输出器件的状态。
频谱是频率谱密度的简称,就是频率的分布曲线。一个余弦信号的全部信息由它的频率、幅度以及初相位这三个参数来决定,信号的频谱就是表示组成一个复杂信号的所有不同频率余弦信号的“三参数”。获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,即是计算两者的“三参数”的差异。
可选地,所述参考音频数据通过以下步骤A1-步骤A2得到:
步骤A1,在确定所述音频输出器件正常的情况下,控制所述音频输出器件播放所述预设音频文件。
在本发明实施例中,可以在确定音频输出器件正常的情况下,例如,在出厂前性能测试中确定电子设备性能合格时,控制电子设备的每个音频输出器件依次播放预设音频文件。
步骤A2,用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到参考音频数据。
用电子设备自带的音频采集器件收集每个音频输出器件播放的预设音频文件,得到每个音频输出器件在播放预设音频文件时对应的参考音频数据,该参考音频数据的内容即频谱。
该参考音频数据可以作为出厂设置存储在电子设备中,以方便在用户使用电子设备期间,在需要检测对应的音频输出器件是否异常时作为参考。
步骤207,若所述差异值大于或等于第一预设阈值,则确定所述电子设备的音频输出器件异常。
在本发明实施例中,在获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,即是计算两者的“三参数”的差异,即计算目标音频数据的频率、幅度及初相位和参考音频数据的频率、幅度及初相位之间的三项差异。可以根据三参数对于音频品质的影响大小,给三参数设置不同的权重,将计算出的三参数各自的单项差异值与其权重相乘,得到最终的差异值。可以根据技术测定或经验,设定第一预设阈值。当目标音频数据的频谱与参考音频数据的频谱的差异值大于或等于第一预设阈值时,说明此时电子设备的音频输出器件播放的预设音频文件的频谱与参考频谱差异过大,确定该音频输出器件已发生异常。
通过步骤204-步骤207的方法来确定音频输出器件是否发生异常,只需要播放内容为超声波的预设音频文件,电子设备内部进行差异对比即可确定音频输出器件是否发生异常,不会使用户感知到检测过程,更不会影响用户的正常通话。
步骤208,获取所述音频输出器件的防尘网的阻抗值。
在电子设备中,不管是听筒还是扬声器,为了防止在日常使用中灰尘和污渍进入设备内部,一般都在最外层布设有防尘网。若防尘网聚集的灰尘和污渍过多,将会影响音频输出器件的声音输出。
在具有电阻、电感和电容的电路里,对交流电所起的阻碍作用叫做阻抗。阻抗的单位是欧。洁净的防尘网阻抗值是很高的,阻抗一般是兆欧级的;如果防尘网沾染了较多的杂物,如灰尘,污渍,油墨等,阻抗值会迅速变小。因此,可通过检测防尘网的阻抗值来确定音频输出器件是否堵孔。
具体地,可以通过等效电路来模拟声阻的变化,进而检测防尘网的阻抗值。通过等效电路可以知道电路中电阻的变化,通过电阻的变化可以获取阻抗的变化,进而得到防尘网的阻抗值。
步骤209,若所述阻抗值小于第二预设阈值,则确定所述电子设备的音频输出器件异常。
在本发明实施例中,可以根据技术测定或经验,设定正常的防尘网的最小阻抗值为第二预设阈值。若阻抗值小于第二预设阈值,则判定音频输出器件的防尘网堵孔较严重,该音频输出器件异常。
通过步骤208-步骤209的方法来确定音频输出器件是否发生异常,只需要检测防尘网的阻抗值,通过阻抗值来判定音频输出器件是否异常,方法简便,可快速判定,也不会影响用户的正常通话。
步骤210,若所述电子设备的文字辅助通话模式处于开启状态,则对所述通话过程中的下行语音信号进行语音识别,得到文本信息。
在本发明实施例中,可以在每次通话之前提示用户是否开启文字辅助通话模式,用户可以根据需要进行选择。若用户确认开启,则电子设备在确定音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,识别完成后可以通过文本显示的方式使用户获得通话信息。
电子设备可以在每次通话之前提示用户是否开启文字辅助通话模式,也可以是用户一旦确认开启之后文字辅助通话模式始终生效。
通过提示用户是否开启文字辅助通话模式,可以使用户根据需要进行选择,更为人性化。
在步骤210中得到文本信息之后,可以执行步骤211将文本信息显示在电子设备上,也可以执行步骤212将文本信息显示在智能穿戴设备上。
步骤211,将所述文本信息显示在所述电子设备的屏幕上。
在本发明实施例中,一旦通话质量下降,则将文本信息显示在电子设备屏幕的指定区域,用户可以将电子设备拿到眼前,读取该文本信息,以获取通话信息。
步骤212,将所述文本信息通过无线连接同步到智能穿戴设备,并显示在所述智能穿戴设备的屏幕上。
在本发明实施例中,若用户还携带有智能眼镜、智能手环等智能穿戴设备,并且该智能穿戴设备已与电子设备通过无线信号连接,则可以将文本信息通过该无线信号同步到智能穿戴设备上。
具体地,该无线信号可以是蓝牙信号或WiFi信号。智能穿戴设备与电子设备通过无线信号连接,即是智能穿戴设备与电子设备通过蓝牙设备或同一个WiFi设备连接。
相比于将文本信息显示在电子设备屏幕上,将文本信息显示在智能穿戴设备的屏幕上,可以使用户无需改变手持电子设备通话的动作,只需将目光落在智能穿戴设备的屏幕上便可获取到通话信息,不影响正常通话更为方便。
综上所述,本发明实施例提供的通话处理方法,除具有图1中的通话处理方法的有益效果外,还采用播放内容为超声波的预设音频文件、电子设备内部进行差异对比的方式确定音频输出器件是否发生异常,不会使用户感知到检测过程,更不会影响用户的正常通话;并且,还可以采用检测防尘网的阻抗值的方式来判定音频输出器件是否异常,方法简便,可快速判定,也不会影响用户的正常通话;此外,还提示用户是否开启文字辅助通话模式,可以使用户根据需要进行选择,更为人性化。
参照图3,为本发明实施例提供的电子设备的结构框图之一,该电子设备300具体可以包括:
异常确定模块301,用于在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
语音识别模块302,用于在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示模块303,用于显示所述文本信息。
本发明实施例提供的控制振动装置能够实现图1的方法实施例中实现的各个过程,为避免重复,这里不再赘述。
本发明实施例提供的电子设备,在通话过程中,确定所述电子设备的是否发生异常;在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;显示所述文本信息。在上述方法中,电子设备在音频输出器件发生异常的情况下,将语音信号转换为文本信息,使用户可以通过文本信息获取对方的通话信息,从而增加语音交流的流畅度、提升通话质量。
参照图4,在上述图3的基础上,示出了本发明实施例的电子设备的结构框图之二,其中,所述异常确定模块301,包括:
播放子模块3011,用于控制所述音频输出器件播放预设音频文件,所述预设音频文件为超声波文件;
收集子模块3012,用于用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到目标音频数据;
获取子模块3013,用于获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,所述参考音频数据为所述预设音频文件在正常播放时所述音频采集器件收集的音频数据;
第一确定子模块3014,用于若所述差异值大于或等于第一预设阈值,则确定所述电子设备的音频输出器件异常。
所述异常确定模块301,包括:
阻抗确定子模块3015,用于获取所述音频输出器件的防尘网的阻抗值;
第二确定子模块3016,用于若所述阻抗值小于第二预设阈值,则确定所述电子设备的音频输出器件异常。
可选地,所述参考音频数据通过以下模块得到:
控制模块,用于在确定所述音频输出器件正常的情况下,控制所述音频输出器件播放所述预设音频文件;
收集模块,用于用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到参考音频数据。
所述电子设备300还包括:
通话模式确定模块304,用于确定所述通话过程的通话模式;
第一器件确定模块305,用于若所述通话模式为听筒通话模式,则将所述电子设备的听筒作为音频输出器件;
第二器件确定模块306,用于若所述通话模式为免提通话模式,则将所述电子设备的扬声器作为音频输出器件。
所述显示模块303包括:
第一显示子模块3031,用于将所述文本信息显示在所述电子设备的屏幕上;
或,
第二显示子模块3032,用于将所述文本信息通过无线连接同步到智能穿戴设备,并显示在所述智能穿戴设备的屏幕上。
所述语音识别模块302包括:
语音识别子模块3021,用于若所述电子设备的文字辅助通话模式处于开启状态,则对所述通话过程中的下行语音信号进行语音识别,得到文本信息。
本发明实施例提供的虚拟试衣装置能够实现图2的方法实施例中实现的各个过程,为避免重复,这里不再赘述。
本发明实施例提供的电子设备,除具有图1中的电子设备的有益效果外,还采用播放内容为超声波的预设音频文件、电子设备内部进行差异对比的方式确定音频输出器件是否发生异常,不会使用户感知到检测过程,更不会影响用户的正常通话;并且,还可以采用检测防尘网的阻抗值的方式来判定音频输出器件是否异常,方法简便,可快速判定,也不会影响用户的正常通话;此外,还提示用户是否开启文字辅助通话模式,可以使用户根据需要进行选择,更为人性化。
图5为实现本发明各个实施例中的一种电子设备的硬件结构示意图。
该电子设备400包括但不限于:射频单元401、网络模块402、声音输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、处理器410、以及电源411等部件。本领域技术人员可以理解,图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器410,用于:
在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示所述文本信息。
在本发明实施例中,在通话过程中,确定所述电子设备的音频输出器件是否发生异常;在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;显示所述文本信息。在上述方法中,电子设备在音频输出器件发生异常的情况下,将语音信号转换为文本信息,使用户可以通过文本信息获取对方的通话信息,从而增加语音交流的流畅度、提升通话质量。
应理解的是,本发明实施例中,射频单元401可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器410处理;另外,将上行的数据发送给基站。通常,射频单元401包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元401还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块402为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
声音输出单元403可以将射频单元401或网络模块402接收的或者在存储器409中存储的声音数据转换成声音信号并且输出为声音。而且,声音输出单元403还可以提供与电子设备400执行的特定功能相关的声音输出(例如,呼叫信号接收声音、消息接收声音等等)。声音输出单元403包括扬声器、蜂鸣器以及受话器等。
输入单元404用于接收声音或视频信号。输入单元404可以包括图形处理器(Graphics Processing Unit,GPU)4041和麦克风4042,图形处理器4041 对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元 406上。经图形处理器4041处理后的图像帧可以存储在存储器409(或其它存储介质)中或者经由射频单元401或网络模块402进行发送。麦克风4042 可以接收声音,并且能够将这样的声音处理为声音数据。处理后的声音数据可以在电话通话模式的情况下转换为可经由射频单元401发送到移动通信基站的格式输出。
电子设备400还包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板4061的亮度,接近传感器可在电子设备400移动到耳边时,关闭显示面板4061或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器405还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元406用于显示由用户输入的信息或提供给用户的信息。显示单元406可包括显示面板4061,可以采用液晶显示器(Liquid Crystal Display, LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板4061。
用户输入单元407可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元407 包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板4071上或在触控面板4071附近的操作)。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器410,接收处理器410发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板4071。除了触控面板4071,用户输入单元407还可以包括其他输入设备4072。具体地,其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板4071可覆盖在显示面板4061上,当触控面板4071 检测到在其上或附近的触摸操作后,传送给处理器410以确定触摸事件的类型,随后处理器410根据触摸事件的类型在显示面板4061上提供相应的视觉输出。虽然在图5中,触控面板4071与显示面板4061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板4071与显示面板4061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元408为外部装置与电子设备400连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、声音输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元408可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备400内的一个或多个元件或者可以用于在电子设备400和外部装置之间传输数据。
存储器409可用于存储软件程序以及各种数据。存储器409可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如声音数据、电话本等)等。此外,存储器409可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器410是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器409内的软件程序或模块,以及调用存储在存储器409内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器410可包括一个或多个处理单元;优选的,处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
电子设备400还可以包括给各个部件供电的电源411(比如电池),优选的,电源411可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备400包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种电子设备,包括处理器410,存储器 409,存储在存储器409上并可在上述处理器410上运行的计算机程序,该计算机程序被处理器410执行时实现上述显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
基于上述电子设备的硬件结构,以下对本发明各实施例进行详细详述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,上述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。

Claims (16)

1.一种通话处理方法,应用于电子设备,其特征在于,所述方法包括:
在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示所述文本信息。
2.根据权利要求1所述的方法,其特征在于,所述确定所述电子设备的音频输出器件是否发生异常,包括:
控制所述音频输出器件播放预设音频文件,所述预设音频文件为超声波文件;
用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到目标音频数据;
获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,所述参考音频数据为所述预设音频文件在正常播放时所述音频采集器件收集的音频数据;
若所述差异值大于或等于第一预设阈值,则确定所述电子设备的音频输出器件异常。
3.根据权利要求2所述的方法,所述参考音频数据通过以下方法得到:
在确定所述音频输出器件正常的情况下,控制所述音频输出器件播放所述预设音频文件;
用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到参考音频数据。
4.根据权利要求1所述的方法,其特征在于,所述确定所述电子设备的音频输出器件是否发生异常,包括:
获取所述音频输出器件的防尘网的阻抗值;
若所述阻抗值小于第二预设阈值,则确定所述电子设备的音频输出器件异常。
5.根据权利要求1所述的方法,其特征在于,在确定所述电子设备的音频输出器件是否发生异常之前,还包括:
确定所述通话过程的通话模式;
若所述通话模式为听筒通话模式,则将所述电子设备的听筒作为音频输出器件;
若所述通话模式为免提通话模式,则将所述电子设备的扬声器作为音频输出器件。
6.根据权利要求1所述的方法,其特征在于,所述显示所述文本信息,包括:
将所述文本信息显示在所述电子设备的屏幕上;
或,
将所述文本信息通过无线连接同步到智能穿戴设备,并显示在所述智能穿戴设备的屏幕上。
7.根据权利要求1所述的方法,其特征在于,所述对所述通话过程中的下行语音信号进行语音识别,得到文本信息的步骤,包括:
若所述电子设备的文字辅助通话模式处于开启状态,则对所述通话过程中的下行语音信号进行语音识别,得到文本信息。
8.一种电子设备,其特征在于,所述电子设备包括:
异常确定模块,用于在通话过程中,确定所述电子设备的音频输出器件是否发生异常;
语音识别模块,用于在所述音频输出器件发生异常的情况下,对通话过程中的下行语音信号进行语音识别,得到文本信息;
显示模块,用于显示所述文本信息。
9.根据权利要求8所述的电子设备,其特征在于,所述异常确定模块,包括:
播放子模块,用于控制所述音频输出器件播放预设音频文件,所述预设音频文件为超声波文件;
收集子模块,用于用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到目标音频数据;
获取子模块,用于获取所述目标音频数据的频谱与预设的参考音频数据的频谱之间的差异值,所述参考音频数据为所述预设音频文件在正常播放时所述音频采集器件收集的音频数据;
第一确定子模块,用于若所述差异值大于或等于第一预设阈值,则确定所述电子设备的音频输出器件异常。
10.根据权利要求9所述的电子设备,所述参考音频数据通过以下模块得到:
控制模块,用于在确定所述音频输出器件正常的情况下,控制所述音频输出器件播放所述预设音频文件;
收集模块,用于用所述电子设备的音频采集器件收集所述音频输出器件播放的预设音频文件,得到参考音频数据。
11.根据权利要求8所述的电子设备,其特征在于,所述异常确定模块,包括:
阻抗确定子模块,用于获取所述音频输出器件的防尘网的阻抗值;
第二确定子模块,用于若所述阻抗值小于第二预设阈值,则确定所述电子设备的音频输出器件异常。
12.根据权利要求8所述的电子设备,其特征在于,所述电子设备还包括:
通话模式确定模块,用于确定所述通话过程的通话模式;
第一器件确定模块,用于若所述通话模式为听筒通话模式,则将所述电子设备的听筒作为音频输出器件;
第二器件确定模块,用于若所述通话模式为免提通话模式,则将所述电子设备的扬声器作为音频输出器件。
13.根据权利要求8所述的电子设备,其特征在于,所述显示模块包括:
第一显示子模块,用于将所述文本信息显示在所述电子设备的屏幕上;
或,
第二显示子模块,用于将所述文本信息通过无线连接同步到智能穿戴设备,并显示在所述智能穿戴设备的屏幕上。
14.根据权利要求8所述的电子设备,其特征在于,所述语音识别模块包括:
语音识别子模块,用于若所述电子设备的文字辅助通话模式处于开启状态,则对所述通话过程中的下行语音信号进行语音识别,得到文本信息。
15.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的通话处理方法的步骤。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的通话处理方法的步骤。
CN201911137643.XA 2019-11-19 2019-11-19 通话处理方法、电子设备及计算机可读存储介质 Pending CN110995921A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911137643.XA CN110995921A (zh) 2019-11-19 2019-11-19 通话处理方法、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911137643.XA CN110995921A (zh) 2019-11-19 2019-11-19 通话处理方法、电子设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN110995921A true CN110995921A (zh) 2020-04-10

Family

ID=70085098

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911137643.XA Pending CN110995921A (zh) 2019-11-19 2019-11-19 通话处理方法、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110995921A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800543A (zh) * 2020-06-30 2020-10-20 深圳传音控股股份有限公司 音频文件的处理方法、终端设备及存储介质
CN112422747A (zh) * 2020-11-20 2021-02-26 维沃移动通信有限公司 通话方法及装置
CN112711366A (zh) * 2020-12-23 2021-04-27 维沃移动通信(杭州)有限公司 图像生成方法、装置和电子设备

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101079836A (zh) * 2006-12-21 2007-11-28 腾讯科技(深圳)有限公司 一种基于非对称媒体的即时通信方法及系统
CN101452705A (zh) * 2007-12-07 2009-06-10 希姆通信息技术(上海)有限公司 语音文字转换、手语文字转换的方法和装置
CN102710539A (zh) * 2012-05-02 2012-10-03 中兴通讯股份有限公司 语音信息传送方法及装置
US20120265536A1 (en) * 2011-04-14 2012-10-18 Hyundai Motor Company Apparatus and method for processing voice command
CN105979053A (zh) * 2016-04-18 2016-09-28 广东欧珀移动通信有限公司 移动终端中麦克风的检测方法、装置以及移动终端
CN106373558A (zh) * 2015-07-24 2017-02-01 科大讯飞股份有限公司 语音识别文本处理方法及系统
CN106851515A (zh) * 2017-03-03 2017-06-13 广东欧珀移动通信有限公司 扬声器出声孔堵塞检测方法和装置
CN107509153A (zh) * 2017-08-18 2017-12-22 广东欧珀移动通信有限公司 声音播放器件的检测方法、装置、存储介质及终端
CN107705804A (zh) * 2017-09-26 2018-02-16 维沃移动通信有限公司 一种发声设备状态检测方法及移动终端
CN108063999A (zh) * 2017-11-14 2018-05-22 维沃移动通信有限公司 一种防尘网检测方法、移动终端

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101079836A (zh) * 2006-12-21 2007-11-28 腾讯科技(深圳)有限公司 一种基于非对称媒体的即时通信方法及系统
CN101452705A (zh) * 2007-12-07 2009-06-10 希姆通信息技术(上海)有限公司 语音文字转换、手语文字转换的方法和装置
US20120265536A1 (en) * 2011-04-14 2012-10-18 Hyundai Motor Company Apparatus and method for processing voice command
CN102710539A (zh) * 2012-05-02 2012-10-03 中兴通讯股份有限公司 语音信息传送方法及装置
CN106373558A (zh) * 2015-07-24 2017-02-01 科大讯飞股份有限公司 语音识别文本处理方法及系统
CN105979053A (zh) * 2016-04-18 2016-09-28 广东欧珀移动通信有限公司 移动终端中麦克风的检测方法、装置以及移动终端
CN106851515A (zh) * 2017-03-03 2017-06-13 广东欧珀移动通信有限公司 扬声器出声孔堵塞检测方法和装置
CN107509153A (zh) * 2017-08-18 2017-12-22 广东欧珀移动通信有限公司 声音播放器件的检测方法、装置、存储介质及终端
CN107705804A (zh) * 2017-09-26 2018-02-16 维沃移动通信有限公司 一种发声设备状态检测方法及移动终端
CN108063999A (zh) * 2017-11-14 2018-05-22 维沃移动通信有限公司 一种防尘网检测方法、移动终端

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800543A (zh) * 2020-06-30 2020-10-20 深圳传音控股股份有限公司 音频文件的处理方法、终端设备及存储介质
CN112422747A (zh) * 2020-11-20 2021-02-26 维沃移动通信有限公司 通话方法及装置
CN112711366A (zh) * 2020-12-23 2021-04-27 维沃移动通信(杭州)有限公司 图像生成方法、装置和电子设备

Similar Documents

Publication Publication Date Title
CN108737921B (zh) 一种播放控制方法、系统、耳机和移动终端
CN108874357B (zh) 一种提示方法及移动终端
CN107799125A (zh) 一种语音识别方法、移动终端及计算机可读存储介质
CN109215683B (zh) 一种提示方法及终端
CN111477243B (zh) 音频信号处理方法及电子设备
CN108196815B (zh) 一种通话声音的调节方法和移动终端
CN109065060B (zh) 一种语音唤醒方法及终端
CN111010608B (zh) 视频播放的方法及电子设备
CN109451158B (zh) 一种提醒方法和装置
CN110012143B (zh) 一种受话器控制方法及终端
CN111343540B (zh) 一种钢琴音频的处理方法及电子设备
CN110995921A (zh) 通话处理方法、电子设备及计算机可读存储介质
CN109754823A (zh) 一种语音活动检测方法、移动终端
CN107749306B (zh) 一种振动优化的方法及移动终端
CN111182118B (zh) 一种音量调节方法及电子设备
CN111093137B (zh) 一种音量控制方法、设备及计算机可读存储介质
CN109547894A (zh) 一种电声器件振幅调整方法、装置和移动终端
CN107705804A (zh) 一种发声设备状态检测方法及移动终端
CN112382282B (zh) 一种语音去噪处理方法、装置、电子设备及存储介质
CN110913070B (zh) 一种通话方法及终端设备
CN110677770B (zh) 发声控制方法、电子设备及介质
CN109348366B (zh) 一种利用电参数实现音量调节的方法及移动终端
CN107743174B (zh) 一种声音信号的削波判定方法及移动终端
CN109769175A (zh) 一种音频处理方法和电子设备
CN108390996A (zh) 一种显示方法、移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200410