CN105141770A - 一种信息处理方法和电子设备 - Google Patents
一种信息处理方法和电子设备 Download PDFInfo
- Publication number
- CN105141770A CN105141770A CN201510564660.7A CN201510564660A CN105141770A CN 105141770 A CN105141770 A CN 105141770A CN 201510564660 A CN201510564660 A CN 201510564660A CN 105141770 A CN105141770 A CN 105141770A
- Authority
- CN
- China
- Prior art keywords
- information
- electronic equipment
- feature parameter
- obtains
- transmission information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Telephonic Communication Services (AREA)
Abstract
本发明提供一种信息处理方法和电子设备,其中,所述信息处理方法包括:控制采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;将所述第一发送信息通过通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
Description
技术领域
本发明涉及通信技术,尤其涉及一种信息处理方法和电子设备。
背景技术
目前,用户通常使用移动通信终端进行语音通信,具体的,主叫移动通信终端获取主叫用户的语音并传输给被叫移动通信终端,被叫移动通信终端将主叫移动通信终端发来的语音播放给被叫用户;相应的,被叫移动通信终端获取被叫用户的语音并传输给主叫移动通信终端,主叫移动通信终端将被叫移动通信终端发来的语音播放给主叫用户,由此,主叫用户和被叫用户实现语音通信。
但是,移动通信终端的语音通信功能存在着很多现实性的缺陷。例如,通话语音质量易受环境噪声的干扰;在公共场合通话时,很难保证通话内容的私密性;以及听说有障碍的人士不方便使用语音进行交流等。
发明内容
有鉴于此,为解决现有技术存在的技术问题,本发明实施例提供一种信息处理方法和电子设备。
本发明实施例提供一种信息处理方法,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元;所述信息处理方法包括:
控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;
根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;
将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
其中,所述方法还包括:
控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
其中,所述方法还包括:
控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息;
将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
其中,所述方法还包括:
获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息;
输出所述第一输出信息。
其中,所述方法还包括:
获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息;
对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息;
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件;
当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出。
其中,所述方法还包括:
获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的;
对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息;
输出所述第三输出信息。
本发明实施例提供一种电子设备,所述电子设备包括采集单元和通信单元,所述电子设备还包括处理单元;
所述处理单元,用于控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;
根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;
将所述第一发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
其中,所述处理单元,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
其中,所述处理单元,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息;
将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
其中,所述处理单元,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
输出所述第一输出信息。
其中,所述处理单元,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息,所述第二输出信息包括语音信息和/或文字信息;
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件;
当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出;
控制所述第一输出信息和与其相关的第二输出信息同时输出。
其中,所述处理单元,还用于获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的;
对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息,所述第三输出信息包括语音信息和/或文字信息;
输出所述第三输出信息。
由上可知,本发明实施例的技术方案包括:控制采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;将所述第一发送信息通过通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。由此,本发明能能够使通信不受周围环境噪声的干扰,也能够有效保护用户隐私,还能够方便听说有障碍的人士进行通信。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明提供的一种信息处理方法的第一实施例的实现流程示意图;
图2为本发明提供的一种信息处理方法的第二实施例的实现流程示意图;
图3为本发明提供的一种信息处理方法的第三实施例的实现流程示意图;
图4为本发明提供的一种信息处理方法的第四实施例的实现流程示意图;
图5为本发明提供的一种信息处理方法的第五实施例的实现流程示意图;
图6为本发明提供的一种信息处理方法的第六实施例的实现流程示意图;
图7为本发明提供的一种电子设备的实施例的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚明白,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本发明提供的一种信息处理方法的第一实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图1所示,所述信息处理方法包括:
步骤101、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
这里,所述第一电子设备和所述第二电子设备可以是移动通信终端,如手机。所述采集单元可以包括前置摄像头。
在实际应用中,可以在通话建立起始时激活所述前置摄像头的采集功能,对近端用户(即所述第一电子设备用户)进行实时的唇部运动影像采集。
可以理解的是,所述第一特征参数可以包括唇部初始位置、运动轨迹等参数。
步骤102、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
这里,所述第一发送信息可以包括语言文字编码。
在实际应用中,所述唇语识别数据库可以根据实际情况进行更新,具体的,可以根据电子设备用户的历史使用情况进行更新。例如,根据用户的唇部特征、发音特点、用语习惯、词语频率对所述唇语识别数据库进行更新,通过更新不断完善所述唇语识别数据库。
步骤103、将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
这里,所述指定的方式包括以下方式中的一种或几种的组合:文本、语音、图像。
这里,所述通信单元可以包括射频模块,通过所述射频模块发送数据。
在实际应用中,远端(即所述第二电子设备)可以实时地将对方(即第一电子设备)传输过来的语言文字编码数据进行分析处理,再进行解析,最后合成语音,从而获取信息。如果远端用户不方便接听语音,可以选择信息对话窗口模式,将传输至此的语言文字编码数据转化成文字显示在手机屏幕上。由此,用户可以根据不同应用场合的需求,自由选择通话方式,同时实现双工工作模式。
本发明提供的一种信息处理方法的第二实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图2所示,所述信息处理方法包括:
步骤201、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
这里,所述第一电子设备和所述第二电子设备可以是移动通信终端,如手机。所述采集单元可以包括前置摄像头。
在实际应用中,可以在通话建立起始时激活所述前置摄像头的采集功能,对近端用户(即所述第一电子设备用户)进行实时的唇部运动影像采集。
可以理解的是,所述第一特征参数可以包括唇部初始位置、运动轨迹等参数。
步骤202、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
这里,所述第一发送信息可以包括语言文字编码。
在实际应用中,所述唇语识别数据库可以根据实际情况进行更新,具体的,可以根据电子设备用户的历史使用情况进行更新。例如,根据用户的唇部特征、发音特点、用语习惯、词语频率对所述唇语识别数据库进行更新,通过更新不断完善所述唇语识别数据库。
步骤203、将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
这里,所述通信单元可以包括射频模块,通过所述射频模块发送数据。
在实际应用中,远端(即所述第二电子设备)可以实时地将对方(即第一电子设备)传输过来的语言文字编码数据进行分析处理,再进行解析,最后合成语音,从而获取信息。如果远端用户不方便接听语音,可以选择信息对话窗口模式,将传输至此的语言文字编码数据转化成文字显示在手机屏幕上。由此,用户可以根据不同应用场合的需求,自由选择通话方式,同时实现双工工作模式。
步骤204、控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪。
这里,所述采集单元可以包括情绪传感器。所述情绪传感器的位置可以根据实际情况设置,可以内置于所述第一电子设备,也可以外置于所述第一电子设备。所述情绪传感器的数量可以是一个或多个,那么有的情绪传感器可以外置,有的情绪传感器可以内置。
所述采集单元采集的所述第二特征参数至少包括以下参数中的一个:用户的生理参数、所述第一电子设备的状态参数。
所述生理参数可以包括以下参数中的一个或多个:用户的心跳、脑波、汗腺、皮肤电压、唇部运动、面部表情等。
所述状态参数可以包括以下参数中的一个或多个:所述第二电子设备的震动幅度、震动频率、压力(由用户对所述第一电子设备的握力产生)、输入信息等。
不难理解的是,获取的参数种类越多对用户的情绪的判断越准确。
在实际应用中,当获取的参数为多个时,可以对不同的参数预先设置不同的权重值,根据权重值对情绪进行更准确的识别。
步骤205、根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息。
这里,所述第二发送信息可以包括语言文字编码。
在实际应用中,所述情绪识别数据库可以根据实际情况进行更新,具体的,可以根据电子设备用户的历史使用情况进行更新。例如,根据用户的唇部特征、情绪特点、手机使用习惯、面部特征、生理特征等对所述情绪识别数据库进行更新,通过更新不断完善所述情绪识别数据库。
步骤206、将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
这里,所述第二发送信息可以包括语言文字编码。所述第二电子设备对收到的信息进行语音合成和/或文字转换,然后按照指定的方式输出。
需要说明的是,所述指定的方式包括以下方式中的一种或几种的组合:文本、语音、图像。
在实际应用中,远端(即所述第二电子设备)可以实时地将对方(即第一电子设备)传输过来的语言文字编码数据进行分析处理,再进行解析,最后合成信息。如果远端用户不方便接听语音,可以选择信息对话窗口模式,将传输至此的语言文字编码数据转化成文字或者符号显示在手机屏幕上。由此,用户可以根据不同应用场合的需求,自由选择通话方式,同时实现双工工作模式。
本实施例中包括控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;并且,根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息。这样,收到所述第二发送信息的第二电子设备能够实时了解所述第一电子设备使用者的情绪,由此获得更多信息,更便于交流沟通。
本发明提供的一种信息处理方法的第三实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图3所示,所述信息处理方法包括:
步骤301、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
步骤302、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
步骤303、控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪。
步骤304、根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息。
步骤305、将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息。
这里,将所述第一发送信息和所述第二发送信息进行合成,可以是将所述第一发送信息和所述第二发送信息进行打包,形成一个文件包。
这里,所述第三发送信息可以包括语言文字编码。
步骤306、将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
这里,所述第三发送信息可以包括语言文字编码。所述第二电子设备对收到的信息进行解包处理,并且对解包后的信息进行语音合成和/或文字转换,然后按照指定的方式输出。
需要说明的是,所述指定的方式包括以下方式中的一种或几种的组合:文本、语音、图像。
本实施例中第三发送信息包括能够用于表征用户情绪的第二发送信息,由此,第二电子设备使用者可以得知第一电子设备使用者的情绪,如紧张、焦虑、愉快等。
本实施例中包括控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息。此外。还将所述第一发送信息和所述第二发送信息进行合成得到第三发送信息。由此,第二电子设备能够同时收到所述第一发送信息和所述第二发送信息,使得第一发送信息和所述第二发送信息能够同步传达给第二电子设备的使用者,避免语言信息与情绪信息错位,导致第二电子设备的使用者产生误解,从而更有利于交流沟通。
有益效果
本发明提供的一种信息处理方法的第四实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图4所示,所述信息处理方法包括:
步骤401、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
步骤402、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
步骤403、将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
步骤404、获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的。
这里,所述获取所述第二电子设备发来的第一接收信息,可以是通过通信单元获取所述第二电子设备发来的第一接收信息。
步骤405、对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息。
这里,所述第一接收信息可以包括语言文字编码。所述第一电子设备对收到的信息进行语音合成和/或文字转换,得到第一输出信息。
步骤406、输出所述第一输出信息。
这里,输出所述第一输出信息可以是按照指定的方式输出。
需要说明的是,所述指定的方式包括以下方式中的一种或几种的组合:文本、语音、图像。
本实施例中,所述第一电子设备还能够获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的。还对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息并输出。这样,所述第一电子设备还可以获取第二电子设备使用者的唇语信息,从而使得所述第一电子设备使用者和第二电子设备使用者同时唇语进行交流。
有益效果
本发明提供的一种信息处理方法的第五实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图5所示,所述信息处理方法包括:
步骤501、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
步骤502、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
步骤503、将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
步骤504、获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的。
这里,所述获取所述第二电子设备发来的第三接收信息,可以是通过通信单元获取所述第二电子设备发来的第三接收信息。
步骤505、对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息。
这里,所述第三接收信息可以包括语言文字编码。所述第一电子设备对收到的信息进行解包处理,并且对解包后的信息进行语音合成和/或文字转换。
步骤506、输出所述第三输出信息。
这里,所述输出所述第三输出信息可以是按照指定的方式输出。
需要说明的是,所述指定的方式包括以下方式中的一种或几种的组合:文本、语音、图像。
本实施例中,所述第一电子设备还能够获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的。还对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息并输出。这样,所述第一电子设备还可以获取第二电子设备使用者的唇语信息和情绪信息,从而使得所述第一电子设备使用者和第二电子设备使用者同时唇语进行交流,并相互传输情绪信息,更便于交流沟通。
有益效果
本发明提供的一种信息处理方法的第六实施例,应用于第一电子设备,所述第一电子设备包括采集单元和通信单元,所述第一电子设备能够通过所述通信单元与第二电子设备建立通信连接;如图6所示,所述信息处理方法包括:
步骤601、控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动。
步骤602、根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息。
步骤603、将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
步骤604、获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的。
步骤605、获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的。
步骤606、对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息。
步骤607、对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息。
步骤608、判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件。
在实际应用中,所述判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件,可以为:
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否相同。
如果是,则:控制所述第一输出信息和所述第二输出信息同时输出。
当然,在实际应用中,所述第一接收信息的发送时间和所述第二接收信息的发送时间之间可能会有一定的间隔,那么,只要间隔在预设的时间间隔门限之内,也判定所述判断所述第一接收信息的发送时间和所述第二接收信息的发送时间满足预设的条件。
步骤609、当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出。
本实施例中,所述第一电子设备还能够获取所述第二电子设备发来的第一接收信息和第二接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的。当满足预设的条件时。将根据所述第一接收信息得到的第一输出信息与根据所述第二接收信息得到的第二输出信息同时输出,避免了语言信息与情绪信息错位,从而避免第一电子设备的使用者产生误解,更有利于交流沟通。
有益效果
综上所述,本发明实施例的技术方案包括:控制采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;将所述第一发送信息通过通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。由此,本发明能能够使通信不受周围环境噪声的干扰,也能够有效保护用户隐私,还能够方便听说有障碍的人士进行通信。
本发明提供的一种电子设备的实施例,如图7所示,所述电子设备包括采集单元701和通信单元702,所述电子设备能够通过所述通信单元与第二电子设备建立通信连接;所述电子设备还包括处理单元703;
所述处理单元703,用于控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;
根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;
将所述第一发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
本例中,所述第一电子设备和所述第二电子设备可以是移动通信终端,如手机。所述采集单元可以包括前置摄像头。
在实际应用中,可以在通话建立起始时激活所述前置摄像头的采集功能,对近端用户(即所述第一电子设备用户)进行实时的唇部运动影像采集。
可以理解的是,所述第一特征参数可以包括唇部初始位置、运动轨迹等参数。
这里,所述第一发送信息可以包括语言文字编码。
在实际应用中,所述唇语识别数据库可以根据实际情况进行调整,具体的,可以根据电子设备用户的历史使用情况进行调整。例如,根据用户的唇部特征、发音特点、用语习惯、词语频率对所述唇语识别数据库进行调整,通过调整不断完善所述唇语识别数据库。
这里,所述通信单元可以包括射频模块,通过所述射频模块发送数据。
在一实施例中,所述处理单元703,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
本例中,所述采集单元可以包括情绪传感器。所述情绪传感器的位可以根据实际情况设置,可以内置于所述第一电子设备,也可以外置于所述第一电子设备。所述情绪传感器的数量可以是一个或多个,那么有的情绪传感器可以外置,有的情绪传感器可以内置。
所述采集单元采集的所述第二特征参数至少包括以下参数中的一个:用户的生理参数、所述第一电子设备的状态参数。
所述生理参数可以包括以下参数中的一个或多个:用户的心跳、脑波、汗腺、皮肤电压、唇部运动、面部表情等。
所述状态参数可以包括以下参数中的一个或多个:所述第二电子设备的震动幅度、震动频率、压力(有用户对所述第一电子设备的握力产生)、输入信息等。
不难理解的是,获取的参数种类越多对用户的情绪的判断越准确。
在实际应用中,当获取的参数为多个时,可以对不同的参数预先设置不同的权重值,根据权重值对情绪进行更准确的识别。
这里,所述第二发送信息可以包括语言文字编码。
在实际应用中,所述情绪识别数据库可以根据实际情况进行调整,具体的,可以根据电子设备用户的历史使用情况进行调整。例如,根据用户的唇部特征、情绪特点、手机使用习惯、面部特征、生理特征等对所述情绪识别数据库进行调整,通过调整不断完善所述情绪识别数据库。
在一实施例中,所述处理单元703,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息;
将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
本例中,所述第三发送信息可以包括语言文字编码。
在一实施例中,所述处理单元703,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
输出所述第一输出信息。
在实际应用中,远端(即所述第二电子设备)可以实时地将对方(即第一电子设备)传输过来的语言文字编码数据进行分析处理,再进行解析,最后合成语音,从而获取信息。如果远端用户不方便接听语音,可以选择信息对话窗口模式,将传输至此的语言文字编码数据转化成文字显示在手机屏幕上。由此,用户可以根据不同应用场合的需求,自由选择通话方式,同时实现双工工作模式。
在一实施例中,所述处理单元703,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息,所述第二输出信息包括语音信息和/或文字信息;
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件;
当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出;
控制所述第一输出信息和与其相关的第二输出信息同时输出。
在实际应用中,所述判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件,可以为:
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否相同。
如果是,则:控制所述第一输出信息和所述第二输出信息同时输出。
当然,在实际应用中,所述第一接收信息的发送时间和所述第二接收信息的发送时间之间可能会有一定的间隔,那么,只要间隔在预设的时间间隔门限之内,也判定所述判断所述第一接收信息的发送时间和所述第二接收信息的发送时间满足预设的条件。
在一实施例中,所述处理单元703,还用于获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的;
对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息,所述第三输出信息包括语音信息和/或文字信息;
输出所述第三输出信息。
在实际应用中,远端(即所述第二电子设备)可以实时地将对方(即第一电子设备)传输过来的语言文字编码数据进行分析处理,再进行解析,最后合成信息。如果远端用户不方便接听语音,可以选择信息对话窗口模式,将传输至此的语言文字编码数据转化成文字或者符号显示在手机屏幕上。由此,用户可以根据不同应用场合的需求,自由选择通话方式,同时实现双工工作模式。
这里,需要说明的是,所述处理单元703可以由电子设备中的中央处理器(CentralProcessingUnit,CPU)、数字信号处理器(DigitalSignalProcessor,DSP)或可编程逻辑阵列(Field-ProgrammableGateArray,FPGA)实现。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(RandomAccessMemory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(RandomAccessMemory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (12)
1.一种信息处理方法,应用于第一电子设备,其特征在于,所述第一电子设备包括采集单元和通信单元;所述信息处理方法包括:
控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;
根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;
将所述第一发送信息通过所述通信单元发送给第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
2.根据权利要求1所述的信息处理方法,其特征在于,所述方法还包括:
控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
3.根据权利要求1所述的信息处理方法,其特征在于,所述方法还包括:
控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息;
将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
4.根据权利要求1所述的信息处理方法,其特征在于,所述方法还包括:
获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息;
输出所述第一输出信息。
5.根据权利要求1所述的信息处理方法,其特征在于,所述方法还包括:
获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息;
对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息;
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件;
当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出。
6.根据权利要求1所述的信息处理方法,其特征在于,所述方法还包括:
获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的;
对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息;
输出所述第三输出信息。
7.一种电子设备,其特征在于,所述电子设备包括采集单元和通信单元,所述电子设备还包括处理单元;
所述处理单元,用于控制所述采集单元采集所述第一电子设备用户的第一特征参数,所述第一特征参数能够表征唇部运动;
根据预设的唇语识别数据库对所述第一特征参数进行识别,得到第一发送信息;
将所述第一发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第一发送信息。
8.根据权利要求7所述的电子设备,其特征在于,所述处理单元,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第二发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第二发送信息。
9.根据权利要求7所述的电子设备,其特征在于,所述处理单元,还用于控制所述采集单元采集所述第一电子设备用户的第二特征参数,所述第二特征参数能够表征用户情绪;
根据预设的情绪识别数据库对所述第二特征参数进行识别,得到第二发送信息;
将所述第一发送信息和所述第二发送信息进行合成,得到第三发送信息;
将所述第三发送信息通过所述通信单元发送给所述第二电子设备,以使所述第二电子设备能够根据指定的方式输出所述第三发送信息。
10.根据权利要求7所述的电子设备,其特征在于,所述处理单元,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
输出所述第一输出信息。
11.根据权利要求7所述的电子设备,其特征在于,所述处理单元,还用于获取所述第二电子设备发来的第一接收信息,所述第一接收信息是识别所述第二电子设备用户的唇部运动信息得到的;
获取所述第二电子设备发来的第二接收信息,所述第二接收信息是识别所述第二电子设备用户的情绪信息得到的;
对所述第一接收信息进行语音合成和/或文字转换,得到第一输出信息,所述第一输出信息包括语音信息和/或文字信息;
对所述第二接收信息进行语音合成和/或文字转换,得到第二输出信息,所述第二输出信息包括语音信息和/或文字信息;
判断所述第一接收信息的发送时间和所述第二接收信息的发送时间是否满足预设的条件;
当满足预设的条件时,控制所述第一输出信息和所述第二输出信息同时输出;
控制所述第一输出信息和与其相关的第二输出信息同时输出。
12.根据权利要求7所述的电子设备,其特征在于,所述处理单元,还用于获取所述第二电子设备发来的第三接收信息,所述第三接收信息是识别所述第二电子设备用户的唇部运动信息和情绪得到的;
对所述第三接收信息进行语音合成和/或文字转换,得到第三输出信息,所述第三输出信息包括语音信息和/或文字信息;
输出所述第三输出信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510564660.7A CN105141770A (zh) | 2015-09-07 | 2015-09-07 | 一种信息处理方法和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510564660.7A CN105141770A (zh) | 2015-09-07 | 2015-09-07 | 一种信息处理方法和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105141770A true CN105141770A (zh) | 2015-12-09 |
Family
ID=54726969
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510564660.7A Pending CN105141770A (zh) | 2015-09-07 | 2015-09-07 | 一种信息处理方法和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105141770A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017193534A1 (zh) * | 2016-05-12 | 2017-11-16 | 中兴通讯股份有限公司 | 一种听力障碍通信方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1274222A2 (en) * | 2001-07-02 | 2003-01-08 | Nortel Networks Limited | Instant messaging using a wireless interface |
CN201985992U (zh) * | 2010-12-29 | 2011-09-21 | 上海华勤通讯技术有限公司 | 带有唇语识别功能的手机 |
CN102780651A (zh) * | 2012-07-21 | 2012-11-14 | 上海量明科技发展有限公司 | 在即时通信消息中加注情绪数据的方法、客户端及系统 |
-
2015
- 2015-09-07 CN CN201510564660.7A patent/CN105141770A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1274222A2 (en) * | 2001-07-02 | 2003-01-08 | Nortel Networks Limited | Instant messaging using a wireless interface |
CN201985992U (zh) * | 2010-12-29 | 2011-09-21 | 上海华勤通讯技术有限公司 | 带有唇语识别功能的手机 |
CN102780651A (zh) * | 2012-07-21 | 2012-11-14 | 上海量明科技发展有限公司 | 在即时通信消息中加注情绪数据的方法、客户端及系统 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017193534A1 (zh) * | 2016-05-12 | 2017-11-16 | 中兴通讯股份有限公司 | 一种听力障碍通信方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107591152A (zh) | 基于耳机的语音控制方法、装置及其设备 | |
US10708423B2 (en) | Method and apparatus for processing voice information to determine emotion based on volume and pacing of the voice | |
CN104335559B (zh) | 一种自动调节音量的方法、音量调节装置及电子设备 | |
CN110347863B (zh) | 话术推荐方法和装置及存储介质 | |
CN106445156A (zh) | 一种基于虚拟现实的智能家居控制的方法、装置以及终端 | |
CN108197572A (zh) | 一种唇语识别方法和移动终端 | |
CN103491251A (zh) | 一种监控用户通话的方法及终端 | |
CN106170989B (zh) | 耳机的识别方法和装置、耳机的控制方法和装置、耳机 | |
CN105681546A (zh) | 一种语音处理的方法、装置以及终端 | |
CN105975063B (zh) | 一种控制智能终端的方法和装置 | |
CN107919138B (zh) | 一种语音中的情绪处理方法及移动终端 | |
CN105654767A (zh) | 一种到站提醒处理的方法、装置以及终端 | |
CN112634923B (zh) | 基于指挥调度系统的音频回声消除方法、设备、存储介质 | |
CN109376363A (zh) | 一种基于耳机的实时语音翻译方法及装置 | |
CN107360332A (zh) | 通话状态显示方法、装置、移动终端及存储介质 | |
CN104683566A (zh) | 用于测试在用于重制音频信号的系统和移动电话之间的无线交互作用的系统以及相应的方法 | |
CN112256742A (zh) | 按摩模式控制方法、相关装置及计算机存储介质 | |
CN108766416B (zh) | 语音识别方法及相关产品 | |
CN106572417A (zh) | 音效控制方法和装置 | |
CN110489519B (zh) | 基于会话预测模型的会话方法及相关产品 | |
KR20220045114A (ko) | 차량탑재 통화를 위한 방법, 장치, 기기, 매체 및 프로그램 | |
CN108259653B (zh) | 一种语音测试方法及装置、系统 | |
CN108053826A (zh) | 用于人机交互的方法、装置、电子设备及存储介质 | |
CN105141770A (zh) | 一种信息处理方法和电子设备 | |
CN110262867A (zh) | 一种基于车载系统的远程控制方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20151209 |