CN111756930A - 通信控制方法、通信控制装置、电子设备和可读存储介质 - Google Patents
通信控制方法、通信控制装置、电子设备和可读存储介质 Download PDFInfo
- Publication number
- CN111756930A CN111756930A CN202010599280.8A CN202010599280A CN111756930A CN 111756930 A CN111756930 A CN 111756930A CN 202010599280 A CN202010599280 A CN 202010599280A CN 111756930 A CN111756930 A CN 111756930A
- Authority
- CN
- China
- Prior art keywords
- information
- target information
- audio
- communication control
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Telephone Function (AREA)
Abstract
本申请公开了一种通信控制方法、通信控制装置、电子设备和可读存储介质。该通信控制方法包括:播放语音音频;在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。该方法可在根据目标信息确定语音音频中存在隐私内容时及时暂停播放语音音频,以免附近的人听到隐私内容,有助于保证隐私安全。同时显示目标信息对应的信息,可利用显示屏实现与用户的交互,确保了通信过程顺利、可靠地进行。
Description
技术领域
本申请属于通信技术领域,具体涉及一种通信控制方法、通信控制装置、电子设备和可读存储介质。
背景技术
随着手机设备和通讯技术的不断发展,远程通信成为了人们最常用的沟通方式之一,包括语音通话、视频通话、语音消息会话等。而通信过程中,人们并不总能预料到对方会说出什么内容,当人们处在公共场合等隐私性低的环境中时,若突然播放出隐私内容,则很可能被附近的人听到,造成隐私泄漏的问题。
发明内容
本申请实施例提供了一种通信控制方法、通信控制装置、电子设备和计算机可读存储介质,能够解决相关技术中在隐私性低的环境中通信时可能出现隐私泄漏的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种通信控制方法,包括:
播放语音音频;
在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
第二方面,本申请实施例提供了一种通信控制装置,包括:
播放模块,用于播放语音音频;
播放模块还用于在语音音频包括目标信息的情况下,暂停播放语音音频;
显示模块,用于在语音音频包括目标信息的情况下,显示目标信息对应的信息。
第三方面,本申请实施例提供了一种电子设备,包括处理器,存储器及存储在存储器上并可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面所述的通信控制方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,可读存储介质上存储程序或指令,程序或指令被处理器执行时实现如第一方面所述的通信控制方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的通信控制方法。
在本申请实施例中,通过播放语音音频;在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息,可在根据目标信息确定语音音频中存在隐私内容时及时暂停播放语音音频,以免附近的人听到隐私内容,有助于保证隐私安全。同时显示目标信息对应的信息,可利用显示屏实现与用户的交互,确保了通信过程顺利、可靠地进行。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的通信控制方法的流程图之一;
图2是本申请实施例提供的电子设备的显示示意图之一;
图3是本申请实施例提供的电子设备的显示示意图之二;
图4是本申请实施例提供的电子设备的显示示意图之三;
图5是本申请实施例提供的电子设备的显示示意图之四;
图6是本申请实施例提供的通信对象电子设备的显示示意图之一;
图7是本申请实施例提供的通信控制方法的流程图之二;
图8是本申请实施例提供的电子设备的显示示意图之五;
图9是本申请实施例提供的通信控制方法的流程图之三;
图10是本申请实施例提供的电子设备的显示示意图之六;
图11是本申请实施例提供的电子设备的显示示意图之七;
图12是本申请实施例提供的电子设备的显示示意图之八;
图13是本申请实施例提供的通信控制方法的流程图之四;
图14是本申请实施例提供的电子设备的显示示意图之九;
图15是本申请实施例提供的电子设备的显示示意图之十;
图16是本申请实施例提供的通信控制方法的流程图之五;
图17是本申请实施例提供的电子设备的显示示意图之十一;
图18是本申请实施例提供的电子设备的显示示意图之十二;
图19是本申请实施例提供的电子设备的显示示意图之十三;
图20是本申请实施例提供的电子设备的显示示意图之十四;
图21是本申请实施例提供的电子设备的显示示意图之十五;
图22是本申请实施例提供的通信控制方法的流程图之六;
图23是本申请实施例提供的电子设备的显示示意图之十六;
图24是本申请实施例提供的电子设备的显示示意图之十七;
图25是本申请实施例提供的通信控制方法的流程图之七;
图26是本申请实施例提供的电子设备的显示示意图之十八;
图27是本申请实施例提供的通信控制方法的流程图之八;
图28是本申请实施例提供的通信对象电子设备的显示示意图之二;
图29是本申请实施例提供的通信对象电子设备的显示示意图之三;
图30是本申请实施例提供的通信控制装置的结构图;
图31是本申请实施例提供的电子设备的结构图之一;
图32是本申请实施例提供的电子设备的结构图之二。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的通信控制方法、通信控制装置、电子设备和计算机可读存储介质进行详细地说明。
本申请的实施例提供了一种通信控制方法。如图1所示,该通信控制方法包括:
步骤102,播放语音音频。
在该实施例中,在电子设备处于通信状态时,正常播放通信的语音音频。电子设备包括但不限于移动终端、平板电脑、计算机、笔记本电脑、可穿戴设备、车载终端等,电子设备的操作系统可包括Android系统、Windows系统、Mac OS系统。当前通信可以是通话,例如语音通话、视频通话,此时语音音频可为语音通话中实时播放的音频,也可为视频通话中实时播放的音频,当前通信也可以是语音消息会话,此时语音音频可为会话中收发的语音消息的音频。对于语音消息会话,由于接收的语音消息可能包含用户意料之外的隐私内容,因而也可执行后续操作以保障隐私安全。
步骤104,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
在该实施例中,可配置隐私模式,在隐私模式下,若判定语音音频中包括与隐私相关的目标信息,则暂停播音,以避免隐私泄漏,并显示目标信息对应的信息,以满足通信需求。其中,目标信息可以是隐私内容本身,也可以是与隐私内容相关的信息。具体而言,对于前者,在接收到一段语音音频后,可先不予播放,而直接识别并判断接收的语音音频是否为隐私内容,或是否包含隐私内容,确保判断的准确性。对于后者,可以利用已接收的语音音频,根据上下文预测待接收的语音音频是否为隐私内容,例如分析已接收的语音音频中是否包含预示隐私内容的内容,如“密码”、“身份证号”、“金额”、“别告诉别人”等,以提高响应速度,减少直接分析语音音频造成的播音延迟。通过识别出语音音频中包括的目标信息,可高效地确认语音音频中存在的隐私内容,作为后续操作的基础,既有助于保障用户隐私安全,又避免了大量的信息检测带来的通信不便。此时,通过暂停播放语音音频,可避免附近的人听到隐私内容,有助于保证用户隐私安全。同时显示目标信息对应的信息,可利用显示屏实现与用户的交互,弥补暂停播放语音音频对用户造成的不便,确保了通信过程顺利、可靠地进行。
具体地,目标信息对应的信息可以是隐私内容,也可以是包含隐私内容的一段完整内容。例如语音音频为“银行卡密码是123456”,此时隐私内容为具体密码,即“123456”,可以显示“123456”,以减少信息显示量,也可以如图2所示,可在显示区域202显示“银行卡密码是123456”,以便用户全面了解相关信息。此外,目标信息对应的信息还可为提示信息,以提示用户当前通话中涉及隐私内容,提示用户回复时注意保密,从而进一步保障了用户的隐私安全。
可选地,在暂停播放语音音频的同时,还可替代播放指定音效数据,如“嘀嘀嘀”,以避免直接暂停播音时用户无法区分是信号弱造成的数据接收不成功还是存在隐私内容,以便用户明确了解当前的通信情况。
具体地,针对隐私安全问题,可为步骤104设置执行条件,在满足执行条件时认为隐私泄漏风险较高,执行步骤104的需求较高,才执行步骤104,否则不予执行,以降低在隐私泄漏风险较低时的计算负荷,提升隐私保护效率。接下来对几个可选的执行条件进行介绍,以下执行条件可择一设置,也可设置其中的多个。
可选地,在经扬声器播放语音音频,即通信模式为扬声器播放模式的情况下,执行步骤104。由于采用扬声器播放模式时,周围的人可以听到语音音频,因而可认为隐私泄漏风险较高。可以理解的是,语音音频的播放模式可能随时变化,因而可在检测到播放模式切换至扬声器播放模式时执行步骤104,并在检测到播放模式从扬声器播放模式切换至其他模式时不再执行步骤104。
可选地,获取麦克风采集的环境音数据,根据环境音数据确定是否执行步骤104。麦克风采集的环境音数据可以反映当前环境的情况,若根据环境音数据判定环境较为嘈杂或者存在陌生人,例如通过噪声检测分析环境音的音量值超过音量阈值,又如分析环境音中包含的声纹特征,进而确定环境中人的数量超过数量阈值,或环境音中的声纹特征属于陌生人,则可认为隐私泄漏风险较高。
可选地,获取摄像头采集的环境图像数据,根据环境图像数据确定是否执行步骤104。对于摄像头采集的环境图像数据,可结合图像识别技术分析环境情况,确定当前环境是否为高风险环境,例如是否处于人流密集场所,周围是否存在陌生人等,进而预测隐私泄漏风险的高低。
可选地,接收用户启动隐私模式的输入,响应于该输入,执行步骤104。此处引入用户的输入操作,可交由用户自行判断隐私泄露风险,在用户期望以隐私模式通信时,执行步骤104,可满足用户的个性化需求,同时弥补其他执行条件可能存在的失效风险。举例来说,可利用电子设备上已有的实体开关装置(如长按音量减小键),或提供虚拟的开关按键,用户对相应开关的输入即为启动隐私模式的输入,此时可强制进入隐私模式。可以理解的是,用户可在通信过程中的任意时刻启动隐私模式,以便随时实现隐私通信功能。
可以理解的是,当同时设置以上多个执行条件时,可为这些执行条件设置优先级,在满足了优先级高的执行条件的情况下,再判断是否满足优先级低的执行条件,则在未满足优先级高的执行条件时,不必再判断是否满足优先级低的执行条件,有助于缩短判断时间,提升数据处理效率。例如,对于以上四个执行条件,可令第一个执行条件,即通信模式为扬声器播放模式的优先级最高,令后三个执行条件的优先级次之。
在本申请的部分实施方式中,具体地,显示目标信息对应的信息,包括:显示经过加密处理的目标信息对应的信息。
在该实施例中,通过对显示的信息进行加密处理,可以避免周围人看到显示的隐私内容,充分保障了隐私安全。具体地,目标信息对应的信息为包含隐私内容的一段完整内容,可仅对其中的隐私内容进行加密处理,对其他信息则正常显示,既可为用户提供足够的背景信息,又能保护隐私安全。仍以上文中的“银行卡密码是123456”为例,如图3所示,经加密处理后,例如可显示为“银行卡密码是******”,使用户了解加密的是银行卡密码。
进一步地,将显示的经过加密处理的目标信息对应的信息记为加密信息,在步骤104之后,通信控制方法还包括:接收用户对加密信息的查看输入;响应于查看输入,获取鉴权信息;根据鉴权信息确定是否对加密信息执行解密处理;显示经过解密处理的信息。
在该实施例中,当加密显示隐私内容后,还可提供相应的查看输入,以便用户在急需查看隐私内容或已经到达安全环境后,及时查看隐私内容。通过获取鉴权信息,可核实查看者身份,充分保障隐私安全。具体地,例如图3所示,当用户手指204点击该隐私内容以执行查看输入时,可如图4所示,进一步显示鉴权信息的输入界面206,以提示用户执行指纹验证或输入密码,此时获取到的用户指纹或密码即为鉴权信息。可以想到的是,也可通过其他方式实现用户鉴权,例如人脸识别、虹膜识别、手势密码等。
进一步地,步骤104包括:接收用户对待编辑文本的编辑输入;响应于编辑输入,在语音音频包括目标信息的情况下,暂停播放语音音频,将目标信息对应的信息输入待编辑文本,并显示目标信息对应的信息。
在该实施例中,当用户正在编辑文本时,通过将目标信息对应的信息输入该文本中,可简化用户的编辑操作,实现语音自动输入功能,提升文本编辑效率。举例来说,待编辑文本可为输入框,相应地,对待编辑文本的编辑输入为对输入框的激活输入,例如长按输入框,让输入框获取焦点并激活,此时通信对象可通过语音表述直接在我方电子设备的输入框中输入目标信息对应的信息,实现信息的自动输入。待我方用户松开手后,输入框失去焦点,输入过程结束。可选地,除保持长按前台应用的输入框外,也可采用长按输入框以实现激活,松手后继续保持输入,再次点击输入框以结束输入的方案,还可在提取到完整的信息后自动结束输入。此外,输入框常常对输入内容的类型存在限制,此时目标信息对应的信息为相应类似的信息,例如可以是账户、手机号、卡号、验证码等数字类信息。可以理解的是,对于数字类信息,目标信息对应的信息具体为隐私内容;当待编辑文本对输入内容的类型无限制时,目标信息则仍然可以是隐私内容,也可以是包含隐私内容的一段完整内容。这样,可以在便捷地根据对方的语音输入信息的同时,保护隐私。
相应地,显示目标信息对应的信息时,可具体在待编辑文本中显示该信息。具体地,当待编辑文本为前台应用中的输入框时,可在输入框中显示经过加密处理的目标信息对应的信息,同时系统在底层对该信息进行解密,并将该信息传到应用的下一步中,既充分保障了通信对象的信息安全,又保证了应用的正常运行。进一步地,此时可提示通信对象“您已进入隐私输入模式,后续语音中包含的数字信息会加密后填入对方激活的输入框中,对方暂时不会听到您的语音”,对方说完语音后,该信息就会自动填充到我方的输入框内,输入结束后,或输入结束的同时,可提示对方“隐私语音输入已完成,退出隐私输入模式”。
进一步地,在通信对象通过语音表述输入信息的同时,通信对象电子设备的通话页面可产生数字镜像,通信对象可以实时查看语音输入是否有误,待通信对象确认后,我方会收到提示“对方已确认”。
例如,如图5所示,当需要通信对象的银行卡号进行转账操作时,只需要将语音通话或视频通话切入后台,然后打开转账页面210,长按卡号输入框212获取焦点,通信对象可以说出银行卡号,从而自动填充到卡号输入框212内,通信对象可以看到数字镜像,确认信息无误,我方收到确认消息后,可松开手,输入过程结束。
除语音通话和视频通话外,对于语音消息会话,电子设备可在任意时间点识别语音消息的内容,当用户复制某一语音消息,并粘贴到待编辑文本(例如输入框)内时,可提取该语音消息中的目标信息对应的信息,并将该信息输入待编辑文本。可选地,当待编辑文本对输入内容的类型存在限制时,可提取语音消息中相应类型的信息。例如,通信对象发送了一段语音,语音内包含银行卡号等数字信息,我方用户可通过复制这段语音,然后再使用如图5所示的转账页面210的卡号输入框212进行粘贴,即可直接填入卡号数字信息。操作便捷,且能够保护隐私。
可选地,上述编辑输入也可在步骤104之后,换言之,在步骤104之后,通信控制方法还包括:接收用户对待编辑文本的编辑输入;响应于编辑输入,将目标信息对应的信息输入待编辑文本。由于用户可能在显示目标信息对应的信息后,才有在待编辑文本中输入该信息的需求,此时响应于用户的编辑输入,再将所显示的目标信息对应的信息输入待编辑文本中,可灵活满足用户的编辑需求。进一步地,为明确用户期望输入的是目标信息对应的信息,而非普通的文本,可将该编辑输入与普通的文本输入区分开来,举例来说,可具体设置为当用户长按输入光标时,显示输入菜单,在输入菜单中提供该编辑输入的选项,例如“输入显示的语音内容”。可以理解的是,参照前述实施例,同样可以对输入的信息类型进行限制,当待编辑文本为前台应用中的输入框时,也可以在输入框中显示经过加密处理的目标信息对应的信息,在此不再赘述。
作为一种可能的实施方式,当需要输入信息时,除采用前述的通信对象语音表述的方式,即输入语音音频中的目标信息对应的信息外,还可采用通信对象手动输入的方式。具体地,该方式可执行为:接收用户对待编辑文本的远程编辑输入;响应于远程编辑输入,发送输入请求至通信对象电子设备,以请求通信对象电子设备输入信息;接收通信对象电子设备输入的信息。
在该实施例中,通过向通信对象设备发送输入请求,可提示通信对象经其设备输入与该请求对应的信息,进而直接接收通信对象电子设备反馈的信息,通信对象不必说出隐私信息,也就不必担心隐私信息被周围的陌生人听到,保障了通信对象的信息安全。具体地,通信过程中,我方用户可针对待编辑文本执行远程编辑输入,例如前文所述的通过调出输入菜单来提供远程编辑输入的选项,又如长按输入框。以长按输入框为例,我方输入框获取焦点并激活后,向通信对象电子设备发送输入请求,在通信对象电子设备的通信页面会弹出相应的输入框,对方只需要将隐私信息填写到通信页面的输入框中,该信息就会自动填充到我方的输入框内。
其中,对于通信对象电子设备输入的信息,其在我方电子设备上的显示方案参照前述实施例中目标信息对应的信息的显示方案,在此不再赘述。对于通信对象电子设备的显示方案,例如图6所示,若我方显示的是经过加密处理的信息,则通信对象电子设备在接收到输入请求后,会进入隐私操作页面1002,并在隐私操作页面1002产生输入框镜像1004,通信对象可以在不说出隐私信息的情况下,将信息填入输入框镜像1004内。待通信对象确认后,我方的输入框自动填充完成,输入框自动填充的信息是加密后的,对我方用户不可见,在点击如图5所示的“下一步”按钮时,我方电子设备的系统会对其解密,将信息传入应用的下一步中。
作为一种可能的实施方式,如图7所示,该通信控制方法包括:
步骤302,播放语音音频。
步骤304,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息,其中,目标信息包括第一目标信息。
需说明的是,此处的第一目标信息用于代表目标信息中的任意一个信息,并非特指一个具体的信息,以便在下文中描述播放语音音频的方案。
步骤306,从语音音频中截取目标信息对应的第一音频片段。
步骤308,存储第一音频片段。
在该实施例中,如前所述,目标信息与隐私相关,可以是隐私内容本身,也可以是与隐私内容相关的信息,显示的与目标信息对应的信息则可以是隐私内容,也可以是包含隐私内容的一段完整内容。相应地,与目标信息对应的第一音频片段为显示的信息的原语音,也就是既可以是语音音频中隐私内容的原语音,也可以是语音音频中包含隐私内容的一段完整内容的原语音。可选地,语音音频中暂停播放的正是第一音频片段,对于第一音频片段之外的其他音频片段,可正常播放。通过从语音音频中截取第一音频片段并予以存储,可保留所显示的内容的原语音,亦即保留未播放的音频片段,以便用户重听,并可供用户核实显示的隐私内容是否正确,保证了信息处理的可靠性。
步骤310,接收用户对第一目标信息对应的信息的第一输入。
步骤312,响应于第一输入,播放第一音频片段中与第一目标信息对应的片段。
在该实施例中,对于显示的第一目标信息对应的信息,用户可直接执行输入操作,以播放相应的音频片段,而不必到存储的所有第一音频片段中去查找所需重听的片段,提升了用户操作的便利性。举例来说,如图3所示,当用户手指204点击或长按该隐私内容时,弹出的功能菜单208中可包含“听筒播放原语音”的选项,进而实现播放原语音的功能,此时可不获取鉴权信息,以便于用户操作,也可获取鉴权信息,以充分保障信息安全。对于需要获取鉴权信息的情况,也可设定为当显示的是已经过解密处理的信息时,可不获取鉴权信息而直接播放原语音,以避免重复鉴权。可选地,对于已获取鉴权信息而播放原语音的情况,则可先以解密形式显示隐私内容,经过一定时长,例如1分钟后,又自动以加密形式显示隐私内容,以避免隐私内容泄露。可以想到的是,用户可选择或修改上述各鉴权方式,以满足个性化需求。
进一步地,在播放音频片段时,还可接收用户对当前播放的音频片段的调整输入,响应于调整输入,调整当前播放的音频片段的播放进度,尤其适用于显示的目标信息对应的信息内容较多,音频片段较长的情况,可便于用户按需抵达需要收听的部分,例如迅速跳过不需收听的部分音频,缩短了等待时间,或返回某一时刻以重听、核实已经播放过的内容,而不必从头重新播放该音频片段,提升了播音的灵活性和便利性。例如图8所示,在播放音频片段时,当用户手指204在显示屏上左右横滑,可以生成进度调整指令,以调整播放进度。具体地,调整输入可以是在显示屏的任意位置左右横滑的输入,也可以是在具体的信息上左右横滑的输入,以调整相应的信息的播放进度。
作为一种可能的实施方式,如图9所示,该通信控制方法包括:
步骤402,播放语音音频。
步骤404,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息,其中,目标信息包括第二目标信息和第三目标信息,第二目标信息在语音音频中对应的时刻为第一时刻,第三目标信息在语音音频中对应的时刻为第二时刻。
需说明的是,此处的第二目标信息和第三目标信息用于代表目标信息中的任意两个信息,并非特指两个具体的信息,以便在下文中描述播放显示的多条信息的原语音的方案。第一时刻和第二时刻用于反映第二目标信息和第三目标信息在语音音频中的具体位置,具体地,以第二目标信息先于第三目标信息出现的情况为例,第一时刻具体为第二目标信息在语音音频中开始播放的时刻,第二时刻具体为第三目标信息在语音音频中结束播放的时刻,第一时刻早于第二时刻,则对于语音音频中从第一时刻到第二时刻的时间段内的音频片段,第一目标信息和第二目标信息均包含其中。
步骤406,接收用户对第二目标信息对应的信息和第三目标信息对应的信息的第二输入。
需说明的是,第二输入是用户对第二目标信息对应的信息和第三目标信息对应的信息的输入,因涉及两个信息,因而在输入时天然存在先后顺序,例如当第二输入为滑动输入时,第二输入具体是从第二目标信息对应的信息滑动至第三目标信息对应的信息的输入,当第二输入为点击两个信息的输入时,则先点击的是第二目标信息,后点击的是第三目标信息。此时,若在语音音频中,第二目标信息晚于第三目标信息出现,则第一时刻具体为第二目标信息在语音音频中结束播放的时刻,第二时刻具体为第三目标信息在语音音频中开始播放的时刻,第一时刻晚于第二时刻,则对于语音音频中从第二时刻到第一时刻的时间段内的音频片段,第一目标信息和第二目标信息均能包含其中。
步骤408,响应于第二输入,播放语音音频中从第一时刻到第二时刻的音频片段。
在该实施例中,针对第二输入,可得到从第一时刻到第二时刻的时间段,通过响应于第二输入,播放语音音频中该时间段内的音频片段,可仅执行一次操作就实现多条内容对应的原语音的播放,当用户需要对大量信息进行核实时可以减少用户操作,既有助于提升播音效率,又可降低对多条信息逐个执行播音操作带来的计算负荷,减少电子设备的运行负担。可以理解的是,播放的具体是从第一时刻到第二时刻的音频片段,因而在第一时刻晚于第二时刻时,是按照与通信过程中这些信息出现的顺序相反的顺序进行原语音播放,以实现丰富的播音方案,满足用户的不同播音需求。具体地,以出现顺序相反的顺序播音,并非是指对音频片段逆向逐帧播音,而是将音频片段根据内容进一步划分为多段,以逆向的顺序逐段播音。
可选地,从第一时刻到第二时刻的音频片段可以是语音音频在该时间段内的完整片段,也可以是仅包含目标信息对应的信息的音频片段,例如在第二目标信息和第三目标信息之间还依次存在第四目标信息和第五目标信息,则可以逐个播放第二目标信息对应的信息、第三目标信息对应的信息、第四目标信息对应的信息、第五目标信息对应的信息。以图10为例,当用户手指204从信息①向下滑动到信息④时,将依次播放信息①②③④,反之如图11所示,当用户手指204从信息④向上滑动到信息①时,则依次播放信息④③②①。对于该音频片段是仅包含目标信息对应的信息的音频片段的情况,第一时刻和第二时刻的作用更多的是在体现第二目标信息和第三目标信息在语音音频中出现的顺序,因此除采用第一时刻和第二时刻外,也可为每个目标信息对应的信息配置次序编码,具体地,第二目标信息对应的信息的次序编码为第一编码,语音音频中与该信息相应的音频片段与第一编码关联,记为第一片段,第三目标信息对应的信息的次序编码为第二编码,语音音频中与该信息相应的音频片段与第二编码关联,记为第二片段,响应于第二输入,逐个语音音频中从第一片段至第二片段的所有语音片段。
可以理解的是,第一时刻到第二时刻的音频片段往往较长,包含的内容较多,类似于前述实施例,在播放该音频片段时,也可接收用户的调整输入,响应于调整输入,调整当前播放的音频片段的播放进度,以提升播音的灵活性和便利性。
进一步地,目标信息除为隐私内容或与隐私内容相关外,也可为非隐私的关键内容,以便于提取通信中的重要信息。同理,目标信息对应的信息可以是隐私内容或非隐私的关键内容,也可以是一段完整内容,其中包含有隐私内容或非隐私的关键内容。通过分析出语音音频中包括的目标信息,可识别出通信内容中的重点,还可保存目标信息对应的信息,为用户自动记录下通信过程中的关键内容,避免长时间通信导致用户对通信内容遗忘。例如银行卡密码、户口户籍信息、信息确认、时间、地点、人物、联系方式、约定等信息,都会被识别出来,还可进一步建立备忘列表,避免手动记录。对于目标信息的提取,则为已有技术,例如,可预存关键词数据库,通过识别通信内容中的关键词,识别出目标信息;也可对通信内容进行语义分析,得到目标信息,在此不一一列举。
具体地,在显示目标信息对应的信息时,可使目标信息的显示格式与其他信息的显示格式不同,以起到突出目标信息的作用,便于用户迅速了解通信内容中的重点。举例来说,显示格式为以下至少一种:颜色、字体、高亮、加粗、下划线。也就是说,在显示目标信息对应的信息时,可令目标信息的颜色与其他信息不同,例如其他信息为黑色,目标信息为红色;也可令目标信息的字体与其他信息不同;还可将目标信息添加高亮标记;还可将目标信息加粗,还可为目标信息添加下划线。可以理解的是,这些显示格式上的区别可以仅采用其中之一,也可采用其中的多种,例如图12所示,可将目标信息加粗并添加下划线。
此外,除播放的语音音频外,还可对我方经麦克风等收音装置录入的音频进行分析,当录入的音频中包括目标信息时,显示目标信息对应的信息,从而完整、全面地记录整个通信的内容。可选地,为便于查看,可将来自于双方的信息显示在同一显示区域,并按该信息在音频中出现的时间先后顺序排列,同时对来自双方的信息进行区别显示,例如在我方信息上增加显示发送标记,在对方信息上增加显示接收标记,又如对来自双方的信息采用不同的对齐方式,我方发出的信息采用左对齐,对方发出的信息采用右对齐。
还可进一步对这些信息加以处理,实现丰富的通信功能,有助于辅助通信。可以理解的是,在语音音频包括的目标信息针对非隐私的关键内容时,可以同样暂停播放语音音频,也可不暂停播放语音音频。接下来仍以暂停播放语音音频为例,对几个具体的功能分别予以描述。
作为一种可能的实施方式,如图13所示,该通信控制方法包括:
步骤502,播放语音音频。
步骤504,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
步骤506,对目标信息对应的信息进行语义分析,以提取目标信息对应的信息中的至少两个关联关键信息。
步骤508,将至少两个关联关键信息组合生成合并信息。
步骤510,显示合并信息。
在该实施例中,通过生成合并信息,可实现零散关联信息自动识别与组合功能。通信过程中,对一件事情的描述可能分散在不同的时间点,例如对于约会看电影这件事,可能先约定了时间,过了一会又约定了地点,再过了一会又约定了电影主题,这些信息是零散的,但内容上又是关联的。在显示了多个目标信息对应的信息后,通过对这些目标信息进行语义分析,可提取出其中的关联关键信息,例如时间、地点、人物、约会的信息,继而组合成合并信息,可帮助用户自动整理出通信中零散的重要内容,既避免了用户遗忘重要信息,又可减少用户的信息整理操作,有助于提升信息处理效率。可以理解的是,如前所述,目标信息对应的信息可为一段完整内容,提取的关联关键信息则可具体为关键词,生成合并信息时则将这些关键词按照符合语法的方式进行排列,并根据需要添加必要的连接词,以形成语义连贯的语句。例如图14所示,显示区域202中显示了目标信息对应的信息,其中加粗加下划线的是提取的关联关键信息,如图15所示为生成的合并信息。
可选地,步骤510具体包括:显示提取的至少两个关联关键信息;显示合并信息,并为合并信息添加显示合并标记。通过同时显示合并信息以及合并所使用的关联关键信息,可方便用户在了解重要内容的同时回溯通信中的原始内容,便于用户进行对比核实;通过为合并信息添加显示合并标记,如图15所示,为合并信息添加显示实心三角形“▲”作为合并标记,可将合并信息与原始的关联关键信息进行直观区分,提升了用户的信息获取效率。可以理解的是,由于关联关键信息是从显示的目标信息对应的信息中提取的,因此在显示提取的至少两个关联关键信息时,可不对其单独显示,而是使其显示格式与其他信息不同,例如图14所示,对关联关键信息加粗显示并添加下划线,既能够减少显示的信息量,减少电子设备的运行负荷,保持显示界面简洁,又便于用户了解完整的原始内容。进一步地,还可在显示合并信息时隐去原始内容,即隐去此前显示的部分目标信息对应的信息,隐去的信息中包含提取的关联关键信息,以进一步获得简洁的界面。
可选地,步骤508具体包括:在至少两个关联关键信息中包含互相冲突的信息的情况下,根据至少两个关联关键信息在语音音频中的出现顺序更新至少两个关联关键信息;将更新后的至少两个关联关键信息组合生成合并信息。随着通信过程的进行,原先约定的内容可能发生改变,仍以约会看电影为例,可能会对约定的时间、地点做出修改,使得提取的关联关键信息中包含互相冲突的信息,例如图14中的第一条信息包含的约定时间为9:00,最后一条信息中包含的约定时间为11:00,存在冲突。通过根据关联关键信息在语音音频中的出现顺序对关联关键信息进行更新,具体例如为保留在后出现的信息,既可以化解信息的冲突,保证合并信息的顺利生成,又可以确保合并信息的时效性,保证生成的合并信息能够准确反映通信的真实内容,提升了信息处理的可靠性。可选地,该功能可在通信结束后,基于完整的通信内容实现,也可在通信过程中持续进行,并随着通信内容的变化而更新合并信息,在通信结束后,对最后一版合并信息予以保存。
如图13所示,进一步地,该通信控制方法还包括:
步骤512,从语音音频中截取至少两个关联关键信息对应的第二音频片段。
步骤514,存储第二音频片段。
在该实施例中,通过截取并存储语音音频中与关联关键信息对应的第二音频片段,可保留生成的合并信息所对应的原始通信语音,便于用户重听以核实合并信息是否正确,保证了信息处理的可靠性。可以理解的是,关联关键信息是从显示的目标信息对应的信息中提取的信息,因而截取时可以截取相应的目标信息对应的信息的音频片段,以保证第二音频片段中的信息量充足,能够充分反映关联关键信息的含义。可选地,可将该实施例与如图7所示的实施例相结合,在显示目标信息对应的信息时就保存相应的第一音频片段,当提取出关联关键信息时,第一音频片段中涉及关联关键信息的片段就作为第二音频片段,而不必另行截取。
步骤516,接收用户对合并信息的第三输入。
步骤518,响应于第三输入,依次播放第二音频片段中与至少两个关联关键信息中的至少部分信息对应的片段。
在该实施例中,合并信息对应的关联关键信息数量至少为两个,通过将合并信息和与之对应的第二音频片段相关联,可在接收到用户对合并信息的第三输入时直接依次播放合并信息对应的原始语音,无需用户从第二音频片段中逐个查找播放,可大大简化用户的操作,提升了信息核实的便利性。举例来说,如图15所示,通过触发合并信息弹出功能菜单208,选择顺序播放原语音,可以按时间顺序播放关联关键信息对应的音频片段。可选地,播放的是提取的至少两个关联关键信息中的至少部分信息对应的音频片段,也就是不必播放提取的全部信息对应的音频片段。举例来说,当生成合并信息时使用的关联关键信息是经历过前述更新步骤的信息时,既可播放更新前的全部关联关键信息对应的音频片段,以便用户全面了解原始的语音内容,也可仅播放更新后的关联关键信息对应的音频片段,以减少播放的数据量,降低设备的运行负荷,缩短用户核实信息所需花费的时间。进一步地,还可提供播音选项,以供用户选择按照上述两种方式中的哪一种来播音,提升了信息处理的灵活性,进而满足不同的播音需求。
作为一种可能的实施方式,如图16所示,该通信控制方法包括:
步骤602,播放语音音频。
步骤604,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
步骤606,接收用户对目标信息对应的信息的第四输入;
步骤608,响应于第四输入,根据目标信息的类型处理目标信息对应的信息。
在该实施例中,对于特定类型的目标信息,根据其类型对显示的信息执行相应的处理,可实现特殊信息的个性化操作功能。具体地,对于特定类型的目标信息,可以利用第四输入触发处理程序,以实现对该目标信息的个性化操作。第四输入例如可为先点击、双击或长按目标信息或目标信息对应的信息,此时如图17、图19至图21所示,在显示屏上目标信息相应的位置弹出菜单,以显示可供执行的操作选项,用户再点击相应的操作选项,即可触发相应的处理程序,继而对目标信息对应的信息执行相应的处理。
举例来说,如图17所示,目标信息对应的信息是“周六早晨9:00在公园大门口见面吧”,首先在显示区域202显示该信息,当用户手指204点击或长按该关键信息时,弹出功能菜单208,显示有“加入行程”和“分享行程”的选项,当用户点击“加入行程”时,可将该信息添加到行程,例如可添加到电子设备上安装的日历、行程管理等应用程序中,并可进一步设置提醒时间,以在相应时间发出提醒,当用户点击“分享行程”时,可如图18所示,在分享栏214显示具体的分享路径以供用户选择。此外,还可如图17和图18所示,在显示区域202提供“自动生成行程”按键,当用户点击该按键时,可直接将显示的信息中与行程相关的信息整理成行程文件,有效简化用户操作。
如图19所示,目标信息对应的信息是“小明的电话号码是13812345678”,首先在显示区域202显示该信息,当用户手指204点击或长按该信息时,弹出功能菜单206,显示“添加到联系人”、“添加微信好友”、“分享名片”三个选项,用户可通过进一步点击功能菜单206中的选项,实现具体的添加功能或分享功能。例如图18所示,当用户选择“分享名片”时,会在分享栏214显示具体的分享路径以供用户选择。
如图20所示,目标信息对应的信息是“爱奇艺密码是AQY1234”,首先在显示区域202显示该信息,当用户手指204点击或长按该信息时,弹出功能菜单206,显示“加密显示”选项,当用户点击该选项时,可对其中的密码内容进行加密处理,如图21所示,该信息变更显示为“爱奇艺密码是*******”。进一步地,当用户手指204点击或长按该信息时,弹出功能菜单206,显示“解密显示”选项,当用户点击该选项时,可对加密的信息进行解密处理,关键信息重新变更显示为“爱奇艺密码是AQY1234”。
可选地,当目标信息对应的信息关联的功能菜单206中仅包含一个选项时,例如仅包含上述“加密显示”选项、“解密显示”选项,又如仅包含前述实施例中的“听筒播放原语音”选项,可设定为长按该信息后上滑,直接触发该唯一选项,以简化用户操作。
可以理解的是,也可将如图16所示的实施例与如图13所示的实施例相结合,若合并信息也包含特定类型的信息,同样可以实现个性化操作功能。例如图15中得到的合并信息具体为约会的信息,可以将该约会的信息以如图17所示的方式添加至用户的行程,加强了不同通信功能之间的合理结合,有助于实现更丰富的通信辅助功能,提升信息处理效率。
作为一种可能的实施方式,如图22所示,该通信控制方法包括:
步骤702,播放语音音频。
步骤704,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
步骤706,统计每个目标信息对应的信息在语音音频中出现的次数。
步骤708,将出现次数超过高频阈值的信息记为高频信息。
在该实施例中,通过统计显示的每个信息(即目标信息对应的信息)的出现次数,可实现高频信息识别功能。通信过程中,经常会对同一件事情复述多次,所以对于出现频次较高,语句内关键词较多的信息,可自动生成高频信息,提示用户该信息的重要性。可选地,由于即使是对同一件事情的复述,用户往往也不会用完全一致的语言,因此统计高频信息时,可先识别出显示的各个信息中的关键词(关键词可包括目标信息,还可包括目标信息以外的其他词),若显示的两个信息中包含的关键词相同,则认为这两个信息相同,记为该信息的出现次数为两次,并按此规则继续统计相同的信息;也可利用语义分析技术,将分析出语义相同的信息记为相同的信息。
具体地,高频阈值可为固定值,例如为2,那么当同一信息出现三次及其以上时,则认为该信息为高频信息。高频阈值也可为变量,例如统计显示的所有信息的出现次数,将最高的次数减去1,作为高频阈值,以减少统计出的高频信息的数量,该方案对于通信时间较长,通信内容较多的情况尤其适用。
步骤710,显示高频信息,并为高频信息添加显示高频标记。
在该实施例中,通过显示高频信息,并为高频信息添加显示高频标记,可将高频信息与其他信息进行直观区分,以提示用户重点关注该信息,提升了用户的信息获取效率。可选地,由于高频信息本身属于已经显示的信息,因此也可仅保留其中一条,而将其他信息从显示屏上隐去,以获得简洁的界面。例如图23所示,在显示区域202先后显示有信息“明天一起和我爸妈吃饭吧”以及“别忘了明天来吃饭,和我爸妈一起啊”,当实现高频信息识别功能时,可如图24所示,在显示区域202仅显示其中文字数量较少的一句,即“明天一起和我爸妈吃饭吧”,并添加实心五角星“★”作为高频标记,不再显示“别忘了明天来吃饭,和我爸妈一起啊”。
作为一种可能的实施方式,如图25所示,该通信控制方法包括:
步骤802,播放语音音频。
步骤804,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
步骤806,在目标信息为疑难信息的情况下,从本地或互联网获取目标信息的释义信息,其中,疑难信息包括预存的疑难词汇、专业名词和外文单词。
步骤808,显示目标信息的释义信息。
在该实施例中,通信过程中,若存在不易理解的概念,可将该概念作为目标信息加以识别,并获取其释义信息,以方便迅速地为用户提供参考,协助用户提升沟通效率。释义信息可以是保存在电子设备本地的信息,也可以是从互联网上查找到的信息,获取释义信息时,可优先查找本地存储的信息,以减少网络消耗,同时由于不必依赖网络,也可提高响应速度。例如图26所示,当语音音频中出现“你真是666啊”时,“666”即为目标信息,目标信息对应的信息为“你真是666啊”,将之显示在显示屏上,通过互联网自动查询网络用语“666”的含义,并获取释义信息,在显示区域202同时显示该目标信息及其释义信息,释义信息可以是如图26所示的文字信息,也可以是语音信息、视频信息、网络链接。
作为一种可能的实施方式,如图27所示,该通信控制方法包括:
步骤902,播放语音音频。
步骤904,在语音音频包括目标信息的情况下,暂停播放语音音频,并显示目标信息对应的信息。
步骤906,创建通信备忘文件。
步骤908,将显示的信息存入通信备忘文件。
在该实施例中,通过配置通信备忘文件,可实现通信备忘功能。具体地,可在通信过程中先将显示的信息存储在内存中,在通信结束时才创建通信备忘文件,并一次性将显示的所有信息存入通信备忘文件中,可减少信息存储的操作次数。此外,也可在通信开始时或通信的过程中创建通信备忘文件,例如在第一次识别到目标信息时创建通信备忘文件,可确保通信备忘文件及时创建,将显示的信息直接存入通信备忘文件中,有助于降低内存的存储压力,进而提升设备的运行效率。可以理解的是,此处存储的是显示的所有信息,因而当将该实施例与前述各实施例相结合时,除存储目标信息对应的信息外,也可存储执行其他通信功能时显示的信息,例如合并信息、释义信息。通过将显示的信息保存在通信备忘文件中,可实现通信内容的存储,便于用户在通信结束后随时对通信内容进行回顾;由于通信过程中常常产生多个信息,通信备忘文件可将这些信息集中存储,并与单次通信相关联,例如对于一次语音通话,可将通信备忘文件与语音通话的时间及对方电话号码关联存储,既便于用户迅速查找单次通信的完整备忘,又便于对单次通信中产生的信息进行统一整理,例如可批量删除单次通信记录的信息,又如可对重要的通信统一添加重点标记,以与其他通信的备忘加以区分,提升了信息处理的便捷性和处理效率。
步骤910,接收用户对待确认信息的第五输入,待确认信息包括显示的信息和通信备忘文件。
步骤912,响应于第五输入,发送确认请求至通信对象电子设备,确认请求中包含待确认信息。
步骤914,接收通信对象电子设备反馈的确认信息或修改信息。
在该实施例中,对于基于通信内容整理得到的信息和通信备忘文件,可将用户指定的内容发送至通信对象,以获得通信对象的反馈,具体而言,通信对象可在确认信息无误时发送确认信息,还可在信息有误时发送相应的修改信息,实现了信息确认功能,便于询问通信对象待确认信息是否正确,保证了信息的准确性。此外,对于时效性要求较高的信息,例如验证码,又如正在输入的账号,可在通信过程中显示出信息后及时得到通信对象的确认,保证了信息的时效性;对于时效性要求不高的信息,则可在整理得到通信备忘文件后集中发送至通信对象设备,以实现集中确认,能够省去逐个确认信息的麻烦,有助于降低运行负荷,提升信息处理的效率。以待确认信息为显示的信息为例,例如图17所示,功能菜单208中还显示有“让对方确认信息”的选项,当用户点击该选项时,通信对象电子设备就会如图28所示,在显示区域1006弹出确认窗口1008,以展示待确认信息,并同时显示“确认”按键和“编辑”按键。若通信对象认为信息无误,可点击“确认”按键,就可向我方电子设备反馈确认信息;若通信对象认为信息有误,可点击“编辑”按键,如图29所示,则进一步弹出编辑窗口1010,以供通信对象编辑修改该待确认信息,编辑完成后,通信对象可点击编辑窗口1010中的“发送”按键,即可将编辑后的待确认信息作为修改信息,反馈至我方电子设备,替换原有的错误信息。可以理解的是,当待确认信息为通信备忘文件时,只需选择通信备忘文件即可,其他操作可均与显示的信息相同。
作为一种可能的实施方式,当电子设备处于亮屏状态时,执行前述各实施例中的显示步骤,例如显示目标信息对应的信息、显示合并信息。当电子设备处于熄屏状态时,可不显示这些信息,但予以保存,例如创建通信备忘文件,以便用户查看。可以理解的是,当电子设备处于亮屏状态时,也可同时保存所显示的信息,以备后续查看或使用。具体地,若电子设备在通信过程中从熄屏状态切换到亮屏状态,则可在切换到亮屏状态时就显示这些信息,以及时辅助通信;若电子设备在通信结束后才切换到亮屏状态,则可以在切换到亮屏状态时就显示这些信息,也可以在切换到亮屏状态后,在接收到用户对这些信息的显示输入时才予以显示,以满足不同的显示需求。
可选地,对于亮屏状态,举例来说,用户在通信过程中佩戴有线耳机或无线耳机,或者通过扬声器播放语音音频时,显示屏处于闲置的状态,此时可以利用点亮的显示屏展示信息,实现交互。可以理解的是,以语音通话为例,当用户通过听筒播放语音时,相关技术可自动熄灭显示屏,此时电子设备处于熄屏状态,直接保存产生的信息。
进一步地,当电子设备处于熄屏状态时,还可在推测用户需要查看熄灭的显示屏时,将电子设备切换到亮屏状态。仍以上文显示屏闲置的情况为例,显示屏可能已经被点亮,此时电子设备为亮屏状态,可显示信息,实现交互。显示屏也可能熄灭,此时存在两种情况,一是用户没有使用显示屏的需求,而将显示屏置于一旁。二是用户希望利用显示屏实现通信交互,此时若推测出用户需要查看熄灭的显示屏,则可点亮显示屏。也就是说,除了在前述显示屏点亮的情况下可显示产生的信息外,在推断用户欲查看熄灭的显示屏的情况下,也可点亮显示屏,实现信息显示,以便在推测用户需要查看信息时及时响应用户需求,用户不必手动点亮显示屏,使得用户可以解放双手处理其他事务,提升了交互智能化程度。
其中,对于如何推测用户需要查看熄灭的显示屏,进行如下描述。举例来说,用户往往会在有需求时主动查看显示屏,因此当显示屏熄灭时,可通过电子设备的摄像头(例如前置摄像头)采集电子设备周围的图像,并进行图像识别,若识别到用户的视线目标为显示屏,则可推测用户有使用显示屏来实现通信交互的需求。又如,用户可能将电子设备熄屏后放置在桌面上,此时可以检测电子设备的周围是否有遮挡,或同时检测电子设备是否处于静止状态。
需要说明的是,本申请实施例提供的通信控制方法,执行主体可以为通信控制装置,或者该通信控制装置中的用于执行加载通信控制方法的控制模块。本申请实施例中以通信控制装置执行加载通信控制方法为例,说明本申请实施例提供的通信控制装置。
图30示出了本申请实施例中涉及的通信控制装置的一种可能的结构示意图。如图30所示,该通信控制装置1100包括:
播放模块1102,用于播放语音音频;
播放模块1102还用于在语音音频包括目标信息的情况下,暂停播放语音音频;
显示模块1104,用于在语音音频包括目标信息的情况下,显示目标信息对应的信息。
进一步地,显示模块1104具体用于显示经过加密处理的目标信息对应的信息。
进一步地,通信控制装置1100还包括:第一截取模块,用于从语音音频中截取目标信息对应的第一音频片段;第一存储模块,用于存储第一音频片段。
进一步地,目标信息包括第一目标信息,通信控制装置1100还包括:第一接收模块,用于接收用户对第一目标信息对应的信息的第一输入;第一播音模块,用于响应于第一输入,播放第一音频片段中与第一目标信息对应的片段。
进一步地,目标信息包括第二目标信息和第三目标信息,第二目标信息在语音音频中对应的时刻为第一时刻,第三目标信息在语音音频中对应的时刻为第二时刻,通信控制装置1100还包括:第二接收模块,用于接收用户对第二目标信息对应的信息和第三目标信息对应的信息的第二输入;第二播音模块,用于响应于第二输入,播放语音音频中从第一时刻到第二时刻的音频片段。
进一步地,通信控制装置1100还包括:提取模块,用于对目标信息对应的信息进行语义分析,以提取目标信息对应的信息中的至少两个关联关键信息;合并模块,用于将至少两个关联关键信息组合生成合并信息;显示模块1104还用于显示合并信息。
进一步地,合并模块具体用于在至少两个关联关键信息中包含互相冲突的信息的情况下,根据至少两个关联关键信息在语音音频中的出现顺序更新至少两个关联关键信息;将更新后的至少两个关联关键信息组合生成合并信息。
进一步地,通信控制装置1100还包括:第二截取模块,用于从语音音频中截取至少两个关联关键信息对应的第二音频片段;第二存储模块,用于存储第二音频片段。
进一步地,通信控制装置1100还包括:第三接收模块,用于接收用户对合并信息的第三输入;第三播音模块,用于响应于第三输入,依次播放第二音频片段中与至少两个关联关键信息中的至少部分信息对应的片段。
需要说明的是,通信控制装置1100能够实现本申请实施例提供的上述通信控制方法的各个过程,并能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例中的通信控制装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的通信控制装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供了一种电子设备。如图31所示,该电子设备1200包括:
处理器1202,存储器1204及存储在存储器1204上并可在处理器1202上运行的程序或指令,程序或指令被处理器1202执行时实现如上述通信控制方法的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图32为实现本申请实施例的一种电子设备的硬件结构示意图。如图32所示,电子设备1300包括但不限于:射频单元1302、网络模块1304、音频输出单元1306、输入单元1308、传感器1310、显示单元1312、用户输入单元1314、接口单元1316、存储器1318、处理器1320等部件。
本领域技术人员可以理解,电子设备1300还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1320逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图32中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,音频输出单元1306用于播放语音音频;音频输出单元1306还用于在语音音频包括目标信息的情况下,暂停播放语音音频;显示单元1312用于在语音音频包括目标信息的情况下,显示目标信息对应的信息。
进一步地,显示单元1312具体用于显示经过加密处理的目标信息对应的信息。
进一步地,处理器1320用于从语音音频中截取目标信息对应的第一音频片段;存储器1318用于存储第一音频片段。
进一步地,目标信息包括第一目标信息,输入单元1308用于接收用户对第一目标信息对应的信息的第一输入;音频输出单元1306用于响应于第一输入,播放第一音频片段中与第一目标信息对应的片段。
进一步地,目标信息包括第二目标信息和第三目标信息,第二目标信息在语音音频中对应的时刻为第一时刻,第三目标信息在语音音频中对应的时刻为第二时刻,输入单元1308还用于接收用户对第二目标信息对应的信息和第三目标信息对应的信息的第二输入;音频输出单元1306还用于响应于第二输入,播放语音音频中从第一时刻到第二时刻的音频片段。
进一步地,处理器1320还用于对目标信息对应的信息进行语义分析,以提取目标信息对应的信息中的至少两个关联关键信息;处理器1320还用于将至少两个关联关键信息组合生成合并信息;显示单元1312还用于显示合并信息。
进一步地,处理器1320具体用于在至少两个关联关键信息中包含互相冲突的信息的情况下,根据至少两个关联关键信息在语音音频中的出现顺序更新至少两个关联关键信息;处理器1320具体还用于将更新后的至少两个关联关键信息组合生成合并信息。
进一步地,处理器1320还用于从语音音频中截取至少两个关联关键信息对应的第二音频片段;存储器1318还用于存储第二音频片段。
进一步地,输入单元1308用于接收用户对合并信息的第三输入;音频输出单元1306还用于响应于第三输入,依次播放第二音频片段中与至少两个关联关键信息中的至少部分信息对应的片段。
应理解的是,本申请实施例中,输入单元1308可以包括图形处理器(GraphicsProcessing Unit,GPU)3082和麦克风3084,图形处理器3082对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1312可包括显示面板3122,可以采用液晶显示器、有机发光二极管等形式来配置显示面板3122。用户输入单元1314包括触控面板3142以及其他输入设备3144。触控面板3142,也称为触摸屏。触控面板3142可包括触摸检测装置和触摸控制器两个部分。其他输入设备3144可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器1318可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器1320可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1320中。
本申请实施例提供了一种计算机可读存储介质,可读存储介质上存储程序或指令,程序或指令被处理器执行时实现如上述通信控制方法实施例的各个过程。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述通信控制方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (12)
1.一种通信控制方法,其特征在于,包括:
播放语音音频;
在所述语音音频包括目标信息的情况下,暂停播放所述语音音频,并显示所述目标信息对应的信息。
2.根据权利要求1所述的通信控制方法,其特征在于,所述显示所述目标信息对应的信息,包括:
显示经过加密处理的所述目标信息对应的信息。
3.根据权利要求1所述的通信控制方法,其特征在于,所述通信控制方法还包括:
从所述语音音频中截取所述目标信息对应的第一音频片段;
存储所述第一音频片段。
4.根据权利要求3所述的通信控制方法,其特征在于,所述目标信息包括第一目标信息,所述通信控制方法还包括:
接收用户对所述第一目标信息对应的信息的第一输入;
响应于所述第一输入,播放所述第一音频片段中与所述第一目标信息对应的片段。
5.根据权利要求1所述的通信控制方法,其特征在于,所述目标信息包括第二目标信息和第三目标信息,所述第二目标信息在所述语音音频中对应的时刻为第一时刻,所述第三目标信息在所述语音音频中对应的时刻为第二时刻,所述通信控制方法还包括:
接收用户对所述第二目标信息对应的信息和所述第三目标信息对应的信息的第二输入;
响应于所述第二输入,播放所述语音音频中从所述第一时刻到所述第二时刻的音频片段。
6.根据权利要求1至5中任一项所述的通信控制方法,其特征在于,所述通信控制方法还包括:
对所述目标信息对应的信息进行语义分析,以提取所述目标信息对应的信息中的至少两个关联关键信息;
将所述至少两个关联关键信息组合生成合并信息;
显示所述合并信息。
7.根据权利要求6所述的通信控制方法,其特征在于,所述将所述至少两个关联关键信息组合生成合并信息,包括:
在所述至少两个关联关键信息中包含互相冲突的信息的情况下,根据所述至少两个关联关键信息在所述语音音频中的出现顺序更新所述至少两个关联关键信息;
将更新后的所述至少两个关联关键信息组合生成所述合并信息。
8.根据权利要求6所述的通信控制方法,其特征在于,所述通信控制方法还包括:
从所述语音音频中截取所述至少两个关联关键信息对应的第二音频片段;
存储所述第二音频片段。
9.根据权利要求8所述的通信控制方法,其特征在于,所述通信控制方法还包括:
接收用户对所述合并信息的第三输入;
响应于所述第三输入,依次播放所述第二音频片段中与所述至少两个关联关键信息中的至少部分信息对应的片段。
10.一种通信控制装置,其特征在于,包括:
播放模块,用于播放语音音频;
所述播放模块还用于在所述语音音频包括目标信息的情况下,暂停播放所述语音音频;
显示模块,用于在所述语音音频包括目标信息的情况下,显示所述目标信息对应的信息。
11.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至9中任一项所述的通信控制方法的步骤。
12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至9中任一项所述的通信控制方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010599280.8A CN111756930A (zh) | 2020-06-28 | 2020-06-28 | 通信控制方法、通信控制装置、电子设备和可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010599280.8A CN111756930A (zh) | 2020-06-28 | 2020-06-28 | 通信控制方法、通信控制装置、电子设备和可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111756930A true CN111756930A (zh) | 2020-10-09 |
Family
ID=72676896
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010599280.8A Pending CN111756930A (zh) | 2020-06-28 | 2020-06-28 | 通信控制方法、通信控制装置、电子设备和可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111756930A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112287691A (zh) * | 2020-11-10 | 2021-01-29 | 深圳市天彦通信股份有限公司 | 会议录音方法及相关设备 |
CN112379784A (zh) * | 2020-11-03 | 2021-02-19 | 深圳市联谛信息无障碍有限责任公司 | 密码输入方法、装置、控制器及计算机可读存储介质 |
CN113282962A (zh) * | 2021-07-26 | 2021-08-20 | 深圳传音控股股份有限公司 | 处理方法、处理设备及存储介质 |
CN113434309A (zh) * | 2021-06-23 | 2021-09-24 | 东风汽车有限公司东风日产乘用车公司 | 一种消息播报方法、装置及存储介质 |
CN113782027A (zh) * | 2021-09-01 | 2021-12-10 | 维沃移动通信(杭州)有限公司 | 音频处理方法及音频处理装置 |
WO2023005372A1 (zh) * | 2021-07-26 | 2023-02-02 | 深圳传音控股股份有限公司 | 处理方法、处理设备及存储介质 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101778154A (zh) * | 2009-12-28 | 2010-07-14 | 中兴通讯股份有限公司 | 一种短信语音播报屏蔽的方法和装置 |
WO2014082490A1 (en) * | 2012-11-30 | 2014-06-05 | International Business Machines Corporation | Method and apparatus for receiving private information inputs |
CN104320528A (zh) * | 2014-11-21 | 2015-01-28 | 四川智诚天逸科技有限公司 | 一种安全语音通信的方法 |
CN105808733A (zh) * | 2016-03-10 | 2016-07-27 | 深圳创维-Rgb电子有限公司 | 显示方法及装置 |
CN105979058A (zh) * | 2016-04-29 | 2016-09-28 | 乐视控股(北京)有限公司 | 一种语音内容记录方法及装置 |
CN106131288A (zh) * | 2016-08-25 | 2016-11-16 | 深圳市金立通信设备有限公司 | 一种通话信息的记录方法及终端 |
CN106162624A (zh) * | 2015-04-15 | 2016-11-23 | 宇龙计算机通信科技(深圳)有限公司 | 通话过程中隐私保护的方法、装置及移动终端 |
CN106445280A (zh) * | 2016-08-31 | 2017-02-22 | 维沃移动通信有限公司 | 一种语音消息的播放方法及移动终端 |
CN106791024A (zh) * | 2016-11-30 | 2017-05-31 | 广东欧珀移动通信有限公司 | 语音信息播放方法、装置及终端 |
CN107911283A (zh) * | 2017-11-20 | 2018-04-13 | 珠海市魅族科技有限公司 | 消息显示方法及装置、计算机装置和计算机可读存储介质 |
CN109151225A (zh) * | 2018-09-04 | 2019-01-04 | 北京小鱼在家科技有限公司 | 通话处理方法、装置和通话设备 |
CN109981904A (zh) * | 2019-03-28 | 2019-07-05 | 维沃移动通信有限公司 | 一种音量控制方法及终端设备 |
CN110060687A (zh) * | 2016-09-05 | 2019-07-26 | 北京金山软件有限公司 | 一种语音信息转换、信息生成方法及装置 |
CN110868495A (zh) * | 2018-08-27 | 2020-03-06 | 北京小米移动软件有限公司 | 消息展示方法及装置 |
CN110933215A (zh) * | 2018-09-19 | 2020-03-27 | 奇酷互联网络科技(深圳)有限公司 | 通话内容的记录方法、通信终端及计算机存储介质 |
CN110933225A (zh) * | 2019-11-04 | 2020-03-27 | Oppo(重庆)智能科技有限公司 | 通话信息获取方法、装置、存储介质及电子设备 |
CN111063355A (zh) * | 2018-10-16 | 2020-04-24 | 上海博泰悦臻网络技术服务有限公司 | 会议记录的生成方法及记录终端 |
CN111177353A (zh) * | 2019-12-27 | 2020-05-19 | 拉克诺德(深圳)科技有限公司 | 文本记录生成方法、装置、计算机设备及存储介质 |
-
2020
- 2020-06-28 CN CN202010599280.8A patent/CN111756930A/zh active Pending
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101778154A (zh) * | 2009-12-28 | 2010-07-14 | 中兴通讯股份有限公司 | 一种短信语音播报屏蔽的方法和装置 |
WO2014082490A1 (en) * | 2012-11-30 | 2014-06-05 | International Business Machines Corporation | Method and apparatus for receiving private information inputs |
CN104320528A (zh) * | 2014-11-21 | 2015-01-28 | 四川智诚天逸科技有限公司 | 一种安全语音通信的方法 |
CN106162624A (zh) * | 2015-04-15 | 2016-11-23 | 宇龙计算机通信科技(深圳)有限公司 | 通话过程中隐私保护的方法、装置及移动终端 |
CN105808733A (zh) * | 2016-03-10 | 2016-07-27 | 深圳创维-Rgb电子有限公司 | 显示方法及装置 |
CN105979058A (zh) * | 2016-04-29 | 2016-09-28 | 乐视控股(北京)有限公司 | 一种语音内容记录方法及装置 |
CN106131288A (zh) * | 2016-08-25 | 2016-11-16 | 深圳市金立通信设备有限公司 | 一种通话信息的记录方法及终端 |
CN106445280A (zh) * | 2016-08-31 | 2017-02-22 | 维沃移动通信有限公司 | 一种语音消息的播放方法及移动终端 |
CN110060687A (zh) * | 2016-09-05 | 2019-07-26 | 北京金山软件有限公司 | 一种语音信息转换、信息生成方法及装置 |
CN106791024A (zh) * | 2016-11-30 | 2017-05-31 | 广东欧珀移动通信有限公司 | 语音信息播放方法、装置及终端 |
CN107911283A (zh) * | 2017-11-20 | 2018-04-13 | 珠海市魅族科技有限公司 | 消息显示方法及装置、计算机装置和计算机可读存储介质 |
CN110868495A (zh) * | 2018-08-27 | 2020-03-06 | 北京小米移动软件有限公司 | 消息展示方法及装置 |
CN109151225A (zh) * | 2018-09-04 | 2019-01-04 | 北京小鱼在家科技有限公司 | 通话处理方法、装置和通话设备 |
CN110933215A (zh) * | 2018-09-19 | 2020-03-27 | 奇酷互联网络科技(深圳)有限公司 | 通话内容的记录方法、通信终端及计算机存储介质 |
CN111063355A (zh) * | 2018-10-16 | 2020-04-24 | 上海博泰悦臻网络技术服务有限公司 | 会议记录的生成方法及记录终端 |
CN109981904A (zh) * | 2019-03-28 | 2019-07-05 | 维沃移动通信有限公司 | 一种音量控制方法及终端设备 |
CN110933225A (zh) * | 2019-11-04 | 2020-03-27 | Oppo(重庆)智能科技有限公司 | 通话信息获取方法、装置、存储介质及电子设备 |
CN111177353A (zh) * | 2019-12-27 | 2020-05-19 | 拉克诺德(深圳)科技有限公司 | 文本记录生成方法、装置、计算机设备及存储介质 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112379784A (zh) * | 2020-11-03 | 2021-02-19 | 深圳市联谛信息无障碍有限责任公司 | 密码输入方法、装置、控制器及计算机可读存储介质 |
CN112287691A (zh) * | 2020-11-10 | 2021-01-29 | 深圳市天彦通信股份有限公司 | 会议录音方法及相关设备 |
CN112287691B (zh) * | 2020-11-10 | 2024-02-13 | 深圳市天彦通信股份有限公司 | 会议录音方法及相关设备 |
CN113434309A (zh) * | 2021-06-23 | 2021-09-24 | 东风汽车有限公司东风日产乘用车公司 | 一种消息播报方法、装置及存储介质 |
CN113282962A (zh) * | 2021-07-26 | 2021-08-20 | 深圳传音控股股份有限公司 | 处理方法、处理设备及存储介质 |
WO2023005372A1 (zh) * | 2021-07-26 | 2023-02-02 | 深圳传音控股股份有限公司 | 处理方法、处理设备及存储介质 |
CN113782027A (zh) * | 2021-09-01 | 2021-12-10 | 维沃移动通信(杭州)有限公司 | 音频处理方法及音频处理装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111756930A (zh) | 通信控制方法、通信控制装置、电子设备和可读存储介质 | |
KR102222421B1 (ko) | 캡처된 이미지들과 관련된 메타 데이터 저장 | |
US10586541B2 (en) | Communicating metadata that identifies a current speaker | |
CN107767864B (zh) | 基于语音分享信息的方法、装置与移动终端 | |
KR20170048964A (ko) | 메시지 제공 방법, 장치, 및 컴퓨터 프로그램과, 표시 제어 방법, 장치 및 컴퓨터 프로그램 | |
CN113010704B (zh) | 一种会议纪要的交互方法、装置、设备及介质 | |
CN113010698B (zh) | 多媒体的交互方法、信息交互方法、装置、设备及介质 | |
CN106020587A (zh) | 消息显示方法及装置 | |
CN106415527A (zh) | 消息通信方法及装置 | |
CN106484134A (zh) | 基于安卓系统的语音输入标点符号的方法及装置 | |
CN112068711A (zh) | 一种输入法的信息推荐方法、装置和电子设备 | |
CN113886612A (zh) | 一种多媒体浏览方法、装置、设备及介质 | |
CN110728981A (zh) | 一种交互功能的执行方法、装置、电子设备及存储介质 | |
CN107844494B (zh) | 词条审核的方法及终端、词条处理的方法及服务器 | |
CN112306450A (zh) | 信息处理方法、装置 | |
CN111984767A (zh) | 一种信息推荐方法、装置和电子设备 | |
CN107846347B (zh) | 一种通信内容处理方法、装置及电子设备 | |
CN115623133A (zh) | 线上会议方法、装置、电子设备及可读存储介质 | |
CN104135725A (zh) | 一种短消息发送方法及便携式终端 | |
CN112837668B (zh) | 一种语音处理方法、装置和用于处理语音的装置 | |
CN113157966A (zh) | 显示方法、装置及电子设备 | |
CN111381688B (zh) | 实时转录的方法及装置、存储介质 | |
WO2022237381A1 (zh) | 保存会议记录的方法、终端及服务器 | |
CN115877958A (zh) | 一种输入方法、装置和用于输入的装置 | |
CN116543745A (zh) | 语音录制方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201009 |
|
RJ01 | Rejection of invention patent application after publication |