一种视频通话方法、装置和系统
技术领域
本发明涉及视频领域,特别涉及一种视频通话方法、装置和系统。
背景技术
由于视频通话的实时性以及较高的交互体验,使得越来越多的用户选择即时视频来实现自身的交互需求。
但是现有的即时视频交互技术中,用户间的视频通话是建立在网络环境基础上的。传统的视频通话在网络环境不通畅或者视频通话用户的视频通话装置运行不流畅时,视频通话画面会出现模糊、卡顿甚至直接视频通话断开的情况,从而降低了用户体验,尤其是用户在视频通话过程中的交互体验。
发明内容
为了满足用户在即时视频交互过程中的交互体验,尤其是网络环境较差或者视频通话装置运行不流畅的场景下的交互体验,本发明实施例提供了一种视频通话方法、装置和系统。所述技术方案如下:
第一方面,提供了一种视频通话方法,所述方法包括:
在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:
所述第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象;
所述第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;
所述第一视频通话装置向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
所述第二视频通话装置接收所述裁剪后的当前视频帧和虚拟形象的标识符,并根据所述虚拟形象的标识符获取对应的虚拟形象;以及
所述第二视频通话装置对所述裁剪后的当前视频帧和所述虚拟形象进行匹配,得到匹配后的当前视频帧,并显示所述匹配后的当前视频帧。
结合第一方面,在第一种可能的实现方式中,所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第一方面,在第二种可能的实现方式中,所述第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第一方面至第一方面的第二种任意一种可能的实现方式,在第三种可能的实现方式中,所述方法包括:
在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:所述第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
所述第一视频通话装置向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
所述第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符;
所述第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;以及
所述第二视频通话装置显示所述虚拟形象的动作和/或表情。
结合第一方面的第三种可能的实现方式,在第四种可能的实现方式中,所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
结合第一方面的第三种可能的实现方式,在第五种可能的实现方式中,所述第二默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第一方面至第一方面的第五种任意一种可能的实现方式,在第六种可能的实现方式中,所述第一视频通话装置向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符之后,所述方法还包括:
所述第一视频通话装置检测是否发生第三默认事件,若是,则:所述第一视频通话装置向所述第二视频通话装置发送所述当前视频帧;以及
所述第二视频通话装置接收并显示所述当前视频帧。
结合第一方面的第六种可能的实现方式,在第七种可能的实现方式中,所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第一方面的第六种可能的实现方式,在第八种可能的实现方式中,所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第二方面,提供了一种视频通话装置,所述装置包括:
默认事件检测模块,用于在视频通话过程中检测是否发生第一默认事件;
视频帧获取模块,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取当前视频帧;
虚拟形象标识符获取模块,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取虚拟形象的标识符;
第一虚拟形象获取模块,用于根据所述虚拟形象的标识符获取对应的第一虚拟形象;
裁剪模块,用于根据所述第一虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;以及
发送模块,用于向其他视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
结合第二方面,在第一种可能的实现方式中,所述装置还包括:
接收模块,用于接收来自所述其他视频通话装置的裁剪后的当前视频帧和虚拟形象的标识符;
第二虚拟形象获取模块,用于根据接收的虚拟形象的标识符获取对应的第二虚拟形象;
匹配模块,用于对所述裁剪后的当前视频帧和所述第二虚拟形象进行匹配,得到匹配后的当前视频帧;以及
显示模块,用于显示所述匹配后的当前视频帧。
结合第二方面,在第二种可能的实现方式中,所述默认事件检测模块具体用于检测第一默认事件,所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第二方面,在第三种可能的实现方式中,所述默认事件检测模块具体用于检测第一默认事件,所述第一默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第二方面至第二方面的第三种任意一种可能的实现方式,在第四种可能的实现方式中,所述默认事件检测模块还用于在视频通话过程中检测是否发生第二默认事件;
所述虚拟形象标识符获取模块还用于在所述默认事件检测模块检测到发生所述第二默认事件后,获取第一虚拟形象的动作和/或表情的标识符;
所述发送模块还用于向其他视频通话装置发送所述第一虚拟形象的动作和/或表情的标识符;
所述接收模块还用于接收来自其他视频通话装置的第二虚拟形象的动作和/或表情的标识符;以及
所述第二虚拟形象获取模块还用于根据接收的所述来自其他视频通话装置的所述第二虚拟形象的动作和/或表情的标识符获取对应的第二虚拟形象的动作和/或表情;
所述显示模块还用于显示所述第二虚拟形象的动作和/或表情。
结合第二方面的第四种可能的实现方式,在第五种可能的实现方式中,所述默认事件检测模块具体用于检测所述第二默认事件,所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
结合第二方面的第四种可能的实现方式,在第六种可能的实现方式中,所述默认事件检测模块具体用于检测所述第二默认事件,所述第二默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第二方面至第二方面的第六种任意一种可能的实现方式,在第七种可能的实现方式中,所述默认事件检测模块还用于检测是否发生第三默认事件,若是,则所述发送模块还用于向其他视频通话装置发送所述当前视频帧;
所述接收模块还用于接收来自其他视频通话装置的所述当前视频帧;以及
所述显示模块还用于显示接收的所述当前视频帧。
结合第二方面的第七种可能的实现方式,在第八种可能的实现方式中,所述默认事件检测模块具体用于检测第三默认事件,所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第二方面的第七种可能的实现方式,在第九种可能的实现方式中,所述默认事件检测模块具体用于检测第三默认事件,所述第三默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第三方面,提供了一种视频通话装置,所述装置包括存储器、触摸显示屏、摄像头、发送/接收模块以及与所述存储器、所述触摸显示屏、所述摄像头、所述发送/接收模块连接的处理器,其中,所述存储器用于存储一组程序代码,所述处理器调用所述存储器所存储的程序代码用于执行以下操作:
在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:
所述第一视频通话装置通过摄像头获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象;
所述第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;
所述第一视频通话装置通过发送/接收模块向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
所述第二视频通话装置通过发送/接收模块接收所述裁剪后的当前视频帧和虚拟形象的标识符,并根据所述虚拟形象的标识符获取对应的虚拟形象;以及
所述第二视频通话装置对所述裁剪后的当前视频帧和所述虚拟形象进行匹配,得到匹配后的当前视频帧,并通过触摸显示屏显示所述匹配后的当前视频帧。
结合第三方面,在第一种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第三方面,在第二种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第三方面至第三方面的第二种任意一种可能的实现方式,在第三种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码还用于执行以下操作:
在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:所述第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
所述第一视频通话装置通过发送/接收模块向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
所述第二视频通话装置通过发送/接收模块接收所述虚拟形象的动作和/或表情的标识符;
所述第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;以及
所述第二视频通话装置通过触摸显示屏显示所述虚拟形象的动作和/或表情。
结合第三方面的第三种可能的实现方式,在第四种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
结合第三方面的第三种可能的实现方式,在第五种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第二默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第三方面至第三方面的第五种任意一种可能的实现方式,在第六种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码还用于执行以下操作:
所述第一视频通话装置向通过发送/接收模块所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符之后,所述方法还包括:
所述第一视频通话装置检测是否发生第三默认事件,若是,则:所述第一视频通话装置向所述第二视频通话装置通过发送/接收模块发送所述当前视频帧;以及
所述第二视频通话装置通过发送/接收模块接收并通过触摸显示屏显示所述当前视频帧。
结合第三方面的第六种可能的实现方式,在第七种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第三方面的第六种可能的实现方式,在第八种可能的实现方式中,所述处理器调用所述存储器所存储的程序代码具体用于执行以下操作:
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第四方面,提供了一种视频通话系统,所述系统包括第一视频通话装置和第二视频通话装置,其中,
所述第一视频通话装置包括:
默认事件检测模块,用于在视频通话过程中检测是否发生第一默认事件;
视频帧获取模块,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取当前视频帧;
虚拟形象标识符获取模块,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取虚拟形象的标识符;
第一虚拟形象获取模块,用于根据所述虚拟形象的标识符获取对应的虚拟形象;
裁剪模块,用于根据所述虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;
发送模块,用于向第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
所述第二视频通话装置包括:
接收模块,用于接收来自所述第一视频通话装置的所述裁剪后的当前视频帧和虚拟形象的标识符;
第二虚拟形象获取模块,用于根据所述虚拟形象的标识符获取对应的虚拟形象;
匹配模块,用于对所述裁剪后的当前视频帧和所述虚拟形象进行匹配,得到匹配后的当前视频帧;以及
显示模块,用于显示所述匹配后的当前视频帧。
结合第四方面,在第一种可能的实现方式中,所述默认事件检测模块具体用于检测第一默认事件,所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第四方面,在第二种可能的实现方式中,所述默认事件检测模块具体用于检测第一默认事件,所述第一默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第四方面至第四方面的第二种任意一种可能的实现方式,在第三种可能的实现方式中,所述默认事件检测模块还用于在视频通话过程中检测是否发生第二默认事件;
所述虚拟形象标识符获取模块还用于在所述默认事件检测模块检测到发生所述第二默认事件后,获取虚拟形象的动作和/或表情的标识符;
所述发送模块还用于向所述第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
所述接收模块还用于接收来自所述第一视频通话装置的所述虚拟形象的动作和/或表情的标识符;
所述第二虚拟形象获取模块还用于根据接收的所述虚拟形象的动作和/或表情的标识符获取对应的虚拟形象的动作和/或表情;以及
所述显示模块还用于所述第二视频通话装置显示所述虚拟形象的动作和/或表情。
结合第四方面的第三种可能的实现方式,在第四种可能的实现方式中,所述默认事件检测模块具体用于检测所述第二默认事件,所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
结合第四方面的第三种可能的实现方式,在第五种可能的实现方式中,所述默认事件检测模块具体用于检测所述第二默认事件,所述第二默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
结合第四方面至第四方面的第五种任意一种可能的实现方式,在第六种可能的实现方式中,所述默认事件检测模块还用于检测是否发生第三默认事件;
所述发送模块还用于在所述默认事件检测模块检测到所述第三默认事件后,向第二视频通话装置发送所述当前视频帧;
所述接收模块还用于接收来自所述第一视频通话装置的所述当前视频帧;以及
所述显示模块还用于所述第二视频通话装置显示所述当前视频帧。
结合第四方面的第六种可能的实现方式,在第七种可能的实现方式中,所述默认事件检测模块具体用于获取第三默认事件,所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
结合第四方面的第六种可能的实现方式,在第八种可能的实现方式中,所述默认事件检测模块具体用于获取第三默认事件,所述第三默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法、装置和系统,该方法包括:在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:所述第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象;所述第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;所述第一视频通话装置向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;所述第二视频通话装置接收所述裁剪后的当前视频帧和虚拟形象的标识符,并根据所述虚拟形象的标识符获取对应的虚拟形象;以及所述第二视频通话装置对所述裁剪后的当前视频帧和所述虚拟形象进行匹配,得到匹配后的当前视频帧,并显示所述匹配后的当前视频帧。通过在视频通话过程中检测是否发生默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的默认事件后,可以切换到即时视频画面全屏显示,满足了即时视频交互过程中视频的显示方式,同时,增加了即时视频参与双方在交互过程中的互动性,进一步提高了交互体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种视通话方法流程图;
图2是本发明实施例提供的一种视通话方法流程图;
图3是本发明实施例提供的一种视通话方法流程图;
图4是本发明实施例提供的一种界面示意图;
图5是本发明实施例提供的一种视通话方法流程图;
图6是本发明实施例提供的一种界面示意图;
图7是本发明实施例提供的一种界面示意图;
图8是本发明实施例提供的一种界面示意图;
图9是本发明实施例提供的一种界面示意图;
图10是本发明实施例提供的一种界面示意图;
图11是本发明实施例提供的一种方法流程图;
图12是本发明实施例提供的一种方法流程图;
图13是本发明实施例提供的一种方法流程图;
图14是本发明实施例提供的一种视频通话装置结构示意图;
图15是本发明实施例提供的一种视频通话装置结构示意图;
图16是本发明实施例提供的一种视频通话系统结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供了一种视频通话方法,该方法用于即时视频交互场景下的视频通话,其中,即时视频交互可以是交互双方通过运行电子装置上的应用程序实现的,该电子装置可以是智能手机、平板电脑和可穿戴装置中的任意一个,本发明实施例对具体的电子装置不加以限定;另外,在即时视频交互过程中,包括即时视频在内的数据发送可以是通过点对点的方式实现的,也可以是通过服务器中转的方式实现的,本发明实施例对具体的数据发送方式不加以限定。另外,本发明实施例所述的匹配后的当前视频帧为裁剪后的当前视频帧和虚拟形象的组合。
实施例一为本发明实施例提供的一种视频通话方法,参照图1所示,该方法包括:
101、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤102,若否,则继续执行步骤101。
具体的,第一默认事件包括网络参数大于第一预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。或者,
第一默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
102、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,通过第一视频通话装置的摄像头或者其他外部拍摄装置获取当前视频帧。
第一视频通话装置获取虚拟形象的标识符包括第一视频通话装置根据用户指示或者默认配置获取虚拟形象的标识符。
具体的,第一视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
值得注意的是,在步骤102中,获取当前视频帧和获取虚拟形象的标识符可以是按照所述顺序执行的,也可以是先执行获取当前视频帧,再执行虚拟形象的标识符,还可以是同时执行的,本发明实施例对具体的执行顺序不加以限定。
103、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,可以通过以下任意一种方式实现根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧的步骤:
第一视频通话装置识别当前视频帧中人脸部分,并从当前视频帧中裁剪出人脸部分,得到裁剪后的当前视频帧;或者
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪和/或缩小,得到裁剪后的当前视频帧。
第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪和/或缩小可以为:
第一视频通话装置根据虚拟形象在屏幕中的位置对当前视频帧进行裁剪和/或缩小。
104、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
需要说明的是,虚拟形象的标识符和裁剪后的当前视频帧可以是同时发送至第二视频通话装置的,也可以是分别发送至第二视频通话装置的,其中,若虚拟形象的标识符和裁剪后的当前视频帧是分别发送至第二视频通话装置的,本发明实施例对具体的发送顺序不加以限定。
105、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,第二视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
106、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,第二视频通话装置将裁剪后的当前视频帧嵌入虚拟形象的预设位置,得到匹配后的当前视频帧。
第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧投影至投影屏幕上或者其他显示屏上。
可选的,在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:
第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
第一视频通话装置向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;
第二视频通话装置显示所述虚拟形象的动作和/或表情。
其中,第二默认事件包括网络参数大于第二预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。或者,
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第一默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占用的带宽资源,以使用户可以在网络条件较差的情况下发起即时视频通话,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的默认事件后,可以切换到即时视频画面全屏显示,进一步提高了交互体验。
实施例二为本发明实施例提供的一种视频通话方法,参照图2所示,该方法包括:
201、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤202,若否,则继续执行步骤201。
具体的,第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
202、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,通过第一视频通话装置的摄像头或者其他外部拍摄装置获取当前视频帧。
第一视频通话装置获取虚拟形象的标识符包括第一视频通话装置根据用户指示或者默认配置获取虚拟形象的标识符。
第一视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
值得注意的是,在步骤202中,获取当前视频帧和获取虚拟形象的标识符可以是按照所述顺序执行的,也可以是先执行获取当前视频帧,再执行虚拟形象的标识符,还可以是同时执行的,本发明实施例对具体的执行顺序不加以限定。
203、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,可以通过以下任意一种方式实现根据虚拟形象对当前视频帧的裁剪:
第一视频通话装置识别当前视频帧中人脸部分,并从当前视频帧中裁剪出人脸部分,得到裁剪后的当前视频帧;或者
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪和/或缩小,得到裁剪后的当前视频帧。
第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪和/或缩小可以为:
第一视频通话装置根据虚拟形象在屏幕中的位置对当前视频帧进行裁剪和/或缩小。
204、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
需要说明的是,虚拟形象的标识符和裁剪后的当前视频帧可以是同时发送至第二视频通话装置的,也可以是分别发送至第二视频通话装置的,其中,若虚拟形象的标识符和裁剪后的当前视频帧是分别发送至第二视频通话装置的,本发明实施例对具体的发送顺序不加以限定。
205、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,第二视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
206、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,第二视频通话装置将裁剪后的当前视频帧嵌入虚拟形象的动作和/或表情的预设位置,得到匹配后的当前视频帧。
第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧投影至投影屏幕上或者其他显示屏上。
207、在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则执行步骤208,若否,则继续步骤207。
具体的,第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。或者,
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
208、第一视频通话装置获取虚拟形象的动作和/或表情的标识符。
第一视频通话装置获取虚拟形象的动作和/或表情的标识符包括第一视频通话装置根据用户指示或者预设事件获取虚拟形象的动作和/或表情的标识符。
具体的,第一视频通话装置根据虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
209、第一视频通话装置向第二视频通话装置发送虚拟形象的动作和/或表情的标识符。
第一视频通话装置可以直接将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置或者通过服务器中转的方式发送至第二视频通话装置,具体的发送方式在此不做限定。
210、第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符。
211、第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情。
具体的,第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
212、第二视频通话装置显示虚拟形象的动作和/或表情。
具体的,第二视频通话装置通过预设的显示指令,在触摸显示屏上显示虚拟形象的动作和/或表情。
可选的,该第二通话装置还可以通过预设的显示指令,将该虚拟形象的动作和/或表情投影至投影屏幕上或者其他显示屏上。
需要说明的是,步骤207至步骤212所述的过程可以是在步骤206之后执行的,也可以是在步骤201之后执行的,即在视频通话过程中第一视频通话装置检测到发生第一默认事件之后,继续执行步骤207,即检测是否发生第二默认事件,若是,则执行步骤208至步骤212;若否,则执行步骤202至步骤206。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的默认事件后,可以切换到即时视频画面全屏显示,满足了即时视频交互过程中视频的显示方式,同时,增加了即时视频参与双方在交互过程中的互动性,进一步提高了交互体验。通过获取虚拟形象的动作和/或表情的标识符,相比于获取虚拟形象的标识符,进一步增加了即时视频的趣味性以及即时视频过程中参与双方的互动性,从而提高了用户在即时视频交互过程中的交互体验。
实施例三为本发明实施例提供的一种视频通话方法,参照图3所示,本方法实施例中第一视频通话装置通过网络参数检测是否发生第一默认事件,在发生第一默认事件后,第一视频通话装置将获取的当前视频帧和虚拟形象标识符发送至第二视频通话装置,第二视频通话装置将当前视频帧和虚拟形象匹配后,显示匹配后的当前视频帧。该方法包括:
301、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤302,若否,则继续执行步骤301。
具体的,第一默认事件包括网络参数大于第一预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。该网络参数指的是网络环境中的实时参数。第一视频通话装置检测是否发生第一默认事件可以通过以下方式实现:
第一视频通话装置检测网络环境中的网络参数,包括丢包率、往返时延以及抖动中的至少一个;
判断网络参数是否大于第一预设阈值,其中,若网络参数为丢包率,则第一预设阈值为预设的丢包率;若网络参数为往返时延,则第一预设阈值为预设的往返时延;若网络参数为抖动,则第一预设阈值为预设的抖动。
除此之外,还可以通过两个或两个以上的网络参数进行综合判定,其中,若网络参数为往返时延和抖动,则第一预设阈值为预设的往返时和预设的抖动。
若网络参数大于第一预设阈值,则发生第一默认事件,执行步骤302;若网络参数小于或等于第一预设阈值,则仍以原有视频通话方式进行视频,并继续执行步骤301。
通过判断网络参数是否大于第一预设阈值,可以根据不同的网络参数来发起不同的视频通话方式,满足用户在不同的网络环境下可以正常的进行视频通话,进一步提高用户体验。
302、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,通过第一视频通话装置的摄像头或者其他外设获取当前视频帧。
第一视频通话装置获取虚拟形象的标识符包括第一视频通话装置根据用户指示或者默认配置获取虚拟形象的标识符。
第一视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
值得注意的是,在步骤302中,获取当前视频帧和获取虚拟形象的标识符可以是按照所述顺序执行的,也可以是先执行获取当前视频帧,再执行虚拟形象的标识符,还可以是同时执行的,本发明实施例对具体的执行顺序不加以限定。
303、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,可以通过以下任意一种方式实现根据虚拟形象对当前视频帧的裁剪:
第一视频通话装置识别当前视频帧中人脸部分,并从当前视频帧中裁剪出人脸部分,得到裁剪后的当前视频帧;或者
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪和/或缩小,得到裁剪后的当前视频帧。
第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪和/或缩小可以为:
第一视频通话装置根据虚拟形象在屏幕中的位置对当前视频帧进行裁剪和/或缩小。
304、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
需要说明的是,虚拟形象的标识符和裁剪后的当前视频帧可以是同时发送至第二视频通话装置的,也可以是分别发送至第二视频通话装置的,其中,若虚拟形象的标识符和裁剪后的当前视频帧是分别发送至第二视频通话装置的,本发明实施例对具体的发送顺序不加以限定。
305、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,第二视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
306、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,第二视频通话装置将裁剪后的当前视频帧嵌入虚拟形象的预设位置,得到匹配后的当前视频帧。
第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧投影至投影屏幕上或者其他显示屏上。
假设在视频通话过程中的通话界面参照图4中的a所示,第一视频通话装置检测到网络参数大于预设阈值后,触发第一默认事件,从而对当前视频帧进行裁剪并将虚拟形象与其一并发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,参照图4中的b所示。
可选的,在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:
第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
第一视频通话装置向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;
第二视频通话装置显示所述虚拟形象的动作和/或表情。
其中,第二默认事件包括网络参数大于第二预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。或者,
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第一默认事件,即检测网络参数大于第一预设阈值,从而判断当前的网络环境是否满足视频通话的要求,可以实现当网络环境不好影响到即时视频画面显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。
实施例四为本发明实施例提供的一种视频通话方法,参照图5所示,本方法实施例中第一视频通话装置检测作为第一默认事件的用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个是否发生,在发生第一默认事件后,第一视频通话装置将获取的当前视频帧和虚拟形象标识符发送至第二视频通话装置,第二视频通话装置将当前视频帧和虚拟形象匹配后,显示匹配后的当前视频帧。该方法包括:
501、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤502,若否,则继续执行步骤501。
具体的,第一默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第一默认事件包括用户晃动第一视频通话装置所在的物理设备时,第一视频通话装置检测是否发生第一默认事件可以通过以下方式实现:
第一视频通话装置检测其所在的物理设备的动态参数;
将所述的动态参数与预设的动态参数进行对比,根据对比结果判定第一视频通话装置所在的物理设备是否发生晃动。动态参数包括偏转角度,预设的动态参数为偏转角度。
除此之外,还可以通过两个动态参数进行综合判定,其中动态参数包括偏转角度和倾斜角度,预设得到动态参数包括偏转角度和倾斜角度,上述参数可以是通过物理设备的重力传感器获取的。
若判定物理设备发生晃动,则检测到第一默认事件发生,若否,则继续执行步骤501。
其中,对于用户晃动物理设备的方式不做具体限定,其方式可以为上下晃动或左右晃动。
可选的,第一默认事件包括预设的手势时,第一视频通话装置检测是否发生第一默认事件可以通过以下方式实现:
第一视频通话装置检测用户输入的手势;
将所述用户输入的手势与预设的用户手势进行对比,得到对比结果;
根据对比结果判断用户是否触发预设的用户手势。
若判定触发预设的用户手势,则检测到第一默认事件发生,若否,则继续执行步骤501。
其中,对于预设的用户手势可以是用户预先设置的,也可以是用户自定义的。
参照图6所示,假设预设的用户手势是滑动轨迹为直线的滑动手势,当检测到用户在视频通话界面上的任意位置输入滑动轨迹为直线的滑动手势后,即可触发第一默认事件。
可选的,用户可以通过以下方式自定义预设的用户手势:
在用户触发自定义指示之后,检测用户输入的手势;
将所述手势设置为触发第一默认事件中预设的用户手势。
可选的,第一默认事件包括预设的语音时,第一视频通话装置检测是否发生第一默认事件可以通过以下方式实现:
第一视频通话装置检测用户输入的语音;
将所述用户输入的语音与预设的用户语音进行对比,得到对比结果;
根据对比结果判断用户是否触发预设的语音。
若判定触发预设的语音,则发生第一默认事件,否则,则结束。
假设预设的语音是预先设定的“切换”语音,第一视频通话装置检测到用户输入的语音后,将其与预设的语音“切换”进行对比,或者将其转化为文本与预设的语音“切换”文本格式进行对比,若对比结果一致,则判定发生第一默认事件。
可选的,用户可以通过以下方式自定义预设的语音:
在用户触发自定义指示之后,检测用户输入的语音;
将所述语音以文本格式或者音频格式设置为发生第一默认事件中预设的语音。
可选的,第一默认事件包括点击预设的按键时,第一视频通话装置检测是否发生第一默认事件可以通过以下方式实现:
第一视频通话装置若检测到用户点击预设的按键,则判定用户触发第一默认事件,否则,则继续执行本步骤。
参照图7所示,假设预设的按键是预先设定的在视频通话界面中的“切换”按键,第一视频通话装置检测用户在视频通话界面中的点击操作,若该点击操作对应于预设的“切换”按键,则发生第一默认事件。
可选的,用户可以通过以下方式自定义预设的按键:
在用户触发自定义指示之后,检测用户在视频通话界面中触发的区域;
将该区域设置为触发第一默认事件中预设的按键。
通过用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个来判定触发第一默认事件,可以根据用户的实际视频通话过程中发生的事件来选择触发第一默认事件,增强用户参与视频通话的互动性。
502、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,该步骤与步骤302相同,在此不再加以赘述。
503、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,该步骤与步骤303相同,在此不再加以赘述。
504、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
具体的,该步骤与步骤304相同,在此不再加以赘述。
505、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,该步骤与步骤305相同,在此不再加以赘述。
506、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,该步骤与步骤306相同,在此不再加以赘述。
为了进一步说明本发明实施例所达到的有益效果,下面将结合具体示例做进一步的阐述:
假设在视频通话过程中的通话界面参照图8中的a所示,第一视频通话装置检测到用户晃动第一视频通话装置所在的物理设备参照图8中的b所示,发生第一默认事件后,对当前视频帧进行裁剪,并将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,参照图8中的c所示。
假设在视频通话过程中的通话界面参照图9中的a所示,第一视频通话装置检测到参照图9中的b所示的预设的用户手势,则判定发生第一默认事件,对当前视频帧进行裁剪,并将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,参照图9中的c所示。
假设在视频通话过程中的通话界面参照图4中的a所示,第一视频通话装置检测到预设的语音,则判定发生第一默认事件,从而对当前视频帧进行裁剪,并将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,参照图4中的b所示。
假设在视频通话过程中的通话界面参照图10中的a所示,第一视频通话装置检测到参照图10中的b所示的预设的按键被点击,则判定发生第一默认事件,对当前视频帧进行裁剪,并将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,参照图10中的c所示。
可选的,在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:
第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
第一视频通话装置向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;
第二视频通话装置显示所述虚拟形象的动作和/或表情。
其中,第二默认事件包括网络参数大于第二预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。或者,
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第一默认事件,即检测用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按健,从而判断当前的网络环境是否满足视频通话的要求,可以实现当网络环境不好影响到即时视频画面显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,而且可以满足用户在其视频通话过程中根据实际需要来选择触发第一默认事件,从而完成对视频通话方式的切换,进一步提高了用户体验。
实施例五为本发明实施例提供的一种视频通话方法,参照图11所示,本方法实施例中第一视频通话装置检测通过网络参数触发的第二默认事件,在发生第二默认事件后,第一视频通话装置将获取的虚拟形象的动作和/或表情的标识符发送至第二视频通话装置,第二视频通话装置接收虚拟形象的动作和/或表情标识符后获取对应的虚拟形象的动作和/或表情,并显示虚拟形象的动作和/或表情。该方法包括:
1101、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤1102,若否,则继续执行步骤1101。
具体的,第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
1102、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,通过第一视频通话装置的摄像头或者其他外部拍摄装置获取当前视频帧。
第一视频通话装置获取虚拟形象的标识符包括第一视频通话装置根据用户指示或者默认配置获取虚拟形象的标识符。
具体的,第一视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
值得注意的是,在步骤1102中,获取当前视频帧和获取虚拟形象的标识符可以是按照所述顺序执行的,也可以是先执行获取当前视频帧,再执行虚拟形象的标识符,还可以是同时执行的,本发明实施例对具体的执行顺序不加以限定。
1103、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,可以通过以下任意一种方式实现根据虚拟形象对当前视频帧的裁剪:
第一视频通话装置识别当前视频帧中人脸部分,并从当前视频帧中裁剪出人脸部分,得到裁剪后的当前视频帧;或者
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪和/或缩小,得到裁剪后的当前视频帧。
第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪和/或缩小可以为:
第一视频通话装置根据虚拟形象在屏幕中的位置对当前视频帧进行裁剪和/或缩小。
1104、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
需要说明的是,虚拟形象的标识符和裁剪后的当前视频帧可以是同时发送至第二视频通话装置的,也可以是分别发送至第二视频通话装置的,其中,若虚拟形象的标识符和裁剪后的当前视频帧是分别发送至第二视频通话装置的,本发明实施例对具体的发送顺序不加以限定。
1105、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,第二视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
1106、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,第二视频通话装置将裁剪后的当前视频帧嵌入虚拟形象的动作和/或表情的预设位置,得到匹配后的当前视频帧。
第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧投影至投影屏幕上或者其他显示屏上。
1107、在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则执行步骤1108,若否,则继续步骤1107。
具体的,第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
第一视频通话装置检测是否发生第二默认事件的实现方式与步骤301中第一视频通话装置检测是否发生第一默认事件的实现方式相同,在此不再具体赘述。
1108、第一视频通话装置获取虚拟形象的动作和/或表情的标识符。
第一视频通话装置获取虚拟形象的动作和/或表情的标识符包括第一视频通话装置根据用户指示或者预设事件获取虚拟形象的动作和/或表情的标识符。
具体的,第一视频通话装置根据虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
1109、第一视频通话装置向第二视频通话装置发送虚拟形象的动作和/或表情的标识符。
第一视频通话装置可以直接将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置或者通过服务器中转的方式发送至第二视频通话装置,具体的发送方式在此不做限定。
1110、第二视频通话装置接收虚拟形象的动作和/或表情的标识符。
1111、第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情。
具体的,第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
1112、第二视频通话装置显示虚拟形象的动作和/或表情。
具体的,第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧和虚拟形象的动作和/或表情。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧和虚拟形象的动作和/或表情投影至投影屏幕上或者其他显示屏上。
可选的,由于第二预设阈值大于第一预设阈值,当发生第二默认事件后,网络环境无法满足视频通话的要求,则第一视频通话装置不再获取当前视频帧,只将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置;第二视频通话装置接收虚拟形象的动作和/或表情的标识符,并获取对应的虚拟形象的动作和/或表情;第二视频通话装置显示虚拟形象的动作和/或表情。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第二默认事件,即检测网络参数大于第二预设阈值,从而判断当前的网络环境是否满足视频通话的要求,可以实现当网络环境不好影响到即时视频画面显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,通过获取虚拟形象的动作和/或表情的标识符,相比于获取虚拟形象的标识符,进一步增加了即时视频的趣味性以及即时视频过程中参与双方的互动性,从而提高了用户在即时视频交互过程中的交互体验。另外,当网络环境不好时,第一视频通话装置可以只发送虚拟形象的动作和/或表情的标识符,通过显示虚拟形象的动作和/或表情来进一步提高用户的视频通话体验。
实施例六为本发明实施例提供的一种视频通话方法,参照图12所示,本方法实施例中第一视频通话装置检测用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个发生的第二默认事件,在发生第二默认事件后,第一视频通话装置将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置,第二视频通话装置接收虚拟形象的动作和/或表情标识符后获取对应的虚拟形象的动作和/或表情,并显示虚拟形象的动作和/或表情。该方法包括:
1201、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则执行步骤1202,若否,则继续执行步骤1201。
具体的,第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
1202、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,通过第一视频通话装置的摄像头或者其他外部拍摄装置获取当前视频帧。
第一视频通话装置获取虚拟形象的标识符包括第一视频通话装置根据用户指示或者默认配置获取虚拟形象的标识符。
具体的,第一视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
值得注意的是,在步骤1202中,获取当前视频帧和获取虚拟形象的标识符可以是按照所述顺序执行的,也可以是先执行获取当前视频帧,再执行虚拟形象的标识符,还可以是同时执行的,本发明实施例对具体的执行顺序不加以限定。
1203、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,可以通过以下任意一种方式实现根据虚拟形象对当前视频帧的裁剪:
第一视频通话装置识别当前视频帧中人脸部分,并从当前视频帧中裁剪出人脸部分,得到裁剪后的当前视频帧;或者
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪和/或缩小,得到裁剪后的当前视频帧。
第一视频通话装置根据所述虚拟形象对所述当前视频帧进行裁剪和/或缩小可以为:
第一视频通话装置根据虚拟形象在屏幕中的位置对当前视频帧进行裁剪和/或缩小。
1204、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
需要说明的是,虚拟形象的标识符和裁剪后的当前视频帧可以是同时发送至第二视频通话装置的,也可以是分别发送至第二视频通话装置的,其中,若虚拟形象的标识符和裁剪后的当前视频帧是分别发送至第二视频通话装置的,本发明实施例对具体的发送顺序不加以限定。
1205、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,第二视频通话装置根据虚拟形象的标识符,查找本地存储的虚拟形象中与该标识符对应的虚拟形象;
若本地未存有与该标识符对应的虚拟形象,则从服务器中下载与该标识符对应的虚拟形象。
1206、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,第二视频通话装置将裁剪后的当前视频帧嵌入虚拟形象的动作和/或表情的预设位置,得到匹配后的当前视频帧。
第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧投影至投影屏幕上或者其他显示屏上。
1207、在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则执行步骤1208,若否,则继续步骤1207。
具体的,第二默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第一视频通话装置检测是否发生第二默认事件的实现方式与步骤501中第一视频通话装置检测是否发生第一默认事件的实现方式相同,在此不再具体赘述。
1208、第一视频通话装置获取虚拟形象的动作和/或表情的标识符。
第一视频通话装置获取虚拟形象的动作和/或表情的标识符包括第一视频通话装置根据用户指示或者预设事件获取虚拟形象的动作和/或表情的标识符。
具体的,第一视频通话装置根据虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
1209、第一视频通话装置向第二视频通话装置发送虚拟形象的动作和/或表情的标识符。
第一视频通话装置可以直接将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置或者通过服务器中转的方式发送至第二视频通话装置,具体的发送方式在此不做限定。
1210、第二视频通话装置接收虚拟形象的动作和/或表情的标识符。
1211、第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情。
具体的,第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,查找本地存储的虚拟形象的动作和/或表情中与该标识符对应的虚拟形象的动作和/或表情;
若本地未存有与该标识符对应的虚拟形象的动作和/或表情,则从服务器中下载与该标识符对应的虚拟形象的动作和/或表情。
1212、第二视频通话装置显示虚拟形象的动作和/或表情。
具体的,第二视频通话装置通过预设的显示指令,在触摸显示屏上显示该匹配后的当前视频帧和虚拟形象的动作和/或表情。
可选的,该第二通话装置还可以通过预设的显示指令,将该匹配后的当前视频帧和虚拟形象的动作和/或表情投影至投影屏幕上或者其他显示屏上。
可选的,第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,所述方法还包括:
第一视频通话装置检测是否发生第三默认事件,若否,则继续执行本步骤,若是,则向第二视频通话装置发送当前视频帧。
所述第二视频通话装置接收并显示所述当前视频帧。
其中,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
所述第三默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
为了进一步说明本发明实施例所达到的有益效果,下面将结合具体示例做进一步的阐述:假设在视频通话过程中的通话界面参照图8中的a所示,第一视频通话装置检测到用户晃动第一视频通话装置所在的物理设备参照图8中的b所示,发生第二默认事件后,获取虚拟形象的动作和/或表情的标识符,并对当前视频帧进行裁剪,然后将虚拟形象的标识符与裁剪后的当前视频帧发送到第二视频通话装置,同时将虚拟形象的动作和/或表情的标识符发送至第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,同时显示虚拟形象的动作和/或表情,参照图8中的b所示。
假设在视频通话过程中的通话界面参照图9中的a所示,第一视频通话装置检测到触发预设的用户手势参照图9中的b所示,发生第二默认事件后,获取虚拟形象的动作和/或表情的标识符,并对当前视频帧进行裁剪,然后将虚拟形象的标识符与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,同时显示虚拟形象的动作和/或表情,参照图9中的c所示。
假设在视频通话过程中的通话界面参照图4中的a所示,第一视频通话装置检测到预设的语音后,则判定发生第二默认事件,获取虚拟形象的动作和/或表情的标识符,并对当前视频帧进行裁剪,然后将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,同时显示虚拟形象的动作和/或表情,参照图4中的b所示。
假设在视频通话过程中的通话界面参照图10中的a所示,第一视频通话装置检测到触发预设的按键参照图10中的b所示,发生第二默认事件后,获取虚拟形象的动作和/或表情的标识符,并对当前视频帧进行裁剪,然后将虚拟形象与裁剪后的当前视频帧发送到第二视频通话装置,在第二视频通话装置接收裁剪后的当前视频帧和虚拟形象后,将两者进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧,同时显示虚拟形象的动作和/或表情,参照图10中的c所示。
本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第二默认事件,即检测用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按健,从而判断当前的网络环境是否满足视频通话的要求,可以实现当网络环境不好影响到即时视频画面显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,而且可以满足用户在其视频通话过程中根据实际需要来选择发生第二默认事件,从而完成对视频通话方式的切换,进一步提高了用户体验。
实施例七为本发明实施例提供的一种视频通话方法,参照图13所示,该方法包括:
1301、在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:
具体的,该步骤与步骤301相同,在此不再加以赘述。
1302、第一视频通话装置获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象。
具体的,该步骤与步骤302相同,在此不再加以赘述。
1303、第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧。
具体的,该步骤与步骤303相同,在此不再加以赘述。
1304、第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符。
具体的,该步骤与步骤304相同,在此不再加以赘述。
1305、第二视频通话装置接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象。
具体的,该步骤与步骤305相同,在此不再加以赘述。
1306、第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并显示匹配后的当前视频帧。
具体的,该步骤与步骤306相同,在此不再加以赘述。
1307、第一视频通话装置检测是否发生第三默认事件,若是,则执行步骤1308,若否,则继续执行步骤1307。
具体的,第三默认事件包括网络参数小于或者等于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。或者,
第三默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
第一视频通话装置检测是否发生第三默认事件的实现方式与步骤301和步骤501中第一视频通话装置检测是否发生第一默认事件的实现方式相同,在此不再加以赘述。
值得注意的是第一视频通话装置检测是否发生第三默认事件是在第一视频通话装置向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,即步骤1304至步骤1306之间的任意步骤之后,若第一视频通话装置检测到发生第三默认事件,则直接执行步骤1308。
1308、第一视频通话装置向第二视频通话装置发送当前视频帧。
通过第一视频通话装置的摄像头或者其他外设获取当前视频帧后,无需经过裁剪,直接将其发送至第二视频通话装置。
1309、第二视频通话装置接收并显示当前视频帧。
第二视频通话装置接收当前视频帧后,通过预设的显示指令,在触摸显示屏上显示该当前视频帧。
可选的,该第二通话装置还可以通过预设的显示指令,将该当前视频帧投影至投影屏幕上或者其他显示屏上。
如图4所示,在图4中的b所示的视频通话过程中,第一视频通话装置检测到网络参数大于预设阈值,或者用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个后,发生第三默认事件,从而将当前视频帧发送至第二视频通话装置,第二视频通话装置接收当前视频帧并显示收到的当前视频帧,参照图4中的a所示。
可选的,在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:
第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
第一视频通话装置向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置接收所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;
第二视频通话装置显示所述虚拟形象的动作和/或表情。
其中,第二默认事件包括网络参数大于第二预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。或者,
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。本发明实施例提供了一种视频通话方法,通过在视频通话过程中检测是否发生第三默认事件,可以在网络环境满足视频通话要求或者根据用户的需求显示全屏视频画面,无需再显示裁剪后的当前视频帧,本方法可以在视频通话过程中根据默认事件的发生与否发起不同的视频显示方式,增加了用户的视频通话体验和交互体验。另外,根据发生不同的默认事件显示不同的视频通话方式,可以使得视频通话始终保持流畅,大大降低视频出现卡顿或者断开连接的情况,在保证正常交互的情况下,更进一步提高了即时视频交互的流畅性,提高了用户体验。
实施例八为本发明实施例提供的一种视频通过装置,参照图14所示,该装置包括:
默认事件检测模块1401,用于在视频通话过程中检测是否发生第一默认事件;
视频帧获取模块1402,用于在默认事件检测模块检测到发生第一默认事件后,获取当前视频帧;
虚拟形象标识符获取模块1403,用于在默认事件检测模块检测到发生第一默认事件后,获取虚拟形象的标识符;
第一虚拟形象获取模块1404,用于根据虚拟形象的标识符获取对应的第一虚拟形象;
裁剪模块1405,用于根据第一虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧;
发送模块1406,用于向其他视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符;
接收模块1407,用于接收来自其他视频通话装置的裁剪后的当前视频帧和虚拟形象的标识符;
第二虚拟形象获取模块1408,用于根据接收的虚拟形象的标识符获取对应的第二虚拟形象;
匹配模块1409,用于对裁剪后的当前视频帧和第二虚拟形象进行匹配,得到匹配后的当前视频帧;
显示模块1410,用于显示匹配后的当前视频帧。
可选的,默认事件检测模块1401具体用于:
检测第一默认事件,所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
可选的,默认事件检测模块1401具体用于:
检测第一默认事件,所述第一默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,默认事件检测模块1401还用于:
在视频通话过程中检测是否发生第二默认事件;
可选的,虚拟形象标识符获取模块1403还用于:
在默认事件检测模块检测到发生所述第二默认事件后,获取第一虚拟形象的动作和/或表情的标识符;
可选的,发送模块1406还用于:
向其他视频通话装置发送第一虚拟形象的动作和/或表情的标识符;
可选的,接收模块1407还用于:
接收来自其他视频通话装置的第二虚拟形象的动作和/或表情的标识符;
可选的,第二虚拟形象获取模块1408还用于:
根据接收的来自其他视频通话装置的第二虚拟形象的动作和/或表情的标识符获取对应的第二虚拟形象的动作和/或表情;
可选的,显示模块1410还用于:
显示第二虚拟形象的动作和/或表情。
可选的,默认事件检测模块1401具体用于:
检测所述第二默认事件,所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
可选的,默认事件检测模块具体1401具体用于:
检测所述第二默认事件,所述第二默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,默认事件检测模块1401还用于:
检测是否发生第三默认事件,若是,则所述发送模块还用于向其他视频通话装置发送所述当前视频帧;
可选的,接收模块1407还用于接收来自其他视频通话装置的所述当前视频帧;
可选的,显示模块1410还用于显示接收的所述当前视频帧。
可选的,默认事件检测模块1401具体用于:
检测第三默认事件,所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
可选的,默认事件检测模块1401具体用于:
检测第三默认事件,所述第三默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
值得注意的是,在即时视频交互过程中,视频发送方和视频接收方是相对的,即在同一时刻内,该视频通话装置既可以是视频发送方,也可以是视频接收方,若该装置为视频发送方,则该电子装置主要通过默认事件检测模块1401视频帧获取模块1402、虚拟形象标识符获取模块1403、第一虚拟形象获取模块1404、裁剪模块1405以及发送模块1406实现本发明所述的视频通话的方法;若该装置为视频接收方,则该电子装置主要通过接收模块1407、第二虚拟形象获取模块1408、匹配模块1409和显示模块1410实现本发明所述的视频通话的方法。
本发明实施例提供了一种视频通话装置,该装置通过在视频通话过程中检测是否发生第一默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的第三默认事件后,可以切换到其他即时视频画面显示,增加了即时视频交互过程中视频的显示方式,同时,增加了即时视频参与双方在交互过程中的互动性,进一步提高了交互体验。
实施例九为本发明实施例提供的一种视频通话装置,参照图15所示,该装置包括存储器1501、触摸显示屏1502、摄像头1503、发送/接收模块1504以及与存储器1501、触摸显示屏1502、摄像头1503、发送/接收模块1504连接的处理器1505,其中,存储器1501用于存储一组程序代码,处理器1505调用存储器1501所存储的程序代码用于执行以下操作:
在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:
第一视频通话装置通过摄像头1503获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象;
第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧;
第一视频通话装置通过发送/接收模块1504向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
第二视频通话装置通过发送/接收模块1504接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象;
所述第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并通过触摸显示屏1502显示匹配后的当前视频帧。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
所述第一默认事件包括用户晃动所述第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,处理器1505调用存储器1501所存储的程序代码还用于执行以下操作:
在视频通话过程中第一视频通话装置检测是否发生第二默认事件,若是,则:第一视频通话装置获取虚拟形象的动作和/或表情的标识符;
第一视频通话装置通过发送/接收模块1504向第二视频通话装置发送所述虚拟形象的动作和/或表情的标识符;
第二视频通话装置通过发送/接收模块1504接收虚拟形象的动作和/或表情的标识符;
第二视频通话装置根据接收的虚拟形象的动作和/或表情的标识符,获取对应的虚拟形象的动作和/或表情;
第二视频通话装置通过触摸显示屏1502显示所述虚拟形象的动作和/或表情。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
第二默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,处理器1505调用存储器1501所存储的程序代码还用于执行以下操作:
第一视频通话装置通过发送/接收模块1504向第二视频通话装置发送裁剪后的当前视频帧和虚拟形象的标识符之后,该方法还包括:
第一视频通话装置检测是否发生第三默认事件,若是,则:第一视频通话装置通过发送/接收模块1504向第二视频通话装置发送当前视频帧;
第二视频通话装置通过发送/接收模块1504接收并通过触摸显示屏1502显示当前视频帧。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
第三默认事件包括网络参数小于或者等于第一预设阈值,其中,网络参数包括丢包率、往返时延以及抖动。
可选的,处理器1505调用存储器1501所存储的程序代码具体用于执行以下操作:
第三默认事件包括用户晃动第一视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
值得注意的是,在即时视频交互过程中,视频发送方和视频接收方是相对的,即在同一时刻内,该视频通话装置既可以是视频发送方,也可以是视频接收方,若该装置为视频发送方,则该电子装置的处理器1505调用存储器1501所存储的程序代码主要用于执行以下操作:在视频通话过程中第一视频通话装置检测是否发生第一默认事件,若是,则:第一视频通话装置通过摄像头1503获取当前视频帧和虚拟形象的标识符及虚拟形象标识符对应的虚拟形象;第一视频通话装置根据虚拟形象对当前视频帧进行裁剪,得到裁剪后的当前视频帧;第一视频通话装置通过发送/接收模块1504向所述第二视频通话装置发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;若该装置为视频接收方,则该电子装置的处理器1505调用存储器1501所存储的程序代码主要用于执行以下操作:第二视频通话装置通过发送/接收模块1504接收裁剪后的当前视频帧和虚拟形象的标识符,并根据虚拟形象的标识符获取对应的虚拟形象;第二视频通话装置对裁剪后的当前视频帧和虚拟形象进行匹配,得到匹配后的当前视频帧,并通过触摸显示屏1502显示匹配后的当前视频帧。
本发明实施例提供了一种视频通话装置,该装置通过在视频通话过程中检测是否发生第一默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的第三默认事件后,可以切换到其他即时视频画面显示,增加了即时视频交互过程中视频的显示方式,同时,增加了即时视频参与双方在交互过程中的互动性,进一步提高了交互体验。
实施例十为本发明实施例提供的一种视频通话系统,参照图16所示,该系统包括第一视频通话装置161和第二视频通话装置162,其中:
第一视频通话装置161包括:
默认事件检测模块1611,用于在视频通话过程中检测是否发生第一默认事件;
视频帧获取模块1612,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取当前视频帧;
虚拟形象标识符获取模块1613,用于在所述默认事件检测模块检测到发生所述第一默认事件后,获取虚拟形象的标识符;
第一虚拟形象获取模块1614,用于根据所述虚拟形象的标识符获取对应的虚拟形象;
裁剪模块1615,用于根据所述虚拟形象对所述当前视频帧进行裁剪,得到裁剪后的当前视频帧;
发送模块1616,用于向第二视频通话装置162发送所述裁剪后的当前视频帧和所述虚拟形象的标识符;
第二视频通话装置162包括:
接收模块1621,用于接收来自所述第一视频通话装置161的所述裁剪后的当前视频帧和虚拟形象的标识符;
第二虚拟形象获取模块1622,用于根据所述虚拟形象的标识符获取对应的虚拟形象;
匹配模块1623,用于对所述裁剪后的当前视频帧和所述虚拟形象进行匹配,得到匹配后的当前视频帧;
显示模块1624,用于显示匹配后的当前视频帧。
可选的,默认事件检测模块1611具体用于:
检测第一默认事件,所述第一默认事件包括网络参数大于第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
可选的,默认事件检测模块1611具体用于:
检测第一默认事件,所述第一默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,默认事件检测模块1611还用于:
在视频通话过程中检测是否发生第二默认事件;
可选的,虚拟形象标识符获取模块1613还用于在所述默认事件检测模块检测到发生所述第二默认事件后,获取虚拟形象的动作和/或表情的标识符;
可选的,发送模块1616还用于:
向所述第二视频通话装置162发送所述虚拟形象的动作和/或表情的标识符;
可选的,接收模块1621还用于:
接收来自第一视频通话装置161的虚拟形象的动作和/或表情的标识符;
可选的,第二虚拟形象获取模块1622还用于:
根据接收的所述虚拟形象的动作和/或表情的标识符获取对应的虚拟形象的动作和/或表情;
可选的,显示模块1624还用于:
第二视频通话装置162显示所述虚拟形象的动作和/或表情。
可选的,默认事件检测模块1611具体用于:
检测所述第二默认事件,所述第二默认事件包括网络参数大于第二预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动,其中,所述第二预设阈值大于所述第一预设阈值。
可选的,默认事件检测模块1611具体用于:
检测所述第二默认事件,所述第二默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
可选的,默认事件检测模块1611还用于:
检测是否发生第三默认事件;
可选的,发送模块1616还用于:
在所述默认事件检测模块检测到所述第三默认事件后,向第二视频通话162装置发送当前视频帧;
可选的,接收模块1621还用于:
接收来自第一视频通话装置161的所述当前视频帧;
可选的,显示模块1624还用于:
第二视频通话装置162显示所述当前视频帧。
可选的,默认事件检测模块1611具体用于获取:
第三默认事件,所述第三默认事件包括网络参数小于或者等于所述第一预设阈值,其中,所述网络参数包括丢包率、往返时延以及抖动。
可选的,默认事件检测模块1611具体用于:
获取第三默认事件,所述第三默认事件包括用户晃动所述视频通话装置所在的物理设备、预设的用户手势、预设的语音和点击预设的按键中的任意一个或多个。
本发明实施例提供了一种视频通话系统,该系统通过在视频通话过程中检测是否发生第一默认事件,可以实现当网络环境不好影响到即时视频画面全屏显示时,通过发送裁剪后的视频帧,相比于发送全部视频帧,减少了视频发送时所占的带宽,以使用户可以在网络条件较差的情况下发起本发明实施例所述的视频通话方法,实现即时视频交互,相比于传统技术所提供的方法在网络条件较差的情况下出现卡顿或者断开连接的情况,该方法不仅实现了在所述情况下的正常交互,更进一步提高了即时视频交互的流畅性,提高了用户体验。另外,在视频通话过程中,检测到发生符合条件的第三默认事件后,可以切换到其他即时视频画面显示,增加了即时视频交互过程中视频的显示方式,同时,增加了即时视频参与双方在交互过程中的互动性,进一步提高了交互体验。
所述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
值得注意的是,本发明实施例所述的界面仅仅是示例性的,是为了进一步说明本发明实施例所述的方法,本发明实施例对具体的界面不加以限定,除此之外,本发明实施例所述的“第一”和“第二”仅仅是为了区分二者的不同,此处并非特指。
需要说明的是:所述实施例提供的视频通话装置在执行视频通话方法时,仅以所述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将所述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,所述实施例提供的视频通话装置、方法和系统实施例属于同一构思,其具体实现过程详见方法实施例,这里不再加以赘述。
本领域普通技术人员可以理解实现所述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,所述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。