CN109963106A - 一种视频图像处理方法、装置、存储介质及终端 - Google Patents

一种视频图像处理方法、装置、存储介质及终端 Download PDF

Info

Publication number
CN109963106A
CN109963106A CN201910259690.5A CN201910259690A CN109963106A CN 109963106 A CN109963106 A CN 109963106A CN 201910259690 A CN201910259690 A CN 201910259690A CN 109963106 A CN109963106 A CN 109963106A
Authority
CN
China
Prior art keywords
video image
terminal
image
target video
network quality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910259690.5A
Other languages
English (en)
Other versions
CN109963106B (zh
Inventor
刘铭卓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Original Assignee
Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yulong Computer Telecommunication Scientific Shenzhen Co Ltd filed Critical Yulong Computer Telecommunication Scientific Shenzhen Co Ltd
Publication of CN109963106A publication Critical patent/CN109963106A/zh
Application granted granted Critical
Publication of CN109963106B publication Critical patent/CN109963106B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例公开了一种视频图像处理方法、装置、存储介质及服务器，所述方法包括：第一终端获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端获取当前帧视频图像；所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。因此，采用本申请实施例，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。

Description

一种视频图像处理方法、装置、存储介质及终端
技术领域
本申请涉及计算机技术领域，尤其涉及一种视频图像处理方法、装置、存储介质及终端。
背景技术
随着科技的发展，手机等终端设备作为通讯工具不仅可以满足人们的语音通话需求，还可以支持视频通话。目前LTE网络的覆盖越来越广，采用LTE网络进行视频通话的频率和使用率也越来越高。
视频通话中会实时传输通话双方的视频图像，用户可以同时看到本端视频图像和对端发送过来的远端视频图像。而传输视频图像所占网络负荷大，当视频通话网络质量不佳时，将导致终端设备无法将本端视频图像传输给通话对端，也无法接收到通话对端发送的远端视频图像，此时，终端设备会自动切换到语音通话模式而无法进行视频通话。
发明内容
本申请实施例提供了一种视频图像处理方法、装置、存储介质及终端，可以解决当视频通话网络质量不佳时，将导致终端设备无法将本端视频图像传输给通话对端，进而无法进行视频通话的问题。所述技术方案如下：
第一方面，本申请实施例提供了一种视频图像处理方法，所述方法包括：
第一终端获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端获取当前帧视频图像；
所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
可选的，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像之后，还包括：
所述第一终端获取所述目标视频图像的中心坐标；
所述第一终端将所述目标视频图像传输至所述第二终端，包括：
所述第一终端将所述目标视频图像以及所述中心坐标传输至所述第二终端。
可选的，所述第一终端将所述目标视频图像以及所述中心坐标传输至所述第二终端，包括：
所述第一终端将所述目标视频图像以及所述中心坐标进行封装处理；
所述第一终端将封装处理后的所述目标视频图像以及所述中心传输至所述第二终端。
可选的，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，包括：
所述第一终端在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
可选的，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，包括：
所述第一终端获取在所述当前帧视频图像上的对焦中心坐标；
所述第一终端采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
第二方面，本申请实施例提供了一种视频图像处理方法，所述方法包括：
第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
所述第二终端获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
所述第二终端将所述目标视频图像拼接至所述上一帧视频图像中。
可选的，所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，包括：
第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
可选的，所述第二终端将所述目标视频图像拼接至所述上一帧视频图像中，包括：
所述第二终端将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
可选的，所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标，包括：
所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
所述第二终端对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
第三方面，本申请实施例提供了一种视频图像处理装置，所述装置包括：
质量获取模块，用于获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块，用于当所述当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像；
图像传输模块，用于基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
可选的，所述装置还包括：
中心获取模块，用于获取所述目标视频图像的中心坐标；
所述图像传输模块，具体用于：
将所述目标视频图像以及所述中心坐标传输至所述第二终端。
可选的，所述图像传输模块，具体用于：
将所述目标视频图像以及所述中心坐标进行封装处理；
将封装处理后的所述目标视频图像以及所述中心传输至所述第二终端。
可选的，所述图像传输模块，具体用于：
在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
可选的，所述图像传输模块，具体用于：
获取在所述当前帧视频图像上的对焦中心坐标；
采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
第四方面，本申请实施例提供了一种视频图像处理装置，所述装置包括：
图像接收模块，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块，用于获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
图像拼接模块，用于将所述目标视频图像拼接至所述上一帧视频图像中。
可选的，所述图像接收模块，具体用于：
接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
可选的，所述图像拼接模块，具体用于：
将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
可选的，所述图像接收模块，包括：
图像接收单元，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
图像处理单元，用于对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
第五方面，本申请实施例提供一种计算机存储介质，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行上述的方法步骤。
第六方面，本申请实施例提供一种终端，可包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行上述的方法步骤。
本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种视频图像处理系统架构示意图；
图2是本申请实施例提供的一种视频图像处理方法的流程示意图；
图3是本申请实施例提供的一种图像截取效果示意图；
图4是本申请实施例提供的一种图像截取效果示意图；
图5是本申请实施例提供的一种目标视频图像的中心坐标显示效果示意图；
图6是本申请实施例提供的一种图像拼接效果示意图；
图7是本申请实施例提供的一种视频图像处理方法的流程示意图；
图8是本申请实施例提供的一种视频图像处理方法的流程示意图；
图9是本申请实施例提供的一种视频图像处理装置的结构示意图；
图10是本申请实施例提供的一种视频图像处理装置的结构示意图；
图11是本申请实施例提供的一种视频图像处理装置的结构示意图；
图12是本申请实施例提供的一种图像接收模块的结构示意图；
图13是本申请实施例提供的一种终端的结构示意图；
图14是本申请实施例提供的一种终端的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。此外，在本申请的描述中，除非另有说明，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
请参见图1，为本申请实施例提供的一种视频图像处理系统架构示意图。如图1所示，所述系统架构可以包括第一终端1以及第二终端2，所述的第一终端1和/或第二终端2可以包括多个。需要说明的是，所述第一终端1与第二终端2可以为用户的个人终端设备，如平板电脑、个人计算机(PC)、智能手机、掌上电脑以及移动互联网设备(MID)、智能手表、智能手环等智能可穿戴设备、智能音响、智能眼镜等终端设备，第一终端1与第二终端2可以为同类型设备，也可以为不同类型的设备。第一终端与第二终端为两对等终端。
如图1所示，所述第一终端1与所述第二终端2之间处于视频通话状态，所述第一终端1，用于获取所述第一终端1与第二终端2之间的当前视频网络质量；
其中，当前视频网络质量指在当前视频通话过程中的视频通话质量。第一终端1可以实时持续检测视频网络质量，也可以周期性检测视频网络质量。
当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端1，还用于获取当前帧视频图像；
由于视频图像中包括有多帧图像，而每帧图像所对应的视频网络质量可能不同，第一终端1分别检测每帧视频图像所对应的视频网络质量并与预设网络质量阈值进行比较。一旦确定当前视频网络质量小于或者等于预设网络质量阈值，则获取该时刻所对应的视频图像(即当前帧视频图像)。
所述第一终端1，还用于基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端2。
预设的截取规则可以包括截取位置、截取形状、截取对象、截取尺寸等。
一种可行的方式为，所述第一终端1在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
另一种可行的方式为，所述第一终端1获取在所述当前帧视频图像上的对焦中心坐标，并采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
可选的，所述第一终端1，还用于获取所述目标视频图像的中心坐标；
所述第一终端1用于将所述目标视频图像传输至所述第二终端2，具体用于将所述目标视频图像以及所述中心坐标传输至所述第二终端2。
可选的，所述第一终端用于将所述目标视频图像以及所述中心坐标传输至所述第二终端2之前，还用于将所述目标视频图像以及所述中心坐标进行封装处理。
其中的封装处理可以包括压缩处理、切片处理、封装为数据包等处理方式。
所述第二终端2，用于接收第一终端1发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像；
所述第二终端2，还用于接收所述目标视频图像的中心坐标；
若所接收到的目标视频图像以及中心坐标经过封装处理，所述第二终端2还需要对所述目标视频图像以及所述中心坐标进行解封装处理，从而获取解封装处理后的所述目标视频图像以及所述中心坐标。
所述第二终端2，还用于获取所述第一终端1发送的所述当前帧视频图像的上一帧视频图像，并将所述目标视频图像拼接至所述上一帧视频图像中。
具体可以为将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
在本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端，第二终端将目标视频图像拼接到前一帧视频图像后进行显示。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
下面将结合附图2-附图8，对本申请实施例提供的图像处理方法进行详细介绍。
请参见图2，为本申请实施例提供了一种视频图像处理方法的流程示意图，以第一终端和第二终端两侧为例进行描述，如图2所示，本申请实施例的所述方法可以包括以下步骤：
S101，第一终端获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
具体的，视频通话通常指基于互联网和移动互联网端，通过手机等终端设备之间实时传送人的语音和图像(用户的半身像、照片、物品等)的一种通信方式。
视频通话需要两台联网的终端设备(如智能手机、PC、平板电脑等)，通过集成软件或第三方软件来实现音、视频实时双向传输。
视频通话主要有四种常见形式：PC-to-PC、PC-to-Phone、Phone-to-PC和Phone-to-Phone via Internet。
目前，多采用长期演进语音承载(Voice over Long-Term Evolution，VoLTE)进行视频通话。这是因为，VoLTE的语音和数据容量超过3G UMTS三倍以上，超过2G GSM六倍以上。
VoLTE是基于IMS(IP Multimedia Subsystem)的语音业务，一种IP数据传输技术，无需2G/3G网，全部业务承载于4G网络上，可实现数据与语音业务在同一网络下的统一。IMS由于支持多种接入和丰富的多媒体业务，成为全IP时代的核心网标准架构。
由于在视频通话过程中，视频网络质量可能不稳定，一旦视频网络质量变差时可能会导致丢包，从而影响视频图像的传输。其中视频网络质量可以包括响应时间、网络抖动、丢包率等网络信息。
在一种可行的实现方式中，图像处理装置可基于所安装的网络检测工具测试当前视频网络质量，确定所对应的各个网络信息的具体值。其中，图像处理设备可以周期性测试视频网络质量，也可以实时测试视频网络质量，从而确定每帧视频图像所对应的视频网络质量。
需要说明的是，图像处理装置采用网络检测工具测试当前视频网络质量，可以是图像处理装置自动启动该网络检测工具，也可以是用户触发启动。
S102，当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端获取当前帧视频图像；
具体的，当前视频网络质量为当前时刻检测到的视频网络质量，可以理解为是当前帧视频图像对应的视频网络质量。
在一种可行的实现方式中，图像处理装置将当前视频网络质量与预设网络质量阈值进行比较，若确定当前视频网络质量小于或者等于该预设网络质量阈值，说明此时网络质量差，因此，需要提取当前帧视频图像。
S103，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像；
预设的截取规则可以包括截取形状、截取对象、截取位置、截取范围、截取尺寸等。
在一种可行的实现方式中，在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
例如，如图3所示，若截取形状为矩形，截取对象为人脸区域，图像处理装置对当前帧视频图像中的第一用户的人脸进行识别并截取，从而得到目标视频图像。
其中对人脸区域进行识别可采用现有的人脸识别算法，如基于人脸特征点的识别算法(Feature-based recognition algorithms)、基于整幅人脸图像的识别算法(Appearance-based recognition algorithms)、基于模板的识别算法(Template-basedrecognition algorithms)、利用神经网络进行识别的算法(Recognition algorithmsusing neural network)。
可选的，若在当前帧视频图像中包含有多个第一用户，则需要分别对每个用户进行人脸识别并截取，此过程与一个第一用户的处理过程相同。
需要说明的是，第一用户为图像处理装置(第一终端)所采集到的当前帧视频图像中的用户，而并不包含第二终端所传输用户图像数据。
在另一种可行的实现方式中，图像处理装置获取在所述当前帧视频图像上的对焦中心坐标，并采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
例如，如图4所示，若截取形状为圆形，截取对象为图像对焦中心坐标预设半径范围内的区域，通过将圆形的圆心对准对焦中心坐标，将半径设置为预设半径，然后进行截取，从而可以得到目标视频图像。
可选的，还可以是对焦中心周围固定尺寸大小的图像区域，如50*50像素大小。
具体截取方式此处不作具体限定。
S104，所述第一终端获取所述目标视频图像的中心坐标；
具体的，目标视频图像的中心坐标指目标视频图像的中心点在当前帧视频图像中的坐标。
例如，如图5所示，若以对焦中心预设距离范围内的圆形截取目标视频图像，那么目标视频图像的中心坐标即为对焦中心坐标，即对焦中心相对坐标原点(0，0)的坐标。
S105，所述第一终端将所述目标视频图像以及所述中心坐标进行封装处理；
具体的，封装处理就是把业务数据映射到某个封装协议的净荷中，然后填充对应协议的包头，形成封装协议的数据包，并完成速率适配。在本申请实施例中，所述业务数据即为目标视频图像以及中心坐标。
相应的，在接收端接收到该数据包时，需要进行解封装处理，从而取出其中的业务数据。所述解封装处理为封装处理的逆过程，拆解协议包，处理包头中的信息，取出净荷中的业务信息数据。
S106，所述第一终端将封装处理后的所述目标视频图像以及所述中心坐标传输至所述第二终端；
具体的，第一终端在传输该封装后的数据包时，可以直接以整个数据包的形式进行传输，也可以将数据包进行压缩处理后再传输，还可以将数据包切片后按照切片顺序依次传输。
其中，对于传统的IMS视频通话，通过采用多媒体资源功能处理器(MultimediaResource Function Processor，MRFP)网元对目标视频图像解码，然后再按第二终端的协议和速率重新对该目标视频图像进行编码，最后将重新编码后的目标视频图像发送给第二终端。
S107，第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标，所述第一终端与所述第二终端之间处于视频通话状态；
第二终端即为第一终端的视频通话对端。
第二终端接收到第一终端发送的封装业务数据，在该封装业务数据中包括所截取的目标视频图像以及所述目标视频图像的中心坐标。
可选的，在该封装业务数据中还可包括第一终端检测到的当前视频通话网络质量、第一终端标识等信息。其中，在第二终端接收到该网络质量信息时，可以不用去检测当前网络质量。在第二终端接收到第一终端标识时，若第二终端同时与多个第一终端处于视频通话状态，则在第二终端需要向第一终端反馈消息时可基于第一终端标识发送。所述第一终端标识可以为第一终端识别号、第一终端MAC地址等。
S108，所述第二终端对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标；
S109，所述第二终端获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
可以理解的是，第二终端获取当前时刻信息或者接收到第一终端发送的业务数据时的时刻信息，确定当前时刻的前一时刻，再在本地缓存中或者服务器中调出前一时刻对应的上一帧视频图像。其中，每帧视频图像分别对应一个时刻信息。
S110，所述第二终端将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
由于在视频通话过程中，连续的两帧视频图像差异变化相对较小，而且在视频通话过程中更注重人脸部分的显示。因此，直接将所截取的目标视频图像覆盖到当前时刻的上一帧视频图像中而不会发生较明显的拼接漏洞或不合理的显示效果。
在一种可行的实现方式中，将目标视频图像的中心点与上一帧视频图像中该中心坐标指示的位置重合，然后调整目标视频图像的显示角度和方向，从而生成第二终端上当前时刻所显示的第一用户对应的视频图像，所对应的显示结果如图6所示。
需要注意的是，由于在视频通过过程中，语音数据的传输所占的网络带宽小，传输负荷低，而视频图像传输所占的网络带宽打，传输负荷高，在本申请实施例中，主要关注对视频图像的传输。
需要说明的是，在本申请实施例中，第一终端也会同步接收第二终端发送的目标视频图像，并可以采用与第二终端相同的方式对所接收到的目标视频图像进行拼接，从而实现第一终端与第二终端之间的视频通话。
在本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端，第二终端将目标视频图像拼接到前一帧视频图像后进行显示。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
请参见图7，为本申请实施例提供了另一种视频图像处理方法的流程示意图，以第一终端侧为例进行描述，如图7所示，本申请实施例的所述方法可以包括以下步骤：
S201，第一终端获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
具体的，视频通话通常指基于互联网和移动互联网端，通过手机等终端设备之间实时传送人的语音和图像(用户的半身像、照片、物品等)的一种通信方式。
视频通话需要两台联网的终端设备(如智能手机、PC、平板电脑等)，通过集成软件或第三方软件来实现音、视频实时双向传输。
视频通话主要有四种常见形式：PC-to-PC、PC-to-Phone、Phone-to-PC和Phone-to-Phone via Internet。
目前，多采用VoLTE进行视频通话。这是因为，VoLTE的语音和数据容量超过3GUMTS三倍以上，超过2G GSM六倍以上。
VoLTE是基于IMS的语音业务，一种IP数据传输技术，无需2G/3G网，全部业务承载于4G网络上，可实现数据与语音业务在同一网络下的统一。IMS由于支持多种接入和丰富的多媒体业务，成为全IP时代的核心网标准架构。
由于在视频通话过程中，视频网络质量可能不稳定，一旦视频网络质量变差时可能会导致丢包，从而影响视频图像的传输。其中视频网络质量可以包括响应时间、网络抖动、丢包率等网络信息。
在一种可行的实现方式中，第一终端可基于所安装的网络检测工具测试当前视频网络质量，确定所对应的各个网络信息的具体值。其中，图像处理设备可以周期性测试视频网络质量，如每间隔5s，也可以实时测试视频网络质量，从而确定每帧视频图像所对应的视频网络质量。
需要说明的是，第一终端采用网络检测工具测试当前视频网络质量，可以是第一终端自动启动该网络检测工具，也可以是用户触发启动。
S202，当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端获取当前帧视频图像；
例如，若当前视频网络质量为80kb/s，预设网络质量阈值为100kb/s，则确定当前视频网络质量小于预设网络质量阈值，此时，第一终端获取当前帧视频图像。其中，当前帧视频图像对应当前时刻。
第一终端获取当前帧视频图像的方式可以为，通过摄像头针对目标对象进行拍摄。所述目标对象可以为用户图像、动物图像、风景图像等。
S203，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
预设的截取规则可以包括截取形状、截取对象、截取位置、截取范围、截取尺寸等。
在一种可行的实现方式中，在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
例如，如图3所示，若截取形状为矩形，截取对象为人脸区域，第一终端对当前帧视频图像中的第一用户的人脸进行识别并截取，从而得到目标视频图像。
其中对人脸区域进行识别可采用现有的人脸识别算法，如基于人脸特征点的识别算法、基于整幅人脸图像的识别算法、基于模板的识别算法、利用神经网络进行识别的算法等。
可选的，若在当前帧视频图像中包含有多个第一用户，则需要分别对每个用户进行人脸识别并截取，此过程与一个第一用户的处理过程相同。
需要说明的是，第一用户为第一终端(第一终端)所采集到的当前帧视频图像中的用户，而并不包含第二终端所传输用户图像数据。
在另一种可行的实现方式中，第一终端获取在所述当前帧视频图像上的对焦中心坐标，并采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
例如，如图4所示，若截取形状为圆形，截取对象为图像对焦中心坐标预设半径范围内的区域，通过将圆形的圆心对准对焦中心坐标，将半径设置为预设半径，然后进行截取，从而可以得到目标视频图像。
可选的，还可以是对焦中心周围固定尺寸大小的图像区域，如50*50像素大小。
具体截取方式此处不作具体限定。
可选的，所述第一终端获取所述目标视频图像的中心坐标，将所述中心坐标传输至所述第二终端。
其中，第一终端可将目标视频图像以及目标视频图像的中心坐标同时传输至第二终端，也可以分别传输至第二终端。
可选的，第二终端将目标视频图像以及目标视频图像的中心坐标同时传输至第二终端，可以为将目标视频图像以及中心坐标直接发送，也可以为先将目标视频图像以及中心坐标进行封装，再将封装后的数据包进行发送，还可以为将封装后的数据包进行切片得到各个数据块，然后将各数据块依次发送。具体发送方式不限定。
需要说明的是，在本申请实施例中，第一终端也会同步接收第二终端发送的目标视频图像，并可以采用与第二终端相同的方式对所接收到的目标视频图像进行拼接，从而实现第一终端与第二终端之间的视频通话。
在本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
请参见图8，为本申请实施例提供了另一种视频图像处理方法的流程示意图，以第二终端侧为例进行描述，如图8所示，本申请实施例的所述方法可以包括以下步骤：
S301，第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
第二终端即为第一终端的视频通话对端。
当第一终端确定当前视频网络质量小于或者等于预设网络质量阈值时，在当前帧视频图像中截取目标视频图像发送至第二终端，第二终端接收该目标视频图像。
可选的，第二终端还接收第一终端发送的所述目标视频图像的中心坐标。若所接收到的目标视频图像和中心坐标经过封装处理，则需要进行解封装处理后得到目标视频图像和中心坐标。
可选的，第二终端在所接收到的信息中还可包括第一终端检测到的当前视频通话网络质量、第一终端标识等信息。其中，在第二终端接收到该网络质量信息时，可以不用去检测当前网络质量。在第二终端接收到第一终端标识时，若第二终端同时与多个第一终端处于视频通话状态，则在第二终端需要向第一终端反馈消息时可基于第一终端标识发送。所述第一终端标识可以为第一终端识别号、第一终端MAC地址等。
S302，所述第二终端获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
可以理解的是，第二终端获取当前时刻信息或者接收到第一终端发送的业务数据时的时刻信息，确定当前时刻的前一时刻，再在本地缓存中或者服务器中调出前一时刻对应的上一帧视频图像。其中，每帧视频图像分别对应一个时刻信息。
S303，所述第二终端将所述目标视频图像拼接至所述上一帧视频图像中。
由于在视频通话过程中，连续的两帧视频图像差异变化相对较小，而且在视频通话过程中更注重人脸部分的显示。因此，直接将所截取的目标视频图像覆盖到当前时刻的上一帧视频图像中而不会发生较明显的拼接漏洞或不合理的显示效果。
在一种可行的实现方式中，将目标视频图像的中心点与上一帧视频图像中该中心坐标指示的位置重合，然后调整目标视频图像的显示角度和方向，从而生成第二终端上当前时刻所显示的第一用户对应的视频图像，所对应的显示结果如图6所示。
需要注意的是，由于在视频通过过程中，语音数据的传输所占的网络带宽小，传输负荷低，而视频图像传输所占的网络带宽打，传输负荷高，在本申请实施例中，主要关注对视频图像的传输。
需要说明的是，在本申请实施例中，第一终端也会同步接收第二终端发送的目标视频图像，并可以采用与第二终端相同的方式对所接收到的目标视频图像进行拼接，从而实现第一终端与第二终端之间的视频通话。
在本申请实施例中，第二终端接收第一终端与第二终端在视频通话网络质量不佳时发送的在当前帧视频图像中所截取的目标视频图像，并获取上一帧目标视频图像，然后将目标视频图像拼接到上一帧目标视频图像上进行显示。当视频通话网络质量不佳时，通过接收第一终端发送的在当前帧视频图像中截取小尺寸的目标视频图像，减小了视频图像的传输负荷，同样的，第二终端也可以将所截取的小尺寸目标视频图像发送至第一终端进行显示，视频通话双方可以正常进行视频通话。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
请参见图9，其示出了本申请一个示例性实施例提供的图像处理装置的结构示意图。该图像处理装置可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。该装置1包括质量获取模块11、图像获取模块12和图像传输模块13。
质量获取模块11，用于获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块12，用于当所述当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像；
图像传输模块13，用于基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
可选的，如图10所示，所述装置1还包括：
中心获取模块14，用于获取所述目标视频图像的中心坐标；
所述图像传输模块13，具体用于：
将所述目标视频图像以及所述中心坐标传输至所述第二终端。
可选的，所述图像传输模块13，具体用于：
将所述目标视频图像以及所述中心坐标进行封装处理；
将封装处理后的所述目标视频图像以及所述中心传输至所述第二终端。
可选的，所述图像传输模块13，具体用于：
在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
可选的，所述图像传输模块13，具体用于：
获取在所述当前帧视频图像上的对焦中心坐标；
采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
需要说明的是，上述实施例提供的视频图像处理装置在执行视频图像处理方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的视频图像处理装置与视频图像处理方法实施例属于同一构思，其体现实现过程详见方法实施例，这里不再赘述。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
请参见图11，其示出了本申请一个示例性实施例提供的图像处理装置的结构示意图。该图像处理装置可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。该装置2包括图像接收模块21、图像获取模块22和图像拼接模块23。
图像接收模块21，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块22，用于获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
图像拼接模块23，用于将所述目标视频图像拼接至所述上一帧视频图像中。
可选的，所述图像接收模块21，具体用于：
接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
可选的，所述图像拼接模块23，具体用于：
将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
可选的，如图12所示，所述图像接收模块21，包括：
图像接收单元211，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
图像处理单元212，用于对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
需要说明的是，上述实施例提供的视频图像处理装置在执行视频图像处理方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的视频图像处理装置与视频图像处理方法实施例属于同一构思，其体现实现过程详见方法实施例，这里不再赘述。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
在本申请实施例中，第二终端接收第一终端与第二终端在视频通话网络质量不佳时发送的在当前帧视频图像中所截取的目标视频图像，并获取上一帧目标视频图像，然后将目标视频图像拼接到上一帧目标视频图像上进行显示。当视频通话网络质量不佳时，通过接收第一终端发送的在当前帧视频图像中截取小尺寸的目标视频图像，减小了视频图像的传输负荷，同样的，第二终端也可以将所截取的小尺寸目标视频图像发送至第一终端进行显示，视频通话双方可以正常进行视频通话。
本申请实施例还提供了一种计算机存储介质，所述计算机存储介质可以存储有多条指令，所述指令适于由处理器加载并执行如上述图2-图8所示实施例的方法步骤，具体执行过程可以参见图2-图8所示实施例的具体说明，在此不进行赘述。
本申请还提供了一种计算机程序产品，该计算机程序产品存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的图像处理方法。
请参见图13，为本申请实施例提供了一种终端的结构示意图。如图13所示，所述终端1000可以包括：至少一个处理器1001，至少一个网络接口1004，用户接口1003，存储器1005，至少一个通信总线1002。
其中，通信总线1002用于实现这些组件之间的连接通信。
其中，用户接口1003可以包括显示屏(Display)、摄像头(Camera)，可选用户接口1003还可以包括标准的有线接口、无线接口。
其中，网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中，处理器1001可以包括一个或者多个处理核心。处理器1001利用各种借口和线路连接整个终端1000内的各个部分，通过运行或执行存储在存储器1005内的指令、程序、代码集或指令集，以及调用存储在存储器1005内的数据，执行终端1000的各种功能和处理数据。可选的，处理器1001可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器1001可集成中央处理器(Central ProcessingUnit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器1001中，单独通过一块芯片进行实现。
其中，存储器1005可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选的，该存储器1005包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1005可用于存储指令、程序、代码、代码集或指令集。存储器1005可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等；存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图13所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及视频图像处理应用程序。
在图13所示的终端1000中，用户接口1003主要用于为用户提供输入的接口，获取用户输入的数据；而处理器1001可以用于调用存储器1005中存储的视频图像处理应用程序，并具体执行以下操作：
获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
当所述当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像；
基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
在一个实施例中，所述处理器1001在执行基于预设的截取规则在所述当前帧视频图像中截取目标视频图像之后，还执行以下步骤：
获取所述目标视频图像的中心坐标；
将所述目标视频图像传输至所述第二终端，包括：
将所述目标视频图像以及所述中心坐标传输至所述第二终端。
在一个实施例中，所述处理器1001在执行将所述目标视频图像以及所述中心坐标传输至所述第二终端时，具体执行以下步骤：
将所述目标视频图像以及所述中心坐标进行封装处理；
将封装处理后的所述目标视频图像以及所述中心坐标传输至所述第二终端。
在一个实施例中，所述处理器1001在执行基于预设的截取规则在所述当前帧视频图像中截取目标视频图像时，具体执行以下步骤：
在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
在一个实施例中，所述处理器在执行基于预设的截取规则在所述当前帧视频图像中截取目标视频图像时，具体执行以下步骤：
获取在所述当前帧视频图像上的对焦中心坐标；
采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
本申请实施例中，第一终端获取第一终端与第二终端在视频通话状态下的当前视频网络质量，当该当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像，并基于预设的截取规则在所述当前帧视频图像中截取目标视频图像后，将该目标视频图像传输至所述第二终端。当视频通话网络质量不佳时，通过在当前帧视频图像中截取小尺寸的目标视频图像以传输给第二终端进行显示，减小了视频图像的传输负荷，同样的，第一终端也可以接收到第二终端发送的小尺寸视频图像，视频通话双方可以正常进行视频通话。
请参见图14，为本申请实施例提供了一种终端的结构示意图。如图14所示，所述终端2000可以包括：至少一个处理器2001，至少一个网络接口2004，用户接口2003，存储器2005，至少一个通信总线2002。
其中，通信总线2002用于实现这些组件之间的连接通信。
其中，用户接口2003可以包括显示屏(Display)、摄像头(Camera)，可选用户接口2003还可以包括标准的有线接口、无线接口。
其中，网络接口2004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中，处理器2001可以包括一个或者多个处理核心。处理器2001利用各种借口和线路连接整个终端2000内的各个部分，通过运行或执行存储在存储器2005内的指令、程序、代码集或指令集，以及调用存储在存储器2005内的数据，执行终端2000的各种功能和处理数据。可选的，处理器2001可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器2001可集成中央处理器(Central Processing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器2001中，单独通过一块芯片进行实现。
其中，存储器2005可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选的，该存储器2005包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器2005可用于存储指令、程序、代码、代码集或指令集。存储器2005可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等；存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器2005可选的还可以是至少一个位于远离前述处理器2001的存储装置。如图14所示，作为一种计算机存储介质的存储器2005中可以包括操作系统、网络通信模块、用户接口模块以及视频图像处理应用程序。
在图14所示的终端2000中，用户接口2003主要用于为用户提供输入的接口，获取用户输入的数据；而处理器2001可以用于调用存储器2005中存储的视频图像处理应用程序，并具体执行以下操作：
接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
将所述目标视频图像拼接至所述上一帧视频图像中。
在一个实施例中，所述处理器2001在执行接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像时，具体执行以下步骤：
接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
在一个实施例中，所述处理器2001在执行将所述目标视频图像拼接至所述上一帧视频图像中时，具体执行以下步骤：
将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
在一个实施例中，所述处理器2001在执行接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标时，具体执行以下步骤：
所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
所述第二终端对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
在本申请实施例中，第二终端接收第一终端与第二终端在视频通话网络质量不佳时发送的在当前帧视频图像中所截取的目标视频图像，并获取上一帧目标视频图像，然后将目标视频图像拼接到上一帧目标视频图像上进行显示。当视频通话网络质量不佳时，通过接收第一终端发送的在当前帧视频图像中截取小尺寸的目标视频图像，减小了视频图像的传输负荷，同样的，第二终端也可以将所截取的小尺寸目标视频图像发送至第一终端进行显示，视频通话双方可以正常进行视频通话。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已，当然不能以此来限定本申请之权利范围，因此依本申请权利要求所作的等同变化，仍属本申请所涵盖的范围。

Claims (20)

1.一种视频图像处理方法，其特征在于，所述方法包括：
第一终端获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
当所述当前视频网络质量小于或者等于预设网络质量阈值时，所述第一终端获取当前帧视频图像；
所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
2.根据权利要求1所述的方法，其特征在于，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像之后，还包括：
所述第一终端获取所述目标视频图像的中心坐标；
所述第一终端将所述目标视频图像传输至所述第二终端，包括：
所述第一终端将所述目标视频图像以及所述中心坐标传输至所述第二终端。
3.根据权利要求2所述的方法，其特征在于，所述第一终端将所述目标视频图像以及所述中心坐标传输至所述第二终端，包括：
所述第一终端将所述目标视频图像以及所述中心坐标进行封装处理；
所述第一终端将封装处理后的所述目标视频图像以及所述中心坐标传输至所述第二终端。
4.根据权利要求1所述的方法，其特征在于，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，包括：
所述第一终端在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
5.根据权利要求1所述的方法，其特征在于，所述第一终端基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，包括：
所述第一终端获取在所述当前帧视频图像上的对焦中心坐标；
所述第一终端采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
6.一种视频图像处理方法，其特征在于，所述方法包括：
第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
所述第二终端获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
所述第二终端将所述目标视频图像拼接至所述上一帧视频图像中。
7.根据权利要求6所述的方法，其特征在于，所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，包括：
第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
8.根据权利要求7所述的方法，其特征在于，所述第二终端将所述目标视频图像拼接至所述上一帧视频图像中，包括：
所述第二终端将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
9.根据权利要求7所述的方法，其特征在于，所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标，包括：
所述第二终端接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
所述第二终端对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
10.一种视频图像处理装置，其特征在于，所述装置包括：
质量获取模块，用于获取所述第一终端与第二终端之间的当前视频网络质量，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块，用于当所述当前视频网络质量小于或者等于预设网络质量阈值时，获取当前帧视频图像；
图像传输模块，用于基于预设的截取规则在所述当前帧视频图像中截取目标视频图像，将所述目标视频图像传输至所述第二终端。
11.根据权利要求10所述的装置，其特征在于，所述装置还包括：
中心获取模块，用于获取所述目标视频图像的中心坐标；
所述图像传输模块，具体用于：
将所述目标视频图像以及所述中心坐标传输至所述第二终端。
12.根据权利要求11所述的装置，其特征在于，所述图像传输模块，具体用于：
将所述目标视频图像以及所述中心坐标进行封装处理；
将封装处理后的所述目标视频图像以及所述中心坐标传输至所述第二终端。
13.根据权利要求10所述的装置，其特征在于，所述图像传输模块，具体用于：
在所述当前帧视频图像中截取人脸图像，将所述人脸图像作为目标视频图像。
14.根据权利要求10所述的装置，其特征在于，所述图像传输模块，具体用于：
获取在所述当前帧视频图像上的对焦中心坐标；
采用预设截取形状在所述当前帧视频图像中截取所述对焦中心坐标在预设范围内的目标视频图像。
15.一种视频图像处理装置，其特征在于，所述装置包括：
图像接收模块，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像，所述第一终端与所述第二终端之间处于视频通话状态；
图像获取模块，用于获取所述第一终端发送的所述当前帧视频图像的上一帧视频图像；
图像拼接模块，用于将所述目标视频图像拼接至所述上一帧视频图像中。
16.根据权利要求15所述的装置，其特征在于，所述图像接收模块，具体用于：
接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标。
17.根据权利要求16所述的装置，其特征在于，所述图像拼接模块，具体用于：
将所述目标视频图像覆盖至所述上一帧视频图像中所述中心坐标所指示的位置。
18.根据权利要求16所述的装置，其特征在于，所述图像接收模块，包括：
图像接收单元，用于接收第一终端发送的在当前视频网络质量小于或者等于预设网络质量阈值时在当前帧视频图像中所截取的目标视频图像以及所述目标视频图像的中心坐标；
图像处理单元，用于对所述目标视频图像以及所述中心坐标进行解封装处理，获取解封装处理后的所述目标视频图像以及所述中心坐标。
19.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～5或6～9任意一项的方法步骤。
20.一种终端，其特征在于，包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行如权利要求1～5或6～9任意一项的方法步骤。
CN201910259690.5A 2019-03-29 2019-04-02 一种视频图像处理方法、装置、存储介质及终端 Active CN109963106B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2019102489072 2019-03-29
CN201910248907 2019-03-29

Publications (2)

Publication Number Publication Date
CN109963106A true CN109963106A (zh) 2019-07-02
CN109963106B CN109963106B (zh) 2020-01-10

Family

ID=67025485

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910259690.5A Active CN109963106B (zh) 2019-03-29 2019-04-02 一种视频图像处理方法、装置、存储介质及终端

Country Status (1)

Country Link
CN (1) CN109963106B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111669499A (zh) * 2020-06-12 2020-09-15 杭州海康机器人技术有限公司 一种视频防抖方法、装置及视频采集设备
CN112165598A (zh) * 2020-09-28 2021-01-01 北京字节跳动网络技术有限公司 数据处理的方法、装置、终端和存储介质
CN113301289A (zh) * 2020-02-21 2021-08-24 深圳市万普拉斯科技有限公司 通信处理方法、装置、电子设备和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010037508A1 (en) * 1997-10-09 2001-11-01 Debby Hindus Variable bandwidth communication systems and methods
US8542265B1 (en) * 2012-10-26 2013-09-24 Google, Inc Video chat encoding pipeline
CN104822086A (zh) * 2015-04-28 2015-08-05 深圳创维－Rgb电子有限公司 信息推送方法、终端及系统
CN104883603A (zh) * 2015-04-29 2015-09-02 小米科技有限责任公司 播放控制方法、系统及终端设备
CN106791570A (zh) * 2016-12-30 2017-05-31 宇龙计算机通信科技(深圳)有限公司 一种视频通话终端及其视频通话优化方法、系统
CN107566776A (zh) * 2017-08-14 2018-01-09 深圳市金立通信设备有限公司 一种图像处理方法、终端及计算机可读存储介质
CN107690055A (zh) * 2016-08-05 2018-02-13 中兴通讯股份有限公司 视频通话的控制方法、装置及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010037508A1 (en) * 1997-10-09 2001-11-01 Debby Hindus Variable bandwidth communication systems and methods
US8542265B1 (en) * 2012-10-26 2013-09-24 Google, Inc Video chat encoding pipeline
CN104822086A (zh) * 2015-04-28 2015-08-05 深圳创维－Rgb电子有限公司 信息推送方法、终端及系统
CN104883603A (zh) * 2015-04-29 2015-09-02 小米科技有限责任公司 播放控制方法、系统及终端设备
CN107690055A (zh) * 2016-08-05 2018-02-13 中兴通讯股份有限公司 视频通话的控制方法、装置及系统
CN106791570A (zh) * 2016-12-30 2017-05-31 宇龙计算机通信科技(深圳)有限公司 一种视频通话终端及其视频通话优化方法、系统
CN107566776A (zh) * 2017-08-14 2018-01-09 深圳市金立通信设备有限公司 一种图像处理方法、终端及计算机可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113301289A (zh) * 2020-02-21 2021-08-24 深圳市万普拉斯科技有限公司 通信处理方法、装置、电子设备和存储介质
CN111669499A (zh) * 2020-06-12 2020-09-15 杭州海康机器人技术有限公司 一种视频防抖方法、装置及视频采集设备
CN112165598A (zh) * 2020-09-28 2021-01-01 北京字节跳动网络技术有限公司 数据处理的方法、装置、终端和存储介质

Also Published As

Publication number Publication date
CN109963106B (zh) 2020-01-10

Similar Documents

Publication Publication Date Title
US20230276430A1 (en) Resource scheduling method and apparatus, communication device and storage medium
US10680839B2 (en) Data transmission using multiple channels with distinct data transmission protocols
CN109246671A (zh) 数据传输方法、装置及系统
US11190967B2 (en) Downlink data packet configuration method and device
CN102984495A (zh) 一种视频图像的处理方法及装置
US11979450B2 (en) Communication method and apparatus
CN109963106A (zh) 一种视频图像处理方法、装置、存储介质及终端
EP2963990B1 (en) Method and apparatus for connecting to packet data networks in wireless communication system
CN112423076B (zh) 一种音频投屏同步控制方法、设备及计算机可读存储介质
US9763126B2 (en) Electronic device and method for processing packet in internet protocol-based network
CN112433690B (zh) 数据处理方法、终端及计算机可读存储介质
US20210320810A1 (en) Volumetric conversational services using network edge
CN111917813A (zh) 通信方法、装置、设备、系统及存储介质
CN113438747A (zh) 处理方法、处理设备及存储介质
CN105704106B (zh) 一种可视化ivr实现方法及移动终端
US20230344740A1 (en) Sla performance prediction method and related apparatus, and device
US20140161199A1 (en) Method and apparatus for processing video image
CN114126032A (zh) 信息同步方法、智能终端及存储介质
CN112965679A (zh) 一种投屏方法、移动终端以及计算机存储介质
CN114362891A (zh) 一种通信方法和装置
KR20220098185A (ko) 데이터 전송 방법, 장치 및 통신 기기
WO2024198414A1 (zh) 通话处理方法和装置
RU2799998C1 (ru) Способ и устройство для передачи данных и устройство связи
US20230309191A1 (en) Emergency call method and apparatus, storage medium, and terminal
US20220304008A1 (en) Data transmission method and apparatus and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant