CN102377977B - 一种视频通话过程中对视频的处理方法、装置及系统 - Google Patents

Abstract

本发明公开了一种视频通话过程中对视频的处理方法、装置及系统，主要技术方案包括：接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的电路交换CS通道接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；根据接收的对应所述原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。采用该技术方案，能够提高视频通话过程中视频图像的显示质量。

Description

一种视频通话过程中对视频的处理方法、装置及系统

技术领域

本发明涉及通信技术领域，尤其涉及一种视频通话过程中对视频的处理方法、装置及系统。

背景技术

视频通话业务是基于3G(3rd-generation，第三代移动通信技术)网络的一项重要业务，与普通通话业务相比，通话双方可以通过其通信终端看到通话对端的相应场景，给用户带来了丰富的通话体验。随着视频通话业务的推广以及通信终端硬件性能的提升，用户对于视频通话过程中图像的质量要求也将越来越高，因此，对于视频通话业务的研究终端在于提高视频通话的图像质量。

目前，3G网络中实现视频通话的视频通信协议是3GPP(第三代合作伙伴计划)推荐的3G-324M视频通话协议，基于该3G-324M视频通话协议建立视频通话连接时，首先需要进行通话双方通信能力的交换，例如，通信终端的屏幕大小、屏幕分辨率、音视频的编解码能力等的交换。在通信双方完成通信能力的交换后，进而根据获取的通话对端的通信能力，确定对视频图像要进行的预处理过程，使得传送到通信对端的视频图像符合通信对端的通信能力，从而使得通信对端能够正常接收并显示。在完成通信双方的通信能力交换后，在通信双方之间形成一个64kbit/s的音频和视频共享的双向CS(CircuitSwitchedDomain，电路交换)通道，通过建立的该通道可以进行实时的视频通话，即通过该通道传输双方的音视频数据。图1为通过3G-324M协议进行视频通话的示意图，如图1所示，通信终端A首先对通过摄像头采集的原始视频图像进行预处理(例如图像压缩)，并将该预处理后的视频图像和音频打包形成一个帧，通过建立的CS通道传送到通信终端B，通信终端B通过解析接收的数据帧以获得音频和视频图像，进而在通信终端B上进行语音播放和图像呈现。

上述过程实现的视频通话主要基于3G-324M协议建立的电路交换域进行，能够保证视频通话的实时性，但由于3G-324M协议建立起的视频通话带宽有限，一般只有64kbits/s，因此，通过CS通道传输的视频图像一般为原始视频图像的缩略图，该缩略图的分辨率只能达到176*144，因此，基于该带宽有限的CS通道，通信双方很难进行高质量的视频通话，即无法获得通信对端的高质量视频图像。

发明内容

有鉴于此，本发明实施例提供一种视频通话过程中对视频的处理方法、装置及系统，采用该技术方案，能够提高视频通话过程中视频图像的显示质量。

本发明实施例通过如下技术方案实现：

根据本发明实施例的一个方面，提供了一种视频通话过程中对视频的处理方法，包括：

接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的电路交换CS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的缩略视频图像；以及

通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；

接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

根据本发明实施例的一个方面，还提供了一种视频通话过程中对视频的处理装置，包括：

第一接收单元，用于通过与发送视频图像的通信终端之间建立的电路交换CS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的缩略视频图像；

第二接收单元，用于通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应所述原始视频图像的视频图像块；

图像处理单元，用于基于所述第二接收单元接收的对应所述原始视频图像的视频图像块分别替换所述第一接收单元接收的缩略视频图像中相应的缩略视频图像块。

根据本发明实施例的一个方面，还提供了一种视频通话过程中对视频的处理方法，包括：

发送视频图像的通信终端将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块；以及

将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；

发送视频图像的通信终端将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道，发送至所述接收视频图像的通信终端。

根据本发明实施例的一个方面，还提供了一种视频通话过程中对视频的处理装置，包括：

图像处理单元，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块；以及将所述原始视频图像处理为缩略视频图像；

第一发送单元，用于将所述图像处理单元划分得到的视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；

第二发送单元，用于将所述图像处理单元处理得到的原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道，发送至所述接收视频图像的通信终端。

根据本发明实施例的一个方面，还提供了一种视频通话过程中对视频的处理方法，包括：

发送视频图像的通信终端将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块，以及将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；以及将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端；

接收视频图像的通信终端通过所述CS通道，接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；，并基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

根据本发明实施例的一个方面，还提供了一种视频通话过程中对视频的处理系统，包括发送视频图像的通信终端以及接收视频图像的通信终端；其中：

所述发送视频图像的通信终端，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块，以及将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；以及将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端；

所述接收视频图像的通信终端，用于通过所述CS通道，接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；并基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

通过本发明实施例提供的上述至少一个技术方案，接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的CS通道，接收发送视频图像的通信终端发送的原始视频图像的缩略视频图像，以及通过与发送视频图像的通信终端之间建立的PS通道，接收发送视频图像的通信终端发送的对应原始视频图像的视频图像块，并基于接收的对应原始视频图像的视频图像块分别替换缩略视频图像中相应的缩略视频图像块。采用该技术方案，接收视频图像的通信终端能够通过PS通道接收原始视频图像的视频图像块，并对缩略视频图像块中的相应缩略视频图像块进行替换，经过该替换处理过程的视频图像相对于现有技术，提高了在接收视频图像的通信终端显示的视频图像的质量。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为现有技术提供的通过3G-324M协议进行视频通话的示意图；

图2为本发明实施例一提供的视频通话过程中对视频图像处理的流程图；

图3为本发明实施例一提供的发送视频图像块的流程图；

图4为本发明实施例二提供的视频通话过程中对视频图像处理的流程图；

图5为本发明实施例二提供的对视频图像进行替换处理的流程图；

图6为本发明实施例二提供的对视频图像进行处理的示意图；

图7为本发明实施例三提供的视频通话过程中对视频图像处理的流程图；

图8为本发明实施例四提供的视频通话过程中对视频图像处理的装置示意图；

图9为本发明实施例五提供的视频通话过程中对视频图像处理的装置示意图；

图10为本发明实施例六提供的视频通话过程中对视频图像处理的装置示意图。

具体实施方式

为了给出提高视频通话过程中视频图像的显示质量的实现方案，本发明实施例提供了一种视频通话过程中对视频的处理方法、装置及系统，以下结合说明书附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。并且在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

本发明实施例针对现有技术用于传输视频图像的CS通道的带宽有限的问题，提出在视频通话双方之间建立PS(Packet SwitchedDomain，分组交换)通道，通过该PS通道传输原始视频图像的视频图像块，并在接收视频图像的通信终端中，利用该PS通道传输的视频图像块替换利用CS通道传输的原始视频图像的缩略视频图像中的相应图像块，从而能够提供视频图像在通信终端中的显示质量。

为了更好地理解本发明实施例，以下结合具体实施例对本发明实施例的详细技术细节进行说明。

实施例一

本发明实施例一提供了一种视频通话过程中对视频的处理方法，该方法主要提供了视频通话双方中发送视频图像的通信终端对视频图像的处理过程，具体如图2所示，该方法主要包括如下步骤：

步骤201、发送视频图像的通信终端将原始视频图像划分为分别对应原始视频图像不同位置区域的设定数量的视频图像块；

步骤202、将视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端；

步骤203、将原始视频图像的缩略视频图像通过与接收视频图像的通信终端之间建立的CS通道发送至接收视频图像的通信终端。

图2所示流程的步骤201中，原始视频图像为该发送视频图像的通信终端根据自身显示要求以及接收视频图像的通信终端的显示要求对通过摄像头采集的视频图像进行显示像素或/和显示尺寸调整后的视频图像，即在对该原始视频图像进行划分处理之前，需要根据自身以及接收视频图像的通信终端的显示要求对该图像进行调整，并对调整后的原始视频图像进行划分处理，其中，对原始视频图像的调整包括：

对显示像素进行调整，以使调整后的视频图像能够符合发送视频图像的通信终端以及接收视频图像的通信终端分别对显示像素的要求；或/和，

对显示尺寸进行调整，以使调整后的视频图像能够符合发送视频图像的通信终端以及接收视频图像的通信终端的屏幕分别对显示尺寸的要求，其中，该显示尺寸也支持在发送视频图像的通信终端以及接收视频图像的通信终端的屏幕上的全屏显示和窗口显示，即可以支持通信终端对图像的大小调整。

其中，接收视频图像的通信终端的显示要求信息在通信能力交换过程中获得。

图2所示流程的步骤202中，通过PS通道发送的视频图像块用于替换步骤203中通过CS通道发送的缩略视频图像中相应位置的缩略视频图像块。

图2所示流程的步骤203中，发送视频图像的通信终端在将原始视频图像的缩略视频图像通过CS通道发送时，还进一步发送与该原始视频图像对应的音频数据，具体地，发送视频图像的通信终端在通过终端中的图像采集模块(如摄像头)采集到当前帧视频图像，以及通过音频采集模块(如话筒)采集到与当前帧视频图像对应的音频数据后，通过预处理后，将音频数据和视频图像数据进行压缩编码通过与视频通信对端建立的CS通道发送。其中，预处理过程为现有视频通信中对视频图像数据以及音频图像数据的处理过程，此处不再赘述。

图2所示流程的步骤202和步骤203并无严格的执行顺序，以上描述仅为便于描述。实际应用中，可以先执行步骤203，也可以先执行步骤202，也可以同时通过两个通道发送数据。

该实施例一还提供了图2所示的流程的步骤201的具体实现过程，即发送视频图像的通信终端将原始视频图像划分为分别对应原始视频图像不同位置区域的设定数量的视频图像块，具体包括：

发送视频图像的通信终端根据在通信能力交换过程中获取的接收视频图像的通信终端的通信能力信息，将原始视频图像划分为分别对应原始视频图像不同位置区域的设定数量的视频图像块。

即根据接收视频图像的通信终端的通信能力信息确定划分策略，一般情况下，视频通话双方在通信能力交换过程中获取的通信对端的通信能力包括通信终端的屏幕大小、屏幕分辨率、音视频的编解码能力等，本发明实施例一中，对原始视频图像的划分基于接收视频图像的通信终端的通信能力，即保证划分的每个图像块能够在接收视频图像的通信终端中正常解码以及显示，并且替换视频图像的缩略视频图像后的图像也能正常显示。例如，若接收视频图像的通信终端的屏幕为HVGA(Half-size VGA)屏幕，分辨率是480*320，则可以确定划分策略为将原始视频图像划分为长宽各自5等分或者10等分；进一步，该划分策略的划分可以进一步参考接收视频图像的通信终端所在网络的上行速率，可以设定发送的视频图像块数据包的大小上限，例如50Kbit，并结合能力交换中约定的编解码的方式，将划分的视频图像数据块的数量逐次增多，直到块图数据量小于设定的上限值。具体划分方式可以结合网络具体情况灵活设置，此处不再一一列举。

应当理解，以上根据接收视频图像的通信终端的通信能力确定划分的视频图像块的数量仅为实施本发明的优选实施例，实际应用中，也可以将划分的视频图像块确定为固定值，基于该固定值划分的视频图像块能够满足通信能力较差的通信终端的显示要求。

通过上述过程，可以将原本完整的整帧视频图像划分成矩阵，矩阵中每个视频图像块图可以分别以1到n的编号(称为该视频图像块的块标识)，并且，可以为对于同一原始视频图像的各个视频图像块分配统一的图像标识，该图像标识与该原始视频图像的缩略图对应的图像标识一致，用于在接收视频图像的通信终端中进行图像替换。然后将矩阵中每个视频图像块的图像数据进行缩放以及编码压缩后通过PS通道传送。

该实施例一还提供了图2所示的流程的步骤202的具体实现过程，即发送视频图像的通信终端将视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端，如图3所示，具体包括如下步骤：

步骤301、发送视频图像的通信终端根据每个视频图像块的中心点与原始视频图像的中心点的距离，确定该每个视频图像块的发送顺序；

步骤302、根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端。

具体地，可以采用中心图像优选传输的原则，即上述步骤301具体通过如下方式实现：

发送视频图像的通信终端根据每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定每个视频图像块按照与所述原始视频图像的中心点的距离由小到大的顺序发送，即根据每个视频图像块的中心点与原始视频图像的中心点的距离由小到大的顺序，确定划分得到的每个视频图像块的发送顺序。

本发明实施例一提供的上述技术方案主要应用于视频通话过程，具体地，通信终端A在请求和通信终端B进行视频通话的过程中，除依照H324M协议进行包括屏幕大小和分辨率、音视频的编解码能力等各项的能力交换和CS通道的建立外，通信终端A还和通信终端B协商是否要进行PS通道的建立以提高带宽传输更高质量和更大尺寸的视频，该协商过程可以由通信终端A发起，也可以由通信终端B发起，还可以在能力交换过程中发起。在通信终端A和通信终端B确定需要进行PS通道的建立后，通信终端A和通信终端B在3G网络建立起PS域上数据连接，以便传输和接收通过3G网络属于该通话的数据。

本发明优选实施例中，在视频通话双方之间建立起PS通道时，可以为当前视频通话生成会话标识，该会话标识用于避免与新产生的视频通话产生数据会话归属混乱的问题，即可以根据会话标识确定当前视频图像数据或音频数据为与哪个用户之间产生的数据。

实施例二

本发明实施例二提供了一种视频通话过程中对视频的处理方法，该方法主要提供了视频通话双方中接收视频图像的通信终端对视频图像的处理过程，具体如图4所示，该方法主要包括如下步骤：

步骤401、接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的CS通道接收发送视频图像的通信终端发送的原始视频图像的缩略视频图像；

步骤402、根据通过与发送视频图像的通信终端之间建立的PS通道接收的对应该原始视频图像的视频图像块，分别替换接收的缩略视频图像中相应的缩略视频图像块；

上述步骤401以及步骤402独立地构成了该实施例中对视频图像的处理过程。在此基础上，可以进一步通过步骤403，显示该经过替换处理的缩略视频图像。

上述步骤401中，接收视频图像的通信终端在通过CS通道接收原始视频图像的缩略视频图像时，还进一步通过该CS通道接收随该缩略视频图像一起发送的与原始视频图像对应的音频数据。该接收视频图像的通信终端在接收通过CS通道发送的音频数据后，可以对该音频数据进行解码等处理后，实时播放以保证通话的实时性，也可以先将该音频数据缓存，在通过步骤403显示经过替换处理的图像时，随图像的显示一起播放该音频数据，以保证视频和音频的同步性。

该实施例二还提供了接收视频图像的通信终端接收对应原始视频图像的视频图像块的具体实现过程，该过程主要包括：

接收发送视频图像的通信终端按照设定顺序发送的对应原始视频图像不同位置区域的视频图像块。

具体地，发送视频图像的通信终端按照设定顺序发送的对应原始视频图像的视频图像块的过程已在上述实施例一中详细描述，此处不再赘述。

该实施例二还提供了图4所示的流程的步骤402的具体实现过程，即接收视频图像的通信终端根据接收的对应原始视频图像的视频图像块，分别替换缩略视频图像中相应的缩略视频图像块的过程，该过程具体包括：

接收视频图像的通信终端根据接收的所述视频图像块在所述原始视频图像中对应的位置区域，利用该视频图像块替换该缩略视频图像中相应位置区域的缩略视频图像块。

其中，接收视频图像的通信终端根据接收的所述视频图像块在所述原始视频图像中对应的位置区域，利用该视频图像块替换所述缩略视频图像中相应位置区域的缩略视频图像块，如图5所示，主要包括如下步骤：

步骤501、接收视频图像的通信终端根据接收的视频图像块在所对应原始视频图像中的块标识、以及块标识与原始视频图像中的位置区域的对应关系，确定接收的视频图像块在所对应原始视频图像中的位置区域；

步骤502、确定缩略视频图像中与确定出的位置区域相应的位置区域的缩略视频图像块；

步骤503、利用接收的视频图像块替换确定出的缩略视频图像块。

为便于理解图5所述的替换过程，以下结合具体实例说明：

图6为根据本发明实施例提供的技术方案对视频图像进行处理的示意图，如图6所示，通信终端A将原始视频图像划分为n个视频图像块，并依次为每个视频图像块分别块标识(1、2......n)，按照块标识由小到大的顺寻依次通过与通信终端B之间建立的PS通道发送，该原始视频图像对应的缩略视频图像则通过与通信终端B之间建立的CS通道发送；

当缩略视频图像以及视频图像块分别通过CS通道、PS通道到达通信终端B之后，根据视频图像块对应的块编号，以及各个编号的视频图像块在原始视频图像中对应的位置区域，将对应不同块编号的视频图像块分别替换视频缩略图中相应位置区域的缩略视频图像块。例如，图6中块编号为1的视频图像块对应原始视频图像第一行第一列的位置区域，则利用该块编号为1的视频图像块替换接收的缩略视频图像块中相应位置区域的缩略视频图像块，即缩略视频图像左上角的缩略视频图像块。

该实施例二还提供了图4所示的流程的步骤402的具体实现过程，即接收视频图像的通信终端根据接收的对应原始视频图像的视频图像块，分别替换缩略视频图像中相应的缩略视频图像块的过程，该过程具体包括：

接收视频图像的通信终端根据在设定时间内接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

图4所示流程的步骤402中，根据通过与发送视频图像的通信终端之间建立的PS通道接收的对应该原始视频图像的视频图像块，分别替换接收的缩略视频图像中相应的缩略视频图像块，具体包括：

接收视频图像的通信终端根据自身的显示要求，对缩略视频图像的显示像素或/和显示尺寸进行调整，以使调整后的图像能够在接收视频图像的通信终端进行正常显示；

根据对缩略视频图像进行的调整，对对应原始视频图像的视频图像块进行相应的调整，即将视频图像块的的显示大小调整为与缩略视频图像中相应的缩略视频图像块的大小一致；

接收视频图像的通信终端基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的缩略视频图像中相应的缩略视频图像块。

其中，接收视频图像的通信终端的显示要求信息在通信能力交换过程中获得。

该实施例中，设定时间即规定的视频图像的显示时限，为了保证视频图像和音频的同步，对每帧视频图像在接收终端的显示时间做了限定，若该时限到达，则直接显示该视频图像，超过该时限到达的视频图像块可以丢弃。具体地，如果接收视频图像的通信终端在从CS通道收到帧数据后，解出其中的音频数据和缩略视频图像数据，音频可以直接播放，而缩略视频图像数据则首先进行缓存，在设定时间内，将从PS通道收到的矩阵块(即视频图像块)根据其图像标识和块编号等进行图像的替换处理，当设定时间到达，则进行图像呈现。

根据本发明实施例二提供的技术方案，当通信终端启动转录模式对视频通话进行录制时，在上述设定时限的基础上还增加转录缓存时限，在转录缓存时限内更多的视频图像块数据将被接收并替换缩略视频图像，这将使保存下来的图像质量更高。

实施例三

本发明实施例三提供了一种视频通话过程中对视频的处理方法，该方法主要提供了视频通话双方对视频图像的处理过程，具体如图7所示，该方法主要包括如下步骤：

步骤701、发送视频图像的通信终端将原始视频图像划分为分别对应原始视频图像不同位置区域的设定数量的视频图像块；

步骤702、发送视频图像的通信终端将划分得到的视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至所述接收视频图像的通信终端；

步骤703、发送视频图像的通信终端将原始视频图像的缩略视频图像通过与接收视频图像的通信终端之间建立的CS通道发送至所述接收视频图像的通信终端；

上述步骤702和步骤703之前并无严格的执行顺序，以上限定仅为便于描述方案。

步骤704、接收视频图像的通信终端通过CS通道接收发送视频图像的通信终端发送的原始视频图像的缩略视频图像；

步骤705、根据通过PS通道接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

步骤706、显示经过替换处理的缩略视频图像。

该实施例三中，上述步骤701～步骤703的处理过程对应上述实施例一提供的视频通话过程中对视频图像的处理方法，该处理过程的详细实现过程已在上述实施例一中详细描述，此处不再赘述。

该实施例三中，上述步骤704～步骤706的处理过程对应上述实施例二提供的视频通话过程中对视频的处理方法，该处理过程的详细实现过程已在上述实施例二中详细描述，此处不再赘述。

实施例四

与实施例一提供的视频通话过程中对视频的处理方法对应，本发明实施例四提供了一种视频通话过程中对视频的处理装置，如图8所示，该处理装置包括：

图像处理单元801、第一发送单元802以及第二发送单元803；

其中：

图像处理单元801，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块；以及将所述原始视频图像处理为缩略视频图像；

第一发送单元802，用于将图像处理单元801划分得到的视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；

第二发送单元803，用于将图像处理单元801处理得到的原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端。

其中，第二发送单元803通过PS通道发送的视频图像块用于替换第一发送单元802通过CS通道发送的缩略视频图像中相应位置的缩略视频图像块。

本发明优选实施例中，图8所示的处理装置包括的图像处理单元801，具体用于：

根据在通信能力交换过程中获得的所述接收视频图像的通信终端的通信能力信息，将所述原始视频图像划分为分别对应所述原始视频图像不同位置区域的设定数量的视频图像块。

本发明优选实施例中，图8所示的处理装置包括的第一发送单元802，具体用于：

根据划分得到的每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序；

根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端。

本发明优选实施例中，图8所示的处理装置包括的第一发送单元802，具体用于：

根据每个视频图像块的中心点与所述原始视频图像的中心点的距离由小到大的顺序，确定划分得到的每个视频图像块的发送顺序。

本发明优选实施例中，图8所示的处理装置包括的第二发送单元803，具体用于：

将与所述原始视频图像对应的音频数据随所述原始视频图像的缩略视频图像一起通过所述CS通道发送。

该实施例四提供的视频通话过程中对视频的处理装置可以集成于进行视频通话的通信终端。

应当理解，以上视频通话过程中对视频的处理装置包括的单元仅为根据该处理装置实现的功能进行的逻辑划分，实际应用中，可以进行上述单元的叠加或拆分。并且该实施例四提供的处理装置所实现的功能与上述实施例一提供的视频通话过程中对视频的处理方法流程一一对应，对于该处理装置所实现的更为详细的处理流程，在上述方法实施例一中已做详细描述，此处不再详细描述。

实施例五

与实施例二提供的视频通话过程中对视频的处理方法对应，本发明实施例五提供了一种视频通话过程中对视频的处理装置，如图9所示，该处理装置包括：

第一接收单元901、第二接收单元902、图像处理单元903。该装置还可以优选地包括图像显示单元904；

其中：

第一接收单元901，用于通过与发送视频图像的通信终端之间建立的电路交换CS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的缩略视频图像；

第二接收单元902，用于通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应所述原始视频图像的视频图像块；

图像处理单元903，用于基于第二接收单元902接收的对应所述原始视频图像的视频图像块分别替换第一接收单元901接收的缩略视频图像中相应的缩略视频图像块；

图像显示单元904，用于显示经过图像处理单元903处理后的图像。

本发明优选实施例中，图9所示的处理装置包括的图像处理单元903，具体用于：

根据第二接收单元902在设定时间内接收的对应所述原始视频图像的视频图像块分别替换第一接收单元901接收的缩略视频图像中相应的缩略视频图像块。

本发明优选实施例中，图9所示的处理装置包括的图像处理单元903，具体用于：

根据第二接收单元902接收的每个视频图像块在所述原始视频图像中对应的位置区域，利用该视频图像块替换第一接收单元901接收的缩略视频图像中相应位置区域的缩略视频图像块。

本发明优选实施例中，图9所示的处理装置包括的图像处理单元903，具体用于：

针对所述第二接收单元接收的每个视频图像块执行：根据第二接收单元接收的视频图像块的块标识、以及块标识与在所述原始视频图像中的位置区域信息的对应关系，确定该第二接收单元接收的所述视频图像块在所对应原始视频图像中的位置区域；

确定所述第一接收单元接收的缩略视频图像中与确定出的所述位置区域对于的位置区域上的缩略视频图像块，并利用该第二接收单元接收的所述视频图像块替换确定出的所述缩略视频图像块。

本发明优选实施例中，图9所示的处理装置包括的第二接收单元902，具体用于：

接收发送视频图像的通信终端按照设定顺序发送的对应所述原始视频图像不同位置区域上的视频图像块。

本发明优选实施例中，图9所示的处理装置包括的图像处理单元903，具体用于：

根据自身的显示要求，对所述缩略视频图像的显示像素或/和显示尺寸进行调整；

根据对所述缩略视频图像进行的调整，对所述对应原始视频图像的视频图像块进行相应的调整；

基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的所述缩略视频图像中相应的缩略视频图像块。

本发明优选实施例中，图9所示的处理装置包括的第一接收单元901，还用于：

通过所述CS通道，接收随所述原始视频图像的缩略视频图像一起发送的与所述原始视频图像对应的音频数据。

该实施例五提供的视频通话过程中对视频的处理装置可以集成于进行视频通话的通信终端。

应当理解，以上视频通话过程中对视频的处理装置包括的单元仅为根据该处理装置实现的功能进行的逻辑划分，实际应用中，可以进行上述单元的叠加或拆分。并且该实施例五提供的处理装置所实现的功能与上述实施例二提供的视频通话过程中对视频的处理方法流程一一对应，对于该处理装置所实现的更为详细的处理流程，在上述方法实施例二中已做详细描述，此处不再详细描述。

实施例六

与实施例三提供的视频通话过程中对视频的处理方法对应，本发明实施例六提供了一种视频通话过程中对视频的处理系统，如图10所示，该处理系统包括：

发送视频图像的通信终端1001以及接收视频图像的通信终端1002；

其中：

发送视频图像的通信终端1001，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域的设定数量的视频图像块，将视频图像块按照设定顺序通过与接收视频图像的通信终端1002之间建立的分组交换PS通道发送至所述接收视频图像的通信终端；以及将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端；

接收视频图像的通信终端1002，用于通过所述CS通道接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过所述PS通道接收对应所述原始视频图像的视频图像块；并根据接收的对应所述原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

该实施例六提供的视频通话过程中对视频的处理装置包括的发送视频图像的通信终端1001对应上述实施例四中提供的视频通话过程中对视频的处理装置，该装置实现的具体功能已在上述实施例四中详细描述，此处不再赘述。

该实施例六提供的视频通话过程中对视频的处理装置包括的接收视频图像的通信终端1002对应上述实施例五中提供的视频通话过程中对视频的处理装置，该装置实现的具体功能已在上述实施例五中详细描述，此处不再赘述。

该实施例六提供的视频通话过程中对视频的处理装置可以集成于进行视频通话的通信终端。

应当理解，以上视频通话过程中对视频的处理装置包括的单元仅为根据该处理装置实现的功能进行的逻辑划分，实际应用中，可以进行上述单元的叠加或拆分。并且该实施例六提供的处理装置所实现的功能与上述实施例三提供的视频通话过程中对视频的处理方法流程一一对应，对于该处理装置所实现的更为详细的处理流程，在上述方法实施例三中已做详细描述，此处不再详细描述。

通过本发明实施例提供的上述至少一个技术方案，接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的CS通道接收发送视频图像的通信终端发送的原始视频图像的缩略视频图像，以及通过与发送视频图像的通信终端之间建立的PS通道，接收发送视频图像的通信终端发送的对应原始视频图像的视频图像块，并基于接收的对应原始视频图像的视频图像块，分别替换缩略视频图像中相应的缩略视频图像块，采用该技术方案，接收视频图像的通信终端能够通过PS通道接收原始视频图像的视频图像块，并对缩略视频图像块中的相应缩略视频图像块进行替换，相对于现有技术，提高了在接收视频图像的通信终端显示的视频图像的质量。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (25)

1.一种视频通话过程中对视频的处理方法，其特征在于，包括：

接收视频图像的通信终端通过与发送视频图像的通信终端之间建立的电路交换CS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的缩略视频图像；以及

通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；

接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

其中，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块，具体包括：

接收视频图像的通信终端根据自身的显示要求，对所述缩略视频图像的显示像素或/和显示尺寸进行调整；

根据对所述缩略视频图像进行的调整，对所述对应原始视频图像的视频图像块进行相应的调整；

接收视频图像的通信终端基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的所述缩略视频图像中相应的缩略视频图像块。

2.如权利要求1所述的方法，其特征在于，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块，具体包括：

接收视频图像的通信终端根据在设定时间内接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块。

3.如权利要求1或2所述的方法，其特征在于，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块替换所述缩略视频图像中相应的缩略视频图像块，具体包括：

接收视频图像的通信终端根据接收的每个视频图像块在原始视频图像中对应的位置区域，利用该视频图像块替换所述缩略视频图像中相应位置区域的缩略视频图像块。

4.如权利要求3所述的方法，其特征在于，接收视频图像的通信终端基于接收的每个视频图像块在原始视频图像中对应的位置区域，利用该视频图像块替换所述缩略视频图像中相应位置区域的缩略视频图像块，具体包括：

接收视频图像的通信终端针对接收的每个视频图像块执行：

根据接收的该视频图像块的块标识、以及块标识与在所述原始视频图像中的位置区域信息的对应关系，确定接收的该视频图像块在原始视频图像中的位置区域；

确定所述缩略视频图像中与确定出的所述位置区域对应的位置区域上的缩略视频图像块，并利用接收的该视频图像块替换确定出的缩略视频图像块。

5.如权利要求1所述的方法，其特征在于，接收视频图像的通信终端接收对应所述原始视频图像的视频图像块，具体包括：

接收发送视频图像的通信终端按照设定顺序发送的对应所述原始视频图像不同位置区域上的视频图像块。

6.如权利要求1所述的方法，其特征在于，还包括：

显示经过替换处理后的图像。

7.如权利要求1所述的方法，其特征在于，还包括：

接收视频图像的通信终端通过所述CS通道，接收随所述原始视频图像的缩略视频图像一起发送的与所述原始视频图像对应的音频数据。

8.一种视频通话过程中对视频的处理装置，其特征在于，包括：

第一接收单元，用于通过与发送视频图像的通信终端之间建立的电路交换CS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的缩略视频图像；

第二接收单元，用于通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应所述原始视频图像的视频图像块；

图像处理单元，用于基于所述第二接收单元接收的对应所述原始视频图像的视频图像块分别替换所述第一接收单元接收的缩略视频图像中相应的缩略视频图像块；其中，

所述图像处理单元，具体用于：

根据自身的显示要求，对所述缩略视频图像的显示像素或/和显示尺寸进行调整；

根据对所述缩略视频图像进行的调整，对所述对应原始视频图像的视频图像块进行相应的调整；

基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的所述缩略视频图像中相应的缩略视频图像块。

9.如权利要求8所述的装置，其特征在于，所述图像处理单元，具体用于：

根据所述第二接收单元在设定时间内接收的对应所述原始视频图像的视频图像块分别替换所述第一接收单元接收的缩略视频图像中相应的缩略视频图像块。

10.如权利要求8或9所述的装置，其特征在于，所述图像处理单元，具体用于：

根据所述第二接收单元接收的每个视频图像块在所述原始视频图像中对应的位置区域，利用该视频图像块替换所述第一接收单元接收的缩略视频图像中相应位置区域的缩略视频图像块。

11.如权利要求10所述的装置，其特征在于，所述图像处理单元，具体用于：

针对所述第二接收单元接收的每个视频图像块执行：根据接收的该视频图像块的块标识、以及块标识与在所述原始视频图像中的位置区域信息的对应关系，确定该视频图像块在原始视频图像中的位置区域；确定所述第一接收单元接收的缩略视频图像中与确定出的所述位置区域对应的位置区域上的缩略视频图像块，并利用该视频图像块替换确定出的所述缩略视频图像块。

12.如权利要求8所述的装置，其特征在于，所述第二接收单元，具体用于：

接收所述发送视频图像的通信终端按照设定顺序发送的对应所述原始视频图像不同位置区域上的视频图像块。

13.如权利要求8所述的装置，其特征在于，还包括：

图像显示单元，用于显示经过所述图像处理单元处理后的图像。

14.如权利要求8所述的装置，其特征在于，所述第一接收单元，还用于：

通过所述CS通道，接收随所述原始视频图像的缩略视频图像一起发送的与所述原始视频图像对应的音频数据。

15.一种视频通话过程中对视频的处理方法，其特征在于，包括：

发送视频图像的通信终端将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块；以及

将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；

发送视频图像的通信终端将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道，发送至所述接收视频图像的通信终端；

其中，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

其中，发送视频图像的通信终端将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至所述接收视频图像的通信终端，包括：

发送视频图像的通信终端根据划分得到的每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序；

根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端。

16.如权利要求15所述的方法，其特征在于，发送视频图像的通信终端将原始视频图像划分为分别对应所述原始视频图像不同位置区域的视频图像块，具体包括：

发送视频图像的通信终端根据在通信能力交换过程中获得的所述接收视频图像的通信终端的通信能力信息，将所述原始视频图像划分为分别对应所述原始视频图像不同位置区域的设定数量的视频图像块。

17.如权利要求15所述的方法，其特征在于，发送视频图像的通信终端根据每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序，具体包括：

发送视频图像的通信终端根据每个视频图像块的中心点与所述原始视频图像的中心点的距离由小到大的顺序，确定划分得到的每个视频图像块的发送顺序。

18.如权利要求15所述的方法，其特征在于，所述原始视频图像为所述发送视频图像的通信终端根据自身显示要求以及接收视频图像的通信终端的显示要求对通过摄像头采集的视频图像进行显示像素或/和显示尺寸调整后的视频图像。

19.如权利要求15所述的方法，其特征在于，还包括：

发送视频图像的通信终端将与所述原始视频图像对应的音频数据随所述原始视频图像的缩略视频图像一起通过所述CS通道发送。

20.一种视频通话过程中对视频的处理装置，其特征在于，包括：

图像处理单元，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块；以及将所述原始视频图像处理为缩略视频图像；

第一发送单元，用于将所述图像处理单元划分得到的视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；

第二发送单元，用于将所述图像处理单元处理得到的原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道，发送至所述接收视频图像的通信终端；

其中，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

其中，所述第一发送单元，具体用于：

根据划分得到的每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序；

根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端。

21.如权利要求20所述的装置，其特征在于，所述图像处理单元，具体用于：

根据在通信能力交换过程中获得的所述接收视频图像的通信终端的通信能力信息，将所述原始视频图像划分为分别对应所述原始视频图像不同位置区域的设定数量的视频图像块。

22.如权利要求20所述的装置，其特征在于，所述第一发送单元，具体用于：

根据每个视频图像块的中心点与所述原始视频图像的中心点的距离由小到大的顺序，确定划分得到的每个视频图像块的发送顺序。

23.如权利要求20所述的装置，其特征在于，所述第二发送单元，还用于：

将与所述原始视频图像对应的音频数据随所述原始视频图像的缩略视频图像一起通过所述CS通道发送。

24.一种视频通话过程中对视频的处理方法，其特征在于，包括：

发送视频图像的通信终端将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块，以及将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；以及将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端；

其中，发送视频图像的通信终端将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至所述接收视频图像的通信终端，包括：发送视频图像的通信终端根据划分得到的每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序；根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端；

接收视频图像的通信终端通过所述CS通道，接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；并基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

其中，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块，具体包括：接收视频图像的通信终端根据自身的显示要求，对所述缩略视频图像的显示像素或/和显示尺寸进行调整；根据对所述缩略视频图像进行的调整，对所述对应原始视频图像的视频图像块进行相应的调整；接收视频图像的通信终端基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的所述缩略视频图像中相应的缩略视频图像块。

25.一种视频通话过程中对视频的处理系统，其特征在于，包括发送视频图像的通信终端以及接收视频图像的通信终端；其中：

所述发送视频图像的通信终端，用于将原始视频图像划分为分别对应所述原始视频图像不同位置区域上的视频图像块，以及将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的分组交换PS通道，发送至所述接收视频图像的通信终端；以及将所述原始视频图像的缩略视频图像通过与所述接收视频图像的通信终端之间建立的电路交换CS通道发送至所述接收视频图像的通信终端；

其中，发送视频图像的通信终端将所述视频图像块按照设定顺序通过与接收视频图像的通信终端之间建立的PS通道发送至所述接收视频图像的通信终端，具体用于：发送视频图像的通信终端根据划分得到的每个视频图像块的中心点与所述原始视频图像的中心点的距离，确定所述每个视频图像块的发送顺序；根据确定出的发送顺序将所述视频图像块通过与接收视频图像的通信终端之间建立的PS通道发送至接收视频图像的通信终端；

所述接收视频图像的通信终端，用于通过所述CS通道，接收所述发送视频图像的通信终端发送的原始视频图像的缩略视频图像；以及通过与发送视频图像的通信终端之间建立的分组交换PS通道，接收所述发送视频图像的通信终端发送的对应原始视频图像的视频图像块；并基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块；

其中，接收视频图像的通信终端基于接收的对应原始视频图像的视频图像块分别替换所述缩略视频图像中相应的缩略视频图像块，具体用于：接收视频图像的通信终端根据自身的显示要求，对所述缩略视频图像的显示像素或/和显示尺寸进行调整；根据对所述缩略视频图像进行的调整，对所述对应原始视频图像的视频图像块进行相应的调整；接收视频图像的通信终端基于调整处理后的对应原始视频图像的视频图像块分别替换调整处理后的所述缩略视频图像中相应的缩略视频图像块。