CN109756692A - 视频数据处理方法、装置、移动设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种视频数据处理方法、装置、移动设备、计算机可读存储介质。所述方法包括：获取第一移动设备对应的视频通话的视频数据丢包率，当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息，向第二移动设备发送第一控制消息，以使第二移动设备根据第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，第二移动设备与第一移动设备建立视频通话连接，根据灰度转换指令，控制第一移动设备将视频通话中的视频图像转换为灰度图像。保证视频通话中出现画面问题的用户的视频通话画面的清晰度的同时，迅速恢复并显示完整视频通话画面。

Description

视频数据处理方法、装置、移动设备、计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种视频数据处理方法、装置、移动设备、计算机可读存储介质。

背景技术

随着计算机技术的发展，越来越多的移动设备为用户提供视频通话业务，如VoLTE(voice over LTE，基于LTE进行的通话业务)视频通话、无线视频通话等。

通话过程中如果遇到信号不好，网络条件不稳定等情形，往往会出现视频通话画面有马赛克，或者画面残缺的现象，传统的方法通过改变视频通话图像分辨率的方式减少数据量，牺牲画面的清晰度，导致视频通话画面变得模糊。

发明内容

本申请实施例提供一种视频数据处理方法、装置、移动设备、计算机可读存储介质，可以在视频通话中任意一方出现画面问题时，可控制视频通话的通话方动态的将彩色视频转换为灰度视频，保证视频通话中出现画面问题的用户的视频通话画面的清晰度的同时，迅速恢复并显示完整视频通话画面。

一种视频数据处理方法，应用于第一移动设备，方法包括：

获取所述第一移动设备对应的视频通话的视频数据丢包率；

当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

一种视频数据处理装置，应用于第一移动设备，装置包括：

丢包率确定模块，用于获取所述第一移动设备对应的视频通话的视频数据丢包率；

灰度转换模块，用于当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

发送控制模块，用于向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

第一控制模块，用于根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

一种移动设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如下步骤：

获取第一移动设备对应的视频通话的视频数据丢包率；

当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

获取第一移动设备对应的视频通话的视频数据丢包率；

当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

上述视频数据处理方法、装置、电子设备、计算机可读存储介质，通过获取第一移动设备对应的视频通话的视频数据丢包率，当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息，向第二移动设备发送第一控制消息，以使第二移动设备根据第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，第二移动设备与第一移动设备建立视频通话连接，根据灰度转换指令，控制第一移动设备将视频通话中的视频图像转换为灰度图像，可以在视频通话中任意一方出现画面问题时，根据视频数据丢包率与预设丢包阈值的关系自动生成携带灰度转换指令的第一控制消息，从而控制视频通话的通话方动态的将彩色视频转换为灰度视频，保证视频通话中出现画面问题的用户的视频通话画面的清晰度的同时，迅速恢复并显示完整视频通话画面。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中视频数据处理方法的应用环境图；

图2为一个实施例中视频数据处理方法的流程图；

图3为一个具体的实施例中手机界面的示意图；

图4为一个具体的实施例中拨号界面的示意图；

图5为一个具体的实施例TMMBR报文实例的示意图；

图6为另一个具体的实施例TMMBR报文实例的示意图；

图7为一个实施例中视频数据处理装置的结构框图；

图8为另一个实施例中视频数据处理装置的结构框图；

图9为一个实施例中移动设备的内部结构示意图；

图10为一个实施例中手机的结构示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一客户端称为第二客户端，且类似地，可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端，但其不是同一客户端。

图1为一个实施例中视频数据处理方法的应用环境图。如图1所示，该应用环境包括第一移动设备110和第二移动设备120，各个移动设备之间可以进行视频通话业务，如基于LTE(Long Term Evolution，长期演进)直接与其他用户建立视频通话，或通过安装的应用通过无线网络与其他用户建立视频通话。视频通话中，第一移动设备110获取视频通话的视频数据丢包率，当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息，向第二移动设备120发送第一控制消息，第二移动设备120与第一移动设备110建立视频通话连接，第二移动设备120接收到第一控制消息后，根据其中携带的灰度转换指令将视频通话中的视频图像转换为灰度图像再发送至第一移动设备110，第一移动设备110根据灰度转换指令将视频通话中的视频图像转换为灰度图像再发送至第二移动设备120。其中移动设备110、第二移动设备120可为智能手机、平板电脑、穿戴式设备、个人数字助理等。第二移动设备120可以为一个或多个。

可以理解的是，第一移动设备110和第二移动设备120之间进行视频通话时可通过服务器进行中转。服务器可以为单个服务器或服务器集群。

图2为一个实施例中视频数据处理方法的流程图。如图2所示，一种视频数据处理方法，以应用于上述移动设备为例进行说明，具体包括：

步骤202，获取第一移动设备对应的视频通话的视频数据丢包率。

其中，视频数据丢包率是所丢失的视频数据包数量占所发送视频数据包总数量的比率。具体计算视频数据丢包率的方法为：视频通话中的其它移动设备发送的第一个视频数据包序列号为S1，发送的最后一个视频数据包的序列号为S2，第一移动设备接收到的总视频数据包数量为num，则丢包率LostRate

＝1-num/(N2-N1)。如手机发送出去的每个数据包都携带有连续的序列号(从1开始递增)，如果接收方收到的数据包的序列号不是连续的，则没有收到的数据包视为丢包，比如序列号1-100的100个数据包中有10个数据包没有收到，那么丢包率为10％。视频通话可以是通过LTE进行的视频通话业务，使视频通话作为数据流在LTE数据承载网络中传输，也可以是通过无线网络进行的视频通话业务。

具体地，第一移动设备在视频通话的过程中实时的计算得到视频通话的视频数据丢包率，如果遇到信号不好，网络条件不稳定等情形则视频通话数据在传输过程中会出现网络丢包，从而导致出现收到的视频画面有马赛克，或者画面残缺的现象，视频数据丢包率反映了当前视频通话网络质量。视频数据丢包率越大，网络质量越差。从而可根据视频数据丢包率监控当前视频通话质量，一旦出现问题，则动态的对视频通话中的视频图像进行色彩的调整以保证在网络波动变化时，提高视频通话的画面质量。

步骤204，当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息。

其中，第一预设丢包阈值是图像需要从彩色转换为灰度图像进行传输时对应的丢包阈值，可根据需要自定义，在一个实施例中，第一预设丢包阈值设置为10％。第一控制消息用于请求对视频图像进行转换处理，还可以对视频数据包进行流量控制，当第一控制消息携带有灰度转换指令时，灰度转换指令指示将视频图像转换为灰度图像。可以理解的是，第一控制消息中还可携带自定义的其它用于控制视频传输数据包的信息，如码率控制信息等。

具体地，当视频数据丢包率大于第一预设丢包阈值时说明当前通话质量较差，可能已经出现画面马赛克或者画面残缺，由于灰度图像比彩色图像占用的数据量少，从而需要生成携带灰度转换指令的第一控制消息，将彩色图像转换为灰度图像以适应网络质量。

步骤206，向第二移动设备发送第一控制消息，以使第二移动设备根据第一控制消息中的灰度转换指令将视频通话中的视频图像转换为灰度图像，其中，第二移动设备与第一移动设备建立视频通话连接。

具体地，第二移动设备是与第一移动设备进行视频通话的通话用户对应的移动设备，视频通话的通话用户是指当前视频通话中与第一移动设备存在视频数据传输的用户。在一个实施例中，第一移动设备通过发送RTCP(Real-time Transport Control Protocol，实时传输协议)中定义的TMMBR(Temporary Maximum Media Stream Bit Rate Request)消息来发送第一控制消息，其中TMMBR定义于RTCP中，用于流控，视频通话过程中用于请求发送端按指定的最大比特率传输数据流。第二移动设备接收到第一控制消息后，解析得到灰度转换指令，从而将视频通话中的视频图像转换为灰度图像，再进行编码发送至第一移动设备。

步骤208，根据灰度转换指令，控制第一移动设备将视频通话中的视频图像转换为灰度图像。

具体地，第一移动设备根据灰度转换指令也将视频通话中的视频图像转换为灰度图像，再进行编码发送至第二移动设备。从而在视频通话中任意一方出现画面问题时，通过第一控制消息控制视频通话的其他通话方都能动态的将彩色视频转换为灰度视频，达到对视频通话中各个用户画面质量的协调。

在一个实施例中，将彩色图像转换为灰度图像通过以下方式：原始的彩色图像是RGB格式,R,G,B代表每个像素点红，绿，蓝的数值，保存一个RBG像素点需要三个通道，即三个数值，每个数值的范围是0～255。灰度图像只有一个数值，Gray值，数值范围也同样是0～255(0代表黑色，255代表白色)，Gray值可以通过以下公式得出：Gray＝(R*38+G*75+B*15)>>7。通过把需要三个通道的RBG图像转换为用一个通道的灰度图来存储与发送，节省了2/3的数据量。

本实施例中的视频数据处理方法，通过获取第一移动设备对应的视频通话的视频数据丢包率，当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息，向第二移动设备发送第一控制消息，以使第二移动设备根据第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，第二移动设备与第一移动设备建立视频通话连接，根据灰度转换指令，控制第一移动设备将视频通话中的视频图像转换为灰度图像，可以在视频通话中任意一方出现画面问题时，根据视频数据丢包率与预设丢包阈值的关系自动生成携带灰度转换指令的第一控制消息，从而控制视频通话的通话方动态的将彩色视频转换为灰度视频，保证视频通话中出现画面问题的用户的视频通话画面的清晰度的同时，迅速恢复并显示完整视频通话画面。

在一个实施例中，灰度图像和彩色图像的分辨率一致，保证视频通话图像的像素精度不变。

在一个实施例中，当视频数据丢包率大于第一预设丢包阈值时，该视频数据处理方法还包括：获取视频数据的灰度码率控制信息，在第一控制消息中加载灰度码率控制信息，得到第二控制信息，根据第二控制信息确定第一移动设备对灰度图像进行编码的码率，以使第二移动设备根据接收到的第二控制信息中的灰度码率控制信息确定对灰度图像进行编码的码率。

其中，灰度码率控制信息用于确定第一移动设备和第二移动设备对灰度图像进行编码的码率，如灰度码率控制信息可以为请求对方控制该媒体源遵从的最大比特率，可以在灰度码率控制信息中直接携带最大比特率参数，也可以通过携带多个码率计算参数的形式，通过多个码率计算参数计算出最大比特率参数。可以理解的是，一般灰度码率控制信息对应的最大比特率比正常彩色图像编码对应的最大比特率小。

具体地，第二移动设备接收到第二控制消息后，解析得到灰度码率控制信息，从而得到编码灰度图像的码率控制参数，按照灰度码率控制信息对应的码率去对灰度图像进行编码，能编码得到适应当前网络状态的码流数据，再将编码码流发送至第一移动设备。第一移动设备根据灰度码率控制信息也对灰度图像进行编码得到适应当前网络状态的码流数据，发送至第二移动设备。从而在视频通话中任意一方出现画面问题时，能通过灰度码率控制信息自适应的调整视频通话中视频数据的编码码率，控制传输数据量的大小，进一步保证视频通话中各个用户画面质量的协调。

在一个实施例中，获取灰度码率控制信息包括：获取视频数据丢包率与第一预设丢包阈值的差距量，根据差距量确定当前丢包等级，根据丢包等级与灰度码率的匹配关系，确定与当前丢包等级对应的灰度码率控制信息。

具体地，视频数据丢包率与第一预设丢包阈值的差距量越大，说明当前丢包数量越大，网络质量越差。可以设定差距量与当前丢包等级的对应关系，根据差距量确定当前丢包等级，差距量越大，丢包等级越高。丢包等级越高说明网络质量越差，则灰度码率需要设定的越低。可以预先设定丢包等级与灰度码率的匹配关系，丢包等级越高，灰度码率越低，丢包等级与灰度码率成反相关关系，从而根据视频数据丢包率能精准地确定与之对应的目标灰度码率控制信息，达到分级别地灰度码率控制，提高码率控制的精准度。

在一个实施例中，该视频数据处理方法还包括：当视频数据丢包率小于或等于第二预设丢包阈值时，若当前视频通话中的视频图像为灰度图像，则生成携带彩色转换指令的第三控制消息，第二预设丢包阈值小于或等于第一预设丢包阈值，向第二移动设备发送第三控制消息，以使第二移动设备根据彩色转换指令将所述视频通话中的视频图像转换为彩色图像，根据彩色转换指令，控制第一移动设备将视频通话中的视频图像转换为彩色图像。

其中，第二预设丢包阈值是图像需要从灰度转换为彩色图像进行传输时对应的丢包阈值，第二预设丢包阈值小于或等于第一预设丢包阈值。可根据需要自定义，在一个实施例中，第二预设丢包阈值设置为5％。第三控制消息中携带有彩色转换指令，彩色转换指令指示将视频图像由灰度图像转换为彩色图像。

具体地，当视频数据丢包率小于或等于第二预设丢包阈值时，表示网络条件恢复良好，需要重新将画面切换为彩色图像，从而需要生成携带彩色转换指令的第三控制消息，将灰度图像转换为彩色图像以适应网络质量。第二移动设备接收到第三控制消息后，解析得到彩色转换指令，从而将视频通话中的视频图像从灰度图像转换为彩色图像，再进行编码发送至第一移动设备。第一移动设备根据彩色转换指令也将视频通话中的视频图像从灰度图像转换为彩色图像，再进行编码发送至第二移动设备。从而在网络条件恢复良好时，通过第三控制消息控制视频通话的其他通话方都能动态的将灰度视频转换为彩色视频，达到对视频通话中各个用户画面的正常恢复。

在一个实施例中，当视频数据丢包率小于或等于第二预设丢包阈值时，方法还包括：获取视频数据的彩色码率控制信息，在第三控制消息中加载彩色码率控制信息，得到第四控制信息，根据第四控制信息确定第一移动设备对彩色图像进行编码的码率，以使第二移动设备根据接收到的第四控制信息中的彩色码率控制信息确定对彩色图像进行编码的码率。

其中，彩色码率控制信息用于控制第一移动设备和第二移动设备对彩色图像进行编码的码率，如彩色码率控制信息可以为请求对方控制该媒体源遵从的最大比特率，可以在彩色码率控制信息中直接携带最大比特率参数，也可以通过携带多个码率计算参数的形式，通过多个码率计算参数计算出最大比特率参数。可以理解的是，一般彩色码率控制信息对应的最大比特率为正常彩色图像编码对应的最大比特率。

具体地，第二移动设备接收到第四控制信息后，解析得到彩色码率控制信息，从而得到编码彩色图像的码率控制参数，按照彩色码率控制信息对应的码率去对彩色图像进行编码，能编码得到适应当前网络状态的码流数据，再将编码码流发送至第一移动设备。第一移动设备根据彩色码率控制信息也对彩色图像进行编码得到适应当前网络状态的码流数据，发送至第二移动设备。从而在网络恢复时，能通过彩色码率控制信息自适应的调整视频通话中视频数据的编码码率，彩色图像对应的传输数据量的大小比灰度图像时对应的传输数据量更大，从而恢复至正常水平，进一步保证视频通话中各个用户画面质量的协调。

在一个实施例中，第二控制消息或第四控制消息包括码率控制标志位、第一指数参数、第一系数参数和图像转换标志位，码率控制标志位用于标识码率控制请求，第一指数参数和第一系数参数用于根据视频数据丢包率生成对应的码率控制信息；图像转换标志位用于根据视频数据丢包率携带对应的图像转换指令。

其中，码率控制标志位用于标识码率控制请求，可以为预设字符串标识，如码率控制标志位为预设字符串0x6731ae60时，表示需要按照第二控制消息或第四控制消息中携带的信息进行码率控制。如果码率控制标志位不为预设字符预设字符串，则说明不需要按照第二控制消息或第四控制消息中携带的信息进行码率控制。第一指数参数表示计算码率控制信息时指数大小值，第一系数参数表示计算码率控制信息时系数大小值。具体的码率控制信息的计算公式可自定义。图像转换标志位用于根据视频数据丢包率携带对应的图像转换指令，如1表示灰度转换指令，0表示彩色转换指令。

在一个实施例中，步骤202之前，还包括：向第二移动设备发送视频通话请求，当接收到第二移动设备根据视频通话请求返回的响应时，根据第一移动设备的预设视频图像分辨率信息和预设码率控制信息与第二移动设备建立视频通话。

具体地，可以通过第一移动设备的界面上的按键生成视频通话请求，并发送至第二移动设备。界面可以是系统自带的界面，如无需安装其它应用，在系统自带的界面上生成视频通话请求，也可以是安装了应用后，在安装的应用上的界面上生成视频通话请求。可以通过视频通话用户标识确定第二移动设备，其中视频通话用户标识用于唯一标识一个视频通话用户，目标视频通话用户标识可以为一个或多个，如果为一个则建立的是双方视频通话，如果为多个则建立的是多方视频通话。第一移动设备配置的视频通话用户标识可以是电话号码，或为在应用中进行注册后生成的用户名称、用户编码等。预设视频图像分辨率信息和预设码率控制信息是用户自定义配置的或按照运营商的规范进行协商并使用默认的分辨率以及码率。可以理解的是，后续当视频数据丢包率大于第一预设丢包阈值时，可以以预设码率控制信息为基础确定灰度码率控制信息。

在一个具体的实施例中，视频数据处理方法具体过程如下；

1)当前手机的界面上的拨号键302接收用户的点击操作，进入当前手机自带的拨号界面，如图3所示；

2)拨号界面接收用户输入的待建立通话方的电话号码，视频呼叫键304接收用户的点击操作，生成视频通话请求,如图4所示；

3)将视频通话请求发送至待建立通话方的手机，对端接听后，建立视频通话，视频通话在建立的时候会进行视频分辨率以及码率的协商，按照运营商的规范进行协商并使用默认的分辨率以及码率，中国移动默认要求使用的分辨率(640*480)以及码率(960000)。

4)建立视频通话之后，当前手机对接收到的视频数据进行统计，确认丢包率是否超过第一预设丢包阈值10％。

5)如果丢包率超过第一预设丢包阈值10％，当前手机向通话方手机发送携带灰度转换指令的第二控制消息，当前手机发送RTCP中定义的TMMBR消息，告知对端调整后需要发送的数据量，即码率，以及是否使用灰度图像，每个TMMBR消息中携带以下5个参数。

(1)SSRC(32bits)：码率控制标志位，请求对方控制该媒体源遵从下面的最大比特率

(2)MxTBR Exp(6bits)：第一指数参数

(3)MxTBR Mantissa(17bits)：第一系数参数

(4)Is Gray(1bit):是否使用灰度图像

(5)Measured Overhead(9bits)：测量的平均开销调整后的码率控制信息，即数据量通过Bitrate＝MxTBR Mantissa*2^MxTBR Exp得出，是否使用灰度图像通过Is Gray这个标志位决定，1表示需要使用灰度图像，0表示不需要使用灰度图像。对端接收到TMMBR消息之后，根据Bitrate值确定自己编码之后的最大数据量，以及是否使用灰度图像编码，如果Is Gray＝1则需要转为灰度图，如果Is Gray＝0则不需要转灰度图。

如图5所示，为一个实施例中，具体的需要切换灰度的TMMBR报文实例，计算得知调整之后的最大码率Bitrate＝(20000*2)^4＝320000＝1/3*960000，即表示使用灰度图的情况下最大码率只需要原来初始值的1/3。Is_Gray＝1表示使用灰度图。通话双方将从相机获取到的原始图像先进行灰度图的转换，然后再编码为h264格式，发送到网络，通过网络传输到对端。

6)如果视频通话经过一段时间的灰度图传输之后，当前手机对接收到的视频数据进行统计，确认丢包率又低于第二预设丢包阈值5％，则认为网络条件恢复良好，重新将画面切换为彩色图像。

7)当前手机发送TMMBR消息，告知对端调整后需要发送的数据量，以及是否使用灰度图像，如图6所示为具体的TMMBR报文实例，调整之后的最大码率Bitrate＝60000*2^4＝960000，即切换为原来默认的码率。且Is_Gray＝0，表示不使用灰度图，使用彩色图。

8)当前手机和对端接收到TMMBR消息之后，根据计算出来的Bitrate值确定自己编码之后的最大数据量，且切换回彩色图像进行编码。

应该理解的是，虽然图2的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

图7为一个实施例的视频数据处理装置的结构框图。如图7所示，一种视频数据处理装置，应用于第一移动设备，包括丢包率确定模块402、灰度转换模块404、发送控制模块406。其中：

丢包率确定模块402，用于获取第一移动设备对应的视频通话的视频数据丢包率。

灰度转换模块404，用于当视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息。

发送控制模块406，用于向第二移动设备发送第一控制消息，以使第二移动设备根据第一控制消息中的灰度转换指令将视频通话中的视频图像转换为灰度图像，其中，第二移动设备与第一移动设备建立视频通话连接。

第一控制模块408，用于根据灰度转换指令，控制第一移动设备将视频通话中的视频图像转换为灰度图像。

在一个实施例中，如图8所示，视频数据处理装置还包括：

灰度码率控制模块410，用于当视频数据丢包率大于第一预设丢包阈值时，获取视频数据的灰度码率控制信息，在第一控制消息中加载灰度码率控制信息，得到第二控制信息，根据第二控制信息确定第一移动设备对灰度图像进行编码的码率，以使第二移动设备根据接收到的第二控制信息中的灰度码率控制信息确定对灰度图像进行编码的码率。

在一个实施例中，灰度码率控制模块408还用于获取视频数据丢包率与第一预设丢包阈值的差距量，根据差距量确定当前丢包等级，根据丢包等级与灰度码率的匹配关系，确定与当前丢包等级对应的灰度码率控制信息。

在一个实施例中，如图8所示，视频数据处理装置还包括：

彩色转换模块412，当视频数据丢包率小于或等于第二预设丢包阈值时，若当前视频通话中的视频图像为灰度图像，则生成携带彩色转换指令的第三控制消息，其中，第二预设丢包阈值小于或等于第一预设丢包阈值。

发送控制模块406，还用于向第二移动设备发送第三控制消息，以使第二移动设备根据彩色转换指令将视频通话中的视频图像转换为彩色图像。

第一控制模块408,还用于根据彩色转换指令控制第一移动设备将视频通话中的视频图像转换为彩色图像。

在一个实施例中，如图8所示，视频数据处理装置还包括：

彩色码率控制模块414，用于当视频数据丢包率小于或等于第二预设丢包阈值时，获取视频数据的彩色码率控制信息，在第三控制消息中加载彩色码率控制信息，得到第四控制信息，根据第四控制信息确定第一移动设备对彩色图像进行编码的码率，以使第二移动设备根据接收到的第四控制信息中的彩色码率控制信息确定对彩色图像进行编码的码率。

在一个实施例中，第二控制消息或第四控制消息包括码率控制标志位、第一指数参数、第一系数参数和图像转换标志位，码率控制标志位用于标识码率控制请求，第一指数参数和第一系数参数用于根据视频数据丢包率生成对应的码率控制信息，图像转换标志位用于根据视频数据丢包率携带对应的图像转换指令。

在一个实施例中，如图8所示，视频数据处理装置还包括：

视频通话建立模块416，用于向第二移动设备发送视频通话请求,当接收到第二移动设备根据视频通话请求返回的响应时，根据第一移动设备的预设视频图像分辨率信息和预设码率控制信息与第二移动设备建立视频通话。

上述视频数据处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将视频数据处理装置按照需要划分为不同的模块，以完成上述视频数据处理装置的全部或部分功能。

关于视频数据处理装置的具体限定可以参见上文中对于视频数据处理方法的限定，在此不再赘述。上述视频数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

图9为一个实施例中移动设备的内部结构示意图。如图9所示，该移动设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种视频数据处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的视频数据处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供了一种移动设备。如图10所示，为了便于说明，仅示出了与本申请实施例相关的部分，具体技术细节未揭示的，请参照本申请实施例方法部分。该移动设备可以为包括手机、平板电脑、PDA(PersonalDigital Assistant，个人数字助理)、POS(Point of Sales，销售终端)、车载电脑、穿戴式设备等任意终端设备，以移动设备为手机为例：

图10为与本申请实施例提供的移动设备相关的手机的部分结构的框图。参考图10，手机包括：射频(Radio Frequency，RF)电路510、存储器520、输入单元530、显示单元540、传感器550、音频电路540、无线保真(wireless fidelity，WiFi)模块570、处理器580、以及电源590等部件。本领域技术人员可以理解，图10所示的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

其中，RF电路510可用于收发信息或通话过程中，信号的接收和发送，可将基站的下行信息接收后，给处理器580处理；也可以将上行的数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，RF电路510还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(Global System ofMobile communication，GSM)、通用分组无线服务(General Packet Radio Service，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband CodeDivision Multiple Access，WCDMA)、长期演进(Long Term Evolution，LTE))、电子邮件、短消息服务(Short Messaging Service，SMS)等。

存储器520可用于存储软件程序以及模块，处理器580通过运行存储在存储器520的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器520可主要包括程序存储区和数据存储区，其中，程序存储区可存储操作系统、至少一个功能所需的应用(比如声音播放功能的应用、图像播放功能的应用等)等；数据存储区可存储根据手机的使用所创建的数据(比如音频数据、通讯录等)等。此外，存储器520可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元530可用于接收输入的数字或字符信息，以及产生与手机500的用户设置以及功能控制有关的键信号输入。具体地，输入单元530可包括触控面板531以及其他输入设备532。触控面板531，也可称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板531上或在触控面板531附近的操作)，并根据预先设定的程式驱动相应的连接装置。在一个实施例中，触控面板531可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器580，并能接收处理器580发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板531。除了触控面板531，输入单元530还可以包括其他输入设备532。具体地，其他输入设备532可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)等中的一种或多种。

显示单元540可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元540可包括显示面板541。在一个实施例中，可以采用液晶显示器(LiquidCrystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板541。在一个实施例中，触控面板531可覆盖显示面板541，当触控面板531检测到在其上或附近的触摸操作后，传送给处理器480以确定触摸事件的类型，随后处理器580根据触摸事件的类型在显示面板541上提供相应的视觉输出。虽然在图10中，触控面板531与显示面板541是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将触控面板531与显示面板541集成而实现手机的输入和输出功能。

手机500还可包括至少一种传感器550，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板541的亮度，接近传感器可在手机移动到耳边时，关闭显示面板541和/或背光。运动传感器可包括加速度传感器，通过加速度传感器可检测各个方向上加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换)、振动识别相关功能(比如计步器、敲击)等；此外，手机还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器等。

音频电路540、扬声器541和传声器542可提供用户与手机之间的音频接口。音频电路540可将接收到的音频数据转换后的电信号，传输到扬声器541，由扬声器541转换为声音信号输出；另一方面，传声器542将收集的声音信号转换为电信号，由音频电路540接收后转换为音频数据，再将音频数据输出处理器580处理后，经RF电路510可以发送给另一手机，或者将音频数据输出至存储器520以便后续处理。

WiFi属于短距离无线传输技术，手机通过WiFi模块570可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图10示出了WiFi模块570，但是可以理解的是，其并不属于手机500的必须构成，可以根据需要而省略。

处理器580是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器520内的软件程序和/或模块，以及调用存储在存储器520内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。在一个实施例中，处理器580可包括一个或多个处理单元。在一个实施例中，处理器580可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用等；调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器580中。

手机500还包括给各个部件供电的电源590(比如电池)，优选的，电源可以通过电源管理系统与处理器580逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

在一个实施例中，手机500还可以包括摄像头、蓝牙模块等。

在本申请实施例中，该移动设备所包括的处理器580执行存储在存储器上的计算机程序时实现上述各个实施例中视频数据处理方法的步骤。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行上述各个实施例中视频数据处理方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述各个实施例中视频数据处理的方法。

本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种视频数据处理方法，应用于第一移动设备，其特征在于，所述方法包括：

获取所述第一移动设备对应的视频通话的视频数据丢包率；

当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

2.根据权利要求1所述的方法，其特征在于，当所述视频数据丢包率大于第一预设丢包阈值时，所述方法还包括：

获取所述视频数据的灰度码率控制信息；

在所述第一控制消息中加载所述灰度码率控制信息，得到第二控制信息；

根据所述第二控制信息确定所述第一移动设备对灰度图像进行编码的码率，以使所述第二移动设备根据接收到的所述第二控制信息中的所述灰度码率控制信息确定对灰度图像进行编码的码率。

3.根据权利要求2所述的方法，其特征在于，所述获取灰度码率控制信息包括：

获取所述视频数据丢包率与所述第一预设丢包阈值的差距量；

根据所述差距量确定当前丢包等级；

根据丢包等级与灰度码率的匹配关系，确定与所述当前丢包等级对应的灰度码率控制信息。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当所述视频数据丢包率小于或等于第二预设丢包阈值时，若当前视频通话中的视频图像为灰度图像，则生成携带彩色转换指令的第三控制消息，其中，所述第二预设丢包阈值小于或等于所述第一预设丢包阈值；

向所述第二移动设备发送所述第三控制消息，以使所述第二移动设备根据所述彩色转换指令将所述视频通话中的视频图像转换为彩色图像；

根据所述彩色转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为彩色图像。

5.根据权利要求4所述的方法，其特征在于，当所述视频数据丢包率小于或等于所述第二预设丢包阈值时，所述方法还包括：

获取所述视频数据的彩色码率控制信息；

在所述第三控制消息中加载所述彩色码率控制信息，得到第四控制信息；

根据所述第四控制信息确定所述第一移动设备对彩色图像进行编码的码率，以使所述第二移动设备根据接收到的第四控制信息中的所述彩色码率控制信息确定对彩色图像进行编码的码率。

6.根据权利要求2所述的方法，其特征在于，所述第二控制消息包括码率控制标志位、第一指数参数、第一系数参数和图像转换标志位；所述码率控制标志位用于标识码率控制请求，所述第一指数参数和第一系数参数用于根据视频数据丢包率生成对应的码率控制信息；所述图像转换标志位用于根据视频数据丢包率携带对应的图像转换指令。

7.根据权利要求1所述的方法，其特征在于，所述获取第一移动设备对应的视频通话的视频数据丢包率之前，还包括：

向所述第二移动设备发送视频通话请求；

当接收到所述第二移动设备根据所述视频通话请求返回的响应时，根据所述第一移动设备的预设视频图像分辨率信息和预设码率控制信息与所述第二移动设备建立所述视频通话。

8.一种视频数据处理装置，应用于第一移动设备，其特征在于，所述装置包括：

丢包率确定模块，用于获取所述第一移动设备对应的视频通话的视频数据丢包率；

灰度转换模块，用于当所述视频数据丢包率大于第一预设丢包阈值时，生成携带灰度转换指令的第一控制消息；

发送控制模块，用于向第二移动设备发送所述第一控制消息，以使所述第二移动设备根据所述第一控制消息中的灰度转换指令将所述视频通话中的视频图像转换为灰度图像，其中，所述第二移动设备与所述第一移动设备建立视频通话连接；

第一控制模块，用于根据所述灰度转换指令，控制所述第一移动设备将所述视频通话中的视频图像转换为灰度图像。

9.一种移动设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。