CN107872675A - 基于h264的视频数据的修复方法和传输的数据端 - Google Patents

Abstract

本发明提供了一种基于H.264的视频数据的修复方法和传输的数据端，其中，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级；根据所述多个优先级的从高到低对所述发生错误或丢失的条带数据进行修复。先对优先级高的条带数据进行修复，可以快速的改善用户的主观感受。并且每次仅对一帧图像中的部分条带数据采用帧内编码的方式进行编码，因此，每帧修复帧图像均不太大，但能很快改善用户的主观感受。

Description

基于H264的视频数据的修复方法和传输的数据端

技术领域

本发明涉及数据传输领域，尤其是一种基于H.264的视频数据的修复方法和传输的数据端。

背景技术

在无线网络的H.264视频传输中经常会发生误码和数据包丢失的情况，这会导致接收端的视频显示出现花屏、马赛克等异常现象。现有比较常用的解决方法是接收端向发送端发送一个请求，要求发送端马上再重发一个关键帧来对已经损坏的图像进行恢复。

关键帧是对整幅图像都进行帧内编码，所述帧内编码方式不会参考之前的图像，所以可以使图像马上恢复。但帧内编码会造成关键帧数据量非常大，在无线网络带宽受限的情况下会增大传输的时延，同时也增加了该关键帧发生误码丢包的概率，一旦再次发生数据错误，关键帧就起不到恢复图像的作用。

发明内容

本发明的目的在于提供一种基于H.264的视频数据的修复方法和传输的数据端，以解决关键帧修复方案中时延长而导致的修复失败的问题。

为了达到上述目的，本发明提供了一种基于H.264的视频数据的修复方法，所述视频数据中的每帧图像数据均被划分为多个条带数据，其特征在于，包括：

所述多个条带数据中的每一个条带数据均具有一编号；

当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级；

根据所述多个优先级的从高到低对所述发生错误或丢失的条带数据进行修复。

优选的，在上述的基于H.264的视频数据的修复方法中，对所述多个优先级中一个优先级的所述发生错误或丢失的条带数据进行修复的步骤包括：

重新传输一帧图像；

对所述重新传输的图像中的该优先级的发生错误或丢失的条带数据的编号对应的条带数据采用帧内编码的方式进行编码。

优选的，在上述的基于H.264的视频数据的修复方法中，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤还包括：

对所述重新传输的图像中的其他条带数据采用帧间预测的方式进行编码。

优选的，在上述的基于H.264的视频数据的修复方法中，每个优先级包括至少一个发生错误或丢失的条带数据。

优选的，在上述的基于H.264的视频数据的修复方法中，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤包括：

重新传输一帧图像；

对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码。

优选的，在上述的基于H.264的视频数据的修复方法中，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤还包括：

再重新传输一帧图像；

对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复。

本发明还提供了一种基于H.264的视频数据传输的第一数据端，包括：

处理器，用于接收一第二数据端发送的视频数据，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级，将所述发生错误或丢失的条带数据的编号及优先级发送至所述第二数据端，并接收所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据；以及

存储器，用于存储所述视频数据、所述发生错误或丢失的条带数据的编号及优先级、以及所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，每个优先级包括至少一个发生错误或丢失的条带数据。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

本发明又提供了一种基于H.264的视频数据传输的第二数据端，包括：处理器，用于发送一视频数据至一第一数据端，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端记录的该帧图像数据中发生错误或丢失的条带数据的编号，以及所述第一数据端对发生错误或丢失的条带数据设置的多个优先级，并根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端；以及

存储器，用于存储接收的所述第一数据端记录的发生错误或丢失的条带数据的编号以及优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，每个优先级包括至少一个发生错误或丢失的条带数据。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

本发明更提供了一种基于H.264的视频数据传输的第一数据端，包括：

处理器，用于接收一第二数据端发送的视频数据，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据的编号发送至所述第二数据端，所述第二数据端对所述发生错误或丢失的条带数据的编号设置多个优先级，并接收所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据；以及

存储器，用于存储所述视频数据、所述发生错误或丢失的条带数据的编号、以及所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，每个优先级包括至少一个发生错误或丢失的条带数据。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

优选的，在上述的基于H.264的视频数据传输的第一数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

本发明还提供了一种基于H.264的视频数据传输的第二数据端，包括：

处理器，用于发送一视频数据至一第一数据端，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端记录的该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据设置多个优先级，根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端；以及

存储器，用于存储接收的所述第一数据端记录的发生错误或丢失的条带数据的编号、所述处理器设置的所述发生错误或丢失的条带数据的优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，每个优先级包括至少一个发生错误或丢失的条带数据。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

优选的，在上述的基于H.264的视频数据传输的第二数据端中，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

在本发明提供的基于H.264的视频数据的修复方法和传输的数据端中，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级；根据所述多个优先级的从高到低对所述发生错误或丢失的条带数据进行修复。先对优先级高的条带数据进行修复，可以快速的改善用户的主观感受。并且每次仅对一帧图像中的部分条带数据采用帧内编码的方式进行编码，因此，每帧修复帧图像均不太大，但能很快改善用户的主观感受。

附图说明

图1为本发明实施例中将一帧图像数据划分为多个条带数据的示意图；

图2为本发明实施例中基于H.264的视频数据的修复方法的流程图；

图3为本发明实施例中对重新传输的一帧图像数据进行编码的示意图；

图4为本发明实施例中对再重新传输的一帧图像数据进行编码的示意图；

图5为本发明中一实施例中基于H.264的视频数据传输的示意图；

图6为本发明中又一实施例中基于H.264的视频数据传输的示意图；

图中：

501-第一数据端；5011-处理器；5012-存储器；502-第二数据端；5021-处理器；5022-存储器；

601-第一数据端；6011-处理器；6012-存储器；602-第二数据端；6021-处理器；6022-存储器。

具体实施方式

下面将结合示意图对本发明的具体实施方式进行更详细的描述。根据下列描述和权利要求书，本发明的优点和特征将更清楚。需说明的是，附图均采用非常简化的形式且均使用非精准的比例，仅用以方便、明晰地辅助说明本发明实施例的目的。

本发明实施例提供了一种基于H.264的视频数据的修复方法，用于修复基于H.264进行的视频数据传输过程中出现的花屏、马赛克等现象，所述视频数据中的每一帧图像数据基于H.264均可被划分为多个条带数据，且所述多个条带数据中的每一个条带数据均具有一编号，且，所述视频数据中的各帧图像数据被划分多个条带数据的方式和编号的方式相同。即所述视频数据中的各帧图像数据被划分的条带数据的个数相同，以及各个条带的编号也相同。在本实施例中，以将一帧图像数据划分为5个条带数据为例，当然在本发明的其他实施例中，并不以此为限，可以根据实际需要划分不同数目的个数，例如为6个或者更多个，在此不再赘述。具体的划分及编号如图1所示，图1为本发明实施例中将一帧图像数据划分为5个条带数据的示意图，该5个条带数据的编号分别为slice0、slicel、slice2、slice3以及slice4。各个条带数据的编号的名称可以根据实际需要或者设计者的喜欢进行设置。

当所述视频数据中的某一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，此为图2中的步骤S1，图2为本发明实施例中基于H.264的视频数据的修复方法的流程图。例如，接上例，假设图1中的编号为slice0、slice2以及slice4的三个条带数据发生错误或者丢失。则记录这三个条带数据的编号slice0、slice2以及slice4。

然后对这三个条带数据进行优先级设置，此为步骤S2。根据这三个条带数据在一帧图像数据中的重要程度进行优先级设置。具体的，对于处于一帧图像数据中敏感区域内的条带数据的优先级高，而处于一帧图像数据中不敏感区域内的条带数据的优先级较低。例如，在视频通话的场景下，比较关注的是人脸，而一般人脸都会处于屏幕的中间区域，这时候可以将处在中间区域的条带数据设置为高优先级，而将边缘的条带数据设置为较低的优先级。一般的，对数据错误或丢失的条带数据设置为多个优先级，而每个优先级包括至少一个条带数据，当然，一个优先级中可以包括多个条带数据。

具体的，接上例，在本实施例中，将slice0、slice2以及slice4三个条带数据设置为两个优先级，其中slice2的优先级最高，而slice0和slice4的优先级其次，即slice0和slice4的优先级相同且为第二级。当然，在本发明的其他实施例中，还可以将slice0、slice2以及slice4三个条带数据划分为三个优先级，可以更加完美的对花屏或者马赛克现象的视频图像进行修复，但是由于在本本发明的技术方案中，每一次修复仅仅修复一个优先级的条带数据，因此，三个优先级需要三次修复，就会需要更多的时间，也就是说，修复的精度和修复过程中的延时成正比，在具体的应用中，需要结合实际考虑，例如当视频图像的质量要求较高时，就可以设置较多的优先级，当对视频图像的质量要求较低时，就可以设置较少的优先级。

接下来，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复，此为步骤S3。具体而言，先对优先级高的条带数据进行修复，再对优先级低的条带数据进行修复。接上例，首先，对编号为slice2的条带数据进行修复。此时，是重新传输一帧图像数据，对该帧图像数据中编号为slice2的条带数据采用帧内编码的方式进行编码，而该帧图像数据中的其他条带数据均采用帧间预测的方式进行编码，请参考图3，图3为对重新传输的一帧图像数据进行编码的示意图。具体的，slice2采用帧内编码的方式进行编码后为I-slice2，而其他条带数据均采用帧间预测的方式进行编码，即slice0采用帧间预测的方式进行编码后为P-slice0，slicel采用帧间预测的方式进行编码后为P-slicel，slice3采用帧间预测的方式进行编码后为P-slice3，slice4采用帧间预测的方式进行编码后为P-slice4，以实现对优先级最高的编号为slice2的条带数据的修复。由于slice2为一帧图像数据中的敏感区域，当slice2得到修复之后，用户的主观感受会马上得到改善。

然后，在对优先级次之的slice0和slice4进行修复。具体的过程如下：再重新传输一帧图像数据，对再重新传输的该帧图像数据中的编号为slice0和slice4的条带数据采用帧内编码的方式进行编码，如图4所示，图4为本发明实施例中对再重新传输的一帧图像数据进行编码的示意图，编码后为I-slice0和I-slice4，而所述再重新传输的一帧图像数据中其他条带数据均采用帧间预测的方式进行编码，即slicel采用帧间预测的方式进行编码后为P-slicel，slice2采用帧间预测的方式进行编码后为P-slice2，slice3采用帧间预测的方式进行编码后为P-slice3，以实现对优先级次之的编号为slice0和slice4的条带数据的修复。至此，实现了对发生错误或丢失的条带数据slice0、slice2和slice4的修复。

在上述对条带数据slice0、slice2和slice4进行修复的过程中，重新传输的一帧图像以及再重新传输一帧图像均为修复帧图像，每次仅对修复帧图像中的部分条带数据采用帧内编码的方式进行编码，因此，每帧修复帧图像均不太大，但能很快改善用户的主观感受。

本发明实施例还提供了一种基于H.264的视频数据传输的第一数据端和第二端，请结合图1、图3、图4及图5，图5为本发明实施例中基于H.264的视频数据传输的示意图。所述第一数据端501包括处理器5011和存储器5012，所述处理器5011接收一第二数据端502发送的视频数据，该视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，如图1所示。当一帧图像数据中有数据错误或丢失时，所述处理器5011记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级，将所述发生错误或丢失的条带数据的编号及优先级发送至所述第二数据端502，并接收所述第二数据端502根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

所述存储器5012用于存储所述视频数据、所述发生错误或丢失的条带数据的编号及优先级、以及所述第二数据端502根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

所述第二数据端502包括处理器5021和存储器5022，其中，所述处理器5021用于发送一视频数据至所述第一数据端501，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，如图1所示，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端记录的该帧图像数据中发生错误或丢失的条带数据的编号，以及所述第一数据端对发生错误或丢失的条带数据设置的多个优先级，并根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端501。所述存储器5022用于存储接收的所述第一数据端记录的发生错误或丢失的条带数据的编号以及优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

所述第二数据端502根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的过程采用如上所述的方法，具体如下。

首先，所述第二数据端502重新传输一帧图像，所述第二数据端502对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的条带数据采用帧内编码的方式进行编码，同时，对所述重新传输的图像中的其他条带数据均采用帧间预测的方式进行编码，将编码后的所述重新传输的图像存储于所述存储器5022中，并发送至所述第一数据端501，从而实现对优先级最高的发生错误或丢失的条带数据的编号对应的条带数据进行修复。

具体的，如图3所示，slice2采用帧内编码的方式进行编码后为I-slice2，而其他条带数据均采用帧间预测的方式进行编码，即slice0采用帧间预测的方式进行编码后为P-slice0，slicel采用帧间预测的方式进行编码后为P-slicel，slice3采用帧间预测的方式进行编码后为P-slice3，slice4采用帧间预测的方式进行编码后为P-slice4，以实现对优先级最高的编号为slice2的条带数据的修复。由于slice2为一帧图像数据中的敏感区域，当slice2得到修复之后，用户的主观感受会马上得到改善。

其次，所述第二数据端502再重新传输一帧图像，所述第二数据端502对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码。从而实现对优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据进行修复。

具体的，如图4所示，优先级为第二级的slice0和slice4采用帧内编码的方式进行编码后为I-slice0和I-slice4，而所述再重新传输的一帧图像数据中其他条带数据均采用帧间预测的方式进行编码，即slicel采用帧间预测的方式进行编码后为P-slicel，slice2采用帧间预测的方式进行编码后为P-slice2，slice3采用帧间预测的方式进行编码后为P-slice3，以实现对优先级次之的编号为slice0和slice4的条带数据的修复。至此，实现了对发生错误或丢失的条带数据slice0、slice2和slice4的修复。

当所述发生错误或丢失的条带数据被分为3个或者更多的优先级时，就重复上述步骤，直至所述发生错误或丢失的条带数据全部被修复为止。

在本实施例中，所述第一数据端501对所述发生错误或丢失的条带数据进行优先级设置，所述第二数据端502根据所述第一数据端501设置的优先级对所述发生错误或丢失的条带数据进行修复。

在本发明的又一实施例中，还提供了一种基于H.264的视频数据传输的第一数据端601和第二数据端602。所述第一数据端601包括处理器6011和存储器6012，所述处理器6011用于接收所述第二数据端602发送的视频数据，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，所述存储6011记录该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据的编号发送至所述第二数据端602，所述第二数据端602对所述发生错误或丢失的条带数据的编号设置多个优先级，并接收所述第二数据端602根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。所述存储器6012用于存储所述视频数据、所述发生错误或丢失的条带数据的编号、以及所述第二数据端602根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

所述第二数据端602包括处理器6021和存储器6022，所述处理器6021用于发送一视频数据至所述第一数据端601，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端601记录的该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据设置多个优先级，根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端。所述存储器6022用于存储接收的所述第一数据端601记录的发生错误或丢失的条带数据的编号、所述处理器设置的所述发生错误或丢失的条带数据的优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

在本实施例中，所述第一数据端601仅将发生错误或丢弃的条带数据的编号发送至所述第二数据端602，所述第二数据端602在接收到发生错误或丢弃的条带数据的编号后，对这些编号对应的条带数据设置优先级，然后所述第二数据端602根据其设置的优先级再对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，修复的过程与本发明上一实施例中的具体过程相同，在此不再赘述。

所述第二数据端602对发生错误或丢失的条带数据进行优先级设置的过程中，对于处于一帧图像数据中敏感区域内的条带数据的优先级高，而处于一帧图像数据中不敏感区域内的条带数据的优先级较低。例如，在视频通话的场景下，比较关注的是人脸，而一般人脸都会处于屏幕的中间区域，这时候可以将处在中间区域的条带数据设置为高优先级，而将边缘的条带数据设置为较低的优先级。一般的，对数据错误或丢失的条带数据设置为多个优先级，而每个优先级包括至少一个条带数据，当然，一个优先级中可以包括多个条带数据。

综上，在本发明实施例提供的基于H.264的视频数据的修复方法和传输的数据端中，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级；根据所述多个优先级的从高到低对所述发生错误或丢失的条带数据进行修复。先对优先级高的条带数据进行修复，可以快速的改善用户的主观感受。并且每次仅对一帧图像中的部分条带数据采用帧内编码的方式进行编码，因此，每帧修复帧图像均不太大，但能很快改善用户的主观感受。

上述仅为本发明的优选实施例而已，并不对本发明起到任何限制作用。任何所属技术领域的技术人员，在不脱离本发明的技术方案的范围内，对本发明揭露的技术方案和技术内容做任何形式的等同替换或修改等变动，均属未脱离本发明的技术方案的内容，仍属于本发明的保护范围之内。

Claims (22)

1.一种基于H.264的视频数据的修复方法，所述视频数据中的每帧图像数据均被划分为多个条带数据，其特征在于，包括：

所述多个条带数据中的每一个条带数据均具有一编号；

当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级；

根据所述多个优先级的从高到低对所述发生错误或丢失的条带数据进行修复。

2.如权利要求1所述的基于H.264的视频数据的修复方法，其特征在于，对所述多个优先级中一个优先级的所述发生错误或丢失的条带数据进行修复的步骤包括：

重新传输一帧图像；

对所述重新传输的图像中的该优先级的发生错误或丢失的条带数据的编号对应的条带数据采用帧内编码的方式进行编码。

3.如权利要求2所述的基于H.264的视频数据的修复方法，其特征在于，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤还包括：

对所述重新传输的图像中的其他条带数据采用帧间预测的方式进行编码。

4.如权利要求1所述的基于H.264的视频数据的修复方法，其特征在于，每个优先级包括至少一个发生错误或丢失的条带数据。

5.如权利要求4所述的基于H.264的视频数据的修复方法，其特征在于，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤包括：

重新传输一帧图像；

对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码。

6.如权利要求5所述的基于H.264的视频数据的修复方法，其特征在于，根据所述多个优先级从高到低对所述发生错误或丢失的条带数据进行修复的步骤还包括：

再重新传输一帧图像；

对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复。

7.一种基于H.264的视频数据传输的第一数据端，其特征在于，包括：

处理器，用于接收一第二数据端发送的视频数据，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，并对发生错误或丢失的条带数据设置多个优先级，将所述发生错误或丢失的条带数据的编号及优先级发送至所述第二数据端，并接收所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据；以及

存储器，用于存储所述视频数据、所述发生错误或丢失的条带数据的编号及优先级、以及所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

8.如权利要求7所述的基于H.264的视频数据传输的第一数据端，其特征在于，每个优先级包括至少一个发生错误或丢失的条带数据。

9.如权利要求8所述的基于H.264的视频数据传输的第一数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

10.如权利要求9所述的基于H.264的视频数据传输的第一数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

11.一种基于H.264的视频数据传输的第二数据端，其特征在于，包括：

处理器，用于发送一视频数据至一第一数据端，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端记录的该帧图像数据中发生错误或丢失的条带数据的编号，以及所述第一数据端对发生错误或丢失的条带数据设置的多个优先级，并根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端；以及

存储器，用于存储接收的所述第一数据端记录的发生错误或丢失的条带数据的编号以及优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

12.如权利要求11所述的基于H.264的视频数据传输的第二数据端，其特征在于，每个优先级包括至少一个发生错误或丢失的条带数据。

13.如权利要求12所述的基于H.264的视频数据传输的第二数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

14.如权利要求13所述的基于H.264的视频数据传输的第二数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

15.一种基于H.264的视频数据传输的第一数据端，其特征在于，包括：

处理器，用于接收一第二数据端发送的视频数据，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，记录该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据的编号发送至所述第二数据端，所述第二数据端对所述发生错误或丢失的条带数据的编号设置多个优先级，并接收所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据；以及

存储器，用于存储所述视频数据、所述发生错误或丢失的条带数据的编号、以及所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

16.如权利要求15所述的基于H.264的视频数据传输的第一数据端，其特征在于，每个优先级包括至少一个发生错误或丢失的条带数据。

17.如权利要求16所述的基于H.264的视频数据传输的第一数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

18.如权利要求17所述的基于H.264的视频数据传输的第一数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。

19.一种基于H.264的视频数据传输的第二数据端，其特征在于，包括：

处理器，用于发送一视频数据至一第一数据端，所述视频数据中的每帧图像数据均被划分为多个条带数据，所述多个条带数据中的每一个条带数据均具有一编号，当一帧图像数据中有数据错误或丢失时，接收所述第一数据端记录的该帧图像数据中发生错误或丢失的条带数据的编号，将所述发生错误或丢失的条带数据设置多个优先级，根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复，然后将修复后的数据发送至所述第一数据端；以及

存储器，用于存储接收的所述第一数据端记录的发生错误或丢失的条带数据的编号、所述处理器设置的所述发生错误或丢失的条带数据的优先级、以及根据所述发生错误或丢失的条带数据的编号和优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的数据。

20.如权利要求19所述的基于H.264的视频数据传输的第二数据端，其特征在于，每个优先级包括至少一个发生错误或丢失的条带数据。

21.如权利要求20所述的基于H.264的视频数据传输的第二数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤包括：

所述第二数据端重新传输一帧图像；

所述第二数据端对所述重新传输的图像中的优先级最高的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；以及

所述第二数据端将编码后的所述重新传输的图像发送至所述第一数据端。

22.如权利要求21所述的基于H.264的视频数据传输的第二数据端，其特征在于，所述第二数据端根据所述发生错误或丢失的条带数据的编号及优先级对所述发生错误或丢失的条带数据的编号对应的条带数据进行修复的步骤还包括：

所述第二数据端再重新传输一帧图像；

所述第二数据端对所述再重新传输的一帧图像中的优先级为第二级的发生错误或丢失的条带数据的编号对应的至少一个条带数据采用帧内编码的方式进行编码；

所述第二数据端对所述再重新传输的一帧图像中的其他条带数据采用帧间预测的方式进行编码；

重复上述步骤，直至发生错误或丢失的条带数据的编号所对应的条带数据全部被修复；以及

所述第二数据端将编码后的所述再重新传输的图像发送至所述第一数据端。