CN108377359B - 视频抗误码方法、装置、电子设备、存储介质 - Google Patents

视频抗误码方法、装置、电子设备、存储介质 Download PDF

Info

Publication number
CN108377359B
CN108377359B CN201810209150.1A CN201810209150A CN108377359B CN 108377359 B CN108377359 B CN 108377359B CN 201810209150 A CN201810209150 A CN 201810209150A CN 108377359 B CN108377359 B CN 108377359B
Authority
CN
China
Prior art keywords
pixel
pixel block
frame image
pixels
error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810209150.1A
Other languages
English (en)
Other versions
CN108377359A (zh
Inventor
叶良平
肖楚然
郇海龙
苏安明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Keda Technology Co Ltd
Original Assignee
Suzhou Keda Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Keda Technology Co Ltd filed Critical Suzhou Keda Technology Co Ltd
Priority to CN201810209150.1A priority Critical patent/CN108377359B/zh
Publication of CN108377359A publication Critical patent/CN108377359A/zh
Application granted granted Critical
Publication of CN108377359B publication Critical patent/CN108377359B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种视频抗误码方法、装置、电子设备、存储介质,视频抗误码方法包括:将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素;对视频中的每一帧图像执行抗误码的步骤,抗误码的步骤包括:根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;根据当前帧图像的误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的待替换误码像素块。本发明提供的方法及设备改善由于误码引起的播放异常。

Description

视频抗误码方法、装置、电子设备、存储介质
技术领域
本发明涉及视频处理,尤其涉及一种视频抗误码方法、装置、电子设备、存储介质。
背景技术
随着计算机网络的蓬勃发展,方便快捷的信息沟通和协作方式成为了网络技术研究和发展的热点。视频会议系统作为一种新型的通信和交流工具,突破了地域的限制,可以提供更为便捷灵活全面的音视频信号的传递和服务,得到了广泛的应用。
视频的用处越来越广泛,视频会议逐渐成为一种不可或缺的潮流。然而对于视频会议的质量是用户对于视频会议产品的重要定位标准。然而,视频会议中通常会产生误码的情况。误码的产生是由于在信号传输中,衰变改变了信号的电压,致使信号在传输中遭到破坏,产生误码。噪音、交流电或闪电造成的脉冲、传输设备故障及其他因素都会导致误码。误码会严重影响视频的质量尤其是视频会议的质量。
如何改善误码问题,让视频质量更加完善是本领域亟待解决的问题。
发明内容
本发明为了克服上述现有技术存在的缺陷,提供一种视频抗误码方法、装置、电子设备、存储介质,其改善由于误码引起的播放异常。
根据本发明的一个方面,提供一种视频抗误码方法,包括:将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素;对视频中的每一帧图像执行抗误码的步骤,所述抗误码的步骤包括:根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;以及将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
可选地,所述根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块之前,所述抗误码的步骤还包括:
根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果确定当前帧图像是否存在所述误码像素块;
若不存在,则将下一帧图像作为当前帧图像执行抗误码的步骤。
可选地,所述根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果确定当前帧图像是否存在所述误码像素块的步骤包括:
对当前帧图像的各个像素块,获取当前像素块及其相邻像素块至少部分像素的像素平均值;
若当前像素块与其相邻像素块的像素平均值之差超过第一预定阈值,则判断当前像素块与其相邻像素块不关联;
若当前像素块与其相邻像素块不关联的数量大于第二预定阈值,则确定当前帧图像存在所述误码像素块,所述第二预定阈值为大于等于1的整数。
可选地,所述获取当前像素块及其相邻像素块至少部分像素的像素平均值的步骤包括:
获取当前像素块相邻于其相邻像素块的多个像素的像素平均值;以及
获取其相邻像素块相邻于当前像素块的多个像素的像素平均值。
可选地,所述根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块的步骤包括:
当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值之差超过第三预定阈值的关联像素数量;
根据对应各各像素块的关联像素数量计算平均关联像素数量;
若存在对应一像素块的关联像素数量小于所述平均关联像素数量,且对应该像素块的关联像素数量与所述平均关联像素数量之差超过第四预定阈值,则将该像素块确定为与其相邻帧图像对应位置的像素块不关联的像素块。
可选地,所述根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块的步骤包括:
将所述误码像素块加入准待替换误码像素块;
判断所述准待替换误码像素块的相邻像素块与其相邻帧图像对应位置的像素块是否关联;
若不关联,则将该相邻像素块加入所述准待替换误码像素块并再次执行判断所述准待替换误码像素块的相邻像素块与其相邻帧图像对应位置的像素块是否关联的步骤;
若关联,则将所述准待替换误码像素块作为所述待替换误码像素块。
可选地,所述根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块的步骤之后,所述根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块的步骤之前包括:
在与当前帧图像相邻的多个相邻帧图像中确定一相邻帧图像,该相邻帧图像与将当前帧图像的边缘相似度最高。
根据本发明的又一方面,还提供一种视频抗误码装置,包括:
划分模块,用于将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素;
抗误码模块,用于对视频中的每一帧图像执行抗误码的步骤,所述抗误码的步骤包括:
根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;
根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;以及
将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
根据本发明的又一方面,还提供一种电子设备,所述电子设备包括:处理器;存储介质,其上存储有计算机程序,所述计算机程序被所述处理器运行时执行如上所述的步骤。
根据本发明的又一方面,还提供一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如上所述的步骤。
由此可见,本发明提供的方案,与现有技术相比,具有如下优势:
1)通过像素块的像素值确定视频码流帧之间的像素块的关联性,并由此确定产生误码的位置,从而根据误码的位置从未误码的帧中找到对应位置进行替换,以改善由误码引起的播放异常,提高视频质量;
2)在通过相邻帧图像判断误码位置之前,通过当前帧图像的相邻像素块的像素值的关联性判断当前帧是否存在误码,仅对存在误码的帧图像进行操作,减少相邻帧图像的像素块的关联对比的计算量;
3)通过自误码位置的像素块开始向外扩散直到与相邻帧图像的对应位置处的像素块关联的像素块为止,确定待替换误码像素块,可精确确定误码区域的大小,进一步提高替换后的视频质量。
附图说明
通过参照附图详细描述其示例实施方式,本发明的上述和其它特征及优点将变得更加明显。
图1示出了根据本发明实施例的视频抗误码方法的流程图。
图2示出了根据本发明实施例的对每一帧图像的抗误码步骤的流程图。
图3示出了根据本发明实施例的确定当前帧图像是否存在误码像素块的流程图。
图4示出了根据本发明实施例的确定相邻帧图像的不关联像素块的流程图。
图5示出了根据本发明实施例的确定待替换误码像素块的流程图。
图6示出了根据本发明实施例的视频抗误码装置的示意图。
图7示意性示出本公开示例性实施例中一种计算机可读存储介质示意图。
图8示意性示出本公开示例性实施例中一种电子设备示意图。
具体实施方式
现在将第二附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的实施方式;相反,提供这些实施方式使得本发明将全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的结构,因而将省略对它们的重复描述。
为了克服上述现有技术存在的缺陷,本发明提供一种视频抗误码方法、电子设备、存储介质。
首先参见图1,图1示出了根据本发明实施例的视频抗误码方法的流程图。图1示出了如下步骤:
步骤S110:将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素。
具体而言,像素块的大小例如可以是16像素*16像素、32像素*16像素、32像素*32像素、64像素*16像素、64像素*32像素。本发明并不以像素块的大小和像素块的形状为限制。像素块的大小根据不同的视频播放设备的分辨率而有所不同,例如,视频播放设备的分辨率越大,像素块的大小越大;又例如像素块的形状与视频播放设备的屏幕形状相同。上述描述仅仅是示意性的,本发明并非以此为限。
步骤S120:对视频中的每一帧图像执行抗误码的步骤。所述抗误码的步骤包括:
步骤S122:根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块。
步骤S123:根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块。
步骤S124:将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
具体而言,在步骤S123和步骤S124中用于对比和替换的相邻帧图像可以简单的获取误码所在帧的上一帧或者下一帧。可以理解,尽管每一帧都有很大的关联性,但是相似程度还是有高有低的。在步骤S123之前,步骤S122之后可选择相似度最高的帧来进行切换,才能更有效的提高视频的质量。
在一个实施例中,可以选取帧图像相似度最高的相邻帧图像作为用于对比和替换的相邻帧图像。图像相似度的算法并非本发明的重点,在此不予赘述。在又一些实施例中,还可以取误码像素块周边的像素块来和前后帧相应位置来进行比较,并选取边缘相似度最大的帧来作为即将进行误码像素块替换的帧。具体而言,边缘相似度根据如下方式计算,相邻帧的边缘像素点依次比较(取差的绝对值),然后将比较的值取和,和越小,则边缘相似度越高。
进一步地,每一帧图像的像素之间都存在一定的相似处。根据这种相似性,对每一帧图像的像素块的像素的像素值进行相互比较,如果判断出某一个帧中存在像素块与其前后的帧存在突兀性变化,则可判定该帧中存在误码并且可根据像素块的位置确定误码位置。
下面参见图2,图2示出了根据本发明实施例的对每一帧图像的抗误码步骤的流程图。图2共示出5个步骤
步骤S121:根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果确定当前帧图像是否存在所述误码像素块。
具体而言,步骤S121可以根据相邻像素块之间进行对应位置的像素值比较,获得对应像素块的多个差值(两个像素块对应位置处的像素值的差值的绝对值),根据去掉一个最大值和最小值取平均数的方法获得一参照值。若多个差值中大于该参照值的数量大于预定数量(例如像素块中像素数量的30%、50%或80%),则去顶当前帧图像存在所述误码像素块。
若存在,则继续执行步骤S122,若不存在,则执行步骤S125。
步骤S122:根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块。
步骤S123:根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块。
步骤S124:将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
可选地,所述根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块之前还包括:
根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果确定当前帧图像是否存在所述误码像素块;
步骤S125:将下一帧图像作为当前帧图像。
具体而言,误码可能有俩种情况;一种是某一段码字完全被映射为一段无法识别的码字。对于这种误码很好识别,解码器可以立刻识别到;还有一种是某一段码字被映射为另一段合法的码字。对于这种,由于其码字依旧合法,所以解码器无法立刻识别。本发明通过上述步骤S121可以高效得识别这样的误码。更具体地,在像素域上可以通过相邻像素之间有很大的关联来定位。如果有相邻的像素块之间对于没有任何关联,我们确定该帧图像产生误码。此外,在对相邻帧图像的像素块进行像素值对比之前,仅对当前帧图像的像素块的像素的像素值进行处理,可以减少多余的计算量。
具体而言,本发明通过如图3所示的步骤确定当前帧图像是否存在误码像素块。图3示出了3个步骤:
步骤S210:对当前帧图像的各个像素块,获取当前像素块及其相邻像素块至少部分像素的像素平均值。
具体而言,步骤S210包括获取当前像素块相邻于其相邻像素块的多个像素的像素平均值以及获取其相邻像素块相邻于当前像素块的多个像素的像素平均值。换言之,步骤S210可获取相邻像素块相接处边缘的一行或多行像素的像素平均值。在一些变化例中,步骤S210也可以获取当前像素块及其相邻像素块全部像素的像素平均值。
步骤S220:若当前像素块与其相邻像素块的像素平均值之差超过第一预定阈值,则判断当前像素块与其相邻像素块不关联。
具体而言,所述第一预定阈值例如可以大于最大像素值的二分之一。最大像素值例如可以是255,则第一预定阈值可以设置为大于122.5的值,以表示当前像素块与其相邻像素块的像素值差异很大。本发明并非以此为限。
步骤S230:若当前像素块与其相邻像素块不关联的数量大于第二预定阈值,则确定当前帧图像存在所述误码像素块,所述第二预定阈值为大于等于1的整数。
在一些实施例中,当存在当前像素块与其相邻像素块不关联的情况即可判断当前帧图像存在所述误码像素块。在有一些实施例中,为了防止误判,增大第二预定阈值,例如可以使第二预定阈值为5、10、15等。第二预定阈值的确定可以根据一帧图像的像素块总数来定,例如第二预定阈值可以是像素块总数的二十分之一、三十分之一、四十分之一等等。
在确定存在误码后,需要对误码位置进行确定。对于无法识别的码字我们很容易就可以定位到发生的位置。一串码流中,有一块码字无法识别,那么该位置很显然就是误码发生的位置。要做的是对该位置进行误码的修正。但是对于另一种误码的字被映射为另一段合法的码字来说,定位就要困难点。若仅对当前帧图像的像素块进行分析,由于没有参照,因此,其定位准确度较低。
本发明可以通过如图4所示的方式确定图1中的步骤S122来实现误码像素块的定位。图4供示出了3个步骤:
步骤S310:当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值之差超过第三预定阈值的关联像素数量。
具体而言,所述第三预定阈值小于最大像素值的十分之一,以表明该两个像素的像素值相接近。
步骤S320:根据对应各各像素块的关联像素数量计算平均关联像素数量。
步骤S330:若存在对应一像素块的关联像素数量小于所述平均关联像素数量,且对应该像素块的关联像素数量与所述平均关联像素数量之差超过第四预定阈值,则将该像素块确定为与其相邻帧图像对应位置的像素块不关联的像素块。
具体而言,步骤S330可以找到远小于大多数像素块的关联像素数量的像素块,以此说明该像素块与其相邻帧对应位置的像素块的关联性最小,由此可以将其确定为误码像素块。
可以理解,每一次误码的产生都是不确定的。这个不确定包括大小的不确定,那么对于替换误码块的大小需要进行精确的判断。大小的判断依旧利用像素点的关联性。
本发明可以以定位的误码像素块为中心,向边缘扩散,依次与其相邻帧图像(或根据图像相似度确定的相邻帧)所对应的位置进行像素块比较。如果比较结果为没有很大的关联性,则继续扩散。如果比较的结果为有较强的关联性,则停止扩散。将误码帧中的扩散范围像素块替换为筛选帧中的像素块。具体而言,上述步骤即步骤123可以包括如图5所示的步骤:
步骤S410:将所述误码像素块加入准待替换误码像素块。
步骤S420:判断所述准待替换误码像素块的相邻像素块与其相邻帧图像对应位置的像素块是否关联。
若不关联,则执行步骤S430:将该相邻像素块加入所述准待替换误码像素块并再次执行判断所述准待替换误码像素块的相邻像素块与其相邻帧图像对应位置的像素块是否关联的步骤。
若关联,则执行步骤S440:则将所述准待替换误码像素块作为所述待替换误码像素块,并继续执行步骤S420。
可以理解,此处所述的关联指的是,准待替换误码像素块的所有相邻像素块与其相邻帧图像对应位置的像素块全部关联。若仅部分准待替换误码像素块的相邻像素块与其相邻帧图像对应位置的像素块关联,则针对不关联的相邻像素块继续执行上述步骤S440。
在一些具体实施例中,可以根据误码像素块的误码率来限定待替换像素块的扩散范围的实施例。例如,误码像素块中不关联像素越多,限定扩散范围越大,误码像素块中不关联像素越少,限定扩散范围越小,以减少误判和数据处理。同时,这样处理还可以减少防止多个误码块扩散重合所产生的系统运行效率过低的问题。
以上仅仅是示意性地示出本发明的多个实施例,本发明并非以此为限。
图6示出了根据本发明实施例的视频抗误码装置的示意图。视频抗误码装置500包括划分模块510及抗误码模块520。
划分模块510用于将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素。抗误码模块520用于对视频中的每一帧图像执行抗误码的步骤。所述抗误码的步骤包括:根据当前帧图像各像素块的像素的像素值及其相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;根据当前帧图像的所述误码像素块周围的像素块与其相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;以及将与待替换误码像素块的对应位置的相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
在本公开的示例性实施例中,还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被例如处理器执行时可以实现上述任意一个实施例中所述电子处方流转处理方法的步骤。在一些可能的实施方式中,本发明的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。
参考图7所示,描述了根据本发明的实施方式的用于实现上述方法的程序产品800,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在租户计算设备上执行、部分地在租户设备上执行、作为一个独立的软件包执行、部分在租户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到租户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
在本公开的示例性实施例中,还提供一种电子设备,该电子设备可以包括处理器,以及用于存储所述处理器的可执行指令的存储器。其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一个实施例中所述电子处方流转处理方法的步骤。
所属技术领域的技术人员能够理解,本发明的各个方面可以实现为系统、方法或程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
下面参照图8来描述根据本发明的这种实施方式的电子设备600。图8显示的电子设备600仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示,电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于:至少一个处理单元610、至少一个存储单元620、连接不同系统组件(包括存储单元620和处理单元610)的总线630、显示单元640等。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元610执行,使得所述处理单元610执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。例如,所述处理单元610可以执行如图1至图5中任一图中所示的步骤。
所述存储单元620可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)6201和/或高速缓存存储单元6202,还可以进一步包括只读存储单元(ROM)6203。
所述存储单元620还可以包括具有一组(至少一个)程序模块6205的程序/实用工具6204,这样的程序模块6205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线630可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备600也可以与一个或多个外部设备700(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得租户能与该电子设备600交互的设备通信,和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口650进行。并且,电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。网络适配器660可以通过总线630与电子设备600的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备600使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、或者网络设备等)执行根据本公开实施方式的上述电子处方流转处理方法。
由此可见,本发明提供的方案,与现有技术相比,具有如下优势:
1)通过像素块的像素值确定视频码流帧之间的像素块的关联性,并由此确定产生误码的位置,从而根据误码的位置从未误码的帧中找到对应位置进行替换,以改善由误码引起的播放异常,提高视频质量;
2)在通过相邻帧图像判断误码位置之前,通过当前帧图像的相邻像素块的像素值的关联性判断当前帧是否存在误码,仅对存在误码的帧图像进行操作,减少相邻帧图像的像素块的关联对比的计算量;
3)通过自误码位置的像素块开始向外扩散直到与相邻帧图像的对应位置处的像素块关联的像素块为止,确定待替换误码像素块,可精确确定误码区域的大小,进一步提高替换后的视频质量。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由所附的权利要求指出。

Claims (10)

1.一种视频抗误码方法,其特征在于,包括:
将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素;
对视频中的每一帧图像执行抗误码的步骤,所述抗误码的步骤包括:
根据当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其时序相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;
根据当前帧图像的所述误码像素块周围的像素块与其时序相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;以及
将与待替换误码像素块的对应位置的时序相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
2.如权利要求1所述的视频抗误码方法,其特征在于,所述根据当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其时序相邻帧图像对应位置的像素块不关联的像素块作为误码像素块之前,所述抗误码的步骤还包括:
根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果判断当前帧图像是否存在所述误码像素块;
若不存在,则将下一帧图像作为当前帧图像执行抗误码的步骤。
3.如权利要求2所述的视频抗误码方法,其特征在于,所述根据当前帧图像各像素块的像素的像素值执行当前帧图像中各相邻像素块的关联对比,并根据各相邻像素块的关联对比结果判断当前帧图像是否存在所述误码像素块的步骤包括:
对当前帧图像的各个像素块,获取当前像素块及其相邻像素块至少部分像素的像素平均值;
若当前像素块与其相邻像素块的像素平均值之差超过第一预定阈值,则判断当前像素块与其相邻像素块不关联;
若当前像素块与其相邻像素块不关联的数量大于第二预定阈值,则确定当前帧图像存在所述误码像素块,所述第二预定阈值为大于等于1的整数。
4.如权利要求3所述的视频抗误码方法,其特征在于,所述获取当前像素块及其相邻像素块至少部分像素的像素平均值的步骤包括:
获取当前像素块相邻于其相邻像素块的多个像素的像素平均值;以及
获取其相邻像素块相邻于当前像素块的多个像素的像素平均值。
5.如权利要求1所述的视频抗误码方法,其特征在于,所述根据当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其时序相邻帧图像对应位置的像素块不关联的像素块作为误码像素块的步骤包括:
当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值之差超过第三预定阈值的关联像素数量;
根据对应各各像素块的关联像素数量计算平均关联像素数量;
若存在对应一像素块的关联像素数量小于所述平均关联像素数量,且对应该像素块的关联像素数量与所述平均关联像素数量之差超过第四预定阈值,则将该像素块确定为与其时序相邻帧图像对应位置的像素块不关联的像素块。
6.如权利要求1至5任一项所述的视频抗误码方法,其特征在于,所述根据当前帧图像的所述误码像素块周围的像素块与其时序相邻帧图像对应位置的像素块的关联性确定待替换误码像素块的步骤包括:
将所述误码像素块加入准待替换误码像素块;
判断所述准待替换误码像素块的相邻像素块与其时序相邻帧图像对应位置的像素块是否关联;
若不关联,则将该相邻像素块加入所述准待替换误码像素块并再次执行判断所述准待替换误码像素块的相邻像素块与其时序相邻帧图像对应位置的像素块是否关联的步骤;
若关联,则将所述准待替换误码像素块作为所述待替换误码像素块。
7.如权利要求1至5任一项所述的视频抗误码方法,其特征在于,所述根据当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其时序相邻帧图像对应位置的像素块不关联的像素块作为误码像素块的步骤之后,所述根据当前帧图像的所述误码像素块周围的像素块与其时序相邻帧图像对应位置的像素块的关联性确定待替换误码像素块的步骤之前包括:
在与当前帧图像相邻的多个时序相邻帧图像中确定一时序相邻帧图像,该时序相邻帧图像与将当前帧图像的边缘相似度最高。
8.一种视频抗误码装置,其特征在于,包括:
划分模块,用于将视频中的每一帧图像划分为多个像素块,每一像素块包括多个像素;
抗误码模块,用于对视频中的每一帧图像执行抗误码的步骤,所述抗误码的步骤包括:
根据当前帧图像各像素块的像素的像素值及其时序相邻帧图像对应位置的像素块的像素的像素值将当前帧图像中与其时序相邻帧图像对应位置的像素块不关联的像素块作为误码像素块;
根据当前帧图像的所述误码像素块周围的像素块与其时序相邻帧图像对应位置的像素块的关联性确定待替换误码像素块;以及
将与待替换误码像素块的对应位置的时序相邻帧图像的像素块替换当前帧图像的所述待替换误码像素块。
9.一种电子设备,其特征在于,所述电子设备包括:
处理器;
存储介质,其上存储有计算机程序,所述计算机程序被所述处理器运行时执行如权利要求1至7任一项所述的视频抗误码方法。
10.一种存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至7任一项所述的视频抗误码方法。
CN201810209150.1A 2018-03-14 2018-03-14 视频抗误码方法、装置、电子设备、存储介质 Active CN108377359B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810209150.1A CN108377359B (zh) 2018-03-14 2018-03-14 视频抗误码方法、装置、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810209150.1A CN108377359B (zh) 2018-03-14 2018-03-14 视频抗误码方法、装置、电子设备、存储介质

Publications (2)

Publication Number Publication Date
CN108377359A CN108377359A (zh) 2018-08-07
CN108377359B true CN108377359B (zh) 2020-08-04

Family

ID=63018721

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810209150.1A Active CN108377359B (zh) 2018-03-14 2018-03-14 视频抗误码方法、装置、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN108377359B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110290398B (zh) * 2019-06-21 2021-11-05 北京字节跳动网络技术有限公司 视频下发方法、装置、存储介质及电子设备
CN110278485B (zh) * 2019-07-29 2021-04-23 北京华雨天成文化传播有限公司 一种评估视频质量的方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002185963A (ja) * 1994-11-29 2002-06-28 Sanyo Electric Co Ltd Mpegビデオデコーダ
CN101360246A (zh) * 2008-09-09 2009-02-04 西南交通大学 结合3d人脸模型的视频差错掩盖方法
CN101715139A (zh) * 2009-11-16 2010-05-26 南京邮电大学 立体图像中基于互补掩盖方式的多模式误码掩盖方法
CN104486628A (zh) * 2014-12-30 2015-04-01 华中科技大学 一种具有抗误码机制的帧间无损编码与智能解码方法
CN107277549A (zh) * 2017-06-07 2017-10-20 南京邮电大学 一种基于纹理角度预测模式的hevc帧内编码帧差错掩盖方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002185963A (ja) * 1994-11-29 2002-06-28 Sanyo Electric Co Ltd Mpegビデオデコーダ
CN101360246A (zh) * 2008-09-09 2009-02-04 西南交通大学 结合3d人脸模型的视频差错掩盖方法
CN101715139A (zh) * 2009-11-16 2010-05-26 南京邮电大学 立体图像中基于互补掩盖方式的多模式误码掩盖方法
CN104486628A (zh) * 2014-12-30 2015-04-01 华中科技大学 一种具有抗误码机制的帧间无损编码与智能解码方法
CN107277549A (zh) * 2017-06-07 2017-10-20 南京邮电大学 一种基于纹理角度预测模式的hevc帧内编码帧差错掩盖方法

Also Published As

Publication number Publication date
CN108377359A (zh) 2018-08-07

Similar Documents

Publication Publication Date Title
CN112115706B (zh) 文本处理方法、装置、电子设备及介质
US9609338B2 (en) Layered video encoding and decoding
US20180150696A1 (en) Detection of logos in a sequence of video frames
CN110363748B (zh) 关键点的抖动处理方法、装置、介质及电子设备
CN109446061B (zh) 一种页面检测方法、计算机可读存储介质及终端设备
CN108491845B (zh) 字符分割位置的确定、字符分割方法、装置及设备
CN111327913B (zh) 消息处理方法、装置及电子设备
CN108377359B (zh) 视频抗误码方法、装置、电子设备、存储介质
CN111325096A (zh) 直播流采样方法、装置及电子设备
CN111836118A (zh) 视频处理方法、装置、服务器及存储介质
CN111145202A (zh) 模型生成方法、图像处理方法、装置、设备及存储介质
US20190035092A1 (en) Surveillance method and computing device using the same
CN110888791A (zh) 一种日志处理方法、装置、设备和存储介质
US9529489B2 (en) Method and apparatus of testing a computer program
US7995901B2 (en) Facilitating video clip identification from a video sequence
CN112069797B (zh) 一种基于语义的语音质检方法和装置
CN111010606B (zh) 视频处理方法和装置
CN111050179B (zh) 一种视频转码方法及装置
US8929461B2 (en) Method and apparatus for caption detection
JP2019021183A (ja) 機械学習システム、識別システム及びプログラム
US11375192B2 (en) Coding unit division decision method and device, encoder, and storage medium
CN111091118A (zh) 图像的识别方法、装置及电子设备和存储介质
CN113435328B (zh) 视频片段处理方法、装置、电子设备及可读存储介质
CN115510849A (zh) 文本纠错方法、装置、电子设备及计算机可读存储介质
CN114241471B (zh) 视频文本识别方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant