CN102547376B - 一种视频数据传输方法、装置和系统 - Google Patents
一种视频数据传输方法、装置和系统 Download PDFInfo
- Publication number
- CN102547376B CN102547376B CN201010622564.0A CN201010622564A CN102547376B CN 102547376 B CN102547376 B CN 102547376B CN 201010622564 A CN201010622564 A CN 201010622564A CN 102547376 B CN102547376 B CN 102547376B
- Authority
- CN
- China
- Prior art keywords
- code stream
- enhancement layer
- code
- retransmit
- decoding end
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000005540 biological transmission Effects 0.000 title claims abstract description 21
- 238000012546 transfer Methods 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 6
- 238000012360 testing method Methods 0.000 claims description 4
- 230000003068 static effect Effects 0.000 abstract 1
- 230000003111 delayed effect Effects 0.000 description 12
- 230000008901 benefit Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000003044 adaptive effect Effects 0.000 description 4
- 238000011084 recovery Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Detection And Prevention Of Errors In Transmission (AREA)
Abstract
本发明公开了一种视频数据传输方法、装置和系统,该方法包括:解码端接收到P帧数据,并确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型,以及重传所述码流的视频质量要求或/和传输资源要求,判断是否需要重传所述码流;其中,所述P帧数据中包括对运动目标区域的宏块编码得到的基本层的码流,以及对背景静止区域的宏块编码得到的增强层的码流;所述解码端在判断需要重传所述码流时,发送重传所述码流的请求。通过使用本发明,可以提高视频数据传输的抗差错能力。
Description
技术领域
本发明涉及通信技术领域,特别是涉及一种视频数据传输方法、装置和系统。
背景技术
目前,通过互联网或无线网络进行的实时视频传输,经常会受到带宽抖动和高丢包率的困扰,导致网络拥塞、延迟增加和丢包等问题。可伸缩视频编码方案是一种解决传输过程中带宽波动的有效方法,可以将视频信号编码成基本层的码流和增强层的码流,当带宽不足时,只对基本层的码流进行传输和解码;当带宽变大时,可以传输和解码增强层的码流,以提高视频的解码质量。可伸缩视频编码能够适应网络带宽的波动,具备一定的抗误码能力,以及图像质量、时域、空域和解码复杂度的可伸缩能力。
当网络发生丢包或误码时,接收端通常采用错误隐藏方法恢复出图像,或者要求发送端重新发送丢失的数据包和发生过误码的数据包。接收端接收到发送端重传的数据包后,对数据包进行重新解码,得到重构图像。
在实现本发明的过程中,发明人发现现有技术至少存在如下问题:
采用错误隐藏方法恢复出重构图像时,重构图像质量差,且容易引起错误扩散;采用自动重传机制得到重构图像时,会占用大量的带宽资源,从而影响剩余图像的码流和质量,同时增加了传输延时。
发明内容
本发明的目的在于提供一种视频数据传输方法、装置和系统,以提高视频数据传输的抗差错能力,为此,本发明采用如下技术方案:
一种视频数据传输方法,包括:
解码端接收到P帧数据,并确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;
所述解码端在判断需要重传所述码流时,发送重传所述码流的请求。
一种解码端设备,其特征在于,包括:
接收模块,用于接收P帧数据;
判断模块,用于在确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;
重传请求模块,用于当所述判断模块判断需要重新传送所述码流时,发送重传所述码流的请求。
一种视频数据传输系统,包括:
编码端设备,用于在输入图像为P帧数据时,对所述输入图像进行运动目标检测,根据检测结果将所述输入图像分解为运动目标区域的宏块和背景静止区域的宏块,将所述运动目标区域的宏块和所述背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并传送给解码端设备,在接收到所述解码器发送的重传码流的请求时,向所述解码器重传所述码流;
解码端设备,用于接收P帧数据,在确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;在判断需要重传所述码流时,发送重传所述码流的请求。
本发明的上述实施例将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并在满足条件时请求重传发生丢包或误码的码流,可以有效地保证图像质量,能够自适应信道带宽的波动,减少传输延时,提高视频数据传输的抗差错能力。
附图说明
图1为本发明实施例中的视频数据传输方法流程图;
图2为本发明实施例中的视频数据传输系统的结构示意图;
图3为本发明实施例中的解码端设备的结构示意图。
具体实施方式
现有的可伸缩视频编码方案对整帧图像进行压缩,得到基本层的码流。在低码率的情况下,由于需要对整帧图像平均分配码字,因此,运动区域的图像质量不高,而人眼通常会关注运动区域的图像,导致人们感觉图像质量比较差。
为解决上述缺陷,本发明实施例将可伸缩视频编码和运动目标检测相结合,通过运动目标检测技术将输入图像分解为运动目标区域的宏块和背景静止区域的宏块,对运动目标区域的宏块和背景静止区域的宏块分别采用基本层编码技术和增强层编码技术,将运动目标区域的宏块中包含的图像信息集中在编码得到的基本层的码流中,并优先保护运动目标区域的图像信息的传输。
具体地,当网络带宽波动大或发生丢包时,向基本层的码流提供最高级别的保护和误码隐藏恢复,优先确保基本层的码流的重新传送。由于人眼通常会关注运动的物体,如果运动目标区域的图像信息能够正常恢复,人们会感觉图像质量变好。包含运动目标区域的图像信息的基本层的码流的数据量通常比较小,重传该码流时,对系统性能和带宽的影响较小。由于增强层的码流包含的背景静止区域的图像信息的重要性不如保护运动目标区域的图像信息,在对图像质量影响较小时,可以选择不重新传送。
下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,为本发明实施例中的视频数据传输方法流程图,包括以下步骤:
步骤101,编码端判断输入图像是I帧数据还是P帧数据,如果是I帧数据,则执行步骤102;如果是P帧数据,则执行步骤103。
步骤102,编码端将I帧数据编码成基本层的码流和增强层的码流,并传输给解码端。
具体地,编码端按照已有的编码方式对I帧数据进行压缩,将I帧数据编码成基本层和增强层的码流。当信道带宽小于预设阈值时,编码端只将基本层的码流传送给解码端;当信道带宽大于预设阈值时,编码端将基本层的码流和增强层的码流传送给解码端。
步骤103,编码端对输入图像进行运动目标检测,根据检测结果将输入图像分解为运动目标区域的宏块和背景静止区域的宏块。
具体地,编码端提取视频编码过程中产生的高精度的运动矢量场,对该运动矢量场进行统计分析,根据分析结果检测出运动目标区域的宏块和背景静止区域的宏块。
步骤104,编码端将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并传送给解码端。
具体地,当信道带宽小于预设阈值时,编码端只将基本层的码流传送给解码端;当信道带宽大于预设阈值时,编码端将基本层的码流和增强层的码流传送给解码端。
步骤105,当传输的码流发生丢包或误码时,编码端接收来自解码端的反馈信息。
其中,反馈信息包括重传码流的请求和接收成功信息。当基本层的码流发生丢包或误码时,解码端向编码端发送重新传送请求;当增强层的码流发生丢包或误码时,解码端采用错误隐藏方法恢复出重构图像,并判断是否需要重新传送增强层的码流。如果需要重新传送,解码端向编码端发送重新传送请求;如果不需要重新传送,解码端向编码端发送接收成功信息。
步骤106,编码端根据接收到的反馈信息判断是否向解码端重新传送码流,如果判断结果为是,则执行步骤107;否则,结束流程。
步骤107,编码端向解码端重新传送码流。
在上述步骤中,解码端接收到P帧数据,并确定该P帧数据中有码流发生丢包或误码时,可以根据发生丢包或误码的码流的类型,以及重传该码流的视频质量要求或/和传输资源要求,判断是否需要重传所述码流,在判断需要重传所述码流时,发送重传码流的请求;编码端将该码流重传给解码端。
其中,上述P帧数据中包括对运动目标区域的宏块编码得到的基本层的码流,以及对背景静止区域的宏块编码得到的增强层的码流。发生丢包或误码的码流为基本层的码流时,解码端可以判断需要重传该基本层的码流;发生丢包或误码的码流为增强层的码流时,解码端可以判断是否满足重传增强层的码流的视频质量要求或/和传输资源要求,如果满足,则需要重传该增强层的码流;否则,不需要重传该增强层的码流。
具体地,解码端可以在确定发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断满足重传增强层的码流的视频质量要求;也可以在确定重传发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断满足重传增强层的码流的传输资源要求。
信道的错误率(丢包率)与码流的重传次数有密切的关系,码流的每次重传需要耗费一定的信道带宽,在信道的错误率、信道带宽和传输延迟固定时,解码端的接收质量和传输码流过程中所用的信道带宽不仅和视频信源的失真度相关,还和错误恢复技术相关。视频信源的失真度越低,则解码端的接收质量越高,传输码流过程中所用的信道带宽越小;错误恢复后码流的失真度越低,则解码端的接收质量越高,传输码流过程中所用的信道带宽越小。
在综合考虑失真度、信道带宽和延时信息的情况下,解码端可以在确定发生丢包或误码的增强层的码流符合以下条件时,判断满足重传增强层的码流的视频质量要求和传输资源要求:
........................[1]
R0≤Bs
其中,Wec为增强层的码流的权重系数,可以根据增强层的码流的重要性进行调节;R0为包含了重传增强层的码流所需的系统带宽,即总体带宽资源;Bs=TmaxBw,Bw为增强层的码流的有效带宽,Tmax为预设的最大传输延迟时间。
Dec为增强层的码流在编码端的失真度,由编码端传输给解码端,可通过相邻两帧的图像像素值的均方误差表示,即,编码后增强层的码流的当前帧的重构图像的像素值与前一帧的重构图像的像素值的均方误差,可通过以下公式表示:
其中,M为重构图像的横向像素点数,N为重构图像的纵向像素点数,fe,k为编码端第k帧的重构图像的像素值。
Ddc为增强层的码流在解码端的失真度,可以是解码端进行错误恢复后的失真度,可通过相邻两帧的图像像素值的均方误差表示,即,错误恢复后增强层的码流的当前帧的重构图像的像素值与前一帧的重构图像的像素值的均方误差,可以通过以下公式表示:
其中,M为重构图像的横向像素点数,N为重构图像的纵向像素点数,fd,k为解码端第k帧的重构图像的像素值。
Tth为预设阈值,计算公式如下:
Tth=aD+e-βR,a=γe(p-1)R,
其中,D分别为视频数据传输的最终失真度,R为视频数据传输最终耗用的信道带宽,p为信道的错误率,γ为与信源相关的统计量,对于大多数的视频图像而言,可以看作常量。
当增强层的码流发生丢包或误码时,如果该码流满足公式[1]的条件,解码端确定错误恢复后的重构图像的失真度超出了容忍范围,且当前的带宽资源允许重传码流,则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在仅考虑失真度的情况下,解码端可通过以下公式判断是否需要重传增强层的码流:
|Dec-Ddc|≥Tth........................[5]
如果满足上述公式[5],则需要重传增强层的码流;否则,不需要重传增强层的码流。
在仅考虑信道带宽的情况下,解码端可通过以下公式判断是否需要重传增强层的码流:
........................[6]
R0≤Bs
如果满足上述公式[6],则需要重传增强层的码流;否则,不需要重传增强层的码流。
在仅考虑延时信息的情况下,如果重传码流后的延迟时间不大于增强层的码流的最大延迟时间Tmax,解码端判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑失真度和信道带宽的情况下,解码端可通过以下公式判断是否需要重传增强层的码流:
如果满足上述公式[7],则需要重传增强层的码流;否则,不需要重传增强层的码流。
在考虑失真度和延时信息的情况下,如果失真度满足公式[5]且重传码流后的延迟时间低于增强层的码流的最大延迟时间Tmax,解码端判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑信道带宽和延时信息的情况下,解码端可通过以下公式判断是否需要重传增强层的码流:
........................[8]
R0≤Bs
如果满足上述公式[8],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
需要说明的是,在本发明的其他实施方式中,若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流,解码端判断需要重传该基本层的码流;若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的增强层的码流,解码端判断不需要重传该增强层的码流,也可以实现本发明的发明目的。
本发明的实施例包括以下优点,因为将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并在满足条件时重传发生丢包或误码的码流,可以有效地保证图像质量,能够自适应信道带宽的波动,减少传输延时,提高视频数据传输的抗差错能力。当然,实施本发明的实施例的任一产品并不一定需要同时达到以上所述的所有优点。
根据上述实施方式中提供的视频数据传输方法,本发明实施例还提供了应用上述视频数据传输方法的系统和装置。
如图2所示,为本发明实施例中的视频数据传输系统的结构示意图,包括编码端设备210和解码端设备220,其中,
编码端设备210,用于在输入图像为P帧数据时,对该输入图像进行运动目标检测,根据检测结果将该输入图像分解为运动目标区域的宏块和背景静止区域的宏块,将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并传送给解码端设备,在接收到解码端设备220发送的重传码流的请求时,向解码端设备220重传该码流。
解码端设备220,用于接收P帧数据,在确定该P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型,以及重传该码流的视频质量要求或/和传输资源要求,判断是否需要重传该码流;在判断需要重传该码流时,发送重传该码流的请求。
具体地,上述解码端设备220,具体用于在发生丢包或误码的码流为基本层的码流时,判断需要重传该基本层的码流;在发生丢包或误码的码流为增强层的码流时,判断是否满足重传增强层的码流的视频质量要求或/和传输资源要求,如果满足,则需要重传该增强层的码流;否则,不需要重传该增强层的码流。
上述解码端设备220,可以在确定发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断满足重传增强层的码流的视频质量要求;也可以在确定重传发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断满足重传增强层的码流的传输资源要求。
在综合考虑失真度、信道带宽和延时信息的情况下,上述解码端设备220,还可以在确定发生丢包或误码的增强层的码流符合公式[1]时,判断满足重传增强层的码流的视频质量要求和传输资源要求。
在仅考虑信道带宽的情况下,解码端设备220可通过公式[6]判断是否需要重传增强层的码流,如果满足公式[6],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在仅考虑延时信息的情况下,如果重传码流后的延迟时间不大于增强层的码流的最大延迟时间Tmax,解码端设备220判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑失真度和信道带宽的情况下,解码端设备220可通过公式[7]判断是否需要重传增强层的码流,如果满足公式[7],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑失真度和延时信息的情况下,如果失真度满足公式[5]且重传码流后的延迟时间低于增强层的码流的最大延迟时间Tmax,解码端设备220判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑信道带宽和延时信息的情况下,解码设备端220可通过公式[8]判断是否需要重传增强层的码流,如果满足公式[8],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
需要说明的是,在本发明的其他实施方式中,若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流,解码端设备判断需要重传该基本层的码流;若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的增强层的码流,解码端设备判断不需要重传该增强层的码流,也可以实现本发明的发明目的。
本发明的实施例包括以下优点,因为将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并在满足条件时重传发生丢包或误码的码流,可以有效地保证图像质量,能够自适应信道带宽的波动,减少传输延时,提高视频数据传输的抗差错能力。当然,实施本发明的实施例的任一产品并不一定需要同时达到以上所述的所有优点。
如图3所示,为本发明实施例中的解码端设备的结构示意图,包括:
接收模块310,用于接收P帧数据。
其中,P帧数据中包括对运动目标区域的宏块编码得到的基本层的码流,以及对背景静止区域的宏块编码得到的增强层的码流。
判断模块320,用于在确定接收模块310接收到的P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型,以及重传该码流的视频质量要求或/和传输资源要求,判断是否需要重传所述码流。
重传请求模块330,用于当判断模块320判断需要重新传送所述码流时,发送重新码流的请求。
上述判断模块320,具体用于在发生丢包或误码的码流为基本层的码流时,判断需要重传该基本层的码流;在发生丢包或误码的码流为增强层的码流时,判断是否满足重传增强层的码流的视频质量要求或/和传输资源要求,如果满足,则需要重传该增强层的码流;否则,不需要重传该增强层的码流。
具体地,上述判断模块320可以在确定发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断满足重传增强层的码流的视频质量要求;也可以在确定重传发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断满足重传增强层的码流的传输资源要求。
在综合考虑失真度、信道带宽和延时信息的情况下,上述判断模块320,可以在确定发生丢包或误码的增强层的码流符合公式[1]时,判断满足重传增强层的码流的视频质量要求和传输资源要求。
在仅考虑信道带宽的情况下,判断模块320可通过公式[6]判断是否需要重传增强层的码流,如果满足公式[6],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在仅考虑延时信息的情况下,如果重传码流后的延迟时间不大于增强层的码流的最大延迟时间Tmax,判断模块320判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑失真度和信道带宽的情况下,判断模块320可通过公式[7]判断是否需要重传增强层的码流,如果满足公式[7],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑失真度和延时信息的情况下,如果失真度满足公式[5]且重传码流后的延迟时间低于增强层的码流的最大延迟时间Tmax,判断模块320判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
在考虑信道带宽和延时信息的情况下,判断模块320可通过公式[8]判断是否需要重传增强层的码流,如果满足公式[8],则判断需要重传增强层的码流;否则,判断不需要重传增强层的码流。
需要说明的是,在本发明的其他实施方式中,若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流,判断模块判断需要重传该基本层的码流;若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的增强层的码流,判断模块判断不需要重传该增强层的码流,也可以实现本发明的发明目的。
本发明的实施例包括以下优点,因为将运动目标区域的宏块和背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并在满足条件时重传发生丢包或误码的码流,可以有效地保证图像质量,能够自适应信道带宽的波动,减少传输延时,提高视频数据传输的抗差错能力。当然,实施本发明的实施例的任一产品并不一定需要同时达到以上所述的所有优点。
本领域技术人员可以理解实施例中的系统中的模块可以按照实施例描述进行分布于实施例的系统中,也可以进行相应变化位于不同于本实施例的一个或多个系统中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台终端设备(可以是手机,个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视本发明的保护范围。
Claims (13)
1.一种视频数据传输方法,其特征在于,包括:
解码端接收到P帧数据,并确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;
所述解码端在判断需要重传所述码流时,发送重传所述码流的请求;
其中,所述解码端根据发生丢包或误码的码流的类型判断是否需要重传所述码流,包括:
若发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流,则判断需要重传该基本层的码流;
若发生丢包或误码的码流为P帧数据中对背景静止区域的宏块编码得到的增强层的码流,则根据重传该增强层的码流的视频质量要求或/和传输资源要求,判断是否需要重传该增强层的码流。
2.如权利要求1所述的方法,其特征在于,所述解码端根据重传增强层的码流的视频质量要求,判断是否需要重传该增强层的码流,具体为:
所述解码端确定所述发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断需要重传该增强层的码流。
3.如权利要求1所述的方法,其特征在于,所述解码端根据重传增强层的码流的传输资源要求,判断是否需要重传该增强层的码流,具体为:
所述解码端确定重传所述发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断需要重传该增强层的码流。
4.如权利要求1所述的方法,其特征在于,所述解码端根据重传增强层的码流的传输资源要求和传输资源要求,判断是否需要重传该增强层的码流,具体为:
所述解码端确定所述发生丢包或误码的增强层的码流符合以下条件时,判断满足重传增强层的码流的视频质量要求和传输资源要求:
R0≤Bs
其中,wec为所述增强层的码流的权重系数;Dec为所述增强层的码流在编码端的失真度,Ddc为所述增强层的码流在解码端的失真度;R0为重传所述增强层的码流所需的系统带宽;Tth为预设阈值;Bs=TmaxBw,Bw为所述增强层的码流的有效带宽,Tmax为预设的最大传输延迟时间。
5.一种解码端设备,其特征在于,包括:
接收模块,用于接收P帧数据;
判断模块,用于在确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;
重传请求模块,用于当所述判断模块判断需要重新传送所述码流时,发送重传所述码流的请求;
其中,所述判断模块,具体用于在发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流时,判断需要重传该基本层的码流;在发生丢包或误码的码流为P帧数据中对背景静止区域的宏块编码得到的增强层的码流时,根据重传该增强层的码流的视频质量要求或/和传输资源要求,判断是否需要重传该增强层的码流。
6.如权利要求5所述的解码端设备,其特征在于,
所述判断模块,具体用于在确定所述发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断需要重传该增强层的码流。
7.如权利要求5所述的解码端设备,其特征在于,
所述判断模块,具体用于在确定重传所述发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断需要重传该增强层的码流。
8.如权利要求5所述的解码端设备,其特征在于,
所述判断模块,具体用于在确定所述发生丢包或误码的增强层的码流符合以下条件时,判断满足重传增强层的码流的视频质量要求和传输资源要求:
R0≤Bs
其中,wec为所述增强层的码流的权重系数;Dec为所述增强层的码流在编码端的失真度,Ddc为所述增强层的码流在解码端的失真度;R0为重传所述增强层的码流所需的系统带宽;Tth为预设阈值;Bs=TmaxBw,Bw为所述增强层的码流的有效带宽,Tmax为预设的最大传输延迟时间。
9.一种视频数据传输系统,其特征在于,包括:
编码端设备,用于在输入图像为P帧数据时,对所述输入图像进行运动目标检测,根据检测结果将所述输入图像分解为运动目标区域的宏块和背景静止区域的宏块,将所述运动目标区域的宏块和所述背景静止区域的宏块分别编码成基本层的码流和增强层的码流,并传送给解码端设备,在接收到所述解码端设备发送的重传码流的请求时,向所述解码端设备重传所述码流;
解码端设备,用于接收P帧数据,在确定所述P帧数据中有码流发生丢包或误码时,根据发生丢包或误码的码流的类型判断是否需要重传所述码流;在判断需要重传所述码流时,发送重传所述码流的请求。
10.如权利要求9所述的系统,其特征在于,
所述解码端设备,具体用于在发生丢包或误码的码流为P帧数据中对运动目标区域的宏块编码得到的基本层的码流时,判断需要重传该基本层的码流;在发生丢包或误码的码流为P帧数据中对背景静止区域的宏块编码得到的增强层的码流时,根据重传该增强层的码流的视频质量要求或/和传输资源要求,判断是否需要重传该增强层的码流。
11.如权利要求9所述的系统,其特征在于,
所述解码端设备,具体用于在确定所述发生丢包或误码的增强层的码流在编码端和解码端的失真度之间的差值的绝对值大于或等于第一预设门限时,判断需要重传该增强层的码流。
12.如权利要求9所述的系统,其特征在于,
所述解码端设备,具体用于在确定重传所述发生丢包或误码的增强层的码流所需的系统带宽小于或等于第二预设门限时,或/和,该增强层的码流在重传后的传输延迟时间小于或等于预设的最大传输延迟时间时,判断需要重传该增强层的码流。
13.如权利要求9所述的系统,其特征在于,
所述解码端设备,具体用于在确定所述发生丢包或误码的增强层的码流符合以下条件时,判断满足重传增强层的码流的视频质量要求和传输资源要求:
R0≤Bs
其中,wec为所述增强层的码流的权重系数;Dec为所述增强层的码流在编码端的失真度,Ddc为所述增强层的码流在解码端的失真度;R0为重传所述增强层的码流所需的系统带宽;Tth为预设阈值;Bs=TmaxBw,Bw为所述增强层的码流的有效带宽,Tmax为预设的最大延迟时间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010622564.0A CN102547376B (zh) | 2010-12-28 | 2010-12-28 | 一种视频数据传输方法、装置和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010622564.0A CN102547376B (zh) | 2010-12-28 | 2010-12-28 | 一种视频数据传输方法、装置和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102547376A CN102547376A (zh) | 2012-07-04 |
CN102547376B true CN102547376B (zh) | 2014-08-06 |
Family
ID=46353133
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010622564.0A Expired - Fee Related CN102547376B (zh) | 2010-12-28 | 2010-12-28 | 一种视频数据传输方法、装置和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102547376B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107277423B (zh) * | 2017-07-28 | 2020-10-09 | 北京小米移动软件有限公司 | 丢包重传的方法及装置 |
CN111225238A (zh) * | 2018-11-26 | 2020-06-02 | 华为技术有限公司 | 信息处理方法及相关设备 |
CN110149515B (zh) * | 2019-04-01 | 2021-06-04 | 西安万像电子科技有限公司 | 数据传输方法及装置 |
CN110996035B (zh) * | 2019-12-17 | 2021-11-02 | 紫光展讯通信(惠州)有限公司 | 信息发送方法及装置 |
CN111225243B (zh) * | 2020-01-20 | 2021-02-02 | 中南大学 | 一种视频块调度方法及系统 |
CN116114254A (zh) * | 2020-09-14 | 2023-05-12 | 华为技术有限公司 | 一种通信方法及装置 |
CN112422969A (zh) * | 2020-10-20 | 2021-02-26 | 西安万像电子科技有限公司 | 一种图像编解码方法及装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101188747A (zh) * | 2007-12-10 | 2008-05-28 | 上海华为技术有限公司 | 在无线通信系统中实现视频业务的方法及网元设备 |
CN101547159A (zh) * | 2009-05-13 | 2009-09-30 | 杭州华三通信技术有限公司 | 一种避免网络拥塞的方法和设备 |
CN101651826A (zh) * | 2008-08-15 | 2010-02-17 | 华为技术有限公司 | 发送和接收媒体的方法、装置以及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5224731B2 (ja) * | 2007-06-18 | 2013-07-03 | キヤノン株式会社 | 映像受信装置及び映像受信装置の制御方法 |
-
2010
- 2010-12-28 CN CN201010622564.0A patent/CN102547376B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101188747A (zh) * | 2007-12-10 | 2008-05-28 | 上海华为技术有限公司 | 在无线通信系统中实现视频业务的方法及网元设备 |
CN101651826A (zh) * | 2008-08-15 | 2010-02-17 | 华为技术有限公司 | 发送和接收媒体的方法、装置以及系统 |
CN101547159A (zh) * | 2009-05-13 | 2009-09-30 | 杭州华三通信技术有限公司 | 一种避免网络拥塞的方法和设备 |
Non-Patent Citations (2)
Title |
---|
基于多描述可分级编码的网络自适应视频传输;朱红 等;《宇航学报》;20050531;第26卷(第3期);第341页 * |
朱红 等.基于多描述可分级编码的网络自适应视频传输.《宇航学报》.2005,第26卷(第3期), |
Also Published As
Publication number | Publication date |
---|---|
CN102547376A (zh) | 2012-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102547376B (zh) | 一种视频数据传输方法、装置和系统 | |
CN107196746B (zh) | 实时通信中的抗丢包方法、装置和系统 | |
CN102036061B (zh) | 视频数据传输处理、发送处理方法、装置和网络系统 | |
US7747921B2 (en) | Systems and methods for transmitting data over lossy networks | |
CN101529901B (zh) | 视频特性的动态修改 | |
CN100568947C (zh) | 通信系统、终端设备和通信方法 | |
US20090103635A1 (en) | System and method of unequal error protection with hybrid arq/fec for video streaming over wireless local area networks | |
CN103024400B (zh) | 基于网络的视频压缩容错传输方法及系统 | |
CN101330609A (zh) | 一种多路径无线视频传输方法和系统 | |
CN111629210A (zh) | 一种数据处理的方法、装置及电子设备 | |
CN106488243A (zh) | 一种多描述屏幕内容视频编码方法 | |
Labiod et al. | Cross-layer scheme for low latency multiple description video streaming over Vehicular Ad-hoc NETworks (VANETs) | |
CN111263192A (zh) | 视频处理方法及相关设备 | |
CN101312536B (zh) | 一种用于视频传输差错控制的视频编码方法及装置 | |
CN105376614A (zh) | 视频质量优化方法和装置 | |
EP1856839B1 (en) | Ip multicast streaming data error correction | |
CN110572721B (zh) | 视频传输方法和装置 | |
Trioux et al. | A comprehensive theoretical evaluation of the end-to-end performance of SoftCast-based linear video delivery schemes | |
US7395486B2 (en) | Image communication system using a hierarchical code comprised of a plurality of layers | |
US9036658B2 (en) | Apparatus and method for transmitting/receiving data in communication system | |
CN103051902B (zh) | 用以提供数字视频内容错误复原的方法 | |
CN113489644A (zh) | 一种医疗光学成像系统用数据信息传输方法 | |
Lee et al. | High quality, low delay foveated visual communications over mobile channels | |
Lee et al. | Low delay foveated visual communications over wireless channels | |
CN112165655B (zh) | 基于视联网的数据传输方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20140806 |
|
CF01 | Termination of patent right due to non-payment of annual fee |