CN101370144B - 视频数据的传输方法、系统以及发送和接收的方法、装置 - Google Patents
视频数据的传输方法、系统以及发送和接收的方法、装置 Download PDFInfo
- Publication number
- CN101370144B CN101370144B CN 200710120370 CN200710120370A CN101370144B CN 101370144 B CN101370144 B CN 101370144B CN 200710120370 CN200710120370 CN 200710120370 CN 200710120370 A CN200710120370 A CN 200710120370A CN 101370144 B CN101370144 B CN 101370144B
- Authority
- CN
- China
- Prior art keywords
- sdu
- image head
- gob
- receiving terminal
- comprises image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Detection And Prevention Of Errors In Transmission (AREA)
Abstract
本发明公开了一种视频数据的传输方法,包括:发送端将一帧视频对应的每个GOB完整的装入AL-SDU中;发送端将所述AL-SDU复用后发送给接收端;接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传;接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。本发明还公开了视频数据的发送方法、接收方法、传输系统、发送装置和接收装置。利用本发明,可以避免AL-SDU分割GOB的情况,从而避免了GOB解码的混乱,并降低重要数据的丢失,以减少接收端出现大面积马赛克或灰块的情况。
Description
技术领域
本发明涉及视频通信技术领域,特别涉及一种视频数据的传输方法、系统以及发送和接收的方法、装置。
背景技术
随着现代通信技术和业务的发展,人们对通信的需求已经由最初的单一语音需求转变为对视频和音频的通信需求,以传送语音、数据、视频为一体的视频通信业务成为通信领域发展的热点。
如H.324/M国际标准就是一个可以在无线电路交换网络支持实时的、包括视频和音频的多媒体服务应用。该标准包含的几个子协议标准是:语音、视频、用户数据和控制数据的多路复用和分离(H.223)等。
第三代合作伙伴计划(3rd Generation Partnership project,3GPP)采纳H.324M作为3G网络视频传输的一个标准。其中,可以采用H.263作为视频编码标准,AMR作为音频编码标准,H.223协议作为数据适配和复用的标准,并可以采用H.245作为指示数据传输相关信息的标准。视频数据的处理和传输原理如图1所示。如图1,视频输入输出设备输入视频数据到3G324M协议栈,由其中的视频编解码器进行编码,由H.223协议栈进行适配和复用,并由H.245协议栈添加相关指示信息后,由3G信道发送出去。其中,根据3G324M协议的规定,3G信道建议采用CS64K信道传输。音频数据的处理和发送与上面过程类似。反向数据的接收和处理与上面过程相反。
以下以视频电话为例,说明现有技术中视频数据的传输方法,如图2所示,包括:
步骤201:发送端将原始图像进行编码,并将编码后的视频帧放入缓冲区中。
一帧视频被分割为互不重叠的矩形块,称为宏块。该步骤中,是对宏块进行编码。宏块是视频编码的最小单位。
步骤202:发送端从缓冲区中取出一段数据,作为H223的适配层数据,即H223的适配层服务数据单元(Adaptation Layer-Service Data Unit,AL-SDU)。
AL-SDU的大小是可变的,AL-SDU中可能包括完整的块组(Group ofBlocks,GOB),也可能包括不完整的GOB。所述的GOB是指若干个宏块的集合,例如包括一行或多行宏块,而且,GOB的大小是可变的,但每个GOB都包括GOB头和GOB数据两部分。GOB头中包含了该GOB数据部分的信息,例如该GOB数据部分的长度信息。而在GOB数据部分才是包含若干个经过编码的宏块。
一帧图像对应的一系列AL-SDU中,第一个AL-SDU的头部应该包括该帧图像的图像头。
这里为了说明简单,假设AL-SDU固定的为200字节长,每个GOB头固定为20字节长,且GOB1数据为60字节长,GOB2数据为40字节长,GOB3数据为60字节长,GOB4数据为80字节长,GOB5数据为60字节长,GOB6数据为80字节长,GOB7数据为60字节长。则,AL-SDU和GOB的关系可以如图3所示:
AL-SDU1是一帧图像的第一个AL-SDU,其最前面的40个字节为该帧的图像头;GOB按照编号顺序排列。按照这一规律,GOB3的头在AL-SDU1中,而GOB3的数据在AL-SDU2中,而GOB5的数据有20字节在AL-SDU2中,两外40字节在AL-SDU3中。即前面所述的AL-SDU中可能包括完整的GOB,也可能包括不完整的GOB。换句话说,存在GOB被分割的情况。
步骤203:发送端将经H223适配的各个数据(例如包括视频数据和音频数据)的AL-SDU复用(H223MUX)后,通过3G信道发送给接收端。
步骤204:接收端将接收到的数据解复用(H223DEMUX)后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将有误码的AL-SDU丢弃,将正确的AL-SDU放入到缓冲队列中。
步骤205:接收端从缓冲队列获取视频AL-SDU并解码。
这样,就完成了视频数据的处理和传输。
但是,上述过程中,由于存在GOB被分割的情况,则如果某个AL-SDU由于某种原因丢失,例如由于产生误码而丢弃,则,不仅该丢失的AL-SDU中包含的GOB不能显示,还很有可能使该AL-SDU之后的AL-SDU中的GOB不能被接收端正确解码和显示,这样,会导致大面积的灰块或马赛克现象。例如,图3中的AL-SDU2由于误码而丢弃,则AL-SDU1末尾的GOB3头包括了之后GOB3数据的长度,即60字节,但是,由于AL-SDU2丢失,接收端直接接收AL-SDU3,并在AL-SDU3中取出最前端的60字节作为GOB3的数据,而由于AL-SDU3中取出最前端的60字节并不是GOB3的数据部分,这样,GOB3必然不能被正确显示。而且,AL-SDU3中最前端的60字节被取走后,也就是取走了GOB5的数据和GOB6的头,这样,尽管之后紧跟的是GOB6的数据,但是由于没有正确解码GOB6的头,GOB6的数据部分也不会被正确解码并显示出来。可见,由于现有技术中存在GOB被不同AL-SDU分割的情况,当某一AL-SDU丢失时,会造成GOB解码的混乱,出现大面积马赛克或灰块。
发明内容
本发明的目的是提供一种视频数据的传输方法、系统以及发送和接收的方法、装置,以克服现有技术中由于存在GOB被不同AL-SDU分割的情况,而当某一AL-SDU丢失时造成GOB解码的混乱,进而出现大面积马赛克或灰块的缺点。
为解决上述技术问题,本发明提供一种视频数据的传输方法、系统以及发送和接收的方法、装置是这样实现的:
一种视频数据的传输方法,包括:
发送端将一帧视频对应的每个GOB完整的装入AL-SDU中;
发送端将所述AL-SDU复用后发送给接收端;
接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传。
接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述发送端将一帧视频对应的每个GOB完整的装入AL-SDU中由以下方式实现:
将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
将后续的GOB一一对应的装入多个AL-SDU中。
所述对该AL-SDU进行校验后,还包括将校验错误的AL-SDU丢弃。
对于包含图像头的AL-SDU如果校验错误,还包括将与所述AL-SDU同一帧的其它AL-SDU丢弃。
所述接收端对校验错误的包含图像头的AL-SDU要求发送端重传由以下方式实现:
接收端对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
还包括设置第一定时器,用于控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传。
所述设置第一定时器以控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传,由以下方式实现:
接收端在接收到错误的包含图像头的AL-SDU时,启动第一定时器;
在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;如果接收端没有正确接收到重传的包含图像头的AL-SDU,则通过扩展的H.245通知发送端重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
该方法还包括:
发送端将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中;或
发送端将发送的包含图像头的AL-SDU保存在一队列中。
一种视频数据的发送方法,包括:
将一帧视频对应的每个GOB完整的装入AL-SDU中;
将所述AL-SDU复用后发送给接收端。
所述发送端将一帧视频对应的每个GOB完整的装入AL-SDU中由以下方式实现:
将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
将后续的GOB一一对应的装入多个AL-SDU中。
该方法还包括:
发送端将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中;或
发送端将发送的包含图像头的AL-SDU保存在一队列中。
一种视频数据的接收方法,包括:
接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传;
接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述对该AL-SDU进行校验后,还包括将校验错误的AL-SDU丢弃。
对于包含图像头的AL-SDU如果校验错误,还包括将与所述AL-SDU同一帧的其它AL-SDU丢弃。
所述接收端对校验错误的包含图像头的AL-SDU要求发送端重传由以下方式实现:
接收端对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
还包括设置第一定时器,用于控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传。
所述设置第一定时器以控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传,由以下方式实现:
接收端在接收到错误的包含图像头的AL-SDU时,启动第一定时器;
在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;如果接收端没有正确接收到重传的包含图像头的AL-SDU,则通过扩展的H.245通知发送端重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
一种视频数据的传输系统,包括发送端71和接收端72,
所述发送端71包括适配单元711,复用和发送单元712,其中,
适配单元711,用于将一帧视频对应的每个GOB完整的装入AL-SDU中;
复用和发送单元712,用于将所述AL-SDU复用后发送给接收端;
接收端72包括解复用和分离单元721,校验单元722,请求重传单元723,显示单元724,其中,
解复用和分离单元721,用于将接收到的数据解复用后,分离出视频数据的AL-SDU;
校验单元722,用于对AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元723,用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元724,对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述适配单元711包括第一GOB适配单元7111和后续GOB适配单元7112,
第一GOB适配单元7111用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元7112用于将后续的GOB一一对应的装入多个AL-SDU中。
所述接收端72还包括第一丢弃单元725,用于将校验错误的AL-SDU丢弃。
所述接收端72还包括第二丢弃单元726,对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
所述请求重传单元723对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
所述接收端72还包括第一定时器727,用于控制解复用和分离单元721在第一定时时间内接收和分离重传的AL-SDU。
所述发送端71还包括存储单元713和第二定时器714,用于将发送的包含图像头的AL-SDU在第二定时器714定时时长范围内保存在存储单元713中,以由复用和发送单元712进行重发。
一种视频数据的发送装置,包括适配单元711,复用和发送单元712,其中,
适配单元711,用于将一帧视频对应的每个GOB完整的装入AL-SDU中;
复用和发送单元712,用于将所述AL-SDU复用后发送给接收端。
所述适配单元711包括第一GOB适配单元7111和后续GOB适配单元7112,
第一GOB适配单元7111用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元7112用于将后续的GOB一一对应的装入多个AL-SDU中。
还包括存储单元713和第二定时器714,用于将发送的包含图像头的AL-SDU在第二定时器714定时时长范围内保存在存储单元713中。
一种视频数据的接收装置,包括解复用和分离单元721,校验单元722,请求重传单元723,显示单元724,其中,
解复用和分离单元721,用于将接收到的数据解复用后,分离出视频数据的AL-SDU;
校验单元722,用于对AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元723,用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元724,对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述请求重传单元723对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
所述接收端72还包括第一丢弃单元725,用于将校验错误的AL-SDU丢弃。
所述接收端72还包括第二丢弃单元726,对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
还包括第一定时器727,用于控制解复用和分离单元721在第一定时时间内接收和分离重传的AL-SDU。
由以上本发明提供的技术方案可见,发送端将一帧视频对应的每个GOB完整的装入AL-SDU中,复用后发送给接收端,这样,可以避免AL-SDU分割GOB的情况,从而避免了GOB解码的混乱,以减少接收端出现大面积马赛克或灰块的情况。接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传,这样的重传机制在减少了视频中丢帧的情况,并降低重要数据——图像头的丢失,从而保证了视频的正常显示。
附图说明
图1为现有技术中视频处理和传输的原理图;
图2为现有技术中视频传输方法的流程图;
图3为现有技术中由于GOB被分割而导致AL-SDU丢失的原理图;
图4为本发明视频传输方法实施例的流程图;
图5为本发明视频发送方法实施例的流程图;
图6为本发明视频接收方法实施例的流程图;
图7为本发明视频传输装置实施例的框图;
图8为本发明视频发送装置实施例的框图;
图9为本发明视频接收装置实施例的框图。
具体实施方式
本发明提供一种视频数据的传输方法,发送端将一帧视频对应的每个GOB完整的装入AL-SDU中;发送端将所述AL-SDU复用后发送给接收端;接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传;接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
本领域技术人员知道,对帧压缩的类型分为I帧、B帧和P帧。I帧仅将当前帧进行压缩,而B帧是基于当前帧的前一帧和后一帧图像之间的差别进行压缩,P帧根据I帧的运动补偿得到。简单的说,I帧中只有当前帧的图像信息,而B帧和P帧依赖于I。那么,由前面现有技术,如果I帧的AL-SDU在进行传输时发生了丢失,则不仅I帧的图像不能正常显示,会出现大面积马赛克或灰块,而且,B帧和P帧也会显示不正常。而直到下一I帧正确接收并处理后图像才能正常显示。
下面介绍本发明提供视频数据传输方法的实施例。图4示出了该方法实施例的流程,包括:
步骤401:发送端将一帧视频对应的每个GOB完整的装入AL-SDU中。
具体的,可以将一帧视频对应的每个GOB分别装入不同的AL-SDU中。其中,应该注意的是,如果是一帧的第一个GOB,其对应的AL-SDU中除包括该GOB外,还应包括该帧的图像头。
后续的GOB一一对应的装入多个AL-SDU中。
所述包含图像头的AL-SDU中,图像头中不仅包含在同一AL-SDU中GOB的相关信息,还包含在同一帧的其它AL-SDU中GOB的相关信息,所述的相关信息例如为当前帧信源格式的类型信息,如果接收端没有正确接收该类型信息,将无法正确解码GOB,因此,包含图像头的AL-SDU在接收端是否正确接收,对于正确解码同一帧内的所有GOB至关重要。
步骤402:发送端将所述AL-SDU复用后发送给接收端。
该步骤与现有技术类似,将各个数据的AL-SDU进行复用后发送给接收端。所述将各个数据的AL-SDU进行复用例如可以是将音频AI-SDU与该实施例中的视频AL-SDU复用。
步骤403:接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传。
该步骤中,将校验正确的AL-SDU放入缓冲队列中,以进行下一步的处理。
该步骤还可以包括:将校验错误的AL-SDU丢弃。
具体的,对于包含图像头的AL-SDU如果校验错误,则将该AL-SDU丢弃;对于包含图像头的AL-SDU如果校验错误,则将该AL-SDU和对应同一帧的其它AL-SDU也丢弃。
这是因为,所述包含图像头的AL-SDU是否正确接收不仅决定该AL-SDU中所包含的GOB能否正确处理并显示,更重要的,由于所述AL-SDU中的图像头还包含后续AL-SDU的处理信息,因此,如果包含图像头的AL-SDU丢弃,与该AL-SDU相关的其它AL-SDU即使正确接收后也无法正确处理和显示,则也应该丢弃。
该步骤中,接收端对校验错误的包含图像头的AL-SDU要求发送端重传,具体的,可以将前述H.245协议进行扩展,在H.245信令中包括要求发送端重传接收错误的包含图像头的AL-SDU的指示。这样的重传机制减少了由于接收端没有正常接收包含图像头的AL-SDU而导致的该帧图像无法正常显示的问题,即减少了视频显示时丢帧的情况。
同时,为了兼顾重传过程中其它数据传输的效率,还可以设置一个第一定时器,以控制校验错误的包含图像头的AL-SDU在第一定时时间内完成重传,而不是无限制的重传。具体的,可以如下述步骤实现:
步骤A1:接收端在接收到错误的包含图像头的AL-SDU时,通过扩展的H.245通知发送端重传所述接收错误的包含图像头的AL-SDU,同时启动第一定时器。
步骤A2:在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;在第一定时时间内,如果接收端没有正确接收到重传的包含图像头的AL-SDU,则不断的通过扩展的H.245通知发送端重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
在步骤A2中,所述丢弃的错误的包含图像头的AL-SDU,还包括丢弃与所述错误的包含图像头的AL-SDU在同一帧的其它AL-SDU。
对于包含图像头的AL-SDU,如果发送端为了满足在接收端发来重传请求时能够将请求重传的AL-SDU发送出去,而在发送端内部长时间的保存以发送的AL-SDU,这样做显然是浪费存储资源和降低性能的。因此,为了保证发送端重传过程中的性能,发送端还可以采取以下两种方式:
方式一:将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中。
第二定时器的定时时长可以为第一定时器定时时长加H.245信令在发送端到接收端之间的往返时长。
当然,第二定时器的定时时长也可以设置为其它时长。
方式二:发送的包含图像头的AL-SDU保存在一队列中。
发送的不同帧的包含图像头的AL-SDU不断添加进队列中,则按照队列先进先出的原则,包含图像头的AL-SDU将在队列中保存一段时间。
上面两种方式都可以实现将发送的包含图像头的AL-SDU保存一段时间,以在接收端发来重传请求时,将保存的包含图像头的AL-SDU重新发送给接收端。
步骤404:接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
该步骤与现有技术类似,包括接收端的编解码器对缓冲队列中校验正确的AL-SDU中GOB内的宏块进行解码,并显示在该帧的图像中。
由以上实施例可见,发送端将一帧视频对应的每个GOB完整的装入AL-SDU中,复用后发送给接收端,这样,可以避免AL-SDU分割GOB的情况,从而避免了GOB解码的混乱,以减少接收端出现大面积马赛克或灰块的情况。接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传,这样的重传机制在减少了视频中丢帧的情况,并降低重要数据——图像头的丢失,从而保证了视频的正常显示。
以下介绍本发明视频数据发送方法的实施例,图5示出了该实施例的流程,如图5所示,包括:
步骤501:将一帧视频对应的每个GOB完整的装入AL-SDU中。
具体的,可以将一帧视频对应的每个GOB分别装入不同的AL-SDU中。其中,应该注意的是,如果是一帧的第一个GOB,其对应的AL-SDU中除包括该GOB外,还应包括该帧的图像头。
后续的GOB一一对应的装入多个AL-SDU中。
所述包含图像头的AL-SDU中,图像头中不仅包含在同一AL-SDU中GOB的相关信息,还包含在同一帧的其它AL-SDU中GOB的相关信息,前面也提到,包含图像头的AL-SDU在接收端是否正确接收,对于正确解码同一帧内的所有GOB至关重要。
步骤502:将所述AL-SDU复用后发送给接收端。
该步骤与现有技术类似,将各个数据的AL-SDU进行复用后发送给接收端。所述将各个数据的AL-SDU进行复用例如可以是将音频AI-SDU与该实施例中的视频AL-SDU复用。
该步骤中,发送端还可以考虑满足接收端的重传要求。发送端如果为了满足在接收端发来重传请求时能够将请求重传的AL-SDU发送出去,而在发送端内部长时间的保存以发送的AL-SDU,这样做显然是浪费存储资源和降低性能的。上述请求重传的AL-SDU指包含图像头的AL-SDU,因为图像头中不仅包含在同一AL-SDU中GOB的相关信息,还包含在同一帧的其它AL-SDU中GOB的相关信息,理由与上面类似。因此,为了保证发送端重传过程中的性能,发送端还可以采取以下两种方式:
方式一:将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中。
第二定时器的定时时长可以为第一定时器定时时长加H.245信令在发送端到接收端之间的往返时长。
当然,第二定时器的定时时长也可以设置为其它时长。
方式二:发送的包含图像头的AL-SDU保存在一队列中。
发送的不同帧的包含图像头的AL-SDU不断添加进队列中,则按照队列先进先出的原则,包含图像头的AL-SDU将在队列中保存一段时间。
上面两种方式都可以实现将发送的包含图像头的AL-SDU保存一段时间,以在接收端发来重传请求时,将保存的包含图像头的AL-SDU重新发送给接收端。
以下介绍本发明视频数据接收方法的实施例,图6示出了该实施例的流程,如图6所示,包括:
步骤601:接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传。
该步骤中,将校验正确的AL-SDU放入缓冲队列中,以进行下一步的处理。
该步骤还可以包括:将校验错误的AL-SDU丢弃。
具体的,对于包含图像头的AL-SDU如果校验错误,则将该AL-SDU丢弃;对于包含图像头的AL-SDU如果校验错误,则将该AL-SDU和对应同一帧的其它AL-SDU也丢弃。
这是因为,所述包含图像头的AL-SDU是否正确接收不仅决定该AL-SDU中所包含的GOB能否正确处理并显示,更重要的,由于所述AL-SDU中的图像头还包含后续AL-SDU的处理信息,因此,如果包含图像头的AL-SDU丢弃,与该AL-SDU相关的其它AL-SDU即使正确接收后也无法正确处理和显示,则也应该丢弃。
并且,该步骤还可以包括接收端对校验错误的包含图像头的AL-SDU要求发送端重传。具体的,可以将前述H.245协议进行扩展,在H.245信令中包括要求发送端重传接收错误的包含图像头的AL-SDU的指示。
同时,为了兼顾重传过程中其它数据传输的效率,还可以设置一个第一定时器,以控制校验错误的包含图像头的AL-SDU在第一定时时间内完成重传,而不是无限制的重传。具体的,可以如下述步骤实现:
步骤A1:接收端在接收到错误的包含图像头的AL-SDU时,通过扩展的H.245通知发送端重传所述接收错误的包含图像头的AL-SDU,同时启动第一定时器。
步骤A2:在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;在第一定时时间内,如果接收端没有正确接收到重传的包含图像头的AL-SDU,则不断的通过扩展的H.245通知发送端重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
在步骤A2中,所述丢弃的错误的包含图像头的AL-SDU,还包括丢弃与所述错误的包含图像头的AL-SDU在同一帧的其它AL-SDU。
步骤602:接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
该步骤与现有技术类似,包括接收端的编解码器对缓冲队列中校验正确的AL-SDU中GOB内的宏块进行解码,并显示在该帧的图像中。
以下介绍本发明的系统实施例。图7示出了该系统实施例的框图,如图所示:
包括发送端71和接收端72,
所述发送端71包括适配单元711,复用和发送单元712,其中,
适配单元711,用于将一帧视频对应的每个GOB完整的装入AL-SDU中;
复用和发送单元712,用于将所述AL-SDU复用后发送给接收端;
接收端72包括解复用和分离单元721,校验单元722,请求重传单元723,显示单元724,其中,
解复用和分离单元721,用于将接收到的数据解复用后,分离出视频数据的AL-SDU;
校验单元722,用于对AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元723,用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元724,对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述适配单元711包括第一GOB适配单元7111和后续GOB适配单元7112,
第一GOB适配单元7111用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元7112用于将后续的GOB一一对应的装入多个AL-SDU中。
所述接收端72还包括第一丢弃单元725,用于将校验错误的AL-SDU丢弃。
所述接收端72还包括第二丢弃单元726,对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
所述请求重传单元723对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
所述接收端72还包括第一定时器727,用于控制解复用和分离单元721在第一定时时间内接收和分离重传的AL-SDU。
所述发送端71还包括存储单元713和第二定时器714,用于将发送的包含图像头的AL-SDU在第二定时器714定时时长范围内保存在存储单元713中,以由复用和发送单元712进行重发。
利用该系统实施例实现视频数据的传输的方法与前面方法类似,在此不再赘述。
以下介绍本发明的发送装置实施例。图8示出了该发送装置实施例的框图,如图所示:
一种视频数据的发送装置,包括适配单元711,复用和发送单元712,其中,
适配单元711,用于将一帧视频对应的每个GOB完整的装入AL-SDU中;
复用和发送单元712,用于将所述AL-SDU复用后发送给接收端。
所述适配单元711包括第一GOB适配单元7111和后续GOB适配单元7112,
第一GOB适配单元7111用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元7112用于将后续的GOB一一对应的装入多个AL-SDU中。
还包括存储单元713和第二定时器714,用于将发送的包含图像头的AL-SDU在第二定时器714定时时长范围内保存在存储单元713中。
利用该发送装置实施例实现视频数据的发送的方法与前面方法类似,在此不再赘述。
以下介绍本发明的接收装置实施例。图9示出了该发送装置实施例的框图,如图所示:
一种视频数据的接收装置,包括解复用和分离单元721,校验单元722,请求重传单元723,显示单元724,其中,
解复用和分离单元721,用于将接收到的数据解复用后,分离出视频数据的AL-SDU;
校验单元722,用于对AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元723,用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元724,对缓冲队列中校验正确的AL-SDU进行处理后显示。
所述请求重传单元723对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
所述接收端72还包括第一丢弃单元725,用于将校验错误的AL-SDU丢弃。
所述接收端72还包括第二丢弃单元726,对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
还包括第一定时器727,用于控制解复用和分离单元721在第一定时时间内接收和分离重传的AL-SDU。
利用该接收装置实施例实现视频数据的接收的方法与前面方法类似,在此不再赘述。
由以上实施例可见,发送端将一帧视频对应的每个GOB完整的装入AL-SDU中,复用后发送给接收端,这样,可以避免AL-SDU分割GOB的情况,从而避免了GOB解码的混乱,以减少接收端出现大面积马赛克或灰块的情况。接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传,这样的重传机制在减少了视频中丢帧的情况,并降低重要数据——图像头的丢失,从而保证了视频的正常显示。
虽然通过实施例描绘了本发明,本领域普通技术人员知道,本发明有许多变形和变化而不脱离本发明的精神,希望所附的权利要求包括这些变形和变化而不脱离本发明的精神。
Claims (28)
1.一种视频数据的传输方法,其特征在于,包括:
发送端将一帧视频对应的每个块组GOB完整的装入适配层数据服务单元AL-SDU中,该步骤由以下方式实现:将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;将后续的GOB一一对应的装入多个AL-SDU中;
发送端将所述AL-SDU复用后发送给接收端;
接收端将接收到的数据解复用后,分离出视频数据的AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传;
接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
2.如权利要求1所述的方法,其特征在于,所述对该AL-SDU进行校验后,还包括将校验错误的AL-SDU丢弃。
3.如权利要求2所述的方法,其特征在于,对于包含图像头的AL-SDU如果校验错误,还包括将与所述AL-SDU同一帧的其它AL-SDU丢弃。
4.如权利要求1所述的方法,其特征在于,所述接收端对校验错误的包含图像头的AL-SDU要求发送端重传由以下方式实现:
接收端对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
5.如权利要求1所述的方法,其特征在于,还包括设置第一定时器,用于控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传。
6.如权利要求5所述的方法,其特征在于,所述设置第一定时器以控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传,由以下方式实现:
接收端在接收到错误的包含图像头的AL-SDU时,启动第一定时器;
在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;如果接收端没有正确接收到重传的包含图像头的AL-SDU,则通过扩展的H.245通知发送端 重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
7.如权利要求1所述的方法,其特征在于,该方法还包括:
发送端将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中,所述第二定时器与所述存储单元相连;或
发送端将发送的包含图像头的AL-SDU保存在一队列中。
8.一种视频数据的发送方法,其特征在于,包括:
将一帧视频对应的每个块组GOB完整的装入适配层数据服务单元AL-SDU中,该步骤由以下方式实现:将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;将后续的GOB一一对应的装入多个AL-SDU中;
将所述AL-SDU复用后发送给接收端。
9.如权利要求8所述的方法,其特征在于,该方法还包括:
发送端将发送的包含图像头的AL-SDU在第二定时器定时时长范围内保存在一存储单元中,所述第二定时器与所述存储单元相连;或
发送端将发送的包含图像头的AL-SDU保存在一队列中。
10.一种视频数据的接收方法,其特征在于,包括:
接收端将接收到的数据解复用后,分离出视频数据的适配层数据服务单元AL-SDU,并对该AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,对校验错误的包含图像头的AL-SDU要求发送端重传;所述AL-SDU中的一个AL-SDU装有一帧视频的第一个GOB和该帧视频的图像头;所述AL-SDU中一一对应的装有后续GOB;
接收端对缓冲队列中校验正确的AL-SDU进行处理后显示。
11.如权利要求10所述的方法,其特征在于,所述对该AL-SDU进行校验后,还包括将校验错误的AL-SDU丢弃。
12.如权利要求10所述的方法,其特征在于,对于包含图像头的AL-SDU 如果校验错误,还包括将与所述AL-SDU同一帧的其它AL-SDU丢弃。
13.如权利要求10所述的方法,其特征在于,所述接收端对校验错误的包含图像头的AL-SDU要求发送端重传由以下方式实现:
接收端对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
14.如权利要求10所述的方法,其特征在于,还包括设置第一定时器,用于控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传。
15.如权利要求10所述的方法,其特征在于,所述设置第一定时器以控制校验错误的包含图像头的AL-SDU在第一定时时间内接收重传,由以下方式实现:
接收端在接收到错误的包含图像头的AL-SDU时,启动第一定时器;
在第一定时时间内,如果接收端正确接收到重传的包含图像头的AL-SDU,第一定时器定时取消,继续后续的AL-SDU的处理;如果接收端没有正确接收到重传的包含图像头的AL-SDU,则通过扩展的H.245通知发送端重传所述接收错误的AL-SDU,直到第一定时时间到达时,如果接收端仍没有正确接收到重传的包含图像头的AL-SDU,则丢弃该错误的包含图像头的AL-SDU。
16.一种视频数据的传输系统,其特征在于,包括发送端(71)和接收端(72),
所述发送端(71)包括适配单元(711),复用和发送单元(712),其中,适配单元(711),用于将一帧视频对应的每个块组GOB完整的装入适配层数据服务单元AL-SDU中;
复用和发送单元(712),用于将所述AL-SDU复用后发送给接收端;
接收端(72)包括解复用和分离单元(721),校验单元(722),请求重传单元(723),显示单元(724),其中,
解复用和分离单元(721),用于将接收到的数据解复用后,分离出视频数据的AL-SDU;
校验单元(722),用于对AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元(723),用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元(724),对缓冲队列中校验正确的AL-SDU进行处理后显示;
所述适配单元(711)包括第一GOB适配单元(7111)和后续GOB适配单元(7112),其中,
第一GOB适配单元(7111)用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元(7112)用于将后续的GOB一一对应的装入多个AL-SDU中。
17.如权利要求16所述的系统,其特征在于,所述接收端(72)还包括第一丢弃单元(725),用于将校验错误的AL-SDU丢弃。
18.如权利要求16所述的系统,其特征在于,所述接收端(72)还包括第二丢弃单元(726),对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
19.如权利要求16所述的系统,其特征在于,所述请求重传单元(723)对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
20.如权利要求16所述的系统,其特征在于,所述接收端(72)还包括第一定时器(727),用于控制解复用和分离单元(721)在第一定时时间内接收和分离重传的AL-SDU。
21.如权利要求16所述的系统,其特征在于,所述发送端(71)还包括存储单元(713)和第二定时器(714),用于将发送的包含图像头的AL-SDU在第二定时器(714)定时时长范围内保存在存储单元(713)中,以由复用和发送单元(712)进行重发。
22.一种视频数据的发送装置,其特征在于,包括适配单元(711),复用和发送单元(712),其中,
适配单元(711),用于将一帧视频对应的每个块组GOB完整的装入适配层数据服务单元AL-SDU中;
复用和发送单元(712),用于将所述AL-SDU复用后发送给接收端;
所述适配单元(711)包括第一GOB适配单元(7111)和后续GOB适配单元(7112),其中,
第一GOB适配单元(7111)用于将一帧视频的第一个GOB和该帧视频的图像头装入一个AL-SDU中;
后续GOB适配单元(7112)用于将后续的GOB一一对应的装入多个AL-SDU中。
23.如权利要求22所述的发送装置,其特征在于,还包括存储单元(713)和第二定时器(714),用于将发送的包含图像头的AL-SDU在第二定时器(714)定时时长范围内保存在存储单元(713)中。
24.一种视频数据的接收装置,其特征在于,包括解复周和分离单元(721),校验单元(722),请求重传单元(723),显示单元(724),其中,
解复用和分离单元(721),用于将接收到的数据解复用后,分离出视频数据的AL-SDU;所述AL-SDU中的一个AL-SDU装有一帧视频的第一个GOB和该帧视频的图像头;所述AL-SDU中一一对应的装有后续GOB;
校验单元(722),用于对适配层数据服务单元AL-SDU进行校验,将正确的AL-SDU放入缓冲队列中,
请求重传单元(723),用于对校验错误的包含图像头的AL-SDU要求发送端重传;
显示单元(724),对缓冲队列中校验正确的AL-SDU进行处理后显示。
25.如权利要求24所述的接收装置,其特征在于,所述请求重传单元(723)对校验错误的包含图像头的AL-SDU通过扩展的H.245协议要求发送端重传。
26.如权利要求24所述的系统,其特征在于,所述接收端(72)还包括第一丢弃单元(725),用于将校验错误的AL-SDU丢弃。
27.如权利要求24所述的系统,其特征在于,所述接收端(72)还包括第二丢弃单元(726),对于包含图像头的AL-SDU如果校验错误,将与所述AL-SDU同一帧的其它AL-SDU丢弃。
28.如权利要求24所述的接收装置,其特征在于,还包括第一定时器(727),用于控制解复用和分离单元(721)在第一定时时间内接收和分离重传的AL-SDU。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200710120370 CN101370144B (zh) | 2007-08-16 | 2007-08-16 | 视频数据的传输方法、系统以及发送和接收的方法、装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200710120370 CN101370144B (zh) | 2007-08-16 | 2007-08-16 | 视频数据的传输方法、系统以及发送和接收的方法、装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101370144A CN101370144A (zh) | 2009-02-18 |
CN101370144B true CN101370144B (zh) | 2011-03-30 |
Family
ID=40413728
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200710120370 Active CN101370144B (zh) | 2007-08-16 | 2007-08-16 | 视频数据的传输方法、系统以及发送和接收的方法、装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101370144B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102316360B (zh) * | 2010-07-09 | 2015-11-25 | 华为终端有限公司 | 视频刷新方法、装置及系统 |
CN109155862A (zh) * | 2016-08-19 | 2019-01-04 | 惠州Tcl移动通信有限公司 | 一种视频流数据传输方法、基站及用户设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1650638A (zh) * | 2002-05-01 | 2005-08-03 | 皇家飞利浦电子股份有限公司 | 利用数据划分和不相等错误保护的、用于无线局域网的能恢复错误的视频传输系统 |
CN1780397A (zh) * | 2004-11-19 | 2006-05-31 | 大唐移动通信设备有限公司 | 保障低码率无线信道传输高质量视频信号的方法 |
-
2007
- 2007-08-16 CN CN 200710120370 patent/CN101370144B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1650638A (zh) * | 2002-05-01 | 2005-08-03 | 皇家飞利浦电子股份有限公司 | 利用数据划分和不相等错误保护的、用于无线局域网的能恢复错误的视频传输系统 |
CN1780397A (zh) * | 2004-11-19 | 2006-05-31 | 大唐移动通信设备有限公司 | 保障低码率无线信道传输高质量视频信号的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN101370144A (zh) | 2009-02-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8259565B2 (en) | Call setup in a video telephony network | |
CN106656422B (zh) | 一种动态调整fec冗余度的流媒体传输方法 | |
CN101064590B (zh) | 无线通讯系统处理分组数据的方法及其相关装置 | |
CN103179466A (zh) | 基于反向链路信息的视频差错控制 | |
CN101040277A (zh) | 用于流送媒体数据的方法 | |
CN101304302A (zh) | 视频数据的传输方法及其系统 | |
US20120002103A1 (en) | Method and apparatus for providing quality of service for wireless video transmission using multi-band operation | |
CN103096183B (zh) | 一种高效流媒体传输方法 | |
KR20140037911A (ko) | Arq와의 스트리밍 무선 통신 및 버스트들 내의 패킷들의 선택적 재송신 | |
CN102170340A (zh) | 一种rtp数据超时重发的方法、系统和视频终端 | |
CN101568037B (zh) | 一种dvb-h手机电视流式修复的方法、终端与系统 | |
JP6380935B2 (ja) | 送信装置、受信装置、送信方法および受信方法 | |
EP1966951B1 (en) | Device with mpe-fec frame memory | |
JP6278275B2 (ja) | 送信装置、受信装置、送信方法および受信方法 | |
CN101370144B (zh) | 视频数据的传输方法、系统以及发送和接收的方法、装置 | |
JPH1198128A (ja) | データ伝送装置 | |
CN102282828A (zh) | 缓冲控制器和无线电通信终端 | |
CA2572073A1 (en) | Data and wireless frame alignment for error reduction | |
US20080062987A1 (en) | Method and system for wireless VoIP communications | |
JPH1056480A (ja) | マルチメディア多重化通信システム | |
KR100811494B1 (ko) | 멀티 스트리밍 장치 및 그 방법 | |
JP6576827B2 (ja) | パケット送信方法、コンテンツ再生方法、パケット送信システム及び端末 | |
US20130042278A1 (en) | Method and apparatus for providing video service | |
JPH1118086A (ja) | 画像通信方法および装置 | |
KR100298372B1 (ko) | 영상 데이터 재전송 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |