CN1333601C - 一种实现缩放的视频解码方法 - Google Patents

一种实现缩放的视频解码方法 Download PDF

Info

Publication number
CN1333601C
CN1333601C CNB2004101026931A CN200410102693A CN1333601C CN 1333601 C CN1333601 C CN 1333601C CN B2004101026931 A CNB2004101026931 A CN B2004101026931A CN 200410102693 A CN200410102693 A CN 200410102693A CN 1333601 C CN1333601 C CN 1333601C
Authority
CN
China
Prior art keywords
unit data
frame
data piece
divergent
convergent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2004101026931A
Other languages
English (en)
Other versions
CN1622632A (zh
Inventor
夏煜
王浩
白锋
怀千江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGDONG ZHONGXING ELECTRONICS Co Ltd
Original Assignee
Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vimicro Corp filed Critical Vimicro Corp
Priority to CNB2004101026931A priority Critical patent/CN1333601C/zh
Publication of CN1622632A publication Critical patent/CN1622632A/zh
Application granted granted Critical
Publication of CN1333601C publication Critical patent/CN1333601C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种实现缩放的视频解码方法,该方法包括以下步骤:对当前帧数据进行变长码解码、反离散余弦变换、反量化和反预测,得到当前帧的解码后的单位数据块;对所述当前帧的解码后的单位数据块进行缩放操作,得到缩放后的单位数据块;对上一步骤得到的单位数据块进行拼接和后处理,得到当前帧的缩放后图像。本发明降低了系统处理当前帧数据的计算量,并且本发明可以在解码一个单位数据块的同时进行其它单位数据块的缩放操作,提高了系统解码的快速性,满足了系统的实时性要求。

Description

一种实现缩放的视频解码方法
技术领域
本发明涉及视频信号处理领域,特别是一种实现缩放的视频解码方法。
背景技术
Mpeg标准是由运动图像专家组(Moving Picture Expert Group,MPEG)开发的用于视频和音频压缩的一系列演进的标准。按照Mpeg标准,视频图像压缩编码后包含三个成分:I帧、P帧和B帧。其中I帧压缩采用基准帧模式,只提供帧内压缩;P帧采用预测编码,预测当前帧与前面最近的I帧或P帧的差别进行压缩,考虑了运动特性;B帧为双向帧间编码,基于当前帧与前面和后面最近的I帧或P帧图像之间的差别进行压缩。帧确定后就采用离散余弦变换(Discrete Cosine Transform,DCT),对结果进行量化,以及变长编码,编码后即形成了Mpeg码流,典型的Mpeg-4码流的帧序为:IBBPBBPBBPI...
在对Mpeg-4码流进行解码时,对于I帧、P帧和B帧需要分别采取不同的处理过程。
如图1所示,一般对于I帧的处理过程是:首先对I帧数据进行变长码解码、反量化、反离散余弦变换(Inverse Discrete Cosine Transform,IDCT)以及反预测后形成该帧的时空域图像数据,将其拼接并消除块效应等处理之后得到该I帧的图像,然后对该帧图像进行缩放操作,得到最终的缩放后图像。
如图2所示,对于P帧或B帧的处理过程是:首先对P帧或B帧进行变长码解码、反量化、IDCT、反预测后得到该帧的残差数据和运动矢量,然后根据残差数据、运动矢量和参考图像做运动补偿,得到该帧的运动补偿后的图像数据,然后对该帧图像进行缩放操作,得到最终的缩放后图像。
从上述方案可以看出,现有技术在解码器解码出整帧数据后进行整帧图像的缩放操作,而视频解码和图像的缩放都具有相当高的计算量,因此现有技术的计算量大,很难满足系统的实时性要求,尤其是在嵌入式系统等实时性要求较高的场合。
发明内容
有鉴于此,本发明提出了一种实现缩放的视频解码方法,其目的在于降低系统的计算量,提高系统操作的实时性。
根据上述目的,提供了一种实现缩放的视频解码方法,该方法包括以下步骤:
A.对当前帧数据进行变长码解码、反离散余弦变换、反量化和反预测,得到当前帧的解码后的单位数据块;
B.对所述解码后的单位数据块进行缩放操作,得到缩放后的单位数据块;
C.对所述步骤B得到的单位数据块进行拼接和后处理,得到当前帧的缩放后图像。
较佳地,所述的单位数据块为块。
较佳地,所述的单位数据块为宏块。
所述缩放操作采用最临近法,或双线性插值,或三次样条插值。
所述后处理包括消除块效应操作。
进一步,所述当前帧的解码后的单位数据块包括单位数据块的残差数据和单位数据块的运动矢量;所述步骤B包括:对所述单位数据块的残差数据进行缩放操作,得到缩放后的单位数据块的残差数据;对所述单位数据块的运动矢量进行缩放操作,得到缩放后的单位数据块的运动矢量;根据所述缩放后的单位数据块的残差数据、缩放后的单位数据块的运动矢量和运动补偿后的参考单位数据块进行运动补偿,得到运动补偿后的单位数据快。
所述运动补偿后的参考单位数据块为当前帧之前最近的I帧或P帧的运动补偿后的单位数据块。
所述运动补偿后的参考单位数据块为当前帧之前最近的I帧或P帧的运动补偿后的单位数据块和当前帧之后最近的I帧或P帧的运动补偿后的单位数据块。
所述当前帧数据采用的编码方式为Mpeg-1、Mpeg-2、Mpeg-4、H.261、H.263或H.264。
从上述方案中可以看出,由于本发明在解码器对I帧解码出单位数据块后、或者对P帧或B帧解码出单位残差数据块和运动矢量后,在运动补偿和图像拼接前,完成了缩放操作,即本发明进行缩放操作的对象不是整帧图像,而是单位数据块大小的数据量,本发明在对当前帧的某一个单位数据块进行缩放操作的同时,可以进行其它数据块的解码操作,缩短了整帧数据的处理时间。从上面的分析可以看出,本发明缩短了整帧数据的处理时间,提高了系统操作的实时性。
附图说明
图1为现有技术中处理I帧图像的流程示意图;
图2为现有技术中处理P帧或B帧图像的流程示意图;
图3为本发明以块为单位进行缩放的示意图;
图4为本发明处理I帧图像的流程示意图;
图5为本发明处理P帧或B帧图像的流程示意图;
图6为YUV420格式示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,以下举实施例对本发明进一步详细说明。
在Mpeg-4中,数据的组织采用了宏块(Macro Block,MB)和块(Block)的技术。宏块采用了16×16的大小,而块采用了8×8的大小。为了统一操作,这里仅以采用8×8的块作为单位数据块为例对本发明进行说明。如图3所示,原来为8×8的块,经过缩放后,新的数据块的大小为m×n。当然,也可以使用宏块作为单位数据块。
如图4所示的是本发明对于I帧的处理过程。
步骤401,对I帧数据进行变长码解码、IDCT、反量化以及反预测操作,由于I帧是对所有的8×8数据块采用了帧内编码,所以进行上述解码操作后得到了8×8的图像象素值的数据块。
步骤402,对每个8×8的数据块进行缩放操作,可以通过最临近法、双线性插值、三次样条插值等方法来实现。缩放后新的数据块的大小为m×n。
步骤403,将上述m×n数据块进行拼接以及后处理,得到缩放后的完整的I帧图像。这里的后处理包括消除块效应等操作。
如图5所示的是本发明对于P帧或B帧的处理过程。以P帧的处理过程为例:
步骤501,对P帧数据进行变长码解码、IDCT、反量化以及反预测操作,将数据解码为残差数据和运动矢量,其大小为8×8。以YUV420格式为例,如图6所示,每4个Y块对应1个U块和一个V块,其中Y1、Y2、Y3和Y4为亮度信号,U、V为色度信号。YUV420格式在压缩编码时利用亮度分量Y对运动进行运动估计,形成了运动矢量。在解码时需要利用运动矢量对YUV三个分量进行运动补偿。
步骤502,对每个8×8大小的残差数据进行缩放,根据需要可选择最临近法、双线性插值和双三次样条插值等方法,缩放后得到m×n大小的残差数据块。
步骤503,对8×8大小的数据块的运动矢量进行缩放,得到m×n大小的数据块的运动矢量。例如某个数据块的运动矢量为 V ‾ = ( V x , V y ) , 将该数据块缩放为m×n大小后运动矢量变为 V ‾ ′ = ( V ′ x , V ′ y ) , 那么运动矢量的缩放需要满足:
Vx=V′x·m/8
Vy=V′y·n/8。
步骤504,根据步骤502得到的缩放后的残差数据块、步骤503得到的缩放后的运动矢量以及运动补偿后的参考数据块,进行运动补偿,得到m×n大小的运动补偿后的数据块。这里的运动补偿后的参考数据块,是指当前帧前面最近的I帧或P帧在运动补偿后的相应位置的数据块。当前帧的数据块在运动补偿后,可以作为下一帧的参考数据块,用于下一帧数据块的运动补偿。
步骤505,将步骤504得到的运动补偿后的m×n大小的数据块拼接起来,并进行后处理,得到缩放后完整的P帧图像。
对于B帧的处理过程和P帧大致相同,区别在于:在步骤504中B帧的参考数据块有两个,为前面最近的I帧或P帧的数据块和后面最近的I帧或P帧的数据块。
根据上述步骤得到了Mpeg-4码流中的I帧、P帧和B帧图像,就形成了视频序列。
本发明可以应用在任何处理I帧、P帧或B帧的编码方案中,例如:Mpeg-1、Mpeg-2、H.261、H.263和H.264等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1、一种实现缩放的视频解码方法,其特征在于,该方法包括以下步骤:
A.对当前帧数据进行变长码解码、反离散余弦变换、反量化和反预测,得到当前帧的解码后的单位数据块;
B.对所述解码后的单位数据块进行缩放操作,得到缩放后的单位数据块;
C.对所述步骤B得到的单位数据块进行拼接和后处理,得到当前帧的缩放后图像。
2、根据权利要求1所述的方法,其特征在于,所述的单位数据块为块。
3、根据权利要求1所述的方法,其特征在于,所述的单位数据块为宏块。
4、根据权利要求1所述的方法,其特征在于,所述缩放操作采用最临近法,或双线性插值,或三次样条插值。
5、根据权利要求1所述的方法,其特征在于,所述后处理包括消除块效应操作。
6、根据权利要求1所述的方法,其特征在于,所述当前帧的解码后的单位数据块包括单位数据块的残差数据和单位数据块的运动矢量;
所述步骤B包括:对所述单位数据块的残差数据进行缩放操作,得到缩放后的单位数据块的残差数据;对所述单位数据块的运动矢量进行缩放操作,得到缩放后的单位数据块的运动矢量;根据所述缩放后的单位数据块的残差数据、缩放后的单位数据块的运动矢量和运动补偿后的参考单位数据块进行运动补偿,得到运动补偿后的单位数据快。
7、根据权利要求6所述的方法,其特征在于,所述运动补偿后的参考单位数据块为当前帧之前最近的I帧或P帧的运动补偿后的单位数据块。
8、根据权利要求6所述的方法,其特征在于,所述运动补偿后的参考单位数据块为当前帧之前最近的I帧或P帧的运动补偿后的单位数据块和当前帧之后最近的I帧或P帧的运动补偿后的单位数据块。
9、根据权利要求1所述的方法,其特征在于,所述当前帧数据采用的编码方式为Mpeg-1、Mpeg-2、Mpeg-4、H.261、H.263或H.264。
CNB2004101026931A 2004-12-27 2004-12-27 一种实现缩放的视频解码方法 Expired - Fee Related CN1333601C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2004101026931A CN1333601C (zh) 2004-12-27 2004-12-27 一种实现缩放的视频解码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2004101026931A CN1333601C (zh) 2004-12-27 2004-12-27 一种实现缩放的视频解码方法

Publications (2)

Publication Number Publication Date
CN1622632A CN1622632A (zh) 2005-06-01
CN1333601C true CN1333601C (zh) 2007-08-22

Family

ID=34766828

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004101026931A Expired - Fee Related CN1333601C (zh) 2004-12-27 2004-12-27 一种实现缩放的视频解码方法

Country Status (1)

Country Link
CN (1) CN1333601C (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100375107C (zh) * 2006-01-18 2008-03-12 北京飞天诚信科技有限公司 指纹图像片段的拼接方法
CN101552897B (zh) * 2008-07-11 2012-12-19 深圳市创凯电子有限公司 基于u盘或闪存实现拼接高清晰底图显示的方法及其显示装置
CN102368822A (zh) * 2011-06-28 2012-03-07 上海盈方微电子有限公司 一种视频解码输出模型的架构方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000004442A (ja) * 1998-06-15 2000-01-07 Hitachi Ltd ディジタル符号化画像データの復号・表示装置
WO2002041638A2 (en) * 2000-11-16 2002-05-23 Koninklijke Philips Electronics N.V. Scalable mpeg-2 video system
CN1523896A (zh) * 2003-09-12 2004-08-25 浙江大学 视频编解码中运动矢量的预测方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000004442A (ja) * 1998-06-15 2000-01-07 Hitachi Ltd ディジタル符号化画像データの復号・表示装置
WO2002041638A2 (en) * 2000-11-16 2002-05-23 Koninklijke Philips Electronics N.V. Scalable mpeg-2 video system
CN1523896A (zh) * 2003-09-12 2004-08-25 浙江大学 视频编解码中运动矢量的预测方法和装置

Also Published As

Publication number Publication date
CN1622632A (zh) 2005-06-01

Similar Documents

Publication Publication Date Title
US8731054B2 (en) Method and apparatus for weighted prediction in predictive frames
JP4847890B2 (ja) 符号化方式変換装置
EP2319243B1 (en) Filtering video data using a plurality of filters
US20090141808A1 (en) System and methods for improved video decoding
US7936824B2 (en) Method for coding and decoding moving picture
EP2077670A1 (en) Transcoder, transcoding method, decoder, and decoding method
CN107637078A (zh) 视频译码系统和方法中的残差变换和逆向变换
US20120263225A1 (en) Apparatus and method for encoding moving picture
Juurlink et al. Understanding the application: An overview of the h. 264 standard
CN1333601C (zh) 一种实现缩放的视频解码方法
CN108353192A (zh) 视频处理系统和方法中的分层去块滤波
Roodaki-Lavasani et al. Efficient burst image compression using H. 265/HEVC
CN102333220A (zh) 一种选择在变换域完成预测编码的视频编解码方法
WO2006084419A1 (en) Method for reducing bit rate requirements for encoding multimedia data
JPH05344492A (ja) フレーム間予測符号化方式
WO2005104560A1 (en) Method of processing decoded pictures.
JP2004312689A (ja) Mpegビデオ復号化方法及びmpegビデオ復号化器
WO2005115007A1 (en) Systems and methods of encoding moving pictures for mobile communication terminals
TWI418220B (zh) 結合軟硬體實現之視訊處理系統,方法及其電腦程式產品
WO2005115006A1 (en) System and methods of encoding moving pictures for mobile communication terminals
CN117793355A (zh) 多媒体数据处理方法、装置、设备及存储介质
KR20060084951A (ko) H.264 기반 동영상 복호화 방법
Krishnan et al. Adaptive single pixel based lossless intra coding for H. 264/MPEG-4 AVC
KR20080008137A (ko) 영상 복원 장치 및 방법
JPH05347758A (ja) フレーム間予測符号化方式

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: GUANGDONG ZHONGXING ELECTRONICS CO., LTD.

Free format text: FORMER OWNER: BEIJING VIMICRO CORPORATION

Effective date: 20150311

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 100083 HAIDIAN, BEIJING TO: 519031 ZHUHAI, GUANGDONG PROVINCE

TR01 Transfer of patent right

Effective date of registration: 20150311

Address after: 519031 Guangdong city of Zhuhai province Hengqin Baohua Road No. 6, room 105 -478

Patentee after: GUANGDONG ZHONGXING ELECTRONICS CO., LTD.

Address before: 100083, Haidian District, Xueyuan Road, Beijing No. 35, Nanjing Ning building, 15 Floor

Patentee before: Beijing Vimicro Corporation

DD01 Delivery of document by public notice

Addressee: GUANGDONG ZHONGXING ELECTRONICS CO., LTD.

Document name: Notification of Passing Examination on Formalities

DD01 Delivery of document by public notice

Addressee: Shen Yingming

Document name: payment instructions

DD01 Delivery of document by public notice
DD01 Delivery of document by public notice

Addressee: Shen Yingming

Document name: Notice of termination of patent right

DD01 Delivery of document by public notice
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20070822

Termination date: 20201227

CF01 Termination of patent right due to non-payment of annual fee