CN1801941A - 多模标准解码器中运动矢量预测复用设计方法 - Google Patents
多模标准解码器中运动矢量预测复用设计方法 Download PDFInfo
- Publication number
- CN1801941A CN1801941A CN 200510061653 CN200510061653A CN1801941A CN 1801941 A CN1801941 A CN 1801941A CN 200510061653 CN200510061653 CN 200510061653 CN 200510061653 A CN200510061653 A CN 200510061653A CN 1801941 A CN1801941 A CN 1801941A
- Authority
- CN
- China
- Prior art keywords
- motion vector
- block
- vector prediction
- reference picture
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
一种多模标准解码器中运动矢量预测复用设计方法，(1)由固件发送给MVP模块一个avs_flag标志；(2)块运动矢量预测采用分块下嵌套子块的形式；(3)取相邻块信息模块中，利用对帧场自适应标志置数，使两种不同标准可以进行相同处理，实现复用；(4)取参考宏块信息的设计，并行宏块的所有运动信息总从参考图像宏块运动信息缓存中的第一个参考图像取，更新时也总是保存到第一个参考图像中；(5)对邻块数据流更新机制的设计，使复用所需的相邻块信息量降至最少，减少了读外存次数。其优点在于，实现了H.264与AVS两种视频编码标准MVP功能的兼容，不仅保证了正确性，且可以大幅度减少解码器硬件面积。经验证，可以减少75％的片上缓存，资源占用情况是单独同时实现两个标准的70％，能实现对高清图像的实时解码。
Description
技术领域
本发明涉及一种运动矢量预测复用设计方法，特别涉及一种在H.264/AVS多模标准解码器中的运动矢量预测(MVP)复用设计方法。
背景技术
AVS是中国第一个具有自主知识产权的数字音视频编解码标准，全称是《信息技术先进音视频编码标准》。H.264是由ITU-T和ISO两个国际标准化组织的有关视频编码专家联合组成的视频联合工作组(JVT)开发制定的一个视频编码标准，这两种标准在编码效率上较之以往的视频压缩标准都有了显著的提高，但是与此同时硬件实现解码的复杂度也随之上升，给硬件设计带来一定的挑战。
在实时的高清视频解码运算中，需要大量的运算逻辑且有大量中间数据需要保存和读取。尤其是要实现同时支持AVS及H.264标准的高清解码器，如果简单地将两个解码器叠加，其面积将非常巨大。在这种情况下，如何充分利用标准的相关性来实现解码器的最大程度复用就变得越来越重要。
发明内容
本发明所要解决的技术问题是针对上述现有技术现状而提供一种能够同时支持AVS及H.264标准的高清解码器的运动矢量预测(MVP)复用设计方法。
本发明解决上述技术问题所采用的技术方案为：一种多模标准解码器中运动矢量预测复用设计方法，其特征在于：(1)由固件(firmware)发送给MVP模块一个avs_flag标志，作为区分两个标准的依据，能使同一个模块处理两种标准；(2)块运动矢量预测采用分块(partition)下嵌套子块(sub-partition)的形式，能兼容两种标准的算法；(3)取相邻块信息模块中，利用对帧场自适应(MBAFF)标志置数，使两种不同标准可以进行相同处理，完全实现复用；(4)取参考宏块信息的设计，并行宏块(colocatedmacroblock)的所有运动信息总从参考图像宏块运动信息缓存(reference pictures mbmotion info buffer)中的第一个参考图像取，更新时也总是保存到第一个参考图像中，简化了存取的逻辑，提高了存取的速度；(5)对邻块数据流更新机制的设计，使复用所需的相邻块信息量降至最少，减少了读外存次数。
由固件(firmware)发送给MVP模块一个avs_flag标志，作为区分两个标准的依据，能使同一个模块处理两种标准。
进行块运动矢量预测的主循环机制采用分块(partition)循环下嵌套按子块(sub-partition)循环的双重循环形式，能兼容两种标准的算法。
取相邻块信息模块中，利用对帧场自适应(MBAFF)标志置数，既兼容H.264与AVS的非宏块级帧场自适应模式，又支持H.264特有的宏块级帧场自适应模式，使两种不同标准可以进行相同处理，完全实现复用。
取参考宏块信息的设计，并行宏块(colocated macroblock)的所有运动信息总从参考图像宏块运动信息缓存(reference pictures mb motion info buffer)中的第一个参考图像取，更新时也总是保存到第一个参考图像中，简化了存取的逻辑，提高了存取的速度。
对邻块数据流更新机制的设计，仅更新紧密相邻的相邻块，使复用所需的相邻块信息量降至最少，更新时仅取右上宏块对，仅存左邻宏块，减少了读写外存次数。
与现有技术相比，本发明的优点在于，实现了H.264与AVS两种视频编码标准MVP功能的兼容，不仅保证了正确性，且可以大幅度减少解码器硬件面积。经验证，可以减少75％的片上缓存，资源占用情况是单独同时实现两个标准的70％，能实现对高清图像的实时解码。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
一种多模标准解码器中运动矢量预测复用设计方法，包括：
1.MVP模块根据数据流的性质，可以划分成输入模块、运动矢量预测主循环模块、块运动预测模块、取相邻块信息模块、取参考宏块信息和输出模块，其复用设计方法：
1)输入模块：包括″读命令模块(read cmd fifo)″、″读残差信息模块(read vldfifo)″，它们分别传送command和残差信息。在固件(firmware)发送序列级信息时首先发送一个avs_flag标志，在其后的所有模块都通过这个标志来区分两个标准中的相异部分，使同一模块处理两个标准。
2)运动矢量预测主循环模块：因为在整个凤芯二号系统划分时每个模块(例如MVP模块、IQ模块等)独立完成的最小任务是一个宏块的解码过程，而在宏块中通过partition和sub-partition会将模块划分成若干个小块。AVS中没有sub-partition的小块，也就是说没有8×8以下的划分，除此以外和H.264的宏块划分是完全一样的，因此可以将循环做成partition下嵌套sub-partition的形式，解决AVS没有子划分只要让AVS忽略子循环就可以了。这样设计能兼容两种标准的算法，比设计两套独立的循环机制减少33％的逻辑单元。
3)块运动预测模块(block mv prediction)：对两个标准的处理方法基本相同，只不过AVS在这里的计算量要大得多，无需特殊设计。
4)取相邻块信息模块(GetNeighborBlkInfo：get neighbor block information)：只需要在AVS时将帧场自适应标志置为0，就可以做到和H.264相同的处理方法。从而，两种不同标准可以进行相同处理，完全实现复用，比单独设计减低了50％的逻辑单元。
5)取参考宏块信息：包括三个模块，取图像级信息(GetColPicInfo)、取宏块层信息(getMBColocated)和取块级信息(get4x4Colocated)三个模块。因为H.264中并行参考图像可以多达5帧(就其main profile中level 4.0以上而言)，而AVS中仅仅使用一帧最近解码的后向参考帧，因此AVS中不存在取并行宏块时去寻找它属于哪幅参考图像的问题。也就是说可以不考虑宏块以上的信息保存的问题。所以复用时仅仅默认成并行宏块信息总从参考图像宏块信息缓存中的第一个参考图像取，而更新时也总是保存到第一个参考图像中。这样设计可以简化存取的逻辑，提高存取的速度。
6)输出模块：包括输出到片外存储器(memory access)、参考图像取得模块(RDR)和环路滤波器模块(deblock loop filter)三部分，这三部分两种标准处理方法基本相同，无需进行特殊设计。
2.邻块数据更新机制的设计，使复用时所需保存的相邻块的信息量降至最少，没有了冗余信息的保存；同时减小了去读取外存的次数。
1)复用的片内缓存大小统计：
(1)相邻块运动矢量和参考索引的信息：
每个小块需要保存(也就是要去片外取)的信息：39bits×2＝78(bits)；
相邻块需要保存：38×78＝2964(bits)
当前宏块对需要保存：32×78＝2496(bits)
总共需要：2964+2496＝5460(bits)
(2)参考列表的信息：
需要保存当前条带的两个列表和参考并行宏块所在的条带的两个列表，总共需要：26×6×2×5×2＝3120(bits)
(3)先进先出队列(fifo)的信息：
需要至少保存：cmd_mvp_fifo：27×32＝864(bits)；
vld_mvp_fifo：32×28＝896(bits)；
总共需要：864+894＝1760(bits)；
(4)总缓存大小为：5460+3120+1760＝10340(bits)
如果对AVS与H.264单独设计片上缓存，那么所需的相邻块运动矢量和参考索引的信息与参考列表的信息要分别保存，总缓存的大小会是：5460*2+3120*1.2+1760＝16424(bits)，
可见复用之后减少了37％的片上缓存。
2)更新的过程：
(1)当前宏块解码前的初始化过程：
将上邻宏块对中的八个小块保存到左上邻宏块对的缓存(buffer)中；
将右上邻宏块对中的八个小块读入上邻宏块对的缓存(buffer)中；
从外存中读取右上宏块对的八个小块的信息。
(2)当前宏块解码完成后：
将左邻宏块中可能用于参考的块保存到片外；
将当前解码块中需要保存起来的块存放到左邻宏块的缓存(buffer)中。
在这种更新机制下，每个宏块读取外存仅仅为4个小块的相邻块信息(当为最左列宏块时需要读8个)，当为直接解码模式时还需要读取16个并行小块信息。在128位的带宽下每次读写2个小块的信息。
因为是仅仅存取与当前宏块″紧密相邻″的小块信息，是实现正确解码所必需且最少的邻域信息，比存取一个宏块所有16个小块减少了75％的信息量，所以相应的访问外存的次数也减至25％。
Claims (6)
1.一种多模标准解码器中运动矢量预测复用设计方法，其特征在于：
(1)由固件(firmware)发送给MVP模块一个avs_flag标志，作为区分两个标准的依据，能使同一个模块处理两种标准；
(2)块运动矢量预测采用分块(partition)下嵌套子块(sub-partition)的形式，能兼容两种标准的算法；
(3)取相邻块信息模块中，利用对帧场自适应(MBAFF)标志置数，使两种不同标准可以进行相同处理，完全实现复用；
(4)取参考宏块信息的设计，并行宏块(colocated macroblock)的所有运动信息总从参考图像宏块运动信息缓存(reference pictures mb motion info buffer)中的第一个参考图像取，更新时也总是保存到第一个参考图像中，简化了存取的逻辑，提高了存取的速度；
(5)对邻块数据流更新机制的设计，使复用所需的相邻块信息量降至最少，减少了读外存次数。
2.如权利要求1所述的多模标准解码器中运动矢量预测复用设计方法，其特征在于：由固件(firmware)发送给MVP模块一个avs_flag标志，作为区分两个标准的依据，能使同一个模块处理两种标准。
3.如权利要求1所述的多模标准解码器中运动矢量预测复用设计方法，其特征在于：进行块运动矢量预测的主循环机制采用分块(partition)循环下嵌套按子块(sub-partition)循环的双重循环形式，能兼容两种标准的算法。
4.如权利要求1所述的多模标准解码器中运动矢量预测复用设计方法，其特征在于：取相邻块信息模块中，利用对帧场自适应(MBAFF)标志置数，既兼容H.264与AVS的非宏块级帧场自适应模式，又支持H.264特有的宏块级帧场自适应模式，使两种不同标准可以进行相同处理，完全实现复用。
5.如权利要求1所述的多模标准解码器中运动矢量预测复用设计方法，其特征在于：取参考宏块信息的设计，并行宏块(colocated macroblock)的所有运动信息总从参考图像宏块运动信息缓存(reference pictures mb motion info buffer)中的第一个参考图像取，更新时也总是保存到第一个参考图像中，简化了存取的逻辑，提高了存取的速度。
6.如权利要求1所述的多模标准解码器中运动矢量预测复用设计方法，其特征在于：对邻块数据流更新机制的设计，仅更新紧密相邻的相邻块，使复用所需的相邻块信息量降至最少，更新时仅取右上宏块对，仅存左邻宏块，减少了读写外存次数。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNB2005100616531A CN100405851C (zh) | 2005-11-18 | 2005-11-18 | 多模标准解码器中运动矢量预测复用设计方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNB2005100616531A CN100405851C (zh) | 2005-11-18 | 2005-11-18 | 多模标准解码器中运动矢量预测复用设计方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1801941A true CN1801941A (zh) | 2006-07-12 |
| CN100405851C CN100405851C (zh) | 2008-07-23 |
Family
ID=36811653
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CNB2005100616531A Expired - Fee Related CN100405851C (zh) | 2005-11-18 | 2005-11-18 | 多模标准解码器中运动矢量预测复用设计方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN100405851C (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101516066B (zh) * | 2008-02-18 | 2011-02-23 | 中国移动通信集团公司 | 数据流传输方法及移动通信系统 |
| CN101674487B (zh) * | 2008-09-10 | 2011-11-23 | 中兴通讯股份有限公司 | 视频编码方法和装置 |
| CN102348114A (zh) * | 2010-07-30 | 2012-02-08 | 中国科学院微电子研究所 | 多模视频解码器中帧内预测器结构 |
| WO2012122786A1 (en) * | 2011-03-17 | 2012-09-20 | Mediatek Inc. | Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate |
| CN103096078B (zh) * | 2006-01-09 | 2015-10-21 | Lg电子株式会社 | 用于视频信号的层间预测方法和装置 |
| US9497453B2 (en) | 2006-01-09 | 2016-11-15 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
| CN110447228A (zh) * | 2017-03-23 | 2019-11-12 | 高通股份有限公司 | 运动向量差(mvd)预测 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6985635B2 (en) * | 2002-04-22 | 2006-01-10 | Koninklijke Philips Electronics N.V. | System and method for providing a single-layer video encoded bitstreams suitable for reduced-complexity decoding |
| US7342964B2 (en) * | 2003-07-15 | 2008-03-11 | Lsi Logic Corporation | Multi-standard variable block size motion estimation processor |
| CN1225127C (zh) * | 2003-09-12 | 2005-10-26 | 中国科学院计算技术研究所 | 一种用于视频编码的编码端/解码端双向预测方法 |
| CN1589022A (zh) * | 2004-08-26 | 2005-03-02 | 中芯联合（北京）微电子有限公司 | 多模式运动估计中由朝向树决定的宏块分割模式选择方法 |
-
2005
- 2005-11-18 CN CNB2005100616531A patent/CN100405851C/zh not_active Expired - Fee Related
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103096078B (zh) * | 2006-01-09 | 2015-10-21 | Lg电子株式会社 | 用于视频信号的层间预测方法和装置 |
| US9497453B2 (en) | 2006-01-09 | 2016-11-15 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
| CN101516066B (zh) * | 2008-02-18 | 2011-02-23 | 中国移动通信集团公司 | 数据流传输方法及移动通信系统 |
| CN101674487B (zh) * | 2008-09-10 | 2011-11-23 | 中兴通讯股份有限公司 | 视频编码方法和装置 |
| CN102348114A (zh) * | 2010-07-30 | 2012-02-08 | 中国科学院微电子研究所 | 多模视频解码器中帧内预测器结构 |
| CN102348114B (zh) * | 2010-07-30 | 2013-12-04 | 中国科学院微电子研究所 | 多模视频解码器中帧内预测器结构 |
| WO2012122786A1 (en) * | 2011-03-17 | 2012-09-20 | Mediatek Inc. | Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate |
| CN110447228A (zh) * | 2017-03-23 | 2019-11-12 | 高通股份有限公司 | 运动向量差(mvd)预测 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN100405851C (zh) | 2008-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6090728B2 (ja) | 画像復号化装置および画像復号化方法 | |
| US9351003B2 (en) | Context re-mapping in CABAC encoder | |
| CN101193305B (zh) | 用于视频编解码芯片中帧内预测的数据存储和交换方法 | |
| US20060023792A1 (en) | Memory mapping apparatus and method for video decoder/encoder | |
| KR100695141B1 (ko) | 영상처리시스템에 있어서 메모리 억세스장치 및 방법, 데이터 기록장치 및 방법과 데이터 독출장치 및 방법 | |
| EP1917812B1 (en) | Video encoding and decoding preserving cache localities | |
| CN103828370B (zh) | 缓冲装置、缓冲方法以及熵解码器 | |
| CN101909212B (zh) | 可重构多媒体SoC的多标准宏块预测系统 | |
| CN1801941A (zh) | 多模标准解码器中运动矢量预测复用设计方法 | |
| US7339507B1 (en) | Device for video decoding | |
| CN1925616B (zh) | 一种宏块对级帧场自适应编解码方法 | |
| US20060023791A1 (en) | Method and apparatus for decoding moving picture to which post filtering is applied | |
| US20110110430A1 (en) | Method for motion estimation in multimedia images | |
| CN113873256B (zh) | Hevc中邻近块的运动矢量存储方法及系统 | |
| CN101299816A (zh) | 一种处理视频图像中多个宏块单元的方法及装置 | |
| CN101193307A (zh) | 用于解块滤波参数数据存储和交换的方法 | |
| KR100556341B1 (ko) | 메모리 대역폭이 감소된 비디오 디코더 시스템 | |
| CN102625095A (zh) | 一种基于avs的帧间预测方法 | |
| JP2008054126A (ja) | 映像信号処理装置及び方法、並びに映像信号復号装置 | |
| CN101986709A (zh) | 一种匹配块高效取数的视频解码的方法及电路 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| C17 | Cessation of patent right | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20080723 Termination date: 20131118 |