CN104221380B - 用于并行运动估计的共同空间候选块 - Google Patents

用于并行运动估计的共同空间候选块 Download PDF

Info

Publication number
CN104221380B
CN104221380B CN201380019167.6A CN201380019167A CN104221380B CN 104221380 B CN104221380 B CN 104221380B CN 201380019167 A CN201380019167 A CN 201380019167A CN 104221380 B CN104221380 B CN 104221380B
Authority
CN
China
Prior art keywords
block
pme
areas
video data
movable information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380019167.6A
Other languages
English (en)
Other versions
CN104221380A (zh
Inventor
瓦迪姆·谢廖金
翔林·王
马尔塔·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN104221380A publication Critical patent/CN104221380A/zh
Application granted granted Critical
Publication of CN104221380B publication Critical patent/CN104221380B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

在一个实例中,一种用于对视频数据进行译码的设备包括视频译码器,所述视频译码器经配置以针对包括并行运动估计PME区内的多个视频数据块的所述PME区,识别在所述PME区外部且邻近于所述PME区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置,且对于所述PME区内的针对其执行运动信息预测的所述块中的每一者,产生相应的运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,产生所述运动信息候选列表包括评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。

Description

用于并行运动估计的共同空间候选块
本申请案主张2012年4月12申请的第61/623,518号美国临时申请案的权益,所述申请案的全部内容以引用的方式并入本文中。
技术领域
本发明涉及视频译码,且更特定来说,涉及用于视频译码的运动信息(例如,运动向量)预测。
背景技术
数字视频能力可并入到大范围的装置中,包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话、视频会议装置、视频串流装置等等。数字视频装置实施视频压缩技术,例如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分高级视频译码(AVC)、目前在开发中的高效率视频译码(HEVC)标准定义的标准和所述标准的扩展部分中所描述的那些视频压缩技术,从而更高效地发射及接收数字视频信息。其它视频压缩技术描述于当前在开发中的高效率视频译码(HEVC)标准中。视频装置可通过实施此些视频译码技术来更高效地发射、接收、编码、解码和/或存储数字视频信息。
视频压缩技术包含空间(图片内)预测和/或时间(图片间)预测以减少或移除视频序列中所固有的冗余。对于基于块的视频译码,可将视频切片(即,视频帧或视频帧的一部分)分割为若干视频块,所述视频块还可被称作树块、译码单元(CU)和/或译码节点。使用空间预测相对于同一图片中的相邻块中的参考样本来编码图片的经帧内译码(I)切片中的视频块。图片的经帧间译码(P或B)切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。图片可被称作帧,且参考图片可被称作参考帧。
空间或时间预测产生对待译码的块的预测性块。残差数据表示待译码的原始块与预测性块之间的像素差。根据指向形成预测性块的参考样本块的运动向量以及指示经译码块与所述预测性块之间的差的残差数据来编码经帧间译码块。根据帧内译码模式和残差数据来编码经帧内译码块。为了进一步压缩,可将残差数据从像素域变换为变换域,从而产生残差变换系数,所述残差变换系数随后可被量化。起初布置在二维阵列中的经量化变换系数可依序扫描以产生变换系数的一维向量,且可应用熵译码以实现更多的压缩。
发明内容
一般来说,本发明描述用于建构平行运动估计(PME)区内的视频数据块的运动信息候选列表以用于合并模式或高级运动向量预测(AMVP)模式(作为实例)的运动信息预测(例如,运动向量预测(MVP))。一般来说,为了建构视频块的运动信息候选列表,视频译码器评估与所述视频块相邻的一组局部空间候选块的相应运动信息,以及来自不同图片中的视频块的一或多个时间运动信息候选者以用于包含在运动信息候选列表中。然而,可并行地建构PME区内的视频块的相应运动信息候选列表。因为,对于PME内的视频块中的至少一些视频块,与所述视频块相邻的局部空间候选块中的至少一些块处于所述PME内,且因此其运动信息可能不可用于评估。检查PME区内的每一视频块的局部空间候选者以确定所述局部空间候选者是在PME区内还是PME区外可增加对PME区内的块的运动信息预测的复杂度。此外,当可用的局部空间候选者的数目和位置在PME区内的视频块之间变化时,运动信息候选列表的索引的建构及用信号通知所述索引可更复杂。
根据本发明的技术,视频译码器识别PME区的在所述PME区外部且邻近于所述PME区的一组共同空间候选块。所述组共同空间候选块为PME区内的针对其执行运动信息预测的所有视频块所共有,且可不同于所述PME区内的视频块的相应组局部空间候选块中的任一者。在一些实例中,所述组共同空间候选块相对于所述PME区的位置的关系与局部空间候选块与其相应视频块的关系(例如,左边、上方、上方和右边、下方和左边,及上方和左边)是相同的。
根据本发明的技术,对于PME区内的块中的至少一些块,视频译码器可评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的运动信息候选列表中。在一些实例中,视频译码器可评估PME区内的针对其执行运动信息预测的每一视频块的所有所述组共同空间候选块,且不评估局部空间候选块。在此些实例中,视频译码器可另外评估PME区内的针对其执行运动信息预测的视频块中的每一者的相应时间运动信息候选者,或可评估针对其执行运动信息预测的所有块的共同时间运动信息候选者。在后一种情况下,运动信息候选列表对于PME区内的针对其执行运动信息预测的所有视频块可为相同的。
在其它实例中,对于PME区中的针对其执行运动信息预测的每一视频块,视频译码器可评估除了在所述PME区外部的任何局部空间候选块之外的所有所述组共同空间候选块的运动信息。在其它实例中,对于PME区内的给定视频块,视频译码器识别所述PME区内的一或多个局部空间候选块,且选择性地评估其相对于所述PME区的位置与所述一或多个局部空间候选块相对于所述视频块的位置相同的所述组共同空间候选块中的一或多者。根据本发明的这些及其它实例技术可降低对PME内的块的运动信息预测的复杂度。
在一个实例中,一种对视频数据进行解码的方法包括识别在包括多个视频数据块的并行运动估计(PME)区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置。所述方法进一步包括产生所述PME区内的针对其执行运动信息预测的所述块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,产生所述运动信息候选列表包括评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。所述方法进一步包括基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行解码。
在另一实例中,一种对视频数据进行编码的方法包括识别在包括多个视频数据块的并行运动估计(PME)区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置。所述方法进一步包括产生所述PME区内的针对其执行运动信息预测的所述块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,产生所述运动信息候选列表包括评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。所述方法进一步包括基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行编码。
在另一实例中,一种对视频数据进行译码的设备包括视频译码器,所述视频译码器经配置以识别在包括多个视频数据块的并行运动估计(PME)区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置。所述视频译码器进一步经配置以产生所述PME区内的针对其执行运动信息预测的所述块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,为了产生所述块的所述运动信息候选列表,所述视频译码器评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。所述视频译码器进一步经配置以基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行编码。
在另一实例中,一种对视频数据进行译码的设备包括用于识别在包括多个视频数据块的并行运动估计(PME)区外部且邻近于所述区的一组共同空间候选块的装置,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置。所述设备进一步包括用于产生所述PME区内的针对其执行运动信息预测的所述块中的每一者的相应运动信息候选列表的装置,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,用于产生所述运动信息候选列表的装置包括用于评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中的装置。所述设备进一步包括用于基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行译码的装置。
在另一实例中,一种计算机程序产品包括其上存储有指令的计算机可读存储媒体。在被执行时,所述指令致使用于对视频数据进行译码的设备的一或多个处理器识别在包括多个视频数据块的并行运动估计(PME)区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置。所述指令进一步致使所述一或多个处理器产生所述PME区内的针对其执行运动信息预测的所述块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,所述致使所述一或多个处理器产生所述运动信息候选列表的指令包括致使所述一或多个处理器评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中的指令。所述指令进一步致使所述一或多个处理器基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行译码。
一或多个实例的细节陈述于附图及以下描述中。其它特征、目标及优势将从描述及附图和从权利要求书中显而易见。
附图说明
图1为说明可利用本发明中所描述的技术的实例性视频编码及解码系统的框图。
图2A到2D是说明并行运动估计(PME)区内的实例视频块以及所述视频块的相应的局部空间候选块及在所述PME区外部的一组共同候选块的概念图。
图3是说明可实施本发明中所描述的技术的实例视频编码器的框图。
图4是说明可实施本发明中所描述的技术的实例视频解码器的框图。
图5是说明用于使用PME区外部的一组共同空间候选块产生所述PME区内的视频块的运动信息候选列表的实例方法的流程图。
图6是说明用于使用PME区外部的一组共同空间候选块产生所述PME区内的视频块的运动信息候选列表的另一实例方法的流程图。
具体实施方式
如上文所论述,视频压缩技术包含相对于另一图片中的另一块中的参考样本对视频数据块(即,视频块)的时间(图片间)预测。经帧间译码块是根据运动信息(例如,指向形成另一图片中的预测块的参考样本的块的运动向量)而被译码。除了运动向量之外,运动信息还可包含(例如)参考索引。在一些实例中,为了实现进一步的位流效率,视频块的运动信息(例如,运动向量)自身可使用运动信息预测技术(例如,运动向量预测(MVP)技术)来预测。
根据此类运动信息预测技术,视频译码器可从参考块导出当前视频块的运动向量和/或其它运动信息。可从其导出所述运动信息的参考块一般包含多个预定义的空间相邻块,及来自另一图片的一或多个位于同一地点或相邻的块。例如视频编码器或视频解码器等视频译码器可基于这些参考块的运动信息建构包含空间及时间候选者的运动信息候选列表,所述参考块可被称为局部运动信息候选块。视频译码器可将索引编码或解码到候选列表中以识别用于译码所述视频块的所选择的运动信息候选者。所述运动信息预测技术可包含(作为实例)合并模式及高级运动向量预测(AMVP)模式。
为了进一步提高译码效率及速度,已提出通过视频译码器针对多个视频块并行地执行视频译码过程的各种方面,例如,运动估计、运动补偿、变换、量化及熵译码。为了促进此类并行度,视频译码器可包含多个并行处理单元,其可为单独的硬件和/或软件单元,其可通过(例如)在每一级处使用多个并行处理单元同时处理多个块而以管线方式执行此类译码级。
已提出可以此方式将运动估计并行化。具体来说,视频译码器可指定在其中包含多个视频块的并行运动估计(PME)区。视频译码器可随后并行地使用所述PME区内的多个块的运动信息来执行运动估计和/或运动补偿。
当前正在努力开发新的视频译码标准(当前被称作高效视频译码(HEVC))。即将到来的标准还被称作H.265。HEVC标准还被称作ISO/IEC23008-HEVC,其既定为HEVC的递交版本的标准编号。标准化工作是基于被称作HEVC测试模型(HM)的视频译码装置模型。HM假设优于根据例如ITU-T H.264/AVC等先前译码标准的视频译码装置的若干能力。举例来说,尽管H.264提供九种帧内预测编码模式,但HM提供多达三十五种帧内预测编码模式。
被称作“HEVC工作草案6”或“WD6”的HEVC的最近的工作草案描述于布洛斯(Bross)等人的文献JCTVC-H1003“高效率视频译码(HEVC)文本规范草案6(High-Efficiency VideoCoding(HEVC)text specification draft6)”中,ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11的视频译码联合合作小组(JCT-VC)第8次会议:美国加州圣何塞,2012年2月,其以全文引用的方式并入本文中且其至2012年10月1日为止可从http://phenix.int-evry.fr/jct/doc_end_user/documents/8_San%20Jose/wg11/JCTVC-H1003-v22.zip下载。
被称作“HEVC工作草案8”或“WD8”的HEVC的另一最近的工作草案描述于布洛斯(Bross)等人的文献HCTVC-J1003_d7“高效率视频译码(HEVC)文本规范草案8(HighEfficiency Video Coding(HEVC)Text Specification draft8)”中,ITU-T SG16WP3和ISO/IEC JTC1/SC29/WG11的JCT-VC第10次会议:瑞典斯德哥尔摩,2012年7月,其以全文引用的方式并入本文中且其至2012年10月1日为止可从http://phenix.int-evry.fr/jct/doc_end_user/documents/10_Stockholm/wg11/JCTVC-J1003-v8.zip下载。
HEVC标准不断演进,且被称作“HEVC工作草案10”或“WD10”的所述标准的较新草案描述于布洛斯(Bross)等人的文献JCTVC-L1003_v18“高效率视频译码(HEVC)文本规范草案10(High Efficiency Video Coding(HEVC)Text Specification Draft10)”中,ITU-TSG16WP3和ISO/IEC JTC1/SC29/WG11的视频译码联合合作小组(JCT-VC)第12次会议:瑞士日内瓦,2013年1月14日到23日,其至2013年3月11日为止可从http://phenix.it-sudparis.eu/jct/doc_end_user/documents/12_Geneva/wg11/JCTVC-L1003-v18.zip下载。WD10的全部内容以引用的方式并入本文中。
在HEVC的测试模型(HM)中,在图片参数集(PPS)内用信号发送PME区。一般来说,为了建构视频块的运动信息候选列表,视频译码器评估与所述视频块相邻的一组局部空间候选块的相应的运动信息,以及来自不同图片中的视频块的时间运动信息候选者以用于包含在所述运动信息候选列表中。然而,可并行地建构PME区内的视频块的相应的运动信息候选列表。因此,对于PME区内的视频块中的至少一些视频块,与所述视频块相邻的局部空间候选块中的至少一些局部空间候选块处于所述PME区内,且因此其运动信息将不可用于评估。
根据HEVC标准的提议,位于PME区内部的任何空间运动信息候选者被标记为不可用于候选列表建构。仅位于当前PME区外部的空间运动信息候选者可被评估用于候选列表建构。检查PME内的针对其执行运动信息预测的每一视频块的局部空间候选者以确定所述局部空间候选者是在所述PME内还是外部可能会增加对PME内的块的运动信息预测的复杂度。此外,在可用的局部空间候选者的数目及位置在PME区内的视频块之间变化时,运动信息候选列表的索引的建构及用信号通知所述索引可更复杂。
一般来说,本发明描述用于建构PME区内的视频数据块的运动信息候选列表以用于运动信息预测(例如,用于合并模式或AMVP模式的运动向量预测(MVP)(作为实例))的技术。在所述HEVC的提议中,在根据合并模式执行运动信息预测时可应用PME。因此,可在于PME区内根据合并模式执行运动信息预测时应用本发明的技术。然而,另外或替代地,可在于PME区内根据AMVP模式或任何其它运动信息预测模式执行运动信息预测时应用本发明的技术。另外,本发明的技术不限于根据HEVC标准对视频数据进行译码的上下文中的适用性,而是可适用于其它上下文,包含根据例如本文中所识别的其它视频译码标准等其它视频译码标准对视频数据的译码。
根据本发明的技术,视频译码器识别PME区的在所述PME区外部且邻近于所述PME区的一组共同空间候选块。所述组共同空间候选块为所述PME区内的所有视频块所共有,且可不同于PME区内的针对其执行运动信息预测的视频块的相应组局部空间候选块中的任一者。在一些实例中,所述组共同空间候选块相对于所述PME区的位置的关系与局部空间候选块与其相应视频块的关系(例如,左边、上方、右上方、左下方,及左上方)是相同的。根据本发明的技术,对于PME区内的块中的至少一些块,视频译码器可评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的运动信息候选列表中。根据本发明的实例技术可降低对PME内的块运动信息预测的复杂度。
图1为说明可利用本发明中所描述的技术的实例性视频编码及解码系统10的框图。如图1中所示,系统10包含源装置12,所述源装置产生经编码视频数据以在稍后时间由目的地装置14解码。源装置12和目的地装置14可包括广泛多种装置中的任一者,包含桌上型计算机、笔记本(即,膝上型)计算机、平板计算机、机顶盒、电话手持机(例如,所谓的“智能”电话)、所谓的“智能”平板、电视、相机、显示装置、数字媒体播放器、视频游戏控制台、视频串流装置等。在一些情况下,源装置12和目的地装置14可经装备以用于无线通信。
目的地装置14可经由链路16接收待解码的经编码视频数据。链路16可包括能够将经编码的视频数据从源装置12移动到目的地装置14的任何类型的媒体或装置。在一个实例中,链路16可包括用以使得源装置12能够实时地将经编码视频数据直接发射到目的地装置14的通信媒体。可根据例如无线通信协议等通信标准来调制经编码的视频数据,且将其发射到目的地装置14。所述通信媒体可包括任何无线或有线通信媒体,例如射频(RF)频谱或一或多条物理传输线。通信媒体可形成例如局域网、广域网或例如因特网的全球网络的基于包的网络的部分。通信媒体可包含可用于促进从源装置12到目的地装置14的通信的路由器、交换器、基站或任何其它设备。
或者,可从输出接口22将经编码数据输出到存储装置36。类似地,可通过目的地装置14的输入接口28从存储装置36存取经编码数据。存储装置36可包含多种分布式或局部存取的数据存储媒体中的任一者,例如硬盘驱动器、蓝光光盘、DVD、CD-ROM、快闪存储器、易失性或非易失性存储器,或用于存储经编码视频数据的任何其它合适的数字存储媒体。在进一步的实例中,存储装置36可对应于文件服务器或可保留由源装置12产生的经编码视频的另一中间存储装置。目的地装置14可经由流式传输或下载而存取来自存储装置36的所存储的视频数据。文件服务器可为能够存储经编码视频数据和将所述经编码视频数据发射到目的地装置14的任何类型的服务器。实例性文件服务器包含网络服务器(例如,用于网站)、FTP服务器、网络附接式存储(NAS)装置,或局部磁盘驱动器。目的地装置14可通过任何标准的数据连接(包含因特网连接)来存取经编码视频数据。此可包含无线信道(例如,Wi-Fi连接)、有线连接(例如,DSL、缆线调制解调器,等等),或适合于存取存储于文件服务器上的经编码视频数据的以上两者的组合。经编码视频数据从存储装置36的传输可为流式传输、下载传输,或两者的组合。
本发明的技术不一定受限于无线应用或环境。所述技术可应用于支持多种多媒体应用(例如,空中电视广播、有线电视传输、卫星电视发射、流式视频传输(例如,经由因特网))中的任一者的视频译码、供存储于数据存储媒体上的数字视频的编码、存储于数据存储媒体上的数字视频的解码,或其它应用。在一些实例中,系统10可经配置以支持单向或双向视频传输以支持例如视频流式传输、视频回放、视频广播和/或视频电话等应用。
在图1的实例中,源装置12包含视频源18、视频编码器20和输出接口22。在一些情况下,输出接口22可包含调制器/解调器(调制解调器)和/或发射器。在源装置12中,视频源18可包含例如视频俘获装置(例如,摄像机、含有先前俘获的视频的视频存档、用以从视频内容提供者接收视频的视频馈送接口)的源,和/或用于产生计算机图形数据以作为源视频的计算机图形系统的源,或此些源的组合。作为一个实例,如果视频源18为摄像机,则源装置12与目的地装置14可形成所谓的相机电话或视频电话。然而,一般来说,本发明中所描述的技术可适用于视频译码,且可适用于无线及/或有线应用。
可由视频编码器20来编码经俘获的、经预先俘获的或计算机产生的视频。可经由源装置12的输出接口22将经编码视频数据直接发射到目的地装置14。还(或替代地)可将经编码视频数据存储到存储装置36上以供稍后由目的地装置14或其它装置存取以进行解码和/或回放。
目的地装置14包含输入接口28、视频解码器30和显示装置32。在一些情况下,输入接口28可包含接收器和/或调制器。目的地装置14的输入接口28可经由链路16接收经编码视频数据。经由链路16传送或在存储装置36上提供的经编码视频数据可包含由视频编码器20产生以供例如视频解码器30等视频解码器在解码视频数据中使用的多种语法元素。此些语法元素可与在通信媒体上传输、存储于存储媒体上或存储于文件服务器上的经编码视频数据包含在一起。
显示装置32可与目的地装置14一起集成,或在目的地装置14外部。在一些实例中,目的地装置14可包含集成式显示装置,且还经配置以与外部显示装置介接。在其它实例中,目的地装置14可为显示装置。一般来说,显示装置32向用户显示经解码视频数据,且可包括多种显示装置中的任一者,例如,液晶显示器(LCD)、等离子体显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
视频编码器20和视频解码器30可根据视频压缩标准来操作,例如目前在开发中的高效率视频译码(HEVC)标准,且可符合HEVC测试模型(HM)。或者,视频编码器20和视频解码器30可根据例如ITU-T H.264标准(或者被称作MPEG-4第10部分,高级视频译码(AVC))或此类标准的扩展等其它专有或产业标准而操作。然而,本发明的技术不限于任何特定译码标准。视频压缩标准的其它实例包含MPEG-2和ITU-TH.263。
尽管图1中未展示,但在一些方面中,视频编码器20及视频解码器30可各自与音频编码器及解码器集成,且可包括适当的MUX-DEMUX单元或其它硬件及软件,以处理对共同数据流或单独数据流中的音频与视频两者的编码。在一些实例中,如果适用,MUX-DEMUX单元可符合ITU H.223多路复用器协议或例如用户数据报协议(UDP)等其它协议。
视频编码器20和视频解码器30各自可经实施为例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合的多种合适的编码器电路中的任一者。当所述技术部分地在软件中实施时,一装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中,且在硬件中使用一或多个处理器来执行所述指令以执行本发明的技术。视频编码器20和视频解码器30中的每一者可包含于一或多个编码器或解码器中,所述视频编码器和视频解码器中的任一者可在相应装置中被集成为组合式编码器/解码器(CODEC)的一部分。
一般来说,HM的工作模型描述视频帧或图片可以被划分为包含明度和色度样本两者的一连串树块或最大译码单元(LCU)。树块具有与H.264标准的宏块类似的目的。切片包含呈译码次序的多个连续树块。视频帧或图片可以被分割成一或多个切片。每一树块可以根据四叉树而分裂成多个译码单元(CU)。举例来说,作为四叉树的根节点的树块可分裂成四个子节点,且每一子节点又可为父节点且分裂成另外四个子节点。最终的未分裂的子节点(作为四叉树的叶节点)包括译码节点,即经译码视频块。与经译码位流相关联的语法数据可界定树块可分裂的最大次数,且还可界定译码节点的最小大小。
CU包含译码节点和与译码节点相关联的预测单元(PU)及变换单元(TU)。所述CU的大小对应于译码节点的大小且在形状上必须是正方形。CU的大小的范围可从8×8像素直到具有最大64×64像素或更大的树块的大小。每一CU可含有一或多个PU及一或多个TU。与CU相关联的语法数据可描述(例如)将CU分割为一或多个PU。分割模式在CU被跳过、被直接模式编码、被帧内预测模式编码还是被帧间预测模式编码之间可不同。可将PU的形状分割为非正方形。与CU相关联的语法数据还可描述(例如)根据四叉树将CU分割为一或多个TU。TU的形状可为正方形或非正方形。
HEVC标准允许根据TU的变换,其对于不同的CU可不同。所述TU的大小通常基于针对经分割LCU而界定的给定CU内的PU的大小而设定,但可能不总是这样。TU通常与PU是相同大小或小于PU。在一些实例中,可使用被称为“残余四叉树”(RQT)的四叉树结构将对应于CU的残余样本细分为更小的单元。RQT的叶节点可被称作变换单元(TU)。可将与TU相关联的像素差值变换以产生变换系数,所述变换系数可经量化。
一般来说,PU包含与预测过程相关的数据。举例来说,在对PU进行帧内模式编码时,PU可包含描述PU的帧内预测模式的数据。作为另一实例,在对PU进行帧间模式编码时,PU可包含界定PU的运动向量的数据。界定PU的运动向量的数据可描述(例如)运动向量的水平分量、运动向量的垂直分量、运动向量的分辨率(例如,四分之一像素精度或八分之一像素精度)、运动向量指向的参考图片,和/或运动向量的参考图片列表(例如,列表0、列表1或列表C)。
一般来说,TU用于变换和量化过程。具有一或多个PU的给定CU还可包含一或多个变换单元(TU)。在预测之后,视频编码器20可计算对应于PU的残余值。所述残余值包括像素差值,所述像素差值可被变换为变换系数、使用TU经量化且经扫描以产生串行化变换系数以用于熵译码。本发明通常术语“视频块”来指代CU的译码节点。在一些特定情况下,本发明还可使用术语“视频块”来指代树块,即,LCU或CU,其包含译码节点及PU和TU。
一视频序列通常包含一系列视频帧或图片。图片群组(GOP)一般包括一系列一或多个视频图片。GOP可在GOP的标头、图片中的一或多者的标头或其它地方中包含语法数据,所述语法数据描述包含于GOP中的图片的数目。图片的每一切片可包含切片语法数据,所述切片语法数据描述相应切片的编码模式。视频编码器20通常对个别视频切片内的视频块进行操作以便编码视频数据。视频块可对应于CU内的译码节点。所述视频块可具有固定的或变化的大小,且可根据指定的译码标准而大小不同。
作为一实例,HM支持按各种PU大小的预测。假定特定CU的大小为2N×2N,HM支持按2N×2N或N×N的PU大小的帧内预测,以及按2N×2N、2N×N、N×2N或N×N的对称PU大小的帧间预测。HM还支持用于按2N×nU、2N×nD、nL×2N和nR×2N的PU大小的帧间预测的不对称分割。在不对称分割中,CU的一个方向未被分割,而另一方向被分割为25%和75%。CU的对应于25%分区的部分由“n”继之以“向上”、“向下”、“左边”或“右边”的指示来指示。因此,例如,“2N×nU”指代被水平地分割成在顶部具有2N×0.5N PU且在底部具有2N×1.5N PU的2N×2N CU。
在本发明中,“N×N”与“N乘N”可以可互换地使用,以在垂直和水平尺寸方面指代视频块的像素尺寸,例如16×16像素或16乘16像素。一般来说,16×16块将具有在垂直方向上的16个像素(y=16)和在水平方向上的16个像素(x=16)。同样地,N×N块一般具有在垂直方向上的N个像素和在水平方向上的N个像素,其中N表示非负整数值。一块中的像素可布置在若干行和若干列中。此外,块无需一定在水平方向上具有与在垂直方向上相同数目的像素。举例来说,块可包括N×M个像素,其中M不一定等于N。
在使用CU的PU进行帧内预测译码或帧间预测译码之后,视频编码器20可计算用于CU的TU的残余数据。PU可包括空间域(还被称作像素域)中的像素数据,且TU可包括在变换域(例如,在对残余视频数据应用例如离散余弦变换(DCT)、整数变换、小波变换或概念上类似的变换等变换之后)中的系数。残余数据可对应于未经编码图片的像素与对应于PU的预测值之间的像素差。视频编码器20可形成包含CU的残余数据的TU,且随后变换TU以产生CU的变换系数。
在进行任何变换以产生变换系数之后,视频编码器20可执行变换系数的量化。量化一般指代将变换系数量化以可能地减少用于表示系数的数据量从而提供进一步压缩的过程。量化过程可减少与系数中的一些或全部相关联的位深度。举例来说,n位值可在量化期间下舍入到m位值,其中n大于m。
在一些实例中,视频编码器20可利用预先界定的扫描次序来扫描经量化变换系数以产生可经熵编码的串行化向量。在其它实例中,视频编码器20可执行自适应扫描。在扫描经量化变换系数以形成一维向量之后,视频编码器20可(例如)根据上下文自适应可变长度译码(CAVLC)、上下文自适应二进制算术译码(CABAC)、基于语法的上下文自适应二进制算术译码(SBAC)、概率区间分割熵(PIPE)译码或另一熵编码方法来熵编码所述一维向量。视频编码器20还可对与经编码视频数据相关联的语法元素进行熵译码,以供视频解码器30在解码视频数据中使用。
为了执行CABAC,视频编码器20可将上下文模型内的上下文指派给待发射的符号。所述上下文可涉及(例如)符号的相邻值是否为非零。为了执行CAVLC,视频编码器20可针对待发射的符号选择可变长度码。可将VLC中的码字建构成使得相对较短的代码对应于更有可能的符号,而较长的代码对应于较不可能的符号。以此方式,与(例如)针对待发射的每一符号使用相等长度的码字相比,使用VLC可实现位节省。概率确定可基于指派给符号的上下文。
视频编码器20可进一步例如在帧标头、块标头、切片标头或GOP标头中将例如基于块的语法数据、基于帧的语法数据和基于GOP的语法数据等语法数据发送到视频解码器30。所述GOP语法数据可描述相应GOP中的帧的数目,且帧语法数据可指示用于编码对应帧的编码/预测模式。
另外,视频编码器20可例如通过对残余数据进行反量化及反变换而对经编码图片进行解码,且将残余数据与预测数据进行组合。以此方式,视频编码器20可模拟由视频解码器30执行的解码过程。视频编码器20及视频解码器30两者因此将具有对实质上相同的经解码图片的存取权以供图片间预测。
一般来说,视频解码器30可执行与由视频编码器执行的编码过程相反的解码过程。举例来说,视频解码器30可使用由视频编码器用于对经量化视频数据进行熵编码的熵编码技术的相反过程来执行熵解码。视频解码器30可进一步使用由视频编码器20采用的量化技术的相反过程来反量化所述视频数据,且可执行由视频编码器20用于产生经量化的变换系数的变换的相反过程。视频解码器30可随后将所得的残余块应用于邻近的参考块(帧内预测)或来自另一图片(帧间预测)的参考块以产生用于最终显示的所述视频块。视频解码器30可经配置、经指令控制或经引导以基于由视频解码器30接收的位流中的经编码视频数据的由视频编码器20提供的语法元素来执行由视频编码器20执行的各种过程的相反过程。
为了图片间预测的进一步效率,视频编码器20及视频解码器30可实施用于运动信息预测(例如,运动向量预测(MVP))的技术。由HM支持的运动信息预测的模式包含合并模式及AMVP。
合并模式是指一或多个视频译码模式,其中待译码的当前视频块的运动信息(例如,运动向量、参考帧索引、预测方向或其它信息)是从与当前视频块相同的图片中的空间相邻视频块或(在时间上)不同的图片中的位于同一地点或相邻的视频块继承的。相同图片中的空间相邻块可被称为局部空间候选块。不同图片中的位于同一地点或相邻的块可被称为时间候选块。
为了实施合并模式,视频编码器20及视频解码器30两者实施共同的预定义的过程来评估候选块的运动信息,且从此类运动信息建构运动信息候选列表。从视频编码器20用信号发送到视频解码器30的索引值可用于识别候选列表中的哪一候选者用于对视频块进行译码,及因此当前视频块从哪一候选块继承其运动信息(例如,相对于当前块的顶部、右上、左边、左下的块,或从在时间上邻近的帧)。
跳过模式可包括一种类型的合并模式(或类似于合并模式的模式)。在跳过模式下,运动信息被继承,但不对残余信息进行译码。残余信息一般是指指示待译码的块的原始未经编码版本与从空间相邻块或位于同一地点的块继承的运动信息所识别的预测块之间的像素差的像素差信息。直接模式可为另一类型的合并模式(或类似于合并模式的模式)。直接模式可类似于跳过模式,原因在于运动信息被继承,但在直接模式下,视频块被译码以包含残余信息。短语“合并模式”在本文中用以指代可被称为跳过模式、直接模式或合并模式的这些模式中的任一者。
AMVP模式类似于合并模式,原因在于视频编码器20及视频解码器30实施共同的预定义过程来评估运动信息局部候选块及一或多个时间候选块,且基于所评估的运动信息来建构运动信息候选列表。然而,用于AMVP的预定义的列表建构过程不同于合并模式的列表建构过程。另外,对于AMVP,视频块不继承所有候选运动信息。而是,在AMVP中,视频块从所选候选块继承运动向量,所述运动向量是通过运动信息候选列表中的索引从视频编码器20用信号发送到视频解码器30。在AMVP中,视频编码器20将其它运动信息(例如,参考图片索引及预测方向)用信号发送到视频解码器30。对于AMVP,视频译码器另外用信号发送运动向量差,其中所述运动向量差是由所述索引识别的运动向量预测符与用于预测当前块的实际运动向量之间的差。因此,AMVP可通过显式地用信号发送视频块的更多运动信息以相对于合并模式的降低的位流效率为代价来提供视频块的更大的视频译码保真度。
HEVC的当前版本实施并行运动估计(PME)来改进并行处理。例如视频编码器20等视频编码器可指定包括多个视频块的PME区,例如,图片内的多个PU。视频编码器可将所述PME区用信号发送到视频解码器(例如,视频解码器30)以作为图片标头或经译码位流中其它地方的一部分。在实施PME时,视频译码器(例如,视频编码器20和/或视频解码器30)并行地确定PME区内的多个PU的运动信息。
然而,对于PME区内的针对其执行运动信息预测的视频块中的至少一些视频块,与所述视频块相邻的局部空间候选块中的至少一些局部空间候选块在所述PME区内,且因此其运动信息将不可用于评估。根据被考虑用于包含在HEVC标准中的一些提议,位于PME区内部的任何空间运动信息候选者被标记为不可用于候选列表建构。仅位于当前PME区外部的空间运动信息候选者可被评估用于候选列表建构。
根据本发明的技术,视频译码器(例如,视频编码器20和/或视频解码器30)识别PME区的在所述PME区外部且邻近于所述PME区的一组共同空间候选块。所述组共同空间候选块为所述PME区内的所有视频块所共有,且可不同于PME区内的针对其执行运动信息预测的视频块的相应组局部空间候选块中的任一者。在一些实例中,所述组共同空间候选块相对于所述PME区的位置的关系与局部空间候选块与其相应视频块的关系(例如,左边、上方、右上方、左下方,及左上方)是相同的。
对于PME区内的块中的至少一些块,视频译码器(例如,视频编码器20和/或视频解码器30)可评估所述组共同空间候选块中的至少一者的运动信息(例如,运动向量和/或参考索引)以用于包含在所述块的运动信息候选列表中。在一些实例中,视频编码器及视频解码器可评估PME区内的针对其执行运动信息预测的每一视频块的所有所述组共同空间候选块,且不评估局部空间候选块。在此些实例中,视频译码器可另外评估所述PME区内的针对其执行运动信息预测的视频块中的每一者的相应的时间运动信息候选者,或可评估所有所述块的共同时间运动信息候选者。在后一种情况下,运动信息候选列表对于所述PME区内的针对其执行运动信息预测的所有所述视频块可为相同的。
在其它实例中,对于PME区中的针对其执行运动信息预测的每一视频块,视频编码器20和/或视频解码器30可评估除了在所述PME区外部的任何局部空间候选块之外的所有所述组共同空间候选块的运动信息。在其它实例中,对于PME区内的给定视频块,视频译码器可识别所述PME区内且因此不可用的一或多个局部空间候选块。在此些实例中,视频编码器20和/或视频解码器30选择性地评估其相对于PME区的位置可与一或多个局部空间候选块相对于所述视频块的位置相同的所述组共同空间候选块中的一或多者。视频编码器20和/或视频解码器30可随后建构包含一或多个共同空间候选者和/或一或多个局部空间候选者的视频块的运动信息候选列表。
因此,视频编码器20是视频编码器的实例,所述视频编码器根据本发明的技术经配置以针对包括PME区内的多个视频数据块的所述PME区,识别在所述PME区外部且邻近于所述PME区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置,且对于所述PME区内的针对其执行运动信息预测的所述块中的每一者,产生相应的运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,为了产生所述运动信息候选列表,所述视频译码器经配置以评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。视频编码器20根据本发明的技术进一步经配置以基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行编码。
另外,视频解码器30是视频解码器的实例,所述视频解码器根据本发明的技术经配置以针对包括PME区内的多个视频数据块的所述PME区,识别在所述PME区外部且邻近于所述PME区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置,且对于所述PME区内的针对其执行运动信息预测的所述块中的每一者,产生相应的运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,为了产生所述运动信息候选列表,所述视频译码器经配置以评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。视频编码器20根据本发明的技术进一步经配置以基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行解码。
图2A到2D是说明并行运动估计(PME)区内的实例视频块以及所述视频块的相应的局部空间候选块及在所述PME区外部的一组共同候选块的概念图。举例来说,图2A展示可包含多个视频数据块(例如,PU)的PME区40A的实例。所述视频块(块1及块2)中的两者展示于PME区40A内,但还可存在其它视频块。在产生用于(例如)合并模式或AMVP的运动信息候选者列表时,可基于PU周围的局部空间候选者来选择运动信息候选者。
对于块1,空间候选者51(左边相邻者)、空间候选者52(上方相邻者)、空间候选者53(右上方相邻者)、空间候选者54(左下方相邻者)及空间候选者55(左上方相邻者)表示块1周围的实例局部空间候选者。对于块2,空间候选者61、62、63、64及65表示局部空间候选者的实例。
块T1及T2分别表示块1及2的时间候选者。在图2A中,块T1及T2被描述为在PME区40A内,邻近于块1及块2。在一些情况下,块T1及T2可位于块1及2的中心或另外在其内部。在任一情况下,用虚线边界展示块T1及T2以表示其实际上位于与块1及块2不同的图片中。块T1及T2可位于另一图片中、分别在块1及块2的下方及右边的位置处,如图2A中所说明。在其它实例中,块T1及T2可分别相对于块1及块2位于同一地点,即,可至少部分重叠块1及块2的位置,但在另一图片中。
如在图2A中可看出,块1位于PME区40A的上部及左边边界两者处。因此,局部空间候选块51、52、53、54及55位于PME区500外部。因此,根据HEVC标准,局部空间候选块51、52、53、54及55全部可用于由视频译码器(例如,视频编码器20和/或视频解码器30)进行评估,以用于建构(例如)用于合并模式或AMVP模式的运动信息候选列表。
相比之下,块2未位于PME区40A的边界处,且块2的局部空间候选块61、62、63、64及65位于PME区40A内。因为PME区40A内的视频块的运动信息被并行地译码,所以在建构块2的运动信息的候选列表时,视频译码器不可使用局部空间候选块61、62、63、64及65,因为所述PME区内的候选块与块2被并行地译码,且因此自身尚未被译码。因此,在视频译码器建构块2反运动信息候选列表时,空间候选者61、62、63、64及65不可用于包含在运动信息候选列表中,且根据当前提出的HEVC,被标记为不可用于运动信息候选列表建构。因此,在一些情况下,块T2可为其运动信息可用于视频译码器以包含在块2的运动信息候选列表中的唯一候选块。
在本发明中,空间候选者的序数编号可对应于其中空间候选者被考虑用于包含在运动信息候选列表中的次序。然而,此排序仅表示一个实例排序,且预期其它排序,且与本发明的技术相容。
根据本发明的技术,视频译码器(例如,视频编码器20或视频解码器30)可识别PME区内的针对其执行运动信息预测的所有块的一组共同空间候选块,例如,包含在图2A中反PME区40A的块1及块2。根据本发明的技术,为了建构PME区中的视频块中的一或多者的运动信息候选列表,视频译码器可评估所述组共同候选块中的一或多者的运动信息。
图2B是说明包含多个视频块的实例PME区40B(例如,包含块1及块2的PU)的概念图。在图2B所说明的实例中,块1及块2位于PME区40B内的实质上与其在图2A的PME区40A中相同的位置处。图2B还说明一组共同空间候选块71、72、73、74及75,其可为包含块1及块2的PME区40B内的所有视频块的空间候选者。
如图2B中所说明,视频译码器选择这些共同空间候选块,以使得其位于PME区40B外部。此外,共同空间候选块可邻近于PME区40B。在一些实例中,如图2B中所说明,所述组共同空间候选块相对于PME区的位置的关系可与局部空间候选块相对于视频块的位置的关系相同。举例来说,如图2B中所说明,共同空间候选块71、72、73、74及75具有相对于PME区40B的与局部空间候选块61、62、63、64及65相对于图2A中的块2相同的位置。例如,根据HEVC的合并模式或AMVP模式,可相对于PME区界定共同空间候选块的位置,如相对于PU界定局部空间候选者的具有2N×2N分割模式的PME区的大小。在图2B中所说明的实例中,所述组共同空间候选块包含位于PME区40B左边的块71、位于PME区40B上方的块72、位于PME区40B右上方的块73、位于PME区40B左下方的块74,及位于PME区40B左上方的块75。图2B中所说明的共同空间候选块的位置及编号是用于说明的目的的一个实例,且根据本发明的技术,可另外或替代地使用在当前PME区外部的其它共同空间候选块位置。
根据本发明的一些实例技术,视频译码器(例如,视频编码器20或视频解码器30)可评估在PME区40B外部的所述组共同空间候选块71、72、73、74及75以建构PME区40B内的视频块中的一或多者的运动信息候选列表。在一些实例中,视频译码器(例如,视频编码器20或视频解码器30)可对于所述PME区40B内的针对其执行运动信息预测的视频块中的每一者评估所述组共同空间候选块71、72、73、74及75中的每一者,且不评估局部空间候选块。根据此些实例,对于块1,视频译码器可评估共同空间候选块71、72、73、74及75以及时间候选块T1,但不评估局部空间候选块51、52、53、54及55中的任一者。类似地,对于块2,视频译码器可评估共同空间候选块71、72、73、74及75以及时间候选块T2,但不评估局部空间候选块51、52、53、54及55中的任一者。为了易于说明,在图2B中未展示在建构块1及2的运动信息候选列表时未被视频译码器考虑的局部空间候选块51、52、53、54、55、61、62、63、64及65
在一些实例中,在建构PME区40B内的视频块的运动信息候选列表时,视频译码器可考虑除了所述组共同空间候选块71、72、73、74及75之外的来自另一图片的一或多个时间参考块,例如T1及T2。在其它实例中,视频译码器可评估PME区40B内的所有视频块的共同时间候选块。所述共同时间候选块可为PME区40B内的视频块中的一者的时间候选块中的一者。在一些实例中,共同时间候选块可位于另一图片中的将在当前图片中的PME区40B内或邻近处中心定位或在右下位置处的位置。其中视频译码器(例如,视频编码器20或视频解码器30)评估所述组共同空间候选块71、72、73、74及75而不评估任何局部空间候选块的实例可降低建构运动信息候选列表以对PME区40B内的视频块进行译码的复杂度。其中视频译码器另外评估PME区40B内的所有视频块的共同时间候选块的实例可进一步降低建构所述视频块的运动信息候选列表的复杂度。在此些实例中,PME区40B内的针对其执行运动信息预测的所有视频块可具有通过评估所述组共同空间候选块71、72、73、74及75以及共同时间候选块而建构的相同的运动信息候选列表。
图2C是说明包含多个视频块的实例PME区40C(例如,包含块1及块2的PU)的概念图。图2C还说明一组共同空间候选块71、72、73、74及75,其可为包含块1及块2的PME区40C内的所有视频块的空间候选者。所述组共同空间候选块71、72、73、74及75相对于PME区40C处于与其相对于PME区40B的相同位置。图2B到2D中所说明的所述组共同空间候选块71、72、73、74及75的位置仅是实例,且根据本发明的技术,可使用共同空间候选块的其它位置及编号。
在一些实例中,如图2C所说明,视频译码器(例如视频编码器20和/或视频解码器30)可评估除了视频块的可用的任何局部空间候选块之外的所述组共同空间候选块71、72、73、74及75及时间候选块以用于建构PME区40C内的视频块的运动信息候选列表。在局部空间候选块在PME区40C外部时,所述PME区40C内的视频块的局部空间候选块可为可用的。因此,为了建构块1的运动信息候选列表,视频译码器可评估除了所述组共同空间候选块及所述时间候选块之外的局部空间候选块52、53及55。局部空间候选块51及54处于PME区40C内,且因此在建构块1的运动信息候选列表时不可用于评估。作为另一实例,为了建构块2的运动信息候选列表,视频译码器可仅评估所述组共同空间候选块及时间候选块。块2的局部空间候选块61、62、63、64及65(图2A)在PME区40C内,且因此不可用于建构块2的运动信息候选列表。
在一些实例中,视频编码器20或视频解码器30可首先评估可用的局部空间候选块(例如,块1的52、53及55)以用于包含在块1的运动信息候选列表中。在此些实例中,如果在评估局部空间候选块之后,运动信息候选列表中仍有可用的点,那么视频译码器可评估所述组共同空间候选块(例如,71、72、73、74及75)。在一些实施方案中,此评估次序可颠倒。另外,也可考虑例如时间候选者及人工产生的候选者等其它未明确论述的候选者以用于包含在PME区40C内的视频块的运动信息候选列表中。可在考虑局部空间候选者之前或之后考虑且可在考虑共同空间候选者之前或之后考虑这些其它候选者。
图2D是说明包含多个视频块的实例PME区40D(例如,包含块1及块2的PU)的概念图。图2C还说明一组共同空间候选块71、72、73、74及75,其可为包含块1及块2的PME区40D内的所有视频块的空间候选者。所述组共同空间候选块71、72、73、74及75处于相对于PME区40D的与其相对于PME区40B及40C(图2B及2C)的相同位置。
根据本发明的另一实例技术,如图2D中所示,对于PME区内的给定视频块,在局部空间候选块中的一或多者因为其位于PME区内部而不可用于建构运动信息候选列表时,视频译码器可使用具有对应位置的所述组共同空间候选块中的一或多者来取代那些不可用的局部空间候选块。更具体地说,视频译码器(例如视频编码器20和/或视频解码器30)可识别在PME区40D外部的所述组共同空间候选块71、72、73、74及75中的一个共同空间候选块,所述一个共同空间候选块相对于PME区40D的位置与不可用的局部空间候选块相对于PME区40D内的视频块的位置是相同的。视频译码器可随后评估所述组共同空间候选块中的所识别的一者的运动信息以用于包含在PME区40D内的视频块的运动信息候选列表中。
如图2D中所示,为了建构块1的运动信息候选列表,视频译码器可确定局部空间候选块51及54归因于位于PME区40D内而不可用。视频译码器可将共同空间候选块71识别为局部空间候选块51的替代,因为共同空间候选块71具有相对于PME区40D的与局部空间候选块51相对于块1的相同位置。具体来说,局部空间候选块51是块1的左边相邻者,且共同空间候选块71是PME区40D的左边相邻者。视频译码器可类似地将共同空间候选块74识别为局部空间候选块54的替代,因为共同空间候选块74具有相对于PME区40D的与局部空间候选块54相对于块1的相同位置。具体来说,局部空间候选块54是块1的左下相邻者(左下方),且共同空间候选块74是PME区40D的左下相邻者(左下方)。
如图2D中所示,为了建构块2的运动信息候选列表,视频译码器可确定局部空间候选块61、62、64及65归因于位于PME区40D内而不可用。视频译码器可将共同空间候选块71识别为局部空间候选块61的替代,因为共同空间候选块71具有相对于PME区40D的与局部空间候选块61相对于块2的相同位置。具体来说,局部空间候选块61是块2的左边相邻者,且共同空间候选块71是PME区40D的左边相邻者。视频译码器可类似地将共同空间候选块72识别为局部空间候选块62的替代,因为共同空间候选块72具有相对于PME区40D的与局部空间候选块62相对于块2的相同位置。具体来说,局部空间候选块62是块2的上部相邻者(上方),且共同空间候选块72是PME区40D的上部相邻者(上方)。视频译码器可类似地将共同空间候选块74识别为局部空间候选块64的替代,因为共同空间候选块74具有相对于PME区40D的与局部空间候选块64相对于块2的相同位置。具体来说,局部空间候选块64是块2的左下相邻者(左下方),且共同空间候选块74是PME区40D的左下相邻者(左下方)。另外,视频译码器可将共同空间候选块75识别为局部空间候选块65的替代,因为共同空间候选块75具有相对于PME区40D的与局部空间候选块65相对于块2的相同位置。具体来说,局部空间候选块65是块2的左上相邻者(左上方),且共同空间候选块75是PME区40D的左上相邻者(左上方)。
在一些实例中,为了产生给定视频块的运动信息候选列表,视频译码器可以预定次序考虑给定视频块的局部空间候选块,例如,以块1的数值次序考虑局部空间候选块51、52、53、54及55。在一些实例中,视频译码器可以如果所述不可用的局部空间候选块全部可用的情况下被考虑的次序考虑可用的局部空间候选块,及来自所述组共同空间候选块的对所述不可用的局部空间候选块的取代物。因此,例如,在建构块1的运动信息候选列表时,视频译码器可首先评估共同空间候选块71(取代局部空间候选块51),接着是局部空间候选块52,接着是局部空间候选块53,接着是共同空间候选块74(取代局部空间候选块54),接着是局部空间候选块55。然而,在其它实施方案中,视频译码器可在考虑共同空间候选块之前考虑所有局部空间候选块,或可在考虑局部空间候选块之前考虑所有共同空间候选块。
在上文所描述的各种实例中,PME区内的每一视频块(例如,块1及块2)的时间候选者可不同。举例来说,在分别建构块1及块2的运动信息候选列表时,考虑用于包含在所述列表中的空间候选块(即,共同空间候选块)可相同,但块1及块2中的每一者可具有唯一时间候选者(例如,图2A到2D中展示的T1及T2)。在其它实例中,除了共同空间候选块之外,还可在PME区内部的不同视频块之间共享共同时间候选块。在一些实例中,可针对PME区内的所有视频块(例如,针对其执行运动信息预测的PU)建构仅一个运动信息候选列表。根据PME区建构一个运动候选列表可在一些情况下降低译码复杂度。
根据另一实例,视频译码器可在PME区内的视频块中的至少一些视频块的运动信息候选列表中仅包含单个运动信息候选者。举例来说,由于所有局部空间候选者不可用于所述PME区内的内部视频块,例如非边界视频块,且那些视频块基本上仅存在时间运动信息候选者,所以视频译码器可仅评估那些视频块的候选列表中的一个运动信息候选者,例如,运动向量预测符(MVP)。由于在运动信息候选列表中仅具有一个候选者,所以视频编码器及视频解码器可跳过在运动信息候选列表中用信号发送例如合并索引等索引。在此些实例中的此一个单一运动信息候选者可为时间候选者或具有参考索引0的零运动向量(如果所述时间候选者不可用)。
图3是说明可实施本发明中所描述的技术的实例视频编码器20的框图。视频编码器20可执行对视频切片内的视频块的帧内译码和帧间译码。帧内译码依赖于空间预测以减少或移除给定视频帧或图片内的视频中的空间冗余。帧间译码依赖于时间预测以减少或移除视频序列的邻近帧或图片内的视频中的时间冗余。帧内模式(I模式)可指代若干基于空间的压缩模式中的任一者。帧间模式(例如单向预测(P模式)或双向预测(B模式))可指代若干基于时间的压缩模式中的任一者。
在图3的实例中,视频编码器20包含分割单元135、预测处理单元141、参考图片存储器164、求和器150、变换处理单元152、量化单元154以及熵编码单元156。预测处理模块141包含运动估计单元142、运动补偿单元144和帧内预测处理单元146。对于视频块重构,视频编码器20还包含反量化单元158、反变换处理单元160,以及求和器162。还可包含解块滤波器(图3中未展示)以将块边界滤波,以从经重构的视频移除成块性假影。在需要时,解块滤波器通常对求和器162的输出进行滤波。除了解块滤波器之外,还可使用额外的环路滤波器(环路内或环路后)。
如图3所示,视频编码器20接收视频数据,且分割单元135将所述数据分割为视频块。此分割还可包含分割为切片、瓦片或其它更大的单元,以及(例如)根据LCU和CU的四叉树结构的视频块分割。图3中所说明的视频编码器20的实例配置一般说明对将被编码的视频切片内的视频块进行编码的组件。可将所述切片划分为多个视频块(且可能划分为被称作瓦片的多组视频块)。分割单元135可另外控制将图片分割(例如,将邻近视频块分组)为PME区以供预测处理单元141根据本发明的技术进行并行处理。
预测处理单元141可针对当前视频块基于误差结果(例如,译码速率和失真水平)来选择多个可能的译码模式中的一者,例如多个帧内译码模式中的一者或多个帧间译码模式中的一者。预测处理单元141将所得的经帧内译码或经帧间译码的块提供到求和器150以产生残余块数据,且提供到求和器162以重构经编码块以用作参考图片。
预测处理单元141内的帧内预测处理单元146相对于在与待译码的当前块相同的帧或切片中的一或多个相邻块执行对当前视频块的帧内预测译码,以提供空间压缩。预测处理单元141内的运动估计单元142和运动补偿单元144相对于一或多个参考图片中的一或多个预测块执行对当前视频块的帧间预测译码以提供时间压缩。
运动估计单元142可经配置以根据视频序列的预定模式来确定视频切片的帧间预测模式。所述预定模式可将序列中的视频切片指定为P切片、B切片或GPB切片。运动估计单元142与运动补偿单元144可高度集成,但出于概念上的目的而分开予以说明。由运动估计单元142执行的运动估计是产生运动向量的过程,运动向量估计视频块的运动。运动向量(例如)可指示当前视频帧内的视频块的PU相对于参考图片内的预测块或图片的移位。
预测块是经发现在像素差异方面紧密地匹配待译码的视频块的PU的块,其可通过绝对差总和(SAD)、平方差总和(SSD)或其它差度量来确定。在一些实例中,视频编码器20可计算存储于参考图片存储器164中的参考图片的子整数像素位置的值。举例来说,视频编码器20可内插参考图片的四分之一像素位置、八分之一像素位置或其它分数像素位置的值。因此,运动估计单元142可执行相对于完整像素位置和分数像素位置的运动搜索,且以分数像素位置输出运动向量。
运动估计单元142通过比较PU的位置与参考图片的预测块的位置来计算经帧间译码切片中的视频块的PU的运动向量。可从第一参考图片列表(列表0)或第二参考图片列表(列表1)来选择所述参考图片,所述列表中的每一者识别存储于参考图片存储器164中的一或多个参考图片。运动估计单元142将计算出的运动向量发送到熵编码单元156和运动补偿单元144。
由运动补偿单元144执行的运动补偿可涉及基于通过运动估计所确定的运动向量获取或产生预测块,可能执行到子像素精度的内插。在接收到当前视频块的PU的运动向量后,运动补偿单元144可即刻定位运动向量在所述参考图片列表中的一者中所指向的预测块。视频编码器20通过从正经译码的当前视频块的像素值减去预测块的像素值从而形成像素差值,而形成残余视频块。像素差值形成块的残余数据,且可包含亮度差分量与色度差分量两者。求和器150表示执行此减法运算的组件。运动补偿单元144还可产生与视频块和视频切片相关联的语法元素以供视频解码器30在解码视频切片的视频块中使用。
帧内预测处理单元146可对当前块进行帧内预测,以作为如上文所描述的由运动估计单元142和运动补偿单元144执行的帧间预测的替代方案。具体来说,帧内预测处理单元146可确定用以对当前块进行编码的帧内预测模式。在一些实例中,帧内预测处理单元146可(例如)在单独编码回合期间使用各种帧内预测模式对当前块进行编码,且帧内预测处理单元146(在一些实例中,或为模式选择单元(未图示))可从所测试的模式中选择将使用的适当的帧内预测模式。举例来说,帧内预测处理单元146可使用对各种所测试的帧内预测模式的速率-失真分析来计算速率-失真值,且在所测试的模式中选择具有最佳速率-失真特性的帧内预测模式。速率-失真分析一般确定经编码块与曾被编码以产生所述经编码块的原始未经编码块之间的失真(或误差)量,以及用于产生所述经编码块的位速率(即,位数目)。帧内预测处理单元146可根据各种经编码块的失真和速率计算比率,以确定哪一帧内预测模式展现出用于所述块的最佳的速率-失真值。
在任何情况下,在选择了用于块的帧内预测模式之后,帧内预测处理单元146可将指示用于所述块的选定帧内预测模式的信息提供给熵编码单元156。熵编码单元156可对指示选定的帧内预测模式的信息进行编码。视频编码器20可将配置数据包含在所发射的位流中,所述配置数据可包含多个帧内预测模式索引表及多个经修改的帧内预测模式索引表(还被称作码字映射表)、各种块的编码上下文的定义,及最可能帧内预测模式的指示、帧内预测模式索引表,及经修改的帧内预测模式索引表,以用于所述上下文中的每一者。
在预测处理单元141经由帧间预测或帧内预测产生当前视频块的预测块之后,视频编码器20通过从当前视频块减去预测块而形成残余视频块。残余块中的残余视频数据可包含于一或多个TU中且应用于变换处理单元152。变换处理单元152可使用变换(例如,离散余弦变换(DCT)或概念上类似的变换)来将残余视频数据变换为残余变换系数。变换处理单元152可将残余视频数据从像素域转换到变换域(例如,频域)。
变换处理单元152可将所得的变换系数发送到量化单元154。量化单元154量化变换系数以进一步减小位速率。量化过程可减少与系数中的一些或全部相关联的位深度。可通过调整量化参数来修改量化程度。在一些实例中,量化单元154可接着执行对包含经量化变换系数的矩阵的扫描。替代地,熵编码单元156可执行扫描。
在量化之后,熵编码单元156对经量化变换系数进行熵编码。举例来说,熵编码单元156可执行上下文自适应可变长度译码(CAVLC)、上下文自适应二进制算术译码(CABAC)、基于语法的上下文自适应二进制算术译码(SBAC)、概率区间分割熵(PIPE)译码或另一熵编码方法或技术。在熵编码单元156进行的熵编码之后,可将经编码位流发射到视频解码器30或进行存档以供稍后发射或由视频解码器30检索。熵编码单元156还可对正经译码的当前视频切片的运动向量、其它运动信息及其它语法元素进行熵编码。
反量化单元158和反变换处理单元160分别应用反量化和反变换以在像素域中重构残余块,以用于稍后用作参考图片的参考块。运动补偿单元144可通过将残余块添加到参考图片列表中的一者内的参考图片中的一者的预测块而计算参考块。运动补偿单元144还可将一或多个内插滤波器应用于经重构残余块以计算子整数像素值以在运动估计中使用。求和器162将经重构的残余块添加到由运动补偿单元144产生的经运动补偿的预测块以产生参考块以供存储在参考图片存储器164中。参考块可由运动估计单元142和运动补偿单元144用作用以对后续视频帧或图片中的块进行帧间预测的参考块。
根据本发明的技术,可针对PME区中的多个视频块并行地执行例如由运动估计单元142执行的运动估计。分割单元135可界定所述PME区以包含图片内的运动估计单元142将针对其并行地执行运动估计的多个邻近块。为了促进此类并行度,视频编码器20可包含多个并行处理单元,其可为单独的硬件和/或软件单元,其中的每一者可实施运动估计单元142,从而以本文所述的方式对相应的视频块执行运动估计。多个运动估计单元142可同时(例如同时地或在重叠的时间)处理多个块。
以此方式,图3的视频编码器20表示视频编码器的实例,所述视频编码器根据本发明的技术经配置以针对包括PME区内的多个视频数据块的所述PME区,识别在所述PME区外部且邻近于所述PME区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置,且对于所述PME区内的针对其执行运动信息预测的所述块中的每一者,产生相应的运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,为了产生所述运动信息候选列表,所述视频译码器经配置以评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。视频编码器20根据本发明的技术进一步经配置以基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行编码。
图4是说明可实施本发明中所描述的技术的实例视频解码器30的框图。在图4的实例中,视频解码器30包含熵解码单元180、预测处理单元181、反量化单元186、反变换处理单元188、求和器190及参考图片存储器192。预测处理单元181包含运动补偿单元182和帧内预测处理单元184。视频解码器30在一些实例中可执行一般与关于来自图3的视频编码器20所描述的编码回合互逆的解码回合。
在解码过程期间,视频解码器30从视频编码器20接收表示经解码视频切片和相关联的语法元素的视频块的经编码视频位流。视频解码器30的熵解码单元180对位流进行熵解码以产生经量化系数、运动向量、其它运动信息及其它语法元素。熵解码单元180将运动信息和其它语法元素转发到预测处理单元181。作为实例,视频解码器30可在视频切片层级和/或视频块层级处接收语法元素。
当将视频切片译码为经帧内译码(I)切片时,预测处理单元181的帧内预测处理单元184可基于用信号通知的帧内预测模式和来自当前帧或图片的先前经解码块的数据而产生当前视频切片的视频块的预测数据。当将视帧帧译码为经帧间译码(即,B、P或GPB)切片时,预测处理单元181的运动补偿单元182基于从熵解码单元180接收的运动向量和其它语法元素而产生当前视频切片的视频块的预测块。可从参考图片列表中的一者内的参考图片中的一者产生预测块。视频解码器30可基于存储于参考图片存储器192中的参考图片使用默认建构技术来建构参考帧列表,列表0和列表1。
运动补偿单元182通过解析运动向量和其它语法元素而确定当前视频切片的视频块的预测信息,且使用所述预测信息以产生正经解码的当前视频块的预测块。举例来说,运动补偿单元182使用所接收的语法元素中的一些语法元素来确定用于对视频切片的视频块进行译码的预测模式(例如,帧内预测或帧间预测)、帧间预测切片类型(例如,B切片、P切片或GPB切片)、用于切片的参考图片列表中的一或多者的建构信息、用于切片的每一经帧间编码视频块的运动向量、用于切片的每一经帧间译码视频块的帧间预测状态,及用以对当前视频切片中的视频块进行解码的其它信息。
运动补偿单元182还可基于内插滤波器执行内插。运动补偿单元182可使用如由视频编码器20在视频块的编码期间所使用的内插滤波器来计算参考块的子整数像素的内插值。在此情况下,运动补偿单元182可从所接收的语法元素来确定由视频编码器20使用的内插滤波器且使用所述内插滤波器来产生预测块。
反量化单元186将提供于位流中且由熵解码单元180解码的经量化的变换系数反量化(即,解量化)。反量化过程可包含使用由视频编码器20针对视频切片中的每一视频块计算的量化参数,以确定应应用的量化程度以及同样的反量化程度。反变换处理单元188对变换系数应用反变换(例如,反DCT、反整数变换,或概念上类似的反变换过程),以便产生像素域中的残余块。
在运动补偿单元182基于运动向量和其它语法元素产生当前视频块的预测块之后,视频解码器30通过对来自反变换处理单元188的残余块与由运动补偿单元182产生的对应预测块求和而形成经解码视频块。求和器190代表执行此求和操作的组件。在需要时,还可应用解块滤波器以对经解码块进行滤波,以便移除成块性假影。还可使用其它环路滤波器(在译码环路中或在译码环路之后)来平滑像素转变或以其它方式提高视频质量。接着将给定帧或图片中的经解码视频块存储于参考图片存储器192中,所述参考图片存储器存储用于后续运动补偿的参考图片。参考图片存储器192还存储经解码视频以供稍后在显示装置(例如,图1的显示装置32)上呈现。
根据本发明的技术,可针对PME区中的多个视频块并行地执行在视频解码器30中由预测处理单元181和/或运动补偿单元182执行以作为运动补偿过程的一部分的运动估计。预测处理单元181和/或运动补偿单元182可例如基于从视频编码器20接收且由熵解码单元180解码的语法元素来识别包含图片内的将针对其并行地执行运动估计的多个邻近视频块的PME区。为了促进此类并行度,视频解码器30可包含多个并行处理单元,其可为单独的硬件和/或软件单元,其中的每一者可实施以本文所描述的方式对相应的视频块执行运动估计的预测处理单元181和/或运动补偿单元182。所述多个预测处理单元181和/或运动补偿单元182可同时(例如同时地或在重叠的时间)处理多个块。
以此方式,图4的视频解码器30表示视频解码器的实例,所述视频解码器根据本发明的技术经配置以针对包括PME区内的多个视频数据块的所述PME区,识别在所述PME区外部且邻近于所述PME区的一组共同空间候选块,所述组共同空间候选块中的每一者处于相对于所述PME区的相应预定义位置,且对于所述PME区内的针对其执行运动信息预测的所述块中的每一者,产生相应的运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述块中的至少一些块,为了产生所述运动信息候选列表,所述视频译码器经配置以评估所述组共同空间候选块中的至少一者的运动信息以用于包含在所述块的所述运动信息候选列表中。视频解码器20根据本发明的技术进一步经配置以基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行解码。
图5是说明用于使用PME区外部的一组共同空间候选块产生所述PME区内的视频块的运动信息候选列表的实例方法的流程图。根据图5的实例方法,视频译码器(例如,视频编码器20或视频解码器30)识别PME区(例如,图2A到2D的PME区40A到40D)(200)。视频译码器进一步识别所述PME区的在PME区外部且邻近于所述PME区的一组共同空间候选块(202)。
如上文所论述,所述组共同空间候选块相对于PME区的位置的关系可与局部空间候选块相对于视频块的位置的关系相同。例如,根据HEVC的合并模式或AMVP模式,可相对于PME区界定共同空间候选块的位置,如相对于PU界定局部空间候选者的具有2N×2N分割模式的PME区的大小。在一些实例中,所述组共同空间候选块包含以下各者中的一或多者:位于所述PME区的左边的第一块、位于PME区上方的第二块、位于PME区的右上方的第三块、位于PME区的左下方的第四块,及位于PME区的左上方的第五块。
根据图5的实例,视频译码器可进一步评估在所述PME区外部的所述组共同空间候选块以用于建构所述PME区内的视频块的运动信息候选列表(204)。在一些实例中,例如,如上文参考图2B所论述,视频编码器及视频解码器可评估所述PME区内的针对其执行运动信息预测的每一视频块的所有所述组共同空间候选块,且不评估局部空间候选块。在此些实例中,视频译码器可另外评估PME区内的针对其执行运动信息预测的视频块中的每一者的相应时间运动信息候选者,或可评估针对其执行运动信息预测的所有块的共同时间运动信息候选者。在后一种情况下,运动信息候选列表对于所述PME区内的针对其执行运动信息预测的所有所述视频块可为相同的。在例如上文参考图2C所论述的其它实例中,对于PME区中的针对其执行运动信息预测的每一视频块,视频编码器20和/或视频解码器30可评估除了在所述PME区外部的任何局部空间候选块之外的所有所述组共同空间候选块的运动信息。在此些实例中,所述视频译码器可在共同空间候选块之前评估局部空间候选块,在局部空间候选块之前评估共同空间候选块,或以任何次序评估局部及共同空间候选块。
图6是说明用于使用PME区外部的一组共同空间候选块产生所述PME区内的视频块的运动信息候选列表的另一实例方法的流程图。根据图6的实例方法,视频译码器(例如,视频编码器20或视频解码器30)识别PME区内的视频块(210)。视频译码器进一步识别所述视频块的局部空间候选块(212)。
视频译码器确定视频块的局部空间候选块中的任一者是否不可用,例如,位于所述PME区内(214)。如果所有局部空间候选块是可用的(214的否),那么视频译码器例如根据合并或AMVP模式评估所述局部空间候选块的运动信息以用于包含在所述视频块的运动信息候选列表中(218)。然而,如果一或多个局部空间候选块不可用(214的是),那么所述视频译码器识别所述组共同空间候选块中的其相对于PME区的位置与所述不可用的局部空间候选块相对于正被译码的视频块的位置是相同的多个共同空间候选块,如上文关于图2D所描述(216)。视频译码器可随后评估可用的局部空间候选块及取代不可用的局部空间候选块的共同空间候选块的运动信息(218)。在一些实例中,如上文所论述,视频译码器可以如果所述不可用的局部空间候选块全部可用的情况下被考虑的次序考虑可用的局部空间候选块,及来自所述组共同空间候选块的对所述不可用的局部空间候选块的取代物。然而,在其它实施方案中,视频译码器可在考虑共同空间候选块之前考虑所有局部空间候选块,或可在考虑局部空间候选块之前考虑所有共同空间候选块。
在一或多个实例中,所描述的功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施,那么所述功能可作为一或多个指令或代码存储在计算机可读媒体上或经由计算机可读媒体进行传输且由基于硬件的处理单元执行。计算机可读媒体可包含计算机可读存储媒体(其对应于例如数据存储媒体等有形媒体)或通信媒体,通信媒体包含促进(例如)根据通信协议将计算机程序从一处传递到另一处的任何媒体。以此方式,计算机可读媒体一般可对应于(1)非暂时性的有形计算机可读存储媒体或(2)例如信号或载波等通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索指令、代码和/或数据结构来用于实施本发明中所描述的技术的任何可用媒体。计算机程序产品可包含计算机可读媒体。
举例来说且并非限制,所述计算机可读媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置,快闪存储器,或可用于存储呈指令或数据结构的形式的所要程序代码且可由计算机存取的任何其它媒体。同样,可恰当地将任何连接称作计算机可读媒体。举例来说,如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波的无线技术从网站、服务器或其它远程源传输软件,则同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电及微波的无线技术包含于媒体的定义中。然而,应理解,计算机可读存储媒体和数据存储媒体不包含连接、载波、信号或其它瞬时媒体,而是针对于非瞬时的、有形存储媒体。如本文中所使用,磁盘及光盘包括压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软磁盘及蓝光光盘,其中磁盘通常磁性地复制数据,而光盘使用激光光学地复制数据。以上各者的组合也应包含在计算机可读媒体的范围内。
可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路等一或多个处理器来执行所述指令。因此,如本文中所使用的术语“处理器”可指上述结构或适合于实施本文中所描述的技术的任一其它结构中的任一者。另外,在一些方面中,本文中所描述的功能性可提供于经配置以用于编码及解码的专用硬件模块和/或软件模块内,或并入组合式编解码器中。并且,可将所述技术完全实施于一或多个电路或逻辑元件中。
本发明的技术可实施于广泛多种装置或设备中,包含无线手持机、集成电路(IC)或IC组(例如,芯片组)。本发明中描述各种组件、模块或单元来强调经配置以执行所揭示的技术的装置的若干功能性方面,但不一定需要通过不同的硬件单元来实现。而是,如上文所描述,各种单元可联合合适的软件和/或固件而组合于编解码器硬件单元中或通过互操作的硬件单元的集合(包含如上文所描述的一或多个处理器)来提供。
已描述了各种实例。这些及其它实例属于所附权利要求书的范围内。

Claims (34)

1.一种用于对视频数据进行解码的方法,所述方法包括:
识别在包括多个视频数据块的并行运动估计PME区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一空间候选块处于相对于所述PME区的相应预定义位置,其中所述组共同空间候选块为所述PME区的所述多个视频数据块所共有,且其中所述PME区内的所述多个视频数据块中的每一者与和所述视频数据块相邻的相应多个局部空间候选块相关联;
产生所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,产生所述运动信息候选列表包括:
评估与在所述PME区外部的所述视频数据块相关联的所述多个局部空间候选块中的任一者的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
如果在评估所述局部空间候选块之后,所述运动信息候选列表中仍有可用的点,那么评估所述组共同空间候选块的每一空间候选块的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行解码。
2.根据权利要求1所述的方法,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的所述位置的关系与所述相应多个局部空间候选块相对于所述PME区内的所述视频数据块中的每一者的位置的关系是相同的。
3.根据权利要求1所述的方法,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的预定位置包括所述PME区左边的第一位置、所述PME区上方的第二位置、所述PME区右上方的第三位置、所述PME区左下方的第四位置,及所述PME区左上方的第五位置。
4.根据权利要求1所述的方法,其进一步包括,对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估相应的时间运动信息候选者以用于包含在所述块的所述运动信息候选列表中。
5.根据权利要求1所述的方法,其进一步包括,对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估共同时间运动信息候选者以用于包含在所述块的所述运动信息候选列表中。
6.根据权利要求1所述的方法,其中所述运动信息候选者包括运动向量或参考索引中的至少一者。
7.根据权利要求1所述的方法,其中运动信息候选列表包括合并模式或高级运动向量预测AMVP模式中的至少一者的运动信息候选列表。
8.一种用于对视频数据进行编码的方法,所述方法包括:
识别在包括多个视频数据块的并行运动估计PME区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块中的每一空间候选块处于相对于所述PME区的相应预定义位置,其中所述组共同空间候选块为所述PME区的所述多个视频数据块所共有,且其中所述PME区内的所述多个视频数据块中的每一者与和所述视频数据块相邻的相应多个局部空间候选块相关联;
产生所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,产生所述运动信息候选列表包括:
评估与在所述PME区外部的所述视频数据块相关联的所述多个局部空间候选块中的任一者的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
如果在评估所述局部空间候选块之后,所述运动信息候选列表中仍有可用的点,那么评估所述组共同空间候选块的每一空间候选块的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行编码。
9.根据权利要求8所述的方法,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的所述位置的关系与所述相应多个局部空间候选块相对于所述PME区内的所述视频数据块中的每一者的位置的关系是相同的。
10.根据权利要求8所述的方法,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的预定位置包括所述PME区左边的第一位置、所述PME区上方的第二位置、所述PME区右上方的第三位置、所述PME区左下方的第四位置,及所述PME区左上方的第五位置。
11.根据权利要求8所述的方法,其进一步包括,对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估相应的时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
12.根据权利要求8所述的方法,其进一步包括,对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估共同时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
13.根据权利要求8所述的方法,其中所述运动信息候选者包括运动向量或参考索引中的至少一者。
14.根据权利要求8所述的方法,其中运动信息候选列表包括合并模式或高级运动向量预测AMVP模式中的至少一者的运动信息候选列表。
15.一种用于对视频数据进行译码的设备,所述设备包括经配置以进行以下操作的视频译码器:
识别在包括多个视频数据块的并行运动估计PME区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块的每一空间候选块处于相对于所述PME区的相应预定义位置,其中所述组共同空间候选块为所述PME区的所述多个视频数据块所共有,且其中所述PME区内的所述多个视频数据块中的每一者与和所述视频数据块相邻的相应多个局部空间候选块相关联;
产生所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,为了产生所述视频数据块的所述运动信息候选列表,所述视频译码器:
评估与在所述PME区外部的所述视频数据块相关联的所述多个局部空间候选块中的任一者的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
如果在评估所述局部空间候选块之后,所述运动信息候选列表中仍有可用的点,那么评估所述组共同空间候选块的每一空间候选块的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行译码。
16.根据权利要求15所述的设备,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的所述位置的关系与所述相应多个局部空间候选块相对于所述PME区内的所述视频数据块中的每一者的位置的关系是相同的。
17.根据权利要求15所述的设备,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的预定位置包括所述PME区左边的第一位置、所述PME区上方的第二位置、所述PME区右上方的第三位置、所述PME区左下方的第四位置,及所述PME区左上方的第五位置。
18.根据权利要求15所述的设备,其中所述视频译码器进一步经配置以对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估相应的时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
19.根据权利要求15所述的设备,其中所述视频译码器进一步经配置以对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估共同时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
20.根据权利要求15所述的设备,其中所述运动信息候选者包括运动向量或参考索引中的至少一者。
21.根据权利要求15所述的设备,其中运动信息候选列表包括合并模式或高级运动向量预测AMVP模式中的至少一者的运动信息候选列表。
22.根据权利要求15所述的设备,其中所述视频译码器包括视频编码器,所述视频编码器经配置以:识别所述组共同空间候选块;产生所述相应的运动信息候选列表;评估所述运动信息;及对所述视频数据块进行编码。
23.根据权利要求15所述的设备,其中所述视频译码器包括视频解码器,所述视频编码器经配置以:识别所述组共同空间候选块;产生所述相应的运动信息候选列表;评估所述运动信息;及对所述视频数据块进行解码。
24.根据权利要求15所述的设备,其中所述设备包含以下至少一者:
集成电路;
微处理器;及
包含所述视频译码器的无线通信装置。
25.一种用于对视频数据进行译码的设备,所述设备包括:
用于识别在包括多个视频数据块的并行运动估计PME区外部且邻近于所述区的一组共同空间候选块的装置,所述组共同空间候选块的每一空间候选块处于相对于所述PME区的相应预定义位置,其中所述组共同空间候选块为所述PME区的所述多个视频数据块所共有,且其中所述PME区内的所述多个视频数据块中的每一者与和所述视频数据块相邻的相应多个局部空间候选块相关联;
用于产生所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者的相应运动信息候选列表的装置,其中用于产生所述运动信息候选列表的装置包括对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者:
用于评估与在所述PME区外部的所述视频数据块相关联的所述多个局部空间候选块中的任一者的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中的装置;及
用于如果在评估所述局部空间候选块之后,所述运动信息候选列表中仍有可用的点,那么评估所述组共同空间候选块的每一空间候选块的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中的装置;及
用于基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行译码的装置。
26.根据权利要求25所述的设备,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的所述位置的关系与所述相应多个局部空间候选块相对于所述PME区内的所述视频数据块中的每一者的位置的关系是相同的。
27.根据权利要求25所述的设备,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的预定位置包括所述PME区左边的第一位置、所述PME区上方的第二位置、所述PME区右上方的第三位置、所述PME区左下方的第四位置,及所述PME区左上方的第五位置。
28.根据权利要求25所述的设备,其进一步包括用于以下操作的装置:对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估相应的时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
29.根据权利要求25所述的设备,其进一步包括用于以下操作的装置:对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估共同时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
30.一种其上存储有指令的计算机可读存储媒体,所述指令在被执行时致使用于对视频数据进行译码的设备的一或多个处理器:
识别在包括多个视频数据块的并行运动估计PME区外部且邻近于所述区的一组共同空间候选块,所述组共同空间候选块的每一空间候选块处于相对于所述PME区的相应预定义位置,其中所述组共同空间候选块为所述PME区的所述多个视频数据块所共有,且其中所述PME区内的所述多个视频数据块中的每一者与和所述视频数据块相邻的相应多个局部空间候选块相关联;
产生所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者的相应运动信息候选列表,其中对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,所述致使所述一或多个处理器产生所述运动信息候选列表的指令包括致使所述一或多个处理器进行以下操作的指令:
评估与在所述PME区外部的所述视频数据块相关联的所述多个局部空间候选块中的任一者的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
如果在评估所述局部空间候选块之后,所述运动信息候选列表中仍有可用的点,那么评估所述组共同空间候选块的每一空间候选块的运动信息以用于包含在所述视频数据块的所述运动信息候选列表中;及
基于所述相应的运动信息候选列表对所述PME区内的针对其执行运动信息预测的所述视频数据块进行译码。
31.根据权利要求30所述的计算机可读存储媒体,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的所述位置的关系与所述相应多个局部空间候选块相对于所述PME区内的所述视频数据块中的每一者的位置的关系是相同的。
32.根据权利要求30所述的计算机可读存储媒体,其中所述组共同空间候选块的所述空间候选块相对于所述PME区的预定位置包括所述PME区左边的第一位置、所述PME区上方的第二位置、所述PME区右上方的第三位置、所述PME区左下方的第四位置,及所述PME区左上方的第五位置。
33.根据权利要求30所述的计算机可读存储媒体,其进一步包括致使所述一或多个处理器进行以下操作的指令:对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估相应的时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
34.根据权利要求30所述的计算机可读存储媒体,其进一步包括致使所述一或多个处理器进行以下操作的指令:对于所述PME区内的针对其执行运动信息预测的所述视频数据块中的每一者,评估共同时间运动信息候选者以用于包含在所述视频数据块的所述运动信息候选列表中。
CN201380019167.6A 2012-04-12 2013-04-12 用于并行运动估计的共同空间候选块 Expired - Fee Related CN104221380B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261623518P 2012-04-12 2012-04-12
US61/623,518 2012-04-12
US13/861,302 US9338451B2 (en) 2012-04-12 2013-04-11 Common spatial candidate blocks for parallel motion estimation
US13/861,302 2013-04-11
PCT/US2013/036394 WO2013155428A1 (en) 2012-04-12 2013-04-12 Common spatial candidate blocks for parallel motion estimation

Publications (2)

Publication Number Publication Date
CN104221380A CN104221380A (zh) 2014-12-17
CN104221380B true CN104221380B (zh) 2018-01-23

Family

ID=49325069

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380019167.6A Expired - Fee Related CN104221380B (zh) 2012-04-12 2013-04-12 用于并行运动估计的共同空间候选块

Country Status (5)

Country Link
US (1) US9338451B2 (zh)
EP (1) EP2837180A1 (zh)
CN (1) CN104221380B (zh)
IN (1) IN2014MN01902A (zh)
WO (1) WO2013155428A1 (zh)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX363952B (es) * 2012-04-13 2019-04-08 Mitsubishi Electric Corp Dispositivo de codificacion de imagen, dispositivo de decodificacion de imagen, metodo de codificacion de imagen, y metodo de decodificacion de imagen.
US9544612B2 (en) * 2012-10-04 2017-01-10 Intel Corporation Prediction parameter inheritance for 3D video coding
US9432685B2 (en) * 2013-12-06 2016-08-30 Qualcomm Incorporated Scalable implementation for parallel motion estimation regions
JP6574976B2 (ja) * 2014-03-18 2019-09-18 パナソニックIpマネジメント株式会社 動画像符号化装置および動画像符号化方法
US10123036B2 (en) * 2014-06-27 2018-11-06 Microsoft Technology Licensing, Llc Motion vector selection for video encoding
US10757437B2 (en) 2014-07-17 2020-08-25 Apple Inc. Motion estimation in block processing pipelines
US9762919B2 (en) 2014-08-28 2017-09-12 Apple Inc. Chroma cache architecture in block processing pipelines
KR20170115969A (ko) * 2016-04-08 2017-10-18 한국전자통신연구원 움직임 예측 정보를 유도하는 방법 및 장치
US10602180B2 (en) 2017-06-13 2020-03-24 Qualcomm Incorporated Motion vector prediction
AU2018351405B2 (en) * 2017-10-20 2023-06-08 Kt Corporation Video signal processing method and device
BR112020024142A2 (pt) 2018-06-29 2021-03-02 Beijing Bytedance Network Technology Co., Ltd. método para processamento de vídeo, aparelho para codificação de dados de vídeo, meio de armazenamento e meio de gravação legíveis por computador não transitório
GB2588531B (en) 2018-06-29 2023-02-01 Beijing Bytedance Network Tech Co Ltd Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
TWI719525B (zh) 2018-06-29 2021-02-21 大陸商北京字節跳動網絡技術有限公司 Lut與amvp之間的交互
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
JP7256265B2 (ja) 2018-06-29 2023-04-11 北京字節跳動網絡技術有限公司 ルックアップテーブルの更新:fifo、制限されたfifo
CN110662056B (zh) 2018-06-29 2022-06-07 北京字节跳动网络技术有限公司 哪个查找表需要更新或不更新
KR102646649B1 (ko) 2018-06-29 2024-03-13 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut에서의 모션 후보들의 검사 순서
EP3791587A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Resetting of look up table per slice/tile/lcu row
JP7460617B2 (ja) 2018-06-29 2024-04-02 北京字節跳動網絡技術有限公司 Lut更新条件
WO2020003271A1 (en) * 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and merge: insert hmvp as a merge candidate, position of hmvp
GB2589241B (en) 2018-07-02 2023-06-07 Beijing Bytedance Network Tech Co Ltd Update of look-up tables
EP3834422A4 (en) * 2018-08-10 2021-09-15 Huawei Technologies Co., Ltd. CODIFICATION PROCESS, DEVICE AND SYSTEM WITH MERGING MODE
TW202025760A (zh) 2018-09-12 2020-07-01 大陸商北京字節跳動網絡技術有限公司 要檢查多少個hmvp候選
US10852340B2 (en) * 2018-11-20 2020-12-01 GM Global Technology Operations LLC Vehicle electronics high-resistance fault detection and isolation
US11012697B2 (en) 2018-12-07 2021-05-18 Qualcomm Incorporated Shared candidate list and parallel candidate list derivation for video coding
KR102648159B1 (ko) 2019-01-10 2024-03-18 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut 업데이트의 호출
WO2020143824A1 (en) 2019-01-13 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and shared merge list
WO2020147773A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Inserting order of motion candidates in lut
EP3915261A4 (en) * 2019-01-31 2023-03-01 HFI Innovation Inc. METHOD AND APPARATUS FOR COMBINED INTER AND INTRA PREDICTION FOR VIDEO CODING
CN113439443A (zh) 2019-02-17 2021-09-24 北京字节跳动网络技术有限公司 帧内块复制Merge候选的信令通知
WO2020169105A1 (en) 2019-02-24 2020-08-27 Beijing Bytedance Network Technology Co., Ltd. Condition dependent coding of palette mode usage indication
WO2020192611A1 (en) 2019-03-22 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
CN114175662B (zh) 2019-07-20 2023-11-24 北京字节跳动网络技术有限公司 调色板模式使用指示的条件相关编解码
CN117221536A (zh) * 2019-07-23 2023-12-12 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
CN114713295B (zh) * 2022-04-22 2024-06-18 河北工业大学 一种单价选择性阳离子交换膜及其制备方法与应用

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263947A (zh) * 2010-05-27 2011-11-30 香港科技大学 图像运动估计的方法及系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0500174D0 (en) 2005-01-06 2005-02-16 Kokaram Anil Method for estimating motion and occlusion
KR101578052B1 (ko) * 2008-04-02 2015-12-17 삼성전자주식회사 움직임 추정 장치 및 이를 구비하는 동영상 부호화 장치
US20120076207A1 (en) 2008-12-31 2012-03-29 Advanced Micro Devices, Inc. Multiple-candidate motion estimation with advanced spatial filtering of differential motion vectors
US9215473B2 (en) 2011-01-26 2015-12-15 Qualcomm Incorporated Sub-slices in video coding
US9143795B2 (en) * 2011-04-11 2015-09-22 Texas Instruments Incorporated Parallel motion estimation in video coding
US9282338B2 (en) 2011-06-20 2016-03-08 Qualcomm Incorporated Unified merge mode and adaptive motion vector prediction mode candidates selection
US9094689B2 (en) 2011-07-01 2015-07-28 Google Technology Holdings LLC Motion vector prediction design simplification

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263947A (zh) * 2010-05-27 2011-11-30 香港科技大学 图像运动估计的方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Parallel Merge/skip Mode for HEVC;Xing Wen,etal;《Joint Collaborative Team on Video Coding(JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11,7th Meeting:Geneva,CH》;20111130;第2、3、4节,图2、3 *

Also Published As

Publication number Publication date
US9338451B2 (en) 2016-05-10
EP2837180A1 (en) 2015-02-18
US20130272413A1 (en) 2013-10-17
IN2014MN01902A (zh) 2015-07-10
CN104221380A (zh) 2014-12-17
WO2013155428A1 (en) 2013-10-17

Similar Documents

Publication Publication Date Title
CN104221380B (zh) 用于并行运动估计的共同空间候选块
CN106105206B (zh) 用于使用置零系数的低复杂度正变换的系统和方法
CN103703776B (zh) 在视频译码中的系数扫描
CN103931182B (zh) 帧内预测视频译码中的非正方形变换
CN103959775B (zh) 一种视频数据编解码的方法及设备
CN103141100B (zh) 用于视频译码的帧内平滑滤波器
CN105075259B (zh) 用于视频译码预测的存储器减少
CN103563378B (zh) 存储器高效的上下文建模
CN103959777B (zh) 视频译码中的与自适应环路滤波器合并的样本自适应偏移
CN106105202B (zh) 通用颜色空间逆变换译码方法及装置
CN103891293B (zh) 用于色度分量的自适应环路滤波的方法及设备
CN103797801B (zh) 视频译码中的非正方形变换单元和预测单元
CN104137542B (zh) 在视频译码过程中对与残余视频数据相关联的变换系数进行译码的方法、设备以及计算机可读介质
CN103348677B (zh) 像素层级自适应帧内平滑化
CN103262533B (zh) 指示用于视频译码的帧内预测模式选择的方法,及编解码设备
CN104509113B (zh) 视频压缩中的变换跳过模式
CN103999465B (zh) 自适应性重叠块运动补偿
CN103636225B (zh) 用信号发送用于叶层级译码单元的子集的变换系数的语法元素
CN104221381B (zh) 用于视频译码的波前并行处理的方法、装置及计算机可读存储媒体
CN103947207B (zh) 用于图片分割方案的统一设计
CN104067524B (zh) 具有精简的初始化值集合的上下文自适应熵译码
CN104205829B (zh) 合并信令及环路滤波器开/关信令
CN104756499B (zh) 用于视频译码的方法、设备及计算机可读存储媒体
CN103947205B (zh) 帧内模式译码中的参考模式选择
CN104685887B (zh) 于视频译码中发信用于操作点的层识别符

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180123

Termination date: 20190412

CF01 Termination of patent right due to non-payment of annual fee