CN109600615A - 一种基于运动信息对视频进行解码的方法 - Google Patents

一种基于运动信息对视频进行解码的方法 Download PDF

Info

Publication number
CN109600615A
CN109600615A CN201811336151.9A CN201811336151A CN109600615A CN 109600615 A CN109600615 A CN 109600615A CN 201811336151 A CN201811336151 A CN 201811336151A CN 109600615 A CN109600615 A CN 109600615A
Authority
CN
China
Prior art keywords
decoded
video frame
resolution
frame
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811336151.9A
Other languages
English (en)
Inventor
林路路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jianhu Yunfei Data Technology Co Ltd
Original Assignee
Jianhu Yunfei Data Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jianhu Yunfei Data Technology Co Ltd filed Critical Jianhu Yunfei Data Technology Co Ltd
Priority to CN201811336151.9A priority Critical patent/CN109600615A/zh
Publication of CN109600615A publication Critical patent/CN109600615A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请涉及一种视频编码和解码方法、装置、计算机设备及存储介质,该视频编码方法包括:获取待编码视频帧;不同的所述待编码视频帧存在分辨率不同的情况;根据所述待编码视频帧的分辨率配置信息,确定目标运动矢量分辨率信息;在所述目标运动矢量分辨率信息所表示的基准分辨率下,确定待编码视频帧中各待编码块各自对应的目标运动矢量;获取各所述待编码块各自对应的、且在所述基准分辨率下的预测运动矢量;根据各目标运动矢量和对应的预测运动矢量间的运动残差,得到编码数据。本申请的方案提高了编码质量。

Description

一种基于运动信息对视频进行解码的方法
技术领域
本发明涉及图像处理技术领域,尤其涉及一种基于运动信息对视频进行解码的方法。
背景技术
随着数字媒体技术和计算机技术的发展,视频应用于各个领域,如移动通信、网络监控、网络电视等。随着硬件性能和屏幕分辨率的提高,用户对高清视频的需求日益强烈。传统的编码器对视频帧无区分地进行编码,可能出现某些场景视频质量差的问题,对于所有视频帧不加区分地进行编码时,存在部分视频帧质量差的问题。
发明内容
本发明实施例提供了一种基于运动信息对视频进行解码的方法,所述方法具体包括如下步骤:
一种基于运动信息对视频进行解码的方法,其特征在于,包括:
获取待解码视频帧所对应的编码数据;
提取编码数据中与所述待解码视频帧中各待解码块各自对应的运动残差;所述运动残差所对应的分辨率,为分辨率配置信息所对应的基准分辨率;
确定所述待解码视频帧中各待解码块,对于当前待解码块,确定所述当前待解码块所对应参考块所在的参考帧;在所述参考帧中,确定与所述当前待解码块在图像位置上对应的图像块;将所述图像块所对应的运动矢量,作为所述当前待解码块的预测运动矢量;
当所述待解码视频帧的分辨率与所述基准分辨率不一致时,对于当前待解码块,在所述当前待解码块所对应的预测运动矢量对应所述待解码视频帧的分辨率时,将所述当前待解码块所对应的运动残差,变换为在所述待解码视频帧的分辨率下的目标运动残差;根据所述当前待解码块所对应的目标运动残差和所述预测运动矢量,得到所述当前待解码块所对应的、且在所述待解码视频帧的分辨率下的运动矢量;
根据各所述待解码块各自对应的运动矢量,确定各所述待解码块各自对应的参考块;
根据各所述参考块和所述编码数据,得到重建视频帧。
上述基于运动信息对视频进行解码的方法,采用本发明对各所述待解码块对应的运动残差和预测运动矢量在相同分辨率下进行处理,得到各待解码块所对应的,且在所述待解码视频帧的分辨率下的运动矢量,使得确定的运动矢量更加的准确,能够准确找到各待解码块各自对应的参考块,根据准确的参考块和编码数据,得到的重建视频帧更加的准确,提高了解码图像质量。
具体实施方式
本发明实施例提出了一种基于运动信息对视频进行解码的方法,该方法具体可以包括:获取待解码视频帧对应的编码数据;获取待解码视频帧对应的分辨率信息;根据待解码视频帧对应的分辨率信息对编码数据进行解码,得到待解码视频帧对应的重建视频帧。
待解码视频帧是需要进行解码的视频帧。一个待解码视频序列可以包括多个待解码视频帧。待解码视频帧可以是实时获取的视频帧,也可以是预先存储的待解码视频序列中获取的视频帧。
分辨率信息是与分辨率相关的信息,可以是分辨率本身也可以是下采样比例。待解码视频帧对应的分辨率信息可以是从编码数据中携带的,也可以是解码设备经过计算得到的。
编码数据中可以携带待解码视频帧对应的分辨率信息,例如可以携带待解码视频帧对应的分辨率或者下采样比例。
编码数据中可以携带处理方式信息,解码设备从编码数据中获取处理方式信息,根据处理方式信息得到待解码视频帧对应的分辨率信息。例如,编码数据中可以携带处理方式信息对应的处理方式为下采样处理方式,编码标准以及解码标准中确定了下采样比例均为1/2或者编码数据中携带对应的下采样比例,则获取得到的分辨率信息为下采样比例为1/2。
重建视频帧是解码重建得到的视频帧。可以理解,该重建视频帧对应的分辨率信息与编码过程中的待编码视频帧的分辨率信息是对应的。如果在编码的过程中图像信息不存在损失,则重建视频帧与待编码视频帧是相同的,如果在编码的过程中图像信息存在损失,则重建视频帧与待编码视频帧的差异与损失值对应。对编码数据进行解码是在待解码视频帧对应的分辨率信息下进行的。解码可以包括预测、反变换、反量化以及熵解码中的至少一个,具体根据编码的过程确定。在解码时,根据待解码视频帧的分辨率信息对参考帧、待解码视频帧的各个待解码块对应的位置信息、参考帧的各个参考块对应的位置信息以及运动矢量中的至少一个进行处理,其中的处理方法与编码端进行编码时的处理方法是匹配的。例如可以获取待解码视频帧对应的参考帧,根据待解码视频帧对应的分辨率信息对参考帧进行处理,根据携带的运动矢量信息,确定处理后的参考帧中的目标参考块,根据目标参考块得到待解码块对应的预测值,并根据编码数据中的像素残差与预测值得到重建视频帧。
当编码端对位置信息进行了变换时,则在解码过程中获取得到相应的位置信息时,需要对该位置信息进行相应的变换,以保持编码端与解码端得到的目标参考块的一致性。
当编码数据中携带的运动矢量信息是目标运动矢量时,可以根据目标运动矢量分辨率信息与待解码视频帧对应的分辨率信息将目标运动矢量进行变换,得到在待解码视频帧对应的分辨率信息下的运动矢量,根据运动矢量在参考帧中定位待解码块对应的参考块。
当编码数据中携带的运动矢量信息是运动残差时,获取当前待解码块对应的预测运动矢量,对各待解码块对应的运动残差和预测运动矢量在相同分辨率下进行处理,得到相应待解码块所对应的、且在待解码视频帧的分辨率下的运动矢量,根据运动矢量在参考帧中定位各待解码块各自对应的参考块。
对各待解码块对应的运动残差和预测运动矢量在相同分辨率下进行处理,表示将运动残差和预测运动矢量都变换到相同分辨率下进行运算。例如,将运动残差和预测运动矢量统一到基准分辨率下,即将预测运动矢量变换为基准分辨率下的预测运动矢量,根据变化后的预测运动矢量以及运动残差即可得到运动矢量,再将运动矢量变换到待解码视频帧的分辨率下的运动矢量。再例如,将运动残差和预测运动矢量统一到待解码视频帧的分辨率下,即将预测运动矢量变换为待解码视频帧的分辨率下的预测运动矢量,将运动残差变换到待解码视频帧的分辨率下的运动残差,根据变换后的运动残差以及变换后的预测运动矢量即可得到待解码视频帧的分辨率下的运动矢量。
该方法还包括:根据待解码视频帧对应的分辨率信息对重建视频帧进行处理,得到对应的解码视频帧。
对重建视频帧进行处理可以是采样处理,例如为上采样处理。对重建视频帧进行处理的方法与编码中对原始视频帧的处理方法可以是相对应的。例如,当原始视频帧的处理方式是下采样处理方式时,且分辨率信息是1/2下采样比例,则对重建视频帧进行上采样处理,上采样比例可以是2。
当解码端从编码数据的头信息中确定编码数据是通过下采样处理方式进行编码得到的,则解码端还可从头信息中获取所采用的下采样比例信息或下采样方法信息,并采用与下采样比例信息或下采样方法信息匹配的上采样比例、上采样方法对得到的重建视频帧进行上采样处理,得到解码视频帧。比如,下采样比例信息对应的采样比例为1/2,则解码端需要按照采样比例为2以及下采样方法信息匹配的上采样方法对重建视频帧进行上采样处理,得到解码视频帧。解码端可以从序列级头信息、组级头信息以及帧级头信息中的任一个获取到当前编码数据对应的下采样比例信息或下采样方法信息。
获取待解码视频帧对应的编码数据,获取待解码视频帧对应的分辨率信息,根据待解码视频帧对应的分辨率信息对编码数据进行解码,得到待解码视频帧对应的重建视频帧,根据待解码视频帧对应的分辨率信息对重建视频帧进行处理,得到对应的解码视频帧。因此进行解码时,可以灵活地根据待解码视频帧对应的分辨率信息进行解码,得到解码视频帧,且是在待解码视频帧的分辨率下进行解码的,能够得到准确的解码视频帧。
将待解码视频序列的待解码视频帧对应的重建视频帧都处理成相同的分辨率,例如将重建视频帧处理成与原始视频帧的原始分辨率相同的解码视频帧。
根据待解码视频帧对应的分辨率信息对编码数据进行解码,得到待解码视频帧对应的重建视频帧包括:获取待解码视频帧对应的参考帧;根据待解码视频帧对应的分辨率信息以及参考帧对编码数据进行解码,得到待解码视频帧对应的重建视频帧。
待解码视频帧对应的参考帧的个数可为一个或多个。例如当待解码视频帧为P帧,则对应的参考帧可以为1个。当待解码视频帧为B帧,则对应的参考帧可以为2个。待编码视频帧对应的参考帧可以是根据参考关系得到的,参考关系根据各个视频编解码标准可以不同。例如,对于一个视频图像组中的第二个视频帧,为B帧,对应的待解码视频帧可以是该视频组的I帧以及视频组的第4帧。或者待解码视频帧对应的参考帧可以是其前向的已编码视频帧中的前一个或者两个。可以理解,参考帧与编码过程的参考帧是一致的。
获取待解码视频帧对应的参考帧包括:获取第二参考规则,第二参考规则包括待解码视频帧与参考帧的分辨率大小关系;根据第二参考规则获取待解码视频帧对应的参考帧。
第二参考规则确定了待解码视频帧与参考帧的分辨率大小的限制关系,可以理解,为了保证编码过程中获取得到的参考帧与解码过程中获取得到的参考帧的一致性,第一参考规则与第二参考规则是一致的。第一参考规则、第二参考规则可以是在编解码标准中预先设置的。或者,在进行编码时,可以根据编码的应用场景、实时性要求等选择第一参考规则,并在编码数据中携带参考规则信息,解码器根据编码数据中的参考规则信息得到第二参考规则。分辨率大小关系包括待解码视频帧与参考帧相同以及不同的至少一种。当第二参考规则包括待解码视频帧与参考帧的分辨率相同时,第二参考规则还可以包括待解码视频帧与参考帧的分辨率的处理方式参考规则。例如处理方式参考规则可以包括全分辨处理方式的待解码视频帧可以参考全分辨率处理方式的参考帧以及下采样处理方式的待解码视频帧可以参考下采样处理方式的参考帧的一种或两种。当第二参考规则包括待解码视频帧与参考帧的分辨率不相同时,第二参考规则还可以包括待解码视频帧的分辨率大于参考帧的分辨率以及待解码视频帧的分辨率小于参考帧的分辨率的一种或两种。因此,第二参考规则可以包括原始分辨率待解码视频帧参考下采样分辨率参考帧、下采样分辨率待解码视频帧参考原始分辨率参考帧、原始分辨率待解码视频帧参考原始分辨率参考帧以及下采样分辨率待解码视频帧参考下采样分辨率的参考帧中的一种或多种。其中原始分辨率待解码视频帧,是指该待解码视频帧的分辨率与对应的原始视频帧的分辨率相同,原始分辨率参考帧,是指该参考帧的分辨率与其对应的原始视频帧的分辨率相同。下采样分辨率待解码视频帧,是指该待解码视频帧对应的分辨率信息为下采样。下采样分辨率参考帧是指该参考帧对应的分辨率信息为下采样。得到第二参考规则后,根据第二参考规则待解码视频帧对应的参考帧,使得到的参考帧满足第二参考规则。
可以从参考帧中获取与待解码视频帧的待解码块对应的参考块,根据参考块对待解码块进行解码。也可以根据待解码视频帧的分辨率信息对参考帧进行处理,从处理后的参考帧中获取与待解码视频帧的待解码块对应的目标参考块,根据目标参考块对待编码块进行解码,待解码视频帧对应的重建视频帧。
根据待解码视频帧对应的分辨率信息以及参考帧对编码数据进行解码,得到待解码视频帧对应的重建视频帧包括:根据待解码视频帧对应的分辨率信息对参考帧进行采样处理;根据采样处理后的参考帧对待解码视频帧进行解码,得到待解码视频帧对应的重建视频帧。
根据携带的运动矢量信息从采样处理后的参考帧中获取目标参考块,根据目标参考块得到待解码块对应的预测值,并根据编码数据中的像素残差与预测值得到重建视频帧。
根据待解码视频帧对应的分辨率信息对参考帧进行采样处理包括:根据待解码视频帧的分辨率信息以及运动估计像素精度对参考帧进行采样处理。
根据待解码视频帧的分辨率信息以及运动估计像素精度对参考帧进行采样处理包括:根据待解码视频帧的分辨率信息以及运动估计像素精度计算得到像素插值精度;根据像素插值精度直接对参考帧进行分像素插值处理。
根据待解码视频帧的分辨率信息以及运动估计像素精度对参考帧进行采样处理包括:根据待解码视频帧的分辨率信息对参考帧进行采样处理,得到中间参考帧;根据进行运动估计的像素精度对中间参考帧进行分像素插值处理。
计算机设备可以根据分像素插值处理后的参考帧对待解码视频帧进行解码,得到待解码视频帧对应的重建视频帧。
待解码视频帧与待编码视频帧的分辨率是一致的,得到的目标参考帧也是一致的,因此,根据待解码视频帧对应的分辨率信息对参考帧进行采样处理的方法,与编码端中根据待编码视频帧的分辨率信息对参考帧进行采样处理的方法是一致的,本发明实施例在此不再赘述。
解码端还可从编码数据的头信息中获取待解码视频帧对应的采样方式信息。具体可以从序列级头信息、组级头信息以及帧级头信息中的任一个获取到待解码视频帧对应的分像素插值方式信息。例如,当编码数据的帧级头信息中用于确定采样方式的标识位为0时,表示原始视频帧对应的参考帧采用直接进行分像素插值处理,在标识位为1时,表示原始视频帧对应的参考帧采用采样处理后再分像素插值处理。解码端就可按照与编码数据中标识位所表示的分像素插值方式相同对参考帧进行分像素插值处理,从而可依据分像素插值处理后的参考帧对编码数据进行解码,得到重建视频帧。
根据待解码视频帧对应的分辨率信息以及参考帧对编码数据进行解码,得到待解码视频帧对应的重建视频帧,包括:根据待解码视频帧对应的分辨率信息以及参考帧的分辨率信息确定坐标反变换参数;根据编码数据获取待解码视频帧中各待解码块对应的运动矢量;再根据坐标反变换参数以及各运动矢量得到待解码视频帧中各待解码块对应的参考块;根据各参考块对编码数据进行解码,得到待解码视频帧对应的重建视频帧。
坐标反变换参数用于对得到运动矢量的位置信息或者运动矢量进行变换。坐标反变换参数可以是参考帧的分辨率信息与待解码视频帧的分辨率信息之间的比例。坐标反变换参数与编码时计算调整运动矢量时的坐标变换参数是对应的。当利用坐标反变换参数对运动矢量进行变换时,可以将运动矢量变换到待解码视频帧对应的分辨率下,则坐标反变换参数可以是坐标变换参数的倒数。当利用坐标反变换参数对运动矢量对应的位置信息进行变换时,如果编码端中坐标变换参数用于对第一位置信息进行变换,则由于待解码块与待编码块的位置信息相同,因此坐标反变换参数与坐标变换参数相同。如果编码端中坐标变换参数用于对第二位置信息进行变换,由于根据运动矢量以及第一位置信息计算得到的位置值,是编码端中对根据坐标变换参数对第二位置信息进行变换后的位置值,因此坐标反变换参数为坐标变换参数的倒数。
在得到坐标反变换参数后,根据坐标反变换参数对得到的运动矢量或者运动矢量对应的位置信息进行变换,得到参考块对应的位置信息,从而得到参考块。在得到参考块后,根据参考块的像素值以及编码数据中携带待解码块的像素残差,得到重建视频帧各个图像块的像素值,得到重建视频帧。
根据待解码视频帧对应的分辨率信息以及第一分辨率信息确定坐标反变换参数包括:根据待解码视频帧对应的分辨率信息和参考帧的分辨率信息确定坐标反变换参数;根据坐标反变换参数以及运动矢量得到待解码视频帧中各待解码块对应的参考块包括:获取当前待解码块对应的第一位置信息;根据第一位置信息、坐标反变换参数以及运动矢量得到当前待解码块对应的参考块。
待解码视频帧的分辨率为1200*1200像素,参考帧的分辨率为600*600像素,坐标变换参数用于对第一位置信息进行变换,坐标变换参数为1/2,则坐标反变换参数为1/2。假设第一位置信息为(6,8),则运动矢量为(0,1),则第二位置信息为(6*1/2,8*1/2)-(0,1)=(3,3)。
还可以计算目标预测类型待解码块在待解码视频帧对应的前向解码视频帧中的比例;根据比例确定待解码视频帧对应的处理方式;根据处理方式得到待解码视频帧对应的分辨率信息。
目标预测类型待解码块与目标预测类型待编码块是对应的。前向解码视频帧是在待解码视频帧解码的视频帧,前向解码视频帧与前向编码视频帧也是对应的,因此编码端得到的目标预测类型待编码块的比例与解码端得到的目标预测类型待解码块的比例的计算方法以及结果也是一致的,得到目标预测类型待解码块的比例的方法可以参照目标预测类型待编码块的比例的方法,在此不再赘述。得到处理方式后,当处理方式为全分辨率处理方式,则对应的分辨率信息为原始分辨率。当处理方式为下采样处理方式,获取预设的下采样比例或者从编码数据中的头信息中获取下采样比例。
可以计算前向解码视频帧中帧内解码块在前向解码视频帧中的比例,当比例大于目标阈值时,确定处理方式为下采样处理方式。
对于帧内解码块对应的比例,可以是当该比例大于目标阈值时,确定待解码视频帧对应的处理方式为下采样处理方式,否则确定视频帧对应的处理方式为全分辨率处理方式。如,当比例大于目标阈值时,确定待解码视频帧对应的处理方式为下采样处理方式,否则确定视频帧对应的处理方式为全分辨率处理方式。
其中目标阈值可根据待解码视频帧对应的参考帧的处理方式进行确定。当待解码视频帧对应的参考帧的处理方式为下采样处理方式时,获取第一预设阈值T1,将第一预设阈值T1作为目标阈值。同样地,当待解码视频帧对应的参考帧的处理方式为全分辨率处理方式时,获取第二预设阈值T2,将第二预设阈值T2作为目标阈值。进一步地,在根据待解码视频帧对应的参考帧的分辨率信息获取到目标阈值后,根据目标阈值和前向解码视频帧中帧内解码块在前向解码视频帧中的比例确定待解码视频帧的处理方式。其中,当前向解码视频帧中帧内解码块在前向解码视频帧中的比例大于目标阈值时,确定待解码视频帧对应的处理方式为下采样处理方式。
获取待解码视频帧对应的编码数据之前,还包括:获取待解码视频帧对应的待解码视频序列,获取待解码视频序列对应的视频序列解码模式,其中,视频序列解码模式包括恒定分辨率编码模式或者混合分辨率编码模式;当视频序列解码模式为混合分辨率编码模式时,对待解码视频序列的各个待解码视频帧执行混合分辨率解码方法;当视频序列解码模式为恒定分辨率编码模式时,对待解码视频序列进行恒定分辨率解码。
可以从编码数据中获取视频序列编码模式信息,根据视频序列编码模式信息得到视频序列解码模式。例如,当视频序列编码模式信息对应的视频序列编码模式为恒定分辨率编码模式时,对应的视频序列解码模式为恒定分辨率解码模式,在恒定分辨率解码模式中,视频序列的各个待解码视频帧的分辨率是一致的。当视频序列编码模式信息对应的视频序列编码模式为混合分辨率编码模式时,对应的视频序列解码模式为混合分辨率解码模式,
可从编码数据的头信息中确定待解码视频帧对应的解码框架。具体地,解码端可以从编码数据对应的序列级头信息中,获取当前编码数据对应的输入视频序列中每个原始视频帧在被编码时所采用的编码框架,从而确定与之匹配的待解码视频帧的解码框架。比如,当编码数据的序列级头信息中用于确定所采用编码框架的标识位为0时,表示输入视频序列中各个原始视频帧在被编码时均采用恒定分辨率的编码框架,则解码端可采用恒定分辨率的解码框架对编码数据进行解码得到待解码视频帧对应的重建视频帧;在标识位为1时,表示输入视频序列中各个原始视频帧在被编码时均采用混合分辨率的编码框架,解码端就可采用混合适应分辨率的解码框架对编码数据进行解码得到重建视频帧序列。
获取待解码视频序列对应的视频序列解码模式可以包括:获取当前环境信息,当前环境信息包括当前编码环境信息、当前解码环境信息中的至少一种信息;根据当前环境信息确定待解码视频序列对应的目标视频序列解码模式。
解码端也可以根据与编码端计算视频序列编码模式的方法得到对应的目标视频序列解码模式,因此本发明实施例中根据当前环境信息确定目标视频序列解码模式与根据当前环境信息确定目标视频序列编码模式是一致的,在此不再赘述。
当前环境信息包括待解码视频序列对应的应用场景,可以根据应用场景获取待解码视频序列对应的视频序列解码模式。
接收终端获取视频序列A对应的编码数据,从编码数据对应的序列头信息中获取得到目标视频序列编码模式为混合分辨率编码模式,因此,利用混合分辨率解码框架对编码数据进行解码。
混合分辨率解码框架的分辨率信息获取单元获取第一个待解码视频帧e对应的分辨率信息,可以理解,e对应的编码数据为对a1进行编码得到的数据。其中,a1是对a以1/2下采样比例进行下采样处理后得到的视频帧。对e进行帧内解码,得到重建视频帧e1,由于e对应的分辨率信息为1/2,因此,可以对重建视频帧e1进行采样比例为2的上采样处理,得到解码视频帧e2。
混合分辨率解码框架的分辨率信息获取单元获取第二个待解码视频帧f对应的分辨率信息,可以理解,f对应的编码数据为对b1进行编码得到的数据。其中,b1是对b以1/4下采样比例进行下采样处理后得到的视频帧。对f进行帧间解码,得到重建视频帧f1,由于f对应的分辨率信息为下采样比例为1/4,因此,可以对重建视频帧f1进行采样比例为4的上采样处理,得到解码视频帧f2。
由于f为帧间预测帧,因此需要将重建视频帧e1作为参考帧,可以理解,e1与对视频编码方法进行说明的描述中所提及到的a2是相同的,对e1进行与a2相同的采样处理,得到e3,这里的e3与a3(a3也在对视频编码方法进行说明的描述中被提及到)是相同的。从编码数据中获取得到当前待解码块对应的运动矢量差为MVD1,由于MVD1是基准分辨率即原始分辨率下的,因此需要将MVD1变换为f对应的分辨率下,因此可以得到MVD3为MVD1/4。获取初始预测矢量为MV2,由于初始预测矢量是在1/4下采样比例对应的分辨率下计算得到,与f对应的分辨率相同,故可以得到第一运动矢量为MV1等于MVD1/4+MV2。根据MV1获取得到目标参考块。根据目标参考块得到待解码块对应的预测值,将像素残差p1加上预测值重建得到重建视频帧f1对应的重建块。
混合分辨率解码框架的分辨率信息获取单元获取第三个待解码视频帧g对应的编码数据,可以理解,g对应的编码数据为对c1进行编码得到的数据。其中,c1是对c以1/8下采样比例进行下采样处理后得到的视频帧(可参见对视频编码方法进行说明的描述内容)。对g进行帧间解码,得到重建视频帧g1,由于g对应的分辨率信息为1/8,因此,可以对重建视频帧f1进行采样比例为8的上采样处理,得到解码视频帧g2。由于g为帧间预测帧,因此需要将重建视频帧f1作为参考帧,可以理解,f1与对视频编码方法进行说明的描述中所提及到的b2是相同的,对f1进行与b2相同的采样处理,得到f3,这里的f3与b3((b3也在对视频编码方法进行说明的描述中被提及到))是相同的。从编码数据中获取得到当前待解码块对应的运动矢量差为MVD2,由于MVD2是基准分辨率即原始分辨率下的,因此需要将MVD2变换为g对应的分辨率下,因此可以得到MVD2为MVD1/8。获取初始预测矢量为MV4,由于初始预测矢量是在1/4下采样比例对应的分辨率下计算得到,需要变换为f对应的分辨率下,f对应的下采样比例为1/8,故可以得到第一运动矢量为MV3等于MVD2/8+MV4/2。根据MV3获取得到目标参考块。根据目标参考块得到待解码块对应的预测值,将像素残差p2加上预测值重建得到重建视频帧g1对应的重建块。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (1)

1.一种基于运动信息对视频进行解码的方法,其特征在于,包括:
获取待解码视频帧;
确定待解码视频帧中的编码数据;
提取编码数据中与所述待解码视频帧中各待解码块各自对应的运动残差;所述运动残差所对应的分辨率,为分辨率配置信息所对应的基准分辨率;
确定所述待解码视频帧中各待解码块,对于当前待解码块,确定所述当前待解码块所对应参考块所在的参考帧;在所述参考帧中,确定与所述当前待解码块在图像位置上对应的图像块;将所述图像块所对应的运动矢量,作为所述当前待解码块的预测运动矢量;
当所述待解码视频帧的分辨率与所述基准分辨率不一致时,对于当前待解码块,在所述当前待解码块所对应的预测运动矢量对应所述待解码视频帧的分辨率时,将所述当前待解码块所对应的运动残差,变换为在所述待解码视频帧的分辨率下的目标运动残差;根据所述当前待解码块所对应的目标运动残差和所述预测运动矢量,得到所述当前待解码块所对应的、且在所述待解码视频帧的分辨率下的运动矢量;
根据各所述待解码块各自对应的运动矢量,确定各所述待解码块各自对应的参考块;
根据各所述参考块和所述编码数据,得到重建视频帧。
CN201811336151.9A 2018-11-12 2018-11-12 一种基于运动信息对视频进行解码的方法 Pending CN109600615A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811336151.9A CN109600615A (zh) 2018-11-12 2018-11-12 一种基于运动信息对视频进行解码的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811336151.9A CN109600615A (zh) 2018-11-12 2018-11-12 一种基于运动信息对视频进行解码的方法

Publications (1)

Publication Number Publication Date
CN109600615A true CN109600615A (zh) 2019-04-09

Family

ID=65958057

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811336151.9A Pending CN109600615A (zh) 2018-11-12 2018-11-12 一种基于运动信息对视频进行解码的方法

Country Status (1)

Country Link
CN (1) CN109600615A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110545433A (zh) * 2019-09-27 2019-12-06 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110572654A (zh) * 2019-09-27 2019-12-13 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110572653A (zh) * 2019-09-27 2019-12-13 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN113556567A (zh) * 2020-04-24 2021-10-26 华为技术有限公司 帧间预测的方法和装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110545433A (zh) * 2019-09-27 2019-12-06 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110572654A (zh) * 2019-09-27 2019-12-13 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110572653A (zh) * 2019-09-27 2019-12-13 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
WO2021057705A1 (zh) * 2019-09-27 2021-04-01 腾讯科技(深圳)有限公司 视频编解码方法和相关装置
CN110545433B (zh) * 2019-09-27 2023-03-21 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110572654B (zh) * 2019-09-27 2024-03-15 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
US12015763B2 (en) 2019-09-27 2024-06-18 Tencent Technology (Shenzhen) Company Limited Video encoding method, video decoding method, and related apparatuses
CN113556567A (zh) * 2020-04-24 2021-10-26 华为技术有限公司 帧间预测的方法和装置

Similar Documents

Publication Publication Date Title
CN109600615A (zh) 一种基于运动信息对视频进行解码的方法
CN107809642B (zh) 用于视频图像编码和解码的方法、编码设备和解码设备
CN103329522B (zh) 用于使用字典编码视频的方法
TW297202B (zh)
CN107005712A (zh) 使用优化函数执行基于图形的预测的方法和装置
CN110602491A (zh) 帧内色度预测方法、装置、设备及视频编解码系统
CN108989802B (zh) 一种利用帧间关系的hevc视频流的质量估计方法及系统
CN103299637A (zh) 运动图像编码装置、运动图像译码装置、运动图像编码方法以及运动图像译码方法
JP6761033B2 (ja) 前フレーム残差を用いた動きベクトル予測
CN108848387A (zh) 推导参考预测模式值的方法
JP2008507190A (ja) 動き補償方法
CN111464815B (zh) 一种基于神经网络的视频编码方法及系统
RU2573747C2 (ru) Способ и устройство кодирования видео, способ и устройство декодирования видео и программы для них
CN108028945A (zh) 通过使用单例系数更新执行变换的设备和方法
CN104704826B (zh) 两步量化和编码方法和装置
JP2000165880A (ja) 適応的変換方法を用いる映像圧縮符号化装置および複号化装置ならびにその方法
CN108353175A (zh) 使用系数引起的预测处理视频信号的方法和装置
CN109618159A (zh) 一种基于分辨率对应关系的自适应编码方法
US20240098255A1 (en) Video picture component prediction method and apparatus, and computer storage medium
JP2014504815A (ja) コードストリーム情報の再利用によるh264トランスコード方法
CN111741300A (zh) 一种视频处理方法
WO2017066236A1 (en) Efficient loop filter for video codec
CN109618154A (zh) 一种视频帧解码方法
CN108401185B (zh) 参考帧选择方法、视频转码方法、电子设备和存储介质
CN109660804A (zh) 一种基于模式选择的视频帧解码方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190409