CN108495130B - 视频编码、解码方法和装置、终端、服务器和存储介质 - Google Patents

视频编码、解码方法和装置、终端、服务器和存储介质 Download PDF

Info

Publication number
CN108495130B
CN108495130B CN201810555989.0A CN201810555989A CN108495130B CN 108495130 B CN108495130 B CN 108495130B CN 201810555989 A CN201810555989 A CN 201810555989A CN 108495130 B CN108495130 B CN 108495130B
Authority
CN
China
Prior art keywords
current
frame
video frame
mode
coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810555989.0A
Other languages
English (en)
Other versions
CN108495130A (zh
Inventor
毛煦楠
高欣玮
郭利财
时永方
高安林
邓海波
谷沉沉
吕静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201810555989.0A priority Critical patent/CN108495130B/zh
Publication of CN108495130A publication Critical patent/CN108495130A/zh
Application granted granted Critical
Publication of CN108495130B publication Critical patent/CN108495130B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Abstract

本申请涉及一种视频编码、解码方法、装置、终端、服务器和计算机可读存储介质，该视频编码方法包括：获取待编码视频帧；确定所述待编码视频帧的当前编码模式，所述可选编码模式包括全分辨率模式和下采样模式；将所述待编码视频帧根据当前编码模式处理得到当前编码视频帧；当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧；根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带当前编码模式信息，本申请提供的方案可提高视频质量。

Description

视频编码、解码方法和装置、终端、服务器和存储介质
本申请是于2017年3月21日提交中国专利局，申请号为2017101707348，发明名称为“视频编码方法和装置、视频解码方法和装置”的分案申请，其全部内容通过引用结合在本申请中。
技术领域
本发明涉及计算机技术领域，特别是涉及一种视频编码、解码方法和装置、终端、服务器和存储介质。
背景技术
随着数字媒体技术和计算机技术的发展，视频应用于各个领域，如移动通信、网络监控、网络电视等。随着硬件性能和屏幕分辨率的提高，用户对高清视频的需求日益强烈。
在移动带宽有限的条件下，现有的编码器对视频帧采用相同分辨率进行编码，可能出现某些场景视频质量差的问题，如在750kbps时，对于运动剧烈的场景，采用高分辨率编码主观质量低，分析H.264\H.265\iOS等编码器都存在相似问题。
发明内容
基于此，有必要针对上述技术问题，提供一种视频编码、解码方法和装置、终端、服务器和存储介质，能够针对不同场景，自适应的选择合适的分辨率进行编码，以提高带宽有限条件下的视频质量。
一种视频编码方法，所述方法包括：
获取待编码视频帧；
确定所述待编码视频帧的当前编码模式，所述当前编码模式选取自全分辨率模式和下采样模式；
将所述待编码视频帧根据当前编码模式处理得到当前编码视频帧；
当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；
根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带当前编码模式信息。
一种视频编码装置，所述装置包括：
编码模式确定模块，用于获取待编码视频帧；确定所述待编码视频帧的当前编码模式，所述当前编码模式选取自全分辨率模式和下采样模式；
前处理模块，用于将所述待编码视频帧根据当前编码模式处理得到当前编码视频帧；
编码处理参考帧确定模块，用于当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；根据所述当前参考帧与当前编码视频帧的分辨率大小得到对应的处理参考帧；
帧间编码模块，用于根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带当前编码模式信息。
一种终端，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述视频编码方法的步骤。
一种服务器，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述视频编码方法的步骤。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述视频编码方法的步骤。
上述视频编码方法、装置、终端、服务器和计算机可读存储介质，可自适应的确定待编码视频帧的编码模式，从而能够针对不同场景，自适应的选择合适的分辨率进行编码，通过下采样编码自适应的减小空域信息，从而能够针对不同场景，以提高带宽有限条件下的视频质量，且根据当前参考帧与当前编码视频帧分辨率的大小，调整当前参考帧分辨率，即使当前参考帧与当前编码视频帧分辨率不同，也可作为参考帧，提高了参考帧的使用效率，从而可提高帧间预测的准确度，减小预测残差，提高编码图像的质量。
一种视频解码方法，所述方法包括：
获取编码数据；
根据所述编码数据所携带的当前编码模式信息确定当前解码视频帧对应的当前解码模式；
当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；
根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
将所述重建视频帧根据所述当前解码模式处理得到解码视频帧。
一种视频解码装置，所述装置包括：
解码模式确定模块，用于获取编码数据；根据所述编码数据所携带的当前编码模式信息确定当前解码视频帧对应的当前解码模式；
解码处理参考帧确定模块，用于当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；
重建模块，用于根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
解码视频帧确定模块，用于将所述重建视频帧根据所述当前解码模式处理得到解码视频帧。
一种终端，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述视频解码方法的步骤。
一种服务器，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行上述视频解码方法的步骤。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述视频解码方法的步骤。
上述视频解码方法、装置、终端、服务器和计算机可读存储介质，针对采用自适应变化模式编码的码流，可自适应调整参考帧分辨率，进行解码，自适应变化模式编码的码流是针对不同场景选择合适的分辨率进行编码的码流，从而提供对高质量图像质量码流的解码支持。
附图说明
图1为一个实施例中视频编码方法和视频解码方法的应用环境图；
图2为一个实施例中图1中终端的内部结构图；
图3为一个实施例中图1中服务器的内部结构图；
图4为一个实施例中视频编码方法的流程图；
图5为一个实施例中根据量化参数确定当前编码模式的流程图；
图6为一个实施例中根据码率确定当前编码模式的流程图；
图7为一个实施例中根据图像特征信息确定当前编码模式的流程图；
图8为另一个实施例中确定当前编码模式的流程图；
图9为再一个实施例中确定当前编码模式的流程图；
图10为一个实施例中视频解码方法的流程图；
图11为一个实施例中编解码框架示意图；
图12为一个实施例中下采样模式编码流程示意图；
图13为一个实施例中视频编码装置的结构框图；
图14为一个实施例中编码模式确定模块的结构框图；
图15为另一个实施例中视频编码装置的结构框图；
图16为一个实施例中编码处理参考帧确定模块的结构框图；
图17为一个实施例中视频解码装置的结构框图。
具体实施方式
图1为一个实施例中视频编码方法、视频解码方法运行的应用环境图。如图1所示，该应用环境包括终端110和服务器120，其中终端110、服务器120通过网络进行通信。
终端110，可为智能手机、平板电脑、笔记本电脑、台式计算机等，但并不局限于此。视频编码方法、视频解码方法可以在终端110或服务器120中完成，终端110可将待编码视频帧采用视频编码方法进行自适应分辨率编码后发送至服务器120，也可从服务器120接收自适应分辨率的编码数据并采用视频解码方法进行解码后生成解码视频帧。服务器120可以对码流存储时进行转码，此时视频编码方法在服务器完成，如果服务器120需要对码流进行解码，则视频解码方法在服务器完成。
在一个实施例中，图1中的终端110的内部结构如图2所示，该终端110包括通过系统总线连接的处理器、图形处理单元、存储介质、内存、网络接口、显示屏幕和输入设备。其中，终端110的存储介质存储有操作系统，还包括视频编码装置和/或视频解码装置，该装置用于实现一种适用于终端的视频编码方法和/或视频解码方法。该处理器用于提供计算和控制能力，支撑整个终端110的运行。终端110中的图形处理单元用于至少提供显示界面的绘制能力，内存为存储介质中的视频编码装置和/或视频解码装置的运行提供环境，网络接口用于与服务器120进行网络通信。显示屏幕用于显示应用界面等，如解码视频，输入设备用于接收用户输入的命令或数据等。对于带触摸屏的终端110，显示屏幕和输入设备可为触摸屏。图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端的限定，具体的终端或服务器可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，图1中的服务器120的内部结构如图3所示，该服务器120包括通过系统总线连接的处理器、存储介质、内存和网络接口。其中，该服务器120的存储介质存储有操作系统、数据库、视频编码装置和/或视频解码装置，数据库用于存储数据，视频编码装置和/或视频解码装置用于实现一种适用于服务器120的视频编码方法和/或视频解码方法。该服务器120的处理器用于提供计算和控制能力，支撑整个服务器120的运行。该服务器120的内存为存储介质中的视频编码装置和/或视频解码装置的运行提供环境。该服务器120的网络接口用于与外部的终端110通过网络连接通信。图2和图3中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端的限定，具体的终端或服务器可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，如图4所示，提供了一种视频编码方法，以应用于上述应用环境中的终端或服务器来举例说明，包括以下步骤：
步骤S210，获取待编码视频帧，根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式，可选编码模式包括全分辨率模式和下采样模式。
具体的，待编码视频帧可以是实时采集的视频帧，用于即时通信，也可以是存储的视频对应的视频帧。视频的当前编码信息是指视频在编码时得到的视频压缩参数信息，如帧预测类型、运动向量、量化参数、视频来源、码率、帧率、分辨率等。其中帧预测类型包括帧内预测，如I帧，前向帧间预测，如P帧，双向帧间预测，如B帧。图像特征信息是指与图像内容相关的信息，包括图像运动信息、图像纹理信息，如边缘等。根据当前编码信息和/或图像特征信息确定待编码视频帧对应的当前编码模式，可为全分辨率模式或下采样模式。下采样模式是指对待编码视频帧进行下采样后再进行编码，下采样的算法可根据需要自定义，包括垂直下采样、水平下采样、垂直和水平下采样，可采用直接平均、滤波器、bicubicinterpolation双三次插值、bilinear Interpolation双线性插值等算法进行下采样，全分辨率模式是指直接对待编码视频帧进行编码。
当前编码信息和/或图像特征信息反映了视频帧对应的场景、细节复杂度、运动剧烈程度等，如通过运动向量、量化参数、码率等可判断运动场景，量化参数大则一般运动剧烈，运动向量大则代表图像场景是大运动场景。还可根据已编码I帧与P帧或已编码I帧与B帧的码率比值判断，如果比值超过第一预设阈值，则判断为静止图像，如果比值小于第二预设阈值，则可判断为运动剧烈图像。或直接根据图像内容跟踪目标对象，根据目标对象的运动速度确定是否为大运动场景。码率一定时能表达的信息量一定，对于运动剧烈的场景，时间域信息量大，相应的可用于表达空间域信息的码率就少，因此采用低分辨率能达到较好的图像质量效果，更倾向于选择下采样模式进行编码。
通过帧预测类型可确定画面切换场景，也可根据帧预测类型对其它帧的影响确定倾向于的编码模式。如I帧一般为首帧或存在画面切换，I帧的质量影响了后续P帧或B帧的质量，所以帧内预测帧相比于帧间预测帧更倾向于选择全分辨率编码，以保证图像质量。因为P帧可作为B帧的参考帧，P帧图像质量影响了后续B帧的图像质量，所以如果采用P帧编码则相比于采用B帧编码更倾向于选择全分辨率编码。
通过图像特征信息，如图像纹理信息确定待编码视频帧的纹理复杂度，如果纹理复杂，包含的细节多，则图像空域信息多，如果进行下采样，可能由于下采样损失较多细节信息，影响视频质量，所以纹理复杂的待编码视频帧相比于纹理简单的待编码视频帧更倾向于选择全分辨率编码。
根据以上的各种编码模式选择规则，可根据当前编码信息和/或图像特征信息中的一种或多种信息，确定当前编码模式，当考虑多种信息时，可将多种信息进行综合加权，并结合每种信息对应的编码模式选择规则确定最终的当前编码模式。
步骤S220，将待编码视频帧根据当前编码模式处理得到当前编码视频帧，当所述当前编码模式为下采样模式时，对待编码视频帧进行下采样得到当前编码视频帧，当所述当前编码模式为全分辨率模式时，将待编码视频帧确定为当前编码视频帧。
具体的，下采样的算法可根据需要自定义，包括垂直下采样、水平下采样、垂直和水平下采样。具体方向上进行的采样的参数可根据需要自定义，在一个具体的实施例中，对待编码视频帧进行水平1/2下采样，采样后图像的宽度为原始视频帧的一半，对待编码视频帧进行垂直1/2下采样，采样后图像的高度为原始视频帧的一半。如果当前编码模式为全分辨率模式，则不需要对待编码视频帧进行采样，直接作为当前编码视频帧。如果下采样得到的图像宽度、高度不是最大编码块的整倍数，则需要将图像进行像素扩展为最大编码块的整倍数。
步骤S230，当所述当前编码视频帧为帧间编码帧时，获取当前编码视频帧对应的当前参考帧，根据所述当前参考帧与当前编码视频帧的分辨率大小得到对应的处理参考帧，具体为：判断当前参考帧是否与当前编码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则进入步骤S240。
具体的，当前编码视频帧对应的当前参考帧根据帧间预测类型的不同，可为前向参考帧或双向参考帧，其中参考帧的个数可为一个或多个。当前参考帧如果与当前编码视频帧分辨率相同，则可直接将当前参考帧确定为处理参考帧。
在一个实施例中，当所述当前编码视频帧为帧内编码帧时，直接进行帧内编码等得到第二编码数据，所述第二编码数据中携带当前编码模式信息。
具体的，当前编码视频帧进行帧内预测得到帧内预测残差，并对帧内预测残差进行变换、量化、熵编码等得到第二编码数据。编码过程中为了提高预测模式选择速度，可以采用快速模式选择算法，为了达到目标码率，根据码率控制算法设定量化参数。编码后得到第二编码数据，第二编码数据中携带当前编码模式信息，即在码流中还加入标志位，标志位描述当前编码视频帧采用全分辨率编码还是下采样编码。帧内编码帧也可为下采样编码模式，可有效避免I帧码率过大导致的丢包问题。
步骤S240，对当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
具体的，预设采样规则可根据需要自定义，可与当前编码视频帧的分辨率、参考帧与当前编码视频帧的距离相关。如当当前参考帧与当前编码视频帧的距离D超过预设阈值时，采用1/M下采样，否则采用1/N下采样，其中M<N。因为距离较远的当前参考帧可能参考价值小于距离较近的当前参考帧，从而对于距离较远的当前参考帧即使与当前编码视频帧的分辨率不同，也可不对其进行采样，或使得其采样后的分辨率变化较小，从而加快采样速度，进而提高整个编码速度。在一个实施例中M的值随着距离D变化，进一步提高采样参数的灵活性。
步骤S250，根据处理参考帧对当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带当前编码模式信息。
具体的，通过处理参考帧进行预测得到预测残差，并对预测残差进行变换、量化、熵编码等得到编码数据。编码过程中为了提高预测模式选择速度，可以采用快速模式选择算法，为了达到目标码率，根据码率控制算法设定量化参数。编码后得到编码数据，编码数据中携带当前编码模式信息，即在码流中还加入标志位，标志位描述当前编码视频帧采用全分辨率编码还是下采样编码。
在一个实施例中，如果当前参考帧与当前编码视频帧分辨率不相同，则对当前参考帧进行采样得到与当前编码视频帧分辨率相同的处理参考帧，其中对当前参考帧进行采样包括上采样和下采样，如果当前参考帧的分辨率大于当前编码视频帧分辨率，则对当前参考帧进行下采样得到处理参考帧，如果当前参考帧的分辨率小于当前编码视频帧分辨率，则对当前参考帧进行上采样得到处理参考帧。在一个实施例中如果当前参考帧的个数为多个，则分别对每个当前参考帧根据当前参考帧分辨率与当前编码视频帧分辨率进行采样得到与当前编码视频帧分辨率相同的处理参考帧。
具体的，处理参考帧分辨率与当前编码视频帧分辨率相同，可一定程度上提高处理参考帧与当前编码视频帧的图像匹配度，从而提高帧间预测的准确度，减小预测残差，提高编码图像的质量。
在一个实施例中对当前参考帧进行采样的采样算法与步骤S220中对待编码视频帧进行下采样得到当前编码视频帧的采样算法匹配，即如果对当前参考帧进行下采样，则下采样算法与步骤S220中对待编码视频帧进行下采样得到当前编码视频帧的下采样算法相同。如果对当前参考帧进行上采样，则上采样算法与步骤S220中对待编码视频帧进行下采样得到当前编码视频帧的下采样算法为匹配的相反的采样算法。
具体的，对当前参考帧进行采样的采样算法与对待编码视频帧进行下采样得到当前编码视频帧的采样算法匹配，可进一步提高当前参考帧与当前编码视频帧的图像匹配度，进一步提高帧间预测的准确度，减小预测残差，提高编码图像的质量。
本实施例中，通过获取待编码视频帧，根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式，可选编码模式包括全分辨率模式和下采样模式，将待编码视频帧根据当前编码模式处理得到当前编码视频帧，当当前编码模式为下采样模式时，对待编码视频帧进行下采样得到当前编码视频帧，当当前编码模式为全分辨率模式时，将待编码视频帧确定为当前编码视频帧，当所述当前编码视频帧为帧间编码帧时，获取当前编码视频帧对应的当前参考帧，根据当前参考帧与当前编码视频帧的分辨率大小得到对应的处理参考帧，具体为：判断当前参考帧是否与当前编码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧；根据处理参考帧对当前编码视频帧进行编码得到第一编码数据，第一编码数据中携带当前编码模式信息，根据待编码视频帧的当前编码信息和/或图像特征信息可自适应的确定待编码视频帧的编码模式，从而能够针对不同场景，自适应的选择合适的分辨率进行编码，通过下采样编码自适应的减小空域信息，从而能够针对不同场景，以提高带宽有限条件下的视频质量，且根据当前参考帧与当前编码视频帧分辨率的大小，调整当前参考帧分辨率，即使当前参考帧与当前编码视频帧分辨率不同，也可作为参考帧，提高了参考帧的使用效率，从而可提高帧间预测的准确度，减小预测残差，提高编码图像的质量。
在一个实施例中，当前编码信息包括量化参数信息，如图5所示，步骤S210中根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式的步骤包括：
步骤S211，获取待编码视频帧对应的当前量化参数。
具体的，对于码率没有严格要求的场景，可在编码前为每个待编码视频帧分配粗粒度的量化参数，如一帧对应一个量化参数，对于此种情况，可方便快速的获取当前量化参数，或一帧分为不同的条带slice，每个条带对应一个量化参数，对于此种情况，可根据各个条带对应的量化参数计算当前量化参数，如将各个条带对应的量化参数的均值或中值作为当前量化参数。对于对码率有严格要求的场景，在编码时为每个待编码视频帧以宏块为单位分配细粒度的量化参数，每个对应的量化参数可在基准量化参数的附近进行调整，或将基准量化参数作为当前量化参数或计算各个宏块对应的均值或中值作为当前量化参数。
步骤S212，获取待编码视频帧的帧预测类型，获取与帧预测类型对应的量化参数阈值，如果当前量化参数大于量化参数阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
具体的，根据编码模式确定规则，一般帧内预测帧相比于帧间预测帧更倾向于选择全分辨率编码，P帧编码则相比于采用B帧编码更倾向于选择全分辨率编码，所以设置I帧量化参数阈值大于或等于P帧量化参数阈值，P帧量化参数阈值大于或等于B帧量化参数阈值，只有当前量化参数大于量化参数阈值，才确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。当前量化参数越大一般运动越剧烈，对于运动剧烈的场景更倾向于选择下采样模式进行编码。
本实施例中，将不同帧预测类型与量化参数通过不同的量化参数阈值进行结合来确定待编码视频帧的当前编码模式，能提高当前编码模式确定的准确性。
在一个实施例中，当前编码信息包括码率信息，如图6所示，步骤S210中根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式的步骤包括：
步骤S213，获取待编码视频帧对应的当前目标码率。
具体的，对于码率有严格要求的场景，可根据码流的目标码率计算分配每一帧对应的帧目标码率，且每一帧对应的帧目标码率可根据历史实际编码码率进行调节，可通过码率分配算法计算得到待编码视频帧对应的当前目标码率。
步骤S214，获取待编码视频帧的帧预测类型，获取与帧预测类型对应的码率阈值，如果当前目标码率大于码率阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
具体的，根据编码模式确定规则，一般帧内预测帧相比于帧间预测帧更倾向于选择全分辨率编码，且I帧只采用帧内编码，一般码率较大且分配的目标码率也较大，P帧编码相比于采用B帧编码更倾向于选择全分辨率编码，且P帧和B帧由于可参考其它帧进行编码，一般相比于帧内预测帧分配较少的目标码率。所以设置I帧码率阈值大于P帧码率阈值，P帧码率阈值大于或等于B帧码率阈值。如果当前目标码率大于码率阈值，则确定当前编码模式为全分辨率模式，否则确定当前编码模式为下采样模式。目标码率大且超过预设阈值，代表具有较多的图像细节，选择全分辨率模式进行编码可保留图像细节，保证图像质量。
本实施例中，将不同帧预测类型与码率通过不同的码率阈值进行结合来确定待编码视频帧的当前编码模式，能提高当前编码模式确定的准确性。
在一个实施例中，图像特征信息包括运动特征信息和纹理信息，如图7所示，步骤S210中根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式的步骤包括：
步骤S215，根据运动特征信息确定运动度，根据纹理信息确定纹理复杂度。
具体的，可根据图像内容提取运动特征信息，如通过物体跟踪算法等，运动度代表了图像运动的剧烈程度，可通过不同的特征来衡量，如运动速度等。可以计算像素梯度得到图像细节纹理信息，从而确定图像的纹理复杂度，
步骤S216，如果运动度超过运动预设阈值或纹理复杂度超过纹理预设阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
具体的，根据编码模式确定规则，对于运动剧烈的场景更倾向于选择下采样模式进行编码，纹理复杂的待编码视频帧相比于纹理简单的待编码视频帧更倾向于选择全分辨率编码，所以如果运动度超过运动预设阈值或纹理复杂度超过纹理预设阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
本实施例中，直接根据图像内容信息就可确定当前编码模式，不依赖于编码过程，可在编码前分析图像提取图像特征得到各个视频帧对应的编码模式。
在一个实施例中，如图8所示，步骤S210中根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式的步骤包括：
步骤S217，获取待编码视频帧的帧预测类型，如果为帧内预测帧，则确定所述当前编码模式为全分辨率模式。
步骤S218，如果为双向帧间预测帧，则确定当前编码模式为下采样模式。
步骤S219，如果为前向帧间预测帧，则根据量化参数信息、码率信息、图像特征信息中的至少一种信息确定当前编码模式。
具体的，根据帧预测类型，如果为帧内预测帧，则确定当前编码模式为全分辨率模式，保证I帧的编码质量，如果是双向帧间预测帧，则确定当前编码模式为下采样模式，只有待编码视频帧为前向帧间预测帧，才根据量化参数信息、码率信息、图像特征信息中的至少一种信息确定当前编码模式，可对特定的帧预测类型快速确定当前编码模式，从而加快了编码效率。
在一个实施例中，当前编码信息包括量化参数信息、码率信息和帧预测类型，图像特征信息包括运动特征信息和纹理信息，如图9所示，步骤S210中根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式的步骤包括：
步骤S2101，获取预设条件与编码模式的对应关系表格，预设条件包括量化参数、码率、帧预测类型、运动度和纹理复杂度中的至少两项条件。
具体的，对应关系表格列举了不同预设条件下对应的编码模式，且至少根据2个预设条件确定编码模式，预设条件可根据需要自定义，如量化参数大于第一预设阈值，码率大于第二预设阈值等。将多个预设条件相结合通过表格可快速确定编码模式。
步骤S2102，从当前编码信息、图像特征信息中获取至少两种信息与对应关系表格中对应的预设条件相匹配确定目标编码模式作为当前编码模式。
具体的，从当前编码信息、图像特征信息中获取至少两种信息，可为当前编码信息中的至少两种信息，如码率、帧预测类型，可为图像特征信息中的至少两种信息，如纹理信息、运动速度，可为当前编码信息与图像特征信息组合形成的至少两种信息，如码率和纹理信息。通过查表，根据信息满足的预设条件确定对应目标编码模式作为当前编码模式。在通过两种或多种信息确定当前编码模式时，可通过查表快速得到当前编码模式，简单方便。
在一个实施例中，如图10所示，提供了一种视频解码方法，以应用于上述应用环境中的终端或服务器来举例说明，包括以下步骤：
步骤S310，获取编码数据，编码数据对应的每个编码视频帧携带当前编码模式信息，根据当前编码模式信息确定当前解码视频帧对应的当前解码模式。
具体的，可通过获取码流中预设位置对应的标志位，通过标志位得到当前编码模式信息，从而判断当前解码模式是全分辨率模式还是下采样模式。当前解码模式与当前编码模式相同。
步骤S320，当所述当前解码视频帧为帧间编码帧时，获取当前解码视频帧对应的当前参考帧，根据当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧，具体为：判断当前参考帧是否与当前解码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则进入步骤S330。
具体的，当前解码视频帧对应的当前参考帧根据帧间预测类型的不同，可为前向参考帧或双向参考帧，其中参考帧的个数可为一个或多个。当前参考帧如果与当前解码视频帧分辨率相同，则可直接将当前参考帧确定为处理参考帧。
在一个实施例中，如果当前解码视频帧为帧内编码帧，则直接进行解码得到重建视频帧。
步骤S330，对当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
具体的，解码时采用的预设采样规则与编码时采用的预设采样规则相同，可与当前编码视频帧的分辨率、当前参考帧与当前编码视频帧的距离相关。如当当前参考帧与当前编码视频帧的距离D超过预设阈值时，采用1/M下采样，否则采用1/N下采样，其中M<N。因为距离较远的参考帧可能参考价值小于距离较近的参考帧，从而对于距离较远的当前参考帧即使与当前编码视频帧的分辨率不同，也可不对其进行采样或使得其采样后的分辨率变化较小，从而解码时采用相同的方法可加快采样速度，进而提高整个解码速度。在一个实施例中M的值随着距离D变化，进一步提高采样参数的灵活性。在一个实施例中，如果当前参考帧与当前解码视频帧分辨率不相同，则对当前参考帧进行采样得到与当前解码视频帧分辨率相同的处理参考帧，其中对当前参考帧进行采样包括上采样和下采样，如果当前参考帧的分辨率大于当前解码视频帧分辨率，则对当前参考帧进行下采样得到处理参考帧，如果当前参考帧的分辨率小于当前编码视频帧分辨率，则对当前参考帧进行上采样得到处理参考帧。在一个实施例中如果当前参考帧的个数为多个，则分别对每个当前参考帧根据参考帧分辨率与当前解码视频帧分辨率进行采样得到与当前解码视频帧分辨率相同的处理参考帧。
在一个实施例中对当前参考帧进行采样的采样算法与步骤S340中对重建视频帧进行下采样得到解码视频帧的采样算法匹配，即如果对参考帧进行下采样，则下采样算法与步骤S340中对重建视频帧进行下采样得到解码视频帧的下采样算法相同。如果对参考帧进行上采样，则上采样算法与步骤S340中对重建视频帧进行下采样得到解码视频帧的下采样算法为匹配的相反的采样算法。
步骤S340，根据处理参考帧对当前解码视频帧进行解码得到重建视频帧。
具体的，对预测残差进行解码并与处理参考帧的对应预测像素叠加得到重建视频帧。
步骤S350，将重建视频帧根据当前解码模式处理得到解码视频帧，如果当前解码模式为下采样模式，则对重建视频帧进行上采样得到解码视频帧，如果当前编码模式信息为全分辨率模式，则将重建视频帧确定为解码视频帧。
具体的，对重建视频帧进行上采样的算法与编码端对待编码视频帧进行下采样得到当前编码视频帧的算法为匹配的相反的采样算法。
本实施例中，通过获取编码数据，编码数据对应的每个编码视频帧携带当前编码模式信息，根据当前编码模式信息确定当前解码视频帧对应的当前解码模式，当所述当前解码视频帧为帧间编码帧时，获取当前解码视频帧对应的当前参考帧，根据当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧，具体为：判断当前参考帧是否与当前解码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则，对当前参考帧根据预设采样规则进行采样得到对应的处理参考帧，根据处理参考帧对当前解码视频帧进行解码得到重建视频帧，将重建视频帧根据当前解码模式处理得到解码视频帧，如果当前解码模式为下采样模式，则对重建视频帧进行上采样得到解码视频帧，如果当前编码模式信息为全分辨率模式，则将重建视频帧确定为解码视频帧，针对采用自适应变化模式编码的码流，可自适应调整参考帧分辨率，进行解码，自适应变化模式编码的码流是针对不同场景选择合适的分辨率进行编码的码流，从而提供对高质量图像质量码流的解码支持。
如图11所示，为一个具体的实施例中，视频编码方法与视频解码方法应用的编解码框架图，对输入编解码框架的待编码视频帧先进入分辨率选择模块410，根据所述待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式，如果是全分辨率模式，则进入全分辨率编码模块420，对当前待编码视频帧进行全分辨率编码并输出编码码流。如果是下采样模式，则进入下采样编码模块430,对当前待编码视频帧进行下采样得到当前编码视频帧，对当前编码视频帧进行编码并输出编码码流。将编码码流输入混合分辨率解码模块440，进行解码后得到重建视频帧，如果是下采样模式，则对重建视频帧进行上采样得到解码视频帧，否则，直接输出解码视频帧。
下采样编码模块430在进行编码时的具体流程，如图12所示，先判断是否为帧内编码帧，如果是，则直接进行帧内预测得到预测残差，并进行变换、量化、熵编码等得到编码数据。如果不是帧内编码帧，则判断参考帧是否与当前编码视频帧分辨率相同，如果是，则进行帧内或帧间预测得到预测残差，并进行变换、量化、熵编码等得到编码数据。如果参考帧与当前编码视频帧分辨率不同，则对参考帧根据预设采样规则进行采样得到当前编码视频帧对应的处理参考帧，再进行帧内或帧间预测得到预测残差，并进行变换、量化、熵编码等得到编码数据。编码过程中为了提高预测模式选择速度，可以采用快速模式选择算法，为了达到目标码率，根据码率控制算法设定量化参数。
在一个实施例中，如图13所示，提供了一种视频编码装置，包括：
编码模式确定模块510，用于获取待编码视频帧，根据待编码视频帧的当前编码信息和/或图像特征信息确定当前编码模式，可选编码模式包括全分辨率模式和下采样模式。
前处理模块520，用于将所述待编码视频帧根据当前编码模式处理得到当前编码视频帧，当所述当前编码模式为下采样模式时，对所述待编码视频帧进行下采样得到当前编码视频帧，当所述当前编码模式为全分辨率模式时，将所述待编码视频帧确定为当前编码视频帧。
编码处理参考帧确定模块530，用于当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧，根据所述当前参考帧与当前编码视频帧的分辨率大小得到对应的处理参考帧，具体包括：判断当前参考帧是否与当前编码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则，对当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
帧间编码模块540，用于根据处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，第一编码数据中携带当前编码模式信息。
在一个实施例中，当前编码信息包括量化参数信息，编码模式确定模块510还用于获取待编码视频帧对应的当前量化参数，获取待编码视频帧的帧预测类型，获取与帧预测类型对应的量化参数阈值，如果当前量化参数大于量化参数阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
在一个实施例中，当前编码信息包括码率信息，编码模式确定模块510还用于获取待编码视频帧对应的当前目标码率，获取待编码视频帧的帧预测类型，获取与帧预测类型对应的码率阈值，如果当前目标码率大于所述码率阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
在一个实施例中，图像特征信息包括运动特征信息和纹理信息，编码模式确定模块510还用于根据运动特征信息确定运动度，根据纹理信息确定纹理复杂度，如果运动度超过运动预设阈值或纹理复杂度超过纹理预设阈值，则确定当前编码模式为下采样模式，否则确定当前编码模式为全分辨率模式。
在一个实施例中，如图14所示，编码模式确定模块510包括：
编码模式快速确定单元511，用于获取所述待编码视频帧的帧预测类型，如果为帧内预测帧，则确定所述当前编码模式为全分辨率模式，如果为双向帧间预测帧，则确定所述当前编码模式为下采样模式；
编码模式精细确定单元512，用于如果为前向帧间预测帧，则根据量化参数信息、码率信息、图像特征信息中的至少一种信息确定当前编码模式。
在一个实施例中，如图15所示，装置还包括：
帧内编码模块550，用于当所述当前编码视频帧为帧内编码帧时，直接进行帧内编码得到第二编码数据，所述第二编码数据中携带当前编码模式信息。
在一个实施例中，如图16所示，编码处理参考帧确定模块530包括：
第一采样单元531，用于如果当前参考帧的分辨率大于当前编码视频帧分辨率，则对当前参考帧进行下采样得到与当前编码视频帧分辨率相同的处理参考帧。
第二采样单元532，用于如果当前参考帧的分辨率小于当前编码视频帧分辨率，则对当前参考帧进行上采样得到与当前编码视频帧分辨率相同的处理参考帧。
在一个实施例上，如图17所示，提供了一种视频解码装置，包括：
解码模式确定模块610，用于获取编码数据，编码数据对应的每个编码视频帧携带当前编码模式信息，根据当前编码模式信息确定当前解码视频帧对应的当前解码模式。
解码处理参考帧确定模块620，用于当所述当前解码视频帧为帧间编码帧时，获取当前解码视频帧对应的当前参考帧，根据当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧，具体为：判断当前参考帧是否与当前解码视频帧分辨率相同，如果是，则直接将当前参考帧确定为处理参考帧，否则，对当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
重建模块630，用于根据处理参考帧对当前解码视频帧进行解码得到重建视频帧。
解码视频帧确定模块640，用于将重建视频帧根据当前解码模式处理得到解码视频帧，如果当前解码模式为下采样模式，则对重建视频帧进行上采样得到解码视频帧，如果当前编码模式信息为全分辨率模式，则将重建视频帧确定为解码视频帧。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述程序可存储于一计算机可读取存储介质中，如本发明实施例中，该程序可存储于计算机系统的存储介质中，并被该计算机系统中的至少一个处理器执行，以实现包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (35)

1.一种视频编码方法，所述方法包括：
获取待编码视频帧；
根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式，所述当前编码模式选取自全分辨率模式和下采样模式；
当所述当前编码模式为下采样模式时，对所述待编码视频帧进行下采样得到当前编码视频帧；当所述当前编码模式为全分辨率模式时，将所述待编码视频帧确定为当前编码视频帧；
当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；
根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带以标志位表示的当前编码模式信息。
2.根据权利要求1所述的方法，其特征在于，所述当前编码信息包括量化参数信息，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式包括：
获取所述待编码视频帧对应的当前量化参数；
获取与所述待编码视频帧的帧预测类型对应的量化参数阈值；
当所述当前量化参数大于所述量化参数阈值时，确定所述当前编码模式为下采样模式。
3.根据权利要求2所述的方法，其特征在于，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式还包括：
当所述当前量化参数小于或等于所述量化参数阈值时，确定所述当前编码模式为全分辨率模式。
4.根据权利要求1所述的方法，其特征在于，所述当前编码信息包括码率信息，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式包括：
获取所述待编码视频帧对应的当前目标码率；
获取与所述待编码视频帧的帧预测类型对应的码率阈值；
当所述当前目标码率大于所述码率阈值时，确定所述当前编码模式为下采样模式。
5.根据权利要求4所述的方法，其特征在于，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式还包括：
当所述当前目标码率小于或等于所述码率阈值时，确定所述当前编码模式为全分辨率模式。
6.根据权利要求1所述的方法，其特征在于，所述图像特征信息包括运动特征信息和纹理信息，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式包括：
根据所述运动特征信息确定运动度，所述运动度代表图像运动的剧烈程度；
根据所述纹理信息确定纹理复杂度；
当所述运动度超过运动预设阈值或所述纹理复杂度超过纹理预设阈值时，确定所述待编码视频帧的当前编码模式为下采样模式。
7.根据权利要求6所述的方法，其特征在于，所述根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式还包括：
当所述运动度未超过运动预设阈值且所述纹理复杂度未超过纹理预设阈值时，确定所述待编码视频帧的当前编码模式为全分辨率模式。
8.根据权利要求1所述的方法，其特征在于，所述根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧包括：
当所述当前参考帧与当前编码视频帧分辨率不相同时，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
9.根据权利要求8所述的方法，其特征在于，所述根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧还包括：
当所述当前参考帧与当前编码视频帧分辨率相同时，直接将所述当前参考帧确定为处理参考帧。
10.根据权利要求8所述的方法，其特征在于，所述对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧包括：
在当前参考帧的分辨率大于当前编码视频帧分辨率时，对当前参考帧进行下采样得到与当前编码视频帧分辨率相同的处理参考帧。
11.根据权利要求8至10中任一项所述的方法，其特征在于，所述对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧包括：
在当前参考帧的分辨率小于当前编码视频帧分辨率时，则对当前参考帧进行上采样得到与当前编码视频帧分辨率相同的处理参考帧。
12.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当所述当前编码视频帧为帧内编码帧时，直接进行帧内编码得到第二编码数据，所述第二编码数据中携带当前编码模式信息。
13.一种视频解码方法，所述方法包括：
获取编码数据；
根据所述编码数据所携带的以标志位表示的当前编码模式信息，至少确定当前解码视频帧对应的当前解码模式；
当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；
根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；其中，当所述当前参考帧与所述当前解码视频帧分辨率相同时，则直接将所述当前参考帧确定为处理参考帧，否则，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧；
根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
将所述重建视频帧根据所述当前解码模式处理得到解码视频帧。
14.根据权利要求13所述的方法，其特征在于，所述编码数据对应的每个编码视频帧携带当前编码模式信息。
15.一种视频编码装置，其特征在于，所述装置包括：
编码模式确定模块，用于获取待编码视频帧；根据所述待编码视频帧的当前编码信息和/或图像特征信息确定所述待编码视频帧的当前编码模式，所述当前编码模式选取自全分辨率模式和下采样模式；
前处理模块，用于当所述当前编码模式为下采样模式时，对所述待编码视频帧进行下采样得到当前编码视频帧；当所述当前编码模式为全分辨率模式时，将所述待编码视频帧确定为当前编码视频帧；
编码处理参考帧确定模块，用于当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；根据所述当前参考帧与当前编码视频帧的分辨率大小得到对应的处理参考帧；
帧间编码模块，用于根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带以标志位表示的当前编码模式信息。
16.根据权利要求15所述的装置，其特征在于，所述当前编码信息包括量化参数信息，所述编码模式确定模块还用于获取所述待编码视频帧对应的当前量化参数；获取与所述待编码视频帧的帧预测类型对应的量化参数阈值；当所述当前量化参数大于所述量化参数阈值时，确定所述当前编码模式为下采样模式。
17.根据权利要求16所述的装置，其特征在于，所述编码模式确定模块还用于：当所述当前量化参数小于或等于所述量化参数阈值时，确定所述当前编码模式为全分辨率模式。
18.根据权利要求15所述的装置，其特征在于，所述当前编码信息包括码率信息，所述编码模式确定模块还用于获取所述待编码视频帧对应的当前目标码率；获取与所述待编码视频帧的帧预测类型对应的码率阈值；当所述当前目标码率大于所述码率阈值时，确定所述当前编码模式为下采样模式。
19.根据权利要求18所述的装置，其特征在于，所述编码模式确定模块还用于：当所述当前目标码率小于或等于所述码率阈值时，确定所述当前编码模式为全分辨率模式。
20.根据权利要求15所述的装置，其特征在于，所述图像特征信息包括运动特征信息和纹理信息，所述编码模式确定模块还用于根据所述运动特征信息确定运动度，所述运动度代表图像运动的剧烈程度；根据所述纹理信息确定纹理复杂度；当所述运动度超过运动预设阈值或所述纹理复杂度超过纹理预设阈值时，确定所述待编码视频帧的当前编码模式为下采样模式。
21.根据权利要求20所述的装置，其特征在于，所述编码模式确定模块还用于：当所述运动度未超过运动预设阈值且所述纹理复杂度未超过纹理预设阈值时，确定所述待编码视频帧的当前编码模式为全分辨率模式。
22.根据权利要求15所述的装置，其特征在于，所述编码处理参考帧确定模块还用于当所述当前参考帧与当前编码视频帧分辨率不相同时，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧。
23.根据权利要求22所述的装置，其特征在于，所述编码处理参考帧确定模块还用于当所述当前参考帧与当前编码视频帧分辨率相同时，直接将所述当前参考帧确定为处理参考帧。
24.根据权利要求22所述的装置，其特征在于，所述编码处理参考帧确定模块还用于在当前参考帧的分辨率大于当前编码视频帧分辨率时，对当前参考帧进行下采样得到与当前编码视频帧分辨率相同的处理参考帧。
25.根据权利要求22至24中任一项所述的装置，其特征在于，所述编码处理参考帧确定模块还用于在当前参考帧的分辨率小于当前编码视频帧分辨率时，则对当前参考帧进行上采样得到与当前编码视频帧分辨率相同的处理参考帧。
26.根据权利要求15所述的装置，其特征在于，所述装置还包括：
帧内编码模块，用于当所述当前编码视频帧为帧内编码帧时，直接进行帧内编码得到第二编码数据，所述第二编码数据中携带当前编码模式信息。
27.一种视频解码装置，其特征在于，所述装置包括：
解码模式确定模块，用于获取编码数据；根据所述编码数据所携带的以标志位表示的当前编码模式信息，至少确定当前解码视频帧对应的当前解码模式；
解码处理参考帧确定模块，用于当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；其中，当所述当前参考帧与所述当前解码视频帧分辨率相同时，则直接将所述当前参考帧确定为处理参考帧，否则，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧；
重建模块，用于根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
解码视频帧确定模块，用于将所述重建视频帧根据所述当前解码模式处理得到解码视频帧。
28.根据权利要求27所述的装置，其特征在于，所述编码数据对应的每个编码视频帧携带当前编码模式信息。
29.一种用于对视频进行编码或解码的终端，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至14中任一项所述方法的步骤。
30.一种服务器，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至14中任一项所述方法的步骤。
31.一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至14中任一项所述方法的步骤。
32.一种视频编码方法，所述方法包括：
获取待编码视频帧；
根据所述待编码视频帧的当前编码信息和/或图像特征信息从可选编码模式中确定所述待编码视频帧的当前编码模式；所述可选编码模式包括：全分辨率模式和下采样模式；
当所述当前编码模式为下采样模式时，对所述待编码视频帧进行下采样得到当前编码视频帧；当所述当前编码模式为全分辨率模式时，将所述待编码视频帧确定为当前编码视频帧；
当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；
根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带以标志位表示的当前编码模式信息。
33.一种视频解码方法，所述方法包括：
获取编码数据；
根据所述编码数据所携带的以标志位表示的当前编码模式信息，从可选编码模式中确定当前解码视频帧对应的当前解码模式；所述可选编码模式包括：全分辨率模式和下采样模式；
当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；
根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
在所述当前解码模式为下采样模式时，对所述重建视频帧进行上采样得到解码视频帧；在所述当前解码模式为全分辨率模式时，将所述重建视频帧确定为解码视频帧。
34.一种视频编码方法，所述方法包括：
获取待编码视频帧；
当确定出所述待编码视频帧的当前编码模式为下采样模式时，对所述待编码视频帧进行下采样得到当前编码视频帧；所述当前编码模式取自全分辨率模式和所述下采样模式中的一种；所述全分辨率模式是指直接对所述待编码视频帧进行编码的模式；
当所述当前编码视频帧为帧间编码帧时，获取所述当前编码视频帧对应的当前参考帧；
根据所述当前参考帧与当前编码视频帧的分辨率大小得到处理参考帧；
根据所述处理参考帧对所述当前编码视频帧进行编码得到第一编码数据，所述第一编码数据中携带以标志位表示的当前编码模式信息。
35.一种视频解码方法，所述方法包括：
获取编码数据；
根据所述编码数据所携带的以标志位表示的当前编码模式信息确定当前解码视频帧对应的当前解码模式；
当所述当前解码视频帧为帧间编码帧时，获取所述当前解码视频帧对应的当前参考帧；
根据所述当前参考帧与当前解码视频帧的分辨率大小得到处理参考帧；其中，当所述当前参考帧与所述当前解码视频帧分辨率相同时，则直接将所述当前参考帧确定为处理参考帧，否则，对所述当前参考帧根据预设采样规则进行采样得到对应的处理参考帧；
根据所述处理参考帧对当前解码视频帧进行解码得到重建视频帧；
在所述当前解码模式为下采样模式时，对所述重建视频帧进行上采样得到解码视频帧。
CN201810555989.0A 2017-03-21 2017-03-21 视频编码、解码方法和装置、终端、服务器和存储介质 Active CN108495130B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810555989.0A CN108495130B (zh) 2017-03-21 2017-03-21 视频编码、解码方法和装置、终端、服务器和存储介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201710170734.8A CN107155107B (zh) 2017-03-21 2017-03-21 视频编码方法和装置、视频解码方法和装置
CN201810555989.0A CN108495130B (zh) 2017-03-21 2017-03-21 视频编码、解码方法和装置、终端、服务器和存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201710170734.8A Division CN107155107B (zh) 2017-03-21 2017-03-21 视频编码方法和装置、视频解码方法和装置

Publications (2)

Publication Number Publication Date
CN108495130A CN108495130A (zh) 2018-09-04
CN108495130B true CN108495130B (zh) 2021-04-20

Family

ID=59792454

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810555989.0A Active CN108495130B (zh) 2017-03-21 2017-03-21 视频编码、解码方法和装置、终端、服务器和存储介质
CN201710170734.8A Active CN107155107B (zh) 2017-03-21 2017-03-21 视频编码方法和装置、视频解码方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201710170734.8A Active CN107155107B (zh) 2017-03-21 2017-03-21 视频编码方法和装置、视频解码方法和装置

Country Status (6)

Country Link
US (1) US10721466B2 (zh)
EP (1) EP3606067A4 (zh)
JP (1) JP6854888B2 (zh)
KR (1) KR20190103297A (zh)
CN (2) CN108495130B (zh)
WO (1) WO2018171447A1 (zh)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495130B (zh) 2017-03-21 2021-04-20 腾讯科技（深圳）有限公司 视频编码、解码方法和装置、终端、服务器和存储介质
CN107277519B (zh) * 2017-06-30 2019-11-15 武汉斗鱼网络科技有限公司 一种判断视频帧的帧类型的方法及电子设备
CN109819263B (zh) * 2017-11-22 2022-08-19 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备及存储介质
CN110049321B (zh) * 2018-01-16 2022-09-06 腾讯科技（深圳）有限公司 视频编码方法、装置、设备及存储介质
CN110139168B (zh) * 2018-02-02 2021-07-13 中南大学 视频编码方法、装置、计算机设备及存储介质
EP3652938A1 (en) * 2018-02-12 2020-05-20 SZ DJI Technology Co., Ltd. Image processing
WO2019197661A1 (en) 2018-04-13 2019-10-17 Koninklijke Kpn N.V. Frame-level super-resolution-based video coding
CN108391127B (zh) * 2018-04-27 2021-08-10 腾讯科技（深圳）有限公司 视频编码方法、装置、存储介质及设备
CN108833916B (zh) * 2018-06-20 2021-09-24 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、存储介质和计算机设备
CN108848380B (zh) * 2018-06-20 2021-11-30 腾讯科技（深圳）有限公司 视频编码和解码方法、装置、计算机设备及存储介质
CN108833917B (zh) 2018-06-20 2022-04-08 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108848376B (zh) * 2018-06-20 2022-03-01 腾讯科技（深圳）有限公司 视频编码、解码方法、装置和计算机设备
CN108833918B (zh) 2018-06-20 2021-09-17 腾讯科技（深圳）有限公司 视频编码方法、解码方法、装置、计算机设备及存储介质
CN108924553B (zh) * 2018-06-20 2021-10-08 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108769681B (zh) * 2018-06-20 2022-06-10 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108848381B (zh) * 2018-06-20 2021-09-24 腾讯科技（深圳）有限公司 视频编码方法、解码方法、装置、计算机设备及存储介质
CN108848377B (zh) 2018-06-20 2022-03-01 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108769682B (zh) 2018-06-20 2022-08-16 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108833923B (zh) * 2018-06-20 2022-03-29 腾讯科技（深圳）有限公司 视频编码、解码方法、装置、存储介质和计算机设备
CN109413421B (zh) * 2018-10-26 2021-01-19 张豪 视频编码方法、设备以及视频解码方法、设备
CN109379592B (zh) * 2018-10-26 2021-04-30 北京北方安恒利数码技术有限公司 图像编码方法及其设备
CN111193927B (zh) * 2018-11-14 2022-09-23 腾讯科技（深圳）有限公司 编码数据处理方法、装置、计算机设备和存储介质
CN111193926B (zh) * 2018-11-14 2022-10-25 腾讯科技（深圳）有限公司 编码数据处理方法、装置、计算机设备和存储介质
US11290734B2 (en) * 2019-01-02 2022-03-29 Tencent America LLC Adaptive picture resolution rescaling for inter-prediction and display
EP3777170A4 (en) * 2019-03-01 2021-11-10 Alibaba Group Holding Limited ADAPTIVE RESOLUTION VIDEO CODING
CN111711817B (zh) * 2019-03-18 2023-02-10 四川大学 一种结合卷积神经网络的hevc帧内编码压缩性能优化方法
CN110139113B (zh) * 2019-04-30 2021-05-14 腾讯科技（深圳）有限公司 视频资源的传输参数分发方法及装置
CN111901605B (zh) * 2019-05-06 2022-04-29 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质
CN114026867B (zh) * 2019-07-09 2024-04-02 阿里巴巴集团控股有限公司 分辨率自适应视频编解码
CN110324708A (zh) * 2019-07-16 2019-10-11 浙江大华技术股份有限公司 视频处理方法、终端设备及计算机存储介质
CN112449182A (zh) * 2019-08-28 2021-03-05 广州虎牙科技有限公司 视频编码方法、装置、设备及存储介质
CN110536168B (zh) * 2019-09-11 2021-09-17 北京达佳互联信息技术有限公司 视频上传方法、装置、电子设备及存储介质
CN110636295B (zh) * 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频编解码方法和装置、存储介质及电子装置
CN110572654B (zh) * 2019-09-27 2024-03-15 腾讯科技（深圳）有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110545433B (zh) * 2019-09-27 2023-03-21 腾讯科技（深圳）有限公司 视频编解码方法和装置及存储介质
CN110650357B (zh) * 2019-09-27 2023-02-10 腾讯科技（深圳）有限公司 视频解码方法及装置
CN110572673B (zh) * 2019-09-27 2024-04-09 腾讯科技（深圳）有限公司 视频编解码方法和装置、存储介质及电子装置
CN110545431B (zh) * 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频解码方法及装置、视频编码方法及装置
CN110636293B (zh) * 2019-09-27 2024-03-15 腾讯科技（深圳）有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110572672B (zh) * 2019-09-27 2024-03-15 腾讯科技（深圳）有限公司 视频编解码方法和装置、存储介质及电子装置
CN110677653B (zh) * 2019-09-27 2024-01-09 腾讯科技（深圳）有限公司 视频编解码方法和装置及存储介质
CN110677647B (zh) * 2019-09-27 2024-02-09 腾讯科技（深圳）有限公司 视频解码、编码方法和装置、存储介质与解码器、编码器
CN110572677B (zh) * 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频编解码方法和装置、存储介质及电子装置
CN110582022B (zh) * 2019-09-27 2022-12-30 腾讯科技（深圳）有限公司 视频编解码方法和装置及存储介质
CN110662071B (zh) 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频解码方法和装置、存储介质及电子装置
CN110636312B (zh) * 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频编解码方法和装置及存储介质
CN110677721B (zh) * 2019-09-27 2022-09-13 腾讯科技（深圳）有限公司 视频编解码方法和装置及存储介质
CN110572674B (zh) * 2019-09-27 2024-03-15 腾讯科技（深圳）有限公司 视频编解码方法和装置、存储介质及电子装置
CN110636302B (zh) * 2019-09-27 2023-10-24 腾讯科技（深圳）有限公司 视频解码、编码方法和装置、存储介质及解码器、编码器
CN112801932A (zh) * 2019-10-28 2021-05-14 深圳市万普拉斯科技有限公司 图像显示方法、装置、电子设备和存储介质
CN111182310A (zh) * 2019-12-26 2020-05-19 腾讯科技（深圳）有限公司 视频处理方法、装置、计算机可读介质及电子设备
CN111263153B (zh) * 2020-02-20 2022-10-11 广州市百果园信息技术有限公司 视频编码方法、装置、设备及存储介质
CN111343503B (zh) * 2020-03-31 2022-03-04 北京金山云网络技术有限公司 视频的转码方法、装置、电子设备及存储介质
CN111510740B (zh) * 2020-04-03 2022-08-30 咪咕文化科技有限公司 转码方法、装置、电子设备和计算机可读存储介质
CN112001854A (zh) * 2020-07-14 2020-11-27 浙江大华技术股份有限公司 一种编码图像的修复方法及相关系统和装置
CN111787322B (zh) * 2020-08-04 2022-05-13 北京百度网讯科技有限公司 视频编码的方法、装置、电子设备及计算机可读存储介质
CN112383777B (zh) * 2020-09-28 2023-09-05 北京达佳互联信息技术有限公司 视频编码方法、装置、电子设备及存储介质
CN112351277B (zh) * 2020-11-04 2024-04-05 北京金山云网络技术有限公司 一种视频的编码方法和装置，视频的解码方法和装置
US20220159269A1 (en) * 2020-11-17 2022-05-19 Ofinno, Llc Reduced Residual Inter Prediction
CN112153082B (zh) * 2020-11-25 2021-03-09 深圳乐播科技有限公司 一种在安卓系统中平滑显示实时流视频画面的方法及装置
CN112672151B (zh) * 2020-12-09 2023-06-20 北京达佳互联信息技术有限公司 视频处理方法、装置、服务器及存储介质
CN112839234B (zh) * 2021-01-18 2021-11-26 陕西师范大学 屏幕内容编码标准帧内图像码率的估计方法
CN113301332A (zh) * 2021-04-12 2021-08-24 阿里巴巴新加坡控股有限公司 视频解码方法、系统和介质
CN113242433B (zh) * 2021-04-27 2022-01-21 中国科学院国家空间科学中心 图像压缩方法及基于arm多核异构处理器的图像压缩系统
CN113329228B (zh) * 2021-05-27 2024-04-26 杭州网易智企科技有限公司 视频编码方法、解码方法、装置、电子设备及存储介质
CN113452996B (zh) * 2021-06-08 2024-04-19 杭州网易智企科技有限公司 一种视频编码、解码方法及装置
CN113382258B (zh) * 2021-06-10 2022-10-21 北京百度网讯科技有限公司 视频编码方法、装置、设备和介质
CN113438485B (zh) * 2021-06-25 2022-11-01 北京金山云网络技术有限公司 图像编码方法、装置、电子设备和存储介质
CN113766274A (zh) * 2021-09-23 2021-12-07 阿里云计算有限公司 图像编码、解码方法、电子设备及存储介质
WO2023048464A1 (ko) * 2021-09-23 2023-03-30 엘지전자 주식회사 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체
CN113766232A (zh) * 2021-09-24 2021-12-07 百果园技术(新加坡)有限公司 一种编码、解码方法、装置、电子设备及存储介质
CN113781312B (zh) * 2021-11-11 2022-03-25 深圳思谋信息科技有限公司 视频增强方法、装置、计算机设备和存储介质
CN114302139A (zh) * 2021-12-10 2022-04-08 阿里巴巴（中国）有限公司 视频编码方法、视频解码方法及装置
CN114286136A (zh) * 2021-12-28 2022-04-05 咪咕文化科技有限公司 视频播放编码方法、装置、设备及计算机可读存储介质
CN114422805B (zh) * 2022-03-30 2022-09-02 浙江智慧视频安防创新中心有限公司 一种视频编解码方法、装置及设备
CN115134629B (zh) * 2022-05-23 2023-10-31 阿里巴巴（中国）有限公司 视频传输方法、系统、设备及存储介质
CN115209160A (zh) * 2022-06-13 2022-10-18 北京大学深圳研究生院 视频压缩方法、电子设备及可读存储介质
CN115474075A (zh) * 2022-07-31 2022-12-13 浙江工业大学 一种面向移动机器人的视频编码参数控制方法
CN115225911B (zh) * 2022-08-19 2022-12-06 腾讯科技（深圳）有限公司 一种码率自适应方法、装置、计算机设备和存储介质
CN115802031A (zh) * 2023-01-28 2023-03-14 深圳传音控股股份有限公司 处理方法、处理设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101778275A (zh) * 2009-01-09 2010-07-14 深圳市融创天下科技发展有限公司 一种自适应时间域和空间域分辨率框架的图像处理方法
CN105959700A (zh) * 2016-05-31 2016-09-21 腾讯科技（深圳）有限公司 视频图像编码的方法和装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004023670A (ja) * 2002-06-19 2004-01-22 Nec Corp 画像符号化装置および同方式
JP2005286594A (ja) * 2004-03-29 2005-10-13 Nec Engineering Ltd 映像符号化装置
KR100679018B1 (ko) * 2004-09-07 2007-02-05 삼성전자주식회사 다계층 비디오 코딩 및 디코딩 방법, 비디오 인코더 및디코더
US8155189B2 (en) * 2005-10-19 2012-04-10 Freescale Semiconductor, Inc. System and method of coding mode decision for video encoding
US7956930B2 (en) * 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
US8315310B2 (en) * 2010-01-08 2012-11-20 Research In Motion Limited Method and device for motion vector prediction in video transcoding using full resolution residuals
KR101522850B1 (ko) * 2010-01-14 2015-05-26 삼성전자주식회사 움직임 벡터를 부호화, 복호화하는 방법 및 장치
CN101938656B (zh) * 2010-09-27 2012-07-04 上海交通大学 基于关键帧超分辨率重建的视频编解码系统
US8780987B1 (en) * 2011-04-28 2014-07-15 Google Inc. Method and apparatus for encoding video by determining block resolution
US20120275511A1 (en) * 2011-04-29 2012-11-01 Google Inc. System and method for providing content aware video adaptation
US9071841B2 (en) * 2011-05-17 2015-06-30 Microsoft Technology Licensing, Llc Video transcoding with dynamically modifiable spatial resolution
EP2536143B1 (en) * 2011-06-16 2015-01-14 Axis AB Method and a digital video encoder system for encoding digital video data
CN102355584B (zh) * 2011-10-31 2013-09-25 电子科技大学 基于帧内预测编码模式的码率控制方法
CN103813174B (zh) * 2012-11-12 2016-04-27 腾讯科技（深圳）有限公司 一种混合分辨率编解码方法和装置
CN105187824A (zh) * 2014-06-10 2015-12-23 杭州海康威视数字技术股份有限公司 图像编码方法和装置以及图像解码方法和装置
CN104410861A (zh) * 2014-11-24 2015-03-11 华为技术有限公司 视频编码方法及装置
GB2534409A (en) * 2015-01-23 2016-07-27 Sony Corp Data encoding and decoding
US9788077B1 (en) * 2016-03-18 2017-10-10 Amazon Technologies, Inc. Rendition switching
CN106162180A (zh) * 2016-06-30 2016-11-23 北京奇艺世纪科技有限公司 一种图像编解码方法及装置
US10148963B2 (en) * 2016-09-23 2018-12-04 Arm Limited Methods of and apparatus for encoding data arrays
CN108495130B (zh) * 2017-03-21 2021-04-20 腾讯科技（深圳）有限公司 视频编码、解码方法和装置、终端、服务器和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101778275A (zh) * 2009-01-09 2010-07-14 深圳市融创天下科技发展有限公司 一种自适应时间域和空间域分辨率框架的图像处理方法
CN105959700A (zh) * 2016-05-31 2016-09-21 腾讯科技（深圳）有限公司 视频图像编码的方法和装置

Also Published As

Publication number Publication date
CN107155107B (zh) 2018-08-03
WO2018171447A1 (zh) 2018-09-27
KR20190103297A (ko) 2019-09-04
EP3606067A1 (en) 2020-02-05
JP6854888B2 (ja) 2021-04-07
US20190253704A1 (en) 2019-08-15
US10721466B2 (en) 2020-07-21
EP3606067A4 (en) 2020-11-04
CN107155107A (zh) 2017-09-12
CN108495130A (zh) 2018-09-04
JP2019537365A (ja) 2019-12-19

Similar Documents

Publication Publication Date Title
CN108495130B (zh) 视频编码、解码方法和装置、终端、服务器和存储介质
CN108848376B (zh) 视频编码、解码方法、装置和计算机设备
CN111066326B (zh) 机器学习视频处理系统和方法
CN108833916B (zh) 视频编码、解码方法、装置、存储介质和计算机设备
JP6714695B2 (ja) 動的な解像度切換えを用いたリアルタイムビデオエンコーダレート制御
CN108833918B (zh) 视频编码方法、解码方法、装置、计算机设备及存储介质
CN108769681B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
CN105959700B (zh) 视频图像编码的方法、装置、存储介质和终端设备
CN108769682B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
JP5907941B2 (ja) ビデオ画像の刈り取り方法及び装置
CN108848381B (zh) 视频编码方法、解码方法、装置、计算机设备及存储介质
CN108924553B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
US11172220B2 (en) Video encoding method, and storage medium thereof
US20110013692A1 (en) Adaptive Video Transcoding
EP2907309A1 (en) A hybrid-resolution encoding and decoding method and a video apparatus using the same
CN108848377B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
EP3038370A1 (en) Devices and method for video compression and reconstruction
GB2509704A (en) Processing prediction information for encoding or decoding of an enhancement layer of video data
CN116848843A (zh) 可切换的密集运动向量场插值
Jenab et al. Content-adaptive resolution control to improve video coding efficiency
US11582462B1 (en) Constraint-modified selection of video encoding configurations
TWI784367B (zh) 具有縮放比約束之視訊編碼或解碼方法和裝置
EP3038366A1 (en) Devices and method for video compression and reconstruction
CN106131551B (zh) 一种用于移动视频直播的分级编码方法
CN113949871A (zh) 一种视频编码方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant