CN113132721B - 视频编码方法、装置、可读存储介质及电子设备 - Google Patents

视频编码方法、装置、可读存储介质及电子设备 Download PDF

Info

Publication number
CN113132721B
CN113132721B CN201911414266.XA CN201911414266A CN113132721B CN 113132721 B CN113132721 B CN 113132721B CN 201911414266 A CN201911414266 A CN 201911414266A CN 113132721 B CN113132721 B CN 113132721B
Authority
CN
China
Prior art keywords
coded
image
video
images
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911414266.XA
Other languages
English (en)
Other versions
CN113132721A (zh
Inventor
张鹏国
严柯森
干亚伟
王光明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Uniview Technologies Co Ltd
Original Assignee
Zhejiang Uniview Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Uniview Technologies Co Ltd filed Critical Zhejiang Uniview Technologies Co Ltd
Priority to CN201911414266.XA priority Critical patent/CN113132721B/zh
Publication of CN113132721A publication Critical patent/CN113132721A/zh
Application granted granted Critical
Publication of CN113132721B publication Critical patent/CN113132721B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请公开了一种视频编码方法、装置、可读存储介质及电子设备，具体包括：首先从待编码视频的首帧待编码图像之后的待编码图像中，依次获取目标编码视频；接着，针对目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域；紧接着，针对每个所述待编码图像，对该待编码图像的宏块定义区进行帧内预测，对宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据；然后，根据所述编码数据获取所述待编码图像的第一码流；最后，根据首帧待编码图像对应的第二码流以及各个待编码图像对应的第一码流获得视频码流。本方案能够解决编码视频中在同一时刻码率过大的问题。

Description

视频编码方法、装置、可读存储介质及电子设备
技术领域
本申请涉及视频图像处理领域，具体而言，涉及一种视频编码方法、装置、可读存储介质及电子设备。
背景技术
现有技术中，在对视频进行编码时，为了消除图像的残差，通常是直接将原始高清视频中的每帧图像，均划分为多个图像块，然后再对每个图像块进行图像编码。在编码过程中会存在多个I帧，I帧完全由I宏块组成，因此，图像的压缩率较低，会造成视频图像在I帧中码率过大的问题，当视频中I帧过多时，就会造成整个视频中在I帧对应的时刻码率过高，传输的数据量过大。
发明内容
为了至少克服现有技术中的上述不足，本申请的目的之一在于提供一种视频编码方法，所述方法包括：
从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域，所述多个第一区域内的图像构成所述待编码图像；
针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域；
针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据；
根据所述编码数据获取所述待编码图像的第一码流；
根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
可选地，所述从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频的步骤包括：
获取待编码视频，所述待编码视频包括多帧待编码图像；
对所述待编码视频的每帧待编码图像进行目标检测，并根据目标对象的变化情况依次获取多帧连续待编码图像作为目标编码视频。
可选地，每个所述待编码图像包括多个第二区域，每个所述第二区域包括至少一个所述第一区域，所述依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域的步骤包括：
根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组；
依次将每个待编码图像组作为目标图像组，其中，目标图像组中的待编码图像为第一图像；
针对该目标图像组对应的第二区域，依次从不同的第一图像中选取该第二区域内不同的第一区域作为宏块定义区域。
可选地，所述方法还包括：
根据目标对象在待编码图像中的位置，分别对所述目标编码视频中的每个待编码图像进行图像分割，获得分割图像，其中每个待编码图像上的每个分割图像对应一个第二区域；
根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组的步骤包括：
依次将包含目标对象和不包含目标对象的分割图像对应的第二区域作为目标区域；
根据所述目标区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与所述目标区域对应的待编码图像组。
可选地，对该待编码图像进的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据的步骤包括：
针对所述待编码图像中的每个第二区域，分别采用对应的编码器对该第二区域对中的宏块定义区域进行帧内预测，对该第二区域中除宏块定义区域外的其他第一区域进行帧间预测，得到第二区域的编码子数据，其中，所述待编码图像中所有第二区域的编码子数据构成该待编码图像对应的编码数据。
可选地，所述根据所述编码数据获取所述待编码图像的第一码流的步骤包括：
根据所述编码数据中的每个编码子数据，获取所述待编码图像的每个分割图像的残差；
根据该待编码图像的每个分割图像中是否包含目标对象确定对该分割图像进行编码的码率，其中，包含目标对象的分割图像对应的码率高于不包含目标对象的分割图像的码率；
根据所述编码的码率对该分割图像对应的编码子数据进行码率调节，获得码率调节后的子码流，其中，所述待编码图像中所有所述分割图像对应的子码流构成所述第一码流。
可选地，所述根据所述编码数据获取所述待编码图像的第一码流的步骤还包括：
对所述子码流所对应待编码图像的多帧原始图像进行检测，获取所述子码流对应的分割图像中，与所述原始图像重复的区域对应的区域作为拼接区域；
根据所述拼接区域调节每个分割图像对应的编码参数，所述编码参数包括编码滤波强度和质量因子；
根据调节后的编码参数对所述子码流进行滤波，获得新的子码流。
本申请的另一目的在于提供一种视频编码装置，所述装置包括：
第一获取模块，用于从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域对应的图像，所述多个第一区域内的图像构成所述待编码图像；
选取模块，用于针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域；
预测压缩模块，用于针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据；
变换压缩模块，根据所述编码数据获取所述待编码图像的第一码流；
第二获取模块，根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
本申请的另一目的在于提供一种可读存储介质，所述可读存储介质存储有可执行程序，处理器在执行所述可执行程序时，实现如本申请任一项所述的方法。
本申请的另一目的在于提供一种电子设备，所述电子设备包括存储器和处理器，所述存储器和所述处理器电性连接，所述存储器中存储有可执行程序，所述处理器在执行所述可执行程序时，实现如本申请任一项所述的方法。
相对于现有技术而言，本申请具有以下有益效果：
本申请实施例的视频编码方法、装置、可读存储介质及电子设备，通过依次从目标编码视频的不同待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，然后，在每个待编码图像中对宏块定义区域进行帧内预测，对宏块定义区域外的其他第一区域进行帧间预测，获得编码数据。然后根据编码数据获得待编码图像对应的第一码流，最终获得待编码视频对应的视频码流。由于在对各个待编码图像进行预测的过程中，将帧间预测的区域分布在多个待编码图像中，图像坐标系中的每个区域都存在帧间预测，如此，便能够在消除编码后视频中的累计误差的同时，避免同一帧编码后的图像码率过大，也就是避免同一时刻视频码流过大。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1是现有技术中的编码过程中各种帧的分布情况；
图2是本申请实施例提供的电子设备的结构示意框图；
图3是本申请实施例提供的视频编码方法的流程示意图一；
图4是本申请实施例提供的视频编码方法的流程示意图二；
图5是本申请实施例提供的视频编码宏块设置示意图；
图6是本申请实施例提供帧组对应的第二区域的分割图像预测示意图；
图7是本申请实施例提供的视频编码方法的流程示意图三；
图8是本申请实施例提供的视频编码方法的流程示意图四；
图9是本申请实施例提供的视频编码装置的结构示意框图。
图标：100-电子设备；110-视频编码装置；111-第一获取模块；112-选取模块；113-预测压缩模块；114-变换压缩模块；115-第二获取模块；120-存储器；130-处理器。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
在本申请的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。
请参照图1所示，在一种视频编码的实施方式中，在对视频图像进行预测时，会根据视频图像得到多个I帧，以及设置两个I帧之间的P帧或者其他帧，请参见图1所示。对于I帧而言，其内部各个区域都是采用I宏块预测而来，也就是说，I帧内都是进行帧间预测，这种方式中对图像的压缩率很低，因此，I帧所包含的数据量非常大，这样，就会导致编码后的视频，在I帧会存在码流过大的问题。
此外，这种实施方式中，待编码图像通常是由多个原始的图像拼接而成，因此，在这种拼接方式中，原始图像中相同的区域会使得待编码图像编码后的图像效果不佳。
这种实施方式中，在编码前，对图像进行分割时，并不会针对待编码图像上的目标进行划分，因此，划分出的图像，也容易出现边缘失真的问题，从而导致编码后的图像效果不佳。
为了解决现有技术中的问题，本申请提供了一种视频编码方案。
请参见图2，图2是本申请实施例提供的电子设备100的结构示意框图，所述电子设备100包括视频编码装置110，存储器120和处理器130，存储器120和处理器130相互之间直接或间接电性连接，用于实现数据交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述视频编码装置110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器120中或固化在所述电子设备100的操作系统(Operating System，OS)中的软件功能模块。所述处理器130用于执行所述存储器120中存储的可执行模块，例如所述视频编码装置110所包括的软件功能模块及计算机程序等。
请参照图3，本申请还提供一种应用于上述电子设备100的视频编码方法，所述方法包括步骤S110-步骤S150。以下结合具体实施例来对步骤S110-步骤S150进行详细阐述。
步骤S110，从待编码视频中获取目标编码视频。
具体地，从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域对应的图像，所述多个第一区域内的图像构成所述待编码图像。
步骤S120，确定各个待编码图像中的宏块定义区域。
具体地，针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域。
步骤S130，针对每个所述待编码图像，获取该待编码图像对应的编码数据。
具体地，针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据。具体操作时，可以将待编码图像的宏块定义区域定义为I宏块从而来进行帧内预测。
步骤S140，根据所述编码数据获取所述待编码图像的第一码流。
步骤S150，根据首帧待编码图像对应的第二码流以及各个第一码流获得视频码流。
具体地，根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
本实施例中，第一区域是相对平面图像坐标系而言的区域，第一区域可以是一个连续的区域，也可以是不连续的区域。对于每个第一区域而言，可以包括能够划分成至少一个宏块的区域，换句话说，第一区域是由多个至少一种尺寸的宏块组成的，例如，组成第一区域的宏块，可以是4x4的宏块，也可以8x8的宏块等等，还可以是多种尺寸的宏块的组合。
本实施例中，由于在对各个待编码图像进行编码的过程中，对待编码图像中的目标宏块区域进行帧内预测，对同一待编码图像中除该待编码图像对应的目标宏块区域外的第一区域进行帧间预测，由于目标编码视频中，各个待编码图像的宏块定义区域能够与组成待编码图像在图像平面坐标系中对应的区域完全重合，因此，这样，就将一个I帧分散地分布在多个其他的帧内，消除了待编码视频编码后的数据中，除首帧之外的其他I帧，由于I宏块包含的数据量特别大，将其分散在多个P帧中，如此，便能够在消除累积误差的同时，避免同一时刻视频码率过大的问题，同时还能避免编码后的视频码率过大的问题。
可选地，本实施例中，所述从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频的步骤(步骤S110)包括：首先获取待编码视频，所述待编码视频包括多帧待编码图像；然后对所述待编码视频的每帧待编码图像进行目标检测，并根据目标对象的变化情况依次获取多帧连续待编码图像作为目标编码视频。
本实施例中，待编码图像进行目标检测，检测出目标对象，获取目标对象在相邻两帧待编码图像之间在图像平面坐标系上的移动距离。具体地，在检测时，可以将每相邻两幅待编码图像之间的目标对象检测出来，并计算两幅待编码图像之间目标对象在图像平面坐标系上移动的距离，并将相邻两幅待编码图像之间目标对象在图像平面坐标系上移动的距离小于预设距离的连续待编码图像都划分在同一目标编码视频中。
本实施例中，在检测时，可以将每相邻两幅待编码图像之间的目标对象检测出来，并计算两幅待编码图像之间背景之间存在差异的面积，然后将相邻两幅待编码图像之间存在差异的面积小于预设面积的连续待编码图像都划分在同一目标编码视频中。
本实施例中，通过检测待编码图像中的背景或者目标对象的移动距离来获取目标编码视频，这样，便可以使视频的划分更加合理。
请参照图4，可选地，本实施例中，每个所述待编码图像包括多个第二区域，每个所述第二区域包括至少一个所述第一区域，换句话说，每个第二区域包括整数个第一区域。所述依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域的步骤(步骤S120)包括子步骤S121-子步骤S123。
步骤S121，对待编码图像按照先后顺序进行分组，获得与各第二区域对应的待编码图像组。
具体地，根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组。
步骤S122，依次将每个待编码图像组作为目标图像组，其中，目标图像组中的待编码图像为第一图像。
步骤S123，在目标图像组中确定宏块定义区域。
具体地，针对该目标图像组的对应第二区域，依次从不同的第一图像中选取该第二区域内不同的第一区域作为宏块定义区域。
需要说明的是，本实施例中，目标图像组中所有待编码图像的宏块定义区域组合起来相当于该目标图像组对应的第二区域中。
本实施例用于根据在多帧待编码图像对应的编码数据中，对应同一个第二区域的部分依次采用I宏块进行帧内预测，也就是说，在每帧待编码图像中，仅仅有一个第二区域中的一个第一区域采用I宏块进行帧内预测，如此，便能够避免同一个分割图像对应的编码后的图像码率过大的问题。
请参照图5，以一个包含6帧待编码图像的待编码视频为例，待编码视频中，第一帧待编码图像预测得到I帧，第2-6帧待编码图像预测得到的都是P帧，如果每帧待编码图像都划分为四个第二区域(图5中所示的小正方形)在进行图像预测时，第一帧可以采用I宏块来进行帧内预测，每个图像的第一行、第一列的第二区域中，包括两个宏块定义区域，那么，对应该第二区域的I宏块则分布在两个P帧中，在其中一个P帧采用该第二区域中的第一个第一区域设置为I宏块来进行帧内预测，在另一个P帧中采用该第二区域中的第二个第一区域设置为I宏块来进行帧内预测，对于各个P帧中，未设置为I宏块的区域，可以采用P宏块进行帧间预测。接着，依次对第一行第二列、第二行第一列、第二行第二列的第二区域各自对应的待编码图像进行帧内预测，对第一行第二列、第二行第一列、第二行第二列的第二区域对应的区域进行帧内预测的原理与第一行第一列的第二区域相同，在此不再赘述。
可选地，本实施例中，在步骤S120之前，所述方法还包括：根据目标对象在待编码图像中的位置，分别对所述目标编码视频中的每个待编码图像进行图像分割，获得分割图像，其中每个待编码图像上的每个分割图像对应一个第二区域。比如，一个32MP待编码图像划分成4个8MP的块。也就是说，本实施例中，第二区域是根据分割图像确定的。
本实施例用于对每个待编码图像进行划分，从而将每个待编码图像均划分为多个分割图像。在划分时，同一目标编码视频中的待编码图像，都采用相同的分割方式，也就是每个待编码图像中都在与相同图像坐标对应的位置进行划分。
根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组的步骤(步骤S121)包括：依次将包含目标对象和不包含目标对象的分割图像对应的第二区域作为目标区域；根据所述目标区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与目标区域对应的待编码图像组。
本实施例中，优先对包含目标对象的分割图像对应第二区域中设置I宏块，也就是进行帧内预测，如此，能够优先减小或者消除目标对象对应图像区域的累积误差，确保编码后目标对象的画面效果。
请参照图6所示，可选地，本实施例中，所述对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据的步骤(步骤S130)包括，针对所述待编码图像中的每个第二区域，分别采用对应的编码器对该第二区域中的宏块定义区域进行帧内预测，对该第二区域中除宏块定义区域外的其他第一区域进行帧间预测，得到该第二区域的编码子数据，其中，所述待编码图像中所有第二区域的编码子数据构成该待编码图像对应的编码数据。
本实施中，对应的编码器是指与第二区域对应的编码器。采用单独的编码器来对不同的第二区域在各个待编码图像中对应的分割图像进行编码，采用多个编码器，能够提高编码的效率，同时，可以对不同区域的分割图像针对性地编码。
请参照图7，可选地，本实施例中，所述根据所述编码数据获取所述待编码图像的第一码流的步骤(步骤S140)包括子步骤S141-子步骤S143。
步骤S141，根据所述编码数据中的每个编码子数据，获取所述待编码图像的每个分割图像的残差。
在获得每个分割图像的残差后，便可以对每个分割图像的残差进行变换和量化，对每个分割图像的残差进行变换和量化的步骤可以包括步骤S142和步骤S143。
步骤S142，确定对分割图像进行编码的码率。
具体地，根据该待编码图像的每个分割图像中是否包含目标对象确定对该分割图像进行编码的码率，其中，包含目标对象的分割图像对应的码率高于不包含目标对象的分割图像的码率。
步骤S143，根据对分割图像编码的码率调节对应的编码数据。
具体地，根据所述编码的码率对该分割图像对应的编码子数据进行码率调节，获得码率调节后的子码流其中，所有所述分割图像的子码流构成所述目标编码视频对应的视频码流。
本实施例中，可以将目标对象所在的第二区域的分割图像采用高码率(例如，保持原有码率)进行编码，对其他分割图像采用低码率(例如，在原有码率的基础上降低码率)进行编码，能够在确保编码后的图像的展示效果的同时，降低整个视频的码率。
本实施例中，还可以在上述码率调节的基础上，再根据各帧待编码图像中第二区域对应的分割图像的亮度来对该分割图像编码的码率进行再次调节，如此，便可以进一步提高编码后的视频的效果。
在具体设置时，可以设置每个第二区域定义一个失真容忍度，然后根据失真容忍度来确定编码的码率。例如，包含目标对象的分割图像，保持原始码率，不包含目标对象的区域降低20％的码率。同时，根据图像的亮度增益，进行调整码率分配，图像亮度增益越大，码率分配相对提升，具体的码率分配与图像的亮度增益可以成正比例的关系。
请参照图8，可选地，本实施例中，所述待编码视频中的同一待编码图像由同一时刻不同方向采集到的多帧原始图像拼接而成，在根据所述编码的码率对该分割图像对应的编码子数据进行码率调节，获得码率调节后的子码流的步骤(步骤S143)后，所述根据所述编码数据获取所述待编码图像的第一码流(步骤S140)还包括子步骤S144-子步骤S146。
步骤S144，获取各个待编码图像中的拼接区域。
对所述子码流所对应待编码图像的多帧原始图像进行检测，获取所述码率调节图像对应的分割图像中，与所述原始图像重复的区域对应的区域作为拼接区域。
步骤S145，根据所述拼接区域调节每个分割图像对应的编码参数，所述编码参数包括编码滤波强度和质量因子。
步骤S146，根据调节后的编码参数对所述子码流进行滤波，获得新的子码流。
本实施例中，根据拼接区域调整编码参数从而对分割图像对应的子码流进行滤波，如此，可以滤除拼接区域的干扰，从而进一步提高编码后的图像的效果。例如，分割图像中角点匹配的均方差大，增大编码滤波强度，降低质量因子。计算角点匹配的均方差时，可以通过角点匹配，得到角点匹配距离，进而得到一个区域内角点匹配的均方差，根据均方差判断拼接效果，从而在不同的分割图像中进行动态调节编码参数。
本实施例中，在进行编码的过程中，还可以将各个分割图像对应子码流、各个分割图像的位置信息以及对应的图像识别信息等关联并存储为解码信息。图像识别信息可以是根据图像生成的时间戳得来的。
在解码时，解码端获取视频码流，对各个分割图像进行恢复，然后再根据解码信息将各个恢复后的分割图像按照解码信息进行拼接从而得到恢复的视频图像。本实施例中的待编码图像，可以是YUV图像。
请参照图9，本申请实施例还提供一种视频编码装置110，所述装置包括第一获取模块111、选取模块112、预测压缩模块113、变换压缩模和第二获取模块115。所述视频编码装置110包括一个可以软件或固件的形式存储于所述存储器120中或固化在所述电子设备100的操作系统(Operating System，OS)中的软件功能模块。
第一获取模块111，用于从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域对应的图像，所述多个第一区域内的图像构成所述待编码图像。
本实施例中的第一获取模块111用于执行步骤S110，关于所述第一获取模块111的具体描述可参照对所述步骤S110的描述。
选取模块112，用于针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域。
本实施例中的选取模块112用于执行步骤S120，关于所述选取模块112的具体描述可参照对所述步骤S120的描述。
预测压缩模块113，用于针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据。
本实施例中的预测压缩模块113用于执行步骤S130，关于所述预测压缩模块113的具体描述可参照对所述步骤S130的描述。
变换压缩模块114，用于对该待编码图像对应的编码数据进行变换和量化，获得待编码图像对应的第一码流。
本实施例中的变换压缩模块114用于执行步骤S140，关于所述变换压缩模块114的具体描述可参照对所述步骤S140的描述。
第二获取模块115，根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
本实施例中的第二获取模块115用于执行步骤S150，关于所述第二获取模块115的具体描述可参照对所述步骤S150的描述。
本申请还提供一种可读存储介质，所述可读存储介质存储有可执行程序，处理器130在执行所述可执行程序时，实现如本实施例任一项所述的方法。
以上所述，仅为本申请的各种实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种视频编码方法，其特征在于，所述方法包括：
从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域，所述多个第一区域内的图像构成所述待编码图像；
针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域；
针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据；
根据所述编码数据获取所述待编码图像的第一码流；
根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
2.根据权利要求1所述的方法，其特征在于，所述从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频的步骤包括：
获取待编码视频，所述待编码视频包括多帧待编码图像；
对所述待编码视频的每帧待编码图像进行目标检测，并根据目标对象的变化情况依次获取多帧连续待编码图像作为目标编码视频。
3.根据权利要求1所述的方法，其特征在于，每个所述待编码图像包括多个第二区域，每个所述第二区域包括至少一个所述第一区域，所述依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域的步骤包括：
根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组；
依次将每个待编码图像组作为目标图像组，其中，目标图像组中的待编码图像为第一图像；
针对该目标图像组对应的第二区域，依次从不同的第一图像中选取该第二区域内不同的第一区域作为宏块定义区域。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
根据目标对象在待编码图像中的位置，分别对所述目标编码视频中的每个待编码图像进行图像分割，获得分割图像，其中每个待编码图像上的每个分割图像对应一个第二区域；
根据每个第二区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与各个第二区域对应的待编码图像组的步骤包括：
依次将包含目标对象和不包含目标对象的分割图像对应的第二区域作为目标区域；
根据所述目标区域中第一区域的数量，对所述待编码图像按照先后顺序进行分组，获得与所述目标区域对应的待编码图像组。
5.根据权利要求4所述的方法，其特征在于，所述对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据的步骤包括：
针对所述待编码图像中的每个第二区域，分别采用对应的编码器对该第二区域中的宏块定义区域进行帧内预测，对该第二区域中除宏块定义区域外的其他第一区域进行帧间预测，得到该第二区域的编码子数据，其中，所述待编码图像中所有第二区域的编码子数据构成该待编码图像对应的编码数据。
6.根据权利要求5所述的方法，其特征在于，所述根据所述编码数据获取所述待编码图像的第一码流的步骤包括：
根据所述编码数据中的每个编码子数据，获取所述待编码图像的每个分割图像的残差；
根据该待编码图像的每个分割图像中是否包含目标对象确定对该分割图像进行编码的码率，其中，包含目标对象的分割图像对应的码率高于不包含目标对象的分割图像的码率；
根据所述编码的码率对该分割图像对应的编码子数据进行码率调节，获得码率调节后的子码流，其中，所述待编码图像中所有所述分割图像对应的子码流构成所述第一码流。
7.根据权利要求6所述的方法，其特征在于，所述待编码视频中的同一待编码图像由同一时刻不同方向采集到的多帧原始图像拼接而成，所述根据所述编码数据获取所述待编码图像的第一码流的步骤还包括：
对所述子码流所对应待编码图像的多帧原始图像进行检测，获取所述子码流对应的分割图像中，与所述原始图像重复的区域对应的区域作为拼接区域；
根据所述拼接区域调节每个分割图像对应的编码参数，所述编码参数包括编码滤波强度和质量因子；
根据调节后的编码参数对所述子码流进行滤波，获得新的子码流。
8.一种视频编码装置，其特征在于，所述装置包括：
第一获取模块，用于从待编码视频的首帧待编码图像之后的待编码图像中，依次获取多帧连续待编码图像作为目标编码视频，其中，每个待编码图像均包括多个第一区域，所述多个第一区域内的图像构成所述待编码图像；
选取模块，用于针对所述目标编码视频，依次从不同的待编码图像中，选取不同的第一区域作为该待编码图像对应的宏块定义区域，其中，目标编码视频中，每个第一区域均至少一次被选取为宏块定义区域；
预测压缩模块，用于针对每个所述待编码图像，对该待编码图像的宏块定义区域进行帧内预测，对该待编码图像中除宏块定义区域外的其他第一区域进行帧间预测，获得对应的编码数据；
变换压缩模块，用于根据所述编码数据获取所述待编码图像的第一码流；
第二获取模块，根据首帧待编码图像对应的第二码流以及各个所述待编码图像对应的第一码流获得待编码视频的视频码流。
9.一种可读存储介质，其特征在于，所述可读存储介质存储有可执行程序，处理器在执行所述可执行程序时，实现如权利要求1-7任一项所述的方法。
10.一种电子设备，其特征在于，所述电子设备包括存储器和处理器，所述存储器和所述处理器电性连接，所述存储器中存储有可执行程序，所述处理器在执行所述可执行程序时，实现如权利要求1-7任一项所述的方法。
CN201911414266.XA 2019-12-31 2019-12-31 视频编码方法、装置、可读存储介质及电子设备 Active CN113132721B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911414266.XA CN113132721B (zh) 2019-12-31 2019-12-31 视频编码方法、装置、可读存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911414266.XA CN113132721B (zh) 2019-12-31 2019-12-31 视频编码方法、装置、可读存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN113132721A CN113132721A (zh) 2021-07-16
CN113132721B true CN113132721B (zh) 2022-07-19

Family

ID=76770569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911414266.XA Active CN113132721B (zh) 2019-12-31 2019-12-31 视频编码方法、装置、可读存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN113132721B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102202219A (zh) * 2010-03-26 2011-09-28 日立民用电子株式会社 图像编码方法和图像编码装置
CN103179394A (zh) * 2013-01-21 2013-06-26 北京航空航天大学 一种基于区域视频质量平稳的i帧码率控制方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4753204B2 (ja) * 2006-11-17 2011-08-24 株式会社ソニー・コンピュータエンタテインメント 符号化処理装置および符号化処理方法
EP3029937B1 (en) * 2014-12-03 2016-11-16 Axis AB Method and encoder for video encoding of a sequence of frames

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102202219A (zh) * 2010-03-26 2011-09-28 日立民用电子株式会社 图像编码方法和图像编码装置
CN103179394A (zh) * 2013-01-21 2013-06-26 北京航空航天大学 一种基于区域视频质量平稳的i帧码率控制方法

Also Published As

Publication number Publication date
CN113132721A (zh) 2021-07-16

Similar Documents

Publication Publication Date Title
TWI634777B (zh) 搜索參考區塊的方法
CN107318026B (zh) 视频编码器以及视频编码方法
US9414086B2 (en) Partial frame utilization in video codecs
WO2015096822A1 (zh) 图像编码、解码方法及装置
US9510010B2 (en) Method for decoding images based upon partition information determinations and apparatus for decoding using same
US20130028322A1 (en) Moving image prediction encoder, moving image prediction decoder, moving image prediction encoding method, and moving image prediction decoding method
JP4895400B2 (ja) 画像フレームの非フレームエッジブロックの表現における改良された圧縮
US8204120B2 (en) Method for intra prediction coding of image data
US8903188B2 (en) Method and device for processing components of an image for encoding or decoding
US11134242B2 (en) Adaptive prediction of coefficients of a video block
CN113068028B (zh) 视频图像分量的预测方法、装置及计算机存储介质
US20170041623A1 (en) Method and Apparatus for Intra Coding for a Block in a Coding System
JP2018533273A5 (zh)
CN104853192A (zh) 预测模式选择方法及装置
KR102161888B1 (ko) 보조 프레임을 지원하는 비디오 코딩 포맷으로 비디오 스트림을 인코딩하기 위한 인코더 및 방법
CN108401185B (zh) 参考帧选择方法、视频转码方法、电子设备和存储介质
FI109635B (fi) Menetelmä ja laite videokuvan jälkikäsittelemiseksi
US9648336B2 (en) Encoding apparatus and method
CN113132721B (zh) 视频编码方法、装置、可读存储介质及电子设备
US20170201767A1 (en) Video encoding device and video encoding method
JP2015128239A (ja) 画像符号化装置、撮像装置、画像符号化方法、及びプログラム
JP2013017221A (ja) 動画像処理装置、動画像処理方法、および動画像処理プログラム
WO2021263251A1 (en) State transition for dependent quantization in video coding
JP5913929B2 (ja) 動画像符号化装置及びその制御方法、コンピュータプログラム
TW202101995A (zh) 圖像編碼裝置、圖像解碼裝置、圖像編碼方法、圖像解碼方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant