CN113438485B - 图像编码方法、装置、电子设备和存储介质 - Google Patents
图像编码方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN113438485B CN113438485B CN202110713400.7A CN202110713400A CN113438485B CN 113438485 B CN113438485 B CN 113438485B CN 202110713400 A CN202110713400 A CN 202110713400A CN 113438485 B CN113438485 B CN 113438485B
- Authority
- CN
- China
- Prior art keywords
- image
- reference image
- image block
- coordinate information
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本公开提供了图像编码方法、装置、电子设备和存储介质，涉及视频编码技术领域。具体实现方案为：获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率高于所述图像的分辨率；确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理。由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
Description
技术领域
本公开涉及视频编码技术领域，尤其涉及一种图像编码方法、装置、电子设备和存储介质。
背景技术
WebRTC(Web Real-Time Communication，网页即时通信)，是一个支持浏览器进行实时语音、视频对话的开源协议，simulcast(同播)，为WebRTC的一个常用功能，在实现该功能时，推流用户端需要同时对多种分辨率的视频进行编码，并将编码后视频发送至服务端，从而服务端可以根据拉流用户端的网络情况，将分辨率与拉流用户端的网络情况匹配的视频发送至拉流用户端，以使拉流用户端可以根据网络情况观看分辨率合适的视频。
相关技术中，模式决策是视频编码过程中耗时最多的步骤，而由于推流用户端需要同时对多种分辨率的视频进行编码，这就导致了推流用户端进行视频编码时会耗费大量的时间来进行模式决策，且模式决策过程对推流用户端设备的CPU(Central ProcessingUnit，中央处理器)性能要求较高，因此需要一种能够提高编码速度，降低编码过程中CPU功耗的编码方法。
发明内容
本公开提供了一种用于提高编码速度，降低编码过程中CPU功耗的图像编码方法、装置、电子设备和存储介质。
根据本公开的一方面，提供了一种图像编码方法，包括：获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率高于所述图像的分辨率；确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理。
本公开实施例的图像编码方法，通过获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，提高了图像编码的速度，降低了编码过程中CPU的功耗。
根据本公开的另一方面，提供了另一种图像编码方法，包括：获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率低于所述图像的分辨率；确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理。
本公开实施例的图像编码方法，通过获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，提高了图像编码的速度，降低了编码过程中CPU的功耗。
根据本公开的另一方面，提供了一种图像编码装置，包括：第一获取模块，用于获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率高于所述图像的分辨率；第一确定模块，用于确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；第二确定模块，用于针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；第一处理模块，用于根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理。
本公开实施例的图像编码装置，通过获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，提高了图像编码的速度，降低了编码过程中CPU的功耗。
根据本公开的另一方面，提供了另一种图像编码装置，包括：第二获取模块，用于获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率低于所述图像的分辨率；第三确定模块，用于确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；第四确定模块，用于针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；第二处理模块，用于根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理。
本公开实施例的图像编码装置，通过获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，提高了图像编码的速度，降低了编码过程中CPU的功耗。
根据本公开的另一方面，提供了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行第一方面所述的方法，或者执行第二方面所述的方法。
根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行第一方面所述的方法，或者执行第二方面所述的方法。
根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现第一方面所述的方法，或者实现第二方面所述的方法。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本公开的限定。其中：
图1为本申请实施例提供的一种图像编码方法的流程示意图；
图2为本申请实施例提供的参考图像和待处理的图像的示例图；
图3为本申请实施例提供的另一种图像编码方法的流程示意图；
图4为本申请实施例提供的参考图像和待处理的图像的另一示例图；
图5为本申请实施例提供的参考图像和待处理的图像的又一示例图；
图6为本申请实施例提供的另一种图像编码方法的流程示意图；
图7为本实施例提供的一种图像编码装置的结构示意图；
图8为本申请实施例提供的另一种图像编码装置的结构示意图；
图9为本申请实施例提供的另一种图像编码装置的结构示意图；
图10为本公开实施例提供的电子设备1000的示意性框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
通过上述分析可知，模式决策是视频编码过程中耗时最多的步骤，而由于推流用户端需要同时对多种分辨率的视频进行编码，其中对每种分辨率的视频进行编码时均需要进行模式决策，这就导致了推流用户端进行视频编码时会耗费大量的时间来进行模式决策，且模式决策过程对推流用户端设备的CPU性能要求较高，因此需要一种能够提高编码速度，降低编码过程中CPU功耗的编码方法。
本申请为了提高图像编码速度，降低编码过程中CPU的功耗，提出一种图像编码方法，该方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于或者低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，从而提高了图像编码的速度，降低了编码过程中CPU的功耗。
下面参考附图描述本申请实施例的图像编码方法、装置、电子设备和存储介质。
图1为本申请实施例提供的一种图像编码方法的流程示意图。其中，需要说明的是，本实施例提供的图像编码方法，执行主体为图像编码装置，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。本公开实施例以图像编码装置被配置在电子设备中为例进行说明。
其中，电子设备，可以为前述推流客户端设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。
如图1所示，该图像编码方法，可以包括以下步骤：
步骤101，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率。
其中，待处理的图像，可以为任意待进行编码的图像，比如可以为摄像装置拍摄的一帧图像，也可以为对待进行编码的视频中的各帧图像，本公开对待处理的图像的类型不作限制。
其中，参考图像，为已经预先确定了模式决策结果的图像，且参考图像的分辨率高于图像的分辨率。
需要说明的是，待处理的图像，可以为至少一种分辨率下的图像。另外，为了提高图像编码速度，降低编码过程中CPU的消耗，可以只确定一种分辨率下的参考图像的模式决策结果，从而对于不同分辨率下的待处理的图像，均可以根据该参考图像的模式决策结果来进行图像编码。即，待处理的图像为至少一种分辨率下的图像时，至少一种分辨率下的图像对应相同的参考图像。
步骤102，确定图像中图像块与参考图像中参考图像块之间的映射关系。
在示例性实施例中，可以按照预设的划分深度，将待处理的图像划分为多个图像块。
其中，划分深度，决定了对图像进行划分后每个图像块的尺寸，划分深度越大，划分后每个图像块的尺寸越小，其中划分深度可以根据需要设置，本公开对此不作限制。
比如，假设划分深度为0时，对应将图像划分为64像素*64像素的图像块；划分深度为1时，对应将图像划分为32像素*32像素的图像块；划分深度为2时，对应将图像划分为16像素*16像素的图像块。则假设按照划分深度为2，对待处理的图像进行划分，可以将待处理的图像划分为多个16像素*16像素的图像块。
在示例性实施例中，可以按照预设的划分深度，将参考图像划分为多个参考图像块。其中，划分深度可以根据需要设置。在示例性实施例中，对参考图像进行划分时，可以按照与划分待处理的图像时相同的划分深度，将参考图像划分为多个参考图像块，即，参考图像中参考图像块的尺寸与待处理的图像中图像块的尺寸可以相同。
需要说明的是，本公开各实施例中，以待处理的图像中图像块的尺寸及参考图像中参考图像块的尺寸均为16像素*16像素为例进行说明。
在示例性实施例中，可以根据待处理的图像中各图像块与参考图像块中各参考图像块的内容，确定图像中各图像块与参考图像中各参考图像块之间的映射关系，其中，内容相同的图像块与参考图像块之间具有映射关系。
举例来说，参考图2，假设图2中左侧的图像为分辨率为720p的参考图像，右侧的图像为分辨率为360p的待处理的图像，其中，待处理的图像中每个图像块以及参考图像中每个参考图像块的尺寸均为16*16像素。
参考图2可知，图2中右侧分辨率为360p的待处理的图像相对于左侧分辨率为720p的参考图像，相当于横向和纵向均整体缩小为原来的1/2，并且，图2中待处理的图像的内容和参考图像的内容相同，其中参考图像中第1行第1列的图像块a、第1行的第2列的图像块b、第2行第1列的图像块c、第2行第2列的图像块d的共4个图像块的内容，与待处理的图像中第1行第1列的图像块e的内容相同，参考图像中第1行第3列的图像块、第1行的第4列的图像块、第2行第3列的图像块、第2行第4列的图像块的共4个图像块的内容，与待处理的图像中第1行第2列的图像块的内容相同，参考图像中第3行第1列的图像块、第3行的第2列的图像块、第4行第1列的图像块、第4行第2列的图像块的共4个图像块的内容，与待处理的图像中第2行第1列的图像块的内容相同，参考图像中第3行第3列的图像块、第3行的第4列的图像块、第4行第3列的图像块、第4行第4列的图像块的共4个图像块的内容，与待处理的图像中第2行第2列的图像块的内容相同。
则可以确定参考图像中第1行第1列的图像块a、第1行的第2列的图像块b、第2行第1列的图像块c、第2行第2列的图像块d的共4个图像块，与待处理的图像中第1行第1列的图像块e具有映射关系；参考图像中第1行第3列的图像块、第1行的第4列的图像块、第2行第3列的图像块、第2行第4列的图像块的共4个图像块，与待处理的图像中第1行第2列的图像块具有映射关系；参考图像中第3行第1列的图像块、第3行的第2列的图像块、第4行第1列的图像块、第4行第2列的图像块的共4个图像块，与待处理的图像中第2行第1列的图像块具有映射关系，参考图像中第3行第3列的图像块、第3行的第4列的图像块、第4行第3列的图像块、第4行第4列的图像块的共4个图像块，与待处理的图像中第2行第2列的图像块具有映射关系。
步骤103，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。
步骤104，根据图像中各个图像块的模式决策结果，对图像进行编码处理。
其中，模式决策结果，可以包括帧内预测模式中的垂直预测、水平预测、均值预测、平面预测等，帧间预测模式中的P帧、B帧预测方法、采用不同大小的预测块进行运动估计等预测模式。
在示例性实施例中，针对待处理的图像中的每个图像块，由于参考图像中与图像块具有映射关系的至少一个参考图像块的内容，与图像块的内容相同，因此编码时的模式决策具有一定继承性，可以根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。
可以理解的是，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。
进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。
举例来说，继续图2所示的示例，假设图2中左侧参考图像中，参考图像块a和b的模式决策结果均为水平预测、参考图像块c和d的模式决策结果均为垂直预测，则针对图2中右侧的待处理的图像中图像块e，由于参考图像中与图像块e具有映射关系的参考图像块为参考图像块a、b、c、d，则可以根据参考图像块a、b、c、d的模式决策结果，从水平预测和垂直预测这两种预测模式中选出一种预测模式作为图像块e的模式决策结果。具体进行模式决策结果选择时，可以计算图像块e分别采用水平预测和垂直预测时的RDCOST(RateDistortion Optimation，率失真优化)数值，进而将RDCOST数值最小的预测模式，确定为图像块e的模式决策结果。针对图2中待处理的图像中其它图像块，可以按照相同的方式，确定每个图像块的模式决策结果，进而根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。
由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，比如上述示例中，以确定图像块e的模式决策结果为例，只需计算图像块e采用水平预测和垂直预测这两种预测模式时分别对应的RDCOST数值，无需再计算图像块e采用除水平预测和垂直预测之外的其它预测模式时的TDCOST数值，从而提高了图像编码的速度，降低了编码过程中CPU的功耗，且该图像编码方法不包含其它额外计算过程，简单易实现。
本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
通过上述分析可知，在获取待处理的图像以及对应的参考图像后，可以确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，进而针对待处理的图像中每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，下面结合图3，对本公开实施例中确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系的过程进行详细说明。
图3为本申请实施例提供的另一种图像编码方法的流程示意图。
如图3所示，该图像编码方法包含以下步骤：
步骤301，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率。
其中，待处理的图像，为待进行编码的视频中的各帧图像。
步骤302，针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息。
其中，至少两个顶点坐标信息至少可以包括：左上顶点坐标信息和右下顶点坐标信息；或者，至少两个顶点坐标信息至少可以包括；左下顶点坐标信息和右上顶点坐标信息。即，通过某个图像块的至少个顶点坐标信息，可以限定该图像块所在区域。
步骤303，确定参考图像中与顶点坐标信息对应的参考坐标信息。
在示例性实施例中，针对待处理的图像中的每个图像块，可以先确定从待处理的图像至参考图像的缩放比例，进而根据图像块的至少个顶点坐标信息以及缩放比例，确定参考图像中与各顶点坐标信息对应的参考坐标信息。
其中，缩放比例可以包括：横缩放比例以及纵缩放比例；相应的，可以根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息，根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。需要说明的是，本公开实施例以横缩放比例与纵缩放比例相同为例进行说明。
举例来说，参考图2，假设针对图2中右侧的待处理的图像中的图像块e，获取了图像块e的左上顶点坐标(0,0)，右下顶点坐标(16,16)，由于图2右侧的待处理的图像至左侧的参考图像的横缩放比例h以及纵缩放比例z均为2，则可以根据左上顶点坐标(0,0)、横缩放比例h以及纵缩放比例z，确定参考图像中与左上顶点坐标(0,0)对应的参考坐标(h*0,z*0)即(0,0)，根据右下顶点坐标(16,16)、横缩放比例h以及纵缩放比例z，确定参考图像中与右下顶点坐标(16,16)对应的参考坐标(h*16,z*16)即(32,32)。
步骤304，确定至少两个参考坐标信息所限定的图像区域中的参考图像块。
步骤305，将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。
在示例性实施例中，针对待处理的图像中的每个图像块，确定了参考图像中与图像块的每个顶点坐标信息分别对应的参考坐标信息后，即可确定至少两个参考坐标信息所限定的图像区域中的参考图像块，进而将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。
举例来说，继续上述示例，假设针对图2中的图像块e的左上顶点坐标(0,0)和右下顶点坐标(16,16)，确定了参考图像中与左上顶点坐标(0,0)和右下顶点坐标(16,16)分别对应的参考坐标(0,0)和(32,32)，则可确定参考坐标(0,0)和(32,32)所限定的图像区域为图4的左侧图中的黑色方形区域，并确定参考坐标(0,0)和(32,32)所限定的图像区域中的参考图像块为参考图像块a、b、c、d，进而将参考图像块a、b、c、d，确定为与图像块e具有映射关系的参考图像块。
需要说明的是，上述示例是以待处理的图像至参考图像的缩放比例为整数为例进行说明的，在一种可能的实现形式中，待处理的图像至参考图像的缩放比例可能为非整数，在这种情况下，针对待处理的图像中的每个图像块，参考图像中与图像块的至少两个顶点坐标信息对应的至少两个参考坐标信息所限定的图像区域中可能包含非完整的参考图像块，此时，将至少两个参考坐标信息所限定的图像区域中包含的完整的参考图像块以及非完整的参考图像块，均确定为与图像块具有映射关系的参考图像块。
举例来说，参考图5，假设图5中左侧为分辨率为720p的参考图像，图5中右侧为分辨率为480p的待处理的图像，其中，待处理的图像中每个图像块以及参考图像中每个参考图像块的尺寸均为16*16像素。假设针对图5中右侧的待处理的图像中的图像块f(图5中右侧图像中黑色图像块)，获取了图像块f的左上顶点坐标为(0,0)，右下顶点坐标为(16,16)，由于图5右侧的待处理的图像至左侧的参考图像的横缩放比例h以及纵缩放比例z均为3/2，则可以根据图像块f的左上顶点坐标(0,0)、横缩放比例h以及纵缩放比例z，确定参考图像中与左上顶点坐标(0,0)对应的参考坐标(h*0,z*0)即(0,0)，根据图像块f的右下顶点坐标(16,16)、横缩放比例h以及纵缩放比例z，确定参考图像中与右下顶点坐标(16,16)对应的参考坐标(h*16,z*16)即(24,24)。
而参考坐标(0,0)和(24,24)所限定的图像区域为图5的左侧图中的黑色方形区域，该图像区域中包括图5左侧图中第1行第1列的完整参考图像块，以及第1行第2列、第2行第1列、第2行第2列的3个非完整参考图像块，则可以将图5左侧图中第1行第1列的完整参考图像块，以及第1行第2列、第2行第1列、第2行第2列的3个非完整参考图像块，确定为与图像块f具有映射关系的参考图像块。
需要说明的是，上述实施例在确定与待处理的图像中的每个图像块具有映射关系的参考图像块时，是针对待处理的图像中的每个图像块，获取参考图像块中与图像块的至少两个顶点坐标信息分别对应的参考坐标信息，再以根据至少两个参考坐标信息所限定的图像区域来确定与图像块具有映射关系的参考图像块。在一种可能的实现形式中，还可以直接结合计算公式来确定与待处理的图像中的每个图像块具有映射关系的参考图像块，下面对这种方式进行说明。
在示例性实施例中，以参考图像的分辨率为720p、待处理的图像中图像块的至少两个顶点坐标信息包括左上顶点坐标信息和右下顶点坐标信息，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例，假设待处理的图像至参考图像的缩放比例为整数，则对待处理的图像中的每个图像块，可以先获取图像块的至少两个顶点坐标信息，进而根据以下公式(1)-(4)，确定参考图像中与图像块具有映射关系的参考图像块。
a1＝floor((x1/scale*720)/16) (1)
b1＝floor((y1/scale*720)/16) (2)
a2＝floor((x2/scale*720)/16) (3)
b2＝floor((y1/scale*720)/16) (4)
其中，(x1,y1)为待处理的图像中图像块的左上顶点坐标，(x2,y2)为待处理的图像中图像块的右下顶点坐标，scale为待处理的图像的分辨率，720为参考图像的分辨率，16为待处理的图像中图像块和参考图像块的尺寸，floor为向下取整，a1表示图像块的左上顶点对应参考图像中横轴上的第a1个参考图像块，b1表示图像块的左上顶点对应参考图像中纵轴上的第b1个参考图像块，a2表示图像块的右下顶点对应参考图像中横轴上的第a2个参考图像块，b2表示图像块的右下顶点对应参考图像中纵轴上的第b2个参考图像块。
举例来说，假设参考图像的分辨率为720p、待处理的图像的分辨率为360p，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素，待处理的图像中某图像块的左上顶点坐标为(0,0)、右下顶点坐标为(16,16)，则可以根据公式(1)-(4)，确定a1＝floor((0/scale*720)/16)＝0，b1＝floor((0/scale*720)/16)＝0，a2＝floor((16/scale*720)/16)＝2，b2＝floor((16/scale*720)/16)＝2，即该图像块的左上顶点对应参考图像中横轴上的第0个参考图像块和纵轴上的第0个参考图像块，该图像块的右下顶点对应参考图像中横轴上的第2个参考图像块和纵轴上的第2个参考图像块，则可以将参考图像中第1行第1列、第1行第2列、第2行第1列、第2行第2列的4个参考图像块，确定为与该图像块具有映射关系的参考图像块。
在示例性实施例中，以参考图像的分辨率为720p、待处理的图像中图像块的至少两个顶点坐标信息包括左上顶点坐标信息和右下顶点坐标信息，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例，假设待处理的图像至参考图像的缩放比例为非整数，则对待处理的图像中的每个图像块，可以先获取图像块的至少两个顶点坐标信息，进而根据以下公式(5)-(8)，确定参考图像中与图像块具有映射关系的参考图像块。
a1'＝floor((x1/scale*720)/16) (5)
b1'＝floor((y1/scale*720)/16) (6)
a2'＝floor((x2/scale*720)/16)+1 (7)
b2'＝floor((y1/scale*720)/16)+1 (8)
其中，(x1,y1)为待处理的图像中图像块的左上顶点坐标，(x2,y2)为待处理的图像中图像块的右下顶点坐标，scale为待处理的图像的分辨率，720为参考图像的分辨率，16为待处理的图像中图像块和参考图像块的尺寸，floor为向下取整，a1’表示图像块的左上顶点对应参考图像中横轴上的第a1’个参考图像块，b1’表示图像块的左上顶点对应参考图像中纵轴上的第b1’个参考图像块，a2’表示图像块的右下顶点对应参考图像中横轴上的第a2’个参考图像块，b2’表示图像块的右下顶点对应参考图像中纵轴上的第b2’个参考图像块。
举例来说，假设参考图像的分辨率为720p、待处理的图像的分辨率为480p，参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素，待处理的图像中某图像块的左上顶点坐标为(0,0)、右下顶点坐标为(16,16)，则可以根据公式(5)-(8)，确定a1'＝floor((0/scale*720)/16)＝0，b1'＝floor((0/scale*720)/16)＝0，a2'＝floor((16/scale*720)/16)+1＝2，b2'＝floor((16/scale*720)/16)＝2，即该图像块的左上顶点对应参考图像中横轴上的第0个参考图像块和纵轴上的第0个参考图像块，该图像块的右下顶点对应参考图像中横轴上的第2个参考图像块和纵轴上的第2个参考图像块，则可以将参考图像中第1行第1列、第1行第2列、第2行第1列、第2行第2列的4个参考图像块，确定为与该图像块具有映射关系的参考图像块。
需要说明的是，公式(1)-(8)是以参考图像的分辨率为720p、参考图像中图像块的尺寸以及待处理的图像中图像块的尺寸为16像素*16像素为例进行示意的，在实际应用中，当参考图像的分辨率、参考图像块的尺寸、图像块的尺寸为其它值时，本领域技术人员可以适应性的对公式(1)-(8)进行修改，本公开对此不作限制。
步骤306，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。
步骤307，根据图像中各个图像块的模式决策结果，对图像进行编码处理。
在示例性实施例中，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。
在示例性实施例中，可以通过以下方式，从多个参考图像块分别对应的模式决策结果中，选择一种模式决策结果作为图像块的模式决策结果：确定图像块采用至少一个参考图像块的模式决策结果的代价数值；从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。
其中，代价数值，例如可以为RDCOST数值，或者，也可以为其它能够评价至少一个参考图像块的模式决策结果的优劣的指标值，本公开对此不作限制。
在示例性实施例中，在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，多个参考图像块对应的模式决策结果可能为一个或多个，在多个参考图像块对应的模式决策结果为一个时，可以将该模式决策结果确定为图像块的模式决策结果，在多个参考图像块对应的模式决策结果为多个时，可以确定图像块采用每种模式决策结果的代价数值，进而从多种模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。
本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息，确定参考图像中与顶点坐标信息对应的参考坐标信息，确定至少两个参考坐标信息所限定的图像区域中的参考图像块，将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
下面对本申请实施例提供的另一种图像编码方法进行说明。
图6为本申请实施例提供的另一种图像编码方法的流程示意图。其中，需要说明的是，本实施例提供的图像编码方法，执行主体为图像编码装置，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。本公开实施例以图像编码装置被配置在电子设备中为例进行说明。
其中，电子设备，可以为前述推流客户端设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。
如图6所示，该图像编码方法，可以包括以下步骤：
步骤601，获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率低于图像的分辨率。
其中，待处理的图像，可以为任意待进行编码的图像，比如可以为摄像装置拍摄的一帧图像，也可以为对待进行编码的视频中的各帧图像，本公开对待处理的图像的类型不作限制。
其中，参考图像，为已经预先确定了模式决策结果的图像，且参考图像的分辨率低于图像的分辨率。
需要说明的是，待处理的图像，可以为至少一种分辨率下的图像。另外，为了提高图像编码速度，降低编码过程中CPU的消耗，可以只确定一种分辨率下的参考图像的模式决策结果，从而对于不同分辨率下的待处理的图像，均可以根据该参考图像的模式决策结果来进行图像编码。即，待处理的图像为至少一种分辨率下的图像时，至少一种分辨率下的图像对应相同的参考图像。
步骤602，确定图像中图像块与参考图像中参考图像块之间的映射关系。
在示例性实施例中，可以按照预设的划分深度，将待处理的图像以及参考图像划分为多个图像块。具体过程可以参考上述实施例的描述，此处不再赘述。
在示例性实施例中，可以按照与划分待处理的图像时相同的划分深度，将参考图像划分为多个参考图像块，即，参考图像中参考图像块的尺寸与待处理的图像中图像块的尺寸可以相同。
在示例性实施例中，可以根据待处理的图像中各图像块与参考图像块中各参考图像块的内容，确定图像中各图像块与参考图像中各参考图像块之间的映射关系，其中，内容相同的图像块与参考图像块之间具有映射关系。
在示例性实施例中，也可以根据以下方式，确定图像中各图像块与参考图像中各参考图像块之间的映射关系：针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；确定参考图像中与顶点坐标信息对应的参考坐标信息；确定至少两个参考坐标信息所限定的图像区域中的参考图像块；将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。
具体确定图像中各图像块与参考图像中各参考图像块之间的映射关系的过程，可以参考上述实施例的描述，此处不再赘述。
步骤603，针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。
步骤604，根据图像中各个图像块的模式决策结果，对图像进行编码处理。
其中，模式决策结果，可以包括帧内预测模式中的垂直预测、水平预测、均值预测、平面预测等，帧间预测模式中的P帧、B帧预测方法、采用不同大小的预测块进行运动估计等预测模式。
在示例性实施例中，针对待处理的图像中的每个图像块，由于参考图像中与图像块具有映射关系的至少一个参考图像块的内容，与图像块的内容相同，因此编码时的模式决策具有一定继承性，可以根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果。
可以理解的是，针对图像中的每个图像块，参考图像中与图像块具有映射关系的参考图像块的个数可以为一个，也可以为多个，而每个参考图像块均有其对应的模式决策结果，相应的，至少一个参考图像块对应了至少一个模式决策结果。在示例性实施例中，针对待处理的图像中的每个图像块，在参考图像中与图像块具有映射关系的参考图像块的个数为1个时，可以将该参考图像块的模式决策结果，确定为图像块的模式决策结果；在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果。
其中，在参考图像中与图像块具有映射关系的参考图像块的个数为多个时，可以通过以下方法，从多个参考图像块分别对应的模式决策结果中，选出一种模式决策结果作为图像块的模式决策结果：确定图像块采用至少一个参考图像块的模式决策结果的代价数值；从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。
进而在确定待处理的图像中各个图像块的模式决策结果后，可以根据待处理的图像中各个图像块的模式决策结果，对待处理的图像进行编码处理。
由于对于待处理的图像中的每个图像块，根据待处理的图像对应的参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，减少了确定待处理的图像中的各个图像块的模式决策结果时的计算量，比如上述示例中，以确定图像块e的模式决策结果为例，只需计算图像块e采用水平预测和垂直预测这两种预测模式时分别对应的RDCOST数值，无需再计算图像块e采用除水平预测和垂直预测之外的其它预测模式时的TDCOST数值，从而提高了图像编码的速度，降低了编码过程中CPU的功耗，且该图像编码方法不包含其它额外计算过程，简单易实现。
本实施例的图像编码方法中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
为了实现上述实施例，本实施例提供了一种图像编码装置。
图7为本实施例提供的一种图像编码装置的结构示意图，如图7所示，该装置包括：第一获取模块701、第一确定模块702、第二确定模块703和第一处理模块704。
第一获取模块701，用于获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率高于图像的分辨率；
第一确定模块702，用于确定图像中图像块与参考图像中参考图像块之间的映射关系；
第二确定模块703，用于针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果；
第一处理模块704，用于根据图像中各个图像块的模式决策结果，对图像进行编码处理。
其中，本公开实施例中的图像编码装置，可以执行上述实施例的图像编码方法，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。
其中，电子设备，可以为前述推流客户端的设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。
需要说明的是，前述对方法实施例的解释说明，也适用于本实施例的装置，原理相同，本实施例中不再赘述。
本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
下面结合图8，对本申请实施例中的图像编码装置进行进一步说明。
图8为本申请实施例提供的另一种图像编码装置的结构示意图。
如图8所示，该图像编码装置800包括：第一获取模块801、第一确定模块802、第二确定模块803和第一处理模块804。其中，图8中第一获取模块801、第一确定模块802、第二确定模块803和第一处理模块804与图7中第一获取模块701、第一确定模块702、第二确定模块703和第一处理模块704具有相同功能和结构。
在本实施例的一种可能的实现方式中，参考图8，第一确定模块802，包括：
第一获取单元8021，用于针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；
第一确定单元8022，用于确定参考图像中与顶点坐标信息对应的参考坐标信息；
第二确定单元8023，用于确定至少两个参考坐标信息所限定的图像区域中的参考图像块；
第三确定单元8024，用于将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。
在本实施例的另一种可能的实现方式中，第一确定单元8022，包括：
第一确定子单元，用于确定从图像至参考图像的缩放比例；
第二确定子单元，用于根据顶点坐标信息以及缩放比例，确定参考图像中与顶点坐标信息对应的参考坐标信息。
在本实施例的另一种可能的实现方式中，缩放比例包括：横缩放比例以及纵缩放比例；
第二确定子单元，具体用于：
根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息；
根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。
在本实施例的另一种可能的实现方式中，至少两个顶点坐标信息至少包括：左上顶点坐标信息和右下顶点坐标信息；
或者，
至少两个顶点坐标信息至少包括；左下顶点坐标信息和右上顶点坐标信息。
在本实施例的另一种可能的实现方式中，参考图8，第二确定模块803，包括：
第四确定单元8031，用于确定图像块采用至少一个参考图像块的模式决策结果的代价数值；
第一选择单元8032，用于从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。
在本实施例的另一种可能的实现方式中，待处理的图像，为待进行编码的视频中的各帧图像。
在本实施例的另一种可能的实现方式中，所述待处理的图像，为至少一种分辨率下的图像；
所述至少一种分辨率下的图像对应相同的所述参考图像。
需要说明的是，前述对方法实施例的解释说明，也适用于本实施例的装置，原理相同，本实施例中不再赘述。
本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率高于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
为了实现上述实施例，本实施例提供了另一种图像编码装置。
图9为本实施例提供的一种图像编码装置的结构示意图，如图9所示，该装置包括：第二获取模块901、第三确定模块902、第四确定模块903和第二处理模块904。
第二获取模块901，用于获取待处理的图像以及对应的参考图像，其中，参考图像与图像内容相同，且参考图像的分辨率低于图像的分辨率；
第三确定模块902，用于确定图像中图像块与参考图像中参考图像块之间的映射关系；
第四确定模块903，用于针对图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果；
第二处理模块904，用于根据图像中各个图像块的模式决策结果，对图像进行编码处理。
其中，本公开实施例中的图像编码装置，可以执行上述实施例的图像编码方法，该图像编码装置可以为电子设备，也可以被配置在电子设备中，以提高图像编码的速度，降低编码过程中CPU的功耗。
其中，电子设备，可以为前述推流客户端的设备，其可以是任意能够进行数据处理的静止或者移动计算设备，例如笔记本电脑、智能手机、可穿戴设备等移动计算设备，或者台式计算机等静止的计算设备等，本公开对此不作限制。
进一步，在本实施例的一种可能的实现方式中，第三确定模块902，包括：
第二获取单元，用于针对图像中的每个图像块，获取图像块的至少两个顶点坐标信息；
第五确定单元，用于确定参考图像中与顶点坐标信息对应的参考坐标信息；
第六确定单元，用于确定至少两个参考坐标信息所限定的图像区域中的参考图像块；
第七确定单元，用于将至少两个参考坐标信息所限定的图像区域中的参考图像块，确定为与图像块具有映射关系的参考图像块。
在本实施例的另一种可能的实现方式中，第五确定单元，包括：
第三确定子单元，用于确定从图像至参考图像的缩放比例；
第四确定子单元，用于根据顶点坐标信息以及缩放比例，确定参考图像中与顶点坐标信息对应的参考坐标信息。
在本实施例的另一种可能的实现方式中，缩放比例包括：横缩放比例以及纵缩放比例；第四确定子单元，具体用于：
根据顶点坐标信息中的横坐标信息以及横缩放比例，确定参考坐标信息中的横坐标信息；根据顶点坐标信息中的纵坐标信息以及纵缩放比例，确定参考坐标信息中的纵坐标信息。
在本实施例的另一种可能的实现方式中，至少两个顶点坐标信息至少包括：左上顶点坐标信息和右下顶点坐标信息；或者，至少两个顶点坐标信息至少包括；左下顶点坐标信息和右上顶点坐标信息。
在本实施例的另一种可能的实现方式中，第四确定模块903，包括：
第八确定单元，用于确定图像块采用至少一个参考图像块的模式决策结果的代价数值；
第二选择单元，用于从至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为图像块的模式决策结果。
在本实施例的另一种可能的实现方式中，待处理的图像，为待进行编码的视频中的各帧图像。
在本实施例的另一种可能的实现方式中，所述待处理的图像，为至少一种分辨率下的图像；所述至少一种分辨率下的图像对应相同的所述参考图像。
本实施例的图像编码装置中，获取待处理的图像以及对应的参考图像后，其中，参考图像与待处理的图像的内容相同，且参考图像的分辨率低于待处理的图像的分辨率，首先确定待处理的图像中图像块与参考图像中参考图像块之间的映射关系，再针对待处理的图像中的每个图像块，根据参考图像中与图像块具有映射关系的至少一个参考图像块的模式决策结果，确定图像块的模式决策结果，进而根据待处理的图像中的各个图像块的模式决策结果，对待处理的图像进行编码处理，由此，提高了图像编码的速度，降低了编码过程中CPU的功耗。
为了实现上述实施例，本实施例提供了一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行前述第一方面实施例或第二方面实施例所述的方法。
为了实现上述实施例，本实施例提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行前述第一方面实施例或第二方面实施例所述的方法。
为了实现上述实施例，本实施例提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现前述第一方面实施例或第二方面实施例所述的方法。
图10为本公开实施例提供的电子设备1000的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图10所示，设备1000包括计算单元1001，其可以根据存储在ROM(Read-OnlyMemory，只读存储器)1002中的计算机程序或者从存储单元1008加载到RAM(Random AccessMemory，随机访问/存取存储器)1003中的计算机程序，来执行各种适当的动作和处理。在RAM 1003中，还可存储设备1000操作所需的各种程序和数据。计算单元1001、ROM 1002以及RAM 1003通过总线1004彼此相连。I/O(Input/Output，输入/输出)接口1005也连接至总线1004。
设备1000中的多个部件连接至I/O接口1005，包括：输入单元1006，例如键盘、鼠标等；输出单元1007，例如各种类型的显示器、扬声器等；存储单元1008，例如磁盘、光盘等；以及通信单元1009，例如网卡、调制解调器、无线通信收发机等。通信单元1009允许设备1000通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元1001可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元1001的一些示例包括但不限于CPU(Central Processing Unit，中央处理单元)、GPU(Graphic Processing Units，图形处理单元)、各种专用的AI(Artificial Intelligence，人工智能)计算芯片、各种运行机器学习模型算法的计算单元、DSP(Digital SignalProcessor，数字信号处理器)、以及任何适当的处理器、控制器、微控制器等。计算单元1001执行上文所描述的各个方法和处理，例如图像编码方法。例如，在一些实施例中，图像编码方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元1008。在一些实施例中，计算机程序的部分或者全部可以经由ROM 1002和/或通信单元1009而被载入和/或安装到设备1000上。当计算机程序加载到RAM1003并由计算单元1001执行时，可以执行上文描述的图像编码方法的一个或多个步骤。备选地，在其他实施例中，计算单元1001可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行图像编码方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、FPGA(Field Programmable Gate Array，现场可编程门阵列)、ASIC(Application-Specific Integrated Circuit，专用集成电路)、ASSP(Application Specific StandardProduct，专用标准产品)、SOC(System On Chip，芯片上系统的系统)、CPLD(ComplexProgrammable Logic Device，复杂可编程逻辑设备)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、RAM、ROM、EPROM(Electrically Programmable Read-Only-Memory，可擦除可编程只读存储器)或快闪存储器、光纤、CD-ROM(Compact Disc Read-Only Memory，便捷式紧凑盘只读存储器)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(Cathode-Ray Tube，阴极射线管)或者LCD(Liquid Crystal Display，液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：LAN(LocalArea Network，局域网)、WAN(Wide Area Network，广域网)、互联网和区块链网络。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务("Virtual Private Server"，或简称"VPS")中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。
Claims (11)
1.一种图像编码方法，其特征在于，包括：
获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率高于所述图像的分辨率；
确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；
针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；
根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理；
所述确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系，包括：
针对所述图像中的每个图像块，获取所述图像块的至少两个顶点坐标信息，其中所述至少两个顶点坐标信息用于限定所述图像块所在的区域；
确定从所述图像至所述参考图像的缩放比例；
根据所述顶点坐标信息以及所述缩放比例，确定所述参考图像中与所述顶点坐标信息对应的参考坐标信息；确定至少两个所述参考坐标信息所限定的图像区域中的参考图像块；
将至少两个所述参考坐标信息所限定的图像区域中的参考图像块，确定为与所述图像块具有所述映射关系的参考图像块。
2.根据权利要求1所述的方法，其特征在于，所述缩放比例包括：横缩放比例以及纵缩放比例；
所述根据所述顶点坐标信息以及所述缩放比例，确定所述参考图像中与所述顶点坐标信息对应的参考坐标信息，包括：
根据所述顶点坐标信息中的横坐标信息以及所述横缩放比例，确定所述参考坐标信息中的横坐标信息；
根据所述顶点坐标信息中的纵坐标信息以及所述纵缩放比例，确定所述参考坐标信息中的纵坐标信息。
3.根据权利要求1至2任一项所述的方法，其特征在于，所述至少两个顶点坐标信息至少包括：左上顶点坐标信息和右下顶点坐标信息；
或者，
所述至少两个顶点坐标信息至少包括；左下顶点坐标信息和右上顶点坐标信息。
4.根据权利要求1所述的方法，其特征在于，所述根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果，包括：
确定所述图像块采用所述至少一个参考图像块的模式决策结果的代价数值；
从所述至少一个参考图像块的模式决策结果中选择对应的代价数值最小的模式决策结果，作为所述图像块的模式决策结果。
5.根据权利要求1所述的方法，其特征在于，所述待处理的图像，为待进行编码的视频中的各帧图像。
6.根据权利要求1所述的方法，其特征在于，所述待处理的图像，为至少一种分辨率下的图像；
所述至少一种分辨率下的图像对应相同的所述参考图像。
7.一种图像编码方法，其特征在于，包括：
获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率低于所述图像的分辨率；
确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；
针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；
根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理；
所述确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系，包括：
针对所述图像中的每个图像块，获取所述图像块的至少两个顶点坐标信息，其中所述至少两个顶点坐标信息用于限定所述图像块所在的区域；
确定从所述图像至所述参考图像的缩放比例；
根据所述顶点坐标信息以及所述缩放比例，确定所述参考图像中与所述顶点坐标信息对应的参考坐标信息；
确定至少两个所述参考坐标信息所限定的图像区域中的参考图像块；
将至少两个所述参考坐标信息所限定的图像区域中的参考图像块，确定为与所述图像块具有所述映射关系的参考图像块。
8.一种图像编码装置，其特征在于，包括：
第一获取模块，用于获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率高于所述图像的分辨率；
第一确定模块，用于确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；
第二确定模块，用于针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；
第一处理模块，用于根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理；
所述第一确定模块具体用于：
针对所述图像中的每个图像块，获取所述图像块的至少两个顶点坐标信息，其中所述至少两个顶点坐标信息用于限定所述图像块所在的区域；
确定从所述图像至所述参考图像的缩放比例；
根据所述顶点坐标信息以及所述缩放比例，确定所述参考图像中与所述顶点坐标信息对应的参考坐标信息；确定至少两个所述参考坐标信息所限定的图像区域中的参考图像块；
将至少两个所述参考坐标信息所限定的图像区域中的参考图像块，确定为与所述图像块具有所述映射关系的参考图像块。
9.一种图像编码装置，其特征在于，包括：
第二获取模块，用于获取待处理的图像以及对应的参考图像，其中，所述参考图像与所述图像内容相同，且所述参考图像的分辨率低于所述图像的分辨率；
第三确定模块，用于确定所述图像中图像块与所述参考图像中参考图像块之间的映射关系；
第四确定模块，用于针对所述图像中的每个图像块，根据所述参考图像中与所述图像块具有映射关系的至少一个参考图像块的模式决策结果，确定所述图像块的模式决策结果；
第二处理模块，用于根据所述图像中各个所述图像块的模式决策结果，对所述图像进行编码处理；
所述第三确定模块具体用于：
针对所述图像中的每个图像块，获取所述图像块的至少两个顶点坐标信息，其中所述至少两个顶点坐标信息用于限定所述图像块所在的区域；
确定从所述图像至所述参考图像的缩放比例；
根据所述顶点坐标信息以及所述缩放比例，确定所述参考图像中与所述顶点坐标信息对应的参考坐标信息；确定至少两个所述参考坐标信息所限定的图像区域中的参考图像块；
将至少两个所述参考坐标信息所限定的图像区域中的参考图像块，确定为与所述图像块具有所述映射关系的参考图像块。
10.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-6中任一项所述的方法，或者执行权利要求7所述的方法。
11.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-6中任一项所述的方法，或者执行根据权利要求7所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110713400.7A CN113438485B (zh) | 2021-06-25 | 2021-06-25 | 图像编码方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110713400.7A CN113438485B (zh) | 2021-06-25 | 2021-06-25 | 图像编码方法、装置、电子设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113438485A CN113438485A (zh) | 2021-09-24 |
| CN113438485B true CN113438485B (zh) | 2022-11-01 |
Family
ID=77754681
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110713400.7A Active CN113438485B (zh) | 2021-06-25 | 2021-06-25 | 图像编码方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113438485B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102025995A (zh) * | 2010-12-10 | 2011-04-20 | 浙江大学 | 一种可伸缩视频编码的空间增强层快速模式选择方法 |
| CN103402085A (zh) * | 2013-07-19 | 2013-11-20 | 哈尔滨工业大学深圳研究生院 | 一种基于视频可伸缩性编码压缩的模式选择方法及系统 |
| EP3606067A1 (en) * | 2017-03-21 | 2020-02-05 | Tencent Technology (Shenzhen) Company Limited | Video encoding method, video decoding method, computer device and storage medium |
| CN112399069A (zh) * | 2019-08-16 | 2021-02-23 | RealMe重庆移动通信有限公司 | 图像编码方法及装置、存储介质、电子设备 |
-
2021
- 2021-06-25 CN CN202110713400.7A patent/CN113438485B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102025995A (zh) * | 2010-12-10 | 2011-04-20 | 浙江大学 | 一种可伸缩视频编码的空间增强层快速模式选择方法 |
| CN103402085A (zh) * | 2013-07-19 | 2013-11-20 | 哈尔滨工业大学深圳研究生院 | 一种基于视频可伸缩性编码压缩的模式选择方法及系统 |
| EP3606067A1 (en) * | 2017-03-21 | 2020-02-05 | Tencent Technology (Shenzhen) Company Limited | Video encoding method, video decoding method, computer device and storage medium |
| CN112399069A (zh) * | 2019-08-16 | 2021-02-23 | RealMe重庆移动通信有限公司 | 图像编码方法及装置、存储介质、电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113438485A (zh) | 2021-09-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3606067A1 (en) | Video encoding method, video decoding method, computer device and storage medium | |
| US10681367B2 (en) | Intra-prediction video coding method and device | |
| WO2023045420A1 (zh) | 图像处理方法及装置、电子设备和存储介质 | |
| EP3952312A1 (en) | Method and apparatus for video frame interpolation, and device and storage medium | |
| US20220191477A1 (en) | Coding mode selection method and apparatus, and electronic device and computer-readable medium | |
| CN112714357A (zh) | 视频播放方法、视频播放装置、电子设备和存储介质 | |
| CN114792355A (zh) | 虚拟形象生成方法、装置、电子设备和存储介质 | |
| CN115147695A (zh) | 融合图像缩放与颜色空间转换的方法、装置及设备 | |
| CN113438485B (zh) | 图像编码方法、装置、电子设备和存储介质 | |
| CN116567246A (zh) | Avc编码方法和装置 | |
| US20220189027A1 (en) | Panorama Rendering Method, Electronic Device and Storage Medium | |
| CN114071190B (zh) | 云应用视频流处理方法、相关装置及计算机程序产品 | |
| CN113099241B (zh) | 参考帧列表更新方法、装置、设备以及存储介质 | |
| CN115174774A (zh) | 一种深度图像的压缩方法、装置、设备及存储介质 | |
| JP2014099848A (ja) | イメージ分割システム及びその方法 | |
| CN113099231B (zh) | 确定亚像素插值位置的方法、装置、电子设备和存储介质 | |
| CN113362229A (zh) | 图像处理模型的训练方法、图像处理方法、装置及设备 | |
| CN115118989B (zh) | 一种图像压缩方法及装置 | |
| CN116260973B (zh) | 一种时域滤波方法、装置、电子设备及存储介质 | |
| CN115761083A (zh) | 一种渲染结果的处理方法、装置、设备及介质 | |
| CN115190295B (zh) | 视频帧处理方法、装置、设备及存储介质 | |
| CN114040204A (zh) | 编码单元的处理方法、装置、设备及存储介质 | |
| CN115334309A (zh) | 帧内预测编码方法、装置、设备以及存储介质 | |
| MX2014002635A (es) | Patrones de prediccion direccional basados en pixeles para codificacion digital de imagenes. | |
| CN116416560A (zh) | 视频生成方法、装置、设备和介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |