CN117834888A - 一种图像编码方法及其电子设备、存储介质 - Google Patents
一种图像编码方法及其电子设备、存储介质 Download PDFInfo
- Publication number
- CN117834888A CN117834888A CN202311577326.6A CN202311577326A CN117834888A CN 117834888 A CN117834888 A CN 117834888A CN 202311577326 A CN202311577326 A CN 202311577326A CN 117834888 A CN117834888 A CN 117834888A
- Authority
- CN
- China
- Prior art keywords
- interest
- image frame
- target
- region
- target image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000001514 detection method Methods 0.000 claims description 32
- 238000007781 pre-processing Methods 0.000 claims description 10
- 238000002372 labelling Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请公开了一种图像编码方法及其电子设备、存储介质,该方法包括:确定目标图像帧中的感兴趣区域;从目标图像帧中,提取感兴趣区域对应的局部图像;对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,编码数据用于提供给解码端进行解码得到局部图像。上述方案,能够提升图像帧中的特定区域在解码端的画面显示质量。
Description
技术领域
本申请涉及图像处理领域,特别是涉及一种图像编码方法及其电子设备、存储介质。
背景技术
随着科技的发展,在视频监控领域中,所使用的摄像机的分辨率也越来越高,在其真正拍摄到具体的目标后,往往需要通过显示器放大查看录像中的目标,但是在显示器对目标进行放大后视频图像的清晰度却并不是很高,其原因很大程度上是受限于编码带宽,使得视频画面中的大部分画幅所展现的并非目标所处的区域,但这些区域却占用了很大比例的编码带宽,从而导致真正有用的部分无法充分展现细节。
因此,市面上亟需一种视频编码方法,能够在现有编码带宽下充分展现目标细节。
发明内容
本申请至少提供一种图像编码方法及其电子设备、存储介质,能够提升图像帧中的特定区域在解码端的画面显示质量。
本申请第一方面提供了一种图像编码方法,该方法包括:确定目标图像帧中的感兴趣区域;从目标图像帧中,提取感兴趣区域对应的局部图像;对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,编码数据用于提供给解码端进行解码得到局部图像。
其中,在对局部图像进行编码,得到第一编码数据之前,包括:对局部图像进行预处理,其中,预处理包括尺寸调整和/或嵌入目标图像帧中的内容;对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,包括:对经预处理后的局部图像进行编码,得到目标图像帧对应的编码数据。
其中,对局部图像进行预处理,包括以下一个或多个步骤:将局部图像放大至第一预设尺寸;将目标图像帧缩小至第二预设尺寸,并将经缩小后的目标图像帧嵌入至局部图像中。
其中,第一预设尺寸为目标图像帧的原始尺寸;和/或,在将经缩小后的目标图像帧嵌入至局部图像中之前,还包括:在经缩小后的目标图像帧中标注感兴趣区域所在位置。
其中,将经缩小后的目标图像帧嵌入至局部图像中,包括:从局部图像中确定被覆盖区域,被覆盖区域的尺寸为第二预设尺寸;将经缩小后的目标图像帧嵌入至局部图像的被覆盖区域中。
其中,从局部图像中确定被覆盖区域,包括:在局部图像中划分多个候选覆盖区域,每个候选覆盖区域的尺寸为第二预设尺寸;遍历各候选覆盖区域的权值,并选取权值最小的候选覆盖区域作为被覆盖区域,其中,权值表征对应的候选覆盖区域在局部图像中的重要程度。
其中,在确定目标图像帧中的感兴趣区域之前,还包括:对目标图像帧进行目标检测,得到检测结果;确定目标图像帧中的感兴趣区域,包括:响应于检测结果为目标图像帧中包含若干目标,确定感兴趣目标所在的区域,以作为感兴趣区域,感兴趣目标为若干目标中的至少一个目标。
其中,检测结果包括目标图像帧中的若干目标的位置信息;确定感兴趣目标所在的区域,以作为感兴趣区域,包括:对若干目标进行分类,并选取一类别的目标作为感兴趣目标;基于感兴趣目标的位置信息,确定感兴趣区域。
其中,在感兴趣目标为一个的情况下,感兴趣区域为感兴趣目标所在的区域;在感兴趣目标为多个的情况下,感兴趣区域为位于预设距离范围内的感兴趣目标所在的区域的合并结果;和/或,选取一类别的目标作为感兴趣目标,包括:按照各类别的优先级,选择一类别的目标作为感兴趣目标。
其中,在对目标图像帧进行目标检测,得到检测结果之后,还包括:响应于检测结果为目标图像帧中不包含目标,直接对目标图像帧进行编码,得到第二编码数据,并将第二编码数据作为目标图像帧对应的编码数据。
本申请第二方面提供了一种电子设备,包括相互耦接的存储器和处理器,处理器用于执行存储器中存储的程序指令,以实现上述第一方面中的图像编码方法。
本申请第三方面提供了一种计算机可读存储介质,其上存储有程序指令,程序指令被处理器执行时实现上述第一方面中的图像编码方法。
上述方案,确定目标图像帧中的感兴趣区域,并提取感兴趣区域对应的局部图像,以对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,从而可有效利用编码带宽,使得在有限的带宽中感兴趣区域的信息占比尽可能高,以解决现有技术中对整个图像帧进行编码,由解码端解码得到整个图像帧后,再对图像帧中的感兴趣区域进行放大导致的细节信息丢失问题,并且通过只针对感兴趣区域进行编码,由解码端直接解码得到局部图像,可保证该区域的细节信息,提升图像帧中的特定区域在解码端的画面显示质量。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本申请的实施例,并与说明书一起用于说明本申请的技术方案。
图1是本申请图像编码方法一实施例的流程示意图;
图2是本申请图像编码方法另一实施例的流程示意图;
图3是本申请图像编码方法又一实施例的流程示意图;
图4是本申请图像编码装置一实施例的框架示意图;
图5是本申请电子设备一实施例的框架示意图;
图6是本申请计算机可读存储介质一实施例的框架示意图。
具体实施方式
下面结合说明书附图,对本申请实施例的方案进行详细说明。
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、接口、技术之类的具体细节,以便透彻理解本申请。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。此外,本文中的“多”表示两个或者多于两个。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
请参阅图1,图1是本申请图像编码方法一实施例的流程示意图。
具体而言,可以包括如下步骤:
步骤S110:确定目标图像帧中的感兴趣区域。
本申请主要应用图像分析及视频编码领域,例如,视频监控、数据传输等。通过本方案提升感兴趣区域的关注度,并且在解码显示阶段提升图像或是视频细节处的质量。此外,在本申请中的目标图像帧可源于图像数据或是从视频数据中获取到的一帧数据作为目标图像帧。感兴趣区域可以是目标图像帧中的任意区域,例如可以为包含目标的区域,该目标可以为人、车、动物等。
在一些实施例中,将目标图像帧划分为若干个子区域,计算每个子区域与目标图像帧之间的权重,选取权重最大的子区域作为感兴趣区域。
在一具体实施例中,可计算子区域中目标对象所占面积比重,并将该面积比重作为权重,以选取权重最大的子区域作为感兴趣区域。
在另一具体实施例中,可计算每个子区域中的图像与目标之间的相似性,选取相似性最大的子区域作为感兴趣区域。例如,本方案用于识别目标图像帧中的一个目标,该目标为行人,则对目标图像帧中的子区域进行图像特征提取,计算各子区域提取到的图像特征与人类特征之间的相似度,并将相似度作为权重。按照大小顺序对子区域对应的相似度进行排序,选择相似度最大的子区域作为感兴趣区域。又例如,选取相似度大于预设值的子区域,将这些子区域进行合并,得到的区域作为感兴趣区域。
步骤S120:从目标图像帧中,提取感兴趣区域对应的局部图像。
在一些实施例中,在确定目标图像帧中的感兴趣区域后,提取感兴趣区域对应的局部图像以进行下一步。具体地,可对感兴趣区域对应的局部图像进行复制、裁剪等操作,在此不作具体的限定。
步骤S130:对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,编码数据用于提供给解码端进行解码得到局部图像。
其中,解码端可为显示器等设备,在此不作具体的限定。
本实施例中,为合理利用编码带宽,以展示感兴趣区域的细节,可将局部图像的编码数据作为该目标图像帧的编码数据,进而将该编码数据发送给解码端。其中,具体编码手段可以为H.264/265等现有的任意编码手段,在此不作具体的限定。
通过针对局部图像进行编码,以得到整个图像帧的编码数据,由此,可有效利用编码带宽,使得在有限的带宽中感兴趣区域的信息占比尽可能的高,以解决现有技术中对整个图像帧进行编码,由解码端解码得到整个图像帧后,再对图像帧中的感兴趣区域进行放大导致的细节信息丢失问题,并且通过只针对感兴趣区域进行编码,由解码端直接解码得到局部图像,可保证该区域的细节信息,提升图像帧中的特定区域在解码端的画面显示质量。
在一些实施例中,在编码之前,可对局部图像进行预处理,以使得在有限的带宽中感兴趣区域的信息占比尽可能的高。其中,预处理包括尺寸调整和/或嵌入目标图像帧中的内容。之后可对经预处理后的局部图像进行编码,得到目标图像帧对应的编码数据。
在一具体实施例中,可只对局部图像进行尺寸调整这一种预处理。具体如,将局部图像放大至第一预设尺寸,直接对放大后的局部图像进行编码,得到目标图像帧对应的编码数据。其中,第一预设尺寸可为目标图像帧的原始尺寸,也可为预先设定的尺寸,在此不作具体的限定。
在另一具体实施例中,可只对局部图像进行嵌入目标图像帧中的内容这一种预处理。具体如,将目标图像帧缩小至第二预设尺寸,并将经缩小后的目标图像帧嵌入至局部图像中。将包含目标图像帧的局部图像进行编码,得到目标图像帧对应的编码数据。由此,可以保证解码端在获得具有细节的局部图像以后,也能够获得整个图像帧的信息。
进一步地,为在展示时确定局部图像在原目标图像帧中的位置,以便于更好的观察图像。故在将经缩小后的目标图像帧嵌入至局部图像中前,在经缩小后的目标图像帧中标注感兴趣区域所在位置。
在另一具体实施例中,可对局部图像进行尺寸调整和嵌入目标图像帧中的内容这两种预处理。具体如,将局部图像放大至第一预设尺寸,并将标图像帧缩小至第二预设尺寸,并将经缩小后的目标图像帧嵌入至放大后的局部图像中。对包含目标图像帧的放大后的局部图像进行编码,以得到目标图像帧对应的编码数据。
在一些实施例中,经缩小后的目标图像帧嵌入至局部图像中的位置可以是预先设定的,也可以是基于实际情况在局部图像中选择合适的位置进行嵌入。例如,可先从局部图像中确定被覆盖区域,被覆盖区域的尺寸为第二预设尺寸,再将经缩小后的目标图像帧嵌入至局部图像的被覆盖区域中。
具体地,在局部图像中划分多个候选覆盖区域,每个候选覆盖区域的尺寸为第二预设尺寸,以便于缩小后的目标图像帧更好的嵌入至局部图像中。之后遍历各候选覆盖区域的权值,并选取权值最小的候选覆盖区域作为被覆盖区域,其中,权值表征对应的候选覆盖区域在局部图像中的重要程度。以此,在不影响局部图像中目标的细节的情况下,将缩小后的目标图像帧嵌入至局部图像的被覆盖区域中。
可以理解的是,在其他实施例中,若目标图像帧中不存在感兴趣区域,则可以对整个目标图像帧进行编码,得到第二编码数据,并将所述第二编码数据作为所述目标图像帧对应的编码数据。
请参阅图2,图2是本申请图像编码方法另一实施例的流程示意图。具体而言,可参阅如下步骤:
步骤S210:对目标图像帧进行目标检测,得到检测结果。
在一些实施例中,为确定目标图像帧中的感兴趣区域,可对目标图像帧进行目标检测,以得到检测结果。若检测结果为目标图像帧不包含目标,则执行步骤S250;若检测结果为目标图像帧包含目标,则执行步骤S220。
具体地,提取目标图像帧中的图像特征,对图像特征进行识别,并对识别结果进行目标检测,以判断目标图像帧中的是否存在目标。
步骤S220:响应于检测结果为目标图像帧中包含若干目标,确定感兴趣目标所在的区域,以作为感兴趣区域,感兴趣目标为若干目标中的至少一个目标。
在一些实施例中,在对标图像帧进行目标检测时,得到的检测结果为目标图像帧中包含若干目标及若干目标对应的位置信息。为提升目标识别的速率,可在确定感兴趣目标所在的区域时,对若干目标进行分类,并选取一类别的目标作为感兴趣目标,之后再基于感兴趣目标的位置信息,确定感兴趣区域。
具体地,在检测结果为目标图像帧中包含若干目标时,且在感兴趣目标为一个的情况下,感兴趣区域为感兴趣目标所在的区域。在感兴趣目标为多个的情况下,感兴趣区域为位于预设距离范围内的感兴趣目标所在的区域的合并结果。其中,预设距离范围可以为50mm等,在此不作具体的限定。
在另一些实施例中,感兴趣目标为多个的情况下,可对目标进行分类。具体地,可按照各类别的优先级,选择一类别的目标作为感兴趣目标。例如,设定人的优先级>车的优先级>动物中的优先级,在目标图像帧中检测到行人和车辆,因行人的优先级大于车的优先级,故在目标图像帧中将行人作为感兴趣目标,并确定行人在目标图像帧中的位置,将该位置作为感兴趣区域。
此外,感兴趣区域可以设置为包括目标的整体部分或是局部部分。例如,检测到的目标为人时,若感兴趣区域设置为划分目标的整体部分,则该感兴趣区域可以显示人的脸部特征以及体态特征等所有信息。若感兴趣区域设置为划分目标的局部部分,则该感兴趣区域仅可显示人的脸部特征或身体特征信息。又例如,检测到的目标为车时,若感兴趣区域设置为划分目标的整体部分,则整辆车都在该感兴趣区域中;若感兴趣区域设置为划分目标的局部部分,则该感兴趣区域仅可显示车牌图像信息或主驾驶位图像信息。
步骤S230:从目标图像帧中,提取感兴趣区域对应的局部图像。
该步骤与上述步骤S120相同,故在此不再进行赘述。
步骤S240:对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,编码数据用于提供给解码端进行解码得到局部图像。
该步骤与上述步骤S130相同,故在此不再进行赘述。
步骤S250:响应于检测结果为目标图像帧中不包含目标,直接对目标图像帧进行编码,得到第二编码数据,并将第二编码数据作为目标图像帧对应的编码数。
在一些实施例中,对目标图像帧进行目标检测,检测结果为目标图像帧中不包含目标时,直接对目标图像帧进行编码,得到第二编码数据,并将第二编码数据作为目标图像帧对应的编码数据。并将该第二编码数据发送至解码端进行解码、显示。具体地,可采用H.264/265等视频压缩编码方法对目标图像帧进行编码。
在一具体应用场景中,本方案应用于视频监控领域,利用拍摄设备进行视频采集,并将采集的视频中的每一帧图像作为目标图像帧,以对目标图像帧中的感兴趣目标人类进行检测。请结合参阅图3,若在目标图像帧中未检测到人类,则直接对目标图像帧进行编码,得到第二编码数据,并将第二编码数据作为目标图像帧对应的编码数据。若检测到人类,则将目标图像帧中人类所在的区域确定为感兴趣区域,并提取感兴趣区域对应的局部图像。将局部图像放大至目标图像帧的原始尺寸,并将标图像帧缩小至第二预设尺寸,且在经缩小后的目标图像帧中标注感兴趣区域所在位置。之后在放大后的局部图像中划分多个候选覆盖区域,每个候选覆盖区域的尺寸为第二预设尺寸,遍历各候选覆盖区域的权值,并选取权值最小的候选覆盖区域作为被覆盖区域,将经缩小后的目标图像帧嵌入至放大后的局部图像的被覆盖区域中。最后对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,并将该编码数据提供给解码端进行解码得到局部图像。
本方案在检测到目标的时候,在视频编码传输前将感兴趣区域放大再进行编码,以此最大程度上展现干部兴趣目标的细节。感兴趣区域先放大后编码,可调整编码带宽分配,提高编码带宽利用率,并充分展示感兴趣区域的信息,使有限的带宽中感兴趣区域信息占比尽可能高,从而解决现有技术中在解码显示阶段感兴趣与放大而导致的细节信息丢失问题。并且在目标图像帧缩小后以小画面形式嵌入局部图像中,同时标注局部图像在目标图像帧中的位置,降低非感兴趣区域信息量的同时,不丢失非感兴趣区域的整体信息。
请参阅图4,图4是本申请图像编码装置400一实施例的框架示意图。图像编码装置400包括:区域确定模块410、提取模块420和编码模块430。区域确定模块410用于执行确定目标图像帧中的感兴趣区域。提取模块420用于执行从目标图像帧中,提取感兴趣区域对应的局部图像。编码模块430用于执行对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,编码数据用于提供给解码端进行解码得到局部图像。
在一些实施例中,编码模块430执行在对局部图像进行编码,得到第一编码数据之前,包括:对局部图像进行预处理,其中,预处理包括尺寸调整和/或嵌入目标图像帧中的内容;对局部图像进行编码,得到第一编码数据,并将第一编码数据作为目标图像帧对应的编码数据,包括:对经预处理后的局部图像进行编码,得到目标图像帧对应的编码数据。
在一些实施例中,编码模块430执行对局部图像进行预处理,包括以下一个或多个步骤:将局部图像放大至第一预设尺寸;将目标图像帧缩小至第二预设尺寸,并将经缩小后的目标图像帧嵌入至局部图像中。
在一些实施例中,编码模块430执行第一预设尺寸为目标图像帧的原始尺寸;和/或,在将经缩小后的目标图像帧嵌入至局部图像中之前,还包括:在经缩小后的目标图像帧中标注感兴趣区域所在位置。
在一些实施例中,编码模块430执行将经缩小后的目标图像帧嵌入至局部图像中,包括:从局部图像中确定被覆盖区域,被覆盖区域的尺寸为第二预设尺寸;将经缩小后的目标图像帧嵌入至局部图像的被覆盖区域中。
在一些实施例中,编码模块430执行从局部图像中确定被覆盖区域,包括:在局部图像中划分多个候选覆盖区域,每个候选覆盖区域的尺寸为第二预设尺寸;遍历各候选覆盖区域的权值,并选取权值最小的候选覆盖区域作为被覆盖区域,其中,权值表征对应的候选覆盖区域在局部图像中的重要程度。
在一些实施例中,区域确定模块410执行在确定目标图像帧中的感兴趣区域之前,还包括:对目标图像帧进行目标检测,得到检测结果;确定目标图像帧中的感兴趣区域,包括:响应于检测结果为目标图像帧中包含若干目标,确定感兴趣目标所在的区域,以作为感兴趣区域,感兴趣目标为若干目标中的至少一个目标。
在一些实施例中,区域确定模块410执行检测结果包括目标图像帧中的若干目标的位置信息;确定感兴趣目标所在的区域,以作为感兴趣区域,包括:对若干目标进行分类,并选取一类别的目标作为感兴趣目标;基于感兴趣目标的位置信息,确定感兴趣区域。
在一些实施例中,区域确定模块410执行在感兴趣目标为一个的情况下,感兴趣区域为感兴趣目标所在的区域;在感兴趣目标为多个的情况下,感兴趣区域为位于预设距离范围内的感兴趣目标所在的区域的合并结果;和/或,选取一类别的目标作为感兴趣目标,包括:按照各类别的优先级,选择一类别的目标作为感兴趣目标。
在一些实施例中,区域确定模块410执行在对目标图像帧进行目标检测,得到检测结果之后,还包括:响应于检测结果为目标图像帧中不包含目标,直接对目标图像帧进行编码,得到第二编码数据,并将第二编码数据作为目标图像帧对应的编码数据。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
请参阅图5,图5是本申请电子设备50一实施例的框架示意图。电子设备50包括相互耦接的存储器51和处理器52,处理器52用于执行存储器51中存储的程序指令,以实现上述任一图像编码方法实施例中的步骤。在一个具体的实施场景中,电子设备50可以包括但不限于:微型计算机、服务器,此外,电子设备50还可以包括笔记本电脑、平板电脑等移动设备,在此不做限定。
具体而言,处理器52用于控制其自身以及存储器51以实现上述任一图像编码方法实施例中的步骤。处理器52还可以称为CPU(Central Processing Unit,中央处理单元)。处理器52可能是一种集成电路芯片,具有信号的处理能力。处理器52还可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。另外,处理器52可以由集成电路芯片共同实现。
请参阅图6,图6是本申请计算机可读存储介质60一实施例的框架示意图。计算机可读存储介质60存储有能够被处理器运行的程序指令601,程序指令601用于实现上述任一图像编码方法实施例中的步骤。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
上文对各个实施例的描述倾向于强调各个实施例之间的不同之处,其相同或相似之处可以互相参考,为了简洁,本文不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法和装置,可以通过其它的方式实现。例如,以上所描述的装置实施方式仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性、机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (12)
1.一种图像编码方法,其特征在于,包括:
确定目标图像帧中的感兴趣区域;
从所述目标图像帧中,提取所述感兴趣区域对应的局部图像;
对所述局部图像进行编码,得到第一编码数据,并将所述第一编码数据作为所述目标图像帧对应的编码数据,所述编码数据用于提供给解码端进行解码得到所述局部图像。
2.根据权利要求1所述的方法,其特征在于,在所述对所述局部图像进行编码,得到第一编码数据之前,包括:
对所述局部图像进行预处理,其中,所述预处理包括尺寸调整和/或嵌入所述目标图像帧中的内容;
所述对所述局部图像进行编码,得到第一编码数据,并将所述第一编码数据作为所述目标图像帧对应的编码数据,包括:
对经所述预处理后的所述局部图像进行编码,得到所述目标图像帧对应的编码数据。
3.根据权利要求2所述的方法,其特征在于,所述对所述局部图像进行预处理,包括以下一个或多个步骤:
将所述局部图像放大至第一预设尺寸;
将所述目标图像帧缩小至第二预设尺寸,并将经缩小后的所述目标图像帧嵌入至所述局部图像中。
4.根据权利要求3所述的方法,其特征在于,所述第一预设尺寸为所述目标图像帧的原始尺寸;
和/或,在所述将经缩小后的所述目标图像帧嵌入至所述局部图像中之前,还包括:
在经缩小后的所述目标图像帧中标注所述感兴趣区域所在位置。
5.根据权利要求3所述的方法,其特征在于,所述将经缩小后的所述目标图像帧嵌入至所述局部图像中,包括:
从所述局部图像中确定被覆盖区域,所述被覆盖区域的尺寸为所述第二预设尺寸;
将经缩小后的所述目标图像帧嵌入至所述局部图像的所述被覆盖区域中。
6.根据权利要求5所述的方法,其特征在于,所述从所述局部图像中确定被覆盖区域,包括:
在所述局部图像中划分多个候选覆盖区域,每个所述候选覆盖区域的尺寸为所述第二预设尺寸;
遍历各所述候选覆盖区域的权值,并选取所述权值最小的所述候选覆盖区域作为所述被覆盖区域,其中,所述权值表征对应的所述候选覆盖区域在所述局部图像中的重要程度。
7.根据权利要求1所述的方法,其特征在于,在所述确定目标图像帧中的感兴趣区域之前,还包括:
对所述目标图像帧进行目标检测,得到检测结果;
所述确定目标图像帧中的感兴趣区域,包括:
响应于所述检测结果为所述目标图像帧中包含若干目标,确定感兴趣目标所在的区域,以作为所述感兴趣区域,所述感兴趣目标为所述若干目标中的至少一个目标。
8.根据权利要求7所述的方法,其特征在于,所述检测结果包括所述目标图像帧中的若干目标的位置信息;所述确定感兴趣目标所在的区域,以作为所述感兴趣区域,包括:
对所述若干目标进行分类,并选取一类别的目标作为所述感兴趣目标;
基于所述感兴趣目标的位置信息,确定所述感兴趣区域。
9.根据权利要求8所述的方法,其特征在于,在所述感兴趣目标为一个的情况下,所述感兴趣区域为所述感兴趣目标所在的区域;在所述感兴趣目标为多个的情况下,所述感兴趣区域为位于预设距离范围内的所述感兴趣目标所在的区域的合并结果;
和/或,所述选取一类别的目标作为所述感兴趣目标,包括:
按照各类别的优先级,选择一所述类别的目标作为所述感兴趣目标。
10.根据权利要求7所述的方法,其特征在于,在所述对所述目标图像帧进行目标检测,得到检测结果之后,还包括:
响应于所述检测结果为所述目标图像帧中不包含所述目标,直接对所述目标图像帧进行编码,得到第二编码数据,并将所述第二编码数据作为所述目标图像帧对应的编码数据。
11.一种电子设备,其特征在于,包括相互耦接的存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现权利要求1至10任一项所述的图像编码方法。
12.一种计算机可读存储介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现权利要求1至10任一项所述的图像编码方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311577326.6A CN117834888A (zh) | 2023-11-23 | 2023-11-23 | 一种图像编码方法及其电子设备、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311577326.6A CN117834888A (zh) | 2023-11-23 | 2023-11-23 | 一种图像编码方法及其电子设备、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117834888A true CN117834888A (zh) | 2024-04-05 |
Family
ID=90521767
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311577326.6A Pending CN117834888A (zh) | 2023-11-23 | 2023-11-23 | 一种图像编码方法及其电子设备、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117834888A (zh) |
-
2023
- 2023-11-23 CN CN202311577326.6A patent/CN117834888A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109858371B (zh) | 人脸识别的方法及装置 | |
CN108230357B (zh) | 关键点检测方法、装置、存储介质和电子设备 | |
US8374454B2 (en) | Detection of objects using range information | |
KR102087882B1 (ko) | 시각적 이미지 매칭을 기반으로 한 미디어 스트림 식별 장치 및 방법 | |
US9514225B2 (en) | Video recording apparatus supporting smart search and smart search method performed using video recording apparatus | |
CN106934337B (zh) | 用于操作图像检测装置的方法和计算机可读存储介质 | |
CN108229289B (zh) | 目标检索方法、装置和电子设备 | |
CN110991310B (zh) | 人像检测方法、装置、电子设备及计算机可读介质 | |
CN113158773B (zh) | 一种活体检测模型的训练方法及训练装置 | |
CN109478333A (zh) | 目标检测方法、装置以及图像处理设备 | |
CN111368698B (zh) | 主体识别方法、装置、电子设备及介质 | |
CN110414335A (zh) | 视频识别方法、装置及计算机可读存储介质 | |
CN115222717B (zh) | 一种大豆种荚快速计数方法、装置及存储介质 | |
CN113255516A (zh) | 活体检测方法、装置和电子设备 | |
CN110782392B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN117745589A (zh) | 水印去除方法、装置及设备 | |
CN110019951B (zh) | 一种生成视频缩略图的方法及设备 | |
CN109558505A (zh) | 视觉搜索方法、装置、计算机设备及存储介质 | |
CN111914850B (zh) | 图片特征提取方法、装置、服务器和介质 | |
CN114519689A (zh) | 图像篡改检测方法、装置、设备及计算机可读存储介质 | |
CN117834888A (zh) | 一种图像编码方法及其电子设备、存储介质 | |
US20240221426A1 (en) | Behavior detection method, electronic device, and computer readable storage medium | |
CN112995666B (zh) | 一种结合场景切换检测的视频横竖屏转换方法及装置 | |
CN111553408B (zh) | 视频识别软件自动测试的方法 | |
CN111311603B (zh) | 用于输出目标物体数目信息的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |