CN113989531A

CN113989531A - 一种图像处理方法、装置、计算机设备和存储介质

Info

Publication number: CN113989531A
Application number: CN202111272556.2A
Authority: CN
Inventors: 袁熙
Original assignee: Beijing Sensetime Technology Development Co Ltd
Current assignee: Beijing Sensetime Technology Development Co Ltd
Priority date: 2021-10-29
Filing date: 2021-10-29
Publication date: 2022-01-28
Also published as: WO2023071189A1

Abstract

本公开提供了一种图像处理方法、装置、计算机设备和存储介质，其中，该方法包括：获取多帧第一目标图像，并按照每帧第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组；针对每个图像组，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息；基于每个图像组对应的图像差异信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

Description

一种图像处理方法、装置、计算机设备和存储介质

技术领域

本公开涉及计算机视觉和图像处理技术领域，具体而言，涉及一种图像处理方法、装置、计算机设备和存储介质。

背景技术

由于行为识别处理算法在检测图像中对象行为时受有限的时间限制，即要求在规定的时间内输出对象行为识别结果，因此，导致该算法在有限时间内对图像进行识别仅能依赖有限数量的输入图像。传统选取输入图像的方式一般为从视频中等间隔的选取有限数量的图像帧作为后续对象行为识别流程的输入，但是这种方式容易遗漏视频中体现对象关键行为的图像帧，这样会严重影响识别到的对象行为的准确度，导致行为检测精度较低。

发明内容

本公开实施例至少提供一种图像处理方法、装置、计算机设备和存储介质。

第一方面，本公开实施例提供了一种图像处理方法，包括：

获取多帧第一目标图像，并按照每帧所述第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组；

针对每个图像组，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息；

基于每个图像组对应的图像差异信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

本方面，利用反映图像组中各第一目标图像之间差异的图像差异信息，能够准确地得到拍摄时间最近的一组第一目标图像之间的差异，之后，可以根据该图像差异信息，进行图像筛选，从多帧第一目标图像中筛选出差异程度满足预设差异条件的图像，作为第二目标图像，即能够表征关键特征的图像，比如对象异常行为的图像等，因此，相应减少第二目标图像的数量，能够提高后续图像处理效率，进而提高图像处理精度。

一种可选的实施方式中，还包括：

基于至少一帧所述第二目标图像，进行图像处理，得到图像处理结果。

该实施方式中，由于第二目标图像为能够表征关键特征的图像，因此利用第二目标图像进行图像处理，能够得到精准的图像处理结果，提高图像的检测精度。

一种可选的实施方式中，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息，包括：

将所述图像组中多帧时序相邻的第一目标图像中，具有相同的图像位置的像素点作为一组，得到多个像素组；所述像素组包括至少两个像素点；

针对所述多个像素组中的每个像素组，确定所述像素组中的各像素点之间的像素差异信息；

基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

本实施方式，由于像素点构成图像，因此像素点可以作为表征图像的最小单元，通过计算像素组中的各像素点之间的像素差异信息，能够细致化的区分图像组中的各第一目标图像之间的差异，得到较为准确的图像差异信息。

一种可选的实施方式中，所述基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息，包括：

基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定第一综合差异信息；

基于所述第一综合差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

本实施方式，由于像素差异信息能够细致化的区分图像组中的各第一目标图像之间的差异，因此，将各像素组之间的像素差异信息进行综合处理，比如累加求和等，能够得到精确的第一综合差异信息，该第一综合差异信息能够表征图像组中各第一目标图像之间的最大差异(累加求和后的结果)，之后，利用精确的第一综合差异信息，能够得到精确的图像差异信息。

一种可选的实施方式中，所述基于每个图像组对应的图像差异信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

基于每个图像组对应的图像差异信息，确定第二综合差异信息；

基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

本实施方式中的第二综合差异信息能够表征一段视频片段(包括全部图像组)中第一帧第一目标图像到最后一帧第一目标图像之间的最大差异，之后，根据每个图像组对应的图像差异信息、第二综合差异信息和每个图像组对应的时间信息，可以较为准确地从多帧第一目标图像中筛选出能够表征关键特征的第二目标图像，即关键帧。

一种可选的实施方式中，所述基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

基于每个图像组对应的图像差异信息和所述第二综合差异信息，分别确定每个图像组对应的第一差异概率；

基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

本实施方式，由于第二综合差异信息能够表征一段视频片段(包括全部图像组)中第一帧第一目标图像到最后一帧第一目标图像之间的最大差异，因此，利用第二综合差异信息和每个图像对应的图像差异信息，能够准确计算出每个图像组对应的第一差异概率，之后，根据时间信息整合每个图像组对应的第一差异概率，当整合结果(比如第一差异概率累加求和)满足预设差异条件的情况下，可以从多帧第一目标图像中筛选出差异变化满足预设差异条件的第二目标图像，即关键帧。

一种可选的实施方式中，所述基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

在所述图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，基于每个图像组对应的时间信息，将所述图像组序列中的最后一个图像组中的一个第一目标图像作为所述第二目标图像；其中，所述图像组序列中的各个图像组按照对应的时间信息从先到后排列；

基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从包括各个图像组的图像组序列中提取至少一个子序列；所述子序列中各个图像组对应的第一差异概率的和大于或等于所述预设阈值；针对每个子序列，将所述子序列中的最后一个图像组中的一个第一目标图像作为所述第二目标图像。

本实施方式中，在图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，可以将图像组序列中最后一个图像组中的一个第一目标图像，作为能够表征关键特征的图像。子序列中的第一差异概率的和大于或等于预设阈值，即子序列中第一图像组中的第一目标图像和最后一个图像组中的第一目标图像之间的差异满足预设差异条件，因此，最后一组图像组中的一个第一目标图像为能够表征关键特征的图像，并将其作为第二目标图像，即该第二目标图像为能够表征关键特征的图像。

获取差异平滑因子；所述差异平滑因子大于或等于0、且小于或等于1；

基于所述差异平滑因子、每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

本实施方式中差异平滑因子用于衰减图像差异信息，在第一目标图像中存在图像差异信息异常的情况下，可以通过差异平滑因子相应的衰减图像差异信息，能够降低该第一目标图像的图像差异信息的异常结果对第二差异信息的影响。

一种可选的实施方式中，所述获取多帧第一目标图像，包括：

获取待处理视频片段；

按照预设频率从所述待处理视频片段中获取多帧第一目标图像。

该实施方式，可以通过调整预设频率从待处理视频片段中获取帧数不同的第一目标图像，如果预设频率为高频率的情况下，则既能够保证从待处理视频片段中获取到相对多的第一目标图像，又能够降低从整个待处理视频片段中获取第二目标图像的时间，即后续只需要从多帧第一目标图像中获取第二目标图像即可，提高了图像获取的效率。

一种可选的实施方式中，所述基于至少一帧所述第二目标图像，进行图像处理，得到图像处理结果，包括：

识别所述至少一帧所述第二目标图像中每帧第二目标图像中的目标对象，并确定所述目标对象在每帧第二目标图像的位置信息；

基于确定的所述位置信息，分别从每帧所述第二目标图像中裁剪出包含所述目标对象的子图像；

对所述子图像进行图像处理，得到图像处理结果。

本实施方式，由于子图像包含目标对象，因此从第二目标图像中裁剪子图像，并对子图像进行处理，不影响图像处理结果，同时能够提高图像处理速度。

一种可选的实施方式中，所述图像处理结果包括对象行为信息，监管事件结果信息中的至少一种。

本实施方式中，利用上述实施方式能够识别出准确的对象行为信息和/或监管事件结果信息。

第二方面，本公开实施例还提供一种图像处理装置，包括：

图像获取模块，用于获取多帧第一目标图像，并按照每帧所述第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组；

信息确定模块，用于针对每个图像组，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息；

图像筛选模块，用于基于每个图像组对应的图像差异信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像处理装置还包括图像处理模块，用于基于至少一帧所述第二目标图像，进行图像处理，得到图像处理结果。

一种可选的实施方式中，所述信息确定模块，用于将所述图像组中多帧时序相邻的第一目标图像中，具有相同的图像位置的像素点作为一组，得到多个像素组；所述像素组包括至少两个像素点；针对所述多个像素组中的每个像素组，确定所述像素组中的各像素点之间的像素差异信息；基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

一种可选的实施方式中，所述信息确定模块，用于基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定第一综合差异信息；基于所述第一综合差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

一种可选的实施方式中，所述图像筛选模块，用于基于每个图像组对应的图像差异信息，确定第二综合差异信息；基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像筛选模块，用于基于每个图像组对应的图像差异信息和所述第二综合差异信息，分别确定每个图像组对应的第一差异概率；基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像筛选模块，用于在图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，基于每个图像组对应的时间信息，将所述图像组序列中的最后一个图像组中的一个第一目标图像作为所述第二目标图像；其中，所述图像组序列中的各个图像组按照对应的时间信息从先到后排列；

一种可选的实施方式中，所述图像筛选模块，用于获取差异平滑因子；所述差异平滑因子大于或等于0、且小于或等于1；基于所述差异平滑因子、每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像获取模块，用于获取待处理视频片段；按照预设频率从所述待处理视频片段中获取多帧第一目标图像。

一种可选的实施方式中，所述图像处理模块，用于识别所述至少一帧所述第二目标图像中每帧第二目标图像中的目标对象，并确定所述目标对象在每帧第二目标图像的位置信息；基于确定的所述位置信息，分别从每帧所述第二目标图像中裁剪出包含所述目标对象的子图像；对所述子图像进行图像处理，得到图像处理结果。

第三方面，本公开实施例还提供一种计算机设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行上述第一方面，或第一方面中任一种可能的图像处理方法的步骤。

第四方面，本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述第一方面，或第一方面中任一种可能的图像处理方法的步骤。

关于上述图像处理装置、计算机设备和存储介质的效果描述参见上述图像处理方法的说明，这里不再赘述。

为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本公开实施例所提供的一种图像处理方法的流程图；

图2示出了本公开实施例所提供的一个图像组中不同第一目标图像的示意图；

图3示出了本公开实施例所提供的裁剪第二目标图像的展示示意图；

图4示出了本公开实施例所提供的与等间隔时长筛选出的图像进行对比的展示效果示意图；

图5示出了本公开实施例所提供的选取第二目标图像的流程图；

图6示出了本公开实施例所提供的一种图像处理装置的示意图；

图7示出了本公开实施例所提供的一种计算机设备的结构示意图。

具体实施方式

为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。

另外，本公开实施例中的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。

在本文中提及的“多个或者若干个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

经研究发现，由于行为识别处理算法在检测图像中对象行为时受有限的时间限制，即要求在规定的时间内输出对象行为识别结果，因此，导致该算法在有限时间内对图像进行识别仅能依赖有限数量的输入图像。传统选取输入图像的方式一般为从视频中等间隔的选取有限数量的图像帧作为后续对象行为识别流程的输入，但是这种方式容易遗漏视频中体现对象关键行为的图像帧，这样会严重影响识别到的对象行为的准确度，导致行为检测精度较低。

基于上述研究，本公开提供了一种图像处理方法，利用反映图像组中各第一目标图像之间差异的图像差异信息，能够准确地得到拍摄时间最近的一组第一目标图像之间的差异，之后，可以根据该图像差异信息，进行图像筛选，从多帧第一目标图像中筛选出差异程度满足预设差异条件的图像，作为第二目标图像，即能够表征关键特征的图像，比如对象异常行为的图像等，因此，相应减少第二目标图像的数量，能够提高后续图像处理效率，进而提高图像处理精度。

针对以上方案所存在的缺陷，均是发明人在经过实践并仔细研究后得出的结果，因此，上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案，都应该是发明人在本公开过程中对本公开做出的贡献。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

针对本公开实施例中涉及到的特殊名词做详细介绍：

1、颜色系统RGB，是工业界的一种颜色标准，是通过对红(R)、绿(G)、蓝(B)三个颜色通道的变化以及它们相互之间的叠加来得到各式各样的颜色的，RGB即是代表红、绿、蓝三个通道的颜色，这个标准几乎包括了人类视力所能感知的所有颜色，是运用最广的颜色系统之一。电脑屏幕上的所有颜色，都由这红色绿色蓝色三种色光按照不同的比例混合而成的。一组红色绿色蓝色就是一个最小的显示单位。屏幕上的任何一个颜色都可以由一组RGB值来记录和表达。

2、YUV，是一种颜色编码方法。是编译true-color颜色空间(color space)的种类。“Y”表示明亮度(Luminance或Luma)，也就是灰阶值，“U”和“V”表示的则是色度(Chrominance或Chroma)，作用是描述影像色彩及饱和度，用于指定像素的颜色。

为便于对本实施例进行理解，首先对本公开实施例所公开的一种图像处理方法进行详细介绍，本公开实施例所提供的图像处理方法的执行主体一般为具有一定计算能力的计算机设备。在一些可能的实现方式中，该图像处理方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。

下面以执行主体为计算机设备为例对本公开实施例提供的图像处理方法加以说明。

参见图1所示，为本公开实施例提供的图像处理方法的流程图，所述方法包括步骤S101～S103，其中：

S101：获取多帧第一目标图像，并按照每帧第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组。

本步骤中，可以是从一段待处理视频片段中筛选多帧第一目标图像。多帧第一目标图像组成多个图像组。每个图像组中的第一目标图像的尺寸大小相同，分辨率相同。

这里，待处理视频片段可以为具有较长视频内容的视频片段，比如3～6s的视频片段。

从一段待处理视频片段中筛选多帧第一目标图像的筛选方式可以包括多种，具体的：

方式1、按照等间隔时长，从一段待处理视频片段中筛选出多帧第一目标图像。

其中，等间隔时长可以按照待处理视频片段的时长进行设定，例如，在待处理视频片段为1s的情况下，等间隔时长可以设置为32ms；

或者，等间隔时长也可以按照待处理视频片段的时长和后续图像处理任务进行设定，例如，在确定后续图像处理任务需要每次输入8帧图像(即下述的第二目标图像)的情况下，为了为图像处理任务提供关键特征的图像(第二目标图像)，因此，需要优先从待处理视频片段中筛选出帧数大于8帧的多帧第一目标图像，例如，从1s待处理视频片段中筛选出32帧第一目标图像，则等间隔时长可以为31.25ms，之后，再从32帧第一目标图像中筛选出关键特征的图像(第二目标图像)，可以得到精准的图像处理结果。

这里，根据不同的图像处理任务以及不同的待处理视频片段的时长可以设置不同的等间隔时长，因此，针对等间隔时长本公开实施例不进行具体限定。

方式2、可以从待处理视频片段中筛选出连续帧第一目标图像。

例如，从1s待处理视频片段中任意抽取连续帧第一目标图像，或者，按照后续图像处理任务需要，确定筛选第一目标图像的帧数，按照该帧数从待处理视频片段中筛选连续帧第一目标图像。

方式3、可以按照不同应用场景筛选多帧第一目标图像，以识别对象异常行为的场景为例，可以从待处理视频片段中筛选包含对象的多帧第一目标图像等。

示例性的，利用目标检测算法(比如目标检测Object Detection)识别在待处理视频片段中的图像帧，从图像帧中筛选出包含对象的多帧第一目标图像。

示例性的，利用目标检测算法(比如目标检测Object Detection)识别在待处理视频片段中的图像帧，从图像帧中筛选出包含对象的多帧对象图像；之后，按照等间隔时长，还可以从多帧对象图像中筛选出多帧第一目标图像。

在一些实施例中，如果按照等间隔时长筛选出第一目标图像，则拍摄时间最近的第一目标图像为间隔一个等间隔时长的两帧第一目标图像。一个图像组中可以包括间隔至少一个等间隔时长的至少两帧第一目标图像。示例性的，一个图像组可以包括间隔一个等间隔时长的两帧第一目标图像。

在一些实施例中，在多帧第一目标图像为连续帧图像的情况下，拍摄时间最近的至少两帧第一目标图像为相邻多帧第一目标图像。

一个图像组中具体包括几帧第一目标图像可以按照后续进行图像处理时，算法的处理能力进行设定，本公开实施例不进行具体限定。

S102：针对每个图像组，确定用于反映图像组中的各第一目标图像之间差异的图像差异信息。

由于像素点构成图像，因此像素点可以作为表征图像的最小单元。而图像之间的不同，则可以理解为图像之间的像素点对应的像素值不同。不同像素值反映不同颜色，呈现不同的图像。因此，可以利用像素点之间的像素差异信息计算图像之间的图像差异信息。图像差异信息能够反映图像组中各第一目标图像之间的差异。

具体实施时，针对每个图像组，将图像组中多帧时序相邻的第一目标图像中，具有相同的图像位置的像素点作为一组，得到多个像素组；像素组包括至少两个像素点；针对多个图像组中的每个像素组，确定像素组中的各像素点之间的像素差异信息；基于多个像素组中个像素组分别对应的像素差异信息，确定用于反映图像组中的各第一目标图像之间差异的图像差异信息。

这里，图像组中的第一目标图像按照时序信息从前到后排列；各个图像组之间也按照时序信息从前到后排列，具体的，可以参照图像组中的第一目标图像的时序信息。图像组中多帧时序相邻的第一目标图像可以包括相邻两帧第一目标图像、相邻三帧第一目标图像、或者相邻三帧以上的第一目标图像等。

这里，像素差异信息可以包括具有相同的图像位置的像素点之间的像素值的差值。或者，可以包括具有相同的图像位置的像素点之间的像素值的差值的绝对值。

参见图2所示，其为一个图像组中相邻两帧第一目标图像的示意图。由于第一目标图像A和第一目标图像B的尺寸大小相同，分辨率相同，因此，比较具有相同的图像位置(x,y)的像素点的像素差异信息，能够得到拍摄时间最近的一组图像组中不同第一目标图像之间的差异。示例性的，具有相同的图像位置(1,3)的像素点可以为图2中的像素点A1和像素点A2，则像素点A1和像素点A2组成一个像素组①；具有相同的图像位置(3,3)的像素点可以为图2中的像素点B1和像素点B2，则像素点B1和像素点B2组成一个像素组③，……，图2中共展示有九个像素组。

示例性的，针对图像组中的两帧第一目标图像，即第一目标图像A和第一目标图像B，可以分别比较相同图像位置(x,y)的像素点的像素差异信息，分别得到每个图像位置(x,y)对应的像素差异信息，如图2中的九个像素组对应的像素差异信息，将九个像素组对应的像素差异信息相加，可以得到第一目标图像A和第一目标图像B之间的图像差异信息。

示例性的，针对图像组中的相邻三帧第一目标图像，即第一目标图像A、第一目标图像B和第三目标图像C，可以分别比较相同图像位置(x,y)的像素点的像素差异信息，比如，首先比较第一目标图像A和第一目标图像B之间相同图像位置的像素点的像素差异信息，如上述计算过程，能够得到第一目标图像A和第一目标图像B之间的图像差异信息S_AB；之后，再以同样的计算方式计算第一目标图像B和第一目标图像C之间相同图像位置的像素点的像素差异信息，能够得到第一目标图像B和第一目标图像C之间的图像差异信息S_BC。或者，也可以计算S_AB和S_BC的平均值

将该平均值

分别作为该图像组中第一目标图像A和第一目标图像B之间的图像差异信息，以及第一目标图像B和第一目标图像C之间的图像差异信息。

上述通过计算像素组中的各像素点之间的像素差异信息，能够细致化的区分图像组中的各第一目标图像之间的差异，得到较为准确的图像差异信息。

在一些实施例中，还可以基于多个像素组中的各像素组对应的像素差异信息，确定第一综合差异信息；基于第一综合差异信息，确定用于反映图像组中的各第一目标图像之间的图像差异信息。

这里，第一综合差异信息可以为图像组中不同第一目标图像对应的全部像素组对应的像素差异信息之和。

在像素差异信息为具有相同的图像位置的像素点之间的像素值的差值的绝对值的情况下，图像差异信息可以利用公式一计算得到：

其中，S_t表示第t帧第一目标图像和第t-1帧第一目标图像之间的图像差异信息，I(x,y,t)表示第t帧第一目标图像中图像位置(x,y)处对应的像素点的像素值，I(x,y,t-1)表示第t-1帧第一目标图像中图像位置(x,y)处对应的像素点的像素值，这里，第t帧第一目标图像为第t-1帧第一目标图像的后一帧第一目标图像；|I(x,y,t)-I(x,y,t-1)|表示图像位置(x,y)处对应的像素点之间的像素差异信息。t表示多帧第一目标图像对应的帧数，一共T帧，其中，T为正整数。H表示第一目标图像和第二目标图像的尺寸中的高度信息，W表示第一目标图像和第二目标图像的尺寸中的宽度信息。

这里，像素值可以为RGB值，或者是YUV值。

上述由于像素差异信息能够细致化的区分图像组中的各第一目标图像之间的差异，因此，将各像素组之间的像素差异信息进行综合处理，比如累加求和等，能够得到精确的第一综合差异信息，该第一综合差异信息能够表征图像组中各第一目标图像之间的最大差异(累加求和后的结果)，之后，利用精确的第一综合差异信息，能够得到精确的图像差异信息。

S103：基于每个图像组对应的图像差异信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

具体实施时，可以基于每个图像组对应的图像差异信息，确定第二综合差异信息；基于每个图像组对应的图像差异信息、第二综合差异信息和每个图像组对应的时间信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

这里，第二综合差异信息可以为多帧第一目标图像中的全部图像组对应的图像差异信息之和，即能够表征全部图像组所包括的第一个图像组中的第一帧第一目标图像到最后一个图像组中的最后一帧第一目标图像之间的差异。比如，S102中计算出的S_t之和，t∈{2,3,…,S}，即

每个图像组对应的时间信息可以按照图像组中最后一帧第一目标图像的拍摄时间顺序进行定义，先拍摄到的第一目标图像所在的图像组排序在先，后拍摄到的第一目标图像所在的图像组排序在后。或者，可以按照得到图像差异信息的时间顺序进行定义，例如，S₂对应的图像组为第二个图像组，S₃对应的图像组为第三个图像组，……，S_T对应的图像组为第T个图像组。又或者，也可以将图像组中最后一帧第一目标图像的拍摄时间作为图像组对应的时间信息。

上述，可以根据每个图像组对应的图像差异信息、第二综合差异信息和每个图像组对应的时间信息，可以较为准确地从多帧第一目标图像中筛选出能够表征关键特征的第二目标图像，即关键帧。

在一些实施例中，可以基于每个图像组对应的图像差异信息和第二综合差异信息，分别确定每个图像组对应的第一差异概率；基于每个图像组对应的第一差异概率和每个图像组对应的时间信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

这里，第一差异概率可以利用公式二计算得到：

其中，

表示第t个图像组对应的第一差异概率，这里，没有第1个图像组，图像组计数从第2个开始。

示例性的，计算出每个图像组对应的第一差异概率，即第二个图像组对应的第一差异概率

第二个图像组对应的第一差异概率

第T个图像组对应的第一差异概率

之后，可以按照时间信息依次累加每个图像组对应的第一差异概率，每累加一个图像组对应的第一差异概率，检测是否累加之和大于或等于预设阈值，在累加之和小于预设阈值的情况下，继续累加排序之后的图像组对应的第一差异概率，直到累加之和大于或等于预设阈值，停止累加，并确定最后一次累加第一差异概率对应的图像组，选取该图像组中的一个第一目标图像，作为第二目标图像。之后，第一差异概率归零，继续累加之后剩余的图像组对应的第一差异概率，直到该多帧第一目标图像中的全部图像组对应的第一差异概率累加完毕为止。

这里，预设阈值可以按照实际应用场景进行设定，本公开实施例不进行具体限定。

示例性的，已知预设阈值为0.8，T＝16，

第一差异概率累加求和后为0.8等于预设阈值，则可以从第4个图像组中任意选取一帧第一目标图像作为第二目标图像。之后，继续累加，已知

第一差异概率累加求和后为1大于预设阈值，则可以从第9个图像组中任意选取一帧第一目标图像作为第二目标图像。之后，继续累加，已知

第一差异概率累加求和后为0.3小于预设阈值，由于此时多帧第一目标图像中只有16个图像组，在一些实施例中，可以从第16个图像组中任意选取一帧第一目标图像作为第二目标图像，进而能够得到三帧第二目标图像。在另一些实施例中，放弃对第一差异概率小于预设阈值三个图像组(即第十四个、第十五个和第十六个图像组)所组成的图像组序列中筛选第二目标图像，因此本次筛选，从16个图像组中筛选得到两帧第二目标图像。

在一些实施例中，还可以将S101中得到的多个图像组组成图像组序列，多个图像组在图像组序列中的排列方式可以为，各个图像组按照对应的时间信息从先到后排列。其中，时间信息可以包括图像组中第一目标图像对应的时序。图像组序列中可能存在多个子序列，其中，子序列中各个图像组对应的第一差异概率的和大于或等于预设阈值；或者，图像组序列不存在一个子序列，也即，图像组序列中各个图像组对应的第一差异概率的和小于预设阈值。

一种情况下，在图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，基于每个图像组对应的时间信息，将图像组序列中的最后一个图像组中的一个第一目标图像作为第二目标图像。

这里，可以是从最后一个图像组中任意选取一个第一目标图像作为第二目标图像，或者，也可以是根据任务要求，指定从最后一个图像中选取一个第一目标图像，比如指定选取最后一个图像组中的最后一帧第一目标图像作为第二目标图像等。其中，任务要求可以根据实际应用场景设定，本公开实施例不进行具体限定。

示例性的，在图像组对应的时间信息为按照得到图像差异信息的时间顺序进行定义的情况下，图像组序列中的各个图像组按照对应的时间信息从先到后排列，具体的，可以为第二个图像组Z₂，第三个图像组Z₃，……第T个图像组Z_T，即图像组序列为Z₂Z₃……Z_T。可以将图像组Z_T中的任意一个第一目标图像作为第二目标图像。

或者，在一些实施例中，在确定图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，不再从该图像组序列中获取第二目标图像；之后，继续执行S101，得到多个图像组，组成新的图像组序列，在判断新的图像组序列中各个图像组对应的第一差异概率的和与预设阈值的大小关系，从而获取第二目标图像。

另一种情况下，基于每个图像组对应的第一差异概率和每个图像组对应的时间信息，从包括各个图像组的图像组序列中提取至少一个子序列；子序列中各个图像组对应的第一差异概率的和大于或等于预设阈值；针对每个子序列，将子序列中的最后一个图像组中的一个第一目标图像作为第二目标图像。

这里，图像组序列为各个图像组按照每个图像组对应的时间信息从先到后顺序排列得到的。子序列可以为图像组序列的一部分。

延续上例，按照时间信息依次累加图像组对应的第一差异概率，从图像组序列中提取出两个子序列，其中，第一个子序列包括第二个、第三个、第四个第五个、第六个和第七个图像组按照时间信息顺序排列组成的，即Z₂Z₃Z₄Z₅Z₆Z₇，第二个子序列包括第八个、第九个、第十个、第十一个、第十二个和第十三个图像组按照时间信息顺序排列组成的，即Z₈Z₉Z₁₀Z₁₁Z₁₂Z₁₃，这里，由于多帧第一目标图像对应的最后三个图像组对应的第一差异概率的累加之和小于预设阈值，因此，第十四个、第十五个和第十六个图像组不属于子序列部分。之后，从每个子序列中的最后一个图像组中选择任意一帧第一目标图像作为第二目标图像，即从第七个图像组中选择任意一帧第一目标图像和从第十三个图像组中选择任意一帧第一目标图像作为第二目标图像。或者，也可以从每个子序列中的最后一个图像组中选择指定帧第一目标图像作为第二目标图像，比如从第七个图像组中选择最后一帧第一目标图像作为第二目标图像，从第十三个图像组中选择第一帧第一目标图像作为第二目标图像。

在一些实施例中，由于外在因素的影响，比如拍摄画面被遮挡或设备故障等，导致在筛选出的多帧第一目标图像中的相邻两帧第一目标图像之间的差异很大，比如摄像头拍摄到的某一帧第一目标图像C模糊或黑屏，其他帧第一目标图像完好，则针对第一目标图像C与其前一帧或后一帧第一目标图像计算得到的图像差异信息的差异较大，但是实际环境中对象或事件并未发生较大改变，因此，针对该第一目标图像C，可以利用差异平滑因子进行衰减处理，能够降低该第一目标图像的图像差异信息的异常结果对第二差异信息的影响，使得同一图像组中不同第一目标图像之间的图像差异信息过度较为平滑。

具体实施时，首先，获取差异平滑因子；差异平滑因子大于或等于0、且小于或等于1；之后，基于差异平滑因子、每个图像组对应的图像差异信息、第二综合差异信息和每个图像组对应的时间信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

示例性的，可以基于差异平滑因子、每个图像组对应的图像差异信息和第二综合差异信息，分别确定每个图像组对应的第二差异概率，可以利用公式三计算得到：

其中，

表示第t个图像组对应的第二差异概率，这里，没有第1个图像组，图像组计数从第2个开始。μ表示差异平滑因子，其取值范围为0～1，包括0和1。差异平滑因子可以用于衰减图像差异信息，差异平滑因子越大，越容易选取到图像差异信息对应的差分值，即S_t变化较大的相邻两帧第一目标图像。差异平滑因子为0时，等同于均匀选取。

示例性的，计算出每个图像组对应的第二差异概率，即第二个图像组对应的第二差异概率

第三个图像组对应的第二差异概率

第T个图像组对应的第二差异概率

之后，可以按照时间信息依次累加每个图像组对应的第二差异概率，每累加一个图像组对应的第二差异概率，检测是否累加之和大于或等于预设阈值，在累加之和小于预设阈值的情况下，继续累加排序之后的图像组对应的第二差异概率，直到累加之和大于或等于预设阈值，停止累加，并确定最后一次累加第二差异概率对应的图像组，任意选取该图像组中的第一目标图像，作为第二目标图像。之后，第二差异概率归零，继续累加之后剩余的图像组对应的第二差异概率，直到该多帧第一目标图像中的全部图像组对应的第二差异概率累加完毕为止。

之后，对S103中筛选出的第二目标图像进行处理，由于第二目标图像为能够表征关键特征的图像，因此利用第二目标图像进行图像处理，能够得到精准的图像处理结果，提高图像的检测精度。具体实施时，基于至少一帧第二目标图像，进行图像处理，得到图像处理结果。

这里，不同图像处理任务对应不同的图像处理结果，示例性的，在图像处理任务为检测图像中对象的异常行为的任务的情况下，图像处理结果为对象行为信息，比如电梯间打闹行为，打架斗殴行为，危险动作行为，公共场所吸烟行为等；在图像处理任务为检测图像中所发生的事件的任务的情况下，图像处理结果为监管事件结果信息，比如违章事件对应的违章结果；不文明事件对应的乱扔垃圾、公共场所吸烟等。

在一些实施例中，识别至少一帧第二目标图像中每帧第二目标图像中的目标对象，并确定目标对象在每帧第二目标图像的位置信息；基于确定的位置信息，分别从每帧第二目标图像中裁剪出包含目标对象的子图像；对子图像进行图像处理，得到图像处理结果。其中，位置信息可以包括目标对象在第二目标图像上的坐标位置，比如检测框坐标。

示例性的，可以利用目标检测算法(比如目标检测Object Detection)识别出在第二目标图像中的目标对象，并为目标对象标记检测框，之后，可以按照检测框标记的位置，通过注意力模型Attention Model将目标对象从第二目标图像中裁剪出来，得到包含目标对象的子图像，之后，对该子图像进行图像处理，不同的图像处理任务，其处理流程不同，本公开实施例不限定图像处理任务，因此，也不限定图像处理流程。可以参见图3所示，其为裁剪第二目标图像的展示示意图，其中，31表示多帧第二目标图像，其中311表示第二目标图像，32表示从多帧第二目标图像中裁剪出来的目标对象的多个子图像，其中321表示子图像。

这里，由于子图像包含目标对象，因此从第二目标图像中裁剪子图像，并对子图像进行处理，不影响图像处理结果，同时能够提高图像处理速度。

上述利用图像组中的不同第一目标图像之间的图像差异信息，能够准确的得到拍摄时间最近的一组第一目标图像之间的差异，之后，可以根据该图像差异信息，进行图像筛选，从多帧第一目标图像中筛选出差异程度满足预设差异条件的图像，作为第二目标图像，即能够表征关键特征的图像，比如对象异常行为的图像等，之后，针对第二目标图像进行图像处理，能够得到精准的图像处理结果，提高图像的检测精度。示例性的，可以参见图4所示，其为本公开实施例所提供的与等间隔时长筛选出的图像进行对比的展示效果示意图；其中，图a为按照本实施方式筛选得到的第二目标图像41，能够表征关键特征，即目标对象42(如人物)进入车内的时序动作。图b为按照等间隔时长提取到的帧序列(包括多帧图像43，如图中的三帧图像)，无法从该帧序列中观察到目标对象的动作。

另外，由于第二目标图像是能够表征关键特征的图像，因此，相应减少针对第二目标图像的识别，依然能够得到准确的图像处理结果，而减少第二目标图像识别，能够提高图像处理效率。

另外，利用上述实施方式，能够处理具有较长视频内容的视频片段，针对一些具有较长视频内容的视频片段，能够检测得到准确的图像处理结果。

针对S102，在一些实施例中，针对第一综合差异信息，还可以为部分图像位置对应的像素组对应的像素差异信息之和。例如，利用目标检测算法识别第一目标图像中的对象，并确定对象检测框，将该对象检测框框出部分的图像位置对应的像素组对应的像素差异信息之和作为第一综合差异信息。

这里，确定对象检测框，可以确定该对象检测框的坐标以及框出部分的坐标，确定像素点坐标集P，之后，根据公式一确定第一综合差异信息，此时，t∈{P}。

针对S103，在一些实施例中，还可以按照图像处理任务中一次处理第二目标图像的数量，确定从图像组序列中筛选第二目标图像，示例性的，在确定图像处理任务中一次处理八帧第二目标图像的情况下，首先确定筛选出的第二目标图像的帧数，如果帧数少于八帧，即上述实施例中从两个子序列中筛选出两帧第二目标图像，则其余六帧可以从多帧第一目标图像中除了已经筛选出的两帧第二目标图像剩余的第一目标图像随机抽取六帧作为第二目标图像，即得到八帧第二目标图像。或者，按照等间隔时长从剩余的第一目标图像随机抽取六帧作为第二目标图像，得到八帧第二目标图像。或者，直接将图像组序列中最后一帧第一目标图像复制为六份作为第二目标图像，即得到八帧第二目标图像。

针对S101，在一些实施例中，获取待处理视频片段；按照预设频率从待处理视频片段中获取多帧第一目标图像。

这里，预设频率可以为16fps～32fps范围中的任意一个。包括16fps和32fps，待处理视频片段可以为1s～2s。利用预设频率能够从待处理视频片段中筛选出较小时间间隔的多帧第一目标图像。例如，可以利用预设频率32fps从1s待处理视频片段中筛选出时间间隔为31.25ms的32帧第一目标图像。

这里，预设频率可以根据后续图像处理任务或者经验值进行确定，本公开实施例不进行具体限定。

另外，还可以通过调整预设频率从待处理视频片段中筛选帧数不同的第一目标图像，如果预设频率为高频率的情况下，则既能够保证从待处理视频片段中筛选出相对多的第一目标图像，又能够降低从整个待处理视频片段中筛选第二目标图像的时间，即后续只需要从多帧第一目标图像中筛选第二目标图像即可，提高了图像筛选的效率。

在一种可能的实施方式中，针对上述图像处理方法，下面给出一个较为完整的实施例，参见图5所示，其为选取第二目标图像的流程图，首先，可以按照等间隔时长从待处理视频片段中筛选出多帧第一目标图像；将该第一目标图像按照拍摄时间顺序组成帧序列，之后，在帧序列中按照每帧第一目标图像的拍摄时间，确定相邻两帧第一目标图像之间的图像差异信息，即S_t；之后，在帧序列中不断计算第一目标图像之间的差异，可以按照上公式三进行计算，之后，从第一帧第一目标图像和第二帧第一目标图像之间的第二差异概率

开始，不断累加后续两帧第一目标图像之间的第二差异概率(比如

)，在累加之和大于或等于预设阈值的情况下，可以确定第一帧第一目标图像与最后累加的第二差异概率对应的第一目标图像之间存在较大差异，因此，可以将帧序列从最后累加的第二差异概率对应的第一目标图像的位置进行分割处理，从分割后的帧序列中提取至少一个子序列；之后，可以从至少一个子序列中选取至少一个第一目标图像作为第二目标图像，即具有关键特征的图像。之后，将至少一个第二目标图像输入到图像处理模型进行处理。

本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。

基于同一发明构思，本公开实施例中还提供了与图像处理方法对应的图像处理装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述图像处理方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。

参照图6所示，为本公开实施例提供的一种图像处理装置的示意图，所述装置包括：图像获取模块601、信息确定模块602和图像筛选模块603；其中，

图像获取模块601，用于获取多帧第一目标图像，并按照每帧所述第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组；

信息确定模块602，用于针对每个图像组，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息；

图像筛选模块603，用于基于每个图像组对应的图像差异信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像处理装置还包括图像处理模块604，用于基于至少一帧所述第二目标图像，进行图像处理，得到图像处理结果。

一种可选的实施方式中，所述信息确定模块602，用于将所述图像组中多帧时序相邻的第一目标图像中，具有相同的图像位置的像素点作为一组，得到多个像素组；所述像素组包括至少两个像素点；针对所述多个像素组中的每个像素组，确定所述像素组中的各像素点之间的像素差异信息；基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

一种可选的实施方式中，所述信息确定模块602，用于基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定第一综合差异信息；基于所述第一综合差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息。

一种可选的实施方式中，所述图像筛选模块603，用于基于每个图像组对应的图像差异信息，确定第二综合差异信息；基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像筛选模块603，用于基于每个图像组对应的图像差异信息和所述第二综合差异信息，分别确定每个图像组对应的第一差异概率；基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像筛选模块603，用于在图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，基于每个图像组对应的时间信息，将所述图像组序列中的最后一个图像组中的一个第一目标图像作为所述第二目标图像；其中，所述图像组序列中的各个图像组按照对应的时间信息从先到后排列；

一种可选的实施方式中，所述图像筛选模块603，用于获取差异平滑因子；所述差异平滑因子大于或等于0、且小于或等于1；基于所述差异平滑因子、每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像。

一种可选的实施方式中，所述图像获取模块601，用于获取待处理视频片段；按照预设频率从所述待处理视频片段中获取多帧第一目标图像。

一种可选的实施方式中，所述图像处理模块604，用于识别所述至少一帧所述第二目标图像中每帧第二目标图像中的目标对象，并确定所述目标对象在每帧第二目标图像的位置信息；基于确定的所述位置信息，分别从每帧所述第二目标图像中裁剪出包含所述目标对象的子图像；对所述子图像进行图像处理，得到图像处理结果。

关于图像处理装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述图像处理方法实施例中的相关说明，这里不再详述。

基于同一技术构思，本申请实施例还提供了一种计算机设备。参照图7所示，为本申请实施例提供的计算机设备的结构示意图，包括：

处理器71、存储器72和总线73。其中，存储器72存储有处理器71可执行的机器可读指令，处理器71用于执行存储器72中存储的机器可读指令，所述机器可读指令被处理器71执行时，处理器71执行下述步骤：S101：获取多帧第一目标图像，并按照每帧第一目标图像的拍摄时间，将拍摄时间最近的至少两帧第一目标图像作为一组，得到多个图像组；S102：针对每个图像组，确定用于反映图像组中各第一目标图像之间差异的图像差异信息；S103：基于每个图像组对应的图像差异信息，从多帧第一目标图像中筛选至少一帧第二目标图像。

上述存储器72包括内存721和外部存储器722；这里的内存721也称内存储器，用于暂时存放处理器71中的运算数据，以及与硬盘等外部存储器722交换的数据，处理器71通过内存721与外部存储器722进行数据交换，当计算机设备运行时，处理器71与存储器72之间通过总线73通信，使得处理器71在执行上述方法实施例中所提及的执行指令。

本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中所述的图像处理方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。

本公开实施例还提供一种计算机程序产品，包括计算机指令，所述计算机指令被处理器执行时实现上述的图像处理方法的步骤。其中，计算机程序产品可以是任何能实现上述图像处理方法的产品，该计算机程序产品中对现有技术做出贡献的部分或全部方案可以以软件产品(例如软件开发包(Software Development Kit，SDK))的形式体现，该软件产品可以被存储在一个存储介质中，通过包含的计算机指令使得相关设备或处理器执行上述图像处理方法的部分或全部步骤。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个模块或组件可以结合，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本公开各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。

Claims

1.一种图像处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，还包括：

3.根据权利要求1所述的方法，其特征在于，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息，包括：

4.根据权利要求3所述的方法，其特征在于，所述基于所述多个像素组中各像素组分别对应的所述像素差异信息，确定用于反映所述图像组中各第一目标图像之间差异的图像差异信息，包括：

5.根据权利要求1所述的方法，其特征在于，所述基于每个图像组对应的图像差异信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

6.根据权利要求5所述的方法，其特征在于，所述基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

7.根据权利要求6所述的方法，其特征在于，所述基于每个图像组对应的所述第一差异概率和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

在图像组序列中的各个图像组对应的第一差异概率的和小于预设阈值的情况下，基于每个图像组对应的时间信息，将所述图像组序列中的最后一个图像组中的一个第一目标图像作为所述第二目标图像；其中，所述图像组序列中的各个图像组按照对应的时间信息从先到后排列；

8.根据权利要求5至7任一项所述的方法，其特征在于，所述基于每个图像组对应的图像差异信息、所述第二综合差异信息和每个图像组对应的时间信息，从所述多帧第一目标图像中筛选至少一帧第二目标图像，包括：

9.根据权利要求1至8任一项所述的方法，其特征在于，所述获取多帧第一目标图像，包括：

获取待处理视频片段；

10.根据权利要求2所述的方法，其特征在于，所述基于至少一帧所述第二目标图像，进行图像处理，得到图像处理结果，包括：

对所述子图像进行图像处理，得到图像处理结果。

11.根据权利要求1至10任一项所述的方法，其特征在于，所述图像处理结果包括对象行为信息，监管事件结果信息中的至少一种。

12.一种图像处理装置，其特征在于，包括：

信息确定模块，用于针对每个图像组，确定用于反映所述图像组中的各第一目标图像之间差异的图像差异信息；

13.一种计算机设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1至11任一项所述的图像处理方法的步骤。

14.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1至11任一项所述的图像处理方法的步骤。