CN112954267B - 一种用于生成报警视频的摄像机 - Google Patents

Abstract

本申请实施例提供了一种用于生成报警视频的摄像机，包括：图像缓存模块，用于缓存所述摄像机实时采集到的图像对应的图像帧；智能分析模块，用于当检测到所述摄像机实时采集到的图像对应的图像帧触发报警事件时，确定触发所述报警事件的图像帧的时间戳，作为报警时间戳；报警视频生成模块，用于从所述图像缓存模块缓存的图像帧中提取预设数量M个图像帧，提取的M个图像帧包括与所述报警时间戳对应的图像帧，以及所述报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数；对M个图像帧处理后确定为报警视频；通讯传输模块，用于发送所述报警视频。基于本申请提供的摄像机，能够提高报警视频的有效性。

Description

一种用于生成报警视频的摄像机

技术领域

本申请涉及图像处理技术领域，特别是涉及一种用于生成报警视频的摄像机。

背景技术

周界防范是指在安防领域中，当检测到人员、车辆或动物等对象进入指定区域或跨越区域边界时，可以向终端发送报警消息。

一种实现方式中，可以结合视频监控系统实现周界防范，当摄像机根据拍摄到的图像，检测到触发报警的目标对象时，可以向终端发送报警消息，报警消息中可以携带有报警视频，报警视频可以包括目标对象触发报警前后的多个图像帧。

然而，由于摄像机拍摄的报警视频中目标对象所占的比例可能较小，会导致用户在终端观看报警视频时，无法清晰地观察到目标对象的细节，即，报警视频的有效性较低。

发明内容

本申请实施例提供一种用于生成报警视频的摄像机，使得用户能够清晰地在图像帧中观察到目标对象的细节，提高报警视频的有效性。具体技术方案如下：

本申请实施例公开了一种用于生成报警视频的摄像机，所述摄像机包括：

图像缓存模块，用于缓存所述摄像机实时采集到的图像对应的图像帧；

智能分析模块，用于当检测到所述摄像机实时采集到的图像对应的图像帧触发报警事件时，确定触发所述报警事件的图像帧的时间戳，作为报警时间戳；

报警视频生成模块，用于从所述图像缓存模块缓存的图像帧中提取预设数量M个图像帧，提取的M个图像帧包括所述报警时间戳对应的图像帧，以及所述报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数；对M个图像帧处理后确定为报警视频；

通讯传输模块，用于发送所述报警视频。

一种实施例，报警图像提取模块，用于响应于所述智能分析模块检测到的报警时间戳，在所述M个图像帧中提取符合预设条件的图像帧作为报警图像；

所述通讯传输模块，用于发送所述报警视频和所述报警图像。

一种实施例，对M个图像帧处理包括预设图像处理方法包括按照预设裁剪框对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧；和/或，按照预设分辨率对所述裁剪后的M个图像帧进行缩放处理，获取缩放后的M个图像帧，并将所述缩放后的M个图像帧；

一种实施例，所述智能分析模块按照预设检测周期，对所述摄像机实时采集到的图像对应的图像帧进行检测；

或者，

所述智能分析模块对所述摄像机实时采集到的图像对应的图像帧进行实时检测。

一种实施例，所述报警视频生成模块，具体用于：

在所述图像缓存模块已缓存的图像帧中，位于所述报警时间戳对应的图像帧之前的图像帧数量L1小于预设数量N1时，提取位于所述报警时间戳对应的图像帧之前的L1个图像帧，并提取位于所述报警时间戳对应的图像帧之后相邻的N-L1个图像帧；

或者，

在所述图像缓存模块已缓存的图像帧中，位于所述报警时间戳对应的图像帧之后的图像帧数量L2小于预设数量N2时，提取位于所述报警时间戳对应的图像帧之后的L2个图像帧，并提取位于所述报警时间戳对应的图像帧之前相邻的N-L2个图像帧；

其中，N1+N2＝N，且N1、N2、L1、L2为正整数。

一种实施例，所述报警视频生成模块，具体用于：

在提取的M个图像帧中，分别确定触发所述报警事件的目标对象最小的外接矩形，作为第一外接矩形；

计算各第一外接矩形中尺寸最小的外接矩形，与所述各第一外接矩形中尺寸最大的外接矩形的尺寸的比值；

如果所述比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于预设宽高比，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；

如果所述比值不大于预设阈值，按照同一裁剪框对提取的M个图像帧进行裁剪处理，得到裁剪后的M个图像帧。

一种实施例，所述报警图像提取模块，具体用于：

针对所述报警视频生成模块提取的M个图像帧中的每一图像帧，计算触发所述报警事件的目标对象在该图像帧中的位置与该图像帧的中心点的距离；

将所述报警视频生成模块提取的M个图像帧中对应的距离最小的图像帧，确定为报警图像。

一种实施例，所述通讯传输模块，具体用于：

将所述报警图像按照JPEG标准进行压缩编码，得到编码后的报警图像；

将所述报警视频按照H.264、H.265或H.266标准进行压缩编码，得到编码后的报警视频；

发送编码后的报警图像、编码后的报警视频以及附加信息，其中，所述附加信息包括所述报警视频分辨率、所述报警视频包含的图像帧的数量、用于表示所述报警视频生成模块提取的M个图像帧各自对应的预设裁剪框的大小和位置的裁剪信息，以及用于表示在所述报警视频生成模块提取M个图像帧中，触发所述报警事件的目标对象最小的外接矩形的大小和位置的矩形信息。

一种实施例，所述摄像机还包括：

视频输入模块，用于：

生成所述摄像机实时采集到的图像对应的第一分辨率的YUV图像帧，作为第一图像帧，以及第二分辨率的YUV图像帧，作为第二图像帧，其中，所述第一分辨率与所述第二分辨率不同；

向所述智能分析模块发送所述第一图像帧，并向所述图像缓存模块发送所述第二图像帧；

所述智能分析模块，还用于：

基于对所述第一图像帧进行图像分析，计算所述第一图像帧中显示的各对象的识别信息，所述识别信息包括所述各对象的标识，以及所述各对象最小的外接矩形的坐标；

向所述图像缓存模块发送所述识别信息和所述第一图像帧的时间戳；

所述图像缓存模块，还用于：

接收所述智能分析模块发送的识别信息和所述第一图像帧的时间戳。

一种实施例，所述图像缓存模块，还用于：

按照接收顺序，依次将所述第二图像帧存储在长度为L3的未匹配链表中；

当接收到所述智能分析模块发送的识别信息和所述第一图像帧的时间戳时，确定接收到的时间戳对应的第二图像帧；

将确定出的第二图像帧和接收到的识别信息，对应存储在长度为L4的已匹配链表中；

所述报警视频生成模块，具体用于：

从所述已匹配链表中提取预设数量M个图像帧。

一种实施例，所述报警视频生成模块具体用于：

在提取的M个图像帧中，分别确定所述目标对象最小的外接矩形，作为第一外接矩形；

确定包含各第一外接矩形的最小的外接矩形，作为第二外接矩形；

按照预设宽高比对所述第二外接矩形进行区域扩展，得到第三外接矩形；

按照所述预设宽高比对各第一外接矩形进行区域扩展，并确定扩展后的各第一外接矩形中最大的外接矩形，作为第四外接矩形；

计算所述第三外接矩形与所述第四外接矩形的尺寸的比值；

如果所述比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于所述第四外接矩形的预设倍数的大小，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；

如果所述比值不大于预设阈值，按照所述第三外接矩形对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧。

本申请实施例提供了一种用于生成报警视频和报警图像的摄像机，图像缓存模块缓存摄像机实时采集到的图像对应的图像帧，当检测到摄像机实时采集到的图像对应的图像帧触发报警事件时，智能分析模块确定触发报警事件的图像帧的报警时间戳，报警视频生成模块可以从图像缓存模块缓存的图像帧中提取预设数量M个图像帧，提取的M个图像帧包括报警时间戳对应的图像帧，以及报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数，按照预设裁剪框对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧，并按照预设分辨率对裁剪后的M个图像帧进行缩放处理，获取缩放后的M个图像帧，并将缩放后的M个图像帧确定为报警视频，报警图像提取模块可以从报警视频生成模块提取的M个图像帧中确定出符合预设条件的图像帧，作为报警图像，进而，通讯传输模块可以发送报警视频和报警图像。

本申请实施例提供的摄像机，能够对采集到的图像帧进行裁剪，进而，能够提高触发报警事件的目标对象在图像帧中所占的比例，相应的，终端显示裁剪得到的报警视频，使得用户能够清晰地观察到目标对象的细节，进而，能够提高报警视频的有效性。

当然，实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种摄像机的结构图；

图2为本申请实施例提供的一种生成已匹配链表的流程图；

图3为本申请实施例提供的一种报警视频生成模块的处理流程图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

由于摄像机拍摄的报警视频中触发报警的目标对象所占的比例可能较小，会导致用户在终端观看报警视频时，无法清晰地观察到目标对象的细节，降低报警视频的有效性。

本申请实施例提供了一种用于生成报警视频和报警图像的摄像机。

参见图1，图1为本申请实施例提供的一种摄像机的结构图，该摄像机可以包括：图像缓存模块、智能分析模块、报警视频生成模块、报警图像提取模块和通讯传输模块。

图像缓存模块，用于缓存摄像机实时采集到的图像对应的图像帧。

在申请实施例中，图像缓存模块可以获取摄像机实时采集到的图像对应的图像帧，并缓存至本地。

一种实现方式中，摄像机中的摄像头可以对光信息进行感知和成像，得到原始点阵图像帧，如，YUV图像帧或者RGB图像帧，进而，图像缓存模块可以获取摄像头成像得到的图像帧。

智能分析模块，用于当检测到摄像机实时采集到的图像对应的图像帧触发报警事件时，确定触发报警事件的图像帧的时间戳，作为报警时间戳。

在申请实施例中，智能分析模块可以对摄像机实时采集到的图像对应的图像帧进行图像检测，判断是否存在触发报警事件的图像帧。

图像帧中可以显示有对象，触发报警事件的对象可以称为目标对象，例如，目标对象可以为图像帧中显示的人、动物或车辆。

例如，智能分析模块可以对采集到的图像帧进行图像分析，并根据预设的报警策略，确定出触发报警事件的目标对象。例如，当检测到一个车辆进入指定区域时，可以确定该车辆为目标对象，相应的，显示该车辆进入指定区域的第一个图像帧即为触发报警事件的图像帧(可以称为报警图像帧)，报警图像帧对应的时间戳即为报警时间戳。

报警视频生成模块，用于从图像缓存模块缓存的图像帧中提取预设数量M个图像帧，对M个图像帧处理后确定为报警视频。

按照预设裁剪框对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧，按照预设分辨率对裁剪后的M个图像帧进行缩放处理，获取缩放后的M个图像帧，并将缩放后的M个图像帧。

其中，提取的M个图像帧(可以称为待处理图像帧)包括报警时间戳对应的图像帧，以及报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数。

在申请实施例中，为了使用户能够观察到目标对象触发报警事件前后所监控的环境场景，报警视频生成模块可以获取报警图像帧，以及与报警图像帧相邻的多个图像帧，以生成报警视频。M的具体数值可以由技术人员根据业务需求进行设置。

报警视频生成模块可以从智能分析模块获取报警时间戳，然后，可以从图像缓存模块缓存的图像帧中，确定报警时间戳对应的图像帧(即报警图像帧)，然后，报警视频生成模块可以提取报警图像帧，以及报警图像帧前后相邻的N个图像帧，共M个图像帧。

进而，报警视频生成模块可以按照预设裁剪框对待处理图像帧进行裁剪，得到裁剪后的M个图像帧(可以称为裁剪图像帧)。

一种实现方式中，报警视频生成模块可以根据待处理图像帧中目标对象所占的图像区域，确定各待处理图像帧对应的裁剪框，进而，使得裁剪后的各裁剪图像帧中均能显示完整的目标对象。各待处理图像帧对应的裁剪框可以相同，也可以不相同。

然后，报警视频生成模块可按照预设分辨率对裁剪图像帧进行缩放处理，获取缩放后的M个图像帧(可以称为缩放图像帧)，基于缩放图像帧得到报警视频。

预设分辨率小于采集到的图像对应的图像帧的分辨率。预设分辨率的具体数值可以由技术人员根据经验和业务需求进行设置。例如，采集到的图像对应的图像帧的分辨率为1920×1080，则预设分辨率可以为640×480。

分辨率为1080P的图像帧中目标对象的大小一般不超过400×400，如果压缩一段格式为VGA(Video Graphics Array，视频传输标准)，即，分辨率为640×480、帧率为12.5fps(Frames Per Second，每秒传输帧数)、时长为4秒的报警视频，得到的报警视频大约只有100KB，而对于同等时长和编码方式、帧率为25fps、分辨率为1080P的报警视频，大小约为1MB，二者相差约10倍。

因此，根据预设分辨率对裁剪视频帧进行缩放，能够降低报警视频的数据量。

一种实施例，报警图像提取模块，用于响应于所述智能分析模块检测到的报警时间戳，在所述M个图像帧中提取符合预设条件的图像帧作为报警图像；

所述通讯传输模块，用于发送所述报警视频和所述报警图像。。

符合预设条件的图像帧可以为，待处理图像帧中显示有目标对象的图像帧。

一种实现方式中，报警图像提取模块可以将报警图像帧，确定为报警图像；或者，报警图像提取模块也可以选取报警图像帧之前显示有目标对象的图像帧，作为报警图像；或者，报警图像提取模块也可以选取报警图像帧之后显示有目标对象的图像帧，作为报警图像。

报警图像提取模块可以提取一个图像帧，作为报警图像，也可以提取多个图像帧，作为报警图像。

另一种实现方式中，针对报警视频生成模块提取的M个图像帧中的每一图像帧，报警图像提取模块计算触发报警事件的目标对象在该图像帧中的位置与该图像帧的中心点的距离；将报警视频生成模块提取的M个图像帧中对应的距离最小的图像帧，确定为报警图像。

在申请实施例中，针对每一待处理图像帧，报警视频生成模块可以确定该待处理图像帧中目标对象的中心点，并计算目标对象的中心点与该待处理图像帧的中心点之间的距离。

进而，报警视频生成模块可以将对应的距离最小的待处理图像帧，确定为报警图像。

通讯传输模块，用于发送报警视频和报警图像。

在申请实施例中，通讯传输模块可以从报警视频生成模块获取报警视频，从报警图像提取模块获取报警图像，并向终端发送。用户则可以在终端观看报警视频和报警图像。

一种实施例，通讯传输模块，具体用于：将报警图像按照JPEG标准进行压缩编码，得到编码后的报警图像；将报警视频按照H.264、H.265或H.266标准进行压缩编码，得到编码后的报警视频；发送编码后的报警图像、编码后的报警视频以及附加信息。

其中，附加信息包括报警视频分辨率、报警视频包含的图像帧的数量、用于表示报警视频生成模块提取的M个图像帧各自对应的预设裁剪框的大小和位置的裁剪信息，以及用于表示在报警视频生成模块提取M个图像帧中，触发报警事件的目标对象最小的外接矩形的大小和位置的矩形信息。

在申请实施例中，为了提高报警视频和报警图像的传输效率，通讯传输模块还可以对报警图像进行压缩编码，并对报警视频进行压缩编码。

另外，通讯传输模块还可以确定报警视频的分辨率、报警视频包含的图像帧的数量、待处理图像各自对应的预设裁剪框的信息(包括预设裁剪框的大小和位置)，以及目标对象的最小的外接矩形(即本申请实施例中的第一外接矩形)的信息(包括第一外接矩形的大小和位置)。进而，通讯传输模块可以向终端发送上述信息。

可见，基于本申请实施例提供的摄像机，能够对采集到的图像帧进行裁剪，进而，能够提高触发报警事件的目标对象在图像帧中所占的比例，相应的，终端显示裁剪得到的报警视频，使得用户能够清晰地观察到目标对象的细节，进而，能够提高报警视频的有效性。

另外，裁剪后的裁剪图像帧所占的存储空间，小于采集到的图像帧所占的存储空间，因此，能够减少报警视频的数据量，降低传输报警视频时占用的带宽资源，且对于终端来说，在对报警视频进行解码播放时，能够降低解码计算量，降低播放延迟。

一种实施例，智能分析模块可以按照预设检测周期，对摄像机实时采集到的图像对应的图像帧进行检测。

其中，预设检测周期可以由技术人员根据经验进行设置。例如，预设检测周期可以为10秒，或者，也可以为30秒，但并不限于此。

一种实现方式中，当达到预设检测周期时，智能分析模块可以获取摄像机当前周期采集到的图像帧，并对获取的图像帧进行图像分析，以判断是否存储触发报警事件的图像帧。

或者，

智能分析模块对摄像机实时采集到的图像对应的图像帧进行实时检测。

一种实现方式中，智能分析模块可以实时获取摄像机采集到的图像帧，并依次对获取的每一图像帧进行图像分析，以判断是否为触发报警事件的图像帧。

一种实施例，摄像机还可以包括：视频输入模块，用于生成摄像机实时采集到的图像对应的第一分辨率的YUV图像帧，作为第一图像帧，以及第二分辨率的YUV图像帧，作为第二图像帧；向智能分析模块发送第一图像帧，并向图像缓存模块发送第二图像帧。

其中，第一分辨率与第二分辨率不同。

在申请实施例中，视频输入模块可以对摄像机所监控的环境进行成像，并输出对应的图像帧。

为了提高生成报警视频的效率，针对摄像机监控的环境，视频输入模块可以生成对应的两种不同分辨率的YUV图像帧，即，第一图像帧和第二图像帧。

为了提高智能分析模块的处理效率，且保证生成的报警视频和报警图像的图像质量，向智能分析模块发送的第一图像帧的第一分辨率可以小于向图像缓存模块发送的第二图像帧的第二分辨率。

相应的，智能分析模块，还用于基于对第一图像帧进行图像分析，计算第一图像帧中显示的各对象的识别信息，向图像缓存模块发送识别信息和第一图像帧的时间戳。

其中，识别信息可以包括各对象的标识，以及各对象最小的外接矩形的坐标。

在申请实施例中，智能分析模块可以对各第一图像帧进行图像分析，确定出各第一图像帧中显示的对象，进而，可以获取各对象最小的外接矩形的坐标，并向图像缓存模块发送第一图像帧中显示的对象的标识、对象最小的外接矩形的坐标，以及第一图像帧对应的时间戳。

一种实现方式中，在智能分析模块实时对采集到的第一图像帧进行检测的过程中，每检测一个第一图像帧，智能分析模块可以生成记录有该第一图像帧中显示的对象的标识、对象最小的外接矩形的坐标，以及该第一图像帧的时间戳的目标链表，并向图像缓存模块发送。

图像缓存模块，还用于接收智能分析模块发送的识别信息和第一图像帧的时间戳。

在申请实施例中，图像缓存模块可以接收智能分析模块发送的第一图像帧中显示的对象的标识、对象最小的外接矩形的坐标，以及第一图像帧的时间戳。

一种实施例，为了节省缓存空间，图像缓存模块，还用于按照接收顺序，依次将第二图像帧存储在长度为L3的未匹配链表中；当接收到智能分析模块发送的识别信息和第一图像帧的时间戳时，确定接收到的时间戳对应的第二图像帧。将确定出的第二图像帧和接收到的识别信息，对应存储在长度为L4的已匹配链表中。

在申请实施例中，图像缓存模块内部可以维护两个链表：未匹配链表和已匹配链表。

其中，未匹配链表中可以存储第二图像帧和对应的时间戳，已匹配链表中可以存储第二图像帧、第二图像帧对应的时间戳、第二图像帧对应的目标链表。

当接收到视频输入模块发送的第二图像帧时，图像缓存模块可以将第二图像帧依次存储在未匹配链表中。

当接收到智能分析模块发送的目标链表时，图像缓存模块，可以从未匹配链表中找到与目标链表中的时间戳对应的第二图像帧，并将查找到的第二图像帧和目标链表一起对应存储至已匹配链表。

未匹配链表的长度为L3，已匹配链表的长度为L4。当在未匹配链表中存储新的第二图像帧时，可以将未匹配链表中存储时间最长的第二图像帧，从未匹配链表中删除，同理，当在已匹配链表中存储新的第二图像帧时，可以将已匹配链表中存储时间最长的第二图像帧和对应的目标链表，从已匹配链表中删除。

相应的，报警视频生成模块，具体用于从已匹配链表中提取预设数量M个图像帧。

在申请实施例中，报警视频生成模块可以从图像缓存模块中的已匹配链表中提取待处理图像帧。

一种实施例，报警视频生成模块，具体用于：在图像缓存模块已缓存的图像帧中，位于报警时间戳对应的图像帧之前的图像帧数量L1小于预设数量N1时，提取位于报警时间戳对应的图像帧之前的L1个图像帧，并提取位于报警时间戳对应的图像帧之后相邻的N-L1个图像帧。

或者，

在图像缓存模块已缓存的图像帧中，位于报警时间戳对应的图像帧之后的图像帧数量L2小于预设数量N2时，提取位于报警时间戳对应的图像帧之后的L2个图像帧，并提取位于报警时间戳对应的图像帧之前相邻的N-L2个图像帧。

其中，N1+N2＝N，且N1、N2、L1、L2为正整数。

在申请实施例中，为了提取到M个待处理图像帧，如果图像缓存模块已缓存的图像帧中，位于报警图像帧之前的图像帧数量L1小于预设数量N1时，表明最多只能在报警图像帧之前提取到L1个图像帧，进而，报警视频生成模块可以提取位于报警图像帧之前的L1个图像帧，并提取位于报警图像帧之后相邻的N-L1个图像帧。

另外，如果图像缓存模块已缓存的图像帧中，位于报警图像帧之后的图像帧数量L2小于预设数量N2时，表明最多只能在报警图像帧之后提取到L2个图像帧，进而，报警视频生成模块可以提取位于报警图像帧之后的L2个图像帧，并提取位于报警图像帧之前相邻的N-L2个图像帧。

一种实现方式中，报警视频生成模块可以从图像缓存模块中的已匹配链表中提取报警图像帧以及相邻的N个图像帧，作为待处理图像帧，可以理解的是，已匹配链表的长度L4大于等于M。

另外，根据目标对象在各待处理图像帧中所占图像区域的不同，可以采取不同的裁剪方式对待处理图像帧进行裁剪，以尽可能地提高裁剪图像帧中目标对象所占的比例，且使裁剪图像帧中目标对象所占的比例的变化情况与待处理图像帧中目标对象所占的比例的变化情况一致，提高用户的观看体验。

一种实施例，报警视频生成模块，具体用于：在提取的M个图像帧中，分别确定触发报警事件的目标对象最小的外接矩形，作为第一外接矩形；计算各第一外接矩形中尺寸最小的外接矩形，与各第一外接矩形中尺寸最大的外接矩形的尺寸的比值；如果比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于预设宽高比，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；如果比值不大于预设阈值，按照同一裁剪框对提取的M个图像帧进行裁剪处理，得到裁剪后的M个图像帧。

一种实现方式中，如果待处理图像帧为多个，则针对每一待处理图像帧，可以确定该待处理图像帧中包含目标对象所占图像区域的最小的外接矩形(即本申请实施例中的第一外接矩形)。

可以理解的是，各待处理图像帧中的第一外接矩形的大小可以相同，也可以不同；各待处理图像帧中的第一外接矩形的相对位置可以相同，也可以不相同。

进而，报警视频生成模块可以计算各第一外接矩形中尺寸最小的外接矩形，与各第一外接矩形中尺寸最大的外接矩形的尺寸的比值(可以称为第一比值)。

如果第一比值大于预设阈值，针对每一待处理图像帧，可以基于预设宽高比，对该待处理图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该待处理图像帧进行裁剪，得到裁剪后的图像帧。

预设宽高比可以为报警视频的宽高比，具体的宽高比可以由技术人员根据业务需求设置。例如，预设宽高比可以为16:9，或者，也可以为4:3，但并不限于此。

由于目标对象在各预处理图像帧中显示的形状可能并不相同，使得各第一外接矩形的宽高比并不相同，因此，为了统一处理，可以将各第一外接矩形按照预设宽高比进行区域扩展，进而，能够得到同一宽高比的裁剪框。

一种实现方式中，为了提高得到的报警视频的用户观看体验，可以以第一外接矩形的中心点为扩展中心，向两侧对称进行区域扩展。

例如，预设宽高比为16:9，第一外接矩形的宽高比为14:9，可以在第一外接矩形的左右两侧，分别扩展相同大小的图像区域，使得扩展后的第一外接矩形的宽高比为16:9。

又例如，预设宽高比为16:9，第一外接矩形的宽高比为16:7，即，可以在第一外接矩形的上下两侧，分别扩展相同大小的图像区域，使得扩展后的第一外接矩形的宽高比为16:9。

如果第一比值不大于预设阈值，报警视频生成模块可以按照同一裁剪框对待处理图像帧进行裁剪处理，得到裁剪后的图像帧。

一种实现方式中，报警视频生成模块可以确定能够包含各第一外接矩形的最小外接矩形，并按照确定出的外接矩形，对各待处理图像帧进行裁剪处理。

另一实现方式中，报警视频生成模块具体用于：在提取的M个图像帧中，分别确定目标对象最小的外接矩形，作为第一外接矩形；确定包含各第一外接矩形的最小的外接矩形，作为第二外接矩形；按照预设宽高比对第二外接矩形进行区域扩展，得到第三外接矩形；按照预设宽高比对各第一外接矩形进行区域扩展，并确定扩展后的各第一外接矩形中最大的外接矩形，作为第四外接矩形；计算第三外接矩形与第四外接矩形的尺寸的比值；如果比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于第四外接矩形的预设倍数的大小，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；如果比值不大于预设阈值，按照第三外接矩形对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧。

其中，预设倍数可以大于或者等于1，例如，预设倍数可以为1.1，或者，也可以为1.2，但并不限于此。

在申请实施例中，在确定出各第一外接矩形后，报警视频生成模块还可以确定包含各第一外接矩形的最小的外接矩形(即本申请实施例中的第二外接矩形)。

然后，按照预设宽高比对第二外接矩形进行区域扩展，得到第三外接矩形。

对第二外接矩形进行区域扩展的方法，可以参考上述对第一外接矩形进行区域扩展的方法，此处不再赘述。

报警视频生成模块，还可以按照预设宽高比对各第一外接矩形进行区域扩展，并确定扩展后的各第一外接矩形中最大的外接矩形(即本申请实施例中的第四外接矩形)。

然后，报警视频生成模块可以计算第三外接矩形与第四外接矩形的尺寸的比值(可以称为第二比值)。

如果第二比值大于预设阈值，为了进一步提高裁剪图像帧中目标对象所占的比例，可以采取移动裁剪模式对待处理图像帧进行裁剪，即，针对每一待处理图像帧，可以将该待处理图像帧中的第一外接矩形，按照第四外接矩形的预设倍数的大小进行区域扩展，并按照区域扩展后的第一外接矩形(可以称为第五外接矩形)，对该待处理图像帧进行裁剪。

可以理解的是，由于各待处理图像帧中的第一外接矩形的相对位置可能并不相同，如果采取移动裁剪模式，以第一外接矩形的中心点为扩展中心，向两侧对称扩展，得到第五外接矩形，使得各待处理图像帧中的第五外接矩形的相对位置也可能并不相同。

由于目标对象处于运动状态，可能会导致待处理图像帧中存在未显示有目标对象的图像帧(可以称为空白图像帧)。

因为，为了保证裁剪图像帧中的图像画面的流畅性，针对每一空白图像帧，可以对该空白图像帧的前一图像帧中的第五外接矩形和后一图像帧中的第五外接矩形进行插值计算，进而，得到该空白图像帧中的第五外接矩形。

例如，空白图像帧的前一图像帧中的第五外接矩形的左下角顶点的坐标为(X1，Y1)，宽为A，高为B，空白图像帧的后一图像帧中的第五外接矩形的左下角顶点的坐标为(X2，Y2)，宽为A，高为B，则可以得到该空白图像帧中的第五外接矩形左下角顶点的坐标为

宽为A，高为B，进而，可以对该空白图像帧进行裁剪。

如果第二比值不大于预设阈值，则可以采取统一裁剪模式对待处理图像帧进行裁剪，即，按照第三外接矩形对各待处理图像帧进行裁剪，得到裁剪后的图像帧。

如果采取上述统一裁剪模式，为了保证裁剪图像帧中的图像画面的流畅性，可以确定空白图像帧中的裁剪框与显示有目标对象的图像帧的第三外接矩形相同，即，所有待处理图像帧的裁剪框的相对位置相同，且大小也相同。

参见图2，图2为本申请实施例提供的一种生成已匹配链表的流程图，图像缓存模块中可以维护两个链表：未匹配链表和已匹配链表。

图像缓存模块可以将视频输入模块发送的第二图像帧存储在未匹配链表中，当接收到智能分析模块发送的目标链表时，图像缓存模块可以从未匹配链表中找到对应时间戳的第二图像帧，并和目标链表一起对应存入已匹配链表。

参见图3，图3为本申请实施例提供的一种报警视频生成模块的处理流程图。

报警视频生成模块可以在确定抽取的图像帧序列(即待处理图像帧)后，计算第三外接矩形和第四外接矩形，并计算第三外接矩形与第四外接矩形的比值(即第二比值)。

根据第二比值，分别采用统一裁剪和移动裁剪的方式，对待处理图像帧进行裁剪，并对裁剪后的图像帧进行缩放，然后对缩放后的图像帧进行压缩编码，得到报警视频。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。

以上所述仅为本申请的较佳实施例而已，并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本申请的保护范围内。

Claims (7)

1.一种用于生成报警视频的摄像机，其特征在于，所述摄像机包括：

图像缓存模块，用于缓存所述摄像机实时采集到的图像对应的图像帧；

智能分析模块，用于当检测到所述摄像机实时采集到的图像对应的图像帧触发报警事件时，确定触发所述报警事件的图像帧的时间戳，作为报警时间戳；

报警视频生成模块，用于从所述图像缓存模块缓存的图像帧中提取预设数量M个图像帧，提取的M个图像帧包括与所述报警时间戳对应的图像帧，以及所述报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数；对M个图像帧处理后确定为报警视频；

通讯传输模块，用于发送所述报警视频；

所述报警视频生成模块，具体用于：

在提取的M个图像帧中，分别确定触发所述报警事件的目标对象最小的外接矩形，作为第一外接矩形；

计算各第一外接矩形中尺寸最小的外接矩形，与所述各第一外接矩形中尺寸最大的外接矩形的尺寸的比值；

如果所述比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于预设宽高比，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；

如果所述比值不大于预设阈值，按照同一裁剪框对提取的M个图像帧进行裁剪处理，得到裁剪后的M个图像帧；所述同一裁剪框表示包含各第一外接矩形的最小外接矩形；

报警图像提取模块，具体用于：

针对所述报警视频生成模块提取的M个图像帧中的每一图像帧，计算触发所述报警事件的目标对象在该图像帧中的位置与该图像帧的中心点的距离；

将所述报警视频生成模块提取的M个图像帧中对应的距离最小的图像帧，确定为报警图像。

2.根据权利要求1所述的摄像机，其特征在于，还包括：

报警图像提取模块，用于响应于所述智能分析模块检测到的报警时间戳，在所述M个图像帧中提取符合预设条件的图像帧作为报警图像；

所述通讯传输模块，用于发送所述报警视频和所述报警图像。

3.根据权利要求1所述的摄像机，其特征在于，所述报警视频生成模块，具体用于：

在所述图像缓存模块已缓存的图像帧中，提取位于所述报警时间戳对应的图像帧之前的L1个图像帧，并提取位于所述报警时间戳对应的图像帧之后相邻的N-L1个图像帧；

或者，

在所述图像缓存模块已缓存的图像帧中，提取位于所述报警时间戳对应的图像帧之后的L2个图像帧，并提取位于所述报警时间戳对应的图像帧之前相邻的N-L2个图像帧；

其中，N1+N2＝N，且N1、N2、L1、L2为正整数。

4.根据权利要求1所述的摄像机，其特征在于，所述通讯传输模块，具体用于：

将所述报警图像按照JPEG标准进行压缩编码，得到编码后的报警图像；

将所述报警视频按照H.264、H.265或H.266标准进行压缩编码，得到编码后的报警视频；

发送编码后的报警图像、编码后的报警视频以及附加信息，其中，所述附加信息包括所述报警视频分辨率、所述报警视频包含的图像帧的数量、用于表示所述报警视频生成模块提取的M个图像帧各自对应的预设裁剪框的大小和位置的裁剪信息，以及用于表示在所述报警视频生成模块提取M个图像帧中，触发所述报警事件的目标对象最小的外接矩形的大小和位置的矩形信息。

5.根据权利要求1所述的摄像机，其特征在于，所述摄像机还包括：

视频输入模块，用于：

生成所述摄像机实时采集到的图像对应的第一分辨率的YUV图像帧，作为第一图像帧，以及第二分辨率的YUV图像帧，作为第二图像帧，其中，所述第一分辨率与所述第二分辨率不同；

向所述智能分析模块发送所述第一图像帧，并向所述图像缓存模块发送所述第二图像帧；

所述智能分析模块，还用于：

基于对所述第一图像帧进行图像分析，计算所述第一图像帧中显示的各对象的识别信息，所述识别信息包括所述各对象的标识，以及所述各对象最小的外接矩形的坐标；

向所述图像缓存模块发送所述识别信息和所述第一图像帧的时间戳；

所述图像缓存模块，还用于：

接收所述智能分析模块发送的识别信息和所述第一图像帧的时间戳。

6.根据权利要求5所述的摄像机，其特征在于，

所述图像缓存模块，还用于：

按照接收顺序，依次将所述第二图像帧存储在长度为L3的未匹配链表中；

当接收到所述智能分析模块发送的识别信息和所述第一图像帧的时间戳时，确定接收到的时间戳对应的第二图像帧；

将确定出的第二图像帧和接收到的识别信息，对应存储在长度为L4的已匹配链表中；

所述报警视频生成模块，具体用于：

从所述已匹配链表中提取预设数量M个图像帧。

7.一种用于生成报警视频的摄像机，其特征在于，所述摄像机包括：

图像缓存模块，用于缓存所述摄像机实时采集到的图像对应的图像帧；

智能分析模块，用于当检测到所述摄像机实时采集到的图像对应的图像帧触发报警事件时，确定触发所述报警事件的图像帧的时间戳，作为报警时间戳；

报警视频生成模块，用于从所述图像缓存模块缓存的图像帧中提取预设数量M个图像帧，提取的M个图像帧包括与所述报警时间戳对应的图像帧，以及所述报警时间戳对应的图像帧前后相邻的N个图像帧，其中，N+1＝M，N、M为正整数；对M个图像帧处理后确定为报警视频；

通讯传输模块，用于发送所述报警视频；

所述报警视频生成模块具体用于：

在提取的M个图像帧中，分别确定目标对象最小的外接矩形，作为第一外接矩形；

确定包含各第一外接矩形的最小的外接矩形，作为第二外接矩形；

按照预设宽高比对所述第二外接矩形进行区域扩展，得到第三外接矩形；

按照所述预设宽高比对各第一外接矩形进行区域扩展，并确定扩展后的各第一外接矩形中最大的外接矩形，作为第四外接矩形；

计算所述第三外接矩形与所述第四外接矩形的尺寸的比值；

如果所述比值大于预设阈值，针对提取的M个图像帧中的每一图像帧，基于所述第四外接矩形的预设倍数的大小，对该图像帧中的第一外接矩形进行区域扩展，并按照扩展后的第一外接矩形，对该图像帧进行裁剪，得到裁剪后的图像帧；

如果所述比值不大于预设阈值，按照所述第三外接矩形对提取的M个图像帧进行裁剪，得到裁剪后的M个图像帧。

Images