CN111314611A - 一种多个运动对象的拍摄方法及装置 - Google Patents

一种多个运动对象的拍摄方法及装置 Download PDF

Info

Publication number
CN111314611A
CN111314611A CN202010120797.4A CN202010120797A CN111314611A CN 111314611 A CN111314611 A CN 111314611A CN 202010120797 A CN202010120797 A CN 202010120797A CN 111314611 A CN111314611 A CN 111314611A
Authority
CN
China
Prior art keywords
moving object
frame
determining
moving
exposure time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010120797.4A
Other languages
English (en)
Inventor
支莉娜
卢二利
邵一轶
陈明珠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010120797.4A priority Critical patent/CN111314611A/zh
Publication of CN111314611A publication Critical patent/CN111314611A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及视频监控领域，公开了一种多个运动对象的拍摄方法及装置，用于解决拖影和画面稳定性低的问题，该方法包括：基于获取到的各个运动对象在多帧图像中对应的检测框的中心点，确定各个运动对象对应的平均检测框的中心点偏移量；基于各个平均检测框的中心点偏移量，确定各个运动对象的移动信息；基于预设的曝光规则，将与各个移动信息对应的最大曝光时间，确定为各个运动对象对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄。通过各个运动对象的移动信息，确定对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄，无需调整曝光时间，提高了画面稳定性，还解决了拍摄多个运动对象存在的拖影问题。

Description

一种多个运动对象的拍摄方法及装置
技术领域
本发明涉及视频监控领域，特别涉及一种多个运动对象的拍摄方法及装置。
背景技术
随着科学技术的发展，监控摄像机拍摄的监控画面的清晰度也在不断提高，但监控摄像机在拍摄运动对象的时候，监控画面经常会出现模糊、拖影等不清晰的情况。目前，现有技术为了解决拍摄运动对象的拖影问题，会采用下述方案拍摄运动对象。
具体地，获取在自动曝光模式下拍摄的运动对象的第一图像；再确定运动对象的运动速度，并确定运动速度对应的曝光时间，并获取基于曝光时间拍摄的运动对象的第二图像；最后，基于第一图像对第二图像进行图像合成处理，得到运动对象的监控画面。
但是，监控摄像机在调整运动对象对应的曝光时间时，监控画面的亮度会震荡，导致监控画面出现过曝或者过暗的情况，降低了监控画面的稳定性；若监控摄像机同时拍摄多个运动对象，无法同时针对不同运动对象的运动速度调整曝光时间，无法解决拍摄多个运动对象存在的拖影问题。
有鉴于此，需要设计一种新的多个运动对象的拍摄方法，以克服上述缺陷。
发明内容：
本发明提供一种多个运动对象的拍摄方法及装置，用于解决拍摄多个运动对象存在的拖影和画面稳定性低的问题。
第一方面，本发明实施例提供了一种多个运动对象的拍摄方法，包括：
获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像；
针对各个运动对象分别执行以下操作，以确定所述各个运动对象对应的最大曝光时间：
基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量；
基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息；
基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间；
根据所述各个运动对象对应的最大曝光时间，对所述各个运动对象进行拍摄。
可选的，基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量，包括：
获取所述多帧图像的第一帧和最后一帧中所述运动对象的检测框的中心点；
将所述第一帧中所述检测框的中心点，与所述最后一帧中所述检测框的中心点的差值的绝对值，确定为所述平均检测框的中心点偏移量。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，包括：
基于所述平均检测框的大小和所述平均检测框的中心点偏移量，确定所述平均检测框的帧间移动面积；
基于所述帧间移动面积和所述平均检测框的大小，确定所述平均检测框的帧间移动面积比值。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，包括：
确定所述帧间移动面积比值所处的第一区间，将所述第一区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，包括：
基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度，包括：
基于所述平均检测框的中心点偏移量，确定所述运动对象在所述多帧图像之间的平面水平移动距离和平面垂直移动距离；
基于预先建立的映射关系，确定与所述平面水平移动距离呈映射关系的实际水平移动距离，以及与所述平面垂直移动距离呈映射关系的实际垂直移动距离；
基于所述实际水平移动距离和所述实际垂直移动距离，分别确定所述运动对象的实际水平移动速度和实际垂直移动速度，并基于所述实际水平移动速度和所述实际垂直移动速度，确定所述运动对象的实际移动速度。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，包括：
确定所述运动对象的实际移动速度所处的第二区间，将所述第二区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
第二方面，本发明实施例还提供了一种多个运动对象的拍摄装置，包括：
接收模块，用于获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像；
处理模块，用于针对各个运动对象分别执行以下操作，以确定所述各个运动对象对应的最大曝光时间：
基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量；
基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息；
基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间；
拍摄模块，用于根据所述各个运动对象对应的最大曝光时间，对所述各个运动对象进行拍摄。
可选的，基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量，所述处理模块用于：
获取所述多帧图像的第一帧和最后一帧中所述运动对象的检测框的中心点；
将所述第一帧中所述检测框的中心点，与所述最后一帧中所述检测框的中心点的差值的绝对值，确定为所述平均检测框的中心点偏移量。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块用于：
基于所述平均检测框的大小和所述平均检测框的中心点偏移量，确定所述平均检测框的帧间移动面积；
基于所述帧间移动面积和所述平均检测框的大小，确定所述平均检测框的帧间移动面积比值。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块用于：
确定所述帧间移动面积比值所处的第一区间，将所述第一区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度，所述处理模块用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象在所述多帧图像之间的平面水平移动距离和平面垂直移动距离；
基于预先建立的映射关系，确定与所述平面水平移动距离呈映射关系的实际水平移动距离，以及与所述平面垂直移动距离呈映射关系的实际垂直移动距离；
基于所述实际水平移动距离和所述实际垂直移动距离，分别确定所述运动对象的实际水平移动速度和实际垂直移动速度，并基于所述实际水平移动速度和所述实际垂直移动速度，确定所述运动对象的实际移动速度。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块用于：
确定所述运动对象的实际移动速度所处的第二区间，将所述第二区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
第三方面，本发明实施例还提供了一种计算设备，包括：
存储器，用于存储程序指令；
处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行上述任一项多个运动对象的拍摄方法。
第四方面，本发明实施例还提供了一种存储介质，包括计算机可读指令，当计算机读取并执行所述计算机可读指令时，使得计算机执行上述任一项多个运动对象的拍摄方法。
本发明实施例中，基于获取到的各个运动对象在多帧图像中对应的检测框的中心点，确定各个运动对象对应的平均检测框的中心点偏移量；基于各个平均检测框的中心点偏移量，确定各个运动对象的移动信息；基于预设的曝光规则，将与各个移动信息对应的最大曝光时间，确定为各个运动对象对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄。通过各个运动对象的移动信息，确定对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄，本发明实施例可以按照最大曝光时间对多个运动对象进行拍摄，无需调整曝光时间，减小监控画面的亮度震荡，减少监控画面出现过曝或者过暗的情况，提高了画面稳定性，还解决了拍摄多个运动对象存在的拖影问题。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明实施例的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种拍摄多个运动对象的流程示意图；
图2a为本发明实施例提供的拍摄多个运动对象的第一帧图像；
图2b为本发明实施例提供的拍摄多个运动对象的第二帧图像；
图3为本发明实施例提供的在分辨率为m*n的监控画面上建立平面直角坐标系；
图4为本发明实施例提供的在分辨率1280*720的监控画面上建立平面直角坐标系；
图5为本发明实施例提供的一种多个运动对象的拍摄装置的结构示意图；
图6为本发明实施例提供的一种计算设备的结构示意图。
具体实施方式
在本发明实施例中，为解决拍摄多个运动对象存在的拖影和画面稳定性低的问题，提供了一种新的解决方案。该方案为：基于获取到的各个运动对象在多帧图像中对应的检测框的中心点，确定各个运动对象对应的平均检测框的中心点偏移量；基于各个平均检测框的中心点偏移量，确定各个运动对象的移动信息；基于预设的曝光规则，将与各个移动信息对应的最大曝光时间，确定为各个运动对象对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄。
下面结合附图对本发明优选的实施方式作出详细说明。
参阅图1所示，本发明实施例中，拍摄多个运动对象的过程如下：
S101：获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像。
监控摄像机获取在自动曝光模式下，拍摄的多个运动对象的连续多帧图像，本发明实施例中的多帧图像至少为两帧。为了便于理解，拍摄多个运动对象的第一帧图像如图2a所示的，和拍摄多个运动对象的第二帧图像如图2b所示。
S102：从多个运动对象中任意选取一个运动对象。
S103：基于获取到的运动对象Q在多帧图像中对应的检测框的中心点，确定运动对象Q的平均检测框的中心点偏移量。
可选的，确定运动对象Q的平均检测框的中心点偏移量的过程如下：
首先，获取多帧图像的第一帧和最后一帧中，运动对象Q的检测框的中心点。
本发明实施例中，从第一帧中获取运动对象Q的检测框的中心点为(x1，y1)，从第n帧中获取运动对象Q的检测框的中心点为(xn，yn)。
其次，将第一帧中检测框的中心点，与最后一帧中检测框的中心点的差值的绝对值，确定为平均检测框的中心点偏移量。
采用公式(1)计算平均检测框的中心点偏移量(Δx，Δy)。
Δx＝|xn-x1|，Δy＝|yn-y1| 公式(1)；
S104：基于平均检测框的中心点偏移量，确定运动对象Q的移动信息。
本发明实施例中的移动信息，表征运动对象Q在连续多帧图像中的平均检测框的帧间移动面积比值，或者运动对象Q在连续多帧图像中的实际移动速度。因此，在确定运动对象Q的移动信息时，可分为以下两种情况：
情况一，确定运动对象Q的平均检测框的帧间移动面积比值。
可选的，确定帧间移动面积比值的过程如下：
A1、基于平均检测框的大小和平均检测框的中心点偏移量，确定平均检测框的帧间移动面积。
在执行步骤A1之前需要先确定平均检测框的大小，而计算平均检测框的大小的过程如下：
首先，获取运动对象Q在各帧图像中的检测框的长度和宽度。
本发明实施例中，从第一帧中获取运动对象Q的检测框的大小为(w1，h1)，从第二帧中获取运动对象Q的检测框的大小为(w2，h2)，直至从第n帧中获取运动对象Q的检测框的大小为(wn，hn)。
其次，对各个检测框的长度进行平均值计算，得到平均检测框的长度；以及，对各个检测框的宽度进行平均值计算，得到平均检测框的宽度。
采用公式(2)计算平均检测框的平均大小
Figure BDA0002392908370000081
Figure BDA0002392908370000082
其中，
Figure BDA0002392908370000083
表示平均检测框的宽度，
Figure BDA0002392908370000084
表示平均检测框的长度。
具体地，基于平均检测框的大小和平均检测框的中心点偏移量，采用公式(3)，确定平均检测框的帧间移动面积。
Figure BDA0002392908370000085
其中，S表示帧间移动面积，
Figure BDA0002392908370000086
表示平均检测框的宽度，
Figure BDA0002392908370000087
表示平均检测框的长度，Δx表示中心点横坐标偏移量，Δy表示中心点纵坐标偏移量。
A2、基于帧间移动面积和平均检测框的大小，确定平均检测框的帧间移动面积比值。
具体地，基于帧间移动面积和平均检测框的大小，采用公式(4)，确定平均检测框的帧间移动面积比值。
Figure BDA0002392908370000088
其中，ΔS表示帧间移动面积比值，S表示帧间移动面积，
Figure BDA0002392908370000089
表示平均检测框的宽度，
Figure BDA00023929083700000810
表示平均检测框的长度。
情况二，确定运动对象Q的实际移动速度。
本发明实施例中，基于平均检测框的中心点偏移量，确定运动对象Q的实际移动速度。
具体地，确定实际移动速度的过程如下：
B1、基于平均检测框的中心点偏移量，确定运动对象Q在多帧图像之间的平面水平移动距离和平面垂直移动距离。
采用公式(1)计算得到平均检测框的中心点偏移量(Δx，Δy)，将Δx确定为运动对象Q在多帧图像之间的平面水平移动距离，将Δy确定为运动对象Q在多帧图像之间的平面垂直移动距离。
B2、基于预先建立的映射关系，确定与平面水平移动距离呈映射关系的实际水平移动距离，以及与平面垂直移动距离呈映射关系的实际垂直移动距离。
由于运动对象Q处于二维平面的监控画面中，且监控摄像机在视频成像的过程中存在一定的倾斜角，会产生相应的倾斜透视现象，若直接基于运动对象Q的平面移动距离计算移动速度，不能体现运动对象Q在实际监控区域下的移动速度，因此，需要建立监控画面中各个像素点的平面距离，与实际距离之间的映射关系。
在分辨率为m*n的监控画面上，建立一个如图3所示的平面直角坐标系，分别在水平方向(后续简称为X轴)、垂直方向(后续简称为Y轴)上监控画面划分为k个区域，其中，Xk表示在X轴上的第k个区域，Yn表示在Y轴上的第n个区域，那么每个像素点在X轴上对应的实际水平距离为
Figure BDA0002392908370000091
在Y轴上对应的实际垂直距离为
Figure BDA0002392908370000092
因此，基于平面水平移动距离和平面垂直移动距离，采用公式(5)，确定运动对象Q的实际水平移动距离和实际垂直移动距离。
Figure BDA0002392908370000093
其中，SX表示运动对象Q的实际水平移动距离，SY表示运动对象Q的实际垂直移动距离，
Figure BDA0002392908370000094
表示每个像素点在X轴上对应的实际水平距离，
Figure BDA0002392908370000095
表示每个像素点在Y轴上对应的实际垂直距离。
例如，以分辨率为1280*720的监控画面为例，建立一个如图4所示的平面直角坐标系，其中，每个像素点在X轴上对应的实际水平距离为0.3m，在Y轴上对应的实际垂直距离为0.2m，那么，当行人从X1的(128,72)移动到X3的(384,144)，则行人的实际水平移动距离为76.8m，实际垂直移动距离为14.4m。
B3、基于实际水平移动距离和实际垂直移动距离，分别确定运动对象Q的实际水平移动速度和实际垂直移动速度，并基于实际水平移动速度和实际垂直移动速度，确定运动对象Q的实际移动速度。
首先，采用公式(6)计算运动对象Q的实际水平移动速度VX，和实际垂直移动速度VY。
Figure BDA0002392908370000101
其中，tQ表示运动对象Q从第一帧移动到最后一帧所花费的时间。
其次，基于实际水平移动速度和实际垂直移动速度，采用公式(7)，确定运动对象Q的实际移动速度。
Figure BDA0002392908370000102
S105：基于预设的曝光规则，将与移动信息对应的最大曝光时间，确定为运动对象Q的最大曝光时间。
具体地，针对情况一，确定运动对象Q的最大曝光时间的过程如下：
C1、确定运动对象Q从第一帧移动到最后一帧所花费的时间。
C2、分别计算各个帧长的最大帧间移动面积比值。
本发明实施例中，先基于实际场景需求和预设的宽动态固定曝光比1:4:8，确定各个帧长对应的最大曝光时间；再采用公式(8)，分别计算各个帧长的最大帧间移动面积比值。
Figure BDA0002392908370000103
其中，X、Y和Z分别表示短帧的最大帧间移动面积比值、中帧的最大帧间移动面积比值和长帧的最大帧间移动面积比值；tQ表示运动对象Q从第一帧移动到最后一帧所花费的时间；t短、t中和t长分别表示短帧的最大曝光时间、中帧的最大曝光时间和长帧的最大曝光时间；通常，为了保证监控摄像机拍摄运动对象的画面清晰度，规定运动对象Q的平均检测框的帧间移动面积最大比值不超过5％。
C3、根据各个帧长的最大帧间移动面积比值，将各个帧长的最大曝光时间划分为不同的第一区间。
若运动对象Q的帧间移动面积比值位于[Y，X]区间，则采用短帧对应的最大曝光时间拍摄运动对象Q；
若运动对象Q的帧间移动面积比值位于[Z，Y]区间，则采用中帧对应的最大曝光时间拍摄运动对象Q；
若运动对象Q的帧间移动面积比值位于(0，Z]区间，则采用长帧对应的最大曝光时间拍摄运动对象Q。
C4、确定帧间移动面积比值所处的第一区间，将第一区间对应的最大曝光时间，确定为运动对象Q的最大曝光时间。
通过帧间移动面积比值与最大曝光时间的对应关系，可以直接确定运动对象Q的最大曝光时间，并调用与最大曝光时间对应的帧长，对运动对象Q进行拍摄，监控摄像机无需调整曝光时间，减小监控画面的亮度震荡，减少监控画面出现过曝或者过暗的情况，提高了画面稳定性。
例如，机动车的平均检测框的帧间移动面积比值为48％，机动车从第一帧移动到最后一帧共花费40ms，预设的t短为3.08ms，t中为12.3ms，t长为24.6ms，代入公式(8)计算可知，X为65％，Y为16.3％，Z为8.1％，由于机动车的平均检测框的帧间移动面积比值位于[Y，X]区间，因此，确定机动车的最大曝光时间为3.08ms。
针对情况二，确定运动对象Q的最大曝光时间的过程如下：
在确定运动对象Q的最大曝光时间之前，需要先采用大量的训练样本，以建立实际移动速度与最大曝光时间的对应关系，其中，一个训练样本为多个样本对象的多帧图像。建立对应关系的过程如下：
D1、从训练样本集合中读取一个训练样本。
D2、从所述一个训练样本中任意选取一个样本对象。
D3、采用公式(4)，计算所述一个样本对象的平均检测框的帧间移动面积比值，以及采用公式(7)，计算所述一个样本对象的实际移动速度。
D4、采用公式(8)，计算各个帧长的最大帧间移动面积比值，并根据各个帧长的最大帧间移动面积比值，将各个帧长的最大曝光时间划分为不同的第一区间。
D5、基于所述一个样本对象的平均检测框的帧间移动面积比值，建立所述一个样本对象的实际移动速度，与最大曝光时间之间的对应关系。
具体地，先确定所述一个样本对象的平均检测框的帧间移动面积比值所处的第一区间；再将第一区间对应的最大曝光时间，与所述一个样本对象的实际移动速度建立对应关系。
D6、判断所述一个训练样本上的所有样本对象是否均处理完毕，若是，执行步骤D7；否则，返回步骤D2。
D7、判断所有训练样本是否均处理完毕，若是，执行步骤D8；否则，返回步骤D1。
D8、根据各个样本对象的实际移动速度，将各个帧长的最大曝光时间划分为不同的第二区间。
一般来说，样本对象的实际移动速度越快，对应的最大曝光时间越短；样本对象的实际移动速度越慢，对应的最大曝光时间越长。
可选的，确定运动对象Q的实际移动速度所处的第二区间，将第二区间对应的最大曝光时间，确定为运动对象Q的最大曝光时间。
通过实际移动速度与最大曝光时间的对应关系，可以直接确定运动对象Q的最大曝光时间，并调用与最大曝光时间对应的帧长，对运动对象Q进行拍摄，监控摄像机无需调整曝光时间，减小监控画面的亮度震荡，减少监控画面出现过曝或者过暗的情况，提高了画面稳定性。
S106：判断各个运动对象是否均处理完毕，若是，执行S107；否则，返回S102。
S107：根据各个运动对象对应的最大曝光时间，对各个运动对象进行拍摄。
根据各个运动对象对应的最大曝光时间，对各个运动对象进行拍摄，生成不同帧长的监控视频。
例如，确定监控画面中行人对应的最大曝光时间为24.6ms，确定机动车对应的最大曝光时间为3.08ms，确定宠物狗对应的最大曝光时间为12.3ms，分别用短帧拍摄行人、机动车和宠物狗，生成监控视频1；用中帧拍摄行人、机动车和宠物狗，生成监控视频2；用长帧拍摄行人、机动车宠物狗，生成监控视频3。
由于拍摄机动车的最大曝光时间，与机动车的移动信息匹配一致，因此，在监控视频1中的机动车不会出现拖影、图像不清晰的问题；同样地，由于拍摄宠物狗的最大曝光时间，与宠物狗车的移动信息匹配一致，因此，在监控视频2中的宠物狗车不会出现拖影、图像不清晰的问题；由于拍摄行人的最大曝光时间，与行人的移动信息匹配一致，因此，在监控视频3中的行人不会出现拖影、图像不清晰的问题，解决了拍摄多个运动对象存在的拖影问题。另外，监控摄像机无需调整曝光时间，直接调用与最大曝光时间对应的帧长，对多个运动对象进行拍摄即可，这样，监控画面的亮度不会震荡，不会让监控画面出现过曝或者过暗的情况，提高了画面稳定性。
基于同一发明构思，本发明实施例中，提供一种多个运动对象的拍摄装置，参阅图5所示，至少包括接收模块501、处理模块502和拍摄模块503，其中，
接收模块501，用于获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像；
处理模块502，用于针对各个运动对象分别执行以下操作，以确定所述各个运动对象对应的最大曝光时间：
基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量；
基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息；
基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间；
拍摄模块503，用于根据所述各个运动对象对应的最大曝光时间，对所述各个运动对象进行拍摄。
可选的，基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量，所述处理模块502用于：
获取所述多帧图像的第一帧和最后一帧中所述运动对象的检测框的中心点；
将所述第一帧中所述检测框的中心点，与所述最后一帧中所述检测框的中心点的差值的绝对值，确定为所述平均检测框的中心点偏移量。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块502用于：
基于所述平均检测框的大小和所述平均检测框的中心点偏移量，确定所述平均检测框的帧间移动面积；
基于所述帧间移动面积和所述平均检测框的大小，确定所述平均检测框的帧间移动面积比值。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块502用于：
确定所述帧间移动面积比值所处的第一区间，将所述第一区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块502用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度。
可选的，基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度，所述处理模块502用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象在所述多帧图像之间的平面水平移动距离和平面垂直移动距离；
基于预先建立的映射关系，确定与所述平面水平移动距离呈映射关系的实际水平移动距离，以及与所述平面垂直移动距离呈映射关系的实际垂直移动距离；
基于所述实际水平移动距离和所述实际垂直移动距离，分别确定所述运动对象的实际水平移动速度和实际垂直移动速度，并基于所述实际水平移动速度和所述实际垂直移动速度，确定所述运动对象的实际移动速度。
可选的，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块502用于：
确定所述运动对象的实际移动速度所处的第二区间，将所述第二区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
基于同一发明构思，本发明实施例中，提供一种计算设备，参阅图6所示，至少包括存储器601和至少一个处理器602，其中，存储器601和处理器602通过通信总线完成相互间的通信；
存储器601用于存储程序指令；
处理器602用于调用存储器501中存储的程序指令，按照获得的程序执行前述多个运动对象的拍摄方法。
基于同一发明构思，本发明实施例中，提供一种存储介质，至少包括计算机可读指令，当计算机读取并执行所述计算机可读指令时，使得计算机执行前述多个运动对象的拍摄方法。
综上所述，本发明实施例中，基于获取到的各个运动对象在多帧图像中对应的检测框的中心点，确定各个运动对象对应的平均检测框的中心点偏移量；基于各个平均检测框的中心点偏移量，确定各个运动对象的移动信息；基于预设的曝光规则，将与各个移动信息对应的最大曝光时间，确定为各个运动对象对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄。
本发明实施例通过各个运动对象的移动信息，确定对应的最大曝光时间，并根据对应的最大曝光时间对各个运动对象进行拍摄，相比于现有技术根据运动速度调整曝光时间的方式相比，本发明实施例可以直接调用与最大曝光时间对应的帧长，对多个运动对象进行拍摄，无需调整曝光时间，减小监控画面的亮度震荡，减少监控画面出现过曝或者过暗的情况，提高了画面稳定性，还解决了拍摄多个运动对象存在的拖影问题。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (16)

1.一种多个运动对象的拍摄方法，其特征在于，包括：
获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像；
针对各个运动对象分别执行以下操作，以确定所述各个运动对象对应的最大曝光时间：
基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量；
基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息；
基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间；
根据所述各个运动对象对应的最大曝光时间，对所述各个运动对象进行拍摄。
2.如权利要求1所述的方法，其特征在于，基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量，包括：
获取所述多帧图像的第一帧和最后一帧中所述运动对象的检测框的中心点；
将所述第一帧中所述检测框的中心点，与所述最后一帧中所述检测框的中心点的差值的绝对值，确定为所述平均检测框的中心点偏移量。
3.如权利要求1或2所述的方法，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，包括：
基于所述平均检测框的大小和所述平均检测框的中心点偏移量，确定所述平均检测框的帧间移动面积；
基于所述帧间移动面积和所述平均检测框的大小，确定所述平均检测框的帧间移动面积比值。
4.如权利要求3所述的方法，其特征在于，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，包括
确定所述帧间移动面积比值所处的第一区间，将所述第一区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
5.如权利要求1或2所述的方法，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，包括：
基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度。
6.如权利要求5所述的方法，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度，包括：
基于所述平均检测框的中心点偏移量，确定所述运动对象在所述多帧图像之间的平面水平移动距离和平面垂直移动距离；
基于预先建立的映射关系，确定与所述平面水平移动距离呈映射关系的实际水平移动距离，以及与所述平面垂直移动距离呈映射关系的实际垂直移动距离；
基于所述实际水平移动距离和所述实际垂直移动距离，分别确定所述运动对象的实际水平移动速度和实际垂直移动速度，并基于所述实际水平移动速度和所述实际垂直移动速度，确定所述运动对象的实际移动速度。
7.如权利要求6所述的方法，其特征在于，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，包括：
确定所述运动对象的实际移动速度所处的第二区间，将所述第二区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
8.一种多个运动对象的拍摄装置，其特征在于，包括：
接收模块，用于获取在自动曝光模式下拍摄的多个运动对象的连续多帧图像；
处理模块，用于针对各个运动对象分别执行以下操作，以确定所述各个运动对象对应的最大曝光时间：
基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量；
基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息；
基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间；
拍摄模块，用于根据所述各个运动对象对应的最大曝光时间，对所述各个运动对象进行拍摄。
9.如权利要求8所述的装置，其特征在于，基于获取到的运动对象在所述多帧图像中对应的检测框的中心点，确定所述运动对象的平均检测框的中心点偏移量，所述处理模块用于：
获取所述多帧图像的第一帧和最后一帧中所述运动对象的检测框的中心点；
将所述第一帧中所述检测框的中心点，与所述最后一帧中所述检测框的中心点的差值的绝对值，确定为所述平均检测框的中心点偏移量。
10.如权利要求8或9所述的装置，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块用于：
基于所述平均检测框的大小和所述平均检测框的中心点偏移量，确定所述平均检测框的帧间移动面积；
基于所述帧间移动面积和所述平均检测框的大小，确定所述平均检测框的帧间移动面积比值。
11.如权利要求10所述的装置，其特征在于，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块用于：
确定所述帧间移动面积比值所处的第一区间，将所述第一区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
12.如权利要求8或9所述的装置，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的移动信息，所述处理模块用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度。
13.如权利要求12所述的装置，其特征在于，基于所述平均检测框的中心点偏移量，确定所述运动对象的实际移动速度，所述处理模块用于：
基于所述平均检测框的中心点偏移量，确定所述运动对象在所述多帧图像之间的平面水平移动距离和平面垂直移动距离；
基于预先建立的映射关系，确定与所述平面水平移动距离呈映射关系的实际水平移动距离，以及与所述平面垂直移动距离呈映射关系的实际垂直移动距离；
基于所述实际水平移动距离和所述实际垂直移动距离，分别确定所述运动对象的实际水平移动速度和实际垂直移动速度，并基于所述实际水平移动速度和所述实际垂直移动速度，确定所述运动对象的实际移动速度。
14.如权利要求12所述的装置，其特征在于，基于预设的曝光规则，将与所述移动信息对应的最大曝光时间，确定为所述运动对象的最大曝光时间，所述处理模块用于：
确定所述运动对象的实际移动速度所处的第二区间，将所述第二区间对应的最大曝光时间，确定为所述运动对象的最大曝光时间。
15.一种计算设备，其特征在于，包括：
存储器，用于存储程序指令；
处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行权利要求1-7任一项所述的方法。
16.一种存储介质，其特征在于，包括计算机可读指令，当计算机读取并执行所述计算机可读指令时，使得计算机执行如权利要求1-7任一项所述的方法。
CN202010120797.4A 2020-02-26 2020-02-26 一种多个运动对象的拍摄方法及装置 Pending CN111314611A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010120797.4A CN111314611A (zh) 2020-02-26 2020-02-26 一种多个运动对象的拍摄方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010120797.4A CN111314611A (zh) 2020-02-26 2020-02-26 一种多个运动对象的拍摄方法及装置

Publications (1)

Publication Number Publication Date
CN111314611A true CN111314611A (zh) 2020-06-19

Family

ID=71147816

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010120797.4A Pending CN111314611A (zh) 2020-02-26 2020-02-26 一种多个运动对象的拍摄方法及装置

Country Status (1)

Country Link
CN (1) CN111314611A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112070803A (zh) * 2020-09-02 2020-12-11 安徽工程大学 一种基于ssd神经网络模型的无人船路径跟踪方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101998058A (zh) * 2009-08-20 2011-03-30 三洋电机株式会社 摄像装置和图像处理装置
CN102265320A (zh) * 2008-09-22 2011-11-30 自由科学公司 用于使物体成像的系统和方法
CN104205801A (zh) * 2012-03-28 2014-12-10 高通股份有限公司 用于使成像装置自动聚焦的方法和设备
CN105227851A (zh) * 2015-11-09 2016-01-06 联想(北京)有限公司 图像处理方法及图像采集装置
CN105744116A (zh) * 2016-02-25 2016-07-06 广东欧珀移动通信有限公司 检测方法、控制方法、检测装置、控制装置及电子装置
CN105898143A (zh) * 2016-04-27 2016-08-24 维沃移动通信有限公司 一种运动物体的抓拍方法及移动终端
CN106056629A (zh) * 2016-05-31 2016-10-26 南京大学 通过运动物体检测和扩展去除鬼影的高动态范围成像方法
CN107566745A (zh) * 2017-08-17 2018-01-09 努比亚技术有限公司 一种拍摄方法、终端和计算机可读存储介质
CN107613283A (zh) * 2016-07-11 2018-01-19 三星电子株式会社 视频中的基于对象或区域的聚焦控制
CN107771391A (zh) * 2015-06-10 2018-03-06 微软技术许可有限责任公司 图像帧的曝光时间的确定
CN112042178A (zh) * 2018-05-02 2020-12-04 高通股份有限公司 基于主题优先级的图像捕获

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102265320A (zh) * 2008-09-22 2011-11-30 自由科学公司 用于使物体成像的系统和方法
CN101998058A (zh) * 2009-08-20 2011-03-30 三洋电机株式会社 摄像装置和图像处理装置
CN104205801A (zh) * 2012-03-28 2014-12-10 高通股份有限公司 用于使成像装置自动聚焦的方法和设备
CN107771391A (zh) * 2015-06-10 2018-03-06 微软技术许可有限责任公司 图像帧的曝光时间的确定
CN105227851A (zh) * 2015-11-09 2016-01-06 联想(北京)有限公司 图像处理方法及图像采集装置
CN105744116A (zh) * 2016-02-25 2016-07-06 广东欧珀移动通信有限公司 检测方法、控制方法、检测装置、控制装置及电子装置
CN105898143A (zh) * 2016-04-27 2016-08-24 维沃移动通信有限公司 一种运动物体的抓拍方法及移动终端
CN106056629A (zh) * 2016-05-31 2016-10-26 南京大学 通过运动物体检测和扩展去除鬼影的高动态范围成像方法
CN107613283A (zh) * 2016-07-11 2018-01-19 三星电子株式会社 视频中的基于对象或区域的聚焦控制
CN107566745A (zh) * 2017-08-17 2018-01-09 努比亚技术有限公司 一种拍摄方法、终端和计算机可读存储介质
CN112042178A (zh) * 2018-05-02 2020-12-04 高通股份有限公司 基于主题优先级的图像捕获

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112070803A (zh) * 2020-09-02 2020-12-11 安徽工程大学 一种基于ssd神经网络模型的无人船路径跟踪方法

Similar Documents

Publication Publication Date Title
US11430103B2 (en) Method for image processing, non-transitory computer readable storage medium, and electronic device
KR102103252B1 (ko) 이미지 융합 방법 및 장치, 및 단말 디바이스
KR101032574B1 (ko) 이미지 안정화를 위한 방법, 장치, 전자 장치 및 컴퓨터 판독가능 매체
US9883125B2 (en) Imaging systems and methods for generating motion-compensated high-dynamic-range images
EP3893513A1 (en) Video stitching method and apparatus, electronic device, and computer storage medium
US20110142287A1 (en) Algorithms for estimating precise and relative object distances in a scene
CN110349163B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
EP4044579A1 (en) Main body detection method and apparatus, and electronic device and computer readable storage medium
CN109922275B (zh) 曝光参数的自适应调整方法、装置及一种拍摄设备
CN105635559B (zh) 用于终端的拍照控制方法及装置
CN110796041B (zh) 主体识别方法和装置、电子设备、计算机可读存储介质
CN113242360B (zh) 线阵相机及其行频的计算方法、装置
CN110866486B (zh) 主体检测方法和装置、电子设备、计算机可读存储介质
CN113067979A (zh) 基于仿生式脉冲相机的成像方法、装置、设备及存储介质
CN109005367B (zh) 一种高动态范围图像的生成方法、移动终端及存储介质
JP2006186592A5 (zh)
CN111917991B (zh) 图像的质量控制方法、装置、设备及存储介质
CN115278103B (zh) 一种基于环境感知的安防监控图像补偿处理方法及系统
CN111932462B (zh) 图像降质模型的训练方法、装置和电子设备、存储介质
CN113259594A (zh) 图像处理方法及装置、计算机可读存储介质、终端
CN111314611A (zh) 一种多个运动对象的拍摄方法及装置
CN111491103B (zh) 一种图像亮度的调节方法、监控设备及存储介质
CN109523456A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
WO2017154423A1 (ja) 画像処理装置、画像処理方法、およびプログラム
CN113286084A (zh) 终端的图像采集方法及装置、存储介质、终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200619