CN110581979B - 一种图像采集系统、方法及装置 - Google Patents

一种图像采集系统、方法及装置 Download PDF

Info

Publication number
CN110581979B
CN110581979B CN201810586700.1A CN201810586700A CN110581979B CN 110581979 B CN110581979 B CN 110581979B CN 201810586700 A CN201810586700 A CN 201810586700A CN 110581979 B CN110581979 B CN 110581979B
Authority
CN
China
Prior art keywords
collected
type
acquired
ball machine
video frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810586700.1A
Other languages
English (en)
Other versions
CN110581979A (zh
Inventor
范晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201810586700.1A priority Critical patent/CN110581979B/zh
Publication of CN110581979A publication Critical patent/CN110581979A/zh
Application granted granted Critical
Publication of CN110581979B publication Critical patent/CN110581979B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明实施例提供了一种图像采集系统、方法及装置，所述系统包括枪机和球机，所述枪机：用于采集包含人行横道的视频帧，作为目标视频帧提取所述目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于所述球机的位置信息，并将所确定的位置信息反馈给所述球机，其中，所述感兴趣区域为视频帧中处于红灯时间的人行横道区域；所述球机：用于接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。应用本发明实施例提供的方案，可以实现对人行横道中行人闯红灯图像的采集。

Description

一种图像采集系统、方法及装置
技术领域
本发明涉及计算机视觉技术领域，特别是涉及一种图像采集系统、方法及装置、枪机、球机及计算机可读存储介质。
背景技术
目前，在交通路口过马路时，行人闯红灯穿过人行横道是经常出现的交通违法行为，非常容易造成交通事故，并且使得机动车无法按照交通信号正常行驶，导致路口效率低下，严重影响交通管理秩序。因此，需要采集行人闯红灯的图像，以便于交通部门核实后对闯红灯行人批评教育，有效制止闯红灯行为。
发明内容
本发明实施例的目的在于提供一种图像采集系统、方法及装置、枪机、球机及计算机可读存储介质，以实现对人行横道中行人闯红灯图像的采集。具体技术方案如下：
本发明一方面提供一种图像采集系统，所述系统包括：枪机和球机，其中，
所述枪机，用于采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息，并将所确定的位置信息反馈给所述球机；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
所述球机，用于接收所述枪机反馈的位置信息；转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
可选的，所述枪机，具体用于针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
可选的，所述枪机，还用于根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，并将所确定的运动状态反馈给所述球机，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
所述球机，还用于接收所述枪机反馈的运动状态；并具体用于转向第一类待采集对象相对于所述球机的位置信息指向的位置，对所述第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集；其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
可选的，所述枪机，还用于确定每一第二类待采集对象在所述目标视频帧中的区域大小，并将所确定的区域大小反馈给所述球机；
所述球机，还用于接收所述枪机反馈的区域大小；并具体用于对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到所述第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
可选的，所述球机，具体用于在所述人行横道的长度小于第三预设阈值时，对所述第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足所述预设跟踪条件时，对第二类待采集对象进行图像采集。
可选的，所述球机，具体用于针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
可选的，所述球机，还用于在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；如果是，对待采集对象进行图像采集。
可选的，所述球机，还用于在判断出待采集对象为人后，确定待采集对象的属性信息。
本发明的第二方面提供一种图像采集方法，应用于一种图像采集系统中的枪机，所述图像采集系统包括：所述枪机和球机，所述方法包括：
采集包含人行横道的视频帧，作为目标视频帧；
提取所述目标视频帧中感兴趣区域内的对象，其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
确定每一待采集对象相对于所述球机的位置信息；
将所确定的位置信息反馈给所述球机，以使所述球机接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
可选的，所述从所提取对象中选择疑似存在闯红灯行为的对象的步骤，包括：
针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
可选的，所述方法还包括：
根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
将所确定的运动状态反馈给所述球机，以使所述球机：转向第一类待采集对象相对于所述球机的位置信息指向的位置，对所述第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集；其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
可选的，所述方法还包括：
确定每一第二类待采集对象在所述目标视频帧中的区域大小；
将所确定的区域大小反馈给所述球机，以使所述球机：对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
本发明的第三方面提供一种图像采集方法，应用于一种图像采集系统中的球机，所述图像采集系统包括：枪机和所述球机，所述方法包括：
接收所述枪机反馈的每一待采集对象相对于所述球机的位置信息；其中，所述每一待采集对象相对于所述球机的位置信息为所述枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
可选的，所述方法还包括：
接收所述枪机反馈的每一待采集对象相对于所述球机的运动状态，其中，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态，所述每一待采集对象相对于所述球机的运动状态为所述枪机根据每一待采集对象的第二类视频帧确定的，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧；
所述转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集的步骤，包括：
转向第一类待采集对象相对于所述球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集，其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
可选的，所述方法还包括：
接收所述枪机反馈的每一第二类待采集对象在所述目标视频帧中的区域大小；
所述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，包括：
对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
可选的，所述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，包括：
在所述人行横道的长度小于第三预设阈值时，对所述第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足所述预设跟踪条件时，对所述第二类待采集对象进行图像采集。
可选的，所述对各个待采集对象进行图像采集的步骤，包括：
针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；
如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
可选的，所述方法还包括：
在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；
如果是，对待采集对象进行图像采集。
可选的，所述方法还包括：
在判断出待采集对象为人后，确定待采集对象的属性信息。
本发明的第四方面提供一种图像采集装置，应用于一种图像采集系统中的枪机，所述图像采集系统包括：所述枪机和球机，所述装置包括：
采集模块，用于采集包含人行横道的视频帧，作为目标视频帧；
提取模块，用于提取所述目标视频帧中感兴趣区域内的对象，其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
选择模块，用于从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
第一确定模块，用于确定每一待采集对象相对于所述球机的位置信息；
第一采集模块，用于将所确定的位置信息反馈给所述球机，以使所述球机接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
可选的，所述选择模块，具体用于：
针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
可选的，所述装置还包括：
第二确定模块，用于根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
所述第一采集模块，还用于将所确定的运动状态反馈给所述球机，以使所述球机：转向第一类待采集对象相对于所述球机的位置信息指向的位置，对所述第一类待采集对象进行图像采集；并转向所述第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集；其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
可选的，所述装置还包括：
第三确定模块，用于确定每一第二类待采集对象在所述目标视频帧中的区域大小；
所述第一采集模块，还用于将所确定的区域大小反馈给所述球机，以使所述球机：对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
本发明的第五方面提供一种图像采集装置，应用于一种图像采集系统中的球机，所述图像采集系统包括：枪机和所述球机，所述装置包括：
接收模块，用于接收所述枪机反馈的每一待采集对象相对于所述球机的位置信息；其中，所述每一待采集对象相对于所述球机的位置信息为所述枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
第二采集模块，用于转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
可选的，所述接收模块，还用于接收所述枪机反馈的每一待采集对象相对于所述球机的运动状态，其中，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态，所述每一待采集对象相对于所述球机的运动状态为所述枪机根据每一待采集对象的第二类视频帧确定的，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧；
所述第二采集模块，具体用于转向第一类待采集对象相对于所述球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集，其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
可选的，所述接收模块，还用于接收所述枪机反馈的每一第二类待采集对象在所述目标视频帧中的区域大小；
所述第二采集模块，具体用于对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
可选的，所述第二采集模块，具体用于在所述人行横道的长度小于第三预设阈值时，对所述第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足所述预设跟踪条件时，对所述第二类待采集对象进行图像采集。
可选的，所述第二采集模块，具体用于针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
可选的，所述第二采集模块，具体用于在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；如果是，对待采集对象进行图像采集。
可选的，所述装置还包括：
第四确定模块，在所述第二采集模块判断出待采集对象为人后，确定待采集对象的属性信息。
本发明的第六方面提供一种枪机，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现第二方面的方法步骤。
本发明的第七方面提供一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求第二方面的方法步骤。
本发明的第八方面提供一种球机，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现第三方面的方法步骤。
本发明的第九方面提供一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现第三方面的方法步骤。
本发明实施例提供的方案，枪机采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种图像采集系统的结构示意图；
图2为本发明实施例提供的一种图像采集方法的流程示意图；
图3为本发明实施例提供的另一种图像采集方法的流程示意图；
图4为本发明实施例提供的一种图像采集装置的结构示意图；
图5为本发明实施例提供的另一种图像采集装置的结构示意图；
图6为本发明实施例提供的一种枪机的结构示意图；
图7为本发明实施例提供的一种球机的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为解决现有技术的问题，本发明实施例提供了一种图像采集系统、方法及装置、、枪机、球机、计算机可读存储介质。下面通过具体实施例对本发明进行详细介绍。
参见图1，图1为本发明实施例提供的一种图像采集系统的结构示意图，该系统包括枪机101和球机102，其中，
枪机101，用于采集包含人行横道的视频帧，作为目标视频帧；提取目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于球机102的位置信息，并将所确定的位置信息反馈给球机102；其中，感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
球机102，用于接收枪机101反馈的位置信息；转向各个待采集对象相对于球机102的位置信息指向的位置，对各个待采集对象进行图像采集。
在一种实现方式中，枪机101采集的视频帧中可以包含一个路口的多个人行横道，也可以仅包含一个人行横道，都是合理的，本发明实施例对此不做限定。可以理解的，当枪机101采集包含一个路口的多个人行横道的视频帧时，本发明实施例提供的方案可以实现同时对一个路口、多个方向的人行横道中行人闯红灯图像的采集。
视频帧中的感兴趣区域可以通过以下两种方式确定：一种方式为对采集到的每一视频帧，枪机101通过实时检测视频帧中包含人行横道的区域，当该人行横道当前处于红灯时间时，将该区域确定为感兴趣区域；由于枪机101所在位置固定且不需要转动，因此另一种方式为预先标定人行横道区域在视频帧中的位置，当该人行横道由绿灯时间变为红灯时间时，枪机101将该区域确定为感兴趣区域。
由于需要采集闯红灯的行人的图像，因此枪机101可以通过目标检测技术提取出目标视频帧中感兴趣区域内的对象，例如可以通过基于深度学习的目标检测技术对感兴趣区域中的人脸、人体进行检测，进而提取出目标视频帧中感兴趣区域内的对象。可以理解的，采用基于深度学习的目标检测方法，可以提高目标检测的准确性。
在一种实现方式中，由于枪机101提取的目标视频帧中感兴趣区域内的对象可能并不是闯红灯的对象，例如，当行人刚踏入人行横道发现当前是红灯后立即后退出人行横道，则此行为不能被判定为闯红灯行为。因此枪机101需要从所提取对象中选择疑似存在闯红灯行为的对象。
具体的，在本发明的一个具体实施例中，针对每一对象，枪机101可以判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，第一类视频帧为：在目标视频帧之前采集的视频帧。
其中，第一预设阈值可以综合考虑视频帧的采集频率和红灯时间的长短进行设定，当视频帧的采集频率越高、红灯时间越长，第一预设阈值越大。
在一种实现方式中，针对每一对象，枪机101还可以根据感兴趣区域包含该对象、且连续采集的第一类视频帧，对该对象在时序上进行关联，得到该对象对应的运动轨迹，在运动轨迹的长度达到预设阈值时，可以判定该对象为疑似存在闯红灯行为的对象。
在确定待采集对象后，枪机101还可以根据目标视频帧中待采集对象的位置确定每一待采集对象相对于球机102的位置信息，将所确定的位置信息反馈给球机102，这样，球机102可以转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。可见，枪机和球机组成了枪球联动系统，枪球联动时，利用球机采集图像可以解决在一定距离以外枪机采集的图像分辨率过小的问题。
可以理解的，枪机和球机相对于人行横道的位置是固定的，因此，行人过马路时相对于球机的运动状态有两种：远离球机和靠近球机，对于不同运动状态的待采集对象，球机102可以采用不同的方式进行图像采集，以提高所采集的图像的清晰度。
具体的，在本发明的一个具体实施例中，枪机101还可以根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于球机102的运动状态，并将所确定的运动状态反馈给球机102，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在目标视频帧之前连续采集的视频帧，运动状态包括：用于表示对象远离球机102的远离状态和用于表示对象靠近球机102的靠近状态；
球机102，还可以接收枪机101反馈的运动状态，并转向第一类待采集对象相对于球机102的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于球机102的位置信息指向的位置，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集；其中，第一类待采集对象为：处于远离状态的待采集对象，第二类待采集对象为：处于靠近状态的待采集对象。
其中，球机102在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集，可以为球机102在跟踪第二类待采集对象达到预设时长时对第二类待采集对象进行图像采集，还可以为球机102在跟踪第二类待采集对象直到第二类待采集对象与球机102的距离达到预设长度时对第二类待采集对象进行图像采集，等等，都是合理的，本发明实施例对此不做限定。
可见，对远离球机102的待采集对象直接进行图像采集，对靠近球机102的待采集对象先进行跟踪，待满足预设跟踪条件时再进行图像采集，可以提高所采集的图像的清晰度。
进一步的，在一种实现方式中，枪机101，还可以确定每一第二类待采集对象在目标视频帧中的区域大小，并将所确定的区域大小反馈给球机102；
球机102，还可以接收枪机101反馈的区域大小；并对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在第四类待采集对象满足预设跟踪条件时，对第四类待采集对象进行图像采集；其中，第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到第二预设阈值的第二类待采集对象。
可以理解的，通常枪机101和球机102架设在较为靠近的位置，因此对于处于靠近球机102的第二类待采集对象，在目标视频帧中的区域大小表征了第二类待采集对象距离球机102的远近。当区域大小未达到第二预设阈值时，意味着第四类待采集对象与球机102的距离较远，此时，球机102先对第四类待采集对象进行跟踪，在第四类待采集对象满足预设跟踪条件时，再对第四类待采集对象进行图像采集，相比于直接对第四类待采集对象进行图像采集的方式，可以提高所采集的第四类待采集对象的图像的清晰度。同时，球机102对于第三类待采集对象直接进行图像采集，在保证图像清晰度的情况下，减小了球机102的计算量。
在另一种实现方式中，球机102，具体可以在人行横道的长度小于第三预设阈值时，对第二类待采集对象进行图像采集；在人行横道的长度大于等于第三预设阈值时，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集。
可以理解的，与第二类待采集对象在目标视频帧中的区域大小类似，人行横道的长度可以表征第二类待采集对象距离球机102的远近。当人行横道的长度大于等于第三预设阈值时，意味着第二类待采集对象与球机102的距离较远，此时，球机102先对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，再对第二类待采集对象进行图像采集，相比于直接对第二类待采集对象进行图像采集的方式，可以提高所采集的第二类待采集对象的图像的清晰度。同时，在人行横道的长度小于第三预设阈值时，球机102对于第二类待采集对象直接进行图像采集，在保证图像清晰度的情况下，减小了球机102的计算量。
作为本发明的一个具体实施例，球机102在对各个待采集对象进行图像采集时，还可以针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
可以理解的，鉴于行人闯红灯抓拍任务的特殊性，只需要采集红灯时间内的行人过人行横道的图像，因此当人行横道的指示灯由红灯变为绿灯后，则不采集行人过人行横道的图像。
在一种实现方式中，球机102以队列的形式依次对枪机确定的待采集对象进行图像采集，并且根据人行横道的红绿灯时间信号动态确定感兴趣区域的优先级，进而按照优先级对队列中的待采集对象进行管理。当待采集对象所在感兴趣区域的人行横道指示灯未变为绿灯，该区域对应的优先级最高，球机102优先处理当前队列中该区域的待采集对象，当该区域的人行横道指示灯变为绿灯时，该区域对应的优先级降为最低，则球机102可以将当前队列中该区域的待采集对象剔除，不再进行后续的跟踪和采集图像。
作为本发明的一个具体实施例，为了确保最终采集的图像是行人闯红灯的图像，减少误检，提高抓拍准确率，球机102还可以在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；如果是，对待采集对象进行图像采集。
在一种实现方式中，球机102可以使用预设的分类模型对待采集对象进行分类，分类模型的类别可以包括：人、阴影、动物等。预设分类模型的生成方案可以参见现有技术的方法，在此不做赘述。
作为本发明的一个具体实施例，球机102还可以在判断出待采集对象为人后，确定待采集对象的属性信息。其中，属性信息可以为：行人朝向、性别、年龄等。输出行人的属性信息便于相关人员进行统计和分类，在一种实现方式中，球机102可以使用预设的分类模型来确定行人的属性信息。
综上所述，本发明实施例提供的方案，枪机采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
相应于上述系统实施例，本发明实施例还提供了一种图像采集方法，应用于上述图像采集系统中的枪机，图像采集系统包括：枪机和球机，如图2所示，该方法可以包括：
S201，采集包含人行横道的视频帧，作为目标视频帧；
S202，提取目标视频帧中感兴趣区域内的对象，其中，感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
S203，从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
S204，确定每一待采集对象相对于球机的位置信息；
S205，将所确定的位置信息反馈给球机，以使球机接收枪机反馈的位置信息，转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。
作为本发明的一个具体实施例，上述从所提取对象中选择疑似存在闯红灯行为的对象的步骤，可以包括：
针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，第一类视频帧为：在目标视频帧之前采集的视频帧。
作为本发明的一个具体实施例，该方法还可以包括：
根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于球机的运动状态，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在目标视频帧之前连续采集的视频帧，运动状态包括：用于表示对象远离球机的远离状态和用于表示对象靠近球机的靠近状态；
将所确定的运动状态反馈给球机，以使球机：转向第一类待采集对象相对于球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于球机的位置信息指向的位置，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集；其中，第一类待采集对象为：处于远离状态的待采集对象，第二类待采集对象为：处于靠近状态的待采集对象。
作为本发明的一个具体实施例，该方法还可以包括：
确定每一第二类待采集对象在目标视频帧中的区域大小；
将所确定的区域大小反馈给球机，以使球机：对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在第四类待采集对象满足预设跟踪条件时，对第四类待采集对象进行图像采集；其中，第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
本发明实施例提供的方案，枪机采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，从而使球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
相应于上述系统实施例，本发明实施例还提供了一种图像采集方法，应用于上述图像采集系统中的球机，图像采集系统包括：枪机和球机，如图3所示，该方法可以包括：
S301，接收枪机反馈的每一待采集对象相对于球机的位置信息；
其中，每一待采集对象相对于球机的位置信息为枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于球机的位置信息；其中，感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
S302，转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。
作为本发明的一个具体实施例，该方法还可以包括：
接收枪机反馈的每一待采集对象相对于球机的运动状态，其中，运动状态包括：用于表示对象远离球机的远离状态和用于表示对象靠近球机的靠近状态，每一待采集对象相对于球机的运动状态为枪机根据每一待采集对象的第二类视频帧确定的，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在目标视频帧之前连续采集的视频帧；
相应的，上述转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集的步骤，可以包括：
转向第一类待采集对象相对于球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于球机的位置信息指向的位置，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集，其中，第一类待采集对象为：处于远离状态的待采集对象，第二类待采集对象为：处于靠近状态的待采集对象。
作为本发明的一个具体实施例，该方法还可以包括：
接收枪机反馈的每一第二类待采集对象在目标视频帧中的区域大小；
相应的，上述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，可以包括：
对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在第四类待采集对象满足所述预设跟踪条件时，对第四类待采集对象进行图像采集；其中，第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
作为本发明的一个具体实施例，上述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，可以包括：
在人行横道的长度小于第三预设阈值时，对第二类待采集对象进行图像采集；在人行横道的长度大于等于第三预设阈值时，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集。
作为本发明的一个具体实施例，上述对各个待采集对象进行图像采集的步骤，可以包括：
针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；
如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
作为本发明的一个具体实施例，该方法还可以包括：
在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；
如果是，对待采集对象进行图像采集。
作为本发明的一个具体实施例，该方法还可以包括：
在判断出待采集对象为人后，确定待采集对象的属性信息。
本发明实施例提供的方案，球机通过接收枪机反馈的各个待采集对象相对于球机的位置信息，转向各个待采集对象相对于球机的位置信息指向的位置，从而对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
与上述应用于枪机的方法实施例相对应，本发明实施例还提供了一种图像采集装置，应用于上述图像采集系统中的枪机，所述图像采集系统包括：所述枪机和球机，如图4所示，所述装置可以包括：
采集模块401，用于采集包含人行横道的视频帧，作为目标视频帧；
提取模块402，用于提取所述目标视频帧中感兴趣区域内的对象，其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
选择模块403，用于从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
第一确定模块404，用于确定每一待采集对象相对于所述球机的位置信息；
第一采集模块405，用于将所确定的位置信息反馈给所述球机，以使所述球机接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
作为本发明的一个具体实施例，所述选择模块403，具体可以用于：
针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
作为本发明的一个具体实施例，所述装置还可以包括：
第二确定模块，用于根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
相应的，所述第一采集模块405，还用于将所确定的运动状态反馈给所述球机，以使所述球机：转向第一类待采集对象相对于所述球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集；其中，第一类待采集对象为：处于远离状态的待采集对象，第二类待采集对象为：处于靠近状态的待采集对象。
作为本发明的一个具体实施例，所述装置还可以包括：
第三确定模块，用于确定每一第二类待采集对象在所述目标视频帧中的区域大小；
所述第一采集模块405，还用于将所确定的区域大小反馈给所述球机，以使所述球机：对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在第四类待采集对象满足预设跟踪条件时，对第四类待采集对象进行图像采集；其中，第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
本发明实施例提供的方案，枪机采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，从而使球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
与上述应用于球机的方法实施例相对应，本发明实施例还提供了一种图像采集装置，应用于上述图像采集系统中的球机，所述图像采集系统包括：枪机和所述球机，如图5所示，所述装置可以包括：
接收模块501，用于接收所述枪机反馈的每一待采集对象相对于所述球机的位置信息；其中，所述每一待采集对象相对于所述球机的位置信息为所述枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
第二采集模块502，用于转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
作为本发明的一个具体实施例，所述接收模块501，还可以用于接收所述枪机反馈的每一待采集对象相对于所述球机的运动状态，其中，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态，所述每一待采集对象相对于所述球机的运动状态为所述枪机根据每一待采集对象的第二类视频帧确定的，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧；
相应的，所述第二采集模块502，具体可以用于转向第一类待采集对象相对于所述球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集，其中，第一类待采集对象为：处于远离状态的待采集对象，第二类待采集对象为：处于靠近状态的待采集对象。
作为本发明的一个具体实施例，所述接收模块501，还可以用于接收所述枪机反馈的每一第二类待采集对象在所述目标视频帧中的区域大小；
相应的，所述第二采集模块502，可以用于对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在第四类待采集对象满足所述预设跟踪条件时，对第四类待采集对象进行图像采集；其中，第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
作为本发明的一个具体实施例，所述第二采集模块502，具体可以用于在所述人行横道的长度小于第三预设阈值时，对第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对第二类待采集对象进行跟踪，在第二类待采集对象满足所述预设跟踪条件时，对第二类待采集对象进行图像采集。
作为本发明的一个具体实施例，所述第二采集模块502，具体可以用于针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
作为本发明的一个具体实施例，所述第二采集模块502，具体可以用于在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；如果是，对待采集对象进行图像采集。
作为本发明的一个具体实施例，所述装置还可以包括：
第四确定模块，在所述第二采集模块判断出待采集对象为人后，确定待采集对象的属性信息。
本发明实施例提供的方案，球机通过接收枪机反馈的各个待采集对象相对于球机的位置信息，转向各个待采集对象相对于球机的位置信息指向的位置，从而对各个待采集对象进行图像采集。可见，本发明实施例提供的方案，能够实现对人行横道中行人闯红灯图像的采集。
本发明实施例还提供了一种电子设备，该电子设备具体为上述图像采集系统中的枪机，如图6所示，包括处理器601、通信接口602、存储器603和通信总线604，其中，处理器601，通信接口602，存储器603通过通信总线604完成相互间的通信，
存储器603，用于存放计算机程序；
处理器601，用于执行存储器603上所存放的程序时，实现如下步骤：
采集包含人行横道的视频帧，作为目标视频帧；
提取所述目标视频帧中感兴趣区域内的对象，其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
确定每一待采集对象相对于所述球机的位置信息；
将所确定的位置信息反馈给所述球机，以使所述球机接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图2所示的方法实施例，在此不做赘述。
另外，处理器601执行存储器603上所存放的程序而实现的图像采集方法的其他实现方式，与前述方法实施例部分所提及的实现方式相同，这里也不再赘述。
本发明实施例提供的枪机，采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，从而使球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集，实现了对人行横道中行人闯红灯图像的采集。
本发明实施例还提供了一种电子设备，该电子设备具体为上述图像采集系统中的球机，如图7所示，包括处理器701、通信接口702、存储器703和通信总线704，其中，处理器701，通信接口702，存储器703通过通信总线704完成相互间的通信，
存储器703，用于存放计算机程序；
处理器701，用于执行第二存储器703上所存放的程序时，实现如下步骤：
接收所述枪机反馈的每一待采集对象相对于所述球机的位置信息；其中，所述每一待采集对象相对于所述球机的位置信息为所述枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集。
关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图3所示的方法实施例，在此不做赘述。
另外，处理器701执行存储器703上所存放的程序而实现的图像采集方法的其他实现方式，与前述方法实施例部分所提及的实现方式相同，这里也不再赘述。
本发明实施例提供的球机，通过接收枪机反馈的各个待采集对象相对于球机的位置信息，转向各个待采集对象相对于球机的位置信息指向的位置，从而对各个待采集对象进行图像采集，实现了对人行横道中行人闯红灯图像的采集。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中应用于图像采集系统中的枪机的图像采集方法。
通过运行本发明实施例提供的计算机可读存储介质中存储的指令，枪机采集包含人行横道的视频帧作为目标视频帧，提取目标视频帧中感兴趣区域内的对象，从所提取对象中选择疑似存在闯红灯行为的对象作为待采集对象，确定每一待采集对象相对于球机的位置信息，从而使球机转向各个待采集对象相对于球机的位置信息指向的位置，对各个待采集对象进行图像采集，实现了对人行横道中行人闯红灯图像的采集。
在本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中应用于图像采集系统中的球机的图像采集方法。
通过运行本发明实施例提供的计算机可读存储介质中存储的指令，球机通过接收枪机反馈的各个待采集对象相对于球机的位置信息，转向各个待采集对象相对于球机的位置信息指向的位置，从而对各个待采集对象进行图像采集，实现了对人行横道中行人闯红灯图像的采集。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于方法、装置、电子设备以及计算机可读存储介质实施例而言，由于其基本相似于系统实施例，所以描述的比较简单，相关之处参见系统实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (18)

1.一种图像采集系统，其特征在于，所述系统包括：枪机和球机，其中，
所述枪机，用于采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息，并将所确定的位置信息反馈给所述球机；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
所述球机，用于接收所述枪机反馈的位置信息；转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集；
所述枪机，还用于根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，并将所确定的运动状态反馈给所述球机，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
所述球机，还用于接收所述枪机反馈的运动状态；并具体用于转向第一类待采集对象相对于所述球机的位置信息指向的位置，对所述第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集；其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
2.根据权利要求1所述的系统，其特征在于，
所述枪机，具体用于针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
3.根据权利要求1所述的系统，其特征在于，
所述枪机，还用于确定每一第二类待采集对象在所述目标视频帧中的区域大小，并将所确定的区域大小反馈给所述球机；
所述球机，还用于接收所述枪机反馈的区域大小；并具体用于对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
4.根据权利要求1所述的系统，其特征在于，
所述球机，具体用于在所述人行横道的长度小于第三预设阈值时，对所述第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足所述预设跟踪条件时，对第二类待采集对象进行图像采集。
5.根据权利要求1-4任一项所述的系统，其特征在于，
所述球机，具体用于针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
6.根据权利要求1所述的系统，其特征在于，
所述球机，还用于在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；如果是，对待采集对象进行图像采集。
7.根据权利要求6所述的系统，其特征在于，
所述球机，还用于在判断出待采集对象为人后，确定待采集对象的属性信息。
8.一种图像采集方法，其特征在于，应用于一种图像采集系统中的枪机，所述图像采集系统包括：所述枪机和球机，所述方法包括：
采集包含人行横道的视频帧，作为目标视频帧；
提取所述目标视频帧中感兴趣区域内的对象，其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；
确定每一待采集对象相对于所述球机的位置信息；
将所确定的位置信息反馈给所述球机，以使所述球机接收所述枪机反馈的位置信息，转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集；
根据每一待采集对象的第二类视频帧，确定每一待采集对象相对于所述球机的运动状态，其中，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态；
将所确定的运动状态反馈给所述球机，以使所述球机：转向第一类待采集对象相对于所述球机的位置信息指向的位置，对所述第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集；其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
9.根据权利要求8所述的方法，其特征在于，所述从所提取对象中选择疑似存在闯红灯行为的对象的步骤，包括：
针对每一对象，判断感兴趣区域包含该对象、且连续采集的第一类视频帧的数量是否达到第一预设阈值；如果是，判定该对象为疑似存在闯红灯行为的对象，如果否，判定该对象为不存在闯红灯行为的对象；其中，所述第一类视频帧为：在所述目标视频帧之前采集的视频帧。
10.根据权利要求8所述的方法，其特征在于，所述方法还包括：
确定每一第二类待采集对象在所述目标视频帧中的区域大小；
将所确定的区域大小反馈给所述球机，以使所述球机：对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
11.一种图像采集方法，其特征在于，应用于一种图像采集系统中的球机，所述图像采集系统包括：枪机和所述球机，所述方法包括：
接收所述枪机反馈的每一待采集对象相对于所述球机的位置信息；其中，所述每一待采集对象相对于所述球机的位置信息为所述枪机按照以下方式确定的：采集包含人行横道的视频帧，作为目标视频帧；提取所述目标视频帧中感兴趣区域内的对象；从所提取对象中选择疑似存在闯红灯行为的对象，作为待采集对象；确定每一待采集对象相对于所述球机的位置信息；其中，所述感兴趣区域为：视频帧中处于红灯时间的人行横道区域；
转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集；
接收所述枪机反馈的每一待采集对象相对于所述球机的运动状态，其中，所述运动状态包括：用于表示对象远离所述球机的远离状态和用于表示对象靠近所述球机的靠近状态，所述每一待采集对象相对于所述球机的运动状态为所述枪机根据每一待采集对象的第二类视频帧确定的，一个待采集对象的第二类视频帧为：感兴趣区域包含该待采集对象、且在所述目标视频帧之前连续采集的视频帧；
所述转向各个待采集对象相对于所述球机的位置信息指向的位置，对各个待采集对象进行图像采集的步骤，包括：
转向第一类待采集对象相对于所述球机的位置信息指向的位置，对第一类待采集对象进行图像采集；并转向第二类待采集对象相对于所述球机的位置信息指向的位置，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足预设跟踪条件时，对所述第二类待采集对象进行图像采集，其中，所述第一类待采集对象为：处于远离状态的待采集对象，所述第二类待采集对象为：处于靠近状态的待采集对象。
12.根据权利要求11所述的方法，其特征在于，所述方法还包括：
接收所述枪机反馈的每一第二类待采集对象在所述目标视频帧中的区域大小；
所述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，包括：
对第三类待采集对象进行图像采集；对第四类待采集对象进行跟踪，并在所述第四类待采集对象满足所述预设跟踪条件时，对所述第四类待采集对象进行图像采集；其中，所述第三类待采集对象为：区域大小达到第二预设阈值的第二类待采集对象，所述第四类待采集对象为：区域大小未达到所述第二预设阈值的第二类待采集对象。
13.根据权利要求12所述的方法，其特征在于，所述对第二类待采集对象进行跟踪，在第二类待采集对象满足预设跟踪条件时，对第二类待采集对象进行图像采集的步骤，包括：
在所述人行横道的长度小于第三预设阈值时，对所述第二类待采集对象进行图像采集；在所述人行横道的长度大于等于所述第三预设阈值时，对所述第二类待采集对象进行跟踪，在所述第二类待采集对象满足所述预设跟踪条件时，对所述第二类待采集对象进行图像采集。
14.根据权利要求11-13任一项所述的方法，所述对各个待采集对象进行图像采集的步骤，包括：
针对每一待采集对象，判断待采集对象所在感兴趣区域的人行横道指示灯是否由红灯变为绿灯；
如果否，对待采集对象进行图像采集，如果是，拒绝对待采集对象进行图像采集。
15.根据权利要求11所述的方法，其特征在于，所述方法还包括：
在对每一待采集对象进行图像采集之前，判断待采集对象是否为人；
如果是，对待采集对象进行图像采集。
16.根据权利要求15所述的方法，其特征在于，所述方法还包括：
在判断出待采集对象为人后，确定待采集对象的属性信息。
17.一种枪机，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求8-10任一所述的方法步骤。
18.一种球机，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求11-16任一所述的方法步骤。
CN201810586700.1A 2018-06-08 2018-06-08 一种图像采集系统、方法及装置 Active CN110581979B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810586700.1A CN110581979B (zh) 2018-06-08 2018-06-08 一种图像采集系统、方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810586700.1A CN110581979B (zh) 2018-06-08 2018-06-08 一种图像采集系统、方法及装置

Publications (2)

Publication Number Publication Date
CN110581979A CN110581979A (zh) 2019-12-17
CN110581979B true CN110581979B (zh) 2021-04-09

Family

ID=68809707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810586700.1A Active CN110581979B (zh) 2018-06-08 2018-06-08 一种图像采集系统、方法及装置

Country Status (1)

Country Link
CN (1) CN110581979B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115278014B (zh) * 2022-07-22 2023-09-15 重庆紫光华山智安科技有限公司 一种目标跟踪方法、系统、计算机设备及可读介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103021175A (zh) * 2012-11-12 2013-04-03 上海经达实业发展有限公司 基于达芬奇架构的行人闯红灯视频检测方法及装置
CN103473926A (zh) * 2013-09-11 2013-12-25 无锡加视诚智能科技有限公司 枪球联动道路交通参数采集及违章抓拍系统
CN103700140A (zh) * 2014-01-06 2014-04-02 武汉烽火众智数字技术有限责任公司 用于单枪机-多球机联动的空间建模方法
CN103761514A (zh) * 2014-01-26 2014-04-30 公安部第三研究所 基于广角枪机和多球机实现人脸识别的系统及方法
CN104091446A (zh) * 2014-07-11 2014-10-08 厦门磐道电子有限公司 行人过斑马线的智能化视频分析方法
KR20170139811A (ko) * 2016-06-10 2017-12-20 윤종식 횡단보도 교통사고 예방 방법 및 그 시스템

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103021175A (zh) * 2012-11-12 2013-04-03 上海经达实业发展有限公司 基于达芬奇架构的行人闯红灯视频检测方法及装置
CN103473926A (zh) * 2013-09-11 2013-12-25 无锡加视诚智能科技有限公司 枪球联动道路交通参数采集及违章抓拍系统
CN103700140A (zh) * 2014-01-06 2014-04-02 武汉烽火众智数字技术有限责任公司 用于单枪机-多球机联动的空间建模方法
CN103761514A (zh) * 2014-01-26 2014-04-30 公安部第三研究所 基于广角枪机和多球机实现人脸识别的系统及方法
CN104091446A (zh) * 2014-07-11 2014-10-08 厦门磐道电子有限公司 行人过斑马线的智能化视频分析方法
KR20170139811A (ko) * 2016-06-10 2017-12-20 윤종식 횡단보도 교통사고 예방 방법 및 그 시스템

Also Published As

Publication number Publication date
CN110581979A (zh) 2019-12-17

Similar Documents

Publication Publication Date Title
CN106952303B (zh) 车距检测方法、装置和系统
US11455805B2 (en) Method and apparatus for detecting parking space usage condition, electronic device, and storage medium
WO2022105243A1 (zh) 事件检测方法、装置、电子设备及存储介质
US10212397B2 (en) Abandoned object detection apparatus and method and system
CN108447091B (zh) 目标定位方法、装置、电子设备及存储介质
US9911055B2 (en) Method and system for detection and classification of license plates
US8483481B2 (en) Foreground analysis based on tracking information
JP6488083B2 (ja) 駐車区画占有率判定のための映像および視覚ベースのアクセス制御のハイブリッド方法およびシステム
CN110738150B (zh) 相机联动抓拍方法、装置以及计算机存储介质
CN110298300B (zh) 一种检测车辆违章压线的方法
JP2017033554A (ja) ビデオデータ分析方法、装置及び駐車場モニタリングシステム
CN109377694B (zh) 社区车辆的监控方法及系统
US9704201B2 (en) Method and system for detecting uninsured motor vehicles
CN109766867B (zh) 车辆运行状态确定方法、装置、计算机设备和存储介质
WO2021093625A1 (zh) 智能分析算法选取方法、装置、系统及电子设备
CN111079519A (zh) 多姿态人体检测方法、计算机存储介质及电子设备
CN112733598A (zh) 车辆违法判别方法、装置、计算机设备和存储介质
CN113160272B (zh) 目标跟踪方法、装置、电子设备及存储介质
CN110581979B (zh) 一种图像采集系统、方法及装置
CN116912517B (zh) 相机视野边界的检测方法及装置
CN116152753A (zh) 车辆信息识别方法和系统、存储介质和电子装置
CN110610514B (zh) 实现多目标跟踪的方法、装置、电子设备
CN113221800A (zh) 一种待检测目标的监控判断方法及系统
CN110659384B (zh) 视频结构化分析方法及装置
CN112686136A (zh) 一种对象检测方法、装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant