CN108174152A - 一种目标监控方法及目标监控系统 - Google Patents
一种目标监控方法及目标监控系统 Download PDFInfo
- Publication number
- CN108174152A CN108174152A CN201711455915.1A CN201711455915A CN108174152A CN 108174152 A CN108174152 A CN 108174152A CN 201711455915 A CN201711455915 A CN 201711455915A CN 108174152 A CN108174152 A CN 108174152A
- Authority
- CN
- China
- Prior art keywords
- target
- target object
- control device
- video pictures
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明提供了一种目标监控方法及目标监控系统，该目标监控方法包括：通过控制设备获取全景摄像机拍摄得到的第一视频画面；若所述第一视频画面中存在两个以上目标物体，则所述控制设备分别确定各个目标物体在所述第一视频画面中的位置；之后所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。通过本发明方案，控制相应的球机摄像机对相应位置的目标物体进行跟踪，可以实现对多个目标物体进行及时跟踪，提高监控的实时性，进而使得对目标监控更加智能化。
Description
技术领域
本发明属于视频监控技术领域，尤其涉及一种目标监控方法及目标监控系统。
背景技术
随着社会的不断发展，视频监控技术广泛应用于各种行业，(如金融，公安，交通等行业)，视频监控技术通过对目标进行跟踪、识别等技术实现对目标进行监控。
目前的监控技术没有充分发挥实时主动的作用，往往通过视频监控录制视频图像，在事后对视频图像中的目标物体进行处理分析，当在某个时间多个目标同时出现时无法及时跟踪多个目标物体，从而影响对目标监控的实时性。
发明内容
有鉴于此，本发明实施例提供了一种目标监控方法及目标监控系统，用于实现对多个目标进行跟踪。
本发明实施例的第一方面提供了一种目标监控方法，应用于目标监控系统，所述目标监控系统包括：控制设备，以及分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机：
所述目标监控方法包括：
所述控制设备获取所述全景摄像机拍摄得到的第一视频画面；
若所述第一视频画面中存在两个以上目标物体，则所述控制设备分别确定各个目标物体在所述第一视频画面中的位置；
所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。
基于本发明第一方面，在第一种可能的实现方式中，所述全景摄像机包括：N个镜头，所述N不小于2；
所述控制设备获取所述全景摄像机拍摄得到的第一视频画面包括：
所述控制设备获取所述全景摄像机的各个镜头拍摄得到的视频画面；
所述控制设备将所述各个镜头拍摄得到的视频画面进行图像融合，得到所述第一视频画面。
基于本发明第一方面，或者上述第一方面的第一种实现方式，在第二种可能的实现方式中，所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪还包括：
所述控制设备基于预先配置的映射关系和所述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体；
其中，所述映射关系为：所述第一视频画面中的像素坐标位置与各个球机摄像机的角度和缩放倍数之间空间映射关系。
基于本发明第一方面的第二种实现方式，在第三种可能的实现方式中，所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪之后，还包括：
所述控制设备获取各个球机摄像机跟踪拍摄得到的图像信息；
所述控制设备基于所述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析，得到所述目标物体的结构化描述信息，并将所述目标物体的结构化描述信息进行存储；
所述控制设备将所述图像信息和/或所述结构化描述信息发送至与所述控制设备关联的用户终端。
基于本发明第一方面，在第四种可能实现的方式中，所述控制设备获取所述全景摄像机拍摄得到的第一视频画面之后，还包括；
基于目标物体的预设特征信息，根据机器视觉算法识别所述第一视频画面中是否存在所述目标物体。
本发明实施例的第二方面提供了一种目标监控系统，包括：控制设备，以及分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机：
所述控制设备包括第一获取单元、确定单元和控制单元；
所述第一获取单元用于：获取所述全景摄像机拍摄得到的第一视频画面；
所述确定单元用于：若所述第一视频画面中存在两个以上目标物体，则分别确定各个目标物体在所述第一视频画面中的位置；
所述控制单元用于：基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。
基于本发明第二方面，在第一种可能的实现方式中，所述全景摄像机包括：N个镜头，所述N不小于2；
所述第一获取单元具体用于：
获取所述全景摄像机的各个镜头拍摄得到的视频画面；
将所述各个镜头拍摄得到的视频画面进行图像融合，得到所述第一视频画面。
基于本发明第二方面，或者上述第二方面的第一种实现方式，在第二种可能的实现方式中，所述控制单元还用于：
基于预先配置的映射关系和所述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体；
其中，所述映射关系为：所述第一视频画面中的像素坐标位置与各个球机摄像机的角度之间空间映射关系。
基于本发明第二方面，在第三种可能的实现方式中，所述控制设备还包括第二获取单元、分析存储单元和发送单元；
所述第二获取单元用于：获取各个球机摄像机跟踪目标物体拍摄得到的图像信息；
所述分析存储单元用于：基于所述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析，得到所述目标物体的结构化描述信息，并将所述目标物体的结构化描述信息进行存储；
所述发送单元用于：将所述图像信息和/或所述结构化描述信息发送至与所述控制设备关联的用户终端。
本发明实施例的第三方面提供了一种控制设备，应用于目标监控系统，所述目标监控系统还包括：分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机，所述控制设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面或者上述第一方面任一可能实现方式中提及的方法。
在本发明技术方案中，通过控制设备获取所述全景摄像机拍摄得到的第一视频画面，若所述第一视频画面中存在两个以上目标物体，则所述控制设备分别确定各个目标物体在所述第一视频画面中的位置；之后所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪，因此，通过控制相应的球机摄像机对相应位置的目标物体进行跟踪，可以实现对多个目标物体进行及时跟踪，提高监控的实时性，进而使得对目标监控更加智能化。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1是本发明提供的目标监控系统架构示意图；
图2是本发明提供的目标监控方法一个实施例流程示意图；
图3是本发明提供的目标监控方法另一个实施例流程示意图；
图4是本发明提供的目标监控系统一个实施例结构示意图；
图5是本发明提供的控制设备一个实施例结构示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。
应理解，下述方法实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对各实施例的实施过程构成任何限定。
为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。
实施例一
本发明实施例提供的一种目标监控方法，应用于目标监控系统，上述目标监控系统如图1所示，包括：控制设备101，以及分别与上述控制设备101连接的全景摄像机102、用户终端103和两台以上球机摄像机104。
图2提供了一种目标监控方法的流程示意图，如图2所示，上述目标监控方法包括：
步骤201、控制设备获取全景摄像机拍摄得到的第一视频画面；
本发明实施例中，上述全景摄像机为能对一个较大场景进行全角度监控的摄像机，并能实现对同一个较大场景的无间断拍摄，可以解决普通摄像机拍摄范围小和多方面监控画面不连贯的问题。可选的，上述控制设备可以是服务器或者其它控制设备，此处不做限定。
具体的，上述全景摄像机包括N个镜头，上述N不小于2。上述控制设备获取上述全景摄像机拍摄得到的第一视频画面包括：上述控制设备获取上述全景摄像机的N个镜头拍摄得到的视频画面；上述控制设备将上述各个镜头拍摄得到的视频画面进行图像融合，得到所述第一视频画面。
在一种应用场景中，例如，在上述全景摄像机内部安装四个光学镜头(即N为4)，通过四个光学镜头同时采集相同分辨率的四个视频图画面信息，由控制设备根据图像分析算法提取上述四个视频图像中相邻图像之间的公共像素点信息，通过图像拼接合成技术将上述四个视频图像拼接合成一个分辨率和视觉范围更大的视频画面(即上述第一视频画面)。当然，可以在全景摄像机内部通过图像分析算法将上述各个镜头拍摄得到的视频画面进行图像融合，得到上述第一视频画面。
当然，上述全景摄像机可以是由其它摄像机实现对一个较大场景进行全角度的监控，例如，采用鱼眼摄像机独立实现大范围的监控，此处不做限定。
或者，可通过调整多个固定摄像机安装的角度和位置，使相邻固定摄像机之间的画面部分重叠(例如重叠百分之十左右)，通过服务器或者其它控制设备同时分别获取多个固定摄像机的视频画面，再将上述多个固定摄像机的视频画面通过图像融合得到一个分辨率和视觉范围更大的视频画面(即上述第一视频画面)。
步骤202、若上述第一视频画面中存在两个以上目标物体，则上述控制设备分别确定各个目标物体在上述第一视频画面中的位置；
本发明实施例中，上述目标物体可以是行人、机动车、非机动车或者视频画面中的其它物体。若上述第一视频画面中存在两个以上的目标物体，则可通过检测算法自动检测是否存在多个的目标物体；也可通过人工观察是否存在多个目标物体，再通过相关输入设备手动确定上述第一视频中存在的多个目标物体。若上述第一视频画面中存在两个以上目标物体，则可分别确定各个目标在上述第一视频画面中的位置，具体的，上述确定各个目标在上述第一视频画面中的位置可以是确定各个目标在上述第一视频画面中所占的像素坐标位置。
需要说明的是，若上述第一视频画面中只存在单个目标物体，则上述控制设备确定上述单个目标物体在上述第一视频画面中的位置。
具体的，可基于目标物体的预设特征信息，根据机器视觉算法识别上述第一视频画面中是否存在目标物体。在一种应用场景中，若上述预设特征信息为黑色车辆，则根据机器视觉算法识别上述第一视频画面中是否存在黑色车辆的目标物体；在另一种应用场景中，若需要监控某重要场所是否有入侵目标，则将上述预设特征信息设置为移动的目标物体，例如，移动的目标物体可以是行人、机动车和非机动车，根据机器视觉算法识别上述第一视频画面中是否存在移动的目标物体。当然，上述预设特征信息可以是任何关于目标的其它信息，此处不做限定。
步骤203、上述控制设备基于上述各个目标物体在上述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪；
在步骤203中，当步骤202分别确定出各个目标物体在上述第一视频画面中的位置后，可根据上述各个目标物体在上述第一视频画面中的位置控制相应的球机摄像机对各个目标物体进行跟踪，即通过多个球机摄像机分别对各个目标进行跟踪，其中，上述的球机摄像机可以是PTZ摄像机。
可选的，上述控制设备基于上述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪可以为：上述控制设备基于预先配置的映射关系和上述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体。其中，上述映射关系为：上述第一视频画面中的像素坐标位置与各个球机摄像机的角度和缩放倍数之间空间映射关系。例如，在一种应用场景中，可以预先标定视频画面中的像素坐标位置信息与各个球机摄像机(如是PTZ摄像机)的角度和缩放倍数之间的关系，当检测到多个目标物体时，则可以根据各个目标物体所占像素坐标的位置计算出相应的PTZ摄像机需要上、下、左、右移动位置和缩放的大小，并发送控制命令去控制相应PTZ摄像机跟踪和识别目标物体。从而可自动将镜头拉近至目标物体，实现自动缩放，从而对目标的监控更清晰。
为便于更好的理解本发明实施例中的目标监控方法，下面以一具体应用场景为例，对本发明实施例中的目标监控方法进行说明。在此应用场景例中，预先在交通道路的重点路段安装全景摄像机和三台球机摄像机。若需要检测一辆黑色的嫌疑车辆，则预先输入目标的特征信息为黑色车辆，通过机器视觉算法识别全景摄像机拍摄的视频画面中是否存在黑色车辆。若检测到三辆黑色车辆，即存在三个目标物体(设分别是目标物体A、目标物体B和目标物体C)，则控制设备分析上述三个目标物体所在的位置，根据上述三个目标物体所在的位置，可以通过智能分析，控制三台球机摄像机中一台球机摄像机对目标物体A进行跟踪(如可以选择离目标物体A最近的的球机摄像机对目标物体A进行跟踪)，在剩下两台球机摄像机中控制一台对目标物体B进行跟踪，控制最后一台球机摄像机对目标物体C进行跟踪，从而同时可以跟踪多个目标物体。当然通过多个球机摄像机分别对各个目标进行跟踪，可以随机分配相应的球机摄像机对各个目标进行跟踪，或者通过其它智能分析算法进行分配相应的球机摄像机对各个目标进行跟踪，此处不做限定。
由此可见，在本发明实施例中，通过控制设备获取上述全景摄像机拍摄得到的第一视频画面，若上述第一视频画面中存在两个以上目标物体，则上述控制设备分别确定各个目标物体在所述第一视频画面中的位置；之后上述控制设备基于上述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪，因此，通过控制相应的球机摄像机对相应位置的目标物体进行跟踪，可以实现对多个目标物体进行及时跟踪，提高监控的实时性，进而使得对目标监控更加智能化。
实施例二
本发明实施例提供的另一种目标监控方法，应用于目标监控系统，上述目标监控系统如图1所示，包括：控制设备101，以及分别与上述控制设备101连接的全景摄像机102、用户终端103和两台以上球机摄像机104。
图3提供了一种目标监控方法的流程示意图，如图3所示，上述目标监控方法包括：
步骤301、控制设备获取全景摄像机拍摄得到的第一视频画面；
步骤302、若上述第一视频画面中存在两个以上目标物体，则上述控制设备分别确定各个目标物体在上述第一视频画面中的位置；
步骤303、上述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪；
在本发明实施例中，上述步骤301、302和303分别与上述步骤201、202和203相同，具体可参见上述步骤201至203的相关描述，此处不再赘述。
步骤304、上述控制设备获取各个球机摄像机跟踪拍摄得到的图像信息；
在本发明实施例中，上述控制设备获取各个球机摄像机跟踪拍摄得到的图像信息，可用球机摄像机对目标物体进行跟踪和识别，并对目标物体进行拉近放大拍摄得到目标物体相关的画面信息。
步骤305、上述控制设备基于上述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析，得到目标物体的结构化描述信息，并将所述目标物体的结构化描述信息进行存储；
在本发明实施例中，上述控制设备基于上述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析可先通过深度学习提取出上述目标物体的特性(如目标物体的纹理、形状、颜色和运动等)，即对目标物体最直观的的感受，再对上述目标物体进行结构化描述，即反应的是对目标物体的理解，从而得到目标物体的结构化描述信息，并将目标物体的结构化信息存储至数据库中。例如若目标物体为一辆机动车，先提取该机动车的外形，机动车外形的形状是对机动车的最直观感受，对上述机动车进行结构化描述(如通过机动车的外形进行分析机动车是小轿车还是大货车)，即属于对目标物体的理解。
在一种应用场景中，若目标物体为行人，上述对目标物体的结构化分析，可得到目标的结构化描述信息可为行人的性别、年龄段以及附属物体(如衣服)等一种或多种详细信息；若目标物体为机动车，上述对目标物体的结构化分析，可得到目标的结构化描述信息，目标的结构化描述信息可以是机动车的品牌、年款、车身颜色、车辆类型、车牌颜色、车牌号、运动方向等一种或多种属性的详细信息；若目标物体为非机动车，上述对目标物体的结构化分析，可得到目标的结构化描述信息，目标的结构化描述信息可以是非机动车的类型、车身颜色、角度、骑行人员性别、附属物品等一种或多种属性的详细信息。
步骤306、上述控制设备将上述图像信息和/或上述结构化描述信息发送至与上述控制设备关联的用户终端；
在本发明实施例中，上述控制设备将上述图像信息和/或上述结构化描述信息发送至与所述控制设备关联的用户终端，可先通过用户终端向上述控制设备建立目标属性的条件检索和特征码比对的以图搜图服务，控制设备从数据库中将匹配到目标物体的图像信息和/或结构化描述信息发送至用户终端，并进行展示。
在另一种应用场景中，也可以是用球机摄像机对目标物体进行跟踪和识别后，通过深度学习提取目标物体的详细信息，并将上述详细信息发送至与上述控制终端关联的用户终端。例如，若目标物体为一辆黑色的车，对上述黑车的车进行跟踪和识别后，通过深度学习提取上述黑色车的详细信息(如车牌号、车辆类型，车辆品牌等信息)。将目标物体的详细信息发送至与上述控制终端关联的用户终端进行展示，从而使得用户终端可以实时获取目标的详细信息。
由此可见，在本发明实施例中，通过控制设备获取上述全景摄像机拍摄得到的第一视频画面，若上述第一视频画面中存在两个以上目标物体，则上述控制设备分别确定各个目标物体在所述第一视频画面中的位置；之后上述控制设备基于上述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪，因此，通过控制相应的球机摄像机对相应位置的目标物体进行跟踪，可以实现对多个目标物体进行及时跟踪，提高监控的实时性，进而使得对目标监控更加智能化。对多个目标物体进行实时跟踪后，对上述多个目标物体进行结构化分析，从而得到多个目标物体的结构化分析结果，并将上述目标物体的结构化分析结果进行存储到智能大数据库中，可以给客户端提供条件检索和以图搜图的功能，从而实现了视频结构化。
实施例三
图4是本发明实施例提供的一种以两台球机摄像机为例的目标监控系统结构示意图，为了便于说明，仅示出了与本发明实施例相关的部分，如图4所示，本发明实施例中的目标监控系统包括：控制设备401，以及分别与上述控制设备401连接的全景摄像机402、用户终端403和球机摄像机404，其中，球机摄像机404包括球机摄像机4041和球机摄像机4042。
在本发明实施例中，上述全景摄像机402、用户终端403和球机摄像机404与上述控制设备401连接可以是通过无线或者有线连接。
全景摄像机402包括：N个镜头，上述N不小于2；
控制设备401包括第一获取单元4011、确定单元4012、控制单元4013、第二获取单元4014、分析存储单元4015和发送单元4016；
第一获取单元4011用于：获取上述全景摄像机拍摄得到的第一视频画面；
可选的，第一获取单元4011具体用于：获取上述全景摄像机的各个镜头拍摄得到的视频画面；将上述各个镜头拍摄得到的视频画面进行图像融合，得到上述第一视频画面。
确定单元4012用于：若上述第一视频画面中存在两个以上目标物体，则分别确定各个目标物体在上述第一视频画面中的位置；
控制单元4013用于：基于上述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。
可选的，控制单元4013还用于：基于预先配置的映射关系和上述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体；
其中，上述映射关系为：上述第一视频画面中的像素坐标位置与各个球机摄像机的角度之间空间映射关系。
控制设备401还包括识别单元，上述识别单元用于在获取上述全景摄像机拍摄得到的第一视频画面之后，基于目标物体的预设特征信息，根据机器视觉算法识别上述第一视频画面中是否存在上述目标物体。
第二获取单元4014用于：获取各个球机摄像机跟踪目标物体拍摄得到的图像信息；
分析存储单元4015用于：基于上述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对上述目标物体进行结构化分析，得到目标物体的结构化描述信息，并将上述目标物体的结构化描述信息进行存储；
发送单元4016用于：将上述图像信息和/或上述结构化描述信息发送至与所述控制设备关联的用户终端。
由此可见，在本发明实施例中，通过第一获取单元获取上述全景摄像机拍摄得到的第一视频画面，若上述第一视频画面中存在两个以上目标物体，则上述确定单元分别确定各个目标物体在所述第一视频画面中的位置；之后上述控制单元基于上述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪，因此，通过控制相应的球机摄像机对相应位置的目标物体进行跟踪，可以实现对多个目标物体进行及时跟踪，提高监控的实时性，进而使得对目标监控更加智能化。
实施例四
本发明实施例提供了的一种控制设备。如图5所示，本发明实施例的控制设备500包括：处理器501、存储器502以及存储在上述存储器502中并可在上述处理器501上运行的计算机程序503。上述处理器501执行上述计算机程序503时实现上述目标监控方法实施例中的步骤，例如图2所示的步骤201至203，或者如图3所示的步骤301至306。
示例性的，上述计算机程序503可以被分割成一个或多个单元，上述一个或者多个单元被存储在上述存储器502中，并由上述处理器501执行，以完成本发明。上述一个或多个单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述上述计算机程序503在上述控制设备500中的执行过程。例如，上述计算机程序503可以被分割成第一获取单元，确定单元，控制单元，第二获取单元，分析存储单元，发送单元，各单元具体功能在上述实施例三中已有描述，此处不在赘述。
上述控制设备500可以是计算机、笔记本、掌上电脑及云端服务器等计算设备。上述控制设备500可包括，但不仅限于，处理器501、存储器502。本领域技术人员可以理解，图5仅仅是控制设备500的示例，并不构成对控制设备500的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如上述控制设备500还可以包括输入输出设备、网络接入设备、总线等。
所称处理器501可以是中央处理单元(Central Processing Unit，CPU)，还可以是其它通用处理器、图像处理器(Graphics Processing Unit，GPU)、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific IntegratedCircuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
上述存储器502可以是控制设备500的内部存储单元，例如控制设备500的硬盘或内存。上述存储器502也可以是上述控制设备500的外部存储设备，例如上述控制设备500上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，上述存储器502还可以既包括上述控制设备500的内部存储单元也包括外部存储设备。上述存储器502用于存储上述计算机程序以及上述控制设备500所需的其它程序和数据。上述存储器502还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将上述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，上述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，上述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，上述计算机程序包括计算机程序代码，上述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。上述计算机可读介质可以包括：能够携带上述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，上述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。
Claims (10)
1.一种目标监控方法，应用于目标监控系统，其特征在于，所述目标监控系统包括：控制设备，以及分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机：
所述目标监控方法包括：
所述控制设备获取所述全景摄像机拍摄得到的第一视频画面；
若所述第一视频画面中存在两个以上目标物体，则所述控制设备分别确定各个目标物体在所述第一视频画面中的位置；
所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。
2.如权利要求1所述的目标监控方法，其特征在于，所述全景摄像机包括：N个镜头，所述N不小于2；
所述控制设备获取所述全景摄像机拍摄得到的第一视频画面包括：
所述控制设备获取所述全景摄像机的各个镜头拍摄得到的视频画面；
所述控制设备将所述各个镜头拍摄得到的视频画面进行图像融合，得到所述第一视频画面。
3.如权利要求1或2所述的目标监控方法，其特征在于，所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪还包括：
所述控制设备基于预先配置的映射关系和所述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体；
其中，所述映射关系为：所述第一视频画面中的像素坐标位置与各个球机摄像机的角度和缩放倍数之间空间映射关系。
4.如权利要求3所述的目标监控方法，其特征在于，所述控制设备基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪之后，还包括：
所述控制设备获取各个球机摄像机跟踪目标物体拍摄得到的图像信息；
所述控制设备基于所述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析，得到所述目标物体的结构化描述信息，并将所述目标物体的结构化描述信息进行存储；
所述控制设备将所述图像信息和/或所述结构化描述信息发送至与所述控制设备关联的用户终端。
5.如权利要求1所述的目标监控方法，其特征在于，所述控制设备获取所述全景摄像机拍摄得到的第一视频画面之后，还包括；
基于目标物体的预设特征信息，根据机器视觉算法识别所述第一视频画面中是否存在所述目标物体。
6.一种目标监控系统，其特征在于，所述目标监控系统包括：控制设备，以及分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机：
所述控制设备包括第一获取单元、确定单元和控制单元；
所述第一获取单元用于：获取所述全景摄像机拍摄得到的第一视频画面；
所述确定单元用于：若所述第一视频画面中存在两个以上目标物体，则分别确定各个目标物体在所述第一视频画面中的位置；
所述控制单元用于：基于所述各个目标物体在所述第一视频画面中的位置，控制相应的球机摄像机对相应位置的目标物体进行跟踪。
7.如权利要求6所述的目标监控系统，其特征在于，所述全景摄像机包括：N个镜头，所述N不小于2；
所述第一获取单元具体用于：
获取所述全景摄像机的各个镜头拍摄得到的视频画面；
将所述各个镜头拍摄得到的视频画面进行图像融合，得到所述第一视频画面。
8.如权利要求6或7所述的目标监控系统，其特征在于，所述控制单元还用于：
基于预先配置的映射关系和所述各个目标物体在所述第一视频画面中的相应位置，控制相应球机摄像机的角度与缩放倍数，以跟踪和识别相应位置的目标物体；
其中，所述映射关系为：所述第一视频画面中的像素坐标位置与各个球机摄像机的角度之间空间映射关系。
9.如权利要求8所述的目标监控系统，其特征在于，所述控制设备还包括第二获取单元、分析存储单元和发送单元；
所述第二获取单元用于：获取各个球机摄像机跟踪目标物体拍摄得到的图像信息；
所述分析存储单元用于：基于所述第一视频画面和球机摄像机跟踪目标物体拍摄得到的图像信息，对所述目标物体进行结构化分析，得到目标物体的结构化描述信息，并将所述目标物体的结构化描述信息进行存储；
所述发送单元用于：将所述图像信息和/或所述结构化描述信息发送至与所述控制设备关联的用户终端。
10.一种控制设备，应用于目标监控系统，其特征在于，所述目标监控系统还包括：分别与所述控制设备连接的全景摄像机、用户终端和两台以上球机摄像机，所述控制设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711455915.1A CN108174152A (zh) | 2017-12-28 | 2017-12-28 | 一种目标监控方法及目标监控系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711455915.1A CN108174152A (zh) | 2017-12-28 | 2017-12-28 | 一种目标监控方法及目标监控系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108174152A true CN108174152A (zh) | 2018-06-15 |
Family
ID=62519198
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711455915.1A Pending CN108174152A (zh) | 2017-12-28 | 2017-12-28 | 一种目标监控方法及目标监控系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108174152A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109165634A (zh) * | 2018-09-21 | 2019-01-08 | 深圳市九洲电器有限公司 | 一种智能识别方法、装置及系统 |
| CN110008888A (zh) * | 2019-03-29 | 2019-07-12 | 上海交通大学 | 智能监控网络中的综合特征目标检测方法和系统 |
| CN110177256A (zh) * | 2019-06-17 | 2019-08-27 | 北京影谱科技股份有限公司 | 一种追踪视频数据获取方法和装置 |
| CN110706447A (zh) * | 2019-10-14 | 2020-01-17 | 浙江大华技术股份有限公司 | 灾情位置的确定方法、装置、存储介质及电子装置 |
| CN110807804A (zh) * | 2019-11-04 | 2020-02-18 | 腾讯科技（深圳）有限公司 | 用于目标跟踪的方法、设备、装置和可读存储介质 |
| WO2020057353A1 (zh) * | 2018-09-21 | 2020-03-26 | 深圳市九洲电器有限公司 | 基于高速球的物体跟踪方法、监控服务器、视频监控系统 |
| CN111402304A (zh) * | 2020-03-23 | 2020-07-10 | 浙江大华技术股份有限公司 | 目标对象的跟踪方法、装置及网络视频录像设备 |
| CN112153334A (zh) * | 2020-09-15 | 2020-12-29 | 公安部第三研究所 | 用于安全管理的智能视频盒子设备及相应的智能视频分析方法 |
| CN112165629A (zh) * | 2020-09-30 | 2021-01-01 | 中国联合网络通信集团有限公司 | 智能直播方法、可穿戴设备及智能直播系统 |
| CN112818750A (zh) * | 2021-01-05 | 2021-05-18 | 青岛海尔科技有限公司 | 物品定位方法、装置、可读存储介质和电子装置 |
| CN113691775A (zh) * | 2021-08-16 | 2021-11-23 | 成都民航空管科技发展有限公司 | 一种航空器智能追踪系统和方法 |
| CN115955550A (zh) * | 2023-03-15 | 2023-04-11 | 浙江宇视科技有限公司 | 一种gpu集群的图像分析方法与系统 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101783881A (zh) * | 2010-03-05 | 2010-07-21 | 公安部第三研究所 | 一种具有视频结构化描述功能的智能网络摄像机 |
| US20130250047A1 (en) * | 2009-05-02 | 2013-09-26 | Steven J. Hollinger | Throwable camera and network for operating the same |
| CN103500230A (zh) * | 2013-10-25 | 2014-01-08 | 苏州千视通信科技有限公司 | 基于样本图像的视频检索方法 |
| CN103716594A (zh) * | 2014-01-08 | 2014-04-09 | 深圳英飞拓科技股份有限公司 | 基于运动目标检测的全景拼接联动方法及装置 |
| CN103716595A (zh) * | 2014-01-08 | 2014-04-09 | 深圳英飞拓科技股份有限公司 | 全景拼接摄像机和球机联动控制方法及装置 |
| CN103761514A (zh) * | 2014-01-26 | 2014-04-30 | 公安部第三研究所 | 基于广角枪机和多球机实现人脸识别的系统及方法 |
| CN104125433A (zh) * | 2014-07-30 | 2014-10-29 | 西安冉科信息技术有限公司 | 基于多球机联动结构的视频运动目标监控方法 |
| CN104270620A (zh) * | 2014-10-27 | 2015-01-07 | 成都新舟锐视科技有限公司 | 集成多摄像头实时联动智能跟踪预警系统 |
| CN105744227A (zh) * | 2016-02-22 | 2016-07-06 | 北京深博达智能系统有限公司 | 一种开放式1+n枪球联动系统 |
| CN105744226A (zh) * | 2016-02-22 | 2016-07-06 | 北京深博达智能系统有限公司 | 一种基于摄像机坐标系的1+n枪球联动方法 |
| CN106791715A (zh) * | 2017-02-24 | 2017-05-31 | 深圳英飞拓科技股份有限公司 | 分级联控智能监控方法及系统 |
| CN206272770U (zh) * | 2016-12-21 | 2017-06-20 | 北京中电兴发科技有限公司 | 一种车辆和人脸卡口系统 |
| CN107093188A (zh) * | 2017-04-12 | 2017-08-25 | 湖南源信光电科技股份有限公司 | 一种基于全景摄像机和高速球机的智能联动与跟踪方法 |
-
2017
- 2017-12-28 CN CN201711455915.1A patent/CN108174152A/zh active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130250047A1 (en) * | 2009-05-02 | 2013-09-26 | Steven J. Hollinger | Throwable camera and network for operating the same |
| CN101783881A (zh) * | 2010-03-05 | 2010-07-21 | 公安部第三研究所 | 一种具有视频结构化描述功能的智能网络摄像机 |
| CN103500230A (zh) * | 2013-10-25 | 2014-01-08 | 苏州千视通信科技有限公司 | 基于样本图像的视频检索方法 |
| CN103716594A (zh) * | 2014-01-08 | 2014-04-09 | 深圳英飞拓科技股份有限公司 | 基于运动目标检测的全景拼接联动方法及装置 |
| CN103716595A (zh) * | 2014-01-08 | 2014-04-09 | 深圳英飞拓科技股份有限公司 | 全景拼接摄像机和球机联动控制方法及装置 |
| CN103761514A (zh) * | 2014-01-26 | 2014-04-30 | 公安部第三研究所 | 基于广角枪机和多球机实现人脸识别的系统及方法 |
| CN104125433A (zh) * | 2014-07-30 | 2014-10-29 | 西安冉科信息技术有限公司 | 基于多球机联动结构的视频运动目标监控方法 |
| CN104270620A (zh) * | 2014-10-27 | 2015-01-07 | 成都新舟锐视科技有限公司 | 集成多摄像头实时联动智能跟踪预警系统 |
| CN105744227A (zh) * | 2016-02-22 | 2016-07-06 | 北京深博达智能系统有限公司 | 一种开放式1+n枪球联动系统 |
| CN105744226A (zh) * | 2016-02-22 | 2016-07-06 | 北京深博达智能系统有限公司 | 一种基于摄像机坐标系的1+n枪球联动方法 |
| CN206272770U (zh) * | 2016-12-21 | 2017-06-20 | 北京中电兴发科技有限公司 | 一种车辆和人脸卡口系统 |
| CN106791715A (zh) * | 2017-02-24 | 2017-05-31 | 深圳英飞拓科技股份有限公司 | 分级联控智能监控方法及系统 |
| CN107093188A (zh) * | 2017-04-12 | 2017-08-25 | 湖南源信光电科技股份有限公司 | 一种基于全景摄像机和高速球机的智能联动与跟踪方法 |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020057353A1 (zh) * | 2018-09-21 | 2020-03-26 | 深圳市九洲电器有限公司 | 基于高速球的物体跟踪方法、监控服务器、视频监控系统 |
| CN109165634A (zh) * | 2018-09-21 | 2019-01-08 | 深圳市九洲电器有限公司 | 一种智能识别方法、装置及系统 |
| CN110008888A (zh) * | 2019-03-29 | 2019-07-12 | 上海交通大学 | 智能监控网络中的综合特征目标检测方法和系统 |
| CN110177256B (zh) * | 2019-06-17 | 2021-12-14 | 北京影谱科技股份有限公司 | 一种追踪视频数据获取方法和装置 |
| CN110177256A (zh) * | 2019-06-17 | 2019-08-27 | 北京影谱科技股份有限公司 | 一种追踪视频数据获取方法和装置 |
| CN110706447A (zh) * | 2019-10-14 | 2020-01-17 | 浙江大华技术股份有限公司 | 灾情位置的确定方法、装置、存储介质及电子装置 |
| CN110807804A (zh) * | 2019-11-04 | 2020-02-18 | 腾讯科技（深圳）有限公司 | 用于目标跟踪的方法、设备、装置和可读存储介质 |
| CN110807804B (zh) * | 2019-11-04 | 2023-08-29 | 腾讯科技（深圳）有限公司 | 用于目标跟踪的方法、设备、装置和可读存储介质 |
| CN111402304A (zh) * | 2020-03-23 | 2020-07-10 | 浙江大华技术股份有限公司 | 目标对象的跟踪方法、装置及网络视频录像设备 |
| CN112153334A (zh) * | 2020-09-15 | 2020-12-29 | 公安部第三研究所 | 用于安全管理的智能视频盒子设备及相应的智能视频分析方法 |
| CN112153334B (zh) * | 2020-09-15 | 2023-02-21 | 公安部第三研究所 | 用于安全管理的智能视频盒子设备及相应的智能视频分析方法 |
| CN112165629A (zh) * | 2020-09-30 | 2021-01-01 | 中国联合网络通信集团有限公司 | 智能直播方法、可穿戴设备及智能直播系统 |
| CN112165629B (zh) * | 2020-09-30 | 2022-05-13 | 中国联合网络通信集团有限公司 | 智能直播方法、可穿戴设备及智能直播系统 |
| CN112818750A (zh) * | 2021-01-05 | 2021-05-18 | 青岛海尔科技有限公司 | 物品定位方法、装置、可读存储介质和电子装置 |
| CN113691775A (zh) * | 2021-08-16 | 2021-11-23 | 成都民航空管科技发展有限公司 | 一种航空器智能追踪系统和方法 |
| CN115955550A (zh) * | 2023-03-15 | 2023-04-11 | 浙江宇视科技有限公司 | 一种gpu集群的图像分析方法与系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108174152A (zh) | 一种目标监控方法及目标监控系统 | |
| CN106952303B (zh) | 车距检测方法、装置和系统 | |
| US10740964B2 (en) | Three-dimensional environment modeling based on a multi-camera convolver system | |
| CN110443210B (zh) | 一种行人跟踪方法、装置以及终端 | |
| US8989506B1 (en) | Incremental image processing pipeline for matching multiple photos based on image overlap | |
| CN104732210A (zh) | 目标人脸跟踪方法及电子设备 | |
| US11461980B2 (en) | Methods and systems for providing a tutorial for graphic manipulation of objects including real-time scanning in an augmented reality | |
| TW202026948A (zh) | 活體檢測方法、裝置以及儲存介質 | |
| CN110555876B (zh) | 用于确定位置的方法和装置 | |
| AU2020309094B2 (en) | Image processing method and apparatus, electronic device, and storage medium | |
| US20200250401A1 (en) | Computer system and computer-readable storage medium | |
| CN108629799B (zh) | 一种实现增强现实的方法及设备 | |
| US11017557B2 (en) | Detection method and device thereof | |
| CN110084765A (zh) | 一种图像处理方法、图像处理装置及终端设备 | |
| CN109961501A (zh) | 用于建立三维立体模型的方法和装置 | |
| JP2018533124A (ja) | 注視仮想オブジェクト識別モジュール、注視半透過性を実現するためのシステム、および関連する方法 | |
| CN111291646A (zh) | 一种人流量统计方法、装置、设备及存储介质 | |
| CN111788533A (zh) | 基于立体视觉的车辆姿态估计的方法和系统 | |
| CN116012609A (zh) | 一种环视鱼眼多目标跟踪方法、装置、电子设备及介质 | |
| US20230091536A1 (en) | Camera Placement Guidance | |
| CN116017129A (zh) | 一种补光灯角度调整方法、装置、系统、设备和介质 | |
| CN114913470A (zh) | 一种事件检测方法及装置 | |
| CN114882073A (zh) | 目标跟踪方法和装置，介质和计算机设备 | |
| CN113643320A (zh) | 图像处理方法及装置、电子设备及计算机可读存储介质 | |
| Hu et al. | Cell-based visual surveillance with active cameras for 3D human gaze computation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180615 |
|
| RJ01 | Rejection of invention patent application after publication |