CN106454229A - 一种监测方法、摄像装置和图像处理设备和监测系统 - Google Patents

一种监测方法、摄像装置和图像处理设备和监测系统 Download PDF

Info

Publication number
CN106454229A
CN106454229A CN201610852549.2A CN201610852549A CN106454229A CN 106454229 A CN106454229 A CN 106454229A CN 201610852549 A CN201610852549 A CN 201610852549A CN 106454229 A CN106454229 A CN 106454229A
Authority
CN
China
Prior art keywords
monitoring
camera
picture
monitoring objective
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610852549.2A
Other languages
English (en)
Inventor
刘鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Idealsee Technology Co Ltd
Original Assignee
Chengdu Idealsee Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Idealsee Technology Co Ltd filed Critical Chengdu Idealsee Technology Co Ltd
Priority to CN201610852549.2A priority Critical patent/CN106454229A/zh
Publication of CN106454229A publication Critical patent/CN106454229A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种监测方法、摄像装置和图像处理设备和监测系统，该监测方法包括：通过全局曝光摄像头对预设空间进行拍摄，获得监测图像；将监测图像与预设空间的标准图像进行对比，判断预设空间内是否存在监测目标；在判断结果为是时，开启彩色摄像头拍摄监测目标获得彩色跟踪图像，以及开启飞行时间摄像头拍摄监测目标获得深度跟踪图像；根据深度跟踪图像，确定监测目标的位置信息，以及根据彩色跟踪图像，确定监测目标的外表特征信息；将监测目标的外表特征信息与预存的外表特征信息集合进行匹配。本发明公开的技术方案，响应速度较快，同时能够对预设空间中的监测目标进行识别，所以满足了人们对视频监控越来越高的要求。

Description

一种监测方法、摄像装置和图像处理设备和监测系统
技术领域
本发明涉及视频监控领域，尤其涉及一种监测方法、摄像装置和图像处理设备和监测系统和监测系统。
背景技术
目前，在视频监控领域中，一般是通过普通摄像头对预设空间进行拍摄，并对获得的图像进行移动侦测等分析，还能够根据分析结果进行报警等处理，从而实现对该预设空间的监测。
但是，这类方式由于通过普通摄像头对预设空间进行拍摄时获取的图像来进行分析，数据处理量较大而导致响应速度较慢，同时也无法根据获取的图像对预设空间中的可疑目标进行识别，所以无法满足人们对视频监控越来越高的要求。
因此，现有技术中亟需一种响应速度快且能够识别可疑目标的监测方式。
发明内容
本发明的目的是提供一种监测方法、摄像装置和图像处理设备和监测系统，通过全局曝光摄像头拍摄的图像进行对比，响应速度较快，再通过彩色摄像头和飞行时间摄像头拍摄的图像对目标进行识别，从而满足了人们对视频监控越来越高的要求。
为了实现上述发明目的，本发明实施例第一方面提供了一种监测方法，包括：
通过全局曝光摄像头对预设空间进行拍摄，获得监测图像；
将所述监测图像与所述预设空间的标准图像进行对比，判断所述预设空间内是否存在监测目标；
在判断结果为是时，开启彩色摄像头拍摄所述监测目标获得彩色跟踪图像，以及开启飞行时间摄像头拍摄所述监测目标获得深度跟踪图像；
根据所述深度跟踪图像，确定所述监测目标的位置信息，以及根据所述彩色跟踪图像，确定所述监测目标的外表特征信息；
将所述监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别所述监测目标。
可选地，在所述监测目标的数量为两个或者两个以上时，所述方法还包括：
根据每个监测目标各自的位置信息，确定监测目标之间的相对位置关系。
可选地，在所述通过全局曝光摄像头对预设空间进行拍摄之前，所述方法还包括：
存储所述标准图像，所述标准图像为所述预设空间不存在所述监测目标时，通过所述全局曝光相机对所述预设空间进行拍摄而获得。
可选地，在所述监测目标位于所述监测图像的边缘时，所述方法还包括：
调整所述全局曝光摄像头、所述彩色摄像头和所述飞行时间摄像头的拍摄角度，使得所述监测目标位于所述监测图像、所述彩色跟踪图像和所述深度跟踪图像的中央区域。
本发明实施例第二方面提供了一种摄像装置，包括：
摄像头基座；
全局曝光摄像头，设置于所述摄像头基座上；
彩色摄像头，设置于所述摄像头基座上；
飞行时间摄像头，设置于所述摄像头基座上；
数据传输接口，设置于所述摄像头基座上，分别与所述彩色摄像头、所述全局曝光摄像头和所述飞行时间摄像头相连，用于传递所述彩色摄像头、所述全局曝光摄像头和所述飞行时间摄像头采集的数据。
可选地，所述摄像装置还包括角度调整结构，所述角度调整结构于所述设置于所述摄像头基座上。
本发明实施例第三方面提供了一种图像处理设备，包括：
数据传输接口，用于接收通过全局曝光摄像头拍摄预设空间时获得的监测图像，以及接收通过彩色摄像头拍摄的彩色跟踪图像和通过飞行时间摄像头拍摄的深度跟踪图像；
处理器，与所述数据传输接口相连，用于将所述监测图像与所述预设空间的标准图像进行对比，判断所述预设空间内是否存在监测目标，并在判断结果为是时，发送用于开启彩色摄像头和飞行时间摄像头的指令，并根据所述彩色摄像头拍摄的彩色跟踪图像，确定所述监测目标的外表特征信息，以及根据所述飞行时间摄像头拍摄的深度跟踪图像，确定所述监测目标的位置信息，并将所述监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别所述监测目标。
可选地，所述处理器具体还用于在所述监测目标的数量为两个或者两个以上时，根据每个监测目标各自的位置信息，确定监测目标之间的相对位置关系。
可选地，所述图像处理设备还包括存储器，所述存储器与所述处理器相连，所述存储器用于所述标准图像，所述标准图像为所述预设空间不存在所述监测目标时，通过所述全局曝光相机对所述预设空间进行拍摄而获得。
可选地，所述处理器具体还用于在所述监测目标位于所述监测图像的边缘时，生成角度调整指令并通过所述数据传输接口发送，所述角度调整指令用于调整所述全局曝光摄像头、所述彩色摄像头和所述飞行时间摄像头的拍摄角度，使得所述监测目标位于所述监测图像、所述彩色跟踪图像和所述深度跟踪图像的中央区域。
本发明实施例第四方面提供了一种监测系统，包括：
监测目标；
如第二方面所述的摄像装置，设置于预设空间内；
如第三方面所述的图像处理设备。
本发明实施例中的一个或者多个技术方案，至少具有以下技术效果或者优点：
由于采用了先通过全局曝光摄像头对预设空间进行监测，并在确定存在监测目标时，再通过彩色摄像头拍摄的彩色跟踪图像确定监测目标的外表特征信息以及通过飞行时间摄像头确定监测目标的位置信息的技术方案，响应速度较快，同时能够对预设空间中的监测目标进行识别，所以满足了人们对视频监控越来越高的要求。
附图说明
图1为本发明实施例提供的监测方法的流程图；
图2为本发明实施例提供的摄像装置的结构示意图；
图3为本发明实施例提供的图像处理设备的模块图；
图4为本发明实施例提供的监测系统的模块图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种监测方法、摄像装置和图像处理设备和监测系统，通过全局曝光摄像头拍摄的图像进行对比，响应速度较快，再通过彩色摄像头和飞行时间摄像头拍摄的图像对目标进行识别，从而满足了人们对视频监控越来越高的要求。
请参考图1，图1为本发明实施例提供的监测方法的流程图，如图1所示，该方法包括：
S1：通过全局曝光摄像头对预设空间进行拍摄，获得监测图像；具体来讲，预设空间可以是一个房间或者房间中的一部分区域，当然，也可以是室外的一部分区域，在此不做限制；全局曝光摄像头(英文：global shutter camera)是通过整幅图片在同一时间曝光实现的，具体地，传感器的所有像素点同时收集光线，同时曝光，当预设的曝光时间到了，传感器停止收集光线，并将曝光图像转成电子图像。在这个过程中，并没有实际意义上的快门存在，在曝光开始的时候，传感器开始收集光线；在曝光结束的时候，光线收集电路被切断，传感器读出值即为一副图片；与卷帘曝光摄像头(英文：Rolling shutter camera)相比，全局曝光摄像头能够很好地进行抓拍，不会产生拖影现象，具有高帧率的输出，因此其输出的图像非常适合进行物体追踪。
S2：将监测图像与预设空间的标准图像进行对比，判断预设空间是否存在监测目标；具体来讲，预设空间的标准图像可以是在预设空间中不存在监测目标时拍摄的图像，这样，将监测图像与标准图像进行对比之后，即能够确定预设空间中是否存在监测目标，由于全局曝光摄像头输出监测图像时的帧率较高，且每一幅图对运动目标的成像质量也较好，所以能够在较短的时间内判断预设空间是否存在监测目标，响应速度较快。
S3：在判断结果为是时，通过彩色摄像头拍摄监测目标获得彩色跟踪图像，以及通过飞行时间摄像头拍摄监测目标获得深度跟踪图像；具体来讲，彩色摄像头例如可以是红绿蓝(RGB)三色普通摄像头，所以其拍摄的彩色跟踪图像中每个物体都有其各自的色彩信息，飞行时间(英文：Time of Flight)摄像头是通过给物体连续发送光脉冲，然后用传感器接收从物体返回的光，通过探测光脉冲的飞行(往返)时间来得到物体的距离，所以其拍摄的深度跟踪图像中每个物体都有其各自的深度信息；
S4：根据深度跟踪图像，确定监测目标的位置信息，以及根据彩色跟踪图像，确定监测目标的外表特征信息；具体来讲，由于深度跟踪图像中每个物体都有其各自的深度信息，所以结合前述的存在监测目标的监测图像，即能够确定出监测目标在预设空间中的位置信息，另外，由于彩色跟踪图像中每个物体都有其各自的色彩信息，所以结合前述的存在监测目标的监测图像，即能够确定出监测目标的外表特征信息，例如颜色信息、轮廓信息等等；
S5：将监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别监测目标；具体来讲，预存的外表特征信息集合可以是预先搜集的多个监测目标各自的外表特征信息的集合，这样，通过将监测目标的外表特征信息与预存的外表特征信息集合进行匹配，即能够识别出该监测目标。
可以看出，由于采用了先通过全局曝光摄像头对预设空间进行监测，并在确定存在监测目标时，再通过彩色摄像头拍摄的彩色跟踪图像确定监测目标的外表特征信息以及通过飞行时间摄像头确定监测目标的位置信息的技术方案，响应速度较快，同时能够对预设空间中的监测目标进行识别，所以满足了人们对视频监控越来越高的要求。
在接下来的部分中，将具体的应用场景，对图1所示的监测方法进行说明。
应用场景一：安防场景。
在安防领域内，预设空间可以是银行、车站或商场等等对监控需求较高的区域。在本应用场景中，将以预设空间具体为银行大厅为例进行介绍。
在本发明实施例提供的监测方法第一次或者首次被使用的时候，需要预先建立预设空间的标准图像，例如，可以在银行大厅内不存在监测目标的时候，通过全局曝光相机对银行大厅进行拍摄，这样，即获得了银行大厅的标准图像。当然了，若银行大厅内的桌子、椅子等物体的位置或者数量发生了变化，则需要重新建立标准图像，也即重新通过全局曝光相机对预设空间进行拍摄。
当然，此时还可以通过彩色摄像头和飞行时间摄像头同时对银行大厅进行拍摄，这样，即能够在银行大厅不存在监测目标的时候，获得银行大厅的彩色标准图像和和深度标准图像，再将彩色标准图像和深度标准图像以及通过全局曝光相机拍摄的标准图像建立对应关系，这样，银行大厅内的每个物体不仅有深度信息，还有外表特征信息如表面颜色信息、轮廓信息等等。
银行大厅的标准图像建立一次即可，后续可以重复使用。
在S1中，也即在建立预设空间的标准图像之后，即能够通过全局曝光相机对预设空间进行监测，具体来讲，也即通过全局曝光相机对预设空间进行拍摄，获得预设空间的监测图像。
由于全局曝光摄像头能够以高帧率的方式输出监测图像，所以将其输出的监测图像与标准图像进行对比后，即能够在较小的时间间隔内确定出监测图像中是否存在与标准图像相比多余的物体，响应速度较快，所以全局曝光摄像头输出的图像极其适合于监测领域。
在S2中，图像处理设备通过数据传输接口接收到监测图像后，即能够将监测图像和标准图像进行对比，对比结果存在两种可能：
第一种可能：监测图像与标准图像一致，这表明预设空间内不存在监测目标，此时即可以通过全局曝光摄像头继续对预设空间进行拍摄，继续监测。
第二种可能：监测图像与标准图像不一致，例如银行大厅多出一个或者多个物体，这表明银行大厅内存在监测目标。当然，在实际应用中，为了提高对比结果的准确性，还可以对多出的一个或者多个物体进行辅助检测，例如预先获取监测目标的外形特征如轮廓如长宽高信息等等，再对多出的一个或者多个物体进行特征匹配，若匹配则表明银行大厅内确实存在监测目标，在此就不再赘述了。
在对比结果表明银行大厅内存在监测目标时，则本发明实施例提供的监测方法进入S3，也即：通过彩色摄像头拍摄监测目标获得彩色跟踪图像，以及通过飞行时间摄像头拍摄监测目标获得深度跟踪图像。
需要说明的是，在通过监测图像确定银行大厅内不存在监测目标时，彩色摄像头和飞行时间摄像头都可以处于关闭状态，不进行拍摄，这样一方面能够节省能耗，另一方面也无需对彩色摄像头和飞行时间摄像头拍摄的图像进行处理或者存储，从而能够节省图像处理器设备的硬件资源。
在具体实施过程中，若对比结果表明银行大厅内存在监测目标，则可以进一步获取监测目标的位置信息和外表特征信息，以方便进行识别。在具体实施过程中，通过将全局曝光摄像头、彩色摄像头和飞行时间摄像头在摄像头基座上设置为合适的位置，使得全局曝光摄像头、彩色摄像头和飞行时间摄像头能够拍摄到同一区域即可，在此就不再赘述了。
在通过S3获得彩色跟踪图像和深度跟踪图像之后，本发明实施例提供的监测方法进入S4，即：根据深度跟踪图像，确定监测目标的位置信息，以及根据彩色跟踪图像，确定监测目标的外表特征信息；
具体来讲，一方面，由于深度跟踪图像中每个物体都具有各自的深度信息，所以结合从监测图像中确定出的监测目标，即能够从深度跟踪图像中确定出监测目标的位置信息；另一方面，所以彩色跟踪图像中每个物体都有各自的色彩信息，所以同样结合从监测图像中确定出的监测目标，即能够从深度跟踪图像中确定监测目标的外表特征信息，例如外表颜色信息、轮廓信息等等。
在通过S4确定监测目标的位置信息和外表特征信息后，本发明实施例提供的监测方法进入S5，即：将监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别监测目标；
具体来讲，预存的外表特征信息集合例如可以是被通缉人员、丢失人员或者其他特定人群的外表特征信息集合等等，在将该外表特征信息与预存的外表特征信息集合进行匹配后，若匹配成功，则可以启动相应的报警机制等等。
总的来说，在人进入到银行大厅后，通过全局摄像头拍摄的监测图像，即能够确定银行大厅中存在监测目标，从而开启彩色摄像头对人进行拍摄获得彩色跟踪图像，以及开启飞行时间摄像头进行拍摄获得深度跟踪图像，从而能够根据深度跟踪图像确定监测目标的位置信息，位置信息可以用于判断监测目标是否位于敏感区域，如监测目标是否进入银行的内部工作区等等，若监测目标进入到这些敏感区域，则可以启动报警等等，同时，还能够通过彩色跟踪图像确定监测目标的外表特征信息，再将该外表特征信息与预存的外表特征信息集合进行匹配，预存的外表特征信息集合例如可以是被通缉人员、丢失人员或者其他特定人群的外表特征信息集合，从而能够识别出监测目标是否属于这些人群，若属于，则可以启动相应的报警机制等等。
在具体实施过程中，为了保证监测效果，在监测目标位于监测图像的边缘时，本发明实施例提供的监测方法还包括：在调整全局曝光摄像头、彩色摄像头和飞行时间摄像头的拍摄角度，使得监测目标位于监测图像、彩色跟踪图像和深度跟踪图像的中央区域。
具体来讲，由于全局摄像头输出监测图像的帧率很高，所以在对监测图像进行分析，判断监测图像中监测目标是否位于监测图像的边缘时，能够在较短的时间段内确定监测目标是否运动到监测图像的边缘，继而调整三个摄像头的拍摄角度，使得三个摄像头都对准该监测目标，这样即能够保证监测目标始终位于监测图像、彩色跟踪图像和深度跟踪图像的中央区域，保证监测效果。
应用场景二：虚拟现实场景。
由于在应用场景一中已经详细介绍了本发明实施例提供的监测方法的具体过程，在此就不再赘述了，本部分仅介绍监测方法应用在虚拟现实场景的过程。
在虚拟现实场景中，监测目标可以是一个或者多个虚拟现实设备，在本部分中，将以监测目标具体为两个虚拟现实设备、预设空间具体为一个用于虚拟现实游戏的房间为例进行介绍。
该两个虚拟现实设备的外形轮廓和外表颜色可以不一致，例如，一个虚拟现实设备的俯视图为五角星形状，五角星内部被黄色填充，另一个虚拟现实设备的俯视图为圆形，圆形内部被红色填充，当然了，这两个虚拟现实设备的外形轮廓信息和外表颜色信息均可以预存到外表特征信息集合中，以供后续进行识别。
在该用于虚拟现实游戏的房间中，为了减少监测盲区，保证监测效果，全局曝光摄像头、彩色摄像头和飞行时间摄像头可以设置于房间的高处，如天花板上等等。
这样，在两个用户分别佩戴上述两个虚拟现实设备进入到该房间后，通过全局曝光摄像头拍摄的监测图像，并将其与该房间的标准图像进行对比，当然，该房间的标准图像也是在该房间不存在虚拟现实设备时，通过全局曝光摄像机拍摄而获得的，在此就不再赘述了，从而根据对比结果能够判断出该房间中存在两个虚拟现实设备，然后开启彩色摄像头拍摄两个虚拟现实设备获得彩色跟踪图像，同时还开启飞行时间摄像头拍摄两个虚拟现实设备获得深度跟踪图像，这样，即能够根据深度跟踪图像，确定两个虚拟设备在房间中的位置信息，同时能够根据彩色跟踪图像，确定两个虚拟现实设备各自的外表特征信息，如在前介绍的外形轮廓信息和外表颜色信息，然后再将确定出的外表特征信息与在前介绍的外表特征信息集合进行匹配，在匹配成功后，从而能够识别出两个虚拟现实设备。可以看出，由于全局曝光摄像头输出监测图像时的帧率较高，且每一幅图对运动目标的成像质量也较好，所以能够在较短的时间内判断预设空间是否存在监测目标，响应速度较快。
在实际应用中，虚拟现实设备本身的外形轮廓信息和外表颜色均可以一致，可以通过外接专门的区分装置来进行区别，例如前述介绍的五角星形状或圆形的装置，当然了，并不仅限于此，例如，还可以通过为每个用户准备不同颜色、图案或者形状的外套、背心或者帽子等等，当然，这些信息也需要预存到外表特征信息集合中，这样，在用户穿戴这些区分装置进入房间后，即能够通过彩色摄像头获得的彩色跟踪图像确定每个用户的外表特征信息，从而能够将与预存的外表特征信息集合进行匹配，最后识别出用户。
针对虚拟现实场景而言，若虚拟现实场景中多个虚拟现实设备之间需要进行交互，则需要确定虚拟现实设备之间的相对位置关系，在本实施例中，由于通过深度跟踪图像已经确定了每个虚拟现实设备的深度信息，所以根据每个虚拟现实设备各自的位置信息，即能够确定虚拟现实设备之间的相对位置关系，这样，将每个虚拟现实设备与其他虚拟现实设备之间的相对位置关系发送给对应的每个虚拟设备，该相对位置关系及能够供虚拟现实设备进行相互间的定位、交互等情景下使用，在此就不再赘述了。
在具体实施过程中，为了保证监测效果，在虚拟现实设备为一个，且位于监测图像的边缘时，可以调整全局曝光摄像头、彩色摄像头和飞行时间摄像头的拍摄角度，使得该虚拟现实设备位于监测图像、彩色跟踪图像和深度跟踪图像的中央区域；在虚拟现实设备为两个或者两个以上时，可以以其中的一个为主进行跟踪，当然，如何选择以及选择哪个一个虚拟现实设备由本领域所属的技术人员根据实际情况确定，在此就不再赘述了。
通过上述部分可以看出，无论是在安防场景下还是在虚拟现实场景下，本发明实施例提供的监测方法由于采用了先通过全局曝光摄像头对预设空间进行监测，并在确定存在监测目标时，再通过彩色摄像头拍摄的彩色跟踪图像确定监测目标的外表特征信息以及通过飞行时间摄像头确定监测目标的位置信息的技术方案，响应速度较快，同时能够对预设空间中的监测目标进行识别，所以满足了人们对视频监控越来越高的要求。
请参考图2，图2为本发明实施例提供的摄像装置的结构示意图，如图1所示，该摄像装置包括：
摄像头基座201；
全局曝光摄像头202，设置于摄像头基座201上；
彩色摄像头203，设置于摄像头基座201上；
飞行时间摄像头204，设置于摄像头基座201上；
数据传输接口205，设置于摄像头基座201上，分别与全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204相连，用于传递全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204采集的数据。
在本实施例中，摄像头基座201可以是一块板型的材料，如钢板、塑料板等等，从而能够为设置全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204提供安装位置，当然，在另一实施例中，摄像头基座201可以根据实际情况调整为其他合适的形状如球形、立方体形等等，以满足实际情况的需要，在此就不再赘述了。
在本实施例中，全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204均设置在摄像头基座201的同一面。
全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204像素、输出色彩或帧率等等参数，可以由本领域所属的技术人员根据实际情况进行确定，以满足实际情况的需要，在此就不再赘述了。
数据传输接口205可以是移动产业处理器接口(英文：Mobile IndustryProcessor Interface；简称：MIPI)、低电压查分信号接口(英文：Low-VoltageDifferential Signaling；简称：LVDS)或Camera Link等等，可以由本领域所属的技术人员根据实际情况进行选择，以满足实际情况的需要，在此就不再赘述了。
请继续参考图2，如图2所示，在本实施例中，该摄像装置还包括角度调整结构206，角度调整结构206设置于摄像头基座201上与全局曝光摄像头202、彩色摄像头203和飞行时间摄像头204相对的另一面，这样，即能够通过角度调整结构206将摄像装置固定到墙面或者天花板上，并且摄像装置也能够根据角度调整结构206通过不同的拍摄角度对预设空间进行拍摄。
在具体实施过程中，角度调整结构206可以是铰链、齿轮等元件的组合，具体结构和转动角度等参数可以由本领域所属的技术人员根据实际情况进行设置，以满足实际情况的需要，在成就不再赘述了。
请参考图3，图3为本发明实施例提供的图像处理设备的模块图，如图3所示，该图像处理设备包括数据传输接口301和处理器302，数据传输接口301具体可以是上述介绍的MIPI、LVDS或Camera Link等，与摄像装置中数据传输接口采用相同的协议即可，处理器302与数据传输接口301相连，即能够根据数据传输接口301接收的数据进行处理。
在具体实施过程中，处理器302具体还用于在监测目标的数量为两个或者两个以上时，根据每个监测目标各自的位置信息，确定监测目标之间的相对位置关系，例如监测目标具体为虚拟现实设备时，在多个虚拟现实设备之间需要进行定位、交互等操作时，即能够将该相对位置关系发送给虚拟现实设备，使得虚拟现实设备能够根据该相对位置关系，确定自身与其他虚拟现实设备之间的距离。
请继续参考图3，图像处理设备还包括存储器303，存储器303与处理器302相连，存储器303用于存储处理器302运行时所需的数据，例如可以存储预设空间的标准图像、预存的外部特征信息集合等等。
在具体实施过程中，处理器302具体还用于在监测目标位于监测图像的边缘时，生成角度调整指令并通过数据传输接口301发送，角度调整指令用于调整全局曝光摄像头、彩色摄像头和飞行时间摄像头的拍摄角度，使得监测目标位于监测图像、彩色跟踪图像和深度跟踪图像的中央区域。
基于同一发明构思，本发明实施例还提供一种监测系统，该监测系统包括：监测目标401，如前，可以是人或者虚拟现实设备等等，在此不做限制；如前述部分介绍的摄像装置402，设置于预设空间内；如前述部分介绍的图像处理设备403。
在前述部分中，已经详细介绍了摄像装置中各个摄像单元的组成及运行原理，以及图像处理设备的组成及运行原理，在此为了说明书的简洁，就不再赘述了。
在实际应用中，图像处理设备403可以单独设置，也可以集成在监测目标401上，在此不做限制。
本发明实施例中的一个或者多个技术方案，至少具有以下技术效果或者优点：
由于采用了先通过全局曝光摄像头对预设空间进行监测，并在确定存在监测目标时，再通过彩色摄像头拍摄的彩色跟踪图像确定监测目标的外表特征信息以及通过飞行时间摄像头确定监测目标的位置信息的技术方案，响应速度较快，同时能够对预设空间中的监测目标进行识别，所以满足了人们对视频监控越来越高的要求。
本说明书中公开的所有特征，或公开的所有方法或过程中的步骤，除了互相排斥的特征和/或步骤以外，均可以以任何方式组合。
本说明书(包括任何附加权利要求、摘要和附图)中公开的任一特征，除非特别叙述，均可被其他等效或具有类似目的的替代特征加以替换。即，除非特别叙述，每个特征只是一系列等效或类似特征中的一个例子而已。
本发明并不局限于前述的具体实施方式。本发明扩展到任何在本说明书中披露的新特征或任何新的组合，以及披露的任一新的方法或过程的步骤或任何新的组合。

Claims (11)

1.一种监测方法，其特征在于，包括：
通过全局曝光摄像头对预设空间进行拍摄，获得监测图像；
将所述监测图像与所述预设空间的标准图像进行对比，判断所述预设空间内是否存在监测目标；
在判断结果为是时，开启彩色摄像头拍摄所述监测目标获得彩色跟踪图像，以及开启飞行时间摄像头拍摄所述监测目标获得深度跟踪图像；
根据所述深度跟踪图像，确定所述监测目标的位置信息，以及根据所述彩色跟踪图像，确定所述监测目标的外表特征信息；
将所述监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别所述监测目标。
2.如权利要求1所述的监测方法，其特征在于，在所述监测目标的数量为两个或者两个以上时，所述方法还包括：
根据每个监测目标各自的位置信息，确定监测目标之间的相对位置关系。
3.如权利要求1所述的监测方法，其特征在于，在所述通过全局曝光摄像头对预设空间进行拍摄之前，所述方法还包括：
存储所述标准图像，所述标准图像为所述预设空间不存在所述监测目标时，通过所述全局曝光相机对所述预设空间进行拍摄而获得。
4.如权利要求1-3中任一权项所述的监测方法，其特征在于，在所述监测目标位于所述监测图像的边缘时，所述方法还包括：
调整所述全局曝光摄像头、所述彩色摄像头和所述飞行时间摄像头的拍摄角度，使得所述监测目标位于所述监测图像、所述彩色跟踪图像和所述深度跟踪图像的中央区域。
5.一种摄像装置，其特征在于，包括：
摄像头基座；
全局曝光摄像头，设置于所述摄像头基座上；
彩色摄像头，设置于所述摄像头基座上；
飞行时间摄像头，设置于所述摄像头基座上；
数据传输接口，设置于所述摄像头基座上，分别与所述彩色摄像头、所述全局曝光摄像头和所述飞行时间摄像头相连，用于传递所述彩色摄像头、所述全局曝光摄像头和所述飞行时间摄像头采集的数据。
6.如权利要求5所述的摄像装置，其特征在于，所述摄像装置还包括角度调整结构，所述角度调整结构于所述设置于所述摄像头基座上。
7.一种图像处理设备，其特征在于，包括：
数据传输接口，用于接收通过全局曝光摄像头拍摄预设空间时获得的监测图像，以及接收通过彩色摄像头拍摄的彩色跟踪图像和通过飞行时间摄像头拍摄的深度跟踪图像；
处理器，与所述数据传输接口相连，用于将所述监测图像与所述预设空间的标准图像进行对比，判断所述预设空间内是否存在监测目标，并在判断结果为是时，发送用于开启彩色摄像头和飞行时间摄像头的指令，并根据所述彩色摄像头拍摄的彩色跟踪图像，确定所述监测目标的外表特征信息，以及根据所述飞行时间摄像头拍摄的深度跟踪图像，确定所述监测目标的位置信息，并将所述监测目标的外表特征信息与预存的外表特征信息集合进行匹配，以识别所述监测目标。
8.如权利要求7所述的图像处理设备，其特征在于，所述处理器具体还用于在所述监测目标的数量为两个或者两个以上时，根据每个监测目标各自的位置信息，确定监测目标之间的相对位置关系。
9.如权利要求7所述的图像处理设备，其特征在于，所述图像处理设备还包括存储器，所述存储器与所述处理器相连，所述存储器用于所述标准图像，所述标准图像为所述预设空间不存在所述监测目标时，通过所述全局曝光相机对所述预设空间进行拍摄而获得。
10.如权利要求7-9中任一权项所述的图像处理设备，其特征在于，所述处理器具体还用于在所述监测目标位于所述监测图像的边缘时，生成角度调整指令并通过所述数据传输接口发送，所述角度调整指令用于调整所述全局曝光摄像头、所述彩色摄像头和所述飞行时间摄像头的拍摄角度，使得所述监测目标位于所述监测图像、所述彩色跟踪图像和所述深度跟踪图像的中央区域。
11.一种监测系统，其特征在于，包括：
监测目标；
如权利要求5或6所述的摄像装置，设置于预设空间内；
如权利要求7-10中任一权项所述的图像处理设备。
CN201610852549.2A 2016-09-27 2016-09-27 一种监测方法、摄像装置和图像处理设备和监测系统 Pending CN106454229A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610852549.2A CN106454229A (zh) 2016-09-27 2016-09-27 一种监测方法、摄像装置和图像处理设备和监测系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610852549.2A CN106454229A (zh) 2016-09-27 2016-09-27 一种监测方法、摄像装置和图像处理设备和监测系统

Publications (1)

Publication Number Publication Date
CN106454229A true CN106454229A (zh) 2017-02-22

Family

ID=58170456

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610852549.2A Pending CN106454229A (zh) 2016-09-27 2016-09-27 一种监测方法、摄像装置和图像处理设备和监测系统

Country Status (1)

Country Link
CN (1) CN106454229A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108124142A (zh) * 2018-01-31 2018-06-05 西北工业大学 基于rgb景深相机和高光谱相机的图像目标识别系统及方法
CN108322678A (zh) * 2018-03-01 2018-07-24 上海晔芯电子科技有限公司 支持全局曝光的tof图像传感器像素结构及tof成像系统
WO2018223960A1 (zh) * 2017-06-08 2018-12-13 北京深瞐科技有限公司 监控视频处理方法、装置、系统、电子终端及可读存储介质
CN109600599A (zh) * 2018-10-29 2019-04-09 上海神添实业有限公司 一种快速定位目标的立体视觉处理装置及其处理方法
CN110574365A (zh) * 2017-03-31 2019-12-13 本田技研工业株式会社 图像生成装置以及图像生成方法
WO2019237753A1 (en) * 2018-06-11 2019-12-19 Suzhou Aqueti Technology Co., Ltd. A surveillance camera system and a method for reducing power consumption thereof
CN111199203A (zh) * 2019-12-30 2020-05-26 广州幻境科技有限公司 一种基于手持设备的动作捕捉方法及系统
CN112911205A (zh) * 2019-12-04 2021-06-04 上海图漾信息科技有限公司 监测系统和方法
CN114040121A (zh) * 2021-10-29 2022-02-11 浙江大华技术股份有限公司 监控方法、监控设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101770568A (zh) * 2008-12-31 2010-07-07 南京理工大学 基于仿射不变点及光流计算的目标自动识别和跟踪方法
CN103971380A (zh) * 2014-05-05 2014-08-06 中国民航大学 基于rgb-d的行人尾随检测方法
CN104539874A (zh) * 2014-06-17 2015-04-22 武汉理工大学 融合热释电传感与摄像机的人体混合监控系统及方法
CN105869216A (zh) * 2016-03-29 2016-08-17 腾讯科技（深圳）有限公司 目标对象展示方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101770568A (zh) * 2008-12-31 2010-07-07 南京理工大学 基于仿射不变点及光流计算的目标自动识别和跟踪方法
CN103971380A (zh) * 2014-05-05 2014-08-06 中国民航大学 基于rgb-d的行人尾随检测方法
CN104539874A (zh) * 2014-06-17 2015-04-22 武汉理工大学 融合热释电传感与摄像机的人体混合监控系统及方法
CN105869216A (zh) * 2016-03-29 2016-08-17 腾讯科技（深圳）有限公司 目标对象展示方法和装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110574365A (zh) * 2017-03-31 2019-12-13 本田技研工业株式会社 图像生成装置以及图像生成方法
WO2018223960A1 (zh) * 2017-06-08 2018-12-13 北京深瞐科技有限公司 监控视频处理方法、装置、系统、电子终端及可读存储介质
CN108124142A (zh) * 2018-01-31 2018-06-05 西北工业大学 基于rgb景深相机和高光谱相机的图像目标识别系统及方法
CN108322678A (zh) * 2018-03-01 2018-07-24 上海晔芯电子科技有限公司 支持全局曝光的tof图像传感器像素结构及tof成像系统
WO2019237753A1 (en) * 2018-06-11 2019-12-19 Suzhou Aqueti Technology Co., Ltd. A surveillance camera system and a method for reducing power consumption thereof
CN109600599A (zh) * 2018-10-29 2019-04-09 上海神添实业有限公司 一种快速定位目标的立体视觉处理装置及其处理方法
CN112911205A (zh) * 2019-12-04 2021-06-04 上海图漾信息科技有限公司 监测系统和方法
CN112911205B (zh) * 2019-12-04 2023-08-29 上海图漾信息科技有限公司 监测系统和方法
CN111199203A (zh) * 2019-12-30 2020-05-26 广州幻境科技有限公司 一种基于手持设备的动作捕捉方法及系统
CN114040121A (zh) * 2021-10-29 2022-02-11 浙江大华技术股份有限公司 监控方法、监控设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN106454229A (zh) 一种监测方法、摄像装置和图像处理设备和监测系统
CN104754302B (zh) 一种基于枪球联动系统的目标检测跟踪方法
CN105979210B (zh) 一种基于多枪多球摄像机阵列的行人识别系统
CN109218619A (zh) 图像获取方法、装置和系统
CN106843460B (zh) 基于多摄像头的多目标位置捕获定位系统及方法
CN112165573B (zh) 拍摄处理方法和装置、设备、存储介质
CN104780308A (zh) 一种信息处理方法及电子设备
CN103167270B (zh) 人员头部拍摄方法、系统及服务器
CN107836012A (zh) 投影图像生成方法及其装置、图像像素与深度值之间的映射方法
CN107093171A (zh) 一种图像处理方法及装置、系统
CN109887040A (zh) 面向视频监控的运动目标主动感知方法及系统
CN108737717A (zh) 拍摄方法、装置、智能设备及存储介质
JP2014149620A (ja) 撮影システム
CN105205455A (zh) 一种移动平台上人脸识别的活体检测方法及系统
CN104580897B (zh) 拍摄取景方法和终端
CN107466246A (zh) 台球击球辅助方法、台球击球辅助系统及便携式电子设备
CN106292799B (zh) 无人机、遥控装置及其控制方法
CN108038867A (zh) 基于多特征融合和立体视觉的火焰检测和定位方法
KR20220123268A (ko) 파노라마 3차원 이미지를 캡처 및 생성하는 시스템 및 방법
CN206541271U (zh) 一种光学定位系统和虚拟现实系统
CN106851094A (zh) 一种信息处理方法和装置
CN109522794A (zh) 一种基于全景摄像头的室内人脸识别定位方法
CN109308718A (zh) 一种基于多深度相机的空间人员定位装置及方法
CN104966310B (zh) 一种迷彩伪装效果评价方法
CN110276254A (zh) 基于无人机的禁止摆摊区域摊贩自动识别预警方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170222