CN102970514A - 映像监视装置、映像监视方法以及程序 - Google Patents

映像监视装置、映像监视方法以及程序 Download PDF

Info

Publication number
CN102970514A
CN102970514A CN2012102494793A CN201210249479A CN102970514A CN 102970514 A CN102970514 A CN 102970514A CN 2012102494793 A CN2012102494793 A CN 2012102494793A CN 201210249479 A CN201210249479 A CN 201210249479A CN 102970514 A CN102970514 A CN 102970514A
Authority
CN
China
Prior art keywords
video camera
recognition processing
image recognition
unit
reflection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012102494793A
Other languages
English (en)
Inventor
伊藤诚也
李媛
河守克彦
永野哲夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Industry and Control Solutions Co Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of CN102970514A publication Critical patent/CN102970514A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种映像监视装置(10)，其具有：前处理信息生成部分(23)，其获取作为图像识别处理对象的识别处理区域的位置和摄像机设置位置，计算所述识别处理区域的位置和所述摄像机设置位置之间的位置关系，并算出表示该位置关系的前处理信息(34)；识别参数运算部分(24)，其参照所述前处理信息(34)，根据实测值与由所述摄像机(110)拍摄的摄像机图像中的距离的比率算出在图像识别处理中使用的识别参数(35)(摄像机图像中的识别处理区域的坐标)；以及图像识别处理部分(25)，其使用所述识别参数(35)对通过识别处理区域的监视对象进行图像识别处理。在对通过监视区域的移动体进行图像识别处理时防止识别性能下降。

Description

映像监视装置、映像监视方法以及程序
技术领域
本发明涉及对通过监视区域的移动体进行图像识别处理以对移动体进行监视的技术。
背景技术
近年来，随着安全意识的提高，设置兼具出入管理功能和映像监视功能的映像监视系统的大楼和办公室越来越多。从所设置的映像监视系统来看，随着监视区域的增加，网络摄像机的设置台数随之增加，并且映像记录装置的容量也在不断地增大。另一方面，对于使用映像监视系统的监视人员来说，由于需要通过目视从大容量的记录映像中提取特定的图像，所以工作负荷非常大。因此，与具有监视业务援助功能的映像监视系统有关的研究工作也层出不穷。
例如，作为现有技术，已经开发出了用于减轻目视作业的负担的映像监视系统，该等映像监视系统具有通过对从摄像机获取的映像进行图像识别处理来检测出现在监视区域内的人和车辆等移动体的功能、仅对检测到移动体的图像进行记录的功能以及在检测到移动体时在显示装置中显示警告或者发出警报声以引起监视人员的注意的功能。例如，在专利文献1中公开了一种人员出入管理装置，其通过图像识别来检测通过出入口的人的脸部，并根据检测到的脸部的数量来推算出入的人数(参照专利文献1)。
在先技术文献
专利文献
专利文献1日本国专利特开2008-40828号公报
发明内容
可是，在专利文献1所公开的技术中，需要满足使摄像机对脸部进行拍摄这一条件，而这可能会使得识别性能因摄像机的设置位置与被拍摄体之间的位置关系而发生变化。例如，在对脸部进行拍摄时，如果摄像机的朝向被设置成从头的上方朝向下方俯视的朝向，则难于对脸部进行检测，从而可能会导致识别性能下降。此外，由于在摄像机的设置场所方面存在制约，所以在某些情况下，可能无法将摄像机设置在识别性能最好的位置上。
为此，本发明的课题是提供一种在对通过监视区域的移动体进行图像识别处理时能够防止识别性能下降的技术。
为了解决上述课题，本发明提供一种映像监视装置，该映像监视装置具有：作为图像识别处理的前处理，获取作为图像识别处理的对象的识别处理区域的位置和摄像机的设置位置，计算所述识别处理区域的位置与所述摄像机的设置位置之间的位置关系，并且计算表示该位置关系的前处理信息的单元；参照所述前处理信息，并且根据实测值与通过所述摄像机拍摄到的摄像机图像中的距离之间的比率来计算图像识别处理中使用的识别参数的单元；以及使用所述识别参数对通过识别处理区域的移动体进行图像识别处理的单元。
-发明效果-
根据本发明，在对通过监视区域的移动体进行图像识别处理时能够防止识别功能下降。
附图说明
图1是表示映像监视系统的结构例和映像监视装置的功能例的框图。
图2是监视区域信息的示例图。
图3是布置信息(Layout Information)的显示画面的示例图。
图4是摄像机信息的示例图。
图5是摄像机的设置位置与识别处理区域的位置之间的位置关系的说明图。
图6是摄像机图像中的距离与实测值之间的关系的说明图。
图7是摄像机图像中的二维识别处理区域的设定方法的示例图。
图8是图像识别处理中使用的识别参数的变换示例图，图8(a)表示为了适应摄像机位置而对模板(Template)进行变换时的情况，图8(b)表示以使摄像机图像与模板的拍摄方向匹配的方式进行变换时的情况。
图9是用于将三维识别处理区域设定在摄像机图像中的布置信息的显示画面的示例图。
图10是用于将三维识别处理区域设定在摄像机图像中的设定方法的示例图。
图11是变形例，是能够选择预先设定的摄像机设置位置的布置信息的显示画面的示例图。
具体实施方式
以下适当参照附图对用于实施本发明的方式(以下称为“实施方式”)进行详细的说明。
以下参照图1对本实施方式的映像监视系统的结构例和映像监视装置的功能例进行说明。
映像监视系统1由摄像机110、输入装置120、显示装置130以及映像监视装置10构成。在本实施方式中，映像监视装置10具有使用图像识别处理对人和车辆等的移动体进行监视的功能。
摄像机110是包括具有变焦功能的摄像镜头单元、CMOS(Complementary Metal Oxide Semiconductor)或CCD(ChargeCoupled Device，电荷耦合器件)等摄像元件的摄像装置。摄像机110设置在未图示的云台上，能够进行上下左右旋转。此外，摄像机110具有将拍摄到的图像信息发送到映像监视装置10的功能。在图1中只示出了一台摄像机110，但也可以设置多台摄像机110。
输入装置120是鼠标等点击设备和键盘等，具有可以通过用户的操作向映像监视装置10输入指示信息的功能。
显示装置130为液晶显示装置、CRT(Cathode Ray Tube，阴极射线管)显示装置和RGB(Red-Green-Blue，红绿蓝)彩色监视器等，具有对映像监视装置10的输出信息进行显示的功能。此外，在图1中只示出了一台显示装置130，但也可以设置多台显示装置130。
映像监视装置10具有处理部分20、存储部分30和输入输出IF(接口)40。处理部分20具有作为控制部分21、布置信息生成部分22、前处理信息生成部分23、识别参数运算部分24以及图像识别处理部分25的功能。处理部分20由未图示的CPU(Central Processing Unit，中央处理器)和主存储器构成，处理部分20中的各个部分通过在主存储器中执行存储在存储部分30中的应用程序而实现。
存储部分30中存储有监视区域信息31、布置信息32、摄像机信息33、前处理信息34和识别参数35。存储在存储部分30中的各种信息的详细情况在后述的处理部分20中的各部分的说明中加以说明。
输出输入IF40是用于进行摄像机110、输入装置120以及显示装置130与映像监视装置10的处理部分20之间的信息交换的接口。
控制部分21具有对布置信息生成部分22、前处理信息生成部分23、识别参数运算部分24以及图像识别处理部分25之间的动作进行统一控制的功能和经由输入输出IF40在摄像机110、输入装置120和显示装置130之间进行信息交换的功能以及在处理部分20中的各部分之间、处理部分20中的各部分与存储部分30之间交换信息的功能。
布置信息生成部分22获取包括摄像机110的设置场所的平面图和布置图等数据的监视区域信息31，并生成设定与监视对象相适应的识别处理区域时所需的布置信息32。在此，监视对象是指作为图像识别处理对象的移动体的全部或者一部分。具体来说是，如果移动体是人，则移动体的全部是指人的全身，移动体的一部分是指人身体的一部分(例如脸部和头部等)。识别处理区域是指在对监视对象进行图像识别处理时由摄像机110拍摄到的图像信息(以下称为“摄像机图像”)中的用于图像识别处理的图像区域。此外，监视区域信息31和布置信息32均存储在存储部分30中。
以下参照图2和图3对监视区域信息31和布置信息32的具体示例进行说明。
如图2所示，监视区域信息31为平面图(布置图)，记载有主要部分的尺寸信息。例如记载有出入口的高度方向的实测值(单位为mm)。此外，监视区域信息31也可以是三维CAD(Computer Aided Design，计算机辅助设计)数据和CG(Computer Graphics，计算机图形)数据等。
如图3所示，布置信息32通过从监视区域信息31提取设置识别处理区域所需的信息而生成。在本实施方式中，出入口301作为识别处理区域用阴影方式显示(以通过出入口301的移动体为监视对象的情况在后述部分说明)。生成布置信息32的目的是为了求出识别处理区域的位置与摄像机110设置位置之间的位置关系，所以也可以只显示识别处理区域(出入口301)。此外，在进行人员出入管理时，相对于识别处理区域(出入口301)，哪一侧是室外，哪一侧是室内(移动体的移动方向)是重要的信息，所以优选将其包含在布置信息32中。
以下返回图1进行说明。前处理信息生成部分23使用布置信息32和摄像机信息33生成前处理信息34。
如图4所示，摄像机信息33表示摄像机设置位置的高度、俯角、分辨率、帧速率以及视场角。前处理信息34是摄像机110的设置位置与识别处理区域(出入口301)之间的角度、水平距离、高度以及识别处理区域的实测值。由于识别处理区域的实测值能够从布置信息32获取，高度可以从摄像机信息33获取，所以以下对前处理信息生成部分23的处理中的计算前处理信息34中的角度和水平距离的方法进行说明。
首先，如图5所示，前处理信息生成部分23将在布置信息生成部分22中生成的布置信息32(参照图3)作为布置信息32a显示在显示装置130中。在布置信息32a上显示有识别处理区域(出入口301)。此外，前处理信息生成部分23受理从由用户操作的输入装置120输入的摄像机110的设置位置。具体来说是，如图5所示，由光标501指定的位置就是表示摄像机110的设定位置的摄像机设置位置502。
接着，前处理信息生成部分23根据图5所示的布置信息32a上的位置关系算出识别处理区域(出入口301)与摄像机设置位置502之间的距离r和角度θ。具体来说是，由于识别处理区域(出入口301)的宽度的实测值是已知值，所以，通过使用该实测值与布置信息32a上的识别处理区域(出入口301)的显示尺寸之间的比率，能够方便地推算出布置信息32a上的各种长度的实测值。这一方法构成本实施方式的基本部分，根据这一方法，能够在不进行实测的情况下根据布置信息32a上的位置关系方便地获得识别处理区域(出入口301)与摄像机设置位置502之间的位置关系。此外，在本实施方式中，实测值以大写字母(例如距离R、高度H和Ho等)表示，布置信息32上或者摄像机图像中的长度以小写字母(例如距离r、高度h和ho等)表示，以此来加以区别。
以下对摄像机设置位置502与识别处理区域(出入口301)的中心G之间的距离r的获取方法进行说明。并且，假设摄像机110的方向(镜头的光轴方向)朝向中心G。
为了在图5的布置信息32a上定义距离，例如将布置信息32a的左上方作为原点，在水平方向设定X轴，并且在垂直方向设定Y轴。前处理信息生成部分23从布置信息32a获取识别处理区域(出入口301)的x轴方向的实测值(W＝3000mm)以及在布置信息32a上的大小w(例如300个像素)。接着，由前处理信息生成部分23从布置信息32a获取Δx(例如150个像素)和Δy(例如200个像素)。然后，根据下式求出实测值ΔX以及ΔY(单位为mm)。
w∶Δy＝300∶200＝W∶ΔY＝3000∶ΔY
Δy∶Δx＝200∶150＝ΔY∶ΔX
ΔY＝2000(mm)，ΔX＝1500(mm)
使用在上述计算中获取的ΔX和ΔY，并且根据下式(1)算出摄像机设置位置502与识别处理区域(出入口301)的中心G之间的距离r以及角度θ。
R＝(ΔX2+ΔY2)1/2
θ＝arccos(ΔX/R)    式(1)
通过上述处理，前处理信息生成部分23将根据式(1)算出的水平距离R以及角度θ、出入口301的高度H以及识别处理区域的实测值作为前处理信息34存储在存储部分30中。
以下返回到图1进行说明。识别参数运算部分24参照前处理信息34生成识别参数35，并将其存储在存储部分30中。所谓的识别参数35，具体来说是在进行图像识别处理时使用的摄像机图像中的识别处理区域的坐标和摄像机图像中的监视对象的移动方向以及模板(包括通过学习算法获得的模型信息)的变换信息(变换公式或者变换表)。以下分别对摄像机图像中的识别处理区域的坐标和摄像机图像中的监视对象的移动方向以及模板的变换信息的计算方法进行说明。
首先，参照图6对摄像机图像中的距离和实测值之间的关系进行说明。然后，在图7中对根据实测值与摄像机图像中的距离之间的关系在摄像机图像中设定识别处理区域的方法进行说明。需要了解实测值与摄像机图像中的距离之间的关系的理由是因为摄像机图像中的识别处理区域的尺寸通常根据真实空间的实测值来决定的缘故。例如，在将人的脸部作为监视对象时，根据人的身高的实测值的分布来决定人的脸部所在的区域，之后将摄像机图像中的与该区域对应的区域决定为识别处理区域。此外，通过以上述方法来缩小识别处理区域的范围，与对整个摄像机图像进行图像识别处理的场合相比，能够降低运算处理量，具有能够提高映像监视装置10的功能的效果。
图6中示出了由摄像机110拍摄并显示在显示装置130上的摄像机图像(拍摄图像)。图5所示的出入口301在该摄像机图像中被表示为出入口601。
识别参数运算部分24受理使用由输入装置120操作的光标501指定(例如在输入装置为鼠标时该操作为点击操作)的表示出入口601的区域中的表示区域602的顶点的4个点(p1～p4)的位置，并获取该指定位置(点p1～点p4)的坐标。其中，点p1和点p2是指定出入口601上端的点，点p3和点p4是指定出入口601下端的点。在此得到的点p1～点p4的坐标值也可以是以摄像机图像的左上方为原点，并且水平方向被定义为X轴，垂直方向被定义为Y轴的图像坐标系的坐标值。此外，在图6中，为了明确地示出区域602，以阴影方式表示区域602，但在实际的显示装置130的画面上也可以不用阴影方式进行显示。
区域602的尺寸利用图5所示的布置信息32a的识别处理区域(出入口301)的宽度w在摄像机图像中以出入口601的宽度表示这一点来求出。也就是说，能够通过将摄像机图像中的宽度u的长度与出入口601的宽度的长度的比率乘于图5所示的布置信息32a的识别处理区域(出入口301)的宽度w的实测值来算出摄像机图像中的宽度u的实测值。此外，摄像机图像中的高度h的实测值等于图5所示的出入口301的高度H的实测值。
以下参照图7对将人的头部作为监视对象的场合下的识别处理区域的设定例进行说明。
在图7中，由4个点p1～点p4围成的区域602与图6所示的区域602相同。也就是说，区域602的高度h和宽度u的实测值是已知数。因此，根据实际的人的身高求出头部的高度，以此来决定高度Ho。此外，在图7所示的摄像机图像中，可以根据人的头部的高度Ho和出入口301的高度H的比率在摄像机图像中设定高度ho的位置。此外，通过如点q1～点q4所示那样设定高度的富裕量Hm(在摄像机图像中为hm)，能够设定假定人的头部将通过的高度方向的区域。
并且，在宽度方向上，能够根据摄像机图像中的宽度u与其实测值之间的比率从实际的宽度的富裕量Um求出摄像机图像中的宽度的富裕量um。此外，识别参数运算部分24能够设定将人的头部作为监视对象时的识别处理区域701(以阴影方式显示)。通过上述处理，识别参数运算部分24能够算出摄像机图像中的识别处理区域701的坐标(也可以是顶点的坐标)。
以下参照图5和图7对摄像机图像中的监视对象的移动方向进行说明。例如在对移动体的数量进行计数时，为了判定移动体是通过出入口进入还是通过出入口外出，需要掌握摄像机图像中的监视对象的移动方向。另外，在进行人员出入管理时，为了判定通过出入口的人员是出去的人员还是进来的人员，需要掌握摄像机图像中的监视对象的移动方向。
在图5所示的布置信息32a中，以箭头503表示监视对象从出入口301进入室内的方向。在此，该箭头503朝向与出入口301垂直的方向。在将该箭头503作为箭头702显示在图7所示的摄像机图像上时，箭头702朝向与识别处理区域701垂直的方向。图7的该箭头702具有随着图5所示的角度θ接近0度，图7的箭头702在摄像机图像中变为水平方向，并且随着图5所示的角度θ接近90度，图7的箭头702在摄像机图像中变为垂直方向的特性。此外，识别参数运算部分24能够算出摄像机图像中的监视对象的移动方向。在进行人员出入管理时，在通过图像识别处理部分25检测到多个移动(移动方向)的情况下，可以将所算出的移动方向(箭头702)作为指标来判别各个移动是人员从出入口出入时的移动还是应作为杂波处理(不进行出入判定)的移动。
以下对摄像机图像中的监视对象的移动方向(箭头702)的利用方法进行说明。在图5所示的布置信息32a的场合，当在图像识别处理中检测到监视对象的移动时，如果该移动相对于箭头702在小于直角方向的范围内时，能够将该移动判定为是进入室内的移动，如果该移动相对于箭头702在大于直角方向的范围内时，能够将该移动判定为是走出室内的移动。
以下参照图8对模板的变换信息的计算方法进行说明。图8(a)表示将模板变换为适合摄像机位置的场合，图8(b)表示对摄像机图像进行变换而使其与模板的拍摄方向相匹配的场合。
例如，如图8(a)所示，在所准备的模板是从正面拍摄的模板801时，在图5所示的布置信息32a的情况下，由于摄像机图像的监视对象是从摄像机设置位置502的高度以及角度θ的位置拍摄的，所以其模式与模板的模式不同。因此，通过识别参数运算部分24对模板进行变换处理，将该模板变换成从摄像机设置位置502的高度以及角度θ的位置拍摄的那样的模板，并生成经过变换的模板802。此外，变换信息根据摄像机设置位置502的高度以及角度θ来决定。此后，由图像识别处理部分25使用变换后的模板802进行图像识别处理，由此能够防止识别性能下降。
另外，如图8(b)所示，摄像机图像中拍摄到的监视对象，如图像信息811所示，是从摄像机设置位置502的高度以及角度θ的位置被拍摄到的。在这种情况下，如果所准备的模板是从正面拍摄的模板801，则由识别参数运算部分24对图像信息811进行处理，将其变换成从正面拍摄的状态，并生成经过变换的图像信息812。此外，变换信息根据摄像机设置位置502的高度以及角度为θ来决定。此后，通过由图像识别处理部分25使用变换后的模板812来进行图像识别处理，能够防止识别性能下降。
以下参照图9和图10对在摄像机图像中设定三维的识别处理区域的场合进行说明。
图9是在出入口301周围指定了识别处理区域901(以阴影方式显示)时的布置信息32b的示例图。该布置信息32b由布置信息生成部分22生成。此外，在设定识别处理区域901(以阴影方式显示)时，通过布置信息生成部分22受理由光标501指定的识别处理区域901的顶点的输入，由此来设定识别处理区域901(以阴影方式显示)。布置信息32b的识别处理区域901(以阴影方式显示)的坐标通过前处理信息生成部分23存储在前处理信息34中。
接着，识别参数运算部分24首先将识别处理区域901作为识别处理区域901a(以点划线表示)设定在图10所示的摄像机图像中。识别处理区域901a的尺寸根据显示在图9所示的布置信息32b上的识别处理区域901的纵横比设定。识别处理区域901a的宽度上的进深方向被设定为与由点p1～点p4形成的平面的垂直方向相平行。
此后，识别参数运算部分24，与在图7中设定二维的识别处理区域701的场合一样，相对于识别处理区域901a的顶点，设定从该顶点起的高度方向，由此能够设定三维的识别处理区域1001(以阴影方式显示)。
以下返回图1进行说明。图像识别处理部分25参照存储在存储部分30中的识别参数35，对通过图7的识别处理区域701(以阴影方式显示)或者图10的识别处理区域1001(以阴影方式显示)的监视对象进行图像识别处理，并将处理结果输出到显示装置130中。图像识别处理可以使用在先技术(江岛著“使用头部检测系统Head Finder进行的人物追踪”，电子信息通信学会技术研究报告，PRMU，图案识别和介质理解100(442)，15-22，2000-11-09)。
(变形例)
在本实施方式中，对将摄像机设置位置502设定在任意场所时的情况进行了说明，而在以下说明的变形例中，预先准备多个可供选择的摄像机设置位置502，并针对每个摄像机设置位置502，事先算出识别参数，将摄像机设置位置502与识别参数相关联地存储在存储部分30中。
图11是示出了预先决定的摄像机设置位置502(A～I)与识别处理区域(出入口301)的布置信息32c的示例图。在图11中，控制部分21受理从输入装置120使用光标501对摄像机设置位置502(A～I)中的任一个设置位置进行了选择的输入。接着，图像识别处理部分25从存储部分30获取与输入到控制部分21中的摄像机设置位置502(A～I)相对应的识别参数35，并进行图像识别处理。通过采用上述结构，能够省略用于生成识别参数35的内部运算，从而能够缩短在图像识别处理开始前用于生成识别参数35所需的时间。
上述本实施方式的映像监视装置10具有：前处理信息生成部分23，其获取作为图像识别处理对象的识别处理区域301的位置和摄像机设置位置502，计算所述识别处理区域301的位置和所述摄像机设置位置502之间的位置关系，并算出表示该位置关系的前处理信息34；识别参数运算部分24，其参照所述前处理信息34，并根据实测值与由所述摄像机110拍摄到的摄像机图像中的距离之间的比率算出在图像识别处理中使用的识别参数35(摄像机图像中的识别处理区域701的坐标)；以及图像识别处理部分25，其使用所述识别参数35对通过识别处理区域701的监视对象进行图像识别处理。
此外，在本实施方式中，通过布置信息生成部分22从监视区域信息31生成布置信息32，但也可以设置成为了实现所述目标，由用户手动直接生成布置信息32。
此外，在图6中使用4个点指定了区域602的顶点，但用于指定位置的点并不仅限于4个点，也可以由3个以上的点来表示区域。
-符号说明-
1 映像监视系统
10 映像监视装置
20 处理部分
21 控制部分(第四单元)
22 布置信息生成部分
23 前处理信息生成部分(第一单元)
24 识别参数运算部分(第二单元)
25 图像识别处理部分(第三单元)
30 存储部分
31 监视区域信息
32、32a、32b、32c 布置信息
33 摄像机信息
34 前处理信息
35 识别参数
40 输入输出IF
110 摄像机
120 输入装置
130 显示装置
301 出入口(布置信息中的出入口)
501 光标
502 摄像机设置位置
601 出入口(摄像机图像中的出入口)
701、901、1001 识别处理信息
702 箭头(摄像机图像中的监视对象的移动方向)
801 模板
802 变换后的模板
811 图像信息
812 变换后的图像信息

Claims (10)

1.一种映像监视装置，从对通过监视区域的移动体进行拍摄的摄像机获取拍摄图像，并对所获取的该拍摄图像进行图像识别处理以对所述移动体进行监视，所述映像监视装置的特征在于具有：
第一单元，所述第一单元在定义于二维空间的平面上获取所述拍摄图像中的表示对所述移动体进行图像识别处理的区域的识别处理区域的位置和拍摄所述移动体的摄像机的设置位置，并且计算所述识别处理区域的位置与所设摄像机的设置位置之间的位置关系；
第二单元，所述第二单元根据所述位置关系，计算所述拍摄图像中的用于所述图像识别处理的所述识别处理区域的位置作为识别参数；以及
第三单元，所述第三单元使用所述识别参数进行图像识别处理。
2.如权利要求1所述的映像监视装置，其特征在于，
所述第一单元计算由在所述平面上通过所述识别处理区域内的规定位置的基准线与通过所述规定的位置以及表示从不在所述平面上的所述摄像机的设置位置下垂到所述平面的垂线的垂足的点的直线形成的角度作为所述位置关系。
3.如权利要求1或者2所述的映像监视装置，其特征在于，
在所述第二单元中，使用真实空间中的识别处理区域的实测值和所述拍摄图像中的距离的比率，并根据所述实测值来设定所述拍摄图像中的识别处理区域的顶点的位置。
4.如权利要求1或者2所述的映像监视装置，其特征在于，
所述第二单元进一步根据所述位置关系来计算变换信息作为所述识别参数，所述变换信息以使所述图像识别处理中使用的模板和所述拍摄图像变为从相同的方向被拍摄的状态的方式进行变换。
5.如权利要求1或者2所述的映像监视装置，其特征在于，
所述第二单元进一步计算与所述拍摄图像中的识别处理区域相垂直的方向作为所述识别参数，
所述第三单元在图像识别处理中对所述移动体的移动方向和所述方向进行比较，以对所述移动体的移动进行判定。
6.如权利要求2所述的映像监视装置，其特征在于，
所述第一单元从由用户操作的输入装置获取从所述平面起算的垂直高度、摄像机相对于所述平面的俯角以及与所述平面平行的方向的摄像机的朝向作为所述摄像机的设置位置。
7.如权利要求1所述的映像监视装置，其特征在于，
所述映像监视装置进一步具有存储部分和第四单元，
针对多个所述摄像机的设置位置，所述存储部分以相关联的方式预先对各个所述摄像机的设置位置和所述识别参数进行储存，
所述第四单元受理来自由用户操作的输入装置的从所述多个摄像机的设置位置中选择任一个摄像机的设置位置的输入，
所述第三单元从所述存储部分获取与所述第四单元所受理的所述摄像机的设置位置相关联的所述识别参数，并使用该识别参数进行图像识别处理。
8.一种映像监视方法，其是从对通过监视区域的移动体进行拍摄的摄像机获取拍摄图像，并对所获取的该拍摄图像进行图像识别处理以对所述移动体进行监视的映像监视装置的映像监视方法，所述映像监视装置的映像监视方法的特征在于，由所述映像监视装置执行：
第一步骤，在所述第一步骤中，在定义于二维空间的平面上获取所述拍摄图像中的表示对所述移动体进行图像识别处理的区域的识别处理区域的位置和拍摄所述移动体的摄像机的设置位置，并且计算所述识别处理区域的位置与所设摄像机的设置位置之间的位置关系；
第二步骤，在所述第二步骤中，根据所述位置关系，计算所述拍摄图像中的用于所述图像识别处理的所述识别处理区域的位置作为识别参数；以及
第三步骤，在所述第三步骤中，使用所述识别参数进行图像识别处理。
9.如权利要求8所述的映像监视方法，其特征在于，
所述映像监视装置进一步具有存储部分和第四单元，针对多个所述摄像机的设置位置，所述存储部分以相关联的方式预先对各个所述摄像机的设置位置和所述识别参数进行储存，所述第四单元受理来自由用户操作的输入装置的从所述多个摄像机的设置位置中选择任一个摄像机的设置位置的输入，
在所述第三步骤中，从所述存储部分获取与所述第四单元所受理的所述摄像机的设置位置相关联的所述识别参数，并使用该识别参数进行图像识别处理。
10.一种程序，其使作为计算机的所述映像监视装置执行如权利要求8或者9所述的映像监视方法。
CN2012102494793A 2011-08-30 2012-07-18 映像监视装置、映像监视方法以及程序 Pending CN102970514A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-187044 2011-08-30
JP2011187044A JP5525495B2 (ja) 2011-08-30 2011-08-30 映像監視装置、映像監視方法およびプログラム

Publications (1)

Publication Number Publication Date
CN102970514A true CN102970514A (zh) 2013-03-13

Family

ID=47743172

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012102494793A Pending CN102970514A (zh) 2011-08-30 2012-07-18 映像监视装置、映像监视方法以及程序

Country Status (3)

Country Link
US (1) US20130050483A1 (zh)
JP (1) JP5525495B2 (zh)
CN (1) CN102970514A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105284108A (zh) * 2013-06-14 2016-01-27 株式会社日立制作所 影像监视系统、监视装置
CN109215073A (zh) * 2017-06-29 2019-01-15 罗伯特·博世有限公司 用于调节摄像机的方法、监视装置和计算机可读介质

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10248868B2 (en) * 2012-09-28 2019-04-02 Nec Corporation Information processing apparatus, information processing method, and information processing program
US9767228B2 (en) 2014-01-22 2017-09-19 Honeywell International Inc. Determining a deployment of an access control system
CN104850215B (zh) * 2014-02-18 2018-11-09 联想(北京)有限公司 信息处理方法、系统及电子设备
US10373412B2 (en) * 2016-02-03 2019-08-06 Sensormatic Electronics, LLC System and method for controlling access to an access point
JP7140583B2 (ja) * 2018-07-17 2022-09-21 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
AU2020435735B2 (en) 2020-03-17 2024-03-21 Nec Corporation Gate system, gate apparatus, image processing method therefor, program, and arrangement method for gate apparatus

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128291A1 (en) * 2002-04-17 2005-06-16 Yoshishige Murakami Video surveillance system
CN1823256A (zh) * 2003-07-11 2006-08-23 奥林巴斯株式会社 信息呈现装置和使用该信息呈现装置的信息呈现系统
US20060285770A1 (en) * 2005-06-20 2006-12-21 Jongwoo Lim Direct method for modeling non-rigid motion with thin plate spline transformation
CN101093581A (zh) * 2006-06-23 2007-12-26 佳能株式会社 基于摄取图像计算关于测量对象的信息的信息处理方法和设备
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101236599A (zh) * 2007-12-29 2008-08-06 浙江工业大学 基于多摄像机信息融合的人脸识别检测装置
CN101404757A (zh) * 2007-10-04 2009-04-08 三星Techwin株式会社 监视摄像机系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001045467A (ja) * 1999-07-29 2001-02-16 Canon Inc 画像処理装置及び画像処理方法及び記憶媒体
JP3915805B2 (ja) * 2004-08-31 2007-05-16 住友電気工業株式会社 駐車場におけるカメラ設置条件の自動決定方法及び装置
JP2006177086A (ja) * 2004-12-24 2006-07-06 Matsushita Electric Ind Co Ltd 入退室管理装置
JP5079547B2 (ja) * 2008-03-03 2012-11-21 Ｔｏａ株式会社 カメラキャリブレーション装置およびカメラキャリブレーション方法
JP5429445B2 (ja) * 2008-04-08 2014-02-26 富士フイルム株式会社 画像処理システム、画像処理方法、およびプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050128291A1 (en) * 2002-04-17 2005-06-16 Yoshishige Murakami Video surveillance system
CN1823256A (zh) * 2003-07-11 2006-08-23 奥林巴斯株式会社 信息呈现装置和使用该信息呈现装置的信息呈现系统
US20060285770A1 (en) * 2005-06-20 2006-12-21 Jongwoo Lim Direct method for modeling non-rigid motion with thin plate spline transformation
CN101093581A (zh) * 2006-06-23 2007-12-26 佳能株式会社 基于摄取图像计算关于测量对象的信息的信息处理方法和设备
CN101404757A (zh) * 2007-10-04 2009-04-08 三星Techwin株式会社 监视摄像机系统
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101236599A (zh) * 2007-12-29 2008-08-06 浙江工业大学 基于多摄像机信息融合的人脸识别检测装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105284108A (zh) * 2013-06-14 2016-01-27 株式会社日立制作所 影像监视系统、监视装置
CN105284108B (zh) * 2013-06-14 2019-04-02 株式会社日立制作所 影像监视系统、监视装置
CN109215073A (zh) * 2017-06-29 2019-01-15 罗伯特·博世有限公司 用于调节摄像机的方法、监视装置和计算机可读介质

Also Published As

Publication number Publication date
JP2013051477A (ja) 2013-03-14
US20130050483A1 (en) 2013-02-28
JP5525495B2 (ja) 2014-06-18

Similar Documents

Publication Publication Date Title
CN102970514A (zh) 映像监视装置、映像监视方法以及程序
JP5586765B2 (ja) カメラキャリブレーション結果検証装置および方法
US20090237508A1 (en) Method and apparatus for providing immersive surveillance
CN111192321B (zh) 目标物三维定位方法与装置
GB2436904A (en) Image surveillance/retrieval system
CN109840950B (zh) 得到真实尺寸3d模型的方法、勘测装置
JP6174968B2 (ja) 撮像シミュレーション装置
JP5079547B2 (ja) カメラキャリブレーション装置およびカメラキャリブレーション方法
EP2476999B1 (en) Method for measuring displacement, device for measuring displacement, and program for measuring displacement
JP2007243509A (ja) 画像処理装置
JP5183152B2 (ja) 画像処理装置
Braun et al. Process-and computer vision-based detection of as-built components on construction sites
US12033406B2 (en) Method and device for identifying presence of three-dimensional objects using images
CN117711130A (zh) 基于3d建模的厂区安全生产监管方法及系统、电子设备
CN116152471A (zh) 基于视频流的厂区安全生产监管方法及其系统、电子设备
JP5960472B2 (ja) 画像監視装置
JP2005157635A (ja) 混雑度計測装置、設備制御システム、および混雑度計測方法
JP4812099B2 (ja) カメラ位置検出方法
JP2020135152A (ja) 映像解析支援装置及び方法
JP4449808B2 (ja) 人物検出装置
KR102498028B1 (ko) 감시 카메라 시스템 및 그 시스템 사용 방법
JP2020126332A (ja) 物体位置推定装置およびその方法
CN113570663B (zh) 基于单线激光雷达和顶视摄像头融合的室内定位方法
WO2022239291A1 (ja) 物体検知装置及び方法
JP2013211739A (ja) 画像監視装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: HITACHI INDUSTRIAL CONTROL SOLUTIONS LTD.

Free format text: FORMER OWNER: HITACHI,LTD.

Effective date: 20141115

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141115

Address after: Hitachi County of Ibaraki City, Japan

Applicant after: HITACHI INDUSTRY AND CONTROL SOLUTIONS, LTD.

Address before: Tokyo, Japan, Japan

Applicant before: Hitachi Ltd.

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130313