CN103339922A - 图像传感器系统、信息处理装置、信息处理方法及程序 - Google Patents

图像传感器系统、信息处理装置、信息处理方法及程序 Download PDF

Info

Publication number
CN103339922A
CN103339922A CN2012800042535A CN201280004253A CN103339922A CN 103339922 A CN103339922 A CN 103339922A CN 2012800042535 A CN2012800042535 A CN 2012800042535A CN 201280004253 A CN201280004253 A CN 201280004253A CN 103339922 A CN103339922 A CN 103339922A
Authority
CN
China
Prior art keywords
mentioned
image
shaded areas
surveyed area
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012800042535A
Other languages
English (en)
Other versions
CN103339922B (zh
Inventor
长田和美
榎原孝明
马场贤二
野田周平
西村信孝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN103339922A publication Critical patent/CN103339922A/zh
Application granted granted Critical
Publication of CN103339922B publication Critical patent/CN103339922B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/35Categorising the entire scene, e.g. birthday party or wedding scene
    • G06V20/36Indoor scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Image Input (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

具备:摄像机构(10),对规定空间进行摄像;图像取得机构(11),取得由上述摄像机构(10)摄像的图像;遮蔽区域导出机构(24),使用上述图像取得机构(11)取得的图像,从该图像内导出不作为传感检测对象的遮蔽区域;检测区域导出机构(26),使用上述图像取得机构(11)取得的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域;保持机构(12、13),保持上述遮蔽区域及上述检测区域作为设定信息;以及传感检测机构(14),基于保持在上述保持机构(12、13)中的设定信息,从上述取得机构取得的图像中对上述空间的状态进行传感检测。

Description

图像传感器系统、信息处理装置、信息处理方法及程序
技术领域
本发明的实施方式涉及图像传感器系统、信息处理装置、信息处理方法及程序。 
背景技术
以往,使用图像传感器传感检测人的在/不在或行动的技术被应用到安全用途等中。在这样的技术中,由于能够从图像传感器得到的信息量较多,所以一般根据应用的环境调整不作为传感检测对象的区域(遮蔽区域)等。在安全用途等中,图像传感器的设置台数相对于大厦的规模比较少(例如,在各楼层中有一个等),很多情况下一边观察所摄像的图像一边手动一台台进行图像传感器的调整。 
此外,上述的技术不仅应用于安全用途,也开始应用到照明或空调等自动控制中。在此情况下,由于对应于大厦的规模,图像传感器的设置台数也增加,所以为了手动一台台进行调整需要较多的时间。所以,以往提出了设置遮蔽区域设定用的专用模式、在该专用模式时设定在图像中有变化的区域作为遮蔽区域的技术。 
现有技术文献 
专利文献 
专利文献1:日本特开2011-28956号公报 
发明内容
发明要解决的课题 
但是,在有关上述遮蔽区域设定的现有技术中,虽然能够自动设定遮蔽区域,但没有考虑作为传感检测对象的区域。因此,不能高效率地设定作为传感检测对象的区域,例如难以按照通路或桌子等区域的每个类别设定传感检测对象区域。 
用于解决课题的手段 
实施方案的图像传感器系统具备摄像机构、图像取得机构、遮蔽区域导出机构、检测区域导出机构、保持机构和传感检测机构。摄像机构对规定空间进行摄像。图像取得机构取得由摄像机构摄像的图像。遮蔽区域导出机构使用图像取得机构取得的图像,从该图像内导出不作为传感检测对象的遮蔽区域。检测区域导出机构使用图像取得机构取得的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域。保持机构将遮蔽区域及检测区域作为设定信息加以保持。传感检测机构基于保持在保持机构中的设定信息,从取得机构取得的图像中传感检测空间的状态。 
附图说明
图1是表示有关第一实施方式的图像传感器系统的结构例的图。 
图2是表示有关第一实施方式的图像传感器的设置例的图。 
图3是表示有关第一实施方式的图像传感器及维护终端的结构例的块图。 
图4是表示由图像传感器摄像的图像的一例的图。 
图5是表示遮蔽区域及检测区域的一例的图。 
图6是用来说明镜头中心检测部的动作的图。 
图7是表示畸变修正图像的一例的图。 
图8是表示正像遮蔽区域的一例的图。 
图9是表示第一实施方式的维护终端进行的区域设定处理的一例的流程图。 
图10是表示第一实施方式的维护终端进行的区域生成处理的一例的流程图。 
图11是表示畸变修正图像的显示例的图。 
图12是表示有关第一实施方式的变形例1的图像传感器的结构例的块图。 
图13是表示有关第一实施方式的变形例的权限设定保持部的一例的图。 
图14是表示有关第一实施方式的变形例2的维护终端的结构例的块 图。 
图15是表示有关第二实施方式的维护终端的结构例的块图。 
图16是表示有关第二实施方式的标记的例子的图。 
图17是表示有关第二实施方式的图像传感器取得的图像的一例的图。 
图18是用来说明有关第二实施方式的遮蔽区域设定部的动作的图。 
图19是用来说明有关第二实施方式的遮蔽区域设定部的动作的图。 
图20是表示第二实施方式的维护终端进行的区域设定处理的一例的流程图。 
图21是表示有关第三实施方式的图像传感器的结构例的块图。 
图22是用来说明有关第三实施方式的图像传感器的动作的图。 
图23是用来说明有关第三实施方式的图像传感器的动作的图。 
图24是用来说明有关第三实施方式的图像传感器的动作的图。 
图25是表示第三实施方式的图像传感器进行的区域修正处理的一例的流程图。 
图26是表示有关第三实施方式的图像传感器的外观结构的一例的图。 
图27是表示有关第三实施方式的图像传感器的外观结构的另一例的图。 
具体实施方式
以下,参照附图详细地说明有关本发明的图像传感器系统及摄像管理方法的实施方式。在以下的实施方式中,对将有关本发明的图像传感器系统及摄像管理方法应用到办公大厦等建筑物中的例子进行说明。 
[第一实施方式] 
图1是表示有关本实施方式的图像传感器系统100的结构例的图。如该图所示,图像传感器系统100具有图像传感器10和维护终端20。维护终端20与各个图像传感器10或连接着各个图像传感器10的网络N可拆装地连接,与各图像传感器10之间进行各种信息的收发。另外,图像传感器10的个数没有特别限定。 
图像传感器10具有由鱼眼镜头(圆周鱼眼镜头)及CCD(Charge Coupled Device:电荷耦合装置)等图像传感器等构成的鱼眼摄像机(都未 图示),使用该鱼眼摄像机对广角的图像进行摄像。此外,图像传感器10具备CPU(Central Processing Unit:中央处理器)、ROM(Read Only Memory:只读存储器)、RAM(Random Access Memory:随机存储器)等计算机结构、存储各种信息的非易失性的存储部、和与维护终端20等外部装置进行通信的通信部(都未图示),并且通过对后述的功能部所摄像的图像进行传感检测,检测图像传感器10周边的状态,将其检测结果储存或向外部装置输出。这里,作为检测结果,可以举出表示人的在/不在的信息等。 
图2是表示有关本实施方式的图像传感器10的设置例的图。如该图所示,图像传感器10设置在建筑物的屋顶部,对建筑物内进行摄像。另外,在图2所示的建筑物内,示出了照明L1~L6及空调AC1、AC2设在屋顶部的例子,未图示的需求控制装置基于图像传感器10的检测结果执行这些电气设备的电力控制(例如开启/关闭)。另外,设置在建筑物内的图像传感器10的位置及个数并不限定于图2的例子。 
回到图1,维护终端20是PC(Personal Computer:个人计算机)或便携通信终端等信息处理装置,主要进行图像传感器10的维护。维护终端20具备CPU、ROM、RAM等计算机结构、存储各种信息的非易失性的存储部、进行与图像传感器10等外部装置之间的通信的通信部、键盘或指示设备等输入部、和显示器等输出部(都未图示)。维护终端20基于由图像传感器10分别摄像的图像或该图像的摄像条件,对各图像传感器10设定后述的遮蔽区域及检测区域。 
图3是表示图像传感器10及维护终端20的结构例的块图。图像传感器10作为功能部而具备图像取得部11、遮蔽区域设定保持部12、检测区域设定保持部13、传感检测部14和输出·储存部15。图像传感器10具备的功能部中的图像取得部11、传感检测部14及输出·储存部15由图像传感器10的计算机结构实现,遮蔽区域设定保持部12及检测区域设定保持部13由图像传感器10的存储介质实现。 
图像取得部11依次取得由鱼眼摄像机摄像的帧单位的图像。此外,图像取得部11将所取得的图像向传感检测部14输出,并且经由未图示的通信部向维护终端20提供(输出)。另外,假设在向维护终端20输出的图像中,带有能够确定本装置的IP地址等标识符。 
遮蔽区域设定保持部12保持图像取得部11取得的图像区域中的遮蔽区域,该遮蔽区域是决定从传感检测对象中排除的区域的数据。此外,检测区域设定保持部13保持图像取得部11取得的图像区域中的检测区域,该检测区域是决定作为传感检测对象的区域的数据。 
以下,参照图4及图5对遮蔽区域及检测区域进行说明。图4是表示由图像传感器10摄像的图像的一例的图。通过鱼眼摄像机的光学作用,图像传感器10对图4所示那样的球形的图像进行摄像。因此,在由图像传感器10摄像的图像中,包含例如建筑物的壁部等那样、应从传感检测对象中排除的区域。所以,如图5所示,通过将由图像传感器10摄像的图像中的应从传感检测对象中排除的区域设定为遮蔽区域A11,能够将该区域从传感检测对象中排除。 
此外,检测区域是将由图像传感器10摄像的图像中的作为传感检测对象的区域按照该区域的每个类别设定的区域。这里,区分类别的指标优选的是使用例如每单位时间检测出的人数或后述的活动量等、基于在室者的状态得到的数值。在图5中,表示基于人的活动量从图像内区分对应于通路及桌子(办公桌)的区域、将对应于通路的区域设为检测区域A21、将对应于桌子的区域设为检测区域A22的例子。在划分类别后的各检测区域中,构成为,有关传感检测的参数(例如,有关人的存在与否确认的阈值等)不同等、对应于其类别进行传感检测处理。另外,关于无论在遮蔽区域A11及检测区域A21、A22的哪个中都不属于的区域,既可以设为与遮蔽区域A11同样从传感检测对象中排除的形态,也可以设为作为其他区域而使用固有的参数进行传感检测的形态。 
回到图3,传感检测部14通过按照保持在遮蔽区域设定保持部12及检测区域设定保持部13中的遮蔽区域及检测区域的设定内容,对图像取得部11取得的时间上连续的多个图像进行传感检测,来检测本装置所设置的空间内的状态。具体而言,传感检测部14在从图像取得部11取得的图像的整个区域中将遮蔽区域排除后,计算剩余的区域中被设定为检测区域的区域中的图像间的变化量,基于与该区域的类别对应的参数,取得人的在/不在等的检测结果。这里,参数例如是有关在/不在的判定的阈值等,设按照检测区域的每个类别来设定参数。另外,人的在/不在的检测方法使用公知 技术。 
输出·储存部15将由传感检测部14取得的检测结果向进行建筑物内的电气设备的电力控制的需求控制装置等外部装置输出。此外,输出·储存部15将由传感检测部14取得的检测结果存储到本装置或外部装置具有的未图示的存储介质中。 
另一方面,维护终端20如图3所示,具备镜头中心检测部21、遮蔽区域设定参数保持部22、摄像机参数保持部23、遮蔽区域设定部24、行动取得部25、检测区域设定部26、畸变修正部27、手动区域设定部28和区域变换部29。这里,维护终端20具备的功能部中的镜头中心检测部21、遮蔽区域设定部24、行动取得部25、检测区域设定部26及畸变修正部27、区域变换部29由维护终端20的计算机结构实现,遮蔽区域设定参数保持部22及摄像机参数保持部23由维护终端20的存储介质实现。此外,手动区域设定部28通过维护终端20的计算机结构、重力部和显示部的协同来实现。 
镜头中心检测部21将由各图像传感器10的图像取得部11取得的图像解析,从该图像中检测图像传感器10的光学中心(镜头中心)。具体而言,镜头中心检测部21通过进行作为公知的图像处理方法的Hough变换(霍夫变换),如图6所示,检测作为由鱼眼摄像机摄像的图像的轮廓的圆Cr,将该圆Cr的中心坐标O作为镜头中心。这里,图6是用来说明镜头中心检测部21的动作的图。 
遮蔽区域设定参数保持部22保持有有关遮蔽区域的设定的参数(遮蔽区域设定参数)。这里,作为遮蔽区域设定参数,包括例如半径2m的圆形或1边为3m的矩形等、表示大小及形状的设定值。此外,也可以是作为参数而包含指示将这些设定值组合的指示信息的形态。 
摄像机参数保持部23将各图像传感器10的标识符(例如IP地址等)与表示该图像传感器10的摄像条件的参数(摄像机参数)建立关联并加以保持。作为摄像机参数,可以举出例如设置图像传感器10的高度、或鱼眼摄像机的畸变系数(畸变象差)等。 
遮蔽区域设定部24以由镜头中心检测部21检测出的镜头中心为基准,使用遮蔽区域设定参数及摄像机参数设定各图像传感器10的遮蔽区域。 
具体而言,遮蔽区域设定部24以由镜头中心检测部21检测出的镜头中心为基准配置由保持在遮蔽区域设定参数保持部22中的遮蔽区域设定参数决定的区域。此外,遮蔽区域设定部24根据各图像传感器10的摄像机参数,调整配置的区域的大小或形状,导出其结果作为遮蔽区域。并且,遮蔽区域设定部24将所导出的遮蔽区域向对应的图像传感器10发送,通过保持在该图像传感器10的遮蔽区域设定保持部12中,设定各图像传感器10的遮蔽区域。 
行动取得部25通过将由各图像传感器10取得的规定期间量(例如,10分钟、24小时、10天等)的图像储存并解析,从该图像取得将在室者的行动的特征数值化而成的特征量。这里,所谓特征量,例如是活动量等,使用公知的技术取得。 
例如,在取得活动量的情况下,对于由各图像传感器10取得的规定期间量的图像,提取图像间的差分(差分图像),通过将该提取出的差分图像叠加而生成累积的累积差分图像。此外,行动取得部25将所生成的累积差分图像的有浓度梯度的区域的像素或块的周边区域的亮度变化的特征数值化,并确定该区域的像素或块在该图像上的位置关系,由此生成累积差分图像内的特征量。此外,行动取得部25使用预先存储在未图示的存储部等中的识别模型,根据所生成的特征量识别在室者的行动内容。并且,行动取得部25按照图像内的每个区域(各位置)统合计算从累积差分图像得到的行动内容的识别结果作为活动量。此外,按照图像内的每个区域(各位置)计算由发生时间/总计测时间等的关系式得到的各行动的发生频率。 
检测区域设定部26基于行动取得部25从关于各图像传感器10的图像取得的每个区域的活动量,将该区域划分为通路或桌子等规定的类别,将这些各类别的区域作为检测区域导出。例如,检测区域设定部26将发生频率为30%以上的区域基于其活动量的内容划分,由此将该区域区分为通路或桌子等类别。并且,检测区域设定部26将区分出的各类别的检测区域向对应的图像传感器10发送,保持到该图像传感器10的检测区域设定保持部13中,由此对各图像传感器10设定检测区域。 
由此,在设置有各个图像传感器10的办公室等中,能够对图像传感器10分别自动地设定与实际的使用状况匹配的检测区域,所以能够由各图像 传感器10取得更适当的检测结果。 
另外,设定上述遮蔽区域及检测区域的单位既可以是像素单位,也可以是任意的大小的块单位。此外,遮蔽区域及检测区域也可以不是图像数据而是坐标值。例如,在使用坐标值的情况下,通过指定矩形或多边形的各顶点坐标,能够表示区域。 
畸变修正部27通过对由各图像传感器10取得的图像实施作为公知的图像处置方法的畸变修正,生成正像化的畸变修正图像,使未图示的显示部显示该畸变修正图像。 
手动区域设定部28根据操作维护终端20的用户的输入,在畸变修正图像上设定与遮蔽区域相当的区域(以下,称作正像遮蔽区域)、或与检测区域相当的区域(以下,称作正像检测区域)。此外,区域变换部29通过对手动区域设定部28设定的正像遮蔽区域实施畸变修正部27进行的畸变修正的逆变换,生成与图像传感器10取得的图像对应的遮蔽区域。 
以下,参照图4、图5、图7、图8,对畸变修正部27、手动区域设定部28及区域变换部29的动作进行说明。首先,如果由图像传感器10取得的图像是图4所示的状态,则畸变修正部27对该图像进行畸变修正,由此生成正像化的畸变修正图像(参照图7)。这里,图7是表示畸变修正图像的一例的图。另外,畸变修正图像由未图示的显示部显示。 
手动区域设定部28经由未图示的输入装置受理操作维护终端20的用户的操作输入,根据该操作内容在畸变修正图像上设定正像遮蔽区域(图8参照)。这里,图8是表示正像遮蔽区域的一例的图,例示矩形状的正像遮蔽区域A12。 
并且,区域变换部29通过对由手动区域设定部28设定的正像遮蔽区域A12实施畸变修正的逆变换,生成与图4的图像对应的遮蔽区域A11(参照图5)。 
另外,将区域变换部29生成的遮蔽区域作为遮蔽区域设定参数的雏形,既可以为与对应的图像传感器10的标识符建立关联而保持到遮蔽区域设定参数保持部22中的形态,也可以为保持在作为图像的取得源的图像传感器10的遮蔽区域设定保持部12中的形态。此外,在本实施方式中,对遮蔽区域的生成进行了说明,但关于检测区域也能够同样生成。 
接着,对本实施方式的维护终端20的动作进行说明。首先,参照图9,对维护终端20执行的区域设定处理的动作进行说明。这里,图9是表示区域设定处理的一例的流程图。另外,本处理是在图像传感器10的设置时或维护作业时等、遮蔽区域及检测区域的设定(变更)时进行的。 
首先,在各个图像传感器10中取得图像,如果该图像被输出给维护终端20(步骤S11),则镜头中心检测部21通过将输入的各图像解析,从该图像中检测镜头中心(步骤S12)。 
遮蔽区域设定部24以在步骤S12中检测出的镜头中心为基准,通过使用保持在遮蔽区域设定参数保持部22中的遮蔽区域设定参数及保持在摄像机参数保持部23中的摄像机参数,导出与图像传感器10分别对应的遮蔽区域(步骤S13)。接着,遮蔽区域设定部24将导出的遮蔽区域保持到对应的图像传感器10的遮蔽区域设定保持部12中,由此对各图像传感器10设定遮蔽区域(步骤S14)。 
此外,行动取得部25通过将由各图像传感器10取得的规定期间量的图像解析,从该图像按照每个区域取得在室者的行动(活动量)(步骤S15)。接着,检测区域设定部26基于在步骤S15中取得的每个区域的活动量,按照该每个类别确定通路区域或作业区域等检测区域(步骤S16)。并且,检测区域设定部26通过将所确定的每个类别的检测区域保持到对应的图像传感器10的检测区域设定保持部13中,对各图像传感器10设定检测区域(步骤S17),将本处理结束。 
这样,根据上述区域设定处理,能够使用由图像传感器10分别摄像的图像及该图像的摄像条件导出遮蔽区域及检测区域,设定到各图像传感器10中。由此,能够对各图像传感器10自动地设定适合于各个图像传感器10的遮蔽区域及检测区域,所以能够高效率地进行遮蔽区域及检测区域的设定。 
另外,在上述区域设定处理中,为连续地进行遮蔽区域的设定和检测区域的设定的形态,但并不限定于此,也可以为作为独立的处理而单独进行的形态。 
接着,参照图10,对维护终端20进行的区域生成处理的动作进行说明。这里,图10是表示区域生成处理的一例的流程图。 
首先,在某一个图像传感器10中取得图像,如果该图像被输出给维护终端20(步骤S21),则畸变修正部27通过对输入的图像实施畸变修正,生成正像化的畸变修正图像(步骤S22),使未图示的显示部显示该畸变修正图像(步骤S23)。 
图11是表示显示在显示部上的畸变修正图像的显示例的图。另外,在该图中,表示为将畸变修正图像显示在显示区域A3中的形态。此外,配置在显示区域A3的右方的按钮B1~B3是指示遮蔽区域及检测区域(通路区域,作业区域)的输入的按钮,通过按下某个按钮后,在畸变修正图像上记述相当于区域的图形(矩形或多边形等),能够输入正像遮蔽区域及正像检测区域。另外,畸变修正图像的显示形态并不限定于图11的例子,例如也可以为将畸变修正图像和该畸变修正图像的原图像以可比较的状态加以显示的形态。此外,在该形态的情况下,也可以在原图像上叠加显示逆变换后的正像遮蔽区域或正像检测区域。 
回到图10,手动区域设定部28根据用户的操作内容,在畸变修正图像上设定正像遮蔽区域或正像检测区域(步骤S24)。接着,区域变换部29对设定在畸变修正图像上的正像遮蔽区域、正像检测区域实施在步骤S22中畸变修正部27进行的畸变修正的逆变换,由此生成与图像传感器10对应的遮蔽区域及检测区域(步骤S25),并结束本处理。 
这样,根据上述区域生成处理,将通过鱼眼摄像机的作用而畸变的图像正像化为畸变修正图像从而在该畸变修正图像上设定的正像遮蔽区域及正像检测区域逆变换,由此导出遮蔽区域及检测区域。由此,在手动生成(调整)遮蔽区域及检测区域时,不再需要考虑由鱼眼摄像机带来的畸变,所以能够削减在生成中需要的工序数,能够提高用户的方便性。 
另外,也可以为将在上述处理中生成的遮蔽区域及检测区域作为雏形保持在遮蔽区域设定参数保持部22及摄像机参数保持部23中的形态,也可以为保持到作为图像的取得源的图像传感器10的遮蔽区域设定保持部12及检测区域设定保持部13中的形态。 
如以上这样,根据本实施方式,能够对各图像传感器10自动设定适合于各个图像传感器10的遮蔽区域及检测区域,所以能够高效率地进行遮蔽区域及检测区域的设定。 
另外,在图3的结构中,为将图像传感器10取得的图像无条件地向维护终端20提供的形态,但为了安全性的提高,也可以为根据操作维护终端20的用户的类别而限制图像的提供的形态。以下,将该形态作为本实施方式的变形例1进行说明。 
图12是表示有关变形例1的图像传感器10a的结构例的块图。如该图所示,图像传感器10a除了上述图3的结构以外,还具备权限设定保持部16及登入处理部17。 
权限设定保持部16由图像传感器10a具有的存储介质实现,按照操作维护终端20的用户、即对图像传感器10a访问的用户的每个类别,规定了有关图像的阅览的权限。 
图13是表示权限设定保持部16的一例的图。如该图所示,在权限设定保持部16中,按照每个用户类别,将有关图像的阅览的权限建立关联地加以保持。这里,表示了作为用户类别而定义了与图像传感器10a的设置相关的维护员(设置用)、进行图像传感器10a的定期点检的维护员(定期点检用)、和图像传感器系统100的管理者的例子。此外,作为这些用户的权限,对于维护员(设置用)及管理者定义了许可图像的阅览,对于维护员(定期点检用)定义了不许可图像的阅览。 
回到图12,登入处理部17由图像传感器10a的计算机结构实现,从权限设定保持部16读取与访问本装置的用户的类别对应的权限,根据其内容控制是否将图像取得部11取得的图像向维护终端20输出。另外,在维护终端20中,设在向图像传感器10a访问时,通知操作该维护终端20的用户的用户类别。 
这样,在本变形例1的图像传感器10a中,通过根据对本装置访问的用户类别限制图像的输出,能够防止意外地进行了信息的输出,所以能够保护机密及隐私。另外,权限设定保持部16的设定内容并不限定于上述例子。例如,也可以是在作为维护终端20而使用PC的情况下能够阅览图像、在使用便携电话的情况下不能阅览图像等,按照维护终端20的每个类别设定权限。 
此外,在图3的结构中,形态为,在维护终端20中从图像传感器10摄像的图像中检测镜头中心,使用遮蔽区域设定参数保持部22及摄像机参 数保持部23保持的各种信息设定遮蔽区域,但也可以与检测区域同样为基于行动取得部25取得的活动量等设定遮蔽区域的形态。以下,将该形态作为本实施方式的变形例2进行说明。 
图14是表示有关变形例2的维护终端20a的结构例的块图。如该图所示,维护终端20a代替上述图3的镜头中心检测部21、遮蔽区域设定参数保持部22、摄像机参数保持部23及遮蔽区域设定部24的结构而具备遮蔽区域设定部24a。 
这里,遮蔽区域设定部24a基于行动取得部25从各图像传感器10的图像取得的每个区域的活动量或发生频率,导出遮蔽区域。 
例如,遮蔽区域设定部24a既可以将发生频率不到10%的区域作为遮蔽区域,也可以将活动量表示规定的行动内容的区域作为遮蔽区域。并且,遮蔽区域设定部24a将所导出的遮蔽区域向对应的图像传感器10发送、使其保持到该图像传感器10的遮蔽区域设定保持部12中,来对各图像传感器10设定遮蔽区域。 
如以上这样,根据本变形例2的维护终端20a,在设置有各个图像传感器10的办公室等中,能够对各个图像传感器10自动地设定与实际的使用状况匹配的遮蔽区域,所以能够由各图像传感器10取得更适当的检测结果。 
[第二实施方式] 
接着,将遮蔽范围及检测范围的其他设定方法作为第二实施方式进行说明。另外,对于与上述第一实施方式同样的构成要素赋予相同的附图标记而省略其说明。 
图15是表示有关第二实施方式的维护终端20b的结构例的块图。如该图所示,维护终端20b具备标记检测部31、遮蔽区域设定部32、检测区域设定部33、畸变修正部27、手动区域设定部28和区域变换部29。 
标记检测部31通过将由图像传感器10取得的图像解析,从该图像中检测规定标记,取得该标记的类别和图像内的检测位置(像素单位)。标记例如是具有规定的颜色或形状的物体、或如图16所示那样记述有规定的记号(A、B、C、D)或图形(星形、四边形、圆形记号、三角形)等的纸等的小片等,按照其类别,预先设定了遮蔽区域设定用或检测区域设定用等用途。这里,图16是表示标记的例子的图。 
另外,设标记的检测中使用作为公知的图像处理方法的字符识别或图像识别。此外,检测位置既可以是以标记的中心或左上角等、标记上的任意位置为基准的形态,也可以是以子像素的精度取得检测位置的形态。 
遮蔽区域设定部32在标记检测部31检测到的标记之中包含有遮蔽区域设定用的标记(以下,称作遮蔽区域设定标记)的情况下,提取该遮蔽区域设定标记,基于由这些遮蔽区域设定标记形成的区域,导出遮蔽区域。此外,遮蔽区域设定部32将导出的遮蔽区域向对应的图像传感器10发送,将其保持在该图像传感器10的遮蔽区域设定保持部12中,由此设定各图像传感器10的遮蔽区域。 
以下,参照图17~图19,对遮蔽区域设定部32的动作例进行说明。这里,图17是表示图像传感器10取得的图像的一例的图,包含有遮蔽区域设定标记M11~M14。这里,标记检测部31从图17的图像中检测遮蔽区域设定标记M11~M14,如下述所示那样取得遮蔽区域设定标记M11~M14的检测位置作为像素单位的坐标。 
遮蔽区域设定标记M11的检测位置:(xA,yA) 
遮蔽区域设定标记M12的检测位置:(xB,yB) 
遮蔽区域设定标记M13的检测位置:(xC,yC) 
遮蔽区域设定标记M14的检测位置:(xD,yD) 
在接着的遮蔽区域设定部32中,如图18所示,通过将遮蔽区域设定标记M11~M14的4个检测位置用具有与对应的图像传感器10的畸变系数对应的曲率的线段连结,由遮蔽区域设定标记M11~M14形成区域。此时,遮蔽区域设定部32使用图3所示的摄像机参数保持部23(未图示)的畸变系数或从图像导出的畸变系数等,通过公知的方法赋予畸变。此外,遮蔽区域设定部32通过将图像扫描、如图19所示那样将连结的线的外侧的区域全部涂抹,生成该涂抹的区域作为遮蔽区域A13。 
另外,在上述例子中,叙述了将由4个遮蔽区域设定标记包围的区域的外侧遮蔽的形态,但并不限定于此,也可以为将内侧遮蔽的形态。此外,也可以根据遮蔽区域设定标记的内容切换遮蔽的一侧。例如,也可以是由记号A~D的遮蔽区域设定标记将外侧遮蔽,由记号1~4的标记将内侧遮蔽等。 
此外,也可以为设置多个遮蔽区域设定标记的组(例如,同时设置记号A~D的遮蔽区域设定标记和记号1~4的遮蔽区域设定标记)、生成由各组的遮蔽区域设定标记导出的区域的逻辑积或逻辑和作为遮蔽区域的形态。此外,也可以将设置遮蔽区域设定标记而生成遮蔽区域的次数分为多个、取分别导出的遮蔽区域的逻辑积或逻辑和。 
此外,遮蔽区域设定标记的个数并不限定于4个,例如也可以使用6个一组的遮蔽区域设定标记生成多边形的遮蔽区域。此外,也可以将遮蔽区域的尺寸固定,对于一个遮蔽区域设定标记生成一个遮蔽区域。此外,也可以是将遮蔽区域分成3部分或分成4部分等进行分割的生成方法。 
检测区域设定部33在标记检测部31检测出的标记中包含有检测区域设定用的标记(以下,称作检测区域设定标记)的情况下,基于各检测区域设定标记的检测位置生成检测区域。此外,检测区域设定部33将所生成的检测区域向对应的图像传感器10发送,将其保持到该图像传感器10的检测区域设定保持部13中,由此设定各图像传感器10的检测区域。 
另外,检测区域设定部33的动作与遮蔽区域设定部32是同样的,所以省略详细的说明。此外,也可以是表示通路区域的检测区域设定标记、表示作业区域的检测区域设定标记等、按照检测区域的每个类别使检测区域设定标记不同的形态。 
接着,参照图20,对本实施方式的维护终端20b的动作进行说明。这里,图20是表示维护终端20b进行的区域设定处理的一例的流程图。另外,本处理是在图像传感器10的设置时或维护作业时等、遮蔽区域及检测区域的设定(变更)时进行的。 
首先,在各个图像传感器10中取得图像,如果该图像被输出给维护终端20b(步骤S31),则标记检测部31通过将各图像解析,从该图像内检测规定标记,取得该标记的类别和图像内的检测位置(步骤S32)。 
接着,遮蔽区域设定部32判断在标记检测部31从各图像检测到的标记之中是否包含有遮蔽区域设定标记(步骤S33)。这里,在判断为在哪个图像中都不包含遮蔽区域设定标记的情况下(步骤S33:否),向步骤S36转移。 
此外,在步骤S33中,在存在包含遮蔽区域设定标记的图像的情况下 (步骤S33:是),遮蔽区域设定部32用与对应的图像传感器10的畸变系数对应的线将遮蔽区域设定标记的检测位置连结,通过将连结的线的外侧(或内侧)的区域全部涂抹而生成遮蔽区域(步骤S34)。接着,遮蔽区域设定部32将所生成的遮蔽区域保持到对应的图像传感器10的遮蔽区域设定保持部12中,由此对各图像传感器10设定遮蔽区域(步骤S35),并向步骤S36转移。 
在步骤S36中,遮蔽区域设定部32判断在标记检测部31从各图像检测到的标记之中是否包含有检测区域设定标记(步骤S36)。这里,在判断为哪个图像中都不包含检测区域设定标记的情况下(步骤S36:否),结束本处理。 
此外,在步骤S36中,在存在包含检测区域设定标记的图像的情况下(步骤S36:是),检测区域设定部33用与对应的图像传感器10的畸变系数对应的线将检测区域设定标记的检测位置连结,通过将连结的线的内侧(或外侧)的区域全部涂抹而生成检测区域(步骤S37)。接着,检测区域设定部33将所生成的检测区域保持到对应的图像传感器10的检测区域设定保持部13中,由此对各图像传感器10设定检测区域(步骤S38),并结束本处理。 
如以上这样,根据本实施方式的维护终端20b,基于配置在图像传感器10的摄像范围中的标记的配置位置导出遮蔽区域及检测区域,设定到对应的图像传感器10中。由此,通过在希望设定的图像传感器10的摄像范围内、在与希望设定的区域对应的各位置上配置标记,从而能够对该图像传感器10设定遮蔽区域及检测区域,所以能够高效率地进行遮蔽区域及检测区域的设定。 
[第三实施方式] 
接着,对第三实施方式进行说明。在设置在屋顶上的图像传感器10中,有可能因物理的振动或老化等而在图像传感器10的摄像方向上发生偏差。在这样的情况下,随着摄像方向的偏差,摄像范围也变化,所以在图像传感器10取得的图像与遮蔽区域及检测区域之间发生不一致。所以,在第三实施方式中,对能够在各个图像传感器10中修正遮蔽区域及检测区域的形态进行说明。另外,对于与上述第一实施方式同样的构成要素赋予相同的 附图标记而省略其说明。 
图21是表示有关第三实施方式的图像传感器10b的结构例的块图。如该图所示,图像传感器10b除了上述图像取得部11、遮蔽区域设定保持部12、检测区域设定保持部13、传感检测部14及输出·储存部15以外,还具备误差角度计算部41、遮蔽区域修正部42和检测区域修正部43。另外,省略了与维护终端20之间的通信路径的图示。 
这里,误差角度计算部41取得本装置具有的鱼眼摄像机的摄像方向。另外,摄像方向的取得方法没有特别限制,例如也可以是使用作为公知的图像处理方法的Hough变换导出的形态、或使用作为公知的技术的电子罗盘计测的形态。 
在使用Hough变换的情况下,误差角度计算部41通过对由图像取得部11取得的图像实施Hough变换,检测存在于图像内的直线成分,将其中最强的直线成分的斜率作为摄像方向。例如,在办公室等中,墙壁与地板的边界、或桌子或搁架等直线的部分较多,通过检测该直线取得摄像方向,能够计测图像传感器10b相对于设置有图像传感器10b的房间的相对的朝向(摄像方向)。 
此外,误差角度计算部41通过将所取得的摄像方向与作为基准的基准方向比较,来计算表示作为与基准方向之间的差分的、偏差(角度)的大小及方向的误差角度。这里,所谓基准方向,是表示标准的摄像方向的方向,既可以是使用与上述同样的方法从在保持着标准的摄像方向的状态下摄像的图像中导出的形态,也可以是使用保持着标准的摄像方向的状态下计测的电子罗盘的计测值。另外,设每规定的时间(例如,每1小时或每1天等)进行误差角度的计算。 
遮蔽区域修正部42根据误差角度计算部41计算出的误差角度,将保持在遮蔽区域设定保持部12中的遮蔽区域修正。具体而言,遮蔽区域修正部42使保持在遮蔽区域设定保持部12中的遮蔽区域旋转误差角度,由此将由本装置取得的图像与遮蔽区域之间的不一致消除。此外,检测区域修正部43根据误差角度计算部41计算出的误差角度,通过与遮蔽区域修正部42同样的方法,将保持在在检测区域设定保持部13中的检测区域修正。 
以下,参照图4、图5、图22~图24,对误差角度计算部41、遮蔽区 域修正部42及检测区域修正部43的动作例进行说明。 
设图像取得部11在某个时刻t1取得的图像是图4,在该时刻t1以后的某个时刻t2取得的图像是图22。这里,如果设图4时的摄像方向(基准方向)是0°,图22时的摄像方向是30°,则误差角度计算部41通过将两方向比较,作为误差角度θ而计算出+30°(其中,将右旋转用正表示,将左旋转用负表示)。另外,在图22中,将基准方向用虚线D1表示,将根据该图计测出的摄像方向用实线D2表示。 
在遮蔽区域修正部42中,基于由误差角度计算部41计算出的误差角度使保持在遮蔽区域设定保持部12中的遮蔽区域旋转+30°,将遮蔽区域修正。例如,在保持在遮蔽区域设定保持部12中的遮蔽区域是图5所示的状态的情况下,遮蔽区域修正部42通过使该遮蔽区域A11以图像的中心(镜头中心)为基准旋转+30°,由此修正为图23所示的遮蔽区域A14的状态。 
此外,在检测区域修正部43中,基于由误差角度计算部41计算出的误差角度使保持在检测区域设定保持部13中的检测区域旋转+30°,将检测区域修正。例如,在保持在检测区域设定保持部13中的检测区域是图5所示的状态的情况下,检测区域修正部43通过使该检测区域A21、A22以图像的中心(镜头中心)为基准旋转+30°,由此成为图24的检测区域A23、A24的状态。 
接着,参照图25,对本实施方式的图像传感器10b进行的区域修正处理的动作进行说明。这里,图25是表示区域修正处理的一例的流程图。另外,例如每1小时或每1天等的每规定的时间进行本处理。 
首先,如果通过图像取得部11取得由鱼眼摄像机摄像的图像(步骤S41),则误差角度计算部41通过对所取得的图像实施Hough变换,来检测存在于图像内的直线成分,取得其中最强的直线成分的斜率作为摄像方向(步骤S42)。误差角度计算部41将所取得的摄像方向与基准方向比较,来计算误差角度(步骤S43)。 
接着,遮蔽区域修正部42基于在步骤S43中计算出的误差角度使保持在遮蔽区域设定保持部12中的遮蔽区域旋转误差角度量,由此将遮蔽区域修正(步骤S44)。此外,检测区域修正部43基于在步骤S43中计算出的误差角度使保持在检测区域设定保持部13中的检测区域旋转误差角度量, 由此将检测区域修正(步骤S45),并结束本处理。 
如以上这样,根据本实施方式的图像传感器10b,即使是在图像传感器10b中发生了摄像方向的偏差的情况下,也能够在各个图像传感器10b中自动地进行遮蔽区域及检测区域的修正,所以能够使有关图像传感器10b的维护的工序减少。 
另外,在本实施方式中,设为基于误差角度修正保持在遮蔽区域设定保持部12及检测区域设定保持部13中的遮蔽区域及检测区域的形态,但在图像传感器10b具备能够变更本装置的摄像方向的机构的情况下,也可以是通过使本装置的摄像方向旋转误差角度量而修正为标准的摄像方向的形态。 
图像传感器10b的摄像方向优选的是以建筑物内的规定物(例如墙壁与地板的边界)为基准加以设置,但实际上由于发生一边观看由图像传感器10b摄像的图像一边调整摄像方向的作业,所以存在并不高效的问题。所以,通过在图像传感器10b的壳体上附加表示该图像传感器10b的摄像方向的规定标志(字符或记号),能够以该标志为指标设置图像传感器10b。 
图26及图27是表示图像传感器10b的外观结构的例子的图。在该图中,图像传感器10b的壳体C构成为具有埋设到屋顶中的第一壳体C1、和露出在屋顶面上的第二壳体C2。此外,在第二壳体C2的大致中央部,设有鱼眼摄像机用的孔H,收存在壳体C中的鱼眼摄像机经由孔H进行摄像。 
这里,在第二壳体C2的表面上,设有表示鱼眼摄像机的摄像方向的摄像方向标志M21、M22。该摄像方向标志M21、M22用字符或记号表示,例如设在基于内置的图像传感器的上下方向的位置上。另外,在图26及图27中,通过摄像方向标志M21、M22的设置位置(方向)表示图像传感器的上方向。 
这样,通过以对图像传感器10b添加的摄像方向标志为指标将图像传感器10b设置到屋顶部,能够容易地使各图像传感器10b的作为基准的摄像方向一致。例如,在遮蔽区域是矩形的情况下,能够不必确认图像传感器10b的摄影图像,而将遮蔽区域的边与设置图像传感器10b的房间的墙壁或桌子的朝向相匹配地设置。 
以上,说明了本发明的实施方式,但上述实施方式是作为例子提示的, 并不意味着限定发明的范围。上述实施方式能够以其他各种形态实施,在不脱离发明的主旨的范围内能够进行各种省略、替换、变更、追加等。此外,上述实施方式及其变形包含在发明的技术范围及主旨中,并且包含在权利要求书所记载的发明和其等价的范围中。 
例如,在上述实施方式中,说明了作为图像传感器10(10a、10b)而使用鱼眼摄像机的形态,但并不限定于此,也可以为使用通常的摄像机的形态。 
此外,在上述实施方式中,为维护终端20(20a,20b)具备遮蔽区域设定部24(24a、32)、检测区域设定部26(33)及与这两功能部的动作关联的各种功能部(镜头中心检测部21、遮蔽区域设定参数保持部22、摄像机参数保持部23、行动取得部25、标记检测部31等)的形态,但并不限定于此,也可以是图像传感器10分别具备它们的形态。 
此外,在上述实施方式中,为图像传感器10分别具备误差角度计算部41及遮蔽区域修正部42的形态,但并不限定于此,也可以是通过维护终端20具备它们、该维护终端20将各图像传感器10的误差角度修正的形态。 
此外,设由上述实施方式的各装置执行的程序是预先装入在各装置具备的存储介质(ROM或存储部)中而提供的,但并不限定于此,也可以构成为,以可安装的形式或可执行的形式的文件记录到CD-ROM、软盘(FD)、CD-R、DVD(Digital Versatile Disk:数字通用光盘)等的能够由计算机读取的记录介质中加以提供。进而,存储介质并不限定于与计算机或装入的系统独立的介质,也包括将通过LAN或因特网等传递的程序下载并存储或临时存储的存储介质。 
此外,也可以构成为,将由上述实施方式的各装置执行的程序保存到连接在因特网等网络上的计算机上,通过经由网络下载来提供,也可以构成为,经由因特网等网络提供或发布。 
附图标记说明 
100图像传感器系统 
10、10a、10b图像传感器 
11图像取得部 
12遮蔽区域设定保持部 
13检测区域设定保持部 
14传感检测部 
15输出·储存部 
16权限设定保持部 
17登入处理部 
20、20a、20b维护终端 
21镜头中心检测部 
22遮蔽区域设定参数保持部 
23摄像机参数保持部 
24、24a遮蔽区域设定部 
25行动取得部 
26检测区域设定部 
27畸变修正部 
28手动区域设定部 
29区域变换部 
31标记检测部 
32遮蔽区域设定部 
33检测区域设定部 
41误差角度计算部 
42遮蔽区域修正部 
43检测区域修正部 
N网络 。

Claims (19)

1.一种图像传感器系统,具备:
摄像机构,对规定空间进行摄像;
图像取得机构,取得由上述摄像机构摄像的图像;
遮蔽区域导出机构,使用上述图像取得机构取得的图像,从该图像内导出不作为传感检测对象的遮蔽区域;
检测区域导出机构,使用上述图像取得机构取得的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域;
保持机构,保持上述遮蔽区域及上述检测区域作为设定信息;以及
传感检测机构,基于保持在上述保持机构中的设定信息,从上述取得机构取得的图像中传感检测上述空间的状态。
2.如权利要求1所述的图像传感器系统,
上述摄像机构是鱼眼摄像机;
上述遮蔽区域导出机构从上述图像取得机构取得的图像中检测上述鱼眼摄像机的镜头中心,将表示以该镜头中心为基准根据上述摄像机构的摄像条件调整后的规定形状的区域作为上述遮蔽区域加以导出。
3.如权利要求1所述的图像传感器系统,
还具备行动取得机构,上述行动取得机构从上述图像取得机构取得的规定期间量的图像中按照上述图像的每个区域取得将上述空间内的人的行动内容数值化而成的特征量;
上述遮蔽区域导出机构基于上述行动取得机构取得的每个区域的特征量导出上述遮蔽区域;
上述检测区域导出机构基于上述行动取得机构取得的每个区域的特征量,导出按照规定的每个类别区分该区域而得的上述检测区域。
4.如权利要求1所述的图像传感器系统,
还具备检测包含在上述图像中的规定标记的标记检测机构;
上述遮蔽区域导出机构基于由上述标记检测机构检测到的多个标记中的遮蔽区域设定用的标记形成的区域,导出上述遮蔽区域;
上述检测区域导出机构基于由上述标记检测机构检测到的多个标记中的检测区域设定用的标记形成的区域,导出上述检测区域。
5.如权利要求4所述的图像传感器系统,
上述摄像机构是鱼眼摄像机;
上述遮蔽区域导出机构及上述检测区域导出机构用与上述鱼眼摄像机的畸变系数对应的线段连结上述标记,来形成区域。
6.如权利要求1所述的图像传感器系统,
还具备输入机构,上述输入机构受理在上述图像取得机构取得的图像上输入与上述遮蔽区域及上述检测区域相当的区域的区域输入;
上述保持机构保持在上述图像上输入的与遮蔽区域及上述检测区域相当的区域作为上述设定信息。
7.如权利要求6所述的图像传感器系统,
上述摄像机构是鱼眼摄像机;
还具备:
正像化机构,将由上述图像传感器摄像的图像正像化;以及
逆变换机构,实施上述图像处理的逆变换;
上述输入机构受理在正像化后的上述图像上输入与上述遮蔽区域及上述检测区域相当的区域的区域输入;
上述保持机构保持用上述逆变换机构对输入到上述图像上的与遮蔽区域及上述检测区域相当的区域进行逆变换的结果,作为上述设定信息。
8.如权利要求1所述的图像传感器系统,
还具备限制机构,上述限制机构根据请求该图像的用户的用户类别或终端的终端类别来限制上述图像取得机构取得的图像的输出。
9.如权利要求1所述的图像传感器系统,还具备:
摄像方向取得机构,取得上述摄像机构的摄像方向;
计算机构,将上述摄像方向取得机构取得的摄像方向与标准的摄像方向进行比较,计算两个方向的差分作为误差角度;以及
修正机构,基于上述计算机构计算出的误差角度,修正在上述保持机构中保持的设定信息或上述摄像机构的摄像方向。
10.如权利要求9所述的图像传感器系统,
具有收容上述摄像机构的壳体;
在上述壳体表面上设有表示上述摄像机构的摄像方向的规定标志。
11.一种信息处理装置,与图像传感器可通信地连接,上述图像传感器从对规定空间进行摄像而得的图像中传感检测该空间的状态,具备:
遮蔽区域导出机构,使用上述图像,从该图像内导出不作为上述传感检测对象的遮蔽区域;
遮蔽区域设定机构,对上述图像传感器设定由上述遮蔽区域导出机构导出的遮蔽区域;
检测区域导出机构,使用由上述图像传感器摄像的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域;以及
检测区域设定机构,对上述图像传感器设定由上述检测区域导出机构导出的每个类别的检测区域。
12.如权利要求11所述的信息处理装置,
上述图像传感器是鱼眼摄像机;
上述遮蔽区域导出机构从上述图像传感器摄像的图像中检测上述鱼眼摄像机的镜头中心,将表示以该镜头中心为基准根据上述图像传感器的摄像条件调整后的规定形状的区域作为上述遮蔽区域加以导出。
13.如权利要求11所述的信息处理装置,
还具备行动取得机构,上述行动取得机构从上述图像传感器摄像的规定期间量的图像中按照上述图像的每个区域取得将上述空间内的人的行动内容数值化而成的特征量;
上述遮蔽区域导出机构基于上述行动取得机构取得的每个区域的特征量导出上述遮蔽区域;
上述检测区域导出机构基于上述行动取得机构取得的每个区域的特征量,导出按照规定的每个类别区分该区域而得的上述检测区域。
14.如权利要求11所述的信息处理装置,
还具备检测包含在上述图像中的规定标记的标记检测机构;
上述遮蔽区域导出机构基于由上述标记检测机构检测到的多个标记中的遮蔽区域设定用的标记形成的区域,导出上述遮蔽区域;
上述检测区域导出机构基于由上述标记检测机构检测到的多个标记中的检测区域设定用的标记形成的区域,导出上述检测区域。
15.如权利要求14所述的信息处理装置,
上述图像传感器是鱼眼摄像机;
上述遮蔽区域导出机构及上述检测区域导出机构用与上述鱼眼摄像机的畸变系数对应的线段连结上述标记,来形成区域。
16.如权利要求11所述的信息处理装置,
还具备输入机构,上述输入机构受理在由上述图像传感器摄像的图像上输入与上述遮蔽区域及上述检测区域相当的区域的区域输入;
上述遮蔽区域设定机构将上述图像上所输入的与遮蔽区域相当的区域作为上述遮蔽区域,设定到对该图像进行了摄像的上述图像传感器中中;
上述检测区域设定机构将上述图像上所输入的与检测区域相当的区域作为上述检测区域,设定到对该图像进行了摄像的上述图像传感器中中。
17.如权利要求16所述的信息处理装置,
上述图像传感器是鱼眼摄像机;
还具备:
正像化机构,实施将上述图像传感器摄像的图像正像化的图像处理;以及
逆变换机构,实施上述图像处理的逆变换;
上述输入机构受理在正像化后的上述图像上输入与上述遮蔽区域及上述检测区域相当的区域的区域输入;
上述遮蔽区域设定机构将通过上述逆变换机构对输入到上述图像上的与遮蔽区域相当的区域实施逆变换的结果作为上述遮蔽区域,设定到对该图像进行了摄像的上述图像传感器中中;
上述检测区域设定机构将通过上述逆变换机构对输入到上述图像上的与检测区域相当的区域实施逆变换的结果作为上述检测区域,设定到对该图像进行了摄像的上述图像传感器中中。
18.一种信息处理方法,由与图像传感器可通信地连接的信息处理装置执行,上述图像传感器从对规定空间进行摄像而得的图像中传感检测该空间的状态,上述信息处理方法包括:
遮蔽区域导出工序,遮蔽区域导出机构使用由上述图像传感器摄像的图像,从该图像内导出不作为上述传感检测对象的遮蔽区域;
遮蔽区域设定工序,遮蔽区域设定机构对上述图像传感器设定在上述遮蔽区域导出工序中导出的遮蔽区域;
检测区域导出工序,检测区域导出机构使用由上述图像传感器摄像的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域;以及
检测区域设定工序,检测区域设定机构对上述图像传感器设定由上述检测区域导出机构导出的每个类别的检测区域。
19.一种程序,
用来使与图像传感器可通信地连接的信息处理装置的计算机作为以下机构发挥功能,上述图像传感器从对规定空间进行摄像而得的图像中传感检测该空间的状态,用信息处理装置的计算机发挥功能的机构包括:
遮蔽区域导出机构,使用由上述图像传感器摄像的图像,从该图像内导出不作为上述传感检测对象的遮蔽区域;
遮蔽区域设定机构,对对应的图像传感器设定由上述遮蔽区域导出机构导出的遮蔽区域;
检测区域导出机构,使用由上述图像传感器摄像的图像,从该图像内按照规定的每个类别导出作为上述传感检测对象的检测区域;以及
检测区域设定机构,对对应的图像传感器设定由上述检测区域导出机构导出的每个类别的检测区域。
CN201280004253.5A 2012-01-30 2012-10-15 图像传感器系统、信息处理装置及信息处理方法 Expired - Fee Related CN103339922B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-017111 2012-01-30
JP2012017111A JP5851261B2 (ja) 2012-01-30 2012-01-30 画像センサシステム、情報処理装置、情報処理方法及びプログラム
PCT/JP2012/076639 WO2013114684A1 (ja) 2012-01-30 2012-10-15 画像センサシステム、情報処理装置、情報処理方法及びプログラム

Publications (2)

Publication Number Publication Date
CN103339922A true CN103339922A (zh) 2013-10-02
CN103339922B CN103339922B (zh) 2016-11-09

Family

ID=48904750

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280004253.5A Expired - Fee Related CN103339922B (zh) 2012-01-30 2012-10-15 图像传感器系统、信息处理装置及信息处理方法

Country Status (6)

Country Link
US (1) US20140340513A1 (zh)
EP (1) EP2811735A4 (zh)
JP (1) JP5851261B2 (zh)
CN (1) CN103339922B (zh)
SG (1) SG192564A1 (zh)
WO (1) WO2013114684A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546742A (zh) * 2013-10-31 2014-01-29 华南理工大学 一种光学标记点智能检测相机
CN105809658A (zh) * 2014-10-20 2016-07-27 三星Sds株式会社 关心区域设定方法及装置

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6251076B2 (ja) * 2014-02-17 2017-12-20 株式会社東芝 調整装置及び調整プログラム
JP6552255B2 (ja) * 2015-04-23 2019-07-31 キヤノン株式会社 画像処理装置、画像処理システム、画像処理方法、及び、コンピュータプログラム
US10909384B2 (en) 2015-07-14 2021-02-02 Panasonic Intellectual Property Management Co., Ltd. Monitoring system and monitoring method
WO2017163688A1 (en) * 2016-03-24 2017-09-28 Panasonic Intellectual Property Management Co., Ltd. Monitoring system and monitoring method
KR101902999B1 (ko) * 2016-05-17 2018-10-01 (주)유비크마이크로 360도 이미지를 형성할 수 있는 카메라
KR101882977B1 (ko) * 2016-05-17 2018-07-27 (주)유비크마이크로 360도 이미지를 형성할 수 있는 렌즈 모듈 및 360도 이미지 형성 어플리케이션
JP6727998B2 (ja) * 2016-09-08 2020-07-22 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP6484603B2 (ja) * 2016-12-26 2019-03-13 新日鉄住金ソリューションズ株式会社 情報処理装置、システム、情報処理方法、及び、プログラム
TWI664994B (zh) * 2018-01-25 2019-07-11 力山工業股份有限公司 健身器材之阻力感測機構
EP4325425B1 (en) * 2022-08-15 2024-06-12 Axis AB A method and system for defining an outline of a region in an image having distorted lines

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1662061A (zh) * 2004-02-23 2005-08-31 传感电子公司 运动瞄准系统和方法
US20070200933A1 (en) * 2006-02-28 2007-08-30 Sanyo Electric Co., Ltd. Image capturing system and image capturing method
JP2009122990A (ja) * 2007-11-15 2009-06-04 Mitsubishi Electric Corp 画像処理装置
US20100214411A1 (en) * 2009-02-20 2010-08-26 Weinmann Robert V Optical image monitoring system and method for vehicles
WO2011002775A1 (en) * 2009-06-29 2011-01-06 Bosch Security Systems Inc. Omni-directional intelligent autotour and situational aware dome surveillance camera system and method

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3287117B2 (ja) * 1994-07-05 2002-05-27 株式会社日立製作所 撮像装置を用いた車両用の環境認識装置
JP3996428B2 (ja) * 2001-12-25 2007-10-24 松下電器産業株式会社 異常検知装置及び異常検知システム
US20050134685A1 (en) * 2003-12-22 2005-06-23 Objectvideo, Inc. Master-slave automated video-based surveillance system
US8427538B2 (en) * 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
JP4137078B2 (ja) * 2005-04-01 2008-08-20 キヤノン株式会社 複合現実感情報生成装置および方法
US7884849B2 (en) * 2005-09-26 2011-02-08 Objectvideo, Inc. Video surveillance system with omni-directional camera
US8848053B2 (en) * 2006-03-28 2014-09-30 Objectvideo, Inc. Automatic extraction of secondary video streams
JP2008236673A (ja) * 2007-03-23 2008-10-02 Victor Co Of Japan Ltd 監視カメラ制御装置
JP4858846B2 (ja) * 2007-03-23 2012-01-18 サクサ株式会社 検知エリア設定装置及び同設定システム
JP2010193170A (ja) * 2009-02-18 2010-09-02 Mitsubishi Electric Corp カメラキャリブレーション装置及び監視エリア設定装置
JP2011195288A (ja) * 2010-03-19 2011-10-06 Toshiba Elevator Co Ltd マンコンベア画像処理装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1662061A (zh) * 2004-02-23 2005-08-31 传感电子公司 运动瞄准系统和方法
US20070200933A1 (en) * 2006-02-28 2007-08-30 Sanyo Electric Co., Ltd. Image capturing system and image capturing method
JP2009122990A (ja) * 2007-11-15 2009-06-04 Mitsubishi Electric Corp 画像処理装置
US20100214411A1 (en) * 2009-02-20 2010-08-26 Weinmann Robert V Optical image monitoring system and method for vehicles
WO2011002775A1 (en) * 2009-06-29 2011-01-06 Bosch Security Systems Inc. Omni-directional intelligent autotour and situational aware dome surveillance camera system and method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546742A (zh) * 2013-10-31 2014-01-29 华南理工大学 一种光学标记点智能检测相机
CN105809658A (zh) * 2014-10-20 2016-07-27 三星Sds株式会社 关心区域设定方法及装置
CN105809658B (zh) * 2014-10-20 2020-01-31 三星Sds株式会社 关心区域设定方法及装置

Also Published As

Publication number Publication date
SG192564A1 (en) 2013-09-30
EP2811735A4 (en) 2016-07-13
JP2013157810A (ja) 2013-08-15
EP2811735A1 (en) 2014-12-10
WO2013114684A1 (ja) 2013-08-08
US20140340513A1 (en) 2014-11-20
JP5851261B2 (ja) 2016-02-03
CN103339922B (zh) 2016-11-09

Similar Documents

Publication Publication Date Title
CN103339922A (zh) 图像传感器系统、信息处理装置、信息处理方法及程序
CN107944618B (zh) 共享车辆的布点规划方法、装置以及电子设备
JP5116765B2 (ja) 塗色データベースの作成方法及びそのデータベースを用いた検索方法、並びにそれらのシステム、プログラム及び記録媒体
JP6091472B2 (ja) 商品等提供システム、商品等提供方法、及び商品等提供プログラム
US10706571B2 (en) Imaging device, image processing device, storage medium, and imaging system
JP6915542B2 (ja) 情報処理装置、通知システム、情報送信方法及びプログラム
JP7192871B2 (ja) 認証装置、認証方法、及び、プログラム
DE202016006038U1 (de) Erkennen des Standorts eines mobilen Geräts auf Basis von semantischen Indikatoren
CN103339661A (zh) 对象显示装置、对象显示方法和对象显示程序
JP6254785B2 (ja) 視聴率調査システム、並びに表情情報生成装置及び表情情報生成プログラム
CN103986854A (zh) 图像处理设备、摄像设备和控制方法
CN107547850A (zh) 大数据处理方法及大数据处理装置
CN108028881A (zh) 摄像辅助系统、装置及方法、以及摄像终端
CN109272336A (zh) 一种风险商户发现方法和装置
KR20190137122A (ko) 열람 확인을 위한 시스템, 휴대 단말 장치, 서버, 프로그램 및 방법
CN108335454A (zh) 一种火情检测方法及装置
JP2013165353A (ja) 画像補正装置、画像補正方法、及びプログラム
CN107924544B (zh) 信息处理系统和信息处理方法
CN101271569A (zh) 用于评估图像的装置、方法以及包含程序的计算机可读记录介质
CN102142962A (zh) 信息处理装置、验证装置及其控制方法
US10623578B2 (en) Computer system, method for providing API, and program
JP6142505B2 (ja) 提供契約支援装置、提供契約支援プログラム、および提供契約支援方法
CN106461982B (zh) 用于确定至少一个行为参数的方法
CN109816628A (zh) 人脸评价方法及相关产品
CN104688177A (zh) 一种基于终端的瞳距测量方法、瞳距测量装置、服务器及其系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161109