CN109740409A - 信息处理装置及方法、摄像装置、照相机系统和存储介质 - Google Patents
信息处理装置及方法、摄像装置、照相机系统和存储介质 Download PDFInfo
- Publication number
- CN109740409A CN109740409A CN201811220555.1A CN201811220555A CN109740409A CN 109740409 A CN109740409 A CN 109740409A CN 201811220555 A CN201811220555 A CN 201811220555A CN 109740409 A CN109740409 A CN 109740409A
- Authority
- CN
- China
- Prior art keywords
- detection
- detection line
- line
- unit
- detection zone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 23
- 238000003860 storage Methods 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 title abstract description 21
- 238000001514 detection method Methods 0.000 claims abstract description 394
- 238000012545 processing Methods 0.000 claims abstract description 82
- 238000007689 inspection Methods 0.000 claims description 12
- 238000003672 processing method Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 19
- 238000010276 construction Methods 0.000 description 12
- 238000012360 testing method Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000005622 photoelectricity Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
本发明提供一种信息处理装置及方法、摄像装置、照相机系统和存储介质。针对用于检测通过的被摄体的基准位置适当地设置被摄体检测区域。该信息处理装置包括:检测线设置单元,其被构造为设置要用于检测图像中的物体的通过的检测线;物体检测单元,其被构造为执行检测所述物体的检测处理;确定单元,其被构造为确定在所述图像中已被检测到的物体是否通过所述检测线;以及检测区域设置单元,其被构造为根据所述检测线设置检测区域以包括所述检测线,其中,所述检测区域要经受所述物体检测单元的检测处理。
Description
技术领域
本发明涉及信息处理装置、信息处理方法、摄像装置、网络照相机系统和存储介质。
背景技术
通常,已经使用了通过分析由监视照相机所拍摄的图像来检测该图像中的人体的人体检测处理。在对已经通过了图像中所设置的检测线的人体的数量进行计数的通过检测处理中,使用人体检测处理。
人体检测处理采用如下方法:提取图像中的人体的特征值,并通过将特征值与预先生成的词典(模板)进行比较来进行模板匹配。然而,在模板匹配中,反复进行从待处理图像中提取的特征值与词典之间的比较,因此,处理需要较长时间段。因此,如果图像中包括大量的人,或者如果难以将人和复杂背景相互区分,则在预定时间段内无法完成人体检测处理。在这种情况下,该处理被中断并且下一图像经受人体检测处理,因此通过检测处理的精度降低。
为了解决该问题,使用了如下方法:通过仅对图像中的预定区域执行人体检测处理来提高检测处理的帧频。
日本特开2007-280088号公报公开了如下方法:使用立体照相机生成包括由各个像素所保持的距离信息的距离图像(range image),并且使用距离信息,根据要检测的特定物体的大小来设置检测区域的大小。
然而,在图像中的预定区域中检测到人体、并且对检测到的人体中的已经通过检测线的人体的数量进行计数的情况下,用户需要手动设置要经受人体检测处理的检测区域以及通过检测处理中要使用的检测线,并且该设置是繁琐的。此外,用户难以针对检测线适当地设置检测区域。即使利用日本特开2007-280088号公报中所公开的技术,也可能无法针对检测线自动设置适当的检测区域。
发明内容
根据本发明的一方面,提供了一种信息处理装置,包括:检测线设置单元,其被构造为设置要用于检测图像中的物体的通过的检测线;物体检测单元,其被构造为执行检测所述物体的检测处理;确定单元,其被构造为确定在所述图像中已被检测到的物体是否通过所述检测线;以及检测区域设置单元,其被构造为根据所述检测线设置检测区域以包括所述检测线。所述检测区域要经受所述物体检测单元的检测处理。
通过以下参照附图对示例性实施例的描述,本发明的其他特征将变得清楚。
附图说明
图1是例示网络照相机和客户端装置的构造的示例的图。
图2是例示网络照相机的硬件构造的示例的图。
图3是例示检测线设置画面的示例的图。
图4是设置网络照相机的检测区域的处理过程的流程图。
图5是例示设置检测区域的方法的图。
图6是生成检测区域的处理过程的流程图。
图7是例示当在整个图像中设置检测区域时出现的问题的图。
图8是例示设置检测区域的方法的图。
图9A和图9B是例示设置检测区域的方法的图。
图10是例示根据另一实施例的设置检测区域的方法的图。
图11是例示网络照相机和客户端装置的构造的另一示例的图。
具体实施方式
下文中,将参照附图详细描述本发明的实施例。
第一实施例
图1是例示网络照相机100和客户端装置200的构造的示例的框图。网络照相机系统包括网络照相机(下文中简称为“照相机”)100和客户端装置200,网络照相机100和客户端装置200通过网络300以可通信方式相互连接。
例如,使用网络照相机系统来进行零售领域中的顾客行为的分析。具体地说,网络照相机系统可以通过对商店的收银机前面的区域中的人数进行计数,来获得与针对一周中的每一天和每个时间区间的收银机前面的顾客的拥挤程度有关的数据。此外,网络照相机系统可以通过对已经通过商店中的预定位置的人数进行计数来获得访问过商店的顾客的数量,并且可以获得顾客在商店中的移动路径。
网络300包括基于以太网(注册商标)的通信标准的多个路由器、多个交换机和多个线缆等。注意,网络300可以基于任何通信标准并且可以具有任何规模和任何构造,只要照相机100和客户端装置200可以相互通信即可。网络300可以通过因特网、有线局域网(LAN)、无线LAN、广域网(WAN)或它们的组合来实现。
照相机100是在预定摄像范围中拍摄图像的摄像装置。照相机100可以是摇摄-倾斜-变焦照相机(PTZ照相机),其被构造为使得摄像区域可变。此外,照相机100可以对应于以太网供电(PoE),或者可以被构造为使得通过LAN线缆供应电力。此外,尽管在图1中单个照相机100连接到网络300,但是多个照相机可以连接到网络300。
客户端装置200由诸如个人计算机(PC)、智能手机或平板PC等的终端装置构成,并且能够向照相机100发送各种命令。向照相机100发送的命令的示例包括:用于改变照相机100的视角和摄像方向(方向)的命令、用于改变摄像参数的命令、与图像处理相关联的命令以及用于开始发送图像的命令。客户端装置200可以从照相机100接收对这样的命令的响应。
当从客户端装置200接收到用于改变摄像方向和视角的命令时,照相机100改变摄像方向和视角。此外,照相机100根据用于开始发送图像的命令,向客户端装置200发送图像。客户端装置200接收响应于上述用于开始发送图像的命令而从照相机100发送的图像,记录接收的图像,并且进行向客户端装置200的用户显示图像的显示控制。
如图1所示,照相机100包括摄像单元101、图像处理器102、系统控制器103和通信单元104。照相机100还包括被摄体检测单元105、被摄体ID分配单元106、判断单元107、检测线设置单元108、检测线存储单元109、检测区域设置单元110和检测区域存储单元111。此外,客户端装置200包括系统控制器201、显示单元202、输入单元203和通信单元204。照相机100的通信单元104和客户端装置200的通信单元204通过网络300以可通信的方式相互连接。
首先,将描述照相机100的构造和各单元的功能。
摄像单元101包括透镜和诸如互补金属氧化物半导体(CMOS)或电荷耦合器件(CCD)等的摄像元件,并拍摄被摄体的图像。此外,摄像单元101进行如下处理:通过光电转换将形成在摄像面上的光学图像转换为数字电信号。图像处理器102对通过摄像单元101进行的光电转换而获得的信号进行预定的图像处理。图像处理的示例包括白平衡处理、锐化处理和灰度转换处理。此外,图像处理器102通过对经受了图像处理的图像进行压缩编码来生成图像数据,并将生成的图像数据输出到系统控制器103。
系统控制器103将从图像处理器102供给的图像输出到通信单元104,以将图像发送到客户端装置200。此外,系统控制器103分析通过通信单元104而从客户端装置200供给的命令,并根据该命令进行处理。具体地说,系统控制器103根据接收的命令向图像处理器102发出用于改变图像处理参数的指令。此外,系统控制器103根据接收的命令,进行针对被摄体检测检测单元105的被摄体检测处理的参数的设置以及针对判断单元107的通过检测处理的参数的设置。
被摄体检测单元105通过分析由图像处理器102生成的图像,来进行检测该图像中的物体(例如,人体)的被摄体检测处理。具体地说,被摄体检测单元105读取存储在检测区域存储单元111中的检测区域的设置信息,并对由图像处理器102生成的图像中的检测区域进行被摄体检测处理。
被摄体ID分配单元106将用于标识在连续获得的图像中检测到的被摄体的ID分配给由被摄体检测单元105进行的被摄体检测处理的检测结果。具体地说,被摄体ID分配单元106基于由被摄体检测单元105检测到的被摄体的位置信息和大小信息,进行在连续获得的图像中检测到的被摄体之间的匹配处理。之后,被摄体ID分配单元106将共同ID分配给相互匹配的被摄体,并且生成新ID并将新ID分配给作为新检测到的被摄体而不与任何被摄体匹配的被摄体。可以通过分配的被摄体ID将在图像中检测到的多个被摄体相互区分。
判断单元107进行如下通过检测处理,即判断由被摄体检测单元105检测到的被摄体是否已经通过图像中所设置的检测线。注意,在通过检测处理中可以不使用线来进行该判断,只要进行用于判断被摄体是否已经通过图像中的预定位置(基准位置)的处理即可。首先,判断单元107将由被摄体ID分配单元106分配了ID的被摄体的当前位置存储在未示出的存储器等中。然后,判断单元107读取存储在检测线存储单元109中的检测线的设置信息,并基于被摄体的过去位置和当前位置来判断被摄体是否已经通过检测线。当判断是肯定时,判断单元107使通过计数递增,以对已经通过检测线的被摄体的数量进行计数。
检测线设置单元108设置要用于检测被摄体的通过的检测线,并且将检测线的设置信息存储在检测线存储单元109中。这里,检测线的设置信息包括检测线在图像中的位置、长度和倾斜中的至少一者。
检测区域设置单元110基于新存储在检测线存储单元109中的检测线的设置信息来设置图像中的要经受被摄体检测处理的检测区域,并将该检测区域的设置信息存储在检测区域存储单元111中。换句话说,检测区域设置单元110根据检测线在图像中设置检测区域以包括所述检测线。
其次,将描述客户端装置200的构造和各单元的功能。
客户端装置200的系统控制器201并入有用于对通过通信单元204而从照相机100供给的图像进行组合的图像处理器,并进行用于在显示单元202中显示从照相机100供给的图像的显示控制。此外,系统控制器201根据用户进行的图形用户界面(GUI)操作来生成各种命令,并将生成的命令输出到通信单元204,以将命令发送到照相机100。
显示单元202包括诸如液晶显示器(LCD)等的监视器,并显示GUI和从照相机100获得的图像。输入单元203包括诸如键盘或鼠标的指示设备,并且客户端设备200的用户操作输入单元203以通过GUI输入各种命令。在该实施例中,客户端装置200的用户操作输入单元203以通过GUI中的一个来指定上述检测线。
通信单元204接收通过网络300从照相机100的通信单元104所供给的图像和信号,并将接收的信息发送到系统控制器201。此外,通信单元204基于系统控制器201发出的指令,通过网络300将上述命令发送到照相机100的通信单元104。
硬件构造
图2例示网络照相机100的硬件构造的示例的图。
如图2所示,照相机100包括中央处理单元(CPU)11、只读存储器(ROM)12、随机存取存储器(RAM)13、外部存储器14、摄像单元15、输入单元16、通信接口(I/F)17和系统总线18。CPU 11整体控制照相机100的操作并通过系统总线18控制各组件(12至17)。ROM 12是存储CPU 11执行处理所需的控制程序等的非易失性存储器。注意,程序可以存储在外部存储器14或可拆卸的存储介质(未示出)中。RAM 13用作CPU 11的主存储器、工作区域等。具体地说,CPU 11在执行处理时从ROM12将所需程序等加载到RAM 13中并执行程序等,以实现各种功能操作。
外部存储器14存储执行CPU 11使用程序而进行的处理所需的各种数据、各种信息等。外部存储器14存储当CPU 11使用程序等执行处理时所获得的各种数据、各种信息等。摄像单元15对应于图1的摄像单元101。输入单元16包括电源按钮、各种设置按钮等。通信I/F17对应于图1的通信单元104。当CPU 11执行程序时,可以实现图1的照相机100的各元件的一些或全部功能。注意,图1的照相机100中所包括的至少一些元件可以作为专用硬件操作。在这种情况下,专用硬件在CPU 11的控制下操作。
注意,在客户端装置200的情况下,替代图2的摄像单元15,包括与图1的显示单元202相对应的硬件构造。此外,在客户端装置200的情况下,包括与用作输入单元16的图1的输入单元203相对应的硬件构造和与用作通信I/F 17的通信单元204相对应的硬件构造。然后,当与CPU 11相对应的客户端装置200的CPU执行程序时,可以实现图1的客户端装置200中所包括的元件的一些或全部功能。注意,包括在图1的客户端装置200中的至少一些元件可以作为专用硬件操作。在这种情况下,专用硬件在CPU 11的控制下操作。
照相机100将图像发送到客户端装置200以进行用于在客户端装置200的显示单元202中显示图像的显示控制,并接受显示单元202中所显示的图像中对检测线的指定。当用户在客户端装置200的显示单元202中显示的图像中指定检测线时,照相机100获得指定的检测线的设置信息,并且基于获得的检测线的设置信息来设置要经受被摄体检测处理的检测区域。
图3是例示在客户端装置200的显示单元202中显示的检测线设置画面400的示例的图。设置画面400显示由照相机100拍摄的图像。注意,在设置画面400中可以显示当前由照相机100拍摄的视频图像或预先记录的视频图像。另选地,在设置画面400中可以显示静止图像。
用户可以在设置画面400中指定任意的检测线410。例如,通过使用检测线410的通过检测处理,可以检测到在图像中向右移动并通过检测线410的被摄体500。根据本实施例,照相机100基于检测线410的设置信息来设置适合于使用检测线410的通过检测处理的检测区域420,使得要经受被摄体检测处理的区域被限定于检测区域420。
在被摄体检测处理中,照相机100从图像中的检测区域420中提取物体(例如,人体)的特征值,并通过将该特征值与预先生成的词典进行比较来进行模板匹配。这里,照相机100从检测区域420的左上部分起进行水平扫描,并且还对下一条线从左到右进行水平扫描,以在检测区域420中检测物体(例如,人体)。具体地说,在检测区域420之外的区域中不进行被摄体检测处理。
注意,在本实施例中描述了如下情况:用作摄像装置的照相机100作为用于设置检测区域的信息处理装置进行操作。注意,客户端装置200可以作为信息处理装置进行操作,或者通用PC或其他设备可以作为信息处理装置进行操作。这同样适用于下面描述的第二实施例。
接下来,将描述根据本实施例的照相机100的操作。
图4是由照相机100执行的检测区域设置处理的过程的流程图。在用户在客户端装置200的显示单元202中所显示的设置画面中指定检测线的定时开始图4中的处理。注意,在图4中开始处理的定时不限于上述定时。
当CPU 11读取并执行所需程序时,照相机100可以实现图4所示的各种处理。注意,当图1的照相机100中包括的至少一些元件作为专用硬件操作时,可以实现图4的处理。在这种情况下,专用硬件在CPU 11的控制下操作。下文中,字母S表示流程图中的步骤。
首先,在S1中,照相机100接收通过用户操作客户端装置200的显示单元202中所显示的设置画面而指定的检测线的设置信息。这里,检测线的设置信息包括如上所述与检测线的位置、长度和倾斜有关的信息。在S2中,照相机100基于S1中所获得的检测线的设置信息,来执行用于生成要经受被摄体检测处理的检测区域的检测区域生成处理。
图5是例示针对检测线410生成检测区域420的方法的图。
假设由用户指定的检测线410的位置与包括待检测人的区域相关联,并且检测线410的长度L与待检测人的身高h相关联。照相机100将在检测线410的延伸方向上具有检测线410的长度L的矩形区域设置为检测区域420。还假设检测线410的倾斜与待检测人的移动方向相关联,并且照相机100将在与检测线410垂直的方向上具有预定检测宽度W1和W2的矩形区域设置为检测区域420。
在该实施例中,假设一般被摄体的身高h是1.7m,并且检测线410的长度L在图像中对应于2m。为了适当地检测通过,与被摄体相对于检测线410向前和向后的三步相对应的距离由检测宽度W1和W2表示。假设被摄体的步幅的长度是0.9m,在图像中相对于检测线410的2.7m的距离对应于相对于检测线410的前后部分中的检测宽度W1和W2。假设检测线410的长度L为2m,相对于检测线410的前后部分中的检测宽度W1和W2是检测线410的长度L的1.35倍。以此方式,照相机100设置通过将检测线410的长度L乘以预定倍率(1.35)而获得的长度作为检测宽度W1和W2。
注意,检测区域420在检测线410的延伸方向上的长度可以通过将预定余量(margin)添加到检测线410的长度L来获得。具体地说,照相机100判断如下矩形区域作为相对于检测线410的检测区域420,该矩形区域包括检测线410,在检测线410的延伸方向上至少具有检测线410的长度L,并且在与检测线410垂直的方向上具有预定的检测宽度W1和W2。
此外,检测宽度W1和W2可以不是相同的宽度,并且检测宽度W1可以大于检测宽度W2,使得可以可靠地检测出通过时要检测的被摄体。
图6是在图4的S2中执行的检测区域生成处理的过程的流程图。
在S21中,照相机100基于检测线的设置信息中包括的检测线的长度L,通过将检测线的长度L乘以预定倍率(在本实施例中为1.35)来计算检测区域的检测宽度W1和W2。在S22中,照相机100生成如下矩形区域,该矩形区域在检测线的延伸方向上包括检测线的长度L,并且在与检测线垂直的方向上从检测线两侧起分别拓宽了检测宽度W1和W2。最后,在S23中,照相机100的检测区域设置单元110将在S22中生成的矩形区域设置为相对于检测线的检测区域。
返回参照图4,在S3中,判断与在S2中生成的检测区域交叠的检测区域是否存储在检测区域存储单元111中。当判断是肯定的时,处理进行到S4,否则,处理进行到S6。
在S4中,照相机100生成包围整个交叠检测区域的外接矩形,并且处理进行到S5。在S5中,照相机100从检测区域存储单元111中删除交叠检测区域的所有设置信息。此外,照相机100将在S4中生成的外接矩形设置为检测设置的共同设置区域。
在S6中,照相机100将在S2或S5中设置的检测区域的设置信息存储在检测区域存储单元111中,并且处理终止。
如上所述,本实施例的照相机100获得在图像中设置并且将在被摄体检测处理中使用的检测线的设置信息,并且基于所获得的检测线的设置信息在要经受被摄体检测处理的图像中设置检测区域。
由此,照相机100可以基于检测线的设置信息来自动设置适合于使用检测线的通过检测的被摄体的检测区域。以这种方式,照相机100可以在不进行用户操作的情况下适当地设置适合于通过检测设置的被摄体的检测区域,因此,可以在不打扰用户的情况下高精度地进行通过检测处理。
在获得检测线的设置信息之前,照相机100的检测线设置单元108使客户端装置200的系统控制器201显示图像,以接受在显示单元202中所显示的图像中对检测线的指定。用户可以参照客户端装置200的显示单元202中所显示的图像,使用包括在客户端装置200中的诸如键盘或鼠标等的指示设备来指定图像中的多个点,以指定检测线。照相机100可以获得用户在图像中指定的多个点的位置信息、以及与由用户指定的多个点所形成的线段的长度和倾斜有关的信息,作为检测线的设置信息。
因此,照相机100的检测线设置单元108可以适当地获得用户指定的检测线的设置信息,并照相机100的检测区域设置单元110相对于用户指定的检测线设置适当的检测区域。
此外,照相机100的检测区域设置单元110基于检测线的设置信息将如下区域判断为要经受被摄体检测处理的检测区域,其中该区域包括检测线,在检测线的延伸方向上至少具有检测线的长度L,并且在与检测线垂直的方向上具有预定的检测宽度W1和W2。这里,检测宽度W1和W2是通过将检测线的长度L乘以预定倍率而获得的。
以此方式,照相机100关注于由用户指定的检测线和与要经受通过检测的被摄体有关的信息之间的关联,以设置检测区域的位置和大小。因此,照相机100可以设置如下检测区域,在该检测区域中,适当地检测已经通过的被摄体,并且可以适当地提高通过检测处理的精度。
照相机100以预先判断的特定帧频,对在时间序列上连续的图像执行被摄体检测处理。为了利用通过检测处理精确地对已经通过检测线的物体(例如,人体)进行计数,需要以特定级别或更高级别的帧频进行被摄体检测处理。例如,需要每秒对10个图像进行被摄体检测处理。然而,由于在被摄体检测处理中通过模板匹配来检测物体(人体),因此该处理需要很长的时间段。因此,在图像中包括大量人的情况下或者在难以将复杂背景与人区分开的情况下,该处理可能无法实时完成。在这种情况下,被摄体检测处理被中断并且下一图像经受被摄体检测处理,因此通过检测处理的精度降低。
具体地说,如图7所示,在被摄体检测处理中将整个图像600设置为检测区域420A的情况下,从图像600的左上位置到右下位置的最后位置依次进行扫描,使得进行用于在图像600中检测人体的处理。因此,例如,在如上所述在图像中包括大量人的情况下,尽管未检测到图像600的下部所包括的人体,但是也需要进行用于中断处理的操作。
在图像600的下部包括要经受通过检测的被摄体500的情况下,仅对与通过检测处理的结果无关的图像600中的上部所包括的被摄体510进行检测处理,而不对被摄体500进行检测处理。结果,可能无法适当地检测到被摄体500并且通过计数的精度降低。
另一方面,在该实施例中,可以根据设置的检测线来设置适当的检测区域,使得不对与通过检测无关的区域进行检测处理。因此,可以通过被摄体检测处理适当地检测要经受通过检测的被摄体,并且可以高精度地进行通过检测处理。
第二实施例
现在将描述本发明的第二实施例。
在前述第一实施例中描述了基于检测线的设置信息来设置检测区域的情况。在第二实施例中,将描述如下情况:考虑到被摄体在与检测线垂直的方向上的移动速度来设置检测区域。
为了适当地检测被摄体的通过,需要在被摄体通过检测线之前和之后对被摄体进行一定次数的检测。因此,在该实施例中,照相机100设置检测区域的检测宽度W1和W2,使得在被摄体通过检测线之前和之后检测被摄体的次数等于或大于所设置的次数。
具体地说,如图8所示,生成检测区域422,使得在被摄体500通过检测线410之前检测被摄体500的次数至少是6并且在被摄体500通过检测线410之后检测被摄体500的次数至少是4。在这种情况下,假设被摄体的检测帧频是10fps,则需要设置检测区域的检测宽度W1和W2,使得在被摄体检测处理中,在通过之前0.6秒内和在通过之后0.4秒内检测被摄体。检测区域的检测宽度W1和W2根据被摄体的移动速度V而变化。因此,实际测量移动被摄体,并且基于被摄体的移动速度V来设置检测区域的检测宽度W1和W2。
首先,如图8中的虚线所示,照相机100将如下矩形区域设置为基本区域(baseregion),该矩形区域在与检测线410垂直的方向上延伸到图像端,并且具有与检测线410的长度L相对应的宽度。随后,被摄体500以要检测的最大移动速度V移动,并且照相机100使用基本区域421和检测线410实际进行被摄体检测处理和通过检测处理。照相机100的检测区域设置单元110针对各处理帧获得被摄体500的位置,并且确定如下检测区域422,该检测区域422以在被摄体500已经通过检测线410之前检测被摄体500六次的位置和在被摄体500已经通过检测线410之后检测被摄体500四次的位置作为其端部。
如上所述,根据该实施例的照相机100的检测区域设置单元110基于检测线的设置信息和被摄体的移动速度来设置要经受被摄体检测处理的检测区域。因此,要经受通过检测的被摄体的移动速度越高,可以设置越大的检测区域。具体地说,照相机100基于被摄体的移动速度来设置检测区域的检测宽度W1和W2,使得在被摄体通过检测线之前和之后检测被摄体的次数等于或大于所设置的次数。因此,可以适当地检测被摄体并且可以高精度地对通过检测线进行检测。此外,照相机100可以将通过之前的次数设置为大于通过之后的次数。在这种情况下,可以更可靠地检测被摄体的通过。
第三实施例
将描述本发明的第三实施例。
在前述第一实施例中描述了基于检测线的设置信息来设置检测区域的情况。在第三实施例中,将描述如下情况:考虑被摄体的大小来设置检测区域。
如图9A所示,在要经受通过检测的被摄体500的位置由被摄体500的脚位置500a表示的情况下,当被摄体500刚刚通过检测线410的上端411时,被摄体500的大部分通过了检测线410的外侧。
因此,如上参照图5所述,例如在设置了在检测线410的延伸方向具有检测线410的长度L的检测区域420、且针对检测区域420进行被摄体检测处理的情况下,可能无法适当地检测图9A所示的被摄体500。
因此,在本实施例中,照相机100的检测区域设置单元110基于被摄体500的大小来设置检测区域在检测线410的延伸方向上的长度。具体地说,如图9B所示,照相机100的检测区域设置单元110在检测线410的上端411侧设置包括与被摄体500的大小(身高h)相对应的长度的检测区域424。检测区域424包括检测线410,包括检测线410在检测线410的延伸方向上的长度L,并且通过将与检测线410垂直的方向上具有检测宽度W1和W2的区域423在检测线410的上端411的方向上延伸被摄体500的大小(身高h)而获得。
如上所述,根据该实施例的照相机100基于检测线的设置信息和被摄体的大小来设置要经受被摄体检测处理的检测区域。以这种方式,可以设置大小足以检测要经受通过检测的被摄体的检测区域。具体地说,照相机100的检测区域设置单元110基于被摄体的大小在检测线的延伸方向上设置检测区域的长度。因此,可以适当地检测被摄体并且可以高精度地对通过检测线进行检测。
此外,照相机100的检测区域设置单元110可以设置如下检测区域,该检测区域在检测线的上端侧至少具有与被摄体的大小相对应的长度。在这种情况下,甚至可以通过被摄体检测处理更适当地检测脚刚刚通过检测线的被摄体,并且可以对通过检测线进行检测。
变型例
在前述实施例中,描述了检测线在图像中沿垂直方向延伸的情况。然而,检测线可以在图像中水平地或倾斜地延伸。
当检测线410如图10所示倾斜地延伸时,与前述实施例一样,照相机100设置如下矩形区域425,该矩形区域425在检测线410的延伸方向上具有检测线410的长度L,并且在与检测线410垂直的方向上具有检测宽度W1和W2。然后,照相机100将包围矩形区域425的外接矩形设置为检测区域426。以此方式,可以针对在图像中倾斜地延伸的检测线,设置适当的检测区域。
此外,尽管在前述实施例中描述了照相机100执行生成检测区域的处理的情况,但是客户端装置200可以执行生成检测区域的处理。在这种情况下,如图11所示,客户端装置200包括检测区域生成单元205,该检测区域生成单元205与图1的检测区域设置单元110类似地进行生成检测区域的处理。然后,客户端装置200通过网络300将由检测区域生成单元205生成的检测区域的设置信息发送到照相机100。照相机100包括检测区域设置单元110a以代替图1的检测区域设置单元110,并且检测区域设置单元110a将从客户端装置200供给的检测区域的设置信息存储在检测区域存储单元111中。
其他实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例对本发明进行了描述,但是应当理解,本发明并不限于所公开的示例性实施例。应当对所附权利要求的范围给予最宽的解释,以使其涵盖所有这些变型例以及等同的结构和功能。
Claims (14)
1.一种信息处理装置,包括:
检测线设置单元,其被构造为设置要用于检测图像中的物体的通过的检测线;
物体检测单元,其被构造为执行检测所述物体的检测处理;
确定单元,其被构造为确定在所述图像中已被检测到的物体是否通过所述检测线;以及
检测区域设置单元,其被构造为根据所述检测线设置检测区域以包括所述检测线,其中,所述检测区域要经受所述物体检测单元的检测处理。
2.根据权利要求1所述的信息处理装置,其中,所述检测线设置单元设置所述检测线,所述检测线包括在所述图像中检测线的位置、长度和倾斜中的至少一者。
3.根据权利要求1所述的信息处理装置,还包括:
显示控制器,其被构造为将所述图像显示在显示单元中,
其中,所述检测线单元接收在所述显示控制单元所显示的所述图像中对所述检测线的指定,并且获得所述检测线的设置信息。
4.根据权利要求1所述的信息处理装置,其中,所述检测区域设置单元将如下的区域设置为所述检测区域,其中该区域包括所述检测线、在所述检测线的延伸方向上至少具有所述检测线的长度并且在与所述检测线垂直的方向上具有预定的检测宽度。
5.根据权利要求4所述的信息处理装置,其中,所述检测区域设置单元将通过所述检测线的长度与预定倍率相乘而获得的长度确定为所述检测宽度。
6.根据权利要求4所述的信息处理装置,其中,所述检测区域设置单元基于所述物体的移动速度来设置所述检测宽度。
7.根据权利要求6所述的信息处理装置,其中,所述检测区域设置单元基于所述物体的移动速度来设置所述检测宽度,使得在所述物体通过所述检测线之前和之后所述检测处理检测到所述物体的次数等于或大于设置的次数。
8.根据权利要求4所述的信息处理装置,其中,所述检测区域设置单元基于所述物体的大小来设置所述检测区域在所述检测线的延伸方向上的长度。
9.根据权利要求8所述的信息处理装置,其中,所述检测区域设置单元设置在所述检测线的上端侧具有至少与所述物体的大小相对应的长度的所述检测区域。
10.根据权利要求1所述的信息处理装置,其中,所述检测区域设置单元将包围如下检测区域的外接矩形设置为所述检测区域,其中该检测区域包括所述检测线、在所述检测线的延伸方向上至少具有所述检测线的长度并且在与所述检测线垂直的方向上具有预定的检测宽度。
11.一种信息处理方法,包括:
设置要用于检测图像中的物体的通过的检测线;
执行检测所述物体的检测处理;
确定在所述图像中已被检测到的物体是否通过所述检测线;以及
根据所述检测线设置检测区域以包括所述检测线,其中,所述检测区域要经受所述检测处理。
12.一种摄像装置,包括:
根据权利要求1所述的信息处理装置;以及
摄像单元,其被构造为拍摄图像。
13.一种网络照相机系统,包括:
根据权利要求12所述的摄像装置;以及
客户端装置,其通过网络连接至所述摄像装置,并且包括显示单元。
14.一种计算机可读存储介质,其存储程序,所述程序使计算机用作根据权利要求1所述的信息处理装置中所包括的各单元。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017209131A JP7123545B2 (ja) | 2017-10-30 | 2017-10-30 | 情報処理装置、情報処理方法およびプログラム |
JP2017-209131 | 2017-10-30 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109740409A true CN109740409A (zh) | 2019-05-10 |
Family
ID=63998644
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811220555.1A Pending CN109740409A (zh) | 2017-10-30 | 2018-10-19 | 信息处理装置及方法、摄像装置、照相机系统和存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20190130677A1 (zh) |
EP (1) | EP3477544A1 (zh) |
JP (1) | JP7123545B2 (zh) |
CN (1) | CN109740409A (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021145303A (ja) * | 2020-03-13 | 2021-09-24 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
US11587325B2 (en) * | 2020-09-03 | 2023-02-21 | Industrial Technology Research Institute | System, method and storage medium for detecting people entering and leaving a field |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130148848A1 (en) * | 2011-12-08 | 2013-06-13 | Industrial Technology Research Institute | Method and apparatus for video analytics based object counting |
US20150016671A1 (en) * | 2013-07-09 | 2015-01-15 | Canon Kabushiki Kaisha | Setting apparatus, output method, and non-transitory computer-readable storage medium |
CN105898213A (zh) * | 2015-02-12 | 2016-08-24 | 佳能株式会社 | 显示控制装置和显示控制方法 |
CN105979134A (zh) * | 2015-01-30 | 2016-09-28 | 佳能株式会社 | 图像处理装置、图像处理方法和图像处理系统 |
EP3153990A1 (en) * | 2015-10-07 | 2017-04-12 | C/o Canon Kabushiki Kaisha | Display control apparatus, display control method, and program |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69523698T2 (de) * | 1994-08-31 | 2002-08-01 | Nippon Telegraph & Telephone | Verfahren und Gerät zum richtungsselektiven Zählen von sich bewegenden Objekten |
JP2007280088A (ja) | 2006-04-07 | 2007-10-25 | Konica Minolta Holdings Inc | 特定物体検出装置、特定物体検出方法、及び特定物体検出プログラム |
JP4201025B2 (ja) | 2006-06-30 | 2008-12-24 | ソニー株式会社 | 監視装置、監視システム及びフィルタ設定方法、並びに監視プログラム |
JP4904243B2 (ja) * | 2007-10-17 | 2012-03-28 | 富士フイルム株式会社 | 撮像装置及び撮像制御方法 |
JP5276140B2 (ja) * | 2011-05-19 | 2013-08-28 | 富士重工業株式会社 | 環境認識装置および環境認識方法 |
JP5885398B2 (ja) | 2011-05-20 | 2016-03-15 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JP5959951B2 (ja) | 2012-06-15 | 2016-08-02 | キヤノン株式会社 | 映像処理装置、映像処理方法、及びプログラム |
JP6226539B2 (ja) | 2013-03-15 | 2017-11-08 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、およびプログラム |
JP2015018330A (ja) | 2013-07-09 | 2015-01-29 | 大日本印刷株式会社 | 移動体の方向別計数システム |
JP6568374B2 (ja) | 2015-03-27 | 2019-08-28 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6700706B2 (ja) | 2015-10-06 | 2020-05-27 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
US9996752B2 (en) * | 2016-08-30 | 2018-06-12 | Canon Kabushiki Kaisha | Method, system and apparatus for processing an image |
-
2017
- 2017-10-30 JP JP2017209131A patent/JP7123545B2/ja active Active
-
2018
- 2018-10-19 CN CN201811220555.1A patent/CN109740409A/zh active Pending
- 2018-10-25 EP EP18202677.3A patent/EP3477544A1/en not_active Withdrawn
- 2018-10-26 US US16/172,620 patent/US20190130677A1/en not_active Abandoned
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130148848A1 (en) * | 2011-12-08 | 2013-06-13 | Industrial Technology Research Institute | Method and apparatus for video analytics based object counting |
US20150016671A1 (en) * | 2013-07-09 | 2015-01-15 | Canon Kabushiki Kaisha | Setting apparatus, output method, and non-transitory computer-readable storage medium |
CN105979134A (zh) * | 2015-01-30 | 2016-09-28 | 佳能株式会社 | 图像处理装置、图像处理方法和图像处理系统 |
CN105898213A (zh) * | 2015-02-12 | 2016-08-24 | 佳能株式会社 | 显示控制装置和显示控制方法 |
EP3153990A1 (en) * | 2015-10-07 | 2017-04-12 | C/o Canon Kabushiki Kaisha | Display control apparatus, display control method, and program |
CN106572298A (zh) * | 2015-10-07 | 2017-04-19 | 佳能株式会社 | 显示控制装置以及显示控制方法 |
Also Published As
Publication number | Publication date |
---|---|
US20190130677A1 (en) | 2019-05-02 |
JP7123545B2 (ja) | 2022-08-23 |
EP3477544A1 (en) | 2019-05-01 |
JP2019082795A (ja) | 2019-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105898143B (zh) | 一种运动物体的抓拍方法及移动终端 | |
CN113850248B (zh) | 运动姿态评估方法、装置、边缘计算服务器及存储介质 | |
CN104615926A (zh) | 信息处理设备和信息处理方法 | |
US11915430B2 (en) | Image analysis apparatus, image analysis method, and storage medium to display information representing flow quantity | |
JP2009211311A (ja) | 画像処理装置及び方法 | |
KR102199094B1 (ko) | 관심객체 검출을 위한 관심영역 학습장치 및 방법 | |
JP2017076909A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
CN110199316A (zh) | 相机和相机的图像处理方法 | |
JP7032913B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
CN109740409A (zh) | 信息处理装置及方法、摄像装置、照相机系统和存储介质 | |
CN105915785A (zh) | 双摄像头被遮挡的确定方法、确定装置和终端 | |
EP3355243A1 (en) | Information processing apparatus, information processing method, and program | |
CN111609926A (zh) | 杂散光强度检测方法、装置、检测终端及可读存储介质 | |
CN110110110A (zh) | 一种以图搜图方法、装置、电子设备及存储介质 | |
CN107958202A (zh) | 人体检测设备、人体检测设备的控制方法和存储介质 | |
US11129539B2 (en) | Pulse measuring device and control method thereof | |
KR101982258B1 (ko) | 오브젝트 검출 방법 및 오브젝트 검출 장치 | |
D'Angelo et al. | A full-reference quality metric for geometrically distorted images | |
US20150029230A1 (en) | System and method for estimating target size | |
JP6452738B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018029270A (ja) | 画像処理装置およびその制御方法、撮像装置、プログラム | |
CN103295189A (zh) | 用于数字显微术的图像增强聚光照明模式 | |
Bianco et al. | Image quality assessment by preprocessing and full reference model combination | |
US8538142B2 (en) | Face-detection processing methods, image processing devices, and articles of manufacture | |
JP7337557B2 (ja) | 情報処理装置、システム、情報処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20240419 |