CN104737534A - 信息处理装置、信息处理方法、程序及信息处理系统 - Google Patents

信息处理装置、信息处理方法、程序及信息处理系统 Download PDF

Info

Publication number
CN104737534A
CN104737534A CN201380054140.0A CN201380054140A CN104737534A CN 104737534 A CN104737534 A CN 104737534A CN 201380054140 A CN201380054140 A CN 201380054140A CN 104737534 A CN104737534 A CN 104737534A
Authority
CN
China
Prior art keywords
image
area
imaging space
moving image
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380054140.0A
Other languages
English (en)
Other versions
CN104737534B (zh
Inventor
王启宏
冈田宪一
宫下健
田崎明美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104737534A publication Critical patent/CN104737534A/zh
Application granted granted Critical
Publication of CN104737534B publication Critical patent/CN104737534B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19645Multiple cameras, each having view on one of a plurality of scenes, e.g. multiple cameras for multi-room surveillance or for tracking an object by view hand-over
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19691Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/617Upgrading or updating of programs or applications for camera control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Abstract

提供了可以实现有用的监视摄像机系统的信息处理装置、信息处理方法、程序和信息处理系统。根据本技术的一种实施方式的信息处理装置配备有输入单元和控制单元。输入单元接收第一图像和第二图像的输入,第一图像由将第一成像空间作为成像对象的第一成像装置拍摄,第二图像由将与第一成像空间不同的第二成像空间作为成像对象的第二成像装置拍摄并且第二图像与第一图像相互切换以及被显示。当第一图像和第二图像交替地被切换时,控制单元输出反映第一成像空间与第二成像空间之间的位置关系的切换运动图像。

Description

信息处理装置、信息处理方法、程序及信息处理系统
技术领域
本技术涉及能够被用于例如监视摄像机系统的信息处理装置、信息处理方法、程序及信息处理系统。
背景技术
例如,专利文献1描述了用于在跟踪对象之前或在跟踪对象期间容易并准确地指定跟踪目标的技术作为适用于监视摄像机系统的技术。在这种技术中,放大并显示要成为跟踪目标的对象,并且其他对象被提取为候选跟踪目标。仅通过进行在所提取的候选跟踪目标中选择用户希望放大并显示的目标(跟踪目标)的简单操作,就可以获得所期望的放大并显示的图像(缩放图像)(参见专利文献1的说明书中的[0010]、[0097]段等)。
专利文献1:日本公开特许公报第2009-251940号
发明内容
本发明所要解决的问题
期望使得如在专利文献1中描述的有用的监视摄像机系统能够被实现的技术。
鉴于上面提到的情况,本技术的目的是提供能够实现有用的监视摄像机系统的信息处理装置、信息处理方法、程序和信息处理系统。
用于解决所述问题的方案
为了实现上面提到的目的,根据本技术的实施方式的一种信息处理装置包括输入单元和控制单元。
输入单元输入:将第一成像空间设置为成像目标的第一成像装置所拍摄的第一图像;以及将与第一成像空间不同的第二成像空间设置为成像目标的第二成像装置所拍摄的第二图像,第二图像与第一图像相互切换,以及被显示。
当第一图像和第二图像相互切换时,控制单元输出切换运动图像,切换运动图像反映第一成像空间与第二成像空间之间的位置相关性。
在这种信息处理装置中,输入第一成像空间的第一图像和第二成像空间的第二图像。然后,当第一图像和第二图像被切换时,输出反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像。以这种方式,可以容易地理解当第一图像与第二图像被切换时的空间相关性。使用这种技术,可以实现有用的监视摄像机系统。
控制单元可以包括设置单元和生成单元。
设置单元将与第一成像空间和第二成像空间之间的位置相关性相对应的区域设置为第一图像中的第一区域,以及设置为第二图像中的第二区域。
生成单元生成第一运动图像作为切换到第二图像的切换运动图像,并且生成第二运动图像作为切换到第一图像的切换运动图像,在第一运动图像中,表示第一区域的第一区域图像以反映位置相关性的方式运动,在第二运动图像中,表示第二区域的第二区域图像以反映位置相关性的方式运动。
以此方式,可以生成其中第一图像的预定区域的图像运动的第一运动图像作为切换到第二图像的切换运动图像。此外,可以生成其中第二图像的预定区域的图像运动的第二运动图像作为切换到第一图像的切换运动图像。每个区域图像以反映成像空间之间的位置相关性的方式运动,并且因而可以容易地理解当第一图像和第二图像被切换时的空间相关性。
设置单元可以将在第一图像与第二图像之间共同被拍摄的共同区域设置为第一图像中的第一区域以及设置为第二图像中的第二区域。在这种情况下,生成单元可以生成其中第一区域图像向第二图像中的第二区域的位置运动的运动图像作为第一运动图像,并且生成其中第二区域图像向第一图像中的第一区域的位置运动的运动图像作为第二运动图像。
以此方式,使用共同区域作为基准,可以容易地理解第一成像空间与第二成像空间之间的位置相关性。因此,可以实现有用的监视摄像机系统。
生成单元可以生成其中第一区域图像向画面的外侧运动的运动图像作为第一运动图像,以及生成其中第二区域图像向画面的外侧运动的运动图像作为第二运动图像。
例如,如果未设置第一图像与第二图像之间共同被拍摄的共同区域,则以合适的方式生成其中第一区域图像和第二区域图像向画面的外侧运动的第一运动图像和第二运动图像。以这种方式,可以生成切换运动图像,根据该切换运动图像可以理解成像空间之间的位置相关性。
信息处理装置还包括跟踪第一图像和第二图像中的作为跟踪目标的对象的跟踪单元。在这种情况下,控制单元可以在作为跟踪目标的对象与第一区域之间的距离变得小于预定值时输出第一运动图像,并且在作为跟踪目标的对象与第二区域之间的距离变得小于预定值时输出第二运动图像。
在这种信息处理装置中,可以跟踪第一图像和第二图像中的作为跟踪目标的预定对象。因而,在作为跟踪目标的对象在预定距离内接近第一区域时,输出第一运动图像并且进行向第二图像的切换。此外,在作为跟踪目标的对象在预定距离内接近第二区域时,输出第二运动图像并且进行向第一图像的切换。以这种方式,可以有效地跟踪跟踪目标对象并且可以实现有用的监视摄像机系统。
控制单元可以在作为跟踪目标的对象与第一区域之间的距离变得小于预定值时将第一区域图像输出到第一图像中,并且在作为跟踪目标的对象与第二区域之间的距离变得小于预定值时将第二区域图像输出到第二图像中。
以这种方式,根据跟踪目标对象的运动,可以控制第一图像和第二图像中的第一区域图像和第二区域图像的显示。
信息处理装置还可以包括输入来自用户的指令的指令输入单元。在这种情况下,控制单元可以根据经由指令输入单元输入的选择第一区域图像的指令来输出第一运动图像,并且根据经由输入单元输入的选择第二区域图像的指令来输出第二运动图像。
以这种方式,根据第一区域图像和第二区域图像的选择,可以进行第一图像与第二图像之间的切换。以这种方式,实现有用的监视摄像机系统。
根据本技术的实施方式的一种信息处理方法是通过计算机执行的信息处理方法,其包括:输入将第一成像空间设置为成像目标的第一成像装置所拍摄的第一图像,以及将与第一成像空间不同的第二成像空间设置为成像目标的第二成像装置所拍摄的第二图像,第二图像与第一图像相互切换,以及被显示。
当第一图像和第二图像相互切换时,输出反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像。
根据本技术的实施方式的一种程序,其使得计算机执行下面的步骤。
输入第一图像和第二图像的步骤,第一图像由将第一成像空间设置为成像目标的第一成像装置拍摄,第二图像由将与第一成像空间不同的第二成像空间设置为成像目标的第二成像装置拍摄,并且与第一图像相互切换,以及被显示。
当第一图像和第二图像相互切换时输出反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像的步骤。
根据本技术的实施方式的一种信息处理系统包括:第一成像装置、第二成像装置和信息处理装置。
第一成像装置将第一成像空间设置为成像目标。
第二成像装置将与第一成像空间不同的第二成像空间设置为成像目标。
信息处理装置包括输入单元和控制单元。
输入单元输入由第一成像装置拍摄的第一图像以及由第二成像装置拍摄的第二图像,第二图像与第一图像相互切换,以及被显示。
当第一图像和第二图像相互切换时,控制单元输出反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像。
本发明的效果
如上所述,根据本技术,能够实现有用的监视摄像机系统。
附图说明
图1是示出包括根据本技术的实施方式的信息处理装置的监视摄像机系统的构造示例的框图。
图2是示出根据这种实施方式的摄像机布置示例的示意图。
图3是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图4是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图5是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图6是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图7是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图8是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图9是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图10是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图11是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图12是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图13是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图14是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图15是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图16是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图17是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图18是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图19是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图20是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图21是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图22是示出根据这种实施方式的图像之间的切换和切换运动图像的示例的图。
图23是示出在未在第一图像和第二图像中的每个中设置共同区域的情况下的摄像机的布置示例的示意图。
图24是示出在图23所示的情况下图像之间的切换和切换运动图像的示例的图。
图25是示出在图23所示的情况下图像之间的切换和切换运动图像的示例的图。
图26是示出在图23所示的情况下图像之间的切换和切换运动图像的示例的图。
图27是示出用作客户端装置和服务器装置的计算机的构造示例的示意性框图。
图28是用于描述用作另一实施方式的第一图像与第二图像之间的切换的过程的示意图。
图29是用于描述用作该另一实施方式的第一图像与第二图像之间的切换的过程的示意图。
具体实施方式
在下文中,将参照附图对根据本技术的实施方式进行描述。
[监视摄像机系统]
图1是示出包括根据本技术的实施方式的信息处理装置的监视摄像机系统的构造示例的框图。
监视摄像机系统100包括:多个摄像机10、作为根据本实施方式的信息处理装置的服务器装置20、以及客户端装置30。多个摄像机10和服务器装置20经由网络5连接。服务器装置20和客户端装置30也经由网络5连接。
例如,LAN(局域网)或WAN(广域网)用作网络5。网络5的类型和用于网络5的协议等不受限制。图1所示的两个网络5不需要相同。
多个摄像机10例如是能够拍摄数字视频摄像机的运动图像的摄像机。这些摄像机10生成由多个时间上连续的帧图像形成的运动图像数据。例如以30fps(帧每秒)或60fps的帧速率生成帧图像。可以逐字段地生成运动图像数据。每个摄像机10对应于根据这种实施方式的成像装置。
在下文中,形成运动图像的时间上连续的图像如帧图像将被简称为图像。如果摄像机10能够拍摄运动图像和静止图像两者,则“图像”包括形成运动图像的图像和生成为静止图像的图像两者。因而,由摄像机10拍摄的图像包括运动图像和静止图像两者。
客户端装置30包括通信单元31和GUI单元32。通信单元31用于经由网络6与服务器装置20通信。GUI单元32显示运动图像、用于各种操作的GUI(图形用户接口)和其他信息等。例如,经由网络6从服务器装置20发送的运动图像等被通信单元31接收。运动图像等被输出至GUI单元32并作为预定GUI显示在显示单元(未示出)上。
来自用户的操作经由在显示单元上显示的GUI等被输入到GUI单元32中。GUI单元32基于输入操作生成指令信息并且将指令信息输出至通信单元31。通信单元31经由网络6将指令信息发送至服务器装置20。注意,基于输入操作生成并输出指令信息的块可以相对于GUI单元32单独地被设置。
例如,PC(个人计算机)和便携式终端例如平板电脑被用作客户端装置30。然而,这不限于此。
服务器装置20包括摄像机管理单元21和摄像机控制单元22以及与其连接的图像分析单元23。服务器装置20还包括切换控制单元24、报警管理单元25和存储各种数据的存储单元608。服务器装置20还包括用于与客户端装置30通信的通信单元27。与通信单元27连接的是摄像机控制单元22、图像分析单元23、切换控制单元24和报警管理单元25。
通信单元27经由网络6将来自所连接的相应块的运动图像和各种信息传送至客户端装置30。通信单元27接收从客户端装置30发送的指令信息并将其输出至服务器装置20的相应块。例如,指令信息可以经由控制服务器装置20的操作的控制单元等(未示出)被输出至相应块。在这种实施方式中,通信单元27用作指令输入单元。
摄像机管理单元21经由网络5将来自摄像机控制单元22的控制信号发送至多个摄像机10。以这种方式,控制摄像机10的各种操作。例如,控制摄像机的平移-倾斜(pan-tilt)操作、缩放操作、聚焦操作等。
此外,摄像机管理单元21经由网络5接收从多个摄像机10发送的运动图像。然后,摄像机管理单元21将该运动图像输出至图像分析单元23。如果需要,可以进行如噪声处理的预处理。在这种实施方式中,摄像机管理单元21用作输入单元。
图像分析单元23针对每个图像(帧图像)对来自每个摄像机10的运动图像进行分析。例如,分析图像中的对象的类型和数量、对象的运动等。在这种实施方式中,图像分析单元23提取图像中的对象中的每个。如果预定对象被设置为跟踪目标,则对作为跟踪目标的对象进行跟踪。具体地,针对连续图像中的每个计算指示跟踪目标对象的位置的位置信息。用于提取和跟踪对象的技术不受限制,并且可以使用公知的技术。或者,可以适当地进行另外的图像分析。在这种实施方式中,图像分析单元23用作跟踪单元。
报警管理单元25管理关于图像中的对象的报警显示。例如,基于来自用户的指令和图像分析单元23的分析结果,预定对象被检测为可疑人员或可疑对象。报警显示(报警并显示)所检测的可疑人员等。此时,对报警显示的种类、执行报警显示的定时等进行管理。
切换控制单元24执行用于由多个摄像机10拍摄的图像之间的交替切换的处理。例如,根据来自用户的指令,预定摄像机10的图像被切换至另一摄像机10的图像,并且该图像被发送至客户端装置30。图像之间的切换可以自动进行。
在这种实施方式中,切换控制单元24在图像之间的切换期间输出反映作为相应摄像机10的成像目标的成像空间之间的位置相关性的切换运动图像。基于运动图像和来自图像分析单元23的分析结果、存储在存储单元608中的先前的运动图像的视频数据和元信息数据来进行图像之间的切换和切换运动图像的输出。
在这种实施方式中,切换控制单元24用作这个控制单元的设置单元和生成单元。在下文中,将详细描述通过这个切换控制单元进行的图像之间的切换。
图2是示出根据这种实施方式的用于描述图像之间的切换的摄像机10的布置示例的示意图。例如,如图2所示,用作第一成像装置的第一摄像机10a被设置在建筑物40的外部41中。此外,用作第二成像装置的第二摄像机10b被设置在建筑物40的内部42中。
放置第一摄像机10a和第二摄像机10b使得其成像目标分别是第一成像空间11a和第二成像空间11b。在此,成像空间11是能够被摄像机10拍摄的空间,并且成像空间11的范围依赖于平移/倾斜操作等而改变。使用由于平移/倾斜操作而能够拍摄较大范围的摄像机10,摄像机10的成像空间11变成了大范围。以合适的方式在成像空间11中设置平移/倾斜操作和缩放操作,并且拍摄图像。因而,所拍摄的图像12成为整个成像空间11或其一部分被拍摄的图像。
第一成像空间11a是包括建筑物40的入口43的空间。因而,如图1所示,作为被第一摄像机10a拍摄的第一图像12a,拍摄了包括建筑物40的入口43和外墙44的图像。例如,如果作为对象的人员3通过第一成像空间11a,则人员3也被拍摄在第一图像12a中。在由时间上连续的第一图像12a形成的运动图像中,人员3的通过的运动等被拍摄。
第二成像空间11b也是包括建筑物40的入口43的空间。因而,如图1所示,作为第二摄像机10b所拍摄的第二图像12b,拍摄了包括建筑物40的入口43和内部42的通道45的图像。例如,如果人员3通过第二成像空间11b,则人员3被拍摄在第二图像12b中。在第二图像12时间上连续的运动图像中,拍摄了人员3的通过的运动等。
在这种实施方式中,为了方便描述图像之间的切换起见,第一摄像机10a和第二摄像机10b的平移/倾斜操作的设置、缩放操作的设置和聚焦操作的设置被固定。即,如图2所示第一摄像机10a固定地拍摄表示整个第一成像空间11a的第一图像12a。此外,如图2所示第二摄像机10b固定地拍摄表示整个第二成像空间11b的第二图像12b。
在监视摄像机系统100中,第一图像12a和第二图像12b被彼此切换并显示。当第一图像12a和第二图像12b被切换时,输出反映第一成像空间11a与第二成像空间11b之间的位置相关性的切换运动图像。因而,在客户端装置30中,切换运动图像被显示在显示单元上,并且然后第一图像12a和第二图像12b被彼此切换。
位置相关性由成像空间11的位置、摄像机10的成像方向等定义。通常,第二成像空间11b相对于第一成像空间11a的位置和第一成像空间11a相对于第二成像空间11b的位置在第一成像空间11a与第二成像空间11b之间的位置相关性中。即,第一成像空间11a与第二成像空间11b之间的相对位置关系被例示为位置相关性。
此外,在第一图像12a与第二图像12b之间是否存在共同被拍摄的区域也被例示为位置相关性。例如,设置第一成像空间11a和第二成像空间11b以沿不同方向拍摄相同对象。在这种情况下,包括该对象的预定区域共同被拍摄。在这种实施方式中,也可以基于该区域生成切换运动图像。在下文中,共同拍摄的区域将被称作共同区域。
图2所示的第一图像12a和第二图像12b是以合适的方式经过由服务器装置20进行的图像处理并被输出至客户端装置30的图像。如上所述,在这种实施方式中,可以对第一图像12a和第二图像12b中的对象进行跟踪处理。在图2所示的示例中,人员3被设置为作为跟踪目标4的对象,并且对人员3的运动进行跟踪。在第一图像12a和第二图像12b中,显示了指示人员3被设置为跟踪目标对象4的标记7。
图3至图21是用于描述根据这种实施方式的图像之间的切换的图,是示出了切换运动图像的示例的图。图3至图22所示的图像由服务器装置20的切换控制单元24生成并且被发送至客户端装置30。在下面的描述中,有时使用显示图像或运动图像的表达。这意味着从服务器装置20的角度来讲图像或运动图像被生成并且输出。
如图3(A)所示,人员3运动至建筑物40的入口43。如图3(B)所示,当人员3接近入口43时,对应于入口43的位置的区域50a的图像51a被输出到第一图像12a中。在下文中,表示区域50a的图像51a将使用区域50a的符号来描述。
将对区域50a进行描述。在这种实施方式中,基于第一成像空间11a与第二成像空间11b之间的位置相关性的区域被设置为第一图像12a中的第一区域和图像12b中的第二区域。然后,生成其中表示第一区域的第一区域图像以反映位置相关性的方式运动的第一运动图像作为对第二图像的切换运动图像。此外,生成其中表示第二区域的第二区域图像以反映位置相关性的方式运动的第二运动图像作为对第一图像的切换运动图像。
在这种实施方式中,在第一图像12a和第二图像12b中的每个中,拍摄了入口43。因而,入口43成为被作为共同区域52拍摄的区域。在这种实施方式中,包括作为共同区域52的入口43的区域50a被设置为第一区域(在下文中,被称作第一区域50a)。如图7(A)所示,在第二图像12b中,包括入口43的区域50b成为共同区域52,并且区域50b被设置为第二区域(在下文中,被称作第二区域50b)。
第一区域50a和第二区域50b通常具有矩形形状并且使用具有四个顶点的坐标信息进行设置。然而,第一区域50a和第二区域50b的形状不受限制并且可以设置具有圆形形状、多边形形状等的区域。此外,表示第一区域50a和第二区域50b的数据不受限制。例如,符合被共同拍摄的对象的形状的区域可以被设置为第一区域50a和第二区域50b。在这种情况下,对象的外部形状的信息和位置信息被用来设置第一区域50a和第二区域50b。
图3(B)中所示的区域50a的图像51a是第一区域50a的图像51a(在下文中,被称作第一区域图像51a)。当作为跟踪目标对象4的人员3与第一区域50a之间的距离变得小于预定值时,第一区域图像51a被输出到第一图像12a中。以这种方式,能够知道当图像被切换时作为基准的区域(第一区域50a)的位置。此外,能够知道成为图像在其处被切换的点的切换点的位置。可以以合适的方式设置被设置为预定值的阈值。
此外,在图7(A)所示的第二图像12b中,当人员3与第二区域50b之间的距离变得小于预定值时,第二区域图像51b被输出到第二图像12b中。以这种方式,使用第二区域图像51b作为基准,能够知道图像之间的切换被进行。注意,可以采用表示整个区域的半透明图像,或者可以采用表示区域的边缘的框状图像作为第一区域图像51a和第二区域图像51b。其他图像也可以被显示为第一区域图像51a和第二区域图像51b。
如图3(C)所示,当人员3接近第一区域50a并且几乎与第一区域50a重叠时,开始图像之间的切换。即,在这种实施方式中,当作为跟踪目标对象4的人员3与第一区域50a之间的距离变得小于预定值时,输出第一运动图像,并且进行向第二图像12b的切换处理。此外,当人员3与第二区域50b之间的距离变得小于预定值时,输出第二运动图像,并且进行向第一图像12a的切换处理。在此,可以以合适的方式设置被设置为预定值的阈值。
如图3(C)所示,当切换过程开始时,第一区域图像51a被切换。例如,第一区域图像51a的颜色、形状等被切换。以这种方式,用户能够知道图像之间的切换开始了。类似地,第二区域图像51b也在人员3接近时被改变并且图像之间的切换开始。
作为第一运动图像60,首先如图4(A)和(B)所示,显示其中第一区域图像51a被强调的运动图像。例如,显示其中除第一区域图像51a以外的区域55逐渐变暗的运动图像。除第一区域图像51a以外的区域55可以以另外的颜色例如白色或灰色表示。或者,可以以半透明的方式显示除第一区域图像51a以外的区域55。另一方面,第一区域图像51a的颜色等可以被改变并且该显示可以被强调。
在图4(C)、图5(A)至图5(C)、以及图6(A)和图6(B)中,显示其中第一区域图像51a以反映第一成像空间11a与第二成像空间11b之间的位置相关性的方式运动的第一运动图像60。如图2所示,关于第一成像空间11a和第二成像空间11b,其成像方向是以几乎180度的方式相反的。即,第一图像12a和第二图像12b是从几乎相对的方向拍摄入口43的两个图像。
因而,如图4(C)至图6(A)所示,其中第一区域图像51a几乎被半旋转的运动图像被生成并且作为第一运动图像60显示。以这样的方式,可以以沿几乎180度的相反方向引导用户的视点。因而,可以产生仿佛用户的视点从第一摄像机10a的放置位置移动至第二摄像机10b的放置位置的感觉。因此,可以容易地理解第一图像12a与第二图像12b之间的位置关系。
在运动图像反映第一成像空间11a与第二成像空间11b之间的位置相关性的情况下,任意运动图像均可以被生成为第一运动图像60。例如,在图6等所示的第一运动图像60中,可以以合适的方式设置运动的第一区域图像51a的形状和尺寸、其旋转和移动的速度等。虽然图中示出了用于描述旋转的箭头,但是这样的箭头可以被实际显示在第一运动图像60中。另外,可以显示用于指示方位的指南针,第一区域图像51a的旋转、移动等可以由指南针的旋转等表示。或者,可以显示文字比如“正在旋转”。
此外,在这种实施方式中,如图6(B)所示,生成了其中第一区域图像51a被移动至第二图像12b中的第二区域50b的位置的第一运动图像60。如上所述,第一区域50a和第二图像50b是在第一图像12a与第二图像12b之间共同被拍摄的共同区域52。因而,第一区域50a和第二区域50b是彼此相对应的区域,并且第一图像12a中的第一区域50a与第二图像12b中的第二区域51b相对应。
运动图像被生成为第一运动图像60,在该运动图像中第一区域图像51a以反映图像空间之间的位置相关性的方式运动至第二区域50b的位置。以这种方式,使用共同区域52作为基准,可以容易地知道第一图像12a与第二图像12b之间的位置关系。因此,可以容易地理解第一成像空间11a与第二成像空间11b之间的位置相关性。注意,已经被移动至第二区域50b的位置的第一区域图像51a有时会被称作第二区域图像51b。
在从第二图像12b向第一图像12a切换的过程中,生成并显示第二运动图像65,其中第二区域图像51b以反映成像空间之间的位置相关性的方式运动。其中图6(B)至图4(B)中的第一运动图像60以相反的方式运动的运动图像被生成为第二运动图像65。此外,其中第二区域图像51b运动至第一图像12a中的第一区域50a的位置的运动图像被生成为第二运动图像65。以这种方式,可以容易地理解第一成像空间11a与第二成像空间11b之间的位置相关性。注意,可以使用生成运动图像的任意技术作为生成第一运动图像60和第二运动图像65的技术。
在图6(C)至图7(A)中,逐渐显示除第二区域图像51b以外的区域56。以这种方式,终止第一运动图像60的显示,并且终止向第二图像12b的切换。注意,在图7(A)中,第二区域图像51b被显示在切换了的第二图像12b中。以这种方式,能够知道其被从第一图像12a切换并且被显示。
如图7(B)所示,当人员3离开第二区域50b时解除对第二区域图像51b的显示。例如,当人员3离开超过被设置为用于显示第二区域50b的阈值的距离时,解除该显示。另外,当检测到人员3的运动时,可以解除第二区域图像51b的显示。
随后,将描述图7(B)所示的第二图像12b与图10(C)所示的图像之间的切换。对此,图7(B)所示的第二图像12b将被称作第一图像112a。因而,图10(C)所示的图像将被称作第二图像112b。
如图7(C)所示,人员3前进通过建筑物40的通道45。在第一图像112a中,通道45的中间区域被设置为第一区域150a。因而,当人员3前进通过通道45并且接近第一区域150a时,第一区域图像151a被输出到第一图像112a中。
因而,假定第一图像112a是基准,图3(A)所示的用于切换至图像(第一图像12a)的第一区域(第二区域50b)被设置在第一图像112a中。此外,设置用于切换至图10(C)所示的第二图像112b的第一区域150a。即,在第一图像112a中设置两个第一区域。针对一个图像设置的第一区域的数量与切换点的数量一样多,其中该图像在切换点处从其他图像切换。换言之,针对彼此切换的成对的两个图像设置第一区域和第二区域。
图7(C)所示的第一区域150a是在第二图像112a中共同被拍摄的共同区域152。因而,如图10(C)所示,在第二图像112b中,对应于第一区域150a的区域被设置为第二区域150b。
如图8(A)所示,当人员3进一步接近第一区域150a时,第一区域图像151a被改变,并且从第一图像112a向第二图像112b的切换开始。如图8(B)和图8(C)所示,显示了其中第一区域图像151a被强调的运动图像。因而,对于图10(A),显示第一运动图像160,其中第一区域图像151a以反映第一成像空间与第二成像空间之间的位置相关性的方式运动。
如图10(C)所示,第二图像112b是通过沿入口43的前方的方向拍摄的建筑物40的通道45而获得的图像。因而,其中第一区域图像151a略微旋转并且面对前方的运动图像被生成并被显示为第一运动图像160。此外,生成运动图像,其中第一区域图像151a以反映第一成像空间与第二成像空间之间的位置相关性的方式运动至第二图像112b中的第二区域150b的位置。
对于图10(C),逐渐显示除第二区域图像151b以外的区域156。以这种方式,终止第一运动图像160的显示,并且终止向第二图像112b的切换。生成并显示第一运动图像160,使得可以容易地理解第一图像112a与第二图像112b之间的空间位置关系。如图11(A)所示,当人员3离开第二区域150b时,第二区域图像151b的显示被解除。
在从第二图像112b至第二图像112a的切换中,生成反转第一运动图像160的第二运动图像。
随后,图11(A)所示的第二图像112b将被称作第一图像212a,并且将描述第一图像212a与图14(C)所示的第二图像212b之间的切换。
如图11(B)所示,人员3前进通过通道45。在第一图像212a中,通道45延伸弯折至对于前进通过通道45的人员3的右边(图中的左边)。在通道45的拐角部分46处设置第一区域250a。当人员3接近第一区域250a时,显示第一区域图像251a。图14(C)所示的第一区域250a和第二区域250b是共同区域。
如图12(A)所示,当人员3进一步接近第一区域250a时,第一区域图像251a被改变并且向第二图像212b的切换开始。如图12(B)和图12(C)所示,显示了其中第一区域图像251a被强调的运动图像。在图11(C)和图12的图片中,示出了延伸至画面15外部的第一区域图像251a。这表示对应于第二图像212b的第二区域250b的区域。实际上,画面15中的一部分被显示为第一区域图像251a。
对于图14(A),显示了以反映第一成像空间与第二成像空间之间的位置相关性的方式运动的第一运动图像260。如图13(A)所示,随着第一区域图像251a的运动,对应于上面提到的第二区域250b的整个区域被显示为第一区域图像251a。第一区域图像251a在被移动和被旋转的同时运动至作为共同区域的第二区域250b的位置。
如图14(B)所示,逐渐显示除第二区域图像251b以外的区域256。以这种方式,显示具有从作为成像空间的通道45的拐角部分46扩展的空间的第二图像212b。如图15(A)所示,当人员3离开第二区域250b时,第二区域图像251b的显示被解除。
之后,假定图15(A)所示的第二图像212b将被称作第一图像312a,将描述第一图像312a与图19(B)所示的第二图像312b之间的切换。
如图15(B)所示,人员3前进至通道45的左后侧的自动扶梯47。接着,显示两个第一区域图像315a和381。即,在第一图像312a中,自动扶梯47的前方区域和通道45的右后方的区域这两个区域被设置为第一区域350a和380。这些图像被显示为第一区域图像351a和380。
显示在自动扶梯47的前方的第一区域图像351a是用于切换至图19(B)所示的第二图像312b的第一区域图像。显示在通道45的右后侧的第一区域图像381被用于向/从由设置在第一区域图像381之外的摄像机所拍摄的图像切换。显示两个第一区域图像351a和381,并且从而用户能够知道图像之间的切换点的数量或位置。
注意,第一区域350a和图9(C)所示的第二区域350b被设置为共同区域。
如图15(C)所示,当人员3进一步接近第一区域350a时,第一区域图像351a被改变,并且向第二图像312b的切换开始。如图16(A)和图16(B)所示,显示其中第一区域图像351a被强调的运动图像。此时,可以原样不变地显示另一第一区域图像381。
对于图18(C),显示了以反映第一成像空间与第二成像空间之间的位置相关性的方式移动的第一运动图像360。如图19(B)所示,第二图像312b是其中自动扶梯下方的整个大的开放空间48被拍摄的图像。即,第二图像312b是其中大成像空间作为成像目标被拍摄的图像。因而,被设置为共同区域的第二区域350b是第二图像312b中的小区域。
因而,生成如下运动图像作为第一运动图像360:其中第一区域图像351a在被旋转并移动并且尺寸减小的同时运动至第二区域350b的位置。对于图19(B),逐渐显示除第二区域图像351b以外的区域356的图像。以这种方式,显示其中显示了整个开放空间48的第二图像312b。如图19(C)和图20(A)所示,当人员3离开第二区域350b使得人员3与第二区域350b之间的距离等于或大于预定距离时,第二区域图像351b的显示被解除。
描述将继续假定图20(A)所示的第二图像312b是第一图像412a。如图20(B)所示,人员3使用自动扶梯47向下走至开放空间48。然后,显示多个第一区域图像451a和481。可以沿多个方向从开放空间48前进,并且摄像机沿所述前进方向中的每个被设置。显示多个第一区域图像451a和481以向/从由这些摄像机所拍摄的图像切换。
在图20(B)中,当人员3达到自动扶梯47的几乎中央位置时,显示被设置在开放空间48中的五个第一区域图像451a和481。即,这五个第一区域图像451a和481都被显示在距人员3的距离相对远的阶段处。以这种方式,用户能够理解通过在早期阶段拍摄整个开放空间48而获得的第一图像412a中的切换点的数量或位置。
对于图21(B),在五个第一区域图像451a和481中,人员3在预定距离内接近的第一区域图像451a被改变并且图像之间的切换处理开始。
图22是示出了根据这这种实施方式的用于生成切换运动图像的处理示例的流程图。在此,将描述作为从第一图像向第二图像的切换运动图像的第一运动图像的生成。
输入第一图像和第二图像(步骤101)。判断是否设置了在第一图像与第二图像之间共同被拍摄的共同区域(步骤102)。如果存在共同区域的设置(是),则这个共同区域被设置为第一区域和第二区域中的每个(步骤103)。如果不存在共同区域的设置(否),则基于第一成像空间与第二成像空间之间的位置相关性将预定区域设置为第一区域和第二区域中的每个(步骤104)。
当放置监视摄像机系统100时,通常作校准处理执行关于共同区域是否存在的判断和第一区域和第二区域的设置。即,监视摄像机系统100等的用户、供应商等基于每个摄像机的成像空间来对第一区域和第二区域进行设置等。然而,基于摄像机安装位置的信息、摄像机的各种成像设置的信息等可以自动进行第一区域和第二区域的设置。
基于所设置的第一区域和第二区域生成第一运动图像。如果第一区域和第二区域被设置为共同区域,则生成其中第一区域图像运动至第二区域的位置的运动图像,即第一运动图像。如果第一区域和第二区域未被设置为共同区域,则适当地生成的运动图像作为第一运动图像,其中第一区域图像以反映第一成像空间与第二成像空间之间的位置相关性的方式运动。
图23是示出了在共同区域未被设置在第一图像和第二图像中的每个中的情况下摄像机的布置示例的示意图。假定第一摄像机510a的第一成像空间511a与图2所示的第一摄像机10a的第一成像空间11a相同。放置在建筑物40的内部42中的第二摄像机510b的第二成像空间511b被设置在不包括入口43的空间中。注意,也可以假定与作为右端的入口43相邻的第二图像512b的部分49被设置为共同区域。然而,建筑物40的外部41和内部42存在不同,因而该部分不被设置为共同区域。
关于这种情况,将示出第一运动图像和第二运动图像的示例。首先,作为第一图像512a的第一区域,其以与图3(B)所示的第一区域50a相同的方式被设置。然后,显示与图3(B)至图6(A)所示的第一运动图像60类似的运动图像。之后,如图24(A)至图24(C)所示,显示其中第一区域图像551a运动至画面15的左手方向的入口43的位置的运动图像。即,显示这样的运动图像:其中第一区域图像551a运动至画面15外侧的第二图像512b中的入口43的位置。这个运动图像被生成并且被显示为第一运动图像560。然后,向第二图像512b的切换完成。
在第二图像512b中,例如,如图25(A)和图25(B)所示,第二区域550a被设置在第二图像512b的左手侧的区域中。然后,显示与图6(A)至图4(C)所示的第二运动图像65几乎类似的运动图像。之后,如图25(C)至图26(B)所示,显示如下运动图像:其中第二区域图像551b运动至画面15的右上侧的建筑物40的内部42。即,显示其中第二区域图像551b运动至画面15的外侧第一图像512a中的第二区域550b的位置的运动图像。这个运动图像被生成并且被显示为第二运动图像565。然后,向第一图像512a的切换完成。
以这种方式,例如如果未设置共同区域,则可以生成其中第一区域图像551a和第二区域图像552b运动至画面15外侧的第一运动图像560和第二运动图像565。以这种方式,可以生成反映成像空间之间的位置相关性的切换运动图像。
如上所述,在根据这种实施方式的监视摄像机系统100中,第一成像空间的第一图像和第二成像空间的第二图像被输入到服务器装置20中。然后,当第一图像和第二图像被切换时,输出反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像。以这种方式,可以容易地理解当第一图像与第二图像被切换时的空间相关性。因此,可以实现有用的监视摄像机系统100。
此外,在根据这种实施方式的监视摄像机系统100中,根据跟踪目标对象4的运动自动显示第一区域图像和第二区域图像。此外,根据跟踪目标对象4的运动,自动进行第一图像与第二图像之间的切换。以这种方式,可以有效地对跟踪目标对象4进行跟踪。此外,可以防止在图像之间切换期间丢失跟踪目标对象4。因此,可以实现有用的监视摄像机系统100。
当多个摄像机10所拍摄的多个图像被频繁切换时,用户的视线的移动增加,并且变得难以理解要切换的图像之间的空间相关性。在根据这种实施方式的监视摄像机系统100中,可以抑制这样的问题的产生。
在上面提到的实施方式中,例如,使用各种计算机例如PC(个人计算机)作为客户端装置30和服务器装置20。图27是示出了这样的计算机的构造示例的示意性框图。
计算机600包括:CPU(中央处理单元)601、ROM(只读存储器)602、RAM(随机存取存储器)603、输入/输出接口605和将它们彼此连接的总线604。
与输入/输出接口605连接的是显示单元606、输入单元607、存储单元608、通信单元609、驱动单元610等。
显示单元606是使用例如晶体、EL(电致发光)或CRT(阴极射线管)的显示设备。
输入单元607例如是控制器、定点设备、键盘、触摸板或另外的操作装置。如果输入单元607包括触摸板,则触摸板可以与显示单元606集成。
存储单元608是非易失性存储设备以及例如HDD(硬盘驱动器)、闪存或另外的固态存储器。
驱动单元610例如是能够驱动可移除记录介质611例如光学记录介质、软(注册商标)盘、磁记录带和闪存的设备。相比之下,上面提到的存储单元608通常被用作预先安装在计算机600中以主要驱动非可移除记录介质的设备。
通信单元609是能够与LAN、WAN(广域网)等连接的调制解调器、路由器或用于与另外的设备通信的另外的通信装置。通信单元609可以进行有线通信或者可以进行无线通信。通信单元609通常与计算机600分开使用。
具有如上所述的硬件构造的计算机600进行的信息处理通过存储在存储单元608、ROM 602等中的软件和计算机600的硬件资源协作来实现。具体地,其通过CPU 601将存储在存储单元608、ROM 602等中的构成该软件的程序加载到RAM 603中并且执行该程序来实现。例如,通过CPU 601执行预定程序来实现图2所示的相应模块。
该程序例如经由记录介质被安装到计算机600中。或者,该程序可以经由全球网络等被安装到计算机600中。
此外,由计算机600执行的程序可以是其中按上面提到的顺序的时间序列执行过程的程序或者可以是其中并行地或按需要的定时例如在被调用时执行过程的程序。
<其他实施方式>
本技术不限于上述实施方式,并且能够实现各种其他实施方式。
例如,图28和图29是用于描述按照另一实施方式的第一图像与第二图像之间的切换处理的示意图。如图28(A)所示,第一图像712a中作为对象的人员3被用户2设置为跟踪目标对象4。在这种实施方式中,通过经由接触面板18的关于人员3的触摸操作设置跟踪目标对象4。
如图28(B)所示,根据人员3的运动显示第一区域图像751a。或者,通过设置跟踪目标对象4,可以显示第一区域图像751a。如图28(C)所示,当人员3接近第一区域图像751a时,显示图29所示的第一运动图像760,并且图像之间的切换开始。
如图29所示,生成并显示其中第一区域图像751a被旋转并且面对前方的第一运动图像760。此时,生成第一运动图像760使得第一区域图像751a被显示在整个画面中。然后,显示如图28(D)所示的第二图像412b并且终止图像之间的切换。
在这种实施方式中,整个第二图像712b被设置为第二区域750b。此外,第一区域750a和第二区域750b被设置为共同区域。因而,如图29所示,显示第一运动图像760,其中第一区域图像751a运动至作为第二区域750b的位置的整个画面的位置。在向第一图像712a切换的过程中,显示第二运动图像,其中作为第二区域图像751b的整个第二图像712b运动至第一区域750a的位置。以这种方式,整个所拍摄的图像可以被设置为第一区域或第二区域。
此外,这这种实施方式中,使用其中嵌入了第二图像712b的图像作为第一区域图像751a。以这种方式使用该图像作为切换目标,可以生成第一区域图像。以这种方式,第一图像与第二图像之间的空间位置关系变得容易理解。
可以根据用户的指令进行图像之间的切换。例如,根据选择显示在第一图像中的第一区域图像的指令,可以输出第一运动图像,并且可以进行向第二图像的切换。类似地,根据选择显示在第二图像中的第二区域图像的指令,可以输出第二运动图像并且可以进行向第一图像的切换。
例如,如图21所示,假定多个第一区域图像被显示在第一图像中。在这种情况下,例如,通过适当地选择第一区域图像,可以进行与所选择的第一区域图像相关联的图像之间的切换。以这种方式,可以直观地进行向要监视的图像的切换。
作为这种操作的另一示例,例如,假定在图3所示的监视画面中的门中设置了安全装置。此外,假定发现了可疑人员隐藏在使用卡等开门的人后面并且非法进入建筑物。在这种情况下,监视人员(用户)根据可疑人员的运动以合适的方式选择建筑物中的第一区域图像和第二区域图像。如果使用触摸板等,则根据可疑人员的运动来触摸第一区域图像和第二区域图像。根据该操作,显示第一运动图像和第二运动图像,并且以合适的方式进行图像之间的切换。以这种方式,可以根据触摸操作等的指令来进行图像之间的切换。以这种方式,可以进行跟踪而不会丢失可疑人员,并且可以以高准确度进行监视。
注意,可以根据用户的指令跳过第一运动图像和第二运动图像的显示。例如,当显示第一运动图像和第二运动图像时,触摸操作等被输入到画面中的预定区域或任意区域。接着,可以跳过第一运动图像和第二运动图像的显示,并且可以显示作为切换目标的图像。以这种方式,可以增大图像之间切换的速度。例如,这在可疑人员等例如以高速度移动的情况下是有效的。
在上面中,当跟踪目标对象接近到预定距离内时,第一区域图像被显示在第一图像中。然而,第一区域图像可以被显示在第一图像中。当切换开始并且显示切换运动图像时,可以显示第一区域图像。这同样适用于第二区域图像。
可以生成与使用第一区域图像和第二区域图像的第一运动图像和第二运动图像不同的运动图像作为反映第一成像空间与第二成像空间之间的位置相关性的切换运动图像。例如,其中仅强调了地面的图像以合适的方式例如被旋转或被移动,并且可以生成表示图像之间的相对位置关系的运动图像。
将描述在成像空间中进行平移/倾斜操作等的情况。在这种情况下,多个不同的第一图像被单个第一摄像机拍摄。此外,多个不同的第一图像被单个第二摄像机拍摄。
例如,针对以作为基准的成像设置拍摄的第一图像和第二图像,设置第一区域和第二区域。基于作为基准的第一区域和第二区域的位置信息和关于平移/倾斜设置等的成像设置信息,针对以另一成像设置拍摄的第一图像和第二图像设置第一区域和第二区域。
或者,在作为基准的第一图像和第二图像中设置的第一区域和第二区域可以按原样针对以其他成像设置拍摄的第一图像和第二图像设置。然后,可以显示相同的切换运动图像。此外,以这种方式,可以了解第一图像与第二图像之间的空间位置关系。
或者,在多个成像设置中,可以提前设置第一区域和第二区域。基于多个成像设置中的第一区域和第二区域的信息,可以以其他成像设置进行第一区域和第二区域。
在上文中,客户端装置和服务器装置经由网络连接,并且服务器装置和多个摄像机经由网络连接。然而,不必使用网络来连接装置。即,连接装置的方法不受限制。此外,在上文中,客户端装置和服务器装置被布置成单独的装置。然而,客户端装置和服务器装置可以一体地被构造并且被用作根据本技术的实施方式的信息处理装置。根据本技术的实施方式的信息处理装置可以被构造成包括多个成像装置。
根据上面所述的本技术的图像之间的切换处理等可以用于不同于监视摄像机系统的信息处理系统。
还可以将上面所述的实施方式的特征中的至少两个特征组合。
注意,本技术还可以采用以下配置。
(1)一种信息处理装置,包括:
输入单元,其输入:
将第一成像空间设置为成像目标的第一成像装置所拍摄的第一图像;以及
将与所述第一成像空间不同的第二成像空间设置为成像目标的第二成像装置所拍摄的第二图像,所述第二图像与所述第一图像相互切换,以及被显示;以及
控制单元,当所述第一图像和所述第二图像相互切换时,所述控制单元输出切换运动图像,所述切换运动图像反映所述第一成像空间与所述第二成像空间之间的位置相关性。
(2)根据(1)所述的信息处理装置,其中,
所述控制单元包括:
设置单元,其将与所述第一成像空间和所述第二成像空间之间的所述位置相关性相对应的区域设置为所述第一图像中的第一区域,以及设置为所述第二图像中的第二区域;以及
生成单元,其生成第一运动图像作为切换到所述第二图像的切换运动图像,并且生成第二运动图像作为切换到所述第一图像的切换运动图像,在所述第一运动图像中,表示所述第一区域的第一区域图像以反映所述位置相关性的方式运动,在所述第二运动图像中,表示所述第二区域的第二区域图像以反映所述位置相关性的方式运动。
(3)根据(2)所述的信息处理装置,其中,
所述设置单元将所述第一图像与所述第二图像之间共同被拍摄的共同区域设置为所述第一图像中的所述第一区域,并且设置为所述第二图像中的所述第二区域;并且
所述生成单元生成所述第一区域图像向所述第二图像中的所述第二区域的位置运动的运动图像以作为所述第一运动图像,以及生成所述第二区域图像向所述第一图像中的所述第一区域的位置运动的运动图像以作为所述第二运动图像。
(4)根据(2)或(3)所述的信息处理装置,其中,
所述生成单元生成所述第一区域图像向画面的外侧运动的运动图像以作为所述第一运动图像,以及生成所述第二区域图像向所述画面的外侧运动的运动图像以作为所述第二运动图像。
(5)根据(2)至(4)中任一项所述的信息处理装置,还包括:
跟踪单元,其跟踪所述第一图像和所述第二图像中作为跟踪目标的对象,其中,
当作为所述跟踪目标的所述对象与所述第一区域之间的距离变得小于预定值时,所述控制单元输出所述第一运动图像,并且当作为所述跟踪目标的所述对象与所述第二区域之间的距离变得小于预定值时,所述控制单元输出所述第二运动图像。
(6)根据(5)所述的信息处理装置,其中,
当作为所述跟踪目标的所述对象与所述第一区域之间的距离变得小于所述预定值时,所述控制单元将所述第一区域图像输出到所述第一图像中,当作为所述跟踪目标的所述对象与所述第二区域之间的距离变得小于所述预定值时,所述控制单元将所述第二区域图像输出到所述第二图像中。
(7)根据(2)至(6)中任一项所述的信息处理装置,还包括:
指令输入单元,其输入来自用户的指令,其中,
所述控制单元根据经由所述指令输入单元输入的选择所述第一区域图像的指令输出所述第一运动图像,以及根据经由所述输入单元输入的选择所述第二区域图像的指令输出所述第二运动图像。
附图标记说明
4 跟踪目标对象
10 摄像机
10a、510a 第一摄像机
10b、510b 第二摄像机
11 成像空间
11a、511a 第一成像空间
11b、511b 第二成像空间
12 所拍摄的图像
12a、112a、212a、312a、412a、512a、712a 第一图像
12b、112b、212b、312b、412b、512b、712b 第二图像
15 画面
20 服务器装置
23 图像分析单元
24 切换控制单元
30 客户端装置
50a、150a、250a、350a、550a、750a 第一区域
50b、150b、250b、350b、550b、750b 第二区域
51a、151a、251a、351a、381、451a、551a、751a 第一区域图像
51b、151b、251b、351b、551b、751b 第二区域图像
52、152 共同区域
60、160、260、360、560、760 第一运动图像
65、565 第二运动图像
100 监视摄像机系统
600 计算机

Claims (10)

1.一种信息处理装置,包括:
输入单元,其输入:
将第一成像空间设置为成像目标的第一成像装置所拍摄的第一图像;以及
将与所述第一成像空间不同的第二成像空间设置为成像目标的第二成像装置所拍摄的第二图像,所述第二图像与所述第一图像相互切换,以及被显示;以及
控制单元,当所述第一图像和所述第二图像相互切换时,所述控制单元输出切换运动图像,所述切换运动图像反映所述第一成像空间与所述第二成像空间之间的位置相关性。
2.根据权利要求1所述的信息处理装置,其中,
所述控制单元包括:
设置单元,其将与所述第一成像空间和所述第二成像空间之间的所述位置相关性相对应的区域设置为所述第一图像中的第一区域,以及设置为所述第二图像中的第二区域;以及
生成单元,其生成第一运动图像作为切换到所述第二图像的切换运动图像,并且生成第二运动图像作为切换到所述第一图像的切换运动图像,在所述第一运动图像中,表示所述第一区域的第一区域图像以反映所述位置相关性的方式运动,在所述第二运动图像中,表示所述第二区域的第二区域图像以反映所述位置相关性的方式运动。
3.根据权利要求2所述的信息处理装置,其中,
所述设置单元将所述第一图像与所述第二图像之间共同被拍摄的共同区域设置为所述第一图像中的所述第一区域,并且设置为所述第二图像中的所述第二区域;并且
所述生成单元生成所述第一区域图像向所述第二图像中的所述第二区域的位置运动的运动图像以作为所述第一运动图像,以及生成所述第二区域图像向所述第一图像中的所述第一区域的位置运动的运动图像以作为所述第二运动图像。
4.根据权利要求2所述的信息处理装置,其中,
所述生成单元生成所述第一区域图像向画面的外侧运动的运动图像以作为所述第一运动图像,以及生成所述第二区域图像向所述画面的外侧运动的运动图像以作为所述第二运动图像。
5.根据权利要求2所述的信息处理装置,还包括:
跟踪单元,其跟踪所述第一图像和所述第二图像中作为跟踪目标的对象,其中,
当作为所述跟踪目标的所述对象与所述第一区域之间的距离变得小于预定值时,所述控制单元输出所述第一运动图像,并且当作为所述跟踪目标的所述对象与所述第二区域之间的距离变得小于预定值时,所述控制单元输出所述第二运动图像。
6.根据权利要求5所述的信息处理装置,其中,
当作为所述跟踪目标的所述对象与所述第一区域之间的距离变得小于所述预定值时,所述控制单元将所述第一区域图像输出到所述第一图像中,当作为所述跟踪目标的所述对象与所述第二区域之间的距离变得小于所述预定值时,所述控制单元将所述第二区域图像输出到所述第二图像中。
7.根据权利要求2所述的信息处理装置,还包括:
指令输入单元,其输入来自用户的指令,其中,
所述控制单元根据经由所述指令输入单元输入的选择所述第一区域图像的指令输出所述第一运动图像,以及根据经由所述输入单元输入的选择所述第二区域图像的指令输出所述第二运动图像。
8.一种信息处理方法,包括:通过计算机
输入将第一成像空间设置为成像目标的第一成像装置所拍摄的第一图像,以及将与所述第一成像空间不同的第二成像空间设置为成像目标的第二成像装置所拍摄的第二图像,所述第二图像与所述第一图像相互切换,以及被显示;以及
当所述第一图像和所述第二图像相互切换时,输出反映所述第一成像空间与所述第二成像空间之间的位置相关性的切换运动图像。
9.一种程序,所述程序使得计算机执行:
输入第一图像和第二图像的步骤,所述第一图像由将第一成像空间设置为成像目标的第一成像装置拍摄,所述第二图像由将与所述第一成像空间不同的第二成像空间设置为成像目标的第二成像装置拍摄,并且与所述第一图像相互切换,以及被显示;以及
当所述第一图像和所述第二图像相互切换时输出反映所述第一成像空间与所述第二成像空间之间的位置相关性的切换运动图像的步骤。
10.一种信息处理系统,包括:
将第一成像空间设置为成像目标的第一成像装置;
将与所述第一成像空间不同的第二成像空间设置为成像目标的第二成像装置;以及
信息处理装置,其包括:
输入单元,其输入由所述第一成像装置拍摄的第一图像以及由所述第二成像装置拍摄的第二图像,所述第二图像与所述第一图像相互切换,以及被显示;以及
控制单元,当所述第一图像和所述第二图像相互切换时,所述控制单元输出反映所述第一成像空间与所述第二成像空间之间的位置相关性的切换运动图像。
CN201380054140.0A 2012-10-23 2013-09-06 信息处理装置、信息处理方法、程序及信息处理系统 Expired - Fee Related CN104737534B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-233621 2012-10-23
JP2012233621 2012-10-23
PCT/JP2013/005296 WO2014064878A1 (ja) 2012-10-23 2013-09-06 情報処理装置、情報処理方法、プログラム、及び情報処理システム

Publications (2)

Publication Number Publication Date
CN104737534A true CN104737534A (zh) 2015-06-24
CN104737534B CN104737534B (zh) 2018-02-16

Family

ID=50544264

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380054140.0A Expired - Fee Related CN104737534B (zh) 2012-10-23 2013-09-06 信息处理装置、信息处理方法、程序及信息处理系统

Country Status (5)

Country Link
US (1) US10187610B2 (zh)
EP (1) EP2913996B1 (zh)
JP (1) JP6299602B2 (zh)
CN (1) CN104737534B (zh)
WO (1) WO2014064878A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705317A (zh) * 2017-09-30 2018-02-16 石道松 基于视觉跟踪识别的控制系统

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160024143A (ko) * 2014-08-25 2016-03-04 삼성전자주식회사 영상 처리 방법 및 전자 장치
WO2018116494A1 (ja) * 2016-12-22 2018-06-28 日本電気株式会社 監視カメラ、監視システム、監視カメラの制御方法及びプログラム
TWI735180B (zh) 2020-03-12 2021-08-01 國立臺灣科技大學 角隅剪力連接器

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0729275A2 (en) * 1995-02-24 1996-08-28 Canon Kabushiki Kaisha Image input system
US20020097322A1 (en) * 2000-11-29 2002-07-25 Monroe David A. Multiple video display configurations and remote control of multiple video signals transmitted to a monitoring station over a network
US20060132482A1 (en) * 2004-11-12 2006-06-22 Oh Byong M Method for inter-scene transitions
US20080211929A1 (en) * 2007-01-10 2008-09-04 Canon Kabushiki Kaisha Camera control apparatus and method, and camera control system
WO2011101818A1 (en) * 2010-02-21 2011-08-25 Rafael Advanced Defense Systems Ltd. Method and system for sequential viewing of two video streams
CN102348059A (zh) * 2010-07-27 2012-02-08 三洋电机株式会社 摄像装置
CN102547233A (zh) * 2010-12-09 2012-07-04 索尼公司 图像显示设备、图像显示系统、图像显示方法和图像显示程序

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9712724D0 (en) * 1997-06-18 1997-08-20 Holmes Steven Method and apparatus for interaction with broadcast television content
US6522325B1 (en) * 1998-04-02 2003-02-18 Kewazinga Corp. Navigable telepresence method and system utilizing an array of cameras
US6359647B1 (en) * 1998-08-07 2002-03-19 Philips Electronics North America Corporation Automated camera handoff system for figure tracking in a multiple camera system
US7242423B2 (en) * 2003-06-16 2007-07-10 Active Eye, Inc. Linking zones for object tracking and camera handoff
JP4195991B2 (ja) * 2003-06-18 2008-12-17 パナソニック株式会社 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ
JP2006121580A (ja) 2004-10-25 2006-05-11 Matsushita Electric Ind Co Ltd 画像処理装置
JP4759988B2 (ja) 2004-11-17 2011-08-31 株式会社日立製作所 複数カメラを用いた監視システム
US8274564B2 (en) * 2006-10-13 2012-09-25 Fuji Xerox Co., Ltd. Interface for browsing and viewing video from multiple cameras simultaneously that conveys spatial and temporal proximity
JP2008289091A (ja) 2007-05-21 2008-11-27 Canon Inc 画像表示装置及び監視カメラシステム
JP2009251940A (ja) 2008-04-07 2009-10-29 Sony Corp 情報処理装置および方法、並びにプログラム
WO2011114799A1 (ja) * 2010-03-15 2011-09-22 オムロン株式会社 監視カメラ端末
JP5658507B2 (ja) * 2010-08-06 2015-01-28 富士通テン株式会社 画像表示システム、画像生成装置、及び、画像表示方法
US9282296B2 (en) * 2011-12-07 2016-03-08 Siemens Aktiengesellschaft Configuration tool for video analytics

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0729275A2 (en) * 1995-02-24 1996-08-28 Canon Kabushiki Kaisha Image input system
US20020097322A1 (en) * 2000-11-29 2002-07-25 Monroe David A. Multiple video display configurations and remote control of multiple video signals transmitted to a monitoring station over a network
US20060132482A1 (en) * 2004-11-12 2006-06-22 Oh Byong M Method for inter-scene transitions
US20080211929A1 (en) * 2007-01-10 2008-09-04 Canon Kabushiki Kaisha Camera control apparatus and method, and camera control system
WO2011101818A1 (en) * 2010-02-21 2011-08-25 Rafael Advanced Defense Systems Ltd. Method and system for sequential viewing of two video streams
CN102348059A (zh) * 2010-07-27 2012-02-08 三洋电机株式会社 摄像装置
CN102547233A (zh) * 2010-12-09 2012-07-04 索尼公司 图像显示设备、图像显示系统、图像显示方法和图像显示程序

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705317A (zh) * 2017-09-30 2018-02-16 石道松 基于视觉跟踪识别的控制系统

Also Published As

Publication number Publication date
US10187610B2 (en) 2019-01-22
EP2913996A4 (en) 2016-07-06
US20150326830A1 (en) 2015-11-12
WO2014064878A1 (ja) 2014-05-01
EP2913996B1 (en) 2021-03-03
JPWO2014064878A1 (ja) 2016-09-08
EP2913996A1 (en) 2015-09-02
CN104737534B (zh) 2018-02-16
JP6299602B2 (ja) 2018-03-28

Similar Documents

Publication Publication Date Title
TWI659398B (zh) 利用方向感應之侵入偵測技術
US9298987B2 (en) Information processing apparatus, information processing method, program, and information processing system
US8537228B2 (en) Electronic device and method for controlling cameras
JP6229816B2 (ja) モバイル監視装置、プログラム、及び制御方法
JP6877149B2 (ja) 撮影位置推薦方法、コンピュータプログラムおよび撮影位置推薦システム
US20200336708A1 (en) Duplicate monitored area prevention
EP3855749A1 (en) Systems and methods for displaying video streams on a display
US9760264B2 (en) Method and electronic device for synthesizing image
CN104737534A (zh) 信息处理装置、信息处理方法、程序及信息处理系统
CN111553196A (zh) 检测隐藏摄像头的方法、系统、装置、以及存储介质
KR101747841B1 (ko) 카메라 팬틸트줌 제어 장치
JP6593922B2 (ja) 画像監視システム
JP5554438B2 (ja) 画像取込装置の改良された制御
KR20170014133A (ko) Va 적용에 최적화된 카메라 설치 솔루션의 제공 방법 및 장치
US8755819B1 (en) Device location determination using images
US11327575B2 (en) Methods and systems for positioning and controlling sound images in three-dimensional space
JP6515975B2 (ja) モバイル監視装置、モバイル監視システム、プログラム、及び制御方法
US20230130815A1 (en) Image processing apparatus, image processing method, and program
KR20220072498A (ko) 다중 cctv 카메라의 제어 방법, 장치 및 시스템
KR20160076954A (ko) 전자 디바이스 상의 디워프 이미지 뷰를 자동으로 변경하는 방법 및 장치
CN116528003A (zh) 轨迹回放方法、装置及存储介质
JP2014030089A (ja) カメラ制御装置、カメラ制御方法及びカメラ制御プログラム
JP2019164802A (ja) モバイル監視装置、制御方法、及びプログラム
JP2014030090A (ja) カメラ制御装置、カメラ制御方法及びカメラ制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180216

Termination date: 20210906