WO2014064878A1 - 情報処理装置、情報処理方法、プログラム、及び情報処理システム - Google Patents

情報処理装置、情報処理方法、プログラム、及び情報処理システム Download PDF

Info

Publication number
WO2014064878A1
WO2014064878A1 PCT/JP2013/005296 JP2013005296W WO2014064878A1 WO 2014064878 A1 WO2014064878 A1 WO 2014064878A1 JP 2013005296 W JP2013005296 W JP 2013005296W WO 2014064878 A1 WO2014064878 A1 WO 2014064878A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
region
moving image
switching
area
Prior art date
Application number
PCT/JP2013/005296
Other languages
English (en)
French (fr)
Inventor
啓宏 王
憲一 岡田
健 宮下
明美 田崎
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2014543129A priority Critical patent/JP6299602B2/ja
Priority to US14/436,472 priority patent/US10187610B2/en
Priority to EP13848744.2A priority patent/EP2913996B1/en
Priority to CN201380054140.0A priority patent/CN104737534B/zh
Publication of WO2014064878A1 publication Critical patent/WO2014064878A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19645Multiple cameras, each having view on one of a plurality of scenes, e.g. multiple cameras for multi-room surveillance or for tracking an object by view hand-over
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19691Signalling events for better perception by user, e.g. indicating alarms by making display brighter, adding text, creating a sound
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/617Upgrading or updating of programs or applications for camera control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Definitions

  • the present technology relates to an information processing apparatus, an information processing method, a program, and an information processing system that can be used in, for example, a surveillance camera system.
  • Patent Document 1 describes a technique for easily and accurately specifying a tracking target before or during tracking of an object as a technique applicable to a surveillance camera system.
  • an object to be tracked is enlarged and other objects are extracted as tracking target candidates.
  • the user can obtain a desired enlarged display image (zoom image) only by performing a simple operation of selecting a target (tracking target) to be enlarged and displayed from the extracted tracking target candidates (Patent Document 1). (See paragraphs [0010] [0097] etc.).
  • an object of the present technology is to provide an information processing apparatus, an information processing method, a program, and an information processing system capable of realizing a useful surveillance camera system.
  • an information processing apparatus includes an input unit and a control unit.
  • the input unit captures a first image captured by a first imaging device that targets the first capturing space and a second capturing space that is different from the first capturing space.
  • the first image captured by the first imaging device and the second image displayed while being switched to each other are input.
  • the control unit outputs a switching moving image reflecting a positional relationship between the first and second imaging spaces when the first and second images are switched to each other.
  • the first image in the first shooting space and the second image in the second shooting space are input.
  • a switching moving image reflecting the positional relationship between the first and second imaging spaces is output.
  • the spatial relationship can be easily understood when switching between the first and second images.
  • the control unit may include a setting unit and a generation unit.
  • the setting unit sets a region corresponding to the positional relationship between the first and second imaging spaces as a first region for the first image and a second region for the second image. Set as each area.
  • the generation unit generates a first moving image in which a first region image representing the first region moves reflecting the positional relationship as a switching moving image to the second image, and the second image A second moving image in which the second region image representing the region moves reflecting the positional relationship is generated as a moving image to be switched to the first image.
  • the first moving image in which the image of the predetermined area of the first image moves may be generated as the moving image to be switched to the second image.
  • a second moving image in which an image in a predetermined area of the second image moves may be generated as a switching moving image to the first image. Since each area image reflects the positional relationship of the imaging space, the spatial relationship can be easily understood when switching between the first and second images.
  • the setting unit sets a common area captured in common to each of the first and second images as the first area in the first image and the second area in the second image. Each area may be set.
  • the generation unit generates a moving image in which the first region image moves to a position of the second region in the second image as the first moving image, and the second region image is the first region image.
  • a moving image that moves to the position of the first region in one image may be generated as the second moving image.
  • the generation unit generates a moving image in which the first region image moves outside the screen as the first moving image, and a moving image in which the second region image moves outside the screen as the second moving image. It may be generated. For example, when a common area photographed in common in the first and second images is not set, first and second moving images in which the first and second area images move to the outside of the screen are appropriately generated. . This makes it possible to generate a switching video that can understand the positional relevance of the shooting space.
  • the information processing apparatus may further include a tracking unit that tracks an object to be tracked in the first and second images.
  • the control unit outputs the first moving image when a distance between the tracking target object and the first region becomes smaller than a predetermined value, and the tracking target object and the first area are output.
  • the second moving image may be output when the distance to the area 2 is smaller than a predetermined value.
  • the first moving image is output and switched to the second image.
  • the second moving image is output and switched to the first image.
  • the control unit outputs the first area image in the first image when a distance between the object to be tracked and the first area becomes smaller than a predetermined value, and the tracking target
  • the second area image may be output in the second image when the distance between the object and the second area becomes smaller than a predetermined value. In this way, the display of the first and second region images in the first and second images may be controlled according to the movement of the tracking target object.
  • the information processing apparatus may further include an instruction input unit that inputs an instruction from a user.
  • the control unit outputs the first moving image in response to an instruction to select the first region image input via the instruction input unit, and the input received via the input unit
  • the second moving image may be output in response to an instruction to select a second region image.
  • switching between the first and second images may be executed in accordance with the selection of the first and second region images.
  • An information processing method is an information processing method executed by a computer, and includes a first image captured by a first imaging device that captures a first imaging space, Including inputting a second image that is captured by a second imaging device that captures a second imaging space that is different from the first imaging space and that is displayed while being switched to each other.
  • a switching moving image reflecting the positional relationship between the first and second imaging spaces is output.
  • a program causes a computer to execute the following steps. Photographed by a first image photographed by a first imaging device having a first photographing space as a subject of photographing and a second imaging device having a second photographing space different from the first photographing space as a subject of photographing. And a step of inputting the first image and the second image to be displayed while being switched to each other. Outputting a switching moving image reflecting a positional relationship between the first and second imaging spaces when the first and second images are switched to each other;
  • An information processing system includes a first imaging device, a second imaging device, and an information processing device.
  • the first imaging device targets the first imaging space for imaging.
  • the second imaging device targets a second imaging space that is different from the first imaging space.
  • the information processing apparatus includes an input unit and a control unit.
  • the input unit inputs a first image captured by the first imaging device and a second image captured by the second imaging device and displayed by switching between the first image and the first image. To do.
  • the control unit outputs a switching moving image reflecting a positional relationship between the first and second imaging spaces when the first and second images are switched to each other.
  • a useful surveillance camera system can be realized.
  • FIG. 1 is a block diagram illustrating a configuration example of a monitoring camera system including an information processing apparatus according to an embodiment of the present technology.
  • the surveillance camera system 100 includes a plurality of cameras 10, a server device 20 that is an information processing device according to the present embodiment, and a client device 30.
  • the plurality of cameras 10 and the server device 20 are connected via the network 5.
  • the server device 20 and the client device 30 are also connected via the network 5.
  • a local area network (LAN) or a wide area network (WAN) is used as the network 5, for example.
  • the type of network 5 and the protocol used for it are not limited.
  • the two networks 5 shown in FIG. 1 do not have to be the same.
  • the plurality of cameras 10 are cameras capable of shooting moving images such as digital video cameras. These cameras 10 generate moving image data composed of a plurality of temporally continuous frame images. The frame image is generated at a frame rate of 30 fps (frame per second) or 60 fps, for example. Video data may be generated in units of fields. Each camera 10 corresponds to an imaging apparatus according to the present embodiment.
  • a temporally continuous image such as a frame image is simply referred to as an image.
  • the “image” includes both images constituting the moving images and images generated as still images. Therefore, the image photographed by the camera 10 includes both a moving image and a still image.
  • the client device 30 includes a communication unit 31 and a GUI unit 32.
  • the communication unit 31 is used for communication with the server device 20 via the network 6.
  • the GUI unit 32 displays a moving image, GUI (Graphical User Interface) for various operations, and other information.
  • GUI Graphic User Interface
  • a moving image transmitted from the server device 20 via the network 6 is received by the communication unit 31.
  • the moving image or the like is output to the GUI unit 32 and displayed on a display unit (not shown) by a predetermined GUI.
  • an operation from the user is input to the GUI unit 32 via the GUI displayed on the display unit.
  • the GUI unit 32 generates instruction information based on the input operation and outputs the instruction information to the communication unit 31.
  • Instruction information is transmitted to the server device 20 via the network 6 by the communication unit 31.
  • a block that generates and outputs instruction information based on the input operation may be provided separately from the GUI unit 32.
  • a personal terminal such as a PC (Personal Computer) or a tablet is used. However, it is not limited to these.
  • the server device 20 includes a camera management unit 21, and a camera control unit 22 and an image analysis unit 23 connected thereto.
  • the server device 20 includes a switching control unit 24, an alarm management unit 25, and a storage unit 608 that stores various data.
  • the server device 20 includes a communication unit 27 that is used for communication with the client device 30.
  • a camera control unit 22, an image analysis unit 23, a switching control unit 24, and an alarm management unit 25 are connected to the communication unit 27.
  • the communication unit 27 transmits the moving image and various information from each connected block to the client device 30 via the network 6. Also, the instruction information transmitted from the client device 30 is received and output to each block of the server device 20. For example, the instruction information may be output to each block via a control unit (not shown) that controls the operation of the server device 20.
  • the communication unit 27 functions as an instruction input unit in the present embodiment.
  • the camera management unit 21 transmits a control signal from the camera control unit 22 to the plurality of cameras 10 via the network 5. Thereby, various operations of the camera 10 are controlled. For example, camera pan / tilt operation, zoom operation, focus operation, and the like are controlled.
  • the camera management unit 21 receives moving images transmitted from the plurality of cameras 10 via the network 5. Then, the moving image is output to the image analysis unit 23. If necessary, preprocessing such as noise processing may be executed.
  • the camera management unit 21 functions as an input unit in the present embodiment.
  • the image analysis unit 23 analyzes the moving image from each camera 10 for each image (frame image). For example, the type and number of objects shown in the image, the movement of the objects, etc. are analyzed. In the present embodiment, each object in the image is extracted by the image analysis unit 23. When a predetermined object is set as a tracking target, tracking of the tracking target object is executed. Specifically, position information indicating the position of the tracking target object is calculated for each successive image.
  • the technique used for object extraction and tracking is not limited, and a well-known technique may be used. In addition, other image analysis may be performed as appropriate.
  • the image analysis unit 23 functions as a tracking unit.
  • the alarm management unit 25 manages the alarm display for the object in the image. For example, a predetermined object is detected as a suspicious person or a suspicious object based on an instruction from the user or an analysis result by the image analysis unit 23. The detected suspicious person or the like is displayed as an alarm (alarm display). At this time, the type of alarm display, the timing of alarm display execution, and the like are managed.
  • the switching control unit 24 executes processing for switching images captured by the plurality of cameras 10 to each other. For example, according to an instruction from the user, the image of a predetermined camera 10 is switched from an image of another camera 10 and transmitted to the client device 30. Image switching may be performed automatically.
  • the switching control unit 24 outputs a switching moving image reflecting the positional relevance of the shooting space to be shot by each camera 10 when switching images.
  • the switching of images and the output of the switching video are executed based on video data output from the image analysis unit 23, analysis results, meta information data stored in the storage unit 608, and video data such as past video.
  • the switching control unit 24 functions as a control unit, a setting unit included in the control unit, and a generation unit.
  • image switching by the switching control unit will be described in detail.
  • FIG. 2 is a schematic diagram illustrating an arrangement example of the camera 10 for explaining image switching according to the present embodiment.
  • a first camera 10 a as a first imaging device is set in the exterior 41 of the building 40.
  • a second camera 10b as a second imaging device is set in the interior 42 of the building 40.
  • the first and second cameras 10a and 10b are installed with the first and second shooting spaces 11a and 11b as shooting targets, respectively.
  • the imaging space 11 is a space that can be imaged by the camera 10, and the range of the imaging space 11 varies depending on an operation range such as a pan / tilt operation. If the camera 10 is capable of photographing a large range by pan / tilt operation, the photographing space 11 is also a large range. A pan / tilt operation and a zoom operation are appropriately set in the imaging space 11 and an image is taken. Accordingly, the photographed image 12 is an image in which the whole or part of the photographing space 11 is photographed.
  • the first shooting space 11 a is a space including the entrance 43 of the building 40. Therefore, as shown in FIG. 1, an image including the entrance 43 and the outer wall 44 of the building 40 is taken as the first image 12a taken by the first camera 10a.
  • the person 3 passes as an object in the first photographing space 11a, the person 3 is also photographed in the first image 12a.
  • the moving image in which the first image 12a is temporally continuous the movement of the person 3 such as traffic is photographed.
  • the second imaging space 11b is also a space including the entrance 43 of the building 40. Therefore, as shown in FIG. 1, an image including the entrance 43 and the corridor 45 in the interior 42 of the building 40 is photographed as the second image 12 b photographed by the second camera 10 b. When the person 3 passes through the second shooting space 11b, the person 3 is shot in the second image 12b. In the moving image in which the second image 12b is continuous in time, the movement of the person 3 such as traffic is photographed.
  • the pan / tilt operation settings and zoom operation settings of the first and second cameras 10a and 10b are fixed for easy understanding of the image switching. That is, with the first camera 10a, the first image 12a representing the entire first imaging space 11a shown in FIG. In the second camera 10b, a second image 12b representing the entire second imaging space 11b shown in FIG.
  • the first and second images 12a and 12b are switched and displayed.
  • a switching moving image reflecting the positional relationship between the first and second imaging spaces 11a and 11b is output. Therefore, in the client apparatus 30, after the switching moving image is displayed on the display unit, the first and second images 12a and 12b are switched to each other.
  • the positional relationship is determined by the position of the shooting space 11, the shooting direction of the camera 10, and the like.
  • the position of the second imaging space 11b with respect to the first imaging space 11a and the position of the first imaging space 11a with respect to the second imaging space 11b are the first and second imaging spaces 11a and 11b.
  • the positional relationship of. That is, the relative positional relationship between the first and second imaging spaces 11a and 11b can be cited as a positional relationship.
  • first and second images 12a and 12b can be cited as a positional relationship.
  • the first and second shooting spaces 11a and 11b are set so as to shoot the same object from different directions.
  • a predetermined area including the object is photographed in common.
  • an area photographed in common is described as a common area.
  • the first and second images 12 a and 12 b shown in FIG. 2 are images that have been appropriately processed by the server device 20 and output to the client device 30. As described above, in the present embodiment, it is possible to execute the tracking process on the objects shown in the first and second images 12a and 12b.
  • the person 3 is set as the object 4 to be tracked, and the movement of the person 3 is tracked.
  • a mark 7 indicating that the person 3 is set as the tracking target object 4 is displayed.
  • FIG. 3 to FIG. 21 are diagrams for explaining image switching according to the present embodiment, and are diagrams illustrating an example of a switching moving image.
  • the images shown in FIGS. 3 to 22 are generated by the switching control unit 24 of the server device 20 and transmitted to the client device 30.
  • an expression that an image or a moving image is displayed may be used, which means that the image or moving image is generated and output when viewed from the server device 20.
  • the person 3 moves toward the entrance 43 of the building 40.
  • the image 51a of the region 50a corresponding to the position of the entrance 43 is output in the first image 12a.
  • the image 51a representing the region 50a will be described with reference to the region 50a.
  • an area corresponding to the positional relationship between the first and second imaging spaces 11a and 11b is a first area in the first image 12a and a second area in the second image 12b. It is set as the area. Then, a first moving image in which the first region image representing the first region moves reflecting the positional relevance is generated as a switching moving image to the second image. A second moving image in which the second region image representing the second region moves reflecting the positional relevance is generated as a switching moving image to the first image.
  • the entrance 43 is photographed in each of the first and second images 12a and 12b. Therefore, the entrance 43 is an area to be photographed as the common area 52.
  • the area 50a including the entrance 43, which is the common area 52 is set as the first area (hereinafter referred to as the first area 50a).
  • the second image 12b as shown in FIG. 7A, the area 50b including the entrance 43 becomes the common area 52, and this area 50b is set as the second area (hereinafter referred to as the second area 50b). To describe).
  • the first and second regions 50a and 50b typically have a rectangular shape, and are set using coordinate information of four vertices.
  • the shapes of the first and second regions 50a and 50b are not limited, and regions such as a circular shape and a polygonal shape may be set.
  • data representing the first and second regions 50a and 50b is not limited. For example, areas along the shape of the object photographed in common may be set as the first and second areas 50a and 50b. In this case, the first and second regions 50a and 50b are set by using the outer shape information and the position information of the object.
  • the image 51a in the area 50a shown in FIG. 3B is the image 51a in the first area 50a (hereinafter referred to as the first area image 51a).
  • the first region image 51a is output in the first image 12a. This makes it possible to grasp the position of the reference area (first area 50a) when the images are switched. Further, it is possible to grasp the position of the switching point that is the point at which the image is switched.
  • the threshold value set as the predetermined value may be set as appropriate.
  • the second region image 51b is included in the second image 12b. Is output. As a result, it is possible to grasp that image switching is executed with reference to the second region image 51b.
  • the first and second region images 51a and 51b may be translucent images that represent the entire region, or may be frame-shaped images that represent the edge of the region. Other images may be displayed as the first and second region images 51a and 51b.
  • image switching is started. That is, in the present embodiment, when the distance between the person 3 who is the tracking target object 4 and the first region 50a becomes smaller than a predetermined value, the first moving image is output and the switching process to the second image 12b is performed. Is executed. Further, when the distance between the person 3 and the second area 50b becomes smaller than a predetermined value, the second moving image is output and the switching process to the first image 12a is executed.
  • a threshold value set as a predetermined value may be set as appropriate.
  • the first region image 51a changes.
  • the color and shape of the first area image 51a change.
  • the user can grasp that switching of images is started.
  • the second region image 51b also changes at the timing when the person 3 approaches and image switching is started.
  • a moving image in which the first region image 51a is emphasized is displayed.
  • a moving image in which the region 55 other than the first region image 51a is gradually darkened is displayed.
  • the region 55 other than the first region image 51a may be represented by other colors such as white and gray.
  • the region 55 other than the first region image 51a may be displayed translucently.
  • the display may be emphasized by further changing the color or the like of the first region image 51a.
  • the first region image 51a is positioned in the first and second imaging spaces 11a and 11b.
  • the first moving image 60 that moves reflecting the relevance is displayed.
  • the respective imaging directions are approximately 180 degrees and are opposite to each other. That is, the first and second images 12a and 12b are two images obtained by photographing the entrance 43 from substantially opposite directions, respectively.
  • a moving image in which the first region image 51a is substantially half-rotated is generated and displayed as the first moving image 60.
  • the user's viewpoint can be guided in the opposite direction by about 180 degrees. Then, it is possible to generate a sensation as if the user's viewpoint has moved from the installation position of the first camera 10a to the installation position of the second camera 10b. As a result, it becomes possible to easily understand the spatial positional relationship between the first and second images 12a and 12b.
  • Any moving image may be generated as the first moving image 60 as long as it reflects the positional relationship between the first and second shooting spaces 11a and 11b.
  • the shape and size of the moving first area image 51a, the speed of rotation and movement, and the like can be set as appropriate.
  • an arrow for explaining the rotation is shown, but such an arrow may actually be displayed in the first moving image 60.
  • a compass indicating the azimuth may be displayed, and rotation or movement of the first region image 51a may be expressed by rotating the compass or the like. Or text such as rotating may be displayed.
  • a first moving image 60 is generated in which the first region image 51a moves to the position of the second region 50b in the second image 12b.
  • the first and second regions 50a and 50b are the common region 52 photographed in common in each of the first and second images 12a and 12b. Accordingly, the first and second regions 50a and 50b are regions corresponding to each other, and the first region 50a in the first image 12a corresponds to the second region 50b in the second image 12b.
  • the first moving image 60 a moving image is generated in which the first area image 51a moves to the position of the second area 50b while moving reflecting the positional relevance of the shooting space.
  • the first and second images 12a and 12b with the common region 52 as a reference.
  • the first region image 51a that has moved to the position of the second region 50b may be described as the second region image 51b.
  • a second moving image 65 in which the second region image 51b moves reflecting the positional relationship of the shooting space is generated and displayed.
  • a moving image that reversely advances the first moving image 60 from FIG. 6B to FIG. 4B is generated as the second moving image 65.
  • a moving image in which the second region image 51 b moves to the position of the first region 50 a in the first image 12 a is generated as the second moving image 65.
  • the region 56 other than the second region image 51b is gradually displayed. Thereby, the display of the first moving image 60 is finished, and the switching to the second image 12b is finished.
  • a second area image 51b is displayed in the switched second image 12b. Thereby, it is possible to grasp that the first image 12a is switched and displayed.
  • the display of the second area image 51b is canceled when the person 3 leaves the second area 50b.
  • the display is canceled when the second region 50b is separated from a distance set as a threshold value for display.
  • the display of the second region image 51b may be canceled when the movement of the person 3 is detected.
  • the second image 12b shown in FIG. 7B is referred to as the first image 112a again.
  • the image shown in FIG. 10C is referred to as a second image 112b.
  • the person 3 proceeds through the hallway 45 in the building 40.
  • an area in the middle of the corridor 45 is set as the first area 150a. Accordingly, when the person 3 proceeds through the corridor 45 and approaches the first area 150a, the first area image 151a is output in the first image 112a.
  • the first image 112a when viewed with reference to the first image 112a, the first image 112a includes a first region (second region) for switching to the image (first image 12a) shown in FIG. 50b) is set.
  • a first area 150a for switching to the second image 112b shown in FIG. 10C is set. That is, two first areas are set in the first image 112a. For one image, the same number of first regions as the number of switching points that can be switched from that image to another image are set. In other words, a first area and a second area are set for each set of two images that are switched to each other.
  • the first area 150a shown in FIG. 7C is a common area 152 that is photographed in common in the second image 112a. Accordingly, as shown in FIG. 10C, in the second image 112b, an area corresponding to the first area 150a is set as the second area 150b.
  • the first area image 151a changes, and switching from the first image 112a to the second image 112b starts. Is done.
  • FIGS. 8B and 8C a moving image in which the first region image 151a is emphasized is displayed. 10A, the first moving image 160 in which the first region image 151a moves reflecting the positional relationship between the first and second imaging spaces is displayed.
  • the second image 112b is an image of the corridor 45 of the building 40 taken in the direction from the front toward the entrance 43. Accordingly, a moving image in which the first region image 151a is rotated slightly and turned to the front is generated and displayed as the first moving image 160. Also, a moving image is generated in which the first region image 151a moves to the position of the second region 150b in the second image 112b while moving in a manner that reflects the positional relationship between the first and second imaging spaces. Is done.
  • the area 156 other than the second area image 151b is gradually displayed. Thereby, the display of the first moving image 160 is finished, and the switching to the second image 112b is finished.
  • the display of the second region image 151b is canceled when the person 3 leaves the second region 150b.
  • the person 3 proceeds through the hallway 45.
  • the corridor 45 is bent and extends on the right side (left side in the drawing) for the person 3 traveling through the corridor 45.
  • a first region 250 a is set at the corner 46 of the corridor 45.
  • the first area image 251a is displayed.
  • the first region 250a and the second region 250b illustrated in FIG. 14C are a common region.
  • FIG. 12 (A) when the person 3 further approaches the first region 250a, the first region image 251a is changed, and switching to the second image 212b is started.
  • FIGS. 12B and 12C a moving image in which the first region image 251a is emphasized is displayed.
  • the first region image 251 a is illustrated on the outside of the screen 15. This represents a region corresponding to the second region 250b of the second image 212b. Actually, a portion in the screen 15 is displayed as the first region image 251a.
  • the first moving image 260 that moves reflecting the positional relationship between the first and second shooting spaces is displayed.
  • the first area image 251a moves, the entire area corresponding to the above-described second area 250b is displayed as the first area image 251a.
  • the first area image 251a moves to the position of the second area 250b, which is a common area, while moving and rotating.
  • the region 256 other than the second region image 251b is gradually displayed.
  • a second image 212b is displayed in which the space that extends from the corner 46 of the corridor 45 is the shooting space.
  • the display of the second region image 251b is canceled when the person 3 leaves the second region 250b.
  • first area images 351a and 381 are displayed. That is, in the first image 312 a, two areas are set as the first areas 350 a and 380, the area in front of the escalator 47 and the area that continues to the right side behind the corridor 45. Both of these images are displayed as first area images 351a and 380.
  • the first region image 351a displayed in front of the escalator 47 is a first region image for switching to the second image 312b shown in FIG.
  • the first region image 381 displayed on the right side of the back of the corridor 45 is used for switching to a photographed image by a camera set ahead.
  • first region 350a and the second region 350b shown in FIG. 9C are set as a common region.
  • the first region image 351a is changed, and switching to the second image 312b is started.
  • FIGS. 16A and 16B a moving image in which the first region image 351a is emphasized is displayed.
  • the other first region image 381 may be displayed as it is without changing.
  • the first moving image 360 that moves reflecting the positional relationship between the first and second imaging spaces is displayed.
  • the second image 312b is an image of the entire large square 48 that spreads under the escalator 47. That is, it is an image taken with a large shooting space as a shooting target. Accordingly, the second area 350b set as the common area is a small area in the second image 312b.
  • the first moving image 360 a moving image is generated that moves to the position of the second region 350b while the first region image 351a is rotated and moved and the size thereof is reduced.
  • the image of the region 356 other than the second region image 351b is gradually displayed.
  • the second image 312b in which the entire square 48 is displayed is displayed.
  • FIGS. 19C and 20A when the person 3 moves away from the second area 350b by a predetermined distance or more, the display of the second area image 351b is canceled.
  • the description will be continued with the second image 312b shown in FIG. 20A as the first image 412a.
  • the person 3 gets on the escalator 47 and goes down to the square 48.
  • a plurality of first area images 451a and 481 are displayed.
  • the square 48 can travel in a plurality of directions, and a camera is set in each traveling direction.
  • a plurality of first area images 451a and 481 are displayed for switching between images taken by these cameras.
  • the first region image 451a in which the person 3 is closer than a predetermined distance among the five first region images 451a and 481 is changed, and the image switching process is started.
  • FIG. 22 is a flowchart showing an example of processing for generating a switching video according to the present embodiment. Here, generation of a first moving image that is a switching moving image from the first image to the second image will be described.
  • First and second images are input (step 101). It is determined whether or not a common area photographed in common for each of the first and second images is set (step 102). If there is a common area setting (Yes), the common area is set as the first and second areas, respectively (step 103). If there is no common area setting (No), predetermined areas are set as the first and second areas based on the positional relationship between the first and second imaging spaces (step 104). ).
  • the determination of the presence / absence of the common area and the setting of the first and second areas are typically executed as calibration processing when the surveillance camera system 100 is installed. That is, the user, the provider of the monitoring camera system 100, etc. execute the setting of the first and second areas based on the shooting space of each camera. However, the first and second areas may be automatically set based on information on the camera installation position, information on various shooting settings of the camera, and the like.
  • a first moving image is generated based on the set first and second areas.
  • a first moving image is generated as a moving image in which the first region image moves to the position of the second region. If the first and second areas are not set as a common area, a moving image in which the first area image moves reflecting the positional relationship between the first and second shooting spaces is the first moving image. It is generated appropriately.
  • FIG. 23 is a schematic diagram illustrating an arrangement example of cameras when a common area is not set for each of the first and second images.
  • the first shooting space 511a of the first camera 510a is assumed to be the same as the first shooting space 11a of the first camera 10a shown in FIG.
  • the second imaging space 511b of the second camera 510b disposed in the interior 42 of the building 40 is set to a space that does not include the entrance 43. It is also conceivable to set a portion 49 adjacent to the entrance 43 at the right end portion of the second image 512b as a common region. However, since there is a difference between the exterior 41 and the interior 42 of the building 40, it is assumed that the portion is not set as a common area.
  • the first and second moving images are shown.
  • the first region of the first image 512a is set similarly to the first region 50a shown in FIG.
  • a moving image similar to the first moving image 60 shown in FIGS. 3B to 6A is displayed.
  • a moving image in which the first region image 551a moves to the left side of the screen 15 toward the position of the entrance 43 is displayed. That is, a moving image in which the first region image 551a moves to the outside of the screen 15 toward the position of the entrance 43 in the second image 512b is displayed.
  • This moving image is generated and displayed as the first moving image 560.
  • switching to the second image 512b is completed.
  • a second region 550a is set in the left region of the second image 512b.
  • a moving image substantially similar to the second moving image 65 shown in FIGS. 6A to 4C is displayed.
  • a moving image in which the second region image 551b moves toward the upper right side of the screen 15 toward the inside 42 of the building 40 is displayed. That is, a moving image in which the second region image 551b moves to the outside of the screen 15 is displayed toward the position of the second region 550b in the first image 512a.
  • This moving image is generated and displayed as the second moving image 565. Then, switching to the first image 512a is completed.
  • the first and second moving images 560 and 565 in which the first and second area images 551a and 552b move to the outside of the screen 15 may be generated, respectively. This makes it possible to generate a switching video that reflects the positional relevance of the shooting space.
  • the first image in the first imaging space and the second image in the second imaging space are input to the server device 20.
  • a switching moving image reflecting the positional relationship between the first and second imaging spaces is output.
  • the spatial relationship can be easily understood when switching between the first and second images.
  • a useful surveillance camera system 100 can be realized.
  • the first and second area images are automatically displayed according to the movement of the tracking target object 4.
  • the first and second images are automatically switched according to the movement of the tracking target object 4. This makes it possible to track the tracking target object 4 efficiently. In addition, it is possible to prevent the tracking target object 4 from being lost when switching images. As a result, a useful surveillance camera system 100 can be realized.
  • FIG. 27 is a schematic block diagram illustrating a configuration example of such a computer.
  • the computer 600 includes a CPU (Central Processing Unit) 601, a ROM (Read Only Memory) 602, a RAM (Random Access Memory) 603, an input / output interface 605, and a bus 604 that connects these components to each other.
  • a CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • a display unit 606, an input unit 607, a storage unit 608, a communication unit 609, a drive unit 610, and the like are connected to the input / output interface 605.
  • the display unit 606 is a display device using, for example, liquid crystal, EL (Electro-Luminescence), CRT (Cathode Ray Tube), or the like.
  • the input unit 607 is, for example, a controller, a pointing device, a keyboard, a touch panel, and other operation devices.
  • the input unit 607 includes a touch panel, the touch panel can be integrated with the display unit 606.
  • the storage unit 608 is a non-volatile storage device, such as an HDD (Hard Disk Drive), a flash memory, or other solid-state memory.
  • HDD Hard Disk Drive
  • flash memory or other solid-state memory.
  • the drive unit 610 is a device capable of driving a removable recording medium 611 such as an optical recording medium, a floppy (registered trademark) disk, a magnetic recording tape, and a flash memory.
  • the storage unit 608 is often used as a device mounted in advance in the computer 600 that mainly drives a non-removable recording medium.
  • the communication unit 609 is a modem, router, or other communication device that can be connected to a LAN, a WAN (Wide Area Network), or the like to communicate with other devices.
  • the communication unit 609 may communicate using either wired or wireless communication.
  • the communication unit 609 is often used separately from the computer 600.
  • Information processing by the computer 600 having the hardware configuration as described above is realized by cooperation between software stored in the storage unit 608 or the ROM 602 and the hardware resources of the computer 600. Specifically, it is realized by the CPU 601 loading a program constituting the software stored in the storage unit 608 or the ROM 602 to the RAM 603 and executing it. For example, each block shown in FIG. 2 is realized by the CPU 601 executing a predetermined program.
  • the program is installed in the computer 600 via a recording medium, for example.
  • the program may be installed in the computer 600 via a global network or the like.
  • the program executed by the computer 600 may be a program that is processed in time series in the order described above, or is processed in parallel or at a necessary timing such as when a call is made. May be a program in which
  • FIG. 28 and FIG. 29 are schematic diagrams for explaining the first and second image switching processing as another embodiment.
  • the person 3 that is an object in the first image 712 a is set by the user 2 as the tracking target object 4.
  • the tracking target object 4 is set by a touch operation on the person 3 via the touch panel 18.
  • the first region image 751a is displayed according to the movement of the person 3.
  • the first region image 751a may be displayed by setting the tracking target object 4.
  • FIG. 28C when the person 3 approaches the first region image 751a, the first moving image 760 shown in FIG. 29 is displayed, and image switching is started.
  • a first moving image 760 that rotates so that the first region image 751a faces the front is generated and displayed.
  • the first moving image 760 is generated so that the first region image 751a is displayed on the entire screen.
  • the second image 412b as shown in FIG. 28D is displayed, and the image switching is completed.
  • the entire second image 712b is set as the second region 750b.
  • the first and second areas 750a and 750b are set as a common area. Therefore, as shown in FIG. 29, the first moving image 760 in which the first area image 751a moves to the position of the entire screen, which is the position of the second area 750b, is displayed. At the time of switching to the first image 712a, a second moving image in which the entire second image 712b moves to the position of the first region 750a is displayed as the second region image 751b. In this way, the entire captured image may be set as the first area or the second area.
  • an image in which the second image 712b is embedded is used as the first region image 751a.
  • the first region image may be generated using the switching destination image. This makes it easy to understand the spatial positional relationship between the first and second images.
  • the image switching may be executed according to a user instruction. For example, in response to an instruction to select a first region image displayed in the first image, the first moving image may be output and switching to the second image may be executed. Similarly, in response to an instruction to select the second region image displayed in the second image, the second moving image may be output and switching to the first image may be executed.
  • this operation for example, it is assumed that security is set for the door on the monitoring screen shown in FIG. Then, suppose that a suspicious person is found who hides behind the person who opens the door using a card or the like and illegally enters the building. In such a case, the supervisor (user) appropriately selects the first and second region images in the building in accordance with the movement of the suspicious person. When a touch panel or the like is used, the first and second region images are touched in accordance with the movement of the suspicious person. In response to the operation, the first and second moving images are displayed, and image switching is executed as appropriate. In this way, switching of images may be performed in accordance with an instruction such as a touch operation. Thereby, it becomes possible to track without losing sight of the suspicious person, and high-precision monitoring can be executed.
  • the display of the first and second moving images may be skipped in accordance with a user instruction. For example, a touch operation or the like is input to a predetermined or arbitrary region in the screen while the first and second moving images are displayed. Then, the display of the first and second moving images may be skipped and the switching destination image may be displayed. Thereby, the switching speed between images can be improved. For example, this is effective when a suspicious person or the like is moving at high speed.
  • the first region image is displayed in the first image when the tracking target object is closer than the predetermined distance.
  • the first region image may not be displayed in the first image.
  • the first region image may be displayed when the switching moving image is displayed after the switching is started. The same applies to the second region image.
  • a moving image different from the first and second moving images using the first and second region images may be generated as the switching moving image reflecting the positional relationship between the first and second shooting spaces.
  • a moving image expressing a relative positional relationship between images may be generated by appropriately rotating or moving an image in which only the ground is emphasized.
  • a case where panning / tilting operations, etc. are performed in the shooting space will be described.
  • a plurality of different first images are taken from one first camera.
  • a plurality of different second images are taken from one second camera.
  • the first and second areas are set for the first and second images shot with the reference shooting setting, respectively.
  • the shooting setting information such as pan / tilt settings
  • the first and second images taken with the other shooting settings The second area is set.
  • the first and second areas set in the first and second images serving as the reference may be set as they are for the first and second images shot with other shooting settings. Then, the same switching video may be displayed. Even in this way, the spatial positional relationship between the first and second images can be grasped.
  • the first and second areas may be set in advance in a plurality of shooting settings. Based on the information of the first and second areas in the plurality of shooting settings, the setting of the first and second areas in other shooting settings may be executed.
  • the client device and the server device are connected via a network, and the server device and a plurality of cameras are connected via a network.
  • a network may not be used to connect each device. That is, the connection method of each apparatus is not limited.
  • the client device and the server device are arranged as separate devices.
  • the client device and the server device may be configured integrally and used as an information processing device according to an embodiment of the present technology.
  • An information processing apparatus according to an embodiment of the present technology may be configured including a plurality of imaging apparatuses.
  • the image switching processing according to the present technology described above may be used for an information processing system other than the surveillance camera system.
  • this technique can also take the following structures.
  • (1) A first image captured by a first imaging device that targets the first imaging space and a second imaging that targets a second imaging space that is different from the first imaging space.
  • An input unit that inputs a second image that is photographed by the device and displayed in a mutually switched manner with the first image;
  • An information processing apparatus comprising: a control unit that outputs a switching moving image reflecting a positional relationship between the first and second imaging spaces when the first and second images are switched to each other.
  • (2) The information processing apparatus according to (1), The controller is A region corresponding to the positional relationship between the first and second imaging spaces is set as a first region in the first image and as a second region in the second image.
  • a setting section A first moving image in which the first region image representing the first region moves reflecting the positional relationship is generated as a switching moving image to the second image, and a second moving image representing the second region is generated.
  • a generation unit configured to generate a second moving image in which the two region images reflect the positional relationship as a moving image to be switched to the first image.
  • the setting unit sets a common area captured in common to each of the first and second images as the first area in the first image and the second area in the second image. Set each as an area, The generation unit generates a moving image in which the first region image moves to a position of the second region in the second image as the first moving image, and the second region image is the first image.
  • An information processing device that generates, as the second moving image, a moving image that moves to the position of the first region in the information processing apparatus.
  • the generation unit generates a moving image in which the first region image moves outside the screen as the first moving image, and a moving image in which the second region image moves outside the screen as the second moving image. Generate information processing device.
  • An information processing apparatus that outputs the second moving image when the distance to the image becomes smaller than a predetermined value.
  • the control unit outputs the first area image in the first image when a distance between the object to be tracked and the first area becomes smaller than a predetermined value, and the tracking target An information processing apparatus that outputs the second region image in the second image when the distance between the object and the second region becomes smaller than a predetermined value.
  • An instruction input unit for inputting an instruction from the user; The control unit outputs the first moving image in response to an instruction to select the first region image input through the instruction input unit, and the second input through the input unit. An information processing apparatus that outputs the second moving image in response to an instruction to select a region image.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

有用な監視カメラシステムを実現することが可能となる情報処理装置、情報処理方法、プログラム、及び情報処理システムを提供する。 本技術の一形態に係る情報処理装置は、入力部と、制御部とを具備する。前記入力部は、第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する。前記制御部は、前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する。

Description

情報処理装置、情報処理方法、プログラム、及び情報処理システム
 本技術は、例えば監視カメラシステム等に用いることが可能な情報処理装置、情報処理方法、プログラム、及び情報処理システムに関する。
 例えば特許文献1には、監視カメラシステムに適用可能な技術として、オブジェクトの追尾前又は追尾中において追尾対象を簡単かつ正確に指定するための技術が記載されている。この技術では、追尾対象となるオブジェクトが拡大表示されるとともに、他のオブジェクトが追尾対象候補として抽出される。ユーザは抽出された追尾対象候補の中から拡大表示したい対象(追尾対象)を選ぶという簡易な操作を行うだけで、所望の拡大表示画像(ズーム画像)を得ることが可能となる(特許文献1の明細書段落[0010][0097]等参照)。
特開2009-251940号公報
 特許文献1に記載のような有用な監視カメラシステムの実現を可能とするための技術が求められている。
 以上のような事情に鑑み、本技術の目的は、有用な監視カメラシステムを実現することが可能となる情報処理装置、情報処理方法、プログラム、及び情報処理システムを提供することにある。
 上記目的を達成するため、本技術の一形態に係る情報処理装置は、入力部と、制御部とを具備する。 
 前記入力部は、第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する。
 前記制御部は、前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する。
 この情報処理装置では、第1の撮影空間の第1の画像と、第2の撮影空間の第2の画像とが入力される。そして第1及び第2の画像が切り替えられるときに、第1及び第2の撮影空間の位置的な関連性を反映した切り替え動画が出力される。これにより第1及び第2の画像の切り替え時に空間的な関連性を容易に理解することができる。この技術を用いることで、有用な監視カメラシステムを実現することが可能となる。
 前記制御部は、設定部と、生成部とを有してもよい。
 前記設定部は、前記第1及び前記第2の撮影空間の前記位置的な関連性に応じた領域を前記第1の画像には第1の領域として、前記第2の画像には第2の領域としてそれぞれ設定する。
 前記生成部は、前記第1の領域を表わす第1の領域画像が前記位置的な関連性を反映して動く第1の動画を前記第2の画像への切り替え動画として生成し、前記第2の領域を表わす第2の領域画像が前記位置的な関連性を反映して動く第2の動画を前記第1の画像への切り替え動画として生成する。
 このように、第1の画像の所定の領域の画像が動く第1の動画が、第2の画像への切り替え動画として生成されてもよい。また第2の画像の所定の領域の画像が動く第2の動画が、第1の画像への切り替え動画として生成されてもよい。各領域画像は撮影空間の位置的な関連性を反映して動くので、第1及び第2の画像の切り替え時に空間的な関連性を容易に理解することができる。
 前記設定部は、前記第1及び前記第2の画像のそれぞれで共通して撮影された共通領域を、前記第1の画像では前記第1の領域として、前記第2の画像では前記第2の領域としてそれぞれ設定してもよい。この場合、前記生成部は、前記第1の領域画像が前記第2の画像における前記第2の領域の位置に動く動画を前記第1の動画として生成し、前記第2の領域画像が前記第1の画像における前記第1の領域の位置に動く動画を前記第2の動画として生成してもよい。
 これにより共通領域を基準として、第1及び第2の撮影空間の位置的な関連性を容易に理解することが可能となる。この結果、有用な監視カメラシステムを実現することが可能となる。
 前記生成部は、前記第1の領域画像が画面の外側に移動する動画を前記第1の動画として生成し、前記第2の領域画像が画面の外側に移動する動画を前記第2の動画として生成してもよい。
 例えば第1及び第2の画像において共通して撮影された共通領域が設定されない場合等において、第1及び第2の領域画像が画面の外側まで移動する第1及び第2の動画を適宜生成する。これにより撮影空間の位置的な関連性を理解することが可能な切り替え動画を生成することが可能となる。
 前記情報処理装置は、前記第1及び前記第2の画像において追跡対象のオブジェクトを追跡する追跡部をさらに具備してもよい。この場合、前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の動画を出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の動画を出力してもよい。
 この情報処理装置では、第1及び第2の画像において所定のオブジェクトを追跡対象として追跡することが可能である。そして追跡対象のオブジェクトが第1の領域に所定の距離よりも近づいたときに、第1の動画が出力され第2の画像へ切り替えられる。また追跡対象のオブジェクトが第2の領域に所定の距離よりも近づいたときに、第2の動画が出力され第1の画像へ切り替えられる。これにより追跡対象オブジェクトを効率的に追跡することが可能となり、有用な監視カメラシステムを実現することができる。
 前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の領域画像を前記第1の画像内に出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の領域画像を前記第2の画像内に出力してもよい。
 このように、追跡対象オブジェクトの動きに応じて、第1及び第2の画像内における第1及び第2の領域画像の表示が制御されてもよい。
 前記情報処理装置は、ユーザからの指示を入力する指示入力部をさらに具備してもよい。この場合、前記制御部は、前記指示入力部を介して入力された前記第1の領域画像を選択する指示に応じて前記第1の動画を出力し、前記入力部を介して入力された前記第2の領域画像を選択する指示に応じて前記第2の動画を出力してもよい。
 このように第1及び第2の領域画像の選択に応じて、第1及び第2の画像の切り替えが実行されてもよい。これにより有用な監視カメラシステムが実現される。
 本技術の一形態に係る情報処理方法は、コンピュータにより実行される情報処理方法であって、第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力することを含む。
 前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画が出力される。
 本技術の一形態に係るプログラムは、コンピュータに以下のステップを実行させる。
 第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力するステップ。
 前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力するステップ。
 本技術の一形態に係る情報処理システムは、第1の撮像装置と、第2の撮像装置と、情報処理装置とを具備する。
 前記第1撮像装置は、第1の撮影空間を撮影対象とする。
 前記第2の撮像装置は、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする。
 前記情報処理装置は、入力部と、制御部とを有する。
 前記入力部は、前記第1の撮像装置により撮影された第1の画像と、前記第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する。
 前記制御部は、前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する。
 以上のように、本技術によれば、有用な監視カメラシステムを実現することが可能となる。
本技術の一実施形態に係る情報処理装置を含む監視カメラシステムの構成例を示すブロック図である。 本実施形態に係るカメラの配置例を示す模式的な図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 本実施形態に係る画像切り替え及び切り替え動画の一例を示す図である。 第1及び第2の画像にそれぞれ共通領域が設定されていない場合の、カメラの配置例を示す模式的な図である。 図23に示す場合の画像切り替え及び切り替え動画の一例を示す図である。 図23に示す場合の画像切り替え及び切り替え動画の一例を示す図である。 図23に示す場合の画像切り替え及び切り替え動画の一例を示す図である。 クライアント装置及びサーバ装置として用いられるコンピュータの構成例を示す模式的なブロック図である。 他の実施形態としての第1及び第2の画像の切り替え処理を説明するための模式的な図である。 他の実施形態としての第1及び第2の画像の切り替え処理を説明するための模式的な図である。
 以下、本技術に係る実施形態を、図面を参照しながら説明する。
 [監視カメラシステム]
 図1は、本技術の一実施形態に係る情報処理装置を含む監視カメラシステムの構成例を示すブロック図である。
 監視カメラシステム100は、複数のカメラ10と、本実施形態に係る情報処理装置であるサーバ装置20と、クライアント装置30とを有する。複数のカメラ10及びサーバ装置20はネットワーク5を介して接続される。またサーバ装置20及びクライアント装置30もネットワーク5を介して接続される。
 ネットワーク5としては、例えばLAN(Local Area Network)やWAN(Wide Area Network)等が用いられる。ネットワーク5の種類やそれに用いられるプロトコル等は限定されない。図1に示す2つのネットワーク5が互いに同じものである必要はない。
 複数のカメラ10は、例えばデジタルビデオカメラ等の動画を撮影することが可能なカメラである。これらのカメラ10により、時間的に連続する複数のフレーム画像により構成される動画データが生成される。フレーム画像は、例えば30fps(frame per second)や60fpsのフレームレートで生成される。フィールド単位で動画データが生成されてもよい。各カメラ10は、本実施形態に係る撮像装置に相当する。
 以後、フレーム画像のような動画を構成する時間的に連続する画像を、単に画像と記載する。またカメラ10が動画と静止画を両方撮影可能な場合、「画像」とは動画を構成する画像と、静止画として生成された画像の両方を含むものとする。従ってカメラ10により撮影された画像とは、動画と静止画の両方を含むものとする。
 クライアント装置30は、通信部31及びGUI部32を有する。通信部31は、ネットワーク6を介したサーバ装置20との通信に用いられる。GUI部32は、動画、種々の操作のためのGUI(Graphical User Interface)、及びその他の情報等を表示する。例えばサーバ装置20からネットワーク6を介して送信された動画等が通信部31により受信される。当該動画等はGUI部32に出力され、所定のGUIにより図示しない表示部に表示される。
 また表示部に表示されたGUI等を介して、ユーザからの操作がGUI部32に入力される。GUI部32は、入力された操作をもとに指示情報を生成して通信部31に出力する。通信部31により指示情報がネットワーク6を介してサーバ装置20に送信される。なお入力された操作をもとに指示情報を生成して出力するブロックが、GUI部32とは別に設けられてもよい。
 クライアント装置30としては、例えばPC(Personal Computer)や、タブレット等の携帯端末が用いられる。これらに限定される訳ではない。
 サーバ装置20は、カメラ管理部21と、これに接続されたカメラ制御部22及び画像解析部23とを有する。またサーバ装置20は、切り替え制御部24と、警報管理部25と、種々のデータを記憶する記憶部608とを有する。またサーバ装置20は、クライアント装置30との通信に用いられる通信部27を有する。通信部27には、カメラ制御部22、画像解析部23、切り替え制御部24、及び警報管理部25が接続される。
 通信部27は、接続された各ブロックからの動画や種々の情報を、ネットワーク6を介してクライアント装置30へ送信する。またクライアント装置30から送信された指示情報を受信し、サーバ装置20の各ブロックに出力する。例えばサーバ装置20の動作を制御する図示しない制御ユニット等を介して各ブロックに指示情報が出力されてもよい。通信部27は、本実施形態において、指示入力部として機能する。
 カメラ管理部21は、カメラ制御部22からの制御信号を、ネットワーク5を介して、複数のカメラ10に送信する。これによりカメラ10の種々の動作が制御される。例えばカメラのパン・チルト動作、ズーム動作、フォーカス動作等が制御される。
 またカメラ管理部21は、複数のカメラ10からネットワーク5を介して送信される動画を受信する。そして当該動画を画像解析部23へ出力する。必要であればノイズ処理等の前処理が実行されてもよい。カメラ管理部21は、本実施形態において、入力部として機能する。
 画像解析部23は、各カメラ10からの動画を画像(フレーム画像)ごとに解析する。例えば画像に写っているオブジェクトの種類や数、オブジェクトの動き等が解析される。本実施形態では、画像解析部23により、画像内のオブジェクトがそれぞれ抽出される。そして所定のオブジェクトが追跡対象として設定された場合、当該追跡対象のオブジェクトの追跡が実行される。具体的には、追跡対象オブジェクトの位置を表わす位置情報が、連続する画像ごとに算出される。オブジェクトの抽出及び追跡に用いられる技術は限定されず、周知の技術が用いられてよい。また、その他の画像解析が適宜実行されてもよい。本実施形態では、画像解析部23は追跡部として機能する。
 警報管理部25は、画像内のオブジェクトに対する警報表示を管理する。例えばユーザからの指示や画像解析部23による解析結果をもとに、所定のオブジェクトが不審者や不審物として検出される。検出された不審者等は警報表示(アラーム表示)される。この際、警報表示の種類や警報表示の実行のタイミング等が管理される。
 切り替え制御部24は、複数のカメラ10で撮影された画像を相互に切り替えるための処理を実行する。例えばユーザからの指示により、所定のカメラ10の画像から他のカメラ10の画像に切り替えてクライアント装置30に送信する。自動的に画像の切り替えが実行されてもよい。
 本実施形態では切り替え制御部24により、画像の切り替え時において、各カメラ10の撮影対象となる撮影空間の位置的な関連性を反映した切り替え動画が出力される。画像の切り替え及び切り替え動画の出力は、画像解析部23から出力される動画や解析結果、記憶部608に記憶されたメタ情報データや過去の動画等のビデオデータをもとに実行される。
 切り替え制御部24は、本実施形態において、制御部、当該制御部が有する設定部及び生成部として機能する。以下、この切り替え制御部による画像切り替えについて詳しく説明する。
 図2は、本実施形態に係る画像切り替えについて説明するための、カメラ10の配置例を示す模式的な図である。例えば図2に示すように、建物40の外部41に第1の撮像装置としての第1のカメラ10aが設定される。また建物40の内部42には第2の撮像装置としての第2のカメラ10bが設定される。
 第1及び第2のカメラ10a及び10bは、それぞれ第1及び第2の撮影空間11a及び11bを撮影対象として設置される。ここで撮影空間11とは、カメラ10で撮影可能な空間であり、パン・チルト動作等の動作範囲により撮影空間11の範囲は変わる。パン・チルト動作により大きな範囲を撮影可能なカメラ10であれば、その撮影空間11も大きな範囲となる。撮影空間11の中でパン・チルト動作やズーム動作が適宜設定され、画像が撮影される。従って撮影画像12は、撮影空間11の全体又は一部が撮影された画像となる。
 第1の撮影空間11aは、建物40の入り口43を含む空間である。従って図1に示すように、第1のカメラ10aに撮影された第1の画像12aとして、入り口43と建物40の外壁44とを含む画像が撮影される。この第1の撮影空間11aにオブジェクトとして人3が通行等する場合、当該人3も第1の画像12aに撮影される。第1の画像12aが時間的に連続する動画の中では、この人3の通行等の動きが撮影される。
 第2の撮影空間11bも、建物40の入り口43を含む空間である。従って図1に示すように、第2のカメラ10bに撮影された第2の画像12bとして、入り口43と建物40の内部42の廊下45とを含む画像が撮影される。第2の撮影空間11bを人3が通行等する場合には当該人3が第2の画像12bに撮影される。第2の画像12bが時間的に連続する動画の中では、この人3の通行等の動きが撮影される。
 本実施形態では、画像切り替えの説明を分りやすくするために、第1及び第2のカメラ10a及び10bのパン・チルト動作の設定やズーム動作の設定等は固定とする。すなわち第1のカメラ10aでは、図2に示す第1の撮影空間11a全体を表わす第1の画像12aが固定で撮影される。また第2のカメラ10bでは、図2に示す第2の撮影空間11b全体を表わす第2の画像12bが固定で撮影される。
 監視カメラシステム100では、第1及び第2の画像12a及び12bは、相互に切り替えて表示される。この第1及び第2の画像12a及び12bが切り替えられるときに、第1及び第2の撮影空間11a及び11bの位置的な関連性を反映した切り替え動画が出力される。従ってクライアント装置30では、表示部に切り替え動画が表示されてから第1及び第2の画像12a及び12bが相互に切り替えられる。
 位置的な関連性は、撮影空間11の位置やカメラ10の撮影方向等により定められる。典型的には、第1の撮影空間11aに対する第2の撮影空間11bの位置、及び第2の撮影空間11bに対する第1の撮影空間11aの位置が、第1及び第2の撮影空間11a及び11bの位置的な関連性となる。すなわち第1及び第2の撮影空間11a及び11bの相対的な位置関係が、位置的な関連性として挙げられる。
 また第1及び第2の画像12a及び12bにそれぞれ共通して撮影された領域があるか否かも、位置的な関連性として挙げられる。例えば第1及び第2の撮影空間11a及び11bが、同一のオブジェクトを異なる方向から撮影するように設定されるとする。その場合、当該オブジェクトを含む所定の領域が共通して撮影されることになる。本実施形態では、この領域をもとにして切り替え動画を生成することも可能である。以後、共通して撮影された領域を共通領域として記載する。
 図2に示す第1及び第2の画像12a及び12bは、サーバ装置20により適宜画像処理が実行されて、クライアント装置30に出力された画像である。上記したように本実施形態では、第1及び第2の画像12a及び12bに写っているオブジェクトに対して追跡処理を実行することが可能である。図2に示す例では、人3が追跡対象のオブジェクト4として設定され、当該人3の動きが追跡されている。第1及び第2の画像12a及び12bでは、人3が追跡対象オブジェクト4として設定されていることを示すマーク7が表示されている。
 図3-図21は、本実施形態に係る画像切り替えを説明するための図であり、切り替え動画の一例を示す図である。図3から図22に示す画像がサーバ装置20の切り替え制御部24により生成され、クライアント装置30に送信される。以下の説明では、画像や動画が表示されるという表現を用いることがあるが、それはサーバ装置20から見れば当該画像や動画が生成して出力するという意味である。
 図3(A)に示すように建物40の入り口43に向かって人3が移動する。図3(B)に示すように、人3が入り口43に近づくと、入り口43の位置に相当する領域50aの画像51aが第1の画像12a内に出力される。以下、領域50aを表わす画像51aに対して、領域50aの符号も添えて説明する。
 この領域50aについて説明する。本実施形態では、第1及び第2の撮影空間11a及び11bの位置的な関連性に応じた領域が、第1の画像12aには第1の領域として、第2の画像12bには第2の領域として設定される。そして第1の領域を表わす第1の領域画像が位置的な関連性を反映して動く第1の動画が、第2の画像への切り替え動画として生成される。また第2の領域を表わす第2の領域画像が位置的な関連性を反映して動く第2の動画が、第1の画像への切り替え動画として生成される。
 本実施形態では、第1及び第2の画像12a及び12bのそれぞれに、入り口43が撮影される。従って入り口43は、共通領域52として撮影される領域となる。本実施形態では、この共通領域52である入り口43を含む領域50aが第1の領域として設定される(以下、第1の領域50aと記載する)。第2の画像12bでは、図7(A)に示すように、入り口43を含む領域50bが共通領域52となり、この領域50bが第2の領域として設定される(以下、第2の領域50bと記載する)。
 第1及び第2の領域50a及び50bは、典型的には矩形状を有し、4つの頂点の座標情報が用いられて設定される。しかしながら第1及び第2の領域50a及び50bの形状は限定されず、円形状や多角形状等の領域が設定されてもよい。また第1及び第2の領域50a及び50bを表わすデータも限定されない。例えば共通して撮影されたオブジェクトの形状に沿った領域が、第1及び第2の領域50a及び50bとして設定されてよい。この場合、当該オブジェクトの外形の情報と位置情報とが用いられて、第1及び第2の領域50a及び50bが設定される。
 図3(B)に示す領域50aの画像51aは、第1の領域50aの画像51aということになる(以下、第1の領域画像51aと記載する)。追跡対象オブジェクト4である人3と第1の領域50aとの距離が所定の値よりも小さくなったときに第1の領域画像51aが第1の画像12a内に出力される。これにより画像が切り替えられる際に基準となる領域(第1の領域50a)の位置を把握することが可能となる。また画像が切り替えられるポイントとなる切り替えポイントの位置を把握することが可能となる。所定の値として設定される閾値は適宜設定されてよい。
 図7(A)に示す第2の画像12bにおいても、人3と第2の領域50bとの距離が所定の値よりも小さくなったときに第2の領域画像51bが第2の画像12b内に出力される。これにより第2の領域画像51bを基準として画像の切り替えが実行されることを把握することができる。なお第1及び第2の領域画像51a及び51bとしては、領域全体を現す半透明な画像であってもよいし、領域の縁部を現す枠状の画像であってもよい。その他の画像が第1及び第2の領域画像51a及び51bとして表示されてもよい。
 図3(C)に示すように、さらに人3が第1の領域50aに近づき、第1の領域50aとほぼ重なると、画像の切り替えが開始される。すなわち本実施形態では、追跡対象オブジェクト4である人3と第1の領域50aとの距離が所定の値よりも小さくなったときに第1の動画が出力され第2の画像12bへの切り替え処理が実行される。また人3と第2の領域50bとの距離が所定の値よりも小さくなったときに第2の動画が出力され第1の画像12aへの切り替え処理が実行される。ここで所定の値として設定される閾値も適宜設定されてよい。
 図3(C)に示すように、切り替え処理が開始される際には、第1の領域画像51aが変化する。例えば第1の領域画像51aの色や形状等が変化する。これによりユーザは、画像の切り替えが開始されることを把握することができる。同様に第2の領域画像51bも人3が近づいて画像の切り替えが開始されるタイミングで変化する。
 第1の動画60としては、まず図4(A)及び(B)に示すように、第1の領域画像51aが強調される動画が表示される。例えば第1の領域画像51a以外の領域55が徐々に暗くなるような動画が表示される。第1の領域画像51a以外の領域55が白やグレー等の他の色で表わされてもよい。あるいは、第1の領域画像51a以外の領域55が半透明で表示されてもよい。一方、第1の領域画像51aの色等がさらに変化して表示が強調されてもよい。
 図4(C)、図5(A)-(C)、及び図6(A)及び(B)にかけて、第1の領域画像51aが、第1及び第2の撮影空間11a及び11bの位置的な関連性を反映して動く第1の動画60が表示される。図2に示すように、第1及び第2の撮影空間11a及び11bは、それぞれの撮影方向が略180度で反対向きである。すなわち第1及び第2の画像12a及び12bは、入り口43をそれぞれ略反対方向から撮影した2つの画像となる。
 従って図4(C)から図6(A)までに示すように、第1の領域画像51aが略半回転する動画が第1の動画60として生成されて表示される。これによりユーザの視点を略180度反対向きに誘導させることができる。そしてユーザの視点が、あたかも第1のカメラ10aの設置位置から第2のカメラ10bの設置位置まで移動したかのような感覚を生じさせることができる。この結果、第1及び第2の画像12a及び12b間の空間的な位置関係を容易に理解することが可能となる。
 第1及び第2の撮影空間11a及び11bの位置的な関連性を反映した動画であれば、どのような動画が第1の動画60として生成されてもよい。例えば図6等に示す第1の動画60において、移動中の第1の領域画像51aの形状や大きさ、回転及び移動の速度等は適宜設定可能である。また図中には回転を説明するための矢印が図示されているが、このような矢印が実際に第1の動画60内に表示されてもよい。その他、方位を示すようなコンパスが表示されそのコンパスの回転等により、第1の領域画像51a回転や移動等が表現されてもよい。あるいは回転中といったテキストが表示されてもよい。
 また本実施形態では、図6(B)に示すように、第1の領域画像51aが、第2の画像12bにおける第2の領域50bの位置に動く第1の動画60が生成される。上記したように、第1及び第2の領域50a及び50bは、第1及び第2の画像12a及び12bのそれぞれで共通して撮影された共通領域52である。従って第1及び第2の領域50a及び50bは互いに対応する領域であり、第1の画像12aにおける第1の領域50aは第2の画像12bにおける第2の領域50bに相当する。
 第1の動画60として、第1の領域画像51aが、撮影空間の位置的な関連性を反映した動きをしながら、第2の領域50bの位置まで移動する動画が生成される。これにより共通領域52を基準として、第1及び第2の画像12a及び12bの空間的な位置関係を容易に把握することができる。この結果、第1及び第2の撮影空間11a及び11bの位置的な関連性を容易に理解することが可能となる。なお第2の領域50bの位置まで移動した第1の領域画像51aを、第2の領域画像51bとして説明する場合がある。
 第2の画像12bから第1の画像12aへの切り替え時には、第2の領域画像51bが撮影空間の位置的な関連性を反映して動く第2の動画65が生成されて表示される。図6(B)から図4(B)までの、第1の動画60を逆に進行させるような動画が第2の動画65として生成される。また第2の領域画像51bが第1の画像12aにおける第1の領域50aの位置に動く動画が第2の動画65として生成される。これにより、第1及び第2の撮影空間11a及び11bの位置的な関連性を容易に理解することが可能となる。なお第1及び第2の動画60及び65を生成するための技術としては、動画を生成するための任意の技術が用いられてよい。
 図6(C)から図7(A)にかけて、第2の領域画像51b以外の領域56が徐々に表示される。これにより第1の動画60の表示が終了し、第2の画像12bへ切り替えが終了する。なお図7(A)では、切り替えられた第2の画像12b内に、第2の領域画像51bが表示されている。これにより第1の画像12aから切り替えられて表示されたことを把握することが可能となる。
 図7(B)に示すように、第2の領域画像51bは、人3が第2の領域50bから離れると表示が解除される。例えば第2の領域50bが表示される閾値として設定された距離よりも離れたときに表示が解除される。その他、人3の動きが検出されたときに第2の領域画像51bの表示が解除されてもよい。
 続いて図7(B)に示す第2の画像12bと図10(C)に示す画像との切り替えを説明する。そのために図7(B)に示す第2の画像12bを、改めて第1の画像112aと記載する。そして図10(C)に示す画像を第2の画像112bと記載する。
 図7(C)に示すように、人3が建物40内の廊下45を進む。第1の画像112aでは、廊下45の途中の領域が第1の領域150aとして設定されている。従って、人3が廊下45を進み第1の領域150aに近づくと、第1の領域画像151aが第1の画像112a内に出力される。
 従って第1の画像112aを基準として見ると、第1の画像112aには、図3(A)に示す画像(第1の画像12a)への切り替えのための第1の領域(第2の領域50b)が設定される。また図10(C)に示す第2の画像112bへの切り替えのための第1の領域150aが設定される。すなわち第1の画像112aには2つの第1の領域が設定されることになる。1つの画像に対して、その画像から他の画像へと切り替えられる切り替えポイントの数と同じ数だけ第1の領域が設定される。言い換えれば相互に切り替えられる2つの画像の組に対して、第1及び第2の領域がそれぞれ設定される。
 図7(C)に示す第1の領域150aは、第2の画像112aにおいても共通して撮影される共通領域152である。従って図10(C)に示すように、第2の画像112bにおいて、第1の領域150aに対応する領域が第2の領域150bとして設定される。
 図8(A)に示すように、人3がさらに第1の領域150aに近づくと、第1の領域画像151aが変化して、第1の画像112aから第2の画像112bへの切り替えが開始される。図8(B)及び(C)に示すように、第1の領域画像151aが強調される動画が表示される。そして図10(A)にかけて、第1の領域画像151aが第1及び第2の撮影空間の位置的な関連性を反映して動く第1の動画160が表示される。
 図10(C)に示すように、第2の画像112bは、建物40の廊下45を正面から入り口43へ向かう方向に撮影した画像である。従って第1の領域画像151aが、少し回転して正面を向く動画が第1の動画160として生成されて表示される。また第1の領域画像151aが、第1及び第2の撮影空間の位置的な関連性を反映した動きをしながら、第2の画像112bにおける第2の領域150bの位置まで移動する動画が生成される。
 図10(C)にかけて、第2の領域画像151b以外の領域156が徐々に表示される。これにより第1の動画160の表示が終了し、第2の画像112bへ切り替えが終了する。第1の動画160が生成されて表示されることで、第1及び第2の画像112a及び112b間の空間的な位置関係を容易に理解することが可能となる。図11(A)に示すように、第2の領域画像151bは、人3が第2の領域150bから離れると表示が解除される。
 第2の画像112bから第2の画像112aへの切り替え時には、第1の動画160を逆に進行させるような第2の動画が生成される。
 続いて、図11(A)に示す第2の画像112bを第1の画像212aとして、この第1の画像212aと図14(C)に示す第2の画像212bとの切り替えを説明する。
 図11(B)に示すように、人3が廊下45を進む。第1の画像212aでは、廊下45を進む人3にとって右側(図で見て左側)に廊下45が曲がって延びている。その廊下45の曲がり角の部分46に第1の領域250aが設定される。その第1の領域250aに人3が近づくと第1の領域画像251aが表示される。第1の領域250aと、図14(C)に示す第2の領域250bは、共通領域である。
 図12(A)に示すように、人3がさらに第1の領域250aに近づくと、第1の領域画像251aが変化して、第2の画像212bへの切り替えが開始される。図12(B)及び(C)に示すように、第1の領域画像251aが強調される動画が表示される。図11(C)や図12の各図では、第1の領域画像251aが画面15の外側にかけて図示されている。これは第2の画像212bの第2の領域250bと対応する領域を表わしたものである。実際には画面15内の部分が第1の領域画像251aとして表示される。
 図14(A)にかけて、第1及び第2の撮影空間の位置的な関連性を反映して動く第1の動画260が表示される。図13(A)に示すように、第1の領域画像251aが移動するにつれて、上記した第2の領域250bに対応する領域全体が第1の領域画像251aとして表示される。第1の領域画像251aは、移動及び回転をしながら、共通領域である第2の領域250bの位置まで動く。
 図14(B)に示すように、第2の領域画像251b以外の領域256が徐々に表示される。これにより廊下45の曲がり角の部分46から先に広がる空間を撮影空間とする第2の画像212bが表示される。図15(A)に示すように、第2の領域画像251bは、人3が第2の領域250bから離れると表示が解除される。
 続いて、図15(A)に示す第2の画像212bを第1の画像312aとして、この第1の画像312aと図19(B)に示す第2の画像312bとの切り替えを説明する。
 図15(B)に示すように、人3が廊下45の奥の左側にあるエスカレータ47に向かって進む。そうすると2つの第1の領域画像351a及び381が表示される。すなわち第1の画像312aには、エスカレータ47の手前の領域と、廊下45の奥の右側に続く領域の2つの領域が、第1の領域350a及び380として設定されている。それらの画像がともに第1の領域画像351a及び380として表示される。
 エスカレータ47の手前に表示される第1の領域画像351aは、図19(B)に示す第2の画像312bへの切り替えのための第1の領域画像である。廊下45の奥の右側に表示される第1の領域画像381は、その先に設定されたカメラによる撮影画像との切り替えのために用いられる。2つの第1の領域画像351a及び381が表示されることで、ユーザは、画像の切り替えポイントの数や位置を把握することが可能となる。
 なお第1の領域350aと図9(C)に示す第2の領域350bとは、共通領域として設定されている。
 図15(C)に示すように、人3がさらに第1の領域350aに近づくと、第1の領域画像351aが変化して、第2の画像312bへの切り替えが開始される。図16(A)及び(B)に示すように、第1の領域画像351aが強調される動画が表示される。この際に、もう1つの第1の領域画像381が、変化はせずにそのまま表示されてもよい。
 図18(C)にかけて、第1及び第2の撮影空間の位置的な関連性を反映して動く第1の動画360が表示される。図19(B)に示すように、第2の画像312bは、エスカレータ47の下に広がる大きな広場48の全体が撮影された画像である。すなわち大きな撮影空間を撮影対象として撮影された画像である。従って、共通領域として設定された第2の領域350bは、第2の画像312bにおいては小さい領域となっている。
 従って第1の動画360として、第1の領域画像351aが回転及び移動しつつ、その大きさも小さくなりながら、第2の領域350bの位置まで移動する動画が生成される。図19(B)にかけて、第2の領域画像351b以外の領域356の画像が徐々に表示される。これにより広場48の全体が表示された第2の画像312bが表示される。図19(C)及び図20(A)に示すように、第2の領域350bから人3が所定の距離以上離れると、第2の領域画像351bの表示が解除される。
 図20(A)に示す第2の画像312bを第1の画像412aとして説明を続ける。図20(B)に示すように、人3がエスカレータ47に乗って広場48に降りていく。そうすると複数の第1の領域画像451a及び481が表示される。広場48からは複数の方向に進行可能であり、それぞれの進行方向においてカメラが設定されている。それらのカメラで撮影された画像との切り替えのために複数の第1の領域画像451a及び481が表示される。
 図20(B)では、人3がエスカレータ47の略中央の位置にきたときに、広場48に設定された5つの第1の領域画像451a及び481が表示されている。すなわち人3との距離が比較的大きい段階で、第1の領域画像451a及び481が5つとも表示される。これによりユーザは、広場48全体を撮影した第1の画像412aにおいて、切り替えポイントの数と位置とを早い段階で理解することが可能となる。
 図21(B)にかけて、5つの第1の領域画像451a及び481のうち人3が所定の距離よりも近づいた第1の領域画像451aが変化して、画像の切り替え処理が開始される。
 図22は、本実施形態に係る切り替え動画を生成するための処理の一例を示すフローチャートである。ここでは、第1の画像から第2の画像への切り替え動画である第1の動画の生成について説明する。
 第1及び第2の画像が入力される(ステップ101)。第1及び第2の画像のそれぞれに共通して撮影された共通領域が設定されているか否かが判定される(ステップ102)。共通領域の設定がある場合は(Yes)、当該共通領域が第1及び第2の領域としてそれぞれ設定される(ステップ103)。共通領域の設定がない場合は(No)、第1及び第2の撮影空間の位置的な関連性をもとに、所定の領域が第1及び第2の領域としてそれぞれ設定される(ステップ104)。
 共通領域の有無の判定及び第1及び第2の領域の設定は、典型的には、監視カメラシステム100が設置された際にキャリブレーション処理として実行される。すなわちユーザや監視カメラシステム100の提供者等が、各カメラの撮影空間をもとに第1及び第2の領域の設定等を実行する。しかしながらカメラの設置位置の情報や、カメラの種々の撮影設定の情報等をもとに、自動的に第1及び第2の領域の設定が実行されてもよい。
 設定された第1及び第2の領域をもとに、第1の動画が生成される。第1及び第2の領域が共通領域として設定されている場合、第1の領域画像が第2の領域の位置に移動する動画が第1の動画が生成される。第1及び第2の領域が共通領域として設定されていない場合は、第1及び第2の撮影空間の位置的な関連性を反映して第1の領域画像が動く動画が第1の動画として適宜生成される。
 図23は、第1及び第2の画像にそれぞれ共通領域が設定されていない場合の、カメラの配置例を示す模式的な図である。第1のカメラ510aの第1の撮影空間511aは、図2に示す第1のカメラ10aの第1の撮影空間11aと同じであるとする。建物40内部42に配置される第2のカメラ510bの第2の撮影空間511bは、入り口43を含まない空間に設定されている。なお第2の画像512bの右端の部分の入り口43に隣接するする部分49を共通領域として設定することも考えられる。しかしながら建物40の外部41と内部42との違いがあるので、その部分は共通領域として設定されないとする。
 このような場合について、第1及び第2の動画の例を示す。まず第1の画像512aの第1の領域としては、図3(B)に示す第1の領域50aと同様に設定する。そして図3(B)から図6(A)に示す第1の動画60と同様な動画が表示される。続いて、図24に(A)-(C)示すように、第1の領域画像551aが、入り口43の位置に向かって画面15の左側へ移動する動画が表示される。すなわち第1の領域画像551aが、第2の画像512bにおける入り口43の位置に向けて、画面15の外側に移動する動画が表示される。この動画が第1の動画560として生成されて表示される。そして第2の画像512bへの切り替えが完了する。
 第2の画像512bでは、例えば図25(A)及び(B)に示すように、第2の画像512bの左側の領域に第2の領域550aが設定される。そして図6(A)から図4(C)に示す第2の動画65と略同様な動画が表示される。続いて、図25(C)から図26(B)に示すように、第2の領域画像551bが、建物40の内部42に向かって画面15の右上側へ移動する動画が表示される。すなわち第2の領域画像551bが、第1の画像512aにおける第2の領域550bの位置に向けて、画面15の外側に移動する動画が表示される。この動画が第2の動画565として生成されて表示される。そして第1の画像512aへの切り替えが完了する。
 このように共通領域が設定されない場合等に、第1及び第2の領域画像551a及び552bが画面15の外側に移動する第1及び第2の動画560及び565がそれぞれ生成されてもよい。これにより撮影空間の位置的な関連性を反映した切り替え動画を生成することが可能となる。
 以上、本実施形態に係る監視カメラシステム100では、サーバ装置20に、第1の撮影空間の第1の画像と、第2の撮影空間の第2の画像とが入力される。そして第1及び第2の画像が切り替えられるときに、第1及び第2の撮影空間の位置的な関連性を反映した切り替え動画が出力される。これにより第1及び第2の画像の切り替え時に空間的な関連性を容易に理解することができる。この結果、有用な監視カメラシステム100を実現することが可能となる。
 また本実施形態の監視カメラシステム100では、追跡対象オブジェクト4の動きに応じて、自動的に第1及び第2の領域画像が表示される。また追跡対象オブジェクト4の動きに応じて、自動的に第1及び第2の画像の切り替えが実行される。これにより追跡対象オブジェクト4を効率的に追跡することが可能となる。また画像の切り替え時に追跡対象オブジェクト4を見失ってしまうことを防止すことができる。この結果、有用な監視カメラシステム100を実現することが可能となる。
 複数のカメラ10により撮影された複数の画像が頻繁に切り替えられる場合には、ユーザの視線の移動量も増え、切り替えられる画像間の空間的な関連性を理解するのが難しくなる。本実施形態に係る監視カメラシステム100では、そのような問題の発生を抑えることができる。
 上記の各実施形態においてクライアント装置30及びサーバ装置20としては、例えばPC(Personal Computer)等の種々のコンピュータが用いられる。図27は、そのようなコンピュータの構成例を示す模式的なブロック図である。
 コンピュータ600は、CPU(Central Processing Unit)601、ROM(Read Only Memory)602、RAM(Random Access Memory)603、入出力インタフェース605、及び、これらを互いに接続するバス604を備える。
 入出力インタフェース605には、表示部606、入力部607、記憶部608、通信部609、ドライブ部610等が接続される。
 表示部606は、例えば液晶、EL(Electro-Luminescence)、CRT(Cathode Ray Tube)等を用いた表示デバイスである。
 入力部607は、例えばコントローラ、ポインティングデバイス、キーボード、タッチパネル、その他の操作装置である。入力部607がタッチパネルを含む場合、そのタッチパネルは表示部606と一体となり得る。
 記憶部608は、不揮発性の記憶デバイスであり、例えばHDD(Hard Disk Drive)、フラッシュメモリ、その他の固体メモリである。
 ドライブ部610は、例えば光学記録媒体、フロッピー(登録商標)ディスク、磁気記録テープ、フラッシュメモリ等、リムーバブルの記録媒体611を駆動することが可能なデバイスである。これに対し上記記憶部608は、主にリムーバブルでない記録媒体を駆動する、コンピュータ600に予め搭載されたデバイスとして使用される場合が多い。
 通信部609は、LAN、WAN(Wide Area Network)等に接続可能な、他のデバイスと通信するためのモデム、ルータ、その他の通信機器である。通信部609は、有線及び無線のどちらを利用して通信するものであってもよい。通信部609は、コンピュータ600とは別体で使用される場合が多い。
 上記のようなハードウェア構成を有するコンピュータ600による情報処理は、記憶部608またはROM602等に記憶されたソフトウェアと、コンピュータ600のハードウェア資源との協働により実現される。具体的には、CPU601が記憶部608またはROM602等に記憶された、ソフトウェアを構成するプログラムをRAM603にロードして実行することにより実現される。例えばCPU601が所定のプログラムを実行することで図2に示す各ブロックが実現される。
 プログラムは、例えば記録媒体を介してコンピュータ600にインストールされる。あるいは、グローバルネットワーク等を介してプログラムがコンピュータ600にインストールされてもよい。
 また、コンピュータ600が実行するプログラムは、上記で説明した順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
 <その他の実施形態>
 本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
 例えば図28及び図29は、他の実施形態としての第1及び第2の画像の切り替え処理を説明するための模式的な図である。図28(A)に示すように、第1の画像712a内のオブジェクトである人3が追跡対象オブジェクト4として、ユーザ2により設定される。この実施形態では、タッチパネル18を介した人3へのタッチ操作により、追跡対象オブジェクト4の設定が実行される。
 図28(B)に示すように、人3の動きに応じて第1の領域画像751aが表示される。あるいは追跡対象オブジェクト4が設定されることで、第1の領域画像751aが表示されてもよい。図28(C)に示すように、人3が第1の領域画像751aに近づくと図29に示す第1の動画760が表示され、画像の切り替えが開始される。
 図29に示すように、第1の領域画像751aが正面を向くように回転する第1の動画760が生成されて表示される。この際に、第1の領域画像751aが画面の全体に表示されるように第1の動画760が生成される。そして図28(D)に示すような第2の画像412bが表示されて、画像の切り替えが終了する。
 この実施形態のように、第2の画像712bの全体が第2の領域750bとして設定されている。また第1及び第2の領域750a及び750bは、共通領域として設定されている。従って図29に示すように、第1の領域画像751aが、第2の領域750bの位置である画面全体の位置まで移動する第1の動画760が表示される。第1の画像712aへの切り替え時には、第2の画像712b全体が第2の領域画像751bとして、第1の領域750aの位置まで移動する第2の動画が表示される。このように撮影画像の全体が第1の領域や第2の領域として設定されてもよい。
 またこの実施形態では、第1の領域画像751aとして、第2の画像712bが埋め込まれた画像が用いられている。このように切り替え先の画像を用いて第1の領域画像が生成されてもよい。これにより第1及び第2の画像間の空間的な位置関係を理解することが容易となる。
 ユーザの指示により画像の切り替えが実行されてもよい。例えば第1の画像内に表示された第1の領域画像を選択する指示に応じて、第1の動画が出力されて第2の画像への切り替えが実行されてもよい。同様に、第2の画像内に表示された第2の領域画像を選択する指示に応じて、第2の動画が出力されて第1の画像への切り替えが実行されてもよい。
 例えば図21に示すように、第1の画像に複数の第1の領域画像が表示されるとする。このような場合等において、第1の領域画像を適宜選択することで、選択された第1の領域画像に関連した画像の切り替えを実行させることが可能となる。これにより監視したい画像への切り替えを直感的に実行することが可能となる。
 この操作の他の例として、例えば図3に示す監視画面において扉にセキュリティが設定されているとする。そしてカード等を用いて扉を開けた人の背後に隠れて、建物内に不正に侵入する不審者が発見されたとする。このような場合に、監視者(ユーザ)が不審者の動きに合わせて、建物内の第1及び第2の領域画像を適宜選択する。タッチパネル等が用いられている場合には、不審者の動きに合わせて、第1及び第2の領域画像がタッチされる。その操作に応じて第1及び第2の動画が表示され画像の切り替えが適宜実行される。このようにタッチ操作等の指示に応じて画像の切り替えが行われてもよい。これにより、不審者を見失うことなく追跡することが可能となり高精度の監視を実行することができる。
 なおユーザの指示により、第1及び第2の動画の表示がスキップされてもよい。例えば第1及び第2の動画が表示されている間に、画面内の所定又は任意の領域にタッチ操作等が入力される。そうすると第1及び第2の動画の表示がスキップされて、切り替え先の画像が表示されてもよい。これにより画像間の切り替え速度を向上させることができる。例えば不審者等が高速で移動している場合等に有効である。
 上記では、追跡対象オブジェクトが所定の距離よりも近づいたときに第1の領域画像が第1の画像内に表示された。しかしながら第1の画像内に第1の領域画像が表示されなくてもよい。切り替えが開始されて切り替え動画が表示されるときに、第1の領域画像が表示されてもよい。第2の領域画像についても同様である。
 第1及び第2の撮影空間の位置的な関連性を反映した切り替え動画として、第1及び第2の領域画像を用いた第1及び第2の動画とは異なる動画が生成されてもよい。例えば地面のみが強調された画像が適宜回転や移動等することで、画像間の相対的な位置関係を表現する動画が生成されてもよい。
 撮影空間の中で、パン・チルト動作等が行われる場合について説明する。この場合、1つの第1のカメラから複数の異なる第1の画像が撮影される。また1つの第2のカメラから複数の異なる第2の画像が撮影される。
 例えば基準となる撮影設定で撮影された第1及び第2の画像について第1及び第2の領域がそれぞれ設定される。これら基準となる第1及び第2の領域の位置情報と、パン・チルト設定等の撮影設定情報とをもとに、他の撮影設定で撮影された第1及び第2の画像に対する第1及び第2の領域の設定が行われる。
 あるいは基準となる第1及び第2の画像に設定された第1及び第2の領域が、他の撮影設定で撮影された第1及び第2の画像に対してそのまま設定されてもよい。そして同じ切り替え動画が表示されてもよい。このようにしても、第1及び第2の画像間の空間的な位置関係を把握することができる。
 あるいは複数の撮影設定において、第1及び第2の領域が予め設定されていてもよい。これら複数の撮影設定での第1及び第2の領域の情報をもとに、他の撮影設定における第1及び第2の領域の設定が実行されてもよい。
 上記では、クライアント装置とサーバ装置とがネットワークで接続され、またサーバ装置と複数のカメラとがネットワークで接続されていた。しかしながら各装置を接続するためにネットワークが用いられなくてもよい。すなわち各装置の接続方法は限定されない。また上記ではクライアント装置とサーバ装置とが別体の装置として配置された。しかしながらクライアント装置とサーバ装置とが一体的に構成されて、本技術の一実施形態に係る情報処理装置として用いられてもよい。複数の撮像装置も含めて本技術の一実施形態に係る情報処理装置が構成されてもよい。
 上記で説明した本技術に係る画像の切り替え処理等が、監視カメラシステム以外の他の情報処理システムに用いられてもよい。
 以上説明した各形態の特徴部分のうち、少なくとも2つの特徴部分を組み合わせることも可能である。
 なお、本技術は以下のような構成も採ることができる。
(1)第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する入力部と、
 前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する制御部と
 を具備する情報処理装置。
(2)(1)に記載の情報処理装置であって、
 前記制御部は、
 前記第1及び前記第2の撮影空間の前記位置的な関連性に応じた領域を前記第1の画像には第1の領域として、前記第2の画像には第2の領域としてそれぞれ設定する設定部と、
 前記第1の領域を表わす第1の領域画像が前記位置的な関連性を反映して動く第1の動画を前記第2の画像への切り替え動画として生成し、前記第2の領域を表わす第2の領域画像が前記位置的な関連性を反映して動く第2の動画を前記第1の画像への切り替え動画として生成する生成部と
 を有する
 情報処理装置。
(3)(2)に記載の情報処理装置であって、
 前記設定部は、前記第1及び前記第2の画像のそれぞれで共通して撮影された共通領域を、前記第1の画像では前記第1の領域として、前記第2の画像では前記第2の領域としてそれぞれ設定し、
 前記生成部は、前記第1の領域画像が前記第2の画像における前記第2の領域の位置に動く動画を前記第1の動画として生成し、前記第2の領域画像が前記第1の画像における前記第1の領域の位置に動く動画を前記第2の動画として生成する
 情報処理装置。
(4)(2)又は(3)に記載の情報処理装置であって、
 前記生成部は、前記第1の領域画像が画面の外側に移動する動画を前記第1の動画として生成し、前記第2の領域画像が画面の外側に移動する動画を前記第2の動画として生成する
 情報処理装置。
(5)(2)から(4)のうちいずれか1つに記載の情報処理装置であって、
 前記第1及び前記第2の画像において追跡対象のオブジェクトを追跡する追跡部をさらに具備し、
 前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の動画を出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の動画を出力する
 情報処理装置。
(6)(5)に記載の情報処理装置であって、
 前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の領域画像を前記第1の画像内に出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の領域画像を前記第2の画像内に出力する
 情報処理装置。
(7)(2)から(6)のうちいずれか1つに記載の情報処理装置であって、
 ユーザからの指示を入力する指示入力部をさらに具備し、
 前記制御部は、前記指示入力部を介して入力された前記第1の領域画像を選択する指示に応じて前記第1の動画を出力し、前記入力部を介して入力された前記第2の領域画像を選択する指示に応じて前記第2の動画を出力する
 情報処理装置。
 4…追跡対象オブジェクト
 10…カメラ
 10a、510a…第1のカメラ
 10b、510b…第2のカメラ
 11…撮影空間
 11a、511a…第1の撮影空間
 11b、511b…第2の撮影空間
 12…撮影画像
 12a、112a、212a、312a、412a、512a、712a…第1の画像
 12b、112b、212b、312b、412b、512b、712b…第2の画像
 15…画面
 20…サーバ装置
 23…画像解析部
 24…切り替え制御部
 30…クライアント装置
 50a、150a、250a、350a、550a、750a…第1の領域
 50b、150b、250b、350b、550b、750b…第2の領域
 51a、151a、251a、351a、381、451a、551a、751a…第1の領域画像
 51b、151b、251b、351b、551b、751b…第2の領域画像
 52、152…共通領域
 60、160、260、360、560、760…第1の動画
 65、565…第2の動画
 100…監視カメラシステム
 600…コンピュータ

Claims (10)

  1.  第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する入力部と、
     前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する制御部と
     を具備する情報処理装置。
  2.  請求項1に記載の情報処理装置であって、
     前記制御部は、
     前記第1及び前記第2の撮影空間の前記位置的な関連性に応じた領域を前記第1の画像には第1の領域として、前記第2の画像には第2の領域としてそれぞれ設定する設定部と、
     前記第1の領域を表わす第1の領域画像が前記位置的な関連性を反映して動く第1の動画を前記第2の画像への切り替え動画として生成し、前記第2の領域を表わす第2の領域画像が前記位置的な関連性を反映して動く第2の動画を前記第1の画像への切り替え動画として生成する生成部と
     を有する
     情報処理装置。
  3.  請求項2に記載の情報処理装置であって、
     前記設定部は、前記第1及び前記第2の画像のそれぞれで共通して撮影された共通領域を、前記第1の画像では前記第1の領域として、前記第2の画像では前記第2の領域としてそれぞれ設定し、
     前記生成部は、前記第1の領域画像が前記第2の画像における前記第2の領域の位置に動く動画を前記第1の動画として生成し、前記第2の領域画像が前記第1の画像における前記第1の領域の位置に動く動画を前記第2の動画として生成する
     情報処理装置。
  4.  請求項2に記載の情報処理装置であって、
     前記生成部は、前記第1の領域画像が画面の外側に移動する動画を前記第1の動画として生成し、前記第2の領域画像が画面の外側に移動する動画を前記第2の動画として生成する
     情報処理装置。
  5.  請求項2に記載の情報処理装置であって、
     前記第1及び前記第2の画像において追跡対象のオブジェクトを追跡する追跡部をさらに具備し、
     前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の動画を出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の動画を出力する
     情報処理装置。
  6.  請求項5に記載の情報処理装置であって、
     前記制御部は、前記追跡対象のオブジェクトと前記第1の領域との距離が所定の値よりも小さくなったときに前記第1の領域画像を前記第1の画像内に出力し、前記追跡対象のオブジェクトと前記第2の領域との距離が所定の値よりも小さくなったときに前記第2の領域画像を前記第2の画像内に出力する
     情報処理装置。
  7.  請求項2に記載の情報処理装置であって、
     ユーザからの指示を入力する指示入力部をさらに具備し、
     前記制御部は、前記指示入力部を介して入力された前記第1の領域画像を選択する指示に応じて前記第1の動画を出力し、前記入力部を介して入力された前記第2の領域画像を選択する指示に応じて前記第2の動画を出力する
     情報処理装置。
  8.  第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力し、
     前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する
     ことをコンピュータが実行する情報処理方法。
  9.  第1の撮影空間を撮影対象とする第1の撮像装置により撮影された第1の画像と、前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力するステップと、
     前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力するステップと
     をコンピュータに実行させるプログラム。
  10.  第1の撮影空間を撮影対象とする第1の撮像装置と、
     前記第1の撮影空間と異なる第2の撮影空間を撮影対象とする第2の撮像装置と、
      前記第1の撮像装置により撮影された第1の画像と、前記第2の撮像装置により撮影され前記第1の画像と相互に切り替えて表示される第2の画像とを入力する入力部と、
      前記第1及び前記第2の画像を相互に切り替えるときに、前記第1及び前記第2の撮影空間の位置的な関連性を反映した切り替え動画を出力する制御部と
     を有する情報処理装置と
     を具備する情報処理システム。
PCT/JP2013/005296 2012-10-23 2013-09-06 情報処理装置、情報処理方法、プログラム、及び情報処理システム WO2014064878A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2014543129A JP6299602B2 (ja) 2012-10-23 2013-09-06 情報処理装置、情報処理方法、プログラム、及び情報処理システム
US14/436,472 US10187610B2 (en) 2012-10-23 2013-09-06 Controlling display based on an object position in an imaging space
EP13848744.2A EP2913996B1 (en) 2012-10-23 2013-09-06 Information-processing device, information-processing method, program, and information-processing system
CN201380054140.0A CN104737534B (zh) 2012-10-23 2013-09-06 信息处理装置、信息处理方法、程序及信息处理系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-233621 2012-10-23
JP2012233621 2012-10-23

Publications (1)

Publication Number Publication Date
WO2014064878A1 true WO2014064878A1 (ja) 2014-05-01

Family

ID=50544264

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/005296 WO2014064878A1 (ja) 2012-10-23 2013-09-06 情報処理装置、情報処理方法、プログラム、及び情報処理システム

Country Status (5)

Country Link
US (1) US10187610B2 (ja)
EP (1) EP2913996B1 (ja)
JP (1) JP6299602B2 (ja)
CN (1) CN104737534B (ja)
WO (1) WO2014064878A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018116494A1 (ja) * 2016-12-22 2018-06-28 日本電気株式会社 監視カメラ、監視システム、監視カメラの制御方法及びプログラム

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160024143A (ko) * 2014-08-25 2016-03-04 삼성전자주식회사 영상 처리 방법 및 전자 장치
CN107705317A (zh) * 2017-09-30 2018-02-16 石道松 基于视觉跟踪识别的控制系统
TWI735180B (zh) 2020-03-12 2021-08-01 國立臺灣科技大學 角隅剪力連接器

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012415A (ja) * 2003-06-18 2005-01-13 Matsushita Electric Ind Co Ltd 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ
JP2006121580A (ja) * 2004-10-25 2006-05-11 Matsushita Electric Ind Co Ltd 画像処理装置
JP2006146378A (ja) * 2004-11-17 2006-06-08 Hitachi Ltd 複数カメラを用いた監視システム
JP2008289091A (ja) * 2007-05-21 2008-11-27 Canon Inc 画像表示装置及び監視カメラシステム
JP2009251940A (ja) 2008-04-07 2009-10-29 Sony Corp 情報処理装置および方法、並びにプログラム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6768563B1 (en) * 1995-02-24 2004-07-27 Canon Kabushiki Kaisha Image input system
GB9712724D0 (en) * 1997-06-18 1997-08-20 Holmes Steven Method and apparatus for interaction with broadcast television content
US6522325B1 (en) * 1998-04-02 2003-02-18 Kewazinga Corp. Navigable telepresence method and system utilizing an array of cameras
US6359647B1 (en) * 1998-08-07 2002-03-19 Philips Electronics North America Corporation Automated camera handoff system for figure tracking in a multiple camera system
US20020097322A1 (en) * 2000-11-29 2002-07-25 Monroe David A. Multiple video display configurations and remote control of multiple video signals transmitted to a monitoring station over a network
US7242423B2 (en) * 2003-06-16 2007-07-10 Active Eye, Inc. Linking zones for object tracking and camera handoff
WO2006053271A1 (en) * 2004-11-12 2006-05-18 Mok3, Inc. Method for inter-scene transitions
US8274564B2 (en) * 2006-10-13 2012-09-25 Fuji Xerox Co., Ltd. Interface for browsing and viewing video from multiple cameras simultaneously that conveys spatial and temporal proximity
JP4928275B2 (ja) * 2007-01-10 2012-05-09 キヤノン株式会社 カメラ制御装置及びその制御方法
IL204087A (en) * 2010-02-21 2016-03-31 Rafael Advanced Defense Sys A method and system for subsequent viewing of two video streams
WO2011114799A1 (ja) * 2010-03-15 2011-09-22 オムロン株式会社 監視カメラ端末
JP2012029245A (ja) * 2010-07-27 2012-02-09 Sanyo Electric Co Ltd 撮像装置
JP5658507B2 (ja) * 2010-08-06 2015-01-28 富士通テン株式会社 画像表示システム、画像生成装置、及び、画像表示方法
US9282296B2 (en) * 2011-12-07 2016-03-08 Siemens Aktiengesellschaft Configuration tool for video analytics

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012415A (ja) * 2003-06-18 2005-01-13 Matsushita Electric Ind Co Ltd 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ
JP2006121580A (ja) * 2004-10-25 2006-05-11 Matsushita Electric Ind Co Ltd 画像処理装置
JP2006146378A (ja) * 2004-11-17 2006-06-08 Hitachi Ltd 複数カメラを用いた監視システム
JP2008289091A (ja) * 2007-05-21 2008-11-27 Canon Inc 画像表示装置及び監視カメラシステム
JP2009251940A (ja) 2008-04-07 2009-10-29 Sony Corp 情報処理装置および方法、並びにプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2913996A4

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018116494A1 (ja) * 2016-12-22 2018-06-28 日本電気株式会社 監視カメラ、監視システム、監視カメラの制御方法及びプログラム
JPWO2018116494A1 (ja) * 2016-12-22 2019-11-07 日本電気株式会社 監視カメラ、監視システム、監視カメラの制御方法及びプログラム
JP2022023992A (ja) * 2016-12-22 2022-02-08 日本電気株式会社 監視カメラ、監視システム、監視カメラの制御方法及びプログラム

Also Published As

Publication number Publication date
US20150326830A1 (en) 2015-11-12
CN104737534A (zh) 2015-06-24
EP2913996B1 (en) 2021-03-03
JP6299602B2 (ja) 2018-03-28
EP2913996A4 (en) 2016-07-06
US10187610B2 (en) 2019-01-22
JPWO2014064878A1 (ja) 2016-09-08
EP2913996A1 (en) 2015-09-02
CN104737534B (zh) 2018-02-16

Similar Documents

Publication Publication Date Title
US10142727B2 (en) Directivity control apparatus, directivity control method, storage medium and directivity control system
US20210406574A1 (en) Mobile surveillance apparatus, program, and control method
EP2442548B1 (en) Control device, camera system, and program
JP6877149B2 (ja) 撮影位置推薦方法、コンピュータプログラムおよび撮影位置推薦システム
US9325861B1 (en) Method, system, and computer program product for providing a target user interface for capturing panoramic images
JP5954106B2 (ja) 情報処理装置、情報処理方法、プログラム、及び情報処理システム
US8537228B2 (en) Electronic device and method for controlling cameras
WO2014065854A1 (en) Method, system and computer program product for gamifying the process of obtaining panoramic images
JP6299602B2 (ja) 情報処理装置、情報処理方法、プログラム、及び情報処理システム
US20150029332A1 (en) Controlling movement of a camera to autonomously track a mobile object
EP3855749A1 (en) Systems and methods for displaying video streams on a display
JP7550620B2 (ja) ビデオストリームの動的表示のためのビデオ管理システムおよび方法
JP2011205517A (ja) 画像処理装置
KR102368225B1 (ko) 전자 디바이스 상의 디워프 이미지 뷰를 자동으로 변경하는 방법 및 장치
JP6515975B2 (ja) モバイル監視装置、モバイル監視システム、プログラム、及び制御方法
US20230130815A1 (en) Image processing apparatus, image processing method, and program
KR20220072498A (ko) 다중 cctv 카메라의 제어 방법, 장치 및 시스템
JP2019164802A (ja) モバイル監視装置、制御方法、及びプログラム
JP2014030089A (ja) カメラ制御装置、カメラ制御方法及びカメラ制御プログラム
JP2014030090A (ja) カメラ制御装置、カメラ制御方法及びカメラ制御プログラム
JP2010118065A (ja) トリミング制御装置及びトリミング制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13848744

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014543129

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2013848744

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14436472

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE