WO2013094406A1 - 監視システム - Google Patents

監視システム Download PDF

Info

Publication number
WO2013094406A1
WO2013094406A1 PCT/JP2012/081497 JP2012081497W WO2013094406A1 WO 2013094406 A1 WO2013094406 A1 WO 2013094406A1 JP 2012081497 W JP2012081497 W JP 2012081497W WO 2013094406 A1 WO2013094406 A1 WO 2013094406A1
Authority
WO
WIPO (PCT)
Prior art keywords
monitoring
image
monitoring image
terminal device
information
Prior art date
Application number
PCT/JP2012/081497
Other languages
English (en)
French (fr)
Inventor
照久 高野
秋彦 香西
真史 安原
Original Assignee
日産自動車株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日産自動車株式会社 filed Critical 日産自動車株式会社
Priority to JP2013550208A priority Critical patent/JP5796638B2/ja
Publication of WO2013094406A1 publication Critical patent/WO2013094406A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle

Definitions

  • the present invention relates to a monitoring system.
  • This application claims priority based on Japanese Patent Application No. 2011-280913 filed on Dec. 22, 2011.
  • the contents described in the application are incorporated into the present application by reference and made a part of the description of the present application.
  • a security device that detects the occurrence of abnormalities is known by installing multiple security camera devices in shopping streets, store entrances, home entrances, and other streets, and monitoring surrounding images captured by the security camera device (Patent Document 1).
  • the security camera device installed in the city picks up a predetermined area in the same direction and transmits it to the supervisor, even if the supervisor can specify the direction he wants to watch, Since the image of the direction is also transmitted, there is a problem that the communication amount increases.
  • An object of the present invention is to provide a monitoring system that can reduce the number of images transmitted to a supervisor and reduce the amount of communication.
  • the present invention achieves the above-described object by causing a monitoring terminal device mounted on a mobile body to generate and send a monitoring image in a specific gaze direction that the monitor wants to gaze at.
  • a monitoring image is generated and transmitted based on a captured image in a specific gaze direction that the supervisor wants to gaze out of the captured images of a plurality of mobile cameras that travel at random, and the supervisor gazes. Since the generation and transmission of the monitoring image in the direction determined to be unnecessary is suppressed, the amount of communication can be reduced while maintaining the monitoring level.
  • FIG. 1 is a schematic diagram showing a monitoring system according to an embodiment of the present invention. It is a block diagram which shows the monitoring system of FIG. It is a perspective view which shows the example of arrangement
  • FIG. 1 shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 2 shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 3 shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 4 shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 5 shows an example of the display image shown on the display of a central monitoring apparatus. It is FIG.
  • FIG. 6 which shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 7 which shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 8 which shows an example of the display image shown on the display of a central monitoring apparatus.
  • FIG. 1 for demonstrating the method of designating a monitoring direction / monitoring range.
  • FIG. 2 for demonstrating the method of designating a monitoring direction / monitoring range.
  • FIG. 3 for demonstrating the method of designating a monitoring direction / monitoring range.
  • FIG. 4 for demonstrating the method of designating a monitoring direction / monitoring range.
  • It is a flowchart which shows the main control content by the monitoring terminal device side of the monitoring system of FIG.
  • the surveillance system according to the present invention is monitored by the authorities such as police stations and fire stations, security contractors, etc. using the captured images of cameras mounted on a plurality of moving bodies. This is embodied in a monitoring system 1 for centralized monitoring by a person.
  • Each of the monitoring terminal devices 10 mounted on the plurality of moving bodies acquires the position information, the monitoring image around the moving body, and the time information at a predetermined timing, and the position information, the monitoring image, and the time
  • the monitoring information including the information is sent to the central monitoring device 20 installed on the monitor side via wireless communication.
  • the central monitoring device 20 accumulates monitoring information including at least a monitoring image and position information acquired from the monitoring terminal device 10, and displays the position information of the moving body on the map information in a superimposed manner via a display or the like.
  • a monitoring image and time information captured at each moving body or each position are displayed. Therefore, as shown in FIG. 1, the monitoring system 1 of the present example is mounted on a moving body V, and transmits a monitoring information such as position information and a monitoring image, and a telecommunication network 30.
  • a central monitoring device 20 that acquires and processes the monitoring information.
  • the monitoring system 1 generates a monitoring image in the specified gaze direction and inputs the generated monitoring image when a specific gaze direction to be watched is input on the supervisor side.
  • a monitoring image transmission command for transmitting monitoring information including the monitoring information is generated, and the monitoring image transmission command is transmitted via wireless communication.
  • a monitoring image is generated based on the captured image obtained by capturing the gaze direction included in the monitoring image transmission command with the camera provided on the moving body.
  • the monitoring information including the monitoring image is transmitted to the monitoring person via wireless communication.
  • the supervisor side acquires the monitoring information including the monitoring image in the gaze direction that the supervisor wants to gaze generated according to the supervisory image transmission command issued by the supervisor.
  • a specific gaze direction can be defined in advance. For example, from the viewpoint of reducing the input load, the forward direction of the moving body V can be set as the default gaze direction.
  • the monitor can select the moving object V for which a monitoring image is to be generated based on the position of the moving object superimposed on the map information, the movement schedule of the moving object V acquired in advance, and the like. Further, the monitor specifies the direction in which he / she wants to pay attention according to the location where the accident has occurred, the location designated by the notification, the location to be monitored, and other points of interest based on the position and traveling direction of the moving object V.
  • the monitor inputs information for specifying the selected moving body V and information for specifying the direction to be watched into the central monitoring device 20.
  • the central monitoring apparatus 20 that has received the moving body identification information and the gaze direction identification information displays, for the selected moving body, a monitoring image of the identified gaze direction out of the directions that the camera of the moving body V can capture.
  • a monitoring image transmission command to be generated is generated and transmitted to the monitoring terminal device 10 of the mobile body specified via wireless communication.
  • the monitoring terminal device 10 of the moving body V that has acquired the monitoring image transmission command is generated based on the captured image in the gaze direction included in the monitoring image transmission command among the captured images captured by the camera provided in the moving body V.
  • the monitoring information including the monitored image is sent to the central monitoring device 20 via wireless communication. In this way, the central monitoring device 20 and the monitoring terminal device 10 of the moving object V cooperate with each other to provide monitoring information for monitoring the city.
  • the mobile body V on which the monitoring terminal device 10 is mounted is not particularly limited as long as it travels in the target monitoring area, and includes mobile bodies V such as automobiles, motorcycles, industrial vehicles, and trams.
  • automobiles include private automobiles V2 and emergency automobiles V3, and in particular, taxis and route buses V1 that travel randomly and constantly in a predetermined area are preferably included.
  • FIG. 1 illustrates an emergency vehicle V3 such as a taxi V1, a private vehicle V2, a police car, a fire engine or an ambulance, but these are collectively referred to as a moving body V or a passenger vehicle V.
  • FIG. 2 is a block diagram illustrating a specific configuration of the central monitoring device 20 and the monitoring terminal device 10.
  • the monitoring terminal device 10 and the central monitoring device 20 can communicate via the telecommunication network 30.
  • the communication device 23 of the monitoring terminal device 10 is a communication means capable of wireless communication, and exchanges information with the communication device 23 of the central monitoring device 20 via the telecommunication network 30.
  • the telecommunications network 30 is a commercial telephone network, a mobile phone communication device can be used widely, and when the telecommunications network 30 is a dedicated telecommunications network for the monitoring system 1 of this example, it is dedicated to it.
  • the communication devices 23 and 13 can be used.
  • a wireless LAN, WiFi (registered trademark), WiMAX (registered trademark), Bluetooth (registered trademark), a dedicated wireless line, or the like can be used.
  • the central monitoring device 20 inputs the position information and the monitoring image sent from the monitoring terminal device 10 mounted on each of the moving bodies V to the database in order to monitor the city by the captured image of the camera of the moving body V. It has an input function and a display control function for displaying the received monitoring image on the display 24 while superimposing the received positional information on the display 24 on the map information read from the map database.
  • the central monitoring device 20 of the present embodiment when the gaze direction to be watched is input with reference to the position of the mobile body V on the map information presented by the monitor, the monitoring terminal device 10 of each mobile body V. And a command transmission function for transmitting the generated monitoring image transmission command to the monitoring terminal device 10. Therefore, the central monitoring device 20 includes a central control device 21, an image processing device 22, a communication device 23, a display 24, and an input device 25.
  • the central monitoring device 20 according to the present embodiment has a database for storing monitoring information inside the central monitoring device 20, but may be provided outside the central monitoring device 20 as long as it is accessible.
  • the central control device 21 includes a CPU, a ROM, and a RAM, and controls the image processing device 22, the communication device 23, and the display 24, and receives position information, monitoring images, and time information transmitted from the monitoring terminal device 10.
  • the image is displayed on the display 24 after being subjected to image processing as necessary.
  • the central control device 21 selects one or a plurality of moving bodies V among the plurality of moving bodies V when information specifying a gaze direction to be noticed is input from the monitor, and the selected moving body V is selected.
  • the monitoring terminal device 10 generates a monitoring image in the specified gaze direction, generates a monitoring image transmission command including a command to transmit the generated monitoring image to the central monitoring device 20, and supplies the monitoring image to the selected monitoring terminal device 10. Send each one.
  • the monitoring image transmission command includes a communication ID and other identifiers for identifying the monitoring terminal device 10 of the selected moving object V. Selection of the moving body V can be performed based on a selection command for the moving body V input from the input device 25.
  • moving body V existing in the vicinity area of the accident occurrence point input from the outside, a moving body V existing in the vicinity area of the moving body V reporting the occurrence of the accident, or a point to be preferentially monitored.
  • One or a plurality of moving bodies V may be selected by automatically extracting moving bodies V and the like existing in the vicinity area of the focused monitoring point.
  • the gaze direction included in the monitoring image transmission command in the present embodiment corresponds to the gaze direction when viewing the video displayed on the image used for monitoring. Specifically, it corresponds to the optical axis (imaging direction) of a camera that captures an image for monitoring on the monitoring terminal device 10 side.
  • the gaze direction in the monitoring image transmission command can be defined based on the traveling direction of the moving object V.
  • the gaze direction is the front of the moving object (the same direction as the moving direction of the moving object), the rear of the moving object (the direction opposite to the moving direction of the moving object), the right direction of the moving object's moving direction, Depending on the specified direction, such as the left direction of the moving direction, the right front direction of the moving direction of the moving object, the right rear direction of the moving direction of the moving object, the left front direction of the moving direction of the moving object, the left front direction of the moving direction of the moving object.
  • this gaze direction can also be defined by the angle and orientation with respect to the origin corresponding to the position of the moving object V in the coordinate system used for image processing and other coordinate systems.
  • the gaze direction indicates one direction
  • the monitoring terminal device 10 of the moving object V specifies the camera 11 that captures the gaze direction or the captured image captured by the camera 11 based on the gaze direction. can do. Since the cameras 11a to 1d of the present embodiment are provided one by one at different positions on the body of the moving body V, when the gaze direction indicates one direction, imaging in the gaze direction imaged at one timing is performed. There will be one image.
  • the gaze direction can have a predetermined width (angle). That is, an area indicated by the gaze direction included in the angle of the predetermined value range with the gaze direction indicating one direction as a reference can be defined as the gaze area.
  • the region indicated by the gaze direction included in the angle of the predetermined value range in the left-right direction (plus and minus directions, plus direction or minus direction on the coordinates) centered on the specified gaze direction may be defined as the gaze region. it can.
  • the “gaze area” in the monitoring image transmission command can be defined based on the gaze direction, such as ⁇ degrees (90 degrees, 120 degrees, etc.) from the gaze direction to the right or left side.
  • the gaze area set based on the gaze direction can be included in the monitoring image transmission command.
  • a plurality of cameras are provided at different positions on the body of the moving body V and images in different directions are taken, there are a plurality of captured images that capture the gaze area designated at one timing.
  • the central monitoring device 20 on the supervisor side can set the gaze area according to the moving direction of the monitoring target or can set the gaze area according to the movement of the moving object V.
  • the central control device 21 causes the monitoring terminal device 10 to generate a monitoring image based on the captured image obtained by capturing the gaze direction and the gaze area of interest of the monitor by the camera 11 of each moving body V.
  • the obtained monitoring image includes an image of a gaze direction or a gaze area that is watched by the supervisor. For this reason, the central monitoring apparatus 20 can acquire useful monitoring information including a monitoring image in which a portion that the monitor wants to watch is displayed.
  • the monitoring image transmission command in this embodiment includes a command for generating a monitoring image of the specified gaze direction or gaze area, that is, a command for prohibiting generation of a monitoring image other than the gaze direction or the gaze region. .
  • the monitoring image transmission command of the present embodiment since the monitoring terminal device 10 does not generate (inhibit) image information other than the gaze direction or the gaze area, the information amount of the generated monitoring image is inevitably small. The amount of monitoring information sent to the central monitoring device 20 can be reduced. Specifically, when the monitoring image in the gaze direction is generated from a single captured image, the monitoring image that is normally sent corresponds to the number of cameras 11, and therefore, the number of captured images obtained by subtracting 1 from the number of cameras 11.
  • the amount of information related to transmission can be reduced by the amount.
  • N is a natural number greater than or equal to 2
  • the amount of information related to transmission corresponding to the number of captured images obtained by subtracting N from the number of cameras 11 Can be reduced.
  • the central monitoring device 20 acquires the monitoring image of the gaze direction or the gaze area, the monitoring information can be monitored from the monitoring terminal device 10 while checking the monitoring image in the gaze direction and maintaining the monitoring level. It is possible to reduce the amount of communication when transmitting.
  • the central control device 21 issues a command to generate a monitor image with higher image quality than before the input specifying the gaze direction is performed. It can be included in the send command.
  • the central controller 21 When the monitoring person specifies the gaze direction, the central controller 21 generates a monitoring image transmission command including a command to create a monitoring image only in the specified gaze direction or only the gaze area. According to this monitoring image transmission command, image information other than the gaze direction or the gaze area is not generated, and thus the amount of monitoring information transmitted to the central monitoring device 20 can be reduced.
  • the central control device 21 monitors a command for causing the monitoring terminal device 10 to create a monitoring image with higher image quality than the image quality before the specification. It is included in the image transmission command. Since no image information other than the gaze direction or gaze area is created, an increase in the total amount of information related to transmission can be suppressed even if the image quality of the monitoring image is increased. As a result, it is possible to provide the monitoring information necessary for the central monitoring device 20 without increasing the total amount of information related to transmission even if the monitoring image of the gaze direction or the gaze area that is watched by the monitor is generated with high image quality. Can do.
  • the image processing device 22 has a map database, displays map information from the map database on the display 24, and superimposes and displays position information detected by the position detection device 15 of the monitoring terminal device 10 on the map information. To do. In addition, image processing is performed to display the monitoring image captured by the camera 11 of the monitoring terminal device 10 and processed by the image processing device 12 on the display 24.
  • the display 24 can be composed of, for example, a liquid crystal display device having a size capable of displaying two or more window screens on one screen, or two or more liquid crystal display devices each displaying two or more window screens.
  • One window screen displays a screen in which the position information of each moving body V is superimposed on the map information (see FIG. 1), and the other window screen is captured by the camera 11 of the moving body V. A monitoring image generated based on the captured image is displayed.
  • the input device 25 is an input device such as a keyboard, a mouse, and a touch panel.
  • the input device 25 specifies a desired moving body V, outputs a monitoring image transmission command to the moving body V, and various information displayed on the display 24. This is used when inputting a processing command.
  • the communication device 23 is a communication means capable of wireless communication, and exchanges information with the communication device 13 of the monitoring terminal device 10 via the telecommunication network 30.
  • the telecommunications network 30 is a commercial telephone network, a mobile phone communication device can be used widely, and when the telecommunications network 30 is a dedicated telecommunications network for the monitoring system 1 of this example, it is dedicated to it.
  • the communication devices 13 and 23 can be used.
  • the monitoring terminal device 10 is a terminal device mounted on each of the plurality of moving bodies V.
  • the monitoring terminal device 10 is mounted on each of the plurality of moving bodies V and a position detection function for detecting position information of each of the plurality of moving bodies V.
  • a monitoring image generation function for generating a monitoring image based on a captured image around the moving body V captured by the camera, and position information, monitoring image, and time information acquired at a predetermined timing to the central monitoring device 20
  • a communication function for receiving commands from the central monitoring device 20 as well as sending out commands. Therefore, each moving body V includes a plurality of cameras 11a to 11d, an image processing device 12, a communication device 13, a control device 14, and a position detection device 15.
  • the time information is mainly information used for post-event analysis, and may be omitted.
  • the plurality of cameras 11 mounted on the respective moving bodies V are constituted by CCD cameras or the like, take images of respective predetermined directions or predetermined areas around the moving body V, and output the image pickup signals to the image processing device 12.
  • the image processing device 12 reads an imaging signal from the camera 11 and executes image processing for generating a monitoring image. Details of this image processing will be described later.
  • the position detection device 15 includes a GPS device and its correction device, and detects the current position of the moving object V and outputs it to the control device 14.
  • the control device 14 includes a CPU, a ROM, and a RAM, receives a monitoring image transmission command from the central monitoring device 20 received via the telecommunication network 30 and the communication device 13, and receives the image processing device 12 and the communication device 13. And the position detection device 15, and the monitoring image generated by the image processing device 12, the position information of the moving object V detected by the position detection device 15, and the time information from the clock built in the CPU. Information is output to the central monitoring device 20 via the communication device 13 and the telecommunication network 30.
  • the control device 14 performs monitoring based on the captured image obtained by capturing the gaze direction included in the monitoring image transmission command in accordance with the monitoring image transmission command acquired from the central monitoring device 20 via the communication device 13.
  • a monitoring image generation function that causes the image processing device 12 to generate an image and a monitoring information transmission function that causes the central monitoring device 20 to transmit monitoring information including the generated monitoring image via the communication device 13 are executed.
  • the control device 14 before accepting the monitoring image transmission command from the central monitoring device 20, the control device 14 follows a predetermined rule set in advance and takes a captured image obtained by imaging one or more default directions specified by the rule. Based on this, a monitoring image is generated by the image processing device 12 and sent to the central monitoring device 20 via the communication device 13.
  • the cameras 11a to 11d are configured by using an image sensor such as a CCD, and the four cameras 11a to 11d are installed at different positions outside the passenger car V, respectively, and respectively photograph the four directions of front, rear, left and right around the moving body V.
  • the camera 11a installed at a predetermined position in front of the passenger car V such as a front grille is an object or road surface (front) in the area SP1 in front of the passenger car V and in the space in front thereof. Take a view).
  • the camera 11c installed at a predetermined position in the rear part of the passenger car V such as a rear finisher part or a roof spoiler part, shows an object or road surface (rear view) existing in the area SP3 behind the passenger car V and in the space behind it. Take a picture.
  • FIG. 4 is a view of the arrangement of the cameras 11a to 11d as viewed from above the passenger car V.
  • the camera 11a that captures the area SP1 the camera 11b that captures the area SP2, the camera 11c that captures the area SP3, and the camera 11d that captures the area SP4 are the outer periphery VE of the body of the passenger car V.
  • the camera 11b is installed on the left side of the camera 11a, and the camera 11c is on the left side of the camera 11b.
  • the camera 11d is installed on the left side of the camera 11c, and the camera 11a is installed on the left side of the camera 11d.
  • the camera 11d is installed on the right side of the camera 11a, and on the right side of the camera 11d.
  • a camera 11c is installed, a camera 11b is installed on the right side of the camera 11c, and a camera 11a is installed on the right side of the camera 11b.
  • FIG. 5A shows an example of an image GSP1 in which the front camera 11a images the area SP1
  • FIG. 5B shows an example of an image GSP2 in which the left side camera 11b images the area SP2
  • FIG. 5C shows a rear camera
  • 11c shows an example of an image GSP3 obtained by imaging the area SP3
  • FIG. 5D is an image diagram showing an example of an image GSP4 obtained by the right side camera 11d imaging the area SP4.
  • the size of each image is vertical 480 pixels ⁇ horizontal 640 pixels.
  • the image size is not particularly limited, and may be any size as long as a general terminal device can reproduce a moving image.
  • the number of cameras 11 and the positions of the cameras 11 can be appropriately determined according to the size, shape, detection area setting method, etc. of the passenger car V.
  • the plurality of cameras 11 described above are assigned identifiers according to their arrangement, and the control device 14 can identify each of the cameras 11 based on each identifier. Further, the control device 14 can send an imaging command and other commands to the specific camera 11 by attaching an identifier to the command signal.
  • the control device 14 controls the image processing device 12 to acquire each image signal picked up by the camera 11, and the image processing device 12 processes the image pickup signal from each camera 11, and is shown in FIGS. 5A to 5D. Convert to surveillance image. Then, the control device 14 generates a monitoring image based on the four monitoring images shown in FIGS. 5A to 5D (monitoring image generation function), and projects the monitoring image set on the side of the projection model of the columnar body. Mapping information to be projected onto the surface is associated with the monitoring image (mapping information adding function) and output to the central monitoring device 20.
  • the monitoring image generation function and the mapping information addition function will be described in detail.
  • the monitoring image is generated on the basis of the four monitoring images obtained by imaging the periphery of the passenger car V, and the process of associating the mapping information with the monitoring image is executed by the monitoring terminal device 10 as in this example, and also by the central monitoring device 20. It can also be executed.
  • four monitoring images obtained by imaging the periphery of the passenger car V are transmitted as they are from the monitoring terminal device 10 to the central monitoring device 20, and are monitored by the image processing device 22 and the central control device 21 of the central monitoring device 20. It is only necessary to generate an image, associate mapping information, and perform projection conversion.
  • the control device 14 of the monitoring terminal device 10 controls the image processing device 12 to acquire the imaging signals of the respective cameras 11a to 11d, and further turns clockwise or counterclockwise along the outer periphery of the body of the passenger car V.
  • One monitoring image is generated so that the monitoring images of the cameras 11a to 11d installed in the direction of are arranged in the installation order of these cameras 11a to 11d.
  • the four cameras 11a to 11d are installed in the order of the cameras 11a, 11b, 11c, and 11d in the counterclockwise direction along the outer periphery VE of the body of the passenger car V.
  • the control device 14 connects the four cameras 11a to 11d in a horizontal direction so that the four images captured by the cameras 11a to 11d are integrated in accordance with the installation order of these cameras 11a to 11d (cameras 11a ⁇ 11b ⁇ 11c ⁇ 11d).
  • one monitoring image is generated.
  • the images are arranged such that the ground contact surface (road surface) of the passenger vehicle V is the lower side, and the images are connected to each other at sides in the height direction (vertical direction) with respect to the road surface.
  • FIG. 6 is a diagram illustrating an example of the monitoring image K.
  • the monitoring image K of the present embodiment includes a captured image GSP1 in which the front camera 11a images the area SP1 and a left camera 11b in the area P along the direction P from the left side to the right side of the drawing.
  • a captured image GSP2 captured from SP2 a captured image GSP3 captured by the rear camera 11c capturing the area SP3, and a captured image GSP4 captured by the right side camera 11d capturing the area SP4 are arranged in this order in the horizontal direction.
  • Four images are taken as a series of images.
  • the monitoring image K generated in this way is displayed in order from the left end to the right side with the image corresponding to the road surface (the ground contact surface of the moving body V) facing down, so that the monitor can turn around the moving body V. It can be visually recognized on the display 24 in the same manner as when looking around clockwise. As described above, the monitoring image K in the mode shown in FIG. 6 can be reproduced in the arrangement in the expected order without causing the positional relationship to be out of order even when processing such as transmission / reception is performed.
  • one monitoring image K when one monitoring image K is generated, four images acquired at substantially the same time as the photographing timings of the cameras 11a to 11d are used. Thereby, since the information included in the monitoring image K can be synchronized, the situation around the moving object V at a predetermined timing can be accurately expressed.
  • the monitoring image K generated from the respective captured images having substantially the same imaging timing of the camera is stored with time, and the moving image monitoring image K including the plurality of monitoring images K per predetermined unit time is generated. It may be. By generating the monitoring image K of the moving image based on the images with the same imaging timing, it is possible to accurately represent the change in the situation around the moving object V.
  • the conventional central monitoring device 20 has a disadvantage that it cannot simultaneously watch images (moving images) in a plurality of directions and cannot monitor the entire periphery of the moving object V on one screen.
  • control device 14 of the present embodiment since the control device 14 of the present embodiment generates one monitoring image K from a plurality of images, it can simultaneously play back moving images of images in different imaging directions regardless of the function of the central monitoring device 20. . That is, by continuously playing back the monitoring image K (moving image playback), the four images included in the monitoring image K are played back continuously (moving image playback), and the state change of the regions in different directions is displayed on one screen. Can be monitored.
  • the monitoring terminal device 10 of the present embodiment generates the monitoring image K by compressing the image data amount so that the number of pixels of the monitoring image K is substantially the same as the number of pixels of the images of the cameras 11a to 11d.
  • the size of each image shown in FIGS. 5A to 5D is 480 ⁇ 640 pixels
  • compression processing is performed so that the size of the monitoring image K is 1280 ⁇ 240 pixels as shown in FIG. Do.
  • image processing and image reproduction can be performed.
  • the monitoring terminal device 10 generates a monitoring image with the specified image quality when the acquired monitoring image transmission command includes a command specifying the image quality.
  • the captured images in four directions (four) are generated even if the monitoring image is generated with double or three times the image quality. The amount of information can be reduced as compared with the monitoring image generated based on.
  • control device 14 of the present embodiment can also attach a line figure indicating the boundary between the arranged images to the monitoring image K.
  • the control device 14 displays rectangular partition images Bb, Bc, Bd, Ba, Ba ′ between the images as line figures indicating the boundaries between the arranged images. It can be attached to the monitoring image K.
  • the partition image functions as a frame of each captured image.
  • the image distortion is large in the vicinity of the boundary of each captured image, it is possible to hide the image of the region with large distortion or to suggest that the distortion is large by arranging the partition image at the boundary of the captured image. .
  • control device 14 can generate the monitoring image K after correcting the distortion when four images are projected on the projection plane set on the side surface of the projection model described later.
  • image distortion is likely to occur.
  • the captured image tends to be largely distorted. Therefore, it is defined in advance to correct the image distortion. It is desirable to correct the distortion of the captured image using the image conversion algorithm and the correction amount.
  • the control device 14 reads information on the same projection model as the projection model for projecting the monitoring image K in the central monitoring device 20 from the ROM, and takes a captured image on the projection plane of the projection model.
  • the distortion generated on the projection plane can be corrected in advance.
  • the image conversion algorithm and the correction amount can be appropriately defined according to the characteristics of the camera 11 and the shape of the projection model. In this way, by correcting in advance the distortion when the image K is projected with respect to the projection plane of the projection model, it is possible to provide the monitoring image K with good visibility with less distortion. Further, by correcting the distortion in advance, it is possible to reduce the positional deviation between the images arranged side by side.
  • mapping information addition function will be described.
  • the control device 14 projects the generated monitoring image K on the projection plane set on the side surface of the columnar projection model M with the ground contact surface of the passenger car V as the bottom surface.
  • the process of associating the mapping information with the monitoring image K is executed.
  • the mapping information is information for allowing the central monitoring device 20 that has received the monitoring image K to easily recognize the projection reference position.
  • FIG. 8 is a diagram showing an example of the projection model M of the present embodiment
  • FIG. 9 is a schematic sectional view taken along the xy plane of the projection model M shown in FIG.
  • the projection model M of the present embodiment is a regular octagonal prism body having a regular octagonal bottom surface and a height along the vertical direction (z-axis direction in the figure).
  • the shape of the projection model M is not particularly limited as long as it is a column having side surfaces adjacent to each other along the boundary of the bottom surface, and is a cylinder, or a prism, such as a triangular column, a quadrangular column, or a hexagonal column, or An anti-rectangular column having a polygonal bottom surface and a triangular side surface can also be used.
  • the bottom surface of the projection model M of this embodiment is parallel to the ground contact surface of the passenger car V.
  • Projection surfaces Sa, Sb, Sc, and Sd (hereinafter collectively referred to as a projection surface S) that project an image around the passenger vehicle V that contacts the bottom surface of the projection model M are provided on the inner surface of the side surface of the projection model M. Is set.
  • the projection surface S includes a part of the projection surface Sa and a part of the projection surface Sb, a part of the projection surface Sb and a part of the projection surface Sc, a part of the projection surface Sc and a part of the projection surface Sd, and the projection surface Sd. And a part of the projection surface Sa.
  • the monitoring image K is projected on the projection plane S as an image of the passenger car V viewed from above the viewpoint R (R1 to R8, hereinafter referred to as viewpoint R) above the projection model M surrounding the passenger car V.
  • the control device 14 associates the reference coordinates of the captured image arranged at the right end or the left end with the monitoring image K as mapping information.
  • the control device 14 is arranged at the right end as mapping information (reference coordinates) indicating the start end position or the end position of the monitoring image K when projected onto the projection model M.
  • mapping information reference coordinates
  • the coordinates A (x, y) of the upper left vertex of the captured image GSP1 and the coordinates B (x, y) of the upper right vertex of the captured image GSP2 arranged at the left end are attached to the monitoring image K.
  • the reference coordinates of the captured image indicating the start position or the end position are not particularly limited, and may be the lower left vertex of the monitoring image K arranged at the left end or the lower right vertex of the monitoring image K arranged at the right end.
  • the mapping information may be attached to each pixel of the image data of the monitoring image K, or may be managed as a file different from the monitoring image K.
  • the information indicating the start position or the end position of the monitoring image K is associated with the monitoring image K as mapping information, whereby the central monitoring apparatus 20 that has received the monitoring image K Since the reference position at the time of the projection process can be easily recognized, the monitoring images K arranged in the order of arrangement of the cameras 11a to 11d are sequentially and easily projected onto the projection surface S on the side surface of the projection model M. Can do. That is, as shown in FIG. 9, the captured image GSP1 in front of the moving body V is projected onto the projection surface Sa located in the imaging direction of the camera 11a, and the right side of the moving body V is projected onto the projection surface Sb located in the imaging direction of the camera 11b.
  • the captured image GSP2 is projected, the captured image GSP3 behind the moving body V is projected onto the projection surface Sc located in the imaging direction of the camera 11c, and the left side of the moving body V is projected onto the projection surface Sd located in the imaging direction of the camera 11d.
  • One captured image GSP4 can be projected.
  • the monitoring image K projected on the projection model M can show an image that can be seen as if looking around the passenger car V.
  • the monitoring image K including four images arranged in a line in the horizontal direction in accordance with the installation order of the cameras 11a to 11d is projected on the side surfaces arranged in the horizontal direction in the column of the projection model M.
  • An image around the passenger car V can be reproduced in the monitoring image K projected on the projection plane S of the body projection model M while maintaining the positional relationship.
  • control device 14 of the present embodiment can store the correspondence between the coordinate values of the monitoring image K and the coordinate values of the projection planes S of the projection model M as mapping information, and attach it to the monitoring image K.
  • it may be stored in the central monitoring device 20 in advance.
  • the positions of the viewpoint R and the projection plane S shown in FIGS. 8 and 9 are examples, and can be arbitrarily set.
  • the viewpoint R can be changed by the operation of the operator.
  • the relationship between the viewpoint R and the projection position of the monitoring image K is defined in advance, and when the position of the viewpoint R is changed, a predetermined coordinate transformation is performed, so that the viewpoint R is viewed from the newly set viewpoint R.
  • the monitoring image K can be projected onto the projection surface S (Sa to Sd). A known method can be used for this viewpoint conversion processing.
  • the control device 14 generates the monitoring image K based on the monitoring image captured at a predetermined timing, and the monitoring image K includes line information (partitions) indicating mapping information, reference coordinates, and boundaries. Image) information is associated and stored over time according to the imaging timing.
  • the control device 14 may store the monitoring image K as one moving image file including a plurality of monitoring images K per predetermined unit time, or in a form that can be transferred / reproduced by a streaming method.
  • the monitoring image K may be stored.
  • the communication device 23 of the central monitoring device 20 receives the monitoring image K transmitted from the monitoring terminal device 10 and the mapping information associated with the monitoring image K.
  • the images of the four cameras 11 installed at different positions of the body of the passenger car V are installed along the clockwise or counterclockwise direction along the outer periphery of the body of the passenger car V.
  • the cameras 11a to 11d are arranged according to the installation order (clockwise or counterclockwise order along the outer periphery of the body of the moving body V).
  • the monitoring image K is associated with mapping information for projecting the monitoring image K onto the projection plane S of the octagonal prism projection model M.
  • the communication device 23 sends the acquired monitoring image K and mapping information to the image processing device 22.
  • the image processing apparatus 22 reads the projection model M stored in advance, and sets it on the side surface of the octagonal prism projection model M with the ground contact surface of the passenger car V shown in FIGS. 8 and 9 as the bottom surface based on the mapping information.
  • a display image is generated by projecting the monitoring image K onto the projected planes Sa to Sd. Specifically, according to the mapping information, each pixel of the received monitoring image K is projected onto each pixel of the projection surfaces Sa to Sd. Further, when projecting the monitoring image K onto the projection model M, the image processing device 22 recognizes the start point of the monitoring image K (the right end or the left end of the monitoring image K) based on the reference coordinates received together with the monitoring image K.
  • the projection processing is performed so that the start point coincides with the start point (the right end or the left end of the projection surface S) defined in advance on the projection model M. Further, when projecting the monitoring image K onto the projection model M, the image processing device 22 arranges a line figure (partition image) indicating the boundary of each image on the projection model M.
  • the partition image can be attached to the projection model M in advance, or can be attached to the monitoring image K after the projection processing.
  • the display 24 displays the monitoring image K projected on the projection plane S of the projection model M.
  • 10 to 17 show examples of display images of the monitoring image K.
  • FIG. 10 shows a monitoring image K projected on the projection surfaces Sd, Sa, Sb viewed from the viewpoint R1 shown in FIGS.
  • An image of the moving body V viewed from each viewpoint R is pasted on the bottom surface of the projection model M.
  • a portion where no image is displayed between the projection surfaces Sd, Sa, and Sb is a “line figure indicating a boundary (partition image)”.
  • FIG. 11 shows the monitoring image K viewed from the viewpoint R2
  • FIG. 12 shows the monitoring image K viewed from the viewpoint R3
  • FIG. 13 shows the monitoring image K viewed from the viewpoint R4
  • FIG. 15 shows the monitoring image K viewed from the viewpoint R5,
  • FIG. 15 shows the monitoring image K viewed from the viewpoint R6,
  • FIG. 16 shows the monitoring image K viewed from the viewpoint R7, and
  • FIG. The observed monitoring image K is shown.
  • the terminal device 800 transfers the captured image of each camera 1 along the x-axis direction or the y-axis direction (sideways) according to the installation order of the cameras 1 installed on the body of the moving body V.
  • the arranged monitoring image K is mapped (laterally) along the side surface of the projection model M of the columnar body according to the arrangement order, the monitoring image K shown in the projection model M has a clock around the moving body V. It is possible to show an image that can be seen when looking around. That is, the supervisor can obtain the same information as when the user gets on the moving body V and looks around while watching the monitoring image K while staying at a position separated from the moving body V.
  • the captured image GSP1 of the camera 1a provided on the front grille of the moving body V is projected onto the projection surface S facing the front grille of the moving body V, and the projection surface S facing the right side mirror of the moving body V is projected.
  • the captured image GSP3 is projected, and the captured image GSP2 of the camera 1b provided on the left side mirror of the moving body V can be projected onto the projection surface S facing the left side mirror of the moving body V.
  • the monitoring image K projected while maintaining the positional relationship of the video around the moving object V.
  • the monitor can easily grasp what is happening around the moving body V.
  • FIGS. 10 to 17 attached to the present application are still images, the actual display image reproduction state cannot be shown.
  • the display screen of the display 24 is not displayed.
  • Each of the images shown on each projection plane S is a moving image. That is, the moving image of the imaging area SP1 in front of the moving body V is projected on the projection surface S facing the front grille of the moving body V, and the moving body V is projected on the projection surface S facing the right side mirror of the moving body V.
  • a moving image of the imaging area SP4 on the right side of the V is displayed, and a moving image of the imaging area SP3 behind the moving object V is displayed on the projection surface S facing the rear part of the moving object V, and the left side of the moving object V is displayed.
  • a moving image of the imaging region SP2 on the left side of the moving object V is projected. That is, a plurality of moving image monitoring images K based on captured images captured by different cameras 1 can be simultaneously reproduced on each projection plane S shown in FIGS.
  • the viewpoint can be freely set and changed by the operation of the supervisor. Since the correspondence relationship between the viewpoint position and the projection plane S is defined in advance in the image processing device 22 or the display 24 described above, the monitoring image K corresponding to the changed viewpoint is displayed on the display 24 based on this correspondence relationship. can do.
  • FIG. 18 is a flowchart showing the operation on the monitoring terminal device 10 side.
  • the central management device 20 acquires the position information and monitoring information of the moving object V from the monitoring terminal device 10 mounted on the moving object V at a predetermined period. Accumulate in an accessible database.
  • monitoring information is collected and accumulated at a predetermined cycle set in advance, but monitoring information can be collected and accumulated under the control of the central management device 20. That is, the monitoring terminal device 10 can be configured to upload (send) monitoring information only when a monitoring information request command is received from the central monitoring device 20.
  • step 20 as shown in the upper left of FIG. 1 on the map information of the map database displayed on the display 24, the current position of the moving body V (traveling position at the imaging timing) based on the position information acquired in step 10 is displayed. Display dots superimposed. By looking at this map information, it is possible to see at a glance at which position the moving body V carrying the monitoring terminal device 10 is traveling. In other words, it is possible to identify the moving object V on which the monitoring terminal device 10 existing at the position to be monitored is mounted. Since the position information of the moving object V is acquired and transmitted at a predetermined timing for each routine of FIG. 18, the monitor can grasp the current position of the moving object V in a timely manner.
  • the central monitoring device 20 determines whether or not the moving object V that is a target for transmitting monitoring information has been selected.
  • the movement schedule (positional change over time) of the moving object V is known in advance, such as a traveling bus
  • the moving object V to which monitoring information is to be transmitted can be selected based on the movement schedule.
  • the moving schedule of the moving object V is not known as in a taxi that travels at random
  • the position of the moving object V displayed in step 20 is referred to, and the vicinity of the accident occurrence point and the accident sighting information are obtained. It is possible to select a moving body V existing at a position to be monitored such as the vicinity of the notified moving body V.
  • Selection of the moving body V that is, the monitoring terminal device 10 can be performed via the input device 25 of the central monitoring device 20. For example, by selecting a dot indicating the position of the moving object V superimposed on the map information shown in FIG. 1, the moving object selection information can be input to the central monitoring device 20.
  • the process proceeds to step 40. If the moving object V (monitoring terminal device 10) is not selected, the process returns to step 10 to accumulate the monitoring images acquired in a predetermined cycle. Repeat processing and display.
  • step 40 the central monitoring apparatus 20 determines whether or not an input for specifying a gaze direction or a gaze area has been made. If the input for specifying the gaze direction or the gaze area is not input, the process proceeds to step 41, and a preset default gaze direction or gaze area is identified.
  • the default gaze direction is not particularly limited, but can be the traveling direction of the moving object V.
  • the default gaze area is not particularly limited, but it can be set to 135 degrees (total of 270 degrees) around the moving direction of the moving body. This is because the moving body V moves along the traveling direction, so that there is a high possibility that a useful image is an image in the traveling direction. Thus, by setting the default gaze direction and gaze area, it is possible to reduce the operation burden on the supervisor.
  • the gaze direction or gaze area is specified, the process proceeds to step 50.
  • FIG. 19 is an example of a monitoring image K sent from the monitoring terminal device 10 side in the previous process and displayed on the display 24.
  • the display 24 is a touch panel display
  • the supervisor touches the point PR on the display 24
  • the direction of the point PR can be specified as the gaze direction.
  • the left side camera 11b of the monitoring image K performs input for selecting the captured image GSP2 obtained by imaging the area SP2.
  • the supervisor can input the left direction of the moving object V as the gaze direction by touching the point PR of the area where the captured image GSP2 is presented on the touch panel display 24.
  • the point PR and PR1 and PR2 which will be described later, are marks indicating the place where the monitor touches for convenience, and do not constitute the monitoring image K.
  • the central monitoring device 20 generates and selects a monitoring information transmission command for generating a captured image based on one image including the point PR corresponding to the gaze direction, that is, one captured image GSP2 of the left-side camera 11b.
  • the monitoring terminal device 10 that has acquired the monitoring information transmission command generates the monitoring image K based only on the captured image GSP2. That is, the captured images GSP1, GSP3, and GSP4 that capture an area other than the area W0 are not used for generating the monitoring image K and are not included in the monitoring image K. Thereby, the information amount of the monitoring image K can be reduced by the amount of information corresponding to the three images of the captured images GSP1, GSP3, and GSP4.
  • the process when the gaze area is set based on the gaze direction input by the central monitoring device 20 will be described.
  • the touch panel display 24 that displays the monitoring image K as shown in FIG. 20, when the monitor touches a point PR on the display 24, the left direction of the moving object V can be input as the gaze direction.
  • the central monitoring device 20 sets a range of 270 degrees on the left and right sides as the gaze area around the gaze direction corresponding to the point PR.
  • the central monitoring device 20 has a total of three images including the captured image GSP2 corresponding to this gaze area and the two images on the left and right sides thereof, that is, the captured image GSP1 captured by the front camera 11a in the area SP1, and the left-side camera.
  • 11b is a captured image GSP2 captured from the area SP2
  • a rear camera 11c generates a monitor information transmission command for generating a captured image based on the captured image in the area W1 including the captured image GSP3 captured from the area SP3. It is sent to the terminal device 10.
  • the monitoring terminal device 10 that has acquired the monitoring information transmission command generates the monitoring image K based only on the three images of the captured images GSP1, GSP2, and GSP3. That is, the information amount of the monitoring image K can be reduced by the amount of information corresponding to one image corresponding to the captured image GSP4 that captures an area other than the area W1.
  • the central monitoring device 20 has a total of two images including half of the left and right images around the point PR indicating the gaze direction, that is, imaging in which the front camera 11a images the area SP1.
  • the area W2 including the image can be set as the gaze area.
  • the half of the captured image GSP1, the half of the captured image GSP3, and the captured image GSP4 in the region other than the area W2 are not included in the monitoring image K.
  • the monitoring image K has an amount of information corresponding to a total of two images of a half image of GSP1 that captures an area other than the area W2, a half image of GSP3, and a single image of GSP4.
  • the amount of information can be reduced.
  • the monitor when the monitor performs an operation of stroking the touch panel display 24, a change in the specified gaze direction can be obtained, so the gaze area is set based on the change in the gaze direction. can do.
  • the supervisor performs an operation of stroking along the arrow shown in the drawing from the point PR1 in the area where the captured image GSP2 is presented to the point PR2 in the area where the captured image GSP3 is presented, Changes from the left to the rear, and the gaze region can be determined to be a region from the left side of the moving object V to the rear.
  • the central monitoring device 20 includes a captured image GSP2 in which the left side camera 11b corresponding to the gaze area applied from the left side to the rear captures the area SP2, a captured image GSP3 in which the rear camera 11c images the area SP3, and a right side image.
  • the camera 11d generates a monitoring information transmission command for generating a captured image based on the captured image of the area W3 including the captured image GSP4 obtained by capturing the area SP4, and transmits it to the selected monitoring terminal device 10.
  • the monitoring terminal device 10 that has acquired the monitoring information transmission command generates the monitoring image K based only on the captured images GSP2, GSP3, and GSP4. That is, the information amount of the monitoring image K can be reduced by the amount of information corresponding to the captured image GSP1 that captures an area other than the area W1.
  • a total of three images including one left and right image centered on the point PRa indicating the direction that is, a captured image GSP1 in which the front camera 11a images the area SP1, a captured image GSP4 in which the right side camera 11d images the area SP4, and the rear
  • the camera 11c specifies the area W1 including the captured image GSP3 obtained by capturing the area SP3 as a gaze area, and sends a monitoring image transmission command for generating a monitoring image of the gaze area to the monitoring terminal device 10.
  • the front camera 11a picks up the picked-up image GSP1 of the area SP1
  • the right-side camera 11d picks up the picked-up image GSP4 of the area SP4, and the rear camera 11c.
  • the monitoring image K created and transmitted based on such a monitoring image transmission command is as shown in FIG. 12, but the monitoring image K is not displayed in the portion where the left side camera 11b indicates the area SP2. . Thereby, the information amount of the monitoring image for one sheet can be reduced.
  • the central monitoring device 20 sets a region from the right to the rear as the gaze region, and the right side camera 11d including the point PRb captures the area SP4 and includes a total of three images including three images from the captured image GSP4. That is, the monitoring image transmission command for generating the monitoring image including the captured image GSP4, the captured image GSP3 in which the rear camera 11c images the area SP3, and the captured image GSP2 in which the left side camera 11b images the area SP2 is monitored. It is sent to the terminal device 10.
  • the right-side camera 11d picks up the picked-up image GSP4 of the area SP4
  • the rear camera 11c picks up the picked-up image GSP3 of the area SP3, and the left-side camera. Only the captured image GSP2 in which the area SP2 images the area SP2 is used, and the captured image GSP1 in which the front camera 11a images the area SP1 is not used.
  • the monitoring image K created and transmitted based on such a monitoring image transmission command is as shown in FIG. 14, but the monitoring image K is not displayed in the portion where the front camera 11a indicates the area SP1. Thereby, the information amount of one monitoring image can be reduced.
  • step 60 if information specifying image quality is input in step 50, the process proceeds to step 60.
  • the default image quality is read and the process proceeds to step 60.
  • the specified image quality and the default image quality are both higher than the predetermined image quality before the gaze direction or gaze area is identified in step 40. Thus, by setting the default image quality, it is possible to reduce the input load on the supervisor.
  • the central monitoring device 20 is a monitoring image of the gaze direction or gaze area specified in steps 40 and 41, and further the image quality (gaze direction or gaze area specified in steps 50 and 51 is specified).
  • a monitoring image transmission command including a command to generate and transmit a monitoring image having a higher image quality than a predetermined image quality before transmission) is sent to the monitoring terminal device 10 of the moving object V selected in step 30.
  • step 70 the monitoring image generated in accordance with the monitoring image transmission command is acquired from the monitoring terminal device 10.
  • step 80 the central monitoring apparatus 20 causes the display 24 to display the acquired gaze direction or gaze area monitoring image. Thereafter, the processing after step 10 is repeated at a predetermined cycle.
  • FIG. 23 is a flowchart illustrating a control procedure of the monitoring terminal device 10 according to the present embodiment.
  • the monitoring terminal device 10 acquires captured images of the cameras 11a to 11d at a predetermined cycle.
  • the acquired captured image is stored at least temporarily in association with the imaging time. This is because there is a possibility that a captured image may be necessary in the post-verification even in a direction other than the gaze direction.
  • step 120 the monitoring terminal device 10 determines whether or not a monitoring image transmission command has been acquired from the central monitoring device 20 via the telecommunication network 30.
  • the monitoring terminal device 10 acquires this monitoring image transmission command, the monitoring terminal device 10 performs the processing after step 130.
  • the monitoring image generated based on the captured image acquired in step 110 is transmitted to the central monitoring device 20 via the telecommunication network 30 (step 180). , Repeatedly according to a predetermined rule including a cycle.
  • the monitoring image transmitted at this time is generated based on the omnidirectional captured images captured by the cameras 11a to 11d.
  • the monitoring terminal device 10 identifies a specified specific monitoring direction or monitoring area in the monitoring image transmission command. If the monitoring image transmission command does not include the designation of a specific monitoring direction or monitoring area, the process proceeds to step 140, where it is identified that a preset default direction is specified.
  • the monitoring image transmission command includes designation of a specific monitoring direction or monitoring area
  • the forward direction / front side of the moving object V is determined as in step 141 according to the designated direction / area. It is identified that the area is designated, and it is identified that the right and right areas of the moving object V are designated as in step 142, and the left and left areas of the moving object V are identified as in step 143. It is identified that it is designated, or it is identified that the rearward / rear area of the moving object V is designated as in step 144.
  • step 150 the monitoring terminal device 10 determines whether or not image quality is specified in the monitoring image transmission command. If the image quality designation is not included in the monitoring image transmission command, the process proceeds to step 160, where a preset default image quality is read and identified. On the other hand, if the surveillance image transmission command includes designation of image quality, the process proceeds to step 170.
  • step 170 the monitoring terminal apparatus 10 generates a monitoring image of the monitoring direction / monitoring area identified in step 130 and having the image quality specified in step 150.
  • the monitoring terminal device 10 sends the generated monitoring image K to the central monitoring device 20 via the telecommunication network 30.
  • the monitoring image K generated according to the monitoring image transmission command is generated based on a captured image obtained by capturing the specified gaze direction or gaze area. That is, an image based on a captured image obtained by capturing a direction or area other than the specified gaze direction or gaze area is not included.
  • the information amount of the monitoring image generated when the monitoring image transmission command is acquired can be made smaller than the information amount generated before the monitoring image transmission command is acquired.
  • the monitoring system 1 of the present example transmits a monitoring image in a specific gaze direction that is actually required by the monitor among images captured by the cameras 11a to 11d of a plurality of moving bodies V that travel at random. Since the transmission of the monitoring image which is not required by the supervisor is suppressed, the communication amount can be reduced while maintaining the monitoring level.
  • the monitoring system 1 of the present example transmits a monitoring image of the gaze area set based on the specified gaze direction that is actually required by the monitor, and transmits the monitoring image that is not required by the monitor. Therefore, the amount of communication can be reduced while maintaining the monitoring level.
  • the monitoring system 1 of the present example sets the gaze area based on the temporal change in the gaze direction, it is possible to obtain a monitoring image of an appropriate area when the monitor wants to track the monitoring target. it can.
  • the monitoring system 1 of this example improves the image quality instead of narrowing the range when specifying the gaze direction, it is possible to obtain a monitoring image with a high resolution for the area that the monitor wants to gaze at.
  • the monitoring system 1 of this example When a specific gaze direction is not input, the monitoring system 1 of this example generates a monitoring image of a preset default gaze direction that is predicted to be monitored by the monitor in a normal state. Therefore, the operation burden on the observer can be reduced.
  • the position detection means is provided in the monitoring terminal device 10 of the monitoring system 1 of the present example, even if the moving body V moves randomly (the moving schedule is not determined), the position of the moving body V is Based on this, it is possible to extract the moving body V that generates a monitoring image of the gaze direction or the gaze area, and send a monitoring image transmission command to the moving body V.
  • the captured image of the camera is in accordance with the installation order of the camera.
  • Mapping information for generating a single monitoring image arranged and projecting the monitoring image onto a projection plane set on a side surface of a projection model of a column with the placement surface of the moving body as a bottom surface Since the image is added in association with the image, a series of monitoring images K in which a plurality of captured images are arranged in the camera installation order can be projected onto the projection surface S set on the side surface of the column. For this reason, irrespective of the function with which each terminal device is equipped, the monitoring image K produced
  • the monitoring system 1 including the monitoring terminal device 10 and the central monitoring device 20 will be described as an example of the monitoring system including the monitoring terminal device and the central monitoring device according to the present invention. It is not limited to this.
  • a command generation function a command generation function, a control device 21 having a command transmission function, an image processing device 22,
  • the central monitoring device 20 including the communication device 23, the display 24, and the input device 25 will be described as an example, but is not limited thereto.
  • the monitoring terminal device including the monitoring image generation unit, the monitoring image transmission unit, and the position detection unit according to the present invention
  • the monitoring terminal device 10 including the cameras 11a to 11d, the image processing device 12, the communication device 13, and the position detection device 15 will be described as an example.
  • the present invention is not limited to this.
  • the position information of the passenger car V and the monitoring images from the cameras 11a to 11d are acquired.
  • the monitoring image from the fixed camera 11f installed in the city shown in FIG. You may get it.
  • the passenger car V which acquires a positional information and a monitoring image it is desirable to use the taxi V1 and bus

Abstract

　監視端末装置１０と中央監視装置２０とを備え、中央監視装置２０は、監視者により注視したい注視方向が特定された場合に、特定された注視方向の監視画像を生成し、この監視画像を中央監視装置２０へ送出させる監視画像送出命令を生成する命令生成機能と、生成された監視画像送出命令を、選択された監視端末装置に送出する命令送出機能とを備え、監視端末装置１０は、各移動体Ｖの周囲を撮像するカメラ１１と、中央監視装置２０から取得した監視画像送出命令に従い、この監視画像送出命令に含まれる注視方向を撮像した撮像画像に基づいて監視画像を生成する監視画像生成機能と、生成された監視画像を含む監視情報を、中央監視装置に送出する監視情報送出機能と、を備える監視システムを提供する。

Description

監視システム
　本発明は、監視システムに関するものである。
　本出願は、２０１１年１２月２２日に出願された日本国特許出願の特願２０１１―２８０９１３に基づく優先権を主張するものであり、文献の参照による組み込みが認められる指定国については、上記の出願に記載された内容を参照により本出願に組み込み、本出願の記載の一部とする。
　商店街、店舗の出入り口、家庭の玄関その他の街中に複数の防犯カメラ装置を設置し、当該防犯カメラ装置により撮像された周囲の映像を監視することで、異常の発生を検出する防犯装置が知られている（特許文献１）。
特開２０１１－２１５７６７号公報
　しかしながら、街中に設置した防犯カメラ装置は、同じ方向の所定のエリアを画一的に撮像して監視者に送信するので、監視者が注視したい方向を特定できる場合であっても、それ以外の方向の画像も送信するため、通信量が嵩むという問題がある。
　本発明は、監視者に送信する画像を低減し、通信量を低減させることができる監視システムを提供することを目的とする。
　本発明は、移動体に搭載された監視端末装置に、監視者が注視したい特定の注視方向の監視画像を生成及び送出させることにより、上記目的を達成する。
　本発明によれば、ランダムに走行する複数の移動体のカメラの撮像画像のうち、監視者が注視したい特定の注視方向の撮像画像に基づいて監視画像を生成及び送出させ、監視者が注視する必要が無いと判断した方向の監視画像の生成及び送出を抑制するので、監視レベルを維持しつつも通信量を低減させることができる。
本発明の一実施の形態に係る監視システムを示す模式図である。 図１の監視システムを示すブロック図である。 図２の監視システムにおけるカメラの配置例を示す斜視図である。 図２の監視システムにおけるカメラの撮像範囲を示す平面図である。 フロントのカメラの撮影画像の一例を示す図である。 右サイドのカメラの撮影画像の一例を示す図である。 リアのカメラの撮影画像の一例を示す図である。 左サイドのカメラの撮影画像の一例を示す図である。 複数の画像に基づいて生成された監視画像の一例を示す図である。 監視画像の歪み補正処理を説明するための図である。 投影モデルの一例を示す模式図である。 図８に示す投影モデルのｘｙ面に沿う断面模式図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第１図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第２図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第３図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第４図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第５図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第６図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第７図である。 中央監視装置のディスプレイに示される表示画像の一例を示す第８図である。 図１の監視システムの中央監視装置側の主たる制御内容を示すフローチャートである。 監視方向／監視範囲を指定する手法を説明するための第１図である。 監視方向／監視範囲を指定する手法を説明するための第２図である。 監視方向／監視範囲を指定する手法を説明するための第３図である。 監視方向／監視範囲を指定する手法を説明するための第４図である。 図１の監視システムの監視端末装置側の主たる制御内容を示すフローチャートである。
　以下に示す一実施の形態は、本発明に係る監視システムを、複数の移動体に搭載したカメラの撮像画像を用いて、街中の治安を警察署や消防署などの当局や警備委託会社などの監視者にて集中監視する監視システム１に具体化したものである。
　複数の移動体に搭載された監視端末装置１０のそれぞれは、その位置情報と、当該移動体の周囲の監視画像と、時刻情報とを所定のタイミングで取得し、これら位置情報と監視画像と時刻情報と含む監視情報を、無線通信を介して、監視者側に設置された中央監視装置２０へ送出する。中央監視装置２０は、監視端末装置１０から取得した監視画像及び位置情報を少なくとも含む監視情報を蓄積し、ディスプレイなどを介して移動体の位置情報を地図情報に重畳表示するとともに、必要に応じて各移動体又は各位置において撮像された監視画像と時刻情報と表示する。そのため、本例の監視システム１は、図１に示すように、移動体Ｖに搭載され、位置情報及び監視画像などの監視情報を送出する監視端末装置１０と、電気通信回線網３０を介して監視情報を取得して処理する中央監視装置２０とを備える。
　特に、本実施形態に係る監視システム１は、監視者側において注視したい特定の注視方向が入力された場合には、特定された注視方向の監視画像を生成させるとともに、その生成された監視画像を含む監視情報を監視者へ送出させる監視画像送出命令を生成して、無線通信を介して監視画像送出命令を送出する。そして、移動体Ｖ側において無線通信を介して取得した監視画像送出命令に従い、監視画像送出命令に含まれる注視方向を移動体に設けられたカメラで撮像した撮像画像に基づいて監視画像を生成し、無線通信を介して監視画像を含む監視情報を監視者側へ送出する。これにより、監視者側は自身が発した監視画像送出命令に従って生成された監視者が注視したい注視方向の監視画像を含む監視情報を取得する。なお、特定の注視方向は予め定義しておくことができる。たとえば、入力負荷の軽減を図る観点からは、移動体Ｖの前方方向をデフォルトの注視方向として設定しておくことができる。
　監視者は、地図情報に重畳表示された移動体の位置や、予め取得した移動体Ｖの移動スケジュールなどに基づいて、監視画像を生成させたい移動体Ｖを選択することができる。また、監視者は、移動体Ｖの位置や進行方向を基準とし、事故が発生した場所、通報により指定された場所、監視したい場所その他の注目ポイントに応じて注視したい方向を特定する。監視者は、選択した移動体Ｖを特定する情報及び注視したい方向を特定する情報を中央監視装置２０に入力する。
　移動体の特定情報及び注視方向の特定情報を受け付けた中央監視装置２０は、選択した移動体に対して、移動体Ｖのカメラが撮像可能な方向のうち、特定された注視方向の監視画像を生成させる監視画像送出命令を生成し、無線通信を介して特定された移動体の監視端末装置１０へ向けて送出する。この監視画像送出命令を取得した移動体Ｖの監視端末装置１０は、移動体Ｖに設けられたカメラで撮像した撮像画像のうち、監視画像送出命令に含まれる注視方向の撮像画像に基づいて生成した監視画像を含む監視情報を、無線通信を介して中央監視装置２０へ送出する。このように、中央監視装置２０と移動体Ｖの監視端末装置１０は協働して街中を監視する監視情報を監視者に提供する。
　また、監視端末装置１０が搭載される移動体Ｖは、目的とする監視領域を走行するものであれば特に限定されず、自動車、二輪車、産業車両、路面電車などの移動体Ｖを含む。図１に示すように、自動車には自家用自動車Ｖ２や緊急自動車Ｖ３が含まれるが、なかでも特に予め決められた領域をランダム且つ常時走行するタクシーや路線バスＶ１などが好適に含まれる。図１には、タクシーＶ１、自家用自動車Ｖ２、パトカー、消防車又は救急車などの緊急自動車Ｖ３を例示するが、これらを総称する場合は移動体Ｖまたは乗用車Ｖという。
　図２は、中央監視装置２０及び監視端末装置１０の具体的構成を示すブロック図である。
　監視端末装置１０と中央監視装置２０とは電気通信回線網３０を介して通信が可能である。監視端末装置１０の通信装置２３は、無線通信が可能な通信手段であり、電気通信回線網３０を介して中央監視装置２０の通信装置２３と情報の授受を実行する。電気通信回線網３０が商用電話回線網である場合は携帯電話通信装置を汎用することができ、電気通信回線網３０が本例の監視システム１の専用電気通信回線網である場合は、それ専用の通信装置２３，１３を用いることができる。なお、電気通信回線網３０に代えて、無線ＬＡＮ、ＷｉＦｉ（登録商標）、ＷｉＭＡＸ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、専用無線回線などを用いることもできる。
　中央監視装置２０は、移動体Ｖのカメラの撮像画像により街中を監視するために、移動体Ｖのそれぞれに搭載された監視端末装置１０から送出された位置情報及び監視画像をデータベースに入力する情報入力機能と、地図データベースから読み出した地図情報に受信した位置情報をディスプレイ２４に重畳表示するとともに、受信した監視画像をディスプレイ２４に表示する表示制御機能と、を有する。
　さらに、本実施形態の中央監視装置２０は、監視者が提示された地図情報上の移動体Ｖの位置を参照して注視したい注視方向を入力した場合に、各移動体Ｖの監視端末装置１０に対する監視画像送出命令を生成する命令生成機能と、この生成した監視画像送出命令を監視端末装置１０へ送出する命令送出機能とを有する。そのため、中央監視装置２０は、中央制御装置２１、画像処理装置２２、通信装置２３、ディスプレイ２４及び入力装置２５を備える。なお、本実施形態の中央監視装置２０は、監視情報を蓄積するデータベースを中央監視装置２０の内部に有するが、アクセス可能であれば中央監視装置２０の外部に設けることもできる。
　中央制御装置２１は、ＣＰＵ，ＲＯＭ，ＲＡＭにより構成され、画像処理装置２２、通信装置２３及びディスプレイ２４を制御して、監視端末装置１０から送信された位置情報、監視画像及び時刻情報を受信し、必要に応じて画像処理を施したうえでディスプレイ２４に表示する。
　中央制御装置２１は、監視者から注目したい注視方向を特定する情報が入力された場合に、複数の移動体Ｖのうちの一又は複数の移動体Ｖを選択し、この選択された移動体Ｖの監視端末装置１０に特定された注視方向の監視画像を生成させ、生成した監視画像を中央監視装置２０へ送出させる指令を含む監視画像送出命令を生成して、選択された監視端末装置１０へそれぞれ送出する。このため、監視画像送出命令には、選択した移動体Ｖの監視端末装置１０を識別するための通信ＩＤその他の識別子が含まれている。移動体Ｖの選択は、入力装置２５から入力された移動体Ｖの選択命令に基づいて行うことができる。また、外部から入力された事故発生地点の近傍エリアに存在する移動体Ｖや、事故発生を通報した移動体Ｖの近傍エリアに存在する移動体Ｖや、予め重点的に監視を行う地点として定義されている重点監視地点の近傍エリアに存在する移動体Ｖなどを自動的に抽出することにより、一又は複数の移動体Ｖを選択してもよい。
　本実施形態における監視画像送出命令に含まれる注視方向は、監視に用いられる画像に映し出される映像を見たときの視線方向に対応する。具体的には、監視端末装置１０側において監視用の画像を撮像するカメラの光軸（撮像方向）に対応する。監視画像送出命令における注視方向は、移動体Ｖの進行方向を基準として定義することができる。たとえば、注視方向は、移動体の前方(移動体の進行方向と同じ方向)、移動体の後方（移動体の進行方向とは反対の方向）、移動体の進行方向の右方向、移動体の進行方向の左方向、移動体の進行方向の右前方向、移動体の進行方向の右後方向、移動体の進行方向の左前方向、移動体の進行方向の左前方向などの特定された方向に応じて、監視端末装置１０において識別可能な「注視方向」を示す情報として監視画像送出命令に含ませることができる。もちろん、この注視方向は、画像処理に用いられる座標その他の座標系において、移動体Ｖの位置に応じた原点に対する角度や方位により定義することもできる。
　特に限定されないが、この注視方向は一つの方向を示し、移動体Ｖの監視端末装置１０は、注視方向に基づいて、注視方向を撮像するカメラ１１又はこのカメラ１１により撮像された撮像画像を特定することができる。本実施形態のカメラ１１ａ～１ｄは移動体Ｖのボディの異なる位置に一つずつ設けられているので、注視方向が一つの方向を示す場合には、一のタイミングにおいて撮像された注視方向の撮像画像は一枚となる。
　また、特に限定されないが、注視方向には所定の幅（角度）を持たせることができる。つまり、一つの方向を示す注視方向を基準とした所定値域の角度に含まれる注視方向が示す領域を注視領域として定義することができる。たとえば、特定された注視方向を中心とした左右方向（座標上ではプラス方向及びマイナス方向、プラス方向又はマイナス方向）に所定値域の角度に含まれる注視方向が示す領域を注視領域として定義することができる。具体的に、監視画像送出命令における「注視領域」は注視方向から右側又は左側へα度（９０度、１２０度など）というように、注視方向に基づいて定義することが可能である。このように注視方向に基づいて設定された注視領域は、監視画像送出命令に含ませることができる。移動体Ｖのボディの異なる位置に複数のカメラが一つずつ設けられ、異なる方向を撮像する場合には、一のタイミングにおいて指定された注視領域を撮像する撮像画像は複数枚となる。
　加えて、本実施形態では、特定された注視方向の経時的な変化に基づいて注視領域を設定することができる。具体的に、注視方向が前方向から右方向に変化した場合には、監視者が前方向から右方向に至る領域を注視したいと認められるので、この領域を「注視領域」として設定することができる。これにより、監視者側の中央監視装置２０は、監視対象の移動方向に応じて注視領域を設定する又は移動体Ｖの動きに応じて注視領域を設定することができる。
　中央制御装置２１は、監視端末装置１０に、監視者が注目する注視方向や注視領域を各移動体Ｖのカメラ１１で撮像した撮像画像に基づいて監視画像を生成させるので、監視端末装置１０から得た監視画像には監視者が注目する注視方向又は注視領域の映像が含まれる。このため、中央監視装置２０は、監視者が注視したい部分が映し出された監視画像を含む有用な監視情報を取得することができる。
　言い換えると、本実施形態における監視画像送出命令には、特定された注視方向又は注視領域の監視画像を生成させる指令、つまり、注視方向又は注視領域以外の監視画像の生成を禁止する指令が含まれる。本実施形態の監視画像送出命令によれば、監視端末装置１０は注視方向又は注視領域以外の画像情報は生成されない（禁止される）ので、生成される監視画像の情報量は必然的に小さくなり、中央監視装置２０へ送出される監視情報の情報量を低減させることができる。具体的に、注視方向の監視画像が一枚の撮像画像から生成される場合には、通常送られる監視画像がカメラ１１の台数に応じるので、カメラ１１の台数から１を引いた数の撮像画像分だけ送出に係る情報量を低減させることができる。同様に、注視方向の監視画像がＮ枚（Ｎは２以上の自然数）の撮像画像から生成される場合には、カメラ１１の台数からＮを引いた数の撮像画像分だけ送出に係る情報量を低減させることができる。このように、中央監視装置２０は注視方向又は注視領域の監視画像を取得するので、監視者は注視すべき方向の監視画像を確認して監視レベルを維持しつつ、監視端末装置１０から監視情報を送出する際の通信量を低減させることができる。
　また、本実施形態の中央制御装置２１は、監視者により注視方向が特定された場合には、この注視方向を特定する入力がされる前よりも高い画質で監視画像を生成させる指令を監視画像送出命令に含ませることができる。監視者が注視方向を特定すると、中央制御装置２１は、特定された注視方向のみ又は注視領域のみの監視画像を作成する旨の指令を含む監視画像送出命令を生成する。この監視画像送出命令によれば、注視方向又は注視領域以外の画像情報は生成されないから、中央監視装置２０へ送出される監視情報の情報量を低減させることができる。
　他方、監視者が注目したい注視方向の画像の解像度は高い方が好ましい。このため、本実施形態では、監視者により注視方向が特定された場合には、中央制御装置２１は、この特定前の画質よりも高い画質で監視端末装置１０に監視画像を作成させる指令を監視画像送出命令に含ませる。注視方向又は注視領域以外の画像情報は作成しないから、監視画像の画質を高くしても送信に係る全体の情報量の増加を抑制することができる。この結果、監視者が注目する注視方向又は注視領域の監視画像を高画質で生成しても、送信に係る全体の情報量を増加させずに中央監視装置２０に必要な監視情報を提供することができる。
　画像処理装置２２は、地図データベースを有し、当該地図データベースからの地図情報をディスプレイ２４に表示するとともに、監視端末装置１０の位置検出装置１５により検出された位置情報を当該地図情報上に重畳表示する。また、監視端末装置１０のカメラ１１で撮像され、画像処理装置１２で処理された監視画像をディスプレイ２４に表示するための画像処理を施す。
　ディスプレイ２４は、たとえば一つの画面上に２つ以上のウィンド画面が表示できる大きさの液晶表示装置又は２つ以上のウィンド画面をそれぞれ表示する２つ以上の液晶表示装置により構成することができる。そして、一のウィンド画面には、地図情報上に各移動体Ｖの位置情報を重ね合わせた画面を表示し（図１参照）、他方のウィンド画面には、移動体Ｖのカメラ１１で撮像された撮像画像に基づいて生成された監視画像を表示する。
　入力装置２５は、キーボード、マウス、タッチパネルなどの入力デバイスであり、所望の移動体Ｖを特定してその移動体Ｖに対して監視画像送出命令を出力したり、ディスプレイ２４に表示される各種情報の処理指令を入力したりする場合に用いられる。
　通信装置２３は、先述したとおり、無線通信が可能な通信手段であり、電気通信回線網３０を介して監視端末装置１０の通信装置１３と情報の授受を実行する。電気通信回線網３０が商用電話回線網である場合は携帯電話通信装置を汎用することができ、電気通信回線網３０が本例の監視システム１の専用電気通信回線網である場合は、それ専用の通信装置１３，２３を用いることができる。
　続いて、監視端末装置１０について説明する。監視端末装置１０は、複数の移動体Ｖにそれぞれ搭載される端末装置であって、これら複数の移動体Ｖのそれぞれの位置情報を検出する位置検出機能と、複数の移動体Ｖのそれぞれに装着されたカメラにより撮像された当該移動体Ｖの周囲の撮像画像に基づいて監視画像を生成する監視画像生成機能と、所定のタイミングで取得した位置情報、監視画像及び時刻情報を中央監視装置２０へ送出するとともに中央監視装置２０からの指令を受け付ける通信機能と、を有する。このため、各移動体Ｖは、複数のカメラ１１ａ～１１ｄ、画像処理装置１２、通信装置１３、制御装置１４、及び位置検出装置１５を備える。なお、時刻情報は主として事象の事後解析に供される情報であるため省略してもよい。
　それぞれの移動体Ｖに搭載された複数のカメラ１１は、ＣＣＤカメラなどで構成され、移動体Ｖの周囲の各所定方向乃至所定領域を撮像し、その撮像信号を画像処理装置１２へ出力する。画像処理装置１２は、カメラ１１からの撮像信号を読み出し、監視画像生成するための画像処理を実行する。この画像処理の詳細は後述する。
　位置検出装置１５は、ＧＰＳ装置及びその補正装置などで構成され、当該移動体Ｖの現在位置を検出し、制御装置１４へ出力する。
　制御装置１４は、ＣＰＵ，ＲＯＭ，ＲＡＭにより構成され、電気通信回線網３０及び通信装置１３を介して受信された中央監視装置２０からの監視画像送出命令を受け付け、画像処理装置１２、通信装置１３及び位置検出装置１５を制御し、画像処理装置１２で生成された監視画像と、位置検出装置１５で検出された移動体Ｖの位置情報と、ＣＰＵが内蔵する時計からの時刻情報とを含む監視情報を、通信装置１３及び電気通信回線網３０を介して中央監視装置２０へ出力する。
　監視画像を生成するにあたり、制御装置１４は、通信装置１３を介して中央監視装置２０から取得した監視画像送出命令に従い、この監視画像送出命令に含まれる注視方向を撮像した撮像画像に基づいて監視画像を画像処理装置１２に生成させる監視画像生成機能と、生成された監視画像を含む監視情報を、通信装置１３を介して中央監視装置２０に送出させる監視情報送出機能とを実行する。なお、制御装置１４は、中央監視装置２０から監視画像送出命令を受け付ける前においては、予め設定された所定のルールに従い、当該ルールにより指定されたデフォルトの一又は複数の方向を撮像した撮像画像に基づいて監視画像を画像処理装置１２に生成させ、通信装置１３を介して中央監視装置２０に送出させる。
　次にカメラ１１ａ～１１ｄの装着位置と撮像範囲について説明する。ここでは移動体Ｖとして乗用車Ｖを例に挙げて説明する。カメラ１１ａ～１１ｄはＣＣＤ等の撮像素子を用いて構成され、４つのカメラ１１ａ～１１ｄは乗用車Ｖの外部の異なる位置にそれぞれ設置され、移動体Ｖ周囲の前後左右の４方向をそれぞれ撮影する。
　例えば、図３に示すように、フロントグリル部分などの乗用車Ｖの前方の所定位置に設置されたカメラ１１ａは、乗用車Ｖの前方のエリアＳＰ１内及びその前方の空間に存在する物体又は路面（フロントビュー）を撮影する。また、左サイドミラー部分などの乗用車Ｖの左側方の所定位置に設置されたカメラ１１ｂは、乗用車Ｖの左側方のエリアＳＰ２内及びその周囲の空間に存在する物体又は路面（左サイドビュー）を撮影する。また、リアフィニッシャー部分やルーフスポイラー部分などの乗用車Ｖの後方部分の所定位置に設置されたカメラ１１ｃは、乗用車Ｖの後方のエリアＳＰ３内及びその後方の空間に存在する物体又は路面（リアビュー）を撮影する。また、右サイドミラー部分などの乗用車Ｖの右側方の所定位置に設置されたカメラ１１ｄは、乗用車Ｖの右側方のエリアＳＰ４内及びその周囲の空間に存在する物体又は路面（右サイドビュー）を撮影する。
　図４は、各カメラ１１ａ～１１ｄの配置を乗用車Ｖの上空から見た図である。同図に示すように、エリアＳＰ１を撮像するカメラ１１ａ、エリアＳＰ２を撮像するカメラ１１ｂ、エリアＳＰ３を撮像するカメラ１１ｃ、エリアＳＰ４を撮像するカメラ１１ｄの４つは、乗用車Ｖのボディの外周ＶＥに沿って左回り（反時計回り）又は右回り（時計回り）に沿って設置されている。つまり、同図に矢印Ｃで示す左回り（反時計回り）に乗用車Ｖのボディの外周ＶＥに沿って見ると、カメラ１１ａの左隣りにカメラ１１ｂが設置され、カメラ１１ｂの左隣りにカメラ１１ｃが設置され、カメラ１１ｃの左隣りにカメラ１１ｄが設置され、カメラ１１ｄの左隣りにカメラ１１ａが設置されている。逆に同図に示す矢印Ｃの方向とは反対に（時計回り）に乗用車Ｖのボディの外周ＶＥに沿って見ると、カメラ１１ａの右隣りにカメラ１１ｄが設置され、カメラ１１ｄの右隣りにカメラ１１ｃが設置され、カメラ１１ｃの右隣りにカメラ１１ｂが設置され、カメラ１１ｂの右隣りにカメラ１１ａが設置されている。
　図５Ａは、フロントのカメラ１１ａがエリアＳＰ１を撮像した画像ＧＳＰ１の一例を示し、図５Ｂは、左サイドのカメラ１１ｂがエリアＳＰ２を撮像した画像ＧＳＰ２の一例を示し、図５Ｃは、リアのカメラ１１ｃがエリアＳＰ３を撮像した画像ＧＳＰ３の一例を示し、図５Ｄは、右サイドのカメラ１１ｄがエリアＳＰ４を撮像した画像ＧＳＰ４の一例を示す画像図である。ちなみに、各画像のサイズは、縦４８０ピクセル×横６４０ピクセルである。画像サイズは特に限定されず、一般的な端末装置で動画再生が可能なサイズであればよい。
　なお、カメラ１１の配置数及び配置位置は、乗用車Ｖの大きさ、形状、検出領域の設定手法等に応じて適宜に決定することができる。上述した複数のカメラ１１は、それぞれの配置に応じた識別子が付されており、制御装置１４は、各識別子に基づいて各カメラ１１のそれぞれを識別することができる。また、制御装置１４は、指令信号に識別子を付することにより、特定のカメラ１１に撮像命令その他の命令を送出することができる。
　制御装置１４は、画像処理装置１２を制御してカメラ１１によって撮像された撮像信号をそれぞれ取得し、画像処理装置１２は、各カメラ１１からの撮像信号を処理して図５Ａ～図５Ｄに示す監視画像に変換する。そして、制御装置１４は、図５Ａ～図５Ｄに示す４つの監視画像に基づいて監視画像を生成するとともに（監視画像生成機能）、この監視画像を柱体の投影モデルの側面に設定された投影面に投影するためのマッピング情報を監視画像に対応づけ（マッピング情報付加機能）、中央監視装置２０へ出力する。以下、監視画像生成機能とマッピング情報付加機能について詳述する。
　なお、乗用車Ｖの周囲を撮像した４つの監視画像に基づいて監視画像を生成し、これにマッピング情報を関連付ける処理は、本例のように監視端末装置１０で実行するほか、中央監視装置２０で実行することもできる。この場合には、乗用車Ｖの周囲を撮像した４つの監視画像を監視端末装置１０から中央監視装置２０へそのまま送信し、これを中央監視装置２０の画像処理装置２２及び中央制御装置２１にて監視画像を生成するとともにマッピング情報を関連付け、投影変換すればよい。
　まず、監視画像生成機能について説明する。本実施形態の監視端末装置１０の制御装置１４は、画像処理装置１２を制御して各カメラ１１ａ～１１ｄの撮像信号をそれぞれ取得し、さらに乗用車Ｖのボディの外周に沿って右回り又は左回りの方向に設置されたカメラ１１ａ～１１ｄの監視画像がこれらのカメラ１１ａ～１１ｄの設置順に配置されるように、一枚の監視画像を生成する。
　上述したように、本実施形態において、４つのカメラ１１ａ～１１ｄは乗用車Ｖのボディの外周ＶＥに沿って左回り（反時計回り）にカメラ１１ａ、１１ｂ、１１ｃ、１１ｄの順に設置されているので、制御装置１４は、これらのカメラ１１ａ～１１ｄの設置の順序（カメラ１１ａ→１１ｂ→１１ｃ→１１ｄ）に従って、各カメラ１１ａ～１１ｄが撮像した４枚の画像が一体となるように水平方向に繋げ、一枚の監視画像を生成する。本実施形態の監視画像において、各画像は乗用車Ｖの接地面(路面)が下辺となるように配置され、各画像は路面に対して高さ方向（垂直方向）の辺で互いに接続される。
　図６は、監視画像Ｋの一例を示す図である。同図に示すように、本実施形態の監視画像Ｋは、図面左側から図面右側へ向かう方向Ｐに沿って、フロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１、左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３、及び右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４が、水平方向にこの順序で並べて配置され、これら４つの画像が一連の画像とされている。このように生成された監視画像Ｋを、路面(移動体Ｖの接地面)に対応する画像を下にして左端から右側へ順番に表示することにより、監視者は、移動体Ｖの周囲を反時計回りに見回したのと同様にディスプレイ２４上で視認することができる。このように、図６に示す態様の監視画像Ｋは、送受信などの処理を行っても位置関係が狂うことなく、所期の順序のままの配置で再生することができる。
　なお、一つの監視画像Ｋを生成する際には、各カメラ１１ａ～１１ｄの撮影タイミングを略同時にして取得した４つの画像が用いられる。これにより、監視画像Ｋに含まれる情報を同期させることができるので、所定タイミングにおける移動体Ｖ周囲の状況を正確に表現することができる。
　また、カメラの撮像タイミングが略同時である各撮像画像から生成した監視画像Ｋを経時的に記憶し、所定の単位時間あたりに複数の監視画像Ｋが含まれる動画の監視画像Ｋを生成するようにしてもよい。撮像タイミングが同時の画像に基づいて動画の監視画像Ｋを生成することにより、移動体Ｖ周囲の状況の変化を正確に表現することができる。
　ところで、各撮像領域の画像をそれぞれ経時的に記憶し、各撮像領域ごとに生成した動画の監視画像Ｋを中央監視装置２０へ送信した場合には、中央監視装置２０の機能によっては、複数の動画を同時に再生できない場合がある。このような従来の中央監視装置２０においては、複数の動画を同時に再生表示することができないため、各動画を再生する際には画面を切り替えて動画を一つずつ再生しなければならない。つまり、従来の中央監視装置２０では、複数方向の映像（動画）を同時に見ることができず、移動体Ｖ周囲の全体を一画面で監視することができないという不都合がある。
　これに対して本実施形態の制御装置１４は、複数の画像から一つの監視画像Ｋを生成するので、中央監視装置２０の機能にかかわらず、異なる撮像方向の画像を同時に動画再生することができる。つまり、監視画像Ｋを連続して再生（動画再生）することにより、監視画像Ｋに含まれる４枚の画像を同時に連続して再生（動画再生）し、方向の異なる領域の状態変化を一画面で監視することができる。
　また、本実施形態の監視端末装置１０は、監視画像Ｋの画素数が各カメラ１１ａ～１１ｄの画像の画素数と略同一になるように画像のデータ量を圧縮して監視画像Ｋを生成することもできる。図５Ａ～図５Ｄに示す各画像のサイズは４８０×６４０ピクセルであるのに対し、本実施形態では、図６に示すように監視画像Ｋのサイズが１２８０×２４０ピクセルとなるように圧縮処理を行う。これにより、監視画像Ｋのサイズ（１２８０×２４０＝３０７，２００ピクセル）が、各画像のサイズ（４８０×６４０×４枚＝３０７，２００ピクセル）と等しくなるので、監視画像Ｋを受信した中央監視装置２０側の機能にかかわらず、画像処理及び画像再生を行うことができる。
本実施形態の監視端末装置１０は、取得した監視画像送出命令に画質を指定する指令が含まれている場合には、指定された画質の監視画像を生成する。一の注視方向が指定され、一枚の撮像画像に基づいて監視画像が生成する場合には、２倍又は３倍の画質で監視画像を生成しても、四方向（四枚）の撮像画像に基づいて生成された監視画像よりも情報量を低減させることができる。
　さらに、本実施形態の制御装置１４は、配置された各画像の境界を示す線図形を、監視画像Ｋに付することもできる。図６に示す監視画像Ｋを例にすると、制御装置１４は、配置された各画像の境界を示す線図形として、各画像の間に矩形の仕切り画像Ｂｂ，Ｂｃ，Ｂｄ，Ｂａ，Ｂａ´を監視画像Ｋに付することができる。このように、４つの画像の境界に仕切り画像を配置することにより、一連にされた監視画像Ｋの中で、撮像方向が異なる各画像をそれぞれ別個に認識させることができる。つまり、仕切り画像は各撮像画像の額縁として機能する。また、各撮像画像の境界付近は画像の歪みが大きいので、撮像画像の境界に仕切り画像を配置することにより、歪みの大きい領域の画像を隠すことや、歪みが大きいことを示唆することができる。
　また、本実施形態の制御装置１４は、後述する投影モデルの側面に設定された投影面に４つの画像を投影させた場合の歪みを補正してから、監視画像Ｋを生成することもできる。撮影された画像の周辺領域は画像の歪みが生じやすく、特に広角レンズを用いたカメラ１１である場合には撮像画像の歪みが大きくなる傾向があるため、画像の歪みを補正するために予め定義された画像変換アルゴリズムと補正量とを用いて、撮像画像の歪みを補正することが望ましい。
　特に限定されないが、制御装置１４は、図７に示すように、中央監視装置２０において監視画像Ｋを投影させる投影モデルと同じ投影モデルの情報をＲＯＭから読み出し、この投影モデルの投影面に撮像画像を投影し、投影面において生じた歪みを予め補正することもできる。なお、画像変換アルゴリズムと補正量はカメラ１１の特性、投影モデルの形状に応じて適宜定義することができる。このように、投影モデルの投影面に関し画像Ｋを投影した場合の歪みを予め補正しておくことにより、歪みの少ない視認性の良い監視画像Ｋを提供することができる。また、歪みを予め補正しておくことにより、並べて配置された各画像同士の位置ズレを低減させることができる。
　次に、マッピング情報付加機能について説明する。本実施形態の監視端末装置１０において、制御装置１４は、乗用車Ｖの接地面を底面とする柱体の投影モデルＭの側面に設定された投影面に、生成された監視画像Ｋを投影するためのマッピング情報を監視画像Ｋに対応づける処理を実行する。マッピング情報は、監視画像Ｋを受信した中央監視装置２０に、容易に投影基準位置を認識させるための情報である。図８は本実施形態の投影モデルＭの一例を示す図、図９は図８に示す投影モデルＭのｘｙ面に沿う断面模式図である。
　図８、９に示すように、本実施形態の投影モデルＭは、底面が正八角形で、鉛直方向（図中ｚ軸方向）に沿って高さを有する正八角柱体である。なお、投影モデルＭの形状は、底面の境界に沿って隣接する側面を有する柱体であれば特に限定されず、円柱体、若しくは三角柱体、四角柱体、六角柱体などの角柱体、又は底面が多角形で側面が三角形の反角柱体とすることもできる。
　また、同図に示すように、本実施形態の投影モデルＭの底面は乗用車Ｖの接地面と平行である。また、投影モデルＭの側面の内側面には、投影モデルＭの底面に接地する乗用車Ｖの周囲の映像を映し出す投影面Ｓａ，Ｓｂ，Ｓｃ，Ｓｄ（以下、投影面Ｓと総称する。）が設定されている。投影面Ｓは、投影面Ｓａの一部と投影面Ｓｂの一部、投影面Ｓｂの一部と投影面Ｓｃの一部、投影面Ｓｃの一部と投影面Ｓｄの一部、投影面Ｓｄの一部と投影面Ｓａの一部により構成することもできる。監視画像Ｋは、乗用車Ｖを取り囲む投影モデルＭの上方の視点Ｒ（Ｒ１～Ｒ８、以下、視点Ｒと総称する。）から乗用車Ｖを俯瞰した映像として投影面Ｓに投影される。
　本実施形態の制御装置１４は、右端又は左端に配置された撮像画像の基準座標を、マッピング情報として監視画像Ｋに対応づける。図６に示す監視画像Ｋを例にすると、制御装置１４は、投影モデルＭに投影される際の、監視画像Ｋの始端位置又は終端位置を示すマッピング情報（基準座標）として、右端に配置された撮像画像ＧＳＰ１の左上頂点の座標Ａ（ｘ、ｙ）と、左端に配置された撮像画像ＧＳＰ２の右上頂点の座標Ｂ（ｘ、ｙ）とを監視画像Ｋに付する。なお、始端位置又は終端位置を示す撮像画像の基準座標は特に限定されず、左端に配置された監視画像Ｋの左下頂点、又は右端に配置された監視画像Ｋの右下頂点としてもよい。またマッピング情報は、監視画像Ｋの画像データの各画素に付してもよいし、監視画像Ｋとは別のファイルとして管理してもよい。
　このように、監視画像Ｋの始端位置又は終端位置を示す情報、つまり投影処理において基準とする基準座標をマッピング情報として監視画像Ｋに対応づけることにより、監視画像Ｋを受信した中央監視装置２０が、容易に投影処理時における基準位置を認識することができるので、カメラ１１ａ～１１ｄの配置順に並べられた監視画像Ｋを、投影モデルＭの側面の投影面Ｓに容易且つ迅速に順次投影することができる。すなわち、図９に示すようにカメラ１１ａの撮像方向に位置する投影面Ｓａに移動体Ｖ前方の撮像画像ＧＳＰ１を投影し、カメラ１１ｂの撮像方向に位置する投影面Ｓｂに移動体Ｖの右側方の撮像画像ＧＳＰ２を投影し、カメラ１１ｃの撮像方向に位置する投影面Ｓｃに移動体Ｖの後方の撮像画像ＧＳＰ３を投影し、カメラ１１ｄの撮像方向に位置する投影面Ｓｄに移動体Ｖの左側方の撮像画像ＧＳＰ４を投影することができる。
　これにより、投影モデルＭに投影された監視画像Ｋは、あたかも乗用車Ｖの周囲を見回したときに見える映像を示すことができる。つまり、カメラ１１ａ～１１ｄの設置順序に応じて水平方向一列に配置された４つの画像を含む監視画像Ｋは、投影モデルＭの柱体において、同じく水平方向に並ぶ側面に投影されるので、柱体の投影モデルＭの投影面Ｓに投影された監視画像Ｋに、乗用車Ｖの周囲の映像をその位置関係を維持したまま再現することができる。
　なお、本実施形態の制御装置１４は、監視画像Ｋの各座標値と投影モデルＭの各投影面Ｓの座標値との対応関係をマッピング情報として記憶し、監視画像Ｋに付することができるが、中央監視装置２０に予め記憶させてもよい。
　また、図８，９に示す視点Ｒ、投影面Ｓの位置は例示であり、任意に設定することができる。特に、視点Ｒは、操作者の操作によって変更可能である。視点Ｒと監視画像Ｋの投影位置との関係は予め定義されており、視点Ｒの位置が変更された場合には所定の座標変換を実行することにより、新たに設定された視点Ｒから見た監視画像Ｋを投影面Ｓ（Ｓａ～Ｓｄ）に投影することができる。この視点変換処理には公知の手法を用いることができる。
　以上のように、本実施形態の制御装置１４は、所定タイミングで撮影された監視画像に基づいて監視画像Ｋを生成し、この監視画像Ｋにマッピング情報、基準座標、境界を示す線図形（仕切り画像）の情報を対応づけ、撮像タイミングに従って経時的に記憶する。特に限定されないが、制御装置１４は、所定の単位時間あたりに複数の監視画像Ｋを含む一つの動画ファイルとして監視画像Ｋを記憶してもよいし、ストリーミング方式で転送・再生が可能な形態で監視画像Ｋを記憶してもよい。
　一方、中央監視装置２０の通信装置２３は、監視端末装置１０から送信された監視画像Ｋとこの監視画像Ｋに対応づけられたマッピング情報を受信する。この監視画像Ｋは、上述したとおり乗用車Ｖのボディの異なる位置に設置された４つのカメラ１１の画像が、乗用車Ｖのボディの外周に沿って右回り又は左回りの方向に沿って設置されたカメラ１１ａ～１１ｄの設置順序（移動体Ｖのボディの外周に沿う右回り又は左回りの順序）に従って配置されたものである。また、この監視画像Ｋには、監視画像Ｋを八角柱体の投影モデルＭの投影面Ｓに投影させるためのマッピング情報が対応づけられている。通信装置２３は取得した監視画像Ｋ及びマッピング情報を画像処理装置２２へ送出する。
　画像処理装置２２は、予め記憶している投影モデルＭを読み出し、マッピング情報に基づいて、図８及び図９に示す乗用車Ｖの接地面を底面とする八角柱体の投影モデルＭの側面に設定された投影面Ｓａ～Ｓｄに監視画像Ｋを投影させた表示画像を生成する。具体的には、マッピング情報に従い、受信した監視画像Ｋの各画素を、投影面Ｓａ～Ｓｄの各画素に投影する。また、画像処理装置２２は、監視画像Ｋを投影モデルＭに投影する際に、監視画像Ｋと共に受信した基準座標に基づいて、監視画像Ｋの開始点(監視画像Ｋの右端又は左端)を認識し、この開始点が予め投影モデルＭ上に定義された開始点(投影面Ｓの右端又は左端)と合致するように投影処理を行う。また、画像処理装置２２は、監視画像Ｋを投影モデルＭに投影する際に、各画像の境界を示す線図形(仕切り画像)を投影モデルＭ上に配置する。仕切り画像は、予め投影モデルＭに付しておくこともでき、投影処理後に監視画像Ｋに付すこともできる。
　ディスプレイ２４は、投影モデルＭの投影面Ｓに投影した監視画像Ｋを表示する。図１０～図１７は、監視画像Ｋの表示画像の一例を示す。なお、図１１等に示す白抜きの二重丸は、後に説明する注視方向の入力（特定）の手法を説明するために付したものであり、監視画像Ｋに含まれるものではない。
　図１０には、図８，９に示す視点Ｒ１から見た投影面Ｓｄ、Ｓａ、Ｓｂに投影された監視画像Ｋを示す。投影モデルＭの底面には各視点Ｒから見た移動体Ｖの画像が貼り付けられている。また、投影面Ｓｄ、Ｓａ、Ｓｂの間にある画像が表示されていない部分は「境界を示す線図形（仕切り画像）」である。
　同様に、図１１には視点Ｒ２から見た監視画像Ｋを示し、図１２には視点Ｒ３から見た監視画像Ｋを示し、図１３には視点Ｒ４から見た監視画像Ｋを示し、図１４には視点Ｒ５から見た監視画像Ｋを示し、図１５には視点Ｒ６から見た監視画像Ｋを示し、図１６には視点Ｒ７から見た監視画像Ｋを示し、図１７には視点Ｒ８から見た監視画像Ｋを示す。
　このように、本実施形態の端末装置８００は、移動体Ｖのボディに設置されたカメラ１の設置順序に応じて各カメラ１の撮像画像をｘ軸方向又はｙ軸方向に沿って（横に）配置した監視画像Ｋを、その配置順に従って柱体の投影モデルＭの側面に沿って(横に)マッピングするので、投影モデルＭに示された監視画像Ｋは、移動体Ｖの周囲を時計回りに見回したときに見える映像を示すことができる。つまり、監視者は、監視画像Ｋを見ることにより、移動体Ｖから離隔した位置に居ながら、移動体Ｖに搭乗して周囲を見渡したときと同じ情報を取得することができる。
　特に図１０～図１７に示すように、投影モデルＭの底面に移動体Ｖの画像を示すことにより、移動体Ｖの向きと各撮像画像との位置関係が分かり易くすることができる。つまり移動体Ｖのフロントグリルに対向する投影面Ｓには、移動体Ｖのフロントグリルに設けられたカメラ１ａの撮像画像ＧＳＰ１を投影し、移動体Ｖの右サイドミラーに対向する投影面Ｓには、移動体Ｖの右サイドミラーに設けられたカメラ１ｄの撮像画像ＧＳＰ４を投影し、移動体Ｖのリア部に対向する投影面Ｓには、移動体Ｖのリア部に設けられたカメラ１ｃの撮像画像ＧＳＰ３を投影し、移動体Ｖの左サイドミラーに対向する投影面Ｓには、移動体Ｖの左サイドミラーに設けられたカメラ１ｂの撮像画像ＧＳＰ２を投影することができる。このように、図１０～図１７に示すように、本実施形態によれば、移動体Ｖの周囲の映像がその位置関係を保ったまま投影された監視画像Ｋを提示することができるので、監視者は移動体Ｖの周囲で何が起きているかを容易に把握することができる。
　ちなみに、本願願書に添付した図１０～図１７は静止画であるため、実際の表示画像の再生状態を示すことができないが、本実施形態の中央監視装置２０においては、ディスプレイ２４の表示画面中の各投影面Ｓに示される画像はそれぞれ動画である。つまり、移動体Ｖのフロントグリルに対向する投影面Ｓには、移動体Ｖ前方の撮像領域ＳＰ１の動画映像が映し出され、移動体Ｖの右サイドミラーに対向する投影面Ｓには、移動体Ｖ右側方の撮像領域ＳＰ４の動画映像が映し出され、移動体Ｖのリア部に対向する投影面Ｓには、移動体Ｖ後方の撮像領域ＳＰ３の動画映像が映し出され、移動体Ｖの左サイドミラーに対向する投影面Ｓには、移動体Ｖ左側方の撮像領域ＳＰ２の動画映像が映し出されている。つまり、図１０～図１７に示す各投影面Ｓには、異なるカメラ１により撮像された撮像画像に基づく複数の動画の監視画像Ｋを同時に再生することができる。
　なお、マウスやキーボードなどの入力装置２５又はディスプレイ２４をタッチパネル式の入力装置２５とすることで、監視者の操作により視点を自在に設定・変更することができる。視点位置と投影面Ｓとの対応関係は上述の画像処理装置２２又はディスプレイ２４において予め定義されているので、この対応関係に基づいて、変更後の視点に応じた監視画像Ｋをディスプレイ２４に表示することができる。
　次に本実施形態に係る監視システム１の動作について説明する。図１８は監視端末装置１０側の動作を示すフローチャートである。
　図１８に示すように、ステップ１０において、中央管理装置２０は、移動体Ｖに搭載された監視端末装置１０から移動体Ｖの位置情報と監視情報を所定周期で取得し、中央監視装置２０がアクセス可能なデータベースに蓄積する。本実施形態では、予め設定された所定周期で監視情報を収集し蓄積する例を示すが、中央管理装置２０の制御の下に監視情報の収集及び蓄積を実行することができる。つまり、中央監視装置２０から監視情報の要求指令を受信した場合に限って、監視端末装置１０に監視情報をアップロード（送出）させるように構成することができる。
　ステップ２０では、ステップ１０で取得した位置情報に基づいて移動体Ｖの現在位置（撮像タイミングにおける走行位置）を、ディスプレイ２４に表示された地図データベースの地図情報上に図１の左上に示すようにドットを重畳して表示する。この地図情報を見れば、どの位置に監視端末装置１０を搭載する移動体Ｖが走行しているかを一目で視認することができる。言い換えると、監視したい位置に存在する監視端末装置１０を搭載する移動体Ｖを特定することができる。移動体Ｖの位置情報は、図１８の１ルーチン毎の所定のタイミングにて取得され送信されるので、監視者は移動体Ｖの現在位置をタイムリーに把握することができる。
　ステップ３０において、中央監視装置２０は、監視情報を送信させる対象となる移動体Ｖが選択されたか否かを判断する。巡回バスなどのように移動体Ｖの移動スケジュール（位置の経時的な変化）が予め分かっている場合には、その移動スケジュールに基づいて監視情報を送信させたい移動体Ｖを選択することができる。他方、ランダムに走行するタクシーのように移動体Ｖの移動スケジュールが分からない場合には、ステップ２０において表示された移動体Ｖの位置を参照して、事故発生地点の近傍、事故の目撃情報を通報した移動体Ｖの近傍などの監視したい位置に存在する移動体Ｖを選択することができる。
移動体Ｖすなわち監視端末装置１０の選択は、中央監視装置２０の入力装置２５を介して行うことができる。たとえば、図１に示す地図情報に重畳された移動体Ｖの位置を示すドットをクリックすることにより、移動体の選択情報を中央監視装置２０に入力することができる。このステップ３０において、監視端末装置１０が特定された場合にはステップ４０へ進み、移動体Ｖ（監視端末装置１０）が選択されない場合にはステップ１０に戻り、所定周期で取得した監視画像の蓄積処理及び表示を繰り返す。
　ステップ４０において、中央監視装置２０は、注視方向又は注視領域を特定する入力がされたか否かを判断する。注視方向又は注視領域を特定する入力されない場合には、ステップ４１へ進み、予め設定されたデフォルトの注視方向又は注視領域が特定される。デフォルトの注視方向は特に限定されないが、移動体Ｖの進行方向とすることができる。また、デフォルトの注視領域は特に限定されないが、移動体の進行方向を中心に１３５度ずつ(合計２７０度)とすることができる。移動体Ｖは進行方向に沿って移動するため有用な映像は進行方向の映像である可能性が高いからである。このように、デフォルトの注視方向や注視領域を設定しておくことにより、監視者の操作負担を軽減することができる。他方、注視方向又は注視領域を特定する入力された場合には、ステップ５０に進む。
　ここで、注視方向の入力手法を説明する。図１９は、前回の処理において監視端末装置１０側から送られ、ディスプレイ２４に表示された監視画像Ｋの一例である。ディスプレイ２４がタッチパネル式のディスプレイである場合において、監視者がディスプレイ２４上のポイントＰＲをタッチすると、ポイントＰＲの方向を注視方向として特定することができる。監視者が移動体Ｖの左方向に注目する場合には、この監視画像Ｋのうち左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２を選択する入力を行う。具体的には、監視者はタッチパネル式のディスプレイ２４のうち、撮像画像ＧＳＰ２が提示されるエリアのポイントＰＲに触れることにより、移動体Ｖの左方向を注視方向として入力することができる。なお、ポイントＰＲ及び後述するＰＲ１，ＰＲ２は監視者の触れる場所を便宜的に示す印であり、監視画像Ｋを構成するものではない。
　中央監視装置２０は、この注視方向に対応するポイントＰＲを含む１画像、つまり、左サイドのカメラ１１ｂの撮像画像ＧＳＰ２の１枚に基づいて撮像画像を生成する監視情報送出命令を生成し、選択した監視端末装置１０へ送出する。監視情報送出命令を取得した監視端末装置１０は、撮像画像ＧＳＰ２のみに基づいて監視画像Ｋを生成する。つまり、エリアＷ０以外の領域を撮像する撮像画像ＧＳＰ１、ＧＳＰ３及びＧＳＰ４は監視画像Ｋの生成には用いられず、監視画像Ｋには含まれない。これにより、撮像画像ＧＳＰ１、ＧＳＰ３及びＧＳＰ４の３つの画像に応じた情報量の分だけ監視画像Ｋの情報量を低減させることができる。
　中央監視装置２０が入力された注視方向に基づいて注視領域を設定する場合の処理を説明する。同じく監視画像Ｋを表示するタッチパネル型のディスプレイ２４において、図２０に示すように、監視者がディスプレイ２４上のポイントＰＲを触れると、移動体Ｖの左方向を注視方向として入力することができる。中央監視装置２０はポイントＰＲに対応する注視方向を中心に左右２７０度の範囲を注視領域として設定する。
　中央監視装置２０は、この注視領域に対応する撮像画像ＧＳＰ２及びこれの左右両隣の２画像を含めた合計３画像、つまり、フロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１、左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３を含むエリアＷ１の撮像画像に基づいて撮像画像を生成する監視情報送出命令を生成し、選択した監視端末装置１０へ送出する。監視情報送出命令を取得した監視端末装置１０は、撮像画像ＧＳＰ１、ＧＳＰ２及びＧＳＰ３の３枚の画像のみに基づいて監視画像Ｋを生成する。つまり、エリアＷ１以外の領域を撮像する撮像画像ＧＳＰ４に応じた１つの画像に応じた情報量の分だけ監視画像Ｋの情報量を低減させることができる。
　また、中央監視装置２０は、図２１に示すように、注視方向を示すポイントＰＲを中心に左右の画像の半分ずつを含めた合計２画像、つまり、フロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１の右側（ＧＳＰ２側）の半分の画像、左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３の左側（ＧＳＰ２側）の半分の画像を含むエリアＷ２を注視領域として設定することができる。これにより、エリアＷ２以外の領域にある撮像画像ＧＳＰ１の半分、撮像画像ＧＳＰ３の半分及び撮像画像ＧＳＰ４は監視画像Ｋには含まれない。つまり、エリアＷ２以外の領域を撮像するＧＳＰ１の半分の画像と、ＧＳＰ３の半分の画像と、ＧＳＰ４の１枚分の画像の合計２枚分の画像に応じた情報量の分だけ監視画像Ｋの情報量を低減させることができる。
　さらに、図２２に示すように、監視者がタッチパネル式のディスプレイ２４を撫でる操作をしたときには、特定された注視方向の変化を求めることができるので、この注視方向の変化に基づいて注視領域を設定することができる。具体的に、監視者が、撮像画像ＧＳＰ２が提示されるエリアのポイントＰＲ１から、撮像画像ＧＳＰ３が提示されるエリアのポイントＰＲ２までを図中に示す矢印に沿って撫でる操作をしたときには、注視方向が左から後方にかけて変化し、注視領域は移動体Ｖの左側方から後方にかけた領域であると判断することができる。
　中央監視装置２０は、この左側方から後方にかけた注視領域に対応する左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３及び右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４を含むエリアＷ３の撮像画像に基づいて撮像画像を生成する監視情報送出命令を生成し、選択した監視端末装置１０へ送出する。監視情報送出命令を取得した監視端末装置１０は、撮像画像ＧＳＰ２、ＧＳＰ３及びＧＳＰ４のみに基づいて監視画像Ｋを生成する。つまり、エリアＷ１以外の領域を撮像する撮像画像ＧＳＰ１に応じた情報量の分だけ監視画像Ｋの情報量を低減させることができる。
　続いて、中央監視装置２０が図１０～図１７のように視点変換が可能な三次元映像により監視画像Ｋを提示するときの注視方向の特定の手法を説明する。たとえば、図１１に示す監視画像Ｋがタッチパネル式のディスプレイ２４に提示されている場合において、監視者が移動体Ｖの右方向を示すポイントＰＲａをタッチした場合には、中央監視装置２０は、注視方向を示すポイントＰＲａを中心に左右１画像を含めた合計３画像、つまりフロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１、右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４、及びリアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３を含むエリアＷ１を注視領域として特定し、この注視領域の監視画像を生成させるための監視画像送出命令を監視端末装置１０へ送出する。監視端末装置１０は、新たに監視画像を生成する際に、フロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１、右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４、及びリアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３のみを用い、左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２は利用しない。このような監視画像送出命令に基づいて作成・送出された監視画像Ｋは、図１２に示すようなものになるが、左サイドのカメラ１１ｂがエリアＳＰ２を示す部分には監視画像Ｋは表示されない。これにより、１枚分の監視画像の情報量を低減させることができる。
　また、図１３に示す監視画像Ｋがタッチパネル式のディスプレイ２４に提示されている場合において、監視者が移動体Ｖの右方向を示すポイントＰＲｂから後方向を示すＰＲｃまでを撫でるようにタッチした場合には、中央監視装置２０は、右方向から後方向に向かう領域を注視領域として設定し、ポイントＰＲｂを含む右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４から３画像を含む合計３画像、つまり撮像画像ＧＳＰ４、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３、及び左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２を含む監視画像を生成させるための監視画像送出命令を監視端末装置１０へ送出する。監視端末装置１０は、新たに監視画像を生成する際に、右サイドのカメラ１１ｄがエリアＳＰ４を撮像した撮像画像ＧＳＰ４、リアのカメラ１１ｃがエリアＳＰ３を撮像した撮像画像ＧＳＰ３、及び左サイドのカメラ１１ｂがエリアＳＰ２を撮像した撮像画像ＧＳＰ２のみを用い、フロントのカメラ１１ａがエリアＳＰ１を撮像した撮像画像ＧＳＰ１は利用しない。このような監視画像送出命令に基づいて作成・送出された監視画像Ｋは、図１４に示すようなものになるが、フロントのカメラ１１ａがエリアＳＰ１を示す部分には監視画像Ｋは表示されない。これにより、１枚分の監視画像の情報量を低減させることができる。
　図１８に戻り、ステップ５０において、画質を特定する情報が入力された場合には、ステップ６０へ進む。他方、ステップ５０において、画質を特定する情報が入力されない場合には、デフォルトの画質を読み出してステップ６０へ進む。特定される画質及びデフォルトの画質は、いずれもステップ４０において注視方向又は注視領域が特定される前の所定の画質よりも高い画質である。このように、デフォルトの画質を設定しておくことにより、監視者の入力負荷を低減させることができる。
　ステップ６０において、中央監視装置２０は、ステップ４０、４１において特定された注視方向又は注視領域の監視画像であって、さらに、ステップ５０、５１において特定された画質（注視方向又は注視領域が特定される前の所定の画質よりも高い画質）の監視画像を生成させ、送出させる指令を含む監視画像送出命令を、ステップ３０において選択された移動体Ｖの監視端末装置１０へ送る。
　その後、ステップ７０において監視端末装置１０から、監視画像送出命令に従って生成された監視画像を取得する。
　ステップ８０において、中央監視装置２０は、取得した注視方向又は注視領域の監視画像を、ディスプレイ２４に表示させる。その後は、ステップ１０以降の処理を所定周期で繰り返す。
　次に、本発明の本実施形態の監視端末装置１０の処理手順を説明する。図２３は、本実施形態に係る監視端末装置１０の制御手順を示すフローチャートである。
　ステップ１１０において、監視端末装置１０は、所定の周期で各カメラ１１ａ～１１ｄの撮像画像を取得する。取得した撮像画像は、撮像時刻と対応づけて少なくとも一時的に保存する。注視方向以外であっても、事後検証において撮像画像が必要になる場合が生じる可能性があるからである。
　ステップ１２０において、監視端末装置１０は、電気通信回線網３０を介して中央監視装置２０から監視画像送出命令を取得したか否かを判断する。監視端末装置１０は、この監視画像送出命令を取得したら、ステップ１３０以降の処理を行う。
　他方、監視画像送出命令を取得しない場合は、ステップ１１０で取得した撮像画像に基づいて生成された監視画像を、電気通信回線網３０を介して中央監視装置２０へ送出する(ステップ１８０)処理を、周期を含む所定のルールに従い繰り返し実行する。このとき送出される監視画像は、カメラ１１ａ～１１ｄにより撮像された全方向の撮像画像に基づいて生成される。
　ステップ１３０において、監視端末装置１０は、監視画像送出命令において、指定されている特定の監視方向又は監視領域を識別する。監視画像送出命令に特定の監視方向又は監視領域の指定が含まれない場合には、ステップ１４０に進み、予め設定されたデフォルトの方向が指定されていると識別する。他方、監視画像送出命令に特定の監視方向又は監視領域の指定が含まれている場合には、その指定された方向・領域に応じて、ステップ１４１のように、移動体Ｖの前方向・前側領域が指定されていると識別し、ステップ１４２のように、移動体Ｖの右方向・右側領域が指定されていると識別し、ステップ１４３のように、移動体Ｖの左方向・左側領域が指定されていると識別し、又はステップ１４４のように、移動体Ｖの後方向・後側領域が指定されていると識別する。
　続くステップ１５０において、監視端末装置１０は、監視画像送出命令において、画質の指定があるか否かを判断する。監視画像送出命令に画質の指定が含まれない場合には、ステップ１６０に進み、予め設定されたデフォルトの画質を読み出し、これを識別する。他方、監視画像送出命令に画質の指定が含まれている場合には、ステップ１７０に進む。
　ステップ１７０において、監視端末装置１０は、ステップ１３０で識別された監視方向・監視領域であり、かつステップ１５０において指定された画質の監視画像を生成する。
　監視端末装置１０は、生成した監視画像Ｋを、電気通信回線網３０を介して中央監視装置２０へ送出する。監視画像送出命令に従って生成された監視画像Ｋは、特定された注視方向又は注視領域を撮像した撮像画像に基づいて生成されたものである。つまり、特定された注視方向又は注視領域以外の方向又は領域を撮像した撮像画像に基づいた画像は含まれない。これにより、監視画像送出命令を取得した場合に生成された監視画像の情報量を、監視画像送出命令を取得する前の生成される監視画像よりも小さい情報量にすることができる。これにより、監視者が注視したい方向の監視画像を提供することにより監視レベルを維持しつつも、監視画像のデータ量を小さくして通信負荷を低減させることができる。
　以上のとおり、本実施形態の監視システムは以下の効果を奏する。
（１）本例の監視システム１は、ランダムに走行する複数の移動体Ｖのカメラ１１ａ～１１ｄが撮像する画像のうち、監視者が実際に必要とする特定の注視方向の監視画像を送出させ、監視者が必要としない監視画像の送出を抑制するので、監視レベルを維持しつつも通信量を低減させることができる。
（２）本例の監視システム１は、監視者が実際に必要とする特定された注視方向に基づいて設定された注視領域の監視画像を送出させ、監視者が必要としない監視画像の送出を抑制するので、監視レベルを維持しつつも通信量を低減させることができる。
（３）本例の監視システム１は、注視方向の経時的な変化に基づいて注視領域を設定するので、監視者が監視対象を追跡したい場合などに、適切な領域の監視画像を得ることができる。
（４）本例の監視システム１は、注視方向を特定する場合には、範囲を絞る代わりに画質を向上させるので、監視者が注視したい領域について解像度の高い監視画像を得ることができる。
（５）本例の監視システム１は、特定の注視方向が入力されなかった場合には、通常状態において監視者が監視をすると予測される予め設定されたデフォルトの注視方向の監視画像を生成させるので、監視者の操作負担を軽減することができる。
（６）本例の監視システム１の監視端末装置１０に位置検出手段を設けたので、移動体Ｖがランダムに動く（移動スケジュールが決まっていない）場合であっても、移動体Ｖの位置に基づいて、注視方向又は注視領域の監視画像を生成させる移動体Ｖを抽出し、その移動体Ｖに監視画像送出命令を送ることができる。
（７）本例の監視システム１の監視端末装置１０が、移動体Ｖボディの外周に右回り又は左回りの方向に沿って設置された前記カメラの撮像画像が、当該カメラの設置の順序に従って配置された一枚の監視画像を生成し、移動体の載置面を底面とする柱体の投影モデルの側面に設定された投影面に前記監視画像を投影するためのマッピング情報を、前記監視画像に対応づけて付加するので、複数の撮像画像がカメラの設置順序で配置された一連（ひとつながり）の監視画像Ｋを柱体の側面に設定された投影面Ｓに投影することができる、このため、各端末装置の備える機能にかかわらず、撮像方向の異なる複数の撮像画像から生成された監視画像Ｋを動画として再生することができる。
（８）本例における監視方法を使用した場合においても、監視システム１と同様の作用を奏し、同様の効果を得ることができる。
　なお、以上説明したすべての実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。
　本明細書では、本発明に係る監視端末装置と中央監視装置を備える監視システムの一態様として、監視端末装置１０と中央監視装置２０を備える監視システム１を例にして説明するが、本発明はこれに限定されるものではない。
　また、本明細書では、本発明に係る命令生成手段と、命令送出手段とを備える中央監視装置の一態様として、命令生成機能と、命令送出機能を有する制御装置２１と、画像処理装置２２と、通信装置２３と、ディスプレイ２４と、入力装置２５とを備える中央監視装置２０を例にして説明するが、これに限定されるものではない。
　また、本明細書では、本発明に係る監視画像生成手段と、監視画像送出手段と、位置検出手段を備える監視端末装置の一態様として、監視画像生成機能と、監視画像送出機能を有する制御装置１４と、カメラ１１ａ～１１ｄと、画像処理装置１２と、通信装置１３と、位置検出装置１５とを備える監視端末装置１０を例にして説明するが、これに限定されるものではない。
　なお、上述した実施形態では、乗用車Ｖの位置情報とカメラ１１ａ～１１ｄからの監視画像を取得するようにしたが、図１に示す、街中に設置された固定カメラ１１ｆからの監視画像と組み合わせて取得してもよい。また、位置情報と監視画像を取得する乗用車Ｖは、図１に示すように予め決められた領域を走行するタクシーＶ１やバスを用いることが望ましいが、自家用自動車Ｖ２や緊急自動車Ｖ３を用いてもよい。
１…監視システム
　１０…監視端末装置
　　１１，１１ａ～１１ｄ…カメラ
　　１１ｆ…街中固定カメラ
　　１２…画像処理装置
　　１３…通信装置
　　１４…制御装置
　　１５…位置検出装置
　２０…中央監視装置
　　２１…中央制御装置
　　２２…画像処理装置
　　２３…通信装置
　　２４…ディスプレイ
　　２５…入力装置
　３０…電気通信回線網
Ｖ，Ｖ１，Ｖ２，Ｖ３…移動体
Ｍ…投影モデル
Ｓ，Ｓａ，Ｓｂ、Ｓｃ、Ｓｄ…投影面
Ｒ１～Ｒ８…視点
Ｋ…監視画像

Claims (8)

  1. 　中央監視装置と、複数の移動体にそれぞれ搭載され、当該中央監視装置と無線通信を介して情報の授受が可能な監視端末装置と、を備える監視システムであって、
    　前記中央監視装置は、
    　監視者が注視したい特定の注視方向が入力された場合には、前記監視端末装置に当該監視端末装置が搭載された前記移動体の周囲のうち、前記特定された注視方向の監視画像を生成させるとともに、当該生成された監視画像を前記中央監視装置へ送出させる監視画像送出命令を生成する命令生成手段と、
    　前記生成された監視画像送出命令を、選択された監視端末装置に送出する命令送出手段と、を備え、
    　前記監視端末装置は、
    　前記各移動体の周囲を撮像するカメラと、
    　前記中央監視装置から取得した前記監視画像送出命令に従い、当該監視画像送出命令に含まれる前記注視方向を撮像した撮像画像に基づいて監視画像を生成する監視画像生成手段と、
    　前記撮像画像送出命令に従い、前記生成された監視画像を含む監視情報を前記中央監視装置に送出する監視情報送出手段と、を備えることを特徴とする監視システム。
  2. 　前記中央監視装置の命令生成手段は、
    　前記特定された注視方向に基づいて設定された注視領域の監視画像を生成させる指令を含む監視画像送出命令を生成し、
    　前記監視端末装置の監視画像生成手段は、
    　前記監視画像送出命令により生成を指令された前記注視領域を撮像した撮像画像に基づいて監視画像を生成することを特徴とする請求項１に記載の監視システム。
  3. 　前記監視領域は、前記特定された注視方向の変化に基づいて設定されることを特徴とする請求項２に記載の監視システム。
  4. 　前記中央監視装置の命令生成手段は、
    　前記注視方向又は前記注視領域が特定された場合には、当該注視方向又は注視領域が特定される前の所定の画質よりも高い画質で監視画像を生成させる指令を含む監視画像送出命令を生成し、
    　前記監視端末装置の監視画像生成手段は、
    　前記監視画像送出命令に含まれる画質で監視画像を生成することを特徴とする請求項１～３の何れか一項に記載の監視システム。
  5. 　前記中央監視装置の命令生成手段は、
    　前記特定の注視方向が入力されなかった場合には、前記監視端末装置に当該監視端末装置が搭載された前記移動体の周囲のうち、予め設定されたデフォルトの注視方向の監視画像を生成させるとともに、当該生成された監視画像を前記中央監視装置へ送出させる監視画像送出命令を生成することを特徴とする請求項１～３の何れか一項に記載の監視システム。
  6. 　前記監視端末装置は、
    　複数の移動体のそれぞれの位置情報を検出する位置検出手段をさらに備え、
    　前記監視情報送出手段は、前記位置情報を前記監視情報に含ませて前記中央管理装置に送出することを特徴とする請求項１～５の何れか一項に記載の監視システム。
  7. 　前記監視端末装置の前記カメラは、移動体のボディの異なる位置に設置され、
    　前記監視画像生成手段は、
    　前記移動体のボディの外周に右回り又は左回りの方向に沿って設置された前記カメラの撮像画像が、当該カメラの設置の順序に従って配置された一枚の監視画像を生成し、
    　前記移動体の載置面を底面とする柱体の投影モデルの側面に設定された投影面に前記監視画像を投影するためのマッピング情報を、前記監視画像に対応づけて付加することを特徴とする請求項１～６の何れか一項に記載の監視システム。
  8. 　監視者が注視したい特定の注視方向が入力された場合には、前記特定された注視方向の監視画像を生成させるとともに、当該生成された監視画像を含む監視情報を前記監視者へ送出させる監視画像送出命令を生成し、無線通信を介して監視画像送出命令を送出するステップと、
    　前記無線通信を介して取得した前記監視画像送出命令に従い、当該監視画像送出命令に含まれる注視方向を前記移動体に設けられたカメラで撮像した撮像画像に基づいて生成された監視画像を含む監視情報を、前記無線通信を介して取得するステップと、を有する監視方法。
PCT/JP2012/081497 2011-12-22 2012-12-05 監視システム WO2013094406A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013550208A JP5796638B2 (ja) 2011-12-22 2012-12-05 監視システム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011280913 2011-12-22
JP2011-280913 2011-12-22

Publications (1)

Publication Number Publication Date
WO2013094406A1 true WO2013094406A1 (ja) 2013-06-27

Family

ID=48668305

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/081497 WO2013094406A1 (ja) 2011-12-22 2012-12-05 監視システム

Country Status (2)

Country Link
JP (1) JP5796638B2 (ja)
WO (1) WO2013094406A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366525A (zh) * 2013-07-03 2013-10-23 战国新 一种多警指挥中心智能管理平台
JP2021033934A (ja) * 2019-08-29 2021-03-01 Kddi株式会社 移動可能な画像生成元の画像を用いて多視点画像を生成する方法、装置及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189927A (ja) * 1999-12-28 2001-07-10 Tokyo Gas Co Ltd 移動ステーションおよび制御ステーションならびに擬似体験システム
JP2006245746A (ja) * 2005-03-01 2006-09-14 Hitachi Kokusai Electric Inc 監視システム
JP2009100095A (ja) * 2007-10-15 2009-05-07 Alpine Electronics Inc 画像処理装置及び画像処理方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4218307B2 (ja) * 2002-10-25 2009-02-04 株式会社日立製作所 全方位画像生成方法及び装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189927A (ja) * 1999-12-28 2001-07-10 Tokyo Gas Co Ltd 移動ステーションおよび制御ステーションならびに擬似体験システム
JP2006245746A (ja) * 2005-03-01 2006-09-14 Hitachi Kokusai Electric Inc 監視システム
JP2009100095A (ja) * 2007-10-15 2009-05-07 Alpine Electronics Inc 画像処理装置及び画像処理方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366525A (zh) * 2013-07-03 2013-10-23 战国新 一种多警指挥中心智能管理平台
JP2021033934A (ja) * 2019-08-29 2021-03-01 Kddi株式会社 移動可能な画像生成元の画像を用いて多視点画像を生成する方法、装置及びプログラム
JP7163257B2 (ja) 2019-08-29 2022-10-31 Kddi株式会社 移動可能な画像生成元の画像を用いて多視点画像を生成する方法、装置及びプログラム

Also Published As

Publication number Publication date
JP5796638B2 (ja) 2015-10-21
JPWO2013094406A1 (ja) 2015-04-27

Similar Documents

Publication Publication Date Title
JP5648746B2 (ja) 車両用監視装置、車両用監視システム、端末装置及び車両の監視方法
JP5786963B2 (ja) 監視システム
JP5811190B2 (ja) 監視システム
WO2012137367A1 (ja) 画像蓄積システム
JP6260174B2 (ja) 監視画像提示システム
KR20140105881A (ko) 자동차 블랙박스 영상물 실시간 수집 시스템 및 방법
WO2013111494A1 (ja) 監視システム
JP4048292B2 (ja) 交通情報表示システム及び撮像画像送信装置並びに車載用の情報表示装置と記憶媒体
JP5796638B2 (ja) 監視システム
WO2013161345A1 (ja) 監視システム及び監視方法
KR20150002994A (ko) 신뢰성 있게 차량 주변 영상을 제공하는 장치
WO2013111492A1 (ja) 監視システム
WO2013111491A1 (ja) 監視システム
WO2013111479A1 (ja) 監視システム
JP5790788B2 (ja) 監視システム
CN216331763U (zh) 一种集成全景功能和bsd功能的智能汽车电子后视镜设备
WO2013111493A1 (ja) 監視システム
JP4696825B2 (ja) 車両用死角映像表示装置
WO2013125301A1 (ja) 監視システム
JP6563694B2 (ja) 画像処理装置、画像処理システム、画像合成装置、画像処理方法及びプログラム
WO2013129000A1 (ja) 監視システム
JP5812105B2 (ja) 監視システム
WO2013136894A1 (ja) 監視システム及び監視方法
CN112277806B (zh) 全景泊车影像系统
JP4407246B2 (ja) 車両周辺モニタシステムおよび車両周辺モニタ方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12859337

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013550208

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12859337

Country of ref document: EP

Kind code of ref document: A1