WO2022009356A1 - 監視システム - Google Patents

監視システム Download PDF

Info

Publication number
WO2022009356A1
WO2022009356A1 PCT/JP2020/026772 JP2020026772W WO2022009356A1 WO 2022009356 A1 WO2022009356 A1 WO 2022009356A1 JP 2020026772 W JP2020026772 W JP 2020026772W WO 2022009356 A1 WO2022009356 A1 WO 2022009356A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
distribution
moving image
abnormality
monitoring system
Prior art date
Application number
PCT/JP2020/026772
Other languages
English (en)
French (fr)
Inventor
光貴 岩村
守真 横田
剛久 三輪
康次 長谷川
孝之 小平
誠司 奥村
博文 西川
Original Assignee
三菱電機ビルテクノサービス株式会社
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機ビルテクノサービス株式会社, 三菱電機株式会社 filed Critical 三菱電機ビルテクノサービス株式会社
Priority to PCT/JP2020/026772 priority Critical patent/WO2022009356A1/ja
Priority to JP2022528939A priority patent/JP7118322B2/ja
Priority to CN202080102698.1A priority patent/CN115836516B/zh
Publication of WO2022009356A1 publication Critical patent/WO2022009356A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/04—Telephonic communication systems specially adapted for combination with other electrical systems with alarm systems, e.g. fire, police or burglar alarm systems

Definitions

  • the present invention relates to a surveillance system using a camera.
  • the user confirms the abnormal situation by downloading and viewing the moving image from the URL contacted by the anomaly detection email received when the anomaly occurs. , It may take some time to confirm the abnormal condition.
  • the optimum data distribution method may not be selected depending on the content of the abnormal scene or the communication state of the mobile terminal, and the abnormal situation may not be confirmed promptly.
  • an object of the present invention is to provide a monitoring system that allows a user to quickly confirm an abnormal state.
  • the monitoring system of the present invention is an image analysis storage device that stores moving image data captured by a camera, analyzes the moving image data captured by the camera, and generates an alarm signal including an abnormality occurrence time when an abnormality is detected. , For the set time before and after the abnormality occurrence time in the moving image data stored in the image analysis storage device when communicating with the image analysis storage device and receiving the alarm signal from the image analysis storage device.
  • Communication device that receives moving image data as recorded moving image data from the image analysis storage device, communicates with the communication device, receives the recorded moving image data from the communication device, and abnormal state information based on the received recorded moving image data.
  • the server includes a server that distributes the data to the mobile terminal, and the server includes an image acquisition unit that acquires the recorded moving image data from the communication device, communication status data with the mobile terminal, the urgency of the abnormality, and the abnormality status.
  • the urgency of the abnormality is determined based on the distribution method selection map stored in association with the information distribution method and the recorded moving image data input from the image acquisition unit, and the determined urgency of the abnormality and the portable device are used.
  • a distribution method selection unit that selects a distribution method for the abnormal state information to be distributed to the mobile terminal based on the communication status data with the mobile terminal received from the terminal and the distribution method selection map, and a distribution method selection unit. It is characterized by including a distribution data generation unit that generates distribution data of the abnormal state information to be distributed to the mobile terminal based on the distribution method selected by.
  • the optimum data distribution method can be selected according to the content of the abnormal scene or the communication state of the mobile terminal, so that the user can quickly confirm the abnormal state.
  • the communication state data includes the communication speed with the mobile terminal and the radio wave intensity transmitted / received with the mobile terminal
  • the distribution method selection unit has the urgency of the abnormality and the communication speed.
  • the distribution method of the abnormal state information to be distributed to the mobile terminal may be selected based on the transmission / reception radio wave intensity and the distribution method selection map.
  • the optimum data distribution method can be selected according to the communication speed with the mobile terminal and the radio wave intensity transmitted / received with the mobile terminal, so that the user can confirm the abnormal state more quickly.
  • the distribution method selection unit indicates an abnormal state, such as full distribution of the recorded moving image data, partial distribution of the recorded moving image data, and distribution of at least one frame image data of the recorded moving image.
  • an abnormal state such as full distribution of the recorded moving image data, partial distribution of the recorded moving image data, and distribution of at least one frame image data of the recorded moving image.
  • One of the delivery method of the text data delivery and the delivery of the abnormality detection mail may be selected.
  • the entire recorded video data is distributed, the recorded video data is partially distributed, at least one frame image data of the recorded video is distributed, and the text data indicating the abnormal state is distributed.
  • the user can quickly confirm the abnormal state.
  • the occurrence of the abnormality can be promptly notified to the user by sending the abnormality detection mail.
  • the distribution method selection unit selects all distribution of the recorded moving image data
  • the feature to be confirmed by the user is the entire recording time of the recorded moving image.
  • a command for lengthening the set time before and after the abnormality occurrence time is output to the image analysis storage device via the communication device, and the set time is lengthened via the communication device.
  • the moving image data may be received from the image analysis storage device as the recorded moving image data.
  • the recorded video with the recorded video lengthened is lengthened. Since all of the data or low-quality data of the recorded moving image is distributed, the user can easily confirm the abnormal state without requesting the viewing of the moving image data again.
  • the partial distribution of the recorded moving image data includes the recorded moving image partial data distribution in which the recorded moving image data is edited so as to include the feature items to be confirmed by the user, and the recorded moving image partial data distribution.
  • the distribution method selection unit includes, when the user selects partial distribution of the recorded video data, including the recorded video low-quality data distribution that distributes the recorded video low-quality data in which the image quality of the recorded video data is deteriorated. If the feature to be confirmed is present only in a part of the recording time of the recorded video, the recorded video partial data distribution is selected, and if not, the recorded video low-quality data distribution is selected. You may.
  • the image acquisition unit is a case where the distribution method selection unit selects the recording video low-quality data distribution, and the feature to be confirmed by the user is the entire recording time of the recorded video.
  • a command for lengthening the set time before and after the abnormality occurrence time is output to the image analysis storage device via the communication device, and the set time is lengthened via the communication device.
  • the moving image data may be received from the image analysis storage device as the recorded moving image data.
  • the recorded video with the recorded video lengthened is lengthened. Since all of the data or low-quality data of the recorded moving image is distributed, the user can easily confirm the abnormal state without requesting the viewing of the moving image data again.
  • the distribution method selection unit selects all distribution of the recorded moving image data, and the above-mentioned.
  • the urgency of the abnormality is high and only one of the communication speed and the transmission / reception radio wave strength is high, partial distribution of the recorded moving image data is selected, and the urgency of the abnormality is high, but the communication speed is high. If both the transmitted / received radio wave strength and the transmitted / received radio wave strength are not high, the delivery of text data indicating an abnormal state may be selected.
  • the distribution method selection unit includes the feature items to be confirmed by the user when both the communication speed and the transmission / reception radio wave strength are high, when the urgency of the abnormality is not high. If delivery of at least one frame image of the moving image is selected and the urgency of the abnormality is not high and only one of the communication speed and the transmission / reception signal strength is high, the text data indicating the abnormal state is delivered. If the urgency of the abnormality is not high and both the communication speed and the transmission / reception radio wave strength are not high, the delivery of the abnormality detection mail may be selected.
  • the optimum data distribution method can be selected according to the communication speed with the mobile terminal and the radio wave intensity transmitted / received with the mobile terminal, so that the user can confirm the abnormal state more quickly.
  • the server includes a user database in which user attributes and a user's designated delivery method are stored in association with each other, and the delivery method selection unit is stored in the selected delivery method and the user database. If the designated distribution method of the user is not the same, the designated distribution method of the user may be output to the distribution data generation unit.
  • abnormal information can be distributed based on the user's designated distribution method, so that the usability of the monitoring system can be improved.
  • the mobile terminal may communicate with the server according to the abnormal state information received from the server, and may receive the recorded moving image data from the server.
  • the present invention can provide a monitoring system that allows a user to quickly confirm an abnormal state.
  • FIG. 1 It is a system diagram which shows the structure of the monitoring system of an embodiment. It is explanatory drawing which shows the moving image storage time of the 1st memory and the 2nd memory of the image storage part of the camera apparatus shown in FIG. It is explanatory drawing which shows the image analysis operation of the image analysis part of the monitoring system shown in FIG.
  • an abnormal state information is based on an image analysis storage device 10 including a camera 11, a communication device 30 for receiving recorded moving image data from the image analysis storage device 10, and recorded moving image data received from the communication device 30.
  • a server 40 that distributes the data to the mobile terminal 50.
  • the monitoring system 100 captures a moving image in the building by the camera 11, and based on this moving image, the monitoring system 100 monitors the occurrence of abnormalities in the building such as the intrusion of a suspicious person and the occurrence of a disaster.
  • the monitoring system 100 can also be applied to monitoring other buildings such as hospitals, schools, factories, etc., or outdoor events such as river water levels.
  • the image analysis storage device 10 is a device installed in the building to be monitored, and includes a plurality of cameras 11 for capturing a moving image inside the building to be monitored and a recorder 12 for storing the moving image data.
  • the camera 11 is a surveillance camera capable of capturing a moving image.
  • the recorder 12 has an image storage unit 13 connected to the camera 11 to store the moving image data captured by the camera 11 and an abnormality in the building by analyzing the moving image data captured by the camera 11 connected to the image storage unit 13. It includes an image analysis unit 16 that analyzes whether or not an abnormality has occurred, and an alarm signal generation unit 17 that receives an abnormality occurrence signal from the image analysis unit 16 and generates an alarm signal.
  • the recorder 12 is a computer composed of a CPU that internally performs arithmetic processing, data, and a storage device that stores programs, and the image storage unit 13, the image analysis unit 16, and the alarm signal generation unit 17 are programmed by the CPU. It is a functional block composed by executing.
  • the image storage unit 13 of the recorder 12 has two video data storage areas, a first memory 14 and a second memory 15.
  • the first memory 14 stores the long-term moving image data captured by the camera 11 for one day, several days, or one week while updating it. For example, when storing moving image data for one day, the moving image data from the present time to one day ago is saved in the first memory 14, and the moving image data before that is sequentially erased. The same applies when saving video data for several days or a week.
  • the moving image data stored in the first memory 14 contains the imaging time.
  • the second memory 15 sets the total of the pre-set time before a certain time t1 and the post-set time after the time t1 from the moving image data stored in the first memory 14.
  • the preset time is the time between the time t1 and the time t2 shown in FIG.
  • the post-set time is the time between the time t1 and the time t3 shown in FIG.
  • the set time is the total time of the pre-set time and the post-set time, and is the time between the time t2 and the time t3 shown in FIG.
  • the pre-set time and the post-set time may be, for example, 30 seconds, 1 minute, 5 minutes, or 10 minutes.
  • the image storage unit 13 is configured to be able to output the moving image data stored in the second memory 15 to the outside when the moving image request signal is input from the outside.
  • the pre-set time and the post-set time can be changed by an external command.
  • the image analysis unit 16 analyzes the moving image captured by the camera 11 and detects the occurrence of an abnormality.
  • the video analysis and abnormality detection will be briefly described by taking as an example the case where the camera 11 monitors the entrance door 22 of the building with reference to FIG.
  • the image analysis unit 16 stores an image of the entrance door 22 in a closed state as shown in FIG. 3A as a reference image of the entrance door 22 of the building. There is.
  • the image analysis unit 16 compares the moving image input from the camera 11 with the reference image shown in FIG. 3A, and if there is no difference between the two, it is determined that no abnormality has occurred.
  • a moving image in a state where the entrance door 22 is open is input from the camera 11 as shown in FIG. 3B, a difference occurs between this moving image and the reference image shown in FIG. 3A. In this way, when a difference occurs between the moving image input from the camera 11 and the reference image, the image analysis unit 16 determines that there is a possibility that an abnormality has occurred in the entrance door 22.
  • the image analysis unit 16 recognizes the person 25 coming in through the entrance door 22, as shown in FIG. 3 (b). Then, the clothes worn by the person 25 are compared with the uniform of the guard stored as a reference image in advance, and it is determined whether or not the person 25 is a guard. If the person 25 who entered through the entrance door 22 is a security guard, the image analysis unit 16 determines that the intrusion from the entrance door 22 has not occurred. On the other hand, if the person 25 who entered through the entrance door 22 is not a security guard, it is determined that the entrance door 22 has been invaded. Then, the fact that an abnormality has occurred is output to the alarm signal generation unit 17.
  • the alarm signal generation unit 17 When the alarm signal generation unit 17 receives the signal of occurrence of an abnormality from the image analysis unit 16, it generates an alarm signal including the time of occurrence of the abnormality.
  • the alarm signal is a signal composed of, for example, the type of abnormality such as "intrusion occurrence” and "A zone on the first floor", the location of occurrence of the abnormality, and the time of occurrence of the abnormality.
  • the type of abnormality for example, a code such as "0010" with four digits may be used.
  • the communication device 30 is a gateway device that connects the LAN line in the building to which the image analysis storage device 10 is connected and the remote communication network 35 in which security is ensured.
  • the communication device 30 communicates with the image analysis storage device 10 and receives an alarm signal from the image analysis storage device 10, the communication device 30 is included in the moving image data stored in the second memory 15 of the recorder 12 of the image analysis storage device 10.
  • the moving image data for the set time before and after the abnormality occurrence time is received as the recorded moving image data, and the received recorded moving image data is output to the server 40.
  • the mobile terminal 50 is a smartphone, tablet terminal, etc. owned by a building manager, owner, etc., who is a user of the monitoring system 100, and capable of sending / receiving e-mails, receiving / viewing image data, and the like.
  • the mobile terminal 50 may be located in a remote place away from the building to be monitored.
  • the server 40 communicates with the communication device 30, receives recorded moving image data from the communication device 30, and distributes abnormal state information to the mobile terminal 50 based on the received recorded moving image data.
  • the server 40 includes a communication unit 41, a terminal communication unit 42, an image acquisition unit 43, a distribution method selection unit 44, a distribution data generation unit 45, an image database 46, a user database 47, and a distribution method selection map 60. Contains each functional block of.
  • the general-purpose computer 150 includes a CPU 151 which is a processor that performs information processing, a ROM 152 and a RAM 153 that temporarily store data during information processing, and a hard disk drive that stores programs, user data, and the like. (HDD) 154, a mouse 155 provided as an input means, a keyboard 156, and a display 157 provided as a display device are included.
  • the CPU 151, the ROM 152, the RAM 153, and the HDD 154 are connected by a data bus 160.
  • the mouse 155, the keyboard 156, and the display 157 are connected to the data bus 160 via the input / output controller 158.
  • a network controller 159 provided as a communication means is connected to the data bus 160.
  • the communication unit 41, the terminal communication unit 42, the image acquisition unit 43, the distribution method selection unit 44, and the distribution data generation unit 45 of the server 40 cooperate with the hardware of the general-purpose computer 150 shown in FIG. 4 and the program running on the CPU 151. Is realized by.
  • the image database 46 and the user database 47 are realized by storing moving image data and user data in the HDD 154 of the general-purpose computer 150 shown in FIG. 4, respectively.
  • the distribution method selection map 60 is stored in the HDD 154 of the general-purpose computer 150 shown in FIG.
  • the communication unit 41 is connected to the remote communication network 35, and exchanges data with and from the image analysis storage device 10 via the communication device 30.
  • the terminal communication unit 42 is connected to the remote communication network 36 and exchanges data with and from the mobile terminal 50.
  • the image acquisition unit 43 acquires the recorded moving image data received from the communication device 30 by the communication unit 41 and stores it in the image database 46.
  • the distribution method selection unit 44 determines the urgency of the abnormality based on the recorded moving image data input from the image acquisition unit 43, and the determined abnormality urgency and the communication status data between the mobile terminal 50 and the mobile terminal 50 received from the mobile terminal 50.
  • the distribution method selection map 60 the distribution method of the abnormal state information to be distributed to the mobile terminal 50 is selected.
  • the distribution method selection map 60 is a map that stores the communication status data with the mobile terminal 50, the urgency of the abnormality, and the distribution method of the abnormal status information in association with each other, as shown in FIG.
  • the delivery method selection map 60 will be described in detail later.
  • the distribution data generation unit 45 generates distribution data of abnormal state information to be distributed to the mobile terminal 50 based on the distribution method selected by the distribution method selection unit 44, and outputs the distribution data to the terminal communication unit 42.
  • the image database 46 stores recorded moving image data received from the communication device 30 by the communication unit 41.
  • user attributes such as e-mail addresses, addresses, and telephone numbers of building managers and owners who are users of the monitoring system 100 are stored in association with the user's designated delivery method.
  • the designated distribution method is the same as the distribution method stored in the distribution method selection map 60 described later, that is, all distribution of recorded video data, partial distribution of recorded video data, distribution of frame images, and abnormal state. It may be the delivery of the text data shown, the delivery of the abnormality detection mail, or may include the delivery of the recorded video partial data and the delivery of the recorded video low-quality data, which will be described later. Further, other delivery methods may be stored as the designated delivery method.
  • the user can freely change the designated distribution method stored in the user database 47 by communicating with the server 40 on the mobile terminal 50.
  • the server 40 may be, for example, a server device on the cloud or a server device installed in a data center or the like in a remote place away from the building to be monitored, as long as it is connected to the network.
  • the distribution method selection map 60 is a map that stores the communication status data with the mobile terminal 50 in association with the urgency of the abnormality and the distribution method of the abnormal status information.
  • the communication status data includes the communication speed between the terminal communication unit 42 of the server 40 and the mobile terminal 50, and the transmission / reception radio field strength between the terminal communication unit 42 of the server 40 and the mobile terminal 50.
  • the distribution method selection map 60 is a matrix map that determines a distribution method to be selected according to the communication speed with the mobile terminal 50, the transmission / reception radio wave intensity with the mobile terminal 50, and the urgency of abnormality. ..
  • the distribution method 1 shows the distribution of all the recorded moving image data.
  • the distribution method 2 indicates partial distribution of recorded moving image data.
  • the distribution method 3 indicates distribution of at least one frame image of a recorded moving image including features to be confirmed by the user.
  • the delivery method 4 indicates delivery of text data indicating an abnormal state.
  • the delivery method 5 indicates delivery of an abnormality detection email.
  • the distribution method 1 is a distribution method in which all the recorded video data is distributed as the original data without degrading the image quality of the recorded image data acquired from the communication device 30.
  • the partial distribution of the recorded moving image data of the distribution method 2 is a distribution method of editing the recorded image data acquired from the communication device 30 and distributing a part of the original data.
  • Partial distribution of recorded video data includes distribution of recorded video partial data in which the recorded video data is edited so as to include features that the user should check, and recording in which the image quality of the recorded video data is reduced. Includes recording video low-quality data distribution that distributes video low-quality data.
  • the recorded moving image partial data may be, for example, moving image data obtained by extracting a moving image of several seconds before and after the time t1 shown in FIG. 3 from the recorded image data, or a moving image at the moment of the theft in the moving image data in which the theft occurred. It may be data or video data at the moment when the criminal's face is included.
  • the distribution of at least one frame image of the recorded video including the features to be confirmed by the user of the distribution method 3 is, for example, one or a plurality of frames from the video data of several seconds before and after the time t1 shown in FIG. 3 of the recorded image data. It also depends on the distribution of the extracted image. Further, a frame image during the theft in a video capturing the occurrence of the theft or a frame image including the face of the criminal may be distributed.
  • the distribution of the text data indicating the abnormal state of the distribution method 4 is, for example, the distribution of the text data indicating the abnormal state such as "a suspicious person has invaded" or "a fire has occurred. It is an emergency". Is.
  • the anomaly detection email of the delivery method 5 is, for example, a delivery method for transmitting an email with the text "abnormality detection".
  • the distribution method selection unit 44 when the distribution method selection unit 44 has a high degree of urgency of abnormality and both the communication speed and the transmission / reception radio wave strength are high, all of the recorded video data of the distribution method 1 is recorded. Select delivery. Further, when the distribution method selection unit 44 has a high degree of urgency of abnormality and only one of the communication speed and the transmission / reception radio wave strength is high, the distribution method selection unit 44 selects partial distribution of the recorded moving image data of the distribution method 2. Further, the distribution method selection unit 44 distributes when the urgency of the abnormality is high but both the communication speed and the transmission / reception signal strength are not high, that is, when both the communication speed or the transmission / reception signal strength are medium or low. Select the delivery of the text data indicating the abnormal state of the method 4.
  • the distribution method selection unit 44 determines that the communication speed and the transmission / reception radio wave strength are high when both the communication speed and the transmission / reception radio wave strength are high, that is, when the abnormality urgency is medium or low. If both are high, the user of the delivery method 3 selects delivery of at least one frame image of the recorded moving image including the features to be confirmed. Further, the distribution method selection unit 44 distributes text data indicating an abnormal state of the distribution method 4 when the urgency of the abnormality is medium or low and only one of the communication speed and the transmission / reception radio wave strength is high. Select. Further, the delivery method selection unit 44 selects delivery of the abnormality detection mail of the delivery method 5 when the urgency of the abnormality is medium or low and both the communication speed and the transmission / reception radio wave strength are medium or low. ..
  • the moving image data captured by the camera 11 is sent to the recorder 12.
  • the recorder 12 stores the moving image data received from the camera 11 in the first memory 14.
  • the image analysis unit 16 of the recorder 12 compares and analyzes the moving image data and the reference image data by the method as described above, and detects the occurrence of an abnormality. If the occurrence of an abnormality is not detected, the recorder 12 returns to step S101 of FIG. 7 and repeatedly executes the storage of the moving image data of the camera 11 and the detection operation of the occurrence of the abnormality.
  • the communication device 30 polls the recorder 12 as shown in step S201 of FIG. Polling may be performed once / minute, for example.
  • the image analysis unit 16 detects the occurrence of an abnormality in step S103 of FIG. 7, the image analysis unit 16 transmits the signal for detecting the occurrence of the abnormality to the alarm signal generation unit 17.
  • the alarm signal generation unit 17 generates an alarm signal composed of an abnormality type, an abnormality occurrence location, and an abnormality occurrence time based on the signal transmitted from the image analysis unit 16.
  • the recorder 12 After generating the alarm signal, the recorder 12 receives the poll from the communication device 30 as shown in step S105 of FIG. 7, and then the alarm signal generated by the alarm signal generation unit 17 as shown in step S106 of FIG. Is transmitted to the communication device 30.
  • step S202 of FIG. 8 the communication device 30 proceeds to step S203 of FIG. 8 after receiving the alarm signal from the recorder 12, and outputs the recorded moving image data request signal to the recorder 12.
  • the recorder 12 waits until the recorded moving image data request signal is received from the communication device 30. Then, when the recorder 12 receives the recorded moving image data request signal from the communication device 30, the abnormality occurrence time specified by the image analysis unit 16 among the image data stored in the first memory 14 is as shown in FIG.
  • the moving image data for the set time which is the total of the pre-set time and the post-set time, is written to the second memory 15 as the recorded moving image data. Then, as shown in step S108 of FIG. 7, the recorder 12 transmits the recorded moving image data written in the second memory 15 to the communication device 30.
  • the communication device 30 waits until the recorded video data is received from the recorder 12, and when the recorded video data is received, proceeds to step S205 of FIG. 8 to give an alarm signal to the server 40. To send.
  • the server 40 waits until the alarm signal is received from the communication device 30, and when the alarm signal is received, records the data to the communication device 30 as shown in step S302 of FIG. Send a video data request signal.
  • the communication device 30 waits until the recorded video data request signal from the server 40 is received, and after receiving the recorded video data request signal, proceeds to step S207 of FIG. 8 to record video data. To the server 40.
  • step S303 of FIG. 9 the image acquisition unit 43 of the server 40 waits until the recorded video data is received, and after receiving the recorded video data, proceeds to step S304 of FIG. 9 and records the video in the image database 46. Store and save data. Further, the image acquisition unit 43 outputs the recorded moving image data to the distribution method selection unit 44.
  • step S305 of FIG. 9 the terminal communication unit 42 of the server 40 acquires the communication speed with the mobile terminal 50 and the transmission / reception radio wave strength with the mobile terminal 50 and outputs them to the distribution method selection unit 44.
  • the distribution method selection unit 44 executes the distribution method selection process shown in FIGS. 10 and 11 in step S306 of FIG. 9, and outputs the image distribution method and the attached data to the distribution data generation unit 45.
  • the delivery method selection process will be described in detail later.
  • step S307 of FIG. 9 the distribution data generation unit 45 of the server 40 reads the recorded moving image data from the image database 46, and uses the distribution method and attached data input from the distribution method selection unit 44 to the mobile terminal 50.
  • the distribution data to be distributed is generated and output to the terminal communication unit 42. Then, the terminal communication unit 42 transmits the distribution data to the mobile terminal 50 in step S308 of FIG.
  • the terminal communication unit 42 waits until the recorded video data request signal is input from the mobile terminal 50 in step S309 of FIG. 9, and when the recorded video data request signal is input from the mobile terminal 50, the recorded video data request signal. Is output to the distribution method selection unit 44.
  • the distribution method selection unit 44 selects all distribution of the recorded moving image data as the distribution method, and outputs the distribution method and the attached data to the distribution data generation unit 45.
  • the distribution data generation unit 45 reads the recorded moving image data from the image database 46 and outputs it to the terminal communication unit 42 as distribution data.
  • the terminal communication unit 42 transmits the input recorded moving image data to the mobile terminal 50 in step S310 of FIG.
  • the distribution method selection unit 44 acquires recorded video data from the image acquisition unit 43 in step S401 of FIG. 10, and the communication speed from the terminal communication unit 42 to the mobile terminal 50 in step S402 of FIG. , Get the transmitted / received signal strength. Then, in step S403 of FIG. 10, the distribution method selection unit 44 determines the urgency of the abnormality from the recorded moving image.
  • the degree of urgency may be determined according to the degree of increase in the water level of the river.
  • the distribution method selection unit 44 proceeds to step S404 in FIG. 10 to select the distribution method of the abnormal state information based on the distribution method selection map 60 shown in FIG.
  • the distribution method selection unit 44 may determine high speed, medium speed, and low speed of the communication speed based on the line type with the mobile terminal 50. For example, when the type of the line is WiFi, 5G, 4G or the like, it may be determined as high speed, when it is 3G, it may be determined as medium speed, and when it is a telephone line, it may be determined as low speed. Further, the distribution method selection unit 44 acquires the current position information of the mobile terminal 50 from the mobile terminal 50, and determines the high intensity, medium intensity, and low intensity of the transmitted / received radio wave intensity based on the current position of the mobile terminal 50. May be good. For example, when the mobile terminal 50 is moving, it may be determined as medium strength, and when the mobile terminal 50 is underground, it may be determined as low intensity.
  • the distribution method selection unit 44 is based on the high-speed, medium-speed, and low-speed communication speeds, the high-intensity, medium-strength, and low-intensity of the transmitted / received radio wave strength, and the high, medium, and low urgency of the abnormality.
  • One delivery method is selected from the delivery method selection map 60 shown in FIG. As described above, for example, when the urgency of the abnormality is high and both the communication speed and the transmission / reception radio wave strength are high, the distribution method selection unit 44 selects all distribution of the recorded moving image data of the distribution method 1. Further, when the urgency of the abnormality is high and only one of the communication speed and the transmission / reception radio wave strength is high, the distribution method selection unit 44 selects partial distribution of the recorded moving image data of the distribution method 2.
  • the distribution method selection unit 44 proceeds to step S405 in FIG. 10 to determine whether or not partial distribution of the recorded video data has been selected. Then, if YES is determined in step S405 of FIG. 10, the process proceeds to step S406 of FIG. 10 to determine whether or not the feature items to be confirmed by the user exist only in a part of the recording time of the recorded moving image. For example, when the person 25 enters from the entrance door 22 described above, the intrusion operation of the person 25 from the entrance door 22 is recorded for a few seconds before and after the time t1 shown in FIG. , It is an image in a state where the entrance door 22 is closed, and after that, it may be an image in a state where the entrance door 22 is open.
  • the feature to be confirmed by the user is the intrusion operation of the person 25 from the entrance door 22 recorded only a few seconds before and after the time t1 shown in FIG.
  • the distribution method selection unit 44 determines YES in step S406 of FIG. 10, and proceeds to step S407 of FIG. 10 to select the recorded moving image partial data distribution.
  • the recorded video partial data distribution distributes the recorded video partial data in which the recorded video data is edited so as to include the feature items to be confirmed by the user.
  • the moving image data obtained by extracting the image of several seconds before and after the time t1 shown in FIG. 3 from the recorded image data becomes the recorded moving image partial data.
  • the distribution method selection unit 44 determines NO in step S406 of FIG. 10, the distribution method selection unit 44 proceeds to step S408 of FIG. 10 to select low-quality recorded video data distribution.
  • the recorded moving image low image quality data distribution the recorded moving image low image quality data for a set time in which the image quality of the recorded moving image data is deteriorated is distributed.
  • step S409 of FIG. 10 determines whether or not the feature items to be confirmed by the user are distributed over the entire recording time of the recorded moving image. do. If YES is determined in step S409 of FIG. 10, the process proceeds to step S410 of FIG. 10 to perform the set time extension process described later.
  • step S411 of FIG. 10 determines whether or not all the recorded moving images are selected for distribution. If YES is determined in step S411 of FIG. 10, and YES is determined in step S409 of FIG. 10, the procedure proceeds to step S410 of FIG. Perform time extension processing. The set time extension process will be described in detail later.
  • Step S412 of FIG. 11 is performed to read the user's designated distribution method from the user database 47. Then, in step S413 of FIG. 11, it is determined whether or not the distribution method previously selected in steps S401 to S411 and the designated distribution method of the user stored in the user database 47 are the same. If YES is determined in step S413 of FIG. 11, the process proceeds to step S414 of FIG. 11 and the distribution method previously selected in steps S401 to S411 is output to the distribution data generation unit 45. On the other hand, if NO is determined in step S413 of FIG. 11, the process proceeds to step S415 of FIG. 11 and the user's designated distribution method is output to the distribution data generation unit 45.
  • the distribution method selection unit 44 when the distribution method selection unit 44 outputs the recorded video partial data distribution to the distribution data generation unit 45, the distribution method selection unit 44 also outputs the data of the time to be extracted from the recorded video data as attached data.
  • the attached data is data of several seconds before and after the time t1 shown in FIG. 3 as the time for extracting the moving image data.
  • the distribution method selection unit 44 when the distribution method selection unit 44 outputs the recorded video low-quality data distribution, the image quality reduction degree of how much the image quality is reduced according to the communication speed with the mobile terminal 50 and the transmission / reception radio wave strength is determined. Output together as attached data.
  • the time data of the frame image extracted from the recorded moving image data is output together as attached data. Further, when the distribution of the text data indicating the abnormal state is output, the text data indicating the abnormal state is also output as attached data.
  • the distribution method selection unit 44 When the distribution method selection unit 44 outputs the image distribution method and the attached data to the distribution data generation unit 45, the distribution method selection process shown in step S306 of FIG. 9 ends.
  • the set time extension process shown in step S410 of FIG. 10 and the subsequent operation will be described.
  • the recorder 12 It is a process of lengthening the set time of and acquiring the video data for the lengthened set time as recorded video data.
  • the image acquisition unit 43 of the server 40 informs the image analysis storage device 10 via the communication device 30 of the preset time before or after the time when the abnormality occurs, or , Outputs a command to lengthen the post-set time.
  • the communication device 30 waits until the set time extension processing command from the image acquisition unit 43 is received. Upon receiving the set time extension processing command from the image acquisition unit 43, the communication device 30 proceeds to step S502 in FIG. 12 to extend either or both of the pre-set time and the post-set time of the recorder 12. Then, the communication device 30 outputs a recorded moving image data request for acquiring the recorded moving image data for the set time extended to the recorder 12 in step S503 of FIG.
  • the recorder 12 uses the video data for the extended set time among the image data stored in the first memory 14 as the recorded video data in the second memory as described above. Write to 15. Then, the recorder 12 transmits the recorded moving image data written in the second memory 15 to the communication device 30.
  • the communication device 30 waits until the recorded moving image data is received. Further, when the communication device 30 receives the recorded image data, as shown in step S505 of FIG. 12, the communication device 30 waits until the recorded moving image request signal from the image acquisition unit 43 of the server 40 is input. Then, when the recorded video request signal is input, the communication device 30 transmits the recorded video data for the set time extended to the image acquisition unit 43 of the server 40 as shown in step S506 of FIG.
  • the image acquisition unit 43 of the server 40 waits until the recorded image data is received in step S303 of FIG. 9, and then transfers the recorded moving image data to the image database 46 in steps S304 and S305 of FIG. While storing it, the terminal communication status data of the mobile terminal 50 is acquired. Then, the distribution method selection unit 44 of the server 40 executes the distribution method selection process as before. Then, when it is determined as NO in step S409 of FIG. 10, it is determined that all the feature items to be confirmed by the user are included in the recorded moving image data, and steps S412 to S414 and S415 of FIG. 11 are executed. Then, the distribution method and the attached data are output to the distribution data generation unit 45.
  • step S409 of FIG. 10 it is determined that some of the feature items to be confirmed by the user are not included in the recorded moving image data, and the set time is set until it is determined to be YES in FIG. Repeat the extension process.
  • the monitoring system 100 of the embodiment selectively selects and distributes the distribution method according to the communication speed with the mobile terminal 50, the transmission / reception radio wave strength with the mobile terminal 50, and the urgency of abnormality. Since the distribution data of the mobile terminal 50 is transmitted by the method, it is possible to reliably notify the user of the abnormal state by distributing the text data and the frame image data even when the communication speed is low or the transmission / reception radio wave strength is low. Further, when the communication speed and the transmission / reception radio wave strength are high, the user can easily understand the abnormal state by delivering a clear image to the user.
  • the monitoring system 100 distributes all the recorded video data, a part of the recorded video data, at least one frame image data of the recorded video, and text data indicating an abnormal state
  • the user can grasp the abnormal state from the delivered abnormal state information without downloading and viewing the moving image from the URL contacted by the abnormality detection mail as in the conventional monitoring system. Therefore, the user can quickly confirm the abnormal state. Further, when the urgency of the abnormality is low and the communication state with the mobile terminal is low, the occurrence of the abnormality can be promptly notified to the user by sending the abnormality detection mail.
  • the monitoring system 100 of the embodiment selects recorded video partial data distribution and recorded video low-quality data distribution according to the feature items to be confirmed by the user, extracts a part of the recorded video data, and distributes it to the user. .. As a result, the user can immediately confirm the feature items and can quickly confirm the abnormal state.
  • the monitoring system 100 performs a set time extension process when the feature items to be confirmed by the user are distributed over the entire recording time of the recorded moving image and the recording time of the recorded moving image data is considered to be short for the user. Since all of the recorded moving image data having a long recording time or low-quality data of the recorded moving image is distributed, the user can easily confirm the abnormal state without requesting the viewing of the moving image data again.
  • the monitoring system 100 of the embodiment allows the user to quickly confirm the abnormal state.
  • the feature to be confirmed by the user is the entire recording time of the recorded video.
  • the set time extension processing is performed, but this is not limited to this.
  • the recorded video data for the initially set time may be delivered as it is without performing the set time extension process, or the recorded video low-quality data in which the image quality of the recorded image data for the initially set time is reduced may be delivered. It may be delivered.
  • the mobile terminal 50 when the user's designated distribution method is not stored in the user database 47, the mobile terminal 50 is in an abnormal state due to the distribution method selected by the distribution method selection unit 44 without executing steps S412 to S415 in FIG. Information may be distributed.
  • the monitoring system 100 may stop the operation after the abnormal state information is delivered to the mobile terminal 50 without executing the steps S309 and S310 of FIG.
  • This operation process is an operation of transmitting the browsed moving image to the mobile terminal 50 when the monitoring system 100 user requests the viewing of the moving image captured by the camera 11 by designating the time by the mobile terminal 50.
  • the server 40 receives the viewing video request as shown in FIG. A viewing video request including a designated time is transmitted to the communication device 30.
  • the communication device 30 transmits a viewing video request to the recorder 12 of the image analysis storage device 10.
  • the recorder 12 that has received the viewing video request uses the video data for the set time before and after the specified time included in the viewing video request as the viewing video data in the second memory 15 among the video data stored in the first memory 14. And sends the viewing video data to the server 40 to the communication device 30.
  • the server 40 stores the received browsing video data in the image database 46, and transmits the browsing video data to the user's mobile terminal 50.
  • the user can receive the transmitted viewing video data and view the video for the set time before and after the time specified by the mobile terminal 50 from a remote location.
  • the monitoring system 100 does not have to include an operation of distributing the browsing video described with reference to FIG. 13 to the mobile terminal 50.
  • 10 image analysis storage device 11 camera, 12 recorder, 13 image storage unit, 14 first memory, 15 second memory, 16 image analysis unit, 17 alarm signal generation unit, 22 entrance door, 25 people, 30 communication device, 35 , 36 Remote communication network, 40 server, 41 communication unit, 42 terminal communication unit, 43 image acquisition unit, 44 distribution method selection unit, 45 distribution data generation unit, 46 image database, 47 user database, 50 mobile terminal, 60 distribution method Selection map, 100 monitoring system, 150 general purpose computer, 151 CPU, 152 ROM, 153 RAM, 154 HDD, 155 mouse, 156 keyboard, 157 display, 158 I / O controller, 159 network controller, 160 data bus.

Abstract

カメラ（１１）を含む画像分析格納装置（１０）と、画像分析格納装置（１０）からアラーム信号を受信した際に異常発生時刻の前後における設定時間分の動画データを記録動画データとして画像分析格納装置（１０）から受信する通信装置（３０）と、通信装置（３０）から記録動画データを受信し異常状態情報を携帯端末（５０）に配信するサーバ（４０）と、を備え、サーバ（４０）は、 携帯端末（５０）との通信状態データと異常の緊急度と異常状態情報の配信方法とを関連付けて格納した配信方法選択マップ（６０）と、記録動画データに基づいて異常の緊急度を判定し、判定した異常の緊急度と携帯端末（５０）から受信した通信状態データと配信方法選択マップ（６０）とに基づいて携帯端末（５０）に配信する異常状態情報の配信方法を選択する配信方法選択部（４４）を備える。

Description

監視システム
　本発明は、カメラを用いた監視システムに関する。
　近年、カメラを用いた監視システムが多く用いられている。例えば、カメラに接続されたレコーダ内に画像解析装置を有し、異常時の前後のみ映像を録画し、異常時に異常検出メールを携帯端末に送付し、携帯端末側から異常時の映像を受信可能とすることにより、少ないデータ格納量と、少ないデータ通信料で異常発生時の画像を遠隔地より確認する監視システムが提案されている（例えば、特許文献１参照）。
特許第６２６６１８４号明細書
　しかし、特許文献１に記載された従来技術による監視システムでは、ユーザは、異常発生時に受信した異常検出メールによって連絡されたＵＲＬから動画をダウンロードして閲覧することにより異常の状況の確認を行うので、異常の状態を確認するのに時間が掛かる場合があった。また、異常シーンの内容、或いは、携帯端末の通信状態に応じて、最適なデータ配信方法が選択できず、迅速に異常の状況確認できない場合があった。
　そこで、本発明は、ユーザが迅速に異常の状態を確認できる監視システムを提供することを目的とする。
　本発明の監視システムは、カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、前記サーバは、前記通信装置から前記記録動画データを取得する画像取得部と、前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備えることを特徴とする。
　これにより、異常シーンの内容、或いは、携帯端末の通信状態に応じて、最適なデータ配信方法を選択できるので、ユーザが迅速に異常の状態を確認できる。
　本発明の監視システムにおいて、前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択してもよい。
　これにより、携帯端末との通信速度と携帯端末との送受信電波強度に応じて最適なデータ配信方法を選択できるので、ユーザがより迅速に異常の状態を確認できる。
　本発明の監視システムにおいて、前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも１つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択してもよい。
　このように、記録動画データの全部配信と、記録動画データの一部配信と、記録動画の少なくとも１つのフレーム画像データの配信と、異常状態を示すテキストデータの配信をするので、ユーザは、従来技術の監視システムのように、異常検出メールによって連絡されたＵＲＬから動画をダウンロードして閲覧することなく、配信された異常状態情報によって異常の状態を把握できる。このため、ユーザは、迅速に異常の状態を確認することができる。また、異常の緊急度が低く、携帯端末との通信状態が低い場合には異常検出メールを発信することによりユーザに迅速に異常の発生を連絡することができる。
　本発明の監視システムにおいて、前記画像取得部は、前記配信方法選択部が前記記録動画データの全部配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信してもよい。
　このように、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。
　本発明の監視システムにおいて、前記記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように前記記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、前記記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信と、を含み、前記配信方法選択部は、前記記録動画データの一部配信を選択した場合で、ユーザが確認すべき特徴事項が前記記録動画の記録時間の一部にのみ存在している場合には前記記録動画部分データ配信を選択し、そうでない場合には前記記録動画低画質データ配信を選択してもよい。
　このように、ユーザが確認すべき特徴事項に応じて記録動画データの一部を抽出してユーザに配信するので、ユーザは迅速に異常の状態を確認できる。
　本発明の監視システムにおいて、前記画像取得部は、前記配信方法選択部が前記記録動画低画質データ配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信してもよい。
　このように、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。
　本発明の監視システムにおいて、前記配信方法選択部は、前記異常の緊急度が高く、前記通信速度と前記送受信電波強度の両方が高い場合には、前記記録動画データの全部配信を選択し、前記異常の緊急度が高く、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、前記記録動画データの一部配信を選択し、前記異常の緊急度が高いが、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常状態を示すテキストデータの配信を選択してもよい。
　本発明の監視システムにおいて、前記配信方法選択部は、前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高い場合には、ユーザが確認すべき特徴事項を含む前記記録動画の少なくとも１つのフレーム画像の配信を選択し、前記異常の緊急度が高くなく、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、異常状態を示すテキストデータの配信を選択し、前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常検出メールの配信を選択してもよい。
　このように、携帯端末との通信速度と携帯端末との送受信電波強度に応じて最適なデータ配信方法を選択できるので、ユーザがより迅速に異常の状態を確認できる。
　本発明の監視システムにおいて、前記サーバは、ユーザの属性とユーザの指定配信方法とを関連付けて格納したユーザデータベースを含み、前記配信方法選択部は、選択した配信方法と、前記ユーザデータベースに格納されたユーザの前記指定配信方法とが同一でない場合には、ユーザの前記指定配信方法を前記配信データ生成部に出力してもよい。
　これにより、ユーザの指定配信方法に基づいて異常情報を配信することができるので、監視システムの使い勝手を向上させることができる。
　本発明の監視システムにおいて、前記携帯端末は、前記サーバから受信した前記異常状態情報に応じて前記サーバと通信し、前記サーバから前記記録動画データを受信してもよい。
　これにより、ユーザは画像分析格納装置に格納された動画データを自由に閲覧して異常の確認を行うことができる。
　本発明は、ユーザが迅速に異常の状態を確認できる監視システムを提供できる。
実施形態の監視システムの構成を示す系統図である。 図１に示すカメラ装置の画像格納部の第１メモリと第２メモリの動画格納時間を示す説明図である。 図１に示す監視システムの画像分析部の画像分析動作を示す説明図である。 図１に示す監視システムのサーバを形成する汎用コンピュータのハードウェア構成図である。 図１に示す配信方法選択マップのデータベース構造を示す図である。 実施形態の監視システムの動作処理を示すシーケンス図である。 図６に示す動作処理におけるレコーダの動作を示すフローチャートである。 図６に示す動作処理における通信装置の動作を示すフローチャートである。 図６に示す動作処理におけるサーバの動作を示すフローチャートである。 図９に示す配信方法選択処理におけるサーバの動作を示すフローチャートである。 図９に示す配信方法選択処理におけるサーバの動作を示すフローチャートである。 図１０に示す設定時間延長処理における通信装置の動作を示すフローチャートである。 実施形態の監視システムの他の動作処理を示すシーケンス図である。
　以下、図面を参照しながら実施形態の監視システム１００について説明する。図１に示すように、カメラ１１を含む画像分析格納装置１０と、画像分析格納装置１０から記録動画データを受信する通信装置３０と、通信装置３０から受信した記録動画データに基づいて異常状態情報を携帯端末５０に配信するサーバ４０と、を備えている。なお、以下の説明では、監視システム１００は、カメラ１１によってビル内の動画を撮像し、この動画に基づいて、不審者の侵入、災害の発生等、ビル内での異常発生を監視するシステムとして説明するが、監視システム１００は、例えば、病院、学校、工場等他の建物、或いは、河川の水位等の屋外の事象の監視にも適用可能である。
　画像分析格納装置１０は、監視対象のビルに設置される装置で、監視対象のビルの内部の動画を撮像する複数のカメラ１１と動画データを格納するレコーダ１２とを含んでいる。カメラ１１は動画の撮像を行うことができる監視カメラである。レコーダ１２は、カメラ１１に接続されてカメラ１１の撮像した動画データを格納する画像格納部１３と、画像格納部１３と接続されてカメラ１１の撮像した動画データを分析してビル内に異常の発生があるかどうかを分析する画像分析部１６と、画像分析部１６から異常発生の信号を受けてアラーム信号を生成するアラーム信号生成部１７とを含んでいる。レコーダ１２は、内部に演算処理を行うＣＰＵとデータ、プログラムを格納する記憶装置とで構成されるコンピュータであり、画像格納部１３、画像分析部１６、アラーム信号生成部１７は、ＣＰＵがプログラムを実行することにより構成される機能ブロックである。
　レコーダ１２の画像格納部１３は、第１メモリ１４、第２メモリ１５の２つの動画データ格納領域を有している。図２に示すように、第１メモリ１４は、カメラ１１で撮像した、１日、あるいは数日、あるいは一週間程度の長期間の動画データを更新しながら保存しておくものである。例えば、１日分の動画データを保存する場合、第１メモリ１４には現時点から１日前までの動画データが保存され、それ以前の動画データは順次消去されていく。数日、一週間分の動画データを保存する場合も同様である。第１メモリ１４に格納される動画データには撮像時刻が入っている。図２に示すように、第２メモリ１５は、第１メモリ１４に格納された動画データの中から、ある時刻ｔ１の前の前設定時間と時刻ｔ１の後の後設定時間との合計の設定時間分の短期間の動画データを１つまたは複数保存するものである。前設定時間は、図２に示す時刻ｔ１と時刻ｔ２との間の時間である。後設定時間は図２に示す時刻ｔ１と時刻ｔ３との間の時間である。設定時間は、前設定時間と後設定時間との合計時間であり、図２に示す時刻ｔ２と時刻ｔ３との間の時間である。前設定時間、後設定時間は、例えば、３０秒でもよいし、１分、５分、或いは１０分でもよい。画像格納部１３は、外部から動画要求信号が入力された場合に、第２メモリ１５に格納されている動画データを外部に出力することができるよう構成されている。なお、前設定時間、後設定時間は外部からの指令によって変更することができる。
　画像分析部１６は、カメラ１１が撮像した動画を分析し、異常の発生を検出する。図３を参照しながらカメラ１１でビルの入口ドア２２を監視する場合を例に、動画の分析と異常検知について簡単に説明する。
　ビルの入口ドア２２が施錠されている場合、画像分析部１６にはビルの入口ドア２２の基準画像として図３の（ａ）に示すような入口ドア２２が閉じた状態の画像が格納されている。画像分析部１６は、カメラ１１から入力される動画と図３の（ａ）に示す基準画像とを比較して両者に差が無い場合には、異常は発生していないと判断する。一方、カメラ１１から図３の（ｂ）に示すように入口ドア２２が開いた状態の動画が入力された場合、この動画と図３の（ａ）に示す基準画像とに差異が発生する。このように、カメラ１１から入力された動画と基準画像との間に差異が発生した場合、画像分析部１６は、入口ドア２２に異常が発生の可能性があると判断する。
　次に、画像分析部１６は、図３の（ｂ）に示すように、入口ドア２２から入って来る人２５を認識する。そして、その人２５の着用している服と予め基準画像として格納している警備員の制服とを比較し、その人２５が警備員であるかどうかを判断する。画像分析部１６は、入口ドア２２から入ってきた人２５が警備員であった場合には、入口ドア２２からの侵入は発生していないと判断する。一方、入口ドア２２から入ってきた人２５が警備員では無い場合には、入口ドア２２に侵入が発生したと判断する。そして、異常が発生したことをアラーム信号生成部１７に出力する。
　アラーム信号生成部１７は、画像分析部１６から異常発生の信号を受信すると異常発生時刻を含むアラーム信号を生成する。アラーム信号は、例えば、「侵入発生」、「１階Ａゾーン」等の異常の種類と異常の発生場所等と異常発生時刻とで構成される信号である。異常の種類については、例えば、数字４ケタによる「００１０」等のコードを用いるようにしてもよい。
　図１に戻って、通信装置３０は、画像分析格納装置１０の接続されているビル内のＬＡＮ回線とセキュリティの確保された遠隔通信ネットワーク３５を接続するゲートウェイ装置である。通信装置３０は、画像分析格納装置１０と通信し、画像分析格納装置１０からアラーム信号を受信した際に、画像分析格納装置１０のレコーダ１２の第２メモリ１５に格納された動画データの内の異常発生時刻の前後における設定時間分の動画データを記録動画データとして受信し、受信した記録動画データをサーバ４０に出力する。
　携帯端末５０は、監視システム１００のユーザであるビルの管理者、オーナー等が所有し、メールの送受信、画像データの受信、閲覧ができるスマートフォン、タブレット端末等である。携帯端末５０は、監視対象のビルから離れた遠隔地に位置していてもよい。
　サーバ４０は、通信装置３０と通信し、通信装置３０から記録動画データを受信し、受信した記録動画データに基づいて異常状態情報を携帯端末５０に配信する。サーバ４０は、通信部４１と、端末通信部４２と、画像取得部４３と、配信方法選択部４４と、配信データ生成部４５と、画像データベース４６と、ユーザデータベース４７と、配信方法選択マップ６０の各機能ブロックを含んでいる。
　サーバ４０の各機能ブロックは、図４に示すような汎用コンピュータ１５０によって実現することができる。図４に示すように、汎用コンピュータ１５０は、情報処理を行うプロセッサであるＣＰＵ１５１と、情報処理の際にデータを一時的に記憶するＲＯＭ１５２、ＲＡＭ１５３と、プログラムやユーザのデータ等を格納するハードディスクドライブ（ＨＤＤ）１５４と、入力手段として設けられたマウス１５５と、キーボード１５６、及び表示装置として設けられたディスプレイ１５７とを含んでいる。ＣＰＵ１５１とＲＯＭ１５２とＲＡＭ１５３とＨＤＤ１５４とはデータバス１６０によって接続されている。また、マウス１５５とキーボード１５６とディスプレイ１５７とは入出力コントローラ１５８を介してデータバス１６０に接続されている。また、データバス１６０には通信手段として設けられたネットワークコントローラ１５９が接続されている。
　サーバ４０の通信部４１、端末通信部４２、画像取得部４３、配信方法選択部４４、配信データ生成部４５は、図４に示す汎用コンピュータ１５０のハードウェアとＣＰＵ１５１で動作するプログラムとの協調動作により実現される。画像データベース４６、ユーザデータベース４７は、図４に示す汎用コンピュータ１５０のＨＤＤ１５４にそれぞれ動画データ、ユーザデータを格納することにより実現される。また、配信方法選択マップ６０は、図４に示す汎用コンピュータ１５０のＨＤＤ１５４に格納されている。なお、ＨＤＤ１５４に代えて、外部の記憶手段をネットワーク経由で利用することによって実現してもよい。
　通信部４１は、遠隔通信ネットワーク３５に接続されており、通信装置３０を介して画像分析格納装置１０との間でデータの授受を行う。端末通信部４２は、遠隔通信ネットワーク３６に接続されており、携帯端末５０との間でデータの授受を行う。
　画像取得部４３は、通信部４１が通信装置３０から受信した記録動画データを取得し、画像データベース４６に格納する。配信方法選択部４４は、画像取得部４３から入力された記録動画データに基づいて異常の緊急度を判定し、判定した異常の緊急度と携帯端末５０から受信した携帯端末５０との通信状態データと配信方法選択マップ６０とに基づいて携帯端末５０に配信する異常状態情報の配信方法を選択する。ここで、配信方法選択マップ６０は、図５に示すように携帯端末５０との通信状態データと異常の緊急度と異常状態情報の配信方法とを関連付けて格納したマップである。配信方法選択マップ６０については後で詳しく説明する。
　配信データ生成部４５は配信方法選択部４４が選択した配信方法に基づいて携帯端末５０に配信する異常状態情報の配信データを生成して端末通信部４２に出力する。
　画像データベース４６には、通信部４１が通信装置３０から受信した記録動画データが格納されている。ユーザデータベース４７には、監視システム１００のユーザであるビルの管理者、オーナー等のメールアドレス、住所、電話番号等のユーザの属性とユーザの指定配信方法とが関連付けられて格納されている。ここで、指定配信方法は、後で説明する配信方法選択マップ６０に格納されている配信方法と同様、記録動画データの全部配信、記録動画データの一部配信、フレーム画像の配信、異常状態を示すテキストデータの配信、異常検出メールの配信としてもよいし、後で説明する、記録動画部分データ配信、記録動画低画質データ配信を含んでもよい。また、これ以外の配信方法を指定配信方法として格納してもよい。ユーザは、携帯端末５０でサーバ４０と通信してユーザデータベース４７に格納されている指定配信方法を自由に変更することができる。
　サーバ４０は、ネットワークに接続されていれば、例えば、クラウド上のサーバ装置でもよいし、監視対象のビルから離れた遠隔地にあるデータセンター等に設置したサーバ装置でもよい。
　次に、図５を参照しながら配信方法選択マップ６０について説明する。先に説明したように、配信方法選択マップ６０は、携帯端末５０との通信状態データと異常の緊急度と異常状態情報の配信方法とを関連付けて格納したマップである。通信状態データは、サーバ４０の端末通信部４２と携帯端末５０との通信速度、及び、サーバ４０の端末通信部４２と携帯端末５０との送受信電波強度を含んでいる。図５に示すように、配信方法選択マップ６０は、携帯端末５０との通信速度と、携帯端末５０との送受信電波強度と、異常の緊急度とによって選択する配信方法を決めたマトリクスマップである。図５において、配信方法１は、記録動画データの全部配信を示す。配信方法２は、記録動画データの一部配信を示す。配信方法３は、ユーザが確認すべき特徴事項を含む記録動画の少なくとも１つのフレーム画像の配信を示す。配信方法４は、異常状態を示すテキストデータの配信を示す。配信方法５は、異常検出メールの配信を示す。
　配信方法１の記録動画データの全部配信は、通信装置３０から取得した記録画像データの画質の低下処理等をせず、オリジナルのデータのまま配信する配信方法である。配信方法２の記録動画データの一部配信は、通信装置３０から取得した記録画像データを編集してオリジナルのデータの一部を配信する配信方法である。記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信とを含む。ここで、記録動画部分データは、例えば、記録画像データから図３に示す時刻ｔ１の前後数秒の動画を抽出した動画データでもよいし、盗難発生をとらえた動画データの中の盗難の瞬間の動画データや、犯人の顔が含まれている瞬間の動画データでもよい。
　配信方法３のユーザが確認すべき特徴事項を含む記録動画の少なくとも１つのフレーム画像の配信は、例えば、記録画像データの図３に示す時刻ｔ１の前後数秒の動画データから１つあるいは複数のフレーム画像を抽出した画像の配信でもよる。また、盗難発生をとらえた動画の中の盗難中のフレーム画像や、犯人の顔が含まれているフレーム画像の配信でもよい。配信方法４の異常状態を示すテキストデータの配信は、例えば、「不審者の侵入が発生しました」、「火災が発生しています。緊急事態です」というような異常状態を示すテキストデータの配信である。配信方法５の異常検出メールは、例えば、「異常検出」という文面のメールを発信する配信方法である。
　図５に示す配信方法選択マップ６０によれば、配信方法選択部４４は、異常の緊急度が高く、通信速度と送受信電波強度の両方が高い場合には、配信方法１の記録動画データの全部配信を選択する。また、配信方法選択部４４は、異常の緊急度が高く、通信速度又は送受信電波強度のいずれか一方のみが高い場合、配信方法２の記録動画データの一部配信を選択する。更に、配信方法選択部４４は、異常の緊急度が高いが、通信速度と送受信電波強度の両方が高くない場合、すなわち、通信速度又は送受信電波強度の両方が中程度か低い場合には、配信方法４の異常状態を示すテキストデータの配信を選択する。
　また、配信方法選択部４４は、異常の緊急度が高くなく、通信速度と送受信電波強度の両方が高い場合に、すなわち、異常の緊急度が中程度か低い場合で通信速度と送受信電波強度の両方が高い場合には、配信方法３のユーザが確認すべき特徴事項を含む記録動画の少なくとも１つのフレーム画像の配信を選択する。また、配信方法選択部４４は、異常の緊急度が中程度か低い場合で、通信速度又は送受信電波強度のいずれか一方のみが高い場合には、配信方法４の異常状態を示すテキストデータの配信を選択する。更に、配信方法選択部４４は、異常の緊急度が中程度か低い場合で、通信速度と送受信電波強度の両方が中程度か低い場合には、配信方法５の異常検出メールの配信を選択する。
　次に図６から図１２を参照しながら実施形態の監視システム１００の動作について説明する。
　図６に示すように、カメラ１１で撮像した動画データはレコーダ１２に送られる。図７のステップＳ１０１に示すように、レコーダ１２はカメラ１１から受け取った動画データを第１メモリ１４に格納していく。また、図７のステップＳ１０２に示すように、レコーダ１２の画像分析部１６は、先に説明したような方法で動画データと基準画像データとを比較、分析して異常発生の検出を行う。異常発生が検出されない場合には、レコーダ１２は図７のステップＳ１０１に戻ってカメラ１１の動画データの格納と異常発生の検出動作を繰り返し実行する。
　一方、通信装置３０は、図８のステップＳ２０１に示すようにレコーダ１２に対してポーリングを行っている。ポーリングは、例えば、１回／分程度の頻度で行ってもよい。
　そして、図７のステップＳ１０３で画像分析部１６が異常発生を検出したら、画像分析部１６は、異常発生を検出した信号をアラーム信号生成部１７に送信する。図７のステップＳ１０４において、アラーム信号生成部１７は、画像分析部１６から送信された信号に基づいて異常の種類と異常の発生場所等と異常発生時刻とで構成されるアラーム信号を生成する。
　レコーダ１２は、アラーム信号を生成した後に、図７のステップＳ１０５に示すように通信装置３０からのポーリングを受信したら、図７のステップＳ１０６に示すように、アラーム信号生成部１７が生成したアラーム信号を通信装置３０に送信する。
　通信装置３０は、図８のステップＳ２０２に示すように、レコーダ１２からアラーム信号を受信したら、図８のステップＳ２０３に進み、レコーダ１２に対して記録動画データ要求信号を出力する。
　レコーダ１２は、図７のステップＳ１０７に示すように通信装置３０から記録動画データ要求信号を受信するまで待機する。そして、レコーダ１２は、通信装置３０から記録動画データ要求信号を受信したら、第１メモリ１４に格納されている画像データの内、図２に示すように画像分析部１６によって特定された異常発生時刻の前設定時間と後設定時間の合計の設定時間分の動画データを記録動画データとして第２メモリ１５に書き出す。そして、レコーダ１２は、図７のステップＳ１０８に示すように、第２メモリ１５に書き出した記録動画データを通信装置３０に送信する。
　通信装置３０は、図８のステップＳ２０４に示すように、レコーダ１２から記録動画データを受信するまで待機し、記録動画データを受信したら図８のステップＳ２０５に進んで、サーバ４０に対してアラーム信号を送信する。
　図９のステップＳ３０１に示すように、サーバ４０は、通信装置３０からアラーム信号を受信するまで待機し、アラーム信号を受信したら、図９のステップＳ３０２に示すように、通信装置３０に対して記録動画データ要求信号を送信する。
　通信装置３０は、図８のステップＳ２０６に示すように、サーバ４０からの記録動画データ要求信号を受信するまで待機し、記録動画データ要求信号を受信したら図８のステップＳ２０７に進んで記録動画データをサーバ４０に送信する。
　サーバ４０の画像取得部４３は、図９のステップＳ３０３に示すように、記録動画データを受信するまで待機し、記録動画データを受信したら、図９のステップＳ３０４に進み、画像データベース４６に記録動画データを格納、保存する。また、画像取得部４３は、記録動画データを配信方法選択部４４に出力する。
　サーバ４０の端末通信部４２は、図９のステップＳ３０５において、携帯端末５０との通信速度と、携帯端末５０との送受信電波強度とを取得して配信方法選択部４４に出力する。
　配信方法選択部４４は、図９のステップＳ３０６において、図１０，１１に示す配信方法選択処理を実行し、画像配信方法と付属データとを配信データ生成部４５に出力する。配信方法選択処理については、後で詳細に説明する。
　サーバ４０の配信データ生成部４５は、図９のステップＳ３０７において、画像データベース４６から記録動画データを読み出し、配信方法選択部４４から入力された配信方法と付属データとに基づいて、携帯端末５０に配信する配信データを生成して端末通信部４２に出力する。そして、端末通信部４２は、図９のステップＳ３０８において、携帯端末５０に配信データを送信する。
　端末通信部４２は、図９のステップＳ３０９で携帯端末５０から記録動画データ要求信号が入力されるまで待機し、携帯端末５０から記録動画データ要求信号が入力された場合には、記録動画要求信号を配信方法選択部４４に出力する。配信方法選択部４４は、配信方法として記録動画データの全部配信を選択して配信方法と付属データを配信データ生成部４５に出力する。配信データ生成部４５は記録動画データを画像データベース４６から読み出して配信データとして端末通信部４２に出力する。端末通信部４２は、図９のステップＳ３１０において、入力された記録動画データを携帯端末５０に送信する。
　次に図１０，１１を参照しながら配信方法選択処理について説明する。図１０に示すように、配信方法選択部４４は、図１０のステップＳ４０１で画像取得部４３から記録動画データを取得し、図１０のステップＳ４０２で端末通信部４２から携帯端末５０との通信速度、送受信電波強度を取得する。そして、配信方法選択部４４は、図１０のステップＳ４０３において、記録動画から異常の緊急度を判定する。
　記録動画に基づいて、異常の緊急度を判定する方法はいろいろな方法があるが、先に図３を参照して説明した例のように、記録動画と基準画像とを比較する方法がある。例えば、入口ドア２２から人２５が入って来る場合、その人２５の着用している服が予め基準画像として格納している警備員の制服ではなく、予め基準画像として登録した凶器の画像が存在する場合には、緊急度が高いと判定する。また、警備員の制服を着用しておらず、走って侵入してきた場合には、緊急度は中程度と判断する。更に、警備員の制服を着用していないが、配達員の制服を着用している場合には、緊急度は低いと判定する。また、河川の水位を監視している場合に、河川の水位の上昇の程度に応じて緊急度を判定するようにしてもよい。配信方法選択部４４は、異常の緊急度の判定が終了したら図１０のステップＳ４０４に進んで、図５に示す配信方法選択マップ６０に基づいて異常状態情報の配信方法の選択を行う。
　ここで、配信方法選択部４４は、携帯端末５０との間の回線種類に基づいて通信速度の高速、中速、低速の判定をしてもよい。例えば、回線の種類が、ＷｉＦｉ，５Ｇ，４Ｇ等の場合は高速、３Ｇの場合は中速、電話回線の場合は低速のように判定してもよい。また、配信方法選択部４４は、携帯端末５０から携帯端末５０の現在位置情報を取得し、携帯端末５０の現在位置に基づいて送受信電波強度の高強度、中強度、低強度の判定をしてもよい。例えば、携帯端末５０が移動中の場合には、中強度、携帯端末５０が地下にある場合には、低強度のように判定してもよい。
　そして、配信方法選択部４４は、通信速度の高速、中速、低速と、送受信電波強度の高強度、中強度、低強度と、異常の緊急度の高い、中程度、低いと、に基づいて、図５に示す配信方法選択マップ６０から１つの配信方法を選択する。先に説明したように、例えば、異常の緊急度が高く、通信速度と送受信電波強度の両方が高い場合には、配信方法選択部４４は配信方法１の記録動画データの全部配信を選択する。また、異常の緊急度が高く、通信速度又は送受信電波強度のいずれか一方のみが高い場合、配信方法選択部４４は配信方法２の記録動画データの一部配信を選択する。
　配信方法選択部４４は、配信方法を選択したら、図１０のステップＳ４０５に進んで記録動画データの一部配信を選択したかどうかを判断する。そして、図１０のステップＳ４０５でＹＥＳと判断した場合、図１０のステップＳ４０６に進んで、ユーザが確認すべき特徴事項が記録動画の記録時間の一部にのみ存在しているかどうかを判断する。例えば、先に説明した入口ドア２２から人２５が入って来る場合、入口ドア２２からの人２５の侵入動作が記録されているのは図３に示す時刻ｔ１の前後数秒であり、それ以前は、入口ドア２２が閉まった状態の画像であり、その後は、入口ドア２２が開いた状態の画像となる場合がある。この場合、ユーザの確認すべき特徴事項は、図３に示す時刻ｔ１の前後数秒にのみ記録されている入口ドア２２からの人２５の侵入動作である。このような場合、配信方法選択部４４は、図１０のステップＳ４０６でＹＥＳと判断して図１０のステップＳ４０７に進んで記録動画部分データ配信を選択する。
　このように，記録動画部分データ配信は、ユーザが確認すべき特徴事項を含むように記録動画データを編集した記録動画部分データを配信する。先の例で説明すると、記録画像データから図３に示す時刻ｔ１の前後数秒の画像を抽出した動画データが記録動画部分データとなる。
　また、配信方法選択部４４は、図１０のステップＳ４０６でＮＯと判断した場合には、図１０のステップＳ４０８に進んで記録動画低画質データ配信を選択する。ここで、記録動画低画質データ配信は、記録動画データの画質を低下させた設定時間分の記録動画低画質データを配信する。
　配信方法選択部４４は、記録動画低画質データ配信を選択した場合、図１０のステップＳ４０９に進んで、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しているかどうかを判断する。そして、図１０のステップＳ４０９でＹＥＳと判断した場合には、図１０のステップＳ４１０に進んで後で説明する設定時間延長処理を行う。
　また、配信方法選択部４４は、図１０のステップＳ４０５でＮＯと判断した場合、図１０のステップＳ４１１に進んで記録動画の全部配信を選択したかどうかを判断する。そして、図１０のステップＳ４１１でＹＥＳと判断した場合も記録動画低画質データ配信を選択した場合と同様、図１０のステップＳ４０９でＹＥＳと判断した場合には、図１０のステップＳ４１０に進んで設定時間延長処理を行う。設定時間延長処理については、後で詳細に説明する。
　配信方法選択部４４は、図１０のステップＳ４０７に進んで記録動画部分データ配信を選択した場合、図１０のステップＳ４０９でＮＯと判断した場合、図１０のステップＳ４１１でＮＯと判断した場合には、図１１のステップＳ４１２に進んでユーザデータベース４７からユーザの指定配信方法を読み出す。そして、図１１のステップＳ４１３で、先にステップＳ４０１～Ｓ４１１で選択した配信方法と、ユーザデータベース４７に格納されたユーザの指定配信方法とが同一かどうかを判断する。そして、図１１のステップＳ４１３でＹＥＳと判断した場合には、図１１のステップＳ４１４に進み、先にステップＳ４０１～Ｓ４１１で選択した配信方法を配信データ生成部４５に出力する。一方、図１１のステップＳ４１３でＮＯと判断した場合には、図１１のステップＳ４１５に進み、ユーザの指定配信方法を配信データ生成部４５に出力する。
　ここで、配信方法選択部４４は、記録動画部分データ配信を配信データ生成部４５に出力する場合には、記録動画データの中から抽出する時間のデータを付属データとして一緒に出力する。先の例で言えば、付属データは、動画データを抽出する時間として図３に示す時刻ｔ１の前後数秒というデータである。また、配信方法選択部４４は、記録動画低画質データ配信を出力する場合には、携帯端末５０との通信速度、送受信電波強度に応じて、どの程度の画質低減を行うかの画質低減度を付属データとして一緒に出力する。また、ユーザが確認すべき特徴事項を含む記録動画の少なくとも１つのフレーム画像の配信を出力する場合には、記録動画データの中から抽出するフレーム画像の時間データを付属データとして一緒に出力する。また、異常状態を示すテキストデータの配信を出力する場合には、付属データとして異常状態を示すテキストデータを一緒に出力する。
　配信方法選択部４４は、画像配信方法と付属データとを配信データ生成部４５に出力したら図９のステップＳ３０６に示す配信方法選択処理を終了する。
　次に図１１，１２を参照しながら、図１０のステップＳ４１０に示す設定時間延長処理とその後の動作について説明する。設定時間延長処理は、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しており、特徴事項の一部が記録動画データに含まれていない可能性が有る場合に、レコーダ１２の設定時間を長くして、長くした設定時間分の動画データを記録動画データとして取得する処理である。
　サーバ４０の画像取得部４３は、配信方法選択部４４が図１０のステップＳ４０９でＹＥＳと判断した場合、通信装置３０を介して画像分析格納装置１０に異常発生時刻の前後における前設定時間、又は、後設定時間を長くさせる指令を出力する。
　図１２のステップＳ５０１に示すように、通信装置３０は画像取得部４３からの設定時間延長処理指令を受信するまで待機している。通信装置３０は、画像取得部４３からの設定時間延長処理指令を受信したら、図１２のステップＳ５０２に進んで、レコーダ１２の前設定時間と後設定時間のいずれか一方又は両方を延長する。そして、通信装置３０は、図１２のステップＳ５０３においてレコーダ１２に延長した設定時間分の記録動画データを取得する記録動画データ要求を出力する。
　レコーダ１２は、記録動画要求信号を受信したら、先に説明したと同様、第１メモリ１４に格納されている画像データの内、延長された設定時間分の動画データを記録動画データとして第２メモリ１５に書き出す。そして、レコーダ１２は第２メモリ１５に書き出した記録動画データを通信装置３０に送信する。
　図１２のステップＳ５０４に示すように、通信装置３０は、記録動画データを受信するまで待機する。また、通信装置３０は、記録画像データを受信したら図１２のステップＳ５０５に示すように、サーバ４０の画像取得部４３からの記録動画要求信号が入力されるまで待機する。そして、通信装置３０は、記録動画要求信号が入力されたら、図１２のステップＳ５０６に示すようにサーバ４０の画像取得部４３に延長された設定時間分の記録動画データを送信する
　設定時間延長処理が終了したらサーバ４０の画像取得部４３は、図９のステップＳ３０３で記録画像データを受信するまで待機した後、図９のステップＳ３０４、ステップＳ３０５で記録動画データを画像データベース４６に格納すると共に携帯端末５０の端末通信状態データを取得する。そして、サーバ４０の配信方法選択部４４は、先ほどと同様、配信方法選択処理を実行する。そして、図１０のステップＳ４０９でＮＯと判断した場合には、ユーザが確認すべき特徴事項の全部が記録動画データに含まれていると判断して、図１１のステップＳ４１２～Ｓ４１４、Ｓ４１５を実行して配信方法と付属データを配信データ生成部４５に出力する。
　また、図１０のステップＳ４０９でＹＥＳと判断した場合には、ユーザが確認すべき特徴事項の一部が記録動画データに含まれていないと判断して、図１０でＹＥＳと判断するまで設定時間延長処理を繰り返して実行する。
　以上説明したように、実施形態の監視システム１００は、携帯端末５０との通信速度と、携帯端末５０との送受信電波強度と、異常の緊急度とによって配信法保を選択視し、選択した配信方法によって携帯端末５０の配信データを送信するので、通信速度が低い場合や送受信電波強度が低い場合でもテキストデータやフレーム画像データの配信により確実にユーザに異常状態を通知することができる。また、通信速度や送受信電波強度が高い場合には、クリアな画像をユーザに配信することにより、ユーザが容易に異常の状態を理解することができる。
　また、監視システム１００は、記録動画データの全部配信と、記録動画データの一部配信と、記録動画の少なくとも１つのフレーム画像データの配信と、異常状態を示すテキストデータの配信をするので、ユーザは、従来技術の監視システムのように、異常検出メールによって連絡されたＵＲＬから動画をダウンロードして閲覧することなく、配信された異常状態情報によって異常の状態を把握できる。このため、ユーザは、迅速に異常の状態を確認することができる。また、異常の緊急度が低く、携帯端末との通信状態が低い場合には異常検出メールを発信することによりユーザに迅速に異常の発生を連絡することができる。
　更に、実施形態の監視システム１００は、ユーザが確認すべき特徴事項に応じて記録動画部分データ配信、記録動画低画質データ配信を選択し、記録動画データの一部を抽出してユーザに配信する。これにより、ユーザは特徴事項をすぐに確認でき、異常状態を迅速に確認することができる。
　また、監視システム１００は、ユーザが確認すべき特徴事項が記録動画の記録時間の全体に分布しており、ユーザにとって記録動画データの記録時間が短いと思われる場合には設定時間延長処理を行って、記録時間を長くした記録動画データの全部或いは記録動画の低画質データを配信するので、ユーザが再度動画データの閲覧要求をせずに容易に異常状態を確認することができる。
　以上説明したように、実施形態の監視システム１００は、ユーザが迅速に異常の状態を確認できる。
　以上の説明では、実施形態の監視システム１００は、記録動画データの全部配信、又は、記録動画低画質データ配信を選択した場合で、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、設定時間延長処理を行うこととして説明したがこれ限らない。例えば、設定時間延長処理を行わず、当初の設定時間分の記録動画データをそのまま配信するようにしてもよいし、当初の設定時間分の記録画像データの画質を低減した記録動画低画質データを配信するようにしてもよい。
　また、ユーザデータベース４７にユーザの指定配信方法を格納していない場合には、図１１のステップＳ４１２～Ｓ４１５を実行せずに、配信方法選択部４４が選択した配信方法によって携帯端末５０に異常状態情報を配信してもよい。
　また、監視システム１００は、図９のステッブＳ３０９、Ｓ３１０を実行せず、携帯端末５０に異常状態情報の配信を行ったら、動作を停止してもよい。
　次に、図１３を参照しながら、監視システム１００の他の動作処理について簡単に説明する。この動作処理は、監視システム１００ユーザから携帯端末５０によって時刻を指定してカメラ１１の撮像した動画の閲覧要求があった場合に閲覧動画を携帯端末５０に送信する動作である。
　図１３に示すように、監視システム１００のユーザが携帯端末５０からサーバ４０にアクセスして指定時刻の動画の閲覧を要求する閲覧動画要求を入力すると、図１３に示すように、サーバ４０は、通信装置３０に対して指定時刻を含む閲覧動画要求を発信する。これを受けた通信装置３０は、画像分析格納装置１０のレコーダ１２に閲覧動画要求を送信する。閲覧動画要求を受信したレコーダ１２は、第１メモリ１４に格納されている動画データの内、閲覧動画要求に含まれる指定時刻の前後の設定時間分の動画データを閲覧動画データとして第２メモリ１５に書き出し、通信装置３０に閲覧動画データをサーバ４０に送信する。サーバ４０は、受信した閲覧動画データを画像データベース４６に格納すると共に、ユーザの携帯端末５０に閲覧動画データを送信する。
　これにより、ユーザは送信された閲覧動画データを受信し、携帯端末５０で指定した時刻の前後の設定時間分の動画を遠隔地から閲覧することができる。
　なお、監視システム１００は、図１３を参照して説明した閲覧動画を携帯端末５０に配信する動作 を備えていなくてもよい。
　１０　画像分析格納装置、１１　カメラ、１２　レコーダ、１３　画像格納部、１４　第１メモリ、１５　第２メモリ、１６　画像分析部、１７　アラーム信号生成部、２２　入口ドア、２５　人、３０　通信装置、３５，３６　遠隔通信ネットワーク、４０　サーバ、４１　通信部、４２　端末通信部、４３　画像取得部、４４　配信方法選択部、４５　配信データ生成部、４６　画像データベース、４７　ユーザデータベース、５０　携帯端末、６０　配信方法選択マップ、１００　監視システム、１５０　汎用コンピュータ、１５１　ＣＰＵ、１５２　ＲＯＭ、１５３　ＲＡＭ、１５４　ＨＤＤ、１５５　マウス、１５６　キーボード、１５７　ディスプレイ、１５８　入出力コントローラ、１５９　ネットワークコントローラ、１６０　データバス。
 

Claims (10)

  1. 　監視システムであって、
    　カメラが撮像した動画データを格納すると共に、前記カメラが撮像した動画データを分析し、異常を検出した際に異常発生時刻を含むアラーム信号を生成する画像分析格納装置と、
    　前記画像分析格納装置と通信し、前記画像分析格納装置から前記アラーム信号を受信した際に、前記画像分析格納装置に格納された動画データの内の前記異常発生時刻の前後における設定時間分の動画データを記録動画データとして前記画像分析格納装置から受信する通信装置と、
    　前記通信装置と通信し、前記通信装置から前記記録動画データを受信し、受信した前記記録動画データに基づいて異常状態情報を携帯端末に配信するサーバと、を備え、
    　前記サーバは、
    　前記通信装置から前記記録動画データを取得する画像取得部と、
    　前記携帯端末との通信状態データと前記異常の緊急度と前記異常状態情報の配信方法とを関連付けて格納した配信方法選択マップと、
    　前記画像取得部から入力された前記記録動画データに基づいて前記異常の緊急度を判定し、判定した前記異常の緊急度と前記携帯端末から受信した前記携帯端末との前記通信状態データと前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択する配信方法選択部と、
    　前記配信方法選択部が選択した配信方法に基づいて前記携帯端末に配信する前記異常状態情報の配信データを生成する配信データ生成部と、を備えること、
    　を特徴とする監視システム。
  2. 　請求項１に記載の監視システムであって、
    　前記通信状態データは、前記携帯端末との通信速度と前記携帯端末との送受信電波強度とを含み、
    　前記配信方法選択部は、前記異常の緊急度と前記通信速度と前記送受信電波強度と前記配信方法選択マップとに基づいて前記携帯端末に配信する前記異常状態情報の配信方法を選択すること、
    　を特徴とする監視システム。
  3. 　請求項２に記載の監視システムであって、
    　前記配信方法選択部は、前記記録動画データの全部配信と、前記記録動画データの一部配信と、記録動画の少なくとも１つのフレーム画像データの配信と、異常状態を示すテキストデータの配信と、異常検出メールの配信との内のいずれか一つの配信方法を選択すること、
    　を特徴とする監視システム。
  4. 　請求項３に記載の監視システムであって、
    　前記画像取得部は、前記配信方法選択部が前記記録動画データの全部配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信すること、
    　を特徴とする監視システム。
  5. 　請求項３又は４に記載の監視システムであって、
    　前記記録動画データの一部配信は、ユーザが確認すべき特徴事項を含むように前記記録動画データを編集した記録動画部分データを配信する記録動画部分データ配信と、前記記録動画データの画質を低下させた記録動画低画質データを配信する記録動画低画質データ配信と、を含み、
    　前記配信方法選択部は、前記記録動画データの一部配信を選択した場合で、
    　ユーザが確認すべき特徴事項が前記記録動画の記録時間の一部にのみ存在している場合には前記記録動画部分データ配信を選択し、そうでない場合には前記記録動画低画質データ配信を選択すること、
    　を特徴とする監視システム。
  6. 　請求項５に記載の監視システムであって、
    　前記画像取得部は、前記配信方法選択部が前記記録動画低画質データ配信を選択した場合であって、ユーザが確認すべき特徴事項が前記記録動画の記録時間の全体に分布している場合には、前記通信装置を介して前記画像分析格納装置に前記異常発生時刻の前後における設定時間を長くさせる指令を出力し、前記通信装置を介して長くした設定時間分の動画データを前記記録動画データとして前記画像分析格納装置から受信すること、
    　を特徴とする監視システム。
  7. 　請求項３から６のいずれか１項に記載の監視システムであって、
    　前記配信方法選択部は、
    　前記異常の緊急度が高く、前記通信速度と前記送受信電波強度の両方が高い場合には、前記記録動画データの全部配信を選択し、
    　前記異常の緊急度が高く、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、前記記録動画データの一部配信を選択し、
    　前記異常の緊急度が高いが、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常状態を示すテキストデータの配信を選択すること、
    　を特徴とする監視システム。
  8. 　請求項３から７のいずれか１項に記載の監視システムであって、
    　前記配信方法選択部は、
    　前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高い場合には、ユーザが確認すべき特徴事項を含む前記記録動画の少なくとも１つのフレーム画像の配信を選択し、
    　前記異常の緊急度が高くなく、前記通信速度又は前記送受信電波強度のいずれか一方のみが高い場合には、異常状態を示すテキストデータの配信を選択し、
    　前記異常の緊急度が高くなく、前記通信速度と前記送受信電波強度の両方が高くない場合には、異常検出メールの配信を選択すること、
    　を特徴とする監視システム。
  9. 　請求項３から８のいずれか１項に記載の監視システムであって、
    　前記サーバは、ユーザの属性とユーザの指定配信方法とを関連付けて格納したユーザデータベースを含み、
    　前記配信方法選択部は、選択した配信方法と、前記ユーザデータベースに格納されたユーザの前記指定配信方法とが同一でない場合には、ユーザの前記指定配信方法を前記配信データ生成部に出力すること、
    　を特徴とする監視システム。
  10. 　請求項１から９のいずれか１項に記載の監視システムであって、
    　前記携帯端末は、前記サーバから受信した前記異常状態情報に応じて前記サーバと通信し、前記サーバから前記記録動画データを受信すること、
    　を特徴とする監視システム。
     
PCT/JP2020/026772 2020-07-09 2020-07-09 監視システム WO2022009356A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2020/026772 WO2022009356A1 (ja) 2020-07-09 2020-07-09 監視システム
JP2022528939A JP7118322B2 (ja) 2020-07-09 2020-07-09 監視システム
CN202080102698.1A CN115836516B (zh) 2020-07-09 2020-07-09 监视系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/026772 WO2022009356A1 (ja) 2020-07-09 2020-07-09 監視システム

Publications (1)

Publication Number Publication Date
WO2022009356A1 true WO2022009356A1 (ja) 2022-01-13

Family

ID=79552398

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/026772 WO2022009356A1 (ja) 2020-07-09 2020-07-09 監視システム

Country Status (3)

Country Link
JP (1) JP7118322B2 (ja)
CN (1) CN115836516B (ja)
WO (1) WO2022009356A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023175764A1 (ja) * 2022-03-16 2023-09-21 日本電気株式会社 画像処理装置、画像処理方法、および記録媒体
TWI840293B (zh) 2023-08-18 2024-04-21 合作金庫商業銀行股份有限公司 保管箱攝影畫面自動節錄系統及其方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006085500A1 (ja) * 2005-02-09 2006-08-17 Matsushita Electric Industrial Co., Ltd. 監視カメラ装置、それを用いた監視システムおよび監視画像伝送方法
JP6266184B1 (ja) * 2017-03-16 2018-01-24 三菱電機ビルテクノサービス株式会社 監視システム
JP2018101416A (ja) * 2016-12-21 2018-06-28 ホーチキ株式会社 火災監視システム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6161849B1 (ja) * 2016-06-01 2017-07-12 三菱電機株式会社 監視装置および監視方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006085500A1 (ja) * 2005-02-09 2006-08-17 Matsushita Electric Industrial Co., Ltd. 監視カメラ装置、それを用いた監視システムおよび監視画像伝送方法
JP2018101416A (ja) * 2016-12-21 2018-06-28 ホーチキ株式会社 火災監視システム
JP6266184B1 (ja) * 2017-03-16 2018-01-24 三菱電機ビルテクノサービス株式会社 監視システム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023175764A1 (ja) * 2022-03-16 2023-09-21 日本電気株式会社 画像処理装置、画像処理方法、および記録媒体
TWI840293B (zh) 2023-08-18 2024-04-21 合作金庫商業銀行股份有限公司 保管箱攝影畫面自動節錄系統及其方法

Also Published As

Publication number Publication date
CN115836516A (zh) 2023-03-21
JP7118322B2 (ja) 2022-08-15
JPWO2022009356A1 (ja) 2022-01-13
CN115836516B (zh) 2024-03-15

Similar Documents

Publication Publication Date Title
US10123051B2 (en) Video analytics with pre-processing at the source end
JP6266184B1 (ja) 監視システム
US8417090B2 (en) System and method for management of surveillance devices and surveillance footage
KR100696728B1 (ko) 감시정보송신장치 및 감시정보송신방법
US7730534B2 (en) Enterprise video intelligence and analytics management system and method
KR200433431Y1 (ko) 독립형 감시 시스템
US20150154840A1 (en) System and method for managing video analytics results
JP5636205B2 (ja) 画像記録制御装置及び監視システム
JP6872963B2 (ja) 監視カメラシステム
JP3908707B2 (ja) 防犯監視システム、防犯監視方法、および、防犯監視プログラム
JP3942606B2 (ja) 変化検出装置
WO2022009356A1 (ja) 監視システム
US20190096153A1 (en) Smart digital door lock and method for controlling the same
US11875657B2 (en) Proactive loss prevention system
JP2002230654A (ja) 遠隔監視システム
JP2004064276A (ja) 遠隔監視システム
US20100020177A1 (en) Apparatus for remotely, privately, and reliably monitoring a fixed or moving location, property or asset
JP2005094642A (ja) 監視カメラシステム
US20040008257A1 (en) Monitoring service process using communication network
CN113483760A (zh) 巡更监测方法及装置、电子设备及计算机可读存储介质
JP2005167382A (ja) 遠隔カメラ監視システムおよび遠隔カメラ監視方法
KR200434039Y1 (ko) 중앙 집중형 감시 시스템
KR100950734B1 (ko) 댁내 경보시스템에서의 이상상태 자동인식방법 및 인터넷냉장고
JP7212257B2 (ja) 監視システム、画像利用許諾方法、および画像利用許諾プログラム
JP2004145652A (ja) 監視装置および監視プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20944696

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022528939

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20944696

Country of ref document: EP

Kind code of ref document: A1