JP2007221581A - Monitor system and image processing apparatus - Google Patents

Monitor system and image processing apparatus Download PDF

Info

Publication number
JP2007221581A
JP2007221581A JP2006041283A JP2006041283A JP2007221581A JP 2007221581 A JP2007221581 A JP 2007221581A JP 2006041283 A JP2006041283 A JP 2006041283A JP 2006041283 A JP2006041283 A JP 2006041283A JP 2007221581 A JP2007221581 A JP 2007221581A
Authority
JP
Japan
Prior art keywords
information
video
image processing
monitoring system
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006041283A
Other languages
Japanese (ja)
Other versions
JP4959987B2 (en
Inventor
Yusuke Takahashi
雄介 高橋
Yoshihiko Suzuki
美彦 鈴木
Kenji Baba
賢二 馬場
Takaaki Enohara
孝明 榎原
Haruki Kinoshita
晴喜 木下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2006041283A priority Critical patent/JP4959987B2/en
Publication of JP2007221581A publication Critical patent/JP2007221581A/en
Application granted granted Critical
Publication of JP4959987B2 publication Critical patent/JP4959987B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To perform image processing on images from a plurality of cameras in a multiplexed time-division manner. <P>SOLUTION: The monitor system comprises: a plurality of video transmission units constituted of analog cameras 11-1 to 11-3 and encoders 13-1 to 13-3 for encoding analog video signals or IP cameras 12-1, 12-2; a network 10 to which the plurality of video transmission units are connected; a decoder 21 which is connected to the network 10, fetches at least the I frame contained in video information sent from the plurality of video transmission units and converts the I frame into digital image information for one picture for image processing; and an image processing means 22 for detecting an event by analyzing the image of the digital image information decoded by the decoder 21, in a time-division manner, corresponding to the plurality of video transmission units. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

この発明は、カメラを用いて道路監視や侵入監視などの各種監視を行う場合に好適な監視システム及び画像処理装置に関するものである。   The present invention relates to a monitoring system and an image processing apparatus suitable for performing various types of monitoring such as road monitoring and intrusion monitoring using a camera.

従来の監視システムにおいては、図12に示されるように監視カメラ101−1、101−2、・・・により撮像した監視対象のアナログ映像信号をそのまま伝送して事象検出装置102へ導くものであった。アナログ映像信号を伝送するために、その劣化を抑制するイコライザー103を伝送路に設ける必要があった。事象検出装置102は映像信号を取り込んでA/D変換し、画像処理を行って事象検出を行うものであるが、監視カメラ101−1、101−2、・・・により得られた映像について複数のものを1台の事象検出装置102にて処理する場合には、映像分配器104によりアナログ映像信号を切り換えて事象検出装置102へ送出する構成であった。   In the conventional monitoring system, as shown in FIG. 12, the analog video signal to be monitored captured by the monitoring cameras 101-1, 101-2,... It was. In order to transmit an analog video signal, it is necessary to provide an equalizer 103 in the transmission line that suppresses the deterioration. The event detection apparatus 102 captures a video signal, performs A / D conversion, performs image processing, and detects an event. A plurality of videos obtained by the monitoring cameras 101-1, 101-2,... When a single event detection device 102 processes the video signal, the video distributor 104 switches the analog video signal and sends it to the event detection device 102.

このシステムにおいては、映像分配器104による瞬時な切り換えが不可能であり、また映像分配器104により事象検出装置102を切り換える制御を行うことはできず、所要の監視カメラにより撮像された映像について次々に時分割による画像処理を実行することはできないものであった。また、レコーダ105によりアナログ映像信号を録画するものであるが、事象検出装置102からの制御により必要なアナログ映像信号を選択して録画するように構成されており、過去に録画した映像信号について後になって読み出して画像解析を行うことは不可能であった。   In this system, instantaneous switching by the video distributor 104 is impossible, and control for switching the event detection device 102 by the video distributor 104 cannot be performed, and videos taken by a required monitoring camera one after another. However, image processing by time division cannot be executed. The recorder 105 records an analog video signal. The recorder 105 is configured to select and record a necessary analog video signal under the control of the event detection device 102. The video signal recorded in the past will be recorded later. It was impossible to read and perform image analysis.

図13は、伝送路を光ファイバとしてE/O変換器107、O/E変換器108を用いてアナログ映像信号の劣化を抑制した構成例である。このシステムにおいては、イコライザー103が不要であるが、E/O変換器107とO/E変換器108が必要であり、アナログ映像信号の劣化対策が必要であることには変わりがなく、その他の点においては図12において説明した問題点がある。   FIG. 13 shows a configuration example in which the degradation of the analog video signal is suppressed using the E / O converter 107 and the O / E converter 108 with the transmission line as an optical fiber. In this system, the equalizer 103 is unnecessary, but the E / O converter 107 and the O / E converter 108 are necessary, and there is no change in the need for measures against deterioration of the analog video signal. There is a problem described in FIG.

図14に示す従来のシステムにあっては、映像分配器104と事象検出装置102との間にスキャン映像を得るための映像切換器109を設けたものである。このシステムでは、映像分配器104によるスキャン映像の取得による映像切り換えがなされるものであり、事象検出装置102が所望により瞬時に所望の監視カメラ101−1、101−2、・・・により得られた映像についてスキャン映像を次々に得て時分割多重処理を行うようなシステムとすることはできない。   In the conventional system shown in FIG. 14, a video switching unit 109 for obtaining a scanned video is provided between the video distributor 104 and the event detection device 102. In this system, the video switching is performed by acquiring the scanned video by the video distributor 104, and the event detection device 102 can be obtained by the desired monitoring cameras 101-1, 101-2,. It is not possible to obtain a system in which scan images are obtained one after another for time-division multiplexing processing.

更に、図15に示す従来のシステムは、監視カメラ101−1、101−2、・・・により得られた映像信号についてMPEG2やMPEG4による符号化を行うエンコーダ111−1、111−2、・・・を接続して符号化した映像情報をネットワーク110を介して伝送するものである。このシステムにおいては、ネットワーク110の受信側においてMPEG2やMPEG4による符号化に係る映像情報を復号化してアナログ映像信号に戻すデコーダ112を備え、これを事象検出装置102においてキャプチャボードなどによりA/D変換する処理を行っており、符号化復号化の繰り返し処理が何度もなされ繁雑なものであった。   Further, the conventional system shown in FIG. 15 includes encoders 111-1, 111-2,... For encoding video signals obtained by the monitoring cameras 101-1, 101-2,. Is transmitted through the network 110 by connecting and encoding the video information. This system includes a decoder 112 which decodes video information related to MPEG2 or MPEG4 encoding and returns it to an analog video signal on the receiving side of the network 110, and this is A / D converted by a capture board or the like in the event detection device 102 Thus, the encoding / decoding iterative process was repeated many times and was complicated.

また、複数の監視カメラにより得られた映像信号についてMPEGにて伝送を行い、日時情報と共に保存して、再生時には日時情報に基づき複数の画像を表示するものが特許文献1に開示されている。また、通常時にIフレームのみを送り、一定以上の動きを検出した際にはIフレーム、Bフレーム、Pフレームを送る監視システムが特許文献2に示されている。
特開2003−163923号公報 特開2000−165847号公報
Patent Document 1 discloses that video signals obtained by a plurality of surveillance cameras are transmitted by MPEG, stored together with date / time information, and a plurality of images are displayed based on the date / time information during reproduction. Patent Document 2 discloses a monitoring system that sends only I frames during normal operation and sends I frames, B frames, and P frames when a certain amount of motion is detected.
JP 2003-163923 A JP 2000-165847 A

発明が解決しようとする課題は、監視カメラ側から符号化して映像情報を送る場合に、符号化復号化の繰り返し処理が何度も行われて繁雑なことであり、本発明の目的は係る繁雑さを排除し、しかも複数のカメラによる画像についての画像処理を多重化して時分割で行うことが可能である監視システム及び画像処理装置を提供することである。   The problem to be solved by the present invention is that when the video information is encoded and transmitted from the surveillance camera side, the encoding / decoding iterative process is repeated many times, and the object of the present invention is Another object of the present invention is to provide a monitoring system and an image processing apparatus that can multiplex image processing of images from a plurality of cameras and perform them in a time-sharing manner.

本発明に係る監視システムは、被写対象を撮像して符号化されたネットワーク送信可能な映像情報を出力する複数の映像送出部と、前記複数の映像送出部が接続されるネットワークと、前記ネットワークに接続され、前記複数の映像送出部が送出した映像情報に含まれている少なくともIフレームを取り込み1画面分のディジタル画像情報へ変換するデコーダと、前記デコーダが変換した複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行う画像処理手段とを具備することを特徴とする。   The monitoring system according to the present invention includes a plurality of video transmission units that output video information that is encoded by imaging a subject to be transmitted, a network to which the plurality of video transmission units are connected, and the network A decoder that captures at least I frames included in the video information sent by the plurality of video sending units and converts them into digital image information for one screen, and a plurality of video sending units converted by the decoder And image processing means for analyzing the digital image information to be detected in a time-sharing manner and detecting an event.

本発明に係る監視システムは、デコードしたディジタル画像情報を録画する画像録画部と、前記画像録画部に録画するディジタル画像情報に対して前記画像処理手段による解析結果をメタデータとして付加する録画制御手段とを具備することを特徴とする。   The monitoring system according to the present invention includes an image recording unit that records the decoded digital image information, and a recording control unit that adds, as metadata, an analysis result by the image processing unit to the digital image information recorded in the image recording unit. It is characterized by comprising.

本発明に係る監視システムでは、前記画像処理手段が、解析結果に応じて対応する映像送出部の送出に係るディジタル画像情報に関する処理レートを変更することを特徴とする。   The monitoring system according to the present invention is characterized in that the image processing means changes a processing rate related to digital image information related to transmission of a corresponding video transmission unit according to an analysis result.

本発明に係る監視システムでは、前記映像送出部が、ズーム機構、旋回機構、解像度変更手段を備えており、前記画像処理手段による解析結果に応じて対応する映像送出部におけるズーム機構、旋回機構、解像度変更手段の制御を行うカメラ制御手段が具備されていることを特徴とする。   In the monitoring system according to the present invention, the video sending unit includes a zoom mechanism, a turning mechanism, and a resolution changing unit, and the zoom mechanism, the turning mechanism in the video sending unit corresponding to the analysis result by the image processing unit, Camera control means for controlling the resolution changing means is provided.

本発明に係る監視システムは、事象を検出するセンサと、該センサが事象を検出した場合にネットワークを介して事象発生情報を報知する事象発生報知手段と、前記事象発生報知手段による事象発生情報をネットワークを介して受け取り、この事象発生情報に応じて対応する映像送出部の送出に係るディジタル画像情報について前記画像処理手段による解析を実行させる解析制御手段とを具備することを特徴としている。   The monitoring system according to the present invention includes a sensor for detecting an event, event occurrence notifying means for notifying event occurrence information via a network when the sensor detects an event, and event occurrence information by the event occurrence notifying means. And an analysis control means for executing the analysis by the image processing means on the digital image information related to the transmission of the corresponding video transmission section according to the event occurrence information.

本発明に係る監視システムでは、カメラ制御手段が、前記事象発生報知手段から送られる事象発生情報をネットワークを介して受け取り、この事象発生情報に応じて対応する映像送出部におけるズーム機構、旋回機構、解像度変更手段の制御を行うことを特徴とする。   In the monitoring system according to the present invention, the camera control means receives the event occurrence information sent from the event occurrence notification means via the network, and the zoom mechanism and the turning mechanism in the video transmission unit corresponding to the event occurrence information The resolution changing means is controlled.

本発明に係る監視システムでは、時刻情報に対応して制御すべき映像送出部と制御内容の情報が対応付けられたカメラ制御情報データベースを備え、カメラ制御手段は、前記カメラ制御情報データベースの情報に応じて対応する制御を行うことを特徴とする。   The monitoring system according to the present invention includes a camera control information database in which a video transmission unit to be controlled corresponding to time information and information on control contents are associated with each other, and the camera control means includes information in the camera control information database. A corresponding control is performed accordingly.

本発明に係る監視システムは、映像送出部により送出された映像情報をネットワークから取り込み蓄積する映像蓄積手段を備え、前記映像蓄積手段から直接にまたはネットワークを介して蓄積された映像情報を取り出し前記デコーダにてデコードして前記画像処理手段による解析を実行することを特徴とする。   The monitoring system according to the present invention comprises video storage means for taking in and storing video information sent from the video sending section from a network, and taking out the video information stored directly or via the network from the video storage means, the decoder And the analysis by the image processing means is executed.

本発明に係る画像処理装置は、映像情報に含まれている少なくともIフレームを取り込み1画面分のディジタル画像情報へ変換するデコーダと、前記デコーダが変換した複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行う画像処理手段とを具備することを特徴とする。   An image processing apparatus according to the present invention includes a decoder that captures at least an I frame included in video information and converts it into digital image information for one screen, and digital image information corresponding to a plurality of video transmission units converted by the decoder. And image processing means for performing event detection and event detection.

本発明に係る監視システムでは、被写対象を撮像して符号化されたネットワーク送信可能な映像情報を出力する複数の映像送出部が、ネットワークを介して映像情報を送出し、この映像情報を受けて、少なくともIフレームを取り込み1画面分のディジタル画像情報へデコードして、複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行うので、複数の映像送出部にて撮像した被写対象について事象発生を多重的に検出でき、効率的な監視を可能である。また、本発明に係る画像処理装置は、映像情報に含まれている少なくともIフレームを取り込み1画面分のディジタル画像情報へ変換し、変換した複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行うので、複数の映像送出部にて撮像した被写対象について事象発生を多重的に検出できる。   In the monitoring system according to the present invention, a plurality of video transmission units that capture and encode a subject to be imaged and output video information that can be transmitted over the network transmits the video information via the network and receives the video information. Since at least an I frame is captured and decoded into digital image information for one screen, digital image information corresponding to a plurality of video transmission units is analyzed in a time-sharing manner, and event detection is performed. It is possible to detect multiple occurrences of the object to be imaged at, so that efficient monitoring is possible. The image processing apparatus according to the present invention also captures at least an I frame included in video information and converts it into digital image information for one screen, and time-divides the digital image information corresponding to the plurality of converted video transmission units. Since the image is analyzed and the event is detected, the occurrence of the event can be detected in a multiplexed manner for the object to be imaged by the plurality of video transmission units.

本発明に係る監視システムでは、前記映像送出部は、ズーム機構、旋回機構、解像度変更手段を備えており、前記画像処理手段による解析結果に応じて、または、センサが事象を検出した場合にネットワークを介して事象発生情報を報知する事象発生報知手段による事象発生情報をネットワークを介して受け取り、この事象発生情報に応じて、対応する映像送出部におけるズーム機構、旋回機構、解像度変更手段の制御を行うので、必要時に必要な位置の監視を行うことができ、効率的な監視が可能である。   In the monitoring system according to the present invention, the video transmission unit includes a zoom mechanism, a turning mechanism, and a resolution changing unit, and is a network according to an analysis result by the image processing unit or when a sensor detects an event. The event occurrence information by the event occurrence notification means for notifying the event occurrence information via the network is received via the network, and the zoom mechanism, the turning mechanism, and the resolution changing means in the corresponding video transmission unit are controlled according to this event occurrence information. As a result, the necessary position can be monitored when necessary, and efficient monitoring is possible.

本発明では、被写対象を撮像して符号化されたネットワーク送信可能な映像情報を出力する複数の映像送出部から、ネットワークを介して映像情報を送出し、この映像情報を受けて少なくともIフレームを取り込み1画面分のディジタル画像情報へデコードする構成により、繁雑な処理と構成を回避し、複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行うようにして、複数の映像送出部にて撮像した被写対象について事象発生を多重的に検出するという目的を達成したものである。   In the present invention, video information is transmitted via a network from a plurality of video transmission units that capture an image of a subject and output encoded video information that can be transmitted over the network. The system is configured to capture the image and decode it into digital image information for one screen, avoiding complicated processing and configuration, and analyzing the digital image information corresponding to a plurality of video transmission units in a time division manner to detect events. Thus, the object of detecting the occurrence of multiple events for a subject to be imaged by a plurality of video transmission units has been achieved.

以下添付図面を参照して、本発明の監視システムの実施例を説明する。各図において、同一の構成要素には同一の符号を付して重複する説明を省略する。図1は、本発明に係る監視システムの第1の実施例を示す構成図である。このシステムでは、複数台のアナログカメラ11−1、11−2、11−3、・・・により被写対象を撮像してアナログ映像信号を得る。また、複数のIPカメラ12−1、12−2、・・・により被写対象を撮像してネットワーク送信可能な映像情報(MPEG2やMPEG4など)を得る。アナログカメラ11−1、11−2、11−3、・・・には、ネットワーク送信可能な映像情報(MPEG2やMPEG4など)とするエンコーダ13−1、13−2、13−3、・・・が接続されている。   Embodiments of a monitoring system according to the present invention will be described below with reference to the accompanying drawings. In each figure, the same components are denoted by the same reference numerals, and redundant description is omitted. FIG. 1 is a block diagram showing a first embodiment of a monitoring system according to the present invention. In this system, an object to be imaged is captured by a plurality of analog cameras 11-1, 11-2, 11-3,... To obtain an analog video signal. In addition, a plurality of IP cameras 12-1, 12-2,. The analog cameras 11-1, 11-2, 11-3,... Have encoders 13-1, 13-2, 13-3,. It is connected.

アナログカメラ11−1、11−2、11−3、・・・及びIPカメラ12−1、12−2、・・・には、アナログカメラ11−1について代表して示すようにズーム機構、旋回機構解像度変更手段が備えられている。アナログカメラ11−1、11−2、11−3、IPカメラ12−1、12−2、・・・及びエンコーダ13−1、13−2、13−3、・・・は、複数の映像送出部を構成し、IPカメラ12−1、12−2、・・・及びエンコーダ13−1、13−2、13−3、・・・は、ネットワーク10に接続されており、映像情報をブロードキャスト送信している。   The analog cameras 11-1, 11-2, 11-3,... And the IP cameras 12-1, 12-2,. Changing means are provided. Analog cameras 11-1, 11-2, 11-3, IP cameras 12-1, 12-2,... And encoders 13-1, 13-2, 13-3,. , And encoders 13-1, 13-2, 13-3,... Are connected to the network 10 and broadcast video information. ing.

また、ネットワーク10には例えばパーソナルコンピュータにより構成される監視側端末20が接続されており、更に、監視側端末20には、画像録画部30が接続されている。監視側端末20には、ソフトウエアにより構成されるデコーダ21、画像処理手段22、録画制御手段23、カメラ制御手段24が備えられており、また、カメラ制御情報DB(データベース)25及び計時を行うタイマ26が備えられている。   The network 10 is connected to a monitoring terminal 20 constituted by, for example, a personal computer. Further, an image recording unit 30 is connected to the monitoring terminal 20. The monitoring terminal 20 is provided with a decoder 21 configured by software, an image processing unit 22, a recording control unit 23, and a camera control unit 24, and performs a camera control information DB (database) 25 and time measurement. A timer 26 is provided.

デコーダ21は、複数の映像送出部が送出した映像情報に含まれている少なくともIフレームを取り込み画像処理用の1画面分のディジタル画像情報へ変換するものである。画像処理手段22は、デコーダ21がデコードした複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行うものである。録画制御手段23は、画像録画部30に録画するディジタル画像情報に対して上記画像処理手段22による解析結果をメタデータとして付加して画像録画部30に記憶するものである。カメラ制御手段24は、画像処理手段22による解析結果に応じて対応するカメラにおけるズーム機構、旋回機構、解像度変更手段の制御を行うものであり、また、カメラ制御情報DB25の情報に応じて対応するカメラに関する制御を行うものである。   The decoder 21 captures at least I frames included in the video information transmitted from the plurality of video transmission units and converts them into digital image information for one screen for image processing. The image processing means 22 analyzes the digital image information corresponding to the plurality of video transmission units decoded by the decoder 21 in a time-sharing manner, and performs event detection. The recording control unit 23 adds the analysis result by the image processing unit 22 as metadata to the digital image information recorded in the image recording unit 30 and stores it in the image recording unit 30. The camera control unit 24 controls the zoom mechanism, the turning mechanism, and the resolution changing unit in the corresponding camera according to the analysis result by the image processing unit 22, and corresponds according to the information in the camera control information DB 25. Controls the camera.

カメラ制御情報DB25は、例えば、図2に示されるように、時刻情報に対応して制御すべきカメラと制御内容の情報が対応付けられたものである。ここでは、時刻00:00から時刻06:59において選択するカメラA、B、C、Dの情報と、各カメラA、B、C、Dについてそれぞれズーム比、旋回角、解像度及び優先度に関する情報が対応して記憶されており、時刻07:00から時刻12:59において選択するカメラE、F、G、Hの情報と、各カメラE、F、G、Hについてそれぞれズーム比、旋回角、解像度及び優先度に関する情報が対応して記憶されており、以下、時刻対応に同様の情報が記憶されている。   For example, as shown in FIG. 2, the camera control information DB 25 is obtained by associating a camera to be controlled corresponding to time information with information on control contents. Here, information on cameras A, B, C, and D selected from time 00:00 to time 06:59, and information on the zoom ratio, turning angle, resolution, and priority for each camera A, B, C, and D, respectively. Are stored correspondingly, and information on cameras E, F, G, and H to be selected from time 07:00 to time 12:59, and the zoom ratio, turning angle, and the like for each camera E, F, G, and H, respectively. Information regarding resolution and priority is stored correspondingly, and similar information is stored corresponding to time.

カメラ制御手段24には、図3に示される現在選択カメラ情報テーブルGTが備えられており、現在選択カメラ情報テーブルGTには、現在において画像処理手段22により処理されているカメラについて、カメラ情報、ズーム比、旋回角、解像度、優先度及び事象発生フラグ(0:リセット、1:セット)の情報が記憶されている。   The camera control means 24 is provided with a currently selected camera information table GT shown in FIG. 3. In the currently selected camera information table GT, camera information about cameras currently processed by the image processing means 22, Information on the zoom ratio, turning angle, resolution, priority, and event occurrence flag (0: reset, 1: set) is stored.

画像処理手段22とカメラ制御手段24は、監視側端末20のCPUが図4及び図5に示されるフローチャートに対応する基づき処理を行うことにより実現されるものである。以下、この図4及び図5に示されるフローチャートに基づき動作を説明する。監視側端末20が起動され、スタートとなってタイマ26の現在時刻に基づきカメラ制御情報DB25から当該時刻対応の選択カメラ、各カメラについてそれぞれズーム比、旋回角、解像度及び優先度に関する情報を求め(S11)、各選択カメラに対してネットワーク10を介してズーム比、旋回角、解像度に関する制御情報を送り、各カメラの制御を行う(S12)。ステップS12に次いで現在選択カメラ情報テーブルGTを参照し、事象発生フラグがセットされているカメラがあるかを検出する(S13)。   The image processing means 22 and the camera control means 24 are realized by the CPU of the monitoring terminal 20 performing processing based on the flowcharts shown in FIGS. The operation will be described below based on the flowcharts shown in FIGS. The monitoring terminal 20 is activated and starts, and information on the zoom ratio, turning angle, resolution, and priority is obtained from the camera control information DB 25 based on the current time of the timer 26 for each selected camera and each camera corresponding to the time ( S11), control information regarding the zoom ratio, turning angle, and resolution is sent to each selected camera via the network 10 to control each camera (S12). Following step S12, the currently selected camera information table GT is referred to and it is detected whether there is a camera for which the event occurrence flag is set (S13).

ステップS13において事象発生フラグがセットされているカメラがないことが検出されると、ステップS11においてカメラ制御情報DB25から得た選択カメラの情報をそのまま現在選択カメラ情報テーブルGTへ登録し(S14)、現在選択カメラ情報テーブルGTに登録のカメラによってブロードキャスト送信されている映像情報を取り込みデコードを行う(S15)。このとき、MPEGの映像情報には、Iフレーム、Bフレーム及びPフレームが含まれるが、ここではIフレームのみを取り込み、デコードを行う。このため、Iフレームは1秒間に最大2フレーム分が到達するので、現在選択カメラ情報テーブルGTに登録された複数(図3の例では4台)のカメラについて順次切り換えを行って取り込む。   If it is detected in step S13 that there is no camera for which the event occurrence flag is set, the information of the selected camera obtained from the camera control information DB 25 in step S11 is directly registered in the currently selected camera information table GT (S14). The video information currently broadcasted by the registered camera is loaded into the selected camera information table GT and decoded (S15). At this time, the MPEG video information includes an I frame, a B frame, and a P frame. Here, only the I frame is captured and decoded. Therefore, since I frames reach a maximum of two frames per second, a plurality of (four in the example of FIG. 3) cameras registered in the currently selected camera information table GT are sequentially switched and captured.

ステップS15に続いて、複数のカメラについて得られる画像情報に対して時分割で同一処理レートにて画像処理をマルチ処理する(S16)。ここにおける画像処理では、例えば、背景差分やフレーム間差分更にはパターンマッチングなど公知の手法の一つ或いは複数が、監視側端末20のCPU処理能力に応じて用いられる。ステップS16に続いて、カメラ制御情報DB25のデータが切り換わる時刻(図2の例では、時刻7:00など)であるかを検出し(S17)、データの切り換え時刻でなければ、画像処理において所定の事象発生(侵入監視システムでは、侵入者の検出。道路監視システムでは、渋滞の発生等)が検出されたかを判定し(S18)、所定の事象発生が検出されなければステップS15へ戻って処理が続けられる。また、ステップS17においてデータの切り換え時刻到来が検出されると、ステップS11へ戻り処理が行われる。   Subsequent to step S15, the image information obtained for a plurality of cameras is subjected to multiprocessing at the same processing rate in a time division manner (S16). In the image processing here, for example, one or a plurality of known methods such as background difference, inter-frame difference, and pattern matching are used according to the CPU processing capability of the monitoring terminal 20. Following step S16, it is detected whether the data in the camera control information DB 25 is switched (in the example of FIG. 2, time 7:00 or the like) (S17). If it is not the data switching time, image processing is performed. It is determined whether a predetermined event occurrence (detection of an intruder in the intrusion monitoring system or occurrence of traffic jam in the road monitoring system) is detected (S18). If no predetermined event occurrence is detected, the process returns to step S15. Processing continues. When the arrival of the data switching time is detected in step S17, the process returns to step S11 and the process is performed.

上記ステップS18において、所定の事象発生が検出されると、現在選択カメラ情報テーブルGTの該当カメラ対応に事象発生フラグをセットし、事象発生の対象画像情報に対する処理レートを上昇させ、画像処理手段22による解析結果と時刻情報等をメタデータとして該当画像情報に付加して画像録画部30に記憶する(S19)。処理レートの上昇にあっては、例えば、該当カメラについて解像度上昇の制御を行って高解像度の映像情報を得たり、背景差分やフレーム間差分更にはパターンマッチングなどの手法の一つを複数にして多数決を採用したり、Iフレーム以外にBフレームやPフレームを用いてデコードを行って画像処理用の画像情報を復号化する等が行われる。そして、上記のステップS19に続いて、現在選択カメラ情報テーブルGTに登録のカメラによってブロードキャスト送信されている映像情報を取り込みデコードを行い(S21)、複数のカメラについて得られる画像情報に対して時分割で上記の通り事象発生フラグがセットされたカメラ対応の画像情報について、処理レートを上昇させてマルチ処理を行うものである(S22)。   When a predetermined event occurrence is detected in step S18, an event occurrence flag is set for the corresponding camera in the currently selected camera information table GT, the processing rate for the target image information of the event occurrence is increased, and the image processing means 22 The analysis result and time information are added to the corresponding image information as metadata and stored in the image recording unit 30 (S19). In increasing the processing rate, for example, the resolution increase control is performed for the corresponding camera to obtain high-resolution video information, or one of a plurality of methods such as background difference, inter-frame difference, and pattern matching is used. A majority vote is adopted, decoding is performed using B frames or P frames in addition to I frames, and image information for image processing is decoded. Subsequently to step S19, the video information broadcast-transmitted by the camera registered in the currently selected camera information table GT is fetched and decoded (S21), and the time division is performed on the image information obtained for a plurality of cameras. As described above, multi-processing is performed for the image information corresponding to the camera in which the event occurrence flag is set by increasing the processing rate (S22).

そして、上記ステップS22の次には、カメラ制御情報DB25のデータが切り換わる時刻(図2の例では、時刻7:00など)であるかを検出し(S23)、データの切り換え時刻でなければ、画像処理において所定の事象発生(侵入監視システムでは、侵入者の検出。道路監視システムでは、渋滞の発生等)が検出されたかを判定し(S24)、このステップS24において、所定の事象発生が検出されると、現在選択カメラ情報テーブルGTの該当カメラ対応に事象発生フラグをセットし、事象発生の対象画像情報に対する処理レートを前述の如く上昇させ、画像処理手段22による解析結果と時刻情報等をメタデータとして該当画像情報に付加して画像録画部30に記憶し(S25)、ステップS21へ戻る。   Then, after step S22, it is detected whether it is time to switch the data in the camera control information DB 25 (time 7:00 in the example of FIG. 2) (S23). In the image processing, it is determined whether a predetermined event occurrence (detection of an intruder in the intrusion monitoring system or occurrence of traffic jam in the road monitoring system) is detected (S24). In step S24, a predetermined event occurrence is detected. When detected, the event occurrence flag is set for the corresponding camera in the currently selected camera information table GT, the processing rate for the event occurrence target image information is increased as described above, the analysis result by the image processing means 22 and the time information, etc. Is added to the corresponding image information as metadata and stored in the image recording unit 30 (S25), and the process returns to step S21.

また、ステップS23においてデータの切り換え時刻到来が検出されると、ステップS11へ戻り処理が行われる。この場合には、次にステップS12からステップS13へ進み、このステップS13において事象発生フラグがセットされているカメラが存在することが検出され、現在選択カメラ情報テーブルGTに事象発生フラグのセットされているカメラに関する情報を残し、ステップS11にてカメラ制御情報DB25から得られた選択カメラの中から優先度に基づき許容数(処理能力に応じた数であり、図3の例では4台)の選択カメラに関する情報を取り出して現在選択カメラ情報テーブルGTに登録する(S20)。斯して、事象発生中を捕らえたカメラによる画像情報が画像処理から外されることなく、効率の良い監視が継続される。   If the arrival of the data switching time is detected in step S23, the process returns to step S11 and the process is performed. In this case, next, the process proceeds from step S12 to step S13. In step S13, it is detected that there is a camera in which the event occurrence flag is set, and the event occurrence flag is set in the currently selected camera information table GT. The information regarding the cameras that remain is selected, and an allowable number (number according to the processing capability, four in the example of FIG. 3) is selected based on the priority from the selected cameras obtained from the camera control information DB 25 in step S11. Information about the camera is extracted and registered in the currently selected camera information table GT (S20). Thus, efficient monitoring is continued without removing image information from the camera that has captured the occurrence of the event from image processing.

更に、上記の通りの処理が進行する中で、ステップS24において所定の事象発生が検出されない場合には、事象発生の消滅(侵入監視システムでは、侵入者の検出無し状態。道路監視システムでは、渋滞の解消等)が検出されたかを判定し(S26)、事象発生の消滅が検出されなければステップS21へ戻って処理が継続されるが、事象発生の消滅が検出された場合には、現在選択カメラ情報テーブルGTの該当カメラ対応に事象発生フラグをリセットし、事象発生の対象画像情報に対する処理レートを低減して元へ戻し(S27)、ステップS11へ進む。このステップS27に次いで行われるステップS11からの処理において、ステップS13にて事象発生フラグがセットされているカメラがないことが検出されると、ステップS11においてカメラ制御情報DB25から得た選択カメラの情報をそのまま現在選択カメラ情報テーブルGTへ登録して(S14)処理が行われ、ステップS13にて未だに事象発生フラグがセットされているカメラが存在することが検出されると、現在選択カメラ情報テーブルGTに事象発生フラグのセットされているカメラに関する情報を残し、ステップS11にてカメラ制御情報DB25から得られた選択カメラの中から優先度に基づき許容数(処理能力に応じた数であり、図3の例では4台)の選択カメラに関する情報を取り出して現在選択カメラ情報テーブルGTに登録して(S20)処理が行われる。なお、本実施例では、事象発生検出の場合にのみ画像処理手段22による解析結果をメタデータとして該当画像情報に付加して画像録画部30に記憶することを示したが(S19、S25)、ステップS27における事象発生の消滅を検出した場合に、この解析結果をメタデータとして該当画像情報に付加して画像録画部30に記憶するように構成することも可能である。なお、いずれの場合においても、解析結果がメタデータとして該当画像情報に付加して画像録画部30に記憶されているため、例えば監視側端末20において画像録画部30から所望の画像情報を読み出す場合には、付加されたメタデータをキーとして検索を行うことができ、監視業務の効率化を図ることができる。   Further, when a predetermined event occurrence is not detected in step S24 as the above processing proceeds, the occurrence of the event disappears (no intruder detection in the intrusion monitoring system. Traffic congestion in the road monitoring system). (S26) is detected (S26), and if the disappearance of the event occurrence is not detected, the process returns to step S21 to continue the process, but if the disappearance of the event occurrence is detected, the current selection The event occurrence flag is reset for the corresponding camera in the camera information table GT, the processing rate for the target image information of the event occurrence is reduced and returned (S27), and the process proceeds to step S11. In the processing from step S11 performed after step S27, if it is detected in step S13 that no camera has an event occurrence flag set, information on the selected camera obtained from the camera control information DB 25 in step S11. Is registered in the currently selected camera information table GT as it is (S14), the process is performed, and if it is detected in step S13 that there is still a camera in which the event occurrence flag is set, the currently selected camera information table GT Information on the camera in which the event occurrence flag is set is left, and an allowable number (a number according to the processing capability) is selected based on the priority from the selected cameras obtained from the camera control information DB 25 in step S11. In this example, information about the selected camera is extracted and the currently selected camera information table is extracted. Registered in the Bull GT (S20) processing is performed. In the present embodiment, the analysis result by the image processing means 22 is added as metadata to the corresponding image information and stored in the image recording unit 30 only when an event occurrence is detected (S19, S25). When the disappearance of the event occurrence in step S27 is detected, the analysis result can be added to the corresponding image information as metadata and stored in the image recording unit 30. In any case, since the analysis result is added to the corresponding image information as metadata and stored in the image recording unit 30, for example, when the desired image information is read from the image recording unit 30 in the monitoring terminal 20 Can be searched using the added metadata as a key, and the efficiency of monitoring work can be improved.

図6には、第2の実施例に係る監視システムの構成図が示されている。この実施例においては、事象を検出する複数のセンサ41−1、41−2、・・・と、このセンサ41−1、41−2、・・・が事象を検出した場合にネットワーク10を介して事象発生情報を報知する事象発生報知手段40が新たに備えられている。センサ41−1、41−2、・・・は、侵入監視システムでは、侵入者の検出の赤外線センサ等であり、道路監視システムでは、渋滞の発生等を検出する車両検出センサなどにより構成される。また、監視側端末20Aには、第1の構成に加えて、解析制御手段27を備えている。この解析制御手段28は、事象発生報知手段40による事象発生情報をネットワーク10を介して受け取り、この事象発生情報に応じて対応するカメラによる撮像に対応する映像送出部の送出に係るディジタル画像情報について画像処理手段22による解析を実行させるものである。   FIG. 6 shows a configuration diagram of a monitoring system according to the second embodiment. In this embodiment, a plurality of sensors 41-1, 41-2,... For detecting an event, and when the sensors 41-1, 41-2,. Event occurrence notifying means 40 for notifying event occurrence information is newly provided. In the intrusion monitoring system, the sensors 41-1, 41-2,... Are infrared sensors for detecting intruders, and the road monitoring system is configured by a vehicle detection sensor for detecting occurrence of traffic jams. . In addition to the first configuration, the monitoring terminal 20A includes an analysis control unit 27. The analysis control means 28 receives the event occurrence information from the event occurrence notification means 40 via the network 10 and the digital image information related to the transmission of the video sending section corresponding to the imaging by the corresponding camera according to the event occurrence information. The analysis by the image processing means 22 is executed.

また、カメラ制御手段24は、第1の実施例における処理に加えて、事象発生報知手段40から送られる事象発生情報をネットワーク10を介して受け取り、この事象発生情報に応じて対応するカメラにおけるズーム機構、旋回機構、解像度変更手段の制御を行うものである。センサ41−1、41−2、・・・による事象発生検出を管理するために、監視側端末20Aには、図7に示されるようなセンサ識別情報(ID)に対応して制御すべきカメラ識別情報、ズーム比、旋回角、解像度、優先度が記憶された制御情報テーブルCTと、図8に示すようなセンサ情報管理テーブルSTが備えられている。センサ情報管理テーブルSTは、前回事象発生検出したセンサの識別情報(ID)を登録する前回検出センサ欄と今回事象発生検出したセンサの識別情報(ID)を登録する今回検出センサ欄とを備えている。そして、監視側端末20AのCPUは、図4と図5に示したフローチャートに対応するプログラムによる動作を行う他に、例えば所定時間毎の割り込みにより図9に示すフローチャートに対応するプログラムによる動作を行う。第2の実施例に係る監視システムの構成は、上記以外において第1の実施例と同様である。   In addition to the processing in the first embodiment, the camera control means 24 receives event occurrence information sent from the event occurrence notification means 40 via the network 10, and zooms in the corresponding camera according to the event occurrence information. The mechanism, the turning mechanism, and the resolution changing means are controlled. In order to manage event occurrence detection by the sensors 41-1, 41-2,..., A camera to be controlled corresponding to sensor identification information (ID) as shown in FIG. A control information table CT storing identification information, zoom ratio, turning angle, resolution, and priority, and a sensor information management table ST as shown in FIG. 8 are provided. The sensor information management table ST includes a previous detection sensor column for registering the identification information (ID) of the sensor in which the previous event occurrence detection is performed, and a current detection sensor column in which the identification information (ID) of the sensor in which the current event occurrence detection is registered. Yes. Then, the CPU of the monitoring terminal 20A performs an operation according to the program corresponding to the flowchart shown in FIG. 9 by interruption every predetermined time, for example, in addition to the operation according to the program corresponding to the flowchart shown in FIGS. . The configuration of the monitoring system according to the second embodiment is the same as that of the first embodiment except for the above.

以下、図9に示すフローチャートに基づき動作を説明する。割り込みにより、図9に示すフローチャートに対応するプログラムがスタートとなり、今回検出センサ欄の内容を前回検出センサ欄へ移動し、事象発生報知手段40から各センサ41−1、41−2、・・・による事象発生情報が到来したかを検出し、今回において送られた事象発生情報に対応するセンサの識別情報を今回検出センサ欄へ登録し(S31)、前回検出センサ欄の内容と今回検出センサ欄の内容を比較して(S32)、差があるかを検出する(S33)。   The operation will be described below based on the flowchart shown in FIG. By the interruption, the program corresponding to the flowchart shown in FIG. 9 is started, the contents of the current detection sensor column are moved to the previous detection sensor column, and the sensors 41-1, 41-2,. Is detected, the sensor identification information corresponding to the event occurrence information sent this time is registered in the current detection sensor column (S31), the contents of the previous detection sensor column and the current detection sensor column Are compared (S32), and it is detected whether there is a difference (S33).

上記ステップS33において差がないことが検出されるとエンドとなり、ステップS33において差が検出されると、不検出となった事象発生に対応するセンサがあるかを検出し(S34)、不検出となった事象発生に対応するセンサがある場合には(図8のテーブルでは、dが不検出となっている)現在選択カメラ情報テーブルGT中から対応カメラの情報を削除する(S35)。   If it is detected in step S33 that there is no difference, the process ends. If a difference is detected in step S33, it is detected whether there is a sensor corresponding to the occurrence of the event that has not been detected (S34). If there is a sensor corresponding to the occurrence of the event (d is not detected in the table of FIG. 8), the information of the corresponding camera is deleted from the currently selected camera information table GT (S35).

次に、新規センサの有無を検出し(S36)、新規センサありとなると(図8のテーブルでは、b、cが新規である)、センサ新規に登録されたセンサ識別情報に基づき図7に示す制御情報テーブルCTを参照して制御対象の対応カメラを求め、該カメラに対してズーム比、旋回角、解像度の情報を送ってカメラ制御を行う(S37)と共に、現在選択カメラ情報テーブルGT中の優先度に基づき新規センタ対応数の選択カメラに関する情報を削除し、新規センタ対応のカメラに関する情報をフラグセットと共に現在選択カメラ情報テーブルGTに登録する(S38)。   Next, the presence or absence of a new sensor is detected (S36), and when there is a new sensor (b and c are new in the table in FIG. 8), the sensor is shown in FIG. 7 based on the sensor identification information newly registered. The control information table CT is referred to obtain a corresponding camera to be controlled, and the camera control is performed by sending information on the zoom ratio, turning angle, and resolution to the camera (S37), and at the same time, in the currently selected camera information table GT Information on the selected camera corresponding to the number of new centers is deleted based on the priority, and information on the camera corresponding to the new center is registered in the currently selected camera information table GT together with the flag set (S38).

監視側端末20AのCPUは、図4と図5に示したフローチャートに対応するプログラムによる動作を行うものであるから、上記の処理によって、センサ41−1、41−2、・・・による事象発生検出に応じて、所要のカメラによって撮像された映像に係る画像情報について画像処理手段22による画像処理がなされ、必要な監視を適切に行うことができる。なお、画像録画部30に録画する映像情報についてメタデータを付加する処理は図4と図5に示したフローチャートに対応するプログラムによる動作にて行われるが、上記のセンサによる事象発生検出がなされた場合に対応の情報(センサの場所やID、検出時刻等)をメタデータとして対応のカメラによる画像情報に付加して画像録画部30に記憶するようにしても良い。   Since the CPU of the monitoring terminal 20A performs an operation based on a program corresponding to the flowcharts shown in FIGS. 4 and 5, an event occurs by the sensors 41-1, 41-2,... In response to the detection, image processing by the image processing means 22 is performed on the image information relating to the video imaged by a required camera, and necessary monitoring can be appropriately performed. Note that the process of adding metadata to the video information recorded in the image recording unit 30 is performed by the program corresponding to the flowcharts shown in FIGS. 4 and 5, but the occurrence of the event is detected by the sensor described above. In this case, corresponding information (sensor location, ID, detection time, etc.) may be added as metadata to image information from the corresponding camera and stored in the image recording unit 30.

図10には、第3の実施例に係る監視システムの構成図が示されている。この実施例においては、ネットワーク10に映像蓄積サーバ50により構成される映像蓄積手段が接続されている。映像蓄積サーバ50は、映像送出部により送出された映像情報をネットワークから取り込み蓄積するものである。ここでは映像蓄積サーバ50は、全てのカメラにより得られて送られてくる映像情報(MPEG2、MPEG4など)を時刻情報と共に蓄積している。映像蓄積サーバ50には、例えばパーソナルコンピュータにより構成される監視側端末20Cが接続され、監視側端末20Cには画像録画部30Aが接続された構成とされている。   FIG. 10 shows a configuration diagram of a monitoring system according to the third embodiment. In this embodiment, video storage means constituted by a video storage server 50 is connected to the network 10. The video storage server 50 acquires and stores video information sent from the video sending unit from the network. Here, the video storage server 50 stores video information (MPEG2, MPEG4, etc.) obtained and sent by all cameras together with time information. The video storage server 50 is connected to a monitoring terminal 20C configured by, for example, a personal computer, and an image recording unit 30A is connected to the monitoring terminal 20C.

ネットワーク10に接続されている監視側端末20Bは、第2の実施例に備えられている監視側端末20Aと同様な構成を備えており、更に加えて、CPUが図11に示すフローチャートに対応するプログラムを実行することにより映像蓄積サーバ50からネットワーク10を介して、蓄積された映像情報を取り出しデコーダ21にてデコードして記画像処理手段22による解析を実行するものである。なお、監視側端末20Bは、第2の実施例に備えられた監視側端末20Aと同様な構成であるため、各手段等の表示を省略してある。監視側端末20Cにはデコーダ21、画像処理手段22、録画制御手段23が備えられており、図4と図5に示されるフローチャートに対応するプログラムを実行して画像録画部30Aに録画するディジタル画像情報に対して画像処理手段22による解析結果をメタデータとして付加して記録する。ただし、監視側端末20Cは、図4と図5に示されるフローチャートに対応するプログラムの内、時刻に基づく選択カメラの変更をする必要はなく、パーソナルコンピュータの入力部から指定されたカメラに対応する画像情報について処理を行うものとする。   The monitoring terminal 20B connected to the network 10 has the same configuration as that of the monitoring terminal 20A provided in the second embodiment, and in addition, the CPU corresponds to the flowchart shown in FIG. By executing the program, the stored video information is extracted from the video storage server 50 via the network 10 and is decoded by the decoder 21 to be analyzed by the recording image processing means 22. Since the monitoring terminal 20B has the same configuration as the monitoring terminal 20A provided in the second embodiment, the display of each means and the like is omitted. The monitoring terminal 20C includes a decoder 21, an image processing unit 22, and a recording control unit 23, and executes a program corresponding to the flowcharts shown in FIGS. 4 and 5 to record a digital image on the image recording unit 30A. The analysis result by the image processing means 22 is added to the information as metadata and recorded. However, the monitoring terminal 20C does not need to change the selected camera based on the time in the programs corresponding to the flowcharts shown in FIGS. 4 and 5, and corresponds to the camera specified from the input unit of the personal computer. Assume that processing is performed on image information.

図10のフローチャートに対応するプログラムは、例えば、第2の実施例による処理をスタートさせたときに直ちに事象発生となって、その真偽が疑わしい場合やスタート前から事象発生が継続していたことの確認のためなどに、起動される。なお、監視側端末20Bにおいては、第2の実施例による処理が実行されているため、例えば、現在において事象発生となっておらず、且つ優先度が最も低い選択カメラに対応する画像情報についての処理を停止して当該図11のフローチャートに対応するプログラムを実行するものとする。以下、動作を説明する。   In the program corresponding to the flowchart of FIG. 10, for example, when the process according to the second embodiment is started, an event occurs immediately, and the occurrence of the event has been continued if the authenticity is doubtful or before the start. It is activated for confirmation. In the monitoring terminal 20B, since the process according to the second embodiment is executed, for example, the image information corresponding to the selected camera having no event at present and having the lowest priority is used. Assume that the processing is stopped and the program corresponding to the flowchart of FIG. 11 is executed. The operation will be described below.

映像蓄積サーバ50へアクセスして所定のカメラに対応する映像情報を所定時刻(例えば、現在から5分前)から取得し(S41)、デコーダ21によるデコードを行って画像処理用の画像情報を得る(S42)。ステップS42において得られたデコード画像情報について画像処理手段22による画像処理を行って(S43)、事象発生検出となったかを判定する(S44)。上記ステップ43における処理では、対応カメラに関して現在画像について行っている画像処理と異なるアルゴリズムによる処理を行う等、より高精度の処理を行うようにするとより好適である。   The video storage server 50 is accessed to acquire video information corresponding to a predetermined camera from a predetermined time (for example, 5 minutes before the present) (S41), and decoding by the decoder 21 is performed to obtain image information for image processing. (S42). The decoded image information obtained in step S42 is subjected to image processing by the image processing means 22 (S43), and it is determined whether an event occurrence has been detected (S44). In the processing in step 43, it is more preferable to perform processing with higher accuracy, such as processing using an algorithm different from the image processing performed on the current camera with respect to the corresponding camera.

ステップS44において事象発生が検出されなければ、事象発生無しの旨を表示するなどにより報知して(S45)、終了指示入力がないことを検出して(S46)ステップS43における処理を続ける。ステップS44において事象発生が検出された場合には、対応カメラに関して現在画像について行っている画像処理の結果と比較し(S47)、一致した結果が得られたかを検出し(S48)、一致した結果が得られなければ(例えば、道路監視システムにおいては渋滞発生と霧発生等)、画像処理結果が不一致の旨或いは誤検出の旨を表示するなどにより報知して(S49)、終了指示入力がないことを検出して(S51)ステップS43における処理を続ける。   If no event occurrence is detected in step S44, a notification that no event has occurred is displayed (S45), the absence of an end instruction input is detected (S46), and the processing in step S43 is continued. If the occurrence of an event is detected in step S44, it is compared with the result of image processing performed on the current image for the corresponding camera (S47), and it is detected whether a matching result is obtained (S48). If it is not obtained (for example, the occurrence of traffic jams and fog in the road monitoring system), the image processing result is informed by displaying a mismatch or erroneous detection (S49), and no termination instruction is input. (S51) and the process in step S43 is continued.

ステップS48において一致した結果が得られた場合には、画像処理結果が一致の旨或いは事象発生継続の旨を表示するなどにより報知して(S50)、終了指示入力がないことを検出して(S51)ステップS43における処理を続ける。ステップS46、S51において終了指示入力を検出するとエンドとなる。斯して本実施例によれば、蓄積した映像情報を用いて画像処理を行い、画像処理に関する評価や事象発生の継続性を検出して報知することができ、適切な監視を行うことが可能である。   If a coincidence result is obtained in step S48, a notification that the image processing results are coincident or that the event has continued is displayed (S50), and it is detected that there is no end instruction input ( S51) The processing in step S43 is continued. When an end instruction input is detected in steps S46 and S51, the process is ended. Thus, according to the present embodiment, it is possible to perform image processing using the stored video information, detect and notify the continuity of evaluation and event occurrence regarding image processing, and perform appropriate monitoring. It is.

なお、図10には示されていないが、ネットワーク10にクライアントコンピュータを接続して、画像蓄積サーバ50から所定のカメラに対応する映像情報を所定時刻から取得し、MPEGに対するデコードを行い映像を表示して監視などを行うことが可能となっている。   Although not shown in FIG. 10, a client computer is connected to the network 10, video information corresponding to a predetermined camera is acquired from the image storage server 50 from a predetermined time, and MPEG is decoded to display the video. And can be monitored.

本発明における第1の実施例に係る監視システムの構成を示す図。The figure which shows the structure of the monitoring system which concerns on 1st Example in this invention. 本発明における第1の実施例に係る監視システムに用いられるカメラ制御情報データベースの内容を示す図。The figure which shows the content of the camera control information database used for the monitoring system which concerns on 1st Example in this invention. 本発明における第1の実施例に係る監視システムに用いられる現在選択カメラ情報テーブルの内容を示す図。The figure which shows the content of the currently selected camera information table used for the monitoring system which concerns on 1st Example in this invention. 本発明における第1の実施例に係る監視システムの動作を説明するためのフローチャート。The flowchart for demonstrating operation | movement of the monitoring system which concerns on 1st Example in this invention. 本発明における第1の実施例に係る監視システムの動作を説明するためのフローチャート。The flowchart for demonstrating operation | movement of the monitoring system which concerns on 1st Example in this invention. 本発明における第2の実施例に係る監視システムの構成を示す図。The figure which shows the structure of the monitoring system which concerns on 2nd Example in this invention. 本発明における第2の実施例に係る監視システムに用いられる制御情報テーブルの内容を示す図。The figure which shows the content of the control information table used for the monitoring system which concerns on 2nd Example in this invention. 本発明における第3の実施例に係る監視システムに用いられるセンサ情報管理テーブルの内容を示す図。The figure which shows the content of the sensor information management table used for the monitoring system which concerns on 3rd Example in this invention. 本発明における第2の実施例に係る監視システムの動作を説明するためのフローチャート。The flowchart for demonstrating operation | movement of the monitoring system which concerns on 2nd Example in this invention. 本発明における第3の実施例に係る監視システムの構成を示す図。The figure which shows the structure of the monitoring system which concerns on 3rd Example in this invention. 本発明における第3の実施例に係る監視システムの動作を説明するためのフローチャート。The flowchart for demonstrating operation | movement of the monitoring system which concerns on 3rd Example in this invention. 従来の監視システムに係る構成を示す図。The figure which shows the structure which concerns on the conventional monitoring system. 従来の監視システムに係る構成を示す図。The figure which shows the structure which concerns on the conventional monitoring system. 従来の監視システムに係る構成を示す図。The figure which shows the structure which concerns on the conventional monitoring system. 従来の監視システムに係る構成を示す図。The figure which shows the structure which concerns on the conventional monitoring system.

符号の説明Explanation of symbols

10 ネットワーク
11−1、11−2、11−3 アナログカメラ
12−1、12−2 IPカメラ
13−1、13−2、13−3 エンコーダ
20、20A、20B、20C 監視側端末
21 デコーダ
22 画像処理手段
23 録画制御手段
24 カメラ制御手段
25 カメラ制御情報DB
26 タイマ
27 解析制御手段
30、30A 画像録画部
40 事象発生報知手段
41−1、41−2 センサ
50 映像蓄積サーバ
10 Network 11-1, 11-2, 11-3 Analog Camera 12-1, 12-2 IP Camera 13-1, 13-2, 13-3 Encoder 20, 20A, 20B, 20C Monitoring Terminal 21 Decoder 22 Image Processing Means 23 Recording control means 24 Camera control means 25 Camera control information DB
26 Timer 27 Analysis control means 30, 30A Image recording unit 40 Event occurrence notification means 41-1, 41-2 Sensor 50 Video storage server

Claims (9)

被写対象を撮像して符号化されたネットワーク送信可能な映像情報を出力する複数の映像送出部と、
前記複数の映像送出部が接続されるネットワークと、
前記ネットワークに接続され、前記複数の映像送出部が送出した映像情報に含まれている少なくともIフレームを取り込み1画面分のディジタル画像情報へ変換するデコーダと、
前記デコーダが変換した複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行う画像処理手段と
を具備することを特徴とする監視システム。
A plurality of video transmission units for imaging the object to be imaged and outputting encoded video information that can be transmitted through the network;
A network to which the plurality of video transmission units are connected;
A decoder connected to the network for capturing at least an I frame included in the video information transmitted by the plurality of video transmission units and converting it into digital image information for one screen;
A monitoring system comprising: image processing means for performing event analysis on digital image information corresponding to a plurality of video transmission units converted by the decoder in a time division manner.
デコードしたディジタル画像情報を録画する画像録画部と、
前記画像録画部に録画するディジタル画像情報に対して前記画像処理手段による解析結果をメタデータとして付加する録画制御手段と
を具備することを特徴とする請求項1に記載の監視システム。
An image recording unit for recording the decoded digital image information;
The monitoring system according to claim 1, further comprising: a recording control unit that adds, as metadata, an analysis result by the image processing unit to digital image information recorded in the image recording unit.
前記画像処理手段は、解析結果に応じて対応する映像送出部の送出に係るディジタル画像情報に関する処理レートを変更することを特徴とする請求項1に記載の監視システム。 The monitoring system according to claim 1, wherein the image processing unit changes a processing rate related to digital image information related to transmission of a corresponding video transmission unit according to an analysis result. 前記映像送出部は、ズーム機構、旋回機構、解像度変更手段を備えており、
前記画像処理手段による解析結果に応じて対応する映像送出部におけるズーム機構、旋回機構、解像度変更手段の制御を行うカメラ制御手段が具備されていることを特徴とする請求項1に記載の監視システム。
The video sending unit includes a zoom mechanism, a turning mechanism, and a resolution changing means,
The monitoring system according to claim 1, further comprising a camera control unit that controls a zoom mechanism, a turning mechanism, and a resolution changing unit in a corresponding video transmission unit according to an analysis result by the image processing unit. .
事象を検出するセンサと、該センサが事象を検出した場合にネットワークを介して事象発生情報を報知する事象発生報知手段と、
前記事象発生報知手段による事象発生情報をネットワークを介して受け取り、この事象発生情報に応じて対応する映像送出部の送出に係るディジタル画像情報について前記画像処理手段による解析を実行させる解析制御手段と
を具備することを特徴とする請求項1に記載の監視システム。
A sensor for detecting an event, and event occurrence notifying means for notifying event occurrence information via a network when the sensor detects an event;
Analysis control means for receiving event occurrence information by the event occurrence notification means via a network, and performing analysis by the image processing means on digital image information related to transmission of a corresponding video transmission section according to the event occurrence information; The monitoring system according to claim 1, further comprising:
カメラ制御手段は、前記事象発生報知手段から送られる事象発生情報をネットワークを介して受け取り、この事象発生情報に応じて対応する映像送出部におけるズーム機構、旋回機構、解像度変更手段の制御を行うことを特徴とする請求項5に記載の監視システム。 The camera control means receives the event occurrence information sent from the event occurrence notification means via the network, and controls the zoom mechanism, the turning mechanism, and the resolution changing means in the corresponding video transmission unit according to the event occurrence information. The monitoring system according to claim 5. 時刻情報に対応して制御すべき映像送出部と制御内容の情報が対応付けられたカメラ制御情報データベースを備え、
カメラ制御手段は、前記カメラ制御情報データベースの情報に応じて対応する制御を行うことを特徴とする請求項4に記載の監視システム。
Provided with a camera control information database in which video transmission units to be controlled according to time information and information on control contents are associated with each other,
The monitoring system according to claim 4, wherein the camera control unit performs corresponding control according to information in the camera control information database.
映像送出部により送出された映像情報をネットワークから取り込み蓄積する映像蓄積手段を備え、
前記映像蓄積手段から直接にまたはネットワークを介して蓄積された映像情報を取り出し前記デコーダにてデコードして前記画像処理手段による解析を実行することを特徴とする請求項1に記載の監視システム。
Video storage means for capturing and storing video information sent from the video sending unit from the network,
2. The monitoring system according to claim 1, wherein video information stored directly from the video storage means or via a network is extracted, decoded by the decoder, and analyzed by the image processing means.
映像情報に含まれている少なくともIフレームを取り込み1画面分のディジタル画像情報へ変換するデコーダと、
前記デコーダが変換した複数の映像送出部に対応するディジタル画像情報を時分割にて画像解析し、事象検出を行う画像処理手段と
を具備することを特徴とする画像処理装置。
A decoder that captures at least an I frame included in video information and converts it into digital image information for one screen;
An image processing apparatus comprising: image processing means for performing event analysis by analyzing digital image information corresponding to a plurality of video transmission units converted by the decoder in a time-sharing manner.
JP2006041283A 2006-02-17 2006-02-17 Monitoring system Expired - Fee Related JP4959987B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006041283A JP4959987B2 (en) 2006-02-17 2006-02-17 Monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006041283A JP4959987B2 (en) 2006-02-17 2006-02-17 Monitoring system

Publications (2)

Publication Number Publication Date
JP2007221581A true JP2007221581A (en) 2007-08-30
JP4959987B2 JP4959987B2 (en) 2012-06-27

Family

ID=38498317

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006041283A Expired - Fee Related JP4959987B2 (en) 2006-02-17 2006-02-17 Monitoring system

Country Status (1)

Country Link
JP (1) JP4959987B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013062514A1 (en) * 2011-10-24 2013-05-02 Intel Corporation Multiple stream processing for video analytics and encoding
WO2016119528A1 (en) * 2015-01-26 2016-08-04 杭州海康威视数字技术股份有限公司 Intelligent processing method and system for video data
US9569878B2 (en) 2011-12-07 2017-02-14 Intel Corporation Sample culling based on linearized 5D edge equations
CN109756666A (en) * 2017-11-06 2019-05-14 京瓷办公信息系统株式会社 monitoring system
JP2020178305A (en) * 2019-04-22 2020-10-29 キヤノン株式会社 Information process system, information processor, information process method, and program

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08331550A (en) * 1995-05-29 1996-12-13 N D R:Kk Supervisory equipment
JP2000165846A (en) * 1998-11-30 2000-06-16 Matsushita Electric Ind Co Ltd Video monitoring system
JP2003274390A (en) * 2002-03-18 2003-09-26 Olympus Optical Co Ltd Video distributing server and video receiving client system
JP2003284062A (en) * 2002-03-26 2003-10-03 Kubota Corp Monitoring system
JP2004171419A (en) * 2002-11-22 2004-06-17 Mitsubishi Electric Corp Traffic flow measurement processor
JP2005079774A (en) * 2003-08-29 2005-03-24 Mitsubishi Electric Corp Road monitoring system
JP2005295469A (en) * 2004-04-06 2005-10-20 Hitachi Ltd Monitoring system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08331550A (en) * 1995-05-29 1996-12-13 N D R:Kk Supervisory equipment
JP2000165846A (en) * 1998-11-30 2000-06-16 Matsushita Electric Ind Co Ltd Video monitoring system
JP2003274390A (en) * 2002-03-18 2003-09-26 Olympus Optical Co Ltd Video distributing server and video receiving client system
JP2003284062A (en) * 2002-03-26 2003-10-03 Kubota Corp Monitoring system
JP2004171419A (en) * 2002-11-22 2004-06-17 Mitsubishi Electric Corp Traffic flow measurement processor
JP2005079774A (en) * 2003-08-29 2005-03-24 Mitsubishi Electric Corp Road monitoring system
JP2005295469A (en) * 2004-04-06 2005-10-20 Hitachi Ltd Monitoring system

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013062514A1 (en) * 2011-10-24 2013-05-02 Intel Corporation Multiple stream processing for video analytics and encoding
TWI586144B (en) * 2011-10-24 2017-06-01 英特爾公司 Multiple stream processing for video analytics and encoding
US9569878B2 (en) 2011-12-07 2017-02-14 Intel Corporation Sample culling based on linearized 5D edge equations
WO2016119528A1 (en) * 2015-01-26 2016-08-04 杭州海康威视数字技术股份有限公司 Intelligent processing method and system for video data
US10178430B2 (en) 2015-01-26 2019-01-08 Hangzhou Hikvision Digital Technology Co., Ltd. Intelligent processing method and system for video data
CN109756666A (en) * 2017-11-06 2019-05-14 京瓷办公信息系统株式会社 monitoring system
JP2019087842A (en) * 2017-11-06 2019-06-06 京セラドキュメントソリューションズ株式会社 Monitoring system
CN109756666B (en) * 2017-11-06 2020-12-25 京瓷办公信息系统株式会社 Monitoring system
JP2020178305A (en) * 2019-04-22 2020-10-29 キヤノン株式会社 Information process system, information processor, information process method, and program

Also Published As

Publication number Publication date
JP4959987B2 (en) 2012-06-27

Similar Documents

Publication Publication Date Title
US10037606B2 (en) Video analysis apparatus, monitoring system, and video analysis method
JP4847165B2 (en) Video recording / reproducing method and video recording / reproducing apparatus
US7082210B2 (en) Moving object detector and image monitoring system
EP1879384B1 (en) Improved pre-alarm video buffer
EP3070938A1 (en) Image processing apparatus and method
JP2008035095A (en) Monitoring apparatus, monitoring system, monitoring method and program
JP4959987B2 (en) Monitoring system
JP2008042695A (en) Monitor camera apparatus, monitor camera system, and method of recording monitor camera image
AU2005272046A1 (en) Method and apparatus for detecting motion in MPEG video streams
KR20070060612A (en) Method for outputting a video signal in digital video recorder
JP2008219484A (en) Monitoring camera, display control device, and monitoring system
KR101074850B1 (en) Serch system of images
JP2009021983A (en) Monitor image recording apparatus
CN111277800A (en) Monitoring video coding and playing method and device, electronic equipment and storage medium
JP4611042B2 (en) Video output system and control program for outputting video
KR20100138168A (en) Video surveillance system and video surveillance method thereof
JP4262023B2 (en) Image shake detection device, method and program thereof, and camera image selection device
JP4855797B2 (en) Surveillance system and image processing apparatus
KR20100114748A (en) System for monitoring network camera
JP2001251608A (en) Remote monitoring camera system
JP2007189558A (en) Video display system and video storage distribution apparatus
JP2008085832A (en) Monitoring camera, control method of monitoring camera, and monitoring camera system
EP2260644A1 (en) A method of recording quality images
JP6665913B2 (en) Video analysis device, monitoring device, monitoring system, and video analysis method
KR100500152B1 (en) Method for transferring high resolution video signals and high resolution camera system executing the method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110510

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110711

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120228

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120322

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150330

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees