JP2007124526A - Image monitoring recording device and system therefor - Google Patents

Image monitoring recording device and system therefor Download PDF

Info

Publication number
JP2007124526A
JP2007124526A JP2005316953A JP2005316953A JP2007124526A JP 2007124526 A JP2007124526 A JP 2007124526A JP 2005316953 A JP2005316953 A JP 2005316953A JP 2005316953 A JP2005316953 A JP 2005316953A JP 2007124526 A JP2007124526 A JP 2007124526A
Authority
JP
Japan
Prior art keywords
image
person
recording
specific
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005316953A
Other languages
Japanese (ja)
Inventor
Yoshiyuki Okuyama
良幸 奥山
Hisao Ootawa
久雄 大田和
Shuji Toyoshima
修次 豊島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2005316953A priority Critical patent/JP2007124526A/en
Publication of JP2007124526A publication Critical patent/JP2007124526A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To change a notification destination and an image recording method corresponding to a recognized danger state after recognizing the danger state from movements of a person in a monitoring region. <P>SOLUTION: Images of a plurality of different specific movements corresponding to a danger degree of the person are registered in an image memory 106 as template images. Moving image signals in the monitoring region of a CCD 200 are supplied to an image recognition processing part 105. The person in the monitoring region is extracted for each image of a frame. It is determined whether the movements of the person are the specific movements or not after comparing them with the template images in the image memory 106 or it is determined to which specific movements the movements of the person correspond. The danger degree shown by the movements of the person is recognized by the determination. The moving image signals from the CCD camera 200 are recorded in a large-capacity recording part 108 when the danger degree is recognized. The recording time is designated corresponding to the recognition result (the danger degree) so as to improve the use efficiency of a recording medium. The abnormality notification destination via a router 500 and Webs is changed corresponding to the recognition result. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、強盗などの犯罪を未然に防ぐことを可能とした画像監視記録装置及び画像監視記録システムに関する。   The present invention relates to an image monitoring and recording apparatus and an image monitoring and recording system that can prevent crimes such as robbery.

近年、犯罪防止のために、カメラ装置からの画像を記録する画像監視記録装置及びシステムが使用されるようになってきた。特に、ハードディスクを記録媒体とした画像監視記録装置は、検索性などの使い勝手が便利なため、注目を集めている。   In recent years, image monitoring and recording devices and systems that record images from camera devices have been used for crime prevention. In particular, an image monitoring and recording apparatus using a hard disk as a recording medium has attracted attention because it is convenient to use such as searchability.

このような画像監視記録装置では、記録時間の長時間化を狙って、ハードディスクのような大容量の記録媒体が使用されている。しかしながら、ハードディスクの容量は有限であることから、不要な記録をしないようにしてハードディスクの利用効率をよくするため、監視領域内に異常の動きがあるときにのみ、画像の記録を行なうように制御する技術が望まれていた。   In such an image monitoring and recording apparatus, a large-capacity recording medium such as a hard disk is used in order to increase the recording time. However, since the capacity of the hard disk is limited, in order to improve the usage efficiency of the hard disk so that unnecessary recording is not performed, control is performed so that the image is recorded only when there is an abnormal movement in the monitoring area. The technology to do was desired.

このような画像監視記録装置の一従来例として、ＣＣＤ(Charge Coupled Device)センサなどを備えたカメラ装置で撮影した画面内（監視領域内）で人物の動きなどがあるときには、明るさの変化を検出（モーションディテクト機能）して異常時と判断し、記録を開始するようにした技術が提案されている（例えば、非特許文献１参照）
また、他の従来例として、手を上げるなどの特定の動きを認識したときだけ、画像の記録開始や通報動作などの特定の動作を実行するようにした技術が提案されている（例えば、特許文献１参照）。 As a conventional example of such an image monitoring and recording apparatus, when there is a person's movement in a screen (within a monitoring area) photographed by a camera device equipped with a CCD (Charge Coupled Device) sensor or the like, the brightness change A technique has been proposed in which detection (motion detection function) is performed to determine that an abnormality has occurred and recording is started (see, for example, Non-Patent Document 1).
Further, as another conventional example, a technique has been proposed in which a specific operation such as image recording start or notification operation is executed only when a specific movement such as raising a hand is recognized (for example, a patent) Reference 1).

この特許文献１に記載の技術によると、監視領域内を通行人が通っただけでは異常時とは判断せず、記録を開始しないが、この監視領域内の人物が手を上げるなどの特定の動きをしたとき、これを異常と判定して画像記録を開始する。このため、ハードディスクの利用効率がさらに向上する。
（株）日立製作所製 監視用デジタルレコーダーＤＳ−Ｆ１００ 特開２００２−３５４４５９号公報 According to the technique described in Patent Document 1, if a passerby passes through the monitoring area, it is not determined that there is an abnormality, and recording is not started. When it moves, it is determined as abnormal and image recording is started. For this reason, the utilization efficiency of the hard disk is further improved.
Digital recorder DS-F100 for monitoring manufactured by Hitachi, Ltd. JP 2002-35459 A

上述したように、ハードディスクの容量は有限であるので、異常時だけにハードディスクに記録するようにすることは、ハードディスクの利用効率を高める上で必要なことである。   As described above, since the capacity of the hard disk is finite, recording on the hard disk only at the time of abnormality is necessary for improving the utilization efficiency of the hard disk.

ところで、上記非特許文献１記載の従来技術では、カメラ装置による監視領域内で動き（変化）があると、画像記録が開始されるので、変化がないときには画像記録が行なわれず、この点では、ハードディスクの利用率が高められたことになる。しかし、例えば、カメラ装置の監視領域内を通行人が横切っただけのように、異常時ではないにもかかわらず、監視領域内に動きがあるというだけで画像記録が開始し、または、通報してしまうことになる。このように、異常時ではないとき、即ち、画像記録が不要であるときでも、画像記録が行なわれることになり、このような事態が必然的に頻発するので、無駄に画像記録も多くなり、このような無駄な画像記録をなくしてハードディスクの利用効率をより高めることが必要となる。   By the way, in the prior art described in Non-Patent Document 1, image recording is started when there is a movement (change) in the monitoring area by the camera device. Therefore, when there is no change, image recording is not performed. The hard disk usage rate has been increased. However, for example, image recording starts or reports only when there is movement in the monitoring area, even though it is not abnormal, just as a passerby crosses in the monitoring area of the camera device. It will end up. In this way, even when it is not abnormal, that is, when image recording is unnecessary, image recording will be performed, and such a situation will inevitably occur frequently. It is necessary to increase the utilization efficiency of the hard disk by eliminating such useless image recording.

これに対し、上記特許文献１に記載の従来技術では、カメラ装置の監視領域内を通行人が通っただけでは、異常時とは判断せず、従って、画像記録を開始せず、手を上げるなどの特定の動きをしたときにだけ、画像記録を開始するようにしているので、上記非特許文献１に記載の従来技術に比べ、ハードディスクの利用効率が高められることになる。   On the other hand, in the prior art described in the above-mentioned Patent Document 1, it is not determined that an abnormality has occurred when a passerby passes through the monitoring area of the camera device. Therefore, image recording is not started and the hand is raised. Since the image recording is started only when a specific movement such as the above is performed, the use efficiency of the hard disk is improved as compared with the conventional technique described in Non-Patent Document 1.

ところで、マンションの地下駐車場などを監視する画像監視記録システムの場合、危険の状況によって通報先や画像記録の開始などの画像監視記録装置の動作を異ならせたい場合がある。例えば、監視領域内での人物が、どういう人か分らないが、怪しいと思われるケースでは、通報まではせずに、画像の記録だけを開始しておき、この人物がナイフを持っているケースでは、警備会社に通報して助けを呼ぶとともに画像を記録するようにすることが望ましい。このような監視を行なうためには、危険の状況に応じてマンションの住民が事前に決めた動きを監視領域内の人物がとった場合には、自動的にその動きを認識し、通報や記録開始をしたりすることが必要がある。   By the way, in the case of an image monitoring and recording system for monitoring an underground parking lot of an apartment, there are cases where it is desired to change the operation of the image monitoring and recording apparatus such as the report destination and the start of image recording depending on the danger situation. For example, if you do not know what a person in the surveillance area is, but you suspect that it is suspicious, start recording only the image without making a report, and this person has a knife. Then, it is desirable to notify the security company for help and to record an image. In order to perform such monitoring, if a person in the monitoring area takes a movement determined in advance by the residents of the apartment in accordance with the danger situation, the movement is automatically recognized and reported or recorded. It is necessary to start.

しかしながら、上記特許文献１記載の従来技術では、手を上げるなどの特定の動きを認識したときだけ異常時と判断して通報するようにしているため、異常時を検出（発報）したときの画像監視記録装置の動作が１つの決まったものとなっており、危険の状況に応じて、通報先や画像記録を変えるなど、画像監視記録装置の動作を異ならせることには配慮されておらず、この点に課題がある。   However, in the prior art described in the above-mentioned Patent Document 1, since it is determined that an abnormality is detected only when a specific movement such as raising a hand is recognized, an abnormality is detected (reporting). The operation of the image monitoring and recording device is a fixed one, and it is not considered to change the operation of the image monitoring and recording device, such as changing the report destination or image recording depending on the danger situation There is a problem with this point.

本発明は、かかる点に鑑みてなされたものであって、その目的は、監視領域内での人物の動きから危険の状況を認識し、その認識した危険の状況に応じて通報先や画像記録の仕方などを異ならせることができるようにした画像監視記録装置及び画像監視記録システムを提供することにある。   The present invention has been made in view of the above points, and its purpose is to recognize a danger situation from the movement of a person in the monitoring area, and to notify a report destination or an image record according to the recognized danger situation. It is an object of the present invention to provide an image monitoring and recording apparatus and an image monitoring and recording system that can vary the manner of the above.

上記目的を解決するために、本発明による画像監視記録装置は、動画像信号を入力する画像入力手段と、画像入力手段から入力された動画像信号による画像から人物の動きを検出し、人物の動きが異常の度合いに応じた特定の動きのいずれに該当するかを判定する画像認識処理手段と、画像認識処理手段が判定する特定の動きに応じて設定された通報先に異常通報する通報手段と、画像認識処理手段が判定する特定の動きに応じた指定時間、画像入力手段から入力される動画像信号を記録する記録手段とを備えたことを特徴とするものである。   In order to solve the above-described object, an image monitoring and recording apparatus according to the present invention detects an image input means for inputting a moving image signal, and detects a person's movement from an image based on the moving image signal input from the image input means. Image recognition processing means for determining whether the movement corresponds to a specific movement according to the degree of abnormality, and reporting means for reporting an abnormality to a report destination set according to the specific movement determined by the image recognition processing means And a recording means for recording a moving image signal input from the image input means for a specified time according to a specific movement determined by the image recognition processing means.

また、本発明による画像監視記録装置は、特定の動きが、異常の度合いが低い順に、特定の動き１，特定の動き２，……，特定の動きｍが設定されており、画像認識処理手段が、
（１）検出した人物の動きを特定の動き１と判定したときには、画像入力手段から入力される動画像信号を、特定の動き１に対する指定時間、記録手段へ記録するだけの第１の動作を実行し、
（２）検出した人物の動きを特定の動きｋ（但し、ｋ＝２，３，……，ｍ）と判定したときには、画像入力手段から入力される動画像信号を、特定の動きｋに対する指定時間、記録手段へ記録するとともに、特定の動きｋに対して予め決められた第（ｋ−１）の通報先に異常を通報する第ｋの動作を実行する
ことを特徴とするものである。 In the image monitoring and recording apparatus according to the present invention, the specific motion 1 is set with the specific motion 1, the specific motion 2,. But,
(1) When the detected motion of the person is determined to be a specific motion 1, a first operation is performed in which a moving image signal input from the image input means is recorded on the recording means for a specified time for the specific motion 1 Run,
(2) When the detected motion of the person is determined to be a specific motion k (where k = 2, 3,..., M), the moving image signal input from the image input means is designated for the specific motion k. The k-th operation of notifying the abnormality to the (k-1) -th report destination predetermined for the specific movement k is performed while recording the time and the recording means.

さらに、本発明による画像監視記録装置は、特定の動き毎に複数フレームからなるテンプレート画像を登録した画像メモリを設け、画像認識処理手段が、検出した人物の動きが特定の動きのいずれと一致するかの判定を、特定の動きに対する複数フレームの夫々のテンプレート画像を順次検出した人物の動きと比較して行なうことを特徴とするものである。   Furthermore, the image monitoring and recording apparatus according to the present invention is provided with an image memory in which a template image consisting of a plurality of frames is registered for each specific motion, and the image recognition processing means matches the detected motion of the person with any of the specific motions. This determination is performed by comparing each of the template images of a plurality of frames with respect to a specific movement with the movement of the person who has been sequentially detected.

上記目的を達成するために、本発明による画像監視記録システムは、上記画像監視記録装置の画像入力手段に監視領域を撮像するカメラ装置が接続され、かつ異常通報する通報先が通信回線を介して接続されたことを特徴とするものである。   In order to achieve the above object, an image monitoring and recording system according to the present invention is configured such that a camera device for imaging a monitoring area is connected to the image input means of the image monitoring and recording apparatus, and a report destination for reporting an abnormality is transmitted via a communication line. It is characterized by being connected.

また、本発明による画像監視記録システムは、画像監視記録装置にカメラ装置をパン，チルト，ズームなどのカメラ機能を制御するカメラ制御手段を設け、画像監視記録装置での画像認識処理手段により、画像入力手段から入力されるカメラ装置からの動画像信号から検出される人物の動きが特定の動きのいずれかに該当すると判定されたとき、カメラ制御手段がカメラ装置のパン，チルトもしくはズームなどの制御を実行することを特徴とするものである。   In the image monitoring and recording system according to the present invention, the image monitoring and recording apparatus is provided with camera control means for controlling camera functions such as panning, tilting, and zooming of the camera device, and the image recognition processing means in the image monitoring and recording apparatus performs image processing. When it is determined that the movement of the person detected from the moving image signal from the camera device input from the input means corresponds to any of the specific movements, the camera control means controls panning, tilting or zooming of the camera device. Is executed.

本発明によると、監視領域内の人物の動きに異常があるときだけ、記録手段が入力される動画像信号を記録手段に記録するものであるから、無駄な記録をなくすことができるし、また、その異常の度合いに応じて記録手段に記録する入力画像信号の記録時間を異ならせるものであるから、人物の動きの確認にそれほどの時間が必要でない場合には、記録時間が短く、異常の度合いが高くて長時間の確認が必要な異常状況の場合には、記録時間が長くなり、必要な記録時間を確保しながら無駄な記録をなくすことができて、記録媒体の利用効率を大幅に高めることができる。   According to the present invention, only when there is an abnormality in the movement of the person in the monitoring area, the recording means records the moving image signal input thereto on the recording means, so that useless recording can be eliminated, and Since the recording time of the input image signal to be recorded in the recording means is made different according to the degree of abnormality, when not much time is required for confirming the movement of the person, the recording time is short, In the case of an abnormal situation where the degree is high and confirmation for a long time is required, the recording time becomes longer, and wasteful recording can be eliminated while securing the necessary recording time, greatly increasing the efficiency of use of the recording medium. Can be increased.

また、本発明によると、監視領域内の人物の動きの異常の度合いに応じて、異常通報の通報先を異ならせるものであるから、異常の度合いによっては無駄となる通報先からの出動を減らすことができる。   In addition, according to the present invention, the notification destination of the abnormality report is made different according to the degree of abnormality of the movement of the person in the monitoring area, so depending on the degree of abnormality, the dispatch from the notification destination that is wasted is reduced. be able to.

さらに、本発明によると、監視領域内の人物の動きの異常が検出されると、カメラ装置のパン，チルト，ズームなどの制御を行なうものであるから、監視領域内での人物の位置が異なっても、表示画面内での人物画像の表示をほぼ同じ位置で大きくすることができ、かかる人物を容易に確認できるようになる。   Furthermore, according to the present invention, when an abnormality in the movement of a person in the monitoring area is detected, the camera device controls panning, tilting, zooming, etc., so that the position of the person in the monitoring area differs. However, the display of the person image on the display screen can be enlarged at substantially the same position, and the person can be easily confirmed.

以下、本発明の実施形態を図面を用いて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１は本発明による画像監視記録装置及び画像監視記録システムの一実施形態を示すブロック構成図であって、１００はこの実施形態の画像監視記録装置、１０１はＣＰＵ(Central Processing Unit）、１０２はプログラムメモリ、１０３はＬＡＮ(Local Area Network)制御部、１０４はＡ／Ｄ（アナログ／ディジタル）変換器、１０５は画像認識処理部、１０６は画像メモリ、１０７は画像コーディック部、１０８は大容量記録部、１０９はＤ／Ａ（ディジタル／アナログ）変換器、１１０は画像表示制御部、１１１は操作パネル制御部、１１２はカメラ制御部、１１３は画像入力端子、１１４はシステムバス、２００はＣＣＤカメラ、３００はモニタ、４００はＰＣ(Personal Computer）、５００はルータ、６００は操作パネルである。   FIG. 1 is a block diagram showing an embodiment of an image monitoring and recording apparatus and an image monitoring and recording system according to the present invention, where 100 is an image monitoring and recording apparatus of this embodiment, 101 is a CPU (Central Processing Unit), and 102 is Program memory, 103 LAN (Local Area Network) control unit, 104 A / D (analog / digital) converter, 105 image recognition processing unit, 106 image memory, 107 image codec unit, 108 large capacity recording , 109 is a D / A (digital / analog) converter, 110 is an image display controller, 111 is an operation panel controller, 112 is a camera controller, 113 is an image input terminal, 114 is a system bus, and 200 is a CCD camera. , 300 is a monitor, 400 is a PC (Personal Computer), 500 is a router, and 600 is an operation panel.

同図において、監視領域内をＣＣＤセンサで撮像し、その被写体の動画像信号を出力するＣＣＤカメラ２００と、内部に大容量のハードディスクや処理部を備え、ＣＣＤカメラ２００から供給される動画像信号を記録したり、画像監視のための各種の処理を行なう画像監視記録装置１００と、モニタ３００は画像監視記録装置１００からの画像信号を画面に画像表示するモニタ３００と、画像監視記録装置１００が異常時に通報する通報先の１つであって、画像監視記録装置１００からのそのときの異常情報（異常時の画像など）を受信するＰＣ４００と、画像監視記録装置１００からの異常情報をＬＡＮ経由で一般回線（Ｗｅｂ）上に送信するための回線制御装置であるルータ５００と、画像監視記録装置１００を動作させるためのものであって、ユーザのスイッチ操作によるメニュー選択により、画像監視記録装置１００の各種動作を決定させる操作パネル６００とでこの実施形態の画像監視記録システムが構成されている。   In the figure, a CCD camera 200 that captures an image of a monitoring area with a CCD sensor and outputs a moving image signal of the subject, and a moving image signal supplied from the CCD camera 200 having a large-capacity hard disk and processing unit therein. The image monitoring and recording apparatus 100 that performs recording and various processes for image monitoring, the monitor 300 displays the image signal from the image monitoring and recording apparatus 100 on the screen, and the image monitoring and recording apparatus 100 One of the report destinations to be notified at the time of abnormality, the PC 400 that receives the abnormality information (such as an image at the time of abnormality) from the image monitoring recording apparatus 100, and the abnormality information from the image monitoring recording apparatus 100 via the LAN In order to operate the router 500, which is a line control device for transmitting on a general line (Web), and the image monitoring and recording apparatus 100. It, the menu selection by the user of the switch operation, image monitoring recording system of this embodiment in an operation panel 600 for determining the various operations of the image surveillance recorder 100 is configured.

画像監視記録装置１００は、ＣＣＤカメラ２００が接続された画像入力端子１１３を備えており、ＣＣＤカメラ２００から出力されるアナログ動画像信号がこの画像入力端子１１３から入力される。また、画像監視記録装置１００は、画像監視のための各種モジュールを備えており、これらモジュールの動作が、プログラムメモリ１０２に格納されているプログラムを基に、ＣＰＵ１０１によって制御される。このＣＰＵ１０１には、システムバス１１４を介して、このプログラムメモリ１０２や制御モジュールとしてのＬＡＮ制御部１０３，画像表示制御部１１０，操作パネル制御部１１１，カメラ制御部１１２、画像認識モジュールとしての画像認識処理部１０５、メモリモジュールとしての画像メモリ１０６、記録モジュールとしての大容量記録部１０８が接続されている。   The image monitoring and recording apparatus 100 includes an image input terminal 113 to which a CCD camera 200 is connected, and an analog moving image signal output from the CCD camera 200 is input from the image input terminal 113. The image monitoring recording apparatus 100 includes various modules for image monitoring, and the operation of these modules is controlled by the CPU 101 based on a program stored in the program memory 102. The CPU 101 is connected to the program memory 102, a LAN control unit 103 as a control module, an image display control unit 110, an operation panel control unit 111, a camera control unit 112, and an image recognition module as an image recognition module via a system bus 114. A processing unit 105, an image memory 106 as a memory module, and a large capacity recording unit 108 as a recording module are connected.

ＬＡＮ制御部１０３は、ＬＡＮを経由して画像監視記録装置１００にＰＣ４００やルータ５００、従って、一般回線を接続できるようにするものであり、画像認識処理部１０５は、ＣＣＤカメラ２００から供給され、Ａ／Ｄ変換器１０４でディジタル信号に変換した画像信号から人物画像を切り出して人物の動きを認識し、この人物が予め決められた特定の動きをしていることを認識すると、その認識結果をＣＰＵ１０１に通知する。画像メモリ１０６は、画像認識処理部１０５で行なわれる動きの認識に必要なテンプレート画像を格納する。このテンプレート画像を用いて上記の特定の動きが認識される。大容量記録部１０８は内部に記録媒体として大容量の上記のハードディスクを備えている。画像表示制御部１１０は、モニタ３００の表示制御を行なうものであって、ディジタル画像信号をＤ／Ａ変換器１０９でアナログ動画像信号に変換してモニタ３００に供給する。画像コーディック部１０７は、Ａ／Ｄ変換器１０４からのディジタル画像信号を圧縮し、符号化する。操作パネル制御部１１１は、画像監視記録装置１００と操作パネル６００との間の通信を制御し、操作パネル６００からのユーザの操作に応じた操作情報をＣＰＵ１０１へ通知する。カメラ制御部１１２は、ＣＰＵ１０１からの指示により、ＣＣＤカメラ２００のパンやチルト，ズームなどのカメラ機能の制御をする。   The LAN control unit 103 enables the PC 400 and the router 500, and thus a general line, to be connected to the image monitoring and recording apparatus 100 via the LAN. The image recognition processing unit 105 is supplied from the CCD camera 200, A person image is cut out from the image signal converted into a digital signal by the A / D converter 104 to recognize the movement of the person, and when the person recognizes that the person is performing a specific movement, the recognition result is displayed. The CPU 101 is notified. The image memory 106 stores a template image necessary for motion recognition performed by the image recognition processing unit 105. The specific movement is recognized using this template image. The large-capacity recording unit 108 includes the above-described large-capacity hard disk as a recording medium. The image display control unit 110 performs display control of the monitor 300, converts the digital image signal into an analog moving image signal by the D / A converter 109, and supplies the analog moving image signal to the monitor 300. The image codec unit 107 compresses and encodes the digital image signal from the A / D converter 104. The operation panel control unit 111 controls communication between the image monitoring and recording apparatus 100 and the operation panel 600 and notifies the CPU 101 of operation information corresponding to a user operation from the operation panel 600. The camera control unit 112 controls camera functions such as pan, tilt, and zoom of the CCD camera 200 according to instructions from the CPU 101.

この画像監視記録装置１００では、異常とされる人物の複数種の特定の動き夫々毎のテンプレート画像が画像メモリ１０６に格納されており、ＣＣＤカメラ２００から出力され、Ａ／Ｄ変換器１０４で変換処理された監視領域内のディジタル画像信号が画像認識処理部１０５に供給されることにより、監視フェーズでは、このディジタル画像信号での（即ち、この監視領域内での）人物の動きをこのテンプレート画像を用いて認識し、この動きが異常であるか否か、また、この動きの異常（危険）の度合い（状況）を判定する。即ち、画像認識処理部１０５では、Ａ／Ｄ変換器１０４から取り込んだディジタル画像信号の監視領域内の画像から人物画像を切り出し、これを画像メモリ１０６に格納されている複数のテンプレート画像と比較して、かかるテンプレート画像のいずれかと同じ特定の動きである認識したときには、この人物の動きは異常（危険）と判定し、そのときにこの人物画像の動きと一致したテンプレート画像に応じて（即ち、異常（危険）の度合いに応じて）、大容量記録部１０８の記録時間を決めて記録を開始させ、ＰＣ４００への通報動作やルータ５００を経由してＷｅｂを介した通報先への通報や、さらには、ＣＣＤカメラ２００のズーム動作などカメラ機能の動作を切替えることができるようにする。これにより、異常頻度が減って大容量記録部１０８でのハードディスクの利用効率が大幅に向上するとともに、危険の状況（相手がナイフを持っているケース、どういう人か分らないが怪しいケース、ストーカーらしき人が近寄ってきたケースなど）に応じて通報先を変えることが可能となる。   In this image monitoring and recording apparatus 100, template images for each of a plurality of types of specific movements of an abnormal person are stored in the image memory 106, output from the CCD camera 200, and converted by the A / D converter 104. By supplying the processed digital image signal in the monitoring area to the image recognition processing unit 105, in the monitoring phase, the movement of the person in the digital image signal (that is, in the monitoring area) is represented by the template image. Is used to determine whether or not the movement is abnormal, and the degree (situation) of the abnormality (danger) of the movement is determined. That is, the image recognition processing unit 105 cuts out a person image from an image in the monitoring area of the digital image signal captured from the A / D converter 104 and compares it with a plurality of template images stored in the image memory 106. When it is recognized that the specific movement is the same as one of the template images, the movement of the person is determined to be abnormal (dangerous), and according to the template image that matches the movement of the person image at that time (ie, Depending on the degree of abnormality (danger), the recording time of the large-capacity recording unit 108 is determined and recording is started, reporting to the PC 400, reporting to the reporting destination via the web via the router 500, Further, the camera function operation such as the zoom operation of the CCD camera 200 can be switched. As a result, the frequency of abnormalities is reduced and the use efficiency of the hard disk in the large-capacity recording unit 108 is greatly improved, and a dangerous situation (a case in which the opponent has a knife, a suspicious case that does not know who it is, It is possible to change the report destination according to the case where a person approaches.

ところで、この実施形態では、次の２つの動作フェーズを動作フェーズを有している。
（ａ）テンプレート登録フェーズ：監視領域内の人物の動きを異常と認識するためのテンプレート画像を画像メモリ１０６に登録するフェーズである。
（ｂ）監視フェーズ：通常の動作フェーズであって、画像監視を実行するフェーズである。画像メモリ１０６に登録されているテンプレート画像を用いて、監視領域内の人物の特定の動きを認識し、その認識の結果、この動きが以上である場合には、その異常の度合いに応じて、大容量記録部１０８への画像の記録時間を異ならせ、また、ＬＡＮ経由でのＰＣ４００への通報やルータ５００を経由してＷｅｂを介し、異常の度合いに応じて予め設定した通報先への通報，ＣＣＤカメラ２００のズーム動作などの動作を切り替える。 By the way, in this embodiment, the following two operation phases have operation phases.
(A) Template registration phase: This is a phase in which a template image for recognizing the movement of a person in the monitoring area as abnormal is registered in the image memory 106.
(B) Monitoring phase: a normal operation phase in which image monitoring is executed. Using the template image registered in the image memory 106, the specific movement of the person in the monitoring area is recognized, and if this movement is the result of the recognition, depending on the degree of abnormality, Different recording times of images to the large-capacity recording unit 108, notification to the PC 400 via the LAN, or notification via the Web via the router 500 to the notification destination set in advance according to the degree of abnormality , Operation such as zoom operation of the CCD camera 200 is switched.

以下、夫々のフェーズについて説明する。   Hereinafter, each phase will be described.

（ａ）テンプレート登録フェーズ：
ここでは、監視領域での人物の動きのうち、異常なものとして、特定の動き１，特定の動き２，特定の動き３の３通のものを対象とし、特定の動き３が異常（危険）の度合いが最も高く（最も危険性が高い）、特定の動き２が次に高いものととして説明するが、本発明では、これに限るものではなく、任意の複数の特定の動きを対象とすることができるものである。 (A) Template registration phase:
Here, among the movements of the person in the monitoring area, three abnormal movements of specific movement 1, specific movement 2, and specific movement 3 are targeted, and specific movement 3 is abnormal (dangerous). However, in the present invention, the present invention is not limited to this, and any plurality of specific movements are targeted. It is something that can be done.

かかる特定の動きを認識するためのテンプレート画像は、ＣＣＤカメラ２００の撮像領域内でかかる特定の動きをする人物（モデル）をこのＣＣＤカメラ２００で撮像し、他の人物（オペレータ）が操作パネル６００を操作して画像監視記録装置１００を動作させることにより、作成されて画像メモリ１０６に登録される。   As a template image for recognizing such a specific movement, a person (model) that performs the specific movement in the imaging area of the CCD camera 200 is imaged by the CCD camera 200, and another person (operator) is operated by the operation panel 600. Is operated to operate the image monitoring and recording apparatus 100, and is created and registered in the image memory 106.

図２はテンプレート画像を画像メモリ１０６に登録するテンプレート登録フェーズを説明するためのシステム構成図であって、Ｍはモデル、Ｓはオペレータであり、図１に対応する部分には同一符号を付けている。   FIG. 2 is a system configuration diagram for explaining a template registration phase for registering a template image in the image memory 106. M is a model, S is an operator, and parts corresponding to those in FIG. Yes.

同図において、モデルＭは、ＣＣＤカメラ２００の撮像領域内で異常と認識される動きを実演する。ここでは、上記の特定の動き１，２，３を実演する。オペレータＳは、操作パネル６００を操作することにより、画像監視記録装置１００を動作させる。   In the figure, the model M demonstrates the movement recognized as abnormal in the imaging area of the CCD camera 200. Here, the specific movements 1, 2, and 3 are demonstrated. The operator S operates the image monitoring and recording apparatus 100 by operating the operation panel 600.

ＣＣＤカメラ２００で撮像されたその撮像領域の動画像信号は画像監視記録装置１００に画像入力端子１１３から入力され、図１において、Ａ／Ｄ変換器１０４でディジタル画像信号に変換されて画像認識処理部１０５に供給される。この画像認識処理部１０５では、このディジタル画像信号からモデルＭの画像部分（モデル画像）が抽出される。この場合には、オペレータＳによる操作パネル６００の操作に基づいて、抽出されたモデル画像のディジタル画像信号は、システムバス１１４，画像表示制御部１１０を介してＤ／Ａ変換器１０９に供給され、アナログ動画像信号に変換されてモニタ３００に供給される。これにより、モニタ３００には、モデルＭの画像（モデル画像）のみが表示される。このモデル画像が特定の動き１の動きをするとオペレータＳが認識して操作パネル６００を所定操作すると、このときのモデル画像がｎフレーム（勿論、ｎフィールドでもよいが、以下では、ｎフレームとする）特定の動き１のテンプレート画像Ｔ１として画像メモリ１０６に登録される。同様にして、オペレータＳが特定の動き２を指示することにより、モデルＭが特定の動き２の演技をし、モニタ３００に表示されるそのモデル画像の動きが特定の動き２をするとオペレータＳが認識して操作パネル６００を所定操作すると、このときのモデル画像がｎフレーム、特定の動き２のテンプレート画像Ｔ２として画像メモリ１０６に登録される。特定の動き３のｎフレームのテンプレート画像Ｔ３も、同様にして、画像メモリ１０６に登録される。   The moving image signal of the imaging area captured by the CCD camera 200 is input to the image monitoring and recording apparatus 100 from the image input terminal 113 and converted into a digital image signal by the A / D converter 104 in FIG. Supplied to the unit 105. The image recognition processing unit 105 extracts an image portion (model image) of the model M from the digital image signal. In this case, the digital image signal of the extracted model image based on the operation of the operation panel 600 by the operator S is supplied to the D / A converter 109 via the system bus 114 and the image display control unit 110. It is converted into an analog moving image signal and supplied to the monitor 300. As a result, only the model M image (model image) is displayed on the monitor 300. If the operator S recognizes that the model image has a specific motion 1 and operates the operation panel 600 for a predetermined time, the model image at this time may be n frames (of course, n fields, but in the following, it is assumed to be n frames ) It is registered in the image memory 106 as a template image T1 of a specific motion 1. Similarly, when the operator S instructs the specific movement 2, the model M performs the specific movement 2, and when the movement of the model image displayed on the monitor 300 performs the specific movement 2, the operator S When the operation panel 600 is recognized and operated, the model image at this time is registered in the image memory 106 as a template image T2 of n frames and a specific motion 2. The n-frame template image T3 of the specific motion 3 is also registered in the image memory 106 in the same manner.

ここでは、これら異常時認識のための特定の動き１〜３は、概念的に、以下のように、意味づけられているものとする。   Here, it is assumed that the specific movements 1 to 3 for recognition at the time of abnormality are conceptually given as follows.

即ち、特定の動き１は、危険度「小」の動きであって、危害を加えるか否か判断が掴めないが、どういう人物か分らない怪しい人物が近くにいることを認識させるための片手を上に上げる動きをいうものとする。特定の動き２は、危険度「中」の動きであって、ストーカーらしき人物が近寄って来そうなことを認識させるための両手を上に上げる動きをいうものとする。特定の動き３は、危険度「大」の動きであって、両手を頭上で交叉させる人物の動きをいうものとする。   In other words, the specific movement 1 is a movement with a risk level of “small”, and it is impossible to determine whether or not to do harm, but one hand for recognizing that there is a suspicious person nearby who does not know what kind of person it is. It shall be a movement that moves up. The specific movement 2 is a movement with a risk of “medium” and refers to a movement of raising both hands for recognizing that a person who seems to be a stalker is approaching. The specific movement 3 is a movement having a risk level of “high” and means a movement of a person who crosses both hands overhead.

図３は特定の動き１，２，３のテンプレート画像を概略的に示す図である。   FIG. 3 is a diagram schematically showing template images of specific movements 1, 2, and 3. As shown in FIG.

図３（ａ）は特定の動き１に対するテンプレートＴ１を示すものであって、人物が片手を上げる一連の動きを示すｎフレームの画像からなっている。図３（ｂ）は特定の動き２に対するテンプレートＴ２を示すものであって、人物が両手を頭上に上げる一連の動きを示すｎフレームの画像からなっている。図３（ｃ）は特定の動き３に対するテンプレートＴ３を示すものであって、人物が両手を頭上で交差させる一連の動きを示すｎフレームの画像からなっている。   FIG. 3 (a) shows a template T1 for a specific movement 1, and consists of n frames of images showing a series of movements in which a person raises one hand. FIG. 3B shows a template T2 for a specific movement 2, which consists of n frames of images showing a series of movements in which a person raises both hands over the head. FIG. 3C shows a template T3 for a specific movement 3, and consists of n frames of images showing a series of movements in which a person crosses both hands overhead.

このように、各特定の動き１，２，３に対するテンプレート画像Ｔ１，Ｔ２，Ｔ３は夫々、１つの動きに対し、ｎフレーム（即ち、複数の画像）からなるようにしているが、これにより、監視対象となる人物の動きのばらつきを吸収し、認識の精度を上げることを可能にしている。なお、この画像のフレーム数ｎは予め設定されたテンプレート画像Ｔ１，Ｔ２，Ｔ３に共通のものであってもよいし、これらテンプレート画像Ｔ１，Ｔ２，Ｔ３毎に異なるフレーム数であってもよい。また、オペレータＳが操作パネル６００を操作してかかるフレーム数ｎを設定するようにしてもよい。オペレータＳが設定する場合には、操作パネル６００の１回の操作によってテンプレート画像Ｔ１，Ｔ２，Ｔ３のフレーム数をこれらに共通のｎフレームとしてもよいし、また、テンプレート画像Ｔ１，Ｔ２，Ｔ３毎にそのフレーム数を適宜設定するようにしてもよい。   In this way, the template images T1, T2, and T3 for the specific movements 1, 2, and 3 are each composed of n frames (that is, a plurality of images) for one movement. It is possible to absorb the variation in the movement of the person to be monitored and improve the recognition accuracy. Note that the number of frames n of this image may be common to the preset template images T1, T2, and T3, or may be different for each of the template images T1, T2, and T3. Alternatively, the operator S may operate the operation panel 600 to set the number of frames n. When the operator S sets, the number of frames of the template images T1, T2, and T3 may be set to n frames common to these by one operation of the operation panel 600, or for each of the template images T1, T2, and T3. The number of frames may be set as appropriate.

また、テンプレート画像の大きさ（画像サイズ）は、例えば、縦２５６画素×横１２８画素に固定し、人物の画像部分がこの画像サイズ一杯一杯に配置されるように、この画像の正規化を行なう。例えば、さまざまな大きさで捉えた人物画像を、形状は変えずにテンプレート画像の大きさ、縦２５６画素×横１２８画素の画像サイズ一杯に収まるようにしている。   Also, the size (image size) of the template image is fixed to, for example, 256 pixels vertically × 128 pixels horizontally, and normalization of this image is performed so that the image portion of the person is arranged to the full size of the image. . For example, human images captured in various sizes are made to fit within the size of the template image, which is 256 pixels long × 128 pixels wide, without changing the shape.

ここで、テンプレート画像は、画像サイズを大きくすればするほど、動きを認識する精度は高まるが、画像のデータ量が膨大となるし、画像サイズを小さくすると、画像のデータ量は小さくなるが、動きを認識する精度が下がる。このため、テンプレート画像の画像サイズは、要求される認識精度（認識率）やこの画像監視記録システムで許容される画像メモリ１０６の物理的な容量などを考慮して決定する必要があり、この実施形態では、一例として、上記の縦２５６画素×横１２８画素のサイズとしている。   Here, the larger the image size, the higher the accuracy of recognizing the movement of the template image. However, the amount of image data becomes enormous, and when the image size is reduced, the amount of image data decreases. The accuracy of motion recognition is reduced. For this reason, the image size of the template image needs to be determined in consideration of the required recognition accuracy (recognition rate), the physical capacity of the image memory 106 allowed in the image monitoring recording system, and the like. In the embodiment, as an example, the size is 256 pixels in the vertical direction and 128 pixels in the horizontal direction.

図４はテンプレート登録フェーズでのこの実施形態の具体的な操作と処理の流れの一具体例を示すフローチャートである。なお、ここでは、特定の動き１のテンプレート画像の登録について示すものであるが、特定の動き２，３についても同様である。以下、図１，図２を参照してこの流れを説明する。   FIG. 4 is a flowchart showing a specific example of the specific operation and processing flow of this embodiment in the template registration phase. Here, registration of a template image of a specific motion 1 is shown, but the same applies to specific motions 2 and 3. Hereinafter, this flow will be described with reference to FIGS.

図４において、オペレータＳは、操作パネル６００を所定操作することにより、テンプレート登録フェーズの実行を起動すると(ステップＳ１０)、画像監視記録装置１００は、以下の動作を実行する。   In FIG. 4, when the operator S starts execution of the template registration phase by performing a predetermined operation on the operation panel 600 (step S <b> 10), the image monitoring recording apparatus 100 performs the following operation.

即ち、特定の動き１を実演するモデルＭの一連の動きをＣＣＤカメラ２００が撮影し、これによって得られるｎフレームの画像Ｆ１１〜Ｆ１ｎが、オペレータＳによる操作パネル６００の操作により、特定の動き１のテンプレート画像の作成のために、画像認識処理部１０５を介して一旦画像メモリ１０６に格納される（ステップＳ１１）。次いで、画像認識処理部１０５では、画像メモリ１０６からこれらｎフレームの画像Ｆ１１〜Ｆ１ｎを順次読み出し、各フレーム毎に各画素の濃度（輝度）を検出し、濃度（輝度）毎の画素数を求めて、横軸を輝度、縦軸を画素数（出現頻度）とする濃度ヒストグラム（図５）を作成する（ステップＳ１２）。かかる濃度ヒストグラムでは、ＣＣＤカメラ２００で撮像された撮像領域の画像での背景と人物の輝度の違いにより、輝度分布が分離されることを利用して、出現頻度分布の山，谷を見つけ、背景と人物の両者を分離するための濃度（輝度）の閾値ＴＨを抽出する（ステップＳ１３）。   That is, the CCD camera 200 captures a series of movements of the model M that demonstrates the specific movement 1, and the n-frame images F11 to F1n obtained as a result of the operation are operated on the operation panel 600 by the operator S. Is temporarily stored in the image memory 106 via the image recognition processing unit 105 (step S11). Next, the image recognition processing unit 105 sequentially reads the n frames of the images F11 to F1n from the image memory 106, detects the density (luminance) of each pixel for each frame, and obtains the number of pixels for each density (luminance). Then, a density histogram (FIG. 5) is created with the horizontal axis representing luminance and the vertical axis representing the number of pixels (appearance frequency) (step S12). In such a density histogram, by using the fact that the luminance distribution is separated by the difference in luminance between the background and the person in the image of the imaging area captured by the CCD camera 200, peaks and valleys of the appearance frequency distribution are found, and the background A threshold value TH of density (luminance) for separating both the person and the person is extracted (step S13).

ここで、特定の動き１のフレーム画像Ｆ１ｉ（但し、ｉ＝１，２，……，ｎ）の位置（Ｘ，Ｙ）での画素（Ｘ，Ｙ）の輝度値をｙ１（Ｘ，Ｙ）とすると、閾値ＴＨをもとにして各画素（Ｘ，Ｙ）の輝度値を２値化し（これを、以下、画素値という）、ｎフレームの画像Ｆ１１〜Ｆ１ｎから夫々２値画像ｆ１１〜ｆ１ｎを作成する（ステップＳ１４）。この２値画像ｆ１１〜ｆ１ｎはそれぞれ、輝度値ｙ１（Ｘ，Ｙ）が閾値ＴＨ以上（即ち、人物画像）の画素（Ｘ，Ｙ）を画素値Ｐ１（Ｘ，Ｙ）が“１”の画素（Ｘ，Ｙ）とし、輝度値ｙ１（Ｘ，Ｙ）が閾値ＴＨ未満（即ち、背景の画像）の画素（Ｘ，Ｙ）を画素値Ｐ１（Ｘ，Ｙ）が“０”の画素（Ｘ，Ｙ）とすることによって形成される。かかる２値化処理を特定の動き１に対するｎフレームの画像Ｆ１１〜Ｆ１ｎについて行ない、これにより、これら画像Ｆ１１〜Ｆ１ｎ毎に人物の２値画像ｆ１１〜ｆ１ｎが得られる。   Here, the luminance value of the pixel (X, Y) at the position (X, Y) of the frame image F1i of the specific motion 1 (where i = 1, 2,..., N) is expressed as y1 (X, Y). Then, the luminance value of each pixel (X, Y) is binarized based on the threshold value TH (hereinafter referred to as the pixel value), and the binary images f11 to f1n are respectively converted from the n-frame images F11 to F1n. Is created (step S14). In each of the binary images f11 to f1n, a pixel (X, Y) whose luminance value y1 (X, Y) is equal to or higher than a threshold TH (that is, a human image) is a pixel whose pixel value P1 (X, Y) is “1”. (X, Y), a pixel (X, Y) whose luminance value y1 (X, Y) is less than the threshold TH (ie, a background image) is a pixel (X, Y) whose pixel value P1 (X, Y) is “0” , Y). Such binarization processing is performed on the n-frame images F11 to F1n for the specific motion 1, thereby obtaining the binary images f11 to f1n of the person for each of the images F11 to F1n.

これら２値画像ｆ１１〜ｆ１ｎはモニタ３００で表示され、人物画像が正しく切り出されたか否かオペレータＳが判断できるようにする（ステップＳ１５）。オペレータＳが正しく人物画像が切り出されていると判断して操作パネル６００を所定操作すると、ｎ個の２値画像ｆ１１〜ｆ１ｎ毎に人物の画像領域（“１”の画素Ｐ（Ｘ，Ｙ）からなる領域）を切り出し、これをテンプレート画面のサイズになるように正規化し、テンプレート画像Ｔ１１〜Ｔ１ｎとして画像メモリ１０６に登録する（ステップＳ１６）。人物画像が正しく切り出されていないと判断した場合には（ステップＳ１５）、オペレータＳが操作パネル６００を所定操作することにより、再びステップＳ１１からの処理が繰り返されることになる。   These binary images f11 to f1n are displayed on the monitor 300 so that the operator S can determine whether or not the person image has been cut out correctly (step S15). When the operator S determines that the person image has been correctly cut out and performs a predetermined operation on the operation panel 600, a person image region (a pixel P (X, Y) of “1”) for each of the n binary images f11 to f1n. Are segmented, normalized so as to have the size of the template screen, and registered in the image memory 106 as template images T11 to T1n (step S16). If it is determined that the person image is not cut out correctly (step S15), the operator S performs a predetermined operation on the operation panel 600, whereby the processing from step S11 is repeated again.

かかる動作は特定の動き２，３のテンプレート画面Ｔ２１〜Ｔ２ｎ，Ｔ３１〜Ｔ３ｎの登録の際も同様であり、このようにして画像メモリ１０６に登録されたテンプレート画像Ｔ１，Ｔ２，Ｔ３は、監視フェーズでの監視領域内での人物の動きの認識に用いられる。   This operation is the same when registering the template screens T21 to T2n and T31 to T3n of specific movements 2 and 3, and the template images T1, T2 and T3 registered in the image memory 106 in this way are in the monitoring phase. It is used for recognizing the movement of a person in the monitoring area.

以上のようにして、特定の動き１，２，３毎にテンプレート画像Ｔ１，Ｔ２，Ｔ３が作成されて登録されるが、これとともに、特定の動き１，２，３のテンプレート画像Ｔ１，Ｔ２，Ｔ３が作成されて登録される毎に、大容量記録部１０８での記録時間などの人物画像の記録に関する条件（記録条件）や通報先の設定，ＣＣＤカメラ２００の機能，動作の設定が行なわれる。かかる動作設定により、後述する監視フェーズでは、ＣＰＵ１０１の制御の基に、ＣＣＤカメラ２００による監視領域内での人物の動きが特定の動き１であるか、特定の動き２であるか、特定の動き３であるかに応じて画像監視記録装置１００が異なる動作を実行するが、以下では、監視領域内での人物の動きが特定の動き１であるときの画像監視記録装置１００の動作を第１の動作といい、監視領域内での人物の動きが特定の動き２であるときの画像監視記録装置１００の動作を第２の動作といい、監視領域内での人物の動きが特定の動き３であるときの画像監視記録装置１００の動作を第３の動作という。   As described above, the template images T1, T2, and T3 are created and registered for each of the specific movements 1, 2, and 3. At the same time, the template images T1, T2, and T2 of the specific movements 1, 2, and 3 are registered. Each time T3 is created and registered, conditions (recording conditions) relating to recording of a person image such as recording time in the large-capacity recording unit 108, setting of a report destination, function and operation of the CCD camera 200 are set. . With this operation setting, in the monitoring phase to be described later, based on the control of the CPU 101, whether the movement of the person in the monitoring area by the CCD camera 200 is the specific movement 1, the specific movement 2, or the specific movement The image monitoring and recording apparatus 100 executes different operations depending on whether the image is 3 or less. In the following, the operation of the image monitoring and recording apparatus 100 when the movement of the person in the monitoring area is the specific movement 1 will be described. The operation of the image monitoring and recording apparatus 100 when the movement of the person in the monitoring area is the specific movement 2 is referred to as a second movement, and the movement of the person in the monitoring area is the specific movement 3. The operation of the image monitoring / recording apparatus 100 at this time is referred to as a third operation.

図６はかかる動作設定による画像監視記録装置１００の特定の動き１，２，３に対する動作の一具体例を示す図である。   FIG. 6 is a diagram showing a specific example of the operation for the specific movements 1, 2, and 3 of the image monitoring and recording apparatus 100 based on such operation settings.

同図において、特定の動き１に対する画像監視記録装置１００の第１の動作は、
（１）大容量記録部１０８での内蔵のハードディスクにＣＣＤカメラ２００による現在の監視画像を５分間記録し、
（２）ＰＣ４００に「特定の動き１」に対する異常情報を送信して異常時を通報する
ものである。特定の動き２に対する画像監視記録装置１００の第２の動作は、
（１）大容量記録部１０８での内蔵のハードディスクにＣＣＤカメラ２００による現在の監視画像を７分間記録し、
（２）ＰＣ４００に「特定の動き２」に対する異常情報を送信して異常時を通報し、
（３）第１の通報先（例えば、自宅など）に「特定の動き２」に対する異常情報をメールで送信して異常時を通知する
ものである。特定の動き３に対する画像監視記録装置１００の第３の動作は、
（１）大容量記録部１０８での内蔵のハードディスクにＣＣＤカメラ２００による現在の監視画像を１０分間記録し、
（２）ＰＣ４００に「特定の動き３」に対する異常情報を送信して異常時を通報し、
（３）第２の通報先（例えば、警備会社や警察など）に「特定の動き３」に対する異常情報をメールで送信して異常時を通知する
ものである。 In the figure, the first operation of the image monitoring recording apparatus 100 for a specific movement 1 is as follows.
(1) The current monitoring image by the CCD camera 200 is recorded on the built-in hard disk in the large-capacity recording unit 108 for 5 minutes,
(2) The abnormal information for “specific movement 1” is transmitted to the PC 400 to notify the abnormal time. The second operation of the image monitoring recording apparatus 100 for the specific movement 2 is as follows.
(1) The current monitoring image by the CCD camera 200 is recorded on the built-in hard disk in the large-capacity recording unit 108 for 7 minutes,
(2) Sending abnormality information for “specific movement 2” to the PC 400 to report the abnormality,
(3) Anomaly information for “specific movement 2” is sent by e-mail to the first reporting destination (for example, home) to notify the time of abnormality. The third operation of the image monitoring and recording apparatus 100 for the specific movement 3 is as follows.
(1) The current monitoring image by the CCD camera 200 is recorded for 10 minutes on a built-in hard disk in the large-capacity recording unit 108;
(2) Sending abnormality information for “specific movement 3” to the PC 400 to report the abnormality,
(3) Anomaly information for “specific movement 3” is sent by e-mail to a second reporting destination (for example, a security company, police, etc.) to notify the time of abnormality.

（ｂ）監視フェーズ：
図７は図１に示す実施形態の監視フェーズでの動作，処理の流れを示すフローチャートである。 (B) Monitoring phase:
FIG. 7 is a flowchart showing the flow of operations and processes in the monitoring phase of the embodiment shown in FIG.

同図において、監視領域を撮像するＣＣＤカメラ２００からの動画像信号が画像入力端子１１３から入力され、Ａ／Ｄ変換器１０４でディジタル画像信号に変換されて後、画像認識処理部１０５に入力される。画像認識処理部１０５は、入力されたこのディジタル画像信号を、１フレームの画像分、画像メモリ１０６に格納する（ステップＳ２０）。１フレームの画像Ｆが画像メモリ１０６に格納されると、画像認識処理部１０５はこれを読み出し、この画像Ｆから人物の候補となる画像（人物候補画面）を切り出す（ステップＳ２１）。   In the figure, a moving image signal from a CCD camera 200 that images a monitoring area is input from an image input terminal 113, converted into a digital image signal by an A / D converter 104, and then input to an image recognition processing unit 105. The The image recognition processing unit 105 stores the input digital image signal for one frame image in the image memory 106 (step S20). When one frame of the image F is stored in the image memory 106, the image recognition processing unit 105 reads it and cuts out an image (person candidate screen) that is a candidate for the person from the image F (step S21).

そして、画像認識処理部１０５では、画像メモリ１０６に格納されている特定の動き１（片手を挙げる動き）に対するｎ個のテンプレート画像Ｔ１１〜Ｔ１ｎ（図３（ａ））を順に読み取り、切り出した人物候補画像と順次比較する（ステップＳ２２）。この比較に際し、この人物候補画像も、テンプレート画像の画像サイズに正規化され、この正規化された人物候補画像が、テンプレート画像Ｔ１１〜Ｔ１ｎ毎に、位置が対応する画素同士の比較が行なわれる。つまり、テンプレート画像Ｔ１１についてみると、正規化された人物候補画像とこのテンプレイト画像の各画素毎に、全画素について、同じ対応位置（Ｘ，Ｙ）の画素同士の画素値（“１”または“０”）が一致するか否か比較する。そして、画素値が一致する画素数をカウントし、そのカウント値が予め決められた正の閾値よりも大のとき、人物候補画像がテンプレート画像と一致するとする人物候補画像とテンプレート画像との比較を行なう。かかる比較を特定の動き１のテンプレート画像Ｔ１１〜Ｔ１ｎについて順次行ない、そのうちにいずれかのテンプレート画像Ｔ１ｉ（ｉ＝１，２，……，ｎ）が人物候補画像に、上記の比較において、一致すると、この人物候補画像は特定の動き１の人物画像と判定する。これがステップＳ２２の比較動作である。   Then, the image recognition processing unit 105 sequentially reads n template images T11 to T1n (FIG. 3A) corresponding to a specific movement 1 (movement that raises one hand) stored in the image memory 106, and cut out the person. The candidate images are sequentially compared (step S22). In this comparison, the person candidate image is also normalized to the image size of the template image, and the normalized person candidate image is compared between pixels corresponding to positions for each of the template images T11 to T1n. That is, regarding the template image T11, for each pixel of the normalized person candidate image and this template image, the pixel value (“1” or “0”) is compared to see if they match. Then, the number of pixels with matching pixel values is counted, and when the count value is larger than a predetermined positive threshold, the person candidate image that matches the template image is compared with the template image. Do. Such comparison is sequentially performed for the template images T11 to T1n of the specific motion 1, and any one of the template images T1i (i = 1, 2,..., N) coincides with the person candidate image in the above comparison. The person candidate image is determined to be a person image of a specific motion 1. This is the comparison operation in step S22.

人物候補画像が特定の動き１に対するテンプレートＴ１１〜Ｔ１ｎのいずれとも一致しないときには（ステップＳ２２）、次に、画像認識処理部１０５は画像メモリ１０６から両手を挙げるという特定の動き２のテンプレート画像Ｔ２１〜Ｔ２ｎ（図３（ｂ））を読み出し、ステップＳ２２と同様の比較を行なって、人物候補画像が特定の動き２の人物画像であるか否かを判定する（ステップＳ２４）。そして、人物候補画像が特定の動き２に対するテンプレートＴ２１〜Ｔ２ｎのいずれとも一致しないときには（ステップＳ２４）、さらに、画像認識処理部１０５は画像メモリ１０６から両手を頭上で交叉させるという特定の動き３のテンプレート画像Ｔ３１〜Ｔ３ｎ（図３（ｃ））を読み出し、ステップＳ２２と同様の比較を行なって、人物候補画像が特定の動き３の人物画像であるか否かを判定する（ステップＳ２６）。このように比較処理しても、人物候補画像が特定の動き１，２，３のいずれの人物画像ではないと判定したときには、画像認識処理部１０５は、ステップＳ２０に戻り、Ａ／Ｄ変換器１０４からのディジタル画像信号の次のフレームの画像Ｆを画像メモリ１０６に格納し（この場合、１つ前のフレームの画像Ｆや人物候補画像は消去される）、この画像Ｆについて、以下、ステップＳ２１からの処理を行なう。   When the person candidate image does not match any of the templates T11 to T1n for the specific motion 1 (step S22), the image recognition processing unit 105 then raises both hands from the image memory 106 to the template image T21 to the specific motion 2 T2n (FIG. 3B) is read out, and the same comparison as in step S22 is performed to determine whether the person candidate image is a person image of a specific motion 2 (step S24). When the person candidate image does not match any of the templates T21 to T2n for the specific motion 2 (step S24), the image recognition processing unit 105 further performs the specific motion 3 of crossing both hands from the image memory 106 overhead. Template images T31 to T3n (FIG. 3C) are read out, and the same comparison as in step S22 is performed to determine whether the person candidate image is a person image of a specific motion 3 (step S26). Even if the comparison processing is performed in this way, when it is determined that the person candidate image is not any one of the specific movements 1, 2, and 3, the image recognition processing unit 105 returns to step S20, and the A / D converter The image F of the next frame of the digital image signal from 104 is stored in the image memory 106 (in this case, the image F and the person candidate image of the previous frame are erased). Processing from S21 is performed.

また、画像認識処理部１０５が人物候補画像が特定の動き１の人物画像であると判定したときには（ステップＳ２２）、ＣＰＵ１０１の制御により、画像監視記録装置１００は、図６に示す第１の動作を実行する（ステップＳ２３）。   When the image recognition processing unit 105 determines that the person candidate image is a person image of a specific motion 1 (step S22), the image monitoring recording apparatus 100 controls the first operation shown in FIG. Is executed (step S23).

この第１の動作は、監視領域内の人物が危害を加えるか否か判断を掴めないが、どういう人か分らない怪しい人が近くにいることを認識させるための危険度「小」のときの動作である。この場合には、画像監視記録装置１００内のＣＰＵ１０１が、画像認識処理部１０５からの「特定の動き１」との判定結果に基づいて、図６に示すように、大容量記録部１０８に、ＣＣＤカメラ２００で撮影されている現在の画像を、例えば、５分間だけ記録するように、指示するとともに、ＰＣ４００に異常情報を送信する。このときには、ＣＣＤカメラ２００からのアナログ動画像信号は、Ａ／Ｄ変換器１０４でディジタル画像信号に変換された後、画像コーディック部１０７に供給されて圧縮・符号化されており、ＣＰＵ１０１から上記の指示があると、大容量記録部１０８は画像コーディック部１０７からの圧縮・符号化された画像データを指示された時間（例えば、５分間）だけ内蔵のハードディスクに記録する。さらに、ＣＰＵ１０１は、ＬＡＮ制御部１０３を経由して、現在「特定の動き１」を認識し、その画像データを大容量記録部１０８で記録中である旨の異常情報をＰＣ４００に送信する。ＰＣ４００では、かかる異常情報を異常時の履歴情報として登録し、リストに掲載する。例えば、特定の動きの種類（この場合、特定の動き１）や記録開始時刻，記録開始時の静止画像と記録終了時の静止画像との各１枚ずつの画像，その他の情報が登録される。さらに、ＣＰＵ１０１は、画像表示制御部１１０に指示を出し、ＣＣＤカメラ２００から画像認識処理部１０５に供給される画像信号を、画像表示制御部１１０及びＤ／Ａ変換器１０９を経由してモニタ３００に供給する。これにより、モニタ３００では、人物の動きが「特定の動き１」と判定されたＣＣＤカメラ２００の監視領域の映像が表示されることになる。この場合、モニタ３００から警報も発せられるようにして、監視者などの注意を喚起するようにしてもよい。また、かかる映像の表示は、大容量記録部１０８での記録時間（例えば、５分間）に等しい時間としてもよいが、操作パネル６００を操作することにより、その表示時間を継続するようにすることもできる。   This first operation is not possible to determine whether or not the person in the monitoring area will cause harm, but when the degree of risk is “low” for recognizing that there is a suspicious person nearby who does not know what kind of person Is the action. In this case, as shown in FIG. 6, the CPU 101 in the image monitoring and recording apparatus 100 stores in the large-capacity recording unit 108 based on the determination result “specific movement 1” from the image recognition processing unit 105. For example, an instruction is given to record the current image taken by the CCD camera 200 for only 5 minutes, and abnormal information is transmitted to the PC 400. At this time, the analog moving image signal from the CCD camera 200 is converted into a digital image signal by the A / D converter 104 and then supplied to the image codec unit 107 to be compressed and encoded. When instructed, the large-capacity recording unit 108 records the compressed and encoded image data from the image codec unit 107 on the built-in hard disk for the designated time (for example, 5 minutes). Further, the CPU 101 recognizes the “specific movement 1” via the LAN control unit 103 and transmits abnormality information indicating that the image data is being recorded by the large-capacity recording unit 108 to the PC 400. In the PC 400, such abnormality information is registered as history information at the time of abnormality and posted in the list. For example, a specific type of motion (in this case, specific motion 1), recording start time, one image each of a still image at the start of recording and a still image at the end of recording, and other information are registered. . Further, the CPU 101 issues an instruction to the image display control unit 110, and receives an image signal supplied from the CCD camera 200 to the image recognition processing unit 105 via the image display control unit 110 and the D / A converter 109. To supply. As a result, the monitor 300 displays an image of the monitoring area of the CCD camera 200 in which the movement of the person is determined to be “specific movement 1”. In this case, an alarm may be issued from the monitor 300 to alert the monitor or the like. The video display may be a time equal to the recording time (for example, 5 minutes) in the large-capacity recording unit 108, but the display time is continued by operating the operation panel 600. You can also.

また、画像認識処理部１０５が人物候補画像が特定の動き２の人物画像であると判定したときには（ステップＳ２４）、ＣＰＵ１０１の制御により、画像監視記録装置１００は、図６に示す第２の動作を実行する（ステップＳ２５）。   When the image recognition processing unit 105 determines that the person candidate image is a person image of a specific motion 2 (step S24), the image monitoring recording apparatus 100 performs the second operation shown in FIG. Is executed (step S25).

この第２の動作は、監視領域内でストーカーらしき人物が近寄って来そうなことを認識させるための危険度「中」のときの動作である。この場合には、画像監視記録装置１００内のＣＰＵ１０１が、画像認識処理部１０５からの「特定の動き２」との判定結果に基づいて、図６に示すように、大容量記録部１０８に、ＣＣＤカメラ２００で撮影されている現在の画像を、例えば、７分間だけ記録するように、指示するとともに、ＰＣ４００に異常情報を送信し、また、事前に登録された第１の通報先（例えば、自宅など）に通報をおくる。このときには、ＣＣＤカメラ２００からのアナログ動画像信号は、Ａ／Ｄ変換器１０４でディジタル画像信号に変換された後、画像コーディック部１０７に供給されて圧縮・符号化されており、ＣＰＵ１０１からの上記の指示があると、大容量記録部１０８は画像コーディック部１０７からの圧縮・符号化力された画像データを指示された時間（例えば、７分間）だけ内蔵のハードディスクに記録する。さらに、ＣＰＵ１０１は、ＬＡＮ制御部１０３を経由して、ＰＣ４００に対し、現在「特定の動き２」を認識し、その画像データを大容量記録部１０８で記録中であることを通報する。ＣＰＵ１０１はＬＡＮ制御部１０３を経由してＰＣ４００に対し、現在「特定の動き２」を認識し、画像記録中である旨の情報を送信する。ＰＣ４００では、かかる通報を異常時の履歴情報として登録し、リストに掲載する。例えば、特定の動きの種類（この場合、特定の動き２）や記録開始時刻、記録開始時と記録終了時とでの静止画像各１枚ずつ、その他の情報を登録する。これと同時に、ＣＰＵ１０１は、ＬＡＮ制御部１０３及びルータ５００を経由し、さらに、Ｗｅｂなどを経由して、事前に登録された自宅などの第１の通報先にメールをおくる。このメールには、例えば、特定の動きの種類（この場合、特定の動き２）、記録開始時刻が通知され、記録開始時の静止画像が添付される。さらに、ＣＰＵ１０１は、画像表示制御部１１０に指示を出し、ＣＣＤカメラ２００から画像認識処理部１０５に供給される画像信号を、画像表示制御部１１０及びＤ／Ａ変換器１０９を経由してモニタ３００に供給する。これにより、モニタ３００では、人物の動きが「特定の動き２」と判定されたＣＣＤカメラ２００の監視領域の映像が表示されることになる。この場合、モニタ３００から警報も発せられるようにして、監視者などの注意を喚起するようにしてもよい。また、かかる映像の表示は、大容量記録部１０８での記録時間（例えば、７分間）に等しい時間としてもよいが、操作パネル６００を操作することにより、その表示時間を継続するようにすることもできる。   This second operation is an operation when the danger level is “medium” for recognizing that a person who seems to be a stalker is approaching in the monitoring area. In this case, the CPU 101 in the image monitoring and recording apparatus 100 stores the large-capacity recording unit 108 based on the determination result “specific movement 2” from the image recognition processing unit 105, as shown in FIG. Instruct to record the current image taken by the CCD camera 200 for, for example, only 7 minutes, for example, send abnormality information to the PC 400, and also register a first notification destination registered in advance (for example, Send a report to your home). At this time, the analog moving image signal from the CCD camera 200 is converted into a digital image signal by the A / D converter 104 and then supplied to the image codec unit 107 to be compressed and encoded. When the instruction is received, the large-capacity recording unit 108 records the compressed / encoded image data from the image codec unit 107 on the built-in hard disk for the designated time (for example, 7 minutes). Further, the CPU 101 notifies the PC 400 that the “specific motion 2” is currently recognized via the LAN control unit 103 and that the large-capacity recording unit 108 is recording the image data. The CPU 101 recognizes the “specific motion 2” to the PC 400 via the LAN control unit 103 and transmits information indicating that an image is being recorded. The PC 400 registers such notification as history information at the time of abnormality and posts it in the list. For example, other information is registered for each specific type of motion (in this case, specific motion 2), recording start time, and one still image at the start and end of recording. At the same time, the CPU 101 sends an e-mail to the first report destination such as a home registered in advance via the LAN control unit 103 and the router 500 and further via the Web. For example, a specific motion type (specific motion 2 in this case) and a recording start time are notified to this mail, and a still image at the start of recording is attached. Further, the CPU 101 issues an instruction to the image display control unit 110, and receives an image signal supplied from the CCD camera 200 to the image recognition processing unit 105 via the image display control unit 110 and the D / A converter 109. To supply. As a result, the monitor 300 displays an image of the monitoring area of the CCD camera 200 in which the motion of the person is determined to be “specific motion 2”. In this case, an alarm may be issued from the monitor 300 to alert the monitor or the like. The video display may be a time equal to the recording time (for example, 7 minutes) in the large-capacity recording unit 108, but the display time is continued by operating the operation panel 600. You can also.

また、画像認識処理部１０５が人物候補画像が特定の動き３の人物画像であると判定したときには（ステップＳ２６）、ＣＰＵ１０１の制御により、画像監視記録装置１００は、図６に示す第３の動作を実行する（ステップＳ２７）。   When the image recognition processing unit 105 determines that the person candidate image is a person image of a specific motion 3 (step S26), the image monitoring recording apparatus 100 performs the third operation shown in FIG. Is executed (step S27).

この第３の動作は、ナイフを手に持った人物が襲いかかってきそうなことを認識させるための危険度「大」のときの動作である。この場合には、画像監視記録装置１００内のＣＰＵ１０１が、画像認識処理部１０５からの「特定の動き３」との判定結果に基づいて、図６に示すように、大容量記録部１０８に、ＣＣＤカメラ２００で撮影されている現在の画像を、例えば、１０分間だけ記録するように、指示するとともに、ＰＣ４００に異常情報を送信し、事前に登録された第２の通報先に通報する。このときには、ＣＣＤカメラ２００からのアナログ動画像信号は、Ａ／Ｄ変換器１０４でディジタル画像信号に変換された後、画像コーディック部１０７に供給されて圧縮・符号化されており、ＣＰＵ１０１から上記の指示があると、大容量記録部１０８は画像コーディック部１０７からの圧縮・符号化された画像データが指示された時間（例えば、１０分間）だけ内蔵のハードディスクに記録する。さらに、ＣＰＵ１０１は、ＬＡＮ制御部１０３を経由して、現在「特定の動き３」を認識し、その画像データを大容量記録部１０８で記録中である旨などの異常情報をＰＣ４００に送信する。ＰＣ４００では、かかる異常情報を異常時の履歴情報として登録し、リストに掲載する。例えば、特定の動きの種類（この場合、特定の動き３），記録開始時刻，記録開始時と記録終了時とでの静止画像各１枚ずつ，その他の情報を登録する。これと同時に、ＣＰＵ１０１は、ＬＡＮ制御部１０３及びルータ５００、さらに、Ｗｅｂを経由して、事前に登録された警備会社や警察などの第２の通報先にメールを送信する。このメールには、特定の動きの種類（この場合、特定の動き３）や記録開始時刻が通知され、記録開始時の静止画像が添付される。さらに、ＣＰＵ１０１は、画像表示制御部１１０に指示を出し、ＣＣＤカメラ２００から画像認識処理部１０５に供給される動画像信号を、画像表示制御部１１０及びＤ／Ａ変換器１０９を経由してモニタ３００に供給する。これにより、モニタ３００では、人物の動きが「特定の動き２」と判定されたＣＣＤカメラ２００の監視領域の映像が表示されることになる。この場合、モニタ３００から警報も発せられるようにして、監視者などの注意を喚起するようにしてもよい。また、かかる映像の表示は、大容量記録部１０８での記録時間（例えば、７分間）に等しい時間としてもよいが、操作パネル６００を操作することにより、その表示時間を継続するようにすることもできる。   This third operation is an operation when the degree of risk is “high” for recognizing that a person holding a knife is likely to attack. In this case, the CPU 101 in the image monitoring and recording apparatus 100 stores the large-capacity recording unit 108 based on the determination result “specific movement 3” from the image recognition processing unit 105, as shown in FIG. For example, the current image captured by the CCD camera 200 is instructed to be recorded for only 10 minutes, and the abnormality information is transmitted to the PC 400 and notified to a second registered in advance. At this time, the analog moving image signal from the CCD camera 200 is converted into a digital image signal by the A / D converter 104 and then supplied to the image codec unit 107 to be compressed and encoded. When instructed, the large-capacity recording unit 108 records the compressed and encoded image data from the image codec unit 107 on the built-in hard disk for a specified time (for example, 10 minutes). Further, the CPU 101 recognizes the “specific motion 3” through the LAN control unit 103 and transmits abnormal information such as that the image data is being recorded by the large-capacity recording unit 108 to the PC 400. In the PC 400, such abnormality information is registered as history information at the time of abnormality and posted in the list. For example, other information is registered for each specific type of motion (in this case, specific motion 3), recording start time, and one still image at the start and end of recording. At the same time, the CPU 101 transmits a mail to a second reporting destination such as a security company or police registered in advance via the LAN control unit 103, the router 500, and the Web. This mail is notified of the type of specific movement (in this case, specific movement 3) and the recording start time, and a still image at the start of recording is attached. Further, the CPU 101 instructs the image display control unit 110 to monitor the moving image signal supplied from the CCD camera 200 to the image recognition processing unit 105 via the image display control unit 110 and the D / A converter 109. 300. As a result, the monitor 300 displays an image of the monitoring area of the CCD camera 200 in which the motion of the person is determined to be “specific motion 2”. In this case, an alarm may be issued from the monitor 300 to alert the monitor or the like. The video display may be a time equal to the recording time (for example, 7 minutes) in the large-capacity recording unit 108, but the display time is continued by operating the operation panel 600. You can also.

以上のようにして、第１の動作（ステップＳ２３），第２の動作（ステップＳ２５），第３の動作（ステップＳ２７）のいずれかが実行されると、ステップＳ２０に戻り、次の監視のための動作に移る。   As described above, when one of the first operation (step S23), the second operation (step S25), and the third operation (step S27) is executed, the process returns to step S20, and the next monitoring is performed. Move on to work.

図８は図１の画像認識処理部１０５による図７におけるステップＳ２１（画像からの人物の切り出し）の処理の一具体例を示すフローチャートである。この処理は、本質的には、図４に示すテンプレート画像の作成時での人物の切り出し処理と同様である。   FIG. 8 is a flowchart showing a specific example of the processing of step S21 (cutting out a person from an image) in FIG. 7 by the image recognition processing unit 105 in FIG. This process is essentially the same as the person cut-out process when creating the template image shown in FIG.

同図において、画像認識処理部１０５では、画像メモリ１０６に格納した１フレームの画像Ｆに関し、その各画素（Ｘ，Ｙ）の濃度（輝度）ｙが検出され、各輝度ｙ毎の画素数がカウントされて、図５に示したように、画像の濃度（輝度）ｙを横軸に、各濃度（輝度）ｙの出現頻度（画素数）を縦軸にプロットした濃度ヒストグラムが作成される（ステップＳ２１１）。そして、この濃度ヒストグラムが解析されることにより、背景と人物との輝度分布の違いによって分布が分かれることを利用して分布の山，谷が検出され、背景と人物の両者の分布を分離する谷となる濃度（輝度）ｙの閾値ＴＨが抽出される（ステップＳ２１２）。   In the figure, the image recognition processing unit 105 detects the density (luminance) y of each pixel (X, Y) for one frame of image F stored in the image memory 106, and the number of pixels for each luminance y is determined. As shown in FIG. 5, a density histogram is created in which the density (luminance) y of the image is plotted on the horizontal axis and the appearance frequency (number of pixels) of each density (luminance) y is plotted on the vertical axis ( Step S211). Then, by analyzing this density histogram, the peaks and valleys of the distribution are detected by utilizing the fact that the distribution is divided depending on the difference in luminance distribution between the background and the person, and the valleys that separate the distribution of both the background and the person are detected. A threshold value TH of density (luminance) y is extracted (step S212).

次に、画像認識処理部１０５では、この閾値ＴＨをもとに、上記画像Ｆの各画素（Ｘ，Ｙ）の輝度値ｙ（Ｘ，Ｙ）が２値化され、人物の候補とそれ以外の部分とが“１”，“０”の画素値によって区分された２値画像ｆが作成される（ステップＳ２１３）。即ち、画像Ｆの画素（Ｘ，Ｙ）の輝度値ｙ（Ｘ，Ｙ）が閾値ＴＨ以上（人物領域）であれば、この画素（Ｘ，Ｙ）の画素値（Ｘ，Ｙ）を“１”とし、それ以外の背景領域の画素（Ｘ，Ｙ）の画素値Ｐ（Ｘ，Ｙ）を“０”とする２値画像ｆを得る。   Next, the image recognition processing unit 105 binarizes the luminance value y (X, Y) of each pixel (X, Y) of the image F based on the threshold value TH, and the person candidate and the others A binary image f that is divided by the pixel values of “1” and “0” is created (step S213). That is, if the luminance value y (X, Y) of the pixel (X, Y) of the image F is equal to or greater than the threshold value TH (person area), the pixel value (X, Y) of this pixel (X, Y) is set to “1”. ", And a binary image f in which the pixel value P (X, Y) of the pixel (X, Y) in the other background region is" 0 "is obtained.

このようにして得られた２値画像ｆから人物候補となる画素領域（この場合には、画素値Ｐ（Ｘ，Ｙ）が“１”の画素の領域）を切り出し（抽出する）、テンプレート画像Ｔ１１〜Ｔ１ｎの画像サイズ（縦２５６画素×横１２８画素）に合わせて正規化し、これを２値画像ｆＴとして画像メモリ１０６に格納する（ステップＳ２１４）。   A pixel area (in this case, a pixel area having a pixel value P (X, Y) of “1”) is cut out (extracted) from the binary image f thus obtained, and a template image is obtained. Normalization is performed in accordance with the image sizes of T11 to T1n (vertical 256 pixels × horizontal 128 pixels), and this is stored in the image memory 106 as a binary image fT (step S214).

図９は図１に示す実施形態での監視領域内での人物の特定の動きに応じたＣＣＤカメラ２００のパン，チルト，ズームなどの機能・動作を切り替えを示す図である。   FIG. 9 is a diagram showing switching of functions / operations such as panning, tilting, and zooming of the CCD camera 200 in accordance with a specific movement of a person in the monitoring area in the embodiment shown in FIG.

ＣＣＤカメラ２００は、画像監視記録装置１００でのＣＰＵ１０１の指令のもとに行なわれるカメラ制御部１１２の制御により、パン，チルト，ズームが可能に構成されている。上記の監視フェーズにおいて、監視領域内の人物の動きが特定の動き１，２，３のいずれかと画像認識処理部１０５で認識されたときには、監視領域内で監視対象となる人物が監視領域の中央に位置し、かつこの監視領域一杯となるように、ＣＣＤカメラ２００がパンされ、チルトされ、あるいはズーミングされる。このように、ＣＣＤカメラ２００が動作した後、このＣＣＤカメラ２００からの動画像信号がディジタル化され、圧縮・符号化されて、上記の指定時間大容量記録部１０８のハードディスクに記録される。   The CCD camera 200 is configured to be capable of panning, tilting, and zooming under the control of the camera control unit 112 that is performed under the command of the CPU 101 in the image monitoring recording apparatus 100. In the above monitoring phase, when the movement of the person in the monitoring area is recognized by the image recognition processing unit 105 as any one of the specific movements 1, 2, and 3, the person to be monitored in the monitoring area is the center of the monitoring area. The CCD camera 200 is panned, tilted, or zoomed so as to be located at the full distance and to fill the monitoring area. In this way, after the CCD camera 200 is operated, the moving image signal from the CCD camera 200 is digitized, compressed and encoded, and recorded on the hard disk of the large capacity recording unit 108 for the specified time.

この動作を図９によって説明すると、いま、上記の監視フェーズにおいて、画像認識処理部１０５により、監視領域内の人物の動きが特定の動き１，２，３のいずれか、例えば、特定の動き３と判定される。   This operation will be described with reference to FIG. 9. Now, in the above monitoring phase, the image recognition processing unit 105 causes the person's movement in the monitoring area to be one of the specific movements 1, 2, 3, for example, the specific movement 3. It is determined.

このとき、図９（ａ）に示すように、ＣＣＤカメラ２００による監視領域の撮像画面である監視領域画面７００に対し、人物の画像を含む矩形もしくは正方形の領域、即ち、人物画像領域７０１が右上隅にあるものとすると、この人物画像領域７０１の中心位置とサイズの比率（監視領域画面７００の縦，横の画素数に対する人物画像領域７０１の縦，横の画素数の比率）を求め、この求めた中心位置を基に、人物画像領域７０１の中心位置が監視領域画面７００の中心位置と一致するように、カメラ制御部１１２を動作させてＣＣＤカメラ２００のパン動作やチルト動作を制御し、次いで、人物画像領域７０１が監視領域画面７００をはみ出さないようにして、人物画像領域７０１の横幅（画素数）が監視領域画面７００の横幅（画素数）にほぼ等しくなるように、あるいは、人物画像領域７０１の縦幅（画素数）が監視領域画面７００の縦幅（画素数）にほぼ等しくなるように、カメラ制御部１１２を動作させてＣＣＤ２００のズーミング動作を制御する。これにより、図９（ｂ）に示すように、人物画像領域７０２が監視領域画面７００の中央部で一杯一杯のサイズとなる。   At this time, as shown in FIG. 9A, a rectangular or square area including a person image, that is, a person image area 701 is located on the upper right side of the monitoring area screen 700 that is an imaging screen of the monitoring area by the CCD camera 200. If it is in the corner, the ratio of the center position and the size of the person image area 701 (the ratio of the number of vertical and horizontal pixels of the person image area 701 to the number of vertical and horizontal pixels of the monitoring area screen 700) is obtained. Based on the obtained center position, the camera control unit 112 is operated to control the pan operation and tilt operation of the CCD camera 200 so that the center position of the person image area 701 coincides with the center position of the monitoring area screen 700. Next, the person image area 701 does not protrude from the monitoring area screen 700, and the width (number of pixels) of the person image area 701 is set to the width (number of pixels) of the monitoring area screen 700. Zooming operation of the CCD 200 by operating the camera control unit 112 so that the vertical width (number of pixels) of the person image area 701 is substantially equal to the vertical width (number of pixels) of the monitoring area screen 700. To control. As a result, as shown in FIG. 9B, the person image area 702 becomes a full size in the central portion of the monitoring area screen 700.

このように、ＣＣＤカメラ２００のパン，チルト，ズームの制御をして、これによって得られるＣＣＤカメラ２００からの動画像信号を、上記のように処理した、指定される時間大容量記録部１０８のハードディスクに記録するとともに、モニタ３００に画像表示する。   As described above, the panning, tilting and zooming of the CCD camera 200 is controlled, and the moving image signal from the CCD camera 200 obtained thereby is processed as described above. While recording on the hard disk, an image is displayed on the monitor 300.

これにより、人物候補のズーム画像が表示画面の真ん中に来るようになり、さらに、拡大されて記録・表示されるので、この人物の人相もクリアに捉えることが可能となり、人物の特定化が容易になる。   As a result, the zoom image of the person candidate comes to the center of the display screen, and is further magnified and recorded and displayed, so that it is possible to clearly capture the person's personality and to specify the person. It becomes easy.

なお、大容量記録部１０８での記録時間やモニタ３００での表示時間は、上記のように、特定の動き１，２，３に応じて指定される時間であるが、監視領域内に同じ不審な人物が存在する限り、指定された時間が経過すると、直ちに監視フェーズの動作が行なわれて特定の動き１，２，３のいずれかが判定されるので、再び記録や表示が行なわれることになり、少なくとも監視領域に不審者がいるかぎり記録や表示が続くことになる。   The recording time on the large capacity recording unit 108 and the display time on the monitor 300 are times specified according to specific movements 1, 2, and 3, as described above. As long as a specified person exists, the monitoring phase operation is performed immediately after the designated time elapses, and one of the specific movements 1, 2, and 3 is determined, so that recording and display are performed again. As long as there is a suspicious person in the monitoring area, recording and display will continue.

また、この実施形態、即ち、図１での画像監視記録装置１００に音声合成装置を内蔵させることにより、上記の動き１，２，３の異常時の通報先への発報として、携帯電話への音声情報（例えば、「○□さんが危険な状態になっています」など）で異常を通知するようにしてもよい。   In addition, by incorporating a voice synthesizer in this embodiment, that is, the image monitoring and recording apparatus 100 in FIG. 1, to the mobile phone as a report to the report destination at the time of abnormality of the above movements 1, 2, and 3. You may make it notify abnormality by the audio | voice information (For example, "It is in a dangerous state."

また、大容量記録部１０８への記録する画像の画質を、特定の動きに応じて異ならせるようにしてもよい。例えば、危険度「大」の特定の動き３に対しては、高画質で記録、表示することにより、監視領域内の人物の人相をよりクリアに捉えることができ、その人物の特定化がさらに容易になる。   Further, the image quality of the image to be recorded in the large capacity recording unit 108 may be varied according to a specific movement. For example, for a specific movement 3 with a risk level of “high”, recording and displaying the image with high image quality makes it possible to more clearly capture the human phase of the person in the monitoring area. It becomes easier.

ここで、この実施形態の設置場所やその場合の効果などについて説明する。   Here, the installation place of this embodiment, the effect in that case, etc. are demonstrated.

この実施形態の画像監視記録システムとしては、例えば、マンションの地下駐車場などの人の出入りが少ない場所を監視するセキュリティシステムを想定している。マンション住民だけに対し、事前に特定の動き１，２，３を通知し、上記のテンプレート登録フェーズでもって、各住民の特定の動きのサンプルを画像メモリ１０６に登録しておく。監視フェーズでは、マンションの住民の誰かが地下駐車場で危険に遭遇した場合、その危険の状況に応じた動きをすることにより、この画像監視記録システムの動作を変えることが可能となり、その時々に応じた最適な危険防止措置を取ることが可能となる。例えば、「相手が何者か分らない」ときや「未だ具体的に危害を加えるか否か判断が掴めない」ときの危険度「小」の段階では、記録動作だけを実行させて無駄な通報を避ける。その後、「相手がどういう人か分らないが、怪しい」という危険度「中」の段階では、身内への通報を実行し、「相手がナイフを持って襲い掛かって来そうな」危険度「大」の段階では、警備会社や警察への通報動作を実行させる。さらに、ＣＣＤカメラ２００の画角や視野方向を変えることにより、監視領域内の人物の人相までもが分るようになる。   As the image monitoring and recording system of this embodiment, for example, a security system is assumed that monitors places with few people coming and going, such as underground parking lots in condominiums. Only the condominium residents are notified of specific movements 1, 2, and 3 in advance, and a sample of specific movements of each resident is registered in the image memory 106 in the template registration phase. In the monitoring phase, when someone in the apartment encounters a danger in the underground parking lot, it is possible to change the operation of this image monitoring and recording system by moving according to the situation of the danger. It is possible to take the most appropriate risk prevention measures. For example, at the stage of “low” risk level when “I do n’t know who the other party is” or “I still can't grasp whether or not to specifically do harm”, only the recording operation is executed and a wasteful report is made. avoid. After that, in the middle of the risk level of “I do not know what the other person is, but suspicious”, the report is sent to the relatives, “the opponent is likely to attack with a knife” In the stage of “,” a reporting operation to the security company or the police is executed. Furthermore, by changing the angle of view and the viewing direction of the CCD camera 200, the human phase of the person in the monitoring area can be understood.

このように、異常が発生したときだけ記録動作が実行されるため、膨大な容量のハードディスクを用いなくとも、長期間の監視が可能であるとともに、監視対象となる人物も明確に認識することが可能となり、さらに、危険の状況（相手がナイフを持っているケース、どういう人か分らないが怪しいケース、ストーカーらしき人が近寄ってきたケースなど）に応じて、通報先を変えることが可能となり、無駄な出動を減らすことができる。   As described above, since the recording operation is performed only when an abnormality occurs, long-term monitoring is possible without using a huge capacity hard disk, and the person to be monitored can be clearly recognized. In addition, it is possible to change the report destination depending on the danger situation (case in which the opponent has a knife, case of suspicious but unknown person, case of approaching stalker, etc.) Unnecessary dispatch can be reduced.

本発明による画像監視記録装置及び画像監視記録システムの一実施形態を示すブロック構成図である。1 is a block configuration diagram showing an embodiment of an image monitoring recording apparatus and an image monitoring recording system according to the present invention. 図１に示す実施形態でのテンプレート画像を画像メモリに登録するテンプレート登録フェーズを説明するためのシステム構成図である。FIG. 2 is a system configuration diagram for explaining a template registration phase for registering a template image in an image memory in the embodiment shown in FIG. 1. 図１に示す実施形態での特定の動きに対するテンプレート画像を概略的に示す図である。It is a figure which shows schematically the template image with respect to the specific motion in embodiment shown in FIG. 図１に示す実施形態のテンプレート登録フェーズでの操作と処理の流れの一具体例を示すフローチャートである。It is a flowchart which shows one specific example of the operation | movement in the template registration phase of embodiment shown in FIG. 1, and the flow of a process. 図１における画像認識処理部で求められる濃度ヒストグラムを概略的に示す図である。It is a figure which shows roughly the density histogram calculated | required by the image recognition process part in FIG. 人物の特定の動きに対する画像監視記録装置の動作の一覧を示す図である。It is a figure which shows the list | wrist of operation | movement of the image monitoring recording device with respect to the specific motion of a person. 図１に示す実施形態の監視フェーズでの動作，処理の流れを示すフローチャートである。It is a flowchart which shows the operation | movement and the flow of a process in the monitoring phase of embodiment shown in FIG. 図７におけるステップＳ２１（画像からの人物の切り出し）の処理の一具体例を示すフローチャートである。It is a flowchart which shows one specific example of the process of step S21 (cutting out a person from an image) in FIG. 図１に示す実施形態での監視領域内での人物の特定の動きに応じたＣＣＤカメラのパン，チルト，ズームなどの機能・動作を切り替えを示す図である。FIG. 2 is a diagram illustrating switching of functions / operations such as pan, tilt, zoom, and the like of a CCD camera according to a specific movement of a person in a monitoring area in the embodiment shown in FIG. 1.

符号の説明Explanation of symbols

１００ 画像監視記録装置
１０１ ＣＰＵ
１０２ プログラムメモリ
１０３ ＬＡＮ制御部
１０４ Ａ／Ｄ変換機
１０５ 画像認識処理部
１０６ 画像メモリ
１０７ 画像コーディック部
１０８ 大容量記録部
１０９ Ｄ／Ａ変換機
１１０ 画像表示制御部
１１１ 操作パネル制御部
１１２ カメラ制御部
１１３ 画像入力手段
１１４ システムバス
２００ ＣＣＤカメラ
３００ モニター
４００ ＰＣ
５００ ルータ
６００ 操作パネル
７００ 監視領域画面
７０１，７０２ 人物画像領域
Ｍ モデル
Ｓ オペレータ
Ｔ１，Ｔ２，Ｔ３ テンプレート画像 100 Image monitoring and recording apparatus 101 CPU
DESCRIPTION OF SYMBOLS 102 Program memory 103 LAN control part 104 A / D converter 105 Image recognition process part 106 Image memory 107 Image codec part 108 Large capacity recording part 109 D / A converter 110 Image display control part 111 Operation panel control part 112 Camera control part 113 Image input means 114 System bus 200 CCD camera 300 Monitor 400 PC
500 router 600 operation panel 700 monitoring area screen 701, 702 person image area M model S operator T1, T2, T3 template image

Claims (5)

動画像信号を入力する画像入力手段と、
該画像入力手段から入力された動画像信号による画像から人物の動きを検出し、該人物の動きが異常の度合いに応じた特定の動きのいずれに該当するかを判定する画像認識処理手段と、
該画像認識処理手段が判定する該特定の動きに応じて設定された通報先に異常通報する通報手段と、
該画像認識処理手段が判定する該特定の動きに応じた指定時間、該画像入力手段から入力される動画像信号を記録する記録手段と
を備えたことを特徴とする画像監視記録装置。 An image input means for inputting a moving image signal;
Image recognition processing means for detecting a movement of a person from an image based on a moving image signal input from the image input means, and determining which of the specific movements corresponds to the degree of abnormality of the movement of the person;
Reporting means for reporting an abnormality to a reporting destination set in accordance with the specific movement determined by the image recognition processing means;
An image monitoring and recording apparatus comprising: a recording unit that records a moving image signal input from the image input unit for a specified time according to the specific movement determined by the image recognition processing unit. 請求項１記載の画像監視記録装置において、
前記特定の動きは、異常の度合いが低い順に、特定の動き１，特定の動き２，……，特定の動きｍが設定されており、
前記画像認識処理手段が、
（１）前記検出した人物の動きを該特定の動き１と判定したときには、前記画像入力手段から入力される動画像信号を、該特定の動き１に対する前記指定時間、前記記録手段へ記録するだけの第１の動作を実行し、
（２）前記検出した人物の動きを該特定の動きｋ（但し、ｋ＝２，３，……，ｍ）と判定したときには、前記画像入力手段から入力される動画像信号を、該特定の動きｋに対する前記指定時間、前記記録手段へ記録するとともに、該特定の動きｋに対して予め決められた第（ｋ−１）の通報先に異常を通報する第ｋの動作を実行する
ことを特徴とする画像監視記録装置。 The image monitoring recording apparatus according to claim 1,
As for the specific movement, a specific movement 1, a specific movement 2,..., A specific movement m are set in descending order of the degree of abnormality.
The image recognition processing means is
(1) When it is determined that the detected motion of the person is the specific motion 1, the moving image signal input from the image input unit is only recorded in the recording unit for the specified time for the specific motion 1. Perform the first action of
(2) When the detected movement of the person is determined to be the specific movement k (where k = 2, 3,..., M), the moving image signal input from the image input means is Recording in the recording means for the designated time for the motion k, and executing the k-th operation for reporting an abnormality to a predetermined (k-1) report destination for the specific motion k. A featured image monitoring and recording apparatus. 請求項１または２記載の画像監視記録装置において、
前記特定の動き毎に複数フレームからなるテンプレート画像を登録した画像メモリを設け、
前記画像認識処理手段は、前記検出した人物の動きが前記特定の動きのいずれと一致するかの判定を、前記特定の動きに対する複数フレームの夫々の該テンプレート画像を順次前記検出した人物の動きと比較して行なうことを特徴とする画像監視記録装置。 The image monitoring recording apparatus according to claim 1 or 2,
An image memory in which a template image consisting of a plurality of frames is registered for each specific movement is provided,
The image recognition processing means determines whether the detected motion of the person matches with the specific motion, and sequentially detects the template image of each of a plurality of frames corresponding to the specific motion as the detected motion of the person. An image monitoring and recording apparatus characterized by performing comparison. 請求項１，２または３記載の画像監視記録装置の前記画像入力手段に監視領域を撮像するカメラ装置が接続され、
かつ異常通報する前記通報先が通信回線を介して接続されたことを特徴とする画像監視記録システム。 A camera device for imaging a monitoring area is connected to the image input means of the image monitoring recording device according to claim 1, 2 or 3,
An image monitoring and recording system, wherein the report destination for reporting an abnormality is connected via a communication line. 請求項４記載の画像監視記録システムであって、
前記画像監視記録装置に前記カメラ装置をパン，チルト，ズームなどのカメラ機能を制御するカメラ制御手段を設け、
前記画像監視記録装置での前記画像認識処理手段により、前記画像入力手段から入力される前記カメラ装置からの動画像信号から検出される前記人物の動きが前記特定の動きのいずれかに該当すると判定されたとき、該カメラ制御手段が前記カメラ装置のパン，チルトもしくはズームなどの制御を実行することを特徴とする画像監視記録システム。 The image surveillance recording system according to claim 4,
The image monitoring and recording device is provided with camera control means for controlling camera functions such as panning, tilting and zooming of the camera device,
It is determined by the image recognition processing means in the image monitoring and recording apparatus that the movement of the person detected from the moving image signal input from the image input means corresponds to one of the specific movements. When this is done, the camera control means executes control such as pan, tilt or zoom of the camera device.
JP2005316953A 2005-10-31 2005-10-31 Image monitoring recording device and system therefor Pending JP2007124526A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005316953A JP2007124526A (en) 2005-10-31 2005-10-31 Image monitoring recording device and system therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005316953A JP2007124526A (en) 2005-10-31 2005-10-31 Image monitoring recording device and system therefor

Publications (1)

Publication Number Publication Date
JP2007124526A true JP2007124526A (en) 2007-05-17

Family

ID=38147830

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005316953A Pending JP2007124526A (en) 2005-10-31 2005-10-31 Image monitoring recording device and system therefor

Country Status (1)

Country Link
JP (1) JP2007124526A (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100968025B1 (en) 2008-07-28 2010-07-07 중앙대학교 산학협력단 Monitoring method and system using danger image
JP2010224995A (en) * 2009-03-25 2010-10-07 Nichizou Denshi Seigyo Kk Operation screen recorder
JP2010262657A (en) * 2009-04-29 2010-11-18 Utechzone Co Ltd Method and device for setting background
JP2011215767A (en) * 2010-03-31 2011-10-27 Zenrin Datacom Co Ltd Server device, method of using security camera images, program for using security camera images, and security camera system
WO2012140834A1 (en) * 2011-04-11 2012-10-18 日本電気株式会社 Information processing device
JP2015030276A (en) * 2013-07-31 2015-02-16 三菱電機株式会社 Information processor and information processing method
WO2016186160A1 (en) * 2015-05-21 2016-11-24 コニカミノルタ株式会社 Image processing system, image processing device, image processing method, and image processing program
WO2017017741A1 (en) * 2015-07-24 2017-02-02 富士通株式会社 Monitoring method, information processing device, and monitoring program
JP2017211929A (en) * 2016-05-27 2017-11-30 ダイワ通信株式会社 Security system, management device, security method, and program
CN107924455A (en) * 2015-07-14 2018-04-17 尤尼伐控股有限公司 Computer vision process
WO2018230103A1 (en) * 2017-06-15 2018-12-20 コニカミノルタ株式会社 Monitored person monitoring device and method therefor, and monitored person monitoring assist system
JP2019041404A (en) * 2018-11-07 2019-03-14 キヤノンマーケティングジャパン株式会社 Server, control method therefor, and program
WO2020220951A1 (en) * 2019-04-29 2020-11-05 杭州海康威视数字技术股份有限公司 Video recording data storage method and device
JP2021005229A (en) * 2019-06-26 2021-01-14 株式会社 日立産業制御ソリューションズ Safety management device, safety management method, and safety management program
WO2021107764A1 (en) * 2019-11-28 2021-06-03 Mimos Berhad Machine learning-based system and method for processing moving image

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100968025B1 (en) 2008-07-28 2010-07-07 중앙대학교 산학협력단 Monitoring method and system using danger image
JP2010224995A (en) * 2009-03-25 2010-10-07 Nichizou Denshi Seigyo Kk Operation screen recorder
JP2010262657A (en) * 2009-04-29 2010-11-18 Utechzone Co Ltd Method and device for setting background
JP2011215767A (en) * 2010-03-31 2011-10-27 Zenrin Datacom Co Ltd Server device, method of using security camera images, program for using security camera images, and security camera system
WO2012140834A1 (en) * 2011-04-11 2012-10-18 日本電気株式会社 Information processing device
JP2015030276A (en) * 2013-07-31 2015-02-16 三菱電機株式会社 Information processor and information processing method
JPWO2016186160A1 (en) * 2015-05-21 2018-03-15 コニカミノルタ株式会社 Image processing system, image processing apparatus, image processing method, and image processing program
CN107533764A (en) * 2015-05-21 2018-01-02 柯尼卡美能达株式会社 Image processing system, image processing apparatus, image processing method and image processing program
WO2016186160A1 (en) * 2015-05-21 2016-11-24 コニカミノルタ株式会社 Image processing system, image processing device, image processing method, and image processing program
CN107924455A (en) * 2015-07-14 2018-04-17 尤尼伐控股有限公司 Computer vision process
CN107924455B (en) * 2015-07-14 2024-02-23 尤尼伐控股有限公司 Computer vision process
WO2017017741A1 (en) * 2015-07-24 2017-02-02 富士通株式会社 Monitoring method, information processing device, and monitoring program
JP2017211929A (en) * 2016-05-27 2017-11-30 ダイワ通信株式会社 Security system, management device, security method, and program
JP7063333B2 (en) 2017-06-15 2022-05-09 コニカミノルタ株式会社 Observed person monitoring device and method, and monitored person monitoring support system
WO2018230103A1 (en) * 2017-06-15 2018-12-20 コニカミノルタ株式会社 Monitored person monitoring device and method therefor, and monitored person monitoring assist system
JPWO2018230103A1 (en) * 2017-06-15 2020-04-16 コニカミノルタ株式会社 Monitored person monitoring apparatus and method, and monitored person monitoring support system
JP2019041404A (en) * 2018-11-07 2019-03-14 キヤノンマーケティングジャパン株式会社 Server, control method therefor, and program
WO2020220951A1 (en) * 2019-04-29 2020-11-05 杭州海康威视数字技术股份有限公司 Video recording data storage method and device
JP2021005229A (en) * 2019-06-26 2021-01-14 株式会社 日立産業制御ソリューションズ Safety management device, safety management method, and safety management program
WO2021107764A1 (en) * 2019-11-28 2021-06-03 Mimos Berhad Machine learning-based system and method for processing moving image

Similar Documents

Publication Publication Date Title
JP2007124526A (en) Image monitoring recording device and system therefor
US10123051B2 (en) Video analytics with pre-processing at the source end
US11282380B2 (en) Automated camera response in a surveillance architecture
JP5790761B2 (en) Distributed image processing system
KR101662074B1 (en) Control device, camera system, and recording medium
EP1267313A2 (en) Image surveillance apparatus, image surveillance method, and image surveillance processing program
JP6938270B2 (en) Information processing device and information processing method
CN110555964B (en) Multi-data fusion key area early warning system and method
US20080024610A1 (en) Monitoring Apparatus, Monitoring System, Monitoring Method and Program
KR20010085692A (en) Intruding object monitoring method and intruding object monitoring system
JP2003216229A (en) Telecontrol and management system
JP2016100696A (en) Image processing device, image processing method, and image processing system
JP5217106B2 (en) Video surveillance system, surveillance video abnormality detection method, and surveillance video abnormality detection program
JP6758918B2 (en) Image output device, image output method and program
JP4971499B2 (en) Remote view finding
WO2013172739A2 (en) Method for displaying video data on a personal device
KR20040105612A (en) Change detecting method and apparatus and monitoring system using the method or apparatus
JPH07288802A (en) Intruded object supervisory equipment
JP2005129003A (en) Device for detecting change
KR100948195B1 (en) Image security system
KR101020670B1 (en) Security system with remotetest function
KR100536747B1 (en) The video storing system using a ptz camera and the method there of
JP2003284062A (en) Monitoring system
JP2005347942A (en) Monitor system, control program of monitor system and monitoring device
KR100902275B1 (en) Cctv system for intelligent security and method thereof