JP5520675B2 - Reporting device - Google Patents

Reporting device Download PDF

Info

Publication number
JP5520675B2
JP5520675B2 JP2010096353A JP2010096353A JP5520675B2 JP 5520675 B2 JP5520675 B2 JP 5520675B2 JP 2010096353 A JP2010096353 A JP 2010096353A JP 2010096353 A JP2010096353 A JP 2010096353A JP 5520675 B2 JP5520675 B2 JP 5520675B2
Authority
JP
Japan
Prior art keywords
monitoring
suspicious person
area
business
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010096353A
Other languages
Japanese (ja)
Other versions
JP2011227675A (en
Inventor
秀行 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Secom Co Ltd
Original Assignee
Secom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Secom Co Ltd filed Critical Secom Co Ltd
Priority to JP2010096353A priority Critical patent/JP5520675B2/en
Publication of JP2011227675A publication Critical patent/JP2011227675A/en
Application granted granted Critical
Publication of JP5520675B2 publication Critical patent/JP5520675B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Alarm Systems (AREA)

Description

本発明は、監視対象の保全を損うおそれのある不審者の存在や非常事態の発生を検出して通報する通報装置に関し、特に、正当な者を不審者と誤判定することを低減できる技術に関する。   The present invention relates to a notification device for detecting and reporting the presence of a suspicious person who may impair the maintenance of a monitored object or the occurrence of an emergency, and in particular, a technique capable of reducing erroneous determination of a legitimate person as a suspicious person About.

従来、店舗や事務所などの利用者が強盗など不審者の存在を外部に通報するための通報装置として、いわゆる非常ボタンの操作により、非常信号とともに監視カメラが撮像している画像を遠隔の監視センタに送出するものが広く知られている。
この種の通報装置は、利用者の自発的な操作に基づくために非常事態を誤って通報することが少ない反面、強盗などの非常事態が発生したときに当該強盗により非常ボタンの操作が規制されたり、利用者の気が動転して非常ボタンの操作を失念してしまうことがあり、通報の確実性に欠けるという問題があった。
Conventionally, as a reporting device for users in stores and offices to report the existence of suspicious persons such as robbery to the outside, remote monitoring of images captured by surveillance cameras along with emergency signals by operating so-called emergency buttons What is sent to the center is widely known.
Although this type of reporting device is based on the user's voluntary operation, it rarely reports an emergency situation accidentally, but when an emergency such as a burglary occurs, the operation of the emergency button is regulated by the burglary. The user may be upset and forget to operate the emergency button, and there is a problem that the certainty of the notification is lacking.

本出願人は、このような問題への対策として特許文献1にかかる特許出願を行っている。
この特許文献1には、予め非常事態が発生したときに発音が予測される語句と当該語句の危険度合いに応じた音圧レベルとを対応付けて記憶しておき、店舗などにおいてマイクに入力される音声中の語句と音圧とを監視して、語句と音圧の組み合わせから非常事態が発生したか否かを判定する通報装置が開示されている。
The present applicant has filed a patent application according to Patent Document 1 as a countermeasure to such a problem.
In this patent document 1, a phrase whose pronunciation is predicted when an emergency occurs and a sound pressure level corresponding to the danger level of the phrase are stored in association with each other and input to a microphone in a store or the like. An informing device is disclosed that determines whether or not an emergency has occurred based on a combination of a phrase and sound pressure by monitoring the phrase and sound pressure in the voice.

特開2006−11872号公報Japanese Patent Laid-Open No. 2006-11872

特許文献1に提案される通報装置によれば、利用者による非常ボタンの操作を不要としつつ、強盗など非常事態の発生を外部に通報することができ、利便性と通報の確実性の双方を向上させることができる。   According to the reporting device proposed in Patent Document 1, it is possible to report the occurrence of an emergency such as a burglary to the outside while eliminating the need for an emergency button operation by the user. Both convenience and certainty of reporting can be achieved. Can be improved.

ところで、一般に、強盗などの不審者は、監視対象を制圧して金品の強奪を図ることを目的としており、この成功確率が高くなる人の少ない時間帯を狙って現れることが多い。
これに対し、特許文献1の通報装置は、監視対象の音声を常時集音して不審者の存在や非常事態の発生を判定する構成であるために、不審者が現れる可能性が低い繁忙時間帯などであっても継続的に監視を行うこととなる。
By the way, in general, suspicious persons such as robbers aim to suppress the object to be monitored and steal money, and often appear aiming at a time zone in which the success probability is high.
On the other hand, since the reporting device of Patent Document 1 is configured to constantly collect the sound to be monitored and determine the presence of a suspicious person or the occurrence of an emergency, the busy time is low in the possibility of a suspicious person appearing. Even if it is a belt, it will be continuously monitored.

しかしながら、このような繁忙時間帯は総じて雑踏による環境音が大きくなり、特許文献1の通報装置では正当な者しか存在しない状況であっても不審者が存在すると誤判定してしまうおそれがあった。例えば、多数の来客による喧騒音や店内放送など比較的大音量で流れるメッセージなどにより非常事態と誤判定してしまうといった具合である。   However, in such a busy time period, the environmental sound due to the hustle is generally large, and there is a risk that the suspicious person may be erroneously determined even in a situation where only a legitimate person exists in the notification device of Patent Document 1. . For example, it may be erroneously determined as an emergency by a message that flows at a relatively large volume, such as a noise caused by a large number of visitors or a broadcast in a store.

本発明は、上記の課題に鑑みてなされたもので、不審者の存在や非常事態の発生を自動的に検出して通報する場合に、正当な者を不審者と誤判定することを低減して信頼性を向上させた通報装置の提案を目的とする。   The present invention has been made in view of the above problems, and reduces the possibility of misjudging a legitimate person as a suspicious person when automatically detecting and reporting the presence of a suspicious person or the occurrence of an emergency. The purpose is to propose a reporting device with improved reliability.

上記の目的を達成するために本発明による通報装置は、営業所を監視対象として少なくとも該監視対象が有人であるときに不審者の存在を検出し遠隔に通報する通報装置であって、前記監視対象が営業状態であるか否かを検出する営業状態検出部と、前記監視対象に存在する不審者を検出する不審者検出処理を実行する不審者検出部と、前記不審者が検出された場合に通報する通報部と、前記不審者検出部は、前記営業状態であることが検出されると前記不審者検出処理の実行を禁止し、前記営業状態でないことが検出されると前記不審者検出処理を実行することを特徴としている。   In order to achieve the above object, a reporting device according to the present invention is a reporting device that detects the presence of a suspicious person and reports remotely when a business office is a monitoring target and at least when the monitoring target is manned. When a business state detection unit that detects whether or not the target is in a business state, a suspicious person detection unit that performs a suspicious person detection process that detects a suspicious person existing in the monitoring target, and the suspicious person is detected And a suspicious person detection unit that prohibits execution of the suspicious person detection process when it is detected that the business state is detected, and detects the suspicious person when it is detected that the business state is not the business state. It is characterized by executing processing.

かかる構成において、通報装置は、営業所が営業状態である場合には不審者検出処理の実行を禁止し、営業所が営業状態でない場合に不審者検出処理を実行するよう作用する。
これにより、営業所内の人が少なくなって不審者が現れる可能性の高い非営業中の場合に限って不審者検出処理を実行するので、この不審者検出処理により正当な者を不審者と誤判定することを低減できる。
In such a configuration, the reporting device acts to prohibit execution of the suspicious person detection process when the sales office is in the business state and to execute the suspicious person detection process when the business office is not in the business state.
As a result, the suspicious person detection process is executed only when the person in the sales office is small and the suspicious person is likely to appear, so the suspicious person detection process is executed. The determination can be reduced.

また、本発明の通報装置において、更に、前記監視対象を区分する複数の監視区域の情報及び前記複数の監視区域のうち営業区域となる特定の監視区域の情報を記憶する記憶部と、無人状態において設定する監視モード又は有人状態において設定する非監視モードを前記複数の監視区域ごとに設定するモード設定部と、前記監視モードが設定されている監視区域における侵入者を検出する侵入者検出部と、を備え、前記通報部は、前記不審者が検出された場合及び前記侵入者が検出された場合に遠隔に通報し、前記営業状態検出部は、前記複数の監視区域のうち前記特定の監視区域が前記監視モードに設定されると前記監視対象が営業状態でないことを検出する。   Further, in the notification device of the present invention, a storage unit that stores information on a plurality of monitoring areas that divide the monitoring target and information on a specific monitoring area that is a business area among the plurality of monitoring areas, and an unmanned state A mode setting unit that sets a monitoring mode set in the monitoring mode or a non-monitoring mode set in a manned state for each of the plurality of monitoring areas, and an intruder detection unit that detects an intruder in the monitoring area in which the monitoring mode is set; The reporting unit remotely reports when the suspicious person is detected and when the intruder is detected, and the business state detecting unit is configured to monitor the specific monitoring among the plurality of monitoring areas. When the area is set to the monitoring mode, it is detected that the monitoring target is not in a business state.

かかる構成において、通報装置は、監視対象を区分する複数の監視区域のうち、営業区域となる特定の監視区域が、無人状態の場合に設定する監視モードとなると営業状態でないことを検出するよう作用する。
これにより、営業所が営業状態でない場合に生じる営業区域が無人状態であるという状況を監視モードの設定によって検出でき、精度よく営業状態でないことを判定できる。
In such a configuration, the reporting device acts to detect that a specific monitoring area that is a business area out of a plurality of monitoring areas that divide the monitoring target is in a non-operating state when the monitoring mode that is set in the case of an unattended state is entered. To do.
As a result, it is possible to detect the situation that the business area that occurs when the sales office is not in the business state is unattended by setting the monitoring mode, and it is possible to accurately determine that the business area is not in the business state.

また、本発明の通報装置において、前記監視区域内の移動物体の監視情報を取得する監視情報取得部と、前記不審者検出部は、前記不審者検出処理として、前記監視情報から移動物体を抽出し該抽出した移動物体の外観又は行動が予め設定した不審パターンに合致すると不審者と判定する。   In the notification device of the present invention, the monitoring information acquisition unit that acquires monitoring information of the moving object in the monitoring area, and the suspicious person detection unit extract the moving object from the monitoring information as the suspicious person detection process. When the extracted moving object has an appearance or action that matches a preset suspicious pattern, it is determined that the person is a suspicious person.

これにより、監視区域にて抽出した移動物体の外観又は行動が予め設定した不審者に特有な外観又は行動である不審パターンに合致した場合に不審者と判定するので、不審者を高精度に判定できる。   As a result, a suspicious person is determined with high accuracy because the appearance or behavior of a moving object extracted in the monitoring area is determined to be a suspicious person when it matches a preset suspicious pattern that is unique to the suspicious person. it can.

また、本発明の通報装置において、前記記憶部は、前記複数の監視区域のうち前記不審者検出処理を実行する対象として非営業区域となる不審者監視区域の情報を記憶し、前記不審者検出部は、前記不審者監視区域において前記不審者検出処理を実行する。   Further, in the notification device of the present invention, the storage unit stores information on a suspicious person monitoring area that is a non-business area as a target for executing the suspicious person detection process among the plurality of monitoring areas, and detects the suspicious person. The unit executes the suspicious person detection process in the suspicious person monitoring area.

これにより、予め記憶した不審者監視区域に対象を絞って不審者検出処理を実行するので、不審者が現れる可能性が低い又は誤判定の可能性高い監視区域などを除外して不審者検出処理を実行でき、不審者検出処理の誤判定を低減できる。   As a result, since the suspicious person detection process is executed focusing on the pre-stored suspicious person monitoring area, the suspicious person detection process is performed by excluding the monitoring area where the possibility of the suspicious person appearing low or the possibility of erroneous determination is high. And erroneous determination of the suspicious person detection process can be reduced.

また、本発明の通報装置において、更に、前記営業所における営業区域の出入口の閉鎖又は施錠を検出する出入口検出部を備え、前記営業状態検出部は、前記出入口が閉鎖又は施錠されると前記監視対象が営業状態でないことを検出する。   The notification device of the present invention further includes an entrance / exit detection unit that detects closing or locking of the entrance / exit of the business area in the business office, and the business state detection unit monitors the monitoring when the entrance / exit is closed or locked. Detect that the subject is not in business.

これにより、営業所が営業状態でないと想定される、営業区域の出入口が閉鎖又は施錠されたことをもって監視対象が営業状態でないことを検出するので、精度よく営業状態でないことを検出できる。   Thereby, since it is detected that the monitoring target is not in the business state when the entrance / exit of the business area, which is assumed not to be in the business state, is closed or locked, it is possible to accurately detect that the business office is not in the business state.

また、本発明の通報装置において、更に、前記営業所における営業区域の照明の消灯を検出する消灯検出部を備え、前記営業状態検出部は、前記照明が消灯されると前記監視対象が営業状態でないことを検出する。   Further, in the notification device of the present invention, the notification device further includes a turn-off detection unit that detects turn-off of the lighting in the business area in the business office, and the business state detection unit is configured to monitor the monitoring target when the light is turned off. Detect not.

これにより、営業所が営業状態でないと想定される、営業区域の照明が消灯されたことをもって監視対象が営業状態でないことを検出するので、精度よく営業状態でないことを検出できる。   As a result, it is detected that the monitoring target is not in the business state when the lighting of the business area is assumed to be off, which is assumed that the business office is not in the business state, so that it is possible to accurately detect that the business office is not in the business state.

本発明によれば、営業所内の人が少なくなって不審者が現れる可能性の高い非営業中の時間帯に限って不審者検出処理を実行するので、この不審者検出処理により正当な者を不審者と誤判定することを低減できる。   According to the present invention, the suspicious person detection process is executed only during the non-business hours when the number of people in the sales office is low and a suspicious person is likely to appear. Misidentification as a suspicious person can be reduced.

本発明の通報装置による通報システムの全体構成を示す概略図である。It is the schematic which shows the whole structure of the notification system by the notification apparatus of this invention. 本発明の通報装置の構成を示すブロック図である。It is a block diagram which shows the structure of the notification apparatus of this invention. 本発明の通報装置の監視処理を示すフローチャートである。It is a flowchart which shows the monitoring process of the notification apparatus of this invention. 本発明の通報装置の営業状態検出処理を示すフローチャートである。It is a flowchart which shows the business state detection process of the notification apparatus of this invention.

以下、本発明の実施形態について、図面を参照して具体的に説明する。
本実施形態では、金融機関や商店などの営業所を監視対象とし、この監視対象を分割する監視区域としての店舗エリアと事務所エリアとが併設されている区域を監視する場合を例示するが、本発明の範囲はこれに限定されるものではない。
Embodiments of the present invention will be specifically described below with reference to the drawings.
In the present embodiment, a business office such as a financial institution or a store is set as a monitoring target, and a case where a store area and an office area are monitored as a monitoring area that divides the monitoring target is exemplified. The scope of the present invention is not limited to this.

図1は、本発明の通報装置を用いた通報システム1を示す構成図である。
図1は、外部との出入口を有する店舗エリア2a及び事務所エリア2bからなる監視対象2と、監視対象2に設置される監視カメラ3と、熱線センサや開閉センサなどの警備センサ7と、この監視カメラ3及び警備センサ7が接続される通報装置4との関係を模式的に平面図上に示している。
FIG. 1 is a configuration diagram showing a notification system 1 using the notification device of the present invention.
FIG. 1 shows a monitoring object 2 including a store area 2a and an office area 2b having an entrance to the outside, a monitoring camera 3 installed in the monitoring object 2, a security sensor 7 such as a heat ray sensor and an open / close sensor, The relationship between the monitoring camera 3 and the alarm device 4 to which the security sensor 7 is connected is schematically shown on the plan view.

ここで、本実施形態において、店舗エリア2aとは営業区画であって監視対象2の利用者となる店員と外部からの来訪者となる客とが混在して存在し得る領域であり、事務所エリア2bとは非営業区画であって店員のみが存在し得る領域である。図1に示すように、店舗エリア2aは、外部との出入口として店舗出入口21が設けられ事務所エリア2bとの間に通用口22が設けられている。また、事務所エリア2bには、前述の通用口22の他に外部との出入口として事務所出入口23が設けられている。   Here, in the present embodiment, the store area 2a is a business area, and is an area where a salesclerk who is a user of the monitoring target 2 and a customer who is a visitor from the outside can exist together. The area 2b is a non-business division and can be an area where only a store clerk can exist. As shown in FIG. 1, in the store area 2a, a store entrance 21 is provided as an entrance to the outside, and a common entrance 22 is provided between the store area 2a and the office area 2b. In addition, the office area 2b is provided with an office entrance 23 as an entrance to the outside in addition to the above-described common port 22.

図1の例では、店舗エリア2aの出入口21,22を含む店舗エリア2a全体が撮像可能な位置に監視カメラ3が設置され、また事務所エリア2bの出入口22,23全体が撮像可能な位置にも監視カメラ3が設置されている。これら監視カメラ3と通報装置4とは図示しないLANにより接続され、通報装置4は更に遠隔の監視センタ5と通信回線網6を介して接続されている。   In the example of FIG. 1, the monitoring camera 3 is installed at a position where the entire store area 2a including the entrances 21 and 22 of the store area 2a can be imaged, and the entire entrances 22 and 23 of the office area 2b can be imaged. A surveillance camera 3 is also installed. The monitoring camera 3 and the notification device 4 are connected by a LAN (not shown), and the notification device 4 is further connected to a remote monitoring center 5 via a communication line network 6.

また、図1の例では、店舗エリア2aの出入口21及び事務所エリアbの事務所出入口23に開閉センサが設置され、店舗エリア2b及び事務所エリアbに熱線センサが設置されている。これらの警備センサ7は通報装置4と監視カメラ3とを結ぶLANに接続されている。   Moreover, in the example of FIG. 1, the opening / closing sensor is installed in the entrance / exit 21 of the store area 2a and the office entrance / exit 23 of the office area b, and the heat ray sensor is installed in the store area 2b and the office area b. These security sensors 7 are connected to a LAN connecting the reporting device 4 and the monitoring camera 3.

監視カメラ3は、監視対象2の監視情報を生成する監視手段である。監視カメラ3は、予め各監視カメラ3を識別するカメラ番号を記憶しており、撮像素子から入力される画像信号を所定の撮影間隔(例えば0.2秒周期、すなわち5fps(フレーム/秒))でデジタル信号に変換し、圧縮符号化処理を行い所定の規格(例えばJPEG規格)に準拠した画像データを生成する。生成された画像データは、LANに出力され通報装置4に送信される。このとき送信される画像データには、カメラ番号が含まれる。なお、監視カメラ3は、マイクから入力される音声信号を圧縮符号化して音声データを生成し、画像データと音声データを多重化してLANに出力してもよい。   The monitoring camera 3 is a monitoring unit that generates monitoring information of the monitoring target 2. The surveillance camera 3 stores a camera number for identifying each surveillance camera 3 in advance, and an image signal input from the image sensor is transmitted at a predetermined photographing interval (for example, a cycle of 0.2 seconds, that is, 5 fps (frame / second)). Then, the image data is converted into a digital signal, compression-encoded, and image data compliant with a predetermined standard (for example, JPEG standard) is generated. The generated image data is output to the LAN and transmitted to the notification device 4. The image data transmitted at this time includes a camera number. Note that the surveillance camera 3 may compress and encode the audio signal input from the microphone to generate audio data, multiplex the image data and audio data, and output the multiplexed audio data to the LAN.

警備センサ7は、エリアの内部へ侵入する侵入者を検知する監視手段である。警備センサ7は、予め各警備センサ7を識別するセンサ番号を記憶しており、侵入者を検知するとセンサ番号を含む検知信号を通報装置4に出力する。   The security sensor 7 is a monitoring unit that detects an intruder entering the inside of the area. The security sensor 7 stores a sensor number for identifying each security sensor 7 in advance, and outputs a detection signal including the sensor number to the notification device 4 when an intruder is detected.

通報装置4は、警備センサ7からの検知信号及び各エリアに設定された警備モードに基づき各エリアに侵入する侵入者を監視する。警備モードには、監視モードとしての警備セットモードと、非監視モードとしての警備解除モードとがある。警備セットモードは、エリアに利用者が存在しない無人状態において設定するモードであり、通報装置4は、この警備セットモードが設定されているエリアにおいて、警備センサ7から検知信号を受信すると侵入を判定し、侵入検出信号を監視センタ5に送信する。警備解除モードは、エリアに利用者が存在する有人状態において設定するモードであり、通報装置4は、この警備解除モードが設定されているエリアにおいて、警備センサ7から検知信号を受信しても侵入を判定せず、侵入検出信号を監視センタ5に送信しない。   The reporting device 4 monitors intruders entering each area based on the detection signal from the security sensor 7 and the security mode set in each area. The security mode includes a security set mode as a monitoring mode and a security release mode as a non-monitoring mode. The security set mode is a mode set in an unattended state in which no user exists in the area, and the reporting device 4 determines intrusion when receiving a detection signal from the security sensor 7 in the area where the security set mode is set. The intrusion detection signal is transmitted to the monitoring center 5. The security release mode is a mode that is set in a manned state where a user exists in the area, and the reporting device 4 intrudes even if a detection signal is received from the security sensor 7 in the area where the security release mode is set. The intrusion detection signal is not transmitted to the monitoring center 5.

また、通報装置4は、監視カメラ3から入力される画像データを受信して、この画像データから監視対象2内に不審者が存在するか否かを判定する不審者検出処理を実行する。不審者検出処理の結果、監視対象2内に不審者が存在することが判定されると、通信回線網6を介して監視センタ5に不審者検出信号を通報するとともに、監視カメラ3から受信する画像データを監視センタ5に送信する。画像データの送信処理は監視センタ5又は監視対象2の利用者から停止入力があるまで継続して行われる。   In addition, the notification device 4 receives image data input from the monitoring camera 3 and executes suspicious person detection processing for determining whether or not there is a suspicious person in the monitoring target 2 from the image data. As a result of the suspicious person detection process, when it is determined that there is a suspicious person in the monitoring target 2, a suspicious person detection signal is reported to the monitoring center 5 via the communication network 6 and received from the monitoring camera 3. The image data is transmitted to the monitoring center 5. The image data transmission process is continuously performed until a stop input is received from the user of the monitoring center 5 or the monitoring target 2.

特に、本実施形態において、通報装置4は、店舗エリア2aに警備解除モードが設定されると、不審者検出処理の実行を禁止する。他方、店舗エリア2aに警備セットモードが設定されると、不審者検出処理を実行する。これにより、営業中であることが想定される店舗エリア2aの警備解除モード中は不審者検出処理を禁止して誤検出を防止しつつ、非営業中で不審者による犯罪の危険性が高いと想定される店舗エリア2aの警備セットモード中は不審者検出処理を実行するようにしている。   In particular, in this embodiment, the reporting device 4 prohibits the execution of the suspicious person detection process when the security release mode is set in the store area 2a. On the other hand, when the security set mode is set in the store area 2a, a suspicious person detection process is executed. As a result, during the security release mode of the store area 2a that is assumed to be in business, the suspicious person detection process is prohibited to prevent false detection, and the non-business person is at high risk of crime by the suspicious person. The suspicious person detection process is executed during the security set mode of the assumed store area 2a.

本実施形態において、不審者とは監視対象2の保全を損うおそれのある者をいい、具体的には、外観や行動が予め定めた不審パターンに合致する者のことである。例えば、極端にうつむいたりサングラスやマスク等を装着することで顔の一部分を隠して人相が分らない人物や、特定の領域に踏み込んだり滞留している人物、自ら大声を上げたり周囲の者が悲鳴を上げるような人物などである。   In the present embodiment, the suspicious person means a person who may impair the maintenance of the monitoring target 2, and specifically, a person whose appearance and behavior match a predetermined suspicious pattern. For example, people who are extremely depressed or wearing sunglasses or masks to hide part of their face and do not know the human phase, who stepped on or stayed in a specific area, who shouted loudly or others around them Someone who screams.

監視センタ5は、警備会社などが運営するセンタ装置51を備えた施設である。センタ装置51は、1又は複数のコンピュータで構成されており、本発明に関連する監視センタ5の機能を実現する。監視センタ5では、センタ装置51により各種機器が制御され、通報装置4から受信した侵入検出信号及び不審者検出信号を記録するとともに、通報装置4から送信される画像データをディスプレイ52に表示することで、監視員が監視対象となる複数の監視区域2を監視している。   The monitoring center 5 is a facility provided with a center device 51 operated by a security company or the like. The center device 51 is composed of one or a plurality of computers, and realizes the function of the monitoring center 5 related to the present invention. In the monitoring center 5, various devices are controlled by the center device 51, and the intrusion detection signal and the suspicious person detection signal received from the notification device 4 are recorded, and the image data transmitted from the notification device 4 is displayed on the display 52. Thus, the monitoring person monitors a plurality of monitoring areas 2 to be monitored.

<通報装置>
次に、図2を用いて通報装置4の構成について説明する。図2は、通報装置4の構成を示すブロック図である。
通報装置4は、監視カメラ3、警備センサ7、及び監視センタ5と通信可能に監視対象2内(本実施形態では事務所エリア2b)に設置されている。
<Notification device>
Next, the configuration of the notification device 4 will be described with reference to FIG. FIG. 2 is a block diagram showing the configuration of the notification device 4.
The reporting device 4 is installed in the monitoring target 2 (in the present embodiment, the office area 2b) so as to be able to communicate with the monitoring camera 3, the security sensor 7, and the monitoring center 5.

通報装置4は、LANに接続される通信I/F(インタフェース)としての監視情報取得部41と、通信回線網6と接続される通信部42と、利用者が入力操作を行う操作部43と、HDDやメモリなどで構成される記憶部44と、MPUやマイコンなどで構成され各部の制御を行う制御部45とを有して概略構成される。   The reporting device 4 includes a monitoring information acquisition unit 41 as a communication I / F (interface) connected to the LAN, a communication unit 42 connected to the communication network 6, and an operation unit 43 on which a user performs an input operation. The storage unit 44 includes an HDD, a memory, and the like, and the control unit 45 includes an MPU, a microcomputer, and the like and controls each unit.

監視情報取得部41は、監視カメラ3及び警備センサ7と接続され、監視対象2の監視情報として監視カメラ3から出力されるカメラ番号及び画像データ、警備センサ7から出力される検知信号を受信して制御部45にこれらデータを出力する。
通信部42は、通信回線網6を介してセンタ装置51と接続されて監視センタ5との間で通信を行う。通信部42は、制御部45にて監視対象2内に不審者が存在すると判定されると、自己のアドレス情報を含む不審者検出信号および監視カメラ3が撮像する画像データを監視センタ5に送信する。また、通信部42は、制御部45にて警備セットモードに設定されているエリア(店舗エリア2a、事務所エリア2b)に侵入者が存在すると判定されると自己のアドレス情報を含む侵入検出信号を監視センタ5に送信する。
操作部43は、警備モードの設定操作など設定情報が入力可能なスイッチである。
The monitoring information acquisition unit 41 is connected to the monitoring camera 3 and the security sensor 7 and receives the camera number and image data output from the monitoring camera 3 as the monitoring information of the monitoring target 2 and the detection signal output from the security sensor 7. The data is output to the control unit 45.
The communication unit 42 is connected to the center device 51 via the communication line network 6 and communicates with the monitoring center 5. When the control unit 45 determines that there is a suspicious person in the monitoring target 2, the communication unit 42 transmits a suspicious person detection signal including its own address information and image data captured by the monitoring camera 3 to the monitoring center 5. To do. In addition, when the communication unit 42 determines that there is an intruder in the area set in the security set mode by the control unit 45 (store area 2a, office area 2b), the intrusion detection signal including its own address information. Is transmitted to the monitoring center 5.
The operation unit 43 is a switch capable of inputting setting information such as a security mode setting operation.

記憶部44は、ROMやRAM、又はHDDにて構成され自己を特定するためのアドレス情報と各種プログラムなどを記憶しており、更に通報装置4を動作させるための各種情報を記憶する。具体的に、記憶部44は、移動物体を抽出するための背景情報となる基準データと、現在の警備モードを示すモード情報と、監視対象2を構成するエリアの情報を示す区域情報と、監視対象2が営業状態か否かを示す営業状態情報を記憶している。また、記憶部44には、監視カメラ3から出力された過去所定時間分の画像データが記憶されている。   The storage unit 44 is configured by a ROM, a RAM, or an HDD, stores address information for identifying itself, various programs, and the like, and further stores various information for operating the reporting device 4. Specifically, the storage unit 44 includes reference data serving as background information for extracting a moving object, mode information indicating the current security mode, area information indicating information on an area constituting the monitoring target 2, and monitoring. Stores business state information indicating whether or not the object 2 is in a business state. Further, the storage unit 44 stores image data for a past predetermined time output from the monitoring camera 3.

ここで、記憶部44に記憶される基準データは、後述する不審者検出処理にて現在の画像データと比較して監視対象2内の移動物体を抽出するために用いられる比較基準情報であり、予め無人時の監視対象2を撮像して取得された画像データである。
また、モード情報は、エリア(店舗エリア2a、事務所エリア2b)ごとに現在設定されている警備モード(警備セットモード又は警備解除モード)を記憶している。警備モードは利用者による操作部43への操作入力に基づき制御部45にて設定される。
さらに、区域情報は、監視対象2を構成する店舗エリア2aと事務所エリア2bそれぞれに対応する監視カメラ3及び画像データに設定される各種領域の情報や、各エリアに設置された警備センサ7の情報が予め設定された情報である。
また、営業状態情報は、監視対象2の営業区画となる店舗エリア2aが営業状態か否かを示す情報である。本実施形態において営業状態とは、監視対象の利用者となる店員以外の、外部からの来訪者となる客が店舗エリア2a内に入場できる状態を云い、営業状態でない(非営業状態)とは、外部からの来訪者となる客が店舗エリア2a内に入場できない状態を云う。営業状態情報は、制御部45にて設定され記憶部44に記憶される。
Here, the reference data stored in the storage unit 44 is comparison reference information used for extracting a moving object in the monitoring target 2 in comparison with the current image data in a suspicious person detection process described later. This is image data obtained by capturing an image of the monitoring target 2 in the unattended state in advance.
Moreover, the mode information has memorize | stored the security mode (security set mode or security cancellation | release mode) currently set for every area (shop area 2a, office area 2b). The security mode is set by the control unit 45 based on an operation input to the operation unit 43 by the user.
Further, the area information includes information about various areas set in the monitoring camera 3 and image data corresponding to the store area 2a and the office area 2b constituting the monitoring target 2, and the security sensor 7 installed in each area. The information is information set in advance.
The business state information is information indicating whether or not the store area 2a that is the business division of the monitoring target 2 is in a business state. In this embodiment, the business state refers to a state in which a visitor who is an external visitor other than the store clerk who is a monitored user can enter the store area 2a, and is not in a business state (non-business state) This means a state in which a visitor who is a visitor from the outside cannot enter the store area 2a. The business state information is set by the control unit 45 and stored in the storage unit 44.

制御部45は、CPU、ROM、RAM等からなるマイクロコンピュータ及びその周辺回路で構成され、上述した各部を制御する。そのために、制御部45は、このマイクロコンピュータ及びマイクロコンピュータ上で実行されるコンピュータプログラムによって実現される機能モジュールとして、監視対象2の警備モードを設定/変更するモード設定部451と、監視対象2への侵入者を検出する侵入検出部452と、監視対象が営業状態であるか否かを検出する営業状態検出部453と、不審者検出処理を実行する不審者検出部454と、通信部42による通信処理を制御する通信制御部455を備えている。   The control unit 45 includes a microcomputer including a CPU, a ROM, a RAM, and the like and peripheral circuits thereof, and controls each unit described above. For this purpose, the control unit 45 sets a mode setting unit 451 for setting / changing the security mode of the monitoring target 2 as a functional module realized by the microcomputer and a computer program executed on the microcomputer, and the monitoring target 2 By an intrusion detection unit 452 for detecting an intruder, a business state detection unit 453 for detecting whether the monitoring target is a business state, a suspicious person detection unit 454 for executing a suspicious person detection process, and a communication unit 42 A communication control unit 455 that controls communication processing is provided.

モード設定部451は、利用者が警備モードを設定する際に操作部43から入力する情報を照合し、照合OKと判定できれば、操作部43の入力に基づいてエリアごとに警備モードを警備セットモードまたは警備解除モードに設定する。即ち、店舗エリア2aについて警備セットモードの設定操作があれば店舗エリア2aの警備モードを警備セットモードに設定し、事務所エリア2bついて警備セットモードの設定操作があれば事務所エリア2bの警備モードを警備セットモードに設定する。モード設定部451にて設定されたエリアごとの警備モードは、記憶部44のモード情報に記憶される。   The mode setting unit 451 collates the information input from the operation unit 43 when the user sets the security mode, and if the verification is OK, the mode setting unit 451 sets the security mode for each area based on the input of the operation unit 43. Or set to security release mode. That is, if there is a security set mode setting operation for the store area 2a, the security mode of the store area 2a is set to the security set mode, and if there is a security set mode setting operation for the office area 2b, the security mode of the office area 2b is set. Set to security set mode. The security mode for each area set by the mode setting unit 451 is stored in the mode information of the storage unit 44.

上述したように、警備セットモードは、夜間や休日など、監視区域が無人となるときに設定され、警備センサ7が事象の変化を検知したときに通信部42を介して遠隔の監視センタ6に侵入検出信号により異常通報を行うモードである。また、警備解除モードは、監視区域が有人のときに設定され、警備センサ7の検知による異常通報を行わないモードである。   As described above, the security set mode is set when the monitoring area is unattended, such as at night or on holidays, and when the security sensor 7 detects a change in the event, the remote monitoring center 6 is connected via the communication unit 42. In this mode, an abnormality report is made using an intrusion detection signal. Further, the security release mode is a mode that is set when the monitoring area is manned and does not perform abnormality notification by detection of the security sensor 7.

侵入検出部452は、警備センサ7から監視情報取得部41を介して検知信号の入力があると、記憶部44に記憶された区域情報及びモード情報を参照して、現在の警備モードが警備セットモードであるエリアの警備センサ7が検知信号を出力した場合に、当該エリアに侵入者が存在すると判定する。一方、現在の警備モードが警備解除モードであるエリアの警備センサ7が検知信号を出力した場合には、侵入者の存在を判定しない。侵入検出部452が侵入者を検出したエリアの情報、及び検知信号を出力した警備センサ7の情報は、記憶部44に記憶され侵入検出信号として監視センタ5へ通報される。   When the detection signal is input from the security sensor 7 via the monitoring information acquisition unit 41, the intrusion detection unit 452 refers to the area information and mode information stored in the storage unit 44, and the current security mode is set to the security set. When the security sensor 7 in the mode area outputs a detection signal, it is determined that an intruder exists in the area. On the other hand, if the security sensor 7 in the area where the current security mode is the security release mode outputs a detection signal, the presence of an intruder is not determined. Information on the area where the intrusion detection unit 452 detects an intruder and information on the security sensor 7 that has output the detection signal are stored in the storage unit 44 and reported to the monitoring center 5 as an intrusion detection signal.

営業状態検出部453は、監視対象2の営業区画となる店舗エリア2aが営業状態であるか否かを検出する。具体的には、営業状態検出部453は、営業状態検出処理として、記憶部44に記憶された区域情報及びモード情報を参照して、店舗エリア2aが警備セットモードに設定されているか否かを判別し、店舗エリア2aが警備解除モードに設定されていれば営業状態と判定し、警備セットモードに設定されていると営業状態でない(非営業状態)と判定する。営業状態検出部453による営業状態か否かの判定結果は記憶部44の営業状態情報に記憶される。   The business state detection unit 453 detects whether or not the store area 2a that is the business division of the monitoring target 2 is in a business state. Specifically, the business state detection unit 453 refers to the area information and mode information stored in the storage unit 44 as the business state detection process, and determines whether or not the store area 2a is set in the security set mode. If the store area 2a is set in the security release mode, it is determined as the business state, and if it is set in the security set mode, it is determined that the business area is not in the business state (non-business state). The determination result of whether or not the business state is detected by the business state detection unit 453 is stored in the business state information of the storage unit 44.

なお、監視対象2が営業状態であるか否かの検出方法はこれに限らず、営業区画が実質的に営業状態であるか否かを検出できればどのような方法であってもよい。例えば、営業状態検出部453は、営業区画(本実施形態では店舗エリア2a)の外部との出入口(店舗出入口21)を遮蔽するシャッターや扉などの通行規制手段の状態を検出する出入口検出部を備え、通行規制手段が開放又は解錠されていれば営業状態と判定し、閉鎖又は施錠されたことを検出して営業状態でないと判定してもよい。シャッターや扉などの通行規制手段が開放されているか閉鎖されているかを検出する方法は開閉センサなど種々の方法が既に知られており、また、解錠されているか施錠されているかを検出する方法は錠センサなど種々の方法が既に知られている。これらセンサ(出入口検出部)からの検知信号を監視情報取得部41を介して取得することで実現可能である。開放/閉鎖により判定するか解錠/施錠により判定するかは店舗出入口21により任意に選択すればよい。   In addition, the detection method of whether the monitoring object 2 is a business state is not restricted to this, What kind of method may be used as long as it can detect whether a business division is a business state substantially. For example, the business state detection unit 453 includes an entrance / exit detection unit that detects the state of a traffic control unit such as a shutter or a door that shields an entrance / exit (store entrance / exit 21) from the outside of the business section (store area 2a in the present embodiment). It may be determined that it is in a business state if the traffic regulation means is open or unlocked, and it is determined that it is not in a business state by detecting that it is closed or locked. Various methods, such as an open / close sensor, are already known as a method for detecting whether a traffic control means such as a shutter or a door is open or closed, and a method for detecting whether the shutter is unlocked or locked. Various methods such as a lock sensor are already known. This can be realized by acquiring detection signals from these sensors (entrance / entrance detection units) via the monitoring information acquisition unit 41. Whether to determine by opening / closing or by unlocking / locking may be arbitrarily selected by the store entrance 21.

また、例えば、営業区画の照明設備が点灯していれば営業状態と判定し、消灯を検出すると営業状態でないと判定してもよい。照明設備の点灯/消灯は店舗エリアに消灯検出部としての照度センサを設置して照度センサが検出する照度を監視情報取得部41を介して取得してしきい値処理することで検出でき、営業状態検出部453は、かかる店舗エリアの照度に基づき営業状態か否かを判定すればよい。   Further, for example, it may be determined that the lighting facility in the business section is in the operating state if it is turned on, and it may be determined that the lighting state is not in the operating state if the lighting is detected. The lighting equipment can be turned on / off by installing an illuminance sensor as a light extinguishing detection unit in the store area, acquiring the illuminance detected by the illuminance sensor through the monitoring information acquisition unit 41, and performing threshold processing. The state detection unit 453 may determine whether or not the business state is based on the illuminance of the store area.

不審者検出部454は、監視対象2の営業区画が営業状態であるか否かに応じて不審者検出処理を実行するか否か判定する。本実施形態では、不審者検出部454は、店舗エリア2aが営業状態でなければ監視対象2内に不審者が存在するか否かを判定する不審者検出処理を実行し、営業状態であれば不審者検出処理の実行を禁止する。
これにより、店舗エリア2aに外部から客などが自由に出入りできる場合に不審者検出処理を実行することが禁止され、大勢の往来による雑踏により正当な人物が不審者であると誤判定してしまうことを抑制し、また、非営業状態となり監視対象2内の人が少なくなった不審者の出現可能性が高い期間にのみ検出処理を行うことで検出精度を向上させている。この不審者検出処理は、店舗エリア2aと事務所エリア2bの双方が警備セットモードに設定されたとき、すなわち監視対象2が無人となったと判定できる場合には実行を禁止してよい。
The suspicious person detection unit 454 determines whether or not to execute the suspicious person detection process depending on whether or not the business section of the monitoring target 2 is in a business state. In the present embodiment, the suspicious person detection unit 454 executes suspicious person detection processing for determining whether or not there is a suspicious person in the monitoring target 2 if the store area 2a is not in a business state. Execution of suspicious person detection processing is prohibited.
This prohibits the execution of the suspicious person detection process when a customer or the like can enter and exit the store area 2a from the outside, and it is erroneously determined that the legitimate person is a suspicious person due to a crowd of crowds. In addition, the detection accuracy is improved by performing the detection process only during a period in which there is a high possibility of appearance of a suspicious person who is in a non-business state and has fewer people in the monitoring target 2. This suspicious person detection process may be prohibited when both the store area 2a and the office area 2b are set to the security set mode, that is, when it can be determined that the monitoring target 2 has become unattended.

不審者検出部454が実行する不審者検出処理による不審者の検出方法は画像に限らず何れの方法であってもよいが、本実施形態では、不審者の画像特徴として、監視情報取得部41で取得した画像データに人相が判別可能な顔特徴部分となる各部位(目、鼻、口)を隠蔽している(顔の各部位が検出できない)人物が存在することを検出する。不審者検出部454は、顔領域において顔特徴部分を検出するための公知の様々な方法を用いることができる。   The suspicious person detection method executed by the suspicious person detection unit 454 is not limited to an image, and any method may be used. However, in this embodiment, the monitoring information acquisition unit 41 is used as an image characteristic of the suspicious person. It is detected that there is a person who conceals each part (eyes, nose, mouth), which is a facial feature part whose human phase can be distinguished, in the image data acquired in (cannot detect each part of the face). The suspicious person detection unit 454 can use various known methods for detecting a facial feature in the face area.

具体的には、不審者検出部454は不審者検出処理として、監視情報取得部41で取得した画像データ(監視カメラ3から入力された画像データ)に画像処理を施して移動物体を検出し、この移動物体を監視対象2内に存在している人物として検出し、当該人物が不審者であるか否かを判定する。例えば、画像データから検出される人物は、画像データ中の変動領域である。不審者検出部454は、記憶部44に記憶された基準データ(無人時の画像データ)と監視情報取得部41より入力された現在の画像データとを比較して、輝度値の変動が所定以上であった変動画素を抽出するとともに、略連続した変動画素群を1つの変動領域としてグループ化し、各変動領域に固有のラベルでラベリングする。そして、この変動領域を人物として検出する。   Specifically, the suspicious person detecting unit 454 detects the moving object by performing image processing (image data input from the monitoring camera 3) acquired by the monitoring information acquiring unit 41 as the suspicious person detecting process. This moving object is detected as a person existing in the monitoring target 2, and it is determined whether or not the person is a suspicious person. For example, the person detected from the image data is a fluctuation area in the image data. The suspicious person detection unit 454 compares the reference data (unmanned image data) stored in the storage unit 44 with the current image data input from the monitoring information acquisition unit 41, and the luminance value variation is equal to or greater than a predetermined value. In addition to extracting the variation pixels that are, the group of substantially continuous variation pixels is grouped as one variation region, and each variation region is labeled with a unique label. And this fluctuation area is detected as a person.

そして、不審者検出部454は、ラベリングされた変動領域のエッジ成分を抽出し、エッジ画像データにおいて顔の輪郭形状に近似した楕円形状のエッジ分布を検出して、そのエッジ分布に囲まれた楕円領域内の色情報が、肌色(例えばHSV表色系において色相(H)成分が0から30にある画素)を含む場合に当該楕円領域を顔領域として抽出する。そして、この顔領域内に、顔特徴部分となるエッジ(例えば、目、口などの水平エッジ)が現れているか否かを判定し、このような顔特徴部分が検出できない顔領域を不審者であると判定する。   Then, the suspicious person detection unit 454 extracts the edge component of the labeled fluctuation region, detects an elliptical edge distribution that approximates the contour shape of the face in the edge image data, and detects an elliptical that is surrounded by the edge distribution. When the color information in the area includes a skin color (for example, a pixel having a hue (H) component from 0 to 30 in the HSV color system), the elliptical area is extracted as a face area. Then, it is determined whether or not an edge (for example, a horizontal edge such as an eye or a mouth) that becomes a facial feature portion appears in the facial region, and a facial region where such a facial feature portion cannot be detected by a suspicious person. Judge that there is.

また、不審者検出部454は、顔領域の輝度分布からサングラスとマスクを装着した顔領域を個別に検出する。サングラスとマスクを装着した顔領域は、上方に暗い画素が集中するため縦方向の輝度重心が中心より低い位置となる。また、横方向に見たライン毎の輝度値が小さくなるのに対し縦方向に見たライン毎の輝度値の分散は大きい。さらに、サングラスの部分により輝度値が極端に低いという性質がある。そこで、顔領域の輝度重心のY座標が顔領域の中心より下方にあり、更に、X方向の標準偏差とY方向の標準偏差の比が所定しきい値より大きく、更に、輝度値の低い画素の割合がしきい値以上となる場合に、この顔領域内の画像はサングラスとマスクを装着した顔の画像であると判定して、当該顔領域を不審者であると判定する。   Further, the suspicious person detecting unit 454 individually detects a face area on which sunglasses and a mask are worn from the luminance distribution of the face area. In the face area where the sunglasses and the mask are worn, dark pixels concentrate on the upper side, so that the luminance center of gravity in the vertical direction is lower than the center. Further, the luminance value for each line viewed in the horizontal direction is small, whereas the variance of the luminance value for each line viewed in the vertical direction is large. Furthermore, there is a property that the luminance value is extremely low depending on the part of the sunglasses. Therefore, the Y coordinate of the luminance center of gravity of the face area is below the center of the face area, and the ratio between the standard deviation in the X direction and the standard deviation in the Y direction is larger than a predetermined threshold, and the pixel having a low luminance value Is equal to or greater than the threshold value, it is determined that the image in the face area is an image of a face wearing sunglasses and a mask, and the face area is determined to be a suspicious person.

不審者検出処理は、これに限らず人物の外観または行動が予め設定した不審パターンに合致することを判定できればよい。
例えば、人物の存在位置に基づき不審者であるかを判定してよく、この場合は画像データ中に重要監視領域を設定し、当該重要監視領域に存在する人物を不審者と判定する。また、人物の移動軌跡に基づき不審者であるかを判定してよく、この場合例えば、ラベリングされた変動領域のトラッキング処理により検出される人物(移動物体)の移動軌跡が画像データ中に設定された出入口領域からレジや金庫など重要監視領域に直線的となる場合に当該人物を不審者と判定してよい。また、人物の滞留時間に基づき不審者であるかを判定してよく、この場合は画像データ中に設定された重要監視領域に所定時間に渡り存在する人物を不審者と判定する。この他、既に知られる種々の方法により不審パターンに合致する人物を抽出可能である。
The suspicious person detection process is not limited to this, and it is only necessary to determine that the appearance or behavior of a person matches a preset suspicious pattern.
For example, it may be determined whether the person is a suspicious person based on the position of the person. In this case, an important monitoring area is set in the image data, and the person existing in the important monitoring area is determined as the suspicious person. Further, it may be determined whether the person is a suspicious person based on the movement locus of the person. In this case, for example, the movement locus of the person (moving object) detected by the tracking processing of the labeled fluctuation region is set in the image data. The person may be determined as a suspicious person when it is linear from the entrance / exit area to an important monitoring area such as a cash register or a safe. Further, it may be determined whether the person is a suspicious person based on the residence time of the person. In this case, the person who exists in the important monitoring area set in the image data for a predetermined time is determined as the suspicious person. In addition, a person who matches the suspicious pattern can be extracted by various known methods.

通信制御部455は、不審者検出部454により監視対象2内に不審者が存在することが判定されると監視センタ5に不審者検出信号を送信する。不審者検出信号には通報装置4のアドレス情報が含まれる。また、通信制御部455は、不審者の存在が判定されると監視カメラ3から入力される画像データを監視センタ5に送信開始する。送信される画像データにはカメラ番号と通報装置4のアドレス情報がヘッダ情報として付加され、監視カメラ3から入力される都度継続的に現在の画像データを送信する。そして、通信制御部455は、操作部43への画像送信の停止入力による停止信号、又は監視センタ5から送信される画像送信の停止信号の何れかを受け付けると監視センタ5への画像データ送信処理を停止する。
また、通信制御部455は、侵入検出部452により監視対象2内の警備セットモードに設定されているエリアに侵入者が存在すると判定されると、監視センタ5に侵入検出信号を送信する。
The communication control unit 455 transmits a suspicious person detection signal to the monitoring center 5 when the suspicious person detection unit 454 determines that there is a suspicious person in the monitoring target 2. The suspicious person detection signal includes the address information of the reporting device 4. In addition, when the presence of a suspicious person is determined, the communication control unit 455 starts transmitting image data input from the monitoring camera 3 to the monitoring center 5. The camera number and the address information of the reporting device 4 are added as header information to the transmitted image data, and the current image data is continuously transmitted each time it is input from the monitoring camera 3. When the communication control unit 455 receives either a stop signal due to an image transmission stop input to the operation unit 43 or an image transmission stop signal transmitted from the monitoring center 5, the communication control unit 455 performs image data transmission processing to the monitoring center 5. To stop.
If the intrusion detection unit 452 determines that an intruder exists in the area set in the guard set mode in the monitoring target 2, the communication control unit 455 transmits an intrusion detection signal to the monitoring center 5.

<動作の説明>
以上のように構成された通報システム1について、図面を参照してその動作を説明する。ここでは、主として通報装置4に関する動作について説明する。図3は通報装置4にて繰り返し実行される監視プログラムの動作を示すフローチャートであり、図4は通報装置4にて実行される営業状態検出プログラムの動作を示すフローチャートである。
<Description of operation>
About the notification system 1 comprised as mentioned above, the operation | movement is demonstrated with reference to drawings. Here, the operation related to the reporting device 4 will be mainly described. FIG. 3 is a flowchart showing the operation of the monitoring program repeatedly executed by the notification device 4, and FIG. 4 is a flowchart showing the operation of the business state detection program executed by the notification device 4.

まず、図3を参照して通報装置4にて実行される監視プログラムの動作を説明する。
最初に、通報装置4の制御部45は、営業状態検出部453に営業状態検出処理を実行させる(ステップST1)。本実施形態における営業状態検出処理の詳細な動作は後述する。営業状態検出処理の結果、監視対象2が営業状態でないと判定された場合(ステップST2−No)、記憶部44のモード情報を参照し、全てのエリア(店舗エリア2a及び事務所エリア2b)が警備セットモードであるか否かを判定する(ステップST3)。全てのエリアが警備セットモードでない場合、すなわち、何れかのエリアが警備解除モードに設定されていれば(ステップST3−No)、不審者検出部454に不審者検出処理を実行させる(ステップST4)。
First, the operation of the monitoring program executed by the notification device 4 will be described with reference to FIG.
First, the control unit 45 of the reporting device 4 causes the business state detection unit 453 to execute a business state detection process (step ST1). The detailed operation of the business state detection process in this embodiment will be described later. As a result of the business state detection process, when it is determined that the monitoring target 2 is not in the business state (step ST2-No), the mode information in the storage unit 44 is referred to, and all areas (store area 2a and office area 2b) It is determined whether or not the security set mode is set (step ST3). If all the areas are not in the security set mode, that is, if any area is set in the security release mode (step ST3-No), the suspicious person detection unit 454 is caused to execute a suspicious person detection process (step ST4). .

不審者検出部454が実行する不審者検出処理では、監視対象2内の人物の外観または行動が予め設定した不審パターンに合致することを判定して不審者の存在を判定する。本実施形態では、不審者の画像特徴として、監視情報取得部41で取得した画像データに人相が判別可能な顔特徴部分となる各部位(目、鼻、口)を隠蔽している(顔の各部位が検出できない)人物を不審者として検出している。   In the suspicious person detection process executed by the suspicious person detection unit 454, it is determined that the appearance or behavior of the person in the monitoring target 2 matches a preset suspicious pattern, thereby determining the presence of the suspicious person. In the present embodiment, as image characteristics of a suspicious person, each part (eyes, nose, mouth), which is a facial feature part whose human phase can be identified, is concealed in the image data acquired by the monitoring information acquisition unit 41 (face A person is detected as a suspicious person.

不審者検出処理の結果、監視区域2内に不審者の存在が判定されると(ステップST5−Yes)、通信制御部455が監視センタ5に不審者検出信号を送信し(ステップST6)、監視カメラ3から入力される画像データを監視センタ5に送信開始する(ステップST7)。画像データの送信は、操作部43から又は監視センタ5から画像送信の停止信号が入力されるまで継続して行われる。操作部43から又は監視センタ5から画像送信の停止信号が入力されると(ステップST8−Yes)、監視センタ5への画像データの送出を停止して処理を終了する(ステップST9)。   As a result of the suspicious person detection process, when it is determined that a suspicious person is present in the monitoring area 2 (step ST5-Yes), the communication control unit 455 transmits a suspicious person detection signal to the monitoring center 5 (step ST6). Transmission of image data input from the camera 3 is started to the monitoring center 5 (step ST7). The transmission of the image data is continuously performed until an image transmission stop signal is input from the operation unit 43 or the monitoring center 5. When an image transmission stop signal is input from the operation unit 43 or from the monitoring center 5 (step ST8—Yes), the transmission of image data to the monitoring center 5 is stopped and the process is terminated (step ST9).

他方、ステップST2において、監視対象2が営業状態であると判定された場合には(ステップST2−Yes)、ステップST3〜ステップST9の処理をスキップすることで、不審者検出処理の実行を禁止している。従って、監視対象2が営業状態である場合は、監視対象2内に不審者が存在すると判定することを防止して誤判定を抑制することが可能となる。   On the other hand, when it is determined in step ST2 that the monitoring target 2 is in the business state (step ST2-Yes), the execution of the suspicious person detection process is prohibited by skipping the processes of step ST3 to step ST9. ing. Therefore, when the monitoring target 2 is in a business state, it is possible to prevent the determination that there is a suspicious person in the monitoring target 2 and suppress erroneous determination.

また、ステップST3において、全エリアが警備セットモードであると判定された場合には(ステップST3−Yes)、ステップST4〜ステップST9の処理をスキップすることで、不審者検出処理の実行を禁止している。従って、監視対象2全体が侵入検出部452によって侵入者を監視する警備セットモードになっていて監視対象2のセキュリティ性が維持されている場合には、不審者検出処理の実行を禁止することになるので、セキュリティを維持しつつ、不審者検出処理による誤検出を防止できる。   If it is determined in step ST3 that all areas are in the security set mode (step ST3-Yes), the execution of the suspicious person detection process is prohibited by skipping the processes of steps ST4 to ST9. ing. Therefore, when the entire monitoring target 2 is in the security set mode for monitoring the intruder by the intrusion detection unit 452 and the security of the monitoring target 2 is maintained, the execution of the suspicious person detection process is prohibited. Therefore, it is possible to prevent erroneous detection due to suspicious person detection processing while maintaining security.

なお、監視対象2において、店舗エリア2aと事務所エリア2bの他に倉庫や作業所などの他エリアが監視区域となっている場合、これらのエリアを含めて不審者検出処理を実行してもよいし、これらのエリアを除外して例えば事務所エリア2b等特に監視が必要なエリアについて不審者検出処理を実行してもよい。
不審者検出処理を所定のエリアを除外して実行する場合には以下のようにすればよい。まず、記憶部44の区域情報に、不審者検出処理を実行するエリアを不審者監視区域の情報として記憶しておく。そして、図3のステップST4において不審者検出処理を実行する際に、記憶している不審者監視区域について不審者検出処理を実行するようにすればよい。
なお、不審者検出処理を所定のエリアを除外して実行するか、全てのエリアについて実行するかは、エリアの重要度(重要物が置いてあるか、監視対象2の外部から入場されやすい場所か、など)を考慮して、適宜監視対象2の監視の重要性やポリシーによって任意に選択できる事項である。
In addition, in the monitoring object 2, when other areas such as a warehouse and a work place are monitoring areas in addition to the store area 2a and the office area 2b, the suspicious person detection process including these areas may be executed. Alternatively, these areas may be excluded and the suspicious person detection process may be executed for an area that needs to be monitored, such as the office area 2b.
When executing the suspicious person detection process excluding a predetermined area, the following process may be performed. First, the area for executing the suspicious person detection process is stored in the area information of the storage unit 44 as information on the suspicious person monitoring area. And when performing a suspicious person detection process in step ST4 of FIG. 3, a suspicious person detection process should just be performed about the memorize | stored suspicious person monitoring area.
Whether to execute the suspicious person detection process excluding a predetermined area or all areas depends on the importance of the area (whether there is an important object or a place where it is easy to enter from outside the monitoring target 2 This can be arbitrarily selected according to the importance of monitoring of the monitoring target 2 and the policy.

次に、図4を用いて図3のステップST1で営業状態検出部453にて実行される営業状態検出処理プログラムの動作について説明する。
まず、営業状態検出部453は、記憶部44の区域情報を参照し、特定の監視区域としての店舗エリア2aの警備モードはどのモードになっているかを判定する(ステップST21)。そして、店舗エリア2aが警備解除モードとなっていると、監視対象2は営業状態と判定し(ステップST22)、処理を終了する。他方、店舗エリア2aが警備セットモードとなっていると、監視対象2は営業状態でないと判定し(ステップST23)、処理を終了する。営業状態検出部453によるこれらの判定結果は記憶部44の営業状態情報に記憶される。
Next, the operation of the business state detection processing program executed by the business state detection unit 453 in step ST1 of FIG. 3 will be described using FIG.
First, the business state detection unit 453 refers to the area information in the storage unit 44 to determine which mode is the security mode of the store area 2a as a specific monitoring area (step ST21). Then, if the store area 2a is in the security release mode, the monitoring target 2 is determined to be in a business state (step ST22), and the process ends. On the other hand, if the store area 2a is in the security set mode, it is determined that the monitoring target 2 is not in the business state (step ST23), and the process is terminated. These determination results by the business state detection unit 453 are stored in the business state information in the storage unit 44.

この営業状態検出プログラムにより、監視対象2を区分する複数のエリアのうち、営業区域である店舗エリア2aが、有人状態の場合に設定する警備解除モードであると営業状態であると判定する。他方、店舗エリア2aが、無人状態の場合に設定する警備セットモードであると営業状態でないことを判定する。
更に、前述の監視プログラムにおいて説明したように、営業状態であると判定された場合には不審者検出処理の実行を禁止し、営業状態でないと判定された場合には不審者検出処理を実行する。
これにより、監視対象2が営業中である間における不審者検出処理による誤検出を防止できる。
また、例えば、店舗エリア2aでの営業を終了しているが、事務所エリア2bには従業員がまだ残って作業をしているような状態を営業状態でないと検出できるので、強盗などの不審者が現れる可能性が高い時間帯に不審者検出処理を実行できる。
With this business state detection program, it is determined that the store area 2a, which is a business area, among the plurality of areas that divide the monitoring target 2 is in the business state when it is in the security release mode that is set when it is in a manned state. On the other hand, it is determined that the store area 2a is not in the business state when it is in the security set mode set when the store area 2a is unattended.
Further, as described in the above-described monitoring program, the execution of the suspicious person detection process is prohibited when it is determined that it is in the business state, and the suspicious person detection process is executed when it is determined that it is not in the business state. .
Thereby, the erroneous detection by the suspicious person detection process while the monitoring target 2 is in business can be prevented.
In addition, for example, it is possible to detect that the business area has ended in the store area 2a but the employee area is still working in the office area 2b. The suspicious person detection process can be executed in a time zone when a person is likely to appear.

以上、本発明の実施の形態を例示により説明したが、本発明の範囲はこれらに限定されるものではなく、請求項に記載された範囲内において目的に応じて変更・変形することが可能である。   The embodiments of the present invention have been described above by way of example, but the scope of the present invention is not limited to these embodiments, and can be changed or modified according to the purpose within the scope of the claims. is there.

例えば、本実施形態では、監視情報取得部41が監視対象2の監視情報として画像データを取得し、この画像データを用いて不審者検出を行う例について説明したが、これに限定されない。すなわち、監視情報としては画像データに限らず、監視対象2の移動物体を識別して認識可能な情報であればよい。例えば、監視カメラ3に換えて、若しくは監視カメラ3の他に、監視手段として監視対象2内にレーザ光を照射しながら所定周期で空間走査を行い、光路上にある物体にて反射した反射光を受光することで、区域内に存在する物体までの距離データと照射方向を得て当該物体の位置を検出するレーザ走査型距離センサを用いてもよい。   For example, in the present embodiment, an example in which the monitoring information acquisition unit 41 acquires image data as monitoring information of the monitoring target 2 and performs suspicious person detection using the image data has been described, but the present invention is not limited thereto. That is, the monitoring information is not limited to image data, and may be information that can identify and recognize the moving object of the monitoring target 2. For example, instead of the monitoring camera 3 or in addition to the monitoring camera 3, reflected light reflected by an object on the optical path by performing spatial scanning at a predetermined period while irradiating the monitoring target 2 with laser light as the monitoring means A laser scanning distance sensor that detects the position of the object by obtaining the distance data to the object existing in the area and the irradiation direction by receiving the light may be used.

この場合、監視情報取得部41には、監視情報としてレーザ走査型距離センサから監視対象2内の物体の位置(距離データと照射方向)が入力される。基準データとしては無人時に計測した既設物体の位置が記憶され、不審者検出処理においてこの基準データと現在の監視対象2内の物体の位置との差分から変動物体が抽出されてラベリングされ、この変動物体を人物として検出する。このラベルの情報と前回周期のラベルの情報との対応付けを判定してトラッキング処理を行うことで人物の移動が追跡される。そして、不審者検出処理として、上述した実施形態と同様にラベリングされた変動物体(人物)の存在位置や移動軌跡、滞留時間に基づき不審者であるかを判定してよい。即ち、レーザ走査型距離センサの走査範囲内に重要監視領域を設定し、この領域内への人物の進入を監視して予め定めた不審パターン(重要監視領域への進入、重要監視領域への移動軌跡、重要監視領域での滞留時間)に合致する人物を不審者と判定する。   In this case, the position (distance data and irradiation direction) of the object in the monitoring target 2 is input to the monitoring information acquisition unit 41 from the laser scanning distance sensor as monitoring information. As the reference data, the position of the existing object measured during unmanned operation is stored, and in the suspicious person detection process, the variable object is extracted and labeled from the difference between the reference data and the current position of the object in the monitoring target 2, and the fluctuation is detected. An object is detected as a person. The movement of the person is tracked by determining the correspondence between the label information and the label information of the previous cycle and performing a tracking process. And as a suspicious person detection process, you may determine whether it is a suspicious person based on the presence position, movement locus | trajectory, and residence time of the fluctuation | variation object (person) labeled similarly to embodiment mentioned above. That is, an important monitoring area is set within the scanning range of the laser scanning type distance sensor, and the entrance of a person into this area is monitored, and a predetermined suspicious pattern (entering into the important monitoring area, moving to the important monitoring area) A person who matches the trajectory and the residence time in the important monitoring area) is determined as a suspicious person.

また、上述の実施形態に加えて、不審者検出処理では、監視対象2(店舗エリア2a及び事務所エリア2b)に設置したマイクから入力される音声データに基づいて不審者を検出してよい。
この場合、監視情報取得部41はマイクにて集音された音声データを取得する音声取得部としても機能し、不審者検出部454は不審者検出処理として、音声データを音声認識処理して音声データに含まれる文字列に基づき監視対象に不審者が存在しているか否かを判定する。具体的には、不審者検出部454は、音声データから音声特徴量を抽出しパターンマッチングにより音声を切り出して符号の文字列に置き換え、この文字列が予め記憶部に記憶した非常事態が発生したときに発音が予測される危険語句(例えば「助けて」「金を出せ」など)と一致した場合に不審者が存在していると判定する。この場合、危険語句と判定音圧とを対応付けておき、監視対象2の音声データに危険語句が含まれ更にこの語句の音圧が判定音圧以上であるときに不審者の存在を判定することが好適である。
In addition to the above-described embodiment, in the suspicious person detection process, a suspicious person may be detected based on voice data input from a microphone installed in the monitoring target 2 (the store area 2a and the office area 2b).
In this case, the monitoring information acquisition unit 41 also functions as a voice acquisition unit that acquires voice data collected by the microphone, and the suspicious person detection unit 454 performs voice recognition processing on the voice data as a suspicious person detection process. It is determined whether a suspicious person exists in the monitoring target based on the character string included in the data. Specifically, the suspicious person detection unit 454 extracts a voice feature amount from the voice data, cuts out the voice by pattern matching and replaces it with a character string of the code, and an emergency situation has occurred in which the character string is stored in the storage unit in advance. It is determined that there is a suspicious person when it coincides with a dangerous phrase (eg, “help” or “make money”) whose pronunciation is sometimes predicted. In this case, the dangerous word / phrase is associated with the determination sound pressure, and the presence of the suspicious person is determined when the sound data of the monitoring target 2 includes the dangerous word / phrase and the sound pressure of the word / phrase is equal to or higher than the determination sound pressure. Is preferred.

1 通報システム
2 監視対象
2a 店舗エリア
2b 事務所エリア
3 監視カメラ
4 通報装置
41 監視情報取得部
42 通信部
43 操作部
44 記憶部
45 制御部
451モード設定部
452侵入検出部
453営業状態検出部
454不審者検出部
455通信制御部
5 監視センタ
51 センタ装置
52 ディスプレイ
6 通信回線網
7 警備センサ

DESCRIPTION OF SYMBOLS 1 Reporting system 2 Monitoring object 2a Store area 2b Office area 3 Monitoring camera 4 Notification apparatus 41 Monitoring information acquisition part 42 Communication part 43 Operation part 44 Storage part 45 Control part 451 Mode setting part 452 Intrusion detection part 453 Sales state detection part 454 Suspicious person detection unit 455 communication control unit 5 monitoring center 51 center device 52 display 6 communication line network 7 security sensor

Claims (2)

営業所を監視対象として少なくとも該監視対象が有人であるときに不審者の存在を検出し遠隔に通報する通報装置であって、
前記監視対象を区分する複数の監視区域の情報、並びに、当該複数の監視区域のうち営業区域となる監視区域の情報及び非営業区域となる監視区域の情報を記憶する記憶部と、
無人状態において設定する監視モード又は有人状態において設定する非監視モードを利用者が設定操作する操作部と、
前記操作部にて設定操作された前記監視モード又は非監視モードを前記複数の監視区域ごとに設定するモード設定部と、
前記監視モードが設定されている監視区域における侵入者を検出する侵入者検出部と、
前記複数の監視区域のうち前記営業区域となる監視区域が、前記非監視モードに設定されると前記監視対象が営業状態であることを検出し、前記監視モードに設定されると前記監視対象が営業状態でないことを検出する営業状態検出部と、
有人状態の前記監視対象に存在する不審者を検出する不審者検出処理を実行する不審者検出部と、
前記不審者が検出された場合及び前記侵入者が検出された場合に通報する通報部と、
前記不審者検出部は、前記営業状態検出部にて前記営業状態であることが検出されると前記不審者検出処理の実行を禁止し、前記営業状態検出部にて前記営業状態でないことが検出されると前記非営業区域となる監視区域において前記不審者検出処理を実行することを特徴とした通報装置。
A reporting device that detects the presence of a suspicious person when a sales office is a monitoring target and at least when the monitoring target is manned, and reports remotely,
A storage unit that stores information on a plurality of monitoring areas that divide the monitoring target, and information on monitoring areas that serve as business areas and information on monitoring areas that serve as non-business areas among the plurality of monitoring areas;
An operation unit for a user to set and operate a monitoring mode set in an unmanned state or a non-monitoring mode set in a manned state;
A mode setting unit for setting the monitoring mode or the non-monitoring mode set and operated in the operation unit for each of the plurality of monitoring areas;
An intruder detection unit for detecting an intruder in a monitoring area where the monitoring mode is set;
When a monitoring area that is the business area among the plurality of monitoring areas is set to the non-monitoring mode, it is detected that the monitoring target is in a business state, and when the monitoring area is set to the monitoring mode, the monitoring target is A business status detector for detecting that the business status is not
A suspicious person detection unit for executing a suspicious person detection process for detecting a suspicious person existing in the monitoring target in the manned state ;
A reporting unit for reporting when the suspicious person is detected and when the intruder is detected ;
The suspicious individual detecting unit, the operating said it is operating state prohibits the execution of the suspicious individual detection processing to be detected by the state detection unit, the detection may not be operating state by said operating state detecting unit Then , the suspicious person detection process is executed in the monitoring area that becomes the non-business area .
前記監視区域内の移動物体の監視情報を取得する監視情報取得部と、A monitoring information acquisition unit for acquiring monitoring information of a moving object in the monitoring area;
前記不審者検出部は、前記不審者検出処理として、前記監視情報から移動物体を抽出し該抽出した移動物体の外観又は行動が予め設定した不審パターンに合致すると不審者と判定する請求項1に記載の通報装置。The suspicious person detection unit, as the suspicious person detection process, extracts a moving object from the monitoring information, and determines that the suspicious person is a suspicious person when an appearance or behavior of the extracted moving object matches a preset suspicious pattern. The reporting device described.
JP2010096353A 2010-04-19 2010-04-19 Reporting device Active JP5520675B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010096353A JP5520675B2 (en) 2010-04-19 2010-04-19 Reporting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010096353A JP5520675B2 (en) 2010-04-19 2010-04-19 Reporting device

Publications (2)

Publication Number Publication Date
JP2011227675A JP2011227675A (en) 2011-11-10
JP5520675B2 true JP5520675B2 (en) 2014-06-11

Family

ID=45042950

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010096353A Active JP5520675B2 (en) 2010-04-19 2010-04-19 Reporting device

Country Status (1)

Country Link
JP (1) JP5520675B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019075752A (en) * 2017-10-19 2019-05-16 京セラドキュメントソリューションズ株式会社 Image forming apparatus
JP7212455B2 (en) * 2018-03-23 2023-01-25 株式会社Ihi Monitoring device and monitoring method
JP2022150242A (en) * 2021-03-26 2022-10-07 東芝Itサービス株式会社 Business information providing system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003143667A (en) * 2001-10-31 2003-05-16 Nippon Signal Co Ltd:The Shop operating state notice device, shop operation state managing center, and shop operating state notice system
JP2008016042A (en) * 2002-03-26 2008-01-24 Toshiba Corp Monitoring system, device, and method
JP4282287B2 (en) * 2002-08-23 2009-06-17 セコム株式会社 Electric lock control device
JP4493420B2 (en) * 2004-06-25 2010-06-30 セコム株式会社 Reporting device and reporting system

Also Published As

Publication number Publication date
JP2011227675A (en) 2011-11-10

Similar Documents

Publication Publication Date Title
KR101215948B1 (en) Image information masking method of monitoring system based on face recognition and body information
KR101164228B1 (en) A security system and a method using multiplex biometrics of face and body
JP5473801B2 (en) Monitoring device
US20120076356A1 (en) Anomaly detection apparatus
JP5550974B2 (en) Suspicious person detection device
JP6336709B2 (en) Security device, security method and program
JP5520675B2 (en) Reporting device
JP5444103B2 (en) Reporting device
JP5752977B2 (en) Image monitoring device
Gavaskar et al. A novel design and implementation of IoT based real-time ATM surveillance and security system
KR101286200B1 (en) Automatic recognition and response system of the armed robbers and the methods of the same
KR101524922B1 (en) Apparatus, method, and recording medium for emergency alert
JP5752975B2 (en) Image monitoring device
KR20190072323A (en) Image Monitoring System and Method for Monitoring Image
JP5649862B2 (en) Image monitoring device
JP5580683B2 (en) Reporting device
JP5580686B2 (en) Reporting device
JP2011227677A (en) Notification device
JP5586383B2 (en) Image monitoring device
JP5520676B2 (en) Reporting device
JP5444102B2 (en) Reporting device
JP5611729B2 (en) Monitoring device
JP5580692B2 (en) Reporting device
JP2012003595A (en) Notification device
JP2021087031A (en) Information processing device, information processing method, monitoring system, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130301

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130925

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131001

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140401

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140407

R150 Certificate of patent or registration of utility model

Ref document number: 5520675

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250