JP2016503913A - セキュリティ監視システム及び相応な警報触発方法 - Google Patents

セキュリティ監視システム及び相応な警報触発方法 Download PDF

Info

Publication number
JP2016503913A
JP2016503913A JP2015546813A JP2015546813A JP2016503913A JP 2016503913 A JP2016503913 A JP 2016503913A JP 2015546813 A JP2015546813 A JP 2015546813A JP 2015546813 A JP2015546813 A JP 2015546813A JP 2016503913 A JP2016503913 A JP 2016503913A
Authority
JP
Japan
Prior art keywords
image
processor
camera lens
signal
background image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015546813A
Other languages
English (en)
Other versions
JP6127152B2 (ja
Inventor
笑平 胡
笑平 胡
霞 沈
霞 沈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Boly Media Communications Shenzen Co Ltd
Original Assignee
Boly Media Communications Shenzen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Boly Media Communications Shenzen Co Ltd filed Critical Boly Media Communications Shenzen Co Ltd
Publication of JP2016503913A publication Critical patent/JP2016503913A/ja
Application granted granted Critical
Publication of JP6127152B2 publication Critical patent/JP6127152B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/19Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using infrared-radiation detection systems
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B29/00Checking or monitoring of signalling or alarm systems; Prevention or correction of operating errors, e.g. preventing unauthorised operation
    • G08B29/18Prevention or correction of operating errors
    • G08B29/183Single detectors using dual technologies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

セキュリティ監視システム及びその警報触発方法であって、方法は、第1プロセッサは赤外線センサが触発されることを表す第1信号を取得するステップと、第1信号により第1カメラレンズが第1画像を撮影するように制御するステップと、記憶された第1背景画像を取得するステップと、第1画像と第1背景画像との差異を比較するステップと、差異が予め設定された条件を満たす場合第1警報操作を触発するステップと、を含む。赤外線センサ検出と画像差異検出の共同作用の形態を採用したので、環境温度が高いことによる誤警報の確率を低下させることができる。【選択図】 図1

Description

本発明はセキュリティ監視の技術分野に関し、具体的に赤外線検出機能を有するセキュリティ監視システム及びその警報触発方法に関する。
現在、従来のグラフィック画像類セキュリティ監視製品は、主に、
主に人工観察の形態を採用して監視し、ビデオ録画をリアルタイムに観察することにより侵入者があるかどうかを発見し、大部分が公共空間に適用されるようなスピードドームカメラに類似するビデオリアルタイム監視製品と、
作用メカニズムが主に、赤外線センサ、例えば受動的赤外線検出(Passive infrared、PIR)装置により、侵入者があるかどうかを感知し、一旦、侵入者を感知する場合、撮影して画像情報を通信ネットワーク(例えば無線通信ネットワーク)によりユーザに伝送することであり、取り付けが簡単で、家庭のユーザに適用するMMS警報を採用するカメラと、を含む。
セキュリティ監視製品にとって、誤警報すると、製品の応用価値に直接に影響する。現在、ビデオ監視類製品の誤警報率を減少する方法に対して、授権公告番号がCN100446043Cであり、名称が『バイオセンサ及び画像情報融合に基づくビデオセキュリティ監視方法』の中国特許があり、赤外光検出のうえに画像認識を行うソフトウェアを増加することにより誤警報を減少する。このような方法はビデオ監視システムのみに適合し、MMS警報を採用するカメラに適用しない。前後フレームの解析でビデオのみにグラフィックス処理を行う。現在、MMS警報のカメラを採用し、単一の赤外線検出技術を利用して警報を触発し、外部環境の干渉により誤警報が発生しやすい。例えば、夏の環境温度が人体の温度に達するか又は人体の温度に近接する場合、及び監視領域が特殊環境、例えば通気口にある場合、大きな誤警報確率が発生する可能性がある。
本発明の実施例は、第1プロセッサは赤外線センサが触発されることを表す第1信号を取得するステップと、第1信号により第1カメラレンズが第1画像を撮影するように制御するステップと、記憶された第1背景画像を取得するステップと、第1画像と第1背景画像との差異を比較するステップと、差異が予め設定された条件を満たす場合第1警報操作を触発するステップと、を含むセキュリティ監視システムの警報触発方法を提供する。
本発明の実施例は、監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサと、監視領域内の画像を撮影するための第1カメラレンズと、第1背景画像を記憶するための第1メモリと、赤外線センサ、第1カメラレンズ及び第1メモリと信号で接続され、赤外線触発信号を取得し、赤外線触発信号により第1カメラレンズが第1画像を撮影するように制御し、記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較して、差異が予め設定された条件を満たすと、第1警報操作を触発するための第1プロセッサと、を含むセキュリティ監視システムを更に提供する。
本発明の実施例は、監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサと、監視領域内の画像を撮影するための第1カメラレンズと、第1背景画像を記憶するための第1メモリと、第1カメラレンズと第1メモリに信号で接続される第1プロセッサと、赤外線センサと第1プロセッサに信号で接続され、赤外線触発信号を取得し、赤外線触発信号により第1プロセッサへ第1信号を送信し、第1プロセッサが送信した第2信号により第2警報操作を触発するための第2プロセッサと、第1信号を取得し、第1信号により第1カメラレンズが第1画像を撮影するように制御し、記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較し、差異が予め設定された条件を満たすと第2プロセッサへ第2信号を送信するための第1プロセッサと、を含む他のセキュリティ監視システムを更に提供する。
本発明の実施例は、赤外線センサ検出と画像差異検出の共同作用の形態を採用しており、一方、監視カメラレンズで撮影された画像と既存の背景画像とを比較する手段を採用したので、画像解析もカメラに用いられることができ、一方、赤外線センサは触発されるうえに、更に画像差異の検出を増加し、環境温度が高いことによる誤警報の確率を低下させることができる。
以下、図面を合わせて、本発明の実施例を詳しく説明する。
図1は本発明の警報触発方法のフローチャートである。 図2は本発明の警報触発方法の他の実施形態のフローチャートである。 図3は本発明のセキュリティ監視システムの実施形態の構造模式図である。 図4は本発明のセキュリティ監視システムの他の実施形態の構造模式図である。
<実施例1>
本発明におけるセキュリティ監視システムの警報触発方法の一実施形態は図1を参照することができ、以下のステップを含む。
101.第1プロセッサはそれと信号で接続される赤外線センサが触発される時発生した赤外線触発信号を取得する。
前記赤外線センサとは、監視領域内の赤外線放射を検知することができる設備、例えばPIRであり、それが赤外線放射で触発される時赤外線触発信号が発生することができる。
理解しやすいのは、異なるセンサの配置に基づいて、発生した赤外線触発信号はデジタル信号であってもよいし、アナログ信号であってもよい。第1プロセッサの適切なインターフェースに伝送されてもよいし、従来のハードウェア/ソフトウェア処理、例えばアナログ/デジタル変換、増幅、シェーピング、フィルタリング等を行った後更に第1プロセッサの適切なインターフェースに伝送されてもよいことである。
102.第1プロセッサは赤外線触発信号により第1カメラレンズが第1画像を撮影するように制御する。
第1カメラレンズはカメラ機能のみを有するカメラレンズであってよく、その撮影領域が赤外線センサの監視領域よりも大きくするか又は小さくするか又は一部がそれに重なり、共同に被覆された領域があればよい。
本実施例において、第1カメラレンズの位置は相対的に固定されたものであってよく、勿論、これはその光学調整の機能、例えばオートフォーカスを限定しない。
他の実施例において、第1カメラレンズの位置、例えば光軸の水平方向、ピッチ角度等を調製することができ、例えば第1カメラレンズをクレードルヘッドに固定することができ、第1プロセッサはクレードルヘッドの移動/回転を制御することにより第1カメラレンズの位置を調整することができる。
103.第1プロセッサは記憶された第1背景画像を取得する。
本実施例において、システムは少なくとも1つの背景画像と相応な撮影時間を予め記憶し、これらの背景画像は第1プロセッサが第1カメラレンズを制御することにより撮影されたものであり(例えば、一日の異なる時間で撮影されることにより、背景環境が異なる照明場合での画像を取得する)、第1背景画像は記憶された背景画像における撮影時間が第1画像の撮影時間と最も近いものから選ばれたものである。理解しやすいのは、撮影時間での比較には、常に時間及びより具体的な部分(例えば分、秒)のみを考えて日付を無視することである。例えばある日の12時に撮影する第1画像は、前の日の12時と15時にそれぞれ撮影する背景画像と比べて、12時の時間とより近接すると考えることができる。勿論、他の実施例において、日付の要素を総合的に考えることもでき、例えば、撮影日付が設定範囲を超える背景画像を選択範囲から除外することがある。
他の実施例において、第1プロセッサは外部設備、例えば外部記憶設備から、入力した少なくとも1つの背景画像、例えば、技術者が先に歴史的環境画像を解析整理して得られた背景画像を取得して記憶してもよい。勿論、これらの背景画像は同様に相応な撮影時間を有する。幾つかの実施例において、第1プロセッサはユーザにユーザインターフェースを提供することにより、記憶された背景画像を表示し、及び/又はユーザが入力した指令に従って記憶された背景画像を管理操作し、前記管理操作は、導入、導出、増加、削除、修正の中の1種又は数種から選ばれる。例えば、ユーザがユーザインターフェースにより入力した指示に従って、外部メモリから背景画像をコピーするとともに記憶し、又はユーザが手動で撮影を制御して背景画像を取得する。
他の実施例において、第1プロセッサは更に第1カメラレンズが予め設定された時間間隔に従って背景画像を撮影して、記憶された背景画像を更新するように制御することにより、画像比較の結果の有効性をより良く保証する。
幾つかの実施例において、単一の第1背景画像のみを記憶してもよく、例えば、監視する必要がある時間区間は短く、又は異なる照明条件による画像差異を軽減/排除するアルゴリズムを採用する。
104.第1プロセッサは第1画像と第1背景画像との差異を比較し、差異が予め設定された条件を満たすとステップ105を実行する。
本発明は画像差異を比較することに用いられる具体的な実施形態とアルゴリズムを限定しないとともに、警報操作を触発する条件をも限定しない。前のものは現在既存又は今後に出現する可能性がある各種の画像処理、分割、比較技術から選択されることができ、後のものは当業者が本発明の考えの指導で有限回の試験により、実際な監視の必用(例えば誤警報率と警報漏れ率)に応じて合理的な設置を行う。
本実施例において、第1プロセッサは輝度と内容に対する解析を採用して第1画像と第1背景画像との差異を比較するとともに、予め設定された条件を差異が予め設定された閾値に達するように設置する。理解しやすいのは、予め設定された閾値が低くすれば、小さな画像差異でも警報に触発されることができ、警報漏れ率が低下して誤警報率が増加する可能性があり(ただし、依然として画像比較を設置しない時の誤警報率よりも高くない)、予め設定された閾値が高くすれば、大きな画像差異しか警報を触発することができず、誤警報率が低下して警報漏れ率を増加する可能性があることである。このため、実際な状況に応じて、例えば試験により、警報操作を触発する閾値を合理的に設置することができ、猫や犬などの小動物の進入により誤警報が発生することがないだけでなく、実際の侵入者の警報を漏れることもない。
例を挙げると、第1プロセッサは具体的に画像バランス輝度差分法又はカラー比較法を採用して第1画像と第1背景画像を比較する。
所謂画像バランス輝度差分法は、先に比較する必要がある2つの画像に平均輝度の均等化処理を行い、即ち輝度が暗い画像の輝度を向上させるか又は輝度が明るい画像を低下させることによりその平均輝度を他の画像と同様にさせ、そして、輝度を均等化した後の2つの画像に簡単な差分及び絶対値と閾値処理を行い、閾値処理した後の輝度差分画像(画像比較後の「差異」と見なすことができる)の非零画像点の重心と面積を、目標物体の中心とおおよそ面積と見なすことができる。
所謂カラー比較法は画像バランス輝度差分法と類似するが、比較する各画像はそれぞれの1つの輝度画像を使用せず、それぞれの2つの相対クロミナンス画像を使用する。まず、比較する各画像(第1画像と第1背景画像)に対して、その2つのクロミナンス成分(例えばYUV画像のU、V成分)を検出し、それぞれ該画像の平均輝度で割った後該画像の2つの相対クロミナンス画像を取得する。そして、比較する2つの画像におけるそれぞれの2つの相対クロミナンス画像に2つずつの差分と絶対値処理を行う。絶対値処理した2つのクロミナンス差分画像は続いて簡単な演算和(即ちu+v)又はベクトル和(即ち(u*u+v*v)1/2)を計算する。和を算出した画像に対して更に簡単な閾値処理を行い、閾値処理した後の画像(画像比較した「差異」と見なすことができる)の非零画像点の重心と面積を目標物体の中心とおおよそ面積と見なすことができる。
他の実施例において、第1プロセッサは第1画像と第1背景画像との差異により目標物体の中心及び/又は面積を算出した後、更に算出結果により第1カメラレンズのパラメータを制御し、これらのパラメータは、焦点距離、方向及び角度の中の1種又は数種から選ばれる。例えば、第1カメラレンズを、自動ズームを行うように制御し、及び/又は第1カメラレンズを置くクレードルヘッドの移動/回転を制御することにより、第1カメラレンズの位置決めを調整するとともに目標物体を追跡する。幾つかの実施例において、第1プロセッサは更にエッジまたは輪郭マッチング法(「Perception of Shape and Motion」、 Xiaoping Hu Ph.D. Thesis、 University of Illinois at Urbana−Champaign、1993を参照する)を使用して目標物体の境界と輪郭を高精度にマッチングし、その位置、運動速度及び運動方向を判断することにより、より正確な位置決めと追跡を実現する。
105.第1プロセッサは第1警報操作を触発する。
本実施例において、第1プロセッサで触発された第1警報操作は、第1画像を記憶するとともに、通信ネットワークにより第1画像をユーザに伝送することである。使用した通信ネットワークは無線又は有線通信ネットワーク、例えば移動通信ネットワーク、固定電話ネットワーク(PSTN)、デジタル電話ネットワーク(ISDN)、又はイーサネット(Ethernet)等であってよい。
他の実施例において、第1警報操作は長時間且つ明確的に目標物体の画像を記録するために、第1カメラレンズを制御して目標物体を自動追跡と撮影させる第1プロセッサを更に含んでよい。
他の実施例において、第1プロセッサも、第1画像のみを記憶してもよいし、又は第1画像のみを通信ネットワークでユーザに送信するが記憶しなくてもよいし、又は他のタイプの音、光警報等を触発してもよい。
理解しやすいのは、第1プロセッサは第1画像と第1背景画像の差異が予め設定された条件を満たしないことを判断すると、任意の操作を実行しないことができ、例えば、第1画像を記憶しないとともにそれを伝送しないことである。
本実施例の警報触発方法を採用して、赤外線センサの触発信号に対する処理、画像比較処理及び警報操作はいずれも第1プロセッサで実行され、例えば赤外線感知を採用する従来の警報カメラに画像比較処理プロセスを増加することにより実現することができる。本実施例は赤外線検知と画像比較の二重検出を採用して、環境温度が人体温度と近接する場合監視システムの誤警報率を低下させることができる。
<実施例2>
本発明のセキュリティ監視システムの警報触発方法の他の実施形態は図2を参照することができ、実施例1と比べて、本実施例の主な相違点は、第1プロセッサが画像差異を比較する操作を主に実行し、第2プロセッサが赤外線センサの触発信号に対する処理及び具体的な警報操作を実行する役割を果たすことである。該方法は、以下のステップを含む。
201.第2プロセッサはそれと信号で接続される赤外線センサが触発される時発生した赤外線触発信号を取得する。本ステップの具体的な内容について、実施例1におけるステップ101と関連する記述を参照することができる。
202.第2プロセッサは取得した赤外線触発信号により第1プロセッサへ赤外線センサが触発されることを表す第1信号を送信する。第1信号は具体的に第1プロセッサが理解可能な任意の形態、例えば単一のレベル変化、又はデータ信号等を採用することができる。
203.第1プロセッサは第1信号を取得する。実施例1のステップ101を合わせて、第1プロセッサで取得した第1信号は赤外線センサが触発される時発生した赤外線触発信号であってもよいし、例えば第2プロセッサで送信した赤外線センサが触発されることを表す信号であってもよいことが見られる。
204.第1プロセッサは第1信号により第1カメラレンズが第1画像を撮影するように制御する。
205.第1プロセッサは記憶された第1背景画像を取得する。
206.第1プロセッサは第1画像と第1背景画像との差異を比較し、差異が予め設定された条件を満たすとステップ207を実行する。
上記ステップ204−206の具体的な内容について、実施例1におけるステップ102−104と関連する記述をそれぞれ参照することができる。
207.第1プロセッサは第2プロセッサへ第2信号を送信することにより、第2プロセッサが警報操作を触発するように指示する。実施例1のステップ105を合わせて、第1プロセッサが画像比較検出を通過した後触発した第1警報操が具体的な警報操作であってもよいし、他のプロセッサを触発して相応な警報操作を実行してもよいことが見られる。
208.第2プロセッサは第2信号により第2カメラレンズが第2画像を撮影するように制御し、第2警報操作を触発する。
本実施例において、第2プロセッサは第2信号を取得した後第2画像を撮影する。他の実施例において、第2プロセッサも赤外線触発信号を取得した後第2画像(図2において点線ブロックで表す)を撮影することができる。
本実施例において、第2プロセッサが触発した第2警報操作を第2画像として記憶し、及び/又は通信ネットワークにより第2画像をユーザに送信する。他の実施例において、第1プロセッサも第2信号を第2プロセッサに送信する時、更に第1カメラレンズで撮影された第1画像を第2プロセッサに送信することができ、このように、第2プロセッサが実行する警報操作は、相応的に、第1画像を記憶するか、及び/又は通信ネットワークにより第1画像をユーザに伝送することであってよい。なお、第1プロセッサも目標物体に自動追跡と撮影を行うことができ、且つ相応な画像を第2プロセッサに伝送し、第2プロセッサで記憶するか及び/又はユーザ等の操作に伝送することができる。
本実施例の警報触発方法を採用して、赤外線センサの触発信号に対する処理と画像比較処理はそれぞれ異なるプロセッサで実行され、従来の赤外線感知を採用する警報カメラに独立的な画像比較処理に用いるシステム(第1プロセッサと第1カメラレンズ等を含む)を設置することにより実現され、赤外線感知を採用する従来の警報カメラのメインプロセッサは第2プロセッサに相当し、そのメインカメラレンズは第2カメラレンズに相当し、増設された背景画像の比較解析に用いるサブプロセッサが第1プロセッサに相当し、撮影比較画像(第1画像)のサブカメラレンズは第1カメラレンズに相当する。画像比較処理プロセスは独立的なモジュールを採用して実行するので、もとのシステムリソースを占用せず、監視システム全体の応答をよりタイムリー且つ高速化にさせる。また、一般的には、メインカメラレンズがサブカメラレンズよりも良い配置、例えばより高い解像度、より良いイメージング効果等があるので、実際な応用において、メインカメラレンズで撮影された第2画像を記憶と伝送する手段を好適に選択することができ、サブカメラレンズで撮影された第1画像のみを背景比較解析に用いる。
<実施例3>
本発明のセキュリティ監視システムの一実施形態は図3を参照することができる。本実施例のセキュリティ監視システムは実施例1に関連する警報触発方法を実行することに用いられることができる。構造は、
監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサ301と、
監視領域内の画像を撮影するための第1カメラレンズ302と、
第1背景画像を記憶するための第1メモリ303と、
赤外線センサ301、第1カメラレンズ302及び第1メモリ303と信号で接続された第1プロセッサ304と、を備え、前記第1プロセッサ304はプログラムを運行して以下のステップを含む方法を実行することに用いられる:赤外線センサ301が発生した赤外線触発信号を取得し、取得した赤外線触発信号により第1カメラレンズ302が第1画像を撮影するように制御し、第1メモリ303で記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較し、該差異が予め設定された条件を満たすと、第1警報操作、例えば第1画像を記憶し、及び/又は通信ネットワーク(未図示)により第1画像をユーザに伝送することを触発する。
本実施例において、第1画像は第1メモリ303に記憶され、背景画像と同じメモリを使用する。他の実施例において、第1プロセッサも第1画像を他のメモリ(未図示)に記憶することができる。
幾つかの実施例において、マルチスペクトルを感知することができるカメラレンズを第1カメラレンズとすることができる。所謂マルチスペクトルは、可視光、赤外線光、紫外線光の中の1種又は任意の組合せから選ばれる。マルチスペクトルカメラレンズは一般的なカメラレンズよりも豊かなスペクトル情報、例えば赤外線、紫外線スペクトルを採集することができるので、より正確な画像比較の依拠を提供することができる。なお、マルチスペクトルカメラレンズもより広い環境条件で作動することができ、例えば赤外線光を感知可能なマルチスペクトルカメラレンズは暗い環境や夜で正常に作動することができる。
<実施例4>
本発明のセキュリティ監視システムの他の実施形態は図4を参照することができ、本実施例のセキュリティ監視システムは実施例2に関する警報触発方法を実行することに用いられる。構造は、
監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサ401と、
監視領域内の画像を撮影するための第1カメラレンズ402と、
第1背景画像を記憶するための第1メモリ403と、
第1カメラレンズ402と第1メモリ403に信号で接続される第1プロセッサ404と、
監視領域内の画像を撮影するための第2カメラレンズ405と、
第2カメラレンズ405で撮影された画像を記憶する第2メモリ406と、
赤外線センサ401、第1プロセッサ404、第2カメラレンズ405及び第2メモリ406と信号で接続された第2プロセッサ407と、を備え、前記第2プロセッサ407はプログラムを運行して以下のステップを含む方法を実行することに用いられる:赤外線センサ401が発生した赤外線触発信号を取得し、取得した赤外線触発信号により第1プロセッサ404へ第1信号を送信し、第1プロセッサ404が送信した第2信号により第2カメラレンズ405が第2画像を撮影するように制御するとともに第2警報操作を触発し、例えば第2メモリ406に第2画像を記憶するか及び/又は通信ネットワーク(未図示)により第2画像をユーザに送信する。
第1プロセッサ404はプログラムを運行して以下のステップを含む方法を実行することに用いられる:第1信号を取得し、第1信号により第1カメラレンズ402が第1画像を撮影するように制御し、第1メモリ403で記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較し、前記差異は予め設定された条件を満たすと第2プロセッサ405へ第2信号を送信する。
本実施例において、第2プロセッサは、第1プロセッサが送信した、画像比較検出が通過したことを表す第2信号を受信した後、再び撮影して第2画像を警報画像として記憶し、このため、システムに第2カメラレンズと第2メモリが設置される。
他の実施例において、第2プロセッサは、赤外線触発信号を取得した後第2カメラレンズが第2画像を撮影するように制御してもよいが、第2信号を取得した後しか第2画像を記憶及び/又は伝送する操作を触発することができない。
他の実施例において、第1プロセッサは更に第1画像を警報画像として第2プロセッサに伝送すると、システムに第2カメラレンズを設置する必要がなく、ひいては第2メモリを設置する必要もなく、例えば第1画像を第1メモリに記憶することができる。
幾つかの実施例において、マルチスペクトルを感知するカメラレンズを第1カメラレンズ及び/又は第2カメラレンズとして使用することができ、それにより、より豊かな、正確な画像情報を記録し、又はより広い監視環境に適応する。
本実施例のセキュリティ監視システムを採用すると、独立的な部材(第1プロセッサ等)により画像比較検出を行い、警報カメラ全体の作動速度を向上させることができ、システムの触発に必要な時間を減少し、警報漏れ率を低下させる。
以上、具体的な例を応用して本発明の原理及び実施形態を説明しており、以上の実施形態はただ、本発明を理解しやすくするために記述したものだけで、本発明を限定するためのものと考えるべきではないことを理解すべきである。当業者にとって、本発明の考えにより、上記具体実施形態を変化することができる。

Claims (14)

  1. 第1プロセッサは赤外線センサが触発されることを表す第1信号を取得するステップと、
    第1信号により第1カメラレンズが第1画像を撮影するように制御するステップと、
    記憶された第1背景画像を取得するステップと、
    第1画像と第1背景画像との差異を比較するステップと、
    前記差異が予め設定された条件を満たすと、第1警報操作を触発するステップと、を含むことを特徴とするセキュリティ監視システムの警報触発方法。
  2. 前記第1プロセッサで触発された第1警報操作は、第1画像を記憶すること、及び/又は通信ネットワークにより第1画像をユーザに伝送すること、を含むことを特徴とする請求項1に記載の方法。
  3. 前記第1プロセッサで触発された第1警報操作は第2プロセッサへ第2信号を送信することを含み、前記方法は、
    第2プロセッサは赤外線センサが触発される時発生した赤外線触発信号を取得し、前記赤外線触発信号により第1プロセッサへ前記第1信号を送信するステップと、
    第2プロセッサは前記第2信号により第2警報操作を触発するステップと、を更に含むことを特徴とする請求項1に記載の方法。
  4. 第2プロセッサは前記赤外線触発信号、又は前記第2信号により、第2カメラレンズが第2画像を撮影するように制御することを更に含み、
    前記第2プロセッサで触発された第2警報操作は第2画像を記憶すること、及び/又は通信ネットワークにより第2画像をユーザに伝送することを含むことを特徴とする請求項1に記載の方法。
  5. 第1プロセッサは第1カメラレンズが少なくとも1つの背景画像を撮影するように制御するか、又は入力した少なくとも1つの背景画像を取得し、前記少なくとも1つの背景画像と相応な撮影時間を記憶するステップと、前記第1背景画像は記憶された背景画像における撮影時間が第1画像の撮影時間に最も近いものから選ばれるステップと、を更に含むことを特徴とする請求項1に記載の方法。
  6. 第1プロセッサは第1カメラレンズが予め設定された時間間隔に応じて背景画像を撮影し、記憶された背景画像を更新するように制御することを更に含むことを特徴とする請求項5に記載の方法。
  7. 前記の第1画像と第1背景画像との差異を比較することは、輝度と内容の解析比較を行うことを含み、前記予め設定された条件は、差異が予め設定された閾値に達することを含むことを特徴とする請求項1に記載の方法。
  8. 第1プロセッサはユーザにユーザインターフェースを提供することにより、記憶された背景画像を表示すること、及び/又はユーザが入力した指令に従って記憶された背景画像を管理操作し、前記管理操作は、導入、導出、増加、削除及び修正の1種又は数種から選ばれることを更に含むことを特徴とする請求項1〜7のいずれか一項に記載の方法。
  9. 第1プロセッサは第1画像と第1背景画像との差異により目標物体の中心及び/又は面積を計算し、算出結果により第1カメラレンズのパラメータを制御し、前記パラメータは焦点距離、方向、角度の中の1種又は数種から選ばれることを更に含むことを特徴とする請求項1〜7のいずれか一項に記載の方法。
  10. 監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサと、
    監視領域内の画像を撮影するための第1カメラレンズと、
    第1背景画像を記憶するための第1メモリと、
    前記赤外線センサ、第1カメラレンズ及び第1メモリと信号で接続された第1プロセッサと、を備え、前記第1プロセッサはプログラムを運行して以下のステップを含む方法を実行することに用いられる:前記赤外線触発信号を取得し、前記赤外線触発信号により第1カメラレンズが第1画像を撮影するように制御し、記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較し、前記差異は予め設定された条件を満たすと、第1警報操作を触発することを特徴とするセキュリティ監視システム。
  11. 前記第1カメラレンズはマルチスペクトルを感知可能なカメラレンズであり、前記マルチスペクトルが可視光、赤外線光及び紫外線光の中の1種又は任意の組合せから選ばれることを特徴とする請求項10に記載のシステム。
  12. 監視領域内の赤外線放射を検知し、赤外線放射で触発される時赤外線触発信号が発生するための赤外線センサと、
    監視領域内の画像を撮影するための第1カメラレンズと、
    第1背景画像を記憶するための第1メモリと、
    第1カメラレンズと第1メモリに信号で接続される第1プロセッサと、
    前記赤外線センサと第1プロセッサに信号で接続された第2プロセッサと、を備え、前記第2プロセッサはプログラムを運行して以下のステップを含む方法を実行することに用いられる:前記赤外線触発信号を取得し、前記赤外線触発信号により第1プロセッサへ第1信号を送信し、第1プロセッサが送信した第2信号により第2警報操作を触発し、
    第1プロセッサはプログラムを運行して以下のステップを含む方法を実行することに用いられる:第1信号を取得し、第1信号により第1カメラレンズが第1画像を撮影するように制御し、記憶された第1背景画像を取得し、第1画像と第1背景画像との差異を比較し、前記差異は予め設定された条件を満たすと第2プロセッサへ第2信号を送信することを特徴とするセキュリティ監視システム。
  13. 監視領域内の画像を撮影するための第2カメラレンズと、
    前記第2カメラレンズで撮影された画像を記憶するための第2メモリと、を更に含み、
    前記第2プロセッサは更に第2カメラレンズと第2メモリに信号で接続され、第2プロセッサは更にプログラムを運行して以下のステップを含む方法を実行することに用いられる:前記赤外線触発信号、又は前記第2信号により、第2カメラレンズが第2画像を撮影するように制御し、
    前記第2警報操作は、第2画像を記憶すること、及び/又は通信ネットワークにより第2画像をユーザに伝送すること、を含むことを特徴とする請求項12に記載のシステム。
  14. 前記第1カメラレンズ及び/又は第2カメラレンズはマルチスペクトルを感知可能なカメラレンズであり、前記マルチスペクトルは、可視光、赤外線光、紫外線光の中の1種又は任意の組合せから選ばれることを特徴とする請求項13に記載のシステム。
JP2015546813A 2012-12-17 2013-08-05 セキュリティ監視システム及び相応な警報触発方法 Active JP6127152B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201210547337.5 2012-12-17
CN201210547337.5A CN103871186A (zh) 2012-12-17 2012-12-17 安防监控系统及相应的报警触发方法
PCT/CN2013/080785 WO2014094437A1 (zh) 2012-12-17 2013-08-05 安防监控系统及相应的报警触发方法

Publications (2)

Publication Number Publication Date
JP2016503913A true JP2016503913A (ja) 2016-02-08
JP6127152B2 JP6127152B2 (ja) 2017-05-10

Family

ID=50909681

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015546813A Active JP6127152B2 (ja) 2012-12-17 2013-08-05 セキュリティ監視システム及び相応な警報触発方法

Country Status (9)

Country Link
US (1) US20160189501A1 (ja)
JP (1) JP6127152B2 (ja)
CN (1) CN103871186A (ja)
AU (1) AU2013362602A1 (ja)
CA (1) CA2894416A1 (ja)
DE (1) DE112013005580T5 (ja)
GB (1) GB2523283A (ja)
RU (1) RU2628745C2 (ja)
WO (1) WO2014094437A1 (ja)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015109277A1 (en) * 2014-01-17 2015-07-23 Gojo Industries, Inc. Sensor configuration
CN104079881B (zh) * 2014-07-01 2017-09-12 中磊电子(苏州)有限公司 监控装置与其相关的监控方法
CN104469305B (zh) * 2014-12-04 2019-02-22 国家电网公司 电网视频监控设备的故障检测方法和装置
CN104519256A (zh) * 2014-12-26 2015-04-15 广东光阵光电科技有限公司 Vtm机红外触发拍摄摄像模组及其拍摄方法
CN104952191A (zh) * 2015-06-25 2015-09-30 苏州昊枫环保科技有限公司 基于多方向区域温度检测的室内监控系统
US9940820B2 (en) 2015-10-29 2018-04-10 Honeywell International Inc. Systems and methods for verified threat detection
CN105321287A (zh) * 2015-11-05 2016-02-10 南京邮电大学 一种基于pcDuino的档案库房安防系统
KR20170059704A (ko) * 2015-11-23 2017-05-31 삼성전자주식회사 촬영 장치 및 그 동작 방법
CN105788125A (zh) * 2016-04-07 2016-07-20 武汉烽火众智数字技术有限责任公司 一种人体侦测装置及其方法
CN105955172B (zh) * 2016-07-07 2020-01-24 广东工业大学 一种开放小区的智能安保系统
CN105957285A (zh) * 2016-07-07 2016-09-21 中国地质大学(武汉) 一种图像监控报警方法
CN106157504A (zh) * 2016-08-02 2016-11-23 四川长虹电器股份有限公司 智能报警系统及其报警方法
CN109792508B (zh) * 2016-09-29 2021-07-13 菲力尔系统公司 使用热成像分析法的故障安全检测
CN108200329A (zh) * 2017-12-05 2018-06-22 湖南海翼电子商务股份有限公司 摄像装置及其检测启动方法
CN109905643A (zh) * 2017-12-08 2019-06-18 神讯电脑(昆山)有限公司 监视系统的控制方法
US11405581B2 (en) 2017-12-26 2022-08-02 Pixart Imaging Inc. Motion detection methods and image sensor devices capable of generating ranking list of regions of interest and pre-recording monitoring images
US10499019B2 (en) * 2017-12-26 2019-12-03 Primesensor Technology Inc. Motion detection device and motion detection method thereof
US10509968B2 (en) * 2018-01-30 2019-12-17 National Chung Shan Institute Of Science And Technology Data fusion based safety surveillance system and method
CN108564750A (zh) * 2018-04-24 2018-09-21 广东美的制冷设备有限公司 安防报警方法、装置及家电设备
CN109166261B (zh) * 2018-10-11 2022-06-07 平安科技(深圳)有限公司 基于图像识别的图像处理方法、装置、设备及存储介质
CN109444052A (zh) * 2018-10-29 2019-03-08 合刃科技(武汉)有限公司 高光谱成像装置、成像系统及监控方法
CN111160067A (zh) * 2018-11-07 2020-05-15 北京奇虎科技有限公司 危险识别方法、装置、电子设备及计算机可读存储介质
CN109618130A (zh) * 2018-11-21 2019-04-12 移康智能科技(上海)股份有限公司 一种告警方法、智能猫眼及告警系统
CN109543650A (zh) * 2018-12-04 2019-03-29 钟祥博谦信息科技有限公司 仓库智能监控方法和系统
CN110111520A (zh) * 2019-06-13 2019-08-09 广东恩胜科技有限公司 一种工地周界的安防报警系统
CN110944111B (zh) * 2019-10-27 2020-09-08 云南能投信息产业开发有限公司 基于通道检测的大数据分析平台、方法及存储介质
WO2021114265A1 (zh) * 2019-12-13 2021-06-17 深圳市大疆创新科技有限公司 设备/集成设备的工作方法、装置、可移动设备、介质
KR20210079823A (ko) * 2019-12-20 2021-06-30 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN111199629B (zh) * 2020-02-18 2021-11-23 普宙科技(深圳)有限公司 热源识别装置、无人机以及热源识别方法
CN111366922A (zh) * 2020-03-17 2020-07-03 森思泰克河北科技有限公司 一种安防雷达预警方法、装置及雷达终端
CN111757055B (zh) * 2020-06-11 2021-06-25 杭州觅睿科技股份有限公司 基于低功耗监控装置的抓拍方法和系统
CN113936341A (zh) * 2021-09-30 2022-01-14 深圳市智岩科技有限公司 触发识别方法、装置、电子设备及存储介质
CN115798161B (zh) * 2022-11-11 2024-02-23 国网河南省电力公司商丘供电公司 一种基于5g网络的变电站声光预警方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0332869U (ja) * 1989-08-03 1991-03-29
JPH11304582A (ja) * 1998-04-27 1999-11-05 Hochiki Corp 異常監視装置
JP2000209573A (ja) * 1999-01-20 2000-07-28 Fujitsu General Ltd 侵入者検出システム
JP2001043458A (ja) * 1999-07-29 2001-02-16 Oki Electric Ind Co Ltd 背景画像生成システム
JP2003219404A (ja) * 2002-01-18 2003-07-31 Fujitsu General Ltd 侵入者検出装置
JP2005051511A (ja) * 2003-07-29 2005-02-24 Sony Corp 状態検出装置および方法、画像処理装置および方法、プログラム、プログラム記録媒体、データ構造、並びにデータ記録媒体
JP2008219452A (ja) * 2007-03-05 2008-09-18 Mitsubishi Electric Corp カメラ監視装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS56160183A (en) * 1980-05-09 1981-12-09 Hajime Sangyo Kk Method and device for monitoring
US4857912A (en) * 1988-07-27 1989-08-15 The United States Of America As Represented By The Secretary Of The Navy Intelligent security assessment system
US5734335A (en) * 1989-12-20 1998-03-31 Finmeccanica S.P.A. Forest surveillance and monitoring system for the early detection and reporting of forest fires
CN2160135Y (zh) * 1993-03-02 1994-03-30 朱福生 多功能防盗器
GB9609406D0 (en) * 1996-05-03 1996-07-10 Kelly Simon The "Pixxi" televisual surveillance alarm system
JPH10308939A (ja) * 1997-05-08 1998-11-17 Nec Corp 赤外線監視システム
US6545601B1 (en) * 1999-02-25 2003-04-08 David A. Monroe Ground based security surveillance system for aircraft and other commercial vehicles
US20020163577A1 (en) * 2001-05-07 2002-11-07 Comtrak Technologies, Inc. Event detection in a video recording system
JP3698420B2 (ja) * 2001-06-12 2005-09-21 シャープ株式会社 画像監視装置及び画像監視方法及び画像監視処理プログラム
JP2004266376A (ja) * 2003-02-25 2004-09-24 Matsushita Electric Ind Co Ltd 映像合成装置
CN2653612Y (zh) * 2003-06-12 2004-11-03 曹春旭 彩信图像报警装置
JP4088971B2 (ja) * 2003-12-25 2008-05-21 船井電機株式会社 監視カメラ、監視カメラシステム
US9036028B2 (en) * 2005-09-02 2015-05-19 Sensormatic Electronics, LLC Object tracking and alerts
JP4618176B2 (ja) * 2006-03-22 2011-01-26 船井電機株式会社 監視装置
US7636033B2 (en) * 2006-04-05 2009-12-22 Larry Golden Multi sensor detection, stall to stop and lock disabling system
CN100446043C (zh) * 2007-02-06 2008-12-24 重庆大学 基于生物传感和图像信息融合的视频安防监控方法
EP2174310A4 (en) * 2007-07-16 2013-08-21 Cernium Corp DEVICE AND METHOD FOR VERIFYING VIDEO ALARMS
CN101587630A (zh) * 2008-05-21 2009-11-25 上海新联纬讯科技发展有限公司 可过滤误报警的智能视频监控系统
JP5042177B2 (ja) * 2008-09-12 2012-10-03 セコム株式会社 画像センサ
CN201662861U (zh) * 2010-04-23 2010-12-01 泉州市科立信安防电子有限公司 入侵探测设备
US9449482B2 (en) * 2010-07-14 2016-09-20 Honeywell International Inc. Method and apparatus for activating and deactivating video cameras in a security system
US9328882B2 (en) * 2010-09-13 2016-05-03 Exposure Illumination Architects, Inc. Methods and apparatus for ceiling mounted systems
CN201893002U (zh) * 2010-12-13 2011-07-06 西南铝业(集团)有限责任公司 人体感应安全保护装置
CN102280002A (zh) * 2011-06-27 2011-12-14 厦门青年网络通讯股份有限公司 一种可降低误报率的双模报警装置及方法
JP6446357B2 (ja) * 2013-05-30 2018-12-26 株式会社ニコン 撮像システム
US20150062340A1 (en) * 2013-09-03 2015-03-05 International Business Machines Corporation High Occupancy Toll Lane Compliance

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0332869U (ja) * 1989-08-03 1991-03-29
JPH11304582A (ja) * 1998-04-27 1999-11-05 Hochiki Corp 異常監視装置
JP2000209573A (ja) * 1999-01-20 2000-07-28 Fujitsu General Ltd 侵入者検出システム
JP2001043458A (ja) * 1999-07-29 2001-02-16 Oki Electric Ind Co Ltd 背景画像生成システム
JP2003219404A (ja) * 2002-01-18 2003-07-31 Fujitsu General Ltd 侵入者検出装置
JP2005051511A (ja) * 2003-07-29 2005-02-24 Sony Corp 状態検出装置および方法、画像処理装置および方法、プログラム、プログラム記録媒体、データ構造、並びにデータ記録媒体
JP2008219452A (ja) * 2007-03-05 2008-09-18 Mitsubishi Electric Corp カメラ監視装置

Also Published As

Publication number Publication date
GB2523283A (en) 2015-08-19
US20160189501A1 (en) 2016-06-30
AU2013362602A1 (en) 2015-07-02
RU2628745C2 (ru) 2017-08-21
DE112013005580T5 (de) 2015-08-27
RU2015129086A (ru) 2017-01-23
JP6127152B2 (ja) 2017-05-10
CA2894416A1 (en) 2014-06-26
CN103871186A (zh) 2014-06-18
GB201510646D0 (en) 2015-07-29
WO2014094437A1 (zh) 2014-06-26

Similar Documents

Publication Publication Date Title
JP6127152B2 (ja) セキュリティ監視システム及び相応な警報触発方法
WO2020057355A1 (zh) 一种三维建模的方法及其装置
CN109040709B (zh) 视频监控方法及装置、监控服务器及视频监控系统
US11308777B2 (en) Image capturing apparatus with variable event detecting condition
US9224278B2 (en) Automated method and system for detecting the presence of a lit cigarette
TWI466545B (zh) 攝影機裝置及利用其進行影像監控的方法
CN103929592A (zh) 全方位智能监控设备及方法
KR101464344B1 (ko) 감시 영상의 정상 상태 학습을 통한 이상 상태 감지 방법과 이를 적용한 감시 카메라 및 영상 관리 시스템
JP2011165008A (ja) 画像認識装置および方法
WO2007118109A2 (en) Method and apparatus for providing motion control signals between a fixed camera and a ptz camera
KR20100064388A (ko) 촬상 장치, 촬상 방법 및 컴퓨터 판독가능한 기록 매체
WO2020057353A1 (zh) 基于高速球的物体跟踪方法、监控服务器、视频监控系统
US11102453B2 (en) Analytics based lighting for network cameras
KR101454644B1 (ko) 보행자 추적기를 이용한 서성거림을 탐지하는 방법
US9202283B2 (en) Method and device for detecting falls by image analysis
KR101944374B1 (ko) 이상 개체 검출 장치 및 방법, 이를 포함하는 촬상 장치
US11113798B2 (en) Collating system, collating method, and camera device
JP5911227B2 (ja) 判定装置、判定方法及びプログラム
JP2019153986A (ja) 監視システム、管理装置、監視方法、コンピュータプログラム、及び記憶媒体
JP2010182021A (ja) 画像監視システム
KR101410985B1 (ko) 감시카메라를 이용한 감시시스템 및 감시장치와 그 감시방법
JP2012124658A (ja) 特定人物検知システムおよび検知方法
US20160353052A1 (en) Adjusting length of living images
JP6700950B2 (ja) 監視システム
KR100982342B1 (ko) 지능형 방범 시스템 및 그 구동방법

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170208

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170410

R150 Certificate of patent or registration of utility model

Ref document number: 6127152

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150