JP5356094B2 - 火災検出システム - Google Patents

火災検出システム Download PDF

Info

Publication number
JP5356094B2
JP5356094B2 JP2009086267A JP2009086267A JP5356094B2 JP 5356094 B2 JP5356094 B2 JP 5356094B2 JP 2009086267 A JP2009086267 A JP 2009086267A JP 2009086267 A JP2009086267 A JP 2009086267A JP 5356094 B2 JP5356094 B2 JP 5356094B2
Authority
JP
Japan
Prior art keywords
detection
algorithm
fire
smoke
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009086267A
Other languages
English (en)
Other versions
JP2010238028A (ja
Inventor
貴俊 山岸
主久 中野
賢治 寺田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nohmi Bosai Ltd
University of Tokushima
Original Assignee
Nohmi Bosai Ltd
University of Tokushima
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nohmi Bosai Ltd, University of Tokushima filed Critical Nohmi Bosai Ltd
Priority to JP2009086267A priority Critical patent/JP5356094B2/ja
Publication of JP2010238028A publication Critical patent/JP2010238028A/ja
Application granted granted Critical
Publication of JP5356094B2 publication Critical patent/JP5356094B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fire-Detection Mechanisms (AREA)
  • Alarm Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、監視カメラにより撮像された画像に対して画像処理を施すことにより、火災を検出する火災検出システムに関し、特に、複数の検出アルゴリズムを備えた火災検出システムに関する。
火災発生時の初期消火、あるいは火災事故における逃げ遅れの防止の観点から、火災あるいは煙の早期発見が非常に重要となっている。そこで、火災検出システムの分野においては、監視カメラにより撮像された画像に対して画像処理を施すことで、火災要因の早期発見を行うことが研究されている。
2次元画像から火災を検出する方法は、これまで多種多様な方法が提案されており、実用化されているものもある。その一例として、トンネル内などにカメラを設置し、カメラにより撮像された画像に対して画像処理を施すことで、煙を検出するものがある(例えば、特許文献1参照)。
特許第3909665号公報
しかしながら、従来技術には次のような課題がある。
火災の検出対象は、炎と煙に大別される。さらに、同じ煙でも、例えば、火源を伴い動きの早い流動する煙、薄く緩慢に拡散する煙、濃く緩慢に拡散する煙などがある。従って、煙のみを検出するにしても、拡散の仕方や流速等により性状が全く異なってしまい、この様な種々の性状の火災現象を高精度に検出することは、極めて困難であった。
また、監視環境によっては、その火災性状を検出することが困難な場合が考えられる。さらには、同じ監視環境である1画面内においても、火災性状ごとで、適した監視範囲が異なることも考えられる。従って、従来の火災検出システムでは、監視環境、監視範囲に応じて、所望の性状の火災現象を高精度に検出することは、極めて困難であった。
本発明は、上述のような課題を解決するためになされたものであり、種々の火災性状を高精度に検出することのできる火災検出システムを得ることを目的とする。
本発明に係る火災検出システムは、カメラにより撮像された監視対象の2次元画像と、あらかじめ記憶部に記憶された基準画像に基づいて、画面をマトリクス状に分割して、分割された複数の検出領域を検出の最小単位として画像処理を施すことにより火災を検出する画像処理部を備えた火災検出システムにおいて、画像処理部は、火源を伴い動きの早い流動する煙を検出するアルゴリズム、薄く緩慢に拡散する煙を検出するアルゴリズム、および濃く緩慢に拡散する煙を検出するアルゴリズムの3つのアルゴリズムがそれぞれ別個に検出処理を実行できるように併存して実装されており、3つのアルゴリズムのうちの一部のアルゴリズムの実行を停止させるように切り替え設定する第1機能と、それぞれのアルゴリズムごとに独立して複数の検出領域のサイズに相当する最小単位を個別に設定する第2機能と、第2機能によりそれぞれのアルゴリズムごとに独立して個別設定された複数の検出領域のうちの一部に相当する1以上の検出領域を非検出領域としてマスク処理を施し、検出アルゴリズムごとに画面内で検出処理を実行しない領域を独立して設定する第3機能とを有するものである。
本発明に係る火災検出システムによれば、火災の性状ごとに感度を高めた検出アルゴリズムを複数実装させ、並列実行させることにより、種々の火災性状を高精度に検出することのできる火災検出システムを得ることができる。
本発明の実施の形態1における火災検出の全体処理を示すフローチャートである。 本発明の実施の形態1の火災検出システムにおける炎検出の一連の処理を示したフローチャートである。 本発明の実施の形態1の火災検出システムにおける流動煙検出の一連の処理を示したフローチャートである。 本発明の実施の形態1の火災検出システムにおける薄い煙検出の一連の処理を示したフローチャートである。 本発明の実施の形態1の火災検出システムにおける濃い煙検出の一連の処理を示したフローチャートである。
以下、本発明の火災検出システムの好適な実施の形態につき図面を用いて説明する。なお、以下においては、種々の火災性状として、炎、緩慢な薄い煙、緩慢な濃い煙、早く流動する煙、の4種類を例に説明するが、他の火災性状についても、適用できることはいうまでもない。
実施の形態1.
従来、煙と炎を検出させるアルゴリズムを別個に実装しているシステムはあった。これに対して、本実施の形態1における火災検出システムは、煙と炎を検出するアルゴリズムを併存して実装するとともに、特に煙に関しても、性状ごとに別個に検出するアルゴリズムを併存して実装している点を技術的特徴とする。
煙を検出するに当たっては、監視画像がどのような環境の、何処を監視しているかによって大きく見え方が異なる点に注意する必要がある。例えば、燃え盛る炎から発生する煙の火源付近を見れば、煙の流速は早く、大きなうねりを伴った流れを確認できる。一方、火源から遠い場所を見れば、煙は薄められ、熱量も失われて、はっきりとした流れを観測することはできない。
また、じわじわと燻焼する火源から発生する煙は、火源付近を見ても大きな熱量を伴わないので、ゆっくりと流れていく。このように、煙は、発生条件、観測条件が異なれば、見え方は全く異なり、これを同じ手法で高精度に検出することは困難である。
そこで、本実施の形態1における火災検出システムは、炎、流動する煙、薄く緩慢に拡散する煙、濃く緩慢に拡散する煙、の4種類の検出対象に対して、別々のアルゴリズムを実装し、それぞれを並列に実行できるように構成されている。
さらに、実装される複数のアルゴリズムのそれぞれは、以下の2つの機能を有している。
[機能1]検出領域細分化機能:アルゴリズムごとに独立して、画面を最適なサイズに例えばマトリクス状に分割して複数の検出領域を構成し、それら検出領域を検出の最小単位として火災検出を行なう機能。
[機能2]マスク機能:アルゴリズムごとに独立した検出マスクマップを持たせ、それぞれのアルゴリズムに適した検出領域を個別に設定することができる機能。
これらの機能を有することで、例えば、炎を検出対象とする場合には、炎の発生の可能性の低い検出領域を監視しないようにすれば、誤報の確率を低く抑えることができる。例えば、監視画像が室内の場合にあっては、その室内の上部である天井付近などは炎が発生する可能性は低いので検出対象領域から除外し、画面の下側にだけ検出領域を設定するようにする。炎検出用のアルゴリズムに関して、画面の上側の検出領域にはマスク機能によりマスク処理を施すことで、画面の下側だけ検出することで、炎の誤報源となりやすい光源を監視対象から外すことができる。また、薄い緩慢に拡散する煙を薄い煙検出用のアルゴリズムで検出する場合には、緩慢煙は、下方から上方へと移動して、天井付近に滞留しがちであるので、炎とは逆に画面の下側領域にマスク処理を施して、天井付近だけを観測するように検出領域を設定すれば、通行人などの影響を小さくできる。なお、濃い緩慢煙に関しては、薄い緩慢煙と似たような挙動を示すものとして、同じようなマスク設定を行うようにしればよい。
また、流動煙については、画面の下側に存在する火源の近傍から発生するので、画面の上側ではなく、むしろ、画面の下側に検出領域を設定し、上側の検出領域にはマスク処理を施すようにすると、対象となる流動煙を検出しやすく、誤報を生じにくくすることができる。
このように、個々の現象に適した検出領域の設定、およびマスク設定を、別個に行うことによって、不要な計算処理を抑え、より精度の高い火災検出が可能となる。
さらに、次のような新たな機能を持たせることもできる。
[機能3]アルゴリズムON/OFF切り替え機能:各検出アルゴリズムを、個別にON/OFFさせる機能。
例えば、吹き抜け等の高い天井の建物の上部を監視している画像などでは、火源付近を観測することはできない。すなわち、このような領域の監視画像では、流動する煙や炎そのものを観測することは、設置条件上、困難である。
このような状況では、流動する煙を検出するアルゴリズム、および炎を検出するアルゴリズムは、発生の有無を判断すること自体が無意味であり、これらのアルゴリズムを機能させても、消費する計算能力および誤報率の増大といったデメリットを招くのみである。
そこで、このような場合に上述の機能3を働かせることで、設置条件に応じて、適切なアルゴリズムを個別に選択して、動作させることができ、上述したデメリットを解消することができる。
次に、本実施の形態1における火災検出システムの一連の検出処理について、フローチャートを用いて説明する。図1は、本発明の実施の形態1における火災検出の全体処理を示すフローチャートである。
火災が発生していない正常な状態における監視対象の画像が、あらかじめ基準画像として記憶部(図示せず)に記憶されている。そこで、火災検出システムは、記憶部から基準画像を取得する(ステップS101)。
次に、火災検出システムは、カメラにより撮像された現時刻の画像を、現画像として取得する(ステップS102)。実際の検出処理においては、例えば、定期的に現画像を取り込み、その都度、以下に述べる火災検出処理を行うこととなる。
次に、火災検出システムは、基準画像および現画像に基づいて、種々の火災性状に適した個別のアルゴリズムを用いて、火災検出処理を行う(ステップS103)。このステップS103においては、アルゴリズム1として炎検出処理、アルゴリズム2として流動煙検出処理、アルゴリズム3として薄い煙検出処理、そしてアルゴリズム4として濃い煙検出処理が並列に行えるようになっている。
なお、図1においては、複数のアルゴリズムが並列に動く場合を例示しているが、各アルゴリズムが独立に実行可能なモジュールであれば、必ずしも並列動作させなくてもよい。また、個々のアルゴリズムの処理については、図2〜図5を用いて、後述する。
そして、火災検出システムは、ステップS103での各アルゴリズムの検出結果に基づいて、最終的に、監視画像内における種々の火災性状の発生状況を判定する(ステップS104)。
このように、本実施の形態1における火災検出システムは、火災性状ごとに別個に検出するアルゴリズムを併存して実装している点を技術的特徴としている。さらに、上述したように、各アルゴリズムは、個別に機能1〜機能3を有している。そこで、次に、図2〜図5を用いて、アルゴリズムごとの機能1〜機能3の働きについて。説明する。
図2は、本発明の実施の形態1の火災検出システムにおける炎検出の一連の処理を示したフローチャートである。また、図3は、本発明の実施の形態1の火災検出システムにおける流動煙検出の一連の処理を示したフローチャートである。また、図4は、本発明の実施の形態1の火災検出システムにおける薄い煙検出の一連の処理を示したフローチャートである。さらに、図5は、本発明の実施の形態1の火災検出システムにおける濃い煙検出の一連の処理を示したフローチャートである。
基本的な処理は、4種のアルゴリズムに対応する図2〜図5のいずれも同じであるため、図2について、詳細に説明する。まず始めに、火災検出システムは、炎検出アルゴリズムがON設定になっているか否か(すなわち、取得した現画像に対して、炎検出を行う設定になっているか否か)を判断する(ステップS201)。このステップS201の処理は、機能3に相当する。
ステップS201において、炎検出アルゴリズムがOFF設定である場合には、炎検出を行わずに、直ちに終了する。この結果、不要な計算処理を行わず、炎検出の必要がない監視領域での炎検出の誤報をなくすことができる。
一方、ステップS201において、炎検出アルゴリズムがON設定である場合には、ステップS202以降の炎検出処理を行うこととなる。炎検出処理を行うに当たって、まず始めに、火災検出システムは、監視対象である1画面を、炎検出に適するようにあらかじめ設定された検出領域に細分化する(ステップS202)。このステップS202の処理は、機能1に相当する。このように、アルゴリズムに対応する火災性状ごとに、適切な領域細分化を行うことができ、誤報の防止、および検出精度の向上を図ることができる。
次に、火災検出システムは、細分化された検出領域ごとに、あらかじめ設定されたマスク処理を行う(ステップS203)。このステップS203の処理は、機能2に相当する。これにより、1画面内の所望の領域に対してのみ、炎検出処理を実行させることが可能となる。
そして、火災検出システムは、ステップS201〜ステップS203を経て最終的に特定された検査対象とすべき領域に対して、炎検出判定を行うこととなる。この結果、適切なサイズの領域ごとに、所望の火災性状検出処理を行うことができ、不要な計算処理を抑え、誤報を抑えた高精度な検出が可能となる。
詳細な説明は、省略するが、他のアルゴリズムの処理を示した図3〜図5も、図2と同様の処理を行うことができる。すなわち、各アルゴリズム個別に、機能1〜機能3の最適設定を行うことが可能となる。
なお、ここで、各アルゴリズムの特性について説明する。
炎検出処理用のアルゴリズムは、明るい炎を検出することから、高輝度値の画素の領域を抽出する処理、フーリエ変換などの周波数分析による判定処理、平均輝度の変化量を判定する処理などを備えている。
流動煙検出処理用のアルゴリズムは、移動量が大きい煙を抽出すればよいことから、画素毎のヒストグラムを一定時間見て、特定の輝度値を有する頻度数が多いかどうかを判定する処理、基準画像との相関値を見て、変化がないかどうかを判断する処理、基準画像のエッジ量の差分処理などを備えている。
緩慢煙については、濃い煙の場合は、透過率を低下することを判断すればよく、また、薄い煙なら、透過率が所定範囲に収まることを判断するか、画像のエッジ量が低下することを判断すればよい。よって、薄い煙検出処理用および濃い煙検出処理用のアルゴリズムは、透過率による判定処理、検出領域内の輝度変化を生じた画素数の時系列データについて周波数分析し、そのスペクトル比やスペクトル強度を判定する処理、基準画像との相関値を判断する処理、エッジ量を判定する処理などを備えている。
以上のように、実施の形態1によれば、火災性状ごとに、感度を高めた検出アルゴリズムを複数実装させ、並列実行させることで、多様な火災現象を高精度に検出することができる。さらに、設置環境に応じて必要なアルゴリズムだけを選択して実行させることで、誤報の少ない高精度なシステムを実現することができる。
さらに、同一画面内においても、アルゴリズムごとに適切な領域サイズ、および適切なマスク領域設定を行うことができる。このように、アルゴリズムごとに、適切な監視範囲を任意に設定することができ、この結果、誤報が少なく、高精度な火災検出を実現できる。
なお、本実施の形態の火災検出システムの詳細な使用例について以下に記載する。
例えば、粉塵が舞っている工場や、排気ガスで薄曇りの状態のトンネルなど薄い緩慢煙検出用のアルゴリズムだと誤検出を起こしそうな誤報要因のある環境の場合は、濃い緩慢煙と流動煙、炎の監視の各アルゴリズムを併用して利用するようにすることで、誤報を減少して、監視を継続することができる。
また、監視環境の状態によって、各アルゴリズムやマスク設定を随時変更しながら監視を行なうようにしてもよい。例えば、人の出入りの激しい施設の監視を行なう場合、施設が稼動していて人が存在する時間帯は、人が存在する領域をマスクして監視し、施設が稼動していない時間帯は、マスク領域を解除して監視を行うことで、稼動時の誤報を抑えながら非稼動時の高感度化を行なうことが可能となる。
また、工場が稼動している時は薄い緩慢煙のプログラムをOFFしていて、稼動していない時はONすることによって、同様の効果を得ることができる。稼動しているかどうかの判断は、機器内に時計を持っていて、時間毎にマスク設定や動作プログラム選択をすることもできるし、例えば、警備システムの監視・未監視状態の信号入力や、外部タイマーからの入力信号によって切り替えるようにしてもよい。また、ネットワークに接続されているならば、別の場所のサーバーからこれらの設定を動的に変更できる様にすることも可能である。
なお、以上の実施形態1では、火災検出システムとして説明したが、より具体的には、上述した複数のアルゴリズムを備えた火災検出装置として火災検出システムを構成してもよい。
この場合には、火災検出装置は、監視カメラと、監視カメラが撮影した画像を画像処理する画像処理装置とから構成される。そして、画像処理装置が、炎を検出するための炎検出アルゴリズムと、流動煙を検出するための流動煙検出アルゴリズムと、薄い緩慢煙を検出する薄い煙検出アルゴリズムと、濃い緩慢煙を検出する濃い煙検出アルゴリズムとを有し、これら複数の検出用アルゴリズムを並列に実行可能できるよう構成されている。
また、この画像処理装置は、4つのアルゴリズムにそれぞれに対して、機能1を実行するための画像を複数の検出領域に分割する領域分割手段と、機能2を実行するための検出領域についてマスク処理を行うマスク設定手段と、機能3を実行するためのアルゴリズムのOK/OFF切替実行手段とを備える。

Claims (4)

  1. カメラにより撮像された監視対象の2次元画像と、あらかじめ記憶部に記憶された基準画像に基づいて、画面をマトリクス状に分割して、分割された複数の検出領域を検出の最小単位として画像処理を施すことにより火災を検出する画像処理部を備えた火災検出システムにおいて、
    前記画像処理部は、
    火源を伴い動きの早い流動する煙を検出するアルゴリズム、薄く緩慢に拡散する煙を検出するアルゴリズム、および濃く緩慢に拡散する煙を検出するアルゴリズムの3つのアルゴリズムがそれぞれ別個に検出処理を実行できるように併存して実装されており、
    前記3つアルゴリズムのうちの一部のアルゴリズムの実行を停止させるように切り替え設定する第1機能と、それぞれのアルゴリズムごとに独立して前記複数の検出領域のサイズに相当する前記最小単位を個別に設定する第2機能と、前記第2機能によりそれぞれのアルゴリズムごとに独立して個別設定された前記複数の検出領域のうちの一部に相当する1以上の検出領域を非検出領域としてマスク処理を施し、検出アルゴリズムごとに画面内で検出処理を実行しない領域を独立して設定する第3機能とを有する
    ことを特徴とする火災検出システム。
  2. 請求項1に記載の火災検出システムにおいて、
    前記濃く緩慢に拡散する煙を検出するアルゴリズムは、透過率が低下することで判断する判定処理を備えており、
    前記薄く緩慢に拡散する煙を検出するアルゴリズムは、透過率が所定範囲に収まることで判断する判定処理を備えている
    ことを特徴とする火災検出システム。
  3. 請求項1または2に記載の火災検出システムにおいて、
    前記第1機能は、警備システムの監視・未監視状態の信号入力または外部タイマーからの入力信号によって切り替えられる
    ことを特徴とする火災検出システム。
  4. 請求項1に記載の火災検出システムにおいて、
    前記緩慢に拡散する煙を検出するアルゴリズムは、前記第3機能により、画面の下側の検出領域にマスク処理を施し、
    前記火源を伴い動きの早い流動する煙を検出するアルゴリズムは、前記第3機能により、画面の上側の検出領域にマスク処理を施す
    ことを特徴とする火災検出システム。
JP2009086267A 2009-03-31 2009-03-31 火災検出システム Active JP5356094B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009086267A JP5356094B2 (ja) 2009-03-31 2009-03-31 火災検出システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009086267A JP5356094B2 (ja) 2009-03-31 2009-03-31 火災検出システム

Publications (2)

Publication Number Publication Date
JP2010238028A JP2010238028A (ja) 2010-10-21
JP5356094B2 true JP5356094B2 (ja) 2013-12-04

Family

ID=43092277

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009086267A Active JP5356094B2 (ja) 2009-03-31 2009-03-31 火災検出システム

Country Status (1)

Country Link
JP (1) JP5356094B2 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012209904A (ja) * 2011-03-30 2012-10-25 Rhythm Watch Co Ltd 検知システムおよびその信号処理方法、プログラム
JP6166651B2 (ja) * 2013-12-04 2017-07-19 能美防災株式会社 炎検出装置および炎検出方法
JP5839515B2 (ja) * 2014-09-26 2016-01-06 リズム時計工業株式会社 検知システムおよびその信号処理方法、プログラム
WO2018116966A1 (ja) 2016-12-21 2018-06-28 ホーチキ株式会社 火災監視システム
JP6942029B2 (ja) * 2017-10-27 2021-09-29 ホーチキ株式会社 火災監視システム
JP6943401B2 (ja) * 2017-10-27 2021-09-29 ホーチキ株式会社 火災監視システム
JP7457460B2 (ja) * 2019-04-22 2024-03-28 ホーチキ株式会社 火災感知システム、及び火災感知プログラム
JP6742623B1 (ja) * 2019-11-13 2020-08-19 尚範 伊達 監視装置、監視方法、及びプログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4587304B2 (ja) * 2005-04-08 2010-11-24 能美防災株式会社 画像処理装置
JP4926603B2 (ja) * 2006-08-17 2012-05-09 能美防災株式会社 煙検出装置

Also Published As

Publication number Publication date
JP2010238028A (ja) 2010-10-21

Similar Documents

Publication Publication Date Title
JP5356094B2 (ja) 火災検出システム
JP4705090B2 (ja) 煙感知装置及びその方法
US20080186191A1 (en) Smoke detecting method and device
JP4729610B2 (ja) 煙検出装置
JP2000513848A (ja) 大域変化に感応しないビデオ動き検出器
US20100098335A1 (en) Smoke detecting apparatus
JP6322128B2 (ja) 煙検出装置および煙検出方法
US20100097474A1 (en) Smoke detecting method and system
EP2000952A2 (en) Smoke detecting method and device
WO2009136894A1 (en) System and method for ensuring the performance of a video-based fire detection system
JP6785340B2 (ja) 火災検知システム及び火災検知方法
JP6372854B2 (ja) 煙検出装置および煙検出方法
JP2014241062A (ja) 処理装置、及び監視システム
US9007459B2 (en) Method to monitor an area
JP5356302B2 (ja) 煙検出装置
JP2016110263A (ja) 煙検出装置および煙検出方法
JP6617015B2 (ja) 炎検出装置および炎検出方法
EP3529788B1 (en) Presence detection system and method
JP5971761B2 (ja) 煙検出装置および煙検出方法
JP2009239507A (ja) 監視システム
JP2020071698A (ja) 火災検知装置、火災検知方法及び火災監視システム
JP2014197290A (ja) 煙検出装置および煙検出方法
JP2010218046A (ja) 煙検出装置
JP2010238034A (ja) 煙検出装置
JP6095049B2 (ja) 煙検出装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110929

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7426

Effective date: 20111111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111111

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20111111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111206

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130820

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130828

R150 Certificate of patent or registration of utility model

Ref document number: 5356094

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250