JP4395615B2 - カメラ監視システムおよび画像閲覧端末装置並びにプログラム - Google Patents
カメラ監視システムおよび画像閲覧端末装置並びにプログラム Download PDFInfo
- Publication number
- JP4395615B2 JP4395615B2 JP2003402391A JP2003402391A JP4395615B2 JP 4395615 B2 JP4395615 B2 JP 4395615B2 JP 2003402391 A JP2003402391 A JP 2003402391A JP 2003402391 A JP2003402391 A JP 2003402391A JP 4395615 B2 JP4395615 B2 JP 4395615B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- alarm
- user
- image data
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Closed-Circuit Television Systems (AREA)
Description
更に、コンピュータに対して、上述した請求項1記載の発明に示した主要機能を実現させるためのプログラムを提供する(請求項2記載の発明)。
更に、コンピュータに対して、上述した請求項3記載の発明に示した主要機能を実現させるためのプログラムを提供する(請求項4記載の発明)。
図1は、この実施例におけるカメラ監視システムの全体構成の概要を示したブロック図である。
このカメラ監視システムは、構内に設置された複数台のユーザ側の監視カメラ装置(ネットワークカメラ)1と、このネットワークカメラ1に構内ネットワーク2を介して接続されているローカル側の端末装置(ローカルPC)3と、このネットワークカメラ1に広域ネットワーク(インターネット)4を介して接続されている管理サーバ5と、この管理サーバ5に広域ネットワーク(インターネット)4および移動体通信網6を介して接続されているリモート側の端末装置(携帯電話等のモバイル端末)7とを有する構成となっている。なお、ネットワークカメラ1、ローカルPC3、モバイル端末7と管理サーバ5との間においては、インターネットに関する一般的なTCP/IP通信プロトコルを利用したHTTPプロトコル等によってパケット化されたデータを送受信するようにしている。
このカメラ情報テーブル11は、図3に示すように、「検出対象」、「センサ信号」、「画像変化量」、「画像解像度」、「検出前の画像」、「検出後の画像」、「転送方法」の他、サーバ転送に関する「サーバアドレス」、「ポート番号」、「ログイン情報」の各項目を有する構成となっている。
なお、サーバ転送モードにセットされている状態において、必要に応じてローカルPC3は、ネットワークカメラ1に対してサーバ転送モードを解除して一時的に転送無しのモードに切り換えて転送停止の設定を行うことができるようになっている。この場合、サーバ転送を停止させてから所定時間(例えば、10分間)が経過した後にローカルPC3は、ネットワークカメラ1に対して元のサーバ転送モードへの自動切り換えを指示するようにしている。
この管理情報テーブル51は、ユーザ毎およびカメラ毎に各種の管理情報(ユーザ情報、カメラ情報、画像情報)を記憶管理するもので、「ユーザID」、「カメラID」、「通知指定状態」、「イベントグループID」、「メール送信済みフラグ」、「アクセス用URL」、「保存期間」、「画像ID」、「タイムスタンプ」、「通知先アドレス」の各項目を有している。「ユーザID」、「カメラID」、「通知指定状態」は、ローカルPC3から送信設定されたユーザ情報、カメラ情報である。
ネットワークカメラ1は、上述したセンサ10、カメラ情報テーブル11の他、撮影部12、アラーム対応画像抽出処理部13、端末通信制御部14、サーバ通信制御部15等を有し、アラーム対応画像抽出処理部13は、異常検出時にカメラ情報テーブル11の内容を参照することによって、撮影部12から逐次取り込んだリアルタイム画像ファイル16の中から複数のアラーム画像を一定の条件で抽出するもので、抽出された各アラーム画像は、自己のカメラメモリ(アラーム画像ファイル)17に転送保存されるか、サーバ通信制御部15を介して管理サーバ5へ転送される。この場合、ネットワークカメラ1は、管理サーバ5へアラーム画像を転送する際、ローカルPC3から入力設定された「ユーザID」、「カメラID」をIDファイル18から読み出してアラーム画像に付加するようにしている。また、アラーム画像やリアルタイム画像は、ローカルPC3からの画像閲覧要求に応じて読み出され、端末通信制御部14を介してローカルPC3へ送信される。
ローカルPC3は、上述したユーザ情報・カメラ情報テーブル31の他、ユーザ対話処理部32、分類別の画像ファイル33〜36、カメラ通信制御部37、サーバ通信制御部38等を有する構成となっている。ユーザ対話処理部32は、ユーザ操作に応答して各種の情報をユーザ情報・カメラ情報テーブル31に設定したり、このユーザ情報・カメラ情報テーブル31の内容をカメラ通信制御部37/サーバ通信制御部38を介してネットワークカメラ1/管理サーバ5へ送信したり、ネットワークカメラ1/管理サーバ5から送信されて来たリアルタイム画像、アラーム画像をカメラ通信制御部37/サーバ通信制御部38を介して受信取得し、このリアルタイム画像、アラーム画像を対応する分類別の画像ファイル33〜36に保存したり、この画像ファイル33〜36を分類別に読み出して一覧表示させる等の処理を行う。
管理サーバ5は、上述した管理情報テーブル51の他、画像分類保存処理部52、カメラ通信制御部53、サーバ通信制御部54等を有する構成となっている。画像分類保存処理部52は、ネットワークカメラ1から送信されて来たアラーム画像をカメラ通信制御部53で受信取得した際に、管理情報テーブル51の内容を参照し、ユーザ別、カメラ別、イベントグループ別にアラーム画像を分類するもので、分類されたアラーム画像は分類別にハードディスク(分類画像データ)55に保管される。管理サーバ5は、ローカルPC3あるいはモバイル端末7から閲覧要求を受けた際に、要求された分類のアラーム画像をハードディスク55から読み出してその要求元へ送信する。
モバイル端末7は、ユーザ対話処理部71、サーバ通信制御部72等を有し、ユーザ対話処理部71は、管理サーバ5から新たな画像データを保存した旨の通知を受けた場合に、管理サーバ5に対してその閲覧要求を行い、これに応答して管理サーバ5から送信されて来たアラーム画像をサーバ通信制御部72で受信取得した際に、これを保存画像ファイル73として取り込んで表示させると共に、ユーザの指示に従って管理サーバ5からアラーム画像を1画像毎に順次取得して切り換え表示させる。
先ず、ユーザは、カメラ情報の設定対象となるネットワークカメラ1を任意に選択指定した後(ステップA1)、その設定内容を指定すると、ローカルPC3は、指定された設定内容の判別を行う(ステップA2)。いま、カメラの新規登録が指定された場合には、ユーザ情報・カメラ情報テーブル31に「ユーザID」に対応付けて「カメラID」、「カメラ名」を新規設定する(ステップA3)。そして、この「ユーザID」、「カメラID」をネットワークカメラ1へ送信してその登録を指示すると共に(ステップA4)、この「ユーザID」、「カメラID」を管理サーバ5へ送信してその登録を指示する(ステップA5)。
先ず、ローカルPC3は、画像取得を行う対象カメラを1つ任意に選択指定した後に(ステップB1)、ユーザ情報・カメラ情報テーブル31をアクセスし、その「動作状態」を参照して警戒モードに設定されているかを調べ(ステップB2)、警戒モードに設定されていれば、その「カメラ制御情報」内の「転送方法」を調べる(ステップB3)。
以下、他の未選択のカメラが有るか否かを調べ(ステップB10)、未選択のカメラが有れば、ステップB1に戻り、そのカメラを画像取得の対象として選択し、上述の動作を繰り返す(ステップB1〜B10)。
先ず、ローカルPC3は、ユーザによって閲覧対象のカメラが選択指定されると共に(ステップC1)、閲覧対象の分類ファイルが選択指定されると(ステップC2)、画像ファイル(ローカル警戒)33、画像ファイル(定期保存)34、画像ファイル(任意保存)35、画像ファイル(ダウンロード)36の中から、選択された分類対応のファイルを特定すると共に、特定された分類ファイルを選択カメラに基づいて検索し、このカメラ対応の各画像を読み出して一覧画面にサムネイル表示する(ステップC3)。この一覧画面の中から任意の画像がユーザ指定された場合には、指定された各画像を拡大表示する(ステップC4)。
先ず、管理サーバ5は、ネットワークカメラ1から転送されて来たアラーム画像の受信有無をチェックすると共に、アラーム画像を受信している場合には、それに付加されている「ユーザID」、「カメラID」に基づいて当該送信元カメラの確認を行う(ステップD1)。ここで、新たなアラーム画像を受信している場合には(ステップD2)、この「ユーザID」、「カメラID」に基づいて管理情報テーブル51をアクセスし、その「通知指定状態」の設定内容(停止/通知/一時停止)をチェックする(ステップD3)。
この実施例においては、異常検出時にネットワークカメラ1から転送されて来るアラーム画像群を1分単位毎に1つのイベントとして分類整理するようにしているが、例えば、回線状態等の影響を受けて画像転送時間が1分以上要する場合、センサ反応の影響を受けて転送タイミングがずれた場合、異常検出時の画像群がシリーズで連続的に転送されて来たような場合などでは、1つのイベントとして分類整理した方が良いため、1分未満に転送されて来た画像を前回と同一のイベントグループに属するものとして分類整理する。
例えば、図中、前回受信した画像群A−1を受信して分類整理した後、今回受信した画像群A−2を受信した際、前回の最終受信日時から今回の受信開始日時までの時間差が1分未満であれば、今回受信した画像群A−2を前回受信した画像群A−1のイベントグループに属する画像として分類整理し、1つのイベントグループにまとめられる。
図15(A)は、この通知メールの内容を例示したもので、どのカメラで異常を検出したかの案内が表示されると共に、その時のアラーム画像群を閲覧可能である旨のメッセージと、このアラーム画像群が掲載されているWebページのリンク(URL)が案内表示される。
先ず、モバイル端末7は、管理サーバ5から画像を保存した旨の通知メールを受け取ると(ステップE1)、この通知メール内に付加されているURLに基づいて管理サーバ5側のWebページをアクセスし(ステップE2)、その画像閲覧の要求を行う(ステップE3)。このWebページは、上述したように、1画像に1ページが割り当てられていると共に、各画像の受信順に順位付けられた複数のページから構成されたもので、モバイル端末7からWebページがアクセスされた際に、管理サーバ5は、ユーザの指示に応答して、各ページをその順序に従って1画像毎に順次送信する。いま、モバイル端末7側において、管理サーバ5から送信されて来た先頭ページを受信すると、それを端末画面に表示出力する(ステップE3)。
この端末画面には、図中の枠内に張り付けられているアラーム画像と、それを撮影したカメラを特定する情報と、その受信日時(タイムスタンプ)が表示されている他に、画像移動ボタン「次へ」が配置表示されている。この「次へ」の画像移動ボタンは、その操作回数に応じて順方向への画像移動を順次指定するもので、モバイル端末7は、画像移動ボタンが操作されると(ステップE4)、閲覧画像の移動要求を管理サーバ5に送信し(ステップE5)、これに応答して管理サーバ5から送信されて来た画像を受信して表示出力する(ステップE3)。
なお、各モバイル端末7のうち、所定の権限が付加されているモバイル端末7に限り、通知モードから停止モードへの切り換えあるいは通知モードから一時停止モードへの切り換えを許可するようにしてもよい。この場合、予めローカルPC3から管理サーバ5に対してモバイル端末7毎にその制限情報を設定登録しておけばよい。
また、新たなアラーム画像をネットワークカメラ1あるいは管理サーバ5から自動取得した際に、ローカルPC3に表示メッセージや音声メッセージを出力させることによってその旨を報知するようにしてもよい。また、管理サーバ5からアラーム画像を一括してダウンロードする際に、未ダウンロードの画像のみを一括してダウンロードするようにしてもよい。
更に、上述した実施例においては、ネットワークカメラ1が各アラーム画像を管理サーバ5へ転送する際に、モバイル端末7の画面サイズに応じて予め選択設定された「解像度」に応じた大きさに各アラーム画像を変更して転送するようにしたが、画像サイズの変更を管理サーバ5側で行うようにしてもよい。
2 構内ネットワーク
3 ローカルPC3
4 インターネット
5 管理サーバ
6 移動体通信網
7 モバイル端末
10 センサ
11 カメラ情報テーブル
12 撮影部
13 アラーム対応画像抽出処理部
17 アラーム画像ファイル
31 ユーザ情報・カメラ情報テーブル
33 画像ファイル(ローカル警戒)
34 画像ファイル(定期保存)
35 画像ファイル(任意保存)
36 画像ファイル(ダウンロード)
51 管理情報テーブル
55 ハードディスク
Claims (6)
- 逐次撮影されるリアルタイム画像や異常検出時において予め設定されている条件に従って保存されるアラーム画像をネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置と、この監視カメラ装置から受信取得したアラーム画像をユーザ別に収集保存すると共に画像閲覧の要求に応じてユーザ別アラーム画像を送信する機能を有するサーバ装置と、画像閲覧機能を有するユーザ側の端末装置とがネットワークを介して通信接続されたカメラ監視システムであって、
前記ユーザ側の端末装置は、監視カメラ装置あるいはサーバ装置からネットワークを介して前記リアルタイム画像、アラーム画像を受信取得する取得手段と、この取得手段によって受信取得した画像データをリアルタイム画像、アラーム画像毎および取得元毎に分類して記憶管理する分類画像記憶手段と、任意の分類が指定された際に当該分類に対応して記憶管理されている画像データを読み出して表示する表示手段と、
を具備したことを特徴とするカメラ監視システム。 - コンピュータに対して、
逐次撮影されるリアルタイム画像や異常検出時において予め設定されている条件に従って保存されるアラーム画像をネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置あるいは監視カメラ装置から受信取得したアラーム画像をユーザ別に収集保存すると共に画像閲覧の要求に応じてユーザ別アラーム画像を送信する機能を有するサーバ装置からネットワークを介して前記画像データを受信取得する機能と、
受信取得した画像データをリアルタイム画像、アラーム画像毎および取得元毎に分類して記憶管理する機能と、
任意の分類が指定された際に当該分類に対応して記憶管理されている画像データを読み出して表示する機能と、
を実現させるためのプログラム。 - 逐次撮影されるリアルタイム画像や異常検出時において予め設定されている条件に従って保存されるアラーム画像をネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置と、この監視カメラ装置から受信取得したアラーム画像をユーザ別に収集保存すると共に画像閲覧の要求に応じてユーザ別アラーム画像を送信する機能を有するサーバ装置と、監視カメラ装置に対して構内ネットワークを介して接続されたローカル側の端末装置と、サーバ装置に対して広域ネットワークを介して接続されたリモート側の端末装置を備えたカメラ監視システムであって、
端末装置からの指示に従って構内監視モード、広域監視モードに設定するモード設定手段と、
このモード設定手段によって構内監視モードに設定されている状態において、監視カメラ装置側のリアルタイム画像、アラーム画像をローカル側の端末装置側で閲覧可能とする構内閲覧手段と、
前記モード設定手段によって広域監視モードに設定されている状態において、サーバ装置側で保存されているアラーム画像をリモート側の端末装置でも閲覧可能とする広域閲覧手段と、
を具備したことを特徴とするカメラ監視システム。 - コンピュータに対して、
逐次撮影されるリアルタイム画像や異常検出時において予め設定されている条件に従って保存されるアラーム画像をネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置に構内ネットワークを介して接続されたローカル側の端末装置あるいは監視カメラ装置から受信取得したアラーム画像をユーザ別に収集保存すると共に画像閲覧の要求に応じてユーザ別アラーム画像を送信する機能を有するサーバ装置に広域ネットワークを介して接続されたリモート側の端末装置からの指示に従って構内監視モード、広域監視モードに設定する機能と、
構内監視モードに設定されている状態において、監視カメラ装置側のリアルタイム画像、アラーム画像をローカル側の端末装置側で閲覧可能とする機能と、
広域監視モードに設定されている状態において、サーバ装置側で保存されているアラーム画像をリモート側の端末装置でも閲覧可能とする機能と、
を実現させるためのプログラム。 - 逐次撮影された画像の中から所定の条件に従って抽出した画像データをネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置と、この監視カメラ装置から受信取得した画像データをユーザ別に収集保存すると共に閲覧の要求に応じて当該ユーザ別の画像データを送信する機能を有するサーバ装置と、監視カメラ装置に対して構内ネットワークを介して接続されているローカル側の端末装置と、サーバ装置に対して広域ネットワークを介して接続されているリモート側の端末装置とを備えたカメラ監視システムであって、
監視カメラ装置は、逐次撮影された画像データの中から予め設定されている抽出条件に従って抽出した画像データを自己のカメラメモリへ転送あるいはサーバ装置へ転送した後に、ローカル側の端末装置から閲覧要求を受けた場合には、自己のメモリに保存されている画像データをその要求元へ送信し、
サーバ装置は、監視カメラ装置から受信取得した画像データをユーザ別に収集保存すると共に、リモート側の端末装置に対して画像データを保存した旨を通知し、この通知を受けたリモート側の端末装置から閲覧要求を受けた場合に、この画像データをその要求元へ送信し、
ローカル側の端末装置は、監視カメラ装置あるいはサーバ装置に対して閲覧要求を行い、これに応答して監視カメラ装置あるいはサーバ装置から送信されて来た画像データを受信取得した際に、この画像データを分類別に記憶管理しておき、任意の分類がユーザ指定された際には、この指定分類対応の画像データを読み出して表示し、
リモート側の端末装置は、サーバ装置から画像データを保存した旨の通知を受けた場合に、サーバ装置に対してその閲覧要求を行い、これに応答してサーバ装置から送信されて来た画像データを受信取得して表示する、
ようにしたことを特徴とするカメラ監視システム。 - 逐次撮影されるリアルタイム画像や異常検出時において予め設定されている条件に従って保存されるアラーム画像をネットワーク経由で送信する機能を有するユーザ側の監視カメラ装置と、この監視カメラ装置から受信取得したアラーム画像をユーザ別に収集保存すると共に画像閲覧の要求に応じてユーザ別アラーム画像を送信する機能を有するサーバ装置とがネットワークを介して通信接続され、監視カメラ装置あるいは監視カメラ装置に対して画像閲覧の要求を行うユーザ側の画像閲覧端末装置であって、
監視カメラ装置あるいはサーバ装置からネットワークを介して前記リアルタイム画像、アラーム画像を受信取得する取得手段と、
この取得手段によって受信取得した画像データをリアルタイム画像、アラーム画像毎および取得元毎に分類して記憶管理する分類画像記憶手段と、
任意の分類が指定された際に当該分類に対応して記憶管理されている画像データを読み出して表示する表示手段と、
を具備したことを特徴とする画像閲覧端末装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003402391A JP4395615B2 (ja) | 2003-12-02 | 2003-12-02 | カメラ監視システムおよび画像閲覧端末装置並びにプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003402391A JP4395615B2 (ja) | 2003-12-02 | 2003-12-02 | カメラ監視システムおよび画像閲覧端末装置並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005167524A JP2005167524A (ja) | 2005-06-23 |
JP4395615B2 true JP4395615B2 (ja) | 2010-01-13 |
Family
ID=34725964
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003402391A Expired - Fee Related JP4395615B2 (ja) | 2003-12-02 | 2003-12-02 | カメラ監視システムおよび画像閲覧端末装置並びにプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4395615B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4895545B2 (ja) * | 2005-07-22 | 2012-03-14 | パナソニック株式会社 | 監視カメラ装置及び監視カメラシステム |
JP2007201876A (ja) * | 2006-01-27 | 2007-08-09 | Matsushita Electric Ind Co Ltd | カメラ装置及びネットワークカメラ |
JP5151451B2 (ja) * | 2007-12-19 | 2013-02-27 | 日本電気株式会社 | 人物特定システム、人物特定装置、人物特定方法および人物特定プログラム |
JP2012150592A (ja) * | 2011-01-18 | 2012-08-09 | Sumitomo Electric Networks Inc | セキュリティシステム及び監視装置 |
CN114153698B (zh) * | 2021-12-06 | 2024-04-19 | 京东方艺云(杭州)科技有限公司 | 显示监控方法、装置、电子设备和可读存储介质 |
-
2003
- 2003-12-02 JP JP2003402391A patent/JP4395615B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005167524A (ja) | 2005-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9984545B2 (en) | System and method of monitoring the video surveillance activities | |
EP2717564B1 (en) | Method, device and system for realizing video retrieval | |
US7760908B2 (en) | Event packaged video sequence | |
EP2876570B1 (en) | System and method of dynamic correlation view for cloud based incident analysis and pattern detection | |
EP2781084B1 (en) | Digital video system with intelligent video selection timeline | |
US9934663B2 (en) | Apparatus and method for improved live monitoring and alarm handling in video surveillance systems | |
JP2003216229A (ja) | 遠隔制御管理システム | |
EP1869652A1 (en) | Methods for defining, detecting, analyzing, indexing and retrieving events using video image processing | |
KR20110130033A (ko) | 행동패턴 데이터베이스를 이용한 능동형 영상감시 시스템 및 그 방법 | |
US20130222598A1 (en) | System and Method of On Demand Video Exchange Between On Site Operators and Mobile Operators | |
JP2005167523A (ja) | カメラ監視システムおよび画像管理装置並びにプログラム | |
JP5779380B2 (ja) | 監視装置およびプログラム | |
JP4395615B2 (ja) | カメラ監視システムおよび画像閲覧端末装置並びにプログラム | |
KR100718521B1 (ko) | 영상 출력 시스템 및 영상을 출력하기 위한 제어프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체 | |
KR100653825B1 (ko) | 변화검출방법 및 장치 | |
KR101964230B1 (ko) | 데이터 처리 시스템 | |
JP2017111506A (ja) | 見守りシステム | |
JP5276353B2 (ja) | 監視システム | |
JP4308633B2 (ja) | 監視カメラ装置 | |
JP2013015916A (ja) | 画像管理装置、画像管理方法、画像管理プログラム及び記録媒体 | |
JP4553221B2 (ja) | 監視通報方法およびシステムならびに監視通報プログラムを記録したコンピュータ読み取り可能な情報記録媒体 | |
JP7099687B2 (ja) | 映像監視システム及びその方法と処理装置 | |
KR200434039Y1 (ko) | 중앙 집중형 감시 시스템 | |
JP3031888B2 (ja) | 表示装置 | |
JP2005253025A (ja) | 遠隔監視装置及び表示システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20060209 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060404 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060724 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080519 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090903 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090915 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090928 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121030 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121030 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131030 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |