JP4286961B2 - ITV monitoring method and ITV monitoring device - Google Patents
ITV monitoring method and ITV monitoring device Download PDFInfo
- Publication number
- JP4286961B2 JP4286961B2 JP10710599A JP10710599A JP4286961B2 JP 4286961 B2 JP4286961 B2 JP 4286961B2 JP 10710599 A JP10710599 A JP 10710599A JP 10710599 A JP10710599 A JP 10710599A JP 4286961 B2 JP4286961 B2 JP 4286961B2
- Authority
- JP
- Japan
- Prior art keywords
- itv
- mouse
- screen
- keyboard
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【0001】
【発明の属する技術分野】
本発明は、ITVカメラを用いて目的とする対象を監視するためのITV監視方法及びITV監視装置に係り、特にGUI(グラフィカルユーザーインタフェース)を用いてITVカメラを制御するITV監視方法及びITV監視装置に関する。
【0002】
【従来の技術】
従来、この種のITV監視装置では、CRT等のモニタ画面を幾つかのウィンドウに分割して、そのうちの一つを監視画面として使用し、それ以外のウィンドウをITV監視制御用のGUIとして使用している。
その表示の一例を図13に示す。この図はトンネル内を監視するITV監視装置の表示例である。この図において、101 はITV監視画面、102 〜104 はITV監視制御用のGUIであり、102 は監視カメラ切り替え画面、103 は監視カメラ位置画面、104 はカメラ操作画面である。
【0003】
トンネル内には4台のITVカメラ(図示略)が設置されており、それぞれを監視カメラ切替画面102 で自動的または手動で切り替えることができる。例えば自動で切り替える場合は、図示せぬマウスを使用してGUIの「自動」のボタン上にマウスポインタを重ねてマウスのボタンをダブルクリックする。これにより、一定時間毎にITVカメラ1→ITVカメラ2→ITVカメラ3→ITVカメラ4→ITVカメラ1→…の順で自動的に切り替わり、各ITVカメラで撮影された映像がITV監視画面101 上に表示される。一方、手動で切り替える場合は、図示せぬマウスを使用してGUIの「手動」のボタン上にマウスポインタを重ねてマウスのボタンをダブルクリックし、その後目的のITVカメラのボタン上にマウスポインタを重ねてマウスのボタンをダブルクリックすれば目的のITVカメラに切り替わり、そのITVカメラで撮影された映像がITV監視画面101 上に表示される。
【0004】
監視カメラ位置画面103 には、現在選択しているITVカメラが認識できるように、各ITVカメラ1〜4に対応させた表示部分が例えば緑色で点灯する。また、この画面では、現在選択されているITVカメラの設置場所等の情報が表示される。
選択したITVカメラの撮影方向を変える場合は、カメラ操作画面104 のGUIの上下左右の各ボタン上にマウスポインタを重ねてマウスのボタンをクリックする。例えば、ITVカメラを垂直方向上に向けるには、マウスを使用してGUIの「上ボタン」にマウスポインタを重ねてマウスのボタンをクリックし、カメラを垂直方向下に向けるには、GUIの「下ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。また、ITVカメラを水平方向左に向けるには、マウスを使用してGUIの「左ボタン」にマウスポインタを重ねてマウスのボタンをクリックし、水平方向右に向けるには、GUIの「右ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。この場合、一度クリックする毎にITVカメラが微小角度しか動かないので、所定の角度まで動かしたい場合には、その角度になるまで何回もクリックすることになる。
各ITVカメラ1〜4のレンズを広角設定するには、GUIの「ワイド−テレ・ボタン」のワイド側にマウスポインタを重ねてマウスのボタンをクリックし、望遠設定するには、GUIの「ワイド−テレ・ボタン」のテレ側にマウスポインタを重ねてマウスのボタンをクリックする。
【0005】
一方、図14は、従来の他のITV監視装置のGUIによる操作ボタンを示す図であり、この図に示す例では、ITVカメラを上下左右方向に向けるための水平及び垂直ボタンと、望遠・広角設定するズームボタンと、遠近設定するフォーカスボタンと、ITVカメラの前面ガラスの汚れや水滴を拭き取るためのワイパを動かすワイパボタンと、ITVカメラの前面ガラスの曇りを除去するためのデフロスタを動かすデフロスタボタンと、ITVカメラの撮影方向を照す照明を点灯させるための照明ボタンとを有している。
【0006】
ITVカメラを水平方向左に動かす場合は、マウスを使用してGUIの水平の「左ボタン」にマウスポインタを重ねてマウスのボタンをクリックし、水平方向右に向けるには、GUIの水平の「右ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。また、カメラを垂直方向上に動かす場合は、マウスを使用してGUIの垂直の「上ボタン」にマウスポインタを重ねてマウスのボタンをクリックし、垂直方向下に向けるには、GUIの垂直の「下ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。望遠設定する場合は、マウスを使用してGUIのズームの「望遠ボタン」にマウスポインタを重ねてマウスのボタンをクリックし、広角設定する場合は、GUIのズームの「広角ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。また、フォーカス調整する場合は、マウスを使用してGUIのフォーカスの「遠ボタン」又は「近ボタン」にマウスポインタを重ねてマウスのボタンをクリックする。
【0007】
【発明が解決しようとする課題】
ところで、上述した従来のITV監視装置にあっては、次のような問題点があった。
▲1▼ITV監視画面101 とITV監視制御用のGUI102 〜104 を同時に表示するようにしているが、ITV監視制御用のGUIが複雑になったり、制御項目の数が増えるほどITV監視画面がモニタ画面の表示可能なサイズに対して小さくなるので、ITV監視画面の視認性が低下してしまうことになる。
【0008】
▲2▼この問題を解決する方法として、従来、図15に示すように、表示画面の一部にITV監視画面拡大/縮小のGUIの「拡大/縮小ボタン105 」を設けて、これにマウスポインタを重ねてマウスのボタンをダブルクリックすることで、ITV監視画面をパソコンのモニタ画面の全面に表示させたり(図16参照)、縮小表示させたりするものもあるが、マウス操作を怠った場合はいつまでもITV監視画面が縮小表示されたままになることがあった。
【0009】
▲3▼図14に示す従来技術では、ITVカメラの旋回や望遠・広角の制御のGUIボタンを、「上下」、「左右」、「望遠/広角」、「遠/近」の夫々設けていることから、例えば水平操作を行う場合、マウスでマウスポインタをGUIの水平の「左ボタン」又は「右ボタン」に重ねてマウスのボタンをクリックすることになるので、マウスポインタを移動させる際には操作画面を見なければボタン上にマウスポインタを持って行くことが困難であり、特に少しずつ操作する場合には操作画面と監視画面を交互に見ることで顔の上げ下げ動作を繰り返すことになることから、操作性が良くなかった。
【0010】
本発明はこのような事情に鑑みてなされたもので、操作性の向上を図ることができるITV監視方法及びITV監視装置を提供することを目的としている。
【0011】
【課題を解決するための手段】
上記目的を達成するため、請求項1記載の発明によるITV監視方法は、モニタ画面上に、複数のITVカメラから選択されたITVカメラで撮影された映像を表示し、前記複数のITVカメラから1を選択するための各ITVカメラ対応の選択用ボタン及び各ITVカメラを操作するためのグラフィカルユーザインタフェースとを前記ITVカメラで撮影された映像と共に表示し、前記画面上に表示された前記ITVカメラで撮影された映像にマウスポインタを重ねてマウスボタンが操作されるかを検出する第1の検出を行い、キーボードに割り当てた全画面表示切替キーが押下されるかを検出する第2の検出を行い、前回のマウス操作又はキーボード操作から一定時間これらの操作が行われないかを検出する第3の検出を行い、前記第1の検出において、前記映像にマウスポインタを重ねてマウスボタンが操作されたことが検出された場合に、或いは第2の検出において、前記全画面表示切替キーの押下が検出された場合に、または前記第3の検出において、一定時間の無操作が検出された場合に、前記モニタ画面の全面に前記映像を拡大して表示し、この拡大表示状態後に、マウス操作又はキーボード操作が行われるかを監視し、前記拡大表示状態後に、マウス操作又はキーボード操作が行われたことが検出された場合に、前記モニタ画面の表示を元の表示内容に戻すことを特徴とする。
【0012】
この方法によれば、ITVカメラで撮影された映像とITVカメラを操作するためのグラフィカルユーザインタフェースとが表示されている状態で、ITVカメラで撮影された映像を表示する画面上にマウスポインタを持って行ってマウスのボタンを押下するか、またはキーボードに割り当てた所定のキーを押下するか、または前回のマウス操作又はキーボード操作から一定時間これらの操作が行われなければ、モニタ画面の全面にITVカメラで撮影された映像のみを表示し、またこの状態にした後にマウス操作又はキーボード操作を行うと元の表示状態に戻す。
したがって、ITVカメラの操作を必要としない時にはITVカメラで撮影された映像がモニタ画面の全面に表示するので、監視時における視認性が良くなり、またITV監視画面の全面表示と縮小表示の切り替えにおける運用者の負担が低減する。
【0013】
請求項2記載の発明によるITV監視装置は、表示を行うモニタと、キー操作情報を入力するためのキーボードと、前記モニタ上の位置情報を入力するためのマウスと、複数のITVカメラから映像信号を受けて前記モニタに表示する制御と共に前記マウスによる入力及び前記キーボードによる入力を受けて所要処理を行うコンピュータとを備え、複数のITVカメラから1を選択するための各ITVカメラ対応の選択用ボタンと、旋回手段を有するITVカメラの前記旋回手段を制御するためのグラフィカルユーザインタフェースと、複数のITVカメラから前記選択用ボタンにより選択されたITVカメラで撮影された映像とを、前記モニタの画面に同時に表示する表示制御手段と、ITVカメラで撮影され前記モニタ上において表示されている映像上にマウスポインタを重ねてマウスボタンが操作されるかを検出する第1の検出と、キーボードに割り当てた全画面表示切替キーが押下されるかを検出する第2の検出と、前回のマウス操作又はキーボード操作から一定時間これらの操作が行われないかを検出する第3の検出と、マウス操作又はキーボード操作が行われるかを検出する第4の検出とを行う検出手段と、前記検出手段によって、前記映像にマウスポインタを重ねてマウスボタンが操作されたことが検出された場合に、または前記全画面表示切替キーの押下が検出された場合に、または、一定時間の無操作が検出された場合に、前記モニタ画面の全面に前記映像を拡大して表示する一方、この拡大表示状態後に、前記検出手段によってマウス操作又はキーボード操作が行われたことが検出された場合に、前記拡大表示状態の前の表示状態に戻す制御手段と、を具備することを特徴とする。
【0014】
この構成によれば、上記方法と同様に、ITVカメラで撮影された映像とITVカメラを操作するためのグラフィカルユーザインタフェースとが表示されている状態で、ITVカメラで撮影された映像を表示する画面上にマウスポインタを持って行ってマウスのボタンを押下するか、またはキーボードに割り当てた所定のキーを押下するか、または前回のマウス操作又はキーボード操作から一定時間これらの操作が行われなければ、モニタ画面の全面にITVカメラで撮影された映像のみ表示し、またこの状態にした後にマウス操作又はキーボード操作を行うと元の表示状態にする。
したがって、ITVカメラの操作を必要としない時にはITVカメラで撮影された映像がモニタ画面の全面に表示するので、監視時における視認性が良くなり、またITV監視画面の全面表示と縮小表示の切り替えにおける運用者の負担が低減する。
【0025】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。
(I )第1の実施の形態
図1は本発明に係るITV監視装置の第1の実施の形態の構成を示すブロック図である。
この第1の実施の形態のITV監視装置30は、パーソナルコンピュータ(以下、パソコン)31、CRT等のモニタ32、マウス33、キーボード34、カメラスイッチャ(カメラ切替器)35、複数台のITVカメラ36を備えて構成される。
パソコン31には、図2に示す各種機能即ちタイマ制御機能311 、入力無し状態検出機能312 、全画面表示指令検出機能313 、全画面監視画面表示機能314 、監視装置制御要求検出機能315 及び全画面切替前状態復帰機能316 からなるITVシステム制御用ファームウェアが搭載されている。
【0026】
タイマ制御機能311 は時間監視を行うものである。入力無し状態検出機能312 は、マウス33及びキーボード34からの入力が無くなった時点から一定時間経過したことを検出することでモニタ画面の表示を全画面監視画面に切り替えるものである。全画面表示指令検出機能313 は、キーボード34に割り当てられた全画面表示切替キー(図示略)が押下されたか、または縮小監視画面(図3に示すように、モニタ32の全画面に対してITV監視画面を縮小表示した画面)にマウスポインタ37(図3参照)を重ねてダブルクリックされたことを検出することで全画面監視画面に切り替えるものである。全画面監視画面表示機能314 は、ITV監視画面をモニタ画面全てに表示するものである。監視装置制御要求検出機能315 は、全画面監視画面表示中にマウス33又はキーボード34からの入力を検出するものである。全画面切替前状態復帰機能316 は、監視装置制御要求を検出することで全画面監視画面表示の直前の表示状態にモニタ画面表示を戻すものである。
【0027】
次に、上記構成によるITV監視装置30の動作について説明する。
ITV監視装置の運用者がITVカメラ36の切り替えやズームなどの操作を行う場合、図3に示すモニタ32の監視カメラ切替画面やカメラ操作画面のGUIボタン上にマウスポインタ37を持ってきてマウス33のボタンをクリックするか、またはキーボード34から直接キー入力操作する。なお、ITVカメラ36の操作方法は上述した従来技術と同様であるので省略する。
そして、ITVカメラ36の操作(水平・垂直位置設定、ズームやフォーカス調整)が終了すると、運用者は、今度はモニタ画面の全面にITV監視画面101 を表示させるためにキーボード34の全画面表示切替キーを押下するか、または現時点でモニタ32の画面上に縮小表示されているITV監視画面101 上にマウスポインタ37を重ねてマウス33のボタンをダブルクリックする。この操作は全画面表示指令検出機能313 で検出され、全画面表示指令検出機能313 は全画面監視画面表示機能314 を呼び出してITV監視装置制御用GUIや縮小したITV監視画面101 を表示している状態からモニタ画面の全面にITV監視画面101 を表示させる全画面監視画面状態に切り替える。この際、全画面切替状態復帰機能316 により直前のITV監視装置制御用GUIなどの各ウィンドウの状態が保存される。
【0028】
ここで、仮に運用者がモニタ画面の全面にITV監視画面101 を表示させる全画面表示切り替え操作を怠った場合でも、マウス33またはキーボード34からの入力信号が無くなった時点でタイマ制御機能311 が起動し、そのタイマ制御機能311 を監視している入力無し状態検出機能312 が一定時間内にマウス33またはキーボード34からの入力信号がないことを検出すると、全画面監視画面表示機能314 を呼び出してITV監視装置制御用GUI及び縮小表示されているITV監視画面101 の状態を全画面監視画面表示状態に切り替える。これにより、モニタ画面の全てにITV監視画面101 が表示される。このときも全画面切替前状態復帰機能316 が直前のITV監視装置制御用GUIなどの各ウィンドウの状態を保存する。入力無し状態検出機能312 は、全画面監視画面表示機能314 の呼び出しを行った際にタイマ制御機能311 へタイマリセット信号を出力する。
【0029】
そして、全画面監視画面表示状態でマウス33のボタンを押下するか、または移動させるか(即ち動かすか)、またはキーボード34の任意のキーを押すなどして入力動作を行うと、その状態が監視装置制御要求検出機能315 で検出されて全画面切替前状態復帰機能316 が呼び出され、それに保存されているITV監視装置制御用GUIなどの各ウィンドウの状態が復活する。
【0030】
図4は上記動作をフローチャートで表わしたものである。
まず、ステップS10でキーボード34の全画面表示切替キーが押下されたか否かを判定し、全画面表示切替キーが押下されたと判断すると、ステップS12に進み、モニタ画面の全面にITV監視画面101 を表示する。これに対して、全画面表示切替キーが押下されてないと判断すると、ステップS14に進み、モニタ画面上に縮小表示されているITV監視画面101 上にマウスポインタ37が来てマウス33のボタンがダブルクリックされたか否かを判定する。この判定において、モニタ画面上に縮小表示されているITV監視画面101 上にマウスポインタ37が来てマウス33のボタンがダブルクリックされたと判断するとステップS12に進む。これに対して、同操作が行われていないと判断するとステップS16に進み、前回のマウス操作またはキーボード操作から一定時間が経過したか否かを判定する。この判定において、一定時間経過したと判断するとステップS12に進み、一定時間経過していないと判断するとステップS10に戻る。
【0031】
ステップS12に進むと、モニタ画面の全面にITV監視画面101 を表示すし、次いでステップS18でマウス操作またはキーボード操作が行われたか否かを判定する。この判定において、マウス操作またはキーボード操作が行われていないと判断するとステップS12に戻り、マウス操作またはキーボード操作が行われたと判断するとステップS20に進み、全画面表示切り替え前の表示画面に戻す。
【0032】
このように、この第1の実施の形態では、ITV監視装置制御終了後、キーボード34の全画面表示切替キーの押下するか、または縮小監視画面にマウスポインタ37を重ねてマウス33のボタンをダブルクリックするかによってモニタ画面の全面にITV監視画面101 の表示を行い、その状態で再びマウス33またはキーボード34を操作すると、全画面示切り替え前の画面表示に戻る。またこれらの操作が行われなくても最後のマウス操作またはキーボード操作から一定時間経過後に同様にしてモニタ画面の全面にITV監視画面101 を表示する。その後、再びマウス操作またはキーボード操作が行われるまで全画面監視画面表示状態を保持する。
したがって、ITVカメラの操作を必要としない時にはITVカメラで撮影された映像をモニタ画面の全面に表示するので、監視時における視認性が良くなり、またITV監視画面101 の全面表示と縮小表示の切り替えにおける運用者への負担を低減できる。
【0033】
(II)第2の実施の形態
図5は本発明に係るITV監視装置の第2の実施の形態の構成を示すブロック図である。
この第2の実施の形態のITV監視装置40は、パーソナルコンピュータ(以下、パソコン)41、マウス42、CRT等のモニタ43、ITVカメラ44、制御論理部45、旋回装置46を備えて構成される。
制御論理部45はパソコン41からの指令に基づいて旋回装置46を制御してITVカメラ44の撮影方向を変えたり、旋回装置46を介してITVカメラ44のレンズの制御(ズーム/フォーカス)を行う。モニタ43にはITVカメラ44で撮影された映像が表示される。一方、パソコン41のモニタ画面には図6に示すように「水平」、「垂直」、「ズーム」、「フォーカス」、「ワイパ」、「デフロスタ」、「照明」、「電源」の各種GUIボタンが表示される。この場合、この図から分るように、本発明では「水平」、「垂直」、「ズーム」、「フォーカス」の各GUIボタンを一つのボタンとした点が上述した図16に示す従来と異なっている。従来は例えば水平の場合、”左ボタン”と”右ボタン”の二つのボタンを設けていたが、本発明ではこの左右のボタンをマウス42の左右のボタンに対応させている。これにより、マウス42だけの操作でITVカメラ44を水平方向右に動かしたり、水平方向左に動かしたりすることができる。
【0034】
すなわち、マウス42を操作してマウスポインタ47を「水平ボタン」上に重ねて左ボタン42aをクリックすると、パソコン41からITVカメラ44を水平方向左に動かす指令が出力され、右ボタン42bをクリックすると、ITVカメラ44を水平方向右に動かす指令が出力される。
また、マウス42を操作してマウスポインタ47を「垂直ボタン」上に重ねて左ボタン42aをクリックすると、パソコン41からITVカメラ44を垂直方向下に動かす指令が出力され、右ボタン42bをクリックすると、ITVカメラ44を垂直方向上に動かす指令が出力される。
【0035】
また、マウス42を操作してマウスポインタ47を「ズームボタン」上に重ねて左ボタン42aをクリックすると、パソコン41からITVカメラ44のレンズを望遠にする指令が出力され、右ボタン42bをクリックすると、ITVカメラ44のレンズを広角にする指令が出力される。
また、マウス42を操作してマウスポインタ47を「フォーカスボタン」上に重ねて左ボタン42aをクリックすると、パソコン41からITVカメラ44のレンズを遠にする指令が出力され、右ボタン42bをクリックすると、ITVカメラ44のレンズを近にする指令が出力される。
制御論理部45は上記各指令を受け取ることで、旋回装置46の制御及びITVカメラ44のレンズ制御を行う。
この場合、マウス42の左右ボタン42a、42bをドラッグ(押しっぱなし)している間は、ITVカメラ44は継続して動き、左右ボタン42a、42bを離すと停止する。また、左右ボタン42a、42bをクリック(瞬時に押したり、離したり)することにより、カメラ操作の微調整が容易にできる。
【0036】
このように、この第2の実施の形態では、パソコン41のモニタ画面上の「水平」、「垂直」、「ズーム」、「フォーカス」の夫々を選択した後にマウス42の左右ボタン42a、42bを操作することでITVカメラ44の旋回・レンズ制御を行う。
したがって、モニタ画面から目を離さなくてもITVカメラ44の旋回・レンズ制御の操作を行うことができるので、操作性の大幅な向上が図れる。
【0037】
(III)第3の実施の形態
図7は本発明に係るITV監視装置の第3の実施の形態の構成を示すブロック図である。
この第3の実施の形態のITV監視装置50は、旋回装置を備えたITVカメラ51、演算部52、およびパソコンを含むモニタ部53より構成される。
演算部52では、ITVカメラ51の向いている水平および垂直方向の角度、およびズームレンズの現在使用状態の倍率の状態変位アック信号から、カメラの撮影エリアを地図上で表示するのに必要な演算処理を行い、モニタ部53に映像エリア情報信号を出力する。
モニタ部53は、例えば図11に示すように、ITV監視画面、地図画面、カメラ操作画面より構成される。カメラ操作画面で旋回操作やレンズ操作を行い、演算部52に出力する。地図画面では演算部52により処理されたカメラの撮像エリア情報信号を地図上に表示する。
モニタ部53の操作画面で操作した旋回・レンズ制御信号は、演算部52経由でITVカメラ51に入力される。ITVカメラ51と演算部52間では、上記制御信号がITVカメラ51に入力される一方、それに伴う状態が変位したことを示すアック信号(上述のITVカメラ51の向いている水平および垂直方向の角度、およびズームレンズの現在使用状態の倍率)が演算部52にフィードバックされる。
【0038】
図8は演算部52の機能ブロック図である。演算部52は、ITVカメラ51の水平方向の角度を設定する水平情報処理部55、ITVカメラ51の垂直方向の角度を設定する垂直方向情報処理部56、ITVカメラ51の垂直方向の角度から撮影できる水平距離を求める水平方向処理部57、ITVカメラ51のズーム(望遠−広角)を設定するズーム倍率情報処理部58、現在のズーム比により画角を求める垂直方向処理部59、水平方向処理部57にて求められた水平距離と水平情報処理部55にて設定されたITVカメラ51の水平方向の角度と垂直方向処理部59にて求められた現在のITVカメラ51の画角とからITVカメラ51の撮影エリアを監視エリアと共にモニタ部53上に表示する撮影エリア地図合成処理部60を有している。
ここで、図9、図10に示すように、ITVカメラ51の垂直方向の角度θV1、θV2の違いにより撮影できる水平距離x1 、x2 が異なることから、上記水平方向処理部57はこの水平距離x1 、x2 を求める演算を行う。
【0039】
図11はモニタ画面の一例であり、701 はITVカメラ51で撮影された映像を表示するITV監視画面、702 はITVカメラ51を操作するためのGUIによるカメラ操作画面、703 はITV監視装置50の監視エリアとITVカメラ51の撮影エリアとからなる地図画面である。地図画面703 には、例えば図12に示すような地図が表示される。この図ではダムの下流の河川80を監視している様子を示しており、監視エリア81内の河川80に沿って3台のITVカメラ51が離間配置されて、それぞれの撮影エリア82A〜82Cが略扇形で表示されている。特に現在選択されているITVカメラ51の撮影エリア(例えば82B)については他と異なる色で表示され、他との識別が容易になっている。このように、監視エリア81と各ITVカメラ51の撮影エリア82A〜82Cとからなり地図画面を表示することで、ITV監視画面701 で表示されている映像が監視エリアのどの場所であるかが即座に認識することができる。
【0040】
このように、この第3の実施の形態では、モニタ画面上にITVカメラ51で撮影された映像の他に、監視エリアとITVカメラ51の撮影エリアとからなる地図画面を表示するので、ITV監視画面701 で表示されている映像が監視エリアのどの場所であるかが即座に認識することができ、これによって操作性の大幅な向上が図れる。
また、現時点で選択しているITVカメラ51の撮影エリアを他のITVカメラ51の夫々の撮影エリアとは異なる色で表示するので、現在、複数台のITVカメラ51のうちのどのITVカメラ51が選択されているのかを即座に認識することができる。これによって操作性を更に向上できる。
【0041】
【発明の効果】
請求項1、2記載の発明によれば、ITVカメラの操作を必要としない時にはITVカメラで撮影された映像をモニタ画面の全面に表示するので、監視時における視認性が良くなり、またITV監視画面の全面表示と縮小表示の切り替えにおける運用者への負担を低減できる。
【図面の簡単な説明】
【図1】本発明に係るITV監視装置の第1の実施の形態の構成を示すブロック図である。
【図2】第1の実施の形態のITV監視装置のコンピュータの機能ブロック図である。
【図3】第1の実施の形態のITV監視装置の表示例である。
【図4】第1の実施の形態のITV監視装置の動作を示すフローチャートである。
【図5】本発明に係るITV監視装置の第2の実施の形態の構成を示すブロック図である。
【図6】第2の実施の形態のITV監視装置の表示例である。
【図7】本発明に係るITV監視装置の第3の実施の形態の構成を示すブロック図である。
【図8】第3の実施の形態のITV監視装置の演算部の機能ブロック図である。
【図9】第3の実施の形態のITV監視装置の動作説明図である。
【図10】第3の実施の形態のITV監視装置の動作説明図である。
【図11】第3の実施の形態のITV監視装置の表示例である。
【図12】第3の実施の形態のITV監視装置の表示例である。
【図13】従来のITV監視装置の表示例である。
【図14】従来のITV監視装置の表示例である。
【図15】従来のITV監視装置の表示例である。
【図16】従来のITV監視装置の表示例である。
【符号の説明】
101 ITV監視画面
102 監視カメラ切替画面
103 監視カメラ位置画面
104 カメラ操作画面
30 ITV監視装置
31 パーソナルコンピュータ(パソコン)
311 タイマ制御機能
312 入力無し状態検出機能
313 全画面表示指令検出機能
314 全画面監視画面表示機能
315 監視装置制御要求検出機能
316 全画面切替前状態復帰機能
32 モニタ
33 マウス
34 キーボード
35 カメラスイッチャ
36 ITVカメラ
37 マウスポインタ
40 ITV監視装置
41 パーソナルコンピュータ(パソコン)
42 マウス
42a 左ボタン
42b 右ボタン
43 モニタ
44 ITVカメラ
45 制御論理部
46 旋回装置
47 マウスポインタ
50 ITV監視装置
51 ITVカメラ
52 演算部
53 モニタ
55 水平方向情報処理部
56 垂直方向情報処理部
57 水平方向処理部
58 ズーム倍率情報処理部
59 垂直方向処理部
60 表示処理機能
701 ITV監視画面
702 カメラ操作画面
703 地図画面
80 川
81 監視エリア
82A〜82C 撮影エリア[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an ITV monitoring method and an ITV monitoring apparatus for monitoring a target object using an ITV camera, and more particularly, an ITV monitoring method and an ITV monitoring apparatus for controlling an ITV camera using a GUI (graphical user interface). About.
[0002]
[Prior art]
Conventionally, in this type of ITV monitoring device, a monitor screen such as a CRT is divided into several windows, one of which is used as a monitoring screen, and the other windows are used as a GUI for ITV monitoring control. ing.
An example of the display is shown in FIG. This figure is a display example of an ITV monitoring device that monitors the inside of a tunnel. In this figure, 10 1 Is the ITV monitoring screen, 10 2 -10 4 Is a GUI for ITV monitoring control. 2 Is the surveillance camera switching screen, 10 3 Is the surveillance camera position screen, 10 4 Is a camera operation screen.
[0003]
There are four ITV cameras (not shown) installed in the tunnel, each of which has a monitoring
[0004]
Surveillance
When changing the shooting direction of the selected ITV camera, the
To set the lens of each ITV
[0005]
On the other hand, FIG. 14 is a diagram showing operation buttons by GUI of another conventional ITV monitoring apparatus. In the example shown in this figure, horizontal and vertical buttons for directing the ITV camera in the vertical and horizontal directions, and a telephoto / wide angle Zoom button to set, focus button to set perspective, wiper button to move wiper to wipe off dirt and water droplets on front glass of ITV camera, defroster button to move defroster to remove fog on front glass of ITV camera And an illumination button for turning on illumination for illuminating the shooting direction of the ITV camera.
[0006]
To move the ITV camera to the left in the horizontal direction, use the mouse to place the mouse pointer on the horizontal “left button” on the GUI and click the mouse button. Place the mouse pointer on the "right button" and click the mouse button. To move the camera vertically, use the mouse to place the mouse pointer on the vertical “up button” on the GUI, click the mouse button, and move it vertically downward. Place the mouse pointer on the "lower button" and click the mouse button. To set the telephoto, use the mouse to place the mouse pointer on the “zoom button” of the GUI zoom and click the mouse button. To set the wide angle, place the mouse pointer on the “wide-angle button” of the GUI zoom. Click the mouse button again. When adjusting the focus, the mouse is overlaid on the “far button” or “near button” of the focus of the GUI using the mouse, and the mouse button is clicked.
[0007]
[Problems to be solved by the invention]
However, the conventional ITV monitoring apparatus described above has the following problems.
(1) ITV
[0008]
{Circle around (2)} As a method of solving this problem, conventionally, as shown in FIG. 5 , And by double clicking the mouse button on the mouse pointer, the ITV monitor screen may be displayed on the entire monitor screen of the personal computer (see FIG. 16) or may be reduced. However, if the mouse operation is neglected, the ITV monitoring screen may remain reduced indefinitely.
[0009]
(3) In the prior art shown in FIG. 14, GUI buttons for turning the ITV camera and controlling the telephoto / wide angle are provided for “up / down”, “left / right”, “tele / wide angle”, and “far / near”, respectively. Therefore, for example, when performing a horizontal operation, the mouse pointer is overlaid on the horizontal “left button” or “right button” of the GUI with the mouse and the mouse button is clicked. If you do not look at the operation screen, it is difficult to move the mouse pointer over the button, especially when you are operating little by little, you will see the operation screen and the monitoring screen alternately to repeat the face up and down operation Therefore, the operability was not good.
[0010]
The present invention has been made in view of such circumstances, and an object thereof is to provide an ITV monitoring method and an ITV monitoring apparatus capable of improving operability.
[0011]
[Means for Solving the Problems]
In order to achieve the above object, an ITV monitoring method according to
[0012]
According to this method, the mouse pointer is held on the screen displaying the video shot by the ITV camera in a state where the video shot by the ITV camera and the graphical user interface for operating the ITV camera are displayed. And then press the mouse button, press the specified key assigned to the keyboard, or if these operations are not performed for a certain period of time from the previous mouse operation or keyboard operation, the ITV Only the video imaged by the camera is displayed, and when the mouse operation or the keyboard operation is performed after this state, the original display state is restored.
Therefore, when the operation of the ITV camera is not required, the video imaged by the ITV camera is displayed on the entire monitor screen, so that the visibility at the time of monitoring is improved, and switching between full display and reduced display of the ITV monitor screen is possible. The burden on the operator is reduced.
[0013]
The ITV monitoring apparatus according to the invention of claim 2 A monitor for displaying, a keyboard for inputting key operation information, a mouse for inputting positional information on the monitor, and a mouse that receives video signals from a plurality of ITV cameras and displays them on the monitor And a computer that performs necessary processing in response to input from the keyboard and the keyboard, and the swiveling means of the ITV camera having a selection button corresponding to each ITV camera for selecting one from a plurality of ITV cameras, and swiveling means A graphical user interface for controlling the video and images taken by the ITV camera selected by the selection button from a plurality of ITV cameras on the screen of the monitor Display at the same time Display control means; Taken with ITV camera On the monitor display On the video Mouse pointer A first detection for detecting whether the mouse button is operated by overlapping Assigned to keyboard A second detection for detecting whether the full-screen display switching key is pressed; These operations are performed for a certain period of time from the previous mouse operation or keyboard operation. Detection means for performing a third detection for detecting whether or not a mouse operation or a keyboard operation is performed, and a mouse button by placing the mouse pointer on the video by the detection means. When it is detected that it has been operated, or when pressing of the full-screen display switching key is detected, or no operation has been detected for a certain period of time. If the entire monitor screen While magnifying and displaying the video, This When the detection means detects that a mouse operation or a keyboard operation has been performed after the enlarged display state, the enlarged display state Control means for returning to the previous display state.
[0014]
According to this configuration, similarly to the above-described method, the screen for displaying the video shot by the ITV camera in the state where the video shot by the ITV camera and the graphical user interface for operating the ITV camera are displayed. Hold the mouse pointer over and press the mouse button, press the specified key assigned to the keyboard, or if these operations are not performed for a certain period of time from the previous mouse operation or keyboard operation, Only the video imaged by the ITV camera is displayed on the entire monitor screen, and the original display state is obtained when the mouse operation or the keyboard operation is performed after this state.
Therefore, when the operation of the ITV camera is not required, the video imaged by the ITV camera is displayed on the entire monitor screen, so that the visibility at the time of monitoring is improved, and switching between full display and reduced display of the ITV monitor screen is possible. The burden on the operator is reduced.
[0025]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
(I) First embodiment
FIG. 1 is a block diagram showing a configuration of a first embodiment of an ITV monitoring apparatus according to the present invention.
The
The
[0026]
[0027]
Next, the operation of the
When the operator of the ITV monitoring device performs operations such as switching and zooming of the
Then, when the operation of the ITV camera 36 (horizontal / vertical position setting, zoom and focus adjustment) is completed, the operator now displays the
[0028]
Here, it is assumed that the operator places the
[0029]
Then, when an input operation is performed by pressing the button of the mouse 33 or moving (that is, moving) or pressing any key on the keyboard 34 in the full screen monitoring screen display state, the state is monitored. Device control
[0030]
FIG. 4 is a flowchart showing the above operation.
First, in step S10, it is determined whether or not the full screen display switching key of the keyboard 34 has been pressed. If it is determined that the full screen display switching key has been pressed, the process proceeds to step S12, and the
[0031]
In step S12, the
[0032]
As described above, in the first embodiment, after the end of the ITV monitoring device control, the full screen display switching key of the keyboard 34 is pressed, or the
Therefore, when the operation of the ITV camera is not required, the video shot by the ITV camera is displayed on the entire monitor screen, so that the visibility during monitoring is improved, and the
[0033]
(II) Second embodiment
FIG. 5 is a block diagram showing the configuration of the second embodiment of the ITV monitoring apparatus according to the present invention.
The
The control logic unit 45 controls the
[0034]
That is, when the
When the
[0035]
When the
When the
The control logic unit 45 receives the above commands and controls the
In this case, the
[0036]
As described above, in the second embodiment, after selecting “horizontal”, “vertical”, “zoom”, and “focus” on the monitor screen of the personal computer 41, the left and right buttons 42a and 42b of the
Accordingly, since the turning and lens control operations of the
[0037]
(III) Third embodiment
FIG. 7 is a block diagram showing the configuration of the third embodiment of the ITV monitoring apparatus according to the present invention.
The
In the
For example, as shown in FIG. 11, the
The turning / lens control signal operated on the operation screen of the
[0038]
FIG. 8 is a functional block diagram of the
Here, as shown in FIGS. 9 and 10, the angle θ of the
[0039]
FIG. 11 shows an example of the monitor screen. 1 Is an ITV monitoring screen for displaying video shot by the
[0040]
As described above, in the third embodiment, in addition to the video captured by the
In addition, since the shooting area of the
[0041]
【The invention's effect】
According to the first and second aspects of the invention, when the operation of the ITV camera is not required, the video imaged by the ITV camera is displayed on the entire monitor screen, so that the visibility during monitoring is improved and the ITV monitoring is performed. The burden on the operator in switching between full screen display and reduced display can be reduced.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a first embodiment of an ITV monitoring apparatus according to the present invention.
FIG. 2 is a functional block diagram of a computer of the ITV monitoring apparatus according to the first embodiment.
FIG. 3 is a display example of the ITV monitoring apparatus according to the first embodiment.
FIG. 4 is a flowchart illustrating an operation of the ITV monitoring apparatus according to the first embodiment.
FIG. 5 is a block diagram showing a configuration of a second embodiment of the ITV monitoring apparatus according to the present invention.
FIG. 6 is a display example of the ITV monitoring apparatus according to the second embodiment.
FIG. 7 is a block diagram showing a configuration of a third embodiment of an ITV monitoring apparatus according to the present invention.
FIG. 8 is a functional block diagram of a calculation unit of the ITV monitoring apparatus according to the third embodiment.
FIG. 9 is an operation explanatory diagram of the ITV monitoring apparatus according to the third embodiment;
FIG. 10 is an operation explanatory diagram of the ITV monitoring apparatus according to the third embodiment.
FIG. 11 is a display example of the ITV monitoring apparatus according to the third embodiment;
FIG. 12 is a display example of the ITV monitoring apparatus according to the third embodiment;
FIG. 13 is a display example of a conventional ITV monitoring device.
FIG. 14 is a display example of a conventional ITV monitoring device.
FIG. 15 is a display example of a conventional ITV monitoring device.
FIG. 16 is a display example of a conventional ITV monitoring device.
[Explanation of symbols]
10 1 ITV monitoring screen
10 2 Surveillance camera switching screen
10 3 Surveillance camera position screen
10 4 Camera operation screen
30 ITV monitoring device
31 Personal computer
31 1 Timer control function
31 2 No input state detection function
31 3 Full-screen display command detection function
31 4 Full-screen monitoring screen display function
31 5 Monitoring device control request detection function
31 6 State return function before full screen switching
32 monitors
33 mice
34 Keyboard
35 Camera switcher
36 ITV Camera
37 Mouse pointer
40 ITV monitoring equipment
41 Personal computer
42 mice
42a Left button
42b right button
43 Monitor
44 ITV Camera
45 Control logic
46 Swivel device
47 Mouse pointer
50 ITV monitoring equipment
51 ITV Camera
52 Calculation unit
53 Monitor
55 Horizontal Information Processing Unit
56 Vertical Information Processing Unit
57 Horizontal processing section
58 Zoom magnification information processing section
59 Vertical processor
60 Display processing function
70 1 ITV monitoring screen
70 2 Camera operation screen
70 3 Map screen
80 river
81 Monitoring area
82A-82C Shooting area
Claims (2)
前記画面上に表示された前記ITVカメラで撮影された映像にマウスポインタを重ねてマウスボタンが操作されるかを検出する第1の検出を行い、
キーボードに割り当てた全画面表示切替キーが押下されるかを検出する第2の検出を行い、
前回のマウス操作又はキーボード操作から一定時間これらの操作が行われないかを検出する第3の検出を行い、
前記第1の検出において、前記映像にマウスポインタを重ねてマウスボタンが操作されたことが検出された場合に、或いは第2の検出において、前記全画面表示切替キーの押下が検出された場合に、または前記第3の検出において、一定時間の無操作が検出された場合に、前記モニタ画面の全面に前記映像を拡大して表示し、
この拡大表示状態後に、マウス操作又はキーボード操作が行われるかを監視し、
前記拡大表示状態後に、マウス操作又はキーボード操作が行われたことが検出された場合に、前記モニタ画面の表示を元の表示内容に戻すことを特徴とするITV監視方法。On the monitor screen, the video shot by the ITV camera selected from the plurality of ITV cameras is displayed, and the selection button corresponding to each ITV camera and each ITV camera for selecting 1 from the plurality of ITV cameras are operated. And a graphical user interface for displaying the image taken with the ITV camera ,
Performing a first detection for detecting whether a mouse button is operated by overlaying a mouse pointer on an image captured by the ITV camera displayed on the screen;
A second detection is performed to detect whether the full screen display switching key assigned to the keyboard is pressed,
Perform third detection for detecting the squid certain time these operations, such performed from the previous mouse or keyboard operation,
In the first detection, when it is detected that a mouse button is operated with the mouse pointer over the video, or in the second detection, when the full-screen display switching key is pressed. Or in the third detection, when no operation for a predetermined time is detected , the video is enlarged and displayed on the entire surface of the monitor screen ,
Monitor whether mouse operation or keyboard operation is performed after this enlarged display state,
ITV monitoring method after prior Symbol enlarged state, when the mouse operation or keyboard operation is detected to have been performed, and returning to the original display content of the display of the monitor screen.
複数のITVカメラから1を選択するための各ITVカメラ対応の選択用ボタンと、旋回手段を有するITVカメラの前記旋回手段を制御するためのグラフィカルユーザインタフェースと、複数のITVカメラから前記選択用ボタンにより選択されたITVカメラで撮影された映像とを、前記モニタの画面に同時に表示する表示制御手段と、
ITVカメラで撮影され前記モニタ上において表示されている映像上にマウスポインタを重ねてマウスボタンが操作されるかを検出する第1の検出と、キーボードに割り当てた全画面表示切替キーが押下されるかを検出する第2の検出と、前回のマウス操作又はキーボード操作から一定時間これらの操作が行われないかを検出する第3の検出と、マウス操作又はキーボード操作が行われるかを検出する第4の検出とを行う検出手段と、
前記検出手段によって、前記映像にマウスポインタを重ねてマウスボタンが操作されたことが検出された場合に、または前記全画面表示切替キーの押下が検出された場合に、または、一定時間の無操作が検出された場合に、前記モニタ画面の全面に前記映像を拡大して表示する一方、この拡大表示状態後に、前記検出手段によってマウス操作又はキーボード操作が行われたことが検出された場合に、前記拡大表示状態の前の表示状態に戻す制御手段と、
を具備することを特徴とするITV監視装置。 A monitor for displaying, a keyboard for inputting key operation information, a mouse for inputting positional information on the monitor, and a mouse that receives video signals from a plurality of ITV cameras and displays them on the monitor And a computer for performing necessary processing in response to input by the keyboard and input from the keyboard,
A selection button corresponding to each ITV camera for selecting 1 from a plurality of ITV cameras, a graphical user interface for controlling the turning means of the ITV camera having a turning means, and the selection buttons from a plurality of ITV cameras Display control means for simultaneously displaying on the screen of the monitor the video shot by the ITV camera selected by
The first detection for detecting whether the mouse button is operated by placing the mouse pointer on the image captured by the ITV camera and displayed on the monitor, and the full screen display switching key assigned to the keyboard is pressed. A second detection for detecting whether a mouse operation or keyboard operation is performed, a third detection for detecting whether these operations are not performed for a certain period of time since the previous mouse operation or keyboard operation , and a second detection for detecting whether a mouse operation or keyboard operation is performed. Detecting means for detecting 4;
When the detection means detects that the mouse button is operated with the mouse pointer over the video, or when pressing of the full-screen display switching key is detected, or no operation for a certain period of time If but detected, while expanding and displaying the image on the entire surface of the monitor screen, after enlarged display this condition, when the mouse operation or keyboard operation is detected to have been performed by said detecting means Control means for returning to the display state before the enlarged display state ;
An ITV monitoring device comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10710599A JP4286961B2 (en) | 1999-04-14 | 1999-04-14 | ITV monitoring method and ITV monitoring device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10710599A JP4286961B2 (en) | 1999-04-14 | 1999-04-14 | ITV monitoring method and ITV monitoring device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000298516A JP2000298516A (en) | 2000-10-24 |
JP4286961B2 true JP4286961B2 (en) | 2009-07-01 |
Family
ID=14450600
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP10710599A Expired - Fee Related JP4286961B2 (en) | 1999-04-14 | 1999-04-14 | ITV monitoring method and ITV monitoring device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4286961B2 (en) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5339986B2 (en) * | 2009-03-26 | 2013-11-13 | 三菱電機株式会社 | Programmable display |
JP5366747B2 (en) * | 2009-09-30 | 2013-12-11 | シスメックス株式会社 | Analysis equipment |
JP5641856B2 (en) * | 2010-10-05 | 2014-12-17 | 株式会社日立製作所 | Supervisory control system |
JP5096628B1 (en) | 2011-09-29 | 2012-12-12 | 徹平 江里口 | Moving image display device, moving image display method, program, and moving image processing display system |
JP2013246652A (en) * | 2012-05-25 | 2013-12-09 | Toshiba Corp | Facility monitoring system |
JP6449613B2 (en) * | 2014-10-10 | 2019-01-09 | 東京瓦斯株式会社 | Gas supply area surveillance camera system |
JP6399356B2 (en) * | 2015-05-26 | 2018-10-03 | パナソニックIpマネジメント株式会社 | Tracking support device, tracking support system, and tracking support method |
JP7182865B2 (en) * | 2017-11-28 | 2022-12-05 | キヤノン株式会社 | Display control device, display control method, and program |
-
1999
- 1999-04-14 JP JP10710599A patent/JP4286961B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2000298516A (en) | 2000-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20040179121A1 (en) | System and method for displaying captured images according to imaging device position | |
JP3618891B2 (en) | Camera control apparatus and camera control information display method | |
US6452628B2 (en) | Camera control and display device using graphical user interface | |
JP4559964B2 (en) | Image processing program | |
US20120019664A1 (en) | Control apparatus for auto-tracking camera system and auto-tracking camera system equipped with same | |
CA2020033A1 (en) | Camera selection and positioning system and method | |
US20030202102A1 (en) | Monitoring system | |
JP2008040576A (en) | Image processing system and video display device equipped with the same | |
JP4286961B2 (en) | ITV monitoring method and ITV monitoring device | |
JP2016082556A (en) | Control device and its control method and program | |
JP2002010240A (en) | Monitoring system | |
JP3473636B2 (en) | Imaging device | |
JP2008129946A (en) | Image control apparatus and control method thereof | |
JPH05236319A (en) | Telecamera action controller using panhead | |
JP2002034032A (en) | Controller for monitoring camera system | |
KR100787987B1 (en) | Control device of a pan/tilt camera and recording medium thereof | |
JPH11242523A (en) | Monitor camera device | |
JPH10229517A (en) | Remote image pickup control system | |
JP3397544B2 (en) | Camera control device, display device, and display method | |
JP2000101990A (en) | Monitoring camera device | |
CN112929531B (en) | Multifunctional operating system and method for shooting instrument | |
JP3902805B2 (en) | Camera control device and image display method of camera control device | |
JP3419678B2 (en) | Camera operation device | |
JP2005150834A (en) | Monitoring system | |
JP3313931B2 (en) | Video camera controller |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050812 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080109 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080122 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080324 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090317 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090326 |
|
FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |