JP2001204007A - 監視カメラの監視エリア設定装置及びその方法 - Google Patents
監視カメラの監視エリア設定装置及びその方法Info
- Publication number
- JP2001204007A JP2001204007A JP2000009688A JP2000009688A JP2001204007A JP 2001204007 A JP2001204007 A JP 2001204007A JP 2000009688 A JP2000009688 A JP 2000009688A JP 2000009688 A JP2000009688 A JP 2000009688A JP 2001204007 A JP2001204007 A JP 2001204007A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- surveillance
- monitoring
- area setting
- straight line
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
画像処理により監視エリアの画像の変化を検出して異常
の検出を行う映像自動監視システムに関するもので、特
に監視カメラの映像中の監視エリアの設定を行う装置及
び方法を提供することを目的とする。 【解決手段】 映像入力部11と、画像処理部12と、
カメラパラメータ計算部13と、監視エリア設定部14
とで監視エリア設定装置10を構成し、映像入力部11
で監視カメラ20の映像を入力し、画像処理部12で画
像処理により監視対象水平面上の3点のマーカを検出
し、カメラパラメータ計算部13において3点が水平面
上で等間隔に設置されていること及びカメラ高さ情報を
利用したカメラパラメータ計算を行い、計算されたカメ
ラパラメータを使用して監視エリア設定部14で3点の
マーカを結ぶ直線とこれと一定間隔で平行な直線に囲ま
れた監視エリアを設定することを特徴とする。
Description
エリア設定装置及びその方法に関する。詳しくは、監視
カメラの映像をもとに遠隔地にてカメラ設置場所の状況
監視を行う映像監視システムに関するもので、特にカメ
ラの映像を画像処理することにより映像中の特定のエリ
アの状況を連続的に自動監視する画像処理装置におい
て、映像中の監視エリアを自動的に設定する監視カメラ
の監視エリア設定装置に関するものである。
地の監視室において監視対象場所の状況監視を行う映像
監視システムが多く運用されている。例えば、鉄道駅構
内の通路や広場での人の流れの監視、プラットホームで
の乗降客と進入する電車との接触等の監視、デパートや
コンビニの店内での客の挙動の監視、美術館や博物館の
展示室の展示品の監視、建物や施設の出入り口の人の出
入り状況の監視、あるいは生産現場における産業用ロボ
ットの動作範囲内への作業員の立ち入り監視など、室内
はもとより、浄水場や変電所における運転状況や侵入者
監視、ダムサイトや農業用水路の取水口近辺へのボート
や倒木などの接近の監視、工事現場における作業状況や
危険区域内への侵入者の監視、高速道路を中心とした道
路における車両走行状況の監視など、屋外にも監視カメ
ラが多く設置されている。
2つの方法がある。一つは、監視員による目視での監視
で、監視室のモニタに映る監視カメラの映像を監視員が
目視にて観察するものである。もう一つの利用方法は、
監視カメラの映像を常時又は間欠的にVTRに保存して
おき何らかの異常が発生したときに再生し異常の原因を
調査分析するのに使用する方法である。またこれらの2
つの方法を同時に実施する例もある。つまり、監視カメ
ラの映像をVTRに保存しながらモニタでの監視も行う
ものである。
施設において、監視カメラが多数設置されており、監視
室に設置されたモニタが多い場合に、監視員の疲労軽減
と見落としの予防のために、画像処理による自動監視が
行われている。これは、監視カメラの映像を画像処理装
置に入力し、背景差分法、時間差分法、領域差分法など
の画像処理手法を用いて映像中の異常状況を検出し監視
員に警告するものである。
像を保存しておき、監視カメラの映像がこれと異なる場
合に異常と判断する方法で、ドアや門の前に障害物や侵
入者がいることの検出に使用される。時間差分法は、時
間的に連続する2枚の画像の異なる部分を検出し、この
部分に移動する物体があると判断する方法で、夜間のビ
ル内の通路の侵入者や爆発などの異常検出に使用され
る。領域差分法は、入力画像のエッジ検出を行い、本来
検出されるべきでない場所にエッジ成分が抽出された場
合にこれを異常と判断するもので、道路上の障害物の検
出などに使用される。
るが、これ以外の方法を含む複数の手法を組み合わせて
使用することもある。また、一般に上述の画像処理は入
力画像の全範囲に対して行うことは少なく、図9、図1
0に示すように、異常が発生する可能性のあるエリア0
1,02を設定して、そのエリア01,02のみに対し
て画像処理を行い異常状況を監視することが行われてい
る。
一般に限定されており、異常が発生する場所が決まって
いるので特定の監視エリア以外の異常状況をノイズとし
て排除できることと、画像処理の対象範囲を小さくする
ことで画像処理装置による画像処理の時間が短縮できる
ことである。この監視エリアの設定は、カメラが固定で
監視場所が決まっている場合は手動で設定が実施され
る。
て監視エリアをマウス操作やキー操作により設定する。
画像処理装置はオペレータにより設定された監視エリア
のみを対象に画像処理を行い、異常検出を行うものであ
る。これら、従来の映像 監視システムにおける監視エ
リアの設定には以下に示す問題点が存在する。第一に、
監視カメラを移動させる監視を行う場合、監視カメラに
映る場所が時々刻々変化するので、監視エリアが設定で
きない。監視カメラが固定、即ち監視カメラの設置位置
が固定でカメラの向きも固定でレンズも焦点距離が固定
のレンズを使用する場合は、監視カメラの映像に映る場
所と範囲は同一であり、従って映像中の監視エリアも一
旦設定すればこれを利用できる。しかしながら、近年の
監視カメラは設置位置こそ固定だが、電動雲台のパンチ
ルト機構によりカメラ本体の旋回と上下振り動作が可能
で、さらに電動ズームレンズを使用して望遠から広角ま
で映像の範囲を変化させることができるものが使用され
ている。
ラの映像が大きく変化するため手動により設定した監視
エリアが保持できない。電動雲台の旋回角度や仰角の動
作と電動ズームレンズの焦点距離をセンシングして画像
処理装置にフィードバックすれば、監視カメラの向きの
変化に対応した監視エリアの再計算は可能だが(カメラ
パラメータに関しては参考文献:除、辻著、「三次元ビ
ジヨン」,共立出版,1998(以下「文献1」と呼
ぶ)によれば、カメラ座標系と三次元空間座標系の変換
行列に11のパラメータがあり、カメラに映る4点のカ
メラ座標(u,v)と三次元空間座標(x,y,z)、
又はカメラパラメータ(カメラ設置位置、カメラ旋回角
度、カメラ仰角、レンズ焦点距離など)が既知であれば
計算(キャリブレーション)することが可能であ
る。)、センサの設置もセンサ信号の伝送もコストがか
かるもので一般には行われていない。
にマウス操作などで監視エリアを設定するので、現場の
位置や距離との対応が不明である。例えば、ダムサイト
の取水口から10m以内を危険区域として設定したいと
きでも監視カメラの映像ではどこが10mなのかがオペ
レータにはわからないため、正確に10m以内の監視エ
リアを設定できない。第三に、複数の監視カメラを使用
した遠隔自動監視を行う場合、個々の監視カメラ毎に監
視場所と監視エリアが異なるので、個々の監視カメラに
対してそれぞれ個別に監視エリアを設定する必要があ
る。
厳密には監視カメラに映る場所が変わるので、監視カメ
ラの映像の確認と監視エリアの再設定が必要である。大
きな施設の多数の出入り口の監視を行う場合や長大トン
ネルの多数の監視カメラの設定を行う作業は煩雑であ
る。これらの問題点を解決する手段として我々は、「監
視カメラの監視エリア設定装置及び方法」(特願平11
−327704号)を提案した(以下、「前回提案」と
呼ぶ)。
と、カメラパラメータ計算部と、監視エリア設定部とで
構成し、映像入力部で監視カメラの映像を入力し、画像
処理部で画像処理により監視対象水平面上の3点のマー
カを検出し、カメラパラメータ計算部において3点が水
平面上で等間隔に設置されていることを利用したカメラ
パラメータ計算を行い、計算されたカメラパラメータを
使用して監視エリア設定部で3点のマーカを結ぶ直線と
これと一定間隔で平行な直線に囲まれた監視エリアを設
定することを特徴とする監視カメラの監視エリア設定装
置及びその方法である。
ったパンチルトズーム動作を行う監視カメラを使用した
画像処理による自動監視が可能である、従来は監視カ
メラが複数設置されているときは個々の監視カメラ毎に
個別に監視エリアを設定する必要があったが、複数のカ
メラで同一の間隔の監視エリアを設定する場合はパラメ
ータの設定を一括して行うことが可能であり監視エリア
設定の煩雑さが解消される、従来は監視エリアの設定
はオペレータが映像中の位置を指定して行っており、現
場における監視エリアの絶対値を設定できなかったが、
カメラの仰角を何らかの方法で設定する実施例によれ
ば、平行線で構成する監視エリアの幅を現場における絶
対値で設定可能である、の3点に集約される。また、前
回提案では14の実施例を示し、様々な監視対象におけ
るその有用性を説明した。
案の映像監視システムにおける監視エリアの設定には以
下に示す問題点が存在する。第一に、カメラ仰角の情報
を使用しない場合は、オペレータが監視カメラの映像中
にマウス操作などで監視エリアを設定するので、現場の
位置や距離との対応が不明である。例えば、ダムサイト
の取水口から10m以内を危険区域として設定したいと
きでも監視カメラの映像ではどこが10mなのかがオペ
レータにはわからないため、正確に10m以内の監視エ
リアを設定できない。
角の動作をセンシングして画像処理装置にフィードバッ
クする場合は、センサの設置もセンサ信号の伝送もコス
トがかかるので適用しにくい。第三に、カメラ仰角の情
報をオペレータが手動で設定する場合は、複数の監視カ
メラを使用した遠隔自動監視を行う場合、個々の監視カ
メラ毎に監視場所と監視エリアが異なるので、個々の監
視カメラに対してそれぞれ個別にカメラ仰角を設定する
必要がある。
厳密には監視カメラに映る場所が変わるので、監視カメ
ラの映像の確認とカメラ仰角の再設定が必要である。大
きな施設の多数の出入り口の監視を行う場合や長大トン
ネルの多数の監視カメラの設定を行う作業は煩雑であ
る。本発明は、監視カメラの映像中に監視エリアを設定
し、画像処理により監視エリアの画像の変化を検出して
異常の検出を行う映像自動監視システムに関するもの
で、特に監視カメラの映像中の監視エリアの設定を行う
装置及び方法を提供することを目的とする。
発明の請求項1に係る監視カメラの監視エリア設定装置
及びその方法は、映像入力部と、画像処理部と、カメラ
パラメータ計算部と、監視エリア設定部とで構成し、映
像入力部で監視カメラの映像を入力し、画像処理部で画
像処理により監視対象水平面上の3点のマーカを検出
し、カメラパラメータ計算部において3点が水平面上で
等間隔に設置されていること及びカメラ高さ情報を利用
したカメラパラメータ計算を行い、計算されたカメラパ
ラメータを使用して監視エリア設定部で3点のマーカを
結ぶ直線とこれと一定間隔で平行な直線に囲まれた監視
エリアを設定することを特徴とする。
る監視カメラの監視エリア設定装置は、請求項1記載の
監視カメラの監視エリア設定装置において、本装置が計
算して設定した監視エリアを入力した監視カメラの映像
と共にモニタにオーバレイ表示することを特徴とする。
る監視カメラの監視エリア設定装置は、請求項1記載の
監視カメラの監視エリア設定装置において、監視エリア
設定部では3点のマーカを結ぶ直線とこれと一定間隔で
平行な一本又は複数の直線を監視エリアとして設定し、
監視カメラの映像と共にモニタにオーバレイ表示するこ
とを特徴とする。
る監視カメラの監視エリア設定装置は、請求項2又は3
記載の監視カメラの監視エリア設定装置において、表示
する監視エリア又は平行な直線をオペレータの操作指示
に基づき保持する機能を有することを特徴とする。
る監視カメラの監視エリア設定装置は、請求項1記載の
監視カメラの監視エリア設定装置において、監視カメラ
の映像を表示したモニタ上でオペレータにより指定され
た3点を使用してカメラパラメータ計算を行い、3点を
結ぶ直線とこれと一定間隔で平行な直線に囲まれた監視
エリア、又は3点を結ぶ直線とこれと一定間隔で平行な
一本又は複数の直線を設定又はモニタ表示することを特
徴とする。
る監視カメラの監視エリア設定装置は、請求項1記載の
監視カメラの監視エリア設定装置において、監視エリア
設定部では何らかの方法で監視カメラ高さを計測するセ
ンサを設置し、監視エリア設定部はこれを入力し、これ
をもとに3点のマーカを結ぶ直線と、これに水平面上で
平行で指定された間隔の一本又は複数の直線を計算し監
視エリアとして設定することを特徴とする。
例) 本発明の装置が設定する監視カメラと監視エリアは以下
の条件を満たすものとする。ただし、これらの条件は特
別なものではなく一般的な電動雲台ズームレンズ付監視
カメラがこれにあたる。
される。 監視カメラの雲台が旋回動作する。ただし旋回動作は
水平面内で行われる。 監視カメラの雲台が上下振り動作する。ただしの上下
振り動作は鉛直面内で行われる。 監視カメラは電動ズームレンズの動作によりレンズ焦
点距離が変化する。 ただし監視カメラの旋回角度、仰角、レンズ焦点距離
は検出できない。 監視カメラで自動監視する監視エリアは実世界では水
平面上に存在する。 監視カメラの監視対象の水平面上からの高さが既知で
変わらないものとする。
定のために、監視カメラの映像に映る範囲内で監視エリ
アと同一の水平面上に等間隔に直線的に3点以上のマー
カを設定するものとし、監視エリアはこのマーカがのる
直線と平行な範囲とする。ここで使用するマーカは、本
発明の目的のために特別に着色したペイントでも良い
し、特別に設置した円盤やパイロンでも良いし、他の目
的のために設置されている工事現場や道路脇の杭やポス
トマークでも良いし、道路の車線マークや建造物の柱や
土台石でも良い。
に示すように、映像入力部11と画像処理部12と、カ
メラパラメータ計算部13と、監視エリア設定部14と
で構成し、映像入力部11で監視カメラ20の映像を入
力し、画像処理部12で画像処理により3点のマーカを
検出し、カメラパラメータ計算部13において3点が水
平面上で等間隔に設置されていること及び、オペレータ
により予め設定されたマーカ間隔とカメラ高さ情報を利
用したカメラパラメータ計算を行い、監視エリア設定部
14でこのパラメータを使用して3点のマーカを結ぶ直
線とこれと一定間隔で平行な直線に囲まれた監視エリア
を設定する。
アに対して画像処理を行い異常の検出などを行うもので
ある。カメラパラメータの計算手順の例を説明する。図
2に示すような監視の映像中の位置(u,v)と実世界
の空間位置(x,y,z)との関係を決定するカメラパ
ラメータは、カメラの設置位置(X,Y,Z)とカメラ
姿勢(θ,φ,ψ)に関する6つの外部パラメータとカ
メラ自体レンズ焦点距離fと画像中心(u0,v0)と
CCD素子単位長比と軸の交差角度の5つの内部パラメ
ータの合計11のパラメータが存在する(文献1)。
はCCD素子単位長比が1:1、軸の交差角度が90度
に調整されている。また、監視カメラが水平に設置され
ているのでψ=0とすることができ、マーカと監視エリ
アが同一の水平面上にあり、雲台の動作が水平面に水平
又は鉛直であれば水平面上の平行線の計算に関してφは
無関係であるので、φ=0と置くことが出来る。
ンズ中心においてu0=v0=0とし、空間座標系の原
点も同じくカメラのレンズ中心において、X=Y=Z=
0とすれば、図3に示すように、残るパラメータはレン
ズ焦点距離とCCDサイズの比を表すαとカメラの仰角
θの2つになる。ある計測点をM(X,Y,Z)、Mの
CCD上の画像点をm(u,v)とするとMとmの関係
は、
カメラ内部パラメータで、
ラ高さで一定であるから、mとMは一対一に対応し、
点m1(u1,v1)、m2(u2,v2)、m3(u
3,v3)が水平面上のM1(X1,Y1,Z1)、M
2(X2,Y2,Z2)、M3(X3,Y3,Z3)に
対応し、これらが等間隔で直線上にあるとすれば、
図4に示すように、等間隔に設置されたマーカの間隔を
dとすれば、
高さをhとして整理すると、
計算される。さらに、
について展開すると、
と、
る。同様に(16)式からズーム倍率に相当するカメラ
パラメータαを求めることができる。これにより、
(9)(10)式によりカメラ画像中の点(ui,v
i)と水平面上の点(Yi,Zi)の相互の座標変換を
行うことが可能で、即ち、水平面上のマーカM1−M2
に平行な直線に対応する画像中の直線をカメラ画像中に
描画することが可能である。
設置されたマーカを画像中に検出しこれらの画像中の座
標及びカメラ高さとマーカ間隔の情報から水平面上でマ
ーカが構成する直線と平行な直線を画像中に描画するも
のであり、本発明の特徴は、3点のマーカが画像中にあ
れば、これと水平面上で平行で一定間隔の直線を決定す
ることが可能でこれらに囲まれた監視エリアを計算によ
り決定できることである。
法では実施していなかった、カメラ仰角θとズーム倍率
に関係するカメラパラメータαを計算するので、監視対
象水平面上の仮想的な平行線に対応する直線のカメラ画
像中の位置をオペレータが指定する間隔で正確に計算す
ることが可能である。例えば、正確に10m以内の監視
エリアをカメラ画像中に設定可能である。本発明による
監視エリア設定を逐次行うことにより、監視カメラの雲
台とズームレンズをを操作し時々刻々と映像が変化して
も、3点のマーカが映像に映っていれば、これをもとに
監視エリアの更新がなされ、連続的な自動監視が可能と
なる。
施例 本発明の装置は、水平面上に等間隔で直線上に設置され
た3点のマーカを画像処理により検出し、カメラパラメ
ータ計算を行い、3点のマーカを結ぶ直線とこれと一定
間隔で平行な直線に囲まれた監視エリアを設定するもの
で、遠隔監視システムがこの監視エリアに対して画像処
理を行い異常の検出などを行うものである。本発明で使
用するマーカの例とその検出方法の実施例については前
回提案のマーカとその検出方法がそのまま使用できる。
れた3点のマーカ1を画像処理により検出し、カメラパ
ラメータ計算を行い、3点のマーカ1を結ぶ直線とこれ
と一定間隔で平行な直線(平行線)2に囲まれた監視エ
リア3を設定する監視カメラの監視エリア設定装置にお
いて、設定した監視エリア3を入力した監視カメラの映
像と共にモニタにオーバレイ表示することを特徴とする
監視カメラの監視エリア設定装置である。本実施例の特
徴は、本装置が計算して設定した監視エリア3をオペレ
ータが確認できる点である。これにより、画像処理装置
による自動監視と同時にオペレータによる目視による監
視が可能になる利点がある。
れた3点のマーカ1を画像処理により検出し、カメラパ
ラメータ計算を行い、3点のマーカ1を結ぶ直線とこれ
と一定間隔で平行な一本又は複数の直線(平行線)2を
監視エリアとして設定し、監視カメラの映像と共にモニ
タにオーバレイ表示することを特徴とする監視カメラの
監視エリア設定装置である。本実施例の特徴は、監視エ
リアを領域でなく直線2で表現することである。これに
より、道路の特定車線の走行状況の監視、ダムサイトの
上面の縁部分の監視、工事現場の側溝の境界部分の監視
などに適用可能である。また、この直線2をオペレータ
が確認できるので、画像処理装置による自動監視と同時
にオペレータによる目視による監視が可能になる利点が
ある。
画像処理により検出し、カメラパラメータ計算を行い、
3点のマーカを結ぶ直線とこれと一定間隔で平行な一本
又は複数の直線又はこれらにより囲まれるエリアを監視
エリアとして設定し、監視カメラの映像と共にモニタに
オーバレイ表示する監視カメラの監視エリア設定装置に
おいて、表示する監視エリア又は平行な直線をオペレー
タの操作指示に基づき保持する機能を有することを特徴
とする監視カメラの監視エリア設定装置である。
作して3点のマーカが映る雲台位置を決定したあとに、
カメラを移動させないことを前提条件として、一度計算
した監視エリアを保持するものである。これにより、監
視エリアの設定後に何らかの理由でマーカが隠れたり移
動しても同一の監視エリアを使用することが可能にな
る。現場の状況の変化や人の移動などによりマーカが隠
れたり移動したりする可能性のある、建物の出入り口や
工事現場の監視のときに効果がある。
上にオペレータがマウス操作で3点をマーカ4として指
定し、この3点のマーカ4を使用してカメラパラメータ
計算を行い、3点のマーカ4を結ぶ直線とこれと一定間
隔で平行な直線(平行線)2に囲まれた監視エリア、又
は3点のマーカ4を結ぶ直線とこれと一定間隔で平行な
一本又は複数の直線2を設定又はモニタ表示することを
特徴とする監視カメラの監視エリア設定装置である。本
実施例の特徴は、3点のマーカ4を画像処理により検出
する替わりに、監視カメラの映像中の3点をオペレータ
がマウスで指定することである。マウスで指定するマー
カの位置はタイルの目地や橋の欄干など、一定間隔であ
ることが保証されているものであることが条件である。
これにより、画像処理により検出すべきマーカがない場
合、マーカが検出しにくい場合、専用のマーカを設置で
きない場合にも監視エリアを設定することが可能とな
る。
で既知であることとしたが、監視カメラの使用方法によ
ってはこの条件が確保できない場合がある。例えば、図
8に示すように、前回提案でマーカの例として説明した
ダムサイト5における取水口6の付近の危険区域の監視
の場合は、ダムの水位の変動に対応してダム湖水面とカ
メラの相対的な高さが変動する。また、監視カメラをク
レーンなど高さが変化する個所に設置する場合もある。
これらの場合も、何らかの方法でカメラ高さhをオペレ
ータが知ることができれば、そのデータを入力すること
により、本発明によるカメラパラメータの計算が可能
で、監視エリアの設定が可能である。しかしながら、時
々刻々にカメラ高さが変化するようなときは、カメラ高
さを計測すること自体もこれを入力することも煩雑な作
業であり、場合によっては困難である。
て、第一の実施例の構成要素に加えて、カメラ高さを何
らかの方法で計測する手段を設置し、カメラ高さを逐次
計測し、これを監視エリア設定装置に入力し、このデー
タを使用してカメラパラメータ計算を行い、監視エリア
設定部でこのパラメータを使用して3点のマーカを結ぶ
直線とこれと一定間隔で平行な直線に囲まれた監視エリ
アを設定する方法及び装置を提案する。カメラ高さの計
測方法の例を説明する。監視対象の水平面の高さが変化
する場合、図8に示すように、例えば、前述したダムサ
イト5における取水口6の付近の危険区域の監視などの
場合は、地上におけるカメラの設置場所が変わらないと
すれば、水平面の高さを計測する測定器、ダム湖の場合
は水位計を設置し(一般的なダムでは設置されているこ
とが多い)、水位計の計測値を元に水面とカメラ高さを
計算してカメラパラメータを計算することができる。
さ自体が変化する場合は、監視対象の水平面からカメラ
までの高さを、レーザー距離計、超音波距離計、ディジ
タル巻尺、ステレオカメラ、などを使用して直接又は間
接的に計測して入力することで、カメラパラメータを計
算することができる。本実施例の特徴は、監視対象水平
面からのカメラ高さを何らかの手段で知ることにより監
視エリアを設定することである。
高さが一定でなく変化する場合にも、監視エリアの設定
が行われる利点がある。従って、例えば、複数のカメラ
に対して同一の間隔で監視エリアを設定する場合はパラ
メータの設定を一括して行うことが可能であり、カメラ
毎に個別に設定する必要がないため作業が簡便である。
また、カメラやレンズを交換したあとの調整が不要であ
る。
は、監視カメラの映像中に監視エリアを設定し、画像処
理により監視エリアの画像の変化を検出して異常の検出
を行う映像自動監視システムに関するもので、特に監視
カメラの映像中の監視エリアの設定を行うことができ
る。更に、本発明の装置は、水平面上に等間隔で直線上
に設置された3点のマーカを画像処理により検出し、カ
メラ高さの情報を使用してカメラパラメータ計算を行
い、3点のマーカを結ぶ直線とこれと一定間隔で平行な
直線に囲まれた監視エリアを設定するもので、この監視
エリアに対して遠隔監視システムが画像処理を行い異常
の検出などを行うことができる。 従来は監視エリアの設定はオペレータが映像中の位置
を指定して行っており、現場における監視エリアの絶対
値を設定できなかったが、本発明によれば、マーカの間
隔をもとにカメラパラメータを計算するので、平行線で
構成する監視エリアの幅を現場における絶対値で設定可
能である。例えばホームの縁から50cm以内の範囲を
監視エリアとして設定可能である。 従来は監視エリアの設定はオペレータが映像中の位置
を指定して行っており、監視カメラが複数設置されてい
るときは個々の監視カメラ毎に個別に監視エリアを設定
する必要があったが、本発明によれば、複数のカメラで
同一の間隔の監視エリアを設定する場合はパラメータの
設定を一括して行うことが可能である。これにより監視
エリア設定の煩雑さが解消される。例えば、ホームに沿
って設置された複数の監視カメラの監視エリアをホーム
の縁から50cm以内の範囲とする場合は、監視エリア
をー括して設定可能である。 従来はパンチルトズーム操作を行う監視カメラについ
ては画像処理による自動監視が出来なかった。その理由
は監視カメラの映像範囲が変化することにより監視エリ
アが変わるのでこれを設定することが出来なかったから
であるが、本発明によれば水平面上に直線的に等間隔で
設置されたマーカを検出してこれを基準とした平行直線
を計算することにより監視エリアの計算が可能であるの
で、パンチルトズーム動作を行う監視カメラを使用した
画像処理による自動監視が可能である。 本装置が計算して設定した画像監視エリアを入力した
監視カメラの映像と共にモニタにオーバレイ表示するこ
とにより監視エリアをオペレータが確認できる利点があ
る。これにより、画像処理装置による自動監視と同時に
オペレータによる目視による監視が可能になる。 3点のマーカを結ぶ直線とこれと一定間隔で平行な一
本又は複数の直線を監視エリアとして設定し、監視カメ
ラの映像と共にモニタにオーバレイ表示し、監視エリア
を領域でなく直線で表現するので、道路の特定車線の走
行状況の監視、ダムサイトの上面の縁部分の監視、工事
現場の側溝の境界部分の監視などに適用可能である。ま
た、この直線をオペレータが確認できるので、画像処理
装置による自動監視と同時にオペレータによる目視によ
る監視が可能である。 監視カメラの雲台を操作して3点のマーカが映る雲台
位置を決定したあとに、一度計算した監視エリアを保持
することにより、監視エリアの設定後に何らかの理由で
マーカが隠れたり移動しても同一の監視エリアを使用す
ることが可能になる。現場の状況の変化や人の移動など
によりマーカが隠れたり移動したりする可能性のある、
建物の出入り口や工事現場の監視のときに効果がある。 3点のマーカを画像処理により検出する替わりに、監
視カメラの映像中の3点をオペレータがマウスで指定す
ることにより、画像処理により検出すべきマーカがない
場合、マーカが検出しにくい場合、専用のマーカを設置
できない場合にも監視エリアを設定することが可能とな
る。 カメラ仰角を何らかの手段で計測して入力することに
より、カメラの高さが変化する場合にも監視エリアの設
定が可能である。
である。
ある。
である。
る。
ある。
子を示す説明図である。
である。
ある。
す説明図である。
Claims (6)
- 【請求項1】 映像入力部と、画像処理部と、カメラパ
ラメータ計算部と、監視エリア設定部とで構成し、映像
入力部で監視カメラの映像を入力し、画像処理部で画像
処理により監視対象水平面上の3点のマーカを検出し、
カメラパラメータ計算部において3点が水平面上で等間
隔に設置されていること及びカメラ高さ情報を利用した
カメラパラメータ計算を行い、計算されたカメラパラメ
ータを使用して監視エリア設定部で3点のマーカを結ぶ
直線とこれと一定間隔で平行な直線に囲まれた監視エリ
アを設定することを特徴とする監視カメラの監視エリア
設定装置及びその方法。 - 【請求項2】 請求項1記載の監視カメラの監視エリア
設定装置において、本装置が計算して設定した監視エリ
アを入力した監視カメラの映像と共にモニタにオーバレ
イ表示することを特徴とする監視カメラの監視エリア設
定装置。 - 【請求項3】 請求項1記載の監視カメラの監視エリア
設定装置において、監視エリア設定部では3点のマーカ
を結ぶ直線とこれと一定間隔で平行な一本又は複数の直
線を監視エリアとして設定し、監視カメラの映像と共に
モニタにオーバレイ表示することを特徴とする監視カメ
ラの監視エリア設定装置。 - 【請求項4】 請求項2又は3記載の監視カメラの監視
エリア設定装置において、表示する監視エリア又は平行
な直線をオペレータの操作指示に基づき保持する機能を
有することを特徴とする監視カメラの監視エリア設定装
置。 - 【請求項5】 請求項1記載の監視カメラの監視エリア
設定装置において、監視カメラの映像を表示したモニタ
上でオペレータにより指定された3点を使用してカメラ
パラメータ計算を行い、3点を結ぶ直線とこれと一定間
隔で平行な直線に囲まれた監視エリア、又は3点を結ぶ
直線とこれと一定間隔で平行な一本又は複数の直線を設
定又はモニタ表示することを特徴とする監視カメラの監
視エリア設定装置。 - 【請求項6】 請求項1記載の監視カメラの監視エリア
設定装置において、監視エリア設定部では何らかの方法
で監視カメラ高さを計測するセンサを設置し、監視エリ
ア設定部はこれを入力し、これをもとに3点のマーカを
結ぶ直線と、これに水平面上で平行で指定された間隔の
一本又は複数の直線を計算し監視エリアとして設定する
ことを特徴とする監視カメラの監視エリア設定装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000009688A JP4140159B2 (ja) | 2000-01-19 | 2000-01-19 | 監視カメラの監視エリア設定装置及びその方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000009688A JP4140159B2 (ja) | 2000-01-19 | 2000-01-19 | 監視カメラの監視エリア設定装置及びその方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001204007A true JP2001204007A (ja) | 2001-07-27 |
JP4140159B2 JP4140159B2 (ja) | 2008-08-27 |
Family
ID=18537802
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000009688A Expired - Lifetime JP4140159B2 (ja) | 2000-01-19 | 2000-01-19 | 監視カメラの監視エリア設定装置及びその方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4140159B2 (ja) |
Cited By (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003050107A (ja) * | 2001-08-07 | 2003-02-21 | Matsushita Electric Ind Co Ltd | カメラ校正装置 |
JP2005062924A (ja) * | 2003-08-08 | 2005-03-10 | Omron Corp | 三次元物体認識装置およびその設定方法 |
JP2005277640A (ja) * | 2004-03-24 | 2005-10-06 | Matsushita Electric Ind Co Ltd | 画像領域設定装置及び画像領域設定方法 |
GB2414884A (en) * | 2004-06-04 | 2005-12-07 | Chin-Ding Lai | Setting and monitoring an image area and controlling an electronic device in response |
KR100727827B1 (ko) | 2006-02-07 | 2007-06-13 | (주)아이디스 | 영상 감시 장치 및 이의 동작 방법 |
JP2009284371A (ja) * | 2008-05-26 | 2009-12-03 | Meidensha Corp | 映像監視装置 |
JP2010165114A (ja) * | 2009-01-14 | 2010-07-29 | Mitsubishi Electric Corp | 画像監視装置及びその設置条件補正方法 |
JP2011515753A (ja) * | 2008-03-18 | 2011-05-19 | マッテイ,サウレ | 安全性、車両性能の標準化かつ/または種々の規制を対象とする都市および都市外の道路網を制御するための双方向制御システム |
WO2013058093A1 (ja) * | 2011-10-18 | 2013-04-25 | 日立建機株式会社 | 作業機械の周囲監視装置 |
US8457401B2 (en) | 2001-03-23 | 2013-06-04 | Objectvideo, Inc. | Video segmentation using statistical pixel modeling |
US8564661B2 (en) | 2000-10-24 | 2013-10-22 | Objectvideo, Inc. | Video analytic rule detection system and method |
US8711217B2 (en) | 2000-10-24 | 2014-04-29 | Objectvideo, Inc. | Video surveillance system employing video primitives |
JP2015022333A (ja) * | 2013-07-16 | 2015-02-02 | 株式会社ネクスコ東日本エンジニアリング | 侵入抑止装置、侵入抑止方法、プログラム、および侵入抑止システム |
US9020261B2 (en) | 2001-03-23 | 2015-04-28 | Avigilon Fortress Corporation | Video segmentation using statistical pixel modeling |
JP2015170141A (ja) * | 2014-03-07 | 2015-09-28 | 株式会社中電工 | 指定範囲監視システム |
JP2017049792A (ja) * | 2015-09-02 | 2017-03-09 | 株式会社中電工 | 指定範囲監視システム |
JP2017049794A (ja) * | 2015-09-02 | 2017-03-09 | 株式会社中電工 | 指定範囲監視システム |
US9704040B2 (en) | 2014-03-19 | 2017-07-11 | Kabushiki Kaisha Toshiba | Image processing apparatus for dividing an image based on markers, method thereof and program therefor |
US9892606B2 (en) | 2001-11-15 | 2018-02-13 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
JP6339259B1 (ja) * | 2017-03-24 | 2018-06-06 | 東芝エレベータ株式会社 | 画像処理システム及びマーカー |
CN108222085A (zh) * | 2018-01-25 | 2018-06-29 | 东北大学 | 一种地下综合管廊墙体损伤监测装置及方法 |
WO2018159144A1 (ja) * | 2017-03-01 | 2018-09-07 | パナソニックIpマネジメント株式会社 | 3次元侵入検知システムおよび3次元侵入検知方法 |
JP2019156565A (ja) * | 2018-03-13 | 2019-09-19 | 新明和工業株式会社 | 塵芥収集車 |
JP6644327B1 (ja) * | 2019-09-13 | 2020-02-12 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法 |
JP2021043932A (ja) * | 2019-12-19 | 2021-03-18 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法 |
CN113188463A (zh) * | 2021-05-25 | 2021-07-30 | 上海同禾工程科技股份有限公司 | 一种尾矿库坝体变形监测系统及监测方法 |
JP2022093481A (ja) * | 2021-04-28 | 2022-06-23 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 車両の駐車違反の識別方法、装置、電子機器、記憶媒体及びコンピュータプログラム |
JP7221445B1 (ja) | 2022-11-04 | 2023-02-13 | 西日本技術開発株式会社 | 水位計測装置および水位計測方法、並びにプログラム |
WO2024048210A1 (ja) * | 2022-09-02 | 2024-03-07 | 富士フイルム株式会社 | 視点画像生成装置、視点画像生成方法、及びプログラム |
CN117782226A (zh) * | 2024-02-23 | 2024-03-29 | 四川省能源地质调查研究所 | 矿山安全预警系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08240421A (ja) * | 1995-03-06 | 1996-09-17 | Meidensha Corp | カメラパラメータの推定方法およびそのパラメータ利用の物体認識方法 |
JPH11322247A (ja) * | 1998-05-13 | 1999-11-24 | Hitachi Ltd | マンコンベアの監視装置 |
JP2000041173A (ja) * | 1998-07-23 | 2000-02-08 | Mr System Kenkyusho:Kk | 視点位置姿勢の決定方法、カメラ装置、及び視点位置センサ |
JP2001145092A (ja) * | 1999-11-18 | 2001-05-25 | Meidensha Corp | 映像監視システムおよび映像監視方法 |
-
2000
- 2000-01-19 JP JP2000009688A patent/JP4140159B2/ja not_active Expired - Lifetime
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08240421A (ja) * | 1995-03-06 | 1996-09-17 | Meidensha Corp | カメラパラメータの推定方法およびそのパラメータ利用の物体認識方法 |
JPH11322247A (ja) * | 1998-05-13 | 1999-11-24 | Hitachi Ltd | マンコンベアの監視装置 |
JP2000041173A (ja) * | 1998-07-23 | 2000-02-08 | Mr System Kenkyusho:Kk | 視点位置姿勢の決定方法、カメラ装置、及び視点位置センサ |
JP2001145092A (ja) * | 1999-11-18 | 2001-05-25 | Meidensha Corp | 映像監視システムおよび映像監視方法 |
Cited By (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10645350B2 (en) | 2000-10-24 | 2020-05-05 | Avigilon Fortress Corporation | Video analytic rule detection system and method |
US10026285B2 (en) | 2000-10-24 | 2018-07-17 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
US10347101B2 (en) | 2000-10-24 | 2019-07-09 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
US8711217B2 (en) | 2000-10-24 | 2014-04-29 | Objectvideo, Inc. | Video surveillance system employing video primitives |
US8564661B2 (en) | 2000-10-24 | 2013-10-22 | Objectvideo, Inc. | Video analytic rule detection system and method |
US9378632B2 (en) | 2000-10-24 | 2016-06-28 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
US8457401B2 (en) | 2001-03-23 | 2013-06-04 | Objectvideo, Inc. | Video segmentation using statistical pixel modeling |
US9020261B2 (en) | 2001-03-23 | 2015-04-28 | Avigilon Fortress Corporation | Video segmentation using statistical pixel modeling |
JP2003050107A (ja) * | 2001-08-07 | 2003-02-21 | Matsushita Electric Ind Co Ltd | カメラ校正装置 |
US9892606B2 (en) | 2001-11-15 | 2018-02-13 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
JP2005062924A (ja) * | 2003-08-08 | 2005-03-10 | Omron Corp | 三次元物体認識装置およびその設定方法 |
JP2005277640A (ja) * | 2004-03-24 | 2005-10-06 | Matsushita Electric Ind Co Ltd | 画像領域設定装置及び画像領域設定方法 |
GB2414884B (en) * | 2004-06-04 | 2010-03-10 | Chin-Ding Lai | Apparatus for setting image monitoring area and method therefor |
GB2414884A (en) * | 2004-06-04 | 2005-12-07 | Chin-Ding Lai | Setting and monitoring an image area and controlling an electronic device in response |
KR100727827B1 (ko) | 2006-02-07 | 2007-06-13 | (주)아이디스 | 영상 감시 장치 및 이의 동작 방법 |
JP2011515753A (ja) * | 2008-03-18 | 2011-05-19 | マッテイ,サウレ | 安全性、車両性能の標準化かつ/または種々の規制を対象とする都市および都市外の道路網を制御するための双方向制御システム |
JP2009284371A (ja) * | 2008-05-26 | 2009-12-03 | Meidensha Corp | 映像監視装置 |
JP2010165114A (ja) * | 2009-01-14 | 2010-07-29 | Mitsubishi Electric Corp | 画像監視装置及びその設置条件補正方法 |
WO2013058093A1 (ja) * | 2011-10-18 | 2013-04-25 | 日立建機株式会社 | 作業機械の周囲監視装置 |
CN103890282A (zh) * | 2011-10-18 | 2014-06-25 | 日立建机株式会社 | 作业机械的周围监视装置 |
JPWO2013058093A1 (ja) * | 2011-10-18 | 2015-04-02 | 日立建機株式会社 | 作業機械の周囲監視装置 |
JP2015022333A (ja) * | 2013-07-16 | 2015-02-02 | 株式会社ネクスコ東日本エンジニアリング | 侵入抑止装置、侵入抑止方法、プログラム、および侵入抑止システム |
JP2015170141A (ja) * | 2014-03-07 | 2015-09-28 | 株式会社中電工 | 指定範囲監視システム |
US9704040B2 (en) | 2014-03-19 | 2017-07-11 | Kabushiki Kaisha Toshiba | Image processing apparatus for dividing an image based on markers, method thereof and program therefor |
JP2017049794A (ja) * | 2015-09-02 | 2017-03-09 | 株式会社中電工 | 指定範囲監視システム |
JP2017049792A (ja) * | 2015-09-02 | 2017-03-09 | 株式会社中電工 | 指定範囲監視システム |
GB2572933A (en) * | 2017-03-01 | 2019-10-16 | Panasonic Ip Man Co Ltd | Three-dimensional intrusion detection system and three-dimensional intrusion detection method |
JP2018147015A (ja) * | 2017-03-01 | 2018-09-20 | パナソニックIpマネジメント株式会社 | 3次元侵入検知システムおよび3次元侵入検知方法 |
WO2018159144A1 (ja) * | 2017-03-01 | 2018-09-07 | パナソニックIpマネジメント株式会社 | 3次元侵入検知システムおよび3次元侵入検知方法 |
GB2572933B (en) * | 2017-03-01 | 2022-05-18 | Panasonic Ip Man Co Ltd | Three-dimensional intrusion detection system and three-dimensional intrusion detection method |
JP2018163402A (ja) * | 2017-03-24 | 2018-10-18 | 東芝エレベータ株式会社 | 画像処理システム及びマーカー |
JP6339259B1 (ja) * | 2017-03-24 | 2018-06-06 | 東芝エレベータ株式会社 | 画像処理システム及びマーカー |
CN108222085A (zh) * | 2018-01-25 | 2018-06-29 | 东北大学 | 一种地下综合管廊墙体损伤监测装置及方法 |
JP2019156565A (ja) * | 2018-03-13 | 2019-09-19 | 新明和工業株式会社 | 塵芥収集車 |
JP7057169B2 (ja) | 2018-03-13 | 2022-04-19 | 新明和工業株式会社 | 塵芥収集車 |
JP6644327B1 (ja) * | 2019-09-13 | 2020-02-12 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法 |
JP2021043932A (ja) * | 2019-12-19 | 2021-03-18 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法 |
JP7042508B2 (ja) | 2019-12-19 | 2022-03-28 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、プログラム、又は方法 |
JP2022093481A (ja) * | 2021-04-28 | 2022-06-23 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 車両の駐車違反の識別方法、装置、電子機器、記憶媒体及びコンピュータプログラム |
JP7270808B2 (ja) | 2021-04-28 | 2023-05-10 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 車両の駐車違反の識別方法、装置、電子機器、記憶媒体及びコンピュータプログラム |
CN113188463A (zh) * | 2021-05-25 | 2021-07-30 | 上海同禾工程科技股份有限公司 | 一种尾矿库坝体变形监测系统及监测方法 |
WO2024048210A1 (ja) * | 2022-09-02 | 2024-03-07 | 富士フイルム株式会社 | 視点画像生成装置、視点画像生成方法、及びプログラム |
JP7221445B1 (ja) | 2022-11-04 | 2023-02-13 | 西日本技術開発株式会社 | 水位計測装置および水位計測方法、並びにプログラム |
JP2024067277A (ja) * | 2022-11-04 | 2024-05-17 | 西日本技術開発株式会社 | 水位計測装置および水位計測方法、並びにプログラム |
CN117782226A (zh) * | 2024-02-23 | 2024-03-29 | 四川省能源地质调查研究所 | 矿山安全预警系统 |
CN117782226B (zh) * | 2024-02-23 | 2024-05-14 | 四川省能源地质调查研究所 | 矿山安全预警系统 |
Also Published As
Publication number | Publication date |
---|---|
JP4140159B2 (ja) | 2008-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4140159B2 (ja) | 監視カメラの監視エリア設定装置及びその方法 | |
EP1341383B1 (en) | Composite camera system, zoom camera image display control method, zoom camera control method, control program, and computer readable recording medium | |
JP3785880B2 (ja) | 映像監視システムおよび映像監視方法 | |
US7479979B2 (en) | Omnidirectional monitoring control system, omnidirectional monitoring control method, omnidirectional monitoring control program, and computer readable recording medium | |
US20030020808A1 (en) | Automatic zone monitoring | |
JPH04331311A (ja) | 車間距離検出装置 | |
US20080122930A1 (en) | Image processor, intruder monitoring apparatus and intruder monitoring method | |
US7656424B2 (en) | Method and device for stabilizing images supplied by a video camera | |
US9639760B2 (en) | Methods and apparatus for establishing exit/entry criteria for a secure location | |
RU2696548C1 (ru) | Способ построения системы видеонаблюдения для поиска и отслеживания объектов | |
JP2007003380A (ja) | 対象物監視システム、対象物監視方法および対象物監視プログラム | |
CN110703760A (zh) | 一种用于安防巡检机器人的新增可疑物体检测方法 | |
CN105141887A (zh) | 一种基于热成像的海缆区域视频告警方法 | |
CN112519800A (zh) | 一种无人驾驶汽车用自检系统 | |
JP2009278300A (ja) | 映像監視システムの監視エリア設定装置 | |
RU2542873C1 (ru) | Комплекс технического наблюдения за охраняемой территорией | |
JP2004210045A (ja) | 監視装置 | |
JP3384033B2 (ja) | 駐車場空きスペ−ス監視方法 | |
KR20240015201A (ko) | 건설안전 통합관제 시스템 및 이를 구축한 건설안전 통합관제센터 건축물 | |
JP5077066B2 (ja) | 映像監視装置 | |
KR100907423B1 (ko) | 좌표맵을 이용한 카메라 제어시스템, 좌표맵을 이용한 감시시스템 및 그 제어방법 | |
CN115288797A (zh) | 一种隧道围岩变形全方位的智能化在线监测预警系统 | |
CN210072411U (zh) | 一种机器人避障系统及机器人 | |
TWI833130B (zh) | 軌道入侵偵測系統 | |
CN115866212B (zh) | 基于大数据判断画面优先级的应急指挥中控管理系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080516 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080520 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080602 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110620 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4140159 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110620 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120620 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130620 Year of fee payment: 5 |
|
EXPY | Cancellation because of completion of term |