JP3755497B2 - Control model construction support apparatus and method - Google Patents
Control model construction support apparatus and method Download PDFInfo
- Publication number
- JP3755497B2 JP3755497B2 JP2002256279A JP2002256279A JP3755497B2 JP 3755497 B2 JP3755497 B2 JP 3755497B2 JP 2002256279 A JP2002256279 A JP 2002256279A JP 2002256279 A JP2002256279 A JP 2002256279A JP 3755497 B2 JP3755497 B2 JP 3755497B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- database
- control
- model
- divided
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Feedback Control In General (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は鉄鋼,電力,一般産業等の制御システムを対象とし、制御対象からデータを収集して制御モデルを構築する場合に、高精度な制御モデルを効率的に構築する手法に関する。
【0002】
【従来の技術】
制御対象からデータを収集し計算機で用いる従来技術としては、特開平6− 168222号記載のように、制御対象の制御情報を収集する手段を備え、収集したデータを独立したメモリに蓄えることで、このデータを用いて繰り返しシミュレーションを行う手法があった。
【0003】
また制御対象から得たデータから制御モデルを構築する従来手法としては、特開平5−296923 号記載のように、制御対象から得た制御量誤差とこれを解消するモデルのチューニング量の関係を何ケースか蓄え、この関係を同定したニューラルネットで制御モデルをチューニングする手法があった。
【0004】
【発明が解決しようとする課題】
上記従来技術には、以下の問題点があった。
【0005】
特開平6−168222 号記載の手法は、制御対象からのデータの採取と、これを計算機にどのような形態で蓄えるかについての考慮はあるが、データを用いてモデル構築を行う場合に、この作業を効率化する手法や、構築した制御モデルの精度を向上させる方法については考慮されていなかった。さらに制御モデルの入出力データの遅延関係を補償することに配慮していないため、制御モデルの入出力を異なった時刻のデータを用いて構築する必要がある場合には、人手でこれを補償しなければならない場合があった。さらに蓄えたデータを制御モデル構築に支障のない形態で圧縮することに配慮していないため、データの採取を繰り返すと計算機に蓄えられているデータ量が膨大となる問題があった。
【0006】
また特開平5−296923 号記載の手法では、制御モデルの高精度化には配慮されているものの、制御対象から得たデータがどの程度一般性を有しているかを判断することを考慮していないため、例えばデータがノイズを含んでいる場合には、これが原因で構築した制御モデルの精度が低下する問題があった。さらに構築した制御モデルの妥当性を評価することに配慮していないため、制御モデルが一般性に乏しい場合には、これをそのまま実際の制御に用いることで制御性能が低下する場合があった。さらに蓄えたデータが制御モデル構築に必要な入出力領域の各部において、一般性を有した制御モデルを構築するのに十分な量,質を有していることを検証することに配慮していないため、制御モデルの特定の領域の入力に対する出力の精度が著しく低下する場合があった。
【0007】
本発明の第1の目的は、構築した制御モデルの妥当性を精度良く評価することを可能にした制御モデル構築支援装置を提供することにある。
【0008】
本発明の第2の目的は、制御モデルの入出力を異なった時刻のデータを用いて構築する必要がある場合には、制御対象から収集したデータに対して制御対象の動作を基に各入力の遅延補償を行い、制御モデルの構築にそのまま適用可能なデータベースを構築する制御モデル構築支援装置を提供することにある。
【0009】
本発明の第3の目的は、制御モデルの動作領域の各部においてデータの蓄積が不十分な領域があった場合には、これをオペレータに報知することで制御モデルの局所的な性能の低下を回避する制御モデル構築支援装置を提供することにある。
【0010】
第4の目的として、制御対象から得たデータが膨大なとき、統計的な性質の喪失を最小化した形でデータベースのサイズを適正化し、適正化したデータベースの内容を用いて制御モデルの構築を行う制御モデル構築支援装置を提供することにある。
【0011】
第5の目的として、種々の制御モデル構築支援手段をオペレータが対話形式で選択,実行できる環境を提供した、使い勝手の良い制御モデル構築支援装置を提供することにある。
【0012】
【課題を解決するための手段】
上記第1の目的は、制御対象から収集したデータを該制御対象を模擬する制御モデルへの入力データ及び出力データとして分離すると共に該入力データと該出力データを対応づけて複数のデータを第1のデータベースに格納するデータ収集手段と、前記第1のデータベースに格納された複数のデータを統計的に隔たりのない複数のデータ群に分離するデータ分割手段と、該分離された複数のデータ群をそれぞれ格納する複数のデータベースを有する第2のデータベースと、前記第1又は前記第2のデータベースに格納されたデータに基づいて前記制御対象を模擬する制御モデルを構築するモデル構築手段と、該モデル構築手段で構築された前記制御モデルを前記第1又は前記第2のデータベースに格納されたデータに基づいて評価するモデル評価手段を備えることにより達成することができる。
【0013】
上記第2の目的は、制御対象から収集したデータを該制御対象を模擬する制御モデルへの入力データ及び出力データとして分離し、該分離した前記出力データが検出された時刻に基づいて、該出力データに対応づけるべき入力データが収集される時刻を決定すると共に、該決定された時刻に収集される入力データと該出力データとを対にして前記第1のデータベースに格納するデータ収集手段と前記第1のデータベースに対にして格納された前記入力データ及び前記出力データに基づいて前記制御対象を模擬する制御モデルを構築するモデル構築手段とを備えることにより達成することができる。
【0014】
上記第3の目的は、制御対象から収集した複数のデータをデータベースに格納し、該データベースに格納された複数のデータに基づいて該制御対象を模擬する制御モデル構築支援装置において、前記制御モデルの入出力領域を複数の部分領域に分割し、該分割した部分領域に従って前記データベースに格納された複数のデータを分離すると共に該分離した結果、予め定めたデータ数より少ない領域をオペレータに報知するデータ定量化手段を備えることにより達成することができる。
【0015】
上記第4の目的は、制御対象から収集した複数のデータをデータベースに格納し、該データベースに格納された複数のデータに基づいて該制御対象を模擬する制御モデル構築支援装置において、前記データベースに格納されているデータから該データを代表する少数のデータの組み合わせを決定し、該少数のデータの組み合わせを前記データベースに格納するデータ圧縮手段を備えることにより達成することができる。
【0016】
上記第5の目的は、制御対象から収集したデータを該制御対象を模擬する制御モデルへの入力データ及び出力データとして分離し、該分離した前記出力データが検出された時刻に基づいて、該出力データに対応づけるべき入力データが収集される時刻を決定すると共に、該決定された時刻に収集される入力データと該出力データとを対にして前記第1のデータベースに格納するデータ収集手段と、前記第1のデータベースに格納された複数のデータを統計的に隔たりのない複数のデータ群に分離するデータ分割手段と、該分離された複数のデータ群をそれぞれ格納する複数のデータベースを有する第2のデータベースと、前記第1又は前記第2のデータベースに格納されたデータに基づいて前記制御対象を模擬する制御モデルを構築するモデル構築手段と、該モデル構築手段で構築された前記制御モデルを前記第1又は前記第2のデータベースに格納されたデータに基づいて評価するモデル評価手段と、前記制御モデルの入出力領域を複数の部分領域に分割し、該分割した部分領域に従って前記データベースに格納された複数のデータを分離すると共に該分離した結果、予め定めたデータ数より少ない領域をオペレータに報知するデータ定量化手段と、前記第1又は前記第2のデータベースに格納されているデータから該データを代表する少数のデータの組み合わせを決定し、該少数のデータの組み合わせを前記第1又は第2のデータベースに格納するデータ圧縮手段と、外部からの入力信号により該収集手段,該データ分割手段,該モデル構築手段,該モデル評価手段,該データ定量化手段,該データ圧縮手段を独立して起動及び終了の管理を行う管理手段とを備えることにより達成することができる。
【0017】
【発明の実施の形態】
以下、本発明の実施例を図にしたがって詳細に説明する。
【0018】
図1に本発明により実現された制御モデル構築支援装置の構成を示す。まず全体の構成を説明した後、各部の詳細を説明する。制御モデル構築支援装置100は種々のタスクが格納されている演算手段110,演算手段110に備えられている種々の演算を選択的に起動するタスク起動手段101,制御モデル構築用のデータや構築された制御モデル等を記憶する記憶手段120,外部と信号の授受を行う通信インタフェース102から構成される。さらに制御モデル構築支援装置100はオペレータが入出力を行うマンマシン装置140を備えている。さらにネットワーク150を介して制御装置130,I/O160と接続され、制御装置130に対しては構築した制御モデルをネットワーク150を介して出力する。またI/O160を介して制御対象170の状態を観測し、必要なデータの取り込みを行う。制御装置130はI/O160、ネットワーク150を介して制御対象170の状態を検出し、制御モデル構築支援装置100で構築された制御モデルを用いて制御対象170を制御するための信号を出力する。制御対象 170は制御装置130が出力した制御信号をI/O160を介して受け取り、これにしたがって動作する。
【0019】
本実施例では制御対象170として熱間圧延ラインの加熱炉プラントを例に説明する。加熱炉180は圧延に先だって鋼板を高温に加熱するプラントで、スラブと呼ばれる鋼板190が挿入され、バーナ181〜184で熱して1100℃程度に昇温した後、高温のスラブ192として出力する。加熱炉は通常、図に示すように4つ程度の炉帯(予熱帯,第1加熱帯,第2加熱帯,均熱帯)から構成される。またセンサ171は炉に入る前のスラブ温度θ0 を測定し、センサ172 〜175は各炉帯の温度t1〜t4をそれぞれ測定する。さらにセンサ176は炉から出たときのスラブ温度θout を測定する。
【0020】
次に制御モデル構築支援装置100の各部の動作を詳細に説明する。タスク起動手段101は、マンマシン装置140からオペレータが入力した情報にしたがって演算手段110に格納されているタスクの起動・管理を行う。図2にタスク起動手段101が実行する処理を示す。通常はS2-1 でオペレータがマンマシン装置140を介して信号を入力したかどうかを検出する処理を行う。本実施例では割り込みでこの信号を受信する例を示すが、周期的な検出処理を行ってもよい。割り込みが発生すると割り込みルーチンに入り、S2-2 で割り込みのコマンドを解釈し、演算手段110の中で、オペレータの指示したタスクを起動する。本実施例において演算手段110は、データ収集手段111,データ定量化手段 112,データ圧縮手段113,データ分割手段114,モデル構築手段115,モデル評価手段116,モデル転送手段117の各タスクを備えた例を示している。同様に記憶手段120は、制御対象170から収集したデータが蓄えられるデータベース121,分割されたデータが蓄えられる第2のデータベース122 、これらを用いて構築された制御モデルが蓄えられる制御モデル格納部123から構成される。
【0021】
図3にデータ収集手段111の処理アルゴリズムを示す。データ収集手段111 はタスク起動手段101からの起動指令にしたがって実行を開始される。まず S3-1で通信I/F102を介して、制御モデルの入力と出力に対応した信号を制御対象170に備えられたセンサの検出値として取り込む。本実施例では図1にしたがって、θ0 ,t1〜t4,θout を取り込む。以下制御モデルの入力が、θ0 ,t1〜t4、仕様としてあらかじめ与えられているスラブ厚B、制御モデルの出力がθout の例を示す。制御モデルとしてはこれらの入出力関係を再現する必要がある。関係をモデル化する例を示す。S3-2 でθout を検出したスラブ 192に対して、各炉帯の在炉時間からこのスラブが加熱炉に挿入されたときの時刻、および各炉帯で加熱を受けた時刻を算出する。加熱炉180は4つの炉帯から構成されており、予熱帯〜均熱帯の各在炉時間は鋼板を搬送する速度と各炉長により求めることができ、これをΔT1〜ΔT4とする。また、θout が検出された時刻をTout とすると、スラブが加熱炉に挿入されたときの時刻Tinは、
【0022】
【数1】
Tin=Tout−(ΔT1+ΔT2+ΔT3+ΔT4) …(数1)
で算出できる。またスラブが各炉帯で加熱を受けた時刻は、予熱帯Tpre 、第1加熱帯Th1,第2加熱帯Th2,均熱帯Tunifのそれぞれについて、
【0023】
【数2】
Tpre=Tout−(ΔT1/2+ΔT2+ΔT3+ΔT4) …(数2)
【0024】
【数3】
Th1=Tout−(ΔT2/2+ΔT3+ΔT4) …(数3)
【0025】
【数4】
Th2=Tout−(ΔT3/2+ΔT4) …(数4)
【0026】
【数5】
Tunif=Tout−ΔT4/2 …(数5)
で概算できる。S3-3では、このようにして算出した時刻Tin,Tpre,Th1, Th2,Tunifをそれぞれ収集したθ0 ,t1〜t4に対応づけて、さらにスラブ厚Bを収集したθout と関係づけて一組の対として制御モデル構築用データを生成する。そしてS3-4 で、構築されたデータの対を第1のデータベース121に格納する。
【0027】
図4に第1のデータベース121の構成例を示す。制御モデルの入力である θ0 ,t1〜t4,Bと制御モデルの出力であるθout の組が多数蓄えられている。
【0028】
データ定量化手段112は、第1のデータベース121の内容を検索し、統計的な性質やデータの隔たりを定量化してオペレータに報知する。オペレータは報知された結果を基に、第1のデータベース121の内容が良好な制御モデルを構築するのに十分かどうかを判断する。
【0029】
図5にデータ定量化手段112の構成を示す。タスク起動手段101により起動される。処理方法決定手段501,第1〜第nの複数の定量化手段502〜 505から構成される。定量化手段502〜505は必要に応じて複数備えられるが、必要ない場合には1つであってもよい。処理方法決定手段501は、タスク起動手段101を介したユーザからの指示により、第1の定量化手段502〜第nの定量化手段505のどれを用いるか選択する。選択された定量化手段の演算結果はマンマシン装置140に表示される。
【0030】
図6に定量化手段の処理の一例を示す。図6では、制御モデルの全領域を領域1〜領域nのn個の部分領域に分割し、部分領域毎に第1のデータベース121に蓄えられているデータの個数をカウントしてオペレータに報知する例を示す。S6-1 で第1のデータベース121からデータの対を一組抽出する。S6-2 で抽出したデータのθout が、1090℃より小さいかどうか判定する。小さい場合にはS6-3 で領域1に対応したデータ数に1を加算する。1090℃より大きい場合には、S6-4で同様にθoutが1090℃より大きく1100℃以下かどうかを判定する。判定結果がYesの場合にはS6-5 で領域2に対応したデータ数に1を加算する。このような操作を順次行い、第1のデータベース121の各データの対が各領域に何個属しているか計算する。S6-11ですべてのデータの対について行ったことを確認した後処理を終了する。
【0031】
図7にマンマシン装置140で報知された定量化結果の一例を示す。各領域についてカウントされたデータの個数が表示され、著しく個数の少ない領域3(他の領域との個数の差をとり、その差が予め定めたある一定以上のもの)について、制御モデル高精度化の観点から「1100℃<θout ≦1110℃のデータを追加して下さい。」といった表示を行いデータを追加したほうが望ましいことを指示している。オペレータはこの結果にしたがって、加熱炉180から出力されるスラブ192の目標温度Θoutを1100℃<Θout≦1110℃に設定してデータの追加を行い制御モデルの高精度化を図ることができる。定量化手段502〜505が行う処理としては、この他にθ0 ,t1〜t4,B,θout の各パラメータの分散を定量化し、その大きさで第1のデータベース121に蓄えられているデータの隔たり具合を報知する手法等、種々考えられる。
【0032】
図8にデータ圧縮手段113の構成を示す。データ圧縮手段113は第1のデータベース121を情報の喪失を最小化した形で定められたサイズに圧縮する処理を行う。ここでは一例としてデータ圧縮手段113が、量子化ネットワーク 801と量子化アルゴリズム802からなる場合の実施例を示す。本実施例では、図1に示したデータベース121に蓄えられているデータがM個のとき、これらを良好に代表するp個のデータ(p<M)に圧縮する場合を例に説明する。量子化ネットワーク801はI1〜Inの入力(本実施例の場合入力はθ0 ,t1 〜t4 ,Bのため、n=6)を取り込む入力ニューロン805および定数を出力するしきい値ニューロン806からなる入力層803と、p個の量子化ニューロン807からなる量子化ニューロン層804、さらに入力層803と量子化ニューロン層804 の間で信号を伝達するシナプス808により構成される。入力ニューロン805は入力された信号の値をそのまま出力し、量子化ニューロン807は入力ニューロン805の出力及び結合しているシナプス808のシナプス荷重の値Wijの積を次式に従い出力する。
【0033】
【数6】
【0034】
量子化アルゴリズム802は、入力を次々と量子化ネットワーク801に入力し、出力が最大であった量子化ニューロンが、対応した入力に対してさらに大きな値を出力する方向に、シナプス荷重の値を更新する。
【0035】
図9に量子化アルゴリズム802が実行するアルゴリズムを示す。まずS9-1 で、データベース121からデータを抽出し、量子化ネットワーク801に入力する。図4に示したデータを圧縮する場合には、(30,610,1020,…,1100),(27,612,980,…,1100)のデータの組みが順次入力される。次にS9-2 で、各量子化ニューロン807について(数6)に基づいた演算を行い、出力値O1〜Opを算出する。S9-3 で、O1〜Opのうち値が最大のものを検出する。かりにOj が最大であったとすると、量子化ニューロンjと入力層803のニューロンを結ぶシナプスの荷重W1j〜Wn+1・j を更新する。入力ニューロン805に対応したシナプス荷重であるW1j〜Wn・j に関しては (数7)により、またしきい値ニューロン806に対応したシナプス荷重Wn+1・j に関しては(数8)により、新しい値が計算される。
【0036】
【数7】
Wij=Wij+α・(Ii−Wij) …(数7)
(i=1,…,n)
【0037】
【数8】
【0038】
ただしWij,Wn+1・j はそれぞれ更新後の入力ニューロン,しきい値ニューロンに対応したシナプス荷重の値、αは定数である。シナプス荷重の更新式は、ベクトル(W1j,…,Wnj)とベクトル(I1,…,In)の類似度を大きくする処理と対応していればよく、このような更新式は(数7)(数8)の他にもいくつか考えられる。S9-5 で処理の終了を判定する。終了はS9-1〜S9-4を一定回数繰り返したことで判定してもよいが、データベース121から抽出したデータの対に対応したシナプス荷重の更新量が、すべて一定値以下となったことで判定してもよい。処理が終了していない場合にはS9-1 にかえり、データの組みを次々と抽出し、同様の処理を繰り返す。以上の処理が終了すると第1のデータベース121に格納されていたM個のデータの対がp個の量子化ニューロンのシナプス荷重で代表できたことになる。その後S9-6 で、p個の量子化ニューロンに対応したシナプス荷重、
【0039】
【数9】
【0040】
をデータベース121にコピーすることにより、M個のデータを、これらを代表するp個の少数のデータで代表することができ、内容を圧縮できる。この様な処理により第1のデータベース121のサイズを適性に保つことができる。本実施例でデータ圧縮手段113は、第1のデータベース121にあらかじめ蓄えられたデータを対象に量子化を行い、その結果を第1のデータベース121にコピーすることにより内容の更新を行ったが、時系列に得られる入力を通信I/F102から直接取り込んで、量子化結果を第1のデータベース121に出力する方法でも良い。
【0041】
図10にデータ分割手段114の処理を示す。データ分割手段114は、第1のデータベース121の内容を、統計的に隔たりのない複数のデータベースに分割し、これらを第2のデータベース122に格納する。本実施例では2つのデータベースに分割する例を示す。まずS10-1で、第1のデータベース121に格納されているデータをθout の値の大きさにしたがって並び換える。次にS10-2でデータを並びにしたがって抽出し、第2のデータベース122の分割データベース1と分割データベース2に交互に振り分ける。すなわち奇数番目のデータの対は分割データベースに、偶数番目のデータの対は分割データベース2に格納するといった形態で、データの分割を行う。分割データベース11101と分割データベース21102から構成される第2の分割データベース122の構成は、例えば図11の形態となっている。S10-3で第1のデータベース121のすべてのデータの振り分けが終わったことを確認した後、S10-4で2つのデータベースの統計的性質に隔たりがないことを明らかにする目的で、θ0 ,t1〜t4,B, θout に関して、統計量を算出し比較する。統計量としては各パラメータについて平均値,分散,中央値等を求め、2つのデータベース間でこれらの差が予め定めた範囲内であることをもって、統計的性質に隔たりがないと判断する。S10-5で比較結果を判定し、統計的性質に隔たりがなければ良好なデータ分割が行われたと判断し、処理を終了する。隔たりがあった場合には、S10-6で分割データベース11101と分割データベース21102に蓄えられているデータの対、先に求めた統計量を表示してオペレータの選択により分割データベース1と分割データベース2間でデータを交換し、S10-4以降の処理を繰り返す。
【0042】
図12にモデル構築手段115の処理を示す。モデル構築手段115は、第1のデータベース121,分割データベース11101,分割データベース21102 のいずれかを選択し、蓄えられているデータの対から、θ0,t1〜t4,B を入力、θout を出力とする制御モデルを構築する。制御モデルの形態としては多層ニューラルネットの利用等種々考えられるが、本実施例では、回帰モデルを例に説明する。図12のS12-1で制御モデルの入力を決定する。入力はθ0 ,t1 〜t4,Bとθout の関係を良好に近似できることに配慮して、例えばln(θ0),ln(t1),ln(t2),ln(t3),(t4)2 ,Bのように決定する。次にS12-2 でデータベースに格納されているデータを用いて制御モデルを(数10)のように構築する。
【0043】
【数10】
ここでa0〜a5は、広く知られている線形回帰分析の手法(例えば『回帰分析と主成分分析』日科技連)により一意的に決定できる。本実施例では回帰モデルの構築を例に示したが、θ0 ,t1〜t4,Bを入力、θout を出力とする多層ニューラルネットでモデルを構築する等、制御モデル構築の手法としては、種々考えられる。
【0044】
次にモデル評価手段116の処理を示す。モデル評価手段116は分割データベース11101を用いて構築した制御モデルの確からしさを分割データベース21102を用いて評価したり、逆に分割データベース21102を用いて構築した制御モデルの確からしさを第1のデータベース1101を用いて評価し、その結果をオペレータに報知する。まずS13-1でモデル構築手段115を用いてモデルを構築する。以上の処理は図12と同様である。この結果、例えば(数10)のような制御モデルが構築できる。S13-2でiを1に設定する。S13-3で第2のデータベース1102からi番目のデータの対を取り出し、入力の組θ0 〜Bを抽出する。S13-4では構築した制御モデル式にこれらを入力し、出力として得られるθout の推定値θout と、取り出したデータの対のθoutについて差分ΔEiを、(数11)で計算する。
【0045】
【数11】
ΔEi=|θout−θout| …(数11)
S13-3〜S13-4の処理を、分割データベース21102に未処理のデータの対がなくなるまで繰り返す。S13-7で得られた差分を総計し、(数12)にしたがってモデル誤差Etotal を算出する。
【0046】
【数12】
【0047】
S13-8で処理の終了を判定し、終了していない場合には再度S13-1に処理を復帰し、制御モデルの入力を変えて、S13-1〜S13-7を繰り返す。この結果、種々の入力の組み合わせに対するモデル誤差Etotal が算出できる。図14にこれを表示したマンマシン装置140の画面例を示す。図14に示すように、各モデルに対応したモデル誤差Etotal が表示され、オペレータは最もモデル誤差の小さい制御モデルを選択できる。尚、この場合にはEtotal が最も小さいものをモデル評価手段116で求め、最もEtotal が小さいものを制御モデルと自動的に決定するようにしてもよい。
【0048】
モデル転送手段117は、タスク起動手段101を介して授受したオペレータからの指令にしたがって、選択されたモデルを通信I/F,ネットワーク150を介して制御装置130に転送する。
【0049】
次に本発明の第2の実施例として、図15に演算手段110の機能としてデータ正規化手段1501を備えた実施例を示す。データ正規化手段1501は図1に示した他の演算手段のタスクと並行して必要に応じて組み込まれる。制御モデルを多層ニューラルネットで構成する場合等では、入出力のデータは0〜1等に正規化して用いることが普通であり、このような場合にタスク起動手段101を介したオペレータからの指示により、処理が起動される。データ正規化手段1501は、第1のデータベース121に蓄えられている各変数のデータをある範囲に正規化し、結果を正規化データベース1502に格納する。正規化データベース 1502は同様にモデル構築に用いられ、データ分割手段114による複数のデータベースへの分割等も、同様に行われる。
【0050】
図16にデータ正規化手段1501の処理アルゴリズムを示す。本実施例では値を0〜1の範囲に正規化する場合を示す。S16-1で第1のデータベース121のある変数について、その最大値DmaxとDminを算出する。次にS16-2で、この変数の値を、
【0051】
【数13】
Di=(Di−Dmin)/(Dmax−Dmin) …(数13)
により新たな値に更新する。これによりDiは最小値が0、最大値が1となり、すべてのデータが0〜1の間の値となる。S16-3で正規化していない変数があるかどうかを判定し、ある場合には正規化していない変数がなくなるまでS16-1〜S16-2処理を繰り返す。
【0052】
本実施例では制御モデル構築支援装置100と制御装置130を別構成とし、ネットワーク150を介して結合する構成としたが、一体化してもよい。また演算手段110のタスクは必要に応じて取捨選択してもよいし、さらに他の機能を有したタスクを定義することも容易である。制御対象170として本実施例では加熱炉プラントを例に説明したが、制御対象の入力と出力の関係をモデル化して制御に用いる他の用途にも、本願は広く用いることができる。またデータ圧縮手段の処理としてベクトル量子化手法を適用した例を示したが、データベースの各変数の平均や分散等の統計的な性質を監視しながら、これに影響を与えないようにデータの間引きを行う等でも同様の効果を実現できる。
【0053】
【発明の効果】
本発明によれば、データ収集手段を設けたことにより、制御モデルの入出力を異なった時刻のデータを用いて構築する必要があった場合でも、この操作を人手で行う必要はない。またデータ定量化手段を設けたことにより、良好な制御モデルを構築するために、どの領域のデータを新たに制御対象から採取すればよいかを直ちに知ることができる。さらにデータ分割手段とモデル評価手段を設けたことにより、構築した制御モデルの妥当性を実際の制御に用いる前に容易に検証できる。またデータ圧縮手段を設けたことにより、データベースに格納されているデータが時間の経過とともに膨大となっても、サイズを適正な規模に保つことができる。さらにタスク起動手段を設けたことにより、オペレータは制御モデル構築のために備えられた種々の支援手段を効率的に選択して用いることができる。また制御モデルの優劣を比較した実施例では、形の異なる回帰式の間でどちらが妥当かを明らかにする例を示したが、中間層数や中間層ニューロン数の異なる多層ニューラルネットの優劣の比較,回帰モデルとニューラルネットの優劣の比較,時系列モデルで現在からどこまで遡った入力を予測に用いるべきか等の評価も、同様の形態で実現できる。
【図面の簡単な説明】
【図1】本発明において実現された制御モデル構築支援装置。
【図2】タスク起動手段の処理アルゴリズム。
【図3】データ収集手段の処理アルゴリズム。
【図4】データベースの構成図。
【図5】データ定量化手段の処理構成図。
【図6】データ定量化手段の処理アルゴリズム。
【図7】マンマシン装置の表示例。
【図8】データ圧縮手段の処理構成図。
【図9】量子化アルゴリズムの処理図。
【図10】データ分割手段の処理アルゴリズム。
【図11】分割データベースの構成図。
【図12】モデル構築手段の処理アルゴリズム。
【図13】モデル評価手段の処理アルゴリズム。
【図14】マンマシン装置の表示例。
【図15】データ正規化手段を設けた制御モデル構築支援装置の構成図。
【図16】データ正規化手段の処理アルゴリズム。
【符号の説明】
100…制御モデル構築支援装置、101…タスク起動手段、111…データ収集手段、112…データ定量化手段、113…データ圧縮手段、114…データ分割手段、115…モデル構築手段、116…モデル評価手段、117…モデル転送手段、121…第1のデータベース、122…第2のデータベース、130 …制御装置、140…マンマシン装置、170…制御対象。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a method for efficiently constructing a high-precision control model in the case of constructing a control model by collecting data from a control target for a control system such as steel, electric power, or general industry.
[0002]
[Prior art]
As a conventional technique for collecting data from a control object and using it in a computer, as described in JP-A-6-168222, it comprises means for collecting control information of a control object, and by storing the collected data in an independent memory, There was a method of performing simulation repeatedly using this data.
[0003]
In addition, as a conventional method for constructing a control model from data obtained from a controlled object, as described in JP-A-5-296923, what is the relationship between the controlled variable error obtained from the controlled object and the tuning amount of the model that eliminates this? There was a technique to tune the control model with a neural network that stored cases or identified this relationship.
[0004]
[Problems to be solved by the invention]
The above prior art has the following problems.
[0005]
Although the method described in Japanese Patent Laid-Open No. 6-168222 has considerations regarding the collection of data from the controlled object and the form in which it is stored in the computer, this method is used when building a model using data. There were no considerations on how to make work more efficient or how to improve the accuracy of the constructed control model. Furthermore, since we do not consider compensating for the delay relationship between the input and output data of the control model, if it is necessary to construct the input and output of the control model using data at different times, we will compensate this manually. There was a case that had to be. Furthermore, since it does not consider compressing the stored data in a form that does not hinder the construction of the control model, there is a problem that the amount of data stored in the computer becomes enormous if data collection is repeated.
[0006]
In addition, the method described in Japanese Patent Laid-Open No. 5-296923 takes into account the generality of the data obtained from the control target, although consideration is given to improving the accuracy of the control model. Therefore, for example, when the data includes noise, there is a problem in that the accuracy of the control model constructed due to this decreases. Furthermore, since consideration is not given to evaluating the validity of the constructed control model, if the control model is not general, it may be used for actual control as it is, resulting in a decrease in control performance. Furthermore, it is not considered to verify that the stored data has sufficient quantity and quality to construct a general control model in each part of the input / output area necessary for control model construction. For this reason, the accuracy of the output with respect to the input of a specific region of the control model may be significantly reduced.
[0007]
A first object of the present invention is to provide a control model construction support apparatus that can accurately evaluate the validity of a constructed control model.
[0008]
The second object of the present invention is that when it is necessary to construct the input / output of the control model using data at different times, each input based on the operation of the control object is performed on the data collected from the control object. It is an object of the present invention to provide a control model construction support apparatus that constructs a database that can be directly applied to construction of a control model.
[0009]
The third object of the present invention is to notify the operator when there is an area where data accumulation is insufficient in each part of the operation area of the control model, thereby reducing the local performance of the control model. An object is to provide a control model construction support device to avoid.
[0010]
The fourth purpose is to optimize the size of the database in a form that minimizes the loss of statistical properties when the data obtained from the control target is enormous, and to build a control model using the contents of the optimized database It is to provide a control model construction support device to be performed.
[0011]
A fifth object is to provide an easy-to-use control model construction support apparatus that provides an environment in which an operator can select and execute various control model construction support means in an interactive manner.
[0012]
[Means for Solving the Problems]
The first object is to separate data collected from a control target as input data and output data to a control model that simulates the control target, and to associate a plurality of data with the input data and the output data. Data collecting means for storing in the database, data dividing means for separating the plurality of data stored in the first database into a plurality of data groups that are not statistically separated, and the plurality of separated data groups A second database having a plurality of databases stored therein, model construction means for constructing a control model that simulates the control object based on data stored in the first or second database, and the model construction A model for evaluating the control model constructed by means based on data stored in the first or second database It can be achieved by providing a valence means.
[0013]
The second object is to separate data collected from a control target as input data and output data to a control model that simulates the control target, and based on the time when the separated output data is detected, the output A data collection means for determining a time at which input data to be associated with data is collected, and storing the input data collected at the determined time and the output data in the first database as a pair; This can be achieved by comprising model construction means for constructing a control model that simulates the control object based on the input data and the output data stored in pairs in the first database.
[0014]
The third object of the present invention is to provide a control model construction support apparatus that stores a plurality of data collected from a control target in a database and simulates the control target based on the plurality of data stored in the database. Data that divides the input / output area into a plurality of partial areas, separates the plurality of data stored in the database in accordance with the divided partial areas, and informs the operator of the area that is smaller than the predetermined number of data as a result of the separation. This can be achieved by providing quantification means.
[0015]
The fourth object is to store a plurality of data collected from a control target in a database, and to store in the database in a control model construction support apparatus that simulates the control target based on the plurality of data stored in the database This can be achieved by providing data compression means for determining a combination of a small number of data representative of the data from the stored data and storing the combination of the small number of data in the database.
[0016]
The fifth object is to separate data collected from a control target as input data and output data to a control model that simulates the control target, and based on the time when the separated output data is detected, the output Data collection means for determining a time at which input data to be associated with data is collected, and storing the input data collected at the determined time and the output data in the first database in a pair; A data dividing means for separating the plurality of data stored in the first database into a plurality of data groups that are not statistically separated, and a second database having a plurality of databases for storing the plurality of separated data groups, respectively. And a model for constructing a control model for simulating the control object based on the data stored in the first database or the second database. Construction means, model evaluation means for evaluating the control model constructed by the model construction means based on data stored in the first or second database, and a plurality of input / output areas of the control model. A data quantifying means for dividing the plurality of data stored in the database according to the divided partial areas and separating the plurality of data according to the divided partial areas, and notifying an operator of an area smaller than a predetermined number of data; Data compression means for determining a combination of a small number of data representative of the data from the data stored in the first or the second database, and storing the combination of the small number of data in the first or the second database And the collection means, the data division means, the model construction means, the model evaluation means, and the data according to an external input signal Capacity means can be achieved by providing a management means for performing start and end manage independently the data compression means.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0018]
FIG. 1 shows the configuration of a control model construction support apparatus realized by the present invention. First, the overall configuration will be described, and then the details of each part will be described. The control model
[0019]
In the present embodiment, a heating furnace plant of a hot rolling line will be described as an example of the
[0020]
Next, the operation of each unit of the control model
[0021]
FIG. 3 shows a processing algorithm of the data collecting unit 111. The data collecting unit 111 is started to execute in accordance with the start command from the
[0022]
[Expression 1]
T in = T out − (ΔT 1 + ΔT 2 + ΔT 3 + ΔT 4 ) (Equation 1)
It can be calculated by In addition, the time when the slab was heated in each furnace zone is the pretropical T pre , the first heating zone Th 1 , the second heating zone Th 2 , and the soaking zone T unif , respectively.
[0023]
[Expression 2]
T pre = T out - (ΔT 1/2 +
[0024]
[Equation 3]
T h1 = T out - (ΔT 2/2 +
[0025]
[Expression 4]
T h2 = T out - (ΔT 3/2 + ΔT 4) ... ( number 4)
[0026]
[Equation 5]
T unif = T out -ΔT 4/ 2 ... ( number 5)
It can be estimated with. In S 3-3, this way time T in which is calculated, T pre, in association with the T h1, T h2, T unif were collected respectively θ 0, t 1 ~t 4, further collecting slab thickness B The control model construction data is generated as a pair in relation to the θ out . In S 3-4 , the constructed data pair is stored in the
[0027]
FIG. 4 shows a configuration example of the
[0028]
The data quantification means 112 searches the contents of the
[0029]
FIG. 5 shows the configuration of the data quantification means 112. It is activated by the task activation means 101. The processing
[0030]
FIG. 6 shows an example of processing of the quantification means. In FIG. 6, the entire area of the control model is divided into n
[0031]
FIG. 7 shows an example of the quantification result notified by the man-
[0032]
FIG. 8 shows the configuration of the data compression means 113. The data compression means 113 performs a process of compressing the
[0033]
[Expression 6]
[0034]
The
[0035]
FIG. 9 shows an algorithm executed by the
[0036]
[Expression 7]
W ij = W ij + α · (I i −W ij ) (Expression 7)
(I = 1, ..., n)
[0037]
[Equation 8]
[0038]
However, W ij and W n + 1 · j are values of synaptic loads corresponding to the updated input neurons and threshold neurons, respectively, and α is a constant. The update expression of the synaptic load only needs to correspond to the process of increasing the similarity between the vector (W 1j ,..., W nj ) and the vector (I 1 ,..., I n ). In addition to Equation 7) and
[0039]
[Equation 9]
[0040]
Is copied to the
[0041]
FIG. 10 shows the processing of the data dividing unit 114. The data dividing unit 114 divides the contents of the
[0042]
FIG. 12 shows the processing of the
[0043]
[Expression 10]
Here, a 0 to a 5 can be uniquely determined by a widely known linear regression analysis method (for example, “Regression Analysis and Principal Component Analysis” by Nikka Giren). In this embodiment, the construction of a regression model is shown as an example. However, as a method for constructing a control model, for example, a model is constructed with a multilayer neural network having θ 0 , t 1 to t 4 and B as inputs and θ out as an output. There are various possibilities.
[0044]
Next, processing of the
[0045]
## EQU11 ##
ΔE i = | θ out −θ out | (Expression 11)
The processes of S 13-3 to S 13-4 are repeated until there are no unprocessed data pairs in the divided database 21102. The differences obtained in S 13-7 are summed up, and the model error E total is calculated according to (Equation 12).
[0046]
[Expression 12]
[0047]
To determine the end of the process in S 13-8, is to return the process to the S 13-1 again if it is not finished, by changing the input of the control model, repeating the S 13-1 ~S 13-7. As a result, the model error E total for various combinations of inputs can be calculated. FIG. 14 shows a screen example of the man-
[0048]
The
[0049]
Next, as a second embodiment of the present invention, FIG. 15 shows an embodiment provided with data normalization means 1501 as a function of the calculation means 110. The data normalization means 1501 is incorporated as necessary in parallel with the tasks of other calculation means shown in FIG. When the control model is composed of a multilayer neural network, etc., the input / output data is usually normalized to 0 to 1 etc., and in such a case, according to an instruction from the operator via the task starting means 101. The process is started. The data normalization means 1501 normalizes the data of each variable stored in the
[0050]
FIG. 16 shows a processing algorithm of the data normalization means 1501. In the present embodiment, a case where the value is normalized to a range of 0 to 1 is shown. In S 16-1 , maximum values D max and D min are calculated for a variable in the
[0051]
[Formula 13]
D i = (D i −D min ) / (D max −D min ) (Equation 13)
To update to a new value. As a result, Di has a minimum value of 0 and a maximum value of 1, and all data have values between 0 and 1. In S 16-3, it is determined whether or not there is a variable that has not been normalized. If there is a variable that has not been normalized, the processing of S 16-1 to S 16-2 is repeated until there is no variable that has been normalized.
[0052]
In the present embodiment, the control model
[0053]
【The invention's effect】
According to the present invention, since the data collection means is provided, even when it is necessary to construct the input / output of the control model using data at different times, it is not necessary to perform this operation manually. Further, by providing the data quantification means, it is possible to immediately know which region of data should be newly collected from the control target in order to construct a good control model. Furthermore, by providing the data dividing means and the model evaluating means, the validity of the constructed control model can be easily verified before being used for actual control. Further, by providing the data compression means, the size can be kept at an appropriate scale even if the data stored in the database becomes enormous with the passage of time. Furthermore, by providing the task activation means, the operator can efficiently select and use various support means provided for constructing the control model. In the example comparing the superiority and inferiority of the control model, an example was given to clarify which is appropriate between regression equations of different shapes, but comparison of superiority and inferiority of multilayer neural networks with different numbers of intermediate layers and intermediate layer neurons The comparison of the superiority and inferiority of the regression model and the neural network, and the evaluation of how far the input from the present in the time series model should be used for the prediction can be realized in the same manner.
[Brief description of the drawings]
FIG. 1 is a control model construction support apparatus realized in the present invention.
FIG. 2 is a processing algorithm of task activation means.
FIG. 3 is a processing algorithm of the data collecting means.
FIG. 4 is a configuration diagram of a database.
FIG. 5 is a processing configuration diagram of data quantification means.
FIG. 6 is a processing algorithm of the data quantification means.
FIG. 7 is a display example of a man-machine device.
FIG. 8 is a processing configuration diagram of data compression means.
FIG. 9 is a processing diagram of a quantization algorithm.
FIG. 10 is a processing algorithm of the data dividing means.
FIG. 11 is a configuration diagram of a divided database.
FIG. 12 is a processing algorithm of the model construction means.
FIG. 13 is a processing algorithm of a model evaluation unit.
FIG. 14 is a display example of a man-machine apparatus.
FIG. 15 is a configuration diagram of a control model construction support apparatus provided with data normalization means.
FIG. 16 is a processing algorithm of data normalization means.
[Explanation of symbols]
DESCRIPTION OF
Claims (1)
前記第1のデータベースに格納された複数のデータを統計的に複数のデータ群に分離するデータ分割手段と、
該分離された複数のデータ群をそれぞれ格納する複数のデータベースを有する第2のデータベースと、
前記制御対象を模擬する制御モデルを構築するモデル構築手段と、
該モデル構築手段で構築された前記制御モデルを評価するモデル評価手段を備え、
前記データ分割手段は、前記第1のデータベースに格納された複数のデータを並び順に交互に振り分けることで、前記第2のデータベースとして、分割データベース1と分割データベース2に分割し、前記分割データベース1と分割データベース2のそれぞれについて平均値、分散値及び中央値である統計演算値を求め、前記それぞれの統計演算値の差が予め定められた範囲内でなければ、その毎に前記分割データベース1と分割データベース2の一部を変更すると共に平均値、分散値及び中央値である統計演算値を求めて、前記分割データベース1と分割データベース2との統計演算値の差が予め定められた範囲内になるまで繰り返し、
前記モデル構築手段は、前記分割データベース1と分割データベース2のうち一方に基づいて前記制御対象を模擬する制御モデルを複数構築し、
前記モデル評価手段は、前記分割データベース1と分割データベース2のうちの他方のデータを用いて、データを構成する入力データに対して前記複数の制御モデルのそれぞれを用いて出力データを演算によりそれぞれ推測し、前記推測結果と前記データを構成する出力データとの相違から前記複数の制御モデル毎に評価値を演算することで前記複数の制御モデルの評価を行い、前記評価結果に基づいて、前記複数ある制御モデルから適切なモデルを選択することを特徴とした制御モデル構築支援装置。Data collection for separating data collected from a control target as input data and output data to a control model that simulates the control target, and storing a plurality of data in the first database by associating the input data with the output data Means,
Data dividing means for statistically separating a plurality of data stored in the first database into a plurality of data groups;
A second database having a plurality of databases each storing the plurality of separated data groups;
Model construction means for constructing a control model for simulating the controlled object;
Model evaluation means for evaluating the control model constructed by the model construction means,
The data dividing means divides the plurality of data stored in the first database alternately into the arrangement order, thereby dividing the data into the divided database 1 and the divided database 2 as the second database. A statistical calculation value that is an average value, a variance value, and a median value is obtained for each of the divided databases 2, and if the difference between the respective statistical calculation values is not within a predetermined range, the divided database 1 is divided every time. A part of the database 2 is changed and a statistical calculation value that is an average value, a variance value, and a median value is obtained, and a difference between the statistical calculation values of the divided database 1 and the divided database 2 falls within a predetermined range Repeat until
The model construction means constructs a plurality of control models that simulate the control object based on one of the divided database 1 and the divided database 2 ;
The model evaluation means uses the other data of the divided database 1 and the divided database 2 to estimate the output data by calculating each of the plurality of control models with respect to the input data constituting the data. The evaluation of the plurality of control models is performed by calculating an evaluation value for each of the plurality of control models from the difference between the estimation result and the output data constituting the data, and the plurality of the control models are evaluated based on the evaluation result. A control model construction support device characterized by selecting an appropriate model from a certain control model .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002256279A JP3755497B2 (en) | 2002-09-02 | 2002-09-02 | Control model construction support apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002256279A JP3755497B2 (en) | 2002-09-02 | 2002-09-02 | Control model construction support apparatus and method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP5577196A Division JP3412384B2 (en) | 1996-03-13 | 1996-03-13 | Control model construction support device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005313675A Division JP2006099793A (en) | 2005-10-28 | 2005-10-28 | Control model construction support device and method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003084806A JP2003084806A (en) | 2003-03-19 |
JP3755497B2 true JP3755497B2 (en) | 2006-03-15 |
Family
ID=19196664
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002256279A Expired - Fee Related JP3755497B2 (en) | 2002-09-02 | 2002-09-02 | Control model construction support apparatus and method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3755497B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3605340B1 (en) | 2017-05-31 | 2021-03-31 | Mitsubishi Electric Corporation | Data replicator and data replication program |
-
2002
- 2002-09-02 JP JP2002256279A patent/JP3755497B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003084806A (en) | 2003-03-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3412384B2 (en) | Control model construction support device | |
Gai et al. | A joint feedback strategy for consensus in large-scale group decision making under social network | |
EP0645025B1 (en) | System and method for controlling a plant | |
CN109992921B (en) | On-line soft measurement method and system for thermal efficiency of boiler of coal-fired power plant | |
CN110428175B (en) | Hot rolled strip steel plate convexity prediction method based on deep learning | |
CN108335487B (en) | Road traffic state prediction system based on traffic state time sequence | |
TW200949596A (en) | Server and system and method for automatic virtual metrology | |
US6985781B2 (en) | Residual activation neural network | |
Garg et al. | A two-phase approach for reliability and maintainability analysis of an industrial system | |
US6363289B1 (en) | Residual activation neural network | |
CN110210654A (en) | Product model designing system and method | |
Lambiase | Optimization of shape rolling sequences by integrated artificial intelligent techniques | |
CN113010954A (en) | Bridge structure damage identification method and device and terminal equipment | |
CN118009418A (en) | Heat supply and air extraction control method and system for thermal power generating unit | |
CN116451514A (en) | Bridge structure state evaluation method and device and electronic equipment | |
CN117195747A (en) | Uniform heat distribution optimization method for magnetic material drying | |
CN115470595A (en) | Hot-rolled strip steel convexity prediction method with data and mechanism fused | |
JP3755497B2 (en) | Control model construction support apparatus and method | |
CN113569374B (en) | Method and system for evaluating manufacturability of steel product | |
JP2006099793A (en) | Control model construction support device and method | |
CN110766248A (en) | Workshop human factor reliability evaluation method based on SHEL and interval intuition fuzzy evaluation | |
CN115860263A (en) | Power grid infrastructure planning project construction period prediction method and prediction system | |
CN116224084A (en) | Method and device for predicting state of charge of battery | |
CN114118591A (en) | Online learning-based method and system for predicting power load interval of transformer area | |
Mohanty et al. | Modeling the axial capacity of bored piles using multi-objective feature selection, functional network and multivariate adaptive regression spline |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050607 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050801 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050830 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051028 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051129 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20051212 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100106 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110106 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120106 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |