JP5707230B2 - Process state prediction method - Google Patents

Process state prediction method Download PDF

Info

Publication number
JP5707230B2
JP5707230B2 JP2011117198A JP2011117198A JP5707230B2 JP 5707230 B2 JP5707230 B2 JP 5707230B2 JP 2011117198 A JP2011117198 A JP 2011117198A JP 2011117198 A JP2011117198 A JP 2011117198A JP 5707230 B2 JP5707230 B2 JP 5707230B2
Authority
JP
Japan
Prior art keywords
vector
data
vectors
neighborhood
neighboring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011117198A
Other languages
Japanese (ja)
Other versions
JP2012247855A (en
Inventor
規博 田中
規博 田中
古家 秀彦
秀彦 古家
修一 阪元
修一 阪元
雅俊 小川
雅俊 小川
怡君 葉
怡君 葉
晴俊 大貝
晴俊 大貝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Waseda University
Nippon Steel Engineering Co Ltd
Original Assignee
Waseda University
Nippon Steel Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Waseda University, Nippon Steel Engineering Co Ltd filed Critical Waseda University
Priority to JP2011117198A priority Critical patent/JP5707230B2/en
Publication of JP2012247855A publication Critical patent/JP2012247855A/en
Application granted granted Critical
Publication of JP5707230B2 publication Critical patent/JP5707230B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、プラント設備におけるプロセスの状態予測方法に関する。 The present invention relates to a process state prediction method in a plant facility.

あるプロセスについて、その状態を把握する必要があるとき、通常の計測機器では分析に時間がかかり、リアルタイムにプロセス状態を把握できないことがある。また、計測環境や計測対象によっては、計測機器の設置自体が困難な場合もある。プロセスの状態を示す明確な物理モデルが得られる場合は、高精度な推定値を計算によって求めることができるが、プラント設備におけるプロセスは複雑な物理化学現象が複合した形で発現することが殆どであるため、物理モデルで表せない場合が多い。 When it is necessary to grasp the state of a process, it may take time to analyze with a normal measuring instrument, and the process state may not be grasped in real time. Also, depending on the measurement environment and measurement target, installation of the measurement device itself may be difficult. If a clear physical model showing the state of the process can be obtained, a highly accurate estimate can be obtained by calculation, but the process in the plant equipment is often manifested in a complex form of complex physicochemical phenomena. In many cases, it cannot be represented by a physical model.

そこで、近年、計算機ハードウェアやデータベースシステム技術の進歩に伴い、大量データの蓄積と高速検索が可能になったこと等を背景に、“Just-In-Time(JIT)モデリング”と呼ばれる局所モデリング手法が注目されている。JITモデリングでは、観測したデータをデータベースに蓄積しておき、システムの予測等の必要が生じるたびに、入力である“要求点ベクトル”と関連性の高いデータベクトルをデータベースから近傍データベクトルとして検索し、検索した近傍データベクトルの出力を補間する局所モデルを構成して、“要求点ベクトル”の出力を推定する。この手法では、観測データの更なる蓄積があるたびに既存の局所モデルを廃棄し、再び新たな局所モデルを構築する。 Therefore, a local modeling method called “Just-In-Time (JIT) modeling” against the backdrop of recent advances in computer hardware and database system technology, which enabled the storage of large amounts of data and high-speed retrieval. Is attracting attention. In JIT modeling, observed data is stored in a database, and whenever a system prediction or the like becomes necessary, a data vector highly related to the input “request point vector” is searched as a neighborhood data vector from the database. Then, a local model that interpolates the output of the searched neighborhood data vector is constructed, and the output of the “request point vector” is estimated. In this method, whenever there is further accumulation of observation data, the existing local model is discarded and a new local model is constructed again.

JITモデリングでは、予測を行うたびに、データベースから要求点ベクトルと類似するデータベクトルを検索するため、データベースが大規模になると、計算負荷が大きくなりすぎるという問題がある。そのため、JITモデリングにステップワイズ法を適用して変数の低次元化を行う大規模データベースオンラインモデリング(LOM)という手法が開発されている。例えば、特許文献1、2では、熱反応炉の操業データからなる大規模データベースについて、ステップワイズ法を用いて炉頂ガス温度に対する寄与率が高い変数を選択して当該変数からなる新たなデータベースを作成し、新たなデータベースから取得した近傍データベクトルに基づいて構築した局所モデルを用いて炉頂ガス温度の予測を行っている。 In JIT modeling, every time a prediction is made, a data vector similar to a request point vector is searched from the database. Therefore, when the database becomes large, the calculation load becomes too large. For this reason, a technique called large-scale database online modeling (LOM) has been developed in which a stepwise method is applied to JIT modeling to reduce variables. For example, in Patent Documents 1 and 2, for a large-scale database composed of operation data of a thermal reactor, a variable having a high contribution rate to the furnace top gas temperature is selected using a stepwise method, and a new database composed of the variable is created. The top gas temperature is predicted using a local model that is created and constructed based on the neighborhood data vector obtained from a new database.

なお、本明細書では、「要求点」と「近傍データ」がそれぞれベクトル量であることを明確にするため、「要求点」を「要求点ベクトル」、「近傍データ」を「近傍データベクトル」と記載する。また、データベクトルの集合である「データベクトル集合」を「データセット」と呼ぶことがある。 In this specification, in order to clarify that “request point” and “neighbor data” are vector quantities, “request point” is “request point vector” and “neighbor data” is “neighbor data vector”. It describes. Also, a “data vector set” that is a set of data vectors may be referred to as a “data set”.

特開2009−076036号公報JP 2009-076036 A 特開2009−076037号公報JP 2009-076037 A

JITモデリングやLOMは要求点の近傍データベクトルを基に局所モデルを構築するため、使用する近傍データ数が重要となる。従来、JITモデリングやLOMでは、対象によって試行錯誤的に最適と思われる近傍データベクトルの数を決定していた。しかし、同じ対象であっても要求点ベクトルごとに最適な近傍データベクトルの数は異なると考えられる。つまり、頻繁に発生するようなケースを要求点ベクトルとした場合、多くの近傍データベクトルを集めたほうが予測の安定度が増す。
一方、稀にしか発生しないようなケースを要求点ベクトルとした場合には、近傍データベクトルの数が多くなり過ぎると、関連性の低いデータベクトルまで使用して局所モデルを構築することになる。例えば、特許文献1、2に記載されたプロセスの状態予測方法では、ステップワイズ法で選択した変数について、予め設定した数(特許文献2では6個)だけ要求点の近傍データベクトルを取得しているため、予測精度が不安定であった。
Since JIT modeling and LOM construct a local model based on the neighborhood data vector of the request point, the number of neighborhood data to be used is important. Conventionally, in JIT modeling and LOM, the number of neighboring data vectors that are considered optimal by trial and error is determined depending on the object. However, it is considered that the optimum number of neighboring data vectors differs for each request point vector even for the same target. That is, when a frequently occurring case is used as a request point vector, the stability of prediction is increased by collecting many neighboring data vectors.
On the other hand, in the case where the request point vector is a case that occurs only infrequently, if the number of neighboring data vectors increases too much, a local model is constructed using even less relevant data vectors. For example, in the process state prediction methods described in Patent Documents 1 and 2, as for the variables selected by the stepwise method, as many pre-set numbers (6 in Patent Document 2) as the neighborhood data vectors of the request points are acquired. Therefore, the prediction accuracy was unstable.

本発明はかかる事情に鑑みてなされたもので、要求点ベクトルごとに最適な近傍データベクトルの数が自動的に決定され、予測精度の安定化が図られるプロセスの状態予測方法を提供することを目的とする。 The present invention has been made in view of such circumstances, and provides a process state prediction method in which the optimum number of neighboring data vectors is automatically determined for each request point vector and the prediction accuracy is stabilized. Objective.

上記目的を達成するため、本発明は、プラント設備におけるプロセスの操業状態を示す観測データから構成される入力ベクトル及び出力ベクトルが対となったデータベクトルが蓄積されたデータベースを作成し、予測したい時点における出力ベクトルに対応する入力ベクトルからなる要求点ベクトルに類似する前記データベクトルを近傍データベクトルとして前記データベースから少なくとも1つ以上取得し、前記近傍データベクトルから局所モデルを構築して、前記予測したい時点における出力ベクトルを推定するプロセスの状態予測方法において、
前記近傍データベクトルが格納された近傍データベクトル集合を該近傍データベクトルの数を変えて複数作成する工程と、前記複数の近傍データベクトル集合について主成分分析を実施して該各近傍データベクトル集合ごとに前記要求点ベクトルに対するQ統計量を算出する工程と、前記Q統計量が最小となる前記近傍データベクトル集合を選択して前記局所モデルを構築する工程とを備えることを特徴としている。
In order to achieve the above-mentioned object, the present invention creates a database in which a data vector in which an input vector and an output vector composed of observation data indicating the operation state of a process in a plant facility are paired is accumulated and is to be predicted At least one of the data vectors similar to the request point vector consisting of input vectors corresponding to the output vector in FIG. 5 is obtained as a neighborhood data vector from the database, a local model is constructed from the neighborhood data vector, and the prediction time point In the process state prediction method for estimating the output vector at
Creating a plurality of neighborhood data vector sets in which the neighborhood data vectors are stored by changing the number of the neighborhood data vectors; and performing principal component analysis on the plurality of neighborhood data vector sets for each neighborhood data vector set. And calculating a Q statistic for the request point vector, and selecting the neighborhood data vector set that minimizes the Q statistic to construct the local model.

主成分分析では、変数間の相関関係を捉えるため、変数の線形結合によって主成分と呼ばれる新たな合成変数を作り出す。この主成分によって、対象とするデータベクトル集合の特徴を最も良く表現する部分空間を得ることができる。Q統計量は、主成分によって張られる部分空間では表現できない部分を表している。つまり、Q統計量は、対象とするデータベクトル集合と要求点ベクトルとの相関関係の非類似度を表し、Q統計量が小さいほど、要求点ベクトルに類似するデータベクトル集合であると判断できる。 In principal component analysis, in order to capture the correlation between variables, a new synthetic variable called a principal component is created by linear combination of variables. With this principal component, it is possible to obtain a partial space that best represents the characteristics of the target data vector set. The Q statistic represents a portion that cannot be expressed in the subspace spanned by the principal components. That is, the Q statistic represents the degree of dissimilarity between the target data vector set and the requested point vector, and it can be determined that the smaller the Q statistic, the more similar the data vector set is to the requested point vector.

図12は、要求点ベクトルと近傍データベクトルとの相関関係を表したものである。図12(A)は、JITモデリングやLOMの場合を示しており、ベクトル間距離に基づいて近傍データベクトルを選択するため、異なる相関関係を有する近傍データベクトルが選択されるおそれがある。一方、図12(B)は、本発明に係るプロセスの状態予測方法の場合を示しており、Q統計量を用いて、要求点ベクトルとデータベクトル集合(データセット)の相関関係を測るため、相関関係の高い○印のデータベクトル集合のみ選択される。 FIG. 12 shows the correlation between the request point vector and the neighborhood data vector. FIG. 12A shows the case of JIT modeling or LOM. Since neighboring data vectors are selected based on the distance between vectors, there is a possibility that neighboring data vectors having different correlations may be selected. On the other hand, FIG. 12B shows the case of the process state prediction method according to the present invention. In order to measure the correlation between the request point vector and the data vector set (data set) using the Q statistic, Only a set of data vectors marked with a circle with a high correlation is selected.

また、本発明に係るプロセスの状態予測方法では、前記近傍データベクトルの数が異なる前記複数の近傍データベクトル集合を作成する際、前記要求点ベクトルとのベクトル間距離が近い前記近傍データベクトルから順に格納して前記近傍データベクトル集合を作成することが好ましく、このようにすることで、より類似度の高い近傍データベクトル集合を選択することが可能となる。 Further, in the process state prediction method according to the present invention, when generating the plurality of neighboring data vector sets having different numbers of neighboring data vectors, the neighboring data vectors having the closest inter-vector distance to the request point vector are sequentially ordered. It is preferable to store and create the neighborhood data vector set, and in this way, it is possible to select a neighborhood data vector set with a higher degree of similarity.

本発明に係るプロセスの状態予測方法では、要求点ベクトルごとに作成される、近傍データベクトルの数が異なる複数の近傍データベクトル集合のなかから、要求点ベクトルに対するQ統計量が最小となる近傍データベクトル集合を選択して局所モデルを構築するので、要求点ベクトルごとに最適な近傍データベクトルの数が自動的に決定され、予測精度の安定化を図ることができる。 In the process state prediction method according to the present invention, from among a plurality of neighborhood data vector sets having different numbers of neighborhood data vectors created for each request point vector, neighborhood data that minimizes the Q statistic for the request point vector. Since the local model is constructed by selecting the vector set, the optimum number of neighboring data vectors is automatically determined for each request point vector, and the prediction accuracy can be stabilized.

本発明の一実施の形態に係るプロセスの状態予測方法を説明するためのフローチャートである。It is a flowchart for demonstrating the process state prediction method which concerns on one embodiment of this invention. データセットの構成を示すテーブルである。It is a table which shows the structure of a data set. 要求点ベクトルの構成を示すテーブルである。It is a table which shows the structure of a request point vector. 近傍データ数がNNMAXである近傍データセットAの構成を示すテーブルである。It is a table which shows the composition of neighborhood data set A where the number of neighborhood data is NN MAX . 近傍データ数がNNMINである近傍データセットBの構成を示すテーブルである。Number of neighbors data is a table showing the structure of a neighboring data set B 0 is NN MIN. Q統計量が格納されたQ値テーブルである。It is a Q value table in which Q statistics are stored. 同実施の形態に係るプロセスの状態予測方法によって得られた予測値と実測値との相関度を示すグラフである。It is a graph which shows the correlation degree of the predicted value obtained by the process state prediction method which concerns on the same embodiment, and an actual value. 近傍データ数を1200個とした従来型LOMによって得られた予測値と実測値との相関度を示すグラフである。It is a graph which shows the correlation degree of the predicted value and actual value which were obtained by the conventional LOM which made 1200 neighborhood data number. 同実施の形態に係るプロセスの状態予測方法によって1時間後の温度を連続予測した結果を示す時刻歴グラフである。It is a time history graph which shows the result of having continuously predicted the temperature after 1 hour by the process state prediction method according to the embodiment. 近傍データ数を1200個とした従来型LOMによって1時間後の温度を連続予測した結果を示す時刻歴グラフである。It is a time history graph which shows the result of having continuously estimated the temperature of 1 hour after by the conventional LOM which made 1200 neighborhood data number. 同実施の形態に係るプロセスの状態予測方法によって1時間後の温度を連続予測した際に使用した近傍データ数のグラフである。It is a graph of the number of neighboring data used when the temperature after 1 hour is continuously predicted by the process state prediction method according to the embodiment. 要求点ベクトルと近傍データベクトルとの相関関係を表す模式図であって、(A)はJITモデリングやLOMの場合、(B)は本発明に係るプロセスの状態予測方法の場合をそれぞれ示している。4A and 4B are schematic diagrams showing correlations between request point vectors and neighboring data vectors, where FIG. 5A shows the case of JIT modeling and LOM, and FIG. 4B shows the case of the process state prediction method according to the present invention. .

続いて、添付した図面を参照しつつ、本発明を具体化した実施の形態に付き説明し、本発明の理解に供する。 Next, embodiments of the present invention will be described with reference to the accompanying drawings for understanding of the present invention.

[プロセスの状態予測方法の概略手順]
先ず、本発明の一実施の形態に係るプロセスの状態予測方法の概略手順を以下に示す。
(A1)プラント設備におけるプロセスの操業状態を示す観測データから構成される入力ベクトル及び出力ベクトルが対となったデータベクトルが蓄積されたデータベースを作成する。
(A2)予測したい時点における出力ベクトルに対応する入力ベクトルからなる要求点ベクトルに類似するデータベクトルを近傍データベクトルとしてデータベースから少なくとも1つ以上取得する。そして、近傍データベクトルが格納された近傍データセット(近傍データベクトル集合)を近傍データベクトルの数(以下では、単に「近傍データ数」と記載する。)を変えて複数作成する。
(A3)複数の近傍データセットについて主成分分析を実施して各近傍データセットごとに要求点ベクトルに対するQ統計量を算出し、Q統計量が最小となる近傍データセットを選択して局所モデルを構築する。そして、当該局所モデルを用いて、予測したい時点における出力ベクトルの推定値を得る。
[Outline of process status prediction method]
First, a schematic procedure of a process state prediction method according to an embodiment of the present invention will be described below.
(A1) A database in which a data vector in which an input vector and an output vector composed of observation data indicating an operation state of a process in a plant facility are paired is created is created.
(A2) At least one data vector similar to a request point vector composed of an input vector corresponding to an output vector at a time point to be predicted is acquired as a neighborhood data vector from the database. Then, a plurality of neighborhood data sets (neighboring data vector sets) in which neighborhood data vectors are stored are created by changing the number of neighborhood data vectors (hereinafter simply referred to as “number of neighborhood data”).
(A3) Principal component analysis is performed on a plurality of neighboring data sets to calculate a Q statistic for the request point vector for each neighboring data set, and a local model is selected by selecting a neighboring data set that minimizes the Q statistic. To construct. Then, using the local model, an estimated value of the output vector at the time point to be predicted is obtained.

ここで、本実施の形態に係るプロセスの状態予測方法を構成する主要な手法について基本的な説明をしておく。
[JITモデリング]
現在の挙動と近似した挙動が過去に観測されていたならば、現在の挙動が進展する様子は過去のものと近似したものになるであろうと考えることができる。この考え方を再現した予測手法の1つがJust-In-Time(JIT)モデリングである。JITモデリングは決まったモデルを持たない代わりに、過去のデータベクトルをそのままデータベースとして保持する。プロセスの予測が必要となったとき、過去データが蓄積されたデータベースから、要求点ベクトルと類似性の高いデータベクトルを検索し、局所モデルを構築して出力の推定を行う手法である。
Here, a basic description will be given of main methods constituting the process state prediction method according to the present embodiment.
[JIT modeling]
If a behavior that approximates the current behavior has been observed in the past, it can be considered that the progress of the current behavior will be an approximation of the past. One prediction method that reproduces this idea is Just-In-Time (JIT) modeling. JIT modeling does not have a fixed model, but retains past data vectors as a database. When a process needs to be predicted, a data vector having a high similarity to a request point vector is searched from a database in which past data is accumulated, a local model is constructed, and an output is estimated.

対象とするプロセスが非線形かつ動的なプロセスであるとき、次式の回帰モデルでそのプロセスを表すことができる。 When the target process is a non-linear and dynamic process, the process can be represented by the following regression model.

Figure 0005707230
Figure 0005707230

ここで、プロセスの入力ベクトルxと出力ベクトルyを以下のように定義する。つまり、出力ベクトルyは、k時における入力ベクトルxに対する(k+p)時における出力、即ち予測値となる。 Here, an input vector x k and an output vector y k of the process are defined as follows. That is, the output vector y k is an output at (k + p) with respect to the input vector x k at k, that is, a predicted value.

Figure 0005707230
Figure 0005707230

時間の経過と共に、入力ベクトルxと出力ベクトルyのデータベクトルの組が(x,y),(x,y),…のように、対象とするプロセスから大量に得られ、データベクトル集合{(x,y)}(k=1,2,…)としてデータベースに蓄積される。kは離散化時間である。 Over time, a large number of sets of data vectors of the input vector x k and the output vector y k can be obtained from the target process, such as (x 1 , y 1 ), (x 2 , y 2 ),. , Data vector set {(x k , y k )} (k = 1, 2,...) Is stored in the database. k is the discretization time.

予測したい時点における出力ベクトルykqに対応する入力ベクトルxkqを要求点ベクトルとし、要求点ベクトルと類似性が高い近傍データベクトルを上記データベースから取得する。要求点ベクトルと類似性が高い近傍データベクトルを選択する際の指標としては、次式で示すようなベクトル間距離(ユークリッド距離)などを用いることができる。 An input vector x kq corresponding to the output vector y kq at the time point to be predicted is set as a request point vector, and a neighborhood data vector having high similarity to the request point vector is acquired from the database. As an index for selecting a neighborhood data vector having high similarity to the requested point vector, an intervector distance (Euclidean distance) as shown by the following equation can be used.

Figure 0005707230
Figure 0005707230

近傍データベクトル群{(xki,yki)}(i=1,2,…,m)が取得されると、この近傍データベクトル群を用いて局所モデルの構築を行い、出力ベクトルykqの推定を行う。局所モデルとしては、重回帰モデルや、以下に示す相加平均法あるいは重み付き線形平均法などが用いられる。 When the neighborhood data vector group {(x ki , y ki )} (i = 1, 2,..., M) is acquired, a local model is constructed using the neighborhood data vector group, and the output vector y kq Make an estimate. As the local model, a multiple regression model, an arithmetic average method or a weighted linear average method shown below, or the like is used.

Figure 0005707230
Figure 0005707230

[ステップワイズ法]
ステップワイズ法は、目的変数に対する影響(寄与率)が小さい説明変数を除外するものであり、変数増加ステップと変数減少ステップとから構成される。以下、ステップワイズ法の手順について説明する。
[Stepwise method]
The stepwise method excludes an explanatory variable having a small influence (contribution rate) to an objective variable, and includes a variable increasing step and a variable decreasing step. Hereinafter, the procedure of the stepwise method will be described.

(B1)目的変数に対する単寄与率が最大の説明変数を、先に選定した説明変数の中から決定する。具体的には、各説明変数ごとに単回帰モデルを作成して回帰係数を求めた後、(8)式によりF値を算出し、F値が最大となる説明変数を選択する。 (B1) The explanatory variable having the largest single contribution ratio to the objective variable is determined from the explanatory variables selected previously. Specifically, after creating a single regression model for each explanatory variable and obtaining a regression coefficient, the F value is calculated by equation (8), and the explanatory variable that maximizes the F value is selected.

Figure 0005707230
Figure 0005707230

(B2)先の手順で決定された現モデルに説明変数を1つ追加することを考える。即ち、現モデルに含まれていない説明変数の中から、現モデルに一つ説明変数を追加した場合についてそれぞれ偏回帰係数を求め、(8)式によりF値を算出する。そして、F値が最大となる説明変数を探索する。
(B3)最大のF値が、前もって決めているFin以上である場合は、その説明変数を現モデルに追加する。最大のF値がFin未満の場合は、ステップワイズ法による選択手順を終了する。
(B2) Consider adding one explanatory variable to the current model determined in the previous procedure. That is, the partial regression coefficient is obtained for each case where one explanatory variable is added to the current model from among the explanatory variables not included in the current model, and the F value is calculated using equation (8). Then, an explanatory variable having the maximum F value is searched.
(B3) the maximum F value, if it is previously determined that F in above, add the explanatory variable in the current model. Maximum F value is in the case of less than F in, it terminates the selection procedure by the stepwise method.

(B4)新たに説明変数が追加された場合は、今度は逆に今までに取り込んだ説明変数が本当に有用な説明変数であるのかどうか調べる。即ち、現モデルを構成する説明変数の中で寄与率が一番低い説明変数を見つけるために、今までに取り込んだ説明変数を順番に一つずつ取り除いて当該説明変数が無い場合におけるF値を計算し、F値が最小となる説明変数を探索する。
(B5)最小のF値が、前もって決めているFout(Fin≧Fout)未満である場合は、その説明変数を現モデルから削除する。説明変数を削除した場合は、(B4)、(B5)を繰り返し、さらに他の説明変数が削除できないか探索する。最小のF値がFout以上の場合は、(B2)のステップに戻る。
(B4) If a new explanatory variable is added, it is checked whether the explanatory variable fetched so far is really a useful explanatory variable. That is, in order to find the explanatory variable with the lowest contribution rate among the explanatory variables constituting the current model, the explanatory variables imported so far are removed one by one in order, and the F value when there is no explanatory variable is obtained. Calculate and search for an explanatory variable that minimizes the F value.
(B5) If the minimum F value is less than the predetermined F out (F in ≧ F out ), the explanatory variable is deleted from the current model. When the explanatory variable is deleted, (B4) and (B5) are repeated to search for further deletion of the explanatory variable. Minimum F value is equal to or larger than F out, the flow returns to step (B2).

[主成分分析]
主成分分析は、データの特徴抽出及び低次元化を目的とする多変量解析手法であり、変数間の相関関係を捉えるため、変数の線形結合によって得られる主成分と呼ばれる合成変数を使用する。主成分分析では、データを最も良く表現できる方向に第1主成分を設定し、第1主成分と直交する空間上で、第1主成分では表現できないデータの変動を最も良く表現できる方向に第2主成分を設定するという手順で、主成分を次々と設定していく。ここで、データを最も良く表現する方向というのは、主成分得点の分散が最大となる方向という意味である。また、主成分得点とは、主成分が張る部分空間へデータを射影した値である。
[Principal component analysis]
Principal component analysis is a multivariate analysis method for the purpose of data feature extraction and reduction in dimensions, and uses synthetic variables called principal components obtained by linear combination of variables in order to capture correlations between variables. In the principal component analysis, the first principal component is set in the direction in which the data can be best expressed, and the variation in the data that cannot be expressed in the first principal component in the direction orthogonal to the first principal component is in the direction in which the first principal component can be expressed best. The principal components are set one after another by the procedure of setting two principal components. Here, the direction in which the data is best expressed means the direction in which the variance of the principal component scores is maximized. The principal component score is a value obtained by projecting data to a partial space spanned by the principal component.

[Q統計量]
Q統計量は、データベクトルのうち、主成分によって張られる部分空間では表現できない部分を表す。Q統計量は二乗予測誤差とも呼ばれ、以下のように定義されている。
N行×M列のデータ行列Xがあるものとする。ここで、Mは変数の数、Nはサンプル数であり、各変数は標準化されている。
データ行列Xを特異値分解すると次式のようになる。
[Q statistics]
The Q statistic represents a portion of the data vector that cannot be expressed in the subspace spanned by the principal components. The Q statistic is also called a square prediction error and is defined as follows.
Assume that there is a data matrix X of N rows × M columns. Here, M is the number of variables, N is the number of samples, and each variable is standardized.
When the singular value decomposition of the data matrix X is performed, the following equation is obtained.

Figure 0005707230
Figure 0005707230

UとVは直交行列であり、対角行列Sの対角要素には特異値sが降順に並んでいる。採用する主成分の数をRとすると、第r主成分は負荷量行列Vの第r列vで与えられる。
第r主成分得点tは(10)式で与えられ、第R主成分得点までをまとめて表現すると、(11)式となる。
U and V are orthogonal matrices, singular values s r is the diagonal elements of the diagonal matrix S are arranged in descending order. When the number of employed principal component is R, the r principal component is given by the first r columns v r loadings matrix V R.
The r-th principal component score tr is given by Equation (10), and when the R-th principal component score is expressed together, Equation (11) is obtained.

Figure 0005707230
Figure 0005707230

を元のM次元空間上の座標で表すと、再構築データ行列X^は次のようになる。 Expressing T R with the coordinates on the original M-dimensional space, reconstructed data matrix X ^ is as follows.

Figure 0005707230
Figure 0005707230

このとき、Q統計量は次式で与えられる。 At this time, the Q statistic is given by the following equation.

Figure 0005707230
Figure 0005707230

[プロセスの状態予測方法の詳細手順]
続いて、図1のフローチャートに基づいて本実施の形態に係るプロセスの状態予測方法の手順について詳細に説明する。
(C1)プラント設備におけるプロセスの操業状態を示す観測データから構成される入力ベクトルx及び出力ベクトルyのデータベクトルの組(x,y)(k=1,2,…)が蓄積された大規模データベース10を作成する。
(C2)大規模データベース10について、ステップワイズ法を用いて目的変数に対する寄与率が高い変数を選択して当該変数からなる新たなデータベース11を作成する(ST1)。目的変数と説明変数の間に時間遅れが存在する可能性がある場合は、見込まれる最大の時間遅れ変数まで全て選択対象に加える。
作成されるデータベース11(データセット)の構成を図2に示す。このデータベース11では、入力変数の数がM個、出力変数の数がL個、各変数のサンプル数がK個とされている。各データは日時に応じたIDが付けられ、同じIDに属するデータは1つのデータベクトルとして扱われる。
[Detailed procedure for predicting process status]
Next, the procedure of the process state prediction method according to the present embodiment will be described in detail based on the flowchart of FIG.
(C1) A set of data vectors (x k , y k ) (k = 1, 2,...) Of the input vector x k and the output vector y k composed of observation data indicating the operation state of the process in the plant equipment is accumulated. The created large-scale database 10 is created.
(C2) For the large-scale database 10, a variable having a high contribution rate to the target variable is selected using the stepwise method, and a new database 11 composed of the variable is created (ST1). If there is a possibility that a time delay exists between the objective variable and the explanatory variable, all the maximum time delay variables that can be expected are added to the selection target.
The configuration of the database 11 (data set) to be created is shown in FIG. In this database 11, the number of input variables is M, the number of output variables is L, and the number of samples of each variable is K. Each data is given an ID according to the date and time, and data belonging to the same ID is handled as one data vector.

(C3)予測したい時点における出力ベクトルYに対応する入力ベクトルXからなる要求点ベクトルを設定する(ST2)。図3に要求点ベクトルの構成を示す。
(C4)データベース11に格納されている各データベクトルと要求点ベクトルとのベクトル間距離を(4)式や(5)式を用いて計算し、ベクトル間距離が小さいものから順にNNMAX個の近傍データベクトルを全て収集する。そして、収集した近傍データベクトルを、ベクトル間距離が近い順に近傍データセットAとして保存する(ST3)。図4に近傍データセットAの構成を示す。図4において「No.」が近傍データ数を表している。
(C5)近傍データセットAの中から近傍データ数(No.)が1〜NNMINまでの近傍データベクトルを選択して近傍データセットBを作成する(ST4)。即ち、要求点ベクトルとのベクトル間距離が近いものから順にNNMIN個の近傍データベクトルを選択する。図5に近傍データセットBの構成を示す。
(C3) sets the required point vector and an input vector X q corresponding to the output vector Y q at the time to be predicted (ST2). FIG. 3 shows the configuration of the request point vector.
(C4) the inter-vector distances between the data vector stored in the database 11 and requests point vector (4) and (5) were calculated using the equation, in order of distance between vectors is small NN MAX number of Collect all neighborhood data vectors. Then, the collected neighborhood data vectors are stored as the neighborhood data set A in order of increasing distance between vectors (ST3). FIG. 4 shows the configuration of the neighborhood data set A. In FIG. 4, “No.” represents the number of neighboring data.
(C5) the number of neighboring data from neighboring data set A (No.) creates a neighboring data set B 0 Select neighborhood data vector to 1~NN MIN (ST4). That is, NN MIN neighboring data vectors are selected in order from the shortest vector distance to the requested point vector. It shows the structure of a neighboring data set B 0 in Fig.

(C6)近傍データセットBに対して主成分分析を実施し、負荷量行列Vを求める(ST5)。具体的には、近傍データセットBをデータ行列Xとして特異値分解すればよい。
(C7)要求点ベクトルxが(14)式で表されるとすると、要求点ベクトルxを再構築した再構築ベクトルx^は、負荷量行列Vを用いて(15)式により算出される。従って、近傍データセットBに対するQ統計量は、(16)式より得ることができる(ST6)。算出されたQ統計量は、図6に示すQ値テーブルに保存される。
(C6) performed principal component analysis on neighboring data sets B 0, obtains the loading matrix V R (ST5). Specifically, the singular value decomposition may be performed using the neighborhood data set B 0 as the data matrix X.
(C7) when the request point vector x q is (14) and represented by the formula, reconstructed vector x ^ q to a reconstructed request point vector x q is the using load matrix V R (15) formula Calculated. Therefore, the Q statistic for the neighborhood data set B 0 can be obtained from the equation (16) (ST6). The calculated Q statistic is stored in the Q value table shown in FIG.

Figure 0005707230
Figure 0005707230

(C8)Q統計量が算出された近傍データセットBの近傍データ数がNNMAX以上であるかどうか判断される(ST7)。近傍データ数がNNMAX未満である場合は、近傍データセットAの内、近傍データセットBに含まれていない近傍データベクトルの中から、さらにS個の近傍データベクトルを、近傍データ数(No.)が小さいほうから(要求点ベクトルとのベクトル間距離が近いものから)選択し、近傍データセットBに追加して新たな近傍データセットBを作成する(ST9)。そして、ST5のステップに戻る。
(C9)一方、近傍データ数がNNMAX以上になった場合は、Q値テーブルに基づいて、Q統計量が最小となったデータセットBをデータセットAから選択する。そして、データセットBに対応する出力ベクトルを、データセットBのIDに基づいてデータベース11から取得して、重回帰モデルや重み付き線形平均法などを用いて局所モデルを構築し、要求点ベクトルに対する出力の推定値を算出する(ST8)。
(C8) It is determined whether or not the number of neighboring data in the neighboring data set B 0 for which the Q statistic is calculated is greater than or equal to NN MAX (ST7). When the number of neighboring data is less than NN MAX , among the neighboring data sets that are not included in the neighboring data set B 0 in the neighboring data set A, S neighboring data vectors are further converted into the number of neighboring data (No .) those from) selecting (close inter-vector distance between the request point vector from the smaller, in addition to the vicinity of the data set B 0 to create a new neighborhood data set B 1 (ST9). Then, the process returns to step ST5.
(C9) On the other hand, when the number of neighboring data is greater than or equal to NN MAX , the data set B k having the minimum Q statistic is selected from the data set A based on the Q value table. Then, an output vector corresponding to the data set B k, acquired from the database 11 based on the ID of the data set B k, to construct a local model by using a multiple regression model and weighted linear averaging method, the request point An estimated output value for the vector is calculated (ST8).

以上、本発明の一実施の形態について説明してきたが、本発明は何ら上記した実施の形態に記載の構成に限定されるものではなく、特許請求の範囲に記載されている事項の範囲内で考えられるその他の実施の形態や変形例も含むものである。例えば、上記実施の形態では、NNMAX個の近傍データセット全てについてQ統計量を求めているが、ある近傍データセットのQ統計量が極小値であると判断された時点で、当該近傍データセットを選択してもよい。また、上記実施の形態では、変数を削減するためにステップワイズ法を使用しているが、変数が少ない場合はステップワイズ法を省略してもよい。 Although one embodiment of the present invention has been described above, the present invention is not limited to the configuration described in the above-described embodiment, and is within the scope of matters described in the claims. Other possible embodiments and modifications are also included. For example, in the above embodiment, the Q statistic is obtained for all NN MAX neighboring data sets, but when the Q statistic of a certain neighboring data set is determined to be a minimum value, the neighboring data set May be selected. In the above embodiment, the stepwise method is used to reduce the variables. However, the stepwise method may be omitted when the number of variables is small.

本実施の形態に係るプロセスの状態予測方法(以下では、「近傍データ数逐次可変型LOM」と呼ぶ。)の効果について検証するため、ごみ処理プロセスにおけるガス化溶融炉の炉頂ガス温度の予測を行った。なお、従来の予測方法と比較するため、従来型LOMによるガス化溶融炉の炉頂ガス温度予測も併せて行った。 In order to verify the effect of the process state prediction method according to the present embodiment (hereinafter referred to as “neighboring data number sequential variable LOM”), prediction of the top gas temperature of the gasification melting furnace in the waste treatment process Went. In addition, in order to compare with the conventional prediction method, the top gas temperature prediction of the gasification melting furnace by the conventional LOM was also performed.

検証に使用したデータは、2年間に亘るごみ処理プロセスにおいて測定された観測データである。取り込んだデータは、ノイズ除去のため、1時間の移動平均フィルタを掛けて平滑化した。サンプリング時間は20分、総データ数は38809個である。
全ての変数に対してステップワイズ法を適用した場合、厖大な処理時間とコンピュータメモリが必要となると共に、不要な変数はモデリング精度低下の原因となる。そのため、予め炉頂ガス温度と関係があると考えられる説明変数を37個に絞った後、各変数の遅れ時間を0から50時間としてステップワイズ法による変数選択を実施した。その結果、27個の説明変数を選択し、1時間後の炉頂ガス温度の予測を行った。
The data used for the verification is observation data measured in a waste disposal process over 2 years. The acquired data was smoothed by applying a moving average filter for 1 hour to remove noise. The sampling time is 20 minutes and the total number of data is 38809.
When the stepwise method is applied to all the variables, enormous processing time and computer memory are required, and unnecessary variables cause a decrease in modeling accuracy. Therefore, after narrowing down to 37 explanatory variables that are considered to be related to the furnace top gas temperature in advance, variable selection was performed by the stepwise method with the delay time of each variable being 0 to 50 hours. As a result, 27 explanatory variables were selected, and the furnace top gas temperature after 1 hour was predicted.

近傍データ数逐次可変型LOMにおける最大近傍データ数NNMAXは1200個、最小近傍データ数NNMINは100個、近傍データ数の増加幅Sは10個とした。また、主成分分析に使用した主成分数は10個とした。
一方、従来型LOMにおける近傍データ数は、試行錯誤的に最も良い結果が得られる数値とした。
なお、近傍データ数逐次可変型LOMも従来型LOMも、局所モデルの構築には重回帰モデルを使用した。
The maximum neighborhood data number NN MAX in the neighborhood data number sequential variable LOM is 1200, the minimum neighborhood data number NN MIN is 100, and the increase width S of the neighborhood data number is 10. The number of principal components used in the principal component analysis was 10.
On the other hand, the number of neighboring data in the conventional LOM is a numerical value that gives the best result by trial and error.
In addition, the multiple regression model was used for the construction of the local model for both the LOM and the conventional LOM in which the number of neighboring data is sequentially variable.

要求点ベクトルを観測データからランダムに200点選択して、各要求点ベクトルに対して1時間後の炉頂ガス温度の予測を行った。近傍データ数逐次可変型LOMによる予測値と実測値との相関度を図7に、近傍データ数を1200個としたときの従来型LOMによる予測値と実測値との相関度を図8に示す。これらの図から、近傍データ数逐次可変型LOMは、従来型LOMに比べて予測値と実測値のバラツキが少なく、相関係数rが0.08程度向上していることがわかる。
なお、図7以降において、目盛に表示されている「T」は基準温度を表している。即ち、基準温度Tからの変化量で表している。
200 required point vectors were randomly selected from the observation data, and the furnace gas temperature after 1 hour was predicted for each required point vector. FIG. 7 shows the degree of correlation between the predicted value and the actually measured value obtained by the LOM with the adjacent data number sequential variable LOM, and FIG. 8 shows the degree of correlation between the predicted value and the actually measured value obtained by the conventional LOM when the number of neighboring data is 1200. . From these figures, it can be seen that the LOM that is successively variable in the number of neighboring data has less variation between the predicted value and the actually measured value than the conventional LOM, and the correlation coefficient r is improved by about 0.08.
In FIG. 7 and subsequent figures, “T” displayed on the scale represents a reference temperature. That is, the amount of change from the reference temperature T is expressed.

次に、1時間ごとに1時間後の炉頂ガス温度を予測する連続予測を行った結果について説明する。近傍データ数逐次可変型LOMによる連続予測結果を示す時刻歴グラフを図9に、近傍データ数を1200個としたときの従来型LOMによる連続予測結果を示す時刻歴グラフを図10にそれぞれ示す。また、近傍データ数逐次可変型LOMによって連続予測した際に使用した近傍データ数のグラフを図11に示す。
これらの図から、近傍データ数を1200個とした場合には難しかった急激な温度上昇(時刻歴グラフの5時間目参照)が近傍データ数逐次可変型LOMでは捉えられていることがわかる。また、近傍データ数逐次可変型LOMでは、近傍データ数を1200個とした場合に比べて全体的な誤差も小さくなっている。
Next, the result of continuous prediction for predicting the furnace top gas temperature after one hour every hour will be described. FIG. 9 shows a time history graph showing the continuous prediction result by the LOM with the sequential variable number sequential variable LOM, and FIG. 10 shows a time history graph showing the continuous prediction result by the conventional LOM when the number of neighboring data is 1200. Also, FIG. 11 shows a graph of the number of neighboring data used when continuously predicting by the neighboring data number sequential variable LOM.
From these figures, it can be seen that the rapid rise in temperature (refer to the fifth hour of the time history graph), which was difficult when the number of neighboring data is 1200, is captured by the LOM with the sequentially varying number of neighboring data. In addition, in the neighborhood data number sequential variable LOM, the overall error is smaller than when the number of neighborhood data is 1200.

10:大規模データベース、11:データベース 10: Large database, 11: Database

Claims (2)

プラント設備におけるプロセスの操業状態を示す観測データから構成される入力ベクトル及び出力ベクトルが対となったデータベクトルが蓄積されたデータベースを作成し、予測したい時点における出力ベクトルに対応する入力ベクトルからなる要求点ベクトルに類似する前記データベクトルを近傍データベクトルとして前記データベースから少なくとも1つ以上取得し、前記近傍データベクトルから局所モデルを構築して、前記予測したい時点における出力ベクトルを推定するプロセスの状態予測方法において、
前記近傍データベクトルが格納された近傍データベクトル集合を該近傍データベクトルの数を変えて複数作成する工程と、前記複数の近傍データベクトル集合について主成分分析を実施して該各近傍データベクトル集合ごとに前記要求点ベクトルに対するQ統計量を算出する工程と、前記Q統計量が最小となる前記近傍データベクトル集合を選択して前記局所モデルを構築する工程とを備えることを特徴とするプロセスの状態予測方法
A request that consists of an input vector corresponding to an output vector at the point in time when you want to create a database in which data vectors that consist of input vectors and output vectors consisting of observation data indicating the operational status of the process in the plant equipment are stored A process state prediction method for obtaining at least one or more data vectors similar to a point vector from the database as neighboring data vectors, constructing a local model from the neighboring data vectors, and estimating an output vector at the time point to be predicted In
Creating a plurality of neighborhood data vector sets in which the neighborhood data vectors are stored by changing the number of the neighborhood data vectors; and performing principal component analysis on the plurality of neighborhood data vector sets for each neighborhood data vector set. And calculating a Q statistic for the requested point vector; and selecting the neighborhood data vector set that minimizes the Q statistic to build the local model. Forecasting method
請求項1記載のプロセスの状態予測方法において、前記近傍データベクトルの数が異なる前記複数の近傍データベクトル集合を作成する際、前記要求点ベクトルとのベクトル間距離が近い前記近傍データベクトルから順に格納して前記近傍データベクトル集合を作成することを特徴とするプロセスの状態予測方法。 2. The process state prediction method according to claim 1, wherein when generating the plurality of neighborhood data vector sets having different numbers of the neighborhood data vectors, the neighboring data vectors are stored in order from the nearest vector distance with the request point vector. And generating the neighborhood data vector set.
JP2011117198A 2011-05-25 2011-05-25 Process state prediction method Active JP5707230B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011117198A JP5707230B2 (en) 2011-05-25 2011-05-25 Process state prediction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011117198A JP5707230B2 (en) 2011-05-25 2011-05-25 Process state prediction method

Publications (2)

Publication Number Publication Date
JP2012247855A JP2012247855A (en) 2012-12-13
JP5707230B2 true JP5707230B2 (en) 2015-04-22

Family

ID=47468277

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011117198A Active JP5707230B2 (en) 2011-05-25 2011-05-25 Process state prediction method

Country Status (1)

Country Link
JP (1) JP5707230B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AT512977B1 (en) 2013-05-22 2014-12-15 Avl List Gmbh Method for determining a model of an output of a technical system
JP6003909B2 (en) * 2014-01-28 2016-10-05 Jfeスチール株式会社 Blast furnace air permeability prediction apparatus and blast furnace air permeability prediction method
MY192904A (en) 2015-02-17 2022-09-14 Fujitsu Ltd Determination device, determination method, and determination program
JP7262554B2 (en) * 2017-03-10 2023-04-21 荏原環境プラント株式会社 Process management support device and method
JP6976696B2 (en) * 2017-03-10 2021-12-08 荏原環境プラント株式会社 Process management support device and method
JP6767326B2 (en) * 2017-09-08 2020-10-14 日本電信電話株式会社 Sensor signal processing methods, sensor signal processing devices, and programs
JP2023172775A (en) * 2022-05-24 2023-12-06 株式会社日立製作所 Prediction system, control device, and control method

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11175503A (en) * 1997-12-16 1999-07-02 Meidensha Corp Time-sequential data predicting device
JP4289602B2 (en) * 2003-03-31 2009-07-01 三菱化学株式会社 Process monitoring method
JP5176206B2 (en) * 2007-08-24 2013-04-03 新日鉄住金エンジニアリング株式会社 Process state similar case search method and process control method
JP5582487B2 (en) * 2007-08-24 2014-09-03 新日鉄住金エンジニアリング株式会社 Process state prediction method
JP2010117836A (en) * 2008-11-12 2010-05-27 Honda Motor Co Ltd Controller for vehicle

Also Published As

Publication number Publication date
JP2012247855A (en) 2012-12-13

Similar Documents

Publication Publication Date Title
JP5707230B2 (en) Process state prediction method
CN107591800B (en) Method for predicting running state of power distribution network with distributed power supply based on scene analysis
JP5011830B2 (en) DATA PROCESSING METHOD, DATA PROCESSING PROGRAM, RECORDING MEDIUM CONTAINING THE PROGRAM, AND DATA PROCESSING DEVICE
JP6297466B2 (en) Wholesale electricity price prediction system and wholesale electricity price prediction method
JP5868216B2 (en) Clustering apparatus and clustering program
JP5176206B2 (en) Process state similar case search method and process control method
TW201224812A (en) Probabilistic data mining model comparison engine
CN112598248B (en) Load prediction method, load prediction device, computer equipment and storage medium
JP2009225550A (en) Power demand predicting method and system, and power generation prediction method
CN106600037B (en) Multi-parameter auxiliary load prediction method based on principal component analysis
JP2012178136A (en) Prediction device, prediction method, and program
JP2012027683A (en) Quality prediction device, quality prediction method, program and computer readable recording medium
JP4488964B2 (en) Process operating state control method and computer program
JP2017010111A (en) Device, method, and program for assisting with noise data rejection
JP3995569B2 (en) Method and program for extracting features for diagnosis / monitoring of equipment from waveform pattern data
JP4691005B2 (en) Method, apparatus, computer program, and computer-readable storage medium for predicting operation state of manufacturing process
JP5966836B2 (en) Evaluation support method, information processing apparatus, and program
JP4834580B2 (en) Plant condition index management device and computer program for its implementation
JP5582487B2 (en) Process state prediction method
JP2013168020A (en) State prediction method for process
JP6461397B2 (en) Wholesale electricity price prediction system and wholesale electricity price prediction method
JP7139625B2 (en) Factor analysis system, factor analysis method and program
JP5421842B2 (en) Impact analysis device, impact analysis method, and program
JP5051223B2 (en) CASE GENERATION PROGRAM, CASE GENERATION DEVICE, CASE GENERATION METHOD
Nakatsui et al. Integrated system for inference of gene expression network

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140305

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150302

R150 Certificate of patent or registration of utility model

Ref document number: 5707230

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250