JP7317931B2 - Selection device, selection method and selection program - Google Patents

Selection device, selection method and selection program Download PDF

Info

Publication number
JP7317931B2
JP7317931B2 JP2021206383A JP2021206383A JP7317931B2 JP 7317931 B2 JP7317931 B2 JP 7317931B2 JP 2021206383 A JP2021206383 A JP 2021206383A JP 2021206383 A JP2021206383 A JP 2021206383A JP 7317931 B2 JP7317931 B2 JP 7317931B2
Authority
JP
Japan
Prior art keywords
operation history
history data
selection
target flag
machine learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021206383A
Other languages
Japanese (ja)
Other versions
JP2023091578A (en
Inventor
浩二 伊藤
健一郎 島田
知範 泉谷
大地 木村
和輝 小山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Communications Corp
Original Assignee
NTT Communications Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Communications Corp filed Critical NTT Communications Corp
Priority to JP2021206383A priority Critical patent/JP7317931B2/en
Publication of JP2023091578A publication Critical patent/JP2023091578A/en
Application granted granted Critical
Publication of JP7317931B2 publication Critical patent/JP7317931B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Testing And Monitoring For Control Systems (AREA)

Description

本発明は、選定装置、選定方法および選定プログラムに関する。 The present invention relates to a selection device, selection method and selection program.

従来、プラントの運転員の操作を機械学習により再現してプラントの運転支援を行う技術が知られている。また、プラントの運転には、通常モードの他に、突発的な雨の際や保守の際等の非通常モードが存在する。そのため、通常モードの運転支援を行う場合には、非通常モードでの操作のデータを取り除く必要がある。 2. Description of the Related Art Conventionally, there has been known a technique for assisting plant operation by reproducing the operation of a plant operator by machine learning. In addition to the normal mode, the operation of the plant includes an abnormal mode such as during sudden rain or during maintenance. Therefore, when performing driving support in the normal mode, it is necessary to remove the operation data in the non-normal mode.

特許第6649112号公報Japanese Patent No. 6649112

しかしながら、プラントの運転員の通常モードでの操作を機械学習により再現することは困難である。例えば、機械学習モデルの開発者は、通常モードでの操作か非通常モードでの操作かを判断することができず、非通常モードでの操作を取り除くことが困難である。また、実際の運転での操作の中に混在する、システムに学んでほしい正しい操作と学んでほしくない誤った操作とを区別せずに学習すると、精度の低下が懸念される。 However, it is difficult to reproduce the operations of plant operators in normal mode by machine learning. For example, the machine learning model developer cannot determine whether the operation is in the normal mode or the non-normal mode, and it is difficult to eliminate the operation in the non-normal mode. In addition, if the system learns without distinguishing between the correct operation that the system should learn and the incorrect operation that the system does not want to learn, which are mixed in the operation in the actual driving, there is a concern that the accuracy will decrease.

本発明は、上記に鑑みてなされたものであって、プラントの運転員の通常モードでの操作を機械学習により再現することを目的とする。 The present invention has been made in view of the above, and an object of the present invention is to reproduce the operation of plant operators in the normal mode by machine learning.

上述した課題を解決し、目的を達成するために、本発明に係る選定装置は、操作履歴データを取得する取得部と、前記操作履歴データに、入力された指定に応じて所定のフラグを付与する付与部と、前記所定のフラグが付与された前記操作履歴データを、機械学習の教師データとして選定する選定部と、を有することを特徴とする。 In order to solve the above-described problems and achieve the object, the selection device according to the present invention includes an acquisition unit that acquires operation history data, and gives a predetermined flag to the operation history data according to an input designation. and a selection unit that selects the operation history data to which the predetermined flag is added as teacher data for machine learning.

本発明によれば、プラントの運転員の通常モードでの操作を機械学習により再現することが可能となる。 Advantageous Effects of Invention According to the present invention, machine learning can be used to reproduce the operation of a plant operator in a normal mode.

図1は、選定装置の概略構成を例示する模式図である。FIG. 1 is a schematic diagram illustrating a schematic configuration of a selection device. 図2は、操作履歴データのデータ構成を例示する図である。FIG. 2 is a diagram illustrating a data configuration of operation history data. 図3は、付与部の処理を説明するための図である。FIG. 3 is a diagram for explaining the processing of the granting unit. 図4は、付与部の処理を説明するための図である。FIG. 4 is a diagram for explaining the processing of the granting unit. 図5は、選定処理手順を例示するフローチャートである。FIG. 5 is a flowchart illustrating a selection processing procedure. 図6は、選定処理手順を例示するフローチャートである。FIG. 6 is a flowchart illustrating a selection processing procedure. 図7は、選定プログラムを実行するコンピュータを例示する図である。FIG. 7 is a diagram illustrating a computer that executes the selection program.

以下、図面を参照して、本発明の一実施形態を詳細に説明する。なお、この実施形態により本発明が限定されるものではない。また、図面の記載において、同一部分には同一の符号を付して示している。 An embodiment of the present invention will be described in detail below with reference to the drawings. It should be noted that the present invention is not limited by this embodiment. Moreover, in the description of the drawings, the same parts are denoted by the same reference numerals.

[選定装置の構成]
図1は、選定装置の概略構成を例示する模式図である。図1に例示するように、本実施形態の選定装置10は、パソコン等の汎用コンピュータで実現され、入力部11、出力部12、通信制御部13、記憶部14、および制御部15を備える。
[Configuration of selected device]
FIG. 1 is a schematic diagram illustrating a schematic configuration of a selection device. As illustrated in FIG. 1 , the selection device 10 of this embodiment is implemented by a general-purpose computer such as a personal computer, and includes an input unit 11 , an output unit 12 , a communication control unit 13 , a storage unit 14 and a control unit 15 .

入力部11は、キーボードやマウス等の入力デバイスを用いて実現され、操作者による入力操作に対応して、制御部15に対して処理開始などの各種指示情報を入力する。出力部12は、液晶ディスプレイなどの表示装置、プリンター等の印刷装置等によって実現される。 The input unit 11 is implemented using an input device such as a keyboard and a mouse, and inputs various instruction information such as processing start to the control unit 15 in response to input operations by the operator. The output unit 12 is implemented by a display device such as a liquid crystal display, a printing device such as a printer, or the like.

通信制御部13は、NIC(Network Interface Card)等で実現され、ネットワークを介した外部の装置と制御部15との通信を制御する。例えば、通信制御部13は、後述する選定処理の処理対象の操作履歴データを出力する操作端末や、操作履歴データを管理する管理装置等と制御部15との通信を制御する。 The communication control unit 13 is implemented by a NIC (Network Interface Card) or the like, and controls communication between an external device and the control unit 15 via a network. For example, the communication control unit 13 controls communication between the control unit 15 and an operation terminal that outputs operation history data to be processed in a selection process to be described later, a management device that manages operation history data, or the like.

記憶部14は、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部14には、選定装置10を動作させる処理プログラムや、処理プログラムの実行中に使用されるデータなどが予め記憶され、あるいは処理の都度一時的に記憶される。 The storage unit 14 is implemented by a semiconductor memory device such as a RAM (Random Access Memory) or a flash memory, or a storage device such as a hard disk or an optical disk. In the storage unit 14, a processing program for operating the selection device 10, data used during execution of the processing program, and the like are stored in advance, or are temporarily stored each time processing is performed.

本実施形態において、記憶部14は、操作履歴データ14aを記憶する。また、記憶部14には、後述する選定処理で生成されるモデルやモデルのパラメータ等が記憶される。なお、記憶部14は、通信制御部13を介して制御部15と通信する構成でもよい。 In this embodiment, the storage unit 14 stores operation history data 14a. The storage unit 14 also stores a model generated in a selection process, which will be described later, parameters of the model, and the like. Note that the storage unit 14 may be configured to communicate with the control unit 15 via the communication control unit 13 .

図2は、操作履歴データのデータ構成を例示する図である、図2に例示するように、操作履歴データ14aは、運転員の操作の時刻と操作履歴を含む。操作履歴には、後述する学習部15dが学習するモデルの説明変数および目的変数の値が含まれる。また操作履歴データ14aは、後述する選定処理で付与されるフラグと重みとを含む。重みとは、後述する学習部15dが操作履歴データを教師データとして用いてモデルを学習する場合の教師データにおける重みである。また、操作履歴データ14aは、後述するように、運転員のコメントを含んでもよい。 FIG. 2 is a diagram illustrating the data configuration of the operation history data. As illustrated in FIG. 2, the operation history data 14a includes the time and operation history of the operator's operation. The operation history includes values of explanatory variables and objective variables of the model learned by the learning unit 15d, which will be described later. The operation history data 14a also includes flags and weights that are given in selection processing, which will be described later. A weight is a weight in teacher data when a learning unit 15d, which will be described later, uses operation history data as teacher data to learn a model. Further, the operation history data 14a may include operator's comments, as will be described later.

なお、図2に示す例では、フラグとして学習の「対象外フラグ」が付与されているが、これに限定されない。例えば、後述するように、フラグは学習の「対象フラグ」であってもよいし、「対象外フラグ」、「対象フラグ」、またはその他のフラグを含む複数のフラグが付与されてもよい。 In addition, in the example shown in FIG. 2 , the “non-subject flag” of learning is given as a flag, but the present invention is not limited to this. For example, as will be described later, the flag may be a "target flag" for learning, or a plurality of flags including a "non-target flag", a "target flag", or other flags may be added.

図1の説明に戻る。制御部15は、CPU(Central Processing Unit)等を用いて実現され、メモリに記憶された処理プログラムを実行する。これにより、制御部15は、図1に例示するように、取得部15a、付与部15b、選定部15cおよび学習部15dとして機能する。なお、これらの機能部は、それぞれあるいは一部が、異なるハードウェアに実装されてもよい。例えば、学習部15dは、他の機能部とは別の装置に実装されてもよい。また、制御部15は、その他の機能部を備えてもよい。 Returning to the description of FIG. The control unit 15 is implemented using a CPU (Central Processing Unit) or the like, and executes a processing program stored in a memory. Thereby, the control unit 15 functions as an acquisition unit 15a, a provision unit 15b, a selection unit 15c, and a learning unit 15d, as illustrated in FIG. Each or part of these functional units may be implemented in different hardware. For example, the learning unit 15d may be implemented in a device separate from other functional units. Also, the control unit 15 may include other functional units.

取得部15aは、操作履歴データを取得する。例えば、取得部15aは、後述する選定処理の対象とする、運転員による操作端末での操作履歴を示す操作履歴データを、入力部11を介して、あるいは、操作端末から、または操作端末での操作履歴を管理する管理装置等から、通信制御部13を介して取得する。取得部15aは、操作履歴データを予め取得して記憶部14に記憶させる。なお、取得部15aは、取得した操作履歴データを記憶部14に記憶させずに、リアルタイムに以下に説明する付与部15bに転送してもよい。 The acquisition unit 15a acquires operation history data. For example, the acquisition unit 15a acquires operation history data indicating the operation history of the operation terminal by the operator, which is the target of the selection process described later, via the input unit 11, from the operation terminal, or at the operation terminal. Acquired via the communication control unit 13 from a management device or the like that manages the operation history. The acquisition unit 15a acquires operation history data in advance and stores it in the storage unit 14 . Note that the acquiring unit 15a may transfer the acquired operation history data to the attaching unit 15b described below in real time without storing the acquired operation history data in the storage unit 14. FIG.

付与部15bは、取得された操作履歴データに、入力された指定に応じて所定のフラグを付与する。具体的には、付与部15bは、所定のフラグの付与を指示する入力を受け付けて、該所定のフラグを付与する。 The adding unit 15b adds a predetermined flag to the acquired operation history data according to the input designation. Specifically, the adding unit 15b receives an input instructing to add a predetermined flag, and adds the predetermined flag.

ここで、図3および図4は、付与部の処理を説明するための図である。例えば、付与部15bは、図3に例示するように、操作履歴データを運転員に提示して、フラグの付与を指示する入力を受け付ける。そして、付与部15bは、図2に例示したように、操作履歴データ14aのうち、指定された箇所に対応するデータにフラグを付与する。 Here, FIGS. 3 and 4 are diagrams for explaining the processing of the granting unit. For example, as illustrated in FIG. 3, the assigning unit 15b presents the operation history data to the operator and accepts an input instructing to assign a flag. Then, as illustrated in FIG. 2, the adding unit 15b adds a flag to the data corresponding to the specified portion in the operation history data 14a.

図3には、下段(b)に操作履歴の原材料、圧力、温度等の各説明変数の値が時系列に表示されている。また、上段(a)に、操作履歴の目的変数の値が時系列に表示されている。 In FIG. 3, the values of explanatory variables such as raw materials, pressure, and temperature in the operation history are displayed in chronological order in the lower part (b). Also, in the upper part (a), the values of the objective variables of the operation history are displayed in chronological order.

また、付与部15bは、図3の上段(a)に縦線の網掛けで示すように、操作履歴データのうち、学習の対象フラグの付与箇所として、学習の対象とする箇所の運転員による指定を受け付ける。例えば、運転員は、うまくいった操作や機械学習のモデルに積極的に学んでほしい操作を指定する。 Further, as indicated by vertical hatching in FIG. Accept designation. For example, an operator can specify which maneuvers went well and which they want the machine learning model to actively learn.

また、付与部15bは、図3の上段(a)に横線の網掛けで示すように、操作履歴データのうち学習の対象外フラグの付与箇所として、学習の対象から除外する対象外の箇所の運転員による指定を受け付ける。例えば、運転員は、失敗した操作を認識した場合に、その時点でその箇所を明示的に対象外の操作として指定する。 As indicated by horizontal hatching in the upper part (a) of FIG. Accepts designation by the operator. For example, when an operator recognizes an operation that has failed, the operator explicitly designates that portion as an operation not targeted at that time.

また、図3の上段(a)に示すように、運転員は、フラグの付与箇所として指定した箇所について、コメントを付加することも可能である。この場合には、例えば、図2に示した操作履歴データ14aにコメントの項目が付加される。 In addition, as shown in the upper part (a) of FIG. 3, the operator can also add a comment to a portion specified as a flagged portion. In this case, for example, a comment item is added to the operation history data 14a shown in FIG.

例えば、学習の対象フラグを付与する箇所に、操作がうまくいった要因をコメントとして残すことができる。図3に示す例では、「原材料の品質変化に応じて細かく操作することにより品質の安定化に成功」等のコメントが付加されている。 For example, it is possible to leave as a comment the reason why the operation was successful at the place where the learning object flag is given. In the example shown in FIG. 3, a comment such as "Successfully stabilized quality by finely manipulating in accordance with quality change of raw materials" is added.

あるいは、学習の対象外フラグを付与する箇所に、対象外とする理由をコメントとして残すことができる。図3に示す例では、「雷雨による温度低下を予想したが、雷雨が来なかったため、学習対象外」等のコメントが付加されている。これにより、学習データの対象/対象外を複数人で入力する際に、他のオペレータとの目線を併せることが可能となり、また、後の精度向上を行う際に参考となる。 Alternatively, it is possible to leave a comment as a reason for excluding the object of learning at the place where the flag not to be studied is given. In the example shown in FIG. 3, a comment such as "a temperature drop was predicted due to a thunderstorm, but no thunderstorm occurred, so it is not subject to learning" is added. As a result, when a plurality of operators input the object/non-object of the learning data, it becomes possible to match the line of sight with other operators, and it becomes a reference when improving accuracy later.

また、図3には、「収集停止」ボタンが表示されている。運転員がこのボタンをクリックすることにより、例えば保守点検時等、非通常の状態で操作履歴データを学習の教師データとして収集したくない場合に、UI上でデータの収集を停止することができる。このように、運転員は、学習除外期間を指定することが可能となる。 Also, in FIG. 3, a "collection stop" button is displayed. By clicking this button, the operator can stop data collection on the UI when he/she does not want to collect operation history data as teaching data for learning under unusual conditions, such as during maintenance inspections. . Thus, the operator can specify the learning exclusion period.

付与部15bは、操作履歴データに、入力された指定に応じて教師データにおける重みをさらに付与することが可能である。具体的には、付与部15bは、重みを指定する入力をさらに受け付けて、図2に例示したように、操作履歴データに重みを付与する。例えば、運転員は、「対象フラグ」の付与を指定した複数の箇所の中でも、特に重要と考える箇所ほど大きい重み付けを指定する。これにより、現場の操作員の判断をより精密に反映することができるので、より高精度に通常モードでの操作を再現するモデルの学習が可能となる。 The adding unit 15b can further add the weight in the teacher data to the operation history data according to the input designation. Specifically, the assigning unit 15b further receives an input designating a weight, and assigns the weight to the operation history data as illustrated in FIG. For example, the operator assigns a greater weight to a location considered to be particularly important among a plurality of locations designated to be given a "target flag". As a result, it is possible to more accurately reflect the judgment of the on-site operator, so that it is possible to learn a model that more accurately reproduces the operation in the normal mode.

なお、図3に示した例では、取得部15aが取得した操作履歴データを付与部15bがリアルタイムに提示する場合が例示されている。この場合には、操作履歴データにフラグや重みを付与した後に記憶部14の操作履歴データ14aに記憶する。 Note that the example shown in FIG. 3 illustrates a case where the provision unit 15b presents the operation history data acquired by the acquisition unit 15a in real time. In this case, the operation history data is stored in the operation history data 14a of the storage unit 14 after being given flags and weights.

一方、付与部15bは、記憶部14に予め記憶されている操作履歴データ14aを提示して、フラグを付与して操作履歴データ14aを更新することも可能である。図4には、操作履歴データ14aが更新される場合が例示されている。この場合にも、図3に示した例と同様に、運転員がフラグの付与箇所を指定することが可能である。図4に示した例においても、斜線の網掛けで例示するように、学習除外期間を指定することも可能である。 On the other hand, the adding unit 15b can present the operation history data 14a pre-stored in the storage unit 14, add a flag, and update the operation history data 14a. FIG. 4 illustrates a case where the operation history data 14a is updated. In this case as well, the operator can specify the locations to which the flags are attached, as in the example shown in FIG. In the example shown in FIG. 4 as well, it is possible to specify the learning exclusion period as illustrated by hatching with oblique lines.

図1の説明に戻る。選定部15cが、所定のフラグが付与された操作履歴データを、機械学習の教師データとして選定する。例えば、選定部15cは、操作履歴データ14aから、学習の「対象フラグ」が付与された操作履歴データを抽出して教師データとする。 Returning to the description of FIG. The selection unit 15c selects operation history data to which a predetermined flag is added as teacher data for machine learning. For example, the selection unit 15c extracts the operation history data to which the “target flag” for learning is added from the operation history data 14a, and uses it as teacher data.

なお、図2に示した例では、「対象外フラグ」が付与されているが、例えば、「重み」を「対象フラグ」と解することも可能である。その場合には、選定部15cは、所定の閾値を超えるもののみを教師データとして選定することも可能である。また、選定部15cは、重みの値を直接、機械学習のパラメータとして用いてもよい。 In the example shown in FIG. 2, the "non-target flag" is given, but for example, the "weight" can be interpreted as the "target flag". In that case, the selection unit 15c can also select only data exceeding a predetermined threshold as teacher data. Alternatively, the selection unit 15c may directly use the weight value as a machine learning parameter.

これにより、例えば、学習対象としたい操作履歴データに学習対象を示すフラグを付与して、現場の操作員が教師データとして用いる操作履歴データを指定することが可能となる。そのため、プラントの運転員の通常モードでの操作を機械学習により再現することが可能となる。したがって、プラントの通常モードの運転において、精度高く操作支援を行うことが可能となる。 This makes it possible, for example, to add a flag indicating a learning target to the operation history data to be learned, and to specify the operation history data to be used as teacher data by the operator on site. Therefore, it is possible to reproduce the operation of the plant operator in the normal mode by machine learning. Therefore, in the operation of the plant in the normal mode, it is possible to perform operation support with high accuracy.

なお、選定部15cは、操作履歴データ14aから、現場の操作員が非定常な操作と判断した学習の「対象外フラグ」が付与された操作履歴データを除外することにより、教師データを選定してもよい。このように、学習対象外の操作履歴データを明示して機械学習の教師データから除外することにより、精度高く通常モードでの操作を再現することが可能となる。 The selection unit 15c selects teacher data by excluding, from the operation history data 14a, the operation history data to which the learning "non-target flag" is given, which is determined by the on-site operator to be an unsteady operation. may In this way, by explicitly excluding the operation history data not to be learned from the training data for machine learning, it is possible to reproduce the operation in the normal mode with high accuracy.

また、付与部15bは、操作履歴データに、入力された指定に応じて複数種類の所定のフラグを付与することも可能である。この場合には、選定部15cは、所定のフラグごとに操作履歴データを選定する。 Further, the adding unit 15b can also add a plurality of types of predetermined flags to the operation history data according to the input designation. In this case, the selection unit 15c selects operation history data for each predetermined flag.

例えば、操作履歴データ14aに、学習の「対象フラグ」の他に、学習の「対象外フラグ」や、その他のフラグが付与された場合には、選定部15cは、操作履歴データ14aをフラグごとに集約する。その場合には、選定部15cは、「対象フラグ」が付与された操作履歴データを教師データとしてもよいし、「対象外フラグ」が付与された操作履歴データを除外して教師データとしてもよい。 For example, when the operation history data 14a is given a learning "non-target flag" or other flags in addition to the learning "target flag", the selection unit 15c selects the operation history data 14a for each flag. converge on In that case, the selection unit 15c may use the operation history data to which the “target flag” is assigned as the teacher data, or may exclude the operation history data to which the “non-target flag” is assigned and use it as the teacher data. .

学習部15dは、選定された教師データを用いて、機械学習のモデルを学習する。これにより、プラントの運転員の通常モードでの操作を機械学習により精度高く再現することが可能となる。 The learning unit 15d learns a machine learning model using the selected teacher data. As a result, it becomes possible to accurately reproduce the operation of the plant operator in the normal mode by machine learning.

[選定処理手順]
次に、図5および図6を参照して、本実施形態に係る選定装置10による選定処理の一例について説明する。図5および図6は、選定処理手順を例示するフローチャートである。まず、図5のフローチャートは、例えば、選定処理の開始を指示する入力があったタイミングで開始される。
[Selection procedure]
Next, an example of selection processing by the selection device 10 according to the present embodiment will be described with reference to FIGS. 5 and 6. FIG. 5 and 6 are flowcharts illustrating selection processing procedures. First, the flowchart of FIG. 5 is started, for example, when an input instructing the start of selection processing is received.

まず、取得部15aが、操作履歴データを取得する(ステップS1)。例えば、取得部15aは、選定処理の対象とする、運転員による操作端末での操作履歴を示す操作履歴データを、入力部11を介して、あるいは、操作端末から、または操作端末での操作履歴を管理する管理装置等から通信制御部13を介して取得する。 First, the acquisition unit 15a acquires operation history data (step S1). For example, the acquisition unit 15a acquires operation history data indicating the operation history of the operation terminal by the operator, which is the target of the selection process, via the input unit 11, from the operation terminal, or from the operation history at the operation terminal. is acquired via the communication control unit 13 from a management device or the like that manages the .

次に、付与部15bは、操作履歴データを運転員に提示して、フラグの付与を指定する入力を受け付けた場合に(ステップS2、Yes)、操作履歴データ14aのうち、指定された箇所に対応するデータにフラグを付与する(ステップS3)。 Next, the assigning unit 15b presents the operation history data to the operator, and when an input designating attachment of a flag is received (step S2, Yes), the flag is added to the specified location in the operation history data 14a. A flag is attached to the corresponding data (step S3).

また、付与部15bは、フラグの付与を指示する入力がない場合には(ステップS2、No)、ステップS4に処理を進める。 Further, when there is no input instructing to add a flag (step S2, No), the adding unit 15b advances the process to step S4.

同様に、付与部15bは、運転員から、教師データにおける重みを指定する入力を受け付けた場合に(ステップS4、Yes)、操作履歴データ14aに重みを付与する(ステップS5)。これにより一連の処理が終了する。 Similarly, when receiving an input specifying a weight in the teacher data from the operator (step S4, Yes), the assigning unit 15b assigns a weight to the operation history data 14a (step S5). This completes a series of processes.

また、付与部15bは、教師データにおける重みを指定する入力がない場合には(ステップS4、No)、一連の処理を終了する。 If there is no input designating the weight in the teacher data (step S4, No), the imparting unit 15b terminates the series of processes.

次に、図6のフローチャートは、例えば、処理の開始を指示する入力があったタイミングで開始される。なお、図5に示したステップS5の処理に引き続き、ステップS11の処理が開始されてもよい。 Next, the flowchart of FIG. 6 is started at the timing when an input instructing the start of processing is received, for example. Note that the process of step S11 may be started following the process of step S5 shown in FIG.

まず、選定部15cが、所定のフラグが付与された操作履歴データ14aを、機械学習の教師データとして選定する(ステップS11)。例えば、選定部15cは、操作履歴データ14aから、学習の「対象フラグ」が付与された操作履歴データを抽出して教師データとする。あるいは、選定部15cは、操作履歴データ14aから、「対象外フラグ」が付与された操作履歴データを除外することにより、教師データを選定してもよい。 First, the selection unit 15c selects the operation history data 14a to which a predetermined flag is added as teacher data for machine learning (step S11). For example, the selection unit 15c extracts the operation history data to which the “target flag” for learning is added from the operation history data 14a, and uses it as teacher data. Alternatively, the selection unit 15c may select teacher data by excluding operation history data to which the “non-target flag” is added from the operation history data 14a.

次に、学習部15dが、選定された教師データを用いて、機械学習のモデルを学習する(ステップS12)ことにより、学習により生成したモデルを出力する(ステップS13)。例えば、学習部15dは、プラントの運転員の操作を再現する現場にモデルを適用する。これにより、一連の選定処理が終了する。 Next, the learning unit 15d learns a machine learning model using the selected teacher data (step S12), and outputs a model generated by learning (step S13). For example, the learning unit 15d applies the model to a site that reproduces the operations of plant operators. This completes a series of selection processes.

[効果]
以上、説明したように、上記実施形態の選定装置10では、取得部15aが、操作履歴データを取得する。付与部15bが、操作履歴データに、入力された指定に応じて所定のフラグを付与する。選定部15cが、所定のフラグが付与された操作履歴データを、機械学習の教師データとして選定する。
[effect]
As described above, in the selection device 10 of the above embodiment, the acquisition unit 15a acquires operation history data. The adding unit 15b adds a predetermined flag to the operation history data according to the input designation. The selection unit 15c selects operation history data to which a predetermined flag is added as teacher data for machine learning.

これにより、例えば、学習対象としたい操作履歴データに学習対象を示すフラグを付与して、現場の操作員が教師データとして用いる操作履歴データを指定することが可能となる。そのため、プラントの運転員の通常モードでの操作を機械学習により再現することが可能となる。したがって、プラントの通常モードの運転において、精度高く操作支援を行うことが可能となる。 This makes it possible, for example, to add a flag indicating a learning target to the operation history data to be learned, and to specify the operation history data to be used as teacher data by the operator on site. Therefore, it is possible to reproduce the operation of the plant operator in the normal mode by machine learning. Therefore, in the operation of the plant in the normal mode, it is possible to perform operation support with high accuracy.

また、付与部15bは、操作履歴データに、入力された指定に応じて教師データにおける重みをさらに付与する。これにより、現場の操作員の判断をより精密に反映することができるので、より高精度に通常モードでの操作を再現することが可能となる。 In addition, the assigning unit 15b further assigns the weight in the teacher data to the operation history data in accordance with the input designation. As a result, it is possible to more accurately reflect the judgment of the operator at the site, so that the operation in the normal mode can be reproduced with higher accuracy.

また、付与部15bは、操作履歴データに、入力された指定に応じて複数の所定のフラグを付与し、選定部15cは、所定のフラグごとに操作履歴データを選定する。これにより、例えば、現場の操作員が非通常の操作と判断した操作履歴データに、学習対象外を示すフラグを付与することが可能となる。したがって、学習対象外の操作履歴データを明示して機械学習の教師データから除外して、精度高く通常モードでの操作を再現することが可能となる。 Further, the adding unit 15b adds a plurality of predetermined flags to the operation history data according to the input designation, and the selecting unit 15c selects the operation history data for each predetermined flag. As a result, for example, it is possible to attach a flag indicating that the operation is not subject to learning to the operation history data determined by the operator on site to be an abnormal operation. Therefore, it is possible to clearly reproduce operation history data that is not to be learned and exclude it from machine learning teacher data, thereby reproducing operations in the normal mode with high accuracy.

また、学習部15dが、選定された教師データを用いて、機械学習のモデルを学習する。これにより、プラントの運転員の通常モードでの操作を機械学習により再現することが可能となる。 Also, the learning unit 15d learns a machine learning model using the selected teacher data. As a result, it becomes possible to reproduce the operation of plant operators in the normal mode by machine learning.

[システム構成等]
図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、CPUやGPUおよび当該CPUやGPUにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
[System configuration, etc.]
Each component of each device illustrated is functionally conceptual, and does not necessarily need to be physically configured as illustrated. In other words, the specific form of distribution and integration of each device is not limited to the one shown in the figure, and all or part of them can be functionally or physically distributed and integrated in arbitrary units according to various loads and usage conditions. Can be integrated and configured. Furthermore, all or any part of each processing function performed by each device is realized by a CPU or GPU and a program analyzed and executed by the CPU or GPU, or as hardware by wired logic can be realized.

また、本実施形態において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。 Further, among the processes described in this embodiment, all or part of the processes described as being automatically performed can be performed manually, or the processes described as being performed manually can be performed manually. All or part of this can also be done automatically by known methods. In addition, information including processing procedures, control procedures, specific names, and various data and parameters shown in the above documents and drawings can be arbitrarily changed unless otherwise specified.

[プログラム]
上記実施形態において説明した選定装置が実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。例えば、実施形態に係る選定装置10が実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。この場合、コンピュータがプログラムを実行することにより、上記実施形態と同様の効果を得ることができる。さらに、かかるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータに読み込ませて実行することにより上記実施形態と同様の処理を実現してもよい。
[program]
It is also possible to create a program in which the processing executed by the selection device described in the above embodiment is described in a computer-executable language. For example, it is possible to create a program in which the processing executed by the selection device 10 according to the embodiment is described in a computer-executable language. In this case, the same effects as those of the above embodiments can be obtained by having the computer execute the program. Further, such a program may be recorded in a computer-readable recording medium, and the program recorded in this recording medium may be read by a computer and executed to realize the same processing as in the above embodiments.

図7は、選定プログラムを実行するコンピュータの一例を示す図である。コンピュータ1000は、例えば、メモリ1010と、CPU1020と、ハードディスクドライブインタフェース1030と、ディスクドライブインタフェース1040と、シリアルポートインタフェース1050と、ビデオアダプタ1060と、ネットワークインタフェース1070とを有する。これらの各部は、バス1080によって接続される。 FIG. 7 is a diagram showing an example of a computer that executes a selection program. Computer 1000 includes, for example, memory 1010 , CPU 1020 , hard disk drive interface 1030 , disk drive interface 1040 , serial port interface 1050 , video adapter 1060 and network interface 1070 . These units are connected by a bus 1080 .

メモリ1010は、ROM(Read Only Memory)1011およびRAM1012を含む。ROM1011は、例えば、BIOS(Basic Input Output System)等のブートプログラムを記憶する。ハードディスクドライブインタフェース1030は、ハードディスクドライブ1031に接続される。ディスクドライブインタフェース1040は、ディスクドライブ1041に接続される。ディスクドライブ1041には、例えば、磁気ディスクや光ディスク等の着脱可能な記憶媒体が挿入される。シリアルポートインタフェース1050には、例えば、マウス1051およびキーボード1052が接続される。ビデオアダプタ1060には、例えば、ディスプレイ1061が接続される。 The memory 1010 includes a ROM (Read Only Memory) 1011 and a RAM 1012 . The ROM 1011 stores a boot program such as BIOS (Basic Input Output System). Hard disk drive interface 1030 is connected to hard disk drive 1031 . Disk drive interface 1040 is connected to disk drive 1041 . A removable storage medium such as a magnetic disk or an optical disk is inserted into the disk drive 1041, for example. A mouse 1051 and a keyboard 1052 are connected to the serial port interface 1050, for example. For example, a display 1061 is connected to the video adapter 1060 .

ここで、ハードディスクドライブ1031は、例えば、OS1091、アプリケーションプログラム1092、プログラムモジュール1093およびプログラムデータ1094を記憶する。上記実施形態で説明した各情報は、例えばハードディスクドライブ1031やメモリ1010に記憶される。 Here, the hard disk drive 1031 stores an OS 1091, application programs 1092, program modules 1093 and program data 1094, for example. Each piece of information described in the above embodiment is stored in the hard disk drive 1031 or the memory 1010, for example.

また、選定プログラムは、例えば、コンピュータ1000によって実行される指令が記述されたプログラムモジュール1093として、ハードディスクドライブ1031に記憶される。具体的には、上記実施形態で説明した選定装置10が実行する各処理が記述されたプログラムモジュール1093が、ハードディスクドライブ1031に記憶される。 Also, the selection program is stored in hard disk drive 1031 as program module 1093 in which commands to be executed by computer 1000 are described, for example. Specifically, the hard disk drive 1031 stores a program module 1093 that describes each process executed by the selection device 10 described in the above embodiment.

また、選定プログラムによる情報処理に用いられるデータは、プログラムデータ1094として、例えば、ハードディスクドライブ1031に記憶される。そして、CPU1020が、ハードディスクドライブ1031に記憶されたプログラムモジュール1093やプログラムデータ1094を必要に応じてRAM1012に読み出して、上述した各手順を実行する。 Data used for information processing by the selection program is stored as program data 1094 in the hard disk drive 1031, for example. Then, the CPU 1020 reads out the program module 1093 and the program data 1094 stored in the hard disk drive 1031 to the RAM 1012 as necessary, and executes each procedure described above.

なお、選定プログラムに係るプログラムモジュール1093やプログラムデータ1094は、ハードディスクドライブ1031に記憶される場合に限られず、例えば、着脱可能な記憶媒体に記憶されて、ディスクドライブ1041等を介してCPU1020によって読み出されてもよい。あるいは、選定プログラムに係るプログラムモジュール1093やプログラムデータ1094は、LAN(Local Area Network)やWAN(Wide Area Network)等のネットワークを介して接続された他のコンピュータに記憶され、ネットワークインタフェース1070を介してCPU1020によって読み出されてもよい。 Note that the program module 1093 and program data 1094 related to the selection program are not limited to being stored in the hard disk drive 1031. For example, they may be stored in a removable storage medium and read by the CPU 1020 via the disk drive 1041 or the like. may be Alternatively, the program module 1093 and program data 1094 related to the selection program are stored in another computer connected via a network such as a LAN (Local Area Network) or a WAN (Wide Area Network), and are transmitted via the network interface 1070. It may be read by CPU 1020 .

以上、本発明者によってなされた発明を適用した実施形態について説明したが、本実施形態による本発明の開示の一部をなす記述および図面により本発明は限定されることはない。すなわち、本実施形態に基づいて当業者等によりなされる他の実施形態、実施例および運用技術等は全て本発明の範疇に含まれる。 Although the embodiments to which the invention made by the present inventor is applied have been described above, the present invention is not limited by the descriptions and drawings forming a part of the disclosure of the present invention according to the embodiments. That is, other embodiments, examples, operation techniques, etc. made by those skilled in the art based on this embodiment are all included in the scope of the present invention.

10 選定装置
11 入力部
12 出力部
13 通信制御部
14 記憶部
14a 操作履歴データ
15 制御部
15a 取得部
15b 付与部
15c 選定部
15d 学習部
10 selection device 11 input unit 12 output unit 13 communication control unit 14 storage unit 14a operation history data 15 control unit 15a acquisition unit 15b addition unit 15c selection unit 15d learning unit

Claims (4)

操作履歴データをリアルタイムに表示する画面に表示された該操作履歴データの収集停止の指示に基づいて、リアルタイムでデータの取得と取得停止とを切り替えることで、機械学習モデルの学習対象とする運転員の操作を含む該操作履歴データを取得する取得部と、
前記操作履歴データに、前記操作履歴データを表示する画面の表示に基づいて入力された指定に応じ複数種類の所定のフラグとして、前記機械学習モデルの学習対象か否かを示す対象のフラグまたは対象外のフラグと、機械学習の教師データにおける重みと、および所定のコメントとを付与する付与部と、
前記対象のフラグまたは前記対象外のフラグと、前記重みと、前記所定のコメントとが付与された前記操作履歴データごとに、前記対象のフラグまたは前記対象外のフラグと、前記重みとに基づいて前記機械学習の教師データとして選定する選定部と、
を有することを特徴とする選定装置。
Based on the instruction to stop collecting the operation history data displayed on the screen that displays the operation history data in real time , by switching between acquiring and stopping the acquisition of the data in real time, the operator to be learned by the machine learning model. an acquisition unit that acquires the operation history data including the operation of
A target flag indicating whether or not the machine learning model is to be learned, or a granting unit that grants an out-of-target flag , a weight in machine learning training data, and a predetermined comment;
Based on the target flag or the non-target flag and the weight for each operation history data to which the target flag or the non-target flag, the weight, and the predetermined comment are assigned a selection unit that selects as training data for the machine learning;
A selection device comprising:
選定された前記教師データを用いて、機械学習のモデルを学習する学習部をさらに有することを特徴とする請求項1に記載の選定装置。 2. The selection device according to claim 1, further comprising a learning unit that learns a machine learning model using the selected teacher data. 選定装置が実行する選定方法であって、
操作履歴データをリアルタイムに表示する画面に表示された該操作履歴データの収集停止の指示に基づいて、リアルタイムでデータの取得と取得停止とを切り替えることで、機械学習モデルの学習対象とする運転員の操作を含む該操作履歴データを取得する取得工程と、
前記操作履歴データに、前記操作履歴データを表示する画面の表示に基づいて入力された指定に応じ複数種類の所定のフラグとして、前記機械学習モデルの学習対象か否かを示す対象のフラグまたは対象外のフラグと、機械学習の教師データにおける重みと、および所定のコメントとを付与する付与工程と、
前記対象のフラグまたは前記対象外のフラグと、前記重みと、前記所定のコメントとが付与された前記操作履歴データごとに、前記対象のフラグまたは前記対象外のフラグと、前記重みとに基づいて前記機械学習の教師データとして選定する選定工程と、
を含むことを特徴とする選定方法。
A selection method executed by a selection device,
Based on the instruction to stop collecting the operation history data displayed on the screen that displays the operation history data in real time , by switching between acquiring and stopping the acquisition of the data in real time, the operator to be learned by the machine learning model. an acquisition step of acquiring the operation history data including the operation of
Target flags indicating whether or not the machine learning model is to be learned, or an assignment step of assigning a non-target flag , a weight in machine learning training data, and a predetermined comment;
Based on the target flag or the non-target flag and the weight for each operation history data to which the target flag or the non-target flag, the weight, and the predetermined comment are assigned A selection step of selecting as training data for the machine learning;
A selection method comprising:
操作履歴データをリアルタイムに表示する画面に表示された該操作履歴データの収集停止の指示に基づいて、リアルタイムでデータの取得と取得停止とを切り替えることで、機械学習モデルの学習対象とする運転員の操作を含む該操作履歴データを取得する取得ステップと、
前記操作履歴データに、前記操作履歴データを表示する画面の表示に基づいて入力された指定に応じ複数種類の所定のフラグとして、前記機械学習モデルの学習対象か否かを示す対象のフラグまたは対象外のフラグと、機械学習の教師データにおける重みと、および所定のコメントとを付与する付与ステップと、
前記対象のフラグまたは前記対象外のフラグと、前記重みと、前記所定のコメントとが付与された前記操作履歴データごとに、前記対象のフラグまたは前記対象外のフラグと、前記重みとに基づいて前記機械学習の教師データとして選定する選定ステップと、
をコンピュータに実行させるための選定プログラム。
Based on the instruction to stop collecting the operation history data displayed on the screen that displays the operation history data in real time , by switching between acquiring and stopping the acquisition of the data in real time, the operator to be learned by the machine learning model. an acquisition step of acquiring the operation history data including the operation of
A target flag indicating whether or not the machine learning model is to be learned, or A granting step of granting a non-target flag , a weight in machine learning teacher data, and a predetermined comment;
Based on the target flag or the non-target flag and the weight for each operation history data to which the target flag or the non-target flag, the weight, and the predetermined comment are assigned A selection step of selecting as training data for the machine learning;
A selection program for executing a computer.
JP2021206383A 2021-12-20 2021-12-20 Selection device, selection method and selection program Active JP7317931B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021206383A JP7317931B2 (en) 2021-12-20 2021-12-20 Selection device, selection method and selection program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021206383A JP7317931B2 (en) 2021-12-20 2021-12-20 Selection device, selection method and selection program

Publications (2)

Publication Number Publication Date
JP2023091578A JP2023091578A (en) 2023-06-30
JP7317931B2 true JP7317931B2 (en) 2023-07-31

Family

ID=86941946

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021206383A Active JP7317931B2 (en) 2021-12-20 2021-12-20 Selection device, selection method and selection program

Country Status (1)

Country Link
JP (1) JP7317931B2 (en)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002091561A (en) 2000-09-12 2002-03-29 Toshiba Corp Supervisory controller and storage medium
JP2017016335A (en) 2015-06-30 2017-01-19 オルガノ株式会社 Plant management device
JP2018109876A (en) 2017-01-04 2018-07-12 株式会社東芝 Sensor design support apparatus, sensor design support method and computer program
US20180283723A1 (en) 2017-03-30 2018-10-04 Samsung Electronics Co., Ltd. Data learning server and method for generating and using learning model thereof
WO2018235252A1 (en) 2017-06-23 2018-12-27 日本電気株式会社 Analysis device, log analysis method, and recording medium
JP2019220105A (en) 2018-06-22 2019-12-26 アズビル株式会社 Data extraction method and data extraction device
JP2020166421A (en) 2019-03-28 2020-10-08 日立造船株式会社 Information processing device, information processing method, information processing program, and waste incineration plant
WO2020217434A1 (en) 2019-04-25 2020-10-29 三菱電機株式会社 Data collection device, data collection method, and program
JP6865901B1 (en) 2020-03-30 2021-04-28 三菱電機株式会社 Diagnostic system, diagnostic method and program
JP2021092925A (en) 2019-12-09 2021-06-17 株式会社東芝 Data generating device and data generating method
JP6956913B1 (en) 2020-04-06 2021-11-02 三菱電機株式会社 Feature extraction device, time series inference device, time series learning system, time series feature extraction method, time series inference method, and time series learning method

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002091561A (en) 2000-09-12 2002-03-29 Toshiba Corp Supervisory controller and storage medium
JP2017016335A (en) 2015-06-30 2017-01-19 オルガノ株式会社 Plant management device
JP2018109876A (en) 2017-01-04 2018-07-12 株式会社東芝 Sensor design support apparatus, sensor design support method and computer program
US20180283723A1 (en) 2017-03-30 2018-10-04 Samsung Electronics Co., Ltd. Data learning server and method for generating and using learning model thereof
WO2018235252A1 (en) 2017-06-23 2018-12-27 日本電気株式会社 Analysis device, log analysis method, and recording medium
JP2019220105A (en) 2018-06-22 2019-12-26 アズビル株式会社 Data extraction method and data extraction device
JP2020166421A (en) 2019-03-28 2020-10-08 日立造船株式会社 Information processing device, information processing method, information processing program, and waste incineration plant
WO2020217434A1 (en) 2019-04-25 2020-10-29 三菱電機株式会社 Data collection device, data collection method, and program
JP2021092925A (en) 2019-12-09 2021-06-17 株式会社東芝 Data generating device and data generating method
JP6865901B1 (en) 2020-03-30 2021-04-28 三菱電機株式会社 Diagnostic system, diagnostic method and program
JP6956913B1 (en) 2020-04-06 2021-11-02 三菱電機株式会社 Feature extraction device, time series inference device, time series learning system, time series feature extraction method, time series inference method, and time series learning method

Also Published As

Publication number Publication date
JP2023091578A (en) 2023-06-30

Similar Documents

Publication Publication Date Title
JP6693938B2 (en) Appearance inspection device
CN104391797B (en) The recognition methods of GUI controls and device
JP6780769B2 (en) Learning equipment, learning methods and learning programs
WO2018198233A1 (en) Learning device, image recognition device, learning method, and program
US20230021099A1 (en) Method and assistance system for checking samples for defects
CN107885493A (en) Program making supports method and program making to support device
CN110163084A (en) Operator action measure of supervision, device and electronic equipment
Agustian et al. Implementation of Machine Learning Using Google's Teachable Machine Based on Android
JP7317931B2 (en) Selection device, selection method and selection program
US11062264B2 (en) Work support system, work support server, work situation determination apparatus, device for worker, and work object equipment
EP4071570A1 (en) Prediction system, information processing device, and information processing program
CN109840867B (en) Intelligent teaching method, equipment and device
KR102232382B1 (en) Method for virtually performing scientific experiment
JP2019066989A (en) Evaluation system, evaluation method and program
US11443266B2 (en) Machine learning method and machine learning apparatus performing learning relating to work process
JP2005301568A (en) Display information storage controller, and program thereof
US10545858B2 (en) Method for testing a graphical interface and corresponding test system
JPS59186054A (en) Test method of computer program
US20230013943A1 (en) Information processing device, setting method, and setting program
JP2020077327A (en) Inference device, information processing device, inference method, and program
US20240037016A1 (en) Computer readable storage medium, debugging support device, debugging support method, and machine learning device
EP4421572A1 (en) Information processing apparatus, information processing method and information processing program
US20240077865A1 (en) Information processing apparatus, information processing method, and computer-readable recording medium
JP2023084567A (en) Visualization device, visualization method and visualization program
JP7233521B2 (en) Inspection system and inspection method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230627

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230719

R150 Certificate of patent or registration of utility model

Ref document number: 7317931

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150