JP6890109B2 - Information generator, information generation system and program - Google Patents

Information generator, information generation system and program Download PDF

Info

Publication number
JP6890109B2
JP6890109B2 JP2018181644A JP2018181644A JP6890109B2 JP 6890109 B2 JP6890109 B2 JP 6890109B2 JP 2018181644 A JP2018181644 A JP 2018181644A JP 2018181644 A JP2018181644 A JP 2018181644A JP 6890109 B2 JP6890109 B2 JP 6890109B2
Authority
JP
Japan
Prior art keywords
network
workflow
failure
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018181644A
Other languages
Japanese (ja)
Other versions
JP2020052747A (en
Inventor
達史 宮本
達史 宮本
雅典 宮澤
雅典 宮澤
英 渡邊
英 渡邊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2018181644A priority Critical patent/JP6890109B2/en
Publication of JP2020052747A publication Critical patent/JP2020052747A/en
Application granted granted Critical
Publication of JP6890109B2 publication Critical patent/JP6890109B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明の実施形態は、情報生成装置、情報生成システム及びプログラムに関する。 Embodiments of the present invention relate to information generators, information generation systems and programs.

装置間の通信システムに対して疑似的に障害を発生させる障害シミュレータ技術が開示されている(例えば、特許文献1を参照。)。 A fault simulator technique for generating a pseudo fault in a communication system between devices is disclosed (see, for example, Patent Document 1).

特開2011−123783号公報Japanese Unexamined Patent Publication No. 2011-123783

しかしながら、特許文献1に記載されるような従来技術によると、疑似的な障害を発生させるためのコマンドの実行手順や実行内容を、例えば対象装置の構成に応じて変更する必要があり、運用工数が非常に大きいといった問題があった。 However, according to the prior art as described in Patent Document 1, it is necessary to change the command execution procedure and the execution content for causing a pseudo failure according to, for example, the configuration of the target device, and the operation man-hours are required. There was a problem that it was very large.

本発明は、運用工数を低減することができる情報生成装置、情報生成システム及びプログラムを提供することを目的とする。 An object of the present invention is to provide an information generation device, an information generation system and a program capable of reducing operation man-hours.

本発明の一実施形態は、学習対象のネットワークに発生させるネットワーク障害の種類を示す情報と、前記学習対象のネットワークに関するネットワークパラメータとを入力データとし、前記ネットワークを操作するタスクが定義されているタスク定義情報から選択される1以上の前記タスクを組み合わせたワークフローを出力データとし、前記ワークフローに基づく動作を前記ネットワークに与えた結果生じるネットワーク障害の発生有無を教師データとして、前記ネットワーク障害の種類と、前記ネットワークパラメータと、前記ワークフローとの関係が学習された学習済みモデルと、検査対象のネットワークに発生させるネットワーク障害の種類を示す障害種類情報と、検査対象のネットワークに関するネットワークパラメータとをそれぞれ取得する取得部と、前記取得部が取得する前記障害種類情報と前記ネットワークパラメータとを前記学習済みモデルに対して供給する供給部と、前記供給部から供給される入力データに基づいて前記学習済みモデルが出力する1以上の前記ワークフローを、前記障害種類情報が示す種類のネットワーク障害の発生確率に基づいて選択する選択部と、前記選択部によって選択された前記ワークフローを出力する出力部とを備える情報生成装置である。 In one embodiment of the present invention, information indicating the type of network failure to occur in the network to be learned and network parameters related to the network to be learned are input data, and a task for operating the network is defined. The output data is a workflow that combines one or more of the tasks selected from the definition information, and the presence or absence of a network failure that occurs as a result of giving an operation based on the workflow to the network is used as training data, and the type of the network failure and Acquisition of the trained model in which the relationship between the network parameters and the workflow is learned, the failure type information indicating the type of network failure to occur in the network to be inspected, and the network parameters related to the network to be inspected, respectively. The trained model outputs the unit, the supply unit that supplies the failure type information and the network parameters acquired by the acquisition unit to the trained model, and the input data supplied from the supply unit. An information generation device including a selection unit that selects one or more of the above workflows based on the occurrence probability of a network failure of the type indicated by the failure type information, and an output unit that outputs the workflow selected by the selection unit. Is.

本発明の一実施形態の情報生成装置において、前記学習済みモデルは、複数の前記ワークフローを前記選択部に対して出力し、前記選択部は、前記学習済みモデルが出力する複数の前記ワークフローのうち、前記障害種類情報が示す種類のネットワーク障害の発生確率が相対的に高い前記ワークフローを選択する。 In the information generation device of the embodiment of the present invention, the trained model outputs a plurality of the workflows to the selection unit, and the selection unit is among the plurality of workflows output by the trained model. , Select the workflow having a relatively high probability of occurrence of the type of network failure indicated by the failure type information.

本発明の一実施形態の情報生成装置において、前記学習済みモデルが出力する前記ワークフローに基づく動作を前記ネットワークに与えた結果生じる状況とネットワーク障害の発生有無との関係が定義されている障害判定ポリシに基づいて、ネットワーク障害の発生有無を判定する判定部と、前記ワークフローと、当該ワークフローに基づく動作を前記ネットワークに与えた結果生じる状況を前記判定部が判定した判定結果とが対応付けて記憶される記憶部と、をさらに備え、前記学習済みモデルは、前記障害判定ポリシに基づいて判定されるネットワーク障害の発生有無を、前記教師データにして学習されている。 In the information generator according to the embodiment of the present invention, a failure determination policy in which the relationship between the situation generated as a result of giving the network an operation based on the workflow output by the trained model and the presence / absence of a network failure is defined. Based on the above, the determination unit that determines whether or not a network failure has occurred, the workflow, and the determination result that the determination unit determines the situation that occurs as a result of giving an operation based on the workflow to the network are stored in association with each other. The trained model is further provided with a storage unit, and the trained model is trained by using the teacher data as the presence or absence of a network failure determined based on the failure determination policy.

本発明の一実施形態の情報生成装置において、前記学習済みモデルは、前記記憶部に記憶されている前記ワークフローと前記判定結果との対応関係を前記教師データにして再学習される。 In the information generation device of the embodiment of the present invention, the trained model is relearned by using the correspondence between the workflow and the determination result stored in the storage unit as the teacher data.

本発明の一実施形態は、上述の情報生成装置と、前記出力部が出力する前記ワークフローに基づく動作を前記ネットワークに与えるワークフロー制御部と、前記ネットワークに生じる状況を監視し、監視した結果を前記情報生成装置の前記判定部に対して出力するネットワーク監視部とを備える情報生成システムである。 In one embodiment of the present invention, the above-mentioned information generator, a workflow control unit that gives an operation based on the workflow output by the output unit to the network, and a situation that occurs in the network are monitored and the results of monitoring are obtained. It is an information generation system including a network monitoring unit that outputs to the determination unit of the information generation device.

本発明の一実施形態は、コンピュータに、検査対象のネットワークに発生させるネットワーク障害の種類を示す障害種類情報と、検査対象のネットワークに関するネットワークパラメータとをそれぞれ取得する取得ステップと、学習対象のネットワークに発生させるネットワーク障害の種類を示す情報と、前記学習対象のネットワークに関するネットワークパラメータとを入力データとし、前記ネットワークを操作するタスクが定義されているタスク定義情報から選択される1以上の前記タスクを組み合わせたワークフローを出力データとし、前記ワークフローに基づく動作を前記ネットワークに与えた結果生じるネットワーク障害の発生有無を教師データとして、前記ネットワーク障害の種類と、前記ネットワークパラメータと、前記ワークフローとの関係が学習された学習済みモデルに対して、前記取得ステップにおいて取得される前記障害種類情報と前記ネットワークパラメータとを供給する供給ステップと、前記供給ステップにおいて供給される入力データに基づいて前記学習済みモデルが出力する1以上の前記ワークフローを、前記障害種類情報が示す種類のネットワーク障害の発生確率に基づいて選択する選択ステップと、前記選択ステップにおいて選択された前記ワークフローを出力する出力ステップとを実行させるためのプログラムである。 In one embodiment of the present invention, the computer has an acquisition step of acquiring failure type information indicating the type of network failure to occur in the network to be inspected and network parameters related to the network to be inspected, and a network to be learned. Information indicating the type of network failure to be generated and network parameters related to the network to be learned are used as input data, and one or more of the tasks selected from the task definition information in which the task to operate the network is defined are combined. The relationship between the type of network failure, the network parameters, and the workflow is learned by using the above workflow as output data and using the presence or absence of network failure that occurs as a result of giving an operation based on the workflow to the network as training data. The trained model outputs the trained model based on the supply step that supplies the failure type information and the network parameters acquired in the acquisition step and the input data supplied in the supply step. A program for executing a selection step of selecting one or more of the workflows based on the occurrence probability of a network failure of the type indicated by the failure type information, and an output step of outputting the workflow selected in the selection step. Is.

本発明によれば、運用工数を低減することができる情報生成装置、情報生成システム及びプログラムを提供することができる。 According to the present invention, it is possible to provide an information generation device, an information generation system and a program capable of reducing operation man-hours.

本実施形態の情報生成システムの機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the information generation system of this embodiment. 本実施形態のネットワークパラメータの一例を示す図である。It is a figure which shows an example of the network parameter of this embodiment. 本実施形態のタスク定義情報の一例を示す図である。It is a figure which shows an example of the task definition information of this embodiment. 本実施形態のワークフローの一例を示す図である。It is a figure which shows an example of the workflow of this embodiment. 本実施形態の情報生成装置の機能構成の一例を示す図である。It is a figure which shows an example of the functional structure of the information generation apparatus of this embodiment. 本実施形態の情報生成システムの学習段階における動作の一例を示す図である。It is a figure which shows an example of the operation in the learning stage of the information generation system of this embodiment. 本実施形態の情報生成システムの利活用段階における動作の一例を示す図である。It is a figure which shows an example of the operation in the utilization stage of the information generation system of this embodiment. 本実施形態の情報生成システムの再学習の動作の一例を示す図である。It is a figure which shows an example of the relearning operation of the information generation system of this embodiment.

[実施形態]
以下、図を参照して本実施形態の情報生成システム1の概要について説明する。
図1は、本実施形態の情報生成システム1の機能構成の一例を示す図である。
[Embodiment]
Hereinafter, an outline of the information generation system 1 of the present embodiment will be described with reference to the drawings.
FIG. 1 is a diagram showing an example of the functional configuration of the information generation system 1 of the present embodiment.

[情報生成システムの概要]
情報生成システム1は、種々の条件に基づいてネットワークNに関するワークフローWFを生成し、生成したワークフローWFに基づいた動作をネットワークNに対して実行する。また、情報生成システム1は、ワークフローWFに基づいた動作が実行された結果によって生じるネットワークNの状況を監視する。
なお、ここでいうワークフローWFには、「コマンドCMD」、「複数のコマンドCMDの列」、「コマンドCMDの列を定義するタスクTSK」及び「複数のタスクTSKの列」などが含まれる。また、ワークフローWFには、上述したコマンドCMD、タスクTSKなどの論理的な動作の指示だけでなく、ネットワークNを構成する配線の断線や短絡などの物理的な故障を発生させるための指示が含まれていてもよい。
[Overview of information generation system]
The information generation system 1 generates a workflow WF related to the network N based on various conditions, and executes an operation based on the generated workflow WF on the network N. In addition, the information generation system 1 monitors the status of the network N caused by the result of executing the operation based on the workflow WF.
The workflow WF referred to here includes a "command CMD", a "column of a plurality of command CMDs", a "task TSK defining a sequence of command CMDs", a "column of a plurality of task TSKs", and the like. Further, the workflow WF includes not only the above-mentioned instructions for logical operations such as command CMD and task TSK, but also instructions for causing a physical failure such as disconnection or short circuit of the wiring constituting the network N. It may be.

本実施形態の一例において、情報生成システム1は、ネットワークNにネットワーク障害Dを発生させるためのワークフローWFを生成する。ネットワーク障害Dの種類には、一例として、応答の遅延、応答の欠落(無応答)、コンポーネント間の同期失敗、通信されるデータの欠損、プロセスの競合によるリソースの枯渇などがある。また、ネットワーク障害Dの種類には、一例として、ネットワークNに接続されるノード(例えば、サーバ)に構築されるデータベースの障害、冗長系が構成されている場合の切替障害、サーバのオペレーティングシステム及びアプリケーションの障害がある。
一般に、ネットワークNにおいて、ある種類のネットワーク障害Dを発生させるためのワークフローWFは、ネットワークNの状況に応じて変化する。情報生成システム1は、発生させるネットワーク障害Dの種類と、ネットワーク障害Dを発生させる対象のネットワークNの状況とに基づいて、ワークフローWFを生成する。
In an example of this embodiment, the information generation system 1 generates a workflow WF for causing a network failure D in the network N. Examples of types of network failure D include delay in response, lack of response (no response), synchronization failure between components, loss of data to be communicated, and resource exhaustion due to process contention. The types of network failure D include, for example, a database failure built on a node (for example, a server) connected to network N, a switching failure when a redundant system is configured, a server operating system, and the like. There is an application failure.
Generally, in the network N, the workflow WF for generating a certain kind of network failure D changes according to the situation of the network N. The information generation system 1 generates a workflow WF based on the type of network failure D to be generated and the status of the target network N to generate network failure D.

[情報生成システムの機能構成]
以下、情報生成システム1の機能構成について説明する。情報生成システム1は、情報生成装置10と、入出力装置20と、タスク定義サーバ30と、ワークフロー制御部40と、ネットワーク接続装置50とを備える。
[Functional configuration of information generation system]
Hereinafter, the functional configuration of the information generation system 1 will be described. The information generation system 1 includes an information generation device 10, an input / output device 20, a task definition server 30, a workflow control unit 40, and a network connection device 50.

入出力装置20は、例えば、パーソナルコンピュータなどによって構成されており、情報生成システム1を操作するユーザに対するユーザインタフェイス装置として機能する。この入出力装置20は、情報生成装置10に接続され、ユーザの操作に基づく種々の情報を情報生成装置10に供給する。また、入出力装置20は、情報生成装置10が出力する種々の情報をユーザに対して提示(例えば、画面表示や印字)する。
この一例では、入出力装置20は、情報生成装置10に対して障害種類情報DIと、ネットワークパラメータNPとを供給する。ここで、障害種類情報DIとは、ネットワークNに発生させるネットワーク障害Dの種類を示す情報である。ネットワークパラメータNPとは、ネットワーク障害Dを発生させる対象のネットワークNの状況を示す情報である。図2を参照して、ネットワークパラメータNPの一例について説明する。
The input / output device 20 is composed of, for example, a personal computer or the like, and functions as a user interface device for a user who operates the information generation system 1. The input / output device 20 is connected to the information generation device 10 and supplies various information based on the user's operation to the information generation device 10. Further, the input / output device 20 presents (for example, screen display or printing) various information output by the information generation device 10 to the user.
In this example, the input / output device 20 supplies the failure type information DI and the network parameter NP to the information generation device 10. Here, the failure type information DI is information indicating the type of network failure D generated in the network N. The network parameter NP is information indicating the status of the target network N that causes the network failure D. An example of the network parameter NP will be described with reference to FIG.

図2は、本実施形態のネットワークパラメータNPの一例を示す図である。この一例におけるネットワークパラメータNPには、ネットワークパラメータNPを識別するインデックス(Index)と、単位(Unit)と、値のレンジ(Value range)とが互いに対応付けられている。 FIG. 2 is a diagram showing an example of the network parameter NP of the present embodiment. In the network parameter NP in this example, an index (Index) for identifying the network parameter NP, a unit (Unit), and a value range (Value range) are associated with each other.

図1に戻り、タスク定義サーバ30には、タスク定義情報TIが記憶されている。タスク定義情報TIとは、タスクTSKネットワークを操作するタスクTSKを定義する情報である。図3を参照して、タスク定義情報TIの一例について説明する。 Returning to FIG. 1, the task definition information TI is stored in the task definition server 30. The task definition information TI is information that defines a task TSK that operates the task TSK network. An example of the task definition information TI will be described with reference to FIG.

図3は、本実施形態のタスク定義情報TIの一例を示す図である。この一例におけるタスク定義情報TIには、タスクTSKを識別するタスク番号と、実行される処理の内容(タスクTSK)とが互いに対応付けられている。 FIG. 3 is a diagram showing an example of the task definition information TI of the present embodiment. In the task definition information TI in this example, the task number that identifies the task TSK and the content of the process to be executed (task TSK) are associated with each other.

図1に戻り、情報生成装置10は、入出力装置20から供給される障害種類情報DI及びネットワークパラメータNPと、タスク定義サーバ30から供給されるタスク定義情報TIとに基づいて、ワークフローWFを生成する。情報生成装置10は、生成したワークフローWFをワークフロー制御部40に対して出力する。ここで、図4を参照して、情報生成装置10が生成するワークフローWFの一例について説明する。 Returning to FIG. 1, the information generation device 10 generates a workflow WF based on the failure type information DI and network parameter NP supplied from the input / output device 20 and the task definition information TI supplied from the task definition server 30. To do. The information generation device 10 outputs the generated workflow WF to the workflow control unit 40. Here, an example of the workflow WF generated by the information generation device 10 will be described with reference to FIG.

図4は、本実施形態のワークフローWFの一例を示す図である。この一例において、ワークフローWF1は、タスク番号2、タスク番号38及びタスク番号3の順に各タスクTSKを実行すべきことを示す。ワークフローWF2は、タスク番号8及びタスク番号22の順に各タスクTSKを実行すべきことを示す。 FIG. 4 is a diagram showing an example of the workflow WF of the present embodiment. In this example, the workflow WF1 indicates that each task TSK should be executed in the order of task number 2, task number 38, and task number 3. Workflow WF2 indicates that each task TSK should be executed in the order of task number 8 and task number 22.

図1に戻り、ワークフロー制御部40は、いわゆるワークフローエンジンを備えており、情報生成装置10から出力されるワークフローWFを解釈することにより、取得したワークフローWFに基づくコマンドCMDをネットワーク接続装置50に対して出力する。すなわち、ワークフロー制御部40は、情報生成装置10が出力するワークフローWFに基づく動作をネットワークNに与える。 Returning to FIG. 1, the workflow control unit 40 includes a so-called workflow engine, and by interpreting the workflow WF output from the information generation device 10, the command CMD based on the acquired workflow WF is sent to the network connection device 50. And output. That is, the workflow control unit 40 gives the network N an operation based on the workflow WF output by the information generation device 10.

ネットワーク接続装置50は、ワークフロー制御部40が出力するコマンドCMDに基づいて、ネットワークNに対する動作を実行する。ネットワーク接続装置50は、ネットワーク監視部510を備えている。ネットワーク監視部510は、ネットワークNに生じる状況を監視し、監視した結果(監視結果RS)を情報生成装置10に対して出力する。
次に、図5を参照して、情報生成装置10の機能構成について説明する。
The network connection device 50 executes an operation for the network N based on the command CMD output by the workflow control unit 40. The network connection device 50 includes a network monitoring unit 510. The network monitoring unit 510 monitors the situation occurring in the network N and outputs the monitored result (monitoring result RS) to the information generation device 10.
Next, the functional configuration of the information generation device 10 will be described with reference to FIG.

[情報生成装置の機能構成]
図5は、本実施形態の情報生成装置10の機能構成の一例を示す図である。情報生成装置10は、取得部110と、供給部120と、学習済みモデル130と、選択部140と、出力部150とを備える。
以下の説明において、ネットワークNについて、学習対象のネットワークNと、検査対象のネットワークNとを区別する場合には、それぞれ「学習対象のネットワークNL」、「検査対象のネットワークNE」と記載する。
[Functional configuration of information generator]
FIG. 5 is a diagram showing an example of the functional configuration of the information generation device 10 of the present embodiment. The information generation device 10 includes an acquisition unit 110, a supply unit 120, a learned model 130, a selection unit 140, and an output unit 150.
In the following description, when the network N to be learned and the network N to be inspected are distinguished from each other, they are described as "network NL to be learned" and "network NE to be inspected", respectively.

取得部110は、入出力装置20から種々の情報を取得する。本実施形態の一例では、取得部110は、障害種類情報DIと、ネットワークパラメータNPとをそれぞれ取得する。障害種類情報DIとは、検査対象のネットワークNEに発生させるネットワーク障害Dの種類を示す情報である。また、ネットワークパラメータNPとは、検査対象のネットワークNEに関する情報である。
取得部110は、取得した情報を供給部120に出力する。
The acquisition unit 110 acquires various information from the input / output device 20. In an example of this embodiment, the acquisition unit 110 acquires the failure type information DI and the network parameter NP, respectively. The failure type information DI is information indicating the type of network failure D generated in the network NE to be inspected. The network parameter NP is information about the network NE to be inspected.
The acquisition unit 110 outputs the acquired information to the supply unit 120.

供給部120は、取得部110が取得する障害種類情報DIとネットワークパラメータNPとを学習済みモデル130に対して供給する。 The supply unit 120 supplies the failure type information DI and the network parameter NP acquired by the acquisition unit 110 to the trained model 130.

学習済みモデル130とは、機械学習によって得られた機械学習モデルである。本実施形態の130は、学習対象のネットワークNLに発生させるネットワーク障害Dの種類を示す情報と、学習対象のネットワークNLに関するネットワークパラメータNPとを入力データとし、ワークフローWFを出力データとし、ワークフローWFに基づく動作をネットワークNに与えた結果生じるネットワーク障害Dの発生有無を教師データTDとして、ネットワーク障害Dの種類と、ネットワークパラメータNPと、ワークフローWFとの関係が学習された機械学習モデルである。ここでいうワークフローWFとは、上述したように、ネットワークを操作するタスクTSKが定義されているタスク定義情報TIから選択される1以上のタスクTSKを組み合わせたものである。 The trained model 130 is a machine learning model obtained by machine learning. In 130 of the present embodiment, information indicating the type of network failure D generated in the network NL to be learned and the network parameter NP related to the network NL to be learned are used as input data, the workflow WF is used as output data, and the workflow WF is used. This is a machine learning model in which the relationship between the type of network failure D, the network parameter NP, and the workflow WF is learned by using the presence or absence of the network failure D that occurs as a result of giving the based operation to the network N as the teacher data TD. As described above, the workflow WF referred to here is a combination of one or more task TSKs selected from the task definition information TI in which the task TSKs that operate the network are defined.

選択部140は、供給部120から供給される入力データに基づいて学習済みモデル130が出力する1以上のワークフローWFを、障害種類情報DIが示す種類のネットワーク障害Dの発生確率Pに基づいて選択する。 The selection unit 140 selects one or more workflow WFs output by the trained model 130 based on the input data supplied from the supply unit 120 based on the occurrence probability P of the type of network failure D indicated by the failure type information DI. To do.

ここで、学習済みモデル130は、複数のワークフローWFを選択部140に対して出力するように構成されてもよい。このように構成される場合、選択部140は、学習済みモデル130が出力する複数のワークフローWFのうち、障害種類情報DIが示す種類のネットワーク障害Dの発生確率Pが相対的に高いワークフローWFを選択する。 Here, the trained model 130 may be configured to output a plurality of workflow WFs to the selection unit 140. When configured in this way, the selection unit 140 selects a workflow WF having a relatively high probability P of occurrence of a network failure D of the type indicated by the failure type information DI among a plurality of workflow WFs output by the trained model 130. select.

出力部150は、選択部140によって選択されたワークフローWFを出力する。本実施形態の出力部150は、ワークフロー制御部40に対してワークフローWFを出力する。 The output unit 150 outputs the workflow WF selected by the selection unit 140. The output unit 150 of this embodiment outputs the workflow WF to the workflow control unit 40.

[情報生成装置10の機能構成変形例]
なお、情報生成装置10は、図5に示すように、判定部160と、記憶部170とをさらに備えていてもよい。
判定部160は、障害判定ポリシPCYに基づいて、ネットワーク障害Dの発生有無を判定する。ここで、障害判定ポリシPCYとは、学習済みモデル130が出力するワークフローWFに基づく動作をネットワークNに与えた結果生じる状況とネットワーク障害Dの発生有無との関係が定義されている情報である。
記憶部170は、ワークフローWFと、当該ワークフローWFに基づく動作をネットワークNに与えた結果生じる状況を判定部160が判定した判定結果とが対応付けて記憶される。
上述のように構成された情報生成装置10において、学習済みモデル130は、障害判定ポリシPCYに基づいて判定されるネットワーク障害Dの発生有無を、教師データTDにして学習されている。つまり、学習済みモデル130は、判定部160の判定結果に基づいて再学習されている。
[Example of functional configuration modification of information generator 10]
As shown in FIG. 5, the information generation device 10 may further include a determination unit 160 and a storage unit 170.
The determination unit 160 determines whether or not a network failure D has occurred based on the failure determination policy PCY. Here, the failure determination policy PCY is information that defines the relationship between the situation that occurs as a result of giving the network N an operation based on the workflow WF output by the learned model 130 and the presence / absence of the occurrence of the network failure D.
The storage unit 170 stores the workflow WF and the determination result determined by the determination unit 160 as a result of giving the network N an operation based on the workflow WF in association with each other.
In the information generation device 10 configured as described above, the trained model 130 is trained by using the teacher data TD to determine whether or not a network failure D, which is determined based on the failure determination policy PCY, has occurred. That is, the trained model 130 is relearned based on the determination result of the determination unit 160.

より具体的には、学習済みモデル130は、記憶部170に記憶されているワークフローWFと判定結果との対応関係を教師データTDにして再学習される。 More specifically, the trained model 130 is relearned by using the correspondence relationship between the workflow WF stored in the storage unit 170 and the determination result as the teacher data TD.

[情報生成システムの動作(学習段階)]
次に、図6から図8を参照して情報生成システム1の動作の一例について説明する。
図6は、本実施形態の情報生成システム1の学習段階における動作の一例を示す図である。以下の説明において、学習を終えていない(学習前の、又は学習中の)機械学習モデルを学習中モデルMLと記載し、学習を終えた機械学習モデルを学習済みモデルMと記載する。上述した学習済みモデル130とは、学習済みモデルMの一例である。
[Operation of information generation system (learning stage)]
Next, an example of the operation of the information generation system 1 will be described with reference to FIGS. 6 to 8.
FIG. 6 is a diagram showing an example of an operation in the learning stage of the information generation system 1 of the present embodiment. In the following description, a machine learning model that has not completed learning (before or during learning) is described as a learning model ML, and a machine learning model that has completed learning is described as a trained model M. The trained model 130 described above is an example of the trained model M.

(ステップS110)情報生成装置10は、障害種類情報DI及びネットワークパラメータNPを入出力装置20から取得する。
(ステップS120)情報生成装置10は、タスク定義情報TIをタスク定義サーバ30から取得する。
(ステップS130)情報生成装置10は、ステップS110及びステップS120において取得した各情報を、学習中モデルMLに供給する。この結果、学習中モデルMLは、ワークフローWFを生成する。
(ステップS140)情報生成装置10は、ステップS130において生成されたワークフローWFをワークフロー制御部40に対して供給する。ワークフロー制御部40は、供給されたワークフローWFに基づく動作を、ネットワーク接続装置50を介してネットワークNに対して実施する。
(Step S110) The information generation device 10 acquires the failure type information DI and the network parameter NP from the input / output device 20.
(Step S120) The information generation device 10 acquires the task definition information TI from the task definition server 30.
(Step S130) The information generation device 10 supplies each of the information acquired in steps S110 and S120 to the learning model ML. As a result, the training model ML generates a workflow WF.
(Step S140) The information generation device 10 supplies the workflow WF generated in step S130 to the workflow control unit 40. The workflow control unit 40 performs an operation based on the supplied workflow WF to the network N via the network connection device 50.

(ステップS150)ネットワーク接続装置50のネットワーク監視部510は、ステップS140においてワークフローWFに基づく動作が実行されたネットワークNの状況を監視する。情報生成装置10は、ネットワーク監視部510によるネットワークNの状況の監視の結果(監視結果RS)を取得する。
(ステップS160)情報生成装置10は、ステップS150において取得した監視結果RSを評価する。具体的には、情報生成装置10は、ステップS110において取得された障害種類情報DIが示す種類のネットワーク障害Dが、ネットワークNに発生しているか否かを評価する。情報生成装置10は、ステップS110において取得された障害種類情報DIが示す種類のネットワーク障害Dが、ネットワークNに発生している場合には、ワークフローWFが正しく生成されたものと評価する。また、情報生成装置10は、ステップS110において取得された障害種類情報DIが示す種類のネットワーク障害Dが、ネットワークNに発生していない場合には、ワークフローWFが誤って生成されたものと評価する。ここで、障害種類情報DIが示す種類のネットワーク障害DがネットワークNに発生していない場合には、ワークフローWFに基づく動作が実行されたにもかかわらず、ネットワークNにネットワーク障害Dが発生していない場合と、障害種類情報DIが示す種類とは異なる種類のネットワーク障害Dが発生した場合とが含まれる。
(Step S150) The network monitoring unit 510 of the network connection device 50 monitors the status of the network N in which the operation based on the workflow WF is executed in step S140. The information generation device 10 acquires the result of monitoring the status of the network N by the network monitoring unit 510 (monitoring result RS).
(Step S160) The information generator 10 evaluates the monitoring result RS acquired in step S150. Specifically, the information generation device 10 evaluates whether or not the network failure D of the type indicated by the failure type information DI acquired in step S110 has occurred in the network N. When the network failure D of the type indicated by the failure type information DI acquired in step S110 occurs in the network N, the information generation device 10 evaluates that the workflow WF is correctly generated. Further, the information generation device 10 evaluates that the workflow WF is erroneously generated when the network failure D of the type indicated by the failure type information DI acquired in step S110 does not occur in the network N. .. Here, when the network failure D of the type indicated by the failure type information DI does not occur in the network N, the network failure D has occurred in the network N even though the operation based on the workflow WF has been executed. This includes the case where there is no network failure D and the case where a network failure D of a type different from the type indicated by the failure type information DI occurs.

(ステップS170)情報生成装置10は、ステップS160における評価結果ERを教師データとして、学習中モデルMLに反映させる。
(ステップS180)情報生成装置10は、学習中モデルMLの学習結果が安定したか否か(すなわち、機械学習モデルの出力を利活用できる状態になるまで十分に学習がなされたか否か)に基づいて、学習の継続有無を判定する。情報生成装置10は、学習中モデルMLの学習結果が安定した場合(ステップS180;YES)には、学習処理を終了する。情報生成装置10は、学習中モデルMLの学習結果がまだ安定していない場合(ステップS180;NO)には、処理をステップS110に戻して、学習処理を継続する。
(Step S170) The information generation device 10 reflects the evaluation result ER in step S160 as teacher data in the training model ML.
(Step S180) The information generator 10 is based on whether or not the learning result of the training model ML is stable (that is, whether or not the learning is sufficiently performed until the output of the machine learning model can be utilized). To determine whether or not learning is continued. When the learning result of the learning model ML is stable (step S180; YES), the information generation device 10 ends the learning process. When the learning result of the learning model ML is not yet stable (step S180; NO), the information generator 10 returns the process to step S110 and continues the learning process.

[情報生成システムの動作(利活用段階)]
図7は、本実施形態の情報生成システム1の利活用段階における動作の一例を示す図である。ここで利活用段階とは、機械学習モデルの学習が済み、機械学習モデルの出力を本来の目的に利用又は活用することができる段階をいう。
(ステップS210)情報生成装置10は、障害種類情報DI及びネットワークパラメータNPを入出力装置20から取得する。
(ステップS220)情報生成装置10は、タスク定義情報TIをタスク定義サーバ30から取得する。
[Operation of information generation system (utilization stage)]
FIG. 7 is a diagram showing an example of operation in the utilization stage of the information generation system 1 of the present embodiment. Here, the utilization stage means a stage in which the machine learning model has been learned and the output of the machine learning model can be used or utilized for the original purpose.
(Step S210) The information generation device 10 acquires the failure type information DI and the network parameter NP from the input / output device 20.
(Step S220) The information generation device 10 acquires the task definition information TI from the task definition server 30.

(ステップS230)情報生成装置10は、ステップS210及びステップS220において取得した各情報を、学習済みモデルM(すなわち、学習済みモデル130)に供給する。この結果、学習済みモデル130は、ワークフローWFを生成する。
なお、この一例では、学習済みモデル130が、タスクTSKを適宜組み合わせることによってワークフローWFを学習結果に基づいて自動生成するとして説明するが、これに限られない。例えば、タスクTSKが人手によって組み合わされたワークフローWFが予め用意(例えば、タスク定義サーバ30、又は他の記憶装置(不図示)に記憶)されていてもよい。この場合、学習済みモデル130は、予め用意(例えば、記憶)されている複数種類の登録済みワークフローWFのなかから、学習結果に応じたワークフローWFを選択してもよい。
(Step S230) The information generation device 10 supplies the information acquired in steps S210 and S220 to the trained model M (that is, the trained model 130). As a result, the trained model 130 generates a workflow WF.
In this example, the trained model 130 will be described as automatically generating the workflow WF based on the learning result by appropriately combining the task TSKs, but the present invention is not limited to this. For example, a workflow WF in which task TSKs are manually combined may be prepared in advance (for example, stored in a task definition server 30 or another storage device (not shown)). In this case, the trained model 130 may select a workflow WF according to the learning result from a plurality of types of registered workflow WFs prepared (for example, stored) in advance.

(ステップS240)情報生成装置10は、ステップS230において生成されたワークフローWFをワークフロー制御部40に対して供給する。ワークフロー制御部40は、供給されたワークフローWFに基づく動作を、ネットワーク接続装置50を介してネットワークNに対して実行する。
(ステップS250)情報生成装置10は、処理の終了判定を行う。情報生成装置10は、処理の実行を終了する場合(ステップS250;YES)には、利活用段階における処理を終了する。情報生成装置10は、処理を終了しない場合(ステップS250;NO)には、処理をステップS210に戻して、利活用段階における処理を継続する。
(Step S240) The information generation device 10 supplies the workflow WF generated in step S230 to the workflow control unit 40. The workflow control unit 40 executes an operation based on the supplied workflow WF to the network N via the network connection device 50.
(Step S250) The information generation device 10 determines the end of processing. When the information generation device 10 ends the execution of the process (step S250; YES), the information generation device 10 ends the process in the utilization stage. When the information generation device 10 does not end the process (step S250; NO), the information generation device 10 returns the process to step S210 and continues the process in the utilization stage.

[情報生成システムの動作(再学習)]
図8は、本実施形態の情報生成システム1の再学習の動作の一例を示す図である。ここで再学習とは、学習済みモデルMを再び学習させることにより、学習済みモデルMの学習結果を更新することをいう。
ここで、ステップS310からステップS340までの各ステップの処理は、上述したステップS210からステップS240までの処理と同一であるため、説明を省略する。
[Operation of information generation system (re-learning)]
FIG. 8 is a diagram showing an example of the re-learning operation of the information generation system 1 of the present embodiment. Here, re-learning means updating the learning result of the trained model M by training the trained model M again.
Here, since the processing of each step from step S310 to step S340 is the same as the processing from step S210 to step S240 described above, the description thereof will be omitted.

(ステップS350)ネットワーク接続装置50のネットワーク監視部510は、ステップS340においてワークフローWFに基づく動作が実行されたネットワークNの状況を取得する。情報生成装置10は、ネットワーク監視部510が取得したネットワークNの状況を示す情報を取得する。
(ステップS360)情報生成装置10は、処理の終了判定を行う。情報生成装置10は、処理を終了しない場合(ステップS360;NO)には、処理をステップS310に戻して、利活用段階における処理を継続する。情報生成装置10は、利活用段階における処理の実行を終了する場合(ステップS360;YES)には、処理をステップS370に進める。
(Step S350) The network monitoring unit 510 of the network connection device 50 acquires the status of the network N in which the operation based on the workflow WF is executed in step S340. The information generation device 10 acquires information indicating the status of the network N acquired by the network monitoring unit 510.
(Step S360) The information generation device 10 determines the end of processing. When the information generation device 10 does not end the process (step S360; NO), the information generation device 10 returns the process to step S310 and continues the process in the utilization stage. When the information generation device 10 ends the execution of the process in the utilization stage (step S360; YES), the information generation device 10 advances the process to step S370.

(ステップS370)情報生成装置10は、ステップS350において取得したネットワークNの状況を示す情報を評価する。具体的な動作は、上述したステップS160における動作と同一であるため説明を省略する。
(ステップS380)情報生成装置10は、情報生成装置10は、ステップS370における評価結果ERを教師データとして、学習済みモデル130に反映させて処理を終了する。
(Step S370) The information generator 10 evaluates the information indicating the status of the network N acquired in step S350. Since the specific operation is the same as the operation in step S160 described above, the description thereof will be omitted.
(Step S380) The information generation device 10 ends the process by reflecting the evaluation result ER in step S370 as teacher data in the trained model 130.

[実施形態のまとめ]
以上説明したように、本実施形態の情報生成システム1において、情報生成装置10は、学習済みモデル130に基づいてワークフローWFを自動生成する。この学習済みモデル130は、学習対象のネットワークNLに発生させるネットワーク障害Dの種類を示す情報と、学習対象のネットワークNLに関するネットワークパラメータNPとを入力データとし、ネットワークを操作するタスクTSKが定義されているタスク定義情報TIから選択される1以上のタスクTSKを組み合わせたワークフローWFを出力データとし、ワークフローWFに基づく動作をネットワークNに与えた結果生じるネットワーク障害Dの発生有無を教師データTDとして、ネットワーク障害Dの種類と、ネットワークパラメータNPと、ワークフローWFとの関係が学習されている。このため、情報生成システム1によれば、所望の種類のネットワーク障害Dを発生させるためのワークフローWFを、人手を用いずに自動生成することができる。したがって、本実施形態の情報生成システム1によれば、ネットワーク障害Dを発生させるためのワークフローWFを作るための工数(すなわち、運用工数)を低減することができる。
[Summary of Embodiment]
As described above, in the information generation system 1 of the present embodiment, the information generation device 10 automatically generates the workflow WF based on the trained model 130. In this trained model 130, information indicating the type of network failure D generated in the network NL to be trained and the network parameter NP related to the network NL to be trained are used as input data, and a task TSK for operating the network is defined. The workflow WF that combines one or more task TSKs selected from the existing task definition information TI is used as the output data, and the presence or absence of the network failure D that occurs as a result of giving the operation based on the workflow WF to the network N is used as the teacher data TD. The relationship between the type of failure D, the network parameter NP, and the workflow WF is learned. Therefore, according to the information generation system 1, the workflow WF for generating a desired type of network failure D can be automatically generated without using human hands. Therefore, according to the information generation system 1 of the present embodiment, the man-hours (that is, the operation man-hours) for creating the workflow WF for generating the network failure D can be reduced.

また、本実施形態の情報生成システム1は、学習済みモデル130が出力する複数のワークフローWFのうち、障害種類情報DIが示す種類のネットワーク障害Dの発生確率Pが相対的に高いワークフローWFを選択する選択部140を備えている。ここで、ある種類のネットワーク障害Dを発生させようとしても、ワークフローWFの選択結果によっては、所望の種類のネットワーク障害Dを発生させることができない場合がある。本実施形態の情報生成システム1は、所望の種類のネットワーク障害Dの発生確率Pが相対的に高いワークフローWFを選択部140が選択するため、所望の種類のネットワーク障害Dを発生させることができない状況の発生頻度を低減させることができる。つまり、本実施形態の情報生成システム1によれば、ワークフローWFの生成の運用工数を低減しつつ、所望の種類のネットワーク障害Dを精度よく発生させることができる。 Further, the information generation system 1 of the present embodiment selects a workflow WF having a relatively high occurrence probability P of the type of network failure D indicated by the failure type information DI from among the plurality of workflow WFs output by the trained model 130. The selection unit 140 is provided. Here, even if an attempt is made to generate a certain type of network failure D, it may not be possible to generate a desired type of network failure D depending on the selection result of the workflow WF. In the information generation system 1 of the present embodiment, since the selection unit 140 selects the workflow WF having a relatively high probability P of occurrence of the desired type of network failure D, the desired type of network failure D cannot be generated. The frequency of occurrence of situations can be reduced. That is, according to the information generation system 1 of the present embodiment, it is possible to accurately generate a desired type of network failure D while reducing the operation man-hours for generating the workflow WF.

また、本実施形態の学習済みモデル130は、学習済みモデル130が出力したワークフローWFと、ワークフローWFに基づく動作をネットワークNに与えた結果生じるネットワークNの状況との対応関係を教師データTDにして再学習される。
また、本実施形態の情報生成システム1は、この再学習を実現するために、判定部160が、学習済みモデル130が出力するワークフローWFに基づく動作をネットワークNに与えた結果生じる状況とネットワーク障害Dの発生有無との関係が定義されている障害判定ポリシPCYに基づいて、ネットワーク障害Dの発生有無を判定する。さらに、情報生成システム1は、判定部160の判定結果を上述の対応関係として記憶する記憶部170を備えている。
本実施形態の情報生成システム1は、学習済みモデル130を再学習させることにより、発生させるネットワーク障害Dの種類の精度を向上させることができる。すなわち、本実施形態の情報生成システム1は、ワークフローWFの生成の運用工数を低減しつつ、所望の種類のネットワーク障害Dを精度よく発生させることができる。
Further, in the trained model 130 of the present embodiment, the correspondence relationship between the workflow WF output by the trained model 130 and the situation of the network N resulting from giving the operation based on the workflow WF to the network N is set as the teacher data TD. Relearned.
Further, in the information generation system 1 of the present embodiment, in order to realize this re-learning, the situation and network failure that occur as a result of the determination unit 160 giving the network N an operation based on the workflow WF output by the trained model 130. The presence / absence of network failure D is determined based on the failure determination policy PCY in which the relationship with the presence / absence of D has been defined. Further, the information generation system 1 includes a storage unit 170 that stores the determination result of the determination unit 160 as the above-mentioned correspondence.
The information generation system 1 of the present embodiment can improve the accuracy of the type of network failure D to be generated by retraining the trained model 130. That is, the information generation system 1 of the present embodiment can accurately generate a desired type of network failure D while reducing the operation man-hours for generating the workflow WF.

以上、本発明の実施形態及びその変形を説明したが、これらの実施形態及びその変形は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態及びその変形は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態及びその変形は、発明の範囲や要旨に含まれると同時に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 Although the embodiments of the present invention and modifications thereof have been described above, these embodiments and modifications thereof are presented as examples, and are not intended to limit the scope of the invention. These embodiments and modifications thereof can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and at the same time, are included in the scope of the invention described in the claims and the equivalent scope thereof.

なお、上述の各装置は内部にコンピュータを有している。そして、上述した各装置の各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD−ROM、DVD−ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。 Each of the above-mentioned devices has a computer inside. The process of each process of each device described above is stored in a computer-readable recording medium in the form of a program, and the process is performed by the computer reading and executing this program. Here, the computer-readable recording medium refers to a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Further, this computer program may be distributed to a computer via a communication line, and the computer receiving the distribution may execute the program.

また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。
Further, the above program may be for realizing a part of the above-mentioned functions.
Further, it may be a so-called difference file (difference program) that can realize the above-mentioned function in combination with a program already recorded in the computer system.

1…情報生成システム、10…情報生成装置、20…入出力装置、30…タスク定義サーバ、40…ワークフロー制御部、50…ネットワーク接続装置、110…取得部、120…供給部、130…学習済みモデル、140…選択部、150…出力部、160…判定部、170…記憶部、N…ネットワーク、WF…ワークフロー、NP…ネットワークパラメータ 1 ... Information generation system, 10 ... Information generation device, 20 ... Input / output device, 30 ... Task definition server, 40 ... Workflow control unit, 50 ... Network connection device, 110 ... Acquisition unit, 120 ... Supply unit, 130 ... Learned Model, 140 ... selection unit, 150 ... output unit, 160 ... judgment unit, 170 ... storage unit, N ... network, WF ... workflow, NP ... network parameter

Claims (6)

学習対象のネットワークに発生させるネットワーク障害の種類を示す情報と、前記学習対象のネットワークに関するネットワークパラメータとを入力データとし、前記ネットワークを操作するタスクが定義されているタスク定義情報から選択される1以上の前記タスクを組み合わせたワークフローを出力データとし、前記ワークフローに基づく動作を前記ネットワークに与えた結果生じるネットワーク障害の発生有無を教師データとして、前記ネットワーク障害の種類と、前記ネットワークパラメータと、前記ワークフローとの関係が学習された学習済みモデルと、
検査対象のネットワークに発生させるネットワーク障害の種類を示す障害種類情報と、検査対象のネットワークに関するネットワークパラメータとをそれぞれ取得する取得部と、
前記取得部が取得する前記障害種類情報と前記ネットワークパラメータとを前記学習済みモデルに対して供給する供給部と、
前記供給部から供給される入力データに基づいて前記学習済みモデルが出力する1以上の前記ワークフローを、前記障害種類情報が示す種類のネットワーク障害の発生確率に基づいて選択する選択部と、
前記選択部によって選択された前記ワークフローを出力する出力部と、
を備える情報生成装置。
One or more selected from task definition information in which tasks for operating the network are defined, using information indicating the type of network failure to occur in the network to be learned and network parameters related to the network to be learned as input data. The workflow that combines the above tasks is used as output data, and the presence or absence of a network failure that occurs as a result of giving an operation based on the workflow to the network is used as training data, and the type of the network failure, the network parameters, and the workflow A trained model in which the relationship of
An acquisition unit that acquires failure type information indicating the type of network failure that occurs in the network to be inspected and network parameters related to the network to be inspected, respectively.
A supply unit that supplies the failure type information acquired by the acquisition unit and the network parameters to the trained model.
A selection unit that selects one or more workflows output by the trained model based on the input data supplied from the supply unit based on the probability of occurrence of a network failure of the type indicated by the failure type information.
An output unit that outputs the workflow selected by the selection unit, and an output unit that outputs the workflow.
An information generator comprising.
前記学習済みモデルは、
複数の前記ワークフローを前記選択部に対して出力し、
前記選択部は、
前記学習済みモデルが出力する複数の前記ワークフローのうち、前記障害種類情報が示す種類のネットワーク障害の発生確率が相対的に高い前記ワークフローを選択する
請求項1に記載の情報生成装置。
The trained model is
A plurality of the workflows are output to the selection unit, and the workflow is output to the selection unit.
The selection unit
The information generation device according to claim 1, wherein the workflow having a relatively high probability of occurrence of a network failure of the type indicated by the failure type information is selected from the plurality of workflows output by the trained model.
前記学習済みモデルが出力する前記ワークフローに基づく動作を前記ネットワークに与えた結果生じる状況とネットワーク障害の発生有無との関係が定義されている障害判定ポリシに基づいて、ネットワーク障害の発生有無を判定する判定部と、
前記ワークフローと、当該ワークフローに基づく動作を前記ネットワークに与えた結果生じる状況を前記判定部が判定した判定結果とが対応付けて記憶される記憶部と、
をさらに備え、
前記学習済みモデルは、
前記障害判定ポリシに基づいて判定されるネットワーク障害の発生有無を、前記教師データにして学習されている
請求項1または請求項2に記載の情報生成装置。
The presence or absence of a network failure is determined based on the failure determination policy that defines the relationship between the situation that occurs as a result of giving the network an operation based on the workflow output by the trained model and the presence or absence of a network failure. Judgment unit and
A storage unit that stores the workflow in association with a determination result that the determination unit determines a situation that occurs as a result of giving an operation based on the workflow to the network.
With more
The trained model is
The information generation device according to claim 1 or 2, wherein the presence or absence of a network failure determined based on the failure determination policy is learned by using the teacher data as the teacher data.
前記学習済みモデルは、
前記記憶部に記憶されている前記ワークフローと前記判定結果との対応関係を前記教師データにして再学習される
請求項3に記載の情報生成装置。
The trained model is
The information generation device according to claim 3, wherein the correspondence between the workflow and the determination result stored in the storage unit is used as the teacher data and relearned.
請求項3または請求項4に記載の前記情報生成装置と、
前記出力部が出力する前記ワークフローに基づく動作を前記ネットワークに与えるワークフロー制御部と、
前記ネットワークに生じる状況を監視し、監視した結果を前記情報生成装置の前記判定部に対して出力するネットワーク監視部と、
を備える情報生成システム。
The information generator according to claim 3 or 4.
A workflow control unit that gives an operation based on the workflow output by the output unit to the network, and
A network monitoring unit that monitors the situation occurring in the network and outputs the monitored result to the determination unit of the information generator.
Information generation system equipped with.
コンピュータに、
検査対象のネットワークに発生させるネットワーク障害の種類を示す障害種類情報と、検査対象のネットワークに関するネットワークパラメータとをそれぞれ取得する取得ステップと、
学習対象のネットワークに発生させるネットワーク障害の種類を示す情報と、前記学習対象のネットワークに関するネットワークパラメータとを入力データとし、前記ネットワークを操作するタスクが定義されているタスク定義情報から選択される1以上の前記タスクを組み合わせたワークフローを出力データとし、前記ワークフローに基づく動作を前記ネットワークに与えた結果生じるネットワーク障害の発生有無を教師データとして、前記ネットワーク障害の種類と、前記ネットワークパラメータと、前記ワークフローとの関係が学習された学習済みモデルに対して、前記取得ステップにおいて取得される前記障害種類情報と前記ネットワークパラメータとを供給する供給ステップと、
前記供給ステップにおいて供給される入力データに基づいて前記学習済みモデルが出力する1以上の前記ワークフローを、前記障害種類情報が示す種類のネットワーク障害の発生確率に基づいて選択する選択ステップと、
前記選択ステップにおいて選択された前記ワークフローを出力する出力ステップと、
を実行させるためのプログラム。
On the computer
An acquisition step for acquiring failure type information indicating the type of network failure that occurs in the network to be inspected and network parameters related to the network to be inspected, respectively.
One or more selected from task definition information in which tasks for operating the network are defined, using information indicating the type of network failure that occurs in the network to be learned and network parameters related to the network to be learned as input data. As output data, the workflow in which the above tasks are combined is used as output data, and the presence or absence of a network failure resulting from giving an operation based on the workflow to the network is used as training data, and the type of the network failure, the network parameters, and the workflow A supply step that supplies the failure type information acquired in the acquisition step and the network parameters to the trained model in which the relationship of
A selection step of selecting one or more workflows output by the trained model based on the input data supplied in the supply step based on the probability of occurrence of a network failure of the type indicated by the failure type information.
An output step that outputs the workflow selected in the selection step, and
A program to execute.
JP2018181644A 2018-09-27 2018-09-27 Information generator, information generation system and program Active JP6890109B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018181644A JP6890109B2 (en) 2018-09-27 2018-09-27 Information generator, information generation system and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018181644A JP6890109B2 (en) 2018-09-27 2018-09-27 Information generator, information generation system and program

Publications (2)

Publication Number Publication Date
JP2020052747A JP2020052747A (en) 2020-04-02
JP6890109B2 true JP6890109B2 (en) 2021-06-18

Family

ID=69997250

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018181644A Active JP6890109B2 (en) 2018-09-27 2018-09-27 Information generator, information generation system and program

Country Status (1)

Country Link
JP (1) JP6890109B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7311402B2 (en) 2019-11-19 2023-07-19 エヌ・ティ・ティ・コミュニケーションズ株式会社 Threshold output device, threshold output method and threshold output program
JP7391809B2 (en) 2020-09-25 2023-12-05 Kddi株式会社 Apparatus, method and program for determining validity of network status confirmation procedure

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3212959B2 (en) * 1998-12-28 2001-09-25 日本電気通信システム株式会社 Automatic communication protocol test system having message / sequence editing function and test method
US20070219843A1 (en) * 2006-03-14 2007-09-20 Keeler Jesse M Method and apparatus for providing work flows used to resolve alarm conditions detected in a system
CN104811331B (en) * 2014-01-29 2018-07-03 华为技术有限公司 A kind of visual network O&M method and apparatus
JP6348432B2 (en) * 2015-02-24 2018-06-27 株式会社日立製作所 Operation control training terminal and operation control training system
JP6847590B2 (en) * 2016-05-18 2021-03-24 株式会社日立システムズ Integrated monitoring operation system and method
CN108257439A (en) * 2016-12-29 2018-07-06 中国能源建设集团广东省电力设计研究院有限公司 A kind of distribution automation Training Methodology and analogue system for adapting to various modes
WO2018147362A1 (en) * 2017-02-08 2018-08-16 株式会社日立産機システム Industrial machinery monitoring device and industrial machinery monitoring method

Also Published As

Publication number Publication date
JP2020052747A (en) 2020-04-02

Similar Documents

Publication Publication Date Title
US20160378646A1 (en) Method and system for generating functional test cases for software systems
US9355005B2 (en) Detection apparatus and detection method
US10466998B2 (en) Model based upgrade campaign generation
JP4730433B2 (en) Fault diagnosis system, information update device and program
JP6890109B2 (en) Information generator, information generation system and program
US20200379871A1 (en) Object model based issue triage
JP2016115175A (en) Software test apparatus and software test program
US20190286937A1 (en) Computer-readable recording medium, method for learning, and learning device
JPWO2014061199A1 (en) System design method, system design apparatus, and system design program
US20200326952A1 (en) Modification procedure generation device, modification procedure generation method and storage medium for storing modification procedure generation program
JP2011076409A (en) Failure cause analysis system and program
US20200234120A1 (en) Generation of tensor data for learning based on a ranking relationship of labels
JP6016128B2 (en) Availability model generation support device, availability model generation support method, and program
WO2015162889A1 (en) Design support device, method, and program recording medium
CN112000539A (en) Inspection method and device
US20110153535A1 (en) Method and device for performing a maintenance function
US10964132B2 (en) Detecting fault states of an aircraft
US10649444B2 (en) Method and system for generating minimal cut-sets for highly integrated large systems
US11321120B2 (en) Data backup method, electronic device and computer program product
JP4893811B2 (en) Verification support program and verification support device
JPWO2019187974A1 (en) System update device and system update method
US20170161969A1 (en) System and method for model-based optimization of subcomponent sensor communications
CN109522098A (en) Transaction methods, device, system and storage medium in distributed data base
JP6897867B2 (en) System update device and system update method
JP2011242888A (en) System development support device, program and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200629

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210408

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210524

R150 Certificate of patent or registration of utility model

Ref document number: 6890109

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150