JP2019179457A - 学習プログラム、学習方法および学習装置 - Google Patents
学習プログラム、学習方法および学習装置 Download PDFInfo
- Publication number
- JP2019179457A JP2019179457A JP2018069153A JP2018069153A JP2019179457A JP 2019179457 A JP2019179457 A JP 2019179457A JP 2018069153 A JP2018069153 A JP 2018069153A JP 2018069153 A JP2018069153 A JP 2018069153A JP 2019179457 A JP2019179457 A JP 2019179457A
- Authority
- JP
- Japan
- Prior art keywords
- data
- learning
- values
- missing
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
- H04L63/1425—Traffic logging, e.g. anomaly detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/02—Knowledge representation; Symbolic representation
- G06N5/022—Knowledge engineering; Knowledge acquisition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
- H04L63/1416—Event detection, e.g. attack signature detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
- H04L63/1441—Countermeasures against malicious traffic
- H04L63/145—Countermeasures against malicious traffic the attack involving the propagation of malware through the network, e.g. viruses, trojans or worms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
- G06N20/10—Machine learning using kernel methods, e.g. support vector machines [SVM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
- G06N20/20—Ensemble learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/044—Recurrent networks, e.g. Hopfield networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Physics & Mathematics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Virology (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
110 通信部
111 表示部
112 操作部
120 記憶部
121 統合データ記憶部
122 複製データ記憶部
123 学習済モデル記憶部
130 制御部
131 生成部
132 学習部
133 比較部
134 判別部
Claims (9)
- 複数の項目を有するレコードをデータ単位とする複数ログから生成された入力データを入力し、
前記入力データの項目の一部の値が欠落している補完対象レコードに対し、欠落した値の少なくとも一部を候補値から補完した変換データを生成し、
前記変換データを、入力テンソルデータをテンソル分解し深層学習を行う学習器により学習させる、
処理をコンピュータに実行させる学習プログラム。 - 前記生成する処理は、前記補完対象レコードの値が欠落している項目に、同じ項目の値が欠落していないレコードの複数種類の値を前記候補値とし、該候補値のうち、いずれかの値を複写して補完した前記変換データを生成する、
請求項1に記載の学習プログラム。 - 前記生成する処理は、前記補完対象レコードを含む複数のレコードを時刻順に並べ、前記候補値の数に対して不足する数だけ前記補完対象レコードを複製し、前記補完対象レコードのそれぞれに対して、前記候補値のそれぞれを複写して、前記変換データを生成する、
請求項2に記載の学習プログラム。 - 前記生成する処理は、前記補完対象レコードのそれぞれに対して、前記補完対象レコードの値が欠落していない項目のうち、前記候補値を有するレコードの対応する項目と値が一致する項目の数が多い順に、前記候補値のそれぞれを複写して、前記変換データを生成する、
請求項3に記載の学習プログラム。 - 前記生成する処理は、前記補完対象レコードのそれぞれに対して、直近の時刻から順に前記候補値のそれぞれを複写して、前記変換データを生成する、
請求項3または4に記載の学習プログラム。 - 前記学習させる処理は、生成した前記変換データのうち、前記補完対象レコードをn行複製して前記候補値を補完した前記変換データを学習した第1学習済モデルと、前記補完対象レコードをn+1行複製して前記候補値を補完した前記変換データを学習した第2学習済モデルとを生成し、
生成した前記変換データに基づく評価用データを用いて、前記第1学習済モデルおよび前記第2学習済モデルの分類精度を比較し、比較した前記分類精度が同一となるまで前記nを増加させた場合における、前記第1学習済モデルと、前記補完対象レコードに補完したn+1個の補完値を出力する、
処理を前記コンピュータに実行させる請求項3〜5のいずれか1つに記載の学習プログラム。 - 前記生成する処理は、前記補完対象レコードの値が欠落している項目に、予め設定した複数種類の設定値を前記候補値とし、該候補値のうち、いずれかの値を複写して補完した前記変換データを生成する、
請求項1に記載の学習プログラム。 - 複数の項目を有するレコードをデータ単位とする複数ログから生成された入力データを入力し、
前記入力データの項目の一部の値が欠落している補完対象レコードに対し、欠落した値の少なくとも一部を候補値から補完した変換データを生成し、
前記変換データを、入力テンソルデータをテンソル分解し深層学習を行う学習器により学習させる、
処理をコンピュータが実行する学習方法。 - 複数の項目を有するレコードをデータ単位とする複数ログから生成された入力データを入力する入力部と、
前記入力データの項目の一部の値が欠落している補完対象レコードに対し、欠落した値の少なくとも一部を候補値から補完した変換データを生成する生成部と、
前記変換データを、入力テンソルデータをテンソル分解し深層学習を行う学習器により学習させる学習部と、
を有する学習装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018069153A JP7139657B2 (ja) | 2018-03-30 | 2018-03-30 | 学習プログラム、学習方法および学習装置 |
US16/362,690 US20190303789A1 (en) | 2018-03-30 | 2019-03-25 | Computer-readable recording medium, learning method, and learning device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018069153A JP7139657B2 (ja) | 2018-03-30 | 2018-03-30 | 学習プログラム、学習方法および学習装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019179457A true JP2019179457A (ja) | 2019-10-17 |
JP7139657B2 JP7139657B2 (ja) | 2022-09-21 |
Family
ID=68054484
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018069153A Active JP7139657B2 (ja) | 2018-03-30 | 2018-03-30 | 学習プログラム、学習方法および学習装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20190303789A1 (ja) |
JP (1) | JP7139657B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021002126A (ja) * | 2019-06-20 | 2021-01-07 | 昭和電工マテリアルズ株式会社 | 設計支援装置、設計支援方法及び設計支援プログラム |
WO2022190327A1 (ja) * | 2021-03-11 | 2022-09-15 | 日本電信電話株式会社 | 学習方法、推定方法、学習装置、推定装置、及びプログラム |
JP7394023B2 (ja) | 2020-06-03 | 2023-12-07 | 日立Geニュークリア・エナジー株式会社 | 溶接作業評価装置、溶接作業評価方法およびプログラム |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114489790A (zh) * | 2020-11-13 | 2022-05-13 | 中科寒武纪科技股份有限公司 | 数据处理装置、数据处理方法及相关产品 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012027537A (ja) * | 2010-07-20 | 2012-02-09 | Kobe Steel Ltd | 出力値予測方法、該装置および該方法のプログラム |
-
2018
- 2018-03-30 JP JP2018069153A patent/JP7139657B2/ja active Active
-
2019
- 2019-03-25 US US16/362,690 patent/US20190303789A1/en not_active Abandoned
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012027537A (ja) * | 2010-07-20 | 2012-02-09 | Kobe Steel Ltd | 出力値予測方法、該装置および該方法のプログラム |
Non-Patent Citations (1)
Title |
---|
丸橋 弘治: "「人やモノのつながりを表すグラフデータから新たな知見を導く新技術Deep Tensor」", FUJITSU, vol. 第68巻, 第5号, JPN6022002570, 1 September 2017 (2017-09-01), pages 29 - 35, ISSN: 0004688957 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021002126A (ja) * | 2019-06-20 | 2021-01-07 | 昭和電工マテリアルズ株式会社 | 設計支援装置、設計支援方法及び設計支援プログラム |
JP7394023B2 (ja) | 2020-06-03 | 2023-12-07 | 日立Geニュークリア・エナジー株式会社 | 溶接作業評価装置、溶接作業評価方法およびプログラム |
WO2022190327A1 (ja) * | 2021-03-11 | 2022-09-15 | 日本電信電話株式会社 | 学習方法、推定方法、学習装置、推定装置、及びプログラム |
JP7501780B2 (ja) | 2021-03-11 | 2024-06-18 | 日本電信電話株式会社 | 学習方法、推定方法、学習装置、推定装置、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7139657B2 (ja) | 2022-09-21 |
US20190303789A1 (en) | 2019-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Pu et al. | A hybrid unsupervised clustering-based anomaly detection method | |
Asif et al. | MapReduce based intelligent model for intrusion detection using machine learning technique | |
Hassan et al. | Increasing the trustworthiness in the industrial IoT networks through a reliable cyberattack detection model | |
Alsamiri et al. | Internet of things cyber attacks detection using machine learning | |
CN110505241B (zh) | 一种网络攻击面检测方法及系统 | |
EP3651043B1 (en) | Url attack detection method and apparatus, and electronic device | |
JP2019179457A (ja) | 学習プログラム、学習方法および学習装置 | |
Timčenko et al. | Ensemble classifiers for supervised anomaly based network intrusion detection | |
Tesfahun et al. | Intrusion detection using random forests classifier with SMOTE and feature reduction | |
Miah et al. | Improving detection accuracy for imbalanced network intrusion classification using cluster-based under-sampling with random forests | |
Dua | Attribute selection and ensemble classifier based novel approach to intrusion detection system | |
Aburomman et al. | Survey of learning methods in intrusion detection systems | |
JP7115207B2 (ja) | 学習プログラム、学習方法および学習装置 | |
Stokes et al. | Aladin: Active learning of anomalies to detect intrusions | |
JP2019128603A (ja) | 学習プログラム、学習方法および学習装置 | |
Hussain | Network Intrusion Detection for Distributed Denial-of-Service (DDoS) Attacks using Machine Learning Classification Techniques | |
JP2019125319A (ja) | 学習プログラム、学習方法および学習装置 | |
JP2020119044A (ja) | 学習方法、学習プログラムおよび学習装置 | |
Daneshgadeh et al. | An empirical investigation of DDoS and Flash event detection using Shannon entropy, KOAD and SVM combined | |
Aravind et al. | Design of an intrusion detection system based on distance feature using ensemble classifier | |
Kannan et al. | A novel cloud intrusion detection system using feature selection and classification | |
Folorunso et al. | Id-somga: A self organising migrating genetic algorithm-based solution for intrusion detection | |
Sharma et al. | Towards MapReduce based classification approaches for Intrusion Detection | |
Alosefer et al. | Predicting client-side attacks via behaviour analysis using honeypot data | |
Bahl et al. | A minimal subset of features using correlation feature selection model for intrusion detection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210113 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220328 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220822 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7139657 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |