JP7349811B2 - 訓練装置、生成装置及びグラフ生成方法 - Google Patents
訓練装置、生成装置及びグラフ生成方法 Download PDFInfo
- Publication number
- JP7349811B2 JP7349811B2 JP2019082977A JP2019082977A JP7349811B2 JP 7349811 B2 JP7349811 B2 JP 7349811B2 JP 2019082977 A JP2019082977 A JP 2019082977A JP 2019082977 A JP2019082977 A JP 2019082977A JP 7349811 B2 JP7349811 B2 JP 7349811B2
- Authority
- JP
- Japan
- Prior art keywords
- graph
- data
- processors
- converter
- training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
Description
図6は、別の態様に係る推定装置2の機能を示すブロック図である。本変形例に係る推定装置2は、入力部20と、記憶部22と、第1逆変換器200と、第2逆変換器220と、生成部26と、出力部28と、を備え、さらに、ノイズ付与部30と、訓練装置1により学習された第1変換器100と、第2変換器120と、を備える。この推定装置2は、例えば、あるグラフデータに対して、当該グラフデータを入力すると、自動的に近傍に存在するグラフデータを推定して出力するものである。
2:推定装置、20:入力部、22:記憶部、24:ノイズ生成部、26:生成部、28:出力部、30:ノイズ付与部、200:第1逆変換器、220:第2逆変換器
Claims (28)
- 1又は複数のメモリと、
1又は複数のプロセッサと、を備え、
前記1又は複数のプロセッサは、
グラフのノードに関する第1特徴量及び前記グラフの構造に関する第2特徴量を、逆変換が定義できる変換により第1潜在値に変換する第1変換器、及び、前記第2特徴量を逆変換が定義できる変換により第2潜在値に変換する第2変換器を、前記第1潜在値及び前記第2潜在値に基づいて訓練する、
訓練装置。 - 前記1又は複数のプロセッサにより、
前記第1変換器及び前記第2変換器は、非線形な写像に基づく変換を行う、
請求項1に記載の訓練装置。 - 前記1又は複数のプロセッサにより、
前記第1変換器及び前記第2変換器は、NVP(Non-volume Preserving)写像に基づく写像を実行する、
請求項2に記載の訓練装置。 - 前記1又は複数のプロセッサにより、
前記第1変換器は、前記第1特徴量及び前記第2特徴量に写像を複数回適用して前記第1潜在値を算出し、
前記第2変換器は、前記第2特徴量に写像を複数回適用して前記第2潜在値を算出する、
請求項1から請求項3のいずれかに記載の訓練装置。 - 前記グラフは化合物のグラフであって、
前記第1特徴量は、前記化合物の原子を表す情報であり、
前記第2特徴量は、隣接状態を表す情報である、
請求項1から請求項4のいずれかに記載の訓練装置。 - 前記第1特徴量は、前記グラフのノードの特徴を示す第1テンソルであり、
前記第2特徴量は、前記グラフの構造を示す第2テンソルである、
請求項1から請求項5のいずれかに記載の訓練装置。 - 前記1又は複数のプロセッサは、さらに、
取得した前記グラフに関するデータを、前記第1テンソル及び前記グラフの隣接行列を含む前記第2テンソルに加工する、
請求項6に記載の訓練装置。 - 前記1又は複数のプロセッサは、
前記第1潜在値及び前記第2潜在値が所定の分布に従うように前記第1変換器及び前記第2変換器を訓練する、
請求項1から請求項7のいずれかに記載の訓練装置。 - 前記1又は複数のプロセッサは、
前記第1潜在値及び前記第2潜在値の事前分布に基づいて、前記第1変換器及び前記第2変換器を訓練する、
請求項1から請求項8のいずれかに記載の訓練装置。 - 前記第1変換器は、第1ニューラルネットワークモデルを備え、
前記1又は複数のプロセッサは、
前記第1ニューラルネットワークモデルを訓練する、
請求項1から請求項9のいずれかに記載の訓練装置。 - 前記第2変換器は、第2ニューラルネットワークモデルを備え、
前記1又は複数のプロセッサは、
前記第2ニューラルネットワークモデルを訓練する、
請求項1から請求項10のいずれかに記載の訓練装置。 - 請求項10又は11に記載の訓練装置を用いて、ニューラルネットワークモデルを生成する、
モデル生成方法。 - 1又は複数のメモリと、
1又は複数のプロセッサと、を備え、
前記1又は複数のプロセッサは、
逆変換が定義できる変換を実行可能な第1変換器を用いて、グラフのノードに関する第1特徴量及び前記グラフの構造に関する第2特徴量を第1潜在値に変換し、
逆変換が定義できる変換を実行可能な第2変換器を用いて、前記第2特徴量を第2潜在値に変換する、
生成装置。 - 前記1又は複数のプロセッサにより、
前記第1変換器及び前記第2変換器は、非線形な写像に基づく変換を行う、
請求項13に記載の生成装置。 - 1又は複数のメモリと、
1又は複数のプロセッサと、を備え、
前記1又は複数のプロセッサは、
第2逆変換器を用いて、第2データを第1グラフの構造に関する第2特徴量へと変換し、
第1逆変換器及び前記第2特徴量を用いて、第1データを前記第1グラフのノードに関する第1特徴量へと変換する、
生成装置。 - 前記第1データは、前記1又は複数のプロセッサにより、第2グラフのノードに関する第1特徴量及び前記第2グラフの構造に関する第2特徴量を、逆変換が定義できる第1変換器を用いて第1潜在値に変換したものであり、
前記第2データは、前記1又は複数のプロセッサにより、前記第2グラフの構造に関する前記第2特徴量を、逆変換が定義できる第2変換器を用いて第2潜在値に変換したものである、
請求項15に記載の生成装置。 - 前記第1グラフと前記第2グラフは同じグラフである、
請求項16に記載の生成装置。 - 前記1又は複数のプロセッサにより、
前記第1逆変換器は、前記第1変換器の逆変換を実行し、
前記第2逆変換器は、前記第2変換器の逆変換を実行する、
請求項16又は請求項17に記載の生成装置。 - 前記第1データ及び前記第2データは、乱数に基づいて生成される、
請求項15に記載の生成装置。 - 前記第1データ及び前記第2データは、所定の分布に基づいて生成される、
請求項15に記載の生成装置。 - 前記1又は複数のプロセッサは、さらに、
前記第1データ及び前記第2データを変換する前に、前記第1データ又は前記第2データの少なくとも一方にノイズを付与する、
請求項15、請求項16、又は、請求項16に従属し請求項17に従属しない請求項18のいずれかに記載の生成装置。 - 前記1又は複数のプロセッサは、さらに、
前記第1逆変換器を用いて変換された前記第1特徴量及び前記第2逆変換器を用いて変換された前記第2特徴量に基づいて、前記第1グラフのデータを生成する、
請求項15から請求項21のいずれかに記載の生成装置。 - 前記1又は複数のプロセッサは、
ワンショット方式で前記第1グラフのデータを生成する、
請求項22に記載の生成装置。 - 前記第1逆変換器は、第1ニューラルネットワークモデルを備える、
請求項15から請求項23のいずれかに記載の生成装置。 - 前記第2逆変換器は、第2ニューラルネットワークモデルを備える、
請求項15から請求項24のいずれかに記載の生成装置。 - 前記第1グラフのノードに関する前記第1特徴量は、前記第1グラフのノードの特徴量を示す第1テンソルであり、
前記第1グラフの構造に関する前記第2特徴量は、前記第1グラフの構造を示す第2テンソルである、
請求項15から請求項25のいずれかに記載の生成装置。 - 前記第1グラフは化合物のグラフであって、
前記第1グラフのノードに関する前記第1特徴量は、前記化合物の原子を表す情報であり、
前記第1グラフの構造に関する前記第2特徴量は、隣接状態を表す情報である、
請求項15から請求項26のいずれかに記載の生成装置。 - 請求項15から請求項27のいずれかに記載の生成装置を用いて、前記第1グラフを生成する、
グラフ生成方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019082977A JP7349811B2 (ja) | 2019-04-24 | 2019-04-24 | 訓練装置、生成装置及びグラフ生成方法 |
PCT/JP2020/003052 WO2020217620A1 (ja) | 2019-04-24 | 2020-01-28 | 訓練装置、推定装置、訓練方法、推定方法及びプログラム |
US17/508,592 US20220044121A1 (en) | 2019-04-24 | 2021-10-22 | Training device, inferring device, training method, inferring method, and non-transitory computer readable medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019082977A JP7349811B2 (ja) | 2019-04-24 | 2019-04-24 | 訓練装置、生成装置及びグラフ生成方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020181312A JP2020181312A (ja) | 2020-11-05 |
JP2020181312A5 JP2020181312A5 (ja) | 2022-04-12 |
JP7349811B2 true JP7349811B2 (ja) | 2023-09-25 |
Family
ID=72942095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019082977A Active JP7349811B2 (ja) | 2019-04-24 | 2019-04-24 | 訓練装置、生成装置及びグラフ生成方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220044121A1 (ja) |
JP (1) | JP7349811B2 (ja) |
WO (1) | WO2020217620A1 (ja) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019048965A1 (ja) | 2017-09-06 | 2019-03-14 | 株式会社半導体エネルギー研究所 | 物性予測方法および物性予測システム |
-
2019
- 2019-04-24 JP JP2019082977A patent/JP7349811B2/ja active Active
-
2020
- 2020-01-28 WO PCT/JP2020/003052 patent/WO2020217620A1/ja active Application Filing
-
2021
- 2021-10-22 US US17/508,592 patent/US20220044121A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019048965A1 (ja) | 2017-09-06 | 2019-03-14 | 株式会社半導体エネルギー研究所 | 物性予測方法および物性予測システム |
Non-Patent Citations (2)
Title |
---|
HAMON, Ronan, et al.,"From graphs to signals and back: Identification of network structures using spectral analysis",arXiv:1502.04697v3,version v3,[online], arXiv (Cornell University),2016年06月10日,Pages 1-19,[retrieved on 2020.04.06], Retrieved from the Internet: <URL: https://arxiv.org/abs/1502.04697v3> |
JEPSEN, Tobias Skovgaard,"How to do Deep Learning on Graphs with Graph Convolutional Networks, Part 1: A High-Level Introduct,[online],2018年09月18日,[retrieved on 2020.04.06], Retrieved from the Internet: <URL: https://towardsdatascience.com/how-to-deep-learning-on-graph-convolutional-networks-7d2250723780> |
Also Published As
Publication number | Publication date |
---|---|
WO2020217620A1 (ja) | 2020-10-29 |
JP2020181312A (ja) | 2020-11-05 |
US20220044121A1 (en) | 2022-02-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7423828B2 (ja) | アテンションベースのシーケンス変換ニューラルネットワーク | |
US20140214374A1 (en) | Interpolation techniques used for time alignment of multiple simulation models | |
US20230196202A1 (en) | System and method for automatic building of learning machines using learning machines | |
US20220207370A1 (en) | Inferring device, training device, inferring method, and training method | |
Qiu et al. | The vertex solution theorem and its coupled framework for static analysis of structures with interval parameters | |
Ben Khaled-El Feki et al. | CHOPtrey: contextual online polynomial extrapolation for enhanced multi-core co-simulation of complex systems | |
Mazzia et al. | Solving boundary value problems in the open source software R: Package bvpSolve | |
US20200265321A1 (en) | Embedding constrained and unconstrained optimization programs as neural network layers | |
JP2017016384A (ja) | 混合係数パラメータ学習装置、混合生起確率算出装置、及び、これらのプログラム | |
WO2021025075A1 (ja) | 訓練装置、推定装置、訓練方法、推定方法、プログラム及びコンピュータ読み取り可能な非一時的記憶媒体 | |
JP2020064535A (ja) | 最適化装置及び最適化装置の制御方法 | |
Verma et al. | Solution for generalized fuzzy fractional Kortewege-de Varies equation using a robust fuzzy double parametric approach | |
Hoefkens et al. | Computing validated solutions of implicit differential equations | |
JP7105297B2 (ja) | ニューラルネットワークモデルの処理方法及び装置 | |
JP7349811B2 (ja) | 訓練装置、生成装置及びグラフ生成方法 | |
Gotovac et al. | Maximum entropy algorithm with inexact upper entropy bound based on Fup basis functions with compact support | |
CN114692529B (zh) | 一种cfd高维响应的不确定度量化方法、装置、计算机设备 | |
Chaudhry et al. | A posteriori analysis of an iterative multi-discretization method for reaction–diffusion systems | |
Zhu et al. | An explicit-implicit predictor-corrector domain decomposition method for time dependent multi-dimensional convection diffusion equations | |
CN114897146A (zh) | 模型生成方法、装置和电子设备 | |
JP7425755B2 (ja) | 変換方法、訓練装置及び推論装置 | |
CN111382557B (zh) | 非定长输入数据的批量处理方法、装置、终端及存储介质 | |
JP2021002322A (ja) | イジングマシンデータ入力機器、及びイジングマシンにデータを入力する方法 | |
CN114444667A (zh) | 训练神经网络的方法及装置、电子设备 | |
CN116583854A (zh) | Rpu交叉开关阵列的最坏情况噪声和界限管理 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220331 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230516 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230619 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230815 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230912 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7349811 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |