JP7462925B2 - 血流場推定装置、学習装置、血流場推定方法及びプログラム - Google Patents
血流場推定装置、学習装置、血流場推定方法及びプログラム Download PDFInfo
- Publication number
- JP7462925B2 JP7462925B2 JP2020033293A JP2020033293A JP7462925B2 JP 7462925 B2 JP7462925 B2 JP 7462925B2 JP 2020033293 A JP2020033293 A JP 2020033293A JP 2020033293 A JP2020033293 A JP 2020033293A JP 7462925 B2 JP7462925 B2 JP 7462925B2
- Authority
- JP
- Japan
- Prior art keywords
- organ
- blood flow
- flow field
- estimation
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000017531 blood circulation Effects 0.000 title claims description 232
- 238000000034 method Methods 0.000 title claims description 47
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 210000000056 organ Anatomy 0.000 claims description 98
- 210000004556 brain Anatomy 0.000 claims description 77
- 238000000547 structure data Methods 0.000 claims description 60
- 239000012530 fluid Substances 0.000 claims description 22
- 238000010801 machine learning Methods 0.000 claims description 20
- 238000013135 deep learning Methods 0.000 claims description 12
- 210000004204 blood vessel Anatomy 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 10
- 238000004891 communication Methods 0.000 description 36
- 210000005013 brain tissue Anatomy 0.000 description 32
- 238000010586 diagram Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 16
- 238000002474 experimental method Methods 0.000 description 14
- 238000005259 measurement Methods 0.000 description 10
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000002591 computed tomography Methods 0.000 description 5
- 238000013527 convolutional neural network Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000005094 computer simulation Methods 0.000 description 4
- 238000005401 electroluminescence Methods 0.000 description 4
- 238000002595 magnetic resonance imaging Methods 0.000 description 4
- 238000000691 measurement method Methods 0.000 description 4
- 238000004088 simulation Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 208000006011 Stroke Diseases 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 210000000702 aorta abdominal Anatomy 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 210000004351 coronary vessel Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
- A61B5/0263—Measuring blood flow using NMR
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
- G06N3/0455—Auto-encoder networks; Encoder-decoder networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/0464—Convolutional networks [CNN, ConvNet]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30016—Brain
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
- G06T2207/30104—Vascular flow; Blood flow; Perfusion
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Medical Informatics (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Surgery (AREA)
- Evolutionary Computation (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Mathematical Physics (AREA)
- Physiology (AREA)
- Data Mining & Analysis (AREA)
- Fuzzy Systems (AREA)
- Signal Processing (AREA)
- Hematology (AREA)
- Cardiology (AREA)
- Computational Linguistics (AREA)
- Psychiatry (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
図1は、実施形態の血流場推定システム100の概要を説明する説明図である。血流場推定システム100は、学習処理及び推定処理を実行する。学習処理は、脳組織3次元構造データと脳内の血流場との関係を機械学習によって学習し、学習済みモデル(以下「血流場推定モデル」という。)を生成する処理である。血流場は、血管内部における速度、ずり速度、渦度等の血流に関する流体力学的な物理量の分布である。脳組織3次元構造データは、各ピクセルが2以上のビット深度を有する複数の脳断面画像の画像データと各脳断面画像に写る像の脳内の位置を示す情報(以下「像位置情報」という。)とを含む情報である。脳断面画像は、所定の撮影方法による脳の断面の撮影結果の画像であって各ピクセルのビット深度が2以上である脳の断面の画像である。
以下、図7~図12を用いて、実験結果の一例を測定結果(すなわち事前取得血流場情報)と比較して説明する。図7~図12が示す脳内の血流場は、血流の速度ベクトルのX軸方向に平行な成分と、Y軸方向に平行な成分と、Z軸方向に平行な成分の大きさである。図7~図12は、DICOM画像である。図7~図12のDICOM画像は、輝度値の高い箇所に血流があることを示す画像である。血流がある箇所は血管がある箇所である。
血流場の推定に際して血流場推定システム100では事前の加工が必要ない理由を説明する。
なお、血流場推定モデルは、ステップS204の処理の実行時に推定部205が使用可能であれば必ずしもステップS203のタイミングで血流場推定装置2に取得される必要は無い。例えば、血流場推定モデルは、ユーザインタフェース23に推定対象者9の脳の脳組織3次元構造データが入力される前に予め記憶部22に記録されていてもよい。例えば、血流場推定モデルは、ステップS204の処理の実行中の血流場推定モデルを用いるタイミングに、通信部21を介して学習装置1が備える記憶部12から読み出すことで取得されてもよい。
Claims (10)
- 臓器の断面の画像であって各ピクセルのビット深度が2以上の画像である複数の臓器断面画像の画像データと各前記臓器断面画像に写る像の前記臓器内の位置を示す情報である像位置情報とを含む臓器組織3次元構造データと前記臓器内の血流場との関係を予め機械学習によって得た学習済みモデルを用い、推定対象の前記臓器の前記臓器組織3次元構造データに基づき前記推定対象の前記臓器内の血流場を推定する推定部と、
前記推定部の推定結果を出力する出力部と、
を備え、
前記学習済みモデルは、臓器組織3次元構造データを説明変数とし前記臓器組織3次元構造データが表す前記臓器における前記臓器内の血流場を示すデータを目的変数とする機械学習により得られたモデルである、
血流場推定装置。 - 前記臓器は、血管の流体物性が推定対象に依らず略同一である、
請求項1に記載の血流場推定装置。 - 前記臓器は脳である、
請求項2に記載の血流場推定装置。 - 前記機械学習の方法は、深層学習である、
請求項1から3のいずれか一項に記載の血流場推定装置。 - 前記深層学習の方法は、U-Netの方法である、
請求項4に記載の血流場推定装置。 - 前記推定部は、前記臓器組織3次元構造データを、部分条件を満たすデータである複数の部分データに分割した後、前記部分データごとに前記学習済みモデルを用いて前記推定対象の前記臓器内の血流場を推定し、
前記部分条件は、前記部分データは前記臓器組織3次元構造データの一部の情報であるという条件と、前記臓器組織3次元構造データが示すピクセル値のうち前記臓器内の一部の空間の各位置におけるピクセル値を示すという条件と、分割された全ての前記部分データの合計が示す情報は前記臓器組織3次元構造データが示す情報に同一という条件と、を含む、
請求項1から5のいずれか一項に記載の血流場推定装置。 - 臓器の断面の画像であって各ピクセルのビット深度が2以上の画像である複数の臓器断面画像の画像データと各前記臓器断面画像に写る像の前記臓器内の位置を示す情報である像位置情報とを含む臓器組織3次元構造データと前記臓器組織3次元構造データが表す前記臓器における前記臓器内の血流場を示すデータとを含む教師データを用いた機械学習であり、臓器組織3次元構造データを説明変数とし前記臓器組織3次元構造データが表す前記臓器における前記臓器内の血流場を示すデータを目的変数とする機械学習であり、前記臓器の断面の画像であって各ピクセルのビット深度が2以上の画像である複数の臓器断面画像の画像データと各前記臓器断面画像に写る像の前記臓器内の位置を示す情報である像位置情報とを含む臓器組織3次元構造データと前記臓器内の血流場との関係を得る機械学習を実行する学習部と、
前記学習部の学習結果を出力するモデル出力部と、
を備える学習装置。 - 臓器の断面の画像であって各ピクセルのビット深度が2以上の画像である複数の臓器断面画像の画像データと各前記臓器断面画像に写る像の前記臓器内の位置を示す情報である像位置情報とを含む臓器組織3次元構造データと前記臓器内の血流場との関係を予め機械学習によって得た学習済みモデルを用い、推定対象の前記臓器の前記臓器組織3次元構造データに基づき前記推定対象の前記臓器内の血流場を推定する推定ステップと、
前記推定ステップによる推定結果を出力する出力ステップと、
を有し、
前記学習済みモデルは、臓器組織3次元構造データを説明変数とし前記臓器組織3次元構造データが表す前記臓器における前記臓器内の血流場を示すデータを目的変数とする機械学習により得られたモデルである、
血流場推定方法。 - 請求項1から6のいずれか一項に記載の血流場推定装置としてコンピュータを機能させるためのプログラム。
- 請求項7に記載の学習装置としてコンピュータを機能させるためのプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020033293A JP7462925B2 (ja) | 2020-02-28 | 2020-02-28 | 血流場推定装置、学習装置、血流場推定方法及びプログラム |
US17/798,870 US20230046302A1 (en) | 2020-02-28 | 2021-02-22 | Blood flow field estimation apparatus, learning apparatus, blood flow field estimation method, and program |
DE112021001346.7T DE112021001346T5 (de) | 2020-02-28 | 2021-02-22 | Blutströmungsfeld-schätzvorrichtung, lernvorrichtung, blutströmungsfeld-schätzverfahren und programm |
PCT/JP2021/006654 WO2021172280A1 (ja) | 2020-02-28 | 2021-02-22 | 血流場推定装置、学習装置、血流場推定方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020033293A JP7462925B2 (ja) | 2020-02-28 | 2020-02-28 | 血流場推定装置、学習装置、血流場推定方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021135890A JP2021135890A (ja) | 2021-09-13 |
JP7462925B2 true JP7462925B2 (ja) | 2024-04-08 |
Family
ID=77491929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020033293A Active JP7462925B2 (ja) | 2020-02-28 | 2020-02-28 | 血流場推定装置、学習装置、血流場推定方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230046302A1 (ja) |
JP (1) | JP7462925B2 (ja) |
DE (1) | DE112021001346T5 (ja) |
WO (1) | WO2021172280A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017535340A (ja) | 2014-11-14 | 2017-11-30 | シーメンス ヘルスケア ゲゼルシヤフト ミツト ベシユレンクテル ハフツング | 純粋幾何学的機械学習に基づいて血流予備量比を求める方法及びシステム |
JP2019532702A (ja) | 2016-09-20 | 2019-11-14 | ハートフロー, インコーポレイテッド | 次数低減モデル及び/または機械学習を使用して血流特性を推定するためのシステム及び方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10398386B2 (en) * | 2012-09-12 | 2019-09-03 | Heartflow, Inc. | Systems and methods for estimating blood flow characteristics from vessel geometry and physiology |
-
2020
- 2020-02-28 JP JP2020033293A patent/JP7462925B2/ja active Active
-
2021
- 2021-02-22 DE DE112021001346.7T patent/DE112021001346T5/de active Pending
- 2021-02-22 US US17/798,870 patent/US20230046302A1/en active Pending
- 2021-02-22 WO PCT/JP2021/006654 patent/WO2021172280A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017535340A (ja) | 2014-11-14 | 2017-11-30 | シーメンス ヘルスケア ゲゼルシヤフト ミツト ベシユレンクテル ハフツング | 純粋幾何学的機械学習に基づいて血流予備量比を求める方法及びシステム |
JP2019532702A (ja) | 2016-09-20 | 2019-11-14 | ハートフロー, インコーポレイテッド | 次数低減モデル及び/または機械学習を使用して血流特性を推定するためのシステム及び方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021172280A1 (ja) | 2021-09-02 |
JP2021135890A (ja) | 2021-09-13 |
US20230046302A1 (en) | 2023-02-16 |
DE112021001346T5 (de) | 2022-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wang et al. | DeepIGeoS: a deep interactive geodesic framework for medical image segmentation | |
Sermesant et al. | Applications of artificial intelligence in cardiovascular imaging | |
Chartsias et al. | Adversarial image synthesis for unpaired multi-modal cardiac data | |
JP2022025095A (ja) | 機械学習を用いた医用イメージングの変換のためのシステムおよび方法 | |
JP7203978B2 (ja) | 学習装置、方法およびプログラム、関心領域抽出装置、方法およびプログラム、並びに学習済み抽出モデル | |
US20230310085A1 (en) | Systems and methods for estimation of blood flow using response surface and reduced order modeling | |
Dangi et al. | Left ventricle segmentation and quantification from cardiac cine MR images via multi-task learning | |
Oda et al. | Abdominal artery segmentation method from CT volumes using fully convolutional neural network | |
Milletari et al. | Cloud deployment of high-resolution medical image analysis with TOMAAT | |
JP2021140769A (ja) | 医用情報処理装置、医用情報処理方法及び医用情報処理プログラム | |
Stojanovski et al. | Echo from noise: synthetic ultrasound image generation using diffusion models for real image segmentation | |
US20220108540A1 (en) | Devices, systems and methods for generating and providing image information | |
US20240005498A1 (en) | Method of generating trained model, machine learning system, program, and medical image processing apparatus | |
Stojanovski et al. | Efficient Pix2Vox++ for 3D Cardiac Reconstruction from 2D echo views | |
CN107004269A (zh) | 对解剖结构的基于模型的分割 | |
JP7462925B2 (ja) | 血流場推定装置、学習装置、血流場推定方法及びプログラム | |
WO2022163402A1 (ja) | 学習済みモデルの生成方法、機械学習システム、プログラムおよび医療画像処理装置 | |
KR102556646B1 (ko) | 의료 영상 생성 방법 및 장치 | |
Dou et al. | A generative shape compositional framework: towards representative populations of virtual heart chimaeras | |
JP2022059493A (ja) | モデル生成方法、モデル生成装置、画像処理方法及び画像処理装置 | |
JP7170897B2 (ja) | 学習装置、方法およびプログラム、画像生成装置、方法およびプログラム、並びに画像生成モデル | |
Wang et al. | Enhanced three‐dimensional U‐Net with graph‐based refining for segmentation of gastrointestinal stromal tumours | |
WO2023032438A1 (ja) | 回帰推定装置および方法、プログラム並びに学習済みモデルの生成方法 | |
US20230245376A1 (en) | System and method for four-dimensional angiography | |
Azampour et al. | Self-supervised Probe Pose Regression via Optimized Ultrasound Representations for US-CT Fusion |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240220 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7462925 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |