JP7181230B2 - 臨床判断支援のための生医療画像データの機械学習 - Google Patents

臨床判断支援のための生医療画像データの機械学習 Download PDF

Info

Publication number
JP7181230B2
JP7181230B2 JP2019565544A JP2019565544A JP7181230B2 JP 7181230 B2 JP7181230 B2 JP 7181230B2 JP 2019565544 A JP2019565544 A JP 2019565544A JP 2019565544 A JP2019565544 A JP 2019565544A JP 7181230 B2 JP7181230 B2 JP 7181230B2
Authority
JP
Japan
Prior art keywords
diagnostic
medical
medical imaging
raw
medical image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019565544A
Other languages
English (en)
Other versions
JP2020522068A5 (ja
JP2020522068A (ja
Inventor
クリスティーン メンキング スウィッシャー
ホーマー ピエン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2020522068A publication Critical patent/JP2020522068A/ja
Publication of JP2020522068A5 publication Critical patent/JP2020522068A5/ja
Application granted granted Critical
Publication of JP7181230B2 publication Critical patent/JP7181230B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)

Description

関連する出願との相互参照
[0001] 本出願は2017年5月31日に出願された米国予備特許出願第62/512,774号の優先権を主張するもので、該出願の全開示内容は参照により事実上本明細書に組み込まれるものとする。
[0002] 本開示に記載される種々の実施態様は、特に生医療撮像データのドメイン内で解剖学的領域又は解剖学的臓器の医療画像の診断評価を行うための人工知能を組み込んだシステム、コントローラ及び方法に関する。
[0003] 医療撮像データは、しばしば、取得され、次いで人の解釈のために操作される。例えば、解剖学的領域又は解剖学的臓器のコンピュータトモグラフィ(CT)医療撮像は、本開示の当業技術において既知のように解剖学的領域/臓器の臨床的診断の間に人の解釈のための解剖学的領域/臓器の医療画像を再構成するように処理される投影サイノグラム(又は複数のサイノグラム)の形態の医療撮像データの取得を伴う。更なる例によれば、解剖学的領域/臓器の磁気共鳴撮像(MRI)は、本開示の当業技術において既知のように解剖学的領域/臓器の臨床的診断の間に人の解釈のための解剖学的領域/臓器の医療画像を再構成するように処理されるk空間の医療撮像データの取得を伴う。
[0004] 解剖学的領域/臓器の臨床的診断の間における生医療撮像データの人の解釈のための医療画像への再構成は、信頼性のある臨床判断を補助することが分かっているが、斯かる画像再構成処理は相当の計算時間を必要とし得、この結果、医師が即座の手当を要する解剖学的領域/臓器への栄養供給/傷害/外傷/損傷に適時に対応することを不可能にさせ得る。
[0005] 例えば、図1Aは、磁気共鳴撮像(MRI)マシンにより発生される生医療画像データの画像再構成を4テスラ8系列グラフィック処理ユニット(GPU)が実行するための97秒の期間20a、及び2.66GHzのクワッドコアのIntel Core 2 Extreme(CPU)が該生MRIデータの画像再構成を実行するための23.2分の期間20bを示している。更なる例により、図1Bはコンピュータトモグラフィ(CT)マシンにより発生される生医療画像データの画像再構成を4テスラ10系列グラフィック処理ユニット(GPU)が実行するための59.9秒の期間21a、及び256のAMDデュアルコアOpteron 250中央処理ユニット(CPU)が該生CTデータの画像再構成を実行するための67.4秒の期間21bを示している。図1A及び図1Bに示されるような計算時間の結果、特に脳に対する傷害/外傷/損傷等の即座の手当を要する解剖学的領域/臓器の傷害/外傷/損傷に対し医師が適時に対応することが不可能になり得る。
[0006] 更に、画像再構成処理は再構成された医療画像にアーチファクトを生じさせ得、結果として、余り信頼性のない臨床判断(例えば、CT撮像における金属からの縞、打ち切りアーチファクト(ギブズリンギング)、ジッパー干渉(rf干渉)及びゴースト)となる。
[0007] 例えば、図2は、16KHzにおける膝の典型的な医療画像22及び32KHzにおける同じ膝の理想的医療画像23を示す。医療画像22は、本開示の当業者により分かるように、医療画像23には存在しない化学シフトアーチファクトを含んでいる。
[0008] 更に、画像再構成処理は、医療画像の全情報範囲よりも小さな範囲の医療画像の表示を必要とし得る。例えば、超音波医療撮像は深さに伴う信号振幅減衰を含み、ディスプレイ/モニタの現状技術は超音波医療画像の全ダイナミックレンジより少ないものしか提供しない。
[0009] 例えば、図3は、超音波医療画像の全ダイナミックレンジより小さな範囲の超音波画像の表示24を示している。
[0010] 上述した計算時間、アーチファクト及び表示ダイナミックレンジ限界に対処するために画像再構成のためのアルゴリズムの改善が追求されている。一般的に、画像再構成アルゴリズムは、直接画像再構成アルゴリズム又は反復画像再構成アルゴリズムの何れかとして分類することができる。更に詳細には、直接画像再構成は今日の医療CTスキャナの殆ど全てにおいて使用されている。このようなアルゴリズムは計算するのは速いが、アーチファクト及びノイズの影響を受け易い。逆に、反復再構成アルゴリズムは一層高い精度を提供するが、高計算コストが犠牲となる。
[0011] 医療診断に対する画像アーチファクトの誤った影響を少ない診断計算時間内で最少化するための特別仕立ての画像再構成アルゴリズムの開発を追求するというより、本開示に記載される発明の発明者は、本開示の当業者の考えとは反直感的に、元々の取得状態の生の医療撮像データに対し人工知能に基づいて医療診断を実行することが、例えば、医療診断に対する画像アーチファクトの誤った影響の除去及び診断計算時間の最小化等の数々の利点を提供することを見出した。更に詳細には、解剖学的領域又は解剖学的臓器の医療画像の評価が当該解剖学的領域/臓器の健康状態を適切に診断するための唯一の手段であることは当業者により歴史的に確立された原則である。本開示の発明は、この歴史的に確立された原則に、医療画像が再構成される生の医療撮像データの評価を行うことが解剖学的領域/臓器の健康状態を特に時間の厳しい緊急時に適切に診断するための有効な代替手段であるとすることにより対抗する。
[0012] 本開示の発明の一実施態様は、生医療撮像データを発生する医療撮像マシンと、前記医療撮像マシンにより発生された前記生医療撮像データの医療診断のための生診断マシンとを採用した医療撮像診断システムである。前記生診断マシンは医療撮像診断コントローラを含み、該コントローラは、(1)前記生医療撮像データを、該生医療撮像データから1以上の次元削減された特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力し、(2)前記次元削減特徴ベクトルを、前記生医療撮像データの診断評価を行うように訓練される生診断人工知能エンジン(例えば、人工ニューラルネットワーク及び/又は教師有り学習マシン)に入力し、及び(3)前記生診断撮像データの前記診断評価の伝達(例えば、当該生診断撮像データの診断評価の表示、印刷、Eメール、テキスティング等)を制御するように構成される。
[0013] 前記医療撮像診断コントローラは、更に、(4)前記生医療撮像データを、再構成された医療画像を発生するための医療画像再構成エンジンに入力し、及び(5)前記再構成医療画像を伝達する(例えば、該再構成医療画像の表示、印刷、Eメール、テキスティング等)よう構成することができる。
[0014] 前記医療撮像診断コントローラは、更に、(6)再構成医療画像を、該再構成医療画像から1以上の医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、(7)前記医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力し、及び(8)前記再構成医療画像を伝達する(例えば、該再構成医療画像の医療画像の表示、印刷、Eメール、テキスティング等)よう構成することができる。
[0015] 本開示の発明の第2実施態様は、医療撮像マシンにより発生される生医療撮像データを処理するために少なくとも1つのプロセッサにより実行する命令によりエンコードされた非一時的マシン読取可能な記憶媒体である。該非一時的マシン読取可能な記憶媒体は、(1)前記生医療撮像データを、該生医療撮像データから1以上の次元削減特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力し、及び(2)前記次元削減特徴ベクトルを、前記生医療撮像データの診断評価を行うように訓練される生診断人工知能エンジン(例えば、人工ニューラルネットワーク及び/又は教師有り学習マシン)に入力するための命令を有する。
[0016] 当該非一時的マシン読取可能な記憶媒体は、(3)前記生医療撮像データを、再構成された医療画像を発生するための医療画像再構成エンジンに入力するための命令を更に有することができる。
[0017] 当該非一時的マシン読取可能な記憶媒体は、(4)再構成医療画像を、該再構成医療画像から1以上の医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、及び(5)前記医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力する、ための命令を更に有することができる。
[0018] 本開示の発明の第3実施態様は、医療撮像マシンにより発生される生医療撮像データの医療撮像診断コントローラによる医療診断のための医療撮像診断方法である。該医療撮像診断方法は、(1)前記医療撮像診断コントローラにより、前記生医療撮像データを、該生医療撮像データから1以上の次元削減された特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力するステップ、及び(2)前記医療撮像診断コントローラにより、前記次元削減特徴ベクトルを、前記生医療撮像データの診断評価を行うための生診断人工知能エンジン(例えば、人工ニューラルネットワーク及び/又は教師有り学習マシン)に入力するステップを含む。
[0019] 該医療撮像診断方法は、(3)前記医療撮像診断コントローラにより、前記生医療撮像データを、再構成された医療画像を発生するための医療画像再構成エンジンに入力するステップを更に含むことができる。
[0020] 前記非一時的マシン読取可能な記憶媒体は、(4)前記医療撮像診断コントローラにより、再構成医療画像を、該再構成医療画像から1以上の医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、及び(5)前記医療撮像診断コントローラにより、前記医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力する、ための命令を更に有することができる。
[0021] 本開示の発明を説明し及び請求項に記載する目的で、以下に列挙する如くとする:
[0022] (1)これらに限定されるものではないが、“人工知能”、“特徴ベクトル(feature vector)”、“人工ニューラルネットワーク”、“教師あり学習マシン”、“次元削減”、“画像再構成”、“解剖学的領域”及び“解剖学的臓器”を含む本開示の当業技術の用語は、本開示の当業技術において既知であり且つ本明細書において例示的に説明されるように広く解釈されるべきである;
[0023] (2)“医療撮像マシン”なる用語は、解剖学的領域又は解剖学的臓器の診断撮像を実行するための、本開示の当業技術において理解され且つ以下に考えられるような如何なる撮像方式も広く含むものである。医療撮像マシンの例は、これらに限定されるものではないが、X線マシン、超音波マシン、コンピュータトモグラフィ(CT)マシン、磁気共鳴撮像(MRI)マシン、陽電子放出トモグラフィ(PET)マシン、単一光子放射コンピュータトモグラフィ(SPECT)マシン及び拡散光トモグラフィ(DOT)マシンを含む;
[0024] (3)“生医療撮像データ”なる用語は、本開示の当業技術において理解され且つ以下に考えられるような医療撮像マシンにより取得される電子データを広く含む。生医療撮像データの例は、これらに限定されるものではないが、k空間のMRI、CTサイノグラム、生超音波データ及びPETリストモードファイルを含む;
[0025] (4)“生診断マシン”なる用語は、本開示に例示的に記載されるような生医療撮像データの人工知能ベースの医療診断のために本開示の発明原理に従い構成された如何なるマシンも広く包含する。
[0026] (5)“コントローラ”なる用語は、本開示の当業技術において理解され且つ以下に想定されるような、本開示において後述されるような本開示の種々の発明原理のアプリケーションを制御するための特定用途向け主基板又は特定用途向け集積回路の全ての構造的構成を広く含むものである。該コントローラの構造的構成は、これらに限定されるものではないが、プロセッサ(又は複数のプロセッサ)、非一時的マシン読取可能な記憶媒体(又は複数の記憶媒体)、オペレーティングシステム、アプリケーションモジュール(又は複数のアプリケーションモジュール)、周辺装置コントローラ(又は複数のコントローラ)、スロット(又は複数のスロット)及びポート(又は複数のポート)を広く含む;
[0027] (6)“モジュール”なる用語は、特定のアプリケーションを実行するためのコントローラ内に組み込まれ又はコントローラによりアクセスされる電子回路/ハードウェア及び/又は実行可能なプログラム(例えば、非一時的なコンピュータ読取可能な媒体(又は複数の媒体)に記憶された実効可能なソフトウェア及び/又はファームウエア)を広く含む;
[0028] (7)本明細書における“モジュール”なる用語に対する如何なる記述的ラベルも、ここに記載及び請求項に記載されるモジュール間の区別を、当該“モジュール”なる用語に対する如何なる付加的な限定も指定又は意味することなく容易にするものである;
[0029] (8)“次元削減プリプロセッサ”なる用語は、本開示の当業技術において理解され且つ以下に想定されるような、生医療撮像データの特徴選択(例えば、フィルタ処理(filtering)、ラッピング(wrapping)又は組み込み評価(embedded evaluation))又は特徴抽出(例えば、主成分分析又は線形判別分析)の次元削減技術を実施するために本開示の発明原理に従い構成された如何なるタイプのデータプリプロセッサも広く含むものである;
[0030] (9)“次元削減特徴ベクトル”なる用語は、生医療撮像データの分類/予測特徴を表す、次元削減プリプロセッサにより生医療撮像データから選択又は抽出される特徴ベクトルを広く包含する;
[0031] (10)“生診断人工知能エンジン”なる用語は、本開示の当業技術において理解され且つ以下に想定されるような、本開示において例示的に説明される生医療撮像データの医療診断の識別、分類又は予測を実施するために本開示の発明原理に従い構成される如何なるタイプの人工知能エンジンも広く包含する。生診断人工知能エンジンの例は、これらに限定されるものではないが、人工ニューラルネットワーク(例えば、畳み込みニューラルネットワーク、再帰型ニューラルネットワーク等)及び教師あり学習マシン(例えば、サポートベクターマシン)を含む;
[0032] (11)“医療画像再構成エンジン”なる用語は、本開示の当業技術において理解され且つ以下に想定されるような、生医療撮像データの画像再構成を実施し、これにより再構成された医療画像を発生するための如何なるタイプの計算エンジンも広く包む;
[0033] (12)“画像再構成プリプロセッサ”なる用語は、本開示の当業技術において理解され且つ以下に想定されるような、再構成された医療画像の特徴抽出技術を実施するために本開示の発明原理に従い構成された如何なるタイプのデータプリプロセッサも広く含むものである;
[0034] (13)“医療画像特徴ベクトル”なる用語は、再構成された医療画像の分類/予測特徴を表す、画像再構成プリプロセッサにより再構成医療画像から抽出される特徴ベクトルを広く包含する;
[0035] (14)“データ”は、本開示において後述される本開示の種々の発明原理を適用する助けとなる情報及び/又は命令を伝達するための、本開示の当業技術において理解され且つ本開示において例示的に説明されるような、全ての形態の検出可能な物理量又は衝撃(例えば、電圧、電流、磁場強度、インピーダンス、カラー等)で具現化され得る。本開示の発明により含まれるデータ通信は、これらに限定されるものではないが、何らかの形式の有線又は無線データリンクを介するデータ送信/受信及びコンピュータ使用可能な/コンピュータ読取可能な記憶媒体へアップロードされたデータの読み取りを含む、本開示の当業技術において既知の如何なる通信方法も含み得る。
[0036] 本開示の発明の上記実施態様及び他の実施態様並びに本開示の種々のフィーチャ及び利点は、添付図面に関連して精読される本開示の発明の種々の実施態様の後述する詳細な説明から更に明らかになるであろう。該詳細な説明及び図面は、限定するというより本開示の発明を解説するだけのものであり、本開示の発明の範囲は添付請求項及びその均等物により定義されるものである。
[0037] 種々の例示的実施態様をより良く理解するために、添付図面を参照する。
[0038] 図1Aは、本開示の当業技術において既知の先進MRIに関する例示的再構成時間を示す。 [0039] 図1Bは、本開示の当業技術において既知のCT撮像に関する例示的再構成時間を示す。 [0040] 図2は、本開示の当業技術において既知の膝の例示的撮像を示す。 [0041] 図3は、本開示の当業技術において既知の例示的超音波撮像を示す。 [0042] 図4A~図4Cは、本開示の発明原理による医療撮像診断システムの例示的実施態様を示す。 [0043] 図5A~図5Cは、本開示の発明原理による生診断マシンの例示的実施態様を示す。 [0044] 図6は、本開示の発明原理による医療撮像診断コントローラの例示的実施態様を示す。 [0045] 図7は、本開示の発明原理による医療撮像診断実動構成の例示的実施態様を示す。 [0046] 図8Aは、本開示の発明原理による生診断ドメインモジュールの例示的訓練フェーズ及び例示的診断フェーズを示す。 [0047] 図8Bは、本開示の発明原理による画像診断ドメインモジュールの例示的訓練フェーズ及び例示的診断フェーズを示す。 [0048] 図9は、本開示の発明原理による生診断ドメインモジュールの例示的実施態様を示す。 [0049] 図10は、本開示の発明原理によるCT撮像における例示的投影データを示す。 [0050] 図11は、本開示の発明原理による例示的サポートベクトルマシン(SVM)を示す。 [0051] 図12は、図11のSVMの例示的性能を示す。 [0052] 図13は、図11のSVMの例示的出血検出性能を示す。 [0053] 図14は、本開示の発明原理によるMRIにおける例示的k空間を示す。 [0054] 図15は、本開示の発明原理によるk空間の例示的対称性を示す。 [0055] 図16は、本開示の発明原理による例示的k空間画像を示す。 [0056] 図17は、本開示の発明原理による例示的ディープ再帰型アーキテクチャを示す。 [0057] 図18は、本開示の発明原理による例示的長短期記憶ネットワークを示す。
[0058] ここに示される記載及び図面は、種々の原理を解説するものである。当業者であれば、本明細書に明示的に記載されていなくても、これら原理を具現化すると共に本開示の範囲内に含まれる種々の構成を案出することができることが理解されよう。本明細書で使用される場合、“又は”なる用語は、特に示され(例えば、“又はそれ以外で”又は“又は代わりに”)ない限り、非排他的論理和(即ち、及び/又は)を示す。更に、本開示に記載される種々の実施態様は、必ずしも互いに排他的ではなく、本開示で説明される発明原理を組み込んだ追加の実施態様を生成するように組み合わせることができる。
[0059] 本開示において更に詳細に説明されるように、本開示の発明は、生医療撮像データの次元削減を前提とし、これにより、該生医療撮像データの特定の医療診断の人工知能エンジンによる識別、分類又は予測を容易にする。更に詳細には、上記次元削減は、生医療撮像データにおける人工知能エンジンが一連の医療診断における当該生医療撮像データに対応する解剖学的領域又は解剖学的臓器の特定の医療診断を健康状態(例えば、当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の不存在の識別、分類又は予測)と不健康状態(例えば、当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の存在の識別、分類又は予測)との間で識別、分類又は予測することを可能にする種々の存続可能な変数を提供する。
[0060] 本開示の発明の理解を容易にするために、図4A~図4Cの以下の記載は、本開示の医療撮像診断システムの種々の実施態様を教示する。図4A~図4Cの記載から、本開示の当業者は、本開示の医療撮像診断システムの多数且つ種々の更なる実施態様を形成及び使用するために本開示をどの様に適用するかを理解するであろう。
[0061] 図4Aは、本開示の当業技術において既知の医療撮像マシン30及び本開示の発明原理による生診断マシン40aを利用した本開示の医療撮像診断システムの一実施態様を示す。
[0062] 図4Aを参照すると、実用時において、医療撮像マシン30は、特に、X線(X-RAY)マシン、超音波(US)マシン、MRIマシン、CTマシン、PETマシン、SPECTマシン及びDOTマシンの場合、本開示の当業技術において既知のように解剖学的領域又は解剖学的臓器の生撮像データ(RID)31を取得する。
[0063] 依然として図4Aを参照すると、生診断マシン40aは、本開示において更に説明されるように、生医療撮像データ31を処理して該生医療撮像データ31の診断評価を実行する。実際には、生診断マシン40aは、1以上のタイプの医療撮像マシン30からの生医療撮像データ31を入力及び処理し、及び/又は1以上の解剖学的領域及び/又は解剖学的臓器に対応する生医療撮像データ31を処理するために訓練される構造アーキテクチャを有するであろう。
[0064] また、実際には、当該診断評価は生医療撮像データ31の特定の医療診断の識別、分類又は予測を伝達する如何なる形態とすることもできる。図示された一実施態様において、生診断マシン40aは生リスク評価スコア(RRAS)41を出力し、これによれば、該スコア41のレベルは生医療撮像データ31の特定の医療診断の識別、分類又は予測を示す。例えば、0~1の目盛上において、0レベルは当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の不存在の識別、分類又は予測を示し、1レベルは該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の存在の分類又は予測を示す。更に、0と1との間の中間レベルを、当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の存在の予測の不確実/確実度を示すために用いることもできる。生診断マシン40aは、更に、生診断撮像データ31の特定の医療診断の識別、分類又は予測の生リスク評価記述(RRAD)42も出力する。
[0065] 図4Bは、本開示の当業技術において既知の医療撮像マシン30及び本開示の発明原理による生診断マシン40bを利用した本開示の医療撮像診断システムの第2実施態様を示す。
[0066] 図4Bを参照すると、実用時において、医療撮像マシン30は、本開示の当業技術において既知であり且つ図4Aに関して前述したように解剖学的領域又は解剖学的臓器の生撮像データ31を取得する。
[0067] 依然として図4Bを参照すると、生診断マシン40bは、本開示において更に説明されるように、生医療撮像データ31を処理して、該生医療撮像データ31の診断評価を実行する(生診断マシン40a(図4A)に関して前述したように)。これに加えて、生診断マシン40bは、当業技術において既知の画像再構成技術を実行して、医療撮像マシン30から取得された特定のタイプの生医療撮像データ31に対応する再構成医療画像(RMI)43を発生する(例えば、X線マシンにより取得された生医療撮像データ31からのX線画像、超音波マシンにより取得された生医療撮像データ31からの超音波画像等)。
[0068] 図4Cは、本開示の当業技術において既知の医療撮像マシン30及び本開示の発明原理による生診断マシン40cを利用した本開示の医療撮像診断システムの第3実施態様を示す。
[0069] 図4Cを参照すると、実用時において、医療撮像マシン30は、本開示の当業技術において既知であり且つ図4Aに関して前述したように解剖学的領域又は解剖学的臓器の生撮像データ31を取得する。依然として図4Cを参照すると、生診断マシン40cは、本開示において更に説明されるように、生医療撮像データ31を処理して、本開示において更に説明されるように、該生医療撮像データ31の診断評価を実行すると共に医療画像を再構成する(生診断マシン40b(図4B)に関して前述したように)。
[0070] これに加えて、生診断マシン40cは生医療撮像データ31を処理して、本開示において更に説明されるように、再構成された医療画像43の診断評価を行う。実際には、当該診断評価は上記再構成医療画像43の特定の医療診断の識別、分類又は予測を伝達する如何なる形態とすることもできる。図示された一実施態様において、生診断マシン40cは画像リスク評価スコア(IRAS)44を出力し、これによれば、該スコア44のレベルは再構成医療画像43の特定の医療診断の識別、分類又は予測を示す。この場合においても、例えば、0~1の目盛上において、0レベルは当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の不存在の識別、分類又は予測を示し、1レベルは該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の存在の分類又は予測を示す。更に、0と1との間の中間レベルを、当該解剖学的領域/臓器における/に対する栄養供給/傷害/外傷/損傷の存在の予測の不確実/確実度を示すために用いることもできる。生診断マシン40cは、更に、再構成医療画像43の特定の医療診断の識別、分類又は予測の画像リスク評価記述(IRAD)45も出力する。
[0071] 本開示の発明の理解を更に容易にするために、図5A~図5Cの以下の記載は、本開示の生診断マシンの種々の実施態様を教示する。図5A~図5Cの記載から、本開示の当業者は、本開示の生診断マシンの多数且つ種々の更なる実施態様を形成及び使用するために本開示をどの様に適用するかを理解するであろう。
[0072] 図5Aは、生診断マシン40a(図4A)の一実施態様140aを示す。図5Aを参照すると、生診断マシン140aは、次元削減プリプロセッサ(DRPP)51及び生診断人工知能エンジン(RDAIE)52を採用した生診断ドメインモジュール50を含む。
[0073] 実際には、次元削減プリプロセッサ51は、本開示の発明原理に従い本開示において更に説明されるように、生医療撮像データ31の多数のランダム変数を一群の主変数に削減し、これにより、次元削減された特徴ベクトルを得るように構成されたデータプリプロセッサである。
[0074] 一実施態様において、次元削減プリプロセッサ51は、生医療撮像データ31の多数のランダム変数を一群の主変数に削減し、これにより次元削減された特徴ベクトルを選択するために特徴選択の次元削減技術(例えば、フィルタ処理、ラッピング又は組み込み評価)を実施する。
[0075] 第2実施態様において、次元削減プリプロセッサ51は、生医療撮像データ31の多数のランダム変数を一群の主変数に削減し、これにより次元削減された特徴ベクトルを抽出するために特徴抽出の次元削減技術(例えば、主成分分析又は線形判別分析)を実施する。
[0076] 依然として図5Aを参照すると、実際に、生診断人工知能エンジン52は、本開示において前述したように(図4A)、例えば生リスク評価スコア41及び生リスク評価記述42等の生医療撮像データ31の診断評価を行う。
[0077] 一実施態様において、生診断人工知能エンジン52は、本明細書において更に説明されるように、生医療撮像データ31の診断評価を行うように訓練された1以上の人工ニューラルネットワーク(例えば、畳み込みニューラルネットワーク、再帰型ニューラルネットワーク等)を含む。
[0078] 第2実施態様において、生診断人工知能エンジン52は、本明細書において更に説明されるように、生医療撮像データ31の診断評価を行うように訓練された1以上の教師あり学習マシン(例えば、サポートベクトルマシン)を含む。
[0079] 図5Bは、生診断マシン40b(図4B)の一実施態様140bを示す。図5Bを参照すると、生診断マシン140bは、本開示において前述した(図5A)生診断ドメインモジュール50を含む。生診断マシン140bは、更に、本開示の当業技術においいて既知のように生医療撮像データ31から医療画像43を再構成するための医療画像再構成エンジン60を含む。
[0080] 一実施態様において、医療画像再構成エンジン60は本開示の当業技術において既知の直接型画像再構成アルゴリズムを実施する。
[0081] 第2実施態様において、医療画像再構成エンジン60は、本開示の当業技術において既知の反復型画像再構成アルゴリズムを実施する。
[0082] 図5Cは、生診断マシン40c(図4C)の一実施態様140cを示す。図5Cを参照すると、生診断マシン140cは、本開示において前述した(図5A)生診断ドメインモジュール50、及び本開示において前述した(図5B)医療画像再構成エンジン60を含む。生診断マシン140cは、更に、医療画像プリプロセッサ(MIPP)71及び画像診断人工知能エンジン(IDAIE)72を採用した画像診断ドメインモジュール70を含む。
[0083] 実際には、医療画像プリプロセッサ71は、本開示において更に説明されるように、再構成医療画像43から医療画像特徴ベクトルを抽出するために本開示の当業技術において既知のように構成されたデータプリプロセッサである。
[0084] 依然として図5Cを参照すると、実際に、画像診断人工知能エンジン72は、本開示において前述したように(図4C)、例えば画像リスク評価スコア44及び画像リスク評価記述45等の再構成医療画像43の診断評価を行う。
[0085] 一実施態様において、画像診断人工知能エンジン72は、本明細書において更に説明されるように、再構成医療画像43の診断評価を行うように訓練される1以上の人工ニューラルネットワーク(例えば、畳み込みニューラルネットワーク、再帰型ニューラルネットワーク等)を含む。
[0086] 第2実施態様において、画像診断人工知能エンジン72は、本明細書において更に説明されるように、再構成医療画像43の診断評価を行うように訓練される1以上の教師あり学習マシン(例えば、サポートベクトルマシン)を含む。
[0087] 本開示の発明の理解を更に容易にするために、図6及び図7の以下の記載は、本開示の医療撮像診断コントローラの種々の実施態様を教示する。図6及び図7の記載から、本開示の当業者は、本開示の医療撮像診断コントローラの多数且つ種々の更なる実施態様を形成及び使用するために本開示をどの様に適用するかを理解するであろう。
[0088] 実際には、本開示の医療撮像診断コントローラは、例えば、生診断マシン140a(図5A)、生診断マシン140b(図5B)及び生診断マシン140c(図5C)等の本開示の生診断マシンを実施化するためにハードウェア/回路/ソフトウェア/ファームウエアとして構成することができる。
[0089] 図6に示されるような一実施態様において、医療撮像診断コントローラ240は、1以上のシステムバス246を介して相互接続されたプロセッサ241、メモリ242、ユーザインターフェース243、ネットワークインターフェース244及び記憶部245を含む。実際には、コントローラ240の構成要素241~245の実際の構成は図示されたものより複雑であり得る。
[0090] プロセッサ241は、メモリ若しくは記憶部に記憶された命令を実行し又はそれ以外でデータを処理することができる如何なるハードウェア装置とすることもできる。かくして、プロセッサ241は、マイクロプロセッサ、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)又は他の同様のデバイスを含むことができる。
[0091] メモリ242は、例えばL1、L2若しくはL3キャッシュ又はシステムメモリ等の種々のメモリを含むことができる。かくして、メモリ242はスタチックランダムアクセスメモリ(SRAM)、ダイナミックRAM(DRAM)、フラッシュメモリ、リードオンリメモリ(ROM)又は他の同様のメモリ装置を含むことができる。
[0092] ユーザインターフェース243は、管理者等のユーザとの通信を可能にするための1以上の装置を含むことができる。例えば、ユーザインターフェース243は、ディスプレイ、マウス及びユーザのコマンドを入力するためのキーボードを含むことができる。幾つかの実施態様において、ユーザインターフェース243は、ネットワークインターフェース244を介して遠隔の端末に提示することができるコマンドラインインターフェース又はグラフィックユーザインターフェースを含むことができる。
[0093] ネットワークインターフェース244は、他のハードウェア装置との通信を可能にするための1以上の装置を含むことができる。例えば、ネットワークインターフェース244は、イーサネット(登録商標)プロトコルに従って通信するように構成されたネットワークインターフェースカード(NIC)を含むことができる。更に、ネットワークインターフェース244は、TCP/IPプロトコルに従う通信のためのTCP/IPスタックを構成することができる。当該ネットワークインターフェースのための種々の代替的又は付加的ハードウェア又は構成は明らかであろう。
[0094] 記憶部245は、リードオンリメモリ(ROM)、ランダムアクセスメモリ(RAM)、磁気ディスク記憶媒体、光記憶媒体、フラッシュメモリ装置又は同様の記憶媒体等の1以上のマシン読取可能な記憶媒体を含むことができる。種々の実施態様において、記憶部245は、プロセッサ241により実行するための命令又はプロセッサ241が処理するデータを記憶することができる。例えば、記憶部245は当該ハードウェアの種々の基本的動作を制御するための基本オペレーティングシステム(図示略)を記憶する。
[0095] 本開示にとり一層特定的には、一実施態様において、記憶部245は制御モジュール247を、生診断マシン140a(図5A)を実施化する目的で、生診断ドメインモジュール50のコンピュータ命令実施態様としての生診断ドメインモジュール50aの形態で記憶することができる。
[0096] 第2実施態様において、記憶部245は制御モジュール247を、生診断マシン140b(図5B)を実施化する目的で、生診断ドメインモジュール50(図5B)のコンピュータ命令実施態様としての生診断ドメインモジュール50a及び医療画像再構成エンジン60(図5B)のコンピュータ命令実施態様としての医療画像再構成エンジン60aの形態で記憶することができる。
[0097] 第3実施態様において、記憶部245は制御モジュール247を、生診断マシン140c(図5C)を実施化する目的で、生診断ドメインモジュール50(図5C)のコンピュータ命令実施態様としての生診断ドメインモジュール50a、医療画像再構成エンジン60(図5C)のコンピュータ命令実施態様としての医療画像再構成エンジン60a及び画像診断ドメインモジュール70(図5C)のコンピュータ命令実施態様としての画像診断ドメインモジュール70aの形態で記憶することができる。
[0098] 図7を参照すると、実際には、医療画像診断コントローラ240は、複数のクライアント(例えば、図示されたようなクライアント91及びクライアント92)によりアクセス可能なアプリケーションサーバ90内に設置することができ、及び/又はモニタ94、キーボード95及びコンピュータ96を採用したワークステーション93内に設置される。
[0099] 動作時において、医療画像診断コントローラ240は、本開示(図8A)において更に説明されるように訓練フェーズの間に医療撮像データ源80から訓練生医療撮像データ(TRID)31aを入力すると共に、本開示(図8A)において更に説明されるように診断生医療撮像データ(DRID)31bを入力する。医療撮像データ源80は、如何なる数及びタイプの医療撮像マシン(例えば、図示されたようなMRIマシン81、CTマシン83、X線マシン85及び超音波マシン87)も含むことができると共に、更にデータベース管理/ファイルサーバ(例えば、図示されたようなMRIデータベース管理サーバ82、CTサーバ84、X線データベース管理サーバ86及び超音波データベース管理サーバ88)を含むことができる。実際には、アプリケーションサーバ90又はワークステーション93(適用可能な何れか)を医療撮像データ源80に直接又はネットワークで接続することができ、これにより、医療画像診断コントローラ240のための生医療撮像データ31a/31bを入力する。他の例として、医療撮像データ源80及びアプリケーションサーバ90又はワークステーション93(適用可能な何れか)を直接統合することができ、これにより、医療画像診断コントローラ240は生医療撮像データ31a/31bにアクセスする。
[0100] 更に、実際には、アプリケーションサーバ90又はワークステーション93(適用可能な何れか)は、更に、本開示の当業技術において既知のディスプレイコントローラを含み、生医療撮像データ31a/31bの診断評価のクライアント91/92又はワークステーション93の操作者への伝達、例えば、図示されたような生リスク評価スコア41(例えば、テキスト及び/又はカラーコード表示)、生リスク評価記述42、再構成医療画像43(例えば、二次元及び/又は三次元画像)、画像リスク評価スコア44(例えば、テキスト及び/又はカラーコード表示)、及び画像リスク評価記述45等、を容易にする。アプリケーションサーバ90又はワークステーション93(適用可能な何れか)は、生医療撮像データ31a/31bの診断評価のクライアント91/92又はワークステーション93の操作者への他の形態の伝達のための本開示の当業技術において既知の他のコントローラ、例えば、生医療撮像データ31a/31bの診断評価を印刷、Eメール、テキスティングするためのコントローラ等、を含むこともできる。
[0101] 本開示の発明の理解を更に容易にするために、図8A及び図8Bの以下の記載は、本開示の生診断ドメインモジュール及び画像診断ドメインモジュールの訓練(トレーニング)フェーズ及び診断フェーズを教示する。図8A及び図8Bの記載から、本開示の当業者は、本開示の生診断ドメインモジュール及び画像診断ドメインモジュールを訓練及び動作させるための多数且つ種々の更なる実施態様を形成及び使用するために本開示をどの様に適用するかを理解するであろう。
[0102] 図8Aを参照すると、生診断ドメインモジュール50aの訓練フェーズ100は、訓練生医療撮像データ31a(再構成医療画像の前の診断評価に関連するデータである)を処理することにより次元削減された特徴ベクトル(DRFV)53を選択又は抽出するための次元削減プリプロセッサ51の構成を含む。
[0103] 生診断ドメインモジュール50aの訓練フェーズ100は、更に、次元削減特徴ベクトル53を処理することにより、生医療撮像データ31aから再構成された医療画像の前の診断評価に一致する該生医療撮像データ31aの診断評価を実行するための生診断人工知能エンジン52の構成を含む。例えば、リスク生評価スコア41aは、生医療撮像データ31aから再構成された医療画像の前の診断評価に一致する。この目的のために、必要に応じて生診断人工知能エンジン52を調整することにより生医療撮像データ31aの診断評価が該生診断撮像データ31aから再構成された医療画像の前の診断評価と一致することを保証するために、人工知能パラメータ(AIP)46aを必要に応じて追加、修正及び/又は削除することができる。更に、生リスク評価記述42aとして機能するように評価見出し(AC)47を生診断人工知能エンジン52に加えることができる。
[0104] 依然として図8Aを参照すると、診断フェーズ101は、次元削減特徴ベクトル53bを選択又は抽出するために次元削減プリプロセッサ51へ診断生医療撮像データ31bを入力することを含み、該特徴ベクトルは生診断人工知能エンジン52に入力されることにより、診断生医療撮像データ31bの生リスク評価スコア41b及び生リスク評価記述42bを行う。更に詳細には、診断生医療撮像データ31bは、特に時間の厳しい緊急状況において、生診断ドメインモジュール50aにより評価のために診断されないデータを表す。
[0105] 図8Bを参照すると、画像診断ドメインモジュール70aの訓練フェーズ102は、訓練再構成医療画像43a(前の診断された再構成医療画像である)を処理することにより本開示の当業技術で既知の医療画像特徴ベクトル(MIFV)73を抽出するための医療画像プリプロセッサ71の構成を含む。実際には、医療画像プリプロセッサ71は、医療画像特徴ベクトル73が次元削減特徴ベクトル53(図8A)の特徴と一致するように構成される。
[0106] 画像診断ドメインモジュール70aの訓練フェーズ102は、更に、医療画像特徴ベクトル73を処理することにより、再構成医療画像43aから再構成された医療画像の前の診断評価に一致する該再構成医療画像43aの診断評価を実行するための画像診断人工知能エンジン72の構成を含む。例えば、画像リスク評価スコア44aは、再構成医療画像43aの前の診断評価に一致する。この目的のために、画像診断人工知能エンジン72は生診断人工知能エンジン52と同一又は等価なアーキテクチャを有し、これによれば、必要に応じて画像診断人工知能エンジン72を調整することにより再構成医療画像43aの診断評価が該再構成医療画像43aから再構成された医療画像の前の診断評価と一致することを保証するために、人工知能パラメータ46bを必要に応じて追加、修正及び/又は削除することができる。更に、画像リスク評価記述45aとして機能するように評価見出し47を画像診断人工知能エンジン72に加えることができる。
[0107] 依然として図8Bを参照すると、画像診断ドメインモジュール70aの診断フェーズ103は、医療画像特徴ベクトル73bを抽出するために医療画像プリプロセッサ71へ診断再構成医療画像43bを入力することを含み、該特徴ベクトルは画像診断人工知能エンジン72に入力されることにより、診断再構成医療画像43bの画像リスク評価スコア44b及び画像リスク評価記述45bを供給し、これらは、診断生医療撮像データ31bの生リスク評価スコア41b及び生リスク評価記述42bの検証として機能し得る。
[0108] 実際に、本開示の生診断ドメインモジュールは、特定のタイプの医療撮像マシン及び特定の解剖学的領域又は解剖学的臓器に関して訓練することができる。例えば、図9は、肝臓、脳、胸部領域及び頭蓋領域のCTマシン撮像に関して各々訓練された生診断ドメインモジュール50b~50eを示す。図9は、更に、肺、前立腺、乳房領域及び胸骨領域のMRIマシン撮像に関して各々訓練された生診断ドメインモジュール50f~50iを示す。図9は、更に、肝臓、脳、胸部領域及び頭蓋領域のX線マシン撮像に関して各々訓練された生診断ドメインモジュール50j~50mを示す。図9は、更に、肺、前立腺、乳房領域及び胸骨領域の超音波マシン撮像に関して各々訓練された生診断ドメインモジュール50n~50qを示す。
[0109] 本開示の発明の理解を更に容易にするために、図3~図9に記載された本開示の発明原理の種々の適用例を以下に説明する。図3~図9に関する説明から、本開示の当業者は、本開示の発明原理を実際に適用するために、本開示をどの様に適用するかを理解するであろう。
[0110] 断層撮像:現代の医療CTシステムにおいては、ガントリが患者の回りで回転し、この回転ガントリ上において一方の側にX線源が位置する一方、反対側に検出器の列が位置する。スキャナにより取得されるデータは投影サイノグラムと称され、X線ビームの経路に沿って積分されたX線減衰を表す。次いで、斯かる投影データに再構成アルゴリズムが適用されて、画像を形成する。断層撮像は医療において普及しており、透過型又は放出型断層撮影の原理が、なかでも、CT、MRI(磁気共鳴撮像)、PET(陽電子放出コンピュータトモグラフィ)、SPECT(単一光子放射コンピュータトモグラフィ)、DOT(拡散光トモグラフィ)において使用されている。画像を形成するために要する全ての情報は投影データに含まれているので、投影が診断のために十分な情報を含んでいることは明らかである。しかしながら、本開示以前では、これら全ての事例において、関心物体(例えば、出血、腫瘍等)の識別は、投影データに対してではなく、再構成された画像に対して行われている。
[0111] CT投影処理は、数学的に、X線減衰係数の基となる場のラドン変換と捉えることができる。投影処理は、画像空間内の各局在特徴(例えば、出血)が図10におけるサイノグラム空間内のシヌソイド(正弦曲線)に変換されるというようなものである。最も近代的な臨床CTスキャナは円錐ビームX線をヘリカルモードで使用して多列サイノグラムを生成するが、本開示では簡略化のために、ファンビームがアキシャル画像を介して投影され投影サイノグラムを生成する。
[0112] 更に詳細には、図10はCTデータ収集幾何学構造100を示し、これによれば、各回転角□において、検出器において受信される信号は、
Figure 0007181230000001
による経路wに沿った減衰係数の線積分に関係し、ここで、I及びIは、各々、入射及び透過ビーム強度であり、□(w)は経路長Lの経路wに沿うX線の線形減衰係数である。本体に対する回転角□により、視野内の如何なる点(x,y)も,
Figure 0007181230000002
及び
Figure 0007181230000003
により定義することができる。この場合、線源から点(x,y)を介して検出器アレイまでのX線はシヌソイドpθ=r・cos(φ-θ)により与えられる。図10は、更に、脳内の大きな硬膜外出血(矢印)のCT画像101を示し、これによれば、CT画像101内の出血はCT画像102においてピクセル値を反対側から置換することによりデジタル的に削除される。図10は、更に、CT画像101及び102に各々対応するサイノグラム103及び104を示すと共に、出血のみの投影を示すサイノグラム103と104との間のサイノグラム差分105を示している。サイノグラム103及び104の最大値は約45,000である一方、サイノグラム差分105の最大値は1,000であることに注意されたい。
[0113] この実施態様は、特徴ベクトルの次元を一層扱い易いサイズに低減するためにランダム投影を用いた。元々のn次元空間Xにおけるベクトルは、ランダム投影マトリクスRを介してk次元の部分空間Xp上に投影され(即ち、Xp=R-X)、ここで、k≪nであり、Rの列は単位長の独立且つ等しく分散されたゼロ平均正規変数の実現値である。一般的に投影マトリクスは直交する列を有することを要するが、高次元データセットの1つの特性は、各ベクトルの方向がランダムである場合、これらベクトルの殆どは“略”直交的であるというものであり、ここで、“略”はJohnson-Lindenstrauss定理により正確に定義される。直交基底関数は計算するのが高価であるので、ランダム投影が、特徴空間次元を低減するための計算的に効率的な方法を提供する。この実施態様の場合、kの幾つかの値が調べられ、28,000次元による許容可能な性能が達成された。このように、ランダム投影の使用により、特徴ベクトルの次元は~96.5%低減された。
[0114] 一群の次元削減された特徴ベクトル(各投影サイノグラムに1つのベクトルが対応する)が与えられたとして、各特徴ベクトルが正常である患者か又は出血を有する患者であるかを判定するためにサポートベクトルマシン(SVM)が用いられる。更に詳細には、SVMは、特徴ベクトルを一層高次元の多様体に、図11に示されるグラフ106におけるように等級の間の分離を最大にするように埋め込むことにより分類を実行する一種のアルゴリズムである。この実施態様の場合、焦点は線形カーネルの線形SVMに置かれる。当該分類器は訓練の間において判定するために相当の計算を要し得るが、一旦計算されると、新たな各特徴ベクトルを分類するために簡単なドット積しか必要とされないことに留意することが重要である。
[0115] 特に図11に関し、サポートベクトルマシン(SVM)の訓練フェーズにおいて、次元kの各入力ベクトルx(i=1,…,n)にはラベルyが関連付けられ、ここで、xがクラス1(正常サイノグラム)からのものであればy=+1であり、xがクラス2(出血サイノグラム)からのものであればy=-1である。次のステップは、図11においてクラス1及びクラス2を分離する太線として示されるように、2つのクラスを分離する超平面w・x-b=0を定めるような重み行列wを定義することである。更に詳細には、ラベル付けされた訓練サンプルが満足されるとの制約の下で、wの大きさを正規化するためにラグランジュ乗数方程式が用いられる。w及びbを定義する方程式は、(□がラグランジュ乗数として)、
Figure 0007181230000004
により与えられる。即ち、Lはw及びbに関して最小化される。
[0116] 診断フェーズにおいて、224の患者の脳のCT画像(88が正常、136が出血)が回顧的に取得され、次いで投影サイノグラムが生成された。出血タイプは、0.5~190mlの範囲のサイズ及び26.2mlの平均サイズで、硬膜下、硬膜外及びクモ膜下からなっていた。
[0117] 図12は、実際のCTデータを用いた分類器性能を示す。CT画像107は正常なCTの例であり、CT画像108は矢印で示された硬膜下出血を伴うCTの例である。10の交差検証試行にわたり平均されたSVM分類器の全性能マトリクスが下記の表1に示される。
[0118]
Figure 0007181230000005
[0119] 結果は、92.4%の感度及び97.2%の特定性で、94.3%の全体としての正解分類率を示している。図13は、出血の大きさの関数としての出血検出性能のグラフ109、R=0.9963、を示す。
[0120] 要約すると、この研究において、頭蓋内出血の自動化された診断を画像ドメインの代わりにCT投影ドメインにおいて実行することができるという予備的証拠が得られた。投影(生)ドメインにおいて診断を行うことは、画像内の空間的に局在化された解剖学的特徴がシヌソイドに変換されているので、反直感的に見え得る。しかしながら、機械学習技術の進歩に伴うと共に、CTスキャナが益々精細な解像度及び一層大量のデータを発生するのに伴い、本開示の発明原理は、断層ドメインでのコンピュータベースの診断への新規且つ固有のアプローチを提供する。
[0121] 注意すべき重要なことは、当該システムの性能が、図13に示されるように、遭遇する出血の大きさに依存するということである。脳内の出血は常に心配であるが、少なくとも出血性卒中の場合、30日死亡率結果を予測する出血サイズは>30mlであることに留意する価値がある。このような前後関係において、本開示の発明は、適切な介入治療のための診断的助言を迅速且つ正確に行うために有望であり得る。加えて、一層小さな出血に対する本開示の発明の検出感度の改善の可能性は、一層多くのフィーチャを維持することにより及び一層複雑なSVM設計の使用により達成することができる。
[0122] ディープニューラルネットワークによるフーリエ型再構成。関連する特徴をk空間において臨床的に知るために、本開示の生診断モジュールは局在的異常というより拡散パターンを知るように設計される必要がある。例えば、病変との類似性を有する図14のk空間110における点状物体は、画像においては局在化されるがk空間では“拡散した”情報を有するであろう。MR撮像において、画像とk空間との間の関係は、フーリエ理論(例えば、周波数変調、スケーリング)により支配される。このことは、標準的方法が梗塞、腫瘍及び骨折等の小さな異常を見付けることであるような多くの医療撮像課題にとり特に関連する。このことは、画像情報の大部分が診断とは無関係である故に重要である。小さな局在的“ノイズ内信号”を見付けることは、コンピュータにとり拡散した特徴を描くよりも実際に困難である。典型的に、この難題は、分類が後続する位置特定を含む2段階方法又は注意機構(attention mechanism)の何れかを用いることにより克服される。しかしながら、収集ドメインにおいて、小さな局在的物体は一層拡散した見え方を有し、訓練することが困難な注意機構を必要としないであろう。しかしながら、本開示の生診断モジュールは次元数を増加させる一層広い入力を取り込む必要があるであろう。
[0123] 更に詳細には、図14は、円形の物体の該物体のk空間表現との関係を示す画像110、実証のために人工的に削除された病変を持つ右被殻の僅かな非対称性を示す液体減衰反転回復(FLAIR)MRI画像111、及び反対側からのピクセル値を置換することによりMR画像111における高信号病変がデジタル的に削除されたMR画像112を図示している。
[0124] 図14は、更に、MR画像111及びMR画像112に各々対応するk空間113及び114、並びに病変の周波数応答のみを示すk空間113及び114の間のk空間差分115を示す。k空間113及び114の最大値は(f)に対して10:1であることに注意されたい(注:k空間は簡単なデカルトサンプリング法によりシミュレーションされている)。
[0125] 部分フーリエ撮像はMRIにとり普通であり、k空間の1/2程度が全体のMR画像を生成するために使用される。これは、k空間情報の冗長性により可能となる。データ収集の間において位相誤差が無いとしたら、k空間は図15に示されるようにエルミート対称性を有する。MRIの場合、本開示は特徴空間次元数を低減するために、そのk空間対称性を利用する。更に詳細には、図15はk空間の対称性を強調している。即ち、共役対称性109が、k空間の原点を跨いで互いに対角に位置するP及びQ等の点の対に当てはまる。Pにおけるデータが複素数[a+bi]である場合、QにおけるデータはPの複素共役[a-bi]であることが即座に分かる。Npeは位相エンコードの数であり、Nfeは周波数エンコードの数である。
[0126] 画像ドメインとk空間との間の他の区別要因は入力の形状であり、これは、k空間の複素数で記憶される信号情報を考慮するために2つのチャンネル(実部及び虚部)を有する必要があろう。表2及び表3に、この課題のために使用することができる2つの簡単なアーキテクチャを記載する(訓練データがネットワーク設計を調整するために必要とされる;ドロップアウト、正則化及びバッチ正規化は含まれない)。2D及び3D設計は、パルスシーケンス又は調査される解剖構造のタイプに依存する。これは、実施態様1において説明したようなSVMベースの方法又は他のネットワークアーキテクチャが同様の結果を発生し得る多くのAI方法のうちの1つに過ぎない。
[0127]
Figure 0007181230000006
[0129]
Figure 0007181230000007
[0131] 本開示は、ここでは、解剖学的MR撮像が画像とk空間との間に一層簡単な関係を有するのでT2強調急性虚血発作(卒中)の例を示す。しかしながら、この方法は、(超)急性発作において拡散強調MRにより検出される梗塞を検出するために使用することもでき、又は画像≠FT{k-space}となる他の間接的MR撮像方法も使用することができる。これは、短期間内の患者の結果についての含み及び救急部門に存する虚血性発作を示す症状の患者の量による他のやむにやまれない使用例である。世界保健機構によれば、毎年、世界で千五百万もの人が卒中を患っている。これらのうち、5百万人が死亡し、他の5百万は永久的な障害を受ける。虚血性発作は、これらの患者の88%を占める。疑わしい虚血性発作の患者の成功する処置は、早期の診断、速い治療判断及び即座の対応を必要とする。
[0132] 拡散強調撮像(DWI)は、急性虚血性発作の評価のための普通に実施されるMRIシーケンスであり、小さな初期の梗塞の検出に敏感である。通常のMRIシーケンス(T1強調、T2強調)は、6時間は梗塞を示すことはできず、小さな梗塞は、特に以前の撮像の恩恵無しでは、何日もCT上で認識することは困難であり得る。非強調コンピュータトモグラフィ上で梗塞を示すための時間は、更に長い。
[0133] 虚血性脳組織内の増加するDWI信号は、動脈閉塞後数分内で観測され、見掛け拡散係数(ADC)の低減、並びに後続する増加、擬似正規化及び最終的な永久評価のステレオ型シーケンスを介して進行する。報告されている感度は、88~100%の範囲であり、特には86~100%の範囲である。しかしながら、この方法は、解剖学的撮像(T2強調又はFLAIR)に加えて拡散強調、灌流及び血管造影シーケンスを含む急性発作(卒中)撮像のために用いることもできる。
[0134] 拡散強調画像も、T1及びT2強調画像と同様にk空間において取得される。しかしながら、しばしば見掛け拡散係数(ADC)として定量化される組織の機能状態を抽出するために、図16に示されるように変化する拡散勾配強度(変化するb値)で複数のk空間画像を取得する必要がある。
[0135] 図16に対し特定的には、見掛け拡散係数(ADC)マップ119の生成は、拡散強調無し(b0)の画像117及び変化するb値での幾つかの画像118の取得を介してのものである。これらの画像は、Sx = S0e-bDxx, Sy = S0e-bDyy, Sz = S0e-bDzz及びSDWI= 3√(SxSySz)なる式によりADCマップ119(SDWI)を生成するよう合成される。
[0136] 図16は、更に、本開示の当業技術において既知のように急性虚血性発作の種々の診断のために使用されるスキャナにより取得された一群の画像120を示している。左から右に、該群120は、DWI画像、FLAIR画像、T2強調画像、MRA TOF(造影剤無し)画像及びpost-GD MRA画像(造影)を含んでいる。
[0137] 重要なピクセルレベルの相関関係が存在するので、提案されるネットワークをデータに適用し、後に結果を組み合わせることは、明らかに重要な情報を喪失するであろう。代わりに、本開示は入力を形状=Npe/2 x Nfe/2 x b値を有するように修正することを提案し、ここで、b値はチャンネル又は追加の次元として扱うことができる。この場合、複素データは当該方法、又は参照により本明細書に組み込まれるGeberman, N.による“On Complex Valued Convolutional Neural Networks”(2016). https://arxiv.org/pdf/1602.09046.pdfと同様にキャプチャすることができる。この方法は、DCE又はDSC MRI等の他のMR機能スキャンに拡張することができ、ここで、入力は形状=Npe/2 x Nfe/2 x 時間を有するであろう。
[0138] リスクスコアの臨床的容認を改善するための生データ/テキスト:図17は、医療画像特徴及び医療テキストオントロジに精細に調整された機械翻訳及びコンピュータ視覚の最近の進化を組み合わせた第1種類のディープ再帰型アーキテクチャ131を示す。モデル131は、エンコーダ/デコーダニューラルネットワークを用いて、医療画像が与えられた場合の医療文献からの記述的文章により訓練されている。該モデル131は、最初に画像を畳み込みニューラルネットワーク(CNN)を介して固定長のベクトル表現に“エンコード”し、次いで、該表現を自然言語記述に“デコード”することにより機能する。上記デコーダは、画像エンコードに対して調整された言語モデルとして訓練される長短期記憶(LSTM)ネットワークである。計画される作業は、代わりのネットワークアーキテクチャによりモデルの精度を改善すること及び目標の臨床的データセットで訓練すること並びに体積測定的データを許容することができるようにCNNを3Dに拡張することを含む。本開示は、人が読み取ることができる解剖学的再構成におけるのと同様にサイノグラムにおける関係を等しく解釈することができるDNNを提供する。例えば、図17はサイノグラム130から記述的テキストを生成するためのディープ視覚CNN及び言語発生RNNからの出力を提供する(例えば、“虚血性発作>発生後1日の頭部CTが、低吸収領域を示している。左側頭葉の拡大及びシルビアン特徴の収縮”)。これは、専門放射線医師の自由なテキスト注釈で訓練することができる。
[0139] 生データから解剖学的情報のテキスト記述を発生する生成モデルに関し、本開示の発明は、CNNによる特徴抽出が後続する本開示において前述された次元数削減の最初の使用を提供する。この特徴ベクトルは、図18に示されるようなテキスト発生モデル132への入力とする。訓練のために、次元削減特徴ベクトルは、第1見出し単語と共に第1LSTMセルに入力として付与され、当該単語の系列が同様にして後続のLSTMセルに受け渡される。このようにして、画像特徴と見出し単語との間の関連を学習するために、デコーディング段階の間において画像重みが全LSTMステップにわたり共有される。LSTMセルの系列は、或る入力単語及び生データが与えられたとして、次の単語の確率を、サイノグラム又はk空間等の生データが与えられた場合、結果としてのモデルが見出し(語句又は文章)を発生することができるように学習する。
[0140] 図1~図18を参照すれば、当業者であれば、これらに限定されるものではないが、再構成された医療画像から直接的なものより改善された又は同様の精度で生画像データから選択又は抽出される自動化された診断を含む本開示の発明の多くの利点を理解するであろう。時間的に厳しい判断に対し、及び限られた計算資源の設備において、本開示の発明は特に有利である。
[0141] 更に、前記記憶部に記憶されるとして説明された種々の情報は、加えて又は代わりに、前記メモリに記憶することもできることが明らかであろう。この点に関し、メモリは“記憶装置”を構成すると考えることができ、記憶部は“メモリ”と考えることができる。種々の他の構成も明らかであろう。更に、メモリ及び記憶部は、共に、“非一時的マシン読取可能な媒体”と考えることができる。本明細書で使用される場合、“非一時的”なる用語は、一時的信号は除外するが、揮発性及び不揮発性の両メモリを含む全ての形態の記憶部を含むと理解される。
[0142] 当該装置は上述した各構成要素の1つを含むように図示されているが、種々の実施態様では種々の構成要素を複製することができる。例えば、プロセッサは、複数のマイクロプロセッサが本開示に記載される機能を果たすべく共動するように、本開示に記載される各方法を独立に実行するように構成された又は本開示に記載された各方法のステップ又はサブルーチンを実行するように構成された複数のマイクロプロセッサを含むことができる。更に、当該装置がクラウドコンピュータシステム内で実施化される場合、種々のハードウェア要素は別個の物理的システムに属し得る。例えば、プロセッサは第1サーバにおける第1プロセッサ及び第2サーバにおける第2プロセッサを含み得る。
[0143] 上述した説明から、本発明の種々の例示的実施態様は、ハードウェア又はファームウエアで実施化することができることは明らかであろう。更に、種々の例示的実施態様は、本明細書に詳細に記載された処理を実行するために少なくとも1つのプロセッサにより読み出され且つ実行され得る、マシン読取可能な記憶媒体に記憶された命令として実施化することもできる。マシン読取可能な記憶媒体は、パーソナル若しくはラップトップコンピュータ、サーバ又は他の計算装置等のマシンにより読み取ることが可能な形態で情報を記憶するための如何なるメカニズムも含むことができる。このように、マシン読取可能な記憶媒体は、読出専用メモリ(ROM)、ランダムアクセスメモリ(RAM)、磁気ディスク記憶媒体、光記憶媒体、フラッシュメモリ装置及び同様の記憶媒体を含むことができる。
[0144] 当業者であれば、本明細書における如何なるブロック図も本発明の原理を具現化する例示的回路の概念図を表すものと理解されるべきである。同様に、如何なるフローチャート、流れ図、状態遷移図及び擬似コード等も、マシン読取可能な媒体において実質的に表すことができ、従って、コンピュータ又はプロセッサ(斯様なコンピュータ又はプロセッサが明示的に示されているか否かによらず)により実行することができる種々の処理を表すものと理解される。
[0145] 以上、種々の例示的実施態様を特に該実施態様の特定の例示的側面に関連して詳細に説明したが、本発明は他の実施態様も可能であり、その細部は種々の自明な点において修正することができると理解されるべきである。当業者にとり明らかなように、変形例及び修正例を本発明の趣旨及び範囲内のままで実施することができる。従って、上記開示、記載及び図面は解説目的のためのものであって、請求項のみにより定義される本発明を、如何なる形でも限定するものではない。

Claims (17)

  1. 解剖学的領域又は解剖学的臓器の診断撮像を実行する医療撮像マシンと、
    医療撮像診断コントローラを含む、前記医療撮像マシンにより取得される電子データであって、医療画像の再構成が実行される前の電子データを有する生医療撮像データを処理して診断評価を実行する生診断マシンと、
    を有する医療撮像診断システムであって、前記医療撮像診断コントローラが、
    前記生医療撮像データを、該生医療撮像データから少なくとも1つの次元削減特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力し、
    前記少なくとも1つの次元削減特徴ベクトルを、前記生医療撮像データの前記診断評価を行うように訓練される生診断人工知能エンジンに入力し、及び
    前記生医療撮像データの前記診断評価の伝達を制御する、
    医療撮像診断システム。
  2. 前記生診断人工知能エンジンが、人工ニューラルネットワーク及び教師有り学習マシンの少なくとも一方を含む、請求項1に記載の医療撮像診断システム。
  3. 前記医療撮像マシンが、磁気共鳴撮像マシン、コンピュータトモグラフィ撮像マシン、超音波撮像マシン、X線撮像マシン、拡散光トモグラフィマシン、陽電子放出トモグラフィマシン及び単一光子放射コンピュータトモグラフィマシンのうちの1つである、請求項1に記載の医療撮像診断システム。
  4. 前記生医療撮像データが、MRIのk空間データ、CTサイノグラムデータ、及び/又はPETリストモードファイルを含む、請求項1に記載の医療撮像診断システム。
  5. 前記生医療撮像データから再構成医療画像を発生するための医療画像再構成エンジンを有し、
    前記医療撮像診断コントローラが、更に、
    前記生医療撮像データを、前記医療画像再構成エンジンに入力し、及び
    前記再構成医療画像の伝達を制御する、
    請求項1に記載の医療撮像診断システム。
  6. 前記医療撮像診断コントローラが、更に、
    前記再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、
    前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力し、及び
    前記再構成医療画像の診断評価の伝達を制御する、
    請求項に記載の医療撮像診断システム。
  7. 前記医療撮像診断コントローラが、更に、
    再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、
    前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力し、及び
    前記再構成医療画像の診断評価の伝達を制御する、
    請求項1に記載の医療撮像診断システム。
  8. 前記次元削減プリプロセッサが、指定された解剖学的領域及び指定された解剖学的臓器の一方に対応して、前記生医療撮像データから前記少なくとも1つの次元削減特徴ベクトルを選択又は抽出するように訓練され、及び
    前記生診断人工知能エンジンが、前記指定された解剖学的領域及び前記指定された解剖学的臓器の一方に対応して、前記生医療撮像データの診断評価を行うように訓練される、
    の少なくとも一方である、請求項1に記載の医療撮像診断システム。
  9. 解剖学的領域又は解剖学的臓器の診断撮像を実行する医療撮像マシンにより取得される電子データであって、医療画像の再構成が実行される前の電子データを有する生医療撮像データを処理して診断評価を実行するために少なくとも1つのプロセッサにより実行する命令によりエンコードされた非一時的マシン読取可能な記憶媒体であって
    前記生医療撮像データを、該生医療撮像データから少なくとも1つの次元削減特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力し、及び
    前記少なくとも1つの次元削減特徴ベクトルを、前記生医療撮像データの前記診断評価を行うように訓練される生診断人工知能エンジンに入力する、
    ための命令を有する、非一時的マシン読取可能な記憶媒体。
  10. 当該非一時的マシン読取可能な記憶媒体が、
    前記生医療撮像データを、前記生医療撮像データから再構成医療画像を発生するための医療画像再構成エンジンに入力する、
    ための命令を更に有する、請求項9に記載の非一時的マシン読取可能な記憶媒体。
  11. 当該非一時的マシン読取可能な記憶媒体が、
    前記再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、及び
    前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力する、
    ための命令を更に有する、請求項10に記載の非一時的マシン読取可能な記憶媒体。
  12. 当該非一時的マシン読取可能な記憶媒体が、
    再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力し、及び
    前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力する、
    ための命令を更に有する、請求項9に記載の非一時的マシン読取可能な記憶媒体。
  13. 前記次元削減プリプロセッサが、指定された解剖学的領域及び指定された解剖学的臓器の一方に対応して、前記生医療撮像データから前記少なくとも1つの次元削減特徴ベクトルを選択又は抽出するように訓練され、及び
    前記生診断人工知能エンジンが、前記指定された解剖学的領域及び前記指定された解剖学的臓器の一方に対応して、前記生医療撮像データの診断評価を行うように訓練される、
    の少なくとも一方である、請求項9に記載の非一時的マシン読取可能な記憶媒体。
  14. 解剖学的領域又は解剖学的臓器の診断撮像を実行する医療撮像マシンにより取得される電子データであって、医療画像の再構成が実行される前の電子データを有する生医療撮像データを処理して診断評価を実行する医療撮像診断コントローラによる医療診断のための医療撮像診断方法であって
    前記医療撮像診断コントローラにより、前記生医療撮像データを、該生医療撮像データから少なくとも1つの次元削減特徴ベクトルを選択又は抽出するように訓練される次元削減プリプロセッサに入力するステップ、及び
    前記医療撮像診断コントローラにより、前記少なくとも1つの次元削減特徴ベクトルを、前記生医療撮像データの前記診断評価を行うように訓練される生診断人工知能エンジンに入力するステップ、
    を有する、医療撮像診断方法。
  15. 前記医療撮像診断コントローラにより、前記生医療撮像データを、前記生医療撮像データから再構成医療画像を発生するための医療画像再構成エンジンに入力するステップ、
    前記医療撮像診断コントローラにより、前記再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力するステップ、及び
    前記医療撮像診断コントローラにより、前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力するステップ、
    を更に有する、請求項14に記載の医療撮像診断方法。
  16. 前記医療撮像診断コントローラにより、再構成医療画像を、該再構成医療画像から少なくとも1つの医療画像特徴ベクトルを選択又は抽出するように訓練される医療画像プリプロセッサに入力するステップ、及び
    前記医療撮像診断コントローラにより、前記少なくとも1つの医療画像特徴ベクトルを、前記再構成医療画像の診断評価を行うように訓練される画像診断人工知能エンジンに入力するステップ、
    を更に有する、請求項14に記載の医療撮像診断方法。
  17. 前記次元削減プリプロセッサによる前記生医療撮像データからの前記少なくとも1つの次元削減特徴ベクトルの選択又は抽出が、指定された解剖学的領域及び指定された解剖学的臓器の一方に対応し、及び
    前記医療撮像診断コントローラによる前記生医療撮像データの診断評価の実行が、前記指定された解剖学的領域及び前記指定された解剖学的臓器の一方に対応する、
    の少なくとも一方である、請求項14に記載の医療撮像診断方法。
JP2019565544A 2017-05-31 2018-05-30 臨床判断支援のための生医療画像データの機械学習 Active JP7181230B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762512774P 2017-05-31 2017-05-31
US62/512,774 2017-05-31
PCT/EP2018/064308 WO2018220089A1 (en) 2017-05-31 2018-05-30 Machine learning on raw medical imaging data for clinical decision support

Publications (3)

Publication Number Publication Date
JP2020522068A JP2020522068A (ja) 2020-07-27
JP2020522068A5 JP2020522068A5 (ja) 2021-07-26
JP7181230B2 true JP7181230B2 (ja) 2022-11-30

Family

ID=62567631

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019565544A Active JP7181230B2 (ja) 2017-05-31 2018-05-30 臨床判断支援のための生医療画像データの機械学習

Country Status (5)

Country Link
US (1) US11984224B2 (ja)
EP (1) EP3631808B1 (ja)
JP (1) JP7181230B2 (ja)
CN (1) CN110692107B (ja)
WO (1) WO2018220089A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG10201909659QA (en) * 2018-10-17 2020-05-28 Tata Consultancy Services Ltd System and method for authenticating humans based on behavioral pattern
US10755412B2 (en) * 2018-11-20 2020-08-25 International Business Machines Corporation Automated patient complexity classification for artificial intelligence tools
US11681873B2 (en) * 2019-09-11 2023-06-20 International Business Machines Corporation Creating an executable process from a text description written in a natural language
EP4037550A4 (en) * 2019-09-30 2023-11-08 Massachusetts Eye and Ear Infirmary OBJECTIVE ASSESSMENT OF NEUROLOGICAL MOVEMENT DISORDERS FROM MEDICAL IMAGING
EP3824814A1 (en) 2019-11-22 2021-05-26 Koninklijke Philips N.V. Assessment of measured tomographic data
US11727125B2 (en) * 2020-03-31 2023-08-15 General Electric Company Emergent language based data encryption
EP4082439B1 (en) * 2021-04-29 2024-04-17 Siemens Healthineers AG Determining ct scan parameters based on machine learning
US20230253095A1 (en) * 2022-02-10 2023-08-10 Siemens Healthcare Gmbh Artifical intelligence for end-to-end analytics in magnetic resonance scanning
EP4266074A1 (en) 2022-04-22 2023-10-25 Koninklijke Philips N.V. Segmentation of medical images reconstructed from a set of magnetic resonance images
EP4321890A1 (en) 2022-08-09 2024-02-14 Koninklijke Philips N.V. Reconstruction parameter determination for the reconstruction of synthesized magnetic resonance images

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160019320A1 (en) 2014-07-18 2016-01-21 Samsung Electronics Co., Ltd. Three-dimensional computer-aided diagnosis apparatus and method based on dimension reduction
US20160259898A1 (en) 2015-03-04 2016-09-08 Samsung Electronics Co., Ltd. Apparatus and method for providing reliability for computer aided diagnosis
US20170100078A1 (en) 2015-10-13 2017-04-13 IMPAC Medical Systems, Inc Pseudo-ct generation from mr data using a feature regression model

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1934589A (zh) * 2004-03-23 2007-03-21 美国西门子医疗解决公司 为医学成像提供自动决策支持的系统和方法
US9347945B2 (en) 2005-12-22 2016-05-24 Abbott Molecular Inc. Methods and marker combinations for screening for predisposition to lung cancer
US8073253B2 (en) 2006-09-29 2011-12-06 General Electric Company Machine learning based triple region segmentation framework using level set on PACS
US8334900B2 (en) * 2008-07-21 2012-12-18 The Hong Kong University Of Science And Technology Apparatus and method of optical imaging for medical diagnosis
EP2338122B1 (en) * 2008-09-26 2018-12-05 Koninklijke Philips N.V. System and method for fusing clinical and image features for computer-aided diagnosis
WO2011025919A1 (en) 2009-08-28 2011-03-03 Asuragen, Inc. Mirna biomarkers of lung disease
US10360344B2 (en) * 2009-12-10 2019-07-23 Koninklijke Philips N.V. Diagnostic techniques for continuous storage and joint analysis of both image and non-image medical data
US9208556B2 (en) * 2010-11-26 2015-12-08 Quantitative Insights, Inc. Method, system, software and medium for advanced intelligent image analysis and display of medical images and information
US20150042677A1 (en) * 2012-03-23 2015-02-12 Konica Minolta, Inc. Image-generating apparatus
WO2013188957A1 (en) 2012-06-18 2013-12-27 University Health Network Method and system for compressed sensing image reconstruction
WO2014153466A2 (en) * 2013-03-20 2014-09-25 Cornell University Methods and tools for analyzing brain images
CN103793908A (zh) * 2014-01-17 2014-05-14 首都医科大学 一种基于脑核磁共振图像多维度纹理建立预测模型的方法
US20190066020A1 (en) * 2014-03-31 2019-02-28 Kountable, Inc. Multi-Variable Assessment Systems and Methods that Evaluate and Predict Entrepreneurial Behavior
KR20160012758A (ko) * 2014-07-25 2016-02-03 삼성전자주식회사 영상 진단 보조 장치 및 방법
WO2016094330A2 (en) 2014-12-08 2016-06-16 20/20 Genesystems, Inc Methods and machine learning systems for predicting the liklihood or risk of having cancer
US10799186B2 (en) * 2016-02-12 2020-10-13 Newton Howard Detection of disease conditions and comorbidities

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160019320A1 (en) 2014-07-18 2016-01-21 Samsung Electronics Co., Ltd. Three-dimensional computer-aided diagnosis apparatus and method based on dimension reduction
US20160259898A1 (en) 2015-03-04 2016-09-08 Samsung Electronics Co., Ltd. Apparatus and method for providing reliability for computer aided diagnosis
US20170100078A1 (en) 2015-10-13 2017-04-13 IMPAC Medical Systems, Inc Pseudo-ct generation from mr data using a feature regression model

Also Published As

Publication number Publication date
CN110692107B (zh) 2023-11-14
US20210174937A1 (en) 2021-06-10
RU2019144788A (ru) 2021-07-02
WO2018220089A1 (en) 2018-12-06
CN110692107A (zh) 2020-01-14
EP3631808B1 (en) 2024-09-11
US11984224B2 (en) 2024-05-14
EP3631808A1 (en) 2020-04-08
JP2020522068A (ja) 2020-07-27
RU2019144788A3 (ja) 2021-09-17

Similar Documents

Publication Publication Date Title
JP7181230B2 (ja) 臨床判断支援のための生医療画像データの機械学習
US11403750B2 (en) Localization and classification of abnormalities in medical images
Jiang et al. COVID-19 CT image synthesis with a conditional generative adversarial network
Gupta et al. Natural image bases to represent neuroimaging data
Larrazabal et al. Post-DAE: anatomically plausible segmentation via post-processing with denoising autoencoders
US20210350179A1 (en) Method for detecting adverse cardiac events
Li et al. When medical images meet generative adversarial network: recent development and research opportunities
EP3355273B1 (en) Coarse orientation detection in image data
Shakeri et al. Deep spectral-based shape features for Alzheimer’s disease classification
RU2667879C1 (ru) Обработка и анализ данных на изображениях компьютерной томографии
Wu et al. Prostate segmentation based on variant scale patch and local independent projection
US20230024401A1 (en) Implicit Neural Representation Learning with Prior Embedding for Sparsely Sampled Image Reconstruction and Other Inverse Problems
Yang et al. An indirect multimodal image registration and completion method guided by image synthesis
Naga Srinivasu et al. Variational Autoencoders‐BasedSelf‐Learning Model for Tumor Identification and Impact Analysis from 2‐D MRI Images
Gravina et al. Leveraging CycleGAN in lung CT sinogram-free kernel conversion
Yu et al. Cardiac LGE MRI segmentation with cross-modality image augmentation and improved U-Net
Fiaz et al. Brain MRI Segmentation using rule-based hybrid approach
Jeyaraj et al. High‐performance dynamic magnetic resonance image reconstruction and synthesis employing deep feature learning convolutional networks
Wang et al. A Two-Stage Generative Model with CycleGAN and Joint Diffusion for MRI-based Brain Tumor Detection
JP2023545570A (ja) 形状プライアを用いた及び用いないセグメンテーション結果によって解剖学的異常を検出すること
da Silveira Souza et al. Detector of 3-D salient points based on the dual-tree complex wavelet transform for the positioning of hippocampi meshes in magnetic resonance images
RU2779064C2 (ru) Машинное обучение на необработанных данных медицинской визуализации для поддержки принятия клинических решений
Kumar et al. [Retracted] CNN‐Based Cross‐Modal Residual Network for Image Synthesis
Li et al. Discover Artificial Intelligence
Vaidya Perceptually Improved Medical Image Translations Using Conditional Generative Adversarial Networks

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210527

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210527

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220622

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220930

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221021

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221117

R150 Certificate of patent or registration of utility model

Ref document number: 7181230

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150