JP6603656B2 - 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム - Google Patents

脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム Download PDF

Info

Publication number
JP6603656B2
JP6603656B2 JP2016524256A JP2016524256A JP6603656B2 JP 6603656 B2 JP6603656 B2 JP 6603656B2 JP 2016524256 A JP2016524256 A JP 2016524256A JP 2016524256 A JP2016524256 A JP 2016524256A JP 6603656 B2 JP6603656 B2 JP 6603656B2
Authority
JP
Japan
Prior art keywords
image
brain
patient
stn
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016524256A
Other languages
English (en)
Other versions
JP2016527942A (ja
JP2016527942A5 (ja
Inventor
サピロ、ギジェルモ
ハレル、ノーム
デューチン、ユバル
キム、ジニョン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Surgical Information Sciences inc
Original Assignee
Surgical Information Sciences inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Surgical Information Sciences inc filed Critical Surgical Information Sciences inc
Publication of JP2016527942A publication Critical patent/JP2016527942A/ja
Publication of JP2016527942A5 publication Critical patent/JP2016527942A5/ja
Application granted granted Critical
Publication of JP6603656B2 publication Critical patent/JP6603656B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/501Clinical applications involving diagnosis of head, e.g. neuroimaging, craniography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5217Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5294Devices using data or image processing specially adapted for radiation diagnosis involving using additional data, e.g. patient information, image labeling, acquisition parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • G06F18/251Fusion techniques of input or preprocessed data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/04Inference or reasoning models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A61B2576/026Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part for the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/0035Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/02Devices for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computerised tomographs
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/02Devices for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computerised tomographs
    • A61B6/037Emission tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12Devices for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/467Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/469Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5229Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
    • A61B6/5247Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/56Details of data transmission or power supply, e.g. use of slip rings
    • A61B6/563Details of data transmission or power supply, e.g. use of slip rings involving image data transmission via a network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10088Magnetic resonance imaging [MRI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20128Atlas-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30016Brain

Description

本開示の実施形態は、概して医療撮像システムに関し、特に、脳深部刺激(DBS:Deep brain stimulation)を含む脳手術に含まれるが、これに限定されない医療処置をサポートするための患者固有のマルチモーダル脳高品質アトラスの生成及び使用に関する。
脳神経外科処置をガイドするための医療画像の使用は、どこでも見られる。脳は複雑な器官であり、患者の生存及び健康にとって即座に極めて重要であり、撮像技術によらずに把握することが難しい構造及び血管に満ちている。三次元撮像技法、特に利用できるようになった様々なコントラストウェイトを使用した磁気共鳴撮像技法は、脳の様々な内部特徴の区別をより容易にし、更に繊細で安全且つより効率的な処置への道を開く。しかし、現在の一連の撮像技術、特に一般的な臨床設定で利用可能な撮像技術であっても、最良の結果を保証するために医師に必要な情報を描写するには十分ではない。
視床下核(STN:subthalamic nucleus)は、視床の腹側にある脳内の小さな楕円形(レンズ形)の核である。解剖学に関して、視床下核は視床腹部の主要部分であり、大脳基底核系の部分である。多くの場合、医師が利用可能な現在の臨床撮像方法の感度制限等の問題により、パーキンソン病を治療する脳深部刺激の標的として使用されるSTN等の標的部位を示す画像を得ることは難しい。STNは、本明細書において本発明の例として使用されることが多いが、本発明は、DBSに必須の構造もあれば、他の脳処置用の構造もある他の脳構造にも同様に適用される。
患者の画像の分解能を高めるために、保存された画像又は図を使用して作成されるアトラスとして知られているモデルが照合され、患者の画像にフィッティングされる。しかし、これらのアトラスはそれら自体、制限されることが多く、患者固有ではなく、且つ/又は特定の患者に向けて適合されず、一般に、患者の脳及び特定の処置への有用なマッチングを保証するのに十分な範囲の画像タイプ及び脳の撮像を提供しない。死後サンプリングから導出されるアトラスは、場合によっては高分解能であるが、通常、一人の個人から導出され、それにより、現在評価されている患者の脳の解剖学的構造の正確な表現を反映しない。複数の脳の平均から導出されるアトラスは、特定の患者の解剖学的特徴を描写せず、したがって、正確性がより低い。
大脳基底核の皮質下領域内のSTNは、特にパーキンソン病(PD:Parkinson’s diseaes)の症状を軽減するための脳深部刺激(DBS)手術の極めて重要な標的構造である。それにより、臨床MRIプロトコルでは見つけにくいそのような小さく複雑な構造の体積分割は、PDの確実なDBS標的のための必須のプロセスである。STNの直接的な視覚化及び位置特定は、高度な高磁場7TのMR撮像を用いて促進されるが、そのような高磁場は臨床的に常に利用可能であるわけではない。STNは、良好に位置特定する必要があり、臨床設定では容易に利用可能ではない関心領域の例である。
述べたように、脳深部刺激(DBS)は、パーキンソン病(PD)、本態性振戦、及び精神疾患等の神経変性疾患を治療するために広く使用されている脳神経外科的介入である。特に、STN構造のDBSが進行したPDに重要な臨床的有効性を有することが報告されている。STN領域内であっても、わずかな配置ずれが深刻な副作用を生じさせるおそれがあるため、STN内への電極の正確な位置決めは、DBS処置の成功にとって極めて重要である。
DBS処置でのSTN位置特定に、様々な標的手法が報告されている。それらの方法の幾つかは、アトラスに基づいて交連間距離及び脳室等の解剖学的情報を参照し、STNを位置特定する。しかし、そのような間接的な汎用アトラスベースの標的手順では、STNの現在使用されているアトラスの適用性を評価するために、個々の被験者にわたるSTNの位置及びサイズのばらつきが、大きな母集団の状況で更に分析される必要がある。
最近の研究では、PD患者にわたる交連中点に基づいてSTNの位置及びサイズのばらつきを査定することにより、この問題に対処している。より確実な標的手法は、個々の被験者のMRIでのSTNの直接視覚化及び位置特定に基づく。
高磁場強度、例えば7テスラ(T)のMR撮像技法の近年の進歩により、優れたコントラスト及び高分解能のため、小さく複雑な解剖学的構造の直接識別が可能である。さらに、特に磁化率強調画像(SWI:susceptibility-weighted image)及びT2強調(T2W:T2-weighted)画像等のマルチコントラストMR画像の組合せで7T-MRIの恩恵を利用して、被験者固有の3D構造並びに大脳基底核及び視床内のそれらの構造の結び付きがモデリングされている。不都合なことに、そのような高品質視覚化は、標準の臨床的な1.5T(又は3T)のMRIプロトコルを用いて常に可能であるわけではない。位置特定に加えて、DBS標的構造の位置、寸法、及び向き等の空間情報を三次元で提供する正確な分割も、最適な電極配置にとって必須である。これは部分的に、DBS電極をSTN(PDの場合)内又は他の疾患の他の部位に不適切に位置決めすることから生じる治療有効性の低下又は副作用の潜在性による。
手動での分割は、時間がかかるとともに、部分的に、臨床の、多くの場合は低磁場のMRIプロトコルでの明確な視覚化の欠如に起因して、解剖学的主観性によって主に行われる。STN構造の解剖学的(又は半解剖学的)分割は、STN構造が、隣接構造と比較的不明確な境界を有する小さく複雑な形状であるため、今もなお問題であるが、上述したように、7T-MRIでの優れたコントラスト及び高分解能により、STN構造の位置及び形状を直接視覚化し識別することが可能である。他の脳構造も、臨床設定では位置特定が難しいという同様の特徴を有し、高品質アトラスにより促進することができる。
多くの自動分割技法の中でも、動的形状モデル(active shape model)等の統計学的形状モデルベースに分割は、医療撮像の様々な用途での有効性を示している。これらの手法は、被験者にわたる標的構造のばらつきを統計学的にモデリングし、形状モデルと被験者固有情報とを結合する基準を最小化することにより、最良フィッティングを探す。これらの分割の正確性は、実際の入力(すなわち、被験者)データの初期化及び品質に依存する。さらに、母集団にわたる脳構造の形態学的ばらつきが、統計学的形状モデルを使用して分析された。
近年の研究により、構造の異なる形状間の相関を考慮した、統計学的形状モデルを使用する回帰ベースの形状予測手法が提案されている。皮質下脳構造は、正準相関分析と部分最小二乗回帰(PLSR:partial least squares regression)とを結合することによって予測される。形状予測の幾つかの回帰モデルは、ランドマーク点での不確実性を考慮して比較され、関連する予測子を組み込んで、回帰手法の代わりに疎な観測に基づいて大腿骨及び脛骨予測を更に改善することにより、形状予測の様々な不確実性を有する統計学的形状モデルに基づく関節入力−出力分布モデルが構築された。さらに、予測された標的形状の信頼領域の推定が調べられている。これらの形状予測方法では、関心領域内の限られた情報を有するデータであっても、標的構造を推定することが可能である。
本開示は、近傍構造との空間関係を明示的に利用して、本明細書では例として使用されるSTNの位置及び形状を予測するように、上記研究を拡張する。STNと解剖学的近接性を有し、7T-MRI又は従来の1.5T/3TのMR撮像でも標準標的プロセスを使用して分割可能な皮質下構造は、STNの予測子として見なされる。本発明は、統計学的形状モデルを使用して、7T-MRデータから得られるトレーニングセットにわたるSTNの形状及び姿勢及びそれらの予測子のばらつきをモデリングする。次に、STNとその予測子との空間依存性が、PLSR法によって抽出されるが、そのような関係を利用する他の方法も同様に利用することができる。特定の被験者からの実際の7T又は1.5T-MRデータでのSTNの事前分割された予測子の形状及び姿勢を所与として、学習された空間依存性を使用してその被験者のSTNの完全な形状及び姿勢を推定する。ここでも、これは本明細書では主にSTNに関して例示されるが、この手法は他の関心部位に対しても汎用である。
STN等の大脳基底核の構成要素及び他の脳構造の形状、位置、サイズ、及び向きの高分解能自動推定及び予測の方法が開示される。本方法は、好ましくは高分解能且つ高磁場の磁気共鳴(単一コントラスト又はマルチコントラスト)画像のトレーニングセットと、個々の患者のデータセット(臨床磁気共鳴)と、場合によっては予測分析のためのCT画像との受信に基づく。
本方法はまた、トレーニングセット及び患者のセットからの情報を結合して、患者のセット内の構成要素を予測すること、大脳基底核構造又は他の関心領域、変動モード、及びその予測子をトレーニングセットから取得することを含む。さらに、本方法は、統計学的形状モデルを脳関心領域(例えば、大脳基底核構造)、変動モード、及び視床下核予測子に適用すること、部分最小二乗回帰法又は他の統計学的分析ツールを変動モード及びその予測子に適用することを含む。
加えて、本方法は、視床下核の形状及び位置と予測子の形状及び位置との関係を抽出すること、そのような関係を利用して、患者のデータでの関連する形状(例えば、視床下核、STN)及びその位置を予測すること、予測された形状及び位置を患者の臨床画像に組み込むこと、電子媒体を介して、臨床設定に組み込まれた予測を有する患者のデータを転送することを含む。
本方法の変形形態は、予測子が大脳基底核、黒核、赤核、淡蒼球内節、及び視床、又はそれらの組合せに属する場合を含む。
電子デバイスが、データセット及び患者のデータの両方に7テスラ、3テスラ、又は1.5テスラ磁石のうちの少なくとも1つを含む、請求項1に記載の方法。
本発明の関連する組では、少なくとも1つの追加の脳画像は、同じ患者の脳の画像を含む。代替的には、脳画像セット内の少なくとも1つの画像は、T1強調磁気共鳴画像を含む。幾つかの実施形態によれば、脳画像セット内の少なくとも1つの画像は、T2強調磁気共鳴画像を含む。幾つかの追加の実施形態によれば、脳画像セット内の少なくとも1つの画像は、磁化率強調磁気共鳴画像を含む。別の実施形態では、脳画像セット内の少なくとも1つの画像は、拡散強調磁気共鳴画像を含む。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、機能的磁気共鳴画像を含む。脳画像セット内の少なくとも1つの画像は、別の実施形態では、コンピュータ断層画像を含む。追加の実施形態下では、脳画像セット内の少なくとも1つの画像は、ポジトロン放出断層画像を含む。別の実施形態では、脳画像セット内の少なくとも1つの画像は、3テスラ以上の磁場強度で撮影された磁気共鳴画像を含む。別の実施形態によれば、脳画像セット内の少なくとも1つの画像は、示された脳内の動脈の血管造影画像を含む。脳画像セット内の少なくとも1つの画像は、別の実施形態によれば、示された脳内の血管の静脈造影画像を含む。
別の実施形態は、電子デバイスにより、脳画像のデータベースを保持すること、そのデータベースから少なくとも1つの追加の脳画像を検索することを含む。関連する実施形態では、データベースは、複数のモダリティ及びコントラストを含め、少なくとも2つの画像タイプに属する画像を含み、データベースから脳画像を検索することは、少なくとも2つの画像タイプのいずれが、意図される臨床目的で最良の患者固有アトラスを生成するかを判断すること、データベースからその画像タイプに属する画像を検索することを更に含む。別の実施形態では、データベースは、少なくとも2つの画像タイプに属する画像を含み、データベースから脳画像を検索することは、少なくとも2つの画像タイプのいずれが、患者脳の特定の部分の最良の患者固有アトラスを生成するかを判断すること、データベースからその画像タイプに属する画像を検索することを更に含む。別の実施形態では、データベースから脳画像を検索することは、患者脳画像に関する患者情報を保持すること、データベースに保持される各画像に関する患者情報を保持すること、患者脳画像に関する患者情報に一致する患者情報を有する画像をデータベースから検索することを更に含む。更に別の実施形態では、データベースから脳画像を検索することは、患者画像に一致する画像をデータベースにおいて見つけること、一致する画像を検索することを更に含む。別の実施形態下では、データベースから脳画像を検索することは、患者画像に一致する2つ以上画像をデータベースにおいて見つけること、一致する画像を検索することを更に含む。別の実施形態下では、データベースから脳画像を検索することは、少なくとも1つの電子デバイスにより、データベース内の特定の画像を指定する命令を受信すること、指定された画像を検索することを更に含む。
代替的には、患者固有アトラスを表示することは、患者固有アトラスにおいて関心領域を識別すること、表示されたアトラス内のその関心領域を強調することを更に含む。別の実施形態は、少なくとも2つの関心領域を識別すること、少なくとも2つの関心領域の画像を結合して、患者固有アトラスを作成することを含む。別の実施形態下では、患者固有アトラスが使用されて、外科処置をガイドする。別の実施形態は、画像を使用して、移植処置をガイドすることを含む。追加の実施形態は、移植挿入後の患者の脳を示す少なくとも1つの移植後画像を受信すること、移植後画像を複合画像とマージして、移植後患者固有複合画像を形成すること、移植後複合画像を表示することを含む。更に他の実施形態は、患者固有アトラスを使用して、患者の脳との非侵襲的エネルギー交換を含む処置をガイドすることを含む。
通常、高分解能脳画像パイプラインのシステムであって、システムは、電子デバイスと、電子デバイスで実行され、患者の脳の画像と、少なくとも1つの追加の脳画像とを含む脳画像セットを受信する脳画像検索構成要素と、電子デバイスで実行され、患者の脳画像を少なくとも1つの追加の脳画像とマージして、患者固有アトラスを生成するアトラス生成構成要素と、電子デバイスで実行され、複合画像を表示する表示構成要素とを備える。
本システム及び本方法の他の態様、実施形態、及び特徴は、添付図と併せて検討される場合、以下の詳細な説明から明らかになろう。添付図は概略を目的とし、一定の縮尺で描かれることが意図されない。図中、様々な図に示される同一又は略同一の各構成要素は、単一の番号又は表記で表される。明確にするために、あらゆる構成要素があらゆる図に記されているわけではない。また、当業者が本システム及び本方法を理解できるようにするために示される必要がない場合、システム及び方法の各実施形態のあらゆる構成要素が示されているわけではない。
高分解能脳画像パイプラインの方法が開示され、本方法は、電子デバイスにより、患者の脳の画像と、少なくとも1つの追加の脳画像とを含む脳画像セットを受信すること、電子デバイスにより、患者の脳画像を少なくとも1つの追加の脳画像とマージして、患者固有アトラスを生成すること、電子デバイスにより患者固有アトラスを表示することを含む。
関連する組の実施形態では、少なくとも1つの追加の脳画像は、同じ患者の脳の画像を含む。他の実施形態では、脳画像セット内の少なくとも1つの画像は、T1強調磁気共鳴画像を含む。幾つかの実施形態によれば、脳画像セット内の少なくとも1つの画像は、T2強調磁気共鳴画像を含む。幾つかの追加の実施形態によれば、脳画像セット内の少なくとも1つの画像は、磁化率強調磁気共鳴画像を含む。別の実施形態では、脳画像セット内の少なくとも1つの画像は、拡散強調磁気共鳴画像を含む。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、機能的磁気共鳴画像を含む。脳画像セット内の少なくとも1つの画像は、別の実施形態では、コンピュータ断層画像を含む。追加の実施形態下では、脳画像セット内の少なくとも1つの画像は、ポジトロン放出断層画像を含む。別の実施形態では、脳画像セット内の少なくとも1つの画像は、3テスラ以上の磁場強度で撮影された磁気共鳴画像を含む。別の実施形態によれば、脳画像セット内の少なくとも1つの画像は、示された脳内の動脈の血管造影画像を含む。脳画像セット内の少なくとも1つの画像は、別の実施形態によれば、示された脳内の血管の静脈造影画像を含む。
別の実施形態は、電子デバイスにより、脳画像のデータベースを保持すること、そのデータベースから少なくとも1つの追加の脳画像を検索することを含む。関連する実施形態では、データベースは、複数のモダリティ及びコントラストを含め、少なくとも2つの画像タイプに属する画像を含み、データベースから脳画像を検索することは、少なくとも2つの画像タイプのいずれが、意図される臨床目的で最良の患者固有アトラスを生成するかを判断すること、データベースからその画像タイプに属する画像を検索することを更に含む。別の実施形態では、データベースは、少なくとも2つの画像タイプに属する画像を含み、データベースから脳画像を検索することは、少なくとも2つの画像タイプのいずれが、患者脳の特定の部分の最良の患者固有アトラスを生成するかを判断すること、データベースからその画像タイプに属する画像を検索することを更に含む。別の実施形態では、データベースから脳画像を検索することは、患者脳画像に関する患者情報を保持すること、データベースに保持される各画像に関する患者情報を保持すること、患者脳画像に関する患者情報に一致する患者情報を有する画像をデータベースから検索することを更に含む。更に別の実施形態では、データベースから脳画像を検索することは、患者画像に一致する画像をデータベースにおいて見つけること、一致する画像を検索することを更に含む。別の実施形態下では、データベースから脳画像を検索することは、患者画像に一致する2つ以上画像をデータベースにおいて見つけること、一致する画像を検索することを更に含む。別の実施形態下では、データベースから脳画像を検索することは、少なくとも1つの電子デバイスにより、データベース内の特定の画像を指定する命令を受信すること、指定された画像を検索することを更に含む。
追加の実施形態によれば、患者固有アトラスを表示することは、患者固有アトラスにおいて関心領域を識別すること、表示されたアトラス内のその関心領域を強調することを更に含む。別の実施形態は、少なくとも2つの関心領域を識別すること、少なくとも2つの関心領域の画像を結合して、患者固有アトラスを作成することを含む。別の実施形態下では、患者固有アトラスが使用されて、外科処置をガイドする。別の実施形態は、画像を使用して、移植処置をガイドすることを含む。追加の実施形態は、移植挿入後の患者の脳を示す少なくとも1つの移植後画像を受信すること、移植後画像を複合画像とマージして、移植後患者固有複合画像を形成すること、移植後複合画像を表示することを含む。更に他の実施形態は、患者固有アトラスを使用して、患者の脳との非侵襲的エネルギー交換を含む処置をガイドすることを含む。
高分解能脳画像パイプラインのシステムも特許請求され、本システムは、電子デバイスと、電子デバイスで実行され、患者の脳の画像と、少なくとも1つの追加の脳画像とを含む脳画像セットを受信する脳画像検索構成要素と、電子デバイスで実行され、患者の脳画像を少なくとも1つの追加の脳画像とマージして、患者固有アトラスを生成するアトラス生成構成要素と、電子デバイスで実行され、複合画像を表示する表示構成要素とを備える。
本システム及び本方法の他の態様、実施形態、及び特徴は、添付図と併せて検討される場合、以下の詳細な説明から明らかになろう。添付図は概略を目的とし、一定の縮尺で描かれることが意図されない。図中、様々な図に示される同一又は略同一の各構成要素は、単一の番号又は表記で表される。明確にするために、あらゆる構成要素があらゆる図に記されているわけではない。また、当業者が本システム及び本方法を理解できるようにするために示される必要がない場合、システム及び方法の各実施形態のあらゆる構成要素が示されているわけではない。
先の概要並びに開示されるシステム及び方法の以下の詳細な説明は、添付図面と併せて読んだ場合によりよく理解されよう。システム及び方法を例示するために、現在好ましい実施形態が図面に示される。しかし、システムも方法も、示される厳密な構成及び手段に限定されないことを理解されたい。
高分解能脳画像パイプライン方法を示すフローチャートである。 STN(又は他の脳構造)予測の概略全体図であり、(a)高磁場(例えば、7T)テストデータでの予測の回帰プロセスであり、(b)臨床(例えば、1.5T)テストデータでの予測の回帰プロセスであり、7T及び1.5Tでの参照データが同じ被験者からスキャンされたことに留意し、(c)予測の枠組みである。 本明細書に記載されるような電子デバイスの例を示す概略図である。 本開示におけるネットワークベースのプラットフォームの概略図である。 開示されるシステムの一実施形態を示すブロック図である。 標的とされる解剖学的構造が強調された、標的取得のための患者の脳の可能な描写を示す。 標的とされる解剖学的構造が強調され、移植の経路が示された、標的取得のための患者の脳の別の可能な描写を示す。 影響を受けた解剖学的構造及び電極それ自体の位置を強調した、DBS電極の移植後の患者の脳の可能な描写を示す。 T2W-MRI(一人の被験者からの)上の手動分割された構造の3D形状を示す。(a)冠状方向でのSN及びSTNである。(b)冠状方向でのTha及びSTNである。(c)軸方向でのGPi及びSTNである。(d)軸方向でのRN及びSTNである。赤はSTN構造を表し、青、金、緑、及びグレーはSN、Tha、GPi、及びRN構造をそれぞれ表す。矢印は前方を向く。 座標空間でのトレーニングデータ1(a)〜5(e)からのRN、SN、STN、GPi、及びThaの対応する3D表面及びそのランドマーク点を示す。グレー、青、赤、緑、及び黄はRN、SN、STN、GPi、及びTha構造をそれぞれ表す。各構造の表面に沿って分散する小さな黒点は、表面ランドマーク点である。 T2W-MR撮像での1.5T及び7Tの視覚的比較を示す。(a)及び(b)は、軸方向での1.5T及び7TのMRデータでのGPe、GPi、及びTha領域をそれぞれ示す。SN、STN、及びRN領域は、(c)では軸方向平面での1.5T-MR撮像の場合が示され、(d)では軸方向平面での7T-MR撮像の場合が示される。 7T-T2W-MRトレーニングデータセットでの予測子としてSNを使用して予測されたSTNの3D構造及び慣性楕円体を手動分割されたものを重ねた状態で示す。予測されたSTNの3D形状及び対応する慣性楕円体(セントロイドを有する)は、軸方向平面((a)及び(b))並びに冠状平面((c)及び(d))においてそれぞれ示される。青は手動分割の3D形状及び慣性楕円体(セントロイドを有する、白色矢印参照)を表す。赤は予測されたSTNの3D形状及び慣性楕円体(セントロイドを有する、白色矢印参照)を表す。緑の矢印は前方を向く。この図は、本開示の実施形態の1つの性能の説明に役立つ。 RNを使用して予測されたSTN、トレーニングデータセットにわたるSTNの平均形状、及び1.5T-T2W-MRIでの手動分割STNを示す。予測されたSTN、STNの平均、及び手動分割STNの2D輪郭(青点としてのセントロイドを有する)は、左構造(a)及び右構造(b)の軸方向平面(上)、冠状平面(中央)、及び矢状平面(下)においてそれぞれ示される。予測されたSTN、STNの平均、及び手動分割STNの3D表面(c)及び慣性楕円体(セントロイドを有する、白色矢印参照)(d)は、軸方向平面においても示される。青、赤、及び白は、手動分割、予測されたSTN、及びSTNの平均をそれぞれ表す。緑の矢印は前方を向く。この図は、本開示の実施形態の1つの性能の説明に役立つ。 RNを使用して予測されたSTN、トレーニングデータセットにわたるSTNの平均形状、及び7T-T2W-MRIでの手動分割されたSTNを示す。この図は、本開示の実施形態の1つの性能の説明に役立つ。
高磁場MRI技術の近年の進歩により、PD等の運動疾患のDBS標的に重要なSTN及びGPi等の皮質下構造の生体内直接視覚化及び位置特定が可能である。三次元でのこれらの領域の視覚化は、外科DBS標的及び手術後プログラミングをより確実且つ効率的に提供する。しかし、例えば、STN領域を自動的に線引きすることは、STN領域がSN等の隣接構造間で不明確な分離を有する非常に小さく複雑であるため、難問のままである。特に、標準の低磁場臨床プロトコル下で取得される画像を使用する場合又はデータが領域内に限られた視野を有する場合、そのような直接的な方法でSTNを分割することは可能ではない。
脳処置に関連するSTN又は他の脳構造の(高分解能)自動形状予測の方法が開示され、STNは、ここで及び本明細書全体で、説明のための例として使用される。本方法は、隣接構造へのSTNの空間依存性を予測子として利用し、予測子の幾つかは、標準の臨床処置を用いて容易に位置特定される。
第1に、統計学的形状モデルは、高磁場、例えば、7T-MR撮像又は他の高磁場データから得られる1組の高品質トレーニングセットでのSTN及びその予測子の様々なモードについて開示されている。
第2に、STNとその予測子との空間関係を誘導するために、部分最小二乗回帰(PLSR)方法が開示される。そのような関係を誘導するために他の方法も使用可能であり、STNはここでは、脳外科、特に脳深部刺激の重要な部位の例として使用されている。
トレーニング時での予測正確性は、手動分割構造(例えば、STN)と予測された構造との形状類似性並びに位置、サイズ、及び向きの誤差を測定することによって評価することができる。これは、所与の関心構造の予測子の定義に使用することができる。
定義。この説明及び添付の特許請求の範囲で使用されるように、以下の用語は、文脈により別段のことが求められる場合を除き、示される意味を有するものとする。
「電子デバイス」は、パーソナルコンピュータ、ラップトップ、タブレット、スマートフォン、及び本明細書に記載される用途をサポート可能な任意の他の電子デバイスを含むものとして定義される。
デバイス又は構成要素は、製品又は手段及びデバイスを1つのマシンとして一緒に動作し得るように関連する場合、電子デバイスに「結合」される。特に、1つの電子機器は、電子デバイスに組み込まれる(例えば、スマートフォンの内蔵カメラ)場合、機器とデバイスとの間で信号を伝搬可能なワイヤによってデバイスに取り付けられる(例えば、コンピュータのポートの1つに差し込まれたワイヤによってパーソナルコンピュータに接続されたマウス)場合、信号を伝搬するワイヤの能力を置換するワイヤレス技術によってデバイスに繋がれる(例えば、モバイル電話のワイヤレスブルートゥース(BLUETOOTH)(登録商標)ヘッドセット)場合、又は複数のマシン間のワイヤレス接続及び有線接続からなる幾つかのネットワークでの共有メンバシップによって電子デバイスに関連する(例えば、コンピュータが及びプリンタをインターネットに接続することができる限り、コンピュータがどこにあるかに関係なく、オフィスに属するコンピュータに文書をプリントするそのオフィス内のプリンタ)場合、電子デバイスに結合される。
「データ入力デバイス」は、データをデバイスに入力するために使用し得るその電子デバイスに結合された全ての機器の総称である。この定義は、限定せずに、キーボード、コンピュータマウス、タッチスクリーン、デジタルカメラ、デジタルビデオカメラ、ワイヤレスアンテナ、全地球測位システムデバイス、オーディオ入力及び出力デバイス、ジャイロスコープ向きセンサ、近接センサ、コンパス、スキャナ、指紋又は網膜スキャナ等の専用読み取りデバイス、及び電磁放射、電磁場、重力、電磁力、温度、振動、又は圧力を検知可能な任意のハードウェアデバイスを含む。
電子デバイスの「手動データ入力デバイス」は、手動操作を使用してユーザがデータを電子デバイスに入力できるようにする、電子デバイスに結合される全てのデータ入力デバイスの集合である。手動入力デバイスは、限定せずに、キーボード、キーパッド、タッチスクリーン、トラックパッド、コンピュータマウス、ボタン、及び他の同様の構成要素を含む。
電子デバイスの「ディスプレイ」は、電子デバイスに結合されるデバイスであり、それにより、電子デバイスは、画像及び分析からの結果を表示することができる。ディスプレイは、限定せずに、画面、テレビデバイス、プリント資料、及びプロジェクタを含む。データを電子デバイスのメモリに「保持」することは、問題となっているアルゴリズムによって要求される検索に好都合な形態でそのデータをそのメモリに記憶すること、及び必要に応じてデータを検索、更新、又は削除することを意味する。
開示される方法は、高磁場(例えば、7T)MRトレーニングデータから得られるかなり詳細な情報を使用して、STNとその予測子−黒質(SN:substantia nigra)、赤核(RN:red nucleus)、淡蒼球内節(GPi:internal globus pallidus)、及び視床(Tha:Thalamus)との学習される空間情報を利用することにより、予測問題、特に、STNについての例に対処する。STNに高度に相関し、個々の被験者データ(7T又は臨床1.5T磁石からの)で容易に線引きすることができる近傍構造は、予測子として利用され、次に、それらの間の空間依存性が使用されて、STNの完全形状が予測される。したがって、SN、RN、GPi、及びTha構造は、STNに隣接し、7T-MR撮像で完全に可視であり、7T-MRデータにおいてSTNを予測する予測子として利用される。しかし、1.5T-MR(臨床)撮像では、SN、GPi、及びThaを識別することが難しいため、それでもなお可視であるRNが、STNの予測子として選ばれる。
提案される開示では、STN予測問題は、統計学的形状モデルと、例としてPLSR法を使用して対処される。トレーニングセットにわたる対応する表面点座標ベクトルは、STN及びその予測子を表す。STN及びその予測子の表面点座標の一般化プロクラステス分析により、姿勢パラメータが与えられ、トレーニングセットにわたり各構造を局所的に位置合わせする。次に、カーネル主成分分析が、トレーニングセットにわたるSTN及びその予測子の位置合わせされた表面点座標に対して実行されて、各形状パラメータをより低次元の空間で表す。
次に、PLSRにより、トレーニングセットにわたるSTN及びその予測子の形状パラメータと姿勢との関係が特定される。実際のデータセット(7T又は1.5TのMRI)でのSTNの予測子の形状パラメータ及び姿勢を所与として、STNの形状パラメータ及び姿勢が、学習された関係を使用して予測される。最後に、STNの完全な形状が推定され、予測形状パラメータが元の空間にマッピングされ、予測された姿勢を用いて変換する。ここで、STNは、実証例として本明細書の残りの部分で使用される。
図1は、本開示と組み合わせて使用することができる高分解能脳画像パイプライン技法100を示す。したがって、方法100は、電子デバイスにより、患者の脳の画像と、少なくとも1つの追加の脳画像(一実施形態では、同じ被験者の、別の実施形態ではデータベースからの)とを含む脳画像セットを受信すること(101)を含む。さらに、方法100は、電子デバイスにより、患者の脳画像を少なくとも1つの追加の脳画像とマージして、患者固有アトラスを生成すること(102)を含む。方法100は、電子デバイスにより患者固有アトラスを表示すること(103)も含む。
方法100は、電子デバイスにより、患者の脳の画像と、少なくとも1つの追加の脳画像とを含む脳画像セットを受信すること(101)を含む。幾つかの実施形態では、脳画像検索構成要素402がこのステップを実行する。幾つかの実施形態では、少なくとも1つの追加の脳画像は、同じ患者の脳の画像を含む。幾つかの実施形態によれば、脳画像セット内の少なくとも1つの画像は、T1強調磁気共鳴画像を含む。幾つかの実施形態では、T1強調MR画像は1×1×1mm又はそれよりも良好な分解能を有し、ここで、良好は、より高い分解能又は改善された信号対雑音比を示す。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、T2強調磁気共鳴画像を含む。幾つかの実施形態でのT2強調画像は、0.4×0.4×1mm又はそれよりも良好な分解能を有する。幾つかの追加の実施形態によれば、脳画像セット内の少なくとも1つの画像は、磁化率強調(SWI)磁気共鳴画像を含む。幾つかの実施形態でのSWIは、0.4×0.4×0.8mm又はそれよりも良好な分解能を有する。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、拡散強調磁気共鳴画像(DWI:diffusion-weighted magnetic resonance image)を含む。幾つかの実施形態でのDWI画像は、1.5×1.5×1.5mm又はそれよりも良好な分解能を有する。DWI画像は、トラクトグラフィを使用して強化して、関心のある神経経路を示すこともできる。幾つかの実施形態では、そのようなトラクトグラフィは、全データセットで行われる。幾つかの実施形態では、トラクトグラフィは関心のある領域間で行われる。幾つかの実施形態では、トラクトグラフィは、DBS電極の位置から脳全体又は特定の関心領域まで行われる。幾つかの実施形態では、DWI画像は、多数の拡散勾配軌跡を用いて撮影され、より正確なトラクトグラフィを作成する。幾つかの実施形態では、DWI画像は、55の別個の勾配軌跡を用いて撮影される。幾つかの実施形態では、DWI画像は、55を超える別個の勾配軌跡を用いて撮影される。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、機能的磁気共鳴画像(fMRI)を含む。幾つかの実施形態によるfMRIは、1.5×1.5×1.5mm又はそれよりも良好な分解能を有する。幾つかの実施形態では、上述した分解能は、MR画像を取得する際により高い強度の磁場を使用することによって達成される。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、3T以上の磁場強度を用いて撮影された磁気共鳴画像を含む。幾つかの実施形態では、磁場は約7テスラであり、6.5テスラ〜7.5テスラの範囲を有する。幾つかの実施形態では、磁場は7テスラよりも高く、例えば、磁場は11.7テスラであり得る。磁場は11.7テスラより高くてもよい。
(ここでは実証例としてSTNが使用される)予測枠組みの概観が図2に提示される。本開示は、高磁場(7T)MRI(マグネックス・サイエンティフィック(Magnex Scientific)社、英国)を使用して得られたMRIのトレーニングデータセットを使用するMRIデータ取得を提案する。データセット毎に、T2W画像及びSWIが利用されて、トレーニングセット(STN、SN、RN、及び全ての関連する構造を含む)にわたり、STNと、大脳基底核及び視床領域内の予測子としての近傍構造との手動分割を取得した。さらに、別の組の被験者も1.5T又は臨床MRI(T1W及びT2W画像)及び(検証のために同様に)7T-MRIの両方でスキャンした。7T-MRI、冠状T2W画像、及びSWIも利用して(検証のために)、STN及びその近傍構造を手動分割した。次に、7T-MR画像を同じ被験者のT1W1.5T又は臨床MRデータに位置合わせして、STNを予測し、検証した。
各7T-MRIの取得プロトコルは、i)パラメータとして、視野(FOV)=205×205×36mm、分解能0.4×0.4×2.0mm、繰り返し時間/エコー時間(TR/TE)=5000/57msec、フリップ角=120°、帯域幅=220Hz/ピクセル、位相符号化方向に沿った加速係数=2(一般化自動較正型部分的並列取得(GRAPPA:generalized auto-calibrating partially parallel acquisition))を使用した2Dターボスピンエコーシーケンスを用いてのT2W画像取得を含む。合計取得時間は、1つにつき平均約7分であった。このプロトコルを2回繰り返し、中脳の軸方向画像及び冠状画像の両方を得た。また、各7T-MRIの取得プロトコルは、ii)パラメータとして、FOV=180×180×60mm、分解能0.4×0.4×1.0mm、TR/TE=28/20msec、フリップ角15°、帯域幅=120Hz/ピクセル、位相符号化方向に沿った加速係数=2(GRAPPA)を使用した3Dフロー補償勾配エコーシーケンスを用いてのSWI取得を含む。合計取得時間約7分で1つの平均を使用した。このプロトコルも2回繰り返して、中脳の軸方向画像及び冠状画像の両方を得た。
本開示の他の実施形態と組み合わせて、他のプロトコルも同様に使用することができる。
1.5T-MRIが、以下の標準臨床プロトコルを用いて取得された。まず、i)画像パラメータとして、FOV=192×256×176mm、分解能0.98×0.98×1mm、TR=1650ms、TE=3.02ms、公称フリップ角15°、帯域幅179Hz/ピクセルを用い、シーメンス(Siemens)社のT1W-AX-T1-MPR臨床プロトコルを使用してT1W画像を取得した。また、ii)画像パラメータとして、FOV:172×230×192mm、分解能0.72×0.72×2.0mm、TR/TEは2500/249msec、フリップ角120度、帯域幅539Hz/ピクセル、及び2平均を用いて、市販のシーメンス(Siemens)社のT2W-AX-T2-3D-SPC(スピンエコー)臨床プロトコルを使用してT2W画像を取得した。
高分解能脳画像パイプライン技法。本開示のシステム及び方法は、開示される用途をサポートする電子デバイスに関するとともに、用途全般の性質に関する以下の観測に鑑みてよりよく理解することができる。例示的な電子デバイスが図3に示される。プロセッサ200は、専用又は汎用プロセッサデバイスであり得る。関連分野の当業者によって理解されるように、プロセッサデバイス200は、マルチコア/マルチプロセッサシステム内の単一のプロセッサであってもよく、そのようなシステムは単独で、又はクラスタ若しくはサーバファーム内で動作する計算デバイスのクラスタで動作し得る。プロセッサ200は、通信基盤201、例えば、バス、メッセージキュー、ネットワーク、又はマルチコアメッセージパッシング方式に接続される。
電子デバイスは、ランダムアクセスメモリ(RAM)等のメインメモリ202も含み、セカンダリメモリ203を含むこともできる。セカンダリメモリ203は、例えば、ハードディスクドライブ204、リムーバブルストレージユニット206に接続されたリムーバブルストレージドライブ若しくはインターフェース205、又は他の同様の手段を含み得る。関連分野の当業者によって理解されるように、リムーバブルストレージユニット206は、コンピュータソフトウェア及び/又はデータを記憶したコンピュータ使用可能記憶媒体を含む。セカンダリメモリ203を生成する追加の手段の例としては、プログラムカートリッジ及びカートリッジインターフェース(ビデオゲームデバイスで見られる等)、リムーバブルメモリチップ(EPROM又はPROM等)及び関連付けられたソケット、並びにソフトウェア及びデータをリムーバブルストレージユニット206からコンピュータシステムに転送できるようにする他のリムーバブルストレージユニット206及びインターフェース205が挙げられ得る。
電子デバイスは、通信インターフェース207を含むこともできる。通信インターフェース207は、ソフトウェア及びデータを電子デバイスと外部デバイスとの間で転送できるようにする。通信インターフェース207は、モデム、ネットワークインターフェース(イーサネット(Ethernet)(登録商標)カード等)、通信ポート、PCMCIAスロット及びカード、又は電子デバイスを外部デバイスに結合する他の手段を含み得る。通信インターフェース207を介して転送されるソフトウェア及びデータは、信号の形態であり得、信号は、通信インターフェース207によって受信可能な電子信号、電磁信号、光学信号、又は他の信号であり得る。これらの信号は、ワイヤ又はケーブル、光ファイバ、電話回線、セルラ電話リンク、及び無線周波数リンク又は他の通信チャネルを介して通信インターフェース207に提供し得る。本明細書で考察されるシステム実施形態の通信インターフェースは、有線又は無線213に関係なく、データ入力デバイス208、デバイスのディスプレイ210、及びネットワーク接続との電子デバイスの結合に役立つ。これらの手段のそれぞれが、デバイスそれ自体内に埋め込まれてもよく、ポートを介して取り付けられてもよく、又はブルートゥース(Bluetooth)(登録商標)等のワイヤレス技術を使用して繋がれてもよいことに留意されたい。
コンピュータプログラム(コンピュータ制御論理とも呼ばれる)は、メインメモリ202及び/又はセカンダリメモリ203に記憶される。コンピュータプログラムは、通信インターフェース207を介して受信することもできる。そのようなコンピュータプログラムは、実行されると、プロセッサデバイス200が後述するシステム実施形態を実施できるようにする。したがって、そのようなコンピュータプログラムは、システムのコントローラを表す。実施形態がソフトウェアを使用して実施される場合、ソフトウェアは、コンピュータプログラム製品に記憶し、リムーバブルストレージドライブ又はインターフェース205、ハードディスクドライブ204、又は通信インターフェース207を使用して電子デバイスにロードし得る。
電子デバイスは、デバイスがアクセス可能なデータベース212にデータを記憶することもできる。データベース212は、データの任意の構造化された集まりである。本明細書で使用される場合、データベースは「NoSQL」データストアを含むことができ、これは、既知の組のキー(例えば、アレイインデックス)を使用しての高速検索のために、アレイ等の少数のキー値構造にデータを記憶する。別の可能性は関係データベースであり、これは、データの有用なカテゴリを表すフィールドに記憶データを分割することができる。その結果、記憶されたデータ記録は、データベース212内のその既知のデータのカテゴリ内を検索することにより、その記録に記憶されたデータの任意の既知の部分を使用して素早く検索することができ、構造化クエリ言語等の言語を使用してより複雑なクエリによってアクセスすることができ、構造化クエリ言語等の言語は、パラメータとして渡される制限値と、検索されているデータの関係とに基づいてデータを検索する。幾つかのデータベースを検索するために、画像及びメタデータ照合クエリ等のより特殊なクエリの使用も可能である。データベースは任意のデジタルメモリ内に作成することができる。
関係分野の当業者は、任意のデバイスがプロセッサ200、通信基盤201、少なくともメインメモリ202、及び通常は通信インターフェース207の機能を実行する機能を必ず備えるはずであるが、全てのデバイスが必ずしもこれらの機能を別個に収容するわけではないことにも気付くであろう。例えば、上で定義されたような幾つかの形態の電子デバイスでは、プロセッサ200及びメモリ202は、ニューラルネットと同様に、同じハードウェアデバイスを通して分散することもでき、したがって、通信基盤201は、その特定のハードウェアデバイスの構成のプロパティであることができる。多くのデバイスは上述したようなタスクの物理的分割を実施するが、当業者は、物理的構成要素が融合される場合であっても規定通りにタスクの概念的分離を理解しよう。
システムは、スタンドアロン電子デバイス、ネットワーク内で一緒に機能する1組の電子デバイス、又はウェブアプリケーションを含め、幾つかの方法で展開し得る。ウェブアプリケーションをインターネット等のネットワークにわたって機能するように設計された特定の種類のコンピュータプログラムシステムとして当業者は認識しよう。ウェブアプリケーションプラットフォームの概略図は図4に提供される。ウェブアプリケーションプラットフォームは通常、少なくとも1つのクライアントデバイス300を含み、クライアントデバイス300は上述したような電子デバイスである。クライアントデバイス300は、何らかの形態のネットワーク接続を介してインターネット等のネットワーク301に接続する。ネットワーク301は、電子デバイス300、302に一緒にリンクする任意の構成であり得、限定せずに、電話、ケーブル、及び光ファイバネットワークを含むローカル及び国際有線ネットワーク、セルラ通信及びデータネットワークを含む、電磁放射の信号を使用して情報を交換するワイヤレスネットワーク、並びにそれらの有線及びワイヤレスネットワークの任意の組合せを含む。ネットワーク301には、少なくとも1つのサーバデバイス302も接続され、サーバデバイス302も上述したような電子デバイスである。当然、ウェブアプリケーションが、幾つかのサーバデバイス302及び膨大で常時変化する集団のクライアントデバイス300で実行可能であり、通常、実行されることを当業者は認識し得る。クライアントデバイス300及びサーバデバイス302の両方のコンピュータプログラムは、ウェブアプリケーション304の所要機能を実行するように両デバイスを構成する。ウェブアプリケーション304は、大量の処理タスクが、ウェブアプリケーションプログラムによってそれらのタスクを実行するように構成されたサーバデバイス302により、又は代替的にはクライアントデバイス300によって達成されるように設計することができる。しかし、ウェブアプリケーションは本質的に、各デバイスにいくらかのプログラミングを含まなくてはならない。
幾つかの態様では、本明細書に記載されるシステム及び方法では、患者固有のデジタル脳アトラスの作成が可能である。アトラスは、その組成に含まれる画像の選択により、現在の臨床状況に基づいて、患者の特定のニーズに合わせ得る。したがって、患者の大脳動脈及び大脳静脈の詳細な画像を含み、DBS電極の安全な移植を保証することができる。手術の特定の解剖学的特徴の識別及び標的をより容易にする他の画像が、含まれることもできる。様々な他の脳からの全ての種類の画像のデータベースにより、構造的及び機能的に関連する、他の患者に属する脳のポジトロン放出断層画像(PET)スキャン、機能的MRI(fMRI)スキャン、単光子放出コンピュータ断層画像(SPECT:single-photon emission computed tomography)スキャン等であるが、これらに限定されない画像を用いて患者固有アトラスを強化し、それにより、患者データを増補することが可能である。データベース画像は、患者脳の特定の画像の非可用性を補償することもできる。
図5は、開示されるシステム400の幾つかの実施形態を示す。第1の要素は少なくとも1つの電子デバイス401である。電子デバイス401は、図2及び図3を参照して上で開示した電子デバイスであり得る。電子デバイス401は、図3及び図4を参照して上で開示されたように一緒に機能する1組の電子デバイスであり得る。電子デバイスは、アプリケーション304のタスクを実行するようにプログラム又は構成される。アプリケーション304は、図3及び図4を参照して上述した1つ又は複数のコンピュータプログラムで構成され得る。アプリケーション304が実行するタスクは、脳画像検索構成要素402、アトラス生成構成要素403、及び表示構成要素404に概念的に分割し得る。それらの3つの構成要素へのタスクの編成は、実行されるタスクの分類を単に反映したものであり、システム400の特定の実装形態のアーキテクチャを指示するものではない。
脳画像検索構成要素402は、システムによって使用される二次元及び/又は三次元脳画像を取得する。幾つかの実施形態では、脳画像検索構成要素402は、画像取得システム405と通信する。画像取得システム405は、患者の脳をスキャンし、スキャンの結果を捕捉し、それらの結果をデジタル記録に変換し、そのデジタル記録を電子デバイス401等の他のデバイスに提供することにより、画像データを取得するマシンである。画像取得システム405は、脳の少なくとも一部の画像をレンダリング可能な任意のシステムであり得る。幾つかの実施形態では、画像取得システム405は磁気共鳴(MR)スキャナを含む。幾つかの実施形態では、画像取得システム405はコンピュータ断層(CT)スキャナを含む。幾つかの実施形態では、画像取得システム405はポジトロン放出断層(PET)スキャナを含む。他の実施形態では、画像取得システム405は超音波スキャナを含む。画像取得システム405は高周波超音波(HIFU:high-frequency ultrasound)スキャナを含むこともできる。画像取得システム405は光学コヒーレンス断層(OCT:optical coherence tomography)スキャナを含み得る。幾つかの実施形態では、画像取得システム405は、血管内超音波システム(IVUS:intravascular ultrasound system)を含む。他の実施形態によれば、画像取得システム405は、単光子放出コンピュータ断層画像(SPECT)システムを含む。画像取得システム405の他の実施形態は、プラナーガンマシンチグラフィシステムを含む。
脳画像検索構成要素402は、幾つかの実施形態では、電子デバイス401がアクセス可能なメモリから脳画像データを検索する。幾つかの実施形態では、脳画像検索構成要素402は、電子デバイス401がアクセス可能なデータベース213と通信する。データベース213は、上記の画像取得システム405に関連して上述した任意の種類の撮像技術及びプロトコルにより生成される画像を含み得る。データベース213は、画像取得システム405に関連して上述した画像の任意の組合せを含み得る。データベース213は、性別、年齢、及び健康記録等のメタデータを含むこともできる。
システム400はアトラス生成構成要素403も含み、この構成要素は、電子デバイス401で実行され、検索された画像全体又は検索された画像の部分を一緒に結合して、図1を参照してより詳細に後述する患者固有アトラスを作成する。
システム400は表示構成要素404も含み、この構成要素は、電子デバイス401で実行され、患者固有アトラスを表示する。表示構成要素404は、幾つかの実施形態では、電子デバイスに結合されたディスプレイ210と通信する。幾つかの実施形態では、ディスプレイ210はモニタである。幾つかの実施形態では、表示構成要素404は、ゼウス(ZEUS)(登録商標)外科システム等のコンピュータ支援外科ユーザインターフェースシステムと通信し、外科医がロボットアームを使用して外科処置を実行し、これもまた外科医の制御下にあるディスプレイ210で手術の進行を見られるようにする。幾つかの実施形態では、表示構成要素404は、外科計画に使用される臨床器具と通信する。幾つかの実施形態では、表示構成要素404は、脳深部刺激での術後プログラミングに使用されるシステムと通信する。
脳画像検索構成要素402は、幾つかの実施形態では、MR画像に加えて他の形態の画像を受信する。一実施形態によれば、脳画像セット内の少なくとも1つの画像はコンピュータ断層(CT)画像を含む。他の実施形態では、脳画像セット内の少なくとも1つの画像は、ポジトロン放出断層(PET)画像を含む。更に他の実施形態によれば、脳画像セット内の少なくとも1つの画像は、示された脳内の動脈の画像を含む。幾つかの実施形態では、動脈の画像は動脈の飛行時間磁気共鳴血管造影を含む。脳画像セット内の少なくとも1つの画像は、一実施形態によれば、示された脳内の静脈を示す。一実施形態では、静脈の画像は静脈のT2−star勾配エコー画像を含む。別の実施形態では、脳画像セット内の少なくとも1つの画像は、超音波画像である。幾つかの実施形態では、脳画像セット内の少なくとも1つの画像は、HIFU画像である。他の実施形態では、脳画像セット内の少なくとも1つの画像はOCT画像である。他の実施形態では、脳画像セット内の少なくとも1つの画像は、IVUS画像である。他の実施形態によれば、脳画像セット内の少なくとも1つの画像は、SPECT画像である。少なくとも1つの画像は、幾つかの実施形態では、プラナーガンマシンチグラフィ画像である。
幾つかの実施形態は、電子デバイスにより、脳画像のデータベースを保持すること、そのデータベースから少なくとも1つの追加の脳画像を検索することを含む。幾つかの実施形態では、データベース内の画像は上述した任意の画像を含む。幾つかの実施形態では、データベース内の画像は、画像が表す脳に従って編成される。幾つかの実施形態では、示される各脳に対応する画像は、より詳細に後述する方法に従って結合されて、三次元アトラスを形成する。幾つかの実施形態では、データベースは、少なくとも2つの画像タイプに属する画像を含み、脳画像をデータベースから検索することは、画像タイプのいずれが、意図される臨床目的で最良の患者固有アトラスを生成するかを判断すること、データベースからその画像タイプに属する画像を検索することを更に含む。「画像タイプ」は、本明細書で使用される場合、特定の撮像技法によって生成される画像のカテゴリである。例えば、1つの画像タイプはfMRI画像であり、別の画像タイプはT1強調画像である。幾つかの実施形態では、各画像タイプの部分が結合される。幾つかの実施形態では、画像タイプ全体が結合される。幾つかの実施形態では、患者の脳の画像で明確には見えない患者の脳の特定の特徴又は領域は、より詳細に後述するように、欠けた特徴又は領域を強調する可能性が高い特定の画像タイプに属するデータベースからの画像を含むように患者固有アトラスが作成される場合に最も可視である。このステップを参照して上述した全ての画像タイプは、限定なしで、高強度又は低強度磁場を用いて撮影されるT1、T2、SWI、FMRI、及びDWI画像を含め、データベースに含まれ得る。患者の脳に関して以下により詳細に記載するように、データベースに示される脳の移植後画像を含むこともできる。
幾つかの実施形態では、脳画像検索構成要素402は、患者脳画像に関する患者情報を保持し、データベースに保持される各画像に関する患者情報を保持し、患者脳画像に関する患者情報に一致する患者情報を有する画像をデータベースから検索することにより、データベースから画像を検索する。幾つかの実施形態では、患者脳画像及びデータベース画像に関する患者情報は、人口統計学的情報である。人口統計学的情報は、脳が画像にある人物の年齢であり得る。人口統計学的情報は、脳が画像にある人物の性別であり得る。幾つかの実施形態では、患者情報は、示された脳に関する測定データを含む。幾つかの実施形態では、測定データは示された脳のサイズを記述する。他の実施形態では、測定データは、示された脳の特徴の寸法を記述する。例えば、患者の脳に関して記録された患者データは、脳室の寸法を記述し得る。幾つかの実施形態では、患者情報は病歴データである。病歴データは、特定の疾患の診断を含み得る。診断された疾患は、撮像された脳の形態に影響する疾患であり得る。診断は、疾患の進行度を記述することもできる。診断は、疾患に対応する撮像された脳内の特定の特徴を記述し得る。病歴データは、治療履歴を記述することもできる。治療履歴は、治療の過程で試みられた処置を含み得る。治療履歴は、試みられた処置の結果を含むこともできる。幾つかの実施形態では、患者情報は、撮影された画像に関するデータである。データは、撮影された画像タイプを含み得、例えば、データは、所与の人物の脳が幾つかのMRタイプ及びPETスキャンを使用して撮像されたことを示し得る。データは、撮影された画像の分解能レベルを示し得る。データは、画像の取得に使用される取得パラメータを記述することもできる。
幾つかの実施形態では、照合プロセスは、患者情報の幾つかの項目を連続して探すことを含む。例えば、脳画像検索構成要素402はまず、患者と同じ年齢範囲内の人物に対応するデータベース内の全ての画像を探し、次に、患者と同じ疾患を有する人物に対応する全ての画像の結果セット内を探し得る。そして、その結果セットは、患者の脳の利用可能な画像を補足する可能性が高い画像タイプを更に探し得る。幾つかの実施形態では、探すことは、患者の画像に使用されたタイプと同じタイプのデータベース内の画像を使用することを含み、例えば、患者データが1.5テスラ(又は3テスラ)MRIを含む場合、探すことは、データベース内の一致する1.5テスラ(又は3テスラ)MRI画像を探すことに基づき得る。
データベース内の画像は、線形法及び非線形法を使用して座標系に位置合わせし得る。座標系は患者画像の座標系であり得る。座標系はデータベース画像の座標系であり得る。座標系は外科処置によって指定され得る。位置合わせは線形であり得、位置合わせプロセスが、線形変換系を使用して記述し得るマッピングに画像を位置合わせすることを意味する。線形変換は並進移動を含み得る。線形並進移動は全体画像のスケーリングを含み得る。線形並進移動は画像の回転を含み得る。線形変換は、アフィンレジストレーションを含み得る。位置合わせは非剛体であり得、一次方程式系に関して記述することができず、元画像の比率を必ずしも保存しないことを意味する。非剛体レジストレーションプロセスは、画像の異なる部分に異なる線形変換を受けさせ得、領域間を補間して、画像全体の完全性を維持する。非剛体レジストレーションプロセスは、画像を弾性変形させ得る。非剛体変換は、位置合わせされている画像内の特徴又はランドマークを他の画像の同様の特徴と並べるために使用され得る。ランドマークはユーザ提供であり得る。ランドマークは解剖学的であり得る。ランドマークは自動的に発見され得、例えば、ランドマークは、自動大脳溝検出手順によって発見され得る。位置合わせは、線形レジストレーションと非剛体レジストレーションの組合せであり得、例えば、線形レジストレーションは、まず、画像を適切な向きで座標系内に配置するために使用され得、非剛体レジストレーションが続き、画像の特定の特徴を標準位置に位置合わせし得る。線形レジストレーションは、将来の非線形レジストレーションのためにデータベースのサブセットを選択するために使用することもできる。レジストレーションはユーザガイドされ得る。幾つかの実施形態では、ユーザは、座標系内で画像を回転させるように電子デバイスに指示する。幾つかの実施形態では、ユーザは、座標系内で画像のサイズを変更するように電子デバイスに指示する。幾つかの実施形態では、ユーザは、撮像された脳の少なくとも1つの特徴を撮像された別の脳の特徴と位置合わせするように電子デバイスに指示する。位置合わせは、自動プロセス及び手動プロセスの組合せを含み得る。例えば、ある画像の位置合わせは、画像の特定の特徴を別の画像の特定の特徴に並べるように自動的に変更し得、それに続けて、ユーザは、更なる線形又は非剛体レジストレーション変更を行い、ユーザが満足するまで画像を並べるように電子デバイスに指示し得る。位置合わせは、平均二乗誤差又は相互情報等のコストを最小化するように行うことができる。位置合わせは、既存のアルゴリズム又は適合された技法を用いて実行することができる。
幾つかの実施形態では、脳画像検索構成要素402は、患者画像に一致するデータベース内の画像を見つけ、一致する画像を検索することにより、データベースから画像を検索する。幾つかの実施形態では、照合は、データベース内の同じモダリティ及びコントラストの全ての画像の中の所与のコストを最小化する、データベース内の画像によって決定される。幾つかの実施形態では、コストは関心領域のみで計算される。幾つかの実施形態では、コストは、異なるモダリティ及びコントラストについて独立して計算され、それぞれ1つに、最小化画像が選択される。幾つかの実施形態では、画像選択は線形レジストレーションに基づく。幾つかの実施形態では、画像選択は非線形レジストレーションに基づく。幾つかの実施形態では、画像選択は、線形レジストレーション及び非線形レジストレーションの組合せに基づく。幾つかの実施形態では、脳画像検索構成要素402は、患者の脳の類似特徴に一致する特徴を有する脳画像を見つける。例えば、脳画像検索構成要素402は、患者の脳内の脳室と略同じサイズ及び形状の脳室を有する画像を見つけ得る。脳画像検索構成要素402は、患者の脳内の類似特徴と略同じ幾つかの特徴を有する画像を見つけ得る。脳画像検索構成要素402は、患者情報が患者の画像の患者情報に一致する画像の先の検索の結果セット内でこの画像照合検索を実行することもできる。脳画像検索構成要素は、2つ以上の一致結果を生成することができる。幾つかの実施形態では、データベース内の同じ被験者に対応する全てのデータが、検索が照合にそのサブセットを使用した場合であっても、患者固有アトラスに使用される。幾つかの実施形態では、患者からの異なる画像がデータベースの検索に使用され得る。例えば、患者の脳のT1強調画像が、最良一致T1強調画像の検索に使用され得、一方、患者の脳のT2強調画像が、最良一致T2の検索に使用され得る。
他の実施形態では、データベースから脳画像を検索することは、少なくとも1つの電子デバイスにより、データベース内の特定の画像を指定する命令を受信すること、指定された画像を検索することを更に含む。幾つかの実施形態では、ユーザはユーザインターフェースを通して命令を入力する。ユーザインターフェースは、ユーザが、画面上でデータベースからの画像を閲覧し、患者画像と結合する画像を選択できるようにし得る。ユーザインターフェースは、ユーザが、データベースから幾つかの画像を組み合わせて閲覧し、患者画像と結合する組合せを選択できるようにし得る。ユーザは、ユーザインターフェースを使用して、患者情報照合結果セット内の画像を閲覧し得る。ユーザは、ユーザインターフェースを使用して、画像照合結果セット内の画像を閲覧し得る。ユーザは、任意の形態の手動データ入力デバイスを使用してこれらの指示を入力し得る。幾つかの実施形態では、ユーザインターフェースはカスタマイズされる。幾つかの実施形態では、ユーザインターフェースは既存の外科プラットフォームの1つである。
加えて、方法100は、電子デバイスにより、患者の脳画像を少なくとも1つの追加の脳画像とマージして、患者固有アトラスを生成すること(102)を含む。幾つかの実施形態では、患者画像及び少なくとも1つの追加の脳画像が両方とも同じ座標系に位置合わせされる場合、アトラス生成構成要素403は、同じ座標系で一方の画像を他方の画像に重ねることによって2つの画像をマージし得る。マージするプロセスは、幾つかの実施形態では、別の画像に一致するように、一方の画像の位置合わせを変更することを含む。位置合わせの変更は自動であり得る。幾つかの実施形態では、自動位置合わせ変更は、2つの画像間の向きの差を検出することと、一方の画像を線形変換させて、画像を回転させることとを含む。幾つかの実施形態では、自動位置合わせ変更は、2つの画像間のスケールの差を検出することと、一方の画像を線形変換させて、画像をスケーリングすることを含む。幾つかの実施形態では、自動位置合わせ変更は、2つの画像間のサイズ差を検出することと、一方の画像を線形変換させて、画像をスケーリングすることとを含む。幾つかの実施形態では、自動位置合わせ変更は、2つの画像間の分解能差を検出することと、一方の画像を線形変換させて、画像をスケーリングすることとを含む。幾つかの実施形態では、自動位置合わせ変更は、2つの画像間の位置差を検出することと、一方の画像を線形変換させて、画像を移動させることとを含む。他の実施形態では、自動位置合わせ変更は、2つの画像間の向きの差を検出することと、一方の画像を非剛体変換させて、他方の画像に合わせることとを含む。非剛体変換は、両画像に存在する少なくとも1つの解剖学的特徴の検出及び一致によりガイドし得る。
位置合わせ変更は手動であり得る。幾つかの実施形態では、ユーザは、座標系内で画像を回転させるように電子デバイスに指示する。幾つかの実施形態では、ユーザは、座標系内で画像のサイズを変更するように電子デバイスに指示する。幾つかの実施形態では、ユーザは、撮像された脳の少なくとも1つの特徴を撮像された別の脳の特徴と位置合わせするように電子デバイスに指示する。位置合わせ変更は、自動プロセス及び手動プロセスの組合せを含み得る。例えば、一方の画像の位置合わせは、画像の特定の特徴が別の画像の特定の特徴と並ぶように自動的に変更し得、それに続き、ユーザは、更なる線形又は非剛体レジストレーション変更を行い、ユーザが満足するまで画像を並べるように、電子デバイスに指示し得る。ユーザは、任意の形態の手動データ入力デバイスを使用してこれらの指示を入力し得る。
幾つかの実施形態では、アトラス生成構成要素403は、示された脳の特定の特徴を識別する。幾つかの実施形態では、アトラス生成構成要素は、識別された特徴又は領域に対応する1組のボクセルを記録し、その情報を患者固有アトラス又は患者固有臨床画像に組み込む。幾つかの実施形態では、アトラス生成構成要素403は、脳画像セット内の少なくとも1つを選択し、少なくとも1つの選択された画像内の関心領域を識別し、関心領域を除く全ての画像データを少なくとも1つの選択された画像から除去することにより、患者固有データを増補する。例えば、アトラス生成構成要素403は、データベースからの画像を患者画像に位置合わせした後、STN又は関連する形状以外の全てをデータベース画像からなくし、そうして変更された画像のみを患者画像と結合して、患者固有アトラスを生成し得る。図6は、脳の特定の構造を強調することによって作成された画像を示す。表示された画像内の脳の大半は、関心領域の背後及び下の2つの断面平面図501に制限される。三次元でレンダリングされるのは関心部位であり、関心部位はSTN502、尾状核503、及び被殻504を含む。脳の三次元構造の残りはこの画像では見えないため、関心部位は、画像の視角から明確に見える。
再び図1を参照すると、方法100は、電子デバイスにより、患者固有アトラスを表示すること(103)も含む。幾つかの実施形態では、表示構成要素404は、示された脳の特定の角度からのビューをシミュレートするように、電子デバイス401が利用可能な二次元ディスプレイに患者固有アトラスを投射する。幾つかの実施形態によれば、表示構成要素404は、患者固有アトラス内の関心領域を識別し、図6に示されるように、表示されたアトラスにおいてその関心領域を強調する。幾つかの実施形態では、投射は、示された脳内の特定の構造のビューを提供し、例えば、図6によって表される二次元投射は、関心形状の例として、STN502の特定の角度からのビューを提供する。幾つかの実施形態では、投射は、示された脳内の2つ以上の構造のビューを提供する。幾つかの実施形態では、示された各解剖学的特徴は、異なる色で表示されて、示された他の解剖学的特徴(図示せず)から区別される。例えば、STN502又は特定の関心形状は、黄色で表示され得、一方、尾状核503はターコイズ又は施術者に有用な任意の色で表示され得る。幾つかの実施形態では、ユーザは、投射によって示される視角を変更するように、表示構成要素404に指示する命令を入力することができる。幾つかの実施形態では、表示構成要素404は、特定の解剖学的特徴を表示するように指示する命令を受信する。幾つかの実施形態では、表示構成要素404は、特定の解剖学的特徴を特定の色で描写するように指示する命令を受信する。幾つかの実施形態では、表示構成要素404は、外科標的を表示する。外科標的は、周囲と対比するために別個の色で表示され得る。幾つかの実施形態では、表示構成要素404は、外科標的への経路を表示する。幾つかの実施形態では、経路は、血管の破損を避けるように計算される。幾つかの実施形態では、経路は、神経構造を避けるように計算される。
方法の幾つかの実施形態は、医療処置の標的を見つけることを含む。例として、図6のSTN502の描写は、医療処置でSTN502を標的とするために使用される1つのビューであり得る。幾つかの実施形態では、処置は外科処置である。幾つかの実施形態では、表示構成要素404は、処置前に、外科処置の標的を表示する。幾つかの実施形態では、表示構成要素404は、処置前に、標的に到達するために辿る外科処置の経路を表示する。例えば、図7の画像は、DBS電極挿入の解剖学的標的601と、辿るべき電極挿入の挿入経路602とを示す。表示構成要素404は、幾つかの実施形態では、手術中の標的の更新画像を定期的に表示する。幾つかの実施形態では、表示構成要素404は、手術中の経路の更新画像を定期的に表示する。幾つかの実施形態では、表示構成要素404は、手術中の標的の更新画像を連続表示する。幾つかの実施形態では、表示構成要素404は、手術中の経路の更新画像を連続表示する。幾つかの実施形態では、表示構成要素404は、内視鏡処置で使用される内視鏡画像を補足する画像を表示する。幾つかの実施形態では、表示構成要素404は、腹腔鏡手術を支援する画像を表示する。幾つかの実施形態では、表示構成要素404は、血管内画像誘導処置を支援する画像を生成する。表示構成要素404は、幾つかの実施形態では、ロボット手術を誘導する画像を提供する。幾つかの実施形態では、ロボット手術は、外科医が、外科ツールを直接制御する電子デバイスに結合されたデータ入力デバイスを操作することにより、幾つかの外科ツールを間接的に制御する処置である。幾つかの実施形態では、ロボット手術は、手術部位及び周囲の解剖学的構造で何が行われているかを外科医に示す表示を組み込む。
処置は、物質を患者の脳内に移植することを含み得る。幾つかの実施形態では、患者の脳内に移植される物質は生体組織である。幾つかの実施形態では、患者の脳内に移植される物質は1つ又は複数の生体細胞を含む。幾つかの実施形態では、患者の脳内に移植される物質は遺伝子材料である。遺伝子材料は、患者の脳内の細胞に直接配置し得る。遺伝子材料は、仲介エージェントにより患者の脳に送達され得る。仲介エージェントはマシンであり得る。仲介エージェントは、「ナノボット」等の小型ロボットデバイスであり得る。仲介エージェントは自律的に機能し得る。仲介エージェントは生物であり得る。仲介エージェントは原核単細胞生物であり得る。仲介エージェントはウィルスであり得る。仲介エージェントは真核単細胞生物であり得る。仲介エージェントは多細胞生物であり得る。仲介エージェントは化合物であり得る。仲介エージェントはタンパク質であり得る。仲介エージェントは、1組のタンパク質である。幾つかの実施形態では、移植処置は、幹細胞を挿入する処置である。幾つかの実施形態では、処置は、移植物を患者の脳内に配置することを含み得る。幾つかの実施形態では、表示構成要素404は、移植前に、患者の脳内の移植標的を示す画像を生成する。幾つかの実施形態では、表示構成要素404は、移植前に患者の脳内の移植経路を示す画像を生成する。幾つかの実施形態では、表示構成要素404は、移植中、移植標的の更新画像を定期的に表示する。幾つかの実施形態では、表示構成要素404は、移植中、移植経路の更新画像を定期的に表示する。幾つかの実施形態では、表示構成要素404は、移植中、移植標的の更新画像を連続表示する。幾つかの実施形態では、表示構成要素404は、移植中、移植経理の更新画像を連続表示する。幾つかの実施形態では、移植処置は、DBS電極及びリードを挿入する処置である。
幾つかの実施形態では、方法は、移植の挿入後の患者の脳を示す少なくとも1つの移植後画像を受信することと、移植後画像を患者固有構築アトラスとマージして、移植後複合画像を形成することと、移植後複合画像を表示することとを更に含む。移植は、脳内に完全又は部分的に挿入される任意の異物であり得る。移植物は、限定せずに、DBS電極、DBSリード、マイクロチップ、ニューロンと相互作用する電極、無線周波数送信器、無線周波数受信器、感覚代行用の神経移植、及び脳幹人工内耳を含み得る。移植後画像はCT画像であり得る。移植後画像は、図4を参照して上述したような任意の他の医療画像であり得る。幾つかの実施形態では、アトラス生成構成要素403は、ステップ102を参照して上述した技法を使用して、移植後画像を患者固有アトラスと結合する。幾つかの実施形態では、アトラス生成構成要素403は、移植後画像を任意の移植前患者データと位置合わせすることにより、結合画像を作成する。幾つかの実施形態では、アトラス生成構成要素403は、移植後画像を対応する患者固有アトラスと位置合わせすることにより、結合画像を作成し、そのような結合を行う。幾つかの実施形態では、表示される電極位置は、移植の再位置決めする作業をガイドするために使用される。幾つかの実施形態では、リアルタイムCT撮像は患者固有アトラスと結合されて、移植物の初期挿入及び再位置決めをガイドする。幾つかの実施形態では、表示される電極位置は、DBSの最適恩恵に最も関連する電極の1つ又は複数の接点を決定するような電極のプログラムの支援に使用される。図8は、一実施形態により生成することができる結合画像を示し、DBS電極701及びリード702の捕捉位置が、電極701が移植された患者のSTNの画像(又はアトラスからの対応する画像)703に重ねられる。
幾つかの実施形態では、表示構成要素404は、移植のない状態の患者の脳と共に、エネルギーを交換する処置の標的を表示する。幾つかの実施形態では、表示構成要素404は放射線治療の標的を表示し、例えば、表示構成要素404は、放射線治療の標的の主要を表示し得る。幾つかの実施形態では、表示構成要素404は放射線手術の標的を表示する。放射線手術は、少数の別個の放射線量の放射線を定位的に患者の脳内の特定の標的に集束させることを含み得る。幾つかの実施形態では、表示構成要素404は、集束超音波手術の標的を表示する。集束超音波手術は、幾つかの実施形態では、高強度集束超音波ビームを使用して、標的組織を破壊する。
開示されるシステム及び方法の実施形態は、神経外科医が、はるかに洗練され正確な手術及びDBS移植処置に従事できるようにする。特に、血管及び重要な神経構造を回避する能力並びにDBS移植のより正確な初期標的及び経路を選択する能力は、DBS移植に必要な時間及び合併症率を低減する潜在性を有する。開示されるシステム及び方法は、ロボット手術等の自動処置に従事する能力を強化する。そのような状況では、患者固有アトラスは、ロボットシステムに標的及び全侵入経路を指示し得る。遠隔手術もより高品質でより柔軟な撮像技法の使用から恩恵を受ける。白質等の撮像が難しい組織の描写を改善する能力により、神経外科医は従来は届かなかった組織を標的とすることができる。
[STN位置予測方法]
事前処理。大脳基底核及び視床領域内の皮質下構造−SN、赤核(RN)、淡蒼球内節(GPi)、及び視床(Tha)は、STNへの隣接性及び分割するための可視性を考慮して、7T-MRIでのSTNの潜在的な予測子として選ばれる。1.5T(又は臨床)MRIデータでは、唯一検出可能なRN構造が、STNの予測子として使用される(その他の構造は、典型的な臨床撮像で識別することは難しいことがあり、識別可能な場合には使用することができる)。
高磁場(7T)MRトレーニングデータセット上のSN、STN、RN、GPi、及びThaの左側及び右側は、被験者固有分析パイプラインに従ってコンピュータプログラム又は解剖学専門家によって手動分割される。7T-MRIデータセットの軸方向及び冠状T2W内のSN、STN、RN、GPi、及びThaの3D分割は、図9のアミラ(Amira)ソフトウェア(マーキュリーコンピュータシステム(Mercury Computer System)社)を用いて3D視覚化され、このステップにおいて、市販又は組織内のGUI及び視覚化ツールが使用可能である。GPi、RN、及びThaはここでは、高分解能SWI及びT2Wの軸方向で分割されたため、SN及びSTNは、高分解能SWI及びT2Wの冠状方向において分割されたが、各データセット上のSN及びSTNはまず、FSL-FLIRT(FMRIBの線形画像レジストレーションツール)を使用して軸方向SWIに位置合わせされ、全ての構造を共通座標空間に変換する。この位置合わせに他の市販又は組織内のソフトウェアパッケージが使用可能であり、位置合わせに他の方向が使用可能である。
臨床(1.5T)MRデータセットでの予測テスト及び検証のために、RN及びSTNは手動で、対応する7T-MRデータセットで取得され、FSL-FLIRT(ここでも、他の位置合わせ技法が使用可能である)を使用して軸方向T2Wデータに位置合わせされた冠状SWI及びT2Wの組合せ上で分割された。次に、位置合わせされたRN及びSTN構造は、7Tでの軸方向T2Wを1.5Tでの軸方向T1Wに位置合わせすることにより得られる変換行列を使用して、1.5TでのT1Wデータに位置合わせされ、7T-MRI及び1.5T-MRIでは同じ位置合わせプロトコルを用いた。7T-MRI撮像が利用可能ではない実際の臨床の場合、RN構造は、1.5T-MRテストデータで取得した軸方向T2W上で自動的又は手動で分割し、次に、一対の対応する7T-MR画像を有する1.5T参照データに位置合わせすることができる(図2(b)参照)。
テストデータでの予測子と7T-MRトレーニングデータでの予測子との間での姿勢の変動(例えば、スキャン中の患者の異なる位置及び向き並びに異なるMRモダリティ又は磁場間での分解能不一致)が、不正確な予測結果を生じさせるおそれがあるため、高磁場(7T)で得られた各トレーニングセットのSTN及び予測子が、テストデータ(7T又は1.5T)と同じ座標空間に正規化される必要があることに留意されたい。そのために、相互情報(MI)類似性尺度を用いるアフィン線形レジストレーションを使用して、7T-MRトレーニングセットの座標空間及び位置合わせされた軸方向T2W画像を7T-MRテストデータの軸方向T2W画像に正規化した。次に、7T-MRトレーニングセット上のSTN及び予測子は、7T-MRトレーニングセットとテストセットとの間で得られた変換行列(M_(i,7T))を使用して、7T-MRテストデータに位置合わせされた(図2(a)参照)。
さらに、1.5T-MRIでの予測の場合、7T-MRトレーニングデータのSTN及びRN(7T-MRテストデータ上に位置合わせされた)並びに7T-MRテストデータで手動分割されたSTN及びRNは、7Tでの軸方向T2Wと1.5T-MRテストセットでのT1W画像との間での既存の変換行列を使用して、1.5TでのT1Wテスト画像に位置合わせされる。特に、1.5T-MRテストデータの7Tの対応する対が利用可能ではない場合、一対の7T及び1.5T-MR参照データが利用される。図2(b)に示されるように、7T-MRトレーニングデータのSTN及びRNは、ANNTS又は任意の他のパッケージ(市販又は組織内)を使用して、変換行列(M_(i,7T))を用いて7T-MR参照データに位置合わせされ、次に、2つのデータ間の変換行列(M_(7T→1.5T))によって対応する1.5T-MR参照データに位置合わせされる。したがって、変換行列(M_1.5T)を使用して1.5T-MR参照データに位置合わせされた、1.5T-MRテストデータからのSTN及びRN(7T-MR画像の対応する対を有さない)は、1.5T-MR参照データに位置合わせされた7T-MRトレーニングセットのSTN及びRNと同じ座標空間に正規化され位置合わせされる。
[統計学的形状モデル]
統計学的形状モデルは、トレーニング形状セットから解剖学的構造の形状のばらつきについての事前情報を利用できるようにする。一般的な統計学的形状モデルは点分布モデル(PDM:point distributioon model)に基づき、PDMは、表面に沿って分布する1組のランドマーク点(すなわち、メッシュ内の頂点)によって形状を表し、形状のばらつきをモデリングする。特に、トレーニング形状のランドマーク点の中の対応性が、各形状のばらつきを捕捉し、形状予測の回帰モデルを構築するために必要とされる。最小記述長(MDL:minimum description length)ベースの手法が、有効な形状対応性方法として認識されている。トレーニング形状セットにわたるそのようなランドマークを対応して得るために、MDLベースの方法を採用し、この方法はまず、トレーニング形状への球形メッシュパラメータ化の等角写像によってランドマークを生成し、次に、勾配降下アルゴリズムを適用することによって対応性を最適化する。5つの7T-MRトレーニングセットにわたるSN、STN、RN、GPi、及びTha(これらの重要な構造を本発明の例として使用することを想起し、本技法は他の領域にも同様に適用される)の3D形状及び表面に沿って分布したランドマーク点は対応して、図10に示されている。
本発明の予測枠組みでは、N個のトレーニングセットでのn_“x”ランドマーク点の集合を有するSTN、およびn_“y”ランドマーク点の集合を有するSTNの予測子の三次元形状は、
として表される。
また、本明細書ではSTN(ここでは、予測する形状の例として使用される)の予測子の形状及び実際のデータでの予測STNを、それぞれ以下のベクトル、
として示す。
トレーニングデータセットを実際のデータに位置合わせすると、トレーニングセット及び実際のデータ上のSTNの予測子は位置合わせされ、それにより、それらの間の姿勢のばらつきを低減することができる(図2(a)及び(b))。さらに、トレーニングセット及び実際のデータ上の予測子の表面ランドマーク点を大域的に位置合わせして、STNをより確実に予測することができる。
トレーニングセットにおけるSTN及び予測子の形状パラメータ及び姿勢、並びに実際のデータでの予測子は、位置合わせされた表面ランドマーク点から得られ、以下に詳述するように、より低次元の空間での空間関係を抽出する。
ここでは、例として、PCAの非線形拡張であるカーネルPCA(KPCA)を利用し、トレーニング形状間の非線形関係を考慮することによって予測潜在性を高める。
特徴空間F内の線形PCAは、固有値問題Cv=λvを解くことを含み、式中、v∈F\{0}は固有ベクトルであり、λは共分散行列Cの非ゼロ固有値である。共分散行列Cを固有値問題に代入すると、以下が得られる。
次に、等価固有値問題が、
として考慮される。
特徴空間Fの次元が無限である場合、共分散行列Cでの固有値問題は解くことができない。カーネル法により、φ写像を明示的に計算せずに、特徴空間内の主成分を得ることができる(「カーネルトリック」)。
ここで、STN形状パラメータβy(p)が、本発明の予測の枠組みにおいてトレーニングセットにおける{βi x}と{βi y}との関係を使用して実際のデータでのβx(p)から予測されると仮定し、かつ、STNの姿勢パラメータγy(p)も、トレーニングセットにおける{γi x}と{γi y}との関係を使用して実際のデータでのγx(p)から予測されると仮定する。
次に、開示される方法は、実際の臨床データでの予測子の形状及び姿勢からSTN(又は他の関心のある脳構造)の形状及び姿勢の予測問題に注目し、これは、次の項に記載される回帰モデルを使用して、トレーニングセットにわたる形状パラメータと姿勢との関係を調べることによって行われる。
[部分最小二乗回帰ベースの形状予測]
本開示の方法は、STN(又は予測する形状/領域)の形状パラメータ及び姿勢と、トレーニングセットでの予測子の形状パラメータ及び姿勢との依存性を見つける回帰問題に更に対処する。形状予測は劣決定(すなわち、低サンプルサイズ及び高次元問題)であるため、バイアス線形回帰が好ましいが、他の予測ツールも同様に使用可能である。
本開示の方法は、可能な一実施形態において、トレーニングデータ、特に劣決定系でのベクトル集合間に高い相関を有する多重共線性問題であっても広く適用されているPLSR技法の利用を提案する。PLSRは、多重線形回帰を拡張し、予測子の集合X内の主因子(すなわち、潜在ベクトル)を見つけて、共分散が最大であるような応答ベクトルの集合Yを予測する。
予測子が複数の構造からなる場合、各予測子の姿勢及び形状パラメータを抽出し、複数の予測子の姿勢及び形状パラメータベクトルをそれぞれ連結し、予測の枠組みにおいて各予測子の姿勢及び形状についての局所情報を利用する。
PLSRは、潜在行列T及びFを見つけることによってX及びYを分解する。ここで、Fは、X=TPT、Y=FGTとすると、F=TB+ε…(16)であり、式中、PはXの負荷行列であり、GはYの重み行列であり、Bは回帰重みの対角行列であり、εは回帰誤差である。潜在行列T及びFの潜在ベクトルt及びfはそれぞれX及びYの列の線形結合が最大共分散を有するような2つの重みベクトルw及びgを見つけることによって次式、
t=Xw,f=Yg、但し、wTw=1,tTt=1…(17)
によって得られ、X及びYの列の線形結合が最大共分散を有することはtTfが最大であることを意味する。
特に、非線形反復部分最小二乗法によって、w及びgは反復更新され、次に、得られた潜在ベクトルt及びfはX及びYからそれぞれ減算される。反復は、Xがヌル行列になるまで続けられる。
[STNの予測子としての近傍構造]
形状及び姿勢を予測する枠組みが、開示される方法について導出されている。予測方法によって使用される実際の形状について以下に更に開示する。
回帰ベースのモデルでの予測正確性は、STNと予測子構造との相関の程度による影響を受ける。近年の研究では、隣接する脳構造対が高度に相関することが報告されている。皮質下構造内のSTNの予測子は、STNとの空間隣接性と、特定の被験者からの実際のMRデータ(1.5T/3T又は7T)での可視性(容易に検出可能)とを考慮することによって導入される。
STNは、後外側領域における運動領域(例えば、パーキンソン病でのDBS手術の標的部位として)と、前内側領域の辺縁領域とに分割される小さく概して凸形の構造であり、幾つかの皮質下領域−不確帯、内側毛帯、エディンガー・ウェストファル核、内包、SN、RN、GPi、及びThaによって囲まれている。
高磁場(7T)MRデータでの優れたコントラスト及び高分解能は、大脳基底核及び視床、特にSTN及びその隣接構造内の皮質下構造を直接視覚化し識別することを可能にしたが、STNの自動位置特定はそれでもなお問題である。さらに、皮質下構造の体積モデルは、7T磁石で取得されるSWI及びTW画像のマルチコントラストを利用し、それにより、構造の空間情報−位置、次元、及び向きを提供することによって構築されている。
図9は、軸方向又は冠状TW-7T-MRI(本開示に使用されたこの緩急での被験者の一人からの)での手動分割されたSTN及び隣接構造、即ち、SN、Tha、GPi、及びRNの3D構造を示す。SN、Tha、GPi、及びRNが、STNと解剖学的近接性を有し、高磁場(7T)MRデータ上のSTNの他の近傍構造よりも線引きがより実現可能であることに留意されたい。他の関心のある構造についても、同様の関係が利用可能である。したがって、本発明では、STNの潜在的な予測子としてSN、Tha、GPi、及びRNを考え、空間関係を誘導するためのトレーニングセットとして、7T-MRデータで得られたSTN及び予測子の3Dモデル(この場合では手動分割であるが、自動又は半自動も同様に使用可能である)を利用する。実際の7T-MRデータ(別の被験者から)での分割されたSN、Tha、GPi、RN、又はそれら全てを所与として、前項で紹介した技法に従い、7T-MR上の予測子からSTNを自動的に予測することができる。それにもかかわらず、7T-MRデータは、臨床での使用に広く利用可能ではないことがあるため、従来のMRデータ(1.5T)でのSTN予測を更に考慮する必要がある。
図11は、1.5T及び7T-MR撮像をそれぞれ用いて得られた軸方向TW画像でのSN、STN、Tha、GP、及びRN領域を示す。軸方向TW-7T-MRデータは、比較のためにTW-1.5T-MRデータに位置合わせされた。
1.5T(臨床)MR撮像でのSN、GP領域内のGPi、及びThaから、それらの領域内の強度が低くSNRが低いことに起因して、STNを識別することが難しく、一方、7T-MR撮像はそれらの領域に明確な視覚化を提供することに気付く。また、RN領域は、1.5T-MR撮像よりも7T-MR撮像でより明確に示されている。しかし、RNが1.5T-MR撮像において他の構造よりも識別が容易であることに留意する。さらに、幾つかの研究は、DBS中にSTN内に電極を移植するためのガイダンスとしてRN(例えば、RNへのSTNの相対位置)を利用している。その結果、1.5T-MRデータでは、RN構造が程々に可視であり、且つSTNの近傍にあるため、STNの自動予測子としてRN構造を選ぶ。次に、実際の1.5T-MRデータでのSTNが、7T-MRトレーニングデータで誘導された空間関係を利用することにより、同じデータで得られたRNから自動的に予測される。
[実験検証]及び[予測測定]
本開示で紹介される特定の実施形態の幾つかの価値を強調するために、これより、例示の形態で、上で説明され例示した実装形態を使用して得た実験結果の幾つかを説明する。
予測正確性が、ダイス係数(DC:Dice Coefficient)形状類似性、表面ランドマーク点間の平均距離、並びに予測STNとグラウンドトルース(すなわち、手動分割STN)との間でのセントロイド、寸法、及び向きの誤差によって測定される。DC値は、2(V∩V)/(V+V)による形状の類似性測定として計算され、ここで、V及びVは比較されている構造A及びBの各体積である。
さらに、予測STN(すなわち、STNの予測表面ランドマーク点から再構築された3D形状)及び手動分割それぞれの慣性楕円体の冠状、矢状、及び軸方向でのセントロイドg=(gcor,gsag,gaxi)、3つの半短径(半径)の長さl=(lx,ly,lz)、及び方位角o=(φ,θ,ψ)を計算して、幾何学的形状情報の類似性を分析する。より具体的には、gは、ランドマーク点の各座標の平均として計算される。lは、ny中心化ランドマーク点に対してPCAを実行することによって得られる最初の3つの最大固有値から計算される。oは、対応する固有ベクトルからなる回転行列からオイラー角を計算して得られる。
[予測子の評価]
本開示の方法のSTNの予測が、7T-MRからの各構造−SN、RN、GPi、又はTha−を使用して実行され、そのような予測子の予測性能を評価した。各データセットでの構造のトレーニングセットは、1個抜き(leave-one-out)法を使用して構築される。例えば、データセット1のトレーニングセットは、データセット1からの構造を除いたデータセット2、3、4、及び5からの各構造のランドマーク点ベクトルからなる。ここで5つのセットが例示のために使用されるが、本開示の構成要素は任意の数のトレーニングデータセットに適用される。
図12では、5つのデータセットの1つでの予測子としてSN及びRN構造をそれぞれ使用することによって予測されたSTNの対応するセントロイドを有する3D形状及び慣性楕円体が示され、対応する手動分割のものが重ねられている。データセットでの予測STNのセントロイド、寸法、及び向きがなお手動分割と同等であり、形状がその他のデータセットよりもわずかに正確であることが認められる。
[1.5T-MRデータセットでの予測結果]
高磁場(7T)MR撮像は、優れたコントラスト及びより高い分解能に起因して、STNの視覚化に成功し、隣接構造SNを分離した。しかし、7T-MRデータは、標準の臨床用途に常に利用可能であるとは限らない。したがって、従来の臨床1.5T(又は3T)データでのSTN予測は、DBS標的及び手術後プログラミングについて極めて重要な情報を提供することができる。4つの(説明のための例として)1.5T-MRデータセットでのSTNの予測は、臨床1.5T-MRIで可視のRN構造のみを使用して実行した。この比較のために、対応する(同じ被験者の)7T-MRデータセットでのRNを使用して得られた予測結果と、1.5T及び7T-MRテストセットの両方に位置合わせされたトレーニングデータセットにわたるSTNの形状の平均とを提示する。
さらに、測定パラメータは、1.5T及び7TのMRデータセットにわたるRNへのSTNの相対位置を分析するために、予測STN、STNの平均形状、及び手動分割STNのセントロイドのそれぞれとRNとの間の距離を含む。なお、本発明での予測枠組みにおいて、RNとSTNとの空間関係を利用した。複数の脳構造間のそのような相対姿勢は、神経変性疾患の診断についての有用情報を提供し得る。さらに、RNは、近年の研究において、STNのDBS標的の参照として利用されている。
予測STNが、1.5T及び7TのMRデータセットにわたり両側でRNのセントロイドの5mm〜8mm前方、3.9mm〜6.7mm側方、且つ0.7mm〜3.5mm上側(特に、手動分割STNでは、4mm〜7.4mm前方、5.2mm〜7.5mm側方、及び0.2mm〜4.2mm上側)に位置したことが観測された。1.5T-MRデータセットでのRNへの予測STN、STNの平均形状、及び手動分割STNの相対位置は、7T-MRデータセットでのものと同様であった。また、1.5T及び7TのMRデータセットの両方で、RNへの予測STNの全体相対位置が、RNへのSTNの平均形状のものよりも、RNへの手動分割STNのものにより近かった。
STNの予測結果、平均形状、及び手動分割の実際の寸法(mm)での体積も測定した。1.5T及び7TのMRデータセットでの手動分割の体積は、2つのデータセット間の異なる体積はDC類似値の不正確な比較に繋がるおそれがあるため、同様であるはずである。1.5Tでの手動分割STNの平均体積は、7T-MRデータセットでのものよりも17mm(左)大きく、11mm(右)大きい(1.5T-MRデータへの7T-MRデータの位置合わせ後の再サンプリングアーチファクトの閾値処理により、2つのデータセット間の体積差を生じさせることがある)。予測STN及び平均形状の平均体積は、1.5T及び7TのMRデータセットの両方で、手動分割STNのものよりも大きい。また、7T-MRデータセットでの予測STNの左側の平均体積が、1.5T-MRデータセットのものよりも14mm大きいことも認められた。これは、類似性測定にも拘わらず、1.5T-MRデータセットでの予測STNの左側のDC値が、7T-MRデータセットでのものよりも7%高かったかの理由を説明する。換言すれば、7T-MRデータセットでの左STNの手動分割と予測との体積差は、1.5T-MRデータセットでのものよりも大きかった(すなわち、7Tでの60mm及び1.5T-MRデータセットでの30mm)。両MRデータセットでの予測STNの体積は、STNの平均形状のものと同様であった。データセットが、サイズ及び多様性(例えば、コントラスト)の両方の点で大きいほど、強力な予測が予期される。
1.5T-MR及び7T-MRのデータセットからの全体予測結果は、臨床で実現可能な測定値に完全に基づいて、トレーニングデータセットにわたりSTNの平均形状よりも手動分割STNにはるかに近く、開示される枠組み及び本発明の予測力を証明する。これは、臨床MRIから、開示される発明を使用して、神経外科のために重要構造をいかに位置特定することができるかを明らかに示す。
図13及び図14は、特定の被験者からの1.5T-MRデータセット及び7T-MRデータセットのそれぞれでの3つの直交する平面でのRN構造を使用することによって予測されたSTN、手動分割STN、及びトレーニングデータセットにわたるSTNの平均の輪郭、3D形状、及びセントロイドを有する対応する慣性楕円体を示す。また、冠状、矢状、及び軸方向での手動分割STNのものと比較した、予測STN及びSTNの平均形状のセントロイド位置も提供する。次に、RNへのSTNのセントロイドの相対位置を測定する。
さらに、1.5T-MRデータセットでの予測結果は、1.5T-MRデータセットに位置合わせされたトレーニングセットにわたるSTNの平均形状よりもはるかに良好であり、一方、7T-MRデータセットでの予測結果は、この7T-MRデータセットに位置合わせされたトレーニングセットにわたるSTNの平均形状と同様であった。特に、1.5T-MRデータセットでの右STNの予測結果が、7T-MRデータセットでのものよりも手動分割に近かったが、1.5T-MRデータセットでのトレーニングセットにわたる平均形状がかなり不正確であった(図13参照)ことに留意する。これは、この1.5T-MRデータでの右STNの予測が、対応する7T-MRデータセットでのSTNよりも効率的であったことを示す。
本開示により、STN領域内コントラストが低く(例えば、1.5T-MR撮像)又はオクルージョン(例えば、ノイズ)を有するデータであっても、STNの位置、寸法、及び向きを妥当に推定可能なことに留意されたい。これは、高磁場(7T)MRトレーニングデータから学習されたSTNと予測子との空間依存性を利用して行われる。特に、予測STNの慣性楕円体のセントロイド、寸法、及び方位角は、領域内のより精密なDBS標的についての非常に重要な情報を提供し得る。
7T-MRトレーニングデータセットでのSTN予測テストから、開示される本発明は、SN及びRN構造がGPi及びThaよりもSTNの良好な予測子であることを実証し、より高いDC類似値並びにセントロイド、寸法、及び向きにおいてより低い平均誤差を有し、それらの構造がSTNの形状及び姿勢についてより有意な情報を提供することを示す。さらに、SN、RN、GPi、及びThaの全てが7T-MRテストデータで利用可能である場合、複数の構造は、同等の測定を有するSTNの妥当な予測子として見なすことができる。
なお、Tha構造は比較的より大きな体積を有し、したがって、STNとThaとのセントロイドの距離は他の予測子よりもはるかに大きい。また、Thaの手動分割は他の予測子の手動分割ほど精密ではないことがある。これらの要因は、予測STNの不正確な姿勢に繋がり得る。本発明をこれら及び他の脳構造に適用する場合、このすべてを考慮に入れるべきである。
さらに、方法は、RN構造が1.5T-MRデータセットでSTNの良好な予測子としての役割を果たすことも実証する。1.5T-MR撮像でのRNからのSTNの全体予測結果は、7T-MR撮像でのRNからの得られた全体予測結果と同様であった。予測STNの完全な形状は手動分割STNほど正確ではないが、予測STNの姿勢情報、即ち、セントロイド及び寸法は、手動分割STNと同等であった。
1.5T-MR撮像での予測STNの平均DC値は、7T-MR撮像よりも良好であるが、1.5T-MRデータセットでの方位角の距離誤差はより高く、その理由は、1.5T-MR撮像での予測STNの平均体積がSTNの手動分割により近いためである。また、本開示の方法によれば、1.5T-MR撮像で予測されたSTNの表面ランドマーク点の平均数は、7T-MR撮像で予測されたSTNのものよりもはるかに少ない(例えば、1.5T-MRデータセットでの平均146点及び7T-MRデータセットでの平均436点)。これは、1.5T-MRデータセットでのSTNのわずかにより正確な形状予測をもたらし得るが、より大きな方位角誤差をもたらし得る。
しかし、7T-MRデータセットで分割されたRN構造が1.5T-MRデータセットに位置合わせされ、次に、この例ではSTNの予測子として利用されたことに留意されたい(7T-MRIが臨床用途に利用可能ではない場合、RNは1.5T-MRIで完全に分割し、1.5T-MR参照データに位置合わせすることができる)。ここで使用されたRNは、1.5T-MRデータよりも7T-MRデータでより明確に識別することができるため、1.5T-MRデータでのSTNのより信頼できる予測子として見なされる。
1.5T及び7TのMRデータセットの両方でのRNへの予測STNの相対位置は、STNとRNとの平均形状間よりも手動分割STNとRNとの間により近かった。なお、本発明での予測の枠組みではSTNとRNとの空間的関係(特に、神経変性疾患の診断に有用であり得る)を学習したが、RNの相対姿勢はSTNの平均形状において考慮されなかった。
さらに、1.5T及び7TのMRデータセットの両方でのSTNの予測は、トレーニングデータセットにわたるSTNの平均形状がSTNの手動分割により近い場合、より正確な結果を示した。特に、方位角の距離誤差は主に、トレーニングデータセットにわたる平均形状の方位角の距離誤差による影響を受ける。これらの発見は、テストデータセットでの予測子へのトレーニングデータセットでの予測及びSTNの大域的な位置合わせにより(それにより、トレーニングセットにわたるSTNの平均形状の姿勢が、手動分割により近づくことができる)、トレーニングセットでの予測子とテストセットでの予測子との間での姿勢のばらつきをそれぞれ低減して、STNの予測が更に改善可能なことを暗に示す。
方法は、高磁場(7T)MRトレーニングデータセットから得られるSTNとRNとの空間依存性を利用して、1.5T-MR撮像でのRNからSTNを予測した。1.5T(臨床)TW画像及び高磁場7T-TW-MR撮像は、異なる分解能を有し(例えば、それぞれ0.98×0.98×1mm及び0.4×0.4×2mm)、これは、位置合わせがないことを意味し、予測での不正確な姿勢に繋がるおそれがある。したがって、本発明では、各7T-MRトレーニングデータセットを7T-MRテストデータに位置合わせし、次に、7T-MRテストデータを1.5T-MRテストデータに位置合わせすることによって得られる変換行列を使用して、各7T-MRトレーニングデータでのSTN及びRN構造を1.5T-MRテストデータの共通座標空間に正規化した。さらに、1.5T-MR及び7T-MRの参照データは、1.5T-MRテストデータに対応する7T-MRテストデータが利用可能ではない場合、図2(b)でのように7T-MRトレーニングデータセット及び1.5T-MRテストセットの共通座標空間として見なされる。
方法は、本開示の手法が、可視であることがあるが、それでもなお自動的に分割することが難しいか、又は視野の制限に起因して全く見えないこともあるSTNの形状及び姿勢を直接予測可能なことを実証する。さらに、STNを識別することが可能ではない臨床1.5T-MRデータであっても、程々に可視であり、STNに隣接するRN構造を使用して予測可能なことが示された。
本開示の方法によるSTNの予測は、5つのトレーニングセットを使用して例示された。ここで報告された結果は、高磁場(7T)画像のより大きなデータセットを使用して更に改善することができる。さらに、データベース及びサンプルサイズが増大するにつれて、特定の事例のサブグループ(例えば、年齢、性別、又は疾患及び/又は症状固有)が、予測モデルをグループに適応させる場合、予測子の正確性を改善することを証明し得る。本開示の一実施形態は、そのような情報に基づくデータのグループ化を含む。最後に、トレーニング形状セットにわたる第3脳室幅及び両被殻距離等のSTNのばらつきに関連する解剖学的情報は、追加の予測子として見なすことができ、提案される本開示に組み込むことができる。
本開示のシステム及び方法の実施形態は、神経外科医が、はるかに洗練され正確な手術及びDBS移植処置に従事できるようにする。特に、血管及び重要な神経構造を回避する能力並びにDBS移植のより正確な初期標的及び経路を選択する能力は、DBS移植に必要な時間及び合併症率を低減する潜在性を有する。開示されるシステム及び方法は、ロボット手術等の自動処置に従事する能力を強化する。そのような状況では、患者固有アトラスは、ロボットシステムに標的及び全侵入経路を指示し得る。遠隔手術もより高品質でより柔軟な撮像技法の使用から恩恵を受ける。白質等の撮像が難しい組織の描写を改善する能力により、神経外科医は、従来は届かなかった組織を標的とすることができる。
システム及び方法が、その趣旨又は中心の特徴から逸脱せずに他の特定の形態で実施し得ることが理解される。したがって、本例及び実施形態は、あらゆる点で限定ではなく例示として見なされるべきであり、システム及び方法は、本明細書の詳細な説明に限定されるべきではない。

Claims (14)

  1. コンピュータの動方法であって、
    予測子領域および関心領域を有する患者の脳画像と当該脳画像の特性を示す患者情報とを受信すること、ここで、前記患者情報は、前記脳画像に関連付けられた性別、年齢、病歴、脳サイズ、脳寸法、および撮像モダリティの1つまたは複数を含み、
    前記患者の脳画像とは異なる複数の脳画像と前記患者の脳画像とは異なる当該複数の脳画像の各々の特性を示すデータベース画像情報とを有するとともに、複数の異なるタイプの磁気共鳴画像を含むデータベースにアクセスすること、ここで、前記データベース画像情報は、前記脳画像に関連付けられた性別、年齢、病歴、脳サイズ、脳寸法、および撮像モダリティの1つまたは複数を含み、
    前記データベースから前記患者の脳画像の前記患者情報に一致するデータベース画像情報を有する複数の脳画像の患者固有のトレーニングセットを取得することであって、前記トレーニングセットの各脳画像は、予測子領域と、前記予測子領域とは解剖学的に異なる関連する関心領域を有し、前記トレーニングセットの各脳画像の前記予測子領域は、前記患者の脳画像の前記予測子領域に対応しており、前記トレーニングセットの各脳画像の前記関心領域は、前記患者の脳画像の前記関心領域に対応しており、前記複数の脳画像の患者固有のトレーニングセットを取得すること、
    前記複数の脳画像の患者固有のトレーニングセットを処理して、前記複数の脳画像の前記トレーニングセット内の前記予測子領域の形状、位置、及び向きに対する前記複数の脳画像の前記トレーニングセット内の前記関心領域の形状、位置、及び向きの関係に基づいて、予測形状と予測位置及び向きとを有する予測された関心領域を表す予測子情報を抽出すること、
    前記予測子情報を用いて前記患者の脳画像を処理して、前記患者の脳画像の前記予測子領域に対して前記患者の脳画像内に前記予測形状と前記予測位置及び向きとを有する前記予測された関心領域を組み込むことにより、前記予測された関心領域を有する患者固有アトラスを生成することを備える方法。
  2. 前記データベースにアクセスすることは、メタデータが付された脳画像を含む脳画像データベースをアクセスすることを含み、前記メタデータは、前記脳画像に関連付けられた性別、年齢、病歴、脳サイズ、脳寸法、および撮像モダリティの1つまたは複数を含み、
    前記複数の脳画像の患者固有のトレーニングセットを取得することは、前記脳画像データベース内の前記脳画像に関連付けられた前記メタデータに基づいて脳画像を選択することを含む、請求項1に記載の方法。
  3. 前記複数の脳画像の患者固有のトレーニングセットを取得することは、脳深部刺激電極配置の画像を選択することを含み、前記予測された関心領域は視床下核であり、前記予測子領域が赤核である、請求項1に記載の方法。
  4. 前記複数の脳画像の前記トレーニングセットを処理する工程の前に、前記複数の脳画像の前記トレーニング内の前記予測子領域と前記関心領域とを座標系に位置合わせすること、
    前記患者の脳画像の前記予測子領域を前記座標系に位置合わせすること、
    をさらに含み、
    前記患者の脳画像の前記トレーニングセットを処理することは、前記組み込まれた予測された関心領域を前記座標系に位置合わせすることを含む、請求項1に記載の方法。
  5. 前記予測子領域は、視床下核、尾状核、被殻、淡蒼球内節、黒質、赤核、及び視床のうちの1つ又は複数である、請求項1に記載の方法。
  6. 脳画像および前記患者の脳画像の前記トレーニングセットにおける前記予測子領域、脳画像の前記トレーニングセットにおける前記関心領域、及び前記予測された関心領域を前記座標系に位置合わせすることは、線形レジストレーション及び非剛体レジストレーションの一方又は両方を含む、請求項5に記載の方法。
  7. 前記患者の脳画像を受信することは、第1の撮像モダリティ脳画像を受信することを含み、
    前記複数の脳画像の患者固有のトレーニングセットを取得することは、前記第1の撮像モダリティ脳画像とは異なる第2の撮像モダリティ脳画像を選択することを含む、請求項1に記載の方法。
  8. 前記複数の脳画像の患者固有のトレーニングセットを取得することは、約7テスラ以上の磁場強度で撮影された磁気共鳴画像を選択することを含む、請求項1に記載の方法。
  9. 前記患者の脳画像を受信することは、約3テスラ以下の磁場強度で撮影された磁気共鳴画像を受信することを含む、請求項8に記載の方法。
  10. 前記複数の脳画像の患者固有のトレーニングセットを取得することは、1つ又は複数のコンピュータ断層画像を選択することを更に含む、請求項9に記載の方法。
  11. 前記複数の脳画像の患者固有のトレーニングセットを取得することは、脳深部刺激電極配置の画像を取得することを含む、請求項9に記載の方法。
  12. ネットワークを介して前記患者固有のアトラスと前記患者の脳画像とのうちの一方又は両方を送信することを更に備える請求項1に記載の方法。
  13. 前記患者固有のアトラスの前記予測された関心領域を表示することを更に備える請求項12に記載の方法。
  14. 前記複数の脳画像の患者固有のトレーニングセットを取得することは、臨床医がユーザインターフェースを操作することによる手動選択と画像検索構成要素による自動選択のうちの1つ又は複数を含む、請求項1に記載の方法。
JP2016524256A 2013-07-02 2014-06-27 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム Active JP6603656B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361841955P 2013-07-02 2013-07-02
US61/841,955 2013-07-02
US201461929053P 2014-01-18 2014-01-18
US61/929,053 2014-01-18
PCT/US2014/044675 WO2015002846A2 (en) 2013-07-02 2014-06-27 Method and system for a brain image pipeline and brain image region location and shape prediction

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019187686A Division JP2020028721A (ja) 2013-07-02 2019-10-11 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム

Publications (3)

Publication Number Publication Date
JP2016527942A JP2016527942A (ja) 2016-09-15
JP2016527942A5 JP2016527942A5 (ja) 2017-07-27
JP6603656B2 true JP6603656B2 (ja) 2019-11-06

Family

ID=52132864

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016524256A Active JP6603656B2 (ja) 2013-07-02 2014-06-27 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム
JP2019187686A Pending JP2020028721A (ja) 2013-07-02 2019-10-11 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2019187686A Pending JP2020028721A (ja) 2013-07-02 2019-10-11 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム

Country Status (5)

Country Link
US (5) US9600778B2 (ja)
EP (2) EP3017400B1 (ja)
JP (2) JP6603656B2 (ja)
CN (1) CN105637536B (ja)
WO (1) WO2015002846A2 (ja)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9600778B2 (en) 2013-07-02 2017-03-21 Surgical Information Sciences, Inc. Method for a brain region location and shape prediction
JP5641629B1 (ja) * 2013-10-31 2014-12-17 株式会社アラヤ・ブレイン・イメージング 個人特性予測システム、個人特性予測方法及びプログラム
WO2015085320A1 (en) * 2013-12-06 2015-06-11 The Johns Hopkins University Methods and systems for analyzing anatomy from multiple granularity levels
EP3234912B1 (en) * 2014-12-15 2020-08-26 Koninklijke Philips N.V. Quality control of image registration
US20160295126A1 (en) * 2015-04-03 2016-10-06 Capso Vision, Inc. Image Stitching with Local Deformation for in vivo Capsule Images
GB2557559B (en) * 2015-10-06 2021-09-15 Synaptive Medical Inc Method, system and apparatus for image-guided insertion of implant devices
US10255675B2 (en) * 2016-01-25 2019-04-09 Toshiba Medical Systems Corporation Medical image processing apparatus and analysis region setting method of texture analysis
US10867417B2 (en) 2016-09-06 2020-12-15 Elekta, Inc. Neural network for generating synthetic medical images
CN106530280B (zh) * 2016-10-17 2019-06-11 东软医疗系统股份有限公司 一种图像中器官的定位方法及装置
CN106548480B (zh) * 2016-12-23 2023-05-26 蚌埠学院 一种基于机器视觉的农产品体积快速测量装置及测量方法
US10958337B2 (en) * 2017-02-14 2021-03-23 Qualcomm Incorporated Narrowband time-division duplex frame structure for narrowband communications
TWI651688B (zh) * 2017-03-17 2019-02-21 長庚大學 利用磁振造影影像預測神經疾病的臨床嚴重度的方法
EP3379459A1 (en) 2017-03-24 2018-09-26 Tata Consultancy Services Limited System and method for telecom inventory management
WO2019060298A1 (en) 2017-09-19 2019-03-28 Neuroenhancement Lab, LLC METHOD AND APPARATUS FOR NEURO-ACTIVATION
WO2019084174A1 (en) * 2017-10-24 2019-05-02 Washington University SYSTEMS AND METHODS FOR OPTIMIZING FUNCTIONAL IMAGES OF A LESION REGION USING GUIDED DIFFUSED OPTICAL TOMOGRAPHY
CN108038840B (zh) * 2017-11-24 2020-03-17 深圳先进技术研究院 一种图像处理方法、装置、图像处理设备及存储介质
US11717686B2 (en) 2017-12-04 2023-08-08 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement to facilitate learning and performance
CN108013933B (zh) * 2017-12-14 2019-10-18 复旦大学 基于集成学习的大脑功能影像定位方法
US11478603B2 (en) 2017-12-31 2022-10-25 Neuroenhancement Lab, LLC Method and apparatus for neuroenhancement to enhance emotional response
US10832423B1 (en) 2018-01-08 2020-11-10 Brainlab Ag Optimizing an atlas
CN111801705A (zh) * 2018-03-02 2020-10-20 通用电气公司 用于加速临床工作流程的系统和方法
US11364361B2 (en) 2018-04-20 2022-06-21 Neuroenhancement Lab, LLC System and method for inducing sleep by transplanting mental states
JP2021531891A (ja) * 2018-07-30 2021-11-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 機能的磁気共鳴イメージングシステム及び方法
WO2020056418A1 (en) 2018-09-14 2020-03-19 Neuroenhancement Lab, LLC System and method of improving sleep
KR20210076055A (ko) * 2018-10-10 2021-06-23 더 트러스티스 오브 컬럼비아 유니버시티 인 더 시티 오브 뉴욕 인간 뇌에서의 도파민 기능의 비침습적 대리 척도로서의 신경 멜라닌 감지 자기 공명 이미징을 위한 시스템, 방법 및 컴퓨터 액세스가능 매체
CN109509193B (zh) * 2018-10-19 2020-08-25 中南民族大学 一种基于高精度配准的肝脏ct图谱分割方法及系统
CN109859189A (zh) * 2019-01-31 2019-06-07 长安大学 一种基于深度学习的年龄估计方法
CN109830286B (zh) * 2019-02-13 2022-09-30 四川大学 基于非参数统计的脑功能磁共振编码能量成像方法
US11854217B2 (en) 2019-05-03 2023-12-26 Koninklijke Philips N.V. Co-registration of cardiac images
WO2020232124A1 (en) * 2019-05-13 2020-11-19 The General Hospital Corporation System and methods for automated image analysis
CN110188680B (zh) * 2019-05-29 2021-08-24 南京林业大学 基于因子迭代的茶树嫩芽智能识别方法
CN110322408A (zh) * 2019-06-11 2019-10-11 浙江大学 基于云平台的多中心磁共振图像自动质量控制方法
US11733337B2 (en) * 2019-06-25 2023-08-22 Synaptive Medical Inc. Device, system and method for transforming a diffusion-weighted magnetic resonance image to a patient diffusion-weighted magnetic resonance coordinate space
CN110322528B (zh) * 2019-06-26 2021-05-14 浙江大学 基于3t、7t的核磁共振脑部图像血管重建方法
WO2021034770A1 (en) * 2019-08-20 2021-02-25 Terran Biosciences, Inc. Neuromelanin-sensitive mri for assessing parkinson's disease
CN110660068B (zh) * 2019-09-10 2022-06-03 华中科技大学苏州脑空间信息研究院 三维细胞构筑图像的半自动脑区分割方法
US11288806B2 (en) * 2019-09-30 2022-03-29 Siemens Healthcare Gmbh Protocol-aware tissue segmentation in medical imaging
CN110751112B (zh) * 2019-10-24 2023-10-03 复旦大学 一种基于计算机视觉的小鼠脑图谱绘制辅助系统及方法
US11348230B2 (en) * 2019-10-25 2022-05-31 Shanghai United Imaging Intelligence Co., Ltd. Systems and methods for generating and tracking shapes of a target
US20210177295A1 (en) * 2019-12-11 2021-06-17 GE Precision Healthcare LLC Systems and methods for generating diagnostic scan parameters from calibration images
AU2021224253A1 (en) * 2020-02-20 2022-09-08 Board Of Regents Of The University Of Texas System Methods for optimizing the planning and placement of probes in the brain via multimodal 3D analyses of cerebral anatomy
KR102097738B1 (ko) * 2020-03-03 2020-04-06 주식회사 휴런 인공지능 기반 파킨슨 병 진단 장치 및 방법
US11699514B2 (en) * 2020-05-27 2023-07-11 International Business Machines Corporation Predictive dual machine translation
CN111870268A (zh) * 2020-07-30 2020-11-03 上海联影医疗科技有限公司 一种限束装置的目标位置信息的确定方法和系统
CN111767323B (zh) * 2020-09-02 2020-12-04 西南石油大学 一种基于核smo算法的地层裂缝长度实时预测方法
US20220398735A1 (en) * 2021-06-11 2022-12-15 Neurosimplicity, Llc Method and system for automated processing, registration, segmentation, analysis, validation, and visualization of structured and unstructured data
US11636596B1 (en) * 2022-04-28 2023-04-25 Qure.Ai Technologies Private Limited Monitoring brain CT scan image
US11501437B1 (en) * 2022-04-28 2022-11-15 Qure.Ai Technologies Private Limited Monitoring brain CT scan image

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE60041893D1 (de) * 2000-11-24 2009-05-07 Kent Ridge Digital Labs Verfahren und vorrichtungen zur verarbeitung medizinischer bilder
US6873718B2 (en) * 2001-10-12 2005-03-29 Siemens Corporate Research, Inc. System and method for 3D statistical shape model for the left ventricle of the heart
US20030228042A1 (en) * 2002-06-06 2003-12-11 Usha Sinha Method and system for preparation of customized imaging atlas and registration with patient images
EP1624921A4 (en) * 2003-04-28 2008-12-31 Univ Vanderbilt DEVICE AND METHOD FOR THE OPTIMUM PLACEMENT OF A DEEP BRAIN STIMULATOR
US7313430B2 (en) 2003-08-28 2007-12-25 Medtronic Navigation, Inc. Method and apparatus for performing stereotactic surgery
US20050171558A1 (en) 2003-10-17 2005-08-04 Abovitz Rony A. Neurosurgery targeting and delivery system for brain structures
US7711405B2 (en) * 2004-04-28 2010-05-04 Siemens Corporation Method of registering pre-operative high field closed magnetic resonance images with intra-operative low field open interventional magnetic resonance images
US8209027B2 (en) * 2004-07-07 2012-06-26 The Cleveland Clinic Foundation System and method to design structure for delivering electrical energy to tissue
US7346382B2 (en) * 2004-07-07 2008-03-18 The Cleveland Clinic Foundation Brain stimulation models, systems, devices, and methods
CN101031237B (zh) 2004-07-27 2012-11-14 外科视象公司 具有协同式mri天线探头的mri兼容通用传递插管的mri系统及相关系统和方法
US7460733B2 (en) 2004-09-02 2008-12-02 Siemens Medical Solutions Usa, Inc. System and method for registration and modeling of deformable shapes by direct factorization
WO2006034305A2 (en) * 2004-09-21 2006-03-30 University Of Florida Research Foundation, Inc. Multiple lead method for deep brain stimulation
US7590440B2 (en) * 2005-11-14 2009-09-15 General Electric Company System and method for anatomy labeling on a PACS
WO2007058632A1 (en) * 2005-11-21 2007-05-24 Agency For Science, Technology And Research Superimposing brain atlas images and brain images with delineation of infarct and penumbra for stroke diagnosis
US20090220136A1 (en) * 2006-02-03 2009-09-03 University Of Florida Research Foundation Image Guidance System for Deep Brain Stimulation
US8199985B2 (en) * 2006-03-24 2012-06-12 Exini Diagnostics Aktiebolag Automatic interpretation of 3-D medicine images of the brain and methods for producing intermediate results
US8160677B2 (en) 2006-09-08 2012-04-17 Medtronic, Inc. Method for identification of anatomical landmarks
US8160676B2 (en) * 2006-09-08 2012-04-17 Medtronic, Inc. Method for planning a surgical procedure
WO2008065598A2 (en) 2006-11-28 2008-06-05 Koninklijke Philips Electronics N.V. A method, an apparatus and a computer program for data processing
EP1990768A1 (en) * 2007-05-11 2008-11-12 INSERM (Institut National de la Santé et de la Recherche Médicale) Method for analysing an image of the brain of a subject, computer program product for analysing such image and apparatus for implementing the method
US8175677B2 (en) 2007-06-07 2012-05-08 MRI Interventions, Inc. MRI-guided medical interventional systems and methods
KR100902518B1 (ko) 2007-06-15 2009-06-15 한국과학기술원 일반급수 병렬영상법을 이용한 고해상도 자기공명영상생성방법 및 그 기록매체
KR100897528B1 (ko) 2007-06-22 2009-05-15 주식회사 사이버메드 디비에스 전극의 위치 판단 방법
US7911208B2 (en) 2007-10-15 2011-03-22 Siemens Aktiengesellschaft Methods for rectification of B0 inhomogeneity effects in magnetic resonance images
WO2009061942A1 (en) * 2007-11-06 2009-05-14 The Cleveland Clinic Foundation Automated 3d brain atlas fitting using intra-operative neurophysiological data
KR100900862B1 (ko) * 2007-11-22 2009-06-04 가천의과학대학교 산학협력단 자기공명영상 시스템용 rf 코일 어셈블리
US8189885B2 (en) 2008-02-15 2012-05-29 The University Of Iowa Research Foundation Apparatus and method for computing regional statistical distribution over a mean anatomic space
US8577115B2 (en) * 2008-03-04 2013-11-05 Tomotherapy Incorporated Method and system for improved image segmentation
EP2321001A1 (en) 2008-05-15 2011-05-18 Intelect Medical Inc. Clinician programmer system interface for monitoring patient progress
KR20100011118A (ko) 2008-07-24 2010-02-03 가천의과학대학교 산학협력단 자기공명 영상장치의 라디오 주파수 코일
US9805473B2 (en) 2008-09-19 2017-10-31 Siemens Healthcare Gmbh Method and system for segmentation of brain structures in 3D magnetic resonance images
US8355553B2 (en) * 2008-11-22 2013-01-15 General Electric Company Systems, apparatus and processes for automated medical image segmentation using a statistical model
AU2009322153B2 (en) * 2008-12-04 2016-07-07 The Cleveland Clinic Foundation System and method to define target volume for stimulation in brain
BRPI0917748A2 (pt) 2008-12-18 2019-11-19 Koninl Philips Electronics Nv sistema de processamento de imagem, estação de trabalho médico da imagem latente, método de geração de uma visualização de uma imagem médica e produto de programa de computador
CN101520893A (zh) * 2009-02-23 2009-09-02 暨南大学 一种婴幼儿脑医学计算机扫描图像的分析方法及实现系统
CN101739681B (zh) * 2009-12-14 2011-09-14 西北工业大学 基于相关预测模型的磁共振图像中检测结构形变的方法
US8160357B2 (en) 2010-07-30 2012-04-17 Kabushiki Kaisha Toshiba Image segmentation
AU2011348240B2 (en) 2010-12-22 2015-03-26 Viewray Technologies, Inc. System and method for image guidance during medical procedures
EP2691899A2 (en) 2011-03-29 2014-02-05 Boston Scientific Neuromodulation Corporation System and method for leadwire location
US20130030499A1 (en) * 2011-07-28 2013-01-31 The Regents Of The University Of California Method for deep brain stimulation targeting based on brain connectivity
US9925382B2 (en) * 2011-08-09 2018-03-27 Boston Scientific Neuromodulation Corporation Systems and methods for stimulation-related volume analysis, creation, and sharing
US8958615B2 (en) * 2011-08-09 2015-02-17 Boston Scientific Neuromodulation Corporation System and method for weighted atlas generation
EP3708077A1 (en) 2011-09-09 2020-09-16 The Regents of The University of California In vivo visualization and control of pathological changes in neural circuits
US9081488B2 (en) 2011-10-19 2015-07-14 Boston Scientific Neuromodulation Corporation Stimulation leadwire and volume of activation control and display interface
EP2626111B1 (en) 2012-02-08 2016-08-17 Medtronic Bakken Research Center B.V. Medical system and method for planning a neuromodulation therapy
US20150025548A1 (en) 2012-03-08 2015-01-22 Neutar, Llc Patient and Procedure Customized Fixation and Targeting Devices for Stereotactic Frames
CN102663414B (zh) * 2012-03-14 2013-08-21 山东大学 一种基于脑功能成像的识别大脑认知状态的方法
US9563950B2 (en) * 2013-03-20 2017-02-07 Cornell University Methods and tools for analyzing brain images
US9600778B2 (en) 2013-07-02 2017-03-21 Surgical Information Sciences, Inc. Method for a brain region location and shape prediction
US9937347B2 (en) 2013-12-08 2018-04-10 Case Western Reserve University Activation map based individualized planning for deep brain stimulation
US20190117072A1 (en) * 2017-10-24 2019-04-25 Siemens Healthcare Gmbh Decoding patient characteristics and brain state from magnetic resonance imaging data
EP3798971A1 (en) * 2019-09-30 2021-03-31 Siemens Healthcare GmbH Method and data processing system for providing a stroke information
US11263749B1 (en) * 2021-06-04 2022-03-01 In-Med Prognostics Inc. Predictive prognosis based on multimodal analysis

Also Published As

Publication number Publication date
EP3537343B1 (en) 2020-10-21
US9600778B2 (en) 2017-03-21
EP3537343A1 (en) 2019-09-11
WO2015002846A3 (en) 2015-10-29
US10885149B2 (en) 2021-01-05
EP3017400A4 (en) 2017-08-09
US20210118549A1 (en) 2021-04-22
US11771389B2 (en) 2023-10-03
JP2020028721A (ja) 2020-02-27
CN105637536B (zh) 2019-08-23
EP3017400A2 (en) 2016-05-11
JP2016527942A (ja) 2016-09-15
CN105637536A (zh) 2016-06-01
US20150012466A1 (en) 2015-01-08
US20150010223A1 (en) 2015-01-08
US20170193161A1 (en) 2017-07-06
WO2015002846A2 (en) 2015-01-08
US9412076B2 (en) 2016-08-09
EP3017400B1 (en) 2019-05-15
US20230293130A1 (en) 2023-09-21

Similar Documents

Publication Publication Date Title
JP6603656B2 (ja) 脳画像パイプライン及び脳画像領域の位置及び形状予測のための方法並びにシステム
US20210311150A1 (en) Tensor field mapping
EP3554631B1 (en) Treating patients with ttfields with the electrode positions optimized using deformable templates
CN111161326B (zh) 用于可变形图像配准的无监督深度学习的系统和方法
US11744465B2 (en) Method and program for generating three-dimensional brain map
US10946214B2 (en) Automated anatomy delineation for image guided therapy planning
US10359486B2 (en) Rapid determination of a relaxation time
EP3589355B1 (en) Optimal deep brain stimulation electrode selection and placement on the basis of stimulation field modelling
KR102354723B1 (ko) 텐서장 맵핑
Dai et al. Automatic multi‐catheter detection using deeply supervised convolutional neural network in MRI‐guided HDR prostate brachytherapy
Liu et al. Automatic localization of the anterior commissure, posterior commissure, and midsagittal plane in MRI scans using regression forests
EP3541470B1 (en) Time-synchronized deep brain stimulation optimization
US20240005514A1 (en) Dynamic segmentation of anatomical structures
Shanmuganathan et al. Two-Step Rigid and Non-Rigid Image Registration for the Alignment of Three-Dimensional Echocardiography Sequences from Multiple Views
Shakeri Deformable MRI to Transrectal Ultrasound Registration for Prostate Interventions Using Deep Learning
Fookes et al. Registration of three dimensional medical images
Khallaghi Image-based guidance for prostate interventions
Tamburo Feature-Based Correspondences to Infer the Location of Anatomical Landmarks

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170615

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170615

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180227

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190408

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190924

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191011

R150 Certificate of patent or registration of utility model

Ref document number: 6603656

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S631 Written request for registration of reclamation of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313631

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250