JP2019512284A - 組織変形の存在下において手術を支援するためのシステム及び方法 - Google Patents

組織変形の存在下において手術を支援するためのシステム及び方法 Download PDF

Info

Publication number
JP2019512284A
JP2019512284A JP2018542744A JP2018542744A JP2019512284A JP 2019512284 A JP2019512284 A JP 2019512284A JP 2018542744 A JP2018542744 A JP 2018542744A JP 2018542744 A JP2018542744 A JP 2018542744A JP 2019512284 A JP2019512284 A JP 2019512284A
Authority
JP
Japan
Prior art keywords
anatomical
site
deformation
displacement
circuits
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018542744A
Other languages
English (en)
Other versions
JP6703315B2 (ja
Inventor
リャンイン ユー
リャンイン ユー
ビ ソン
ビ ソン
ミン−チャン リウ
ミン−チャン リウ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JP2019512284A publication Critical patent/JP2019512284A/ja
Application granted granted Critical
Publication of JP6703315B2 publication Critical patent/JP6703315B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • A61B5/0042Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part for the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • A61B5/0044Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part for the heart
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0808Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/14Transformations for image registration, e.g. adjusting or mapping for alignment of images
    • G06T3/153Transformations for image registration, e.g. adjusting or mapping for alignment of images using elastic snapping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/374NMR or MRI
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2505/00Evaluating, monitoring or diagnosing in the context of a particular type of medical care
    • A61B2505/05Surgical care
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A61B2576/026Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part for the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10088Magnetic resonance imaging [MRI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30016Brain
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Neurology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Gynecology & Obstetrics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Quality & Reliability (AREA)
  • Cardiology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Computer Hardware Design (AREA)
  • Geometry (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Architecture (AREA)
  • Software Systems (AREA)
  • Image Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本明細書では、組織変形の存在下において手術を支援するためのシステム及び方法の様々な態様を開示する。ある実施形態によれば、システムは、解剖学的部位の複数の表面構造の1又は2以上の組織物質特性を受け取る電子装置を含む。解剖学的部位に関連する1又は2以上の境界条件を受け取ることもできる。変形前の解剖学的部位の第1の表面を対応する変形後の解剖学的部位の第2の表面と照合することによって、解剖学的部位の表面変位を判定することができる。判定された表面変位と、受け取った1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件とに基づいて、解剖学的部位の体積変位場を計算することができる。【選択図】 図4A

Description

〔関連出願との相互参照/引用による組み入れ〕
なし
本開示の様々な実施形態は、手術を支援するためのシステム及び方法に関する。具体的には、本開示の様々な実施形態は、組織変形の存在下において手術を支援するためのシステム及び方法に関する。
医用撮像法及び関連するセンサ及び/又は装置の分野の進歩は、臨床分析及び医療目的で身体内部を可視化する能力を可能にした。いくつかのシナリオでは、外科医が、実際に手術を行う前に被験者の複雑な解剖学的構造にアクセスする手術を計画することができる。外科医は、手術を受ける解剖学的部位の関心領域にアクセスするための1又は2以上の経路を計画することもできる。手術中に解剖学的構造の変位を思考によって評価することは、解剖学的構造の複雑度、及び手術中の解剖学的部位の組織が露出した後の特定の組織変形に起因して困難な場合がある。適切に補正が行われなければ、正確かつ安全に手術を行うことが困難な場合もある。
現行のシステム及び技術は、手術中に、解剖学的部位の術中撮像を用いて、露出した解剖学的部位の解剖学的構造及び組織変形を可視化する。しかしながら、このような術中撮像は、術中撮像中における放射線被曝のリスクなどの様々な理由で被験者にとって安全でない場合もある。従って、外科医にとっての複雑さを軽減し、より高い精度で安全に手術を行うために安全で正確で素早い支援を行う改善された技術及び/又はシステムが必要と考えられる。
当業者には、説明したシステムと本出願の残り部分において図面を参照しながら説明する本開示のいくつかの態様との比較を通じて、従来の伝統的な方法のさらなる制限及び不利点が明らかになるであろう。
実質的に少なくとも1つの図に示し、及び/又はこれらの図に関連して説明し、特許請求の範囲にさらに完全に示すような、組織変形の存在下において手術を支援するためのシステム及び方法について説明する。
全体を通じて同じ要素を同じ参照符号によって示す添付図面を参照しながら本開示の以下の詳細な説明を検討することにより、本開示のこれらの及びその他の特徴及び利点を理解することができる。
本開示の実施形態による、組織変形の存在下において手術を支援するためのネットワーク環境を示すブロック図である。 本開示の実施形態による、組織変形の存在下において手術を支援する例示的な電子装置のブロック図である。 本開示の実施形態による、組織変形の存在下において手術を支援するためのシステム及び方法を実装する例示的なシナリオを示す図である。 本開示の実施形態による、組織変形の存在下において手術を支援するためのシステム及び方法を実装する例示的なシナリオを示す図である。 本開示の実施形態による、組織変形の存在下において手術を支援するためのシステム及び方法を実装する例示的なシナリオを示す図である。 本開示の実施形態による、組織変形の存在下において手術を支援するためのシステム及び方法を実装する例示的なシナリオを示す図である。 本開示の実施形態による、組織変形の存在下において手術を支援する例示的な方法を実施するためのフローチャートである。 本開示の実施形態による、組織変形の存在下において手術を支援する例示的な方法を実施するためのフローチャートである。
開示する組織変形の存在下において手術を支援するためのシステム及び方法では、後述する実装を見出すことができる。本開示の例示的な態様は、解剖学的部位の複数の表面構造の1又は2以上の組織物質特性を電子装置によって受け取ることを含むことができる。解剖学的部位に関連する1又は2以上の境界条件を受け取ることもできる。変形前の解剖学的部位の第1の表面と、対応する変形後の解剖学的部位の第2の表面とを照合することにより、解剖学的部位の表面変位を判定することができる。判定された表面変位、受け取った1又は2以上の組織物質特性、及び/又は受け取った1又は2以上の境界条件に基づいて、解剖学的部位の体積変位場を計算することができる。
ある実施形態によれば、解剖学的部位の複数の表面構造は、不均質な解剖学的表面構造に対応することができる。ある実施形態によれば、解剖学的部位は、脳の少なくとも一部に対応することができる。複数の表面構造は、被験者の解剖学的部位に存在する時には、皮質、血管、脳室及び/又は腫瘍構造に対応することができる。
ある実施形態によれば、受け取った1又は2以上の境界条件は、変位境界条件及び/又は静止境界条件を含むことができる。解剖学的部位の複数の表面構造は、解剖学的部位に関連するデータセットの位置合わせに基づいて再現することができる。データセットは、磁気共鳴撮像(MRI)スキャナ、又はMRIスキャナを含むことができるマルチモーダルソースから受け取ることができる。
ある実施形態によれば、解剖学的部位の複数の表面構造の表面分割を実行することができる。表面分割は、解剖学的部位が手術前の開かれていない状態にある時に、変形前のMRIデータを用いて実行することができる。ある実施形態によれば、二次元(2D)から3Dへのジオメトリ処理及び表面分割に基づいて、解剖学的部位の三次元(3D)構造を形成することができる。形成された3D構造は、第1の表面に対応する複数の表面構造を含むことができる。
ある実施形態によれば、立体ビジョンを利用して、変形後の解剖学的部位の1又は2以上の表面を再現することができる。立体ビジョンは、解剖学的部位が手術中の開かれた状態にある時に、変形後の表面変位を判定するために利用することができる。再現された変形後の解剖学的部位の1又は2以上の表面は、第2の表面に対応することができる。
ある実施形態によれば、再現された開かれた状態にある解剖学的部位の1又は2以上の表面と、開かれていない状態にある解剖学的部位の3D構造との位置合わせを3D座標系において実行することができる。解剖学的部位が少なくとも被験者の脳の一部である場合、位置合わせは、被験者の頭蓋骨の骨構造の整列を用いて行うことができる。
ある実施形態によれば、解剖学的部位の変形に関連するボクセルの変位を有限要素法(FEM)フレームワークで測定することができる。ボクセルの変位は、対応する変形前のボクセルの位置に対する変形後の変位したボクセルの現在位置に基づいて測定することができる。測定は、判定された表面変位に基づいて解剖学的部位の体積内で行うことができる。ボクセルの変位の測定は、体積変位場の計算に対応することができる。解剖学的部位の体積は、解剖学的部位の組織内容全体を表すことができる。
ある実施形態によれば、変形補正のために、計算された体積変位場を複数の表面構造のうちの1つ又は2つ以上に適用することができる。解剖学的部位の複数の多次元グラフィックビューを生成することができる。複数の多次元グラフィックビューは、変形後に生成することができる。このようなグラフィックビューは、解剖学的部位が開かれた状態で変形している時に手術中に支援を行うために使用することができる。生成された複数の多次元グラフィックビューは、解剖学的部位の複数の表面構造における変位した1又は2以上の関心領域を含むことができる。生成された複数の多次元グラフィックビューは、変形後の体積の変化を表す解剖学的部位内の体積変位をさらに含むことができる。複数の多次元グラフィックビューは、1又は2以上の視点からの複数の表面構造を含む、解剖学的部位の3Dビューに対応することができる。
図1は、本開示の実施形態による、組織変形の存在下において手術を支援するためのネットワーク環境を示すブロック図である。図1には、電子装置102と、複数の医用撮像装置104と、1又は2以上の立体カメラ106と、サーバ108と、通信ネットワーク110とを含むことができるネットワーク環境100を示す。さらに、解剖学的部位112、並びに被験者114及び外科医116などの1又は2以上のユーザも示す。電子装置102は、通信ネットワーク110を介して複数の医用撮像装置104、1又は2以上の立体カメラ106及びサーバ108に通信可能に結合することができる。
電子装置102は、解剖学的部位112の表面変位を判定するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。表面変位は、変形前後の解剖学的部位112の表面を照合することによって判定することができる。電子装置102は、手術を受ける解剖学的部位112の組織変形が存在する手術をリアルタイム又は準リアルタイムで支援することができる。電子装置102の例としては、以下に限定するわけではないが、コンピュータ支援外科手術システム又はロボット支援外科手術システムに関連するユーザ端末、医療機器、電子手術器具、ディスプレイ装置及び/又はコンピュータ装置を挙げることができる。
複数の医用撮像装置104は、被験者114の解剖学的部位112などの内部構造又は解剖学的部位の視覚表現を作成するために使用される診断装置に対応することができる。このような内部構造又は解剖学的部位の視覚表現は、被験者114が術前状態にある時に臨床分析及び医療介入のために作成することができる。複数の医用撮像装置104は、解剖学的部位112に関連するデータセットを取得するために使用されるマルチモーダルソースとすることができる。複数の医用撮像装置104の例としては、以下に限定するわけではないが、X線コンピュータ断層撮影(CT)スキャナ、磁気共鳴撮像(MRI)スキャナ、磁気共鳴血管造影(MRA)スキャナ、流体減衰反転回復法(FLAIR)ベースのスキャナ、及び/又は陽電子放射断層撮影(PET)スキャナを挙げることができる。
1又は2以上の立体カメラ106は、被験者114の解剖学的部位112などの解剖学的部位の3D立体画像又は3D構造データを取り込んで生成するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。空間内の異なる視点から複数の画像を取得して、術中状態にある解剖学的部位112の3D立体画像又は3D構造データを生成することができる。異なる視点からの複数のカメラ、単一の立体カメラの複数のカメラレンズ、又は単一の移動カメラを用いて、立体画像対などの複数の画像を取得することができる。これらの1又は2以上の立体カメラ106の立体ビジョンから、術中状態にある剥き出しの脳表面などの露出面の3D構造データを再現することができる。ある実施形態によれば、顕微鏡手術を行うために使用される外科用顕微鏡に1又は2以上の立体カメラ106を取り付けることができる。
サーバ108は、複数の医用撮像装置104から取得した1又は2以上のデータセットを受け取って中央に記憶するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。1又は2以上のデータセットは、解剖学的部位112に組織変形が発生する前の、術前状態にある解剖学的部位112の撮像データに対応することができる。ある実施形態によれば、1又は2以上のデータセットは、マルチモーダル画像に対応することができる。ある実施形態によれば、サーバ108は、予め記憶されている1又は2以上のデータセットを通信ネットワーク110を介して電子装置102に提供するように構成することができる。ある実施形態によれば、電子装置102は、1又は2以上のデータセットを複数の医用撮像装置104から直接受け取ることができる。ある実施形態によれば、サーバ108及び電子装置102は、いずれもコンピュータ支援外科手術システムの一部とすることができる。ある実施形態によれば、サーバ108は、当業者に周知の複数の技術を用いて複数のクラウドベースのリソースとして実装することができる。サーバ108の例としては、以下に限定するわけではないが、データベースサーバ、ファイルサーバ、アプリケーションサーバ、ウェブサーバ、及び/又はこれらの組み合わせを挙げることができる。
通信ネットワーク110は、電子装置102、複数の医用撮像装置104、1又は2以上の立体カメラ106、及び/又はサーバ108が互いに通信できるようにする媒体を含むことができる。通信ネットワーク110は、有線又は無線通信ネットワークとすることができる。通信ネットワーク110の例としては、以下に限定するわけではないが、ローカルエリアネットワーク(LAN)、無線ローカルエリアネットワーク(WLAN)、クラウドネットワーク、ロングタームエボリューション(LTE)ネットワーク、一般電話サービス(POTS)、メトロポリタンエリアネットワーク(MAN)及び/又はインターネットを挙げることができる。ネットワーク環境100内の様々な装置は、様々な有線及び無線通信プロトコルに従って通信ネットワーク110に接続するように構成することができる。このような有線及び無線通信プロトコルの例としては、以下に限定するわけではないが、伝送制御プロトコル及びインターネットプロトコル(TCP/IP)、ユーザデータグラムプロトコル(UDP)、ハイパーテキスト転送プロトコル(HTTP)、ファイル転送プロトコル(FTP)、ZigBee、EDGE、赤外線(IR)、IEEE802.11、802.16、セルラー通信プロトコル、及び/又はBluetooth(BT)通信プロトコルを挙げることができる。
解剖学的部位112は、人間被験者114などの被験者の解剖学的部位及び/又は臓器とすることができる。解剖学的部位112は、複数の表面構造を含むことができる。解剖学的部位112の複数の表面構造は、不均質な解剖学的表面構造とすることができる。解剖学的部位112の複数の表面構造の各表面構造は、独自の組織物質特性を有することができる。ある実施形態によれば、解剖学的部位112を被験者114の脳(頭蓋領域)、又は脳の少なくとも一部とすることができる。このような実施形態では、複数の表面構造を脳の皮質、血管及び/又は脳室とすることができる。複数の表面構造は、被験者114の脳内の腫瘍構造をさらに含むことができる。ある実施形態によれば、解剖学的部位112を、やはり不均質な解剖学的表面構造を含む心臓(心領域)とすることができる。
当業者であれば、本開示の範囲は、図示のような開示する被験者114の解剖学的部位112の手術を支援するシステム及び方法の実装に限定されるものではないと理解するであろう。ある実施形態によれば、開示するシステム及び方法は、動物被験者の解剖学的部位又は解剖学的部位の手術を支援するために使用することもできる。さらに、開示するシステム及び方法は、上述したような脳又は心臓以外の解剖学的部位又は領域の手術を支援するのに役立つこともできる。
手術時には、電子装置102を、MRIスキャナから解剖学的部位112に関連する少なくとも1つのデータセットを受け取るように構成することができる。データセットは、被験者114の頭蓋骨のスライスなどの、解剖学的部位112の体積を通じて撮影されたスライス面を表す複数の2D画像を含むことができる。このデータセットは、手術前に(術前状態で)撮影されたMRIデータに対応することができる。電子装置102は、受け取った解剖学的部位112に関連するデータセットを位置合わせするように構成することができる。
ある実施形態によれば、電子装置102は、マルチモーダルソースから解剖学的部位112に関連する複数のデータセットを受け取るように構成することができる。マルチモーダルソースは、MRI、CT、PET、FRAIR及びMRAベースの医用撮像法を用いて解剖学的部位112に関連する複数のデータセットを取得する複数の医用撮像装置104とすることができる。ある実施形態によれば、CT及びMRIなどの異なるマルチモーダルソースからの解剖学的部位112に関連する複数のデータセットを位置合わせするために、複数のデータセットが重複内容を有していなければならない。このような実施形態では、電子装置102を、受け取った解剖学的部位112に関連する複数のデータセットを重複内容の識別に基づいて位置合わせするように構成することができる。
電子装置102は、受け取ったMRIスキャナからのデータセット又はマルチモーダルソースからの複数のデータセットに基づき、位置合わせに基づいて解剖学的部位112の複数の表面構造を再現するように構成することができる。例えば、解剖学的部位112が脳である場合、電子装置102は、小脳皮質、大脳皮質、脳の血管構造及び/又は脳室などの脳の表面構造を再現することができる。
ある実施形態によれば、電子装置102は、再現された解剖学的部位112の複数の表面構造の表面分割を行うように構成することができる。表面分割は、解剖学的部位112が手術前の開かれていない状態にある時に、解剖学的部位112の組織の変形前のMRIデータを用いて実行することができる。
ある実施形態によれば、電子装置102は、2Dから3Dへのジオメトリ処理及び表面分割に基づいて解剖学的部位112の3D構造を形成するように構成することができる。2Dから3Dへのジオメトリ処理は、メッシュジオメトリ処理又はグリッドジオメトリ処理とすることができる。形成される3D構造は、再現された複数の表面構造を含むことができる。電子装置102は、形成された解剖学的部位112の3D構造の1又は2以上のビューを表示するように構成することができる。このような表示される1又は2以上のビューは、手術前の解剖学的部位112の組織変形前の解剖学的部位112の3D構造に対応することができる。外科医116は、表示された解剖学的部位112の3D構造の1又は2以上のビューに基づいて、解剖学的部位112に行うべき手術を計画することができる。
ある実施形態によれば、(手術が行われる)術中状態において、1又は2以上の要因によって解剖学的部位112の組織が変形していることがある。1又は2以上の要因の例としては、以下に限定するわけではないが、解剖学的部位112の組織構造の複雑度レベル、重力、及び/又は術中状態において組織が露出した際の解剖学的部位112の周囲における脳脊髄液などの体液の損失を挙げることができる。1又は2以上の要因としては、解剖学的部位112の組織の柔軟性範囲、血圧、及び/又は手術中の解剖学的部位112に関連する保護被覆又は支持構造の変位度合いを挙げることもできる。解剖学的部位112の組織変形は特定の解剖学的組織構造を変位させ、これによって解剖学的部位112内の関心領域にアクセスするための予め計画した経路を手術中に変更することもある。従って、外科医116は、手術を行っている間に変形領域及び組織構造の変位を素早く正確に知ることが有利となり得る。
ある実施形態によれば、電子装置102は、解剖学的部位112が手術中の開かれた状態にある時に、立体ビジョンを利用して変形後の表面変位を判定するように構成することができる。1又は2以上の立体カメラ106を使用して、術中状態にある解剖学的部位112の3D立体画像又は3D構造データを取り込んで生成することができる。電子装置102は、(変形後の)解剖学的部位112の1又は2以上の表面を再現するように構成することができる。
ある実施形態によれば、電子装置102は、再現された開かれた状態にある解剖学的部位112の1又は2以上の表面と開かれていない状態にある解剖学的部位の3D構造との位置合わせを3D座標系において行うように構成することができる。ある実施形態によれば、位置合わせは、組織変形前の術前状態及び組織変形後の術中状態などの両手術段階において変化しない解剖学的部位112の共通の基準点を用いて行うことができる。例えば、解剖学的部位112が脳である場合、被験者114の頭蓋骨の骨構造(この例では共通する不変の基準点)の整列を位置合わせに使用することができる。このような位置合わせは、単一ステップによる位置合わせとすることができる。
ある実施形態によれば、電子装置102は、解剖学的部位112の複数の表面構造の1又は2以上の組織物質特性を受け取るように構成することができる。電子装置102は、解剖学的部位112に関連する1又は2以上の境界条件をさらに受け取るように構成することができる。ある実施形態によれば、電子装置102は、変位(又は変形)境界条件及び静止境界条件などの2つの境界条件を受け取るように構成することができる。例えば、必ずしも解剖学的部位112の全ての表面構造が変位しないこともある。さらに、複数の表面構造の位置に起因して、一部の表面構造が他の表面構造に比べて変形しやすいこともある。好ましい位置又は関連する解剖学的構造からの支持に起因して変形する傾向が低い表面構造は、静止境界条件に対応することができる。上述したような、変形する傾向が比較的高いことを示す表面構造は、変形境界条件に対応することができる。従って、解剖学的部位112に関連するこのような受け取られる境界条件は、解剖学的部位112の表面変位の判定精度を高めることができる。
ある実施形態によれば、電子装置102は、解剖学的部位112の第1の表面(変形前)を、対応する解剖学的部位112の第2の表面(変形後)と照合するように構成することができる。第1の表面及び第2の表面は、異なる時点及び/又は変形状態における解剖学的部位112の同じ表面とすることができる。上述したように、解剖学的部位112の第1の表面は、形成される3D構造の(変形前の)少なくとも1又は2以上の表面に対応することができる。解剖学的部位112の第2の表面は、解剖学的部位112の再現された(変形後の)1又は2以上の表面に対応することができる。ある実施形態によれば、電子装置102は、照合の結果に基づいて解剖学的部位112の表面変位を判定するように構成することができる。
ある実施形態によれば、受け取った複数の表面構造の1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件と、判定された解剖学的部位112の表面変位とを有限要素法(FEM)フレームワークに供給することができる。ある実施形態によれば、電子装置102は、解剖学的部位112の体積変位場を計算するように構成することができる。計算される体積変位は、判定された表面変位と、受け取った1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件とに基づくことができる。電子装置102は、このような解剖学的部位112の体積変位場の計算にFEMフレームワークを利用するように構成することができる。
ある実施形態によれば、電子装置102は、FEMフレームワークにおいて(変形前の)解剖学的部位112に対する(変形後の)解剖学的部位112に関連するボクセルの変位を測定するように構成することができる。ボクセルの変位の測定は、判定された表面変位に基づいて解剖学的部位112の組織内容全体などの体積全体内で実行することができる。ボクセルの変位の測定は、体積変位場の計算に対応することができる。
ある実施形態によれば、電子装置102は、計算された変形補正のための体積変位場を解剖学的部位112の複数の表面構造のうちの1つ又は2つ以上に適用するように構成することができる。その後、電子装置102は、(変形後の)解剖学的部位112の複数の多次元グラフィックビューを生成することができる。生成される複数の多次元グラフィックビューは、解剖学的部位112の複数の表面構造における変位した1又は2以上の関心領域、及び/又は解剖学的部位112内の体積変位を含むことができる。体積変位は、変形後の体積の変化を表すことができる。複数の多次元グラフィックビューは、複数の表面構造を含む解剖学的部位112の3Dビューの1又は2以上の視点に対応することができる。
電子装置102は、生成された(変形後の)解剖学的部位112の複数の多次元グラフィックビューの表示を制御するように構成することができる。このような組織変形が存在する解剖学的部位112の複数の多次元グラフィックビューの生成及び表示は、外科医116が解剖学的部位112の手術を行っている間に外科医116をリアルタイム又は準リアルタイムで支援するために行うことができる。ユーザは、生成された複数の多次元グラフィックビューを医療要件通りに制御し、修正し、可視化することができる。
図2は、本開示の実施形態による、組織変形の存在下において手術を支援する例示的な電子装置のブロック図である。図2の説明は、図1の要素に関連して行う。図2には、電子装置102を示す。電子装置102は、プロセッサ202などの1又は2以上のプロセッサと、メモリ204と、I/O装置206などの1又は2以上の入力/出力(I/O)装置と、ネットワークインターフェイス208とを含むことができる。I/O装置206は、ディスプレイ210を含むことができる。
プロセッサ202は、メモリ204、I/O装置206及びネットワークインターフェイス208に通信可能に結合することができる。ネットワークインターフェイス208は、プロセッサ202の制御下で通信ネットワーク110を介して複数の医用撮像装置104、1又は2以上の立体カメラ106、及び/又はサーバ108などの1又は2以上のサーバと通信することができる。
プロセッサ202は、メモリ204に記憶されている命令セットを実行するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。プロセッサ202は、当業で周知の多くのプロセッサ技術に基づいて実装することができる。プロセッサ202の例は、X86ベースプロセッサ、X86−64ベースプロセッサ、縮小命令セットコンピュータ(RISC)プロセッサ、特定用途向け集積回路(ASIC)プロセッサ、複合命令セットコンピュータ(CISC)プロセッサ、中央処理装置(CPU)、明示的並列命令コンピュータ(EPIC)プロセッサ、超長命令語(VLIW)プロセッサ、及び/又はその他のプロセッサ又は回路とすることができる。
メモリ204は、プロセッサ202が実行できる機械コード及び/又は命令セットを記憶するように構成できる好適なロジック、回路及び/又はインターフェイスを含むことができる。メモリ204は、人間被験者114などの被験者の生理学的データ又は医療履歴に関連する1又は2以上のユーザプロファイルからの情報を記憶するように構成することができる。ある実施形態によれば、被験者114などの被験者の医療履歴が記憶されていないこともある。或いは、1又は2以上のユーザプロファイル情報項目をサーバ108に記憶することもできる。メモリ204は、アプリケーションUIなどのユーザインターフェイス(UI)を記憶することもできる。UIは、解剖学的部位112の複数の多次元グラフィックビューを表示するために使用される三次元(3D)ビューア又は二次元(2D)ビューアとすることができる。メモリ204は、オペレーティングシステム及び関連するアプリケーションを記憶するようにさらに構成することができる。メモリ204の実装例としては、以下に限定するわけではないが、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、電子的消去可能プログラマブルリードオンリメモリ(EEPROM)、ハードディスクドライブ(HDD)、ソリッドステートドライブ(SSD)、CPUキャッシュ及び/又はセキュアデジタル(SD)カードを挙げることができる。
I/O装置206は、外科医116などのユーザから入力を受け取ってユーザに出力を提供するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。I/O装置206は、電子装置102と外科医116などのユーザとの間の通信を容易にするように構成できる様々な入力装置及び出力装置を含むことができる。入力装置の例としては、以下に限定するわけではないが、タッチ画面、カメラ、キーボード、マウス、ジョイスティック、マイク、モーションセンサ、光センサ及び/又はドッキングステーションを挙げることができる。出力装置の例としては、以下に限定するわけではないが、ディスプレイ210、プロジェクタ画面及び/又はスピーカを挙げることができる。
ネットワークインターフェイス208は、(図1に示すような)通信ネットワーク110を介して複数の医用撮像装置104、1又は2以上の立体カメラ106及び/又はサーバ108と通信するように構成できる好適なロジック、回路、インターフェイス及び/又はコードを含むことができる。ネットワークインターフェイス208は、電子装置102と通信ネットワーク110との間の有線又は無線通信を支援する既知の技術を実装することができる。ネットワークインターフェイス208は、以下に限定するわけではないが、アンテナ、無線周波数(RF)トランシーバ、1又は2以上の増幅器、チューナ、1又は2以上の発振器、デジタルシグナルプロセッサ、コーダ−デコーダ(CODEC)チップセット、加入者アイデンティティモジュール(SIM)カード及び/又はローカルバッファを含むことができる。ネットワークインターフェイス208は、有線又は無線通信を介して通信ネットワーク110と通信することができる。無線通信は、グローバル・システム・フォー・モバイル・コミュニケーションズ(GSM)、拡張データGSM環境(EDGE)、広帯域符号分割多元接続(W−CDMA)、符号分割多元接続(CDMA)、時分割多元接続(TDMA)、Bluetooth、ロングタームエボリューション(LTE)、(IEEE802.11a、IEEE802.11b、IEEE802.11g、及び/又はIEEE802.11nなどの)ワイヤレスフィデリティ(Wi−Fi)、ボイスオーバーインターネットプロトコル(VoIP)、Wi−MAX、電子メール、インスタントメッセージング、及び/又はショートメッセージサービス(SMS)のプロトコルなどの通信規格、プロトコル及び技術のうちの1つ又は2つ以上を使用することができる。
ディスプレイ210は、ブラウン管(CRT)ベースのディスプレイ、液晶ディスプレイ(LCD)、発光ダイオード(LED)ベースのディスプレイ、有機LEDディスプレイ技術、網膜ディスプレイ技術などの複数の既知の技術を通じて実現することができる。ある実施形態によれば、ディスプレイ210は、(外科医116などの)ユーザから入力を受け取ることができる。このようなシナリオでは、ディスプレイ210を、ユーザによる入力の提供を可能にするタッチ画面とすることができる。タッチ画面は、抵抗性タッチ画面、容量性タッチ画面、又は熱タッチ画面のうちの少なくとも1つに対応することができる。ある実施形態によれば、ディスプレイ210は、仮想キーパッド、スタイラス、ジェスチャ式入力、及び/又はタッチ式入力を通じて入力を受け取ることができる。このような場合、入力装置は、ディスプレイ210内に一体化することができる。
プロセッサ202は、動作時にネットワークインターフェイス208を用いて解剖学的部位112に関連する少なくとも1つのデータセットを受け取るように構成することができる。少なくとも1つのデータセットは、MRIスキャナから通信ネットワーク110を介して受け取ることができる。プロセッサ202は、受け取ったデータセットを、ネットワークインターフェイス208を用いてプロセッサ202に通信するようにさらに構成することができる。プロセッサ202は、受け取った解剖学的部位112に関連するデータセットの位置合わせを行うように構成することができる。ある実施形態によれば、プロセッサ202は、解剖学的部位112に関連する複数のデータセットを複数の医用撮像装置104などのマルチモーダルソースから受け取るように構成することができる。プロセッサ202によって実行される動作については、図3A〜図3Dにおいて、対象の解剖学的部位112としての被験者114の脳を例に取ってさらに説明する。しかしながら、解剖学的部位112は、本開示の範囲を限定することなく被験者の他の解剖学的部位とすることもできる。
図3A〜図3Dに、本開示の実施形態による、組織変形の存在下において手術を支援するためのシステム及び方法を実装するための例示的なシナリオをまとめて示す。図3Aには、本開示の実施形態による、組織変形の発生前に手術に先立って受け取られる、脳の少なくとも一部に関連するMRIデータの処理を示す。図3Aの説明は、図1及び図2に関連して行う。図3Aには、MRIデータ302と、脳304と、皮質構造304Aと、血管構造304Bと、脳室構造304Cと、脳304の第1の3D構造306と、脳304の第2の3D構造308とを示す。
例示的なシナリオによれば、MRIデータ302は、MRIスキャナから受け取られた、脳304などの解剖学的部位112に関連するデータセットに対応することができる。MRIデータ302は、手術前に取り込むことができる。MRIデータ302は、解剖学的部位112の体積を通じて撮影された、被験者114の頭部のスライスなどのスライス面を表す複数の2D画像を含むことができる。脳304は、被験者114の解剖学的部位112に対応することができる。皮質構造304A、血管構造304B及び脳室構造304Cは、脳304の複数の表面構造に対応することができる。ある実施形態によれば、皮質構造304Aは、大脳皮質及び小脳皮質に対応することができる。脳304の第1の3D構造306は、2Dから3Dへのメッシュジオメトリ処理によって取得される3D構造に対応することができる。脳304の第2の3D構造308は、2Dから3Dへのグリッドジオメトリ処理によって取得される別の3D構造に対応することができる。
ある実施形態によれば、プロセッサ202は、MRIスキャナからMRIデータ302を受け取るように構成することができる。MRIデータ302は、電子装置102のメモリ204に記憶することができる。ある実施形態によれば、MRIデータ302は、サーバ108などの中心記憶位置に記憶することができる。このような場合、プロセッサ202は、ネットワークインターフェイス208を用いて通信ネットワーク110を介してサーバ108からMRIデータ302を受け取ることができる。
ある実施形態によれば、プロセッサ202は、受け取ったMRIデータ302を処理して、MRIデータ302全体にわたる関連する内容を識別して位置合わせを実行するように構成することができる。ある実施形態によれば、プロセッサ202は、MRIデータ302の位置合わせのために被験者114の頭蓋骨の骨構造を整列させるように構成することができる。プロセッサ202は、受け取った脳304に関連するMRIデータ302の位置合わせを行うように構成することができる。プロセッサ202は、位置合わせに基づいて、図3Aに示すような皮質構造304A、血管構造304B及び脳室構造304Cなどの脳304の複数の表面構造を再現するように構成することができる。
ある実施形態によれば、プロセッサ202は、再現された脳304の複数の表面構造、又は脳304の少なくとも一部の表面分割を実行するように構成することができる。表面分割は、脳304が手術前の開かれていない状態にある時に実行することができる。このような開かれていない状態では、脳304の組織が変形していないこともある。
ある実施形態によれば、プロセッサ202は、2Dから3Dへのジオメトリ処理及び表面分割に基づいて、306及び308によって示す脳304の1又は2以上の3D構造を形成するように構成することができる。脳304の第1の3D構造306は、メッシュジオメトリ処理技術によって取得される脳304の3D構造の例とすることができる。第2の3D構造308は、2Dから3Dへのグリッドジオメトリ処理によって取得される脳304の3D構造の別の例とすることができる。第1の3D構造306は、再現された血管構造304B及び脳室構造304Cを示す。第1の3D構造306は、皮質構造304Aを三角形メッシュの形でさらに示す。第2の3D構造は、再現された皮質構造304Aと、皮質構造304Aの表面にオーバーレイされた、構造304Bの血管の一部とを示す。
プロセッサ202は、形成された脳304の3D構造306及び308の1又は2以上のビュー、脳304の他のMRIデータ302、及び/又は予め記憶されている患者などの被験者の生理学的データのディスプレイ210上への表示を制御するように構成することができる。外科医116は、表示された1又は2以上のビューに基づいて、脳304に行うべき手術を計画することができる。
図3Bに、本開示の実施形態によるシステム及び方法を実装するための例示的なシナリオにおける、立体ビジョンに基づく変形後の脳304の3D表面再現を示す。図3Bの説明は、図1、図2及び図3Aに関連して行う。図3Bには、手術中に脳304が開かれた状態にある時の脳304の立体面再現の概略図310を示す。さらに、脳304の立体データ310A及び3D構造データ310Bも示す。図3Bには、脳304の3D構造データ310Bからの第1の拡大切断部310C及び第2の拡大切断部310Dをさらに示す。
ある実施形態によれば、1又は2以上の立体カメラ106を用いて立体データ310Aを取り込み、術中状態にある脳304の3D立体画像又は3D構造データ310Bを生成することができる。既存のシステム及び技術には、解剖学的構造及び変形の存在を可視化するために術中MRI撮像を使用できるものもある。このような術中MRI撮像は、手術中に解剖学的部位112の組織が露出された時の放射線への被曝リスクに起因して、被験者にとって安全でない可能性がある。さらに、必要なMRIスキャナ及び/又は複数の医用撮像装置104が手術室に備わっていないこともある。従って、術中段階において被験者114などの患者をこのような医療撮像のために別の部屋に移動させることが必要になり、これによって生命へのリスクがさらに高まる恐れがある。従って、場所を取るMRIスキャナの代わりに1又は2以上の立体カメラ106を手術室内に配置することが比較的安全で容易となり得る。さらに、立体ビジョンからは、術中状態における解剖学的部位112の組織への放射線被曝のリスクがない。
プロセッサ202は、脳304の3D構造データ310Bから、組織変形後の脳304の皮質及び血管などの1又は2以上の表面を再現するように構成することができる。脳304の第1の拡大切断部310Cは、(変形後の)脳304の(点線矢印記号によって示す)皮質構造に対応する表面再現を示す。脳の第2の拡大切断部310Dは、立体ビジョンに基づく脳304の表面上の組織変形後の(点線矢印記号によって示す)血管構造の再現を示す。ある実施形態によれば、プロセッサ202は、再現された脳304の1又は2以上の表面(変形後)と形成された脳304の3D構造306及び308(変形前)との位置合わせを3D座標系において行うように構成することができる。
図3Cには、本開示の実施形態によるシステム及び方法を実装するための例示的なシナリオにおける、FEMフレームワークを用いた脳304の表面変形測定を示す。図3Cの説明は、図1、図2、図3A及び図3Bの要素に関連して行う。図3Cには、複数の組織物質特性312と、変形境界条件314と、静止境界条件316と、表面変位測定データ318と、FEMフレームワーク320と、脳304の体積変位場322とを示す。
ある実施形態によれば、プロセッサ202は、脳304の皮質構造、血管構造、脳室構造の組織物質特性などの複数の組織物質特性312を受け取るように構成することができる。ある実施形態によれば、プロセッサ202は、脳304の変形境界条件314及び静止境界条件316を計算するように構成することができる。ある実施形態によれば、脳304などの被験者の様々な解剖学的部位について変形境界条件314及び静止境界条件316を予め定めることができる。プロセッサ202は、脳304の変形境界条件314及び静止境界条件316を受け取ることができる。
ある実施形態によれば、プロセッサ202は、変形前後の脳304の表面を照合することによって脳304に関連する表面変位を判定するように構成することができる。脳304に関連する判定された表面変位に対応する表面変位測定データ318は、メモリ204に記憶することができる。
既存の技術には、2つの表面を直接照合する代わりに点整合法を実行して変位を判定できるものもあるが、この方法は時間が掛かる計算集約的なプロセスになり得る。プロセッサ202は、2つの対応する変形前後の表面を直接照合することができるので、脳304の表面変位を素早く判定することができる。表面変位の判定が素早いと、他の関連する後続プロセスをさらに素早く処理することができ、手術の実施中に外科医116を素早くタイムリーに支援する上で有利となり得る。
ある実施形態によれば、受け取った複数の表面構造の複数の組織物質特性312をFEMフレームワーク320に供給することができる。さらに、受け取った変形境界条件314及び静止境界条件316などの複数の境界条件、並びに表面変位測定データ318もFEMフレームワーク320に供給することができる。
プロセッサ202は、体積変位場322の計算のためにFEMフレームワーク320及び/又は生化学的モデリングを利用することができる。ある実施形態によれば、プロセッサ202は、受け取った表面変位測定データ318と、受け取った複数の組織物質特性312と、受け取った変形境界条件314及び静止境界条件316とに基づいて脳304の体積変位場322を計算することができる。
図3Dに、本開示の実施形態によるシステム及び方法を実装するための例示的なシナリオにおける変形補正を示す。図3Dの説明は、図1、図2、図3A、図3B及び図3Cの要素に関連して行う。図3Dには、体積変位場322を含む脳304の断面図324を示す。さらに、脳空間における体積変位場322の適用を示す脳304の第1のビュー326及び第2のビュー328、並びに解剖学的構造を体積変位領場322によって補正した脳304の出力3D構造330も示す。
ある実施形態によれば、プロセッサ202は、FEMフレームワーク320内で(変形前の脳304の体積に対する変形後の)脳304の体積内のボクセルの変位を測定するように構成することができる。脳304の体積は、脳304の表面構造だけではなく、脳304の組織内容全体に対応することができる。ボクセルの変位の測定は、計算された体積変位場322の伝播に対応することができる。
ある実施形態によれば、プロセッサ202は、計算された体積変位場322を脳空間内で適用するように構成することができる。この適用は、脳304の複数の表面構造のうちの1つ又は2つ以上に対して変形補正のために行うことができる。第1のビュー326は、計算された体積変位場322を脳空間内で適用して脳304の皮質構造304Aを補正することを示す。第2のビュー328は、計算された体積変位場322を脳空間内で適用して脳304の血管構造304B及び脳室構造304Cなどの他の解剖学的構造を補正することを示す。プロセッサ202は、脳304の体積内の測定されたボクセルの変位に基づいて体積補間を実行するように構成することができる。体積補間は、FEMフレームワーク320内に散在する形を取ることができる計算された体積変位場322からの高密度補間とすることができる。
ある実施形態によれば、プロセッサ202は、(点線矢印記号によって示す)複数の表面構造などの解剖学的構造を含む出力3D構造330を生成するように構成することができる。このような複数の表面構造は、体積変位場322によって正確に補正することができる。補正された複数の表面構造を含む出力3D構造330の生成は、体積補間にさらに基づくことができる。補正された複数の表面構造を含む出力3D構造330の生成及びその後の表示は、外科医116が脳304の手術を行っている間にリアルタイム又は準リアルタイムで行うことができる。ある実施形態によれば、脳304の複数の多次元グラフィックビューの出力3D構造330及びその他を様々な術中用途において使用することができる。例えば、生成された出力3D構造330を組織変形の定量化において使用し、さらにこれを用いて変形組織の生存率を求めることもできる。
ある実施形態によれば、プロセッサ202は、変形後の脳304の複数の多次元グラフィックビューの表示を制御するように構成することができる。出力3D構造330は、脳304の複数の多次元グラフィックビューのうちの1つ又は2つ以上とすることができる。他の生成される複数の多次元グラフィックビューも、脳304の複数の表面構造内の変位した1又は2以上の関心領域、及び/又は脳304内の体積変位を含むことができる。1又は2以上の視点からの複数の多次元グラフィックビューは、複数の表面構造を含む脳304の3Dビューに対応することができる。このような脳304の複数の多次元グラフィックビューの生成及び表示は、脳304の組織変形の存在下において外科医116を素早く正確に支援することができる。
ある実施形態によれば、複数の多次元グラフィックビューは、ディスプレイ210上に表示できるUI上にレンダリングすることができる。表示される複数の多次元グラフィックビューは相互作用的なものとすることができ、I/O装置206から受け取られた入力に基づいてユーザ制御することができる。このような脳304の補正された複数の表面構造を含む多次元グラフィックビューの高度な可視化は、被験者114の画像誘導又はロボット支援開頭蓋手術などの手術におけるリアルタイム又は準リアルタイム支援のために利用することができる。
図4A及び図4Bに、本開示の実施形態による、組織変形の存在下において手術を支援する例示的な方法を実施するためのフローチャートをまとめて示す。図4A及び図4Bにはフローチャート400を示す。フローチャート400の説明は、図1、図2及び図3A〜図3Dの要素に関連して行う。フローチャート400による方法は、電子装置102において実施することができる。この方法は、ステップ402から開始してステップ404に進む。
ステップ404において、複数の医用撮像装置104などの1又は2以上のマルチモーダルソースから解剖学的部位112に関連する1又は2以上のデータセットを受け取ることができる。受け取られる1又は2以上のデータセットは、手術前に解剖学的部位112に対して行われるMRIなどの医用撮像に対応することができる。データセットの例は、図3Aに示すような、MRIスキャナから受け取られる、脳304に関連するMRIデータ302とすることができる。
ステップ406において、受け取った解剖学的部位112に関連する1又は2以上のデータセットの位置合わせを行うことができる。マルチモーダルソースから複数のデータセットを受け取った場合には、受け取った複数のデータセットにわたる重複内容の識別に基づいて、受け取った複数のデータセットを位置合わせすることができる。
ステップ408において、MRIスキャナ又はマルチモーダルソースから受け取った1又は2以上のデータセットに基づき、位置合わせに基づいて解剖学的部位112の複数の表面構造を再現することができる。再現される解剖学的部位112の複数の表面構造の例は、図3Aに示して説明したような脳304の皮質構造304A、血管構造304B及び脳室構造304Cとすることができる。
ステップ410において、再現された解剖学的部位112の複数の表面構造の表面分割を実行することができる。表面分割は、解剖学的部位112が手術前の開かれていない状態にある時に、解剖学的部位112の組織変形前のMRIデータ302などのMRIデータを用いて実行することができる。
ステップ412において、2Dから3Dへのジオメトリ処理及び表面分割に基づいて解剖学的部位112の3D構造を形成することができる。2Dから3Dへのジオメトリ処理は、メッシュジオメトリ処理又はグリッドジオメトリ処理とすることができる。形成される解剖学的部位112の3D構造の例は、メッシュジオメトリ処理技術によって取得される脳304の第1の3D構造306、及び/又は2Dから3Dへのグリッドジオメトリ処理技術によって取得される第2の3D構造308とすることができる(図3A)。
ステップ414において、解剖学的部位112が手術中の開かれた状態にある時に、立体ビジョンを利用して解剖学的部位112の(変形後の)1又は2以上の表面を再現することができる。例えば、1又は2以上の立体カメラ106を用いて立体データ310Aを取り込み、術中状態にある脳304の3D立体画像又は3D構造データ310Bを生成することができる。脳304の3D構造データ310Bからは、組織変形後の脳304の皮質及び血管などの1又は2以上の表面を再現することができる(図3B)。
ステップ416において、再現された開かれた状態にある解剖学的部位112の1又は2以上の表面と、開かれていない状態にある解剖学的部位112の3D構造との位置合わせを3D座標系において実行することができる。例えば、(変形後の)再現された脳304の1又は2以上の表面と(変形前の)形成された脳304の3D構造306及び308とを3D座標系において位置合わせすることができる。
ステップ418において、解剖学的部位112の複数の表面構造の1又は2以上の組織物質特性を受け取ることができる。1又は2以上の組織物質特性の例は、脳304の皮質構造304A、血管構造304B及び/又は脳室構造304Cの組織物質特性とすることができる。
ステップ420において、解剖学的部位112に関連する1又は2以上の境界条件をさらに受け取ることができる。解剖学的部位112に関連する1又は2以上の境界条件の例は、脳304の変形境界条件314及び静止境界条件316とすることができる。
ステップ422において、変形前の解剖学的部位112の第1の表面を、対応する変形後の解剖学的部位112の第2の表面と照合することができる。解剖学的部位112の第1の表面は、形成された変形前の3D構造の少なくとも1又は2以上の表面に対応することができる。解剖学的部位112の第2の表面は、再現された変形後の解剖学的部位112の1又は2以上の表面に対応することができる。
ステップ424において、照合の結果に基づいて、解剖学的部位112の組織変形後の解剖学的部位112の表面変位を判定することができる。判定される解剖学的部位112の表面変位の例は、脳304に関連する判定された表面変位に対応する表面変位測定データ318とすることができる。
ステップ426において、受け取った複数の表面構造の1又は2以上の組織物質特性、受け取った1又は2以上の境界条件及び判定された解剖学的部位112の表面変位をFEMフレームワーク320などのFEMフレームワークに供給することができる。FEMフレームワーク及び/又は生化学的モデリングを利用して、受け取ったデータを分析することができる。
ステップ428において、判定された表面変位と、受け取った1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件とに基づいて、解剖学的部位112の体積変位場322を計算することができる。電子装置102は、解剖学的部位112の体積変位場の計算にFEMフレームワークを利用するように構成することができる。計算される解剖学的部位112の体積変位場の例は、図3Cに示して説明したような脳304の体積変位場322とすることができる。
ステップ430において、FEMフレームワーク内で、変形後の解剖学的部位112に関連するボクセルの変位を変形前の解剖学的部位112に対して測定することができる。ボクセルの変位は、解剖学的部位112の組織内容全体について測定することができる。
ステップ432において、変形補正のために、計算された体積変位場を解剖学的部位112の複数の表面構造のうちの1つ又は2つ以上に適用することができる。例えば、第1のビュー326は、計算された体積変位場322を脳空間内で適用して脳304の皮質構造304Aを補正することを示す。第2のビュー328は、計算された体積変位場322を脳空間内で適用して脳304の血管構造304B及び脳室構造304Cなどの他の解剖学的構造を補正することを示す(図3D)。脳304の体積内の測定されたボクセルの変位に基づいて体積補間を実行することができる。
ステップ434において、変形後の解剖学的部位112の複数の多次元グラフィックビューを生成することができる。生成される複数の多次元グラフィックビューは、解剖学的部位112の複数の表面構造内の変位した1又は2以上の関心領域、及び/又は解剖学的部位112内の体積変位を含むことができる。体積変位は、変形に起因する解剖学的部位112の体積の変化及び/又は変位した組織部位を表すことができる。生成される複数の多次元グラフィックビューの例は、補正された脳304の複数の表面構造を含むことができる脳304の出力3D構造330とすることができる。
ステップ436において、ユーザ入力に基づいて、生成された変形後の解剖学的部位112の複数の多次元グラフィックビューのUI上への表示を制御することができる。ユーザ入力は、電子装置102のディスプレイ210上にレンダリングされるUIを用いて受け取ることができる。複数の多次元グラフィックビューの表示は、外科医116によって提供される入力などの受け取られたユーザ入力に応答して変更し、更新することができる。制御は、ステップ438に進んで終了する。
本開示の実施形態によれば、組織変形の存在下において手術を支援するためのシステムは、電子装置102(図1)を含むことができる。電子装置102は、プロセッサ202(図2)などの1又は2以上の回路を含むことができる。プロセッサ202は、解剖学的部位112の複数の表面構造の1又は2以上の組織物質特性を受け取るように構成することができる。プロセッサ202は、解剖学的部位112に関連する1又は2以上の境界条件を受け取るようにさらに構成することができる。プロセッサ202は、変形前の解剖学的部位112の第1の表面と変形後の対応する解剖学的部位の第2の表面とを照合することによって解剖学的部位112の表面変位を判定するようにさらに構成することができる。プロセッサ202は、判定された表面変位と、受け取った1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件とに基づいて解剖学的部位112の体積変位場を計算するようにさらに構成することができる。
本開示の様々な実施形態は、組織変形の存在下において手術を支援するように機械及び/又はコンピュータによって実行可能な機械コード及び/又は命令セットを記憶した非一時的コンピュータ可読媒体及び/又は記憶媒体、及び/又は非一時的機械可読媒体及び/又は記憶媒体を提供することができる。電子装置102における命令セットは、解剖学的部位112(図1)の複数の表面構造の1又は2以上の組織物質特性を受け取ることを含むステップを機械及び/又はコンピュータに実行させることができる。解剖学的部位112に関連する1又は2以上の境界条件を受け取ることもできる。変形前の解剖学的部位112の第1の表面を対応する変形後の解剖学的部位112の第2の表面と照合することによって、解剖学的部位112の表面変位を判定することができる。判定された表面変位と、受け取った1又は2以上の組織物質特性と、受け取った1又は2以上の境界条件とに基づいて、解剖学的部位112の体積変位場を計算することができる。
本開示は、ハードウェアの形で実現することも、又はハードウェアとソフトウェアの組み合わせの形で実現することもできる。本開示は、少なくとも1つのコンピュータシステム内で集中方式で実現することも、又は異なる要素を複数の相互接続されたコンピュータシステムにわたって分散できる分散方式で実現することもできる。本明細書で説明した方法を実行するように適合されたコンピュータシステム又はその他の装置が適することができる。ハードウェアとソフトウェアの組み合わせは、ロードされて実行された時に本明細書で説明した方法を実行するようにコンピュータシステムを制御することができるコンピュータプログラムを含む汎用コンピュータシステムとすることができる。本開示は、他の機能も実行する集積回路の一部を含むハードウェアの形で実現することができる。
本開示は、本明細書で説明した方法の実装を可能にする全ての特徴を含み、コンピュータシステムにロードされた時にこれらの方法を実行できるコンピュータプログラム製品に組み込むこともできる。本文脈におけるコンピュータプログラムとは、情報処理能力を有するシステムに、特定の機能を直接的に、或いはa)別の言語、コード又は表記法への変換、b)異なる内容形態での複製、のいずれか又は両方を行った後に実行させるように意図された命令セットの、あらゆる言語、コード又は表記法におけるあらゆる表現を意味する。
いくつかの実施形態を参照しながら本開示を説明したが、当業者であれば、本開示の範囲から逸脱することなく様々な変更を行うことができ、同等物を代用することもできると理解するであろう。また、本開示の範囲から逸脱することなく、本開示の教示に特定の状況又は内容を適合させるための多くの変更を行うこともできる。従って、本開示は、開示した特定の実施形態に限定されるものではなく、添付の特許請求の範囲に該当する全ての実施形態を含むように意図されている。
400 フローチャート
402 開始
404 1又は2以上のマルチモーダルソースから解剖学的部位に関連する1又は2以上のデータセットを受け取る
406 受け取った解剖学的部位に関連する1又は2以上のデータセットを位置合わせ
408 MRIスキャナ又はマルチモーダルソースから受け取った1又は2以上のデータセットに基づき、位置合わせに基づいて解剖学的部位の複数の表面構造を再現
410 解剖学的部位が手術前の開かれていない状態にある時に、再現された解剖学的部位の複数の表面構造の表面分割を実行
412 2Dから3Dへのジオメトリ処理及び表面分割に基づいて解剖学的部位の3D構造を形成
414 解剖学的部位が手術中の開かれた状態にある時に、立体ビジョンを利用して解剖学的部位の(変形後の)1又は2以上の表面を再現
416 再現された開かれた状態にある解剖学的部位の1又は2以上の表面と、形成された開かれていない状態にある解剖学的部位の3D構造との位置合わせを3D座標系において実行
418 解剖学的部位の複数の表面構造の1又は2以上の組織物質特性を受け取る
420 解剖学的部位に関連する1又は2以上の境界条件を受け取る
422 変形前の解剖学的部位の第1の表面を、対応する変形後の解剖学的部位の第2の表面と照合

Claims (25)

  1. 手術支援のためのシステムであって、
    電子装置における1又は2以上の回路を備え、該1又は2以上の回路は、
    解剖学的部位の複数の表面構造の1又は2以上の組織物質特性を受け取り、
    前記解剖学的部位に関連する1又は2以上の境界条件を受け取り、
    変形前の前記解剖学的部位の第1の表面を対応する変形後の前記解剖学的部位の第2の表面と照合することによって前記解剖学的部位の表面変位を判定し、
    前記判定された表面変位と、前記受け取った1又は2以上の組織物質特性と、前記受け取った1又は2以上の境界条件とに基づいて、前記解剖学的部位の体積変位場を計算する、
    ように構成される、
    ことを特徴とするシステム。
  2. 前記解剖学的部位の前記複数の表面構造は、不均質な解剖学的表面構造に対応する、
    請求項1に記載のシステム。
  3. 前記解剖学的部位は、脳の少なくとも一部に対応し、前記複数の表面構造は、被験者の前記解剖学的部位に存在する時には、皮質、血管、脳室及び/又は腫瘍構造のうちの2つ又は3つ以上に対応する、
    請求項1に記載のシステム。
  4. 前記受け取った1又は2以上の境界条件は、少なくとも変位境界条件及び/又は静止境界条件を含む、
    請求項1に記載のシステム。
  5. 前記1又は2以上の回路は、磁気共鳴撮像(MRI)スキャナ又は該MRIスキャナを含むマルチモーダルソースから受け取られた前記解剖学的部位に関連するデータセットの位置合わせに基づいて、前記解剖学的部位の前記複数の表面構造を再現するようにさらに構成される、
    請求項1に記載のシステム。
  6. 前記1又は2以上の回路は、前記解剖学的部位が手術前の開かれていない状態にある時に、前記変形前のMRIデータを用いて前記解剖学的部位の前記複数の表面構造の表面分割を実行するようにさらに構成される、
    請求項1に記載のシステム。
  7. 前記1又は2以上の回路は、二次元(2D)から3Dへのジオメトリ処理及び前記表面分割に基づいて前記解剖学的部位の三次元(3D)構造を形成するようにさらに構成され、前記形成される3D構造は、前記第1の表面に対応する前記複数の表面構造を含む、
    請求項6に記載のシステム。
  8. 前記1又は2以上の回路は、前記解剖学的部位が手術中の開かれた状態にある時に、前記表面変位の前記判定のために立体ビジョンを利用して前記変形後の解剖学的部位の1又は2以上の表面を再現するようにさらに構成され、前記再現された前記変形後の解剖学的部位の1又は2以上の表面は、前記第2の表面に対応する、
    請求項7に記載のシステム。
  9. 前記1又は2以上の回路は、前記再現された前記開かれた状態にある前記解剖学的部位の1又は2以上の表面と、前記開かれていない状態にある前記解剖学的部位の前記3D構造との位置合わせを3D座標系において実行するようにさらに構成され、前記解剖学的部位が少なくとも前記被験者の脳の一部である場合、前記位置合わせは、前記被験者の頭蓋骨の骨構造の整列を用いて行われる、
    請求項8に記載のシステム。
  10. 前記1又は2以上の回路は、前記変形後の前記解剖学的部位に関連するボクセルの変位を前記変形前の前記解剖学的部位に対して有限要素法(FEM)フレームワークにおいて測定するようにさらに構成され、前記測定は、前記判定された表面変位に基づいて前記解剖学的部位の体積内で行われ、前記ボクセルの変位の前記測定は、前記体積変位場の前記計算に対応し、前記解剖学的部位の前記体積は、前記解剖学的部位の組織内容全体を表す、
    請求項1に記載のシステム。
  11. 前記1又は2以上の回路は、前記計算された体積変位場を変形補正のために前記複数の表面構造のうちの1つ又は2つ以上に適用するようにさらに構成される、
    請求項1に記載のシステム。
  12. 前記1又は2以上の回路は、前記解剖学的部位が開かれた状態で変形している時に手術中に支援を行うために、前記変形後の解剖学的部位の複数の多次元グラフィックビューを生成するようにさらに構成され、前記生成された複数の多次元グラフィックビューは、前記解剖学的部位の前記複数の表面構造における変位した1又は2以上の関心領域、及び/又は前記変形後の体積の変化を表す前記解剖学的部位内の体積変位を含む、
    請求項11に記載のシステム。
  13. 前記複数の多次元グラフィックビューは、1又は2以上の視点からの前記複数の表面構造を含む、前記解剖学的部位の2又は3以上の三次元ビューに対応する、
    請求項12に記載のシステム。
  14. 手術支援のための方法であって、
    電子装置における1又は2以上の回路が、解剖学的部位の複数の表面構造の組織物質特性を受け取るステップと、
    前記1又は2以上の回路が、前記解剖学的部位に関連する1又は2以上の境界条件を受け取るステップと、
    前記1又は2以上の回路が、変形前の前記解剖学的部位の第1の表面を対応する変形後の前記解剖学的部位の第2の表面と照合することによって前記解剖学的部位の表面変位を判定するステップと、
    前記1又は2以上の回路が、前記判定された表面変位と、前記受け取った1又は2以上の組織物質特性と、前記受け取った1又は2以上の境界条件とに基づいて、前記解剖学的部位の体積変位場を計算するステップと、
    を含むことを特徴とする方法。
  15. 前記解剖学的部位は、脳の一部に対応し、前記複数の表面構造は、被験者の前記解剖学的部位に存在する時には、皮質、血管、脳室及び/又は腫瘍構造のうちの2つ又は3つ以上に対応する、
    請求項14に記載の方法。
  16. 前記受け取った1又は2以上の境界条件は、少なくとも変位境界条件と静止境界条件とを含む、
    請求項14に記載の方法。
  17. 前記1又は2以上の回路が、磁気共鳴撮像(MRI)スキャナ又は該MRIスキャナを含むマルチモーダルソースから受け取られた前記解剖学的部位に関連するデータセットの位置合わせに基づいて、前記解剖学的部位の前記複数の表面構造を再現するステップをさらに含む、
    請求項14に記載の方法。
  18. 前記1又は2以上の回路が、前記解剖学的部位が手術前の開かれていない状態にある時に、前記変形前のMRIデータを用いて前記解剖学的部位の前記複数の表面構造の表面分割を実行するステップをさらに含む、
    請求項14に記載の方法。
  19. 前記1又は2以上の回路が、二次元(2D)から3Dへのジオメトリ処理及び前記表面分割に基づいて前記解剖学的部位の三次元(3D)構造を形成するステップをさらに含み、前記形成される3D構造は、前記第1の表面に対応する前記複数の表面構造を含む、
    請求項18に記載の方法。
  20. 前記1又は2以上の回路が、前記解剖学的部位が手術中の開かれた状態にある時に、前記表面変位の前記判定のために立体ビジョンを利用して前記変形後の解剖学的部位の1又は2以上の表面を再現するステップをさらに含み、前記再現された前記変形後の解剖学的部位の1又は2以上の表面は、前記第2の表面に対応する、
    請求項19に記載の方法。
  21. 前記1又は2以上の回路が、前記再現された前記開かれた状態にある前記解剖学的部位の1又は2以上の表面と、前記開かれていない状態にある前記解剖学的部位の前記3D構造との位置合わせを3D座標系において実行するステップをさらに含み、前記解剖学的部位が前記被験者の脳の一部である場合、前記位置合わせは、前記被験者の頭蓋骨の骨構造の整列を用いて行われる、
    請求項20に記載の方法。
  22. 前記1又は2以上の回路が、前記変形後の前記解剖学的部位に関連するボクセルの変位を前記変形前の前記解剖学的部位に対して有限要素法(FEM)フレームワークにおいて測定するステップをさらに含み、前記測定は、前記判定された表面変位に基づいて前記解剖学的部位の体積内で行われ、前記ボクセルの変位の前記測定は、前記体積変位場の前記計算に対応し、前記解剖学的部位の前記体積は、前記解剖学的部位の組織内容全体を表す、
    請求項14に記載の方法。
  23. 前記1又は2以上の回路が、前記計算された体積変位場を変形補正のために前記複数の表面構造のうちの1つ又は2つ以上に適用するステップをさらに含む、
    請求項14に記載の方法。
  24. 前記1又は2以上の回路が、前記解剖学的部位が開かれた状態で変形している手術中に支援を行うために、前記変形後の解剖学的部位の複数の多次元グラフィックビューを生成するステップをさらに含み、前記生成された複数の多次元グラフィックビューは、前記解剖学的部位の前記複数の表面構造における変位した1又は2以上の領域、及び/又は前記変形後の体積の変化を表す前記解剖学的部位内の体積変位を含む、
    請求項14に記載の方法。
  25. 前記複数の多次元グラフィックビューは、1又は2以上の視点からの前記複数の表面構造を含む、前記解剖学的部位の三次元ビューに対応する、
    請求項24に記載の方法。
JP2018542744A 2016-02-22 2017-01-27 組織変形の存在下において手術を支援するためのシステム及び方法 Active JP6703315B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/049,870 US10467497B2 (en) 2016-02-22 2016-02-22 System and method for providing assistance in surgery in presence of tissue deformation
US15/049,870 2016-02-22
PCT/US2017/015439 WO2017146872A1 (en) 2016-02-22 2017-01-27 System and method for providing assistance in surgery in presence of tissue deformation

Publications (2)

Publication Number Publication Date
JP2019512284A true JP2019512284A (ja) 2019-05-16
JP6703315B2 JP6703315B2 (ja) 2020-06-03

Family

ID=59631148

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018542744A Active JP6703315B2 (ja) 2016-02-22 2017-01-27 組織変形の存在下において手術を支援するためのシステム及び方法

Country Status (5)

Country Link
US (1) US10467497B2 (ja)
EP (1) EP3397131A4 (ja)
JP (1) JP6703315B2 (ja)
CN (1) CN108601512B (ja)
WO (1) WO2017146872A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10918310B2 (en) * 2018-01-03 2021-02-16 Biosense Webster (Israel) Ltd. Fast anatomical mapping (FAM) using volume filling
CN113317872B (zh) * 2021-05-11 2024-05-17 南通罗伯特医疗科技有限公司 一种口内切口的下颌骨手术空间建模方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130063434A1 (en) * 2006-11-16 2013-03-14 Vanderbilt University Apparatus and methods of compensating for organ deformation, registration of internal structures to images, and applications of same
JP2013517840A (ja) * 2010-01-22 2013-05-20 ヴァンダービルト ユニヴァーシティ 画像誘導処置間の変形に対してデータを訂正するシステムおよび方法
US20140032180A1 (en) * 2012-07-27 2014-01-30 Samsung Electronics Co., Ltd. Method and apparatus for computing deformation of an object
JP2015531923A (ja) * 2012-08-06 2015-11-05 ヴァンダービルト ユニヴァーシティ 画像誘導処置中の変形のためにデータを修正する向上された方法
US20160027178A1 (en) * 2014-07-23 2016-01-28 Sony Corporation Image registration system with non-rigid registration and method of operation thereof

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10128717A1 (de) * 2001-06-13 2002-12-19 Tst Touchless Sensor Technolog Verfahren und Vorrichtung zur Erkennung natürlicher Haut
EP1603076A1 (en) * 2004-05-13 2005-12-07 Aalborg Universitet Computerized cortex boundary extraction from MR images
CN1270672C (zh) * 2004-06-01 2006-08-23 复旦大学 一种神经外科手术导航系统中脑组织变形校正的方法
CN101490716B (zh) * 2006-07-17 2012-07-04 皇家飞利浦电子股份有限公司 用于医学图像分割的与多边形网格的高效用户交互
US8024525B2 (en) * 2007-07-25 2011-09-20 Digi-Data Corporation Storage control unit with memory cache protection via recorded log
FR2936889B1 (fr) * 2008-10-03 2012-09-28 Univ Grenoble 1 Procede pour le recalage d'un ensemble de points dans des images
EP2594200B1 (en) 2010-05-20 2019-01-02 Fudan University Method for simulating and correcting deformation of cerebral tissue images
EP2468207A1 (en) 2010-12-21 2012-06-27 Renishaw (Ireland) Limited Method and apparatus for analysing images
WO2012127345A1 (en) 2011-03-18 2012-09-27 Koninklijke Philips Electronics N.V. Tracking brain deformation during neurosurgery
JP5387629B2 (ja) * 2011-07-30 2014-01-15 株式会社デンソー Dcdcコンバータの制御装置
US9336592B2 (en) * 2012-02-03 2016-05-10 The Trustees Of Dartmouth College Method and apparatus for determining tumor shift during surgery using a stereo-optical three-dimensional surface-mapping system
WO2014093376A1 (en) 2012-12-10 2014-06-19 The Cleveland Clinic Foundation Mage fusion with automated compensation for brain deformation
US8989472B2 (en) * 2013-02-13 2015-03-24 Mitsubishi Electric Research Laboratories, Inc. Method for simulating thoracic 4DCT
US9177105B2 (en) * 2013-03-29 2015-11-03 Case Western Reserve University Quantitatively characterizing disease morphology with co-occurring gland tensors in localized subgraphs
US10311694B2 (en) 2014-02-06 2019-06-04 Empoweryu, Inc. System and method for adaptive indirect monitoring of subject for well-being in unattended setting

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130063434A1 (en) * 2006-11-16 2013-03-14 Vanderbilt University Apparatus and methods of compensating for organ deformation, registration of internal structures to images, and applications of same
JP2013517840A (ja) * 2010-01-22 2013-05-20 ヴァンダービルト ユニヴァーシティ 画像誘導処置間の変形に対してデータを訂正するシステムおよび方法
US20140032180A1 (en) * 2012-07-27 2014-01-30 Samsung Electronics Co., Ltd. Method and apparatus for computing deformation of an object
JP2015531923A (ja) * 2012-08-06 2015-11-05 ヴァンダービルト ユニヴァーシティ 画像誘導処置中の変形のためにデータを修正する向上された方法
US20160027178A1 (en) * 2014-07-23 2016-01-28 Sony Corporation Image registration system with non-rigid registration and method of operation thereof

Also Published As

Publication number Publication date
CN108601512A (zh) 2018-09-28
WO2017146872A1 (en) 2017-08-31
JP6703315B2 (ja) 2020-06-03
CN108601512B (zh) 2020-10-02
EP3397131A4 (en) 2019-08-14
US20170243344A1 (en) 2017-08-24
EP3397131A1 (en) 2018-11-07
US10467497B2 (en) 2019-11-05

Similar Documents

Publication Publication Date Title
JP6700622B2 (ja) マルチモーダル画像を処理するシステム及び方法
JP7125019B2 (ja) 術中変位に見舞われた内部器官の解剖学的部分の手術を支援する外科支援装置
US9536316B2 (en) Apparatus and method for lesion segmentation and detection in medical images
JP5946221B2 (ja) 輪郭修正装置、方法およびプログラム
US10002424B2 (en) Image processing system and method to reconstruct a three-dimensional (3D) anatomical surface
JP2023139022A (ja) 医用画像処理方法、医用画像処理装置、医用画像処理システム及び医用画像処理プログラム
CN111080583B (zh) 医学图像检测方法、计算机设备和可读存储介质
US20180064409A1 (en) Simultaneously displaying medical images
EP3025303A1 (en) Multi-modal segmentation of image data
JP2016189946A (ja) 医用画像位置合わせ装置および方法並びにプログラム
US10621728B2 (en) Internal organ localization in computed tomography (CT) images
JP6703315B2 (ja) 組織変形の存在下において手術を支援するためのシステム及び方法
WO2019030348A1 (en) METHOD AND SYSTEM FOR X-RAY IMAGE PROCESSING, AND COMPUTER STORAGE MEDIUM
US20220392619A1 (en) Information processing apparatus, method, and program
WO2020031071A1 (en) Internal organ localization of a subject for providing assistance during surgery
JP2019129951A (ja) 肋骨展開画像生成装置、方法およびプログラム
US11138736B2 (en) Information processing apparatus and information processing method
US20200234494A1 (en) Structure estimating apparatus, structure estimating method, and computer program product
JP2013162922A (ja) 領域抽出処理システム
JP2022519634A (ja) ダイポールパッチへの患者固有の皮質表面テッセレーション
WO2022223042A1 (zh) 手术路径处理系统、方法、装置、设备及存储介质
KR20230066526A (ko) 이미지 처리 방법, 장치, 컴퓨팅 디바이스 및 저장 매체
KR20240025489A (ko) 인공지능을 이용한 혈관 구조 결정 방법 및 장치
CN114627271A (zh) 一种查看3d可视化数据的方法、ar眼镜、系统及存储介质
JP2014023607A (ja) 医用画像処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180813

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190612

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190807

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191127

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20200127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200408

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200421

R151 Written notification of patent or utility model registration

Ref document number: 6703315

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151