JP2022524443A - テンプレート化されターゲット化されたバイオプシと処置のためのガイダンス及びトラッキングシステム - Google Patents

テンプレート化されターゲット化されたバイオプシと処置のためのガイダンス及びトラッキングシステム Download PDF

Info

Publication number
JP2022524443A
JP2022524443A JP2021554731A JP2021554731A JP2022524443A JP 2022524443 A JP2022524443 A JP 2022524443A JP 2021554731 A JP2021554731 A JP 2021554731A JP 2021554731 A JP2021554731 A JP 2021554731A JP 2022524443 A JP2022524443 A JP 2022524443A
Authority
JP
Japan
Prior art keywords
organ
prostate
tracking
template
trus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021554731A
Other languages
English (en)
Other versions
JP7483271B2 (ja
Inventor
ランポタン,サムスン
エリック リズダス,デイビッド
Original Assignee
ユニバーシティ オブ フロリダ リサーチ ファンデーション インコーポレーティッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ユニバーシティ オブ フロリダ リサーチ ファンデーション インコーポレーティッド filed Critical ユニバーシティ オブ フロリダ リサーチ ファンデーション インコーポレーティッド
Publication of JP2022524443A publication Critical patent/JP2022524443A/ja
Application granted granted Critical
Publication of JP7483271B2 publication Critical patent/JP7483271B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • A61B10/02Instruments for taking cell samples or for biopsy
    • A61B10/0233Pointed or sharp biopsy instruments
    • A61B10/0241Pointed or sharp biopsy instruments for prostate
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/34Trocars; Puncturing needles
    • A61B17/3403Needle locating or guiding means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • A61B10/02Instruments for taking cell samples or for biopsy
    • A61B2010/0208Biopsy devices with actuators, e.g. with triggered spring mechanisms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/34Trocars; Puncturing needles
    • A61B17/3403Needle locating or guiding means
    • A61B2017/3413Needle locating or guiding means guided by ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2048Tracking techniques using an accelerometer or inertia sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/371Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/378Surgical systems with images on a monitor during operation using ultrasound
    • A61B2090/3782Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument
    • A61B2090/3784Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument both receiver and transmitter being in the instrument or receiver being also transmitter

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Robotics (AREA)
  • Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

テンプレート化されターゲット化されたバイオプシ及び/又は処置を促進するガイダンス及びトラッキングシステムのための様々な実施形態が開示される。ガイダンス及びトラッキングシステムは、6自由度の磁気トラッキングセンサを有するカテーテルを含み、カテーテルは、患者の前立腺の尿道等の器官又は器官の自然な通路に配置され固定され得る。トラッキングセンサを用いてコンピューティングデバイスは、処置又は診断手順の間、器官及び医療機器の位置と方向を追跡するのに採用され得る。コンピューティングデバイスは、関心対象の器官に対する医療機器の位置と方向を決定し得る。グラフィカルユーザインタフェースは、バイオプシテンプレートを、バイオプシ手順の前に、手動で再構成された実際の3次元器官又は病変に重ね合わせて調整するための、リアルの3次元オブジェクトを含む。トレーニングのためにシミュレータ又はシミュレータモードを提供し得る。

Description

本出願は、2019年3月13日出願の発明の名称「GUIDANCE AND TRACKING SYSTEM FOR TEMPLATED AND TARGETED BIOPSY AND TREATMENT」の米国仮特許出願第62/817726号の利益及び優先権を主張するものであり、その内容は参照により全体として本明細書に組み込まれる。
バイオプシとは、生体から組織を取り出し、取り出した(バイオプシした)組織を検査することで、病気の存在、原因、程度を発見することである。例えば、乳房や前立腺のバイオプシは、組織を分析してガン細胞の存在を確認するために行われる。ニードルバイオプシでは、注射針を用いて、筋肉、骨、並びに、肝臓、肺、臀部、及び前立腺などの他の器官から、組織や液体サンプルを採取し、検査を行いう。一般的なニードルバイオプシには、細針吸引法(例えば、羊水穿刺法)やコアニードル(例えば、前立腺)のバイオプシ等がある。このように、バイオプシは診断ツールであり、処置ツールとは異なる。処置とは、(診断ではなく)治療のためのものであり、放射性シードや他のシード、局所麻酔薬やステロイドなどの薬物、熱、電気、放射線などを、体内の特定のターゲットに当てることを含む。また、処置には、膿瘍にアクセスするためにニードルの先端を膿瘍に入れ、そこから液体を排出することも含まれる。
バイオプシと処置の両方において、精度が重要である。精度が低いと、ガン組織ではなく健康な組織がバイオプシされ、偽陰性、言い換えれば、ガンは存在するがサンプリング(バイオプシ)されず、ガンは存在しないという偽陰性診断が出されることとなる。精度が低いと、処置が行われたり、誤った位置に配置されたりする、可能性がある。他のタイプのガイド付き介入手順では、イメージングを使用して、少なくとも一つのツールをターゲット又はテンプレートの位置にガイドする。このような手順の例としては、アブレーション、穿刺などの膿瘍ドレナージ、吸引(例えば、細針吸引)、バイオプシ、ブロック(例えば、局所麻酔薬ブロック)、静脈アクセス(例えば、中心静脈アクセス及び末梢静脈アクセス)などが挙げられる。本明細書で用いる「サンプリング」は、動作又は位置を参照する場合、サンプリング及び/又は処置を指し得る。
前立腺ガン(PCa)は、男性において最も一般的なタイプのガンの一つである。2018年現在、前立腺ガンは、米国における男性のガンによる死亡原因の第2位である。ほとんどの場合、医師やその他の医療従事者は、前立腺から得られるガン組織/細胞を含むバイオプシサンプルの病理検査によって陽性診断が得られるまで、前立腺ガンの処置を開始しない。しかしながら、バイオプシのサンプル採取には欠陥があることが多く、その結果、従来のTRUS(経皮的超音波検査)ガイド下の前立腺バイオプシ(PBx)では、47%もの高い発生率又は割合となる偽陰性が懸念されている。Hanらは、“Geometric Evaluation of Systematic Transrectal Ultrasound Guided Prostate Biopsy”, J Urol. 188:2404-2409 (2012年12月)(非特許文献1)にて、経験豊富な泌尿器科医がシステマティックな前立腺バイオプシを行う際に、テンプレートの偏差が大きいことを示している。Lampotangらは、“Baseline Prevalence and Magnitude of Spatial Deviations in a Simulator from the Transrectal Ultrasound Prostate Biopsy Template”、Journal of Urology、Vol.201、No.4S、Supplement(2019年5月)(非特許文献2)にて、研修医も経験豊富な泌尿器科医と同様にテンプレートの偏差が大きいことを示している。Hannaらは、“Multiparametric MRI/Ultrasound Fusion Biopsy Improves but Does Not Replace Standard Template Biopsy for the Detection of Prostate Cancer”, Journal of Urology、202(5):944-951(2019年11月)(非特許文献3)にて、fPBxが利用可能になったにもかかわらず、sPBxが依然として有用であることを示している。fPBx後のsPBxでは、fPBxで見逃されたであろうPCaを16%多く検出した。Lampotangらは、テンプレートの偏差がPBxFNに関係することを示しており、頂点にて直径1cmの球状病変の場合、テンプレートの偏差が、Lampotangらが提案している閾値の、5mm以下であれば、PBxFNが解消されることを示している。
従来のTRUSバイオプシの欠陥の一例として、実際のバイオプシサンプルが、テンプレートを使用した場合に推奨される位置では採取されていなかった可能性がある。テンプレートは、バイオプシサンプルの空間分布をマッピングして、サンプルが均一に分布し、PCaが存在する可能性が最も高い領域が確実にサンプリングされるようにしようとする。米国では、偽陰性の場合、PCa処置の開始が必ず6カ月以上遅れる。なぜなら、現在の診療慣行では、バイオプシ後少なくとも6カ月間は、最新のPSA値が高いままか増加した場合に再バイオプシを促すようなPSA検査を受ける前に、待つことになっているからである。したがって、偽陰性の場合、診断されていない前立腺ガン患者の処置が6~9カ月以上遅れることになる。この間、前立腺ガンは成長して広がる可能性があり、治療又は治癒される確率は低くなる。更に、従来のTRUS PBxを繰り返しても、また偽陰性にならないという保証はない。PBxによる早期のPCa診断は、処置や治癒のためのより多くの選択肢を提供する。
システマティック前立腺バイオプシ(sPBx)は、テンプレートを使用し、病変の有無や位置はわからない。ターゲットは存在しない。sPBxのテンプレートの位置はターゲットではない。テンプレートの配置は、バイオプシコアを前立腺の周りに均等に分布させるのに役立ち、最悪の場合、非サンプリング領域に臨床的に重要な前立腺ガン(csPCa)の病変が含まれ、前立腺バイオプシ偽陰性(PBxFN)に繋がる、前立腺領域全体をサンプリングしないリスクを低減することができる。融合前立腺バイオプシ(fPBx)などのターゲットPBxでは、病変や影、関心領域(ROI)がMRIで特定され、セグメント化(例えば、3次元的に再構成)されている。標的型PBxでは、その名が示すように、sPBxとは異なり、ターゲット(ROIなど)が存在する。
注目すべきことに、前立腺バイオプシにおける偽陰性は、泌尿器科医又は他の医療従事者によって前立腺の健康な領域のみがサンプリングされた場合に生じる。言い換えれば、前立腺にはガン領域が存在するが、ガン領域の外側からのみ組織が採取された場合(即ち、健康な組織のみが採取された場合)、前立腺バイオプシでは、実際にはそうではないにもかかわらず、患者にガンがないことを示す偽陰性が返される可能性がある。処置は、前立腺バイオプシによる陽性診断があって初めて行われるため、偽陰性の場合、不必要に処置を遅らせることになり、その結果、局所的な前立腺ガンが転移して、生殖器や骨に影響を与える神経束に広がる時間を与えることになり、選択肢が減り、処置が複雑になり、患者やサバイバのQOLに影響を与えることになる。
最近では、UroNavのような正確なPBx技術は、融合PBxの前(一般的には1週間前)にMRIを必要とし、MRIを解釈するための放射線科医の料金、追加のクリニック訪問の経済的負担(別の欠勤による賃金の損失、交通費、及び地方の患者の場合には宿泊費の可能性)を必要とし、さらに重要なことには、バイオプシ未実施の患者、又はメディケア/メディケイドのような支払者によってカバーされない可能性がある(HD患者に精密PBxを拒否することによって健康格差(HD)を悪化させる)。Rosenkrantzらによる、“Evolving Use of Prebiopsy Prostate Magnetic Resonance Imaging in the Medicare Population”、Journal of Urology 200:89-94、(2018年7月)(非特許文献4)は、HDを示すメディケア患者のPBx前のMRIにおける実質的な人種的及び地理的な差異を示した。
Glossopに対する米国特許第8948845号(特許文献1)は、「患者空間」を、強化尿道カテーテルのポジションセンサから得られる座標系と定義する。「画像空間」は、尿道カテーテルに内蔵されたMRIイメージングコイルの使用を含む、通常は磁気共鳴イメージング(MRI)の、撮像モダリティの座標系として定義される。内部の術前診断画像及び外部の術前診断画像の両方は、「画像空間データ」と称されるが(即ち、画像空間データを得るのに用いられ得るが)、ここで、内部とは、内部MRIコイルを意味する。画像空間データを患者空間データに併置する(「登録する」)方法は、強化尿道カテーテルが患者に挿入されている間に画像空間データ(MRIデータ)が収集され、カテーテルの少なくとも一部がMRI撮像モダリティで可視化されることを、必要とする。臨床現場において論理的に重要である実用的な観点から、Glossopアプローチでは、セグメンテーションを含むバイオプシは、泌尿器科クリニックへの1回の訪問で1人の泌尿器科医によって行われることは不可能である。Glossopの特許は、その説明によれば、市販のMRI/US融合型前立腺バイオプシシステムに類似しており、それによって、患者は実際のバイオプシの1週間ほど前にMRIを取得しなければならず、MRIを解釈する放射線技師の費用が必要となる。参考までに、UroNav融合バイオプシシステムでは、バイオプシ時に、MRIスキャンと超音波画像を手動で融合させるために、かなりの時間(30~45分以上)が必要である。
Lampotangに対する米国特許第9626805号(特許文献2)は、サイドファイア、エンドファイア、コグニティブフュージョン、トランスペリネアル、フュージョンバイオプシなどの様々なPBx技術をサポートする混合現実前立腺バイオプシ(PBx)シミュレータに現在適用される混合現実シミュレータ技術について述べている。PBxシミュレータでは、(6-DOFトラッキングセンサなどの)電磁センサを前立腺の内部に挿入することで、柔らかい筐体/クレードルの中に浮かぶ物理的な3Dの前立腺を追跡する。移動可能器官のこのトラッキング技術は、前立腺に限らず、超音波プローブやニードル、手動操作などで力を加えると、押されることに応じて、動く他の器官にも適用できる。
米国特許第8948845号明細書 米国特許第9626805号明細書
Hanらによる"Geometric Evaluation of Systematic Transrectal Ultrasound Guided Prostate Biopsy", J Urol. 188:2404-2409 (2012年12月) Lampotangらによる"Baseline Prevalence and Magnitude of Spatial Deviations in a Simulator from the Transrectal Ultrasound Prostate Biopsy Template"、Journal of Urology、Vol.201、No.4S、Supplement(2019年5月) Hannaらによる"Multiparametric MRI/Ultrasound Fusion Biopsy Improves but Does Not Replace Standard Template Biopsy for the Detection of Prostate Cancer", Journal of Urology、202(5):944-951(2019年11月) Rosenkrantzらによる"Evolving Use of Prebiopsy Prostate Magnetic Resonance Imaging in the Medicare Population"、Journal of Urology 200:89-94、(2018年7月)
テンプレート化され又はターゲット化されたバイオプシ及び/又は処置を含むガイド付き介入のための、ガイダンス及びトラッキングシステムについて、様々な実施形態が開示される。より具体的には、幾つかの実施形態において、前立腺バイオプシ及び高周波(RF)アブレーションを夫々使用することができる、精密バイオプシ及び精密処置のための3次元トラッキング、ガイダンス、及びビジュアライゼーションシステムが記載される。 一実施形態では、非融合型トラッキング及びガイダンスシステムは、前立腺トラッキングセンサなどの身体器官トラッキングセンサと、超音波プローブなどの追跡される医療用撮像プローブと、トラッキングされたバイオプシガンなどの、前立腺及び撮像プローブと関連してバイオプシ若しくは処置デバイスを追跡するための、追跡されるバイオプシ若しくは処置デバイスと、並びに、少なくとも一つのコンピューティングデバイスとを、含む。
少なくとも一つのコンピューティングデバイスは、内部のメモリに格納されたプログラム命令を含むことができ、そのプログラム命令は、実行されると、少なくとも一つのコンピューティングデバイスに以下のステップを指示する:器官の複数の画像を生成するために、追跡される医療用撮像プローブの位置及び方向に関連するガイダンスを提供するステップ、ここで、追跡される医療用撮像プローブ(例えば、経直腸超音波プローブ)の位置及び方向は、身体器官トラッキングセンサを用いて決定される;複数の画像を用いて器官又は身体の一部の3次元再構成を生成するステップ;器官又は身体の一部の3次元再構成と、一つ又は複数のサンプリング領域を含む仮想テンプレートとを器官に重ね合わせて3Dビジュアライゼーションとして含むディスプレイデバイスに表示させるステップ;並びに、(システマティックの又はテンプレート化されたPBxの場合)テンプレート化されたもの、又は(融合型PBxの場合)ターゲット化されたものの、いずれであっても、複数のサンプリング領域の一つ又は各々における組織の収集のためのガイダンスを提供するステップ。
複数の画像は、幾つかの実施形態において、2次元超音波画像を含み得る。複数の2次元超音波画像のうちの少なくとも一つは、器官の3次元再構成、テンプレート、及び、TRUSプローブの3Dビジュアライゼーションとバイオプシデバイスの3Dビジュアライゼーションとを含む前立腺空間の3Dビジュアライゼーションと同時に、ディスプレイデバイスに表示し得る。器官は前立腺を含み得、組織の収集のためのガイダンスは、前立腺バイオプシ手順の間に実行され、仮想テンプレートは、概略円筒形の3Dオブジェクトとしての前立腺バイオプシコア、又は、3Dポイント若しくは球としての前立腺バイオプシコアの中心を、含み得る。
幾つかの実施形態では、器官又は身体の一部の3次元再構成は、器官を有する患者の身体の外部に配置される追跡センサを用いて生成される。身体器官トラッキングセンサは、6自由度(6-DOF)を有する電磁トラッキングセンサを含み得る。器官の複数の画像を生成するための、追跡される医療用撮像プローブの位置及び方向に関連するガイダンスは、少なくとも部分的に、器官を有する患者に配置されるカテーテルの追跡、又は、患者の皮膚上、若しくは、患者のアクセス可能なオリフィス及びキャビティを含む、患者の外部に配置されるセンサのトラッキングに基づいて提供され得る。器官若しくは身体の一部の3次元再構成は、器官若しくは身体の一部上又はその周辺で検出される一つ若しくは複数の病変若しくは関心領域(ROI)の3次元再構成を含み得る。
少なくとも一つのコンピューティングデバイスは、コア若しくはテンプレートの(コアの中心の)位置及び方向を調整すること、コアの数を調整すること、及び、カスタムテンプレート内のコアの順序を変更することのうち、少なくとも一つを実行するように更に指示され得る。複数のサンプリング領域の一つ又は各々における組織の収集のためのガイダンスは、幾つかの実施形態では、撮像モダリティなしで提供され得る。例えば、3D再構成、及び3D再構成された器官へのテンプレートの適合が、行われると、3次元ビジュアライゼーションを使用して適用されるバイオプシ又は処置の間、撮像モダリティは必要とされない。
本開示の多くの態様は、以下の図面を参照することで、より良く理解できる。図面内のコンポーネントは必ずしもスケール通りではなく、代わりに、本開示の原理を明確に示すことに重点が置かれている。さらに、図面では、同じ参照数字は、複数の図を通して、対応する部分を示している。
図1は、本開示の様々な実施形態に係る、テンプレート化されターゲット化されたバイオプシ及び/又は処置のためのガイダンス及びトラッキングシステムの例のシステム図である。 図2は、本開示の様々な実施形態に係る、テンプレート化されターゲット化されたバイオプシ及び/又は処置のためのガイダンス及びトラッキングシステムの例の概略図である。 図3Aは、TRUS画像と、TRUS画像を補強して正確なバイオプシを促進にするように設計された、登録された仮想認知補助のオーバレイとを含む、混合現実のグラフィカルユーザインタフェースの一例である。 図3Bは、本開示の様々な実施形態に係る、ガイド無し及びガイド付きテンプレートバイオプシのパフォーマンスの違いを示す図である。 図4は、本開示の様々な実施形態に係る、テンプレート化されたバイオプシ又は処置のためのガイダンス及びトラッキングシステムの例の動作を示すフローチャートである。 図5は、前立腺ガンのバイオプシ、診断、及び処置の経時的な進化を、前立腺バイオプシの診断の偽陰性率によってもたらされる処置開始の遅れと共に、示す図である。 図6は、本開示の様々な実施形態に係る、器官又は物体の3次元再構成を作成するために、前立腺又は病変などの、器官及び/又は3次元物体を手動でトレースする様子を示す模式図である。 図7は、本開示の様々な実施形態に係る、一般的に使用される二重の六分儀スキーマ及びコアサンプリングシーケンスである、バイオプシテンプレートの例である。 図8は、本開示の様々な実施形態に係る、器官及び関連する病変の3次元再構成を作成するために、前立腺などの、器官をトレースする様子を示す図である。 図9A及び図9Bは、本開示の様々な実施形態に係る、回転していないサジタルTRUS画像(図9A)と、TRUS画像がユーザの視点からプローブのインソネーション平面と整列するように回転した同じTRUS画像(図9B)とを示す。 図9A及び図9Bは、本開示の様々な実施形態に係る、回転していないサジタルTRUS画像(図9A)と、TRUS画像がユーザの視点からプローブのインソネーション平面と整列するように回転した同じTRUS画像(図9B)とを示す。 図10は、本開示の様々な実施形態に係る、バイプレーンTRUSプローブからの2つのビュー(サジタル及びインバース)の隣にレンダリングされた3次元可視化(パースペクティブ)とのユーザインタフェースを示す図である。 図11は、本開示の様々な実施形態に係る、患者の例示的な体位(リソトミ)と、表示されたインソネーション平面に対する情報を容易に且つ直感的に解釈するための視点とを示す、ユーザインタフェースアイコンを含む。 図12は、本開示の様々な実施形態に係る、患者の別の例の体位(左側臥位)と、表示されたインソネーション平面の情報を容易に且つ直感的に解釈するための視点とを示す、別のユーザインタフェースアイコンである。 図13は、本開示の様々な実施形態に係る、挿入深さ、ピッチ、ヨー、及びロールを、各自由度に対する移動量を表す線として表示する、ユーザインタフェースを示す。 図14は、本開示の様々な実施形態に係る、ニードル、プローブ、又は他のデバイスのテンプレート又はコアの位置を適切に調整することを容易にするために、ユーザインタフェースでオーバレイすることができる、前立腺前部バイオプシ計画のためのユーザ調整可能なテンプレートを作成するためのユーザインタフェースの一例を含む。 図15は、本開示の様々な実施形態に係る、器官、関連する病変、及び解剖学的特徴の、リアルの3次元再構成を作成するために、前立腺などの器官をトレースする異なる平面でのトレースを示す図である。 図16は、追跡されるカテーテルが前立腺に対して滑ったり外れたりした場合に、リアルタイムでモニタ及び検出するプロセスである。 図17は、ガイド付き介入の目的で、内部カテーテルの代わりに、皮膚又は他のアクセス可能な表面に固定される外部トラッキングセンサを用いて、病変、器官、又は解剖学的物体を追跡するシステムを示す図である。 図18は、本開示の様々な実施形態に係る、テンプレート位置及びコアのユーザによる事前計画及び調整のためのユーザインタフェースである。 図19は、本開示の様々な実施形態に係る、テンプレート上のコアの所望の順序又はシーケンスを選択するユーザを示す、テンプレート位置を事前に計画するユーザインタフェースの詳細である。 図20は、本開示の様々な実施形態に係る、レトロフィット実装を用いてシステマティック前立腺バイオプシに適用されるシステムの実施形態のプロセスである。 図21は、本開示の様々な実施形態に係る、清掃可能な追跡されるバイオプシニードルクリップ及び清掃可能な追跡されるTRUSプローブクリップのレトロフィット実装の詳細な図及び写真である。 図22は、本開示の様々な実施形態に係る、ニードルガイドエントリホールに1-DOFセンサを伴う、剛性的に取り付けられたニードルガイドを有する、追跡されるTRUSプローブの実施形態である。 図23は、本開示の様々な実施形態に係る、シミュレータモードで提案されたシステムを使用するユーザのパフォーマンスを示す図である。 図24は、本開示の様々な実施形態に係る、幾つかの認知補助を有効にした、提案された実施形態のユーザインタフェースを示す。 図25は、本開示の様々な実施形態に係る、TRUSバイオプシプローブの一次自由度を示す。 図26は、本開示の様々な実施形態に係る、経会陰法及び経直腸法を練習するのに用いられるシミュレータの写真である。 図27は、本開示の様々な実施形態に係る、ターゲット化されたバイオプシ及び処置のために採用され得る、コンピューティングデバイスの概略図である。
本開示は、テンプレート化されターゲット化されたバイオプシ及び処置、並びにガイド付き介入のためのガイダンス及びトラッキングシステム、並びにそれに関連する関連装置及び方法に関するものである。アフリカ系アメリカ人男性などの複数のグループは、高リスクの前立腺ガン(PCa)率を有する傾向があり、他のグループのそれと比較して、アウトカムが悪くなる可能性があり、例えば、黒人の2017年の年齢調整PCa死亡率は白人の2.4である(Taksler 2012)。従来の経直腸超音波(TRUS)による前立腺バイオプシ(PBx)では、PBxの偽陰性率は47%と高いとされている。PCaの処置は、前立腺バイオプシによって得られる陽性診断に基づいてのみ処方されるため、PBxの偽陰性は、処置若しくは治癒を遅らせることになり、その結果、図5に見られるように、局所的なガンが潜在的に転移し、神経束に広がり、効力に影響を与え、骨に広がり、治癒若しくは処置の選択肢を減少させ、生存者の転帰及びQOLを悪化させることになる。
前立腺バイオプシには、幾つかの高度な技術が存在する。融合PBxのような技術では、前立腺バイオプシの約1週間前に患者にMRIを実施する必要がある。理解され得るように、MRIでは、患者は、MRIを解釈するための放射線技師の料金を支払い、病院、クリニック、若しくは医療画像処理施設への別の旅を行い、病院若しくは他の医療施設への別の旅に関連する追加の費用を支払う必要がある。更に、患者は仕事を休むことで賃金を失うかもしれず、地方からの交通手段を手配する手間が掛かり得る。更に重要なことは、旅やMRIは様々な種類の健康保険プランでカバーされない可能性がある、ということである。支払者のうちには、従来のバイオプシを最初に受けることを必要とする、融合PBxのためのバイオプシ未実施の患者への、払い戻しを拒否するものがある。
従って、テンプレート化され若しくはターゲット化されたバイオプシ及び/又は処置、並びにガイド付き介入のための、ガイダンス及びトラッキングシステムについて、様々な実施形態が開示される。より具体的には、幾つかの実施形態において、前立腺バイオプシ及び高周波(RF)アブレーションを夫々使用することができる、精密バイオプシ及び精密処置のための、3次元トラッキング、ガイダンス、及び視覚化システムが、記載されている。本明細書に記載の実施形態は、様々なタイプの診断:サイドファイア、エンドファイアTRUS PBx、経会陰PBx、及び、ブラキセラピ(ニードルを介して病変の隣に放射性シードをステアリングして堆積させる)などの処置、並びに、その他の希望される他のガイド付き介入のために、稼働し得る。
一実施形態では、ガイダンス及びトラッキングシステムは、トラッキングセンサ、例えば、NDI社のModel90や加速度計/ジャイロスコープアレンジメントなどの、6自由度(6-DOF)電磁トラッキングセンサをその中に配置したカテーテルを含んでもよく、カテーテルは、身体器官、好ましくは、身体又は器官の既存の通路、例えば、患者の前立腺の尿道通路などに、配置され固定されるように適合されてもよい。トラッキングセンサ、トラッキングトランスミッタ(例えば、NDI SRT又はMRT)、トラッキングエレクトロニクスユニット(例えば、NDI DriveBAY)、コンピューティングデバイス(例えば、Microsoft Surface Proなどのラップトップ)、及び本明細書に記載の他のコンポーネントを使用して、処置又は診断手順及びガイド付き介入などの、医療手順の間に、器官及び医療器具の位置(x、y、z)及び方向(ヨー、ピッチ、ロール)を追跡することができる。本明細書で使用する「ポジション」という用語は、位置と方向を指し得る。同様に、尿道カテーテルは、尿道に配置された尿道カテーテルのようなチューブを含むことができ、ここでは、尿道カテーテルのカフを前立腺尿道内で意図的に膨張させて、カテーテルを前立腺に固定し、それによって前立腺を追跡する。用語「身体センサ空間」、又は幾つかの実施形態では「前立腺センサ空間」又は「器官センサ空間」は、身体センサ、前立腺、器官などを原点とするローカル座標系(例えば、6自由度でのトラッキングを可能にする座標系)を含むことができる。
代替的に、座標系の原点は、NDI SRTトランスミッタなどのトラッキングトランスミッタにて在り得る。前立腺バイオプシの特定のケースでは、「身体センサ空間」という用語は、「前立腺センサ空間」を指すことがある。前立腺センサ空間は、トラッキングトランスミッタが動くことができ(例えば、手順中に誤ってぶつかる)、患者も動くことができるので、好ましくあり得る。前立腺トラッキングセンサを座標系の原点又は基準点として使用することにより、前立腺センサ空間を使用することは、システムをロバストにし、患者又はトランスミッタの動きに影響されないようにするものである。用語「システマティックの」、「テンプレート化された」、又は「ランダムの」バイオプシは、テンプレートに従って器官をサンプリングすることに関連する同義語である。更に、コンピューティングデバイスは、関心のある器官に対する医療機器の相対的なポジションを決定し得る。カテーテルにてエコー源となる液体を使用してもよいし、バイオプシの間に、カテーテル若しくはトラッキングセンサの、意図しないサンプリングを防ぐべく、カテーテルが医療画像で明確に可視化されるように、超音波検査又は透視検査等の医療画像を使用する際に容易に可視化されるカテーテルの材料が、選択されてもよい。
ガイダンス及びトラッキングシステムは、3次元可視化ツールの一部として、器官、病変(例えば、当該器官内の病変)、他の関連する特徴、及び、他の3次元オブジェクトの、実在する3次元再構成を準リアルタイム(例えば、約2分以下)で迅速に生成するように構成された粗いセグメンテーション機能を組み込むグラフィカルユーザインタフェース(GUI)を、更に含んでもよい。TRUSにおける前立腺の尿道通路など、撮像モダリティで可視化される内部通路や、膀胱や精嚢などの他の解剖学的ランドマークも、3次元的に再構成された前立腺内に、3次元で再構成することもできる。本明細書に記載の実施形態に従って行われた実験では、前立腺の3次元再構成が2分未満で行われたが、これは、本明細書に記載のシステムの様々な実施形態が合理化され、臨床ワークフローに過度の遅延なく統合できることを保証する、成果である。
「リアルの3次元」又は「リアルの3D」は、本明細書で使用される用語であり、単に3次元であるような印象を与えるものではなく、真に3次元である3次元環境を指す。例えば、ネイティブ3Dでは、奥行きの「次元」を介した3Dの錯覚が、立体撮影、すなわち、2つのカメラを使用し、隣り合って配置し、それによって、人間の各眼を模倣するために同時に撮影することによって得られる。リアルの3D環境及びリアルの3Dビジュアライゼーションでは、前立腺などのオブジェクトは、3D座標系内の実際の3Dオブジェクトであり、カメラや見物人の視点(ポジション)に関係なく、すなわち、3Dオブジェクトが正面、背面、側面、上面、下面などの任意の視点から見られているかどうかに関係なく、また、同じ3D座標系内のTRUSプローブなどの他の3Dオブジェクトとの相対的な関係で、正しく表現される。
幾つかの実施形態では、3次元再構成は、経直腸超音波(TRUS)プローブ又は他の撮像技術を用いて得られる、器官の複数の2次元(2D)画像(スライス)について、(肉眼で識別可能な)器官のアウトライン若しくは周囲を手動でトレースすることによって、生成されてもよい。器官の手動でのトレースは、タッチセンシティブディスプレイ、マウス、トラックボール、ペンなどの、ポインティングデバイスやトレーシングデバイスを介して行うことができる。テンプレート化された(システマティックな)バイオプシが行われる実施形態では、ガイダンス及びトラッキングシステムは、テンプレート位置若しくはコアを、3D前立腺の周りに均等に配置するデフォルトの3Dテンプレートを重ね合わせることができ、又は、バイオプシ領域、関心領域(ROI)、又はテンプレート位置若しくはコアを構成することもできる器官の3次元再構成上のカスタマイズされた仮想3Dテンプレート上に、ユーザが、n個(二重六分儀スキーマではnは12個)のテンプレート位置若しくはコアを重ね合わせて調整することを支援することができる。
仮想テンプレートは、ディスプレイに表示の器官に相対的に配置することができ、仮想テンプレートは、幾つかの実施形態では、処置部位と同様に、器官からの組織の収集のための理想的な部位若しくは位置、及び方向を含むことができる。幾つかの実施形態では、仮想テンプレートは、異なるタイプのバイオプシニードルで得られる実際のコア(異なるコアの長さ、異なるコアの断面など)の細長い3D形状を表す仮想コアを含むことができる(図14参照)。
左側の縦棒は、ユーザがテンプレートの位置を調整する際に作成される認知補助であり、ユーザにより調整可能なテンプレート内の所望のテンプレートの位置を達成するために(円で示す)ニードルガイドの出口をどこに配置する必要があるかを示すハッシュマークと共に、TRUSプローブの直腸への挿入深さを示しており、実際のバイオプシ時に使用することができる。プローブ挿入深さライン上のハッシュマークは、サイドファイアニードルガイド軸とTRUSプローブ軸との間の既知の角度(例えば、19度)に基づいて、(テンプレートの位置がユーザによって調整されると)逆計算されて表示される。粗視化された前立腺に対するテンプレートの事前調整とフィッティングの際に作成されるハッシュマークを含む挿入深さラインは、実際のバイオプシの際の使用のために図14に転送される。ユーザは、テンプレートを前立腺にフィットさせるために、3Dビュー(図15には示されていない)、サジタル、コロナル、トランザバースなどの異なるビューを選択することができる。
コアの方向は、所定のサイドファイアニードルガイドに対してニードルが前立腺に入る予想される角度、又は、TRUSプローブ長手方向軸に対するニードルガイドの角度、例えば、BK8818 TRUSプローブサイドファイアーニードルガイドの場合は19度に一致する、デフォルトの方向を有することができる。ユーザは、仮想コアの方向と形状が実際に得られるコアを代表するように、TRUSプローブの種類とモデル、ニードルガイドの種類とモデル、バイオプシ器具の種類とモデルなどを、選択することができる。「バイオプシ器具」という用語は、バイオプシデバイス、バイオプシガン、若しくはニードルガンとしても知られる、ハンドル付きのバイオプシニードルを指し得る。調整可能なsPBxテンプレート上の、ユーザにより調整可能な仮想コアは、バイオプシニードルの先端が発射されたときの最大トラベル又はエクスカーションを示す、赤線(又は他の適切なインジケータ)などの、インジケータも含むことができる。このインジケータは、例えば、ニードルの先端が前立腺の境界を越えて膀胱に当たるかどうかを判定するのに役立ち得る。
同様に、赤いライン若しくは他のインジケータは、発射するときにニードルが望ましくない形で尿道に当たるかどうかを示すことができ、ユーザは、膀胱、尿道、若しくは他の避けるべき領域に当たらないように仮想コアを調整することができる。テンプレートが前立腺に対して大き過ぎる場合など、ユーザがテンプレート内のコアの位置や方向を調整したい場合には、マウスなどのポインティングデバイスでクリックしてドラッグしたり、タッチスクリーンで選択してドラッグしたりすることで、テンプレートのコアの位置や方向を手動で調整することができる(図14及び図18参照)。前立腺がテンプレートに対して大きすぎる場合など、ユーザがテンプレートにコアを追加する必要がある状況では、ユーザが追加のコアを作成して配置することができる。また、ユーザは、テンプレートの位置の順序、すなわち、サンプルコアを取得する順序を選択することもできる(図19参照)。ユーザは、所望の順序でコアをタッチするだけで、実際のバイオプシ手順の間にサンプリングのためにコアが提示され、強調表示される順序を確立することができる。コアには、図19に示すように、タッチされた順序で番号が付けられる。ユーザが選択した順序は、図7に示す標準的な順序とは異なり、時間と動作の点でより効率的であることに留意されたい。このように、提案されるガイダンス及びトラッキングシステムは、前立腺の前部領域を含む、テンプレートで指定される位置でのサンプルの収集を容易にするガイダンスを提供することができる。前立腺前部は、現在、テンプレート化されたTRUS PBxの間、特に、サイドファイアTRUS PBxでは、バイオプシニードルが前立腺の直腸表面に対して斜めに入るため、エンドファイアTRUS PBxと比較してニードルが前方にあまり貫通しないサイドファイアTRUSガイド経直腸PBxの間、知っている限りではサンプリングされない。例えば、本明細書に記載のガイダンス及びトラッキングシステムは、仮想テンプレートで指定される領域での組織サンプルの収集を容易にするために、又は、処置を提供するために、バイオプシ器具若しくは他の医療器具のポジション(位置及び方向)の軌道及び調整を提供することができる。
実際のバイオプシニードルは、ニードルガイドに挿入された状態で、TRUS画像で見ることができる。ニードルガンがトリガされると、半円筒状の凹部が側面に切り込まれた内側バイオプシニードルが、例えば22mm飛び出し、続いて外側バイオプシニードルが、前立腺から略半円筒状の長さ18mmのコアバイオプシを切断するために、飛び出してくる。その後、バイオプシニードルを患者から外してバイオプシを採取する。発射して前に飛び出す際に、ニードルの先端が膀胱に入ってしまうことがあ(り、これにより血尿が出ることがあ)るが、これは、発射時に内側ニードルの先端がどのくらい伸びるかをユーザが適切に考慮していなかったためである。ユーザがコアをサンプリングする場所を視覚化して予測するのを容易にするために、仮想コア(例えば、長さ18mm、幅1mmのコアを描いた細線で、TRUS画像で見た未発射のニードルの先端からコアの中心が8mm離れている)をTRUS画像に重ねて表示したり、拡張現実又は複合現実環境に配置したりして、仮想コア若しくは他の仮想テンプレートの位置を器官との相対的な関係で示すことができる(図3A参照)。
例えば、仮想コアの中心は、TRUS画像内のオーバレイにおいて、コアの中央の円などのインジケータによって視覚的に表示することができる。また、発射されたニードルの先端の最大エクスカーションは、未発射のニードルの先端から22mm離れたところ、又は他の適切な距離にある、赤い線などのインジケータによって、TRUS画像内に表示することができる。この視覚的補助により、ユーザはコアの中心を、意図した前立腺サンプリング位置に配置することが容易になり、更に、仮想コア又は最大ニードル深さラインが混合現実TRUS画像において膀胱に衝突する場合に、ニードルの先端が膀胱を貫通することを認識することが容易になる(図3A参照)。注目すべきは、本明細書に記載のシステムは、単一の撮像モダリティ(超音波のみ;MRIは必要ない)のみを必要とするに過ぎず、一回の患者の訪問で達成することができる。
本明細書に記載のシステムを使用した処置の一例は、例えば、ガン性腫瘍の高周波(RF)アブレーションであり、これは現在、腫瘍内にニードルを配置すべく透視イメージング(ライブX線)を用いて行われている。ガンに対するRFアブレーションは、電気エネルギーと熱を用いてガン細胞を破壊する低侵襲性の手順です。放射線科医が画像検査を用いて、皮膚又は切開部からガン組織内に細いニードルをガイドする。高周波エネルギーがニードルを通過して周囲の組織を加熱し、近傍の細胞を死滅させる。透視検査では、電離放射線であるX線を使用するため、臨床医の手が繰り返し照射されることが懸念される。そのため、臨床医がニードルをターゲットにガイドするために手動で調整しているときには、透視法をオフにして断続的に透視ガイダンスが行われる。
複数のスライス若しくは平面(例えば、4~5矢状面及び3横断面)で、超音波画像上で前立腺のアウトライン(又は周囲)をトレースすることと同様に、本明細書に記載の実施形態では、腫瘍又は標的領域のリアルの3次元再構成を得ることを目的として、透視画像上で腫瘍若しくは標的空間のアウトライン又は周囲を手動でトレースすることができる。これは、例えば、前立腺の尿道通路を用いて行うような、器官内にセンサを配置するのに用いられ得る、内部通路を、器官が有していない場合に、実行される。患者に取り付けられる1つ又は複数のトラッキングセンサ(例えば、心電図電極のような粘着性のあるパッドで患者の皮膚に接着されている)は、患者のトラッキングセンサに対する腫瘍の座標を決定することができ、したがって、センサをトラッキングしているトランスミッタに対する座標を、好ましくは6自由度で決定することができる。RFアブレーションニードル/プローブやそれらのホルダにセンサを取り付けてトラッキングすることで、焼灼する腫瘍に対するRFニードルの先端や加熱コイル、プローブのポジションを、決定できる。ツールをトラッキングする別の方法としては、ニードルなどのツールの内部にスタイレットを導入し、スタイレットにトラッキングセンサを取り付け、理想的には先端部又は切除に使用する加熱コイルの中央部などの関連する位置に取り付けることができる。トランスミッタは、患者の皮膚に取り付けられるトラッキングセンサを介して、トラッキングされたプローブ、トラッキングされたニードル、ツール、又はスタイレット、及び腫瘍の位置及び方向を、トラッキングする(図17参照)。
最初の透視画像が得られ、リアルの3次元再構成が生成されると、透視画像とそれに伴うものによる、臨床医の手や前腕への電離放射線のリスクを、オフにすることができる。前立腺バイオプシの場合と同様に、臨床医は、リアルの3Dグラフィカルユーザインタフェース(GUI)内で、仮想的に再構成された3D腫瘍と追跡されるニードルとを使用して、リアルタイムのリアルの3Dビジュアライゼーションインタフェースで腫瘍内にニードルをガイドすることができる。重要なことは、透視の必要性がさらにないため、臨床医は、画像を得るために透視装置の電源を入れるたびに、現在の技術のように継続的に停止する必要がないということである。臨床医は、混合現実3Dトラッキング及びガイダンスシステムを使用して、RFアブレーションニードルをターゲットに向けて操縦しながら、継続的かつ安全に作業を行うことができる。また、プロセス全体をリアルタイムでリアルの3Dビジュアライゼーションで観察してガイドすることは、特に空間的に困難な臨床医にとって、透視画像や2次元画像を解釈することに比べて、より容易である。
新しいデバイスが導入されたときの顕著なギャップは、新しいデバイス及び新しいデバイスに関連する技術を適切に使用するための適切なトレーニングが省略されていることである。デバイスにおけるもう一つの設計上の欠陥は、直感的でないユーザインタフェースである。アイコンや他のユーザインタフェース要素の形をした認知補助は、情報、位置、方向、視点を処理する際の補助となり、ユーザが素早く方向を定め、ユーザが方向を見失った結果としてのミスを防ぐことができる。
既存システムの別のギャップには、(前立腺などの)スキャンされるオブジェクトの(TRUSを含む)超音波画像における方向が物理的なオブジェクトの実際の方向と一致しないために、ユーザが空想上の回転や他の幾何学的及び空間的な空想上の操作を行うことを余儀なくされることが含まれる。例えば、前立腺は、矢状のTRUS画像において、患者が(a)仰向けに寝ているかのように、また(b)TRUSプローブが右から左へ直腸内に滑り込んでいるかのように表示されるが、実際には患者は通常、左側臥位である(図9A)。TRUS画像がユーザの視点からプローブのインソネーション平面と一致するように、すなわち、システム内で時計回りに約90度、矢状のTRUS画像全体を回転させることにより、矢状のTRUS画像及びTRUSプローブの動きを解釈する際に、空想上の回転の必要性を低減することができる(図9B)。同様に、横方向のTRUS画像は、現在、頭側-尾側の方向から表示されている。提示されている方向アイコン/認知補助に示されているように、表示方向を尾側-頭側に変更すると、ユーザは一般的な尾側-頭側の方向で患者を見ているので、より直感的となる。
本明細書に記載のユーザインタフェースのための更に別の提案される実施形態は、ユーザの方向付けを助けるために実際のTRUS画像に情報を重ねることを含む。例えば、TRUS撮像中に二重インソネーション平面を使用する場合、両方のインソネーション平面のエッジをカラーコード化することができ、横方向面及び矢状面は互いに直交しているので、それらは互いのインソネーション平面に線として表示される。各エッジは、関連する固有の色を持つことができる。各インソネーション平面は、TRUS画像において2つの直線のエッジを持つことができる。例えば、2つのTRUS挿入面(矢状面及び横方向面)がある場合、夫々が固有の色を持つ、4つの直線エッジが存在し得る。エッジのカラーリングスキームは、TRUS画像と3Dビジュアライゼーションの両方で、一貫して使用される。本明細書に記載の実施形態によれば、表示されるインソネーション平面に直交するインソネーション平面のエッジを表す線は、一貫してカラーコード化されており、ユーザを更に方向付けるのに役立つ。同様に、本明細書に記載の実施形態では、矢状のTRUS画像のニードルパスの点線と横方向のインソネーション平面との交点は、横方向の平面のドットとして表される(図10参照)。
TRUSプローブのピッチは、飛行に例えれば人工的な地平線に似ていると考えることができる(図25参照)。プローブのピッチが水平でもニュートラルでも無い場合(TRUSプローブの遠位先端は、ニュートラル若しくは水平のポジションにあるとき、ノーズアップにもノーズダウンにもならない)、ユーザが方向感覚を失って、サンプル又はバイオプシコアを前立腺の両方の半分(半球)に均等かつ均一に分配するのではなく前立腺の半分(片方)に全てのサンプル若しくはバイオプシコアを採取してしまう、危険性が少なくなる。ピッチがニュートラルであるかどうかをユーザが判断することは困難であり、それは、偽陰性のリスクを防ぐためにコアを均等に分配する際の一般的なエラーの原因となる。本明細書に記載の実施形態では、小型(長さ29mmのスモールブロック)のバブルウォータレベル(「バブルレベル」)を、例えば、自己接着剤でTRUSプローブのハンドルに取り付けて、ピッチをニュートラルに保つのを助けることができる。ピッチがノーズアップの場合、バブルは上に浮いてユーザから離れていき、ピッチがノーズダウンの場合、バブルも上に浮くがユーザに近づいていく。ユーザは、ピッチをニュートラルに保つために、バブルを中央に維持すればよい。このバブルレベルは、シミュレートされたPBxと実際のPBxの両方に適用できる。バブルレベルは、TRUSプローブセンサクリップ160b若しくはTRUSプローブ120に組み込むことができる。
(患者のケア又はシミュレータでの使用の両方のための)6-DOFセンサで追跡されるプローブの場合、ピッチを表す線を、先に説明した物理的なバブルレベルに加えて、若しくは、その代わりとして、用いることができる。追跡されるプローブのピッチを表す線は、ピッチがニュートラルのときは水平で、プローブのノーズ(先端部)がアップのときは上を向き、プローブのノーズがダウンのときは下を向くが、これに加えて、他の線はロールとヨーを表す(図13参照)。ロールとは、TRUSプローブがその長手方向の軸を中心に回転することである。左側臥位の患者で右の前立腺を挿入するために反時計回り(CCW)に回転させると、ロールラインインジケータが同等のCCW回転をすることを示している。ニュートラルポジションでは、ロールラインは水平であり、ロールがないことを示している。
TRUSプローブの自由度を図25に示す。挿入深さ(押し-引き矢印)とロールは粗い調整であり、ヨーは細かい調整である。ピッチは、ピッチニュートラル技術を使用する場合、ニュートラル(水平、0°)に保つ必要がある。その他の自由度も可能である。テンプレートフィッティングの際に決定されるプローブ挿入ライン上のハッシュマーク(図15)は、実際のバイオプシ(図14)の際に使用され、プローブをどこまで挿入するかを容易に決定することができる。プローブの移動に伴ってニードルガイド出口がプローブ挿入線に対して相対的に移動し、ニードルガイド出口が意図したテンプレートの位置のハッシュマークにあるときに、ユーザはプローブの押し引きを停止する。ハッシュマークは、個々のテンプレートの位置ごとに作成することができ、意図したテンプレートの位置のハッシュマークは、乱雑さを最小限にするために唯一のものとして表示されるように強調される。
更なる実施形態では、ヨーラインは、TRUSプローブの横方向の動き、即ち、プローブ先端が右に傾斜しているか左に傾斜しているかを示す。ヨーラインは、ヨーがゼロの場合は垂直である。TRUSのハンドルが左に移動した場合、垂直のヨーラインの上端は右を向き、その逆も同様である。更に、TRUSプローブがどこまで挿入されているかを示すTRUS挿入深さ線がある。この深さ線には、プローブを挿入する深さに対応するハッシュマークがあり、ニードルガイドにニードルを挿入したときのニードルの軌道が、ヨーの使用を最小限に抑えながら、既に基部、中腺、頂部などの前立腺領域に向けられているように、ニードルガイドのニードルの出口ホールが最適に配置されている。挿入深さ線上のハッシュマークは、バイオプシ手順に先立ってテンプレート又はコアの位置をテンプレート内で調整しつつ作成できる。また、ピッチ、ロール、ヨーの数値量を度数で表示している。色は、ピッチ、ロール、ヨーが適切であるか不適切であるかを示す。例えば、TRUSプローブのピッチがゼロ(水平方向、ゼロピッチ)から離れすぎている場合には、ピッチラインと表示された数字若しくは文字とが赤くなる。左上の縦棒は、TRUSプローブの直腸への挿入深さを示す認知補助であり、ユーザ調整可能なテンプレート内の所望のテンプレートの位置を達成するように、(円で示す)ニードルガイド出口をどこに配置する必要があるかを示すハッシュマークが付いている。
ユーザは、一般的に(3D超音波は存在するが、一般的には使用されていない)3Dオブジェクトの2D断面である超音波画像をどのような観点から解釈すべきかをよく尋ねる。超音波画像の隅にドットや他の適切なアイコンを配置して、オリエンテーションマーカとして超音波プローブ上の触覚的な物理的マーカに対応させることができる。しかしながら、異なる医療分野(例えば、心臓病学と麻酔学)では、慣例的にドットの位置が異なる(右上と左上)ため、メーカは、ユーザがオリエンテーションドットの位置を選択できるようにすることで、これらの慣例に対応している。このようにユーザが選択できるモードは、「モードの混乱」を引き起こす可能性があり、所定の手順のために誤ってドットを不適切な位置に置いてしまうと、方向感覚が失われる可能性がある。更に、2次元超音波画像は、2つの反対側から直交して見ることができる。例えば、TRUS画像における前立腺の横方向のビューは、観察者が患者の頭部(頭側から尾側の方向)にいる状態で、又は患者の足元から(尾側から頭側の方向)見ることができる。本明細書に記載の実施形態では、添付の図のように、挿入面が身体に対してどこに位置しているか、挿入面をどのような視点から見ているかをユーザに知らせると共に、特に患者がドレープされていて見えない場合には(図11及び図12)患者のポーズをユーザに知らせる、直感的なアイコンを採用することができる。
画像やスライスを見るとき、ユーザは、画像をどの方向から見るべきか(例えば、頭からつま先か、つま先から頭か)と考えることが多い。アイコンは、ユーザを正しい視点に容易に方向付ける直感的なアイコンの例である。図11のアイコンは、経会陰バイオプシに使用されるリソトミ体位の患者を示している。アイコンは、リソトミ体位の患者の体を表したり、他のガイド付き介入のための他の体位を表したりする。図11は、横方向のビューがcaudad-cephalad、すなわち、足から頭までであることを示している。図12は、矢状図が左-右であることを示しており、即ち、ユーザが患者の左側にいて、左側臥位の患者の右側を見ているかのように、画像を読むことができる。Aの文字のようなアイコン415が目を表している。視点の方向は、視野線425の他端にある矢印420によって補強される。
前立腺の前部ゾーン(直腸から更に離れた領域)は、現在、システマティックな(テンプレート化された)バイオプシの間にサンプリングされていない。そうしない理由には、前部帯病変の発生率が(ゼロではないが)小さいこと、膀胱又は尿道を穿刺するリスクを保証するものではないこと、及び、コアがより深い前部ゾーンに到達するためには、ニードルが発射される前に前立腺を予め貫通しなければならないため、より多くの患者の不快感を生じさせるリスクがあることが、ある。本明細書に記載の様々な実施形態によれば、方法及び認知補助装置は、実際のTRUS PBx及びシミュレートされたTRUS PBxの両方において、前部ゾーンのテンプレート化されたバイオプシを実行することができる。新しいテンプレートは、前部ゾーンにある少なくとも4つの追加の位置をサンプリングするために作成することができるだけでなく、前立腺の異なるサイズ及び形状を考慮して、GUIを介して全てのテンプレート化されたポジションの配置をユーザが実際にドラッグして移動させる能力を提供することができる。言い換えれば、ユーザは、必要に応じてテンプレートの位置を追加して、非常に大きな前立腺の場合も含めて、より多くのカバレッジを提供することができる。
ニードルの先端が挿入されてTRUS画像に表示されるとき、ニードルの先端の前に動的認知補助を線として配置することができる。Bard MC1825バイオプシ器具のようなバイオプシニードルでは、発射時にニードルの先端が(例えば、22mm)前方に跳ね上がる一方、18mmのコアの中心の位置はニードルの先端からおよそ8mmである。ニードルを発射したときに、ニードルの先端がどこに到達するかを、小さい赤い線などの、認知補助で示すことができる。赤い線が膀胱や尿道にかからないようにすることで、目で見て距離を推測するという作業が不要になる。赤い線が膀胱に触れなければ、膀胱への穿刺は起こらない。言い換えれば、ユーザは、赤い線が膀胱や尿道の外側にあることを確認すればよい。同様に、黄色の線は、予測されるバイオプシコアを示し、黄色の点は、予測されるバイオプシコアを示す線上のバイオプシコアの中心がどこになるかを示す。ユーザは、バイオプシコアの中心をできるだけテンプレートの位置に近づけるために、緑の円/球(例えば、半径5mm、許容できる偏差を示す)の中央にある黒い円/球(例えば、テンプレートの位置を示す直径2.5mm)と一致するように、黄色のドットを並べることができる。この機能は、異なるコアの長さ及びサイズに適応され、TRUS画像オーバレイ及び3Dビジュアライゼーションの両方で使用される。
次に図1を参照すると、(TRUS患者ケアシステムとも称される)ガイダンス及びトラッキングシステム100は、カテーテル105と、カテーテル105内に配置されるトラッキングセンサ(例えば、NDIモデル90)を追跡するための6自由度(6-DOF)トラッキングシステム110とを含むことができる。カテーテル105は、6-DOFトラッキングシステム110によって追跡することができるので、カテーテル105は、幾つかの実施形態では、追跡されるカテーテルと呼ばれ得る。カテーテル105は、幾つかの例では、前立腺の尿道通路に配置され、固定されるように構成され得る。カテーテル105に配置される電磁トラッキングセンサを使用して、コンピューティングデバイス115は、本明細書に記載の様々な実施形態に従って他の器官を追跡することができるが、図1に示されるような前立腺のような器官の位置及び方向を追跡することができる。図1は後付けの実施形態に特有のものであるが、(後付けではなく、内蔵型の)別の実施形態は、トラッキングセンサ160a及び160bを夫々のツールに埋め込むこと、及び、TRUSマシン130のディスプレイにオーバレイをインポーズすることを、含み得、コンピューティングデバイス115及びその関連ソフトウェアは、TRUSマシン130の全て又は一部であってもよい。
ガイダンス及びトラッキングシステム100のコンピューティングデバイス115は、幾つかの実施形態では、タッチスクリーン又はスタイラス対応のディスプレイを有するタブレット、スマートフォン、ラップトップ、又は同様のパーソナルコンピューティングデバイスを含み得る。更なる実施形態では、コンピューティングデバイス115は、サーバを含み得る。TRUS超音波プローブ120(若しくはTRUSトラッキングクリップ160b)及び/又はバイオプシガン125(若しくはバイオプシデバイスクリップ160a)などの、医療器具にトラッキングセンサを取り付ける又は埋め込むことにより、トラッキングアプリケーション215(図2)、ガイダンスアプリケーション220(図2)、又は他のアプリケーションを使用して、処置又は診断手順の間に医療器具をトラッキングすることができる。幾つかの実施形態では、バイオプシガン125は、別の電磁センサによって追加的に追跡され得る、バネ式バイオプシニードル(例えば、Tru-Cutバイオプシニードル)を含む。
前立腺トラッキングセンサ、TRUSプローブトラッキングセンサ540、及びニードルガントラッキングセンサ530の位置及び方向は、トランスミッタのトラッキング体積が器官及び器具の予想される臨床的に関連する移動範囲を包含するように、例えば、患者が左側臥位で右腰の上に配置された、NDI SRT(Short Range Transmitter)又はMRT(Medium Range Transmitter)追跡機(トランスミッタ)などの、磁気追跡機(トランスミッタ)155によって検出することができる。更に、コンピューティングデバイス115は、追跡される器官に対する一つ又は複数の医療器具の位置及び方向を決定し得る。医療器具は、バイオプシのためのバイオプシガン125又はアブレーション処置のためのRFニードルを含むことができる。
様々な実施形態において、コンピューティングデバイス115のディスプレイ上に示される超音波画像においてカテーテル105が明確に可視化されるように、カテーテル105内又はカテーテルの材料にエコー源性液体を使用してもよく、これにより、カテーテル又は電磁トラッキングセンサの意図しないサンプリングを防止することができる。
さらに、ガイダンス及びトラッキングシステム100は、超音波マシン130、取り外し自在アウトプット135(例えば、取り外し自在HDMI(登録商標)アウトプット)、ビデオキャプチャデバイス150、磁気追跡機155、並びに、一つ又は複数のスナップオンレトロフィット160a、160bを含むことができる。コンピューティングデバイス115は、以下で説明するように、3次元ビジュアライゼーションガイダンスオーバレイで使用することができる、前立腺などの器官の3次元再構成(例えば、リアルの3次元モデル)を生成するための手動のセグメンテーションを提供するように構成することができる。
さらに、前立腺のバイオプシ(図24)などの医療手順を容易にする器官及び/又は器官の3次元再構成に関連して、様々なユーザインタフェースコンポーネントを示すことができる。一つの実施形態では、予測されるバイオプシコアをテンプレート内の意図されるコアに適切に配置することをガイドする、器官のライブビュー若しくは3次元再構成にコアテンプレートが視覚的にオーバレイされて示される。例えば、コンピューティングデバイス115は、理想的で適切なバイオプシを最小限の偏差で実行できるように、予測されるコアをテンプレート内の意図されるコアに一致させるために、オペレータがバイオプシガン125を動かすことを支援する通知を生成することができる。認知補助には、3Dビジュアライゼーションにおける前立腺の断面でテンプレートの位置と交差する予測されるバイオプシコアや、テンプレートの位置、ニードル停止線、最大ニードル先端貫通線、バイオプシコア中心、予測されるバイオプシなどの、TRUS画像のオーバレイが含まれる。
同様に、トラッキングセンサを医療器具に取り付ける又は埋め込む(例えば、バイオプシニードルガイドを有する若しくは有しないTRUSプローブ120に6自由度電磁センサを取り付ける)ことにより、図2に示すように、トラッキングアプリケーション215、ガイダンスアプリケーション220、又は他のアプリケーションを使用して、処置、診断、又はガイド付き介入手順の間に、医療器具をトラッキングすることができる。しかしながら、図1に戻って参照すると、バイオプシガン125、又はバネ式バイオプシニードル(例えば、Bard Tru-Cutバイオプシニードル)を含む他のタイプのニードルガンが、別の電磁センサによって追加的に追跡され得る。前立腺トラッキングセンサ、並びに、TRUSプローブ及びニードルガントラッキングセンサの、位置及び方向は、NDI SRT(Short Range Transmitter)又はMRT(Medium Range Transmitter)などのトランスミッタによって追跡することができる。幾つかの実施形態では、トランスミッタは、例えば、左側臥位の患者の右腰の上に、配置することができ、これにより、トランスミッタのトラッキング体積は、器官及び器具の、予想される臨床的に関連する動きの範囲を包含する。更に、コンピューティングデバイス115は、アプリケーション215と一緒に、追跡される器官に対する一つ以上の医療器具の位置及び方向を決定できる。
医療器具は、撮像装置、バイオプシのためのバイオプシニードルガン、アブレーション処置のためのRFニードル、又は任意の他のガイド付き介入ツールを含むことができる。様々な実施形態では、カテーテル105が超音波画像又は他の医療画像モダリティで明確に可視化されるように、カテーテル105又はカテーテルの材料にエコー源性液体を使用することができ、これにより、カテーテル又は電磁トラッキングセンサの意図しないサンプリングを防止することができる。
実施形態は、複数の点で先行技術と異なる。多くの相違点の中でも、本開示の実施形態は、(a)必ずしも2つの撮像モダリティ(例えば、MRI及び超音波)を必要とせず、所望であれば、他の撮像モダリティから従前に得られた撮像データを含むことができる(すなわち、本明細書に記載の技術は、2つの異なるソースからの画像を融合する融合バイオプシ技術を必要としない);(b)「第1の撮像モダリティ」、例えば、MRI撮像の間に、強化されたカテーテルデバイスが存在することを必要としない;(c)「イメージスペース」を必要とせず、「イメージスペース」を「患者スペース」に併置する必要があり;(d)テンプレート化された位置若しくはコア、又は再構成された可視病変が3D再構成されて登録された後は、TRUSなどの撮像モダリティを全く必要とせず、(e)カテーテル内のセンサが画像空間で見えること、即ちMRI画像により見えることを必要としない。むしろ、器官トラッキングセンサの位置と方向は、センサを追跡するトランスミッタによって決定される。幾つかの実施形態では、トランスミッタは、患者の体外に配置することができ、例えば、6つの自由度(x、y、z、ヨー、ピッチ、ロール)で、カテーテル内のセンサを追跡するように構成することができる。これにより、センサは、TRUS画像又は他の画像上に正確に配置され、TRUS画像又は他の画像上に仮想センサとしてオーバレイされ得る。本明細書に記載の実施形態では、ユーザは、2次元のTRUS画像と、2Dフレームから3Dフレームに移行する際のユーザの空間能力とに、依存する代わりに、3次元ビジュアライゼーションモードで作業するオプションを有する。
結果として、本明細書に記載の実施形態は、従来技術で周知の既存の融合バイオプシシステムのように、MRIのコストと時間、及びMRIを解釈するための放射線技師の料金を排除することにより、より合理的で手頃なものとなっている。また、本明細書に記載の実施形態は、空間能力又は断面リテラシー(2D断面から3Dオブジェクトを仮想的に視覚化する能力)が限られているユーザであっても、より直感的に使用することができる。TRUS画像は、前立腺などの3D器官の2D断面又はスライスである。本明細書に記載の実施形態は、空間能力や断面リテラシーの欠如や、2D TRUSイメージングの限界を、補うことができるリアルの3Dグラフィカルユーザインタフェースとして、リアルタイム3Dビジュアライゼーションを提供するので、現在のPBx技術よりも直感的なユーザインタフェースを提供することができる。
医療器具は、経直腸超音波プローブ又は他の撮像デバイス135などの、撮像デバイスを含むことができる。更に、医療器具は、サンプルを収集するためのバイオプシニードルガン、又は治療的処置を提供するための他のデバイスを含み得る、バイオプシ、又はガイド付き介入処置デバイスを含み得る。医療器具は、医療器具を追跡するための幾つかの実施形態における(内蔵、又は取り外し自在に取り付けられている)センサを含むことができる。コンピューティングデバイス115は、ディスプレイデバイス210(図2)と相互作用して、以下で説明するように、ガイダンスインタフェースにもなり得るユーザインタフェースを生成し得る。
ここで図2を参照すると、様々な実施形態に係るガイダンス及びトラッキングシステム100の概略図が示されている。ここでも、ガイダンス及びトラッキングシステム100は、幾つかの実施形態では、その中に配置された電磁トラッキングセンサ205を有するカテーテル105を含むことができる。ガイダンス及びトラッキングシステム100は、コンピュータモニタ又はタッチスクリーンディスプレイデバイスなどの、ディスプレイデバイス210を含むことができ、これは、幾つかの例では、コンピューティングデバイス115の一部又はコンピューティングデバイス115とは別個のものとすることができる。コンピューティングデバイス115は、カテーテル105だけでなく、前立腺などの器官に関する、データの追跡及び収集を容易にするプログラム命令を含むことができる。このように、コンピューティングデバイス115は、トラッキングアプリケーション215、ガイダンスアプリケーション220、並びに、他のアプリケーション、サービス、エンジン、又は他のコンピュータ実装されたプログラム命令を、含むことができる。
ガイダンス及びトラッキングシステム100の医療器具は、TRUSプローブ120又は他の撮像装置などの、撮像装置を含むことができる。更に、医療器具は、収集又は処置デバイスを含むことができ、これは、サンプルを収集するためのバイオプシニードルガン125を含むことができ、又は治療的処置を提供するためのデバイスを含むことができる。医療器具は、医療器具を追跡するための幾つかの実施形態におけるセンサを含むことができる。コンピューティングデバイス115は、以下で説明するように、ユーザインタフェースを生成するために、ディスプレイデバイス210と相互作用することができる。
図3Aに移ると、ユーザインタフェース200の一例が示されており、ユーザインタフェース200は超音波画像205を含む。上述のように、ガイダンス及びトラッキングシステム100は、器官の3次元再構成(セグメンテーション)を生成するのに使用し得る器官の複数の画像をキャプチャするように構成された撮像装置を含むことができる。幾つかの実施形態では、TRUSプローブ120又は他の撮像技術を用いて得られる器官の複数の2次元画像に基づいて、3次元再構成400(図6)を生成することができる。病変又は関心領域がTRUS画像で見える(即ち、超音波撮像で病変が見える)場合には、異なる2次元スライスでの病変部のアウトラインを手動でトレースして、病変403の3次元再構成を形成することができ、そのプロセスの例が図8に示されている。そして、3次元的に再構成された病変403は、バイオプシの際にターゲット化され得、即ち、ガイダンス及びトラッキングシステム100は、テンプレート化されるバイオプシに加えて、ターゲット化されるバイオプシにも使用することができる。
図3Aの円は、テンプレートの位置を示す。停止線又はニードル停止線は、円筒形バイオプシコアの白色の中心が灰色の円の中心にあるように、発射する前に、ニードルの先端がどの程度挿入される必要があるかを示すための視覚的認知補助オーバレイである。図3Aに示す停止線は、ニードルが、意図した場所やターゲットに適切に配置されていない場合には存在しない。消えていく停止線は、ニードルの狙いが必要な場所からずれていることを思い出させるという二重の役割を果たしている。幾つかの実施形態では、ニードルが、意図した位置やターゲットにある程度揃っている場合、停止線は灰色で表示される。更に、停止線は、ニードルが、意図した位置又はターゲットに適切に揃ったときには、緑色になり得る。投影された半円筒形のバイオプシコアと、バイオプシコアの中心を表すドットも、ライブ超音波画像に重ねて表示される。バイオプシニードルデバイスの先端が発射されたときに到達する最大エクスカーション(深さ)を表す線(例えば、赤い線)も表示される。最大ニードル深度線は、ニードルが発射された場合、前立腺の後ろの解剖学的構造を損傷することをユーザに警告するために、色を変えたり、点滅させたりすることができる。最大ニードル先端エクスカーションラインと、投影されたバイオプシコア及び中心ドットとは、追跡されるニードルがニードルガイドを越えて挿入されると、ニードルパスに沿ってリアルタイムで一緒に移動する。
テンプレート225は、一連のテンプレート位置であり、例えば、二重六分儀スキーマでは12である。前立腺又は他の器官のバイオプシが行われている実施形態では、ガイダンス及びトラッキングシステム100は、図8に示すように、器官の3次元再構成400に仮想テンプレート225を重ねることができる。図3Aに戻って、注目すべきことに、仮想テンプレート225は、器官からの組織の収集のための、又は処置のためのテンプレートの位置又は理想的な部位を含むことができる。あるいは、図3Aに示すように、超音波画像内に一度に一つのテンプレートの位置226又はコアのみを表示して、視覚的な乱雑さを減らし、ユーザがサンプリングされる位置に集中することを容易にすることができる。
このように、ガイダンス及びトラッキングシステム100は、仮想テンプレート225で指定された位置でのサンプルの収集を容易にするガイダンスを提供することができる。泌尿器科トレーニング教材における12コアテンプレートの現在のメンタルモデルは、前立腺が2Dではなく3Dの器官であることを無視しているような定性的な2Dモデルである。言い換えれば、現在の12コアテンプレートは、所定のテンプレートにおけるテンプレート位置の提案を描いた円(又は球)がどのように前方に配置されているかを指定していない。本明細書に記載の実施形態では、定性的な2Dのバイオプシテンプレートではなく、定量的な3Dのバイオプシテンプレートに、前方を含めてテンプレート位置を配置し、そのテンプレートの位置にバイオプシニードルを誘導することができる。
更に、サイドファイアテンプレートバイオプシのために教示されている現在の技術は、TRUS画像において、ニードルの先端が前立腺の直腸側の前立腺カプセルをテントすることが観察されるまでニードルを挿入し、ニードルガンを発射することである。このカプセルテント法は、前立腺を事前に貫通していないため、特にサイドファイアニードルガイドを使用した場合、病変が発生する前立腺の前方領域をサンプリングすることはできない。つまり、現行のテンプレートバイオプシでは、故意に前方の前立腺を採取しないため、既存の前方の病変を見逃してしまい、偽陰性となってしまうのである。前立腺の前方をシステマティックにサンプリングしない理由としては、バイオプシニードルで膀胱や尿道を不用意に当たってしまうことへの懸念が挙げられている。本明細書に記載の実施形態では、前立腺の前方領域にテンプレートの位置を配置し、膀胱及び尿道を回避しながらそれらの位置でサンプルを収集することができる。
様々な実施形態では、仮想テンプレート225は、12コアのテンプレートを含むことができるが、他の実施形態では、他の適切な量のコア、又は経直腸及び経会陰のテンプレートスキーマを含む他のテンプレートスキーマが、採用されてもよい。本明細書に記載の実施形態は、サイドファイア経直腸、エンドファイア経直腸、及び経会陰のテンプレート化されたTRUSガイドPBxの間に、前立腺の前部領域をサンプリングする、標準又はカスタマイズされた3Dテンプレートの作成を容易にし、ニードルガンを発射する前の、ニードルの先端による前立腺への適切な事前浸透量に関するガイダンスを提供する。更に、選択された事前設定されたテンプレートが、患者の前立腺に適合しない場合、又は、ユーザがサンプリングしたい領域をカバーしない場合、ユーザは、再構成された3D前立腺とテンプレートとの間の、より良い適合又はカバーを得るために、テンプレートの位置又はコアの、位置及び方向を手動により及び視覚的に調整する能力を有する。更に、様々な実施形態において、ガイダンス及びトラッキングシステム100は、テンプレート化されたサイドファイアTRUS PBxの中に現在サンプリングされていない前部ゾーンを含む、仮想テンプレート225内で指定された領域における組織サンプルの収集を容易にするべく、バイオプシ器具又は他の医療器具のポジション(位置及び方向)に対する、軌道及び調整を提供してもよい。
ディスプレイデバイス210でレンダリングされる一つ又は複数のユーザインタフェース200を使用して、泌尿器科医又は他の医療従事者は、以下で説明するように、器官の複数の2次元画像を収集することによって、前立腺又は他の器官を手動でセグメント化して、実際の3次元再構成を生成することができる。リアルの3D環境又は再構成は、3Dのように見えるが実際にはそうではない描写、例えば、3Dのように錯覚させるが実際には3Dではない、わずかにオフセットした二つのカメラからの立体視などではなく、本当の3Dである。幾つかの実施形態では、器官の2次元画像は、経直腸超音波プローブ120又は他の撮像デバイスを使用して収集され得る。
様々な実施形態において、仮想テンプレート225は、器官の3次元再構成に重ね合わせられ得る。例えば、泌尿器科医又は他の医療従事者は、テンプレートライブラリ又はメニューから、12個のコア(若しくは、他の適切な量のコア)を有する仮想テンプレートを、結果として得られる器官の3次元再構成上にドラッグアンドドロップし得る(図18A)。テンプレートライブラリは、コンピューティングデバイス115のメモリからアクセスされ得る。テンプレートの位置を示す、又はセグメント化された3D病変やニードル停止線などのターゲットを包囲する、円盤、円若しくは球などの認知補助は、図3A及び図24に示すように、テンプレート化された位置又はターゲットがニードルパス(点線)に入るまで、泌尿器科医が経直腸超音波プローブを手動で(フリーハンドで)操作するのをアシストするべく、TRUS画像若しくは2次元画像及び/又はリアルの3次元ビジュアライゼーションに正確に重ね合わせ得る。
図3Bは、本明細書に記載の現行のシステムを使用せずに行われる組織収集部位(黒円235)と、12コアのテンプレート(グレー円225)との間の変動を更に示している。注目すべきは、組織収集部位が、テンプレートと一致していないことである。しかしながら、本明細書に記載のシステム及び方法に従って行われる組織収集部位(白円240)は、テンプレートとの整合性の改善を示し、その結果、より理想的な器官バイオプシが行われ、潜在的に偽陽性が大幅に減少する。
図3Bでは、グレー円225は、12コアのテンプレートに対する、均等に配置されたテンプレートバイオプシの位置を示す。黒円235は、従来のTRUS PBxを用いるバイオプシサンプルを示している。白円240は、本明細書に記載のガイダンス及びトラッキングシステム100を用いる実際のバイオプシサンプルである。したがって、白円240と黒円235とを比較すると、12コアのテンプレートに対する、組織サンプルの収集が大幅に改善されていることがわかる。
テンプレート偏差とは、サンプルされたコアの中心とその意図されたテンプレートの位置との間の最短距離(mm)のテンプレート内の、n個のコアにわたる平均である。ベースラインのテンプレート偏差を評価し、コンピテンシーベースのトレーニングを実施するために、後述するようにシミュレータを使用した。シミュレータベースのトレーニングの前の、ベースラインでは、泌尿器科医のテンプレート偏差は5mmを超えており、初心者と経験豊富な泌尿器科医のベースラインでのテンプレート偏差は9~12mmの範囲に収まっている。今回、既にシミュレータを使ってコンピテンシ(テンプレート偏差5mm以下)のトレーニングを受けた泌尿器科医が、新しい高精度PBxツールを評価したところ、12個のサンプルにおける偏差(平均±標準偏差、範囲)は、5.2±6.3(3.1~24.5)から1.6±1.8(1.3~6.6)mmに減少した。また、従来のPBxを使用した3人の泌尿器科医の実際のコアは、PCa病変がよく存在する前立腺の頂点をサンプリングしていなかった。理想的な、所望の、又はテンプレート化された部位でのバイオプシの収集に加えて、本明細書に記載のシステム及び方法は、器官、病変、又は哺乳類の身体の他の部分への放射線又は医薬品の送達を目的とするために、又は病変若しくは器官に放射性シードを配置するために、又は、他のガイド付き介入のために、採用され得る。
これまでに説明した実施形態は、概略、経直腸の、サイドファイアの、テンプレート化の、又はターゲット化の、バイオプシに関する。本明細書に記載の実施形態及び認知/照準補助は、矢状及び横方向のインソネーション平面(矢状のみ、横方向のみ、又は矢状及び横方向の両方を一緒に)を使用するエンドファイアTRUSバイオプシ、並びに、TRUSガイド付き経会陰前立腺バイオプシを含む経会陰前立腺バイオプシにも、同様に機能することが、十分に企図され理解される。本明細書に記載の特徴及び設計は、他のガイド付き介入に適用可能であることが企図されている。
テンプレート化されたTRUS PBxは、システマティックPBxとも称されるにもかかわらず、現在はランダムバイオプシとして特徴付けることができ(、実際にはランダムバイオプシとも呼ばれてい)る。本明細書に記載の実施形態は、sPBxをよりシステマティックにし、ランダムでなくすることを目的とする。更に、本明細書に記載の実施形態は、テンプレート化されターゲット化されたPBxを真にシステマティックなものにする方法を提供する。テンプレートの位置は、病変や関心領域(ROI)を表すものではなく、その意味では、ユーザが、コアをテンプレートの位置にできるだけ近くするべく、意図したテンプレート位置を狙っても、ターゲットではない。テンプレートの位置は、バイオプシが均等に分布するようにサンプリングされるべき箇所を示しているため、病変がある場合にはサンプリングの確率が高くなる。最悪のケースとして、6個のコアが右基底部に集まり、他の6個のコアが左基底部に集まるような、非常に偏ったコアの分布を想像されたい。このようなパターンは実際に観察されている。このようなコアの偏在は、尖端部がサンプリングされていないことを意味する。尖端部に病変があった場合、好ましくない偽陰性が発生する。したがって、コアの分布が均一であればあるほど、偽陰性の可能性は低くなる。
次に図4を参照すると、様々な実施形態によるフローチャート300が示されている。 注目すべきは、図4のフローチャート300は、本明細書に記載のガイダンス及びトラッキングシステム100の例示的な使用方法を示していることである。まず、ステップ303において、経直腸超音波プローブ又は他の撮像デバイスが矢状にてインソネーションしている状態で、カテーテルが前立腺尿道通路に挿入されて固定され、カテーテルはその中に6自由度を持つ電磁トラッキングセンサが埋め込まれている。トラッキングの必要性に応じて、(1自由度など)6自由度未満を追跡する他のセンサが企図される。
次に、ステップ306において、センサ又はセンサを保持するカテーテルは、経直腸超音波プローブによって生成される画像上で取得され得、及び/又は、前立腺追跡センサの位置がSRT(Short Range Transmitter)又はMRT(Medium Range Transmitter)などのトランスミッタによって独立して検出されことから、仮想記号としてTRUS画像上に重ねられ得る。幾つかの実施形態では、カテーテルセンサの正中線を視覚的に通る線が、前立腺長軸と称されることもあるカテーテル長軸と最もよく適合する。
ステップ309では、前立腺の頂部及び基部などの、器官における長軸に2つのハッシュマークを配置され得る。ハッシュマークは、例えば、タッチスクリーンタイプのディスプレイデバイス145にマーキングしたり、マウスやトラックボールなどのポインティングデバイスを使用したりして、配置され得る。コンピューティングデバイス115上のアプリケーションは、次に、前立腺の頂部及び基部を示す、又は前立腺の頂部エッジ及び基部エッジにおける尿道を示す、ハッシュマークの間の中点を計算し得る。中間点マークは、手動で又は自動的に追加されてもよく、3つのマーク(前立腺の正中線又は長軸に沿った、頂点、中間点、基部)全てが、ディスプレイデバイス145に表示されてもよい。
ステップ312では、センサ中間点が、所定の矢状の断面における前立腺の頂点と基部との間の中間点マークに位置するように、必要に応じて、カテーテル105を調整し得る。センサの中間点は、後で使用するために手動で又は自動でマークされる。センサは、TRUS又は他の撮像モダリティで可視化され得、撮像モダリティでも可視化される等間隔のバンドが、カテーテルに沿った距離を容易に評価するように用いられ得る。
ステップ315において、アプリケーションは、矢状のインソネーション平面が、例えば、尿道が見える中間の矢状の平面で前立腺長軸を含み、更に基部及び頂部のハッシュマークを含む、前立腺トラッキングセンサに対する経直腸超音波プローブの位置及び方向を記録して格納し得る。経直腸超音波プローブは、横方向のインソネーション平面に切り替え得る。事前に矢状図で取得したセンサとセンサ中間点マークを横方向平面に表示する。センサ中間点は、横方向平面において、異なる色のドット又は他の形状としてセンサ本体と区別される。TRUSプローブによる前立腺の背側(直腸側)のスイープは、経直腸超音波プローブの位置と方向を記録しつつ水平に行うことができる。横方向平面は、センサの中間点を通過するまで手動で調整される。6自由度トラッキングシステムは、横方向平面がセンサの中間点に達したときに、ソフトウェアがユーザに所望の横方向平面が得られたことを通知する。センサの中間点を通る中間横方向平面が記録され、前立腺の長軸と略直交して表示される。横方向平面の中央部は、後述するように、センサのスリップを検出するのに用いられ得る。保存された横方向平面の中でセンサの中間点を通り、長軸に直交する線が、前立腺の短軸である。上記の説明に基づいて、多数の線が短軸として認定され得る。短軸は、前立腺の直腸表面に概ね平行に走る線、即ち、理想的には90°の若しくは90°近くの、「ロール」角度として、表記及び表示され得る。
ステップ318では、経直腸超音波プローブ(横方向のインソネーション平面)を頭側により深く押して、最も外側の頭側のエッジを決定し得る。エッジは、短軸平面に平行な頭側平面としてマークされ表示され得る。
ステップ321では、経直腸超音波プローブ(横方向のインソネーション平面)をより浅く引いて、最も尾側のエッジを決定し得る。この場合も、エッジは、短軸平面及び頭側平面に平行な尾側平面としてマーク及び表示され得る。
ステップ324では、例えば、患者が通常の左側臥位(即ち、患者が左側に横たわっている状態)で、TRUSプローブを再配置し、矢状のインソネーション平面に切り替え得る。オペレータは、前立腺の最左エッジを取得するために、経直腸超音波プローブを扇形にしたり、(時計回りに)ロールダウンしたりして、前立腺左エッジとして格納して表示し得る。経直腸超音波プローブが矢状のインソネーションモードのままで(即ち、患者が通常の左側臥位、言い換えれば、患者が左側に横たわっている状態で)、前立腺の最右エッジを取得するために、経直腸超音波プローブを扇形にしたり、(反時計回りに)ロールアップしたりして、前立腺右エッジとして格納して表示し得る。
明らかではあるが、5つの平面(尾側、頭側、短軸、左端、右端)が生成され、2つの線(前立腺長軸、前立腺短軸)が格納されて表示され得る。更に、長軸(矢状インソネーションモード)及び短軸(横方向インソネーションモード)に合わせて、センサに対する2つのTRUSの位置及び方向が表示され得る。4つの平面(尾側、頭側、右、左)により、前立腺の「箱」又は器官の箱が形成される。経直腸超音波プローブを横方向インソネーションモードにした場合、横方向平面は、短軸平面に平行に示され得る。幾つかの実施形態では、短軸平面の両側に、5mm(又は他の適切な寸法)の間隔を空けて表示し得る。ユーザは、経直腸超音波プローブを順次移動(押したり引いたり)して、横方向インソネーション平面が間隔を空けた平面の各々と一致するように、指示され得る。各平面を一致させた後、ユーザは、その横方向平面に対する、TRUS画像上の前立腺の最も外側の右エッジ及び左エッジを識別するように指示され得、これらはマークされて保存される。
様々な実施形態において、前立腺の右エッジ及び左エッジをマークして識別した後、アプリケーションは、前立腺の平面図、即ち、後前(PA)図(ユーザは患者の背面から前立腺を見る)を表示し得、これは、均一に間隔を空けた横方向平面上で従前にマークされた前立腺の右エッジ及び左エッジを示すドットを有する。ドットは、PAビューにおいて前立腺のアウトラインを作成するべく、自動的又は手動で接続できる。前立腺のPA冠状アウトラインは、格納され、ディスプレイデバイス145に表示され得る。
別の実施形態では、ステップ306~324の代わりに、プロセスは、ステップ340に進むことができ、ここでユーザは、理想的には矢状平面と横方向平面の両方を使用して、多数の超音波プローブの位置及び方向から複数の平面でタッチスクリーン又はポインティングデバイスを使用して、超音波スクリーン上の前立腺のアウトラインをトレースできる。図4を参照して、トレースされるアウトラインは、3Dオブジェクトとして保存され、前立腺センサ空間に登録され得る。言い換えれば、トレースされるアウトラインは、前立腺センサ空間に取り付けられ、その結果、TRUSプローブによって加えられる圧力及び力に応じて前立腺センサが動くと、動く。ユーザが前立腺を複数の平面でトレースすると、前立腺のワイヤメッシュ状の形状が、コンピューティングデバイス115内に構築され得る。一実施形態では、トレースされるアウトラインを作成するのに使用されるポイントは、入力としての3Dポイントのセットを与えられた出力として3Dオブジェクトを作成する、点群からメッシュへのアルゴリズムを使用して、3Dオブジェクトに変換される。一つの実施形態の実践への還元では、Unity3Dソフトウェアを使用して、点群からメッシュへの変換をリアルタイムで実行した。
各トレースの前に超音波画像をフリーズする「フリーズ」機能を有効にすることができるので、ユーザは(トレース中にTRUSプローブが動く場合)動くターゲットをトレースするのに苦労する必要がなく、必要に応じて(アシスタントなしで)単独で使用するために両手を解放することができる。すなわち、手動トレースが行われている間、TRUSプローブを直腸内の所定の位置に保持する必要はない。コンピューティングデバイス115は、バイオプシ手順の間に臨床で発生し、コアの実際のサンプリングに先行する、前立腺の粗いセグメント化である3D形状を生成する、すべての手動トレースに適合する近似3Dボリュームを表示し得る。この3D形状は、図6に示すように、新しいトレースが追加されるにつれて、より正確になる。「元に戻す」機能により、ユーザは、最初からやり直すことなく、誤ったトレースを拒否することができる。
一実施形態では、コンピューティングデバイスは、3次元モデルの疎らにトレースされた領域を検出し、特定の超音波プローブの位置及び/又は方向からトレースを追加することによって、ユーザがギャップを埋めることを、要求し得る。別の実施形態では、3Dモデルは、ニューラルネットワーク、又はエッジ検出アルゴリズムなどの他のソフトウェアを使用して、超音波画像内の前立腺又は他のランドマーク若しくは器官の境界を認識するソフトウェアアルゴリズムによって、自動的に構築することができ、人間のユーザがTRUS画像上のアウトラインを手動でトレースする必要性及び時間を置き換えることができる。また、作成した3Dモデルはライブラリに保存し、後から使用することも可能である。3Dボリュームが十分に構築されると、追加のコアをサンプリングするためのテンプレートの位置の、配置、シーケンス、及び、必要に応じて、追加のために、新たに粗くセグメント化された前立腺への仮想3Dテンプレートの適合及び調整に、使用される。
ステップ327では、例えばPAビューの間に、ユーザは、前立腺上に予め配置された仮想テンプレート225をドラッグアンドドロップするように指示され得る。上述したように、幾つかの実施形態では、仮想テンプレート225は、12コアのテンプレートを含み得る。幾つかの実施形態では、オペレータは、前立腺の外部に落ちる可能性のある、コアと称される、テンプレートの位置の各々(例えば、一般的に使用される二重六分儀スキーマでは12)を、前立腺又は他の器官上に手動でスライドさせ得る。テンプレートの位置を表すのに円を使用する代わりに、3Dコアを表示するオプションが選択された場合、コアが非前立腺組織をサンプリングするかどうか(即ち、コアの一部が前立腺の外にあるかどうか、又は、望ましくは無いがコアの全てが前立腺の外にあるかどうか)を決定するタスクが容易になる。 様々な実施形態において、テンプレートの位置(例えば、12)は、円柱、球体、アイコン、又は他の適切な視覚的インジケータとして表示され得、前立腺の前部領域に手動で配置し得る。また、ユーザは、必要に応じて多くのテンプレートの位置を選択することができ、一般的に使用されるテンプレートスキーマで指定されるテンプレートの位置の数に限定されない。ユーザは、テンプレートの位置の順序を変更してもよいし、デフォルトのテンプレート位置の順序を受け入れてもよい。
テンプレート編集プロセスの一例を図18に示す。図18のA行を参照すると、テンプレートのメニューから所定のテンプレートスキーマを選択するための例示的なユーザインタフェース200が示されている。図18は、冠状(PA;後方-前方)及び矢状のビューを示しているが、本明細書に記載の実施形態は、前部ゾーンのテンプレートの位置を目指す際に尿道及び膀胱を避けるのに役立つ横方向のビューの使用も企図している。図18のB行は、ユーザがテンプレートをリアルの3D再構成された前立腺上にドラッグして所定のポジションに移動させる様子を示している。冠状平面や矢状平面などの異なる平面に対してテンプレートセット全体を回転させるオプションがある。
図18のC行は、ユーザが個々のコア又はテンプレートの位置を移動する様子を示している。ユーザは、まず、「Move Core」ボタンをクリックし、次に、(図の右側の)冠状のビューでコアを選択した。ユーザはコアをわずかに前方と尾側にドラッグした(図)。サイドファイアニードルガイドに対する、投影されたコアとニードルの先端の最大侵入距離が、矢状ビューに重ねて表示される。テンプレート修正に使用される矢状ビューは、TRUSプローブ長手方向軸に対する前立腺の姿勢と、TRUSプローブ長手方向軸に対するサイドファイアニードルガイドの角度(例えば、~19°)を考慮している。TRUSプローブの長手方向軸は、図40に示すユーザインタフェースでは垂直に描かれている。TRUSプローブ軸(縦線)に対する粗分割された前立腺の姿勢は、粗分割中にTRUSプローブと前立腺との間で、従前に取得されて保存された空間関係に基づいて、複製される。図18のD行は、新しいテンプレートの位置を追加するプロセスを示している。ユーザは「Add Core」をクリックし、冠状ビューでクリックしてカーソルのポジション(図示)にて新しいコアを追加した。サイドファイアニードルガイドに対する、投影されたコアと最大ニードル貫通距離が、新しいコア若しくはテンプレートの位置のための矢状の(又は横方向の)ビューに重ねられている。新たに追加されたテンプレートの位置にバイオプシニードルを完全に合わせた場合、ニードルの先端は前立腺の遥か外側に配置され、ユーザにグラフィックと音声による警告が発せられることに、留意されたい。ユーザの次の行動は、前立腺の反対側での損傷や非前立腺組織のサンプリングを防ぐために、新しいテンプレートの位置を頂点に向かって移動させることである。幾つかの実施形態では、セグメント化された3D膀胱若しくは3D尿道又は3D精嚢を使用し、セグメント化し、計画されたニードルパス又はコアのための「ノーゴー」の3D領域として表示することができる。
ステップ330では、オペレータは、任意の病変若しくは疑わしい影、又は関心領域(ROI)のアウトラインを、手動でトレースし得る。更に、オペレータは、病変の粗い3Dセグメント化を行って、ガイダンスのために、3Dビジュアライゼーションにて、及びTRUS画像のオーバレイとして、使用される3D病変又はROIを、生成することができる(TRUSインソネーション平面と3D病変又はROIとの交点をオーバレイとして表示する)。オペレータは、膀胱、尿道、精嚢、追跡される尿道カテーテルや尿道カフなど、回避すべき禁忌領域の粗い3Dセグメンテーションを作成することもできる。あるいは、テンプレートの適合及び調整は、既存のオブジェクトがインポートされて前立腺センサ空間に登録された後の、MRIスキャンからのセグメント化された3D前立腺のような、第三者又は別のソースから得られたオブジェクトの既存の撮像データであってもよい。
最後に、ステップ333では、バイオプシの間、又は本明細書に記載の他の医療手順又はガイド付き介入の間、ガイダンス及びトラッキングが提供され得る。より具体的には、医療機器及び前立腺(又は他の器官)がリアルタイムで表示され得、例えば、経直腸超音波プローブが手動で動かされると、認知補助は、バイオプシコア(すなわち、組織サンプル)が採取される場所を表示し、それがテンプレートの位置とどのように比較されるかを表示し、予測されたコアを所望のテンプレートの位置、又はターゲットの病変若しくはROIに誘導するためのガイダンスを提供する。認知補助のオーバレイは、TRUS画像と3Dビジュアライゼーションの両方で行われる。様々な実施形態において、3つの直交するプリセットカメラビューがディスプレイデバイス145に表示され、緑色のコアを伴うグレーのコアのように、一つの3D視点からオブジェクトを整列させる際に発生し得る「視差」エラーを回避することができる。TRUSプローブは、黄色の円柱がテンプレート又はコアの位置(即ち、幾つかの実施形態では、コア中心のための緑色のドット又はコアのための緑色の円柱)と一致するまで、オペレータによって再配置され得る。一致すると、オペレータは、理想的又は所望の位置及び方向で組織サンプルを採取するために、バイオプシ器具をトリガし得る。この手順は、与えられたテンプレートスキーマ又はユーザが変更したテンプレートスキーマにおける、テンプレート化された位置の他の11個(又は他の量)について、繰り返してもよい。様々な実施形態では、既にサンプリングされたテンプレートの位置にチェックマークやその他の視覚的なインジケータが表示されたり、その位置が表示されなくなったりして、まだサンプルされていない位置のみが表示され、最小限のインタフェースと表示が実現される。また、既にサンプリングされたコアは、テンプレート、TRUS、3Dビジュアライゼーションに尚表示されるが、まだサンプリングされていないコアとは異なる色で表示される。既にサンプリングされたコアを表示することで、同じテンプレートの位置を2回以上サンプリングすることを防ぐことができる。本明細書に記載のシステム及び方法は、医療手順中の患者に関して使用されるだけでなく、死体や、TRUS PBxシミュレータを利用するシミュレーションでも使用することができる。
ガイダンス中、スクリーン上のデフォルトの超音波画像の方向は、インソネーション平面のリアルの世界のポジションを模倣していない(矢状平面を示す図9Aを参照)。患者の直腸内でTRUSプローブを保持しているときに、ユーザの視点からリアルのインソネーション平面のポジションを模倣するように超音波画像を回転させるオプションを利用可能にすることができる(図9B参照)。
本明細書に記載の様々な実施形態によると、器具を所望の位置及び方向又はターゲットにマッピング及びガイドするための、仮想の、リアルタイムの、リアルの3次元(リアルの3D)ビジュアライゼーションシステムが提供される。このように、オペレータ(例えば、泌尿器科医又は他の医療従事者)に提供される任意のフィードバック又はガイダンスは、視覚的、音声的、触覚的、及び3次元的であってよい。
様々な実施形態では、器官の複数のビューが提供され得る。複数のビューは、2次元及び/又は3次元のビューを含み得る。このように、視差誤差は、複数のビューを用いて対処され得る。幾つかの実施形態では、複数のビューは、直交するビューでもよい。前立腺又は他の器官は、幾つかの実施形態では、カテーテルを使用して患者の尿道に配置され得るセンサによって追跡され得る。
幾つかの実施形態では、トラッキングセンサは電磁的であり、トランスミッタによって追跡され得る。本明細書に記載の実施形態のいくつかは前立腺バイオプシに関するものであるが、本明細書に記載のシステム及び方法は、放射線治療、放射線手術、アブレーション、HIFU、薬剤投与、(胸部傍椎又は硬膜外空間などの)空間及び(中心静脈アクセスのための内頸静脈などの)血管へのアクセス、並びに、処置が付随的な損傷を防ぐために正確に狙いを定められなければならない、及び、周囲の健康な組織が照射されないように又は他の方法で害されないように適切に狙いを定められなければならない、他のガイド付き介入及び治療手順の間に、実行されることもある。
様々な実施形態において、ニードル、ツール、又は撮像プローブを所望の位置及び方向、又はターゲットにマッピング及びガイドするための、仮想の3次元のリアルタイムビジュアライゼーションシステムが記載される。上述のように、幾つかの実施形態では、ニードル又はプローブは、トランスミッタによって追跡されるセンサを含み得る。更に、追跡されるニードルは、局所麻酔又は中心静脈アクセスのほか、注射、バイオプシ、モニタリング、アブレーション、膿瘍ドレナージ、細針吸引又は他の医療手順及びガイド付き介入に使用され得る。
幾つかの実施形態では、追跡されるニードルは、バイオプシ器具の一部である可能性があるバイオプシニードルである。ニードルの追跡は、例えば、バイオプシ器具がトリガされた場合に、バイオプシコアがサンプリングされる場所の正確な計算及び予測をリアルタイムで提供し得る。予測されるコアは、グラフィカルなアイコンとして表示され、ニードルガンが空間及び時間で調整されると、リアルタイムでリアルの3次元の仮想的なビジュアライゼーションで、更新され得る。幾つかの実施形態では、ターゲット又はテンプレートの位置及び方向は、アイコン又は他の視覚的インジケータとして描写され得る。
明らかではあるが、オペレータは、3次元ビジュアライゼーションを使用して、予測されるコアを(テンプレート化された又はターゲット化された)所望のコアの位置に一致させるために追跡されるニードルを移動させ、両者が重なる又は近接しているときに、ニードルガンを発射し得る。幾つかの実施形態では、バイオプシ器具のトリガは、例えば、予測されるコアが所望のコアと一致したときに、自動的に実行され得る。
予備データ:経直腸超音波PBxシミュレータを作成し、MRIや放射線科医を必要としない精密PBxツールを設計した。12個のサンプルにわたる偏差は、5.2±6.3mmから1.6±1.8mmに低下した。図23はその好例であり、この試みのテンプレートの偏差は0.7mmである。従来のPBxを使用した3人の異なる泌尿器科医の実際のコアは、PCa病変が一般的に存在する前立腺の頂点をサンプリングしていなかった。その他の予備データとしては、(1)前立腺バイオプシの偽陰性はテンプレートの偏差(p=0.0015)に関連する-2019/11/1のAUA 2020ミーティングに提出されたアブストラクト、(2)テンプレートの偏差はTRUSプローブのピッチ(p=0.000167)に関連する-2019/11/1のAUA 2020ミーティングに提出されたアブストラクト、(3)ピッチニュートラルの手法を記載の論文がJournal of Urologyに提出された、(4)2019年7月以降を目処にカダバー実験を行う、などがある。NDI社のモデル90 6-DOF電磁センサを、2.0mmのPTFEチューブを介して、14FrのBard Foleyカテーテルのボアに装着した。カダバーテストプロトコルは、尿道カテーテルのカフを前立腺の尿道内で膨らませた状態で、90型電磁センサを埋め込んだ尿道カテーテルを押したり引いたりして、カテーテル(したがって埋め込んだセンサも)が前立腺に対して滑るかどうかを(超音波画像で)視覚的に判定するというものであった。その結果、センサは前立腺に対して滑らず、望ましい結果が得られた。超音波マシンのモデルは、SonoSite M-Turbo TRUS Probe又はSonoSite ICTx/8-5MHzを含むことができる。
約1.5~2mlの生理食塩水でフォーリ尿道カテーテルカフを膨らませている様子がTRUS画像で観察された。また、膨らませたカフをTRUS画像で観察することができた。カフ内の生理食塩水の気泡がかすかな影を作っている。
カフを前立腺の尿道内で膨らませても、フォーリ尿道カテーテルは前立腺に固定されたままであった。わずか1.5~2ccの生理食塩水で、周囲の組織がフォーリ導尿カテーテルと一緒に、つまりフォーリ導尿カテーテルに追従して動き、確実に固定されていることがわかる。少量の生理食塩水は、患者に過度の不快感を与えることなく、尿道又は尿道カテーテルを固定するのに十分であろう。
尿道カテーテルは、死体実験中のTRUS画像で容易に見ることができた。TRUSマシンのビデオ出力(GE LOGIQ S7、BK Medical FlexFocus 400)のラップトップ(Microsoft Surface Pro)へのライブリアルタイムフィードは、目立った遅延もなく、アスペクト比ワーピングもなく発生した。これは、TRUS画像のリアルタイムで歪みのないビデオ転送に依存することが、レトロフィットキットの実施形態で実現可能であることを示している。
前立腺に対するトラッキングセンサのスリップの検出。
本明細書に記載の粗いセグメント化プロセスは、尿道に挿入されたカテーテル105内の前立腺トラッキングセンサが、前立腺又はカテーテル105に対して動かないことに依存し得る。前立腺トラッキングセンサがスリップする場合(例えば、追跡される尿道カフが前立腺尿道に対してスリップする場合)、3次元仮想前立腺をTRUS画像に表示される物理的前立腺と整合するように戻すか、3次元仮想前立腺を再び再構成するか、のいずれかによって、スリップを補償するようにオペレータに警告しなければならない。尿道カテーテル105は、尿道の長手方向軸に沿った軸方向、又は、尿道内部で回転する回転方向の、2つの主要な方法で前立腺に対して相対的にスリップし得る。また、センサが、カテーテル105に対して相対的にスリップすることもあり、これも前立腺トラッキングを狂わせることになる。スリップ検出機能は、上記のすべてのタイプのスリップを検出する。
図20は、システムを準備して使用するために必要なステップのフローチャートを、経験豊富なユーザが各ステップに掛かり得る予想時間(手順全体で約20分以下)と共に示している。また、精嚢や膀胱などの前立腺外部のランドマーク、射精管と尿道の接合部や前立腺内の尿道の入口と出口などの前立腺内部のランドマークを使用して、前立腺トラッキングセンサが前立腺に対して相対的に移動したかどうかをリアルタイムで判定する品質コントロールプロセスについても説明する。このプロセスでは、トラッキングされる尿道カテーテルが配置されて固定された後の、手動によるセグメンテーションと同様に、ユーザがTRUS画像内の参照ランドマークを識別してマークする必要がある。一実施形態では、ユーザは、前立腺の基部における尿道入口と前立腺の頂点における尿道出口との間の中間点において、TRUS画像内に(カフを膨らませることによる)アンカ及び前立腺センサを、視覚的に配置する。別の実施形態では、中間点は、ユーザが手動で視覚的に行うのではなく、自動的に生成され得る。通常、前立腺尿道全体を含む正中矢状のTRUS画像において、ユーザは、タッチスクリーンとTRUS画像を使用して、前立腺の基部における尿道の入口と前立腺の頂点における尿道の出口とを識別してマークする。これらの2つの点の間の中間点は、トラッキングアプリケーション215又はガイダンスアプリケーション220によって計算され、TRUS画像上に表示される。
前立腺センサの中間点がTRUS画像の中間点に整列するまで、尿道カテーテル105を前進させる。参照ランドマークは、ライブTRUS画像でオーバレイとして視認できる仮想の3次元オブジェクトである。スリップ検出機能を設定するために、尿道カテーテル105が配置された後、ユーザはまず、前立腺センサ及び尿道カテーテルを用いて、前立腺尿道の出入口を含む正中矢状図を取得する。常にではないが、一般的には、正中矢状平面では、尿道がその全長でTRUS画像に見えるようになり、したがって、尿道カテーテルもその全長に沿って見えるようになる。また、前立腺トラッキングセンサがTRUS画像内に表示され、センサが前立腺に対してスリップしているかどうかをユーザが視覚的に検出する助けにもなり得る。正中矢状平面を取得した後、ユーザはタッチスクリーンを介してTRUS画像上に前立腺尿道の入口と出口をマークし、仮想ランドマークと呼ばれる参照ランドマークとして使用する。入口と出口の基準となる仮想ランドマークは、TRUSプローブのポジションと同様に、前立腺のセンサ空間に保存される。軸方向のスリップ(センサが前立腺を通る尿道を上下に移動する不要な動き)は、センサが前立腺の矢状正中線の頂点と基部との間の中間点に留まっていることを確認することで、モニタされて検出される。ランドマークの取得及び粗いセグメンテーションに使用されるすべてのTRUSプローブの位置は、自動的に前立腺センサスペースに保存される。
次に、ユーザはTRUSプローブのポジションを調整し、(デュアルインソネーション平面を伴うTRUSプローブにて)横方向のTRUS画像を使用し、精嚢や膀胱などの外部ランドマーク、射精管や射精管と尿道の接合部などの前立腺の内部ランドマークの、エッジをマークし、又は、前立腺の横方向の平面のアウトラインをトレースする。これらの横方向の仮想ランドマークは、この新しいランドマークのセットを取得したときのTRUSプローブの新しいポジションと同様に、前立腺センサ空間にも保存される。トラッキングセンサと前立腺との間の回転スリップは、上述の横方向のランドマークがTRUS画像内のリアルの対応するランドマークと重なっていることを確認することにより、モニタされ検出される。粗いセグメンテーションの間にトレースされる矢状及び横方向のプロファイル(前立腺のエッジ)は保存され、前立腺に対するトラッキングセンサのスリップを検出するためのランドマークとして使用される。保存されるアウトラインは、TRUS画像上に表示され、TRUSプローブがその前立腺プロファイルに対して従前に保存されたポジションにあるときに、TRUS画像における前立腺の実際のアウトラインと比較される。
保存されるプロファイルと実際のプロファイルが一致すれば、スリップは発生しない。 不一致であれば、スリップが発生したことになる。これらの比較は、視覚的にも、エッジ検出ソフトウェアやニューラルネットワークを用いて自動的にも、行うことができる。一実施形態では、タイマは、設定された時間間隔で前立腺のアラインメントをチェックするようユーザに思い出させることができ、必要に応じて、ランドマークを保存するのに使用された正確なTRUSプローブのポジションにユーザをガイドすることができる。TRUSプローブのポジションが物理的に再現できない場合は、前立腺に対してセンサの著しいスリップが発生したことを示していると考えられる。別の実施形態では、軸方向及び回転方向のスリップの検証は、前立腺の境界、射精管、精嚢、膀胱などの超音波画像内のランドマークを認識するように訓練されたニューラルネットワークを使用する、TRUS画像内のランドマークの特徴認識ソフトウェアを介して、自動的に行うことができる。自動スリップ検出ルーチンは、上述にて説明した手動タスクを再現することができる。一実施形態では、ソフトウェアルーチンが前立腺センサのスリップの可能性を検出する場合、仮想ランドマークに関連する保存されたプローブのポジションにユーザをガイドし、TRUS画像内に仮想ランドマークを表示することによって、前立腺センサがスリップしていないことを視覚的に検証するようにユーザに警告することができる。仮想ランドマークは、TRUS画像内の対応するランドマークに重ねることができる。ユーザは、仮想ランドマークとTRUS画像内の対応するランドマークとが一致していることを視覚的に検証することができる。一致していない場合は、前立腺センサがスリップしたことになり、ユーザは上述のようにスリップを補償することができる。14FrのBard尿道カテーテルとICTx/8-5MHz TRUSプローブを搭載したSonoSite M-Turbo TRUSマシンとを使用して死体で行われた予備実験によると、スリップの可能性は低い。
自動化された患者固有のテンプレート。
バイオプシ前の計画段階の、テンプレートのユーザによる手動調整を説明した。異なる実施形態では、個々の前立腺に固有の仮想3次元テンプレートが自動的に作成される。ソフトウェアルーチンは、前立腺の3次元再構成を入力とし、所定の形状(例えば、球形)及びサイズ(例えば、1cm径の球形)の仮想病変がサンプリングされない確率を最小化する、特定の前立腺に最適化された3次元テンプレートを、出力することができる。直径1cmの球状の病変を想定した場合、コアと同心円状にカプセル(両端が半球状の直径1cmの円柱)がある。ユーザは、カプセルの直径を、前立腺の異なる部分又は領域を含む他の値に変更することができる。ソフトウェアルーチンは、カプセルの外部の前立腺ボリュームを決定し、カプセルの外部の前立腺ボリュームを最小にするようにコアの位置を自動的に移動させることができる。
ユーザは、許容されるカプセルの外部の最大前立腺ボリュームの閾値を選択し、閾値を超えた場合には、ボリュームを閾値以下にするべくコアを追加することができる。また、ユーザは、病変の直径などの仮想病変のサイズを選択することができる。別の実施形態では、ソフトウェアルーチンは、バイオプシコアの配置をモニタし、テンプレートの位置にコアを配置する際のユーザのエラーを考慮する。すなわち、PBx手順の間、ソフトウェアルーチンは、既に収集されたコアにおけるテンプレートの偏差を計算する。既にサンプリングされた各テンプレートの位置に対して、ソフトウェアルーチンは、既にサンプリングされたバイオプシのコアの偏差に基づいて、依然サンプリングされるべきテンプレートの位置を自動的に調整する。この調整は、まだサンプリングする必要があるテンプレート位置のポジションを調整して、カプセルの外部の前立腺ボリュームを最小化することによって行われる。
追跡されるニードルガイドを介してフリーハンドニードルを追跡する。
レトロフィットキットのための実施形態では、トラッキングセンサは、バイオプシガン125などの、ニードルバイオプシ器具のハンドルにスナップする取り外し自在のクリップにある。非レトロフィットの実施形態では、トラッキングセンサは、コアチャンバ(例えば、サンプルを掴むニードルのセクション)の近くに配置される。レトロフィットの実施形態では、バイオプシニードルがコアセクションの近くではなく、バイオプシ器具のハンドルから追跡されるため、フリーハンドの経会陰バイオプシ中にニードルを追跡することは困難である。バイオプシニードルは長くて柔軟性がある(曲がる)ため、曲がりが生じると、ハンドル内のセンサはコア切断セクションを確実に追跡できなくなる。「フリーハンド」経会陰PBxでは、ニードルをTRUS矢状インソネーション平面と本質的に機械的にアラインメントするTRUSプローブニードルガイドを使用しない。したがって、ニードルには制約がなく、ニードルをTRUS画像で見えるようにTRUSインソネーション平面にアラインメントさせるのは難しい。
これらの問題を解決するために、(電磁トラッキング用のコバルトクロムやチタンなど)トラッキングに干渉しない材料で作られるニードルやカテーテルのような剛性の高いニードルシースを、経会陰領域にて、前立腺を貫通するほど深くなく、配置することができる。剛性の高いニードルシースは、ニードルハブ内の6自由度センサを介して追跡される。バイオプシニードルはシースに挿入され、ニードルパスとポジションは剛性の高いシースのハブにおけるセンサから推測される。別の実施形態では、電磁トラッキングのための非強磁性金属のようなトラッキングを妨げない材料で作られるニードルシースは、TRUSプローブに機械的かつ剛性的に結合されており、TRUSプローブが動いても、ニードルシースはTRUSプローブの矢状のインソネーション平面とアラインメントしたままとなる。この機械的な結合により、経会陰バイオプシの際にTRUS画像内でニードルを見やすくすることができる。そして、ニードルシースは、経直腸ニードル刺しのためのニードルガイドとして機能するが、経会陰バイオプシのためのニードルガイドとしても機能する。前述のように、ニードルシースはTRUSプローブに機械的に固定されているため、6自由度のセンサで追跡する必要はない。ニードルの挿入深さを判別する1-DOFセンサで十分であり、ニードルシースをTRUSプローブに固定し、ニードルをTRUSプローブのインソネーション平面に維持するクリップに、取り付けることができる。
バイオプシ器具のトリガと同時に、サンプリングされたバイオプシコアに自動的に仮想マーキングを行う。
既存の融合バイオプシシステムは、バイオプシコアをサンプリングした後、アシスタントがユーザインタフェース上のボタンをクリックすることを要求することによって、バイオプシコアをマーキングする。つまり、バイオプシ器具が作動し、バイオプシニードルが前進してサンプルを採取した後、ソフトウェアにバイオプシが現行のシステムにて行われたことを伝えるために、ユーザインタフェースのボタンをクリックしなければならないのである。ユーザインタフェースのボタンがクリックされないと、コアはマークされない。コアをマークするためにユーザインタフェースボタンを押すのが遅れると、バイオプシニードルがドリフトしたり、バイオプシニードルの動きに反応して患者が動いたりして、既にサンプリングされたコアのポジションが誤ってマークされてしまう。
図21の左上部分は、Bard Max-Core Disposable Core Biopsy Instrumentに適合するように設計された、6-DOFトラッキングセンサ及びトリガ起動センサ(スイッチ)を有する、バイオプシ器具クリップを示す。図21の右上部分は、Bard Max-Core Disposable Core Biopsy Instrument上の所定の位置にあるバイオプシ器具クリップを示す。図21の中央左部分は、BK Medical Prostate Triplane 8818超音波プローブに適合するように設計された6-DOFトラッキングセンサを伴うTRUSプローブクリップを示す。図21の中央右部分は、BK Medical Prostate Triplane 8818超音波プローブの所定の位置にあるトラッキングセンサ付きTRUSプローブクリップを示す。図21の下の部分は、上に示したバイオプシ器具とTRUSプローブ(両方とも3次元的に印刷された追跡クリップ付き)を、sPBxトレーニングの実施に使用されるシミュレータで使用している写真である。 様々な実施形態において、クリップは、クリップを廃棄する前にトラッキングセンサをクリップから取り外した後、使い捨て又は単回使用することができる。その後、高価なセンサを新しい清潔なクリップに挿入して、センサを再利用する。更に別の実施形態では、センサは使い捨てである。
レトロフィットキットの一実施形態では、バイオプシ器具クリップ515(図21参照)は、バイオプシコアがちょうどサンプリングされたことを示す、バイオプシ器具トリガスライドが押された、若しくは活性化された瞬間に、ガイダンスアプリケーション220を実行しているコンピューティングデバイス115に自動的かつ即座に信号を送信するセンサ530又はスイッチを含む。トリガ活性化センサは、バイオプシ器具トリガスライドが前方に押されて器具を発射するときに活性化される、バイオプシ器具クリップ515内の物理的スイッチを含むことができる。トリガスイッチは、スイッチがユーザの指の邪魔にならないように形成された、ハウジング内に配置することができる。言い換えれば、ハウジングの形状は、ユーザが実際にバイオプシ器具トリガを押さずにトリガスイッチを誤って作動させることを防止する。スイッチハウジングは、実際にはサンプリングされていないコアをサンプリングしたと誤ってマーキングすることを防止する。別の実施形態では、バイオプシ器具のトリガスライドは、トリガスイッチを物理的に作動させず、代わりに、トリガボタンセンサがバイオプシ器具の発射の独特の音又は振動を検出する。レトロフィットキットではない更に別の実施形態では、トリガスイッチはバイオプシ器具に内蔵されている。
1-DOFニードルエクスカーションセンサ。
6-DOFセンサは、現在、1-DOFセンサ560よりも高価である。ニードルガイド入口ホールに1-DOFセンサ560を伴う剛性的に取り付けられたニードルガイドを有する追跡型TRUSプローブの実施形態を、図22に示す。この実施形態では、バイオプシニードルはトラッキングセンサを有しておらず、任意の市販のニードルバイオプシ器具を使用することができる。ニードルのポジションは、追跡型TRUSプローブ120に剛性的に取り付けられるニードルガイドと、ニードルがどれだけ1-DOFセンサ560を通過したかを測定する追跡型TRUSプローブ120上の1-DOFセンサ560とを用いて推測され、即ち、ニードルの挿入の深さが測定されて、TRUS画像上にニードル及びニードルの先端をリアルタイムで重ね合わせることができる。1-DOFセンサ560(例えば、回転ポジションセンサ、回転ポテンショメータ、又は光学マウスで使用されるような光学センサ)は、一実施形態(図21)では、TRUSプローブクリップ525に取り付けられており、他の実施形態では、TRUSプローブ120自体に組み込まれ得る。レトロフィットキットの特徴を詳細に説明したが、それらの特徴は、一般に、新しいシステム及びデバイスにも組み込まれることが企図されていることを理解されたい。
ニードルインニードルガイド検出。
バイオプシニードルの位置(例えば、停止線、予測コアなど)に関連するTRUS画像上の認知補助オーバレイは、ニードルがニードルガイド内にあることが知られていない限り、有効にすべきではない。同様に、ガイダンスアプリケーション220は、バイオプシニードルが患者の外部にあった場合、例えばバイオプシ間のハンドリング中に、バイオプシ器具トリガが押されたという信号を無視すべきである。したがって、トラッキングアプリケーション215及び/又はガイダンスアプリケーション220は、通常の取り扱い中に時折発生するように、ニードルがTRUSプローブ120の横又はニードルガイドの近くに保持されるのではなく、ニードルがTRUSプローブのニードルガイドに配置されたときを知る必要がある。バイオプシニードルが柔軟で長く、トラッキングセンサがニードルの先端ではなくバイオプシ器具のハンドルやクリップにある場合、バイオプシニードルが本当にTRUSプローブのニードルガイド内にあるかどうかを判定するのは複雑になる可能性がある。ガイダンスアプリケーション220は、矢状の又は横方向のTRUS画像の特徴分析を用いて、バイオプシニードルがニードルガイド内に挿入されたことを検証することができる。一実施形態では、超音波画像中のニードルを認識するように訓練されたニューラルネットワークを使用して、ニードルがニードルガイドに挿入されたかどうかを自動的に検出する。別の実施形態では、ソフトウェアルーチンは、ニードルが最初に現れるであろうTRUS画像内の領域(すなわち、ニードルガイド出口の隣のTRUS画像の部分)のピクセルを検査することによって、矢状平面又は横方向平面の超音波撮像内のニードルを探すことができる。
外部から取得したターゲットをセンサ空間にインポートして登録する。
前立腺バイオプシは、外部から取得したターゲットをセンサ空間にインポート及び登録する例として使用される。一実施形態では、システム100は、システマティックなテンプレートバイオプシに加えて、ターゲット化されたバイオプシを行うことができる。Mass General社の研究では、MRI/USガイド下融合前立腺バイオプシの後に(テンプレート化された)システマティックバイオプシを行った場合、16%多くのガンが検出され、一つのバイオプシシステムでターゲット化されたバイオプシとシステマティックバイオプシとの両方を実行できることの利点が示された。システム100がsPBxに加えてターゲット化されたPBxを実行できるようにするためのアプローチが記載されている。システム100は、既存の撮像データを有する患者に対して、MRIやCTなどの他の画像スキャンからデータをインポートし、ターゲット(病変やROI)の形状、大きさ、位置、方向などのデータを、前立腺センサ空間の座標系、3次元再構成(例えば、3Dビジュアライゼーションにおいて、3次元の病変やROIを3Dで可視化する)、及び、認知補助(例えば、TRUS画像内の認知補助として、3Dの病変やROIを2Dの断面で表示する)に登録することができる。インポートレーション及びレジストレーションは、3つのステップで達成される。ステップ1は、MRIスキャンにアクセスし、必要に応じて、セグメンテーションがまだ行われていない場合には、前立腺及び/又はターゲットを3Dオブジェクトにセグメンテーション化(前述の粗いセグメンテーションを含む)することを含み得る。セグメンテーション化は、PBx手順の前に行うことがでるが、必須ではない。MRIスキャンから3次元オブジェクトを作成するソフトウェアパッケージもある(InVesalius,ITK-SNAP)。理想的には、ターゲット又はROIだけでなく、前立腺全体を3次元オブジェクトにセグメント化することができる。
ステップ2は、セグメント化されたデータ又はセグメント化されていないデータをソフトウェアの3次元環境、即ち、前立腺センサ空間の座標系にインポートすることを含み得る。ステップ2は、PBx手順の前に実行することもできる。トラッキングトランスミッタでカバーされる追跡ボリュームへの大まかなレジストレーションは、患者のポジション(例えば、左側臥位、リソトミなどのポジション)を予想して行われる。これも必須のステップではないが、望ましい。
ステップ3では、TRUS画像からの前立腺の手動による粗いセグメンテーション化が完了した後、レジストレーションが行われる。インポートされた3D前立腺は、手動の粗いセグメンテーション化から作成される3D前立腺と一致するようにアラインメントされる。これは、インポートされた3Dオブジェクトを6自由度で動かすためのユーザインタフェースを介して、3Dビジュアライゼーションの中で手動で視覚的に行うこともできるし、粗いセグメンテーション化から作成される3D前立腺に対して、インポートされた3D前立腺の位置と方向の最適な適合性を検索するソフトウェアルーチンを介して自動的に行うこともできる。病変やROIを含むインポートされた3Dオブジェクトは、インポートされた3D前立腺と共に移動する。インポートされた前立腺全体が3Dオブジェクトにセグメント化されていない場合は、前立腺全体ではなく、インポートされた画像やTRUSで見える少なくとも3つ以上のランドマークをレジストレーションに使用することができる。例えば、インポートされた前立腺と粗くセグメント化された前立腺の両方の基部と頂部における尿道ポートをマークしてレジストレーションに使用することができ、第3の容易に識別できるランドマーク(おそらく精嚢のエッジ)をレジストレーションに使用することができる。レジストレーションステップの最後に、インポートされたオブジェクトが追加され、前立腺センサ空間に埋め込まれる。インポートされたオブジェクトは、TRUSプローブから追跡される物理的な前立腺に力が加えられたときに、インポートされたオブジェクトが物理的な前立腺と共に動くように、前立腺センサ空間で追跡される。
シミュレーションモードの患者ケアシステム。
新しい技術や機器を使うトレーニングは、往々にして短絡的であり、又は後回しにされがちである。我々の新しい技術を使用するトレーニングを積極的に計画するために、一実施形態では、ケアシステムは、トレーニング目的のために患者の代わりにプラスチック製の解剖学的ブロック及び弾道ゲルを含み得るPBxシミュレータ550と連携する。解剖学的ブロックは、図26に示すように、肛門、直腸、及び/又は前立腺をシミュレートしており、その中にTRUSプローブ120が挿入され、左側方脱腸位(写真460a)及びリソトミ位(写真460b)で方向付けられている。シミュレータ550は、リアルのTRUSプローブ120と、ケアシステムで使用される前立腺トラッキングセンサと同一又は類似のセンサ(NDIモデル90 6-DOF電磁センサ)によって追跡される弾道ゲルで作られた前立腺とを用いて、使用可能なTRUS画像を作成する、合理的に現実的な超音波を発することができる弾道ゲルを含む。システム100は、患者ケアモードと機能的に同一であることを維持しつつ、シミュレーションモードが部屋の反対側から明確に認識できるように、異なるボーダカラー及びフォントを含む、システム100がシミュレーションモードにあることを明確に警告及び表示するための、ユニークで視認性の高いラベルを表示することによって、システム100が患者ケアモードと混同されないように、シミュレーションモードで、実行することができる。
また、安価なダミーのTRUSプローブ120(例えば、実際のTRUSプローブのシェルだけ)を用いて、TRUSプローブクリップで追跡することができる。そして、上述のように、ソフトウェアルーチンによってTRUS画像を生成することができる。シミュレータモードの安価なダミーTRUSプローブ120は、リアルのTRUSマシンの使用及び洗浄に関連するコストを削減し、リアルのTRUSマシンを臨床使用のために解放する。
トレーニング用スタンドアローンシミュレータ。
ケアシステムを使用するトレーニングのための別の実施形態は、患者ケアシステムから独立して動作し、実際のTRUSマシンを必要としないスタンドアローンシミュレータである。トレーニング用のシミュレータ550にも適用可能な本明細書に記載の全ての特徴は、例えば、患者ケアアプリケーションとは異なる、シミュレーション技術のアプリケーション領域において、本明細書に記載の実施形態でも企図される。一つの違いは、前立腺トラッキングセンサが、(例えば、弾道ゲルやシリコンで作られている)前立腺の物理的な3Dモデルに直接埋め込まれていることである。
(ピッチ、ヨー、ロール、挿入深さ、テンプレート修正、ニードル先端の最大エクスカーション、ニードル停止線、テンプレート位置照明、投影されたバイオプシコアなどの)患者ケアのための、上述のトラッキングクリップや認知補助は、シミュレーショントレーニングにも使用できる。2Dのインソネーション平面と仮想3Dオブジェクトとの交点をリアルタイムで計算することにより、合成TRUS画像を生成することができる。また、6自由度の、追跡される有形のユーザインタフェースを使用して、3Dビジュアライゼーションのパースペクティブを作成する仮想カメラのポジションを手動で制御することもできる。シミュレータには、リアルタイムで更新されるスコアリングアルゴリズムが含まれており、テンプレートの偏差を測定し、仮想コアの配置、従前に配置したコアやコアセットを異なる形状、サイズ、及びポジションの、病変のセットで再生し、前立腺バイオプシの偽陰性を計算することができる。シミュレータは、過去の患者のスキャンから他の3D前立腺をインポートすることもできる。
デブリーフィング、アフターアクションレビュー、及びパフォーマンス分析のために、シミュレータは、各コアにおける病変、前立腺組織、及び非前立腺組織(膀胱、尿道、精嚢など)の量又は割合を計算することができる。シミュレータの一実施形態では、トラッキングセンサは、改良されたバイオプシニードルの先端にあり、長くて柔軟なバイオプシニードルの、ニードルの先端をより確実に追跡することができる。物理的に追跡される前立腺は、TRUSプローブ120又はデジタル直腸検査によって圧力が加えられたときに、前立腺が外接的な体積内で動くことができるクレードルの内部に配置される。クレードルは標準的なサイズであり、異なるサイズ及び形状の前立腺を含むクレードルを、前立腺バイオプシ解剖ブロックの対応する標準的なレセプタクルに容易に挿入することができる。シミュレータ550は、図26に示すように、経直腸(エンドファイア、サイドファイア)及び経会陰ニードルバイオプシに使用することができる。
直腸を表す解剖学的ブロックの一つ以上の側面を物理的に除去することにより、TRUSプローブ120が直腸空間にあり、直腸壁を介して前立腺と接触している間、TRUSプローブ120を直接目視することができる。ユーザは、この機能が有用であると感じている。シミュレータ550は、ケアシステムにも使用可能な、トレーニーのための仮想コーチを含むことができる。仮想コーチは、追跡されるTRUSプローブ120、追跡されるバイオプシニードル、及び、定義されたテンプレート又はコアのポジションから、発生するであろう偏差を予測することができる。その予測を利用して、仮想コーチは、トレーニー又は実践的な臨床医に、例えば、TRUSプローブ120のピッチ又はロールを変更するように指導することができる。仮想コーチは、ルールベース(例えば、ピッチニュートラルな技術を教える)でも、機械学習に基づくものでもよい。後者の場合、ニューラルネットワークは、TensorFlowの下で動作するKerasを用いて開発される。
テンプレートの位置からのコアの偏差を予測し、偏差を減らすためのコーチングのために、深層学習ニューラルネットワーク(NNs)ルーチンが開発されている。深層学習NN以外のニューラルネットワークも使用可能である。二つのNN(NNA1、NNA2)は、図26に示すようなPBxシミュレータ550の既存データを使用する。NNAとNNA2の両方は、TensorFlow上で動作するKerasで実装されたフィードフォワード多層パーセプトロン(MLP)である。
NNA1は、発射されようとしている模擬バイオプシコアが、許容可能なテンプレート偏差である5mmの範囲内にあるか範囲外にあるかを予測するバイナリ分類モデルである。バイオプシ偏差、意図されたテンプレートの位置、追跡されるTRUSプローブのピッチ、ヨー、ロール、挿入深さ、及び追跡される前立腺のポジションを含む、3216個の模擬バイオプシコア記録が使用された。訓練/テストの分割は0.2、検証の分割は0.2を用いることができる。つまり、80%のデータでNNを訓練し、残りの20%のデータでNNの予測精度をテストすることができる。レコードは、pandasデータフレームにインポートし、scikit-learnの前処理ライブラリを使用してスケーリングすることができる。テンプレートの偏差は、ターゲット変数として使用できる。TRUSプローブのポジション、追跡される前立腺のポジション、及び意図されたテンプレートの位置のみが与えられた場合、NNA1は、バイオプシコアが良いか(テンプレートの偏差<=5mm)悪いか(テンプレートの偏差>5mm)を、72%の精度で、顕著な遅延なしにリアルタイムで予測することができる。二値分類システムの診断能力を説明するために、受信者動作特性(ROC)曲線とともに、混同行列が生成された。
NNA2は、NNA1と同じ入力を使用し、ターゲットの偏差を3.46mm以内に予測する回帰モデルである。Tensorflow上で動作するKerasを用いたNNはいずれも、Python 3.7.4(Python Software Foundation, Wilmington, DE)とpandas 1.0.1(NumFOCUS, Austin TX)及びscikit-learn 0.22.1(Pedregosa et al)を用いて、実装された。NNの精度は、より多くのトレーニングデータ、追加の入力、及び最適化によって向上させることができる。このようなNNは、シミュレータ550上でのコーチングに使用できるだけでなく、実際の患者をバイオプシする際の臨床使用中にも使用できる。ニューラルネットワークは、他のガイド付き介入をコーチするために訓練されて再利用され得る。
バイオプシコアの端部をマークする。
リアルのバイオプシコアの端部は、剪断された、歪んだ、潰れた、又は欠損した組織を含むことがある。この場合、バイオプシコアの端部は、病理検査のための信頼できる又は有用な組織を含むとは信用できないかもしれない。バイオプシコアの一方又は両方の端部に低品質のゾーンがある場合、ユーザインタフェース上の仮想バイオプシコアの表示された長さに沿って、ユーザが調整可能なハッシュマークを提供することができる。ハッシュマークは、ユーザが調整可能ではなく、コアの両端からxmm、又はコアの(最初にカットされる)先頭エッジでxmm、コアの(最後にカットされる)後続エッジでymmなどの、デフォルト設定を持つこともできる。2つのハッシュマークの間の領域は、バイオプシの良好なゾーン又は使用可能なゾーンの寸法を表す、病理検査に確実に使用できる組織を提供するようにより信頼され得る領域を示す。また、コアの両端ではなく片方だけが疑わしい場合には、コアのハッシュマークを一つだけにすることもできる。また、予測される仮想コア上で、良好な領域を異なる色で示すこともできる。これらのハッシュマークは、3Dビジュアライゼーション、(TRUS画像などの)イメージングデバイスの出力上のオーバレイ、並びに、ユーザインタフェースをフィッティングし、調整し、及びプランニングするバイオプシテンプレートで、見ることができる。コアの中心部は、コアを表す線上に異なる色のハッシュマークで表示することもできる。一般的に、コアの中心部は端部よりも状態が良いため、病変又は病変が疑われる部位に優先的に配置すべきである。例えば、長さ18mmのバイオプシコアの先頭エッジ及び後続エッジの2mmが病理医にとって疑わしい場合、ユーザは、コア配置を計画する際及び治療中に、長さ18mmのバイオプシの代わりに長さ14mmのバイオプシを考慮し得る。
図27を参照すると、本開示の一実施形態によるコンピューティングデバイス115の概略ブロック図が示されている。コンピューティングデバイス115は、例えば、プロセッサとメモリとを有する、少なくとも一つのプロセッサ回路を含み、これらのプロセッサ回路は両方ともローカルインタフェースに結合されている。このため、コンピューティングデバイス115は、例えば、少なくとも一つのサーバコンピュータ、パーソナルコンピューティングデバイスなどのデバイスで、構成され得る。ローカルインタフェースは、例えば、付随するアドレス/制御バス又は理解し得る他のバス構造を有するデータバスで構成され得る。
メモリには、データと、プロセッサによって実行可能な幾つかのコンポーネントとの両方が格納される。更に、オペレーティングシステムがメモリに格納され、プロセッサによって実行可能である。当然ながら、メモリに格納され、プロセッサによって実行可能な他のアプリケーションもある。本明細書で説明する任意のコンポーネントがソフトウェアの形態で実装される場合、例えば、C、C++、C#、オブジェクトC、Java(登録商標)、JavaScript(登録商標)、Perl、PHP、Visual Basic(登録商標)、Python(登録商標)、Ruby、Flash(登録商標)、Unity 3D、若しくは他のプログラミング言語などの、多数のプログラミング言語のいずれかを採用することができる。
多数のソフトウェアコンポーネントがメモリに格納されており、プロセッサによって実行可能である。この点において、「実行可能」という用語は、最終的にプロセッサによって稼働可能な形式のプログラムファイルを意味する。実行可能なプログラムの例としては、例えば、メモリのランダムアクセス部にロードされてプロセッサによって実行され得るフォーマットのマシンコードに翻訳され得るコンパイルされたプログラム、メモリのランダムアクセス部にロードされてプロセッサによって実行され得るオブジェクトコードなどの適切なフォーマットで表現され得るソースコード、又は、他の実行可能なプログラムによって解釈されてメモリのランダムアクセス部にプロセッサによって実行されるべき命令を生成し得るソースコードなどが、挙げられる。実行可能プログラムは、例えば、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、ハードドライブ、ソリッドステートドライブ、USBフラッシュドライブ、メモリカード、コンパクトディスク(CD)やデジタルバーサタイルディスク(DVD)などの光ディスク、フロッピーディスク、磁気テープ、又は他のメモリコンポーネントを含むメモリの任意の部分又はコンポーネントに格納され得る。
本明細書において、メモリは、揮発性及び不揮発性のメモリとデータストレージコンポーネントとの両方を含むものとして定義される。揮発性コンポーネントは、電力の損失時にデータ値を保持しないコンポーネントである。不揮発性コンポーネントは、電力の損失時にデータを保持するコンポーネントである。したがって、メモリは、例えば、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、ハードディスクドライブ、ソリッドステートドライブ、USBフラッシュドライブ、メモリカードリーダを介してアクセスされるメモリカード、関連するフロッピーディスクドライブを介してアクセスされるフロッピーディスク、光ディスクドライブを介してアクセスされる光ディスク、適切なテープドライブを介してアクセスされる磁気テープ、及び/又は、他のメモリコンポーネント、あるいはこれらのメモリコンポーネントの任意の2つ以上の組み合わせで、構成され得る。また、RAMは、例えば、SRAM(Static Random Access Memory)、DRAM(Dynamic Random Access Memory)、MRAM(Magnetic Random Access Memory)等で構成され得る。また、ROMは、例えば、PROM(Programmable Read-Only Memory)、EPROM(Erasable Programmable Read-Only Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)等のメモリデバイスで構成され得る。
また、プロセッサは複数のプロセッサ及び/又は複数のプロセッサコアを、メモリは並列処理回路で動作する複数のメモリを、夫々表し得る。このような場合、ローカルインタフェースは、複数のプロセッサのうちの任意の2つのプロセッサ間、任意のプロセッサと任意のメモリとの間、又は任意の2つのメモリ間などの通信を容易にする適切なネットワークであり得る。ローカルインタフェースは、例えばロードバランシングを行うことを含め、この通信を調整するように設計された追加のシステムで構成され得る。プロセッサは、電気的なものであってもよいし、他の利用可能な構造のものであってもよい。
本明細書に記載の様々なシステムは、上述のように、汎用ハードウェアによって実行されるソフトウェア又はコードで具現化され得るが、代替として、同じものが専用ハードウェア、又はソフトウェア/汎用ハードウェアと専用ハードウェアとの組み合わせで具現化され得る。専用ハードウェアで具現化する場合は、幾つかの技術のいずれか、又は組み合わせを採用する、回路又はステートマシンとして実装され得る。これらの技術には、一つ以上のデータ信号の印加により様々な論理機能を実装するための論理ゲートを有するディスクリート論理回路、適切な論理ゲートを有するASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、又は他のコンポーネントなどが含まれるが、これらに限定されない。
図4、16、及び20のフローチャートは、コンピューティングデバイス115の一部の実装の機能及び動作を示すものである。ソフトウェアで具現化される場合、各ブロックは、指定された論理機能を実装するためのプログラム命令を構成するコードのセグメント又は部分を表し得る。プログラム命令は、プログラミング言語で書かれた人間が読めるステートメントからなるソースコードの形で、又は、コンピュータシステムや他のシステムでのプロセッサなどの適切な実行システムによって認識可能な数値命令からなるマシンコードの形で、具現化され得る。マシンコードは、ソースコードなどから変換されたものでもよい。ハードウェアで具現化する場合、各ブロックは、指定された論理機能を実装するための回路又は相互接続された複数の回路を表し得る。
図4、16、及び20のフローチャートは、特定の実行順序を示しているが、当然ながら、実行順序は描かれているものとは異なる場合があり得る。例えば、二つ以上のブロックの実行順序は、示された順序に対してスクランブルされてもよい。また、図4、16、20に連続して示されている二つ以上のブロックは、同時に実行されてもよいし、部分的に一致して実行されてもよい。さらに、幾つかの実施形態では、図4、16、及び20に示されたブロックのうちの一つ又は複数がスキップ又は省略されてもよい。更に、任意の数のカウンタ、状態変数、警告セマフォ、又はメッセージが、ユーティリティの強化、アカウンティング、パフォーマンス測定、又はトラブルシューティング補助の提供などの目的で、本明細書に記載の論理フローに追加される可能性がある。そのような変形の全ては、本開示の範囲内であることが理解される。
また、ソフトウェア又はコードを構成する本明細書に記載の任意のロジック又はアプリケーションは、例えばコンピュータシステム又は他のシステム内のプロセッサなどの命令実行システムによって又はそれに関連して使用するために、任意の非一時的なコンピュータ可読媒体に具現化することができる。この意味で、ロジックは、例えば、コンピュータ可読媒体からフェッチされ、命令実行システムによって実行され得る命令及び宣言を含むステートメントで構成され得る。本開示の文脈では、「コンピュータ可読媒体」は、命令実行システムによって又はそれに関連して使用するために、本明細書に記載のロジック又はアプリケーションを含み、保存し、又は維持することができる任意の媒体であり得る。
コンピュータ可読媒体は、例えば、磁気媒体、光学媒体、又は半導体媒体などの多くの物理媒体のいずれか一つで構成することができる。適切なコンピュータ可読媒体のより具体的な例としては、磁気テープ、磁気フロッピーディスク、磁気ハードドライブ、メモリカード、ソリッドステートドライブ、USBフラッシュドライブ、又は光ディスクが挙げられるが、これらに限定されない。また、コンピュータ可読媒体は、例えば、スタティックランダムアクセスメモリ(SRAM)やダイナミックランダムアクセスメモリ(DRAM)を含むランダムアクセスメモリ(RAM)、又は、磁気ランダムアクセスメモリ(MRAM)であってもよい。更に、コンピュータ可読媒体は、読取専用メモリ(ROM)、プログラマブル読取専用メモリ(PROM)、消去可能プログラマブル読取専用メモリ(EPROM)、電気的消去可能プログラマブル読取専用メモリ(EEPROM)、又は他のタイプのメモリデバイスであってもよい。
さらに、本明細書に記載の任意のロジック又はアプリケーションは、様々な方法で実装及び構造化することができる。例えば、記載された一つ以上のアプリケーションは、単一のアプリケーションのモジュール又はコンポーネントとして実装されてもよい。更に、本明細書に記載の一つ又は複数のアプリケーションは、共有の又は別個のコンピューティングデバイス、又はそれらの組み合わせで、実行されてもよい。例えば、本明細書で説明する複数のアプリケーションは、同じコンピューティングデバイス115で実行されてもよいし、同じコンピューティング環境の複数のコンピューティングデバイスで実行されてもよい。さらに、「アプリケーション」、「サービス」、「システム」、「エンジン」などの用語は交換可能であってもよく、限定することを意図していないことを理解されたい。
「X、Y、又はZのうちの少なくとも一つ」というフレーズのような分岐型言語は、特に別段の記載がない限り、項目、用語などがX、Y、又はZのいずれか、あるいはそれらの任意の組み合わせ(例えば、X、Y、及び/又はZ)である可能性があることを提示するために一般的に使用されるものとして、文脈とともに理解される。したがって、そのような分岐型言語は、一般的に、特定の実施形態が、Xの少なくとも一つ、Yの少なくとも一つ、又はZの少なくとも一つが夫々存在することを必要とすることを意図するものではなく、またそのようにすべきではない。
本開示の上述の実施形態は、本開示の原理を明確に理解するために定められた、単なる可能な実施例であることを強調しておく。本開示の精神及び原理から実質的に乖離することなく、上述の実施形態に多くの変形及び変更を加えることができる。そのような変更及び変形の全ては、本開示の範囲内で本明細書に含まれることが意図され、以下のクレームによって保護される。
条項1.非融合型トラッキング及びガイダンスシステムにおいて、身体器官トラッキングセンサと、器官に関連して撮像デバイスを追跡するための、追跡される医療用撮像プローブと、前記器官に関連してバイオプシ又は処置デバイスを追跡するための、追跡されるバイオプシ又は処置デバイスと、内部のメモリに格納されるプログラム命令を含む少なくとも一つのコンピューティングデバイスであって、前記プログラム命令は、実行時には、器官の複数の画像を生成するために、前記追跡される医療用撮像プローブの位置及び方向に関連するガイダンスを提供するステップであって、前記医療用撮像プローブの前記位置及び方向は前記身体器官トラッキングセンサを使用して決定される、提供するステップと、前記複数の画像を用いて、前記器官の3次元再構成を生成するステップと、前記器官の3次元再構成と、前記器官に重ね合わされた少なくとも一つのサンプリング領域からなる仮想テンプレートとを、ディスプレイデバイスに表示させるステップと、及び、前記少なくとも一つのサンプリング領域にて組織を採取するためのガイダンスを提供するステップとを、前記少なくとも一つのコンピューティングデバイスに指示する、コンピューティングデバイスと、を備えるシステム。
条項2.前記複数の画像は複数の2次元超音波画像である、条項1に記載のシステム。
条項3.前記複数の2次元超音波画像のうちの少なくとも一つが、身体センサ空間内の追跡されるツールの3次元ビジュアライゼーションにおいて、前記器官の3次元再構成と同時に前記ディスプレイデバイスに表示される、条項1~2に記載のシステム。
条項4.前記医療用撮像プローブは経直腸超音波プローブであり、前記器官が前立腺を含み、前記組織を収集するためのガイダンスが前立腺バイオプシ手順の間に行われ、及び、前記仮想テンプレートは前立腺バイオプシコアテンプレートを含む、条項1~3に記載のシステム。
条項5.前記器官若しくは身体の一部の3次元再構成は、前記器官を有する患者の身体の外部に配置されるトラッキングセンサを用いて生成される、条項1~4に記載のシステム。
条項6.前記身体器官トラッキングセンサは、6自由度(6-DOF)を有するトラッキングセンサである、条項1~5に記載のシステム。
条項7.前記器官の前記複数の画像を生成するための前記追跡される医療用撮像プローブの位置及び方向に関連する前記ガイダンスが、少なくとも部分的に、前記器官を有する患者に配置されるトラッキングセンサのトラッキングに基づいて提供される、請求項1~6に記載のシステム。
条項8.前記器官又は身体の一部の3次元再構成は、前記器官上で検出された、又は前記器官にインポートされた、病変、又は関心領域の3次元再構成を含む、条項1~7に記載のシステム。
条項9.前記少なくとも一つのコンピューティングデバイスが、コア及びテンプレートの位置及び方向を調整すること、コアの数を調整すること、並びに、カスタムテンプレート内のコアの順序を変更することのうち、少なくとも一つを実行するように更に指示される、条項1~8に記載のシステム。
条項10.前記複数のサンプリング領域の一つ又は各々における組織を収集するためのガイダンスは、撮像モダリティ無しで提供され、前記撮像モダリティは、身体センサ空間における追跡されるツールの実際の3次元ビジュアライゼーションにおける前記器官の3次元再構成を使用して適用される、バイオプシ又は処置の間に、必要とされない、条項1~9に記載のシステム。
条項11.身体器官トラッキングセンサと、追跡される医療用撮像プローブと、器官に関連してバイオプシ若しくは処置デバイスを追跡するための、追跡されるバイオプシ若しくは処置デバイスと、少なくとも一つのコンピューティングデバイスとを提供するステップと、前記器官の複数の画像を生成するために、前記追跡される医療用撮像プローブの位置及び方向に関連するガイダンスを提供するステップであって、前記医療用撮像プローブの位置及び方向は、前記身体器官トラッキングセンサに相対して決定されるステップと、前記複数の画像を用いて、前記器官若しくは身体の一部の3次元再構成を生成するステップと、前記器官若しくは身体の一部の3次元再構成と、前記器官に重ね合わされた一つ又は複数のサンプリング領域からなる仮想テンプレートとを、ディスプレイデバイスに表示させるステップと、並びに、前記複数のサンプリング領域の一つ又は各々において、組織を収集するためのガイダンスを提供するステップと、を含む、方法。
条項12.前記複数の画像は複数の2次元超音波画像である、条項11に記載の方法。
条項13.前記複数の2次元超音波画像のうちの少なくとも一つが、身体センサ空間内の追跡されるツールの3次元ビジュアライゼーションにおいて、前記器官の3次元再構成と同時に前記ディスプレイデバイスに表示される、条項11~12に記載の方法。
条項14.前記医療用撮像プローブが経直腸超音波プローブであり、前記器官は前立腺を含み、前記組織を収集するためのガイダンスは、前立腺バイオプシ手順の間に実行され、及び、前記仮想テンプレートは、前立腺バイオプシコアテンプレートを含む、条項11~13に記載の方法。
条項15.器官又は身体の一部の3次元再構成は、前記器官を有する患者の身体の外部に配置されるトラッキングセンサを用いて生成される、条項11~14に記載の方法。
条項16.前記身体器官トラッキングセンサは、6自由度(6-DOF)を有するトラッキングセンサである、条項11~15に記載の方法。
条項17.前記器官の複数の画像を生成するための前記追跡される医療用撮像プローブの位置及び方向に関連するガイダンスが、少なくとも部分的に、前記器官を有する患者に配置されるトラッキングセンサのトラッキングに基づいて提供される、条項11~16に記載の方法。
条項18.前記器官若しくは身体の一部の3次元再構成は、前記器官上で検出された、又は前記器官にインポートされた、病変、又は関心領域の3次元再構成を含む、条項11~17に記載の方法。
条項19.前記少なくとも一つのコンピューティングデバイスが、コア及びテンプレートの位置及び方向を調整すること、コアの数を調整すること、並びに、カスタムテンプレート内のコアの順序を変更することのうち、少なくとも一つを実行するように更に指示される、条項11~18に記載の方法。
条項20.前記複数のサンプリング領域の1つ又は各々における組織を収集するためのガイダンスが、撮像モダリティ無しで提供され、前記撮像モダリティは、身体センサ空間における追跡されるツールの実施の3次元ビジュアライゼーションにおける前記器官の3次元再構成を用いて適用される、バイオプシ又は処置の間に、必要とされない、条項11~19に記載の方法。
条項21.ユーザが、病変や膿瘍などの、追跡される器官やオブジェクトと、ニードル、切除ツール、若しくはバイオプシニードルなどの、少なくとも一つの追跡されるツールとを、リアルの3次元で観察することができるリアルタイムの、リアルの3Dビジュアライゼーショングラフィカルユーザインタフェースを表示するように構成された、コンピューティングデバイス。
条項22.ユーザは、追跡される有形のユーザインタフェースを使用して、前記リアルの3次元ビジュアライゼーションを制御することができる、条項21に記載のコンピューティングデバイス。
条項23.撮像ツールは追跡もされ、前記3Dビジュアライゼーションにおいてリアルタイムで表示される、条項21~22に記載のコンピューティングデバイス。
条項24.前記器官若しくはオブジェクトの近くに配置されるトラッキングセンサを使用して、前記器官若しくはオブジェクトの内部から、又は前記器官の外部から、前記器官若しくはオブジェクトが追跡される、条項21~23に記載のコンピューティングデバイス。
条項25.再構成された、リアルの3次元の器官若しくは(利用可能な場合)それに関連する病変内の、カスタムテンプレートにおける、コア及びテンプレートの位置及び方向、コアの数、コアの順序を調整することを含む、方法。
条項26.レンダリングされた3D身体センサ空間にオーバレイされた認知補助に基づいて、器官若しくは病変などの3次元再構成された生体構造を使用してコアをバイオプシするステップ、又は、身体に処置を施すステップを、含み、リアルの3次元ビジュアライゼーションで示される3Dコア若しくはターゲットを伴う追跡されるニードル若しくはツールを使用して、バイオプシ若しくは処置の間に、撮像モダリティが最早必要とされない、方法。
条項27.バイオプシコアの精度及び実際の位置と方向に関する、リアルタイムのフィードバックを提供するステップを含み、ここで、既にサンプリングされたコアは、3次元ビジュアライゼーションにおいて3次元オブジェクトとして表示され、TRUS画像において3次元コアとインソネーション平面との交点として、オーバレイされる、方法。
条項28.コアセット全体のサンプリングの終了時に、サンプリングされていない所定のボリュームの領域がある場合に、追加のバイオプシコアをサンプリングするためのアラートを生成するステップと、サンプリングされたときにアラートを除去する、追加のコアのための位置及び方向を表示するステップとを、更に含む、条項27に記載の方法。
条項29.精確なツールのアラインメントが検出されるとき、バイオプシ器具、又は類似の若しくは処置デバイスを用いてバイオプシ若しくは処置を自動的にトリガするステップを、更に含む、条項27~28に記載の方法。
条項30.粗いセグメンテーション技術を用いて、リアルの3次元の器官、病変、解剖学的構造、又は他の3次元オブジェクトをリアルタイムで再構成するステップと、前記器官、病変、解剖学的構造、又はランドマークを、患者空間にマッピングするステップと、前記器官若しくは前記病変、若しくは他の解剖学的構造、又はランドマークの、アウトラインをトレースするステップと、処置すべき領域の処置、又はサンプルを収集すべき領域からの組織の収集のための、ガイダンスを提供するステップとを、含む方法。
条項31.器官トラッキングセンサが器官の物理的な複製部分に直接挿入される、明細書に記載の様々な実施形態を使用して、ガイド付き介入を訓練するシミュレータを備える、システム。
条項32.患者を撮像モダリティで撮像可能なゲルを伴う解剖学的ブロックに置き換えることで、患者ケア装置でのトレーニングを容易にするシミュレータモードを有するシミュレータであって、撮像モダリティが超音波検査を含む、シミュレータを備える、患者ケア装置。
条項33.3次元器官及びその周辺の再構成における複数のランドマークを、従前に取得された3次元病変、又は、関心領域及びその周辺における、対応するランドマークと照合することによって、従前に取得された3次元病変、又は、関心領域を3次元器官の再構成にインポートして登録するステップを、含む方法。
条項34.(a)内部に配置される埋め込み型トラッキングシステム、(b)図1のクリップ160aなどの、取り外し自在のトラッキングシステム、又は、(c)560などのセンサ(図22)を介してニードル若しくはツールの挿入の深さを追跡する、TRUSプローブなどの撮像デバイスで使用するためのニードルガイド、を備えるシステム。システムは、ニードルの挿入深さ追跡センサが内蔵された、又は取り外し自在に取り付けられた、ニードルガイドを含み得る。
条項35.(a)身体センサ空間に仮想解剖学的ランドマークを設定するステップと、(b)仮想解剖学的ランドマークが取得されたときに撮像デバイスの位置と方向を保存するステップと、及び(c)前記仮想解剖学的ランドマークが最初に取得された位置と方向に前記撮像デバイスが戻されたときに、前記仮想解剖学的ランドマークを、撮像出力の対応するランドマークと比較するステップと、によって、器官に対する器官トラッキングセンサの滑りや移動を検出する滑り止め検出のシステム又は方法。
条項36.複数の仮想バイオプシコアの長さに沿って、バイオプシコアの良好なゾーン又は使用可能なゾーンの寸法を表す、病理検査に確実に使用できる組織を提供すると信頼されているコアの領域を示す、デフォルト設定のユーザ調整可能なハッシュマークを表示する工程を含む、方法。
条項37.ディスプレイデバイスにおいて器官若しくは身体の一部の少なくとも一つの画像を提供することにより、リアルタイムセグメンテーション技術を実行するステップと、前記ディスプレイデバイスから前記器官、空洞、病変、膿瘍、身体の一部若しくは他の3Dオブジェクトの、アウトラインのトレースのフォームでユーザ入力を受信するステップと、前記アウトラインの前記トレースを3次元患者空間に相関させるステップと、及び、前記器官又は身体の一部に関連する処置のためのガイダンスを提供するステップとを含む、方法。
条項38.処置のためのガイダンスを提供するステップは、複数のコアを含む仮想テンプレートを表示することと、及び、前記コアの追加のものがサンプリングされるべき場所及び方向を示すアラートを生成することと、を含む、条項37に記載の方法。
条項39.バイオプシ器具と、及び、バイオプシ器具クリップとを含み、前記バイオプシ器具クリップは容器若しくはスイッチを含み、前記容器若しくはスイッチは前記バイオプシ器具に相対して配置され、前記バイオプシ器具は、前記バイオプシ器具クリップを使用して前記バイオプシ器具のトリガを検出し、バイオプシコアがサンプリングされたことを示す前記バイオプシ器具トリガスライドが押された又は作動した瞬間に、ガイダンスアプリケーションを実行するコンピューティングデバイスに信号を送信するように、構成されている、システム。
条項40.前記スイッチは、前記バイオプシ器具のトリガスライドが前記バイオプシ器具を発射するために前方に押されたときに作動する、前記バイオプシ器具クリップ内の物理的なスイッチを含む、条項39に記載のシステム。
条項41.前記トリガスイッチは、発射中に前記スイッチがオペレータの指に干渉しないような形状のハウジングに配置される、条項39~41に記載のシステム。
条項42.経直腸超音波プローブなどの、処置若しくはバイオプシツールに取り付けられ、前記ツールの方向の表示を提供する、バブルレベル。
条項43.身体内に導入することができ、(電磁トラッキングのためのコバルトクロムやチタンなど)トラッキングを妨げない材料で作られたツール若しくはニードルを受け取る剛性の高いニードルシースは、シースに取り付けられた6自由度(6-DOF)センサを介してトラッキングされ、導入されたツールやニードルの位置及び方向を推測する。

Claims (20)

  1. 非融合型のトラッキング及びガイダンスシステムにおいて、
    身体器官トラッキングセンサと、
    器官に関連して撮像デバイスを追跡するための、追跡される医療用撮像プローブと、
    器官に関連してバイオプシ若しくは処置デバイスを追跡するための、追跡されるバイオプシ又は処置デバイスと、並びに、
    内部のメモリに格納されたプログラム命令を含む少なくとも一つのコンピューティングデバイスであって、前記プログラム命令は、実行時には、
    器官の複数の画像を生成するために、前記追跡される医療用撮像プローブの位置及び方向に関連するガイダンスを提供するステップであって、前記医療用撮像プローブの前記位置及び方向は前記身体器官トラッキングセンサを使用して決定される、提供するステップと、
    前記複数の画像を用いて、前記器官又はそれに関連する特徴の3次元再構成を生成するステップと、
    前記器官又はそれに関連する特徴の3次元再構成と、前記器官に重ね合わされた少なくとも一つのサンプリング領域からなる仮想テンプレートとを、ディスプレイデバイスに表示させるステップと、及び、
    前記少なくとも一つのサンプリング領域にて組織を収集するためのガイダンスを提供するステップと
    を、前記少なくとも一つのコンピューティングデバイスに指示する、コンピューティングデバイスと
    を含む、システム。
  2. 前記複数の画像は複数の2次元超音波画像である、請求項1に記載のシステム。
  3. 前記複数の2次元超音波画像のうちの少なくとも一つが、身体センサ空間内の追跡されるツールの3次元ビジュアライゼーションにおいて、前記器官の前記3次元再構成と同時に前記ディスプレイデバイスに表示される、請求項2に記載のシステム。
  4. 前記医療用撮像プローブは経直腸超音波プローブであり、
    前記器官が前立腺を含み、前記組織を収集するためのガイダンスが前立腺バイオプシ手順の間に行われ、及び、
    前記仮想テンプレートは前立腺バイオプシコアテンプレートを含む、
    請求項3に記載のシステム。
  5. 前記器官の前記3次元再構成は、前記器官を有する患者の身体の外部に配置されるトラッキングセンサを用いて生成される、請求項1に記載のシステム。
  6. 前記身体器官トラッキングセンサは、6自由度(6-DOF)を有するトラッキングセンサである、請求項1に記載のシステム。
  7. 前記器官の前記複数の画像を生成するための前記追跡される医療用撮像プローブの位置及び方向に関連する前記ガイダンスが、少なくとも部分的に、前記器官を有する患者に配置されるトラッキングセンサのトラッキングに基づいて提供される、請求項1に記載のシステム。
  8. 前記器官の前記3次元再構成は、前記器官にて検出された、又は前記器官にインポートされた、病変、空洞、膿瘍、又は関心領域の、3次元再構成を含む、請求項1に記載のシステム。
  9. 前記少なくとも一つのコンピューティングデバイスが、コア及びテンプレートの位置及び方向を調整すること、コアの数を調整すること、並びに、カスタムテンプレート内のコアの順序を変更することのうち、少なくとも一つを実行するように更に指示される、請求項1に記載のシステム。
  10. 前記複数のサンプリング領域の一つ又は夫々における組織を収集するためのガイダンスが、撮像モダリティなしで提供され、
    前記撮像モダリティは、身体センサ空間における追跡されるツールの実際の3次元ビジュアライゼーションにおける前記器官の前記3次元再構成を使用して適用される、バイオプシ又は処置の間に、必要とされない、
    請求項1に記載のシステム。
  11. 身体器官トラッキングセンサと、追跡される医療用撮像プローブと、器官に関連してバイオプシ若しくは処置デバイスを追跡するための、追跡されるバイオプシ若しくは処置デバイスと、少なくとも一つのコンピューティングデバイスとを提供するステップと、
    前記器官の複数の画像を生成するために、前記追跡される医療用撮像プローブの位置及び方向に関連するガイダンスを提供するステップであって、前記医療用撮像プローブの位置及び方向は、前記身体器官トラッキングセンサに相対して決定される、提供するステップと、
    前記複数の画像を用いて、前記器官又はそれに関連する特徴の3次元再構成を生成するステップと、
    前記器官又はそれに関連する特徴の前記3次元再構成と、前記器官に重ね合わされた一つ若しくは複数のサンプリング若しくは処置領域からなる仮想テンプレートとを、ディスプレイデバイスに表示させるステップと、並びに、
    前記複数のサンプリング若しくは処置領域の一つ又は各々において、組織、流体、若しくは処置を収集するためのガイダンスを提供するステップと
    を含む、方法。
  12. 前記複数の画像は複数の2次元超音波画像である、請求項11に記載の方法。
  13. 前記複数の2次元超音波画像のうちの少なくとも一つが、身体センサ空間内部の追跡されるツールの3次元ビジュアライゼーションにおいて、前記器官の3次元再構成と同時に前記ディスプレイデバイスに表示される、請求項12に記載の方法。
  14. 前記医療用撮像プローブは経直腸超音波プローブであり、
    前記器官は前立腺を含み、前記組織を収集するためのガイダンスは、前立腺バイオプシ手順の間に実行され、及び、
    前記仮想テンプレートは、前立腺バイオプシコアテンプレートを含む、
    請求項13に記載の方法。
  15. 前記器官又は身体の一部の3次元再構成は、前記器官を有する患者の身体の外部に配置されるトラッキングセンサを用いて生成される、請求項11に記載の方法。
  16. 前記身体器官トラッキングセンサは、6自由度(6-DOF)を有するトラッキングセンサである、請求項11に記載の方法。
  17. 前記器官の前記複数の画像を生成するための前記追跡される医療用撮像プローブの位置及び方向に関連する前記ガイダンスが、少なくとも部分的に、前記器官を有する患者に配置されるトラッキングセンサのトラッキングに基づいて提供される、請求項11に記載の方法。
  18. 前記器官又は身体の一部の3次元再構成は、前記器官にて検出された、又は前記器官にインポートされた、病変、空洞、又は関心領域の3次元再構成を含む、請求項11に記載の方法。
  19. 前記少なくとも一つのコンピューティングデバイスが、コア及びテンプレートの位置及び方向を調整すること、コアの数を調整すること、並びに、カスタムテンプレート内のコアの順序を変更することのうち、少なくとも一つを実行するように更に指示される、請求項11に記載の方法。
  20. 前記複数の処置若しくはサンプリング領域の一つ又は各々における組織若しくは流体を処置し若しくは収集するためのガイダンスが、撮像モダリティなしで提供され、
    前記撮像モダリティは、身体センサ空間における追跡されるツールの実際の3次元ビジュアライゼーションにおける前記器官の前記3次元再構成を使用して適用される、バイオプシ又は処置の間に、必要とされない、
    請求項11に記載の方法。
JP2021554731A 2019-03-13 2020-03-13 テンプレート化されターゲット化されたバイオプシと処置のためのガイダンス及びトラッキングシステム Active JP7483271B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962817726P 2019-03-13 2019-03-13
US62/817,726 2019-03-13
PCT/US2020/022713 WO2020186198A1 (en) 2019-03-13 2020-03-13 Guidance and tracking system for templated and targeted biopsy and treatment

Publications (2)

Publication Number Publication Date
JP2022524443A true JP2022524443A (ja) 2022-05-02
JP7483271B2 JP7483271B2 (ja) 2024-05-15

Family

ID=72426815

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021554731A Active JP7483271B2 (ja) 2019-03-13 2020-03-13 テンプレート化されターゲット化されたバイオプシと処置のためのガイダンス及びトラッキングシステム

Country Status (4)

Country Link
US (1) US20220133284A1 (ja)
EP (1) EP3937793A4 (ja)
JP (1) JP7483271B2 (ja)
WO (1) WO2020186198A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6252480B2 (ja) 2011-10-21 2017-12-27 日産化学工業株式会社 酸化重合による共役ポリマーの改善された合成方法および関連する組成物
US11950877B2 (en) * 2019-02-05 2024-04-09 University Of Virginia Patent Foundation System and method for fully automatic LV segmentation of myocardial first-pass perfusion images
US11759166B2 (en) 2019-09-20 2023-09-19 Bard Access Systems, Inc. Automatic vessel detection tools and methods
GB2590674B (en) * 2019-12-23 2022-02-09 Equinor Energy As Core model augmented reality
WO2022020351A1 (en) 2020-07-21 2022-01-27 Bard Access Systems, Inc. System, method and apparatus for magnetic tracking of ultrasound probe and generation of 3d visualization thereof
US11890139B2 (en) 2020-09-03 2024-02-06 Bard Access Systems, Inc. Portable ultrasound systems
EP4203800A1 (en) 2020-09-08 2023-07-05 Bard Access Systems, Inc. Dynamically adjusting ultrasound-imaging systems and methods thereof
WO2022067101A1 (en) 2020-09-25 2022-03-31 Bard Access Systems, Inc. Minimum catheter length tool
US11410341B2 (en) * 2020-11-20 2022-08-09 GE Precision Healthcare LLC System and method for visualizing placement of a medical tube or line
US20220160434A1 (en) * 2020-11-24 2022-05-26 Bard Access Systems, Inc. Ultrasound System with Target and Medical Instrument Awareness
CN114569155A (zh) 2020-12-01 2022-06-03 巴德阿克塞斯系统股份有限公司 超声成像系统和用于通过其获得超声图像的方法
CN115176283A (zh) * 2021-01-28 2022-10-11 博医来股份公司 增强现实定位医学视图
CN114403925A (zh) * 2022-01-21 2022-04-29 山东黄金职业病防治院 一种乳腺癌超声检测系统
US20240164845A1 (en) * 2022-11-23 2024-05-23 GE Precision Healthcare LLC Artificial Intelligence System and Method for Defining and Visualizing Placement of a Catheter in a Patient Coordinate System Together with an Assessment of Typical Complications

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030135115A1 (en) * 1997-11-24 2003-07-17 Burdette Everette C. Method and apparatus for spatial registration and mapping of a biopsy needle during a tissue biopsy
JP2006201092A (ja) * 2005-01-21 2006-08-03 Yaskawa Electric Corp 6自由度移動体の位置・姿勢計測方法および位置・姿勢計測装置
WO2016007717A1 (en) * 2014-07-09 2016-01-14 Neil Glossop Systems, methods, and devices for assisting or performing guided interventional procedures using custom templates
JP2017080501A (ja) * 2014-02-28 2017-05-18 スリーディーバイオプシー,インコーポレーテッド 生検針アクチュエータデバイス

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030220557A1 (en) * 2002-03-01 2003-11-27 Kevin Cleary Image guided liver interventions based on magnetic tracking of internal organ motion
WO2006089426A1 (en) * 2005-02-28 2006-08-31 Robarts Research Institute System and method for performing a biopsy of a target volume and a computing device for planning the same
US8790262B2 (en) * 2007-05-16 2014-07-29 General Electric Company Method for implementing an imaging and navigation system
US9113816B2 (en) * 2008-11-11 2015-08-25 Eigen, Inc. System and method for prostate biopsy
US8556815B2 (en) * 2009-05-20 2013-10-15 Laurent Pelissier Freehand ultrasound imaging systems and methods for guiding fine elongate instruments
US9392960B2 (en) * 2010-06-24 2016-07-19 Uc-Care Ltd. Focused prostate cancer treatment system and method
US20120259210A1 (en) * 2011-04-11 2012-10-11 Harhen Edward P Ultrasound guided positioning of cardiac replacement valves with 3d visualization
US10265137B2 (en) * 2014-07-09 2019-04-23 Neil Glossop Systems, methods, and devices for assisting or performing guided interventional procedures using custom templates

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030135115A1 (en) * 1997-11-24 2003-07-17 Burdette Everette C. Method and apparatus for spatial registration and mapping of a biopsy needle during a tissue biopsy
JP2006201092A (ja) * 2005-01-21 2006-08-03 Yaskawa Electric Corp 6自由度移動体の位置・姿勢計測方法および位置・姿勢計測装置
JP2017080501A (ja) * 2014-02-28 2017-05-18 スリーディーバイオプシー,インコーポレーテッド 生検針アクチュエータデバイス
WO2016007717A1 (en) * 2014-07-09 2016-01-14 Neil Glossop Systems, methods, and devices for assisting or performing guided interventional procedures using custom templates

Also Published As

Publication number Publication date
EP3937793A1 (en) 2022-01-19
JP7483271B2 (ja) 2024-05-15
US20220133284A1 (en) 2022-05-05
WO2020186198A1 (en) 2020-09-17
EP3937793A4 (en) 2022-11-23

Similar Documents

Publication Publication Date Title
JP7483271B2 (ja) テンプレート化されターゲット化されたバイオプシと処置のためのガイダンス及びトラッキングシステム
EP2584990B1 (en) Focused prostate cancer treatment system
US20240248530A1 (en) Using Optical Codes with Augmented Reality Displays
US20240206760A1 (en) System and method for lung visualization using ultrasound
CN106659374B (zh) 在3d导航时提供距离和取向反馈的系统和方法
CN106659373B (zh) 用于在肺内部的工具导航的动态3d肺图谱视图
US9113816B2 (en) System and method for prostate biopsy
US20110009748A1 (en) Transperineal prostate biopsy system and methods
US20140073907A1 (en) System and method for image guided medical procedures
US20230177696A1 (en) Method and system for generating guide information, and computer-readable storage medium
JP5134316B2 (ja) 医用画像診断装置
CN111699515A (zh) 用于成像设备的姿态估计以及用于确定医疗设备相对于目标的位置的系统和方法
WO2011058516A1 (en) Systems & methods for planning and performing percutaneous needle procedures
CN103118596A (zh) 用于使用伪特征进行腹部表面匹配的系统和方法
US20100172559A1 (en) System and method for prostate biopsy
WO2014031531A1 (en) System and method for image guided medical procedures
JP7221190B2 (ja) 最適化されたデバイス対画像の位置合わせのための構造マスキングまたはアンマスキング
JP2020096795A (ja) デバイス対画像レジストレーションアルゴリズムからの結果の可視化及び操作
Adebar et al. Registration of 3D ultrasound through an air–tissue boundary
KR101862133B1 (ko) 바늘 삽입형 중재시술 로봇 장치
KR20210086871A (ko) 의료 영상을 이용하는 중재시술 시스템 및 방법
Shen et al. Transrectal ultrasound image-based real-time augmented reality guidance in robot-assisted laparoscopic rectal surgery: a proof-of-concept study
KR20230013042A (ko) 영상 분석을 통해 병변의 재발을 예측하는 방법
Eppenga et al. Real-time wireless tumor tracking in navigated liver resections: an ex vivo feasibility study
US20240090866A1 (en) System and method for displaying ablation zone progression

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231031

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231031

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20240130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240326

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240416

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240423

R150 Certificate of patent or registration of utility model

Ref document number: 7483271

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150