JP2017523826A - 患者の肺の複数のctスキャンのための統合された座標システム - Google Patents

患者の肺の複数のctスキャンのための統合された座標システム Download PDF

Info

Publication number
JP2017523826A
JP2017523826A JP2016575497A JP2016575497A JP2017523826A JP 2017523826 A JP2017523826 A JP 2017523826A JP 2016575497 A JP2016575497 A JP 2016575497A JP 2016575497 A JP2016575497 A JP 2016575497A JP 2017523826 A JP2017523826 A JP 2017523826A
Authority
JP
Japan
Prior art keywords
images
model
coordinate
image
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016575497A
Other languages
English (en)
Other versions
JP6514724B2 (ja
Inventor
ベンジャミン グリーンバーグ,
ベンジャミン グリーンバーグ,
Original Assignee
コヴィディエン リミテッド パートナーシップ
コヴィディエン リミテッド パートナーシップ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コヴィディエン リミテッド パートナーシップ, コヴィディエン リミテッド パートナーシップ filed Critical コヴィディエン リミテッド パートナーシップ
Publication of JP2017523826A publication Critical patent/JP2017523826A/ja
Application granted granted Critical
Publication of JP6514724B2 publication Critical patent/JP6514724B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/38Registration of image sequences
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30061Lung
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Architecture (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Geometry (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)

Abstract

CT整列システムは、複数のCT画像を処理する中央処理ユニット(CPU)を含む。CPUは、複数のCT画像から主気管分岐部の場所を決定し、主気管分岐部を原点であるとして設定する。x−座標、y−座標およびz−座標は、複数のCT画像の中の各CT画像における各ピクセルに対して、原点に基づいて計算される。3Dモデルは複数のCT画像から得られ、各CT画像における各ピクセルに対するx−座標、y−座標およびz−座標は、3Dモデルにおいて対応するボクセルと関連させられる。3Dモデルにおける各対応するボクセルに対するx−座標、y−座標およびz−座標は、ボクセル位置データとして格納される。グラフィック処理ユニット(GPU)は、複数のCT画像およびディスプレイに表示されるボクセル位置に基づいて、三次元(3D)モデルを得る。

Description

(関連出願の相互参照)
この出願は、2014年7月2日に出願された米国仮特許出願第62/020,242号の利益および優先権を主張し、その全体の内容が参照により本明細書に援用される。
(1.技術分野)
本開示は、統合された座標システムにおいて、コンピュータ断層撮影(CT)画像を処理して、CT画像の複数の組を整列させるシステムおよび方法に関する。
(2.関連技術の議論)
患者の肺の可視化に関係する可視化技術は、臨床医が患者の肺において診断および/または手術を行うことを助けるように開発されてきた。可視化は、患部の場所を識別するために、特に重要である。さらに、患部を処置するとき、外科手術が正しい位置で行われるように、さらなる強調が患部の特定の位置の識別に対して付与される。
過去には、スキャンされた肺の二次元(2−D)画像が使用されて、可視化を援助した。スキャンされた2−D画像を取得するために、患者は複数のCTスキャンを受ける。しかしながら、各CTスキャンは、スキャンパラメータ、開始点(または複数の開始点)および視野に基づく異なる座標システムを有している。肺における場所を特定する場合、ユーザはZ−軸に沿ってスライス番号を特定し、そして、画像の最上部左隅から(つまり、X−軸上で左から右に、かつ、Y−軸上で上部から底部に)出発して、画像の二次元におけるピクセル座標を特定する。医療におけるデジタル画像化および通信(DICOM)標準規格は、特定のスキャンおよび/または機械に含まれる画像における患者の向きを定義する座標取り決めを有する。
(要旨)
本開示に従ったCT画像を整列させるシステムは、複数のCT画像の組を処理する中央処理ユニット(CPU)を含む。CPUは、CT画像の組における複数のCT画像から主気管分岐部の場所を決定し、主気管分岐部を原点と設定し、複数のCT画像の間の各CT画像における各ピクセルに対するx−座標、y−座標およびz−座標を原点に基づいて計算し、複数のCT画像から3Dモデルを表示し、各ピクセルに対するx−座標、y−座標およびz−座標を3Dモデルにおける各対応するボクセルと関連付け、そして、3Dモデルにおけるそれぞれ対応するボクセルに対するx−座標、y−座標およびz−座標をボクセル位置データとして格納することによって、各CT画像の組を処理する。システムは、また、ボクセル位置データおよび、第一の3Dモデルおよび第二の3Dモデルを表示するディスプレイに基づいて、複数のCT画像の組における各CT画像に組に対する3Dモデルを処理するグラフィック処理ユニット(GPU)も含む。
いくつかの態様において、CPUは複数のCT画像の中において第一のCT画像を決定し、ここで、第一のCT画像は、主気管分岐部を含み、第一のCT画像における各ピクセルに対するz−座標をゼロに設定し、第一のCT画像における各ピクセルに対するx−座標を原点に基づいて決定し、第一のCT画像における各ピクセルに対するy−座標を原点に基づいて決定し、そして、第一のCT画像における各ピクセルに対するz−座標、決定されたx−座標および、決定されたy−座標を第一のピクセル位置データとして格納する。
別の態様において、CPUは、複数のCT画像の中において第二のCT画像を処理し、第一のCT画像と第二のCT画像との間の距離に基づいて、第二のCT画像における各ピクセルに対するz−座標を決定し、第二のCT画像において基準点を設定し、ここで、基準点はz−軸に沿って軸方向に原点と整列させられ、基準点に基づいて、第二のCT画像における各ピクセルに対するx−座標を決定し、基準点に基づいて、第二のCT画像における各ピクセルに対するy−座標を決定し、そして、第二のCT画像における各ピクセルに対する決定されたz−座標、決定されたx−座標および決定されたy−座標を、第二のピクセル位置データとして格納する。
いくつかの態様において、複数のCT画像は、データ格納部から得られる。
別の態様において、ディスプレイは第一の3Dモデルおよび第二の3Dモデルを並べて表示する。さらに、第一の3Dモデルおよび第二の3Dモデルは同期され、それによって、ユーザが第一の3Dモデルと第二の3Dモデルとを同時に操作することを可能にする。
本開示は、CT画像を整列させる、複数のCT画像の組を処理するCPUを含む別のシステムも提供する。主気管分岐部、気管分岐部の右葉および、気管分岐部の左葉の場所をCT画像の組における複数のCT画像から決定し、主気管分岐部、気管分岐部の右葉および気管分岐部の左葉の場所に基づいて基準平面を設定し、主気管分岐部を原点として設定し、複数のCT画像の間の各CT画像における各ピクセルに対するx−座標、y−座標およびz−座標を原点と基準平面とに基づいて計算し、複数のCT画像から3Dモデルを表示し、各CT画像における各ピクセルに対するx−座標、y−座標およびz−座標を3Dモデルにおける各対応するボクセルと関連付け、3Dモデルにおける各対応するボクセルに対するx−座標、y−座標およびz−座標をボクセル位置データとして格納することによって、このCPUは各CT画像の組を処理する。システムは、また、ボクセル位置データ、および第一の3Dモデルおよび第二の3Dモデルを表示するディスプレイに基づいて、複数のCT画像の組における各CT画像の組に対する3Dモデルを処理するGPUも含む。
いくつかの態様において、CPUは複数のCT画像の内のCT画像を処理し、原点からの距離に基づいて、CT画像における各ピクセルに対するz−座標を決定し、CT画像において基準点を設定し、ここで、基準点は基準平面と同一平面にあり、かつ、z−軸に沿って、軸方向に原点と整列させられており、基準点に基づいて、第二のCT画像における各ピクセルに対するx−座標を決定し、基準点に基づいて、第二のCT画像における各ピクセルに対するy−座標を決定し、そして、CT画像における各ピクセルに対する決定されたz−座標、決定されたx−座標および決定されたy−座標を、ピクセル位置データとして格納する。
いくつかの態様において、複数のCT画像は、データ格納部から得られる。
別の態様において、ディスプレイは第一の3Dモデルおよび第二の3Dモデルを並べて表示する。さらに、第一の3Dモデルおよび第二の3Dモデルは同期され、それによって、ユーザが第一の3Dモデルと第二の3Dモデルとを同時に操作することを可能にする。
本開示の任意の上記態様および実施形態は、本開示の範囲から離れることなく、組み合わされることができる。
本開示の様々な態様および特徴が、図面を参照して以下に記述される。それらは、
図1は、本開示の態様に従った、複数のCT画像を整列させるシステムの概略の表現である。 図2は、本開示の態様に従った、患者の透視図であり、CT画像を整列させるために使用される方法を例示している。 図3は、本開示の別の態様に従った、患者の透視図であり、CT画像を整列させるために使用される別の方法を例示している。 図4は、本開示の態様に従って整列させられた、2つのCTスキャンを並べた表示である。
(詳細な説明)
本開示は、統合された座標システムにおける、複数の組のCT画像を整列させるデバイス、システム、および方法に関する。複数の組のCT画像の整列は、電磁ナビゲーション(EMN)システムを用い、そして腫瘍または病変の進行および/または退行を監視するELECTROMAGNETIC NAVIGATION BRONCHOSCOPY(登録商標)(EMB)手順を行うことを計画する経路の必要な構成要素であり得る。
ENB手順は、概して少なくとも2つの段階を含み、それらは、(1)患者の肺の内部または肺に隣接して位置する目標への経路を計画すること、および、(2)計画された経路に沿ってプローブを目標までナビゲートすることである。これらの段階は、概して(1)「計画」および(2)「ナビゲーション」と言われる。ENB手順の計画段階は、共同所有の米国特許出願第13/838,805号、第13/838、997号、および13/839,224号により完全に記載されており、これらはすべて、「Pathway Planning System and Method」と題され、2013年3月15日にBakerによって出願され、それらの全体の内容が参照として本明細書に援用されている。患者の肺は、当業者にはさらに適用可能な画像化の方法が知られているであろうが、例えば、コンピュータ断層撮影(CT)スキャンによって画像化される。画像は、計画の前に、ナビゲーションの前に、および/または、治療の後に撮られ得る。CTスキャンの間にアセンブルされた画像データは、その後、さらなる適用可能な様式が当業者には公知であろうが、例えば、医療におけるデジタル画像化および通信(DICOM)様式に格納され得る。CTスキャン画像データは、計画ソフトウェアアプリケーション(「アプリケーション」)にロードされ、ENB手順の計画段階の間に使用される。
CT整列システムおよび方法の実施形態が添付の図面を参照して記述される。同様な参照番号は、図面の記述を通して同様なまたは同等な要素を参照する。図面に示されているように、およびこの記述に使用されるように、「正のX方向」は、患者の左側から右側への方向であり、「正のY方向」は、患者の前方から後方への方向であり、そして「正のZ方向」は、患者の下方から上方への方向である。
この記述は、「一つの実施形態において」、「複数の実施形態において」、「いくつかの実施形態において」、または、「別の実施形態において」を使用する可能性があり、これらは、本開示に従った、一つ以上の同じまたは異なる実施形態をそれぞれ参照する。
図1を参照すると、CT整列システム100は、本開示の実施形態に従って提供される。異なる時、および/または、異なる装置で撮られたCTスキャンの間の場所を参照するとき、CT整列システム100は、患者の体内における主解剖学的目印に結び付けられた右手直交座標系にCTスキャン画像データを整列し、それによって曖昧さを除去する。CT整列システム100は、解剖学的な場所、例えば、特定の機械または詳細な解剖学の標識化に関係していない肺に連通する容易な方法を可能にする一方で、非常に容易なデータの操作により、患者の一つ以上のCTスキャンを照査し比較することを可能にする。
図1に示されるように、CT整列システム100は、CTスキャン画像データをデータ源102から受け取る。データ源102は、それに記憶された手術前試験の間に得られたCTスキャン画像を有するサーバであり得るか、またはデータ源102はCT画像を実時間で取得することが可能なデバイスであり得る。システム100は、また、中央処理装置(CPU)104、メモリ106、ネットワークインターフェイスカード(NIC)108およびグラフィック処理ユニット(GPU)110を含む。ワークステーション111は、ディスプレイ112、およびユーザがCTスキャン画像データを照査することと、CTスキャン画像データを操作することとを可能にする入力デバイス114を含む。
図1を参照しながら記述される図2は、システム100を使用する患者の体における基準点を使用するCTスキャン画像データを整列させる一つの方法を図示する。図2に示されるように、原点116は、主気管分岐部118の中央に位置されている。CTスキャニング手順の間、個々のCTスキャンのスライス120、120、・・・、120がZ−軸に沿って撮られデータ源102に格納される。CTスキャンスライス120は、メモリ106に格納された、一つ以上のCTスキャンスライスにおける一つ以上のピクセルのx、y、およびz座標を決定するためのアルゴリズムを使用するCPU104に提供される。CTスキャンスライスはXY−平面に平行であるので、各CTスキャンスライスに対するz座標は、原点116を含むCTスキャンスライス120nと、特定のCTスキャンスライスとの間の距離に等しい。特定のCTスキャンスライス内の各ピクセルは、その後、z軸に沿って軸方向に原点116と整列させられる特定のCTスキャンスライス内に基準点122を使用して、x座標およびy座標を与えられる。
統合された座標システムにおける各ボクセルに対するx、y、およびz座標が、次のように決定され得る:
次の入力を仮定する:
n=CTスキャンスライス番号
s=mmにおけるCTスキャンスライス間隔(つまり、スライスの間のz距離)
x=特定のCTスライス上の点のmmにおけるX座標
y=特定のCTスライス上の点のmmにおけるY座標
、x、y=原点116に対する座標;および
、x、y=CTスキャンにおけるピクセルの座標、であり、
CPU104は、統合された座標システムにおける各ボクセルに対して、mmにおける座標(Xup、Yup、Zup)を次のように割り当てる。
up=x−x
up=Y−Y;および
up=np*s−nc*s
CPU104は、メモリ106に格納される3DモデルとするCTスキャンスライス120を表現する。CTスキャンのスライス120、120、・・・、120のそれぞれに対してCPU104によって決定された各ピクセルに対する座標は、3Dモデルにおけるそれぞれの対応するボクセルに関連している。座標は、次いで3Dモデルと共にボクセル位置データとして、メモリ106に格納される。
ユーザによって照査されるとき、3Dモデルを、CTスキャンスライスの異なる組から得られた別の3Dモデルと整列させるボクセル位置データを使用して、GPU110が、3Dモデルを処理する。より具体的には、二つの3Dモデルが処理されかつワークステーション111に付随するディスプレイ112に表示されるか、または、任意の他の適切な方法で表示される。ワークステーション111を使用して、様々な3Dモデルが提示され得、および/または、臨床医によって操作され、目標の識別、および目標にアクセスするために患者の気道を通る適切な経路の選択等を容易にし得る。
図3は、本開示の別の実施形態によるCTスキャン画像データを整列させる別の方法を図示する。図2に示された方法と同様に、原点216は、主気管分岐部の中央に位置している。しかしながら、図3において、XZ平面は3つの解剖学的点;主気管分岐部;右肺上葉気管分岐部;および左肺上葉気管分岐部を使用して定義されている。特定のCTスキャンスライスにおける各ピクセルのx、y、およびz座標を決定するとき、CPUは、基準面として定義されたXZ平面を使用する。具体的には、各ピクセルに対するz−座標は、z/cosαに等しく、ここで、zは、原点216を含むCTスキャンスライスと、ピクセルを含む特定のCTスキャンスライスとの間のXY−面に垂直な直線に沿った距離であり、αは、z−軸とXY平面に垂直な直線との間の原点216における角度である。特定のCTスキャンスライス内の各ピクセルには、その後、XZ平面と同一平面であり、かつ原点216とz−軸に沿って軸方向に整列させられた特定のCTスキャンスライス内の基準点122を使用して、x−座標およびy−座標が与えられる。上で記載された方法と同様に、CPU104はCTスキャンスライスを3Dモデルとし、3Dモデルにおける各ボクセルに対するCTスキャンスライスにおける各ピクセルに対する決定された座標をボクセル位置データとして、関連させ格納させる。GPU110は、ボクセル位置データを使用する3Dモデルを使用して、3Dモデルを、CTスキャンスライスの異なる組から取得された別の3Dモデルと整列させる。
図4は二つの3Dモデルを並べて図示するものである。3Dモデル402および3Dモデル404は、異なる時刻にとられたCT画像から得られ得る。上に記述された方法を用いて、3Dモデル402および3Dモデル404における各ボクセルは、主気管分岐部を原点として用いてx、y、およびz座標を指定され得る。そのように、二つの3Dモデル402、404は、統合された座標システムにおいて整列させ得る。二つの3Dモデルを整列させることは、ユーザが病気の進行または治療の結果(例えば、腫瘍の縮小)を追跡することを可能にする。例えば、腫瘍または病変が、3Dモデル402の場所x、y、zで見つかる場合、同じ座標を用いて、ユーザは容易に3Dモデル404におけるその場所を見つけることができる。これらの3Dモデル402、404の画像は、ユーザがそれらを通して一緒にスクロールできるように、好ましくは同期させられるが、非同期であってもよい。それらはまた、表示を変更することまたは、表示をスクリーンの一方の側に加えることが、他方の側に同じ結果をもたらすという意味で、同期させられてもよい。3Dモデル402、404および腫瘍等についても、測定および分析がなされ得る。そのような測定および分析は、3Dモデル402、404に示され得、腫瘍の進行を詳述する報告が生成され得る。
CT画像の複数の組が使用されて、複数の三次元(3D)モデルを表し得る。上に記述された実施形態を使用して、統合された座標システムにおいて3Dモデルが整列され、そして並べて表示され得る。これらの3Dモデル402、404の画像は、ユーザがそれらを通して一緒にスクロールできるように、好ましくは同期させられるが、非同期であってもよい。それらはまた、表示を変更することまたは、表示をスクリーンの一方に加えることが、他の側に同じことをもたらすという意味で、同期させられてもよい。3Dモデルおよび腫瘍等についても、測定および分析がなされ得る。そのような測定および分析は、3Dモデルに示され得、腫瘍の進行を詳述する報告が生成され得る。
図1に戻ると、CPU104は種々の情報を受け取り、この受け取られた情報を変換して出力を発生する。CPU104は、任意のタイプの計算デバイス、計算回路、またはメモリに格納された一連の命令を実行できる任意のタイプのプロセッサまたは処理回路を含み得る。CPU104は、複数のプロセッサ、および/または、複数の中央処理ユニットを含み得、かつ、マイクロプロセッサ、デジタルシグナルプロセッサ、マイクロコントローラ等の任意のタイプのプロセッサを含み得る。CPU104は、また、一連の命令を実施するデータおよび/またはアルゴリズムを格納するメモリを含む。
本明細書に記載された任意の方法、プログラム、アルゴリズムまたはコードは、プログラム言語またはコンピュータプログラムに変換され得るか、それらで表され得る。「プログラム言語」および「コンピュータプログラム」は、コンピュータへの命令を特定するために使用される任意の言語であり、これらの言語およびそれらの派生語;アセンブラ、ベーシック(Basic)、バッチファイル、BCPL、C、C+、C++、Delphi、フォートラン(Fortran)、Java(登録商標)、Java(登録商標)スクリプト、マシンコード、オペレーティングシステムコマンド言語、Pascal、Perl、PL1、スクリプト言語、Visual Basic、それ自体がプログラムを特定するメタ言語、および、すべての第一、第二、第三、第四および第五世代コンピュータ言語を含む(がそれらに限定はされない)。また、データベースおよび他のデータスキーマが含まれ、任意の他のメタ言語が含まれる。この定義を目的として、解釈され、コンパイルされるか、または、解釈されコンパイルされるアプローチの両方の用途である言語間には区別はされない。この定義の目的として、コンパイルされたプログラムとプログラムのソース版との間に区別はない。従って、プログラム言語が(ソース、コンパイルされたもの、オブジェクト、または、リンクされたもののような)一つ以上の状態で存在し得るであろうプログラムへの参照は、任意のすべてのそのような状態への参照となる。この定義はまた実際の命令およびこれらの命令の意図を含む。
本明細書に記載された方法、プログラム、アルゴリズムまたはコードのいずれも、一つ以上の、マシン読み取り可能な媒体またはメモリ106に含まれ得る。用語「メモリ」は、プロセッサ、コンピュータ、または、デジタル処理デバイス等の機械によって読み取り可能な形式の情報を提供する(例えば、格納する、および/または、伝送する)機構を含み得る。例えば、メモリは、読み取り専用メモリ(ROM)、ランダムアクセスメモリ(RAM)、磁気ディスク記録媒体、光格納媒体、フラッシュメモリデバイス、または、任意の他の揮発性または不揮発性メモリ格納デバイス含み得る。それらに含まれているコードまたは命令は、キャリア波信号、赤外線信号、デジタル信号、および他の同様な信号によって表され得る。
NIC108は、一つ以上のソースへの/からの送信および/または受信データのための、任意の公知の通信方法を利用する
GPU108は、急速にメモリを操作し、変化させて、ディスプレイへの出力を意図されたフレームバッファにおける画像の生成を加速するように設計された、特化された電子回路である。
ENB手順の計画またはナビゲーション段階のいずれにも使用可能な画像およびデータの生成、管理および操作のさらなる態様は、2014年7月2日にBrown他によって出願された、「Real−Time Automatic Registration Feedback」と題される、本出願人が所有する米国仮特許出願第62/020,220号;2014年7月2日にBrown他によって出願された、「Methods for Marking Biopsy Location」と題される、米国仮特許出願第62/020,177号;2014年7月2日にBrown他によって出願された、「System and Method for Navigating Within the Lung」と題される、米国仮特許出願第62/020,240号;2014年7月2日にKehat他によって出願された、「Intelligent Display」と題される、米国仮特許出願第62/020,238号;2014年7月2日にKlein他によって出願された、「Alignment CT」と題される、米国仮特許出願第62/020,245号;2014年7月2日にMerlet他によって出願された、「Algorithm for Fluoroscopic Pose Estimation」と題される、米国仮特許出願第62/020,250号;2014年7月2日にMarkov他によって出願された、「System and Method for Segmentation of Lung」と題される、米国仮特許出願第62/020,261号;2014年7月2日にLachmanovich他によって出願された、「Trachea Marking」と題される、米国仮特許出願第62/020,253号;2014年7月2日にMarkov他によって出願された、「Automatic Detection Of Human Lung Trachea」と題される、米国仮特許出願第62/020,257号;2014年7月2日にMarkov他によって出願された、「Lung and Pleura Segmentation」と題される、米国仮特許出願第62/020,261号;2014年7月2日にLachmanovich他によって出願された、「Cone View−A Method Of Providing Distance And Orientation Feedback While Navigating In 3d」と題される、米国仮特許出願第62/020,258号;および2014年7月2日にWeingarten他によって出願された、「Dynamic 3D Lung Map View for Tool Navigation Inside the Lung」と題される、米国仮特許出願第62/020,262号に、より完全に記述され、それらのすべての全内容が、本明細書に援用される。本明細書に記載された任意のシステムおよび方法は、有線ネットワーク、無線ネットワーク、P−to−P通信プロトコル、DICOM通信プロトコル、送信ライン、取り外し可能格納媒体等を通して、それらの間でデータを移送させ得る。
実施形態が添付の図面を参照して、例示および記述の目的で詳細に記述されてきたが、発明のプロセスおよび装置はそれらに限定されると解釈されるべきではないことが、理解されるべきである。本開示の範囲から離れることなく、様々な修正が前述の実施形態に対してなされ得ることが、当業者にはあきらかであろう。

Claims (11)

  1. CT整列システムであって、該CT整列システムは、
    複数のCT画像の組を処理する中央処理装置(CPU)であって、該CPUは、
    該CT画像の組における複数のCT画像から主気管分岐部の場所を決定することと;
    該主気管分岐部を原点として設定することと;
    該複数のCT画像の中の各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を該原点に基づいて計算することと;
    該複数のCT画像から3Dモデルを得ることと;
    各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を、3Dモデルにおける対応するボクセルと関連付けることと;
    ボクセル位置データとしての各対応する3Dモデルにおけるボクセルに対するx−座標、y−座標およびz−座標を格納することと、
    を含むステップを実施することによって各CT画像の組を処理する中央処理装置(CPU)と;
    該複数のCT画像の組における該CT画像の組のそれぞれに対する該3Dモデルを、該ボクセル位置データに基づいて処理するグラフィック処理ユニット(GPU)と;
    第一の処理されたCT画像の組に対する第一の3Dモデルおよび第二の処理されたCT画像の組に対する第二の3Dモデルを表示するディスプレイと
    を含む、CT整列システム。
  2. 前記CPUは、
    前記複数のCT画像の中の第一のCT画像を決定することであって、こここで、該第一のCT画像は、前記主気管分岐部を含む、ことと;
    前記第一のCT画像における各ピクセルに対するz−座標をゼロに設定することと;
    該第一のCT画像における各ピクセルに対する前記x−座標を、前記原点に基づいて決定することと;
    前記y−座標を、原点に基づいて決定することと;
    該第一のCT画像における各ピクセルに対する該z−座標、前記決定されたx−座標および前記決定されたy−座標を、第一のピクセル位置データとして格納することと、
    を含むステップを実施する、
    請求項1に記載のCT整列システム。
  3. 前記CPUは、
    前記複数のCT画像の中の第二のCT画像を処理することと;
    前記第一のCT画像と該第二のCT画像との間の距離に基づいて、該第二のCT画像において各ピクセルに対するz−座標を決定することと;
    該第二のCT画像における基準点を設定することであって、該基準点はz−軸に沿って軸方向に原点と整列させられている、ことと;
    該第二のCT画像における各ピクセルに対するx−座標を、該基準点に基づいて決定することと;
    該第二のCT画像における各ピクセルに対するy−座標を、該基準点に基づいて決定することと;
    該第二のCT画像における各ピクセルに対する該決定されたz−座標、該決定されたx−座標、および該決定されたy−座標を第二のピクセル位置データとして格納することと、
    を含むステップを実施する、請求項2に記載のCT整列システム。
  4. 前記複数のCT画像は、データ格納部から得られる、請求項1に記載のCT整列システム。
  5. 前記ディスプレイは、前記第一の3Dモデルおよび第二の処理された3Dモデルを並べて表示する、請求項2に記載のCT整列システム。
  6. 前記第一の3Dモデルおよび前記第二の3Dモデルは、同期されており、それによって、ユーザが該第一の3Dモデルおよび該第二の3Dモデルを同時に操作できる、請求項1に記載のCT整列システム。
  7. CT整列システムであって、該CT整列システムは、
    複数のCT画像の組を処理する中央処理ユニット(CPU)であって、該CPUは、
    主気管分岐部、気管分岐部の右葉および、気管分岐部の左葉をCT画像の組における複数のCT画像から決定することと;
    該主気管分岐部、該気管分岐部の右葉および該気管分岐部の左葉の場所に基づいて基準面を設定することと;
    主気管分岐部を原点であると設定することと;
    該複数のCT画像の中の各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を該原点および該基準面に基づいて計算することと;
    該複数のCT画像から3Dモデルを得ることと;
    各CT画像における各ピクセルに対する、該x−座標、該y−座標および該z−座標を対応する、3Dモデルにおけるボクセルと関連付けることと;
    ボクセル位置データとしての各対応する3Dモデルにおけるピクセルに対する該x−座標、該y−座標および該z−座標を格納することと、
    を含むステップを実施することによって各CT画像の組を処理する中央処理装置(CPU)と;
    該複数のCT画像の組における該CT画像の組のそれぞれに対する該3Dモデルを、該ボクセル位置データに基づいて処理するグラフィック処理ユニット(GPU)と;
    第一の3Dモデルおよび第二の3Dモデルを表示するディスプレイと、
    を含む、
    CT整列システム。
  8. 前記CPUは、
    前記複数のCT画像の中のCT画像を処理することと;
    前記原点からの距離に基づいて、該CT画像において各ピクセルに対するz−座標を決定することと;
    該CT画像における基準点を設定することであって、該基準点は基準面と同一平面にあり、該基準点はz−軸に沿って軸方向に原点と整列させられることと;
    該第二のCT画像における各ピクセルに対する前記x−座標を、基準点に基づいて決定することと;
    該第二のCT画像における各ピクセルに対する前記y−座標を、基準点に基づいて決定することと;
    該CT画像における各ピクセルに対する該決定されたz−座標、該決定されたx−座標および該決定されたy−座標を、ピクセル位置データとして格納することと、
    を含むステップを実施する、
    請求項5に記載のCT整列システム。
  9. 前記複数のCT画像は、データ格納部から得られる、請求項5に記載のCT整列システム。
  10. 前記ディスプレイは、前記第一の3Dモデルおよび前記第二の3Dモデル並べて表示する、請求項7に記載のCT整列システム。
  11. 前記第一の3Dモデルおよび前記第二の3Dモデルは同期させられており、それによって、ユーザが該第一の3Dモデルおよび該第二の3Dモデルを同時に操作することを可能にする、請求項5に記載のCT整列システム。
JP2016575497A 2014-07-02 2015-07-01 患者の肺の複数のctスキャンのための統合された座標システム Expired - Fee Related JP6514724B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462020242P 2014-07-02 2014-07-02
US62/020,242 2014-07-02
PCT/US2015/038737 WO2016004154A1 (en) 2014-07-02 2015-07-01 Unified coordinate system for multiple ct scans of patient lungs

Publications (2)

Publication Number Publication Date
JP2017523826A true JP2017523826A (ja) 2017-08-24
JP6514724B2 JP6514724B2 (ja) 2019-05-15

Family

ID=55017350

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016575497A Expired - Fee Related JP6514724B2 (ja) 2014-07-02 2015-07-01 患者の肺の複数のctスキャンのための統合された座標システム

Country Status (7)

Country Link
US (3) US9727986B2 (ja)
EP (1) EP3164075B1 (ja)
JP (1) JP6514724B2 (ja)
CN (1) CN106659455B (ja)
AU (1) AU2015284153B2 (ja)
CA (1) CA2953691A1 (ja)
WO (1) WO2016004154A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9603668B2 (en) 2014-07-02 2017-03-28 Covidien Lp Dynamic 3D lung map view for tool navigation inside the lung
US9633431B2 (en) 2014-07-02 2017-04-25 Covidien Lp Fluoroscopic pose estimation
US9754367B2 (en) * 2014-07-02 2017-09-05 Covidien Lp Trachea marking
CN106572834B (zh) 2014-07-02 2019-12-03 柯惠有限合伙公司 对准ct
CN106659455B (zh) 2014-07-02 2020-06-05 柯惠有限合伙公司 用于患者肺部的多张ct扫描片的统一坐标系
US11188285B2 (en) 2014-07-02 2021-11-30 Covidien Lp Intelligent display
US20170178266A1 (en) * 2015-12-16 2017-06-22 Sap Se Interactive data visualisation of volume datasets with integrated annotation and collaboration functionality
US10582914B2 (en) 2016-01-15 2020-03-10 Covidien Lp Navigable endobronchial tool to access tissue outside a bronchus
US10939963B2 (en) 2016-09-01 2021-03-09 Covidien Lp Systems and methods for providing proximity awareness to pleural boundaries, vascular structures, and other critical intra-thoracic structures during electromagnetic navigation bronchoscopy
US10543044B2 (en) 2016-09-27 2020-01-28 Covidien Lp Systems and methods for detecting pleural invasion for surgical and interventional planning
US10542953B2 (en) 2016-09-27 2020-01-28 Covidien Lp Fissural assessment and surgical and interventional planning
US11464576B2 (en) 2018-02-09 2022-10-11 Covidien Lp System and method for displaying an alignment CT
CN108742838B (zh) * 2018-03-29 2020-06-16 四川大学华西医院 一种段间标志点量化的肺段模型的制备方法
WO2020068788A1 (en) * 2018-09-24 2020-04-02 K2M, Inc. System and method for isolating anatomical features in computerized tomography data
CN116895368B (zh) * 2023-09-11 2024-03-29 苏州云图健康科技有限公司 一种用于医学影像的三维定位辅助显示方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005124895A (ja) * 2003-10-24 2005-05-19 Hitachi Medical Corp 画像診断支援装置
JP2009112531A (ja) * 2007-11-06 2009-05-28 Toshiba Corp 画像表示装置

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5542915A (en) 1992-08-12 1996-08-06 Vidamed, Inc. Thermal mapping catheter with ultrasound probe
US6122341A (en) * 1992-06-12 2000-09-19 Butler; William E. System for determining target positions in the body observed in CT image data
US5364392A (en) 1993-05-14 1994-11-15 Fidus Medical Technology Corporation Microwave ablation catheter system with impedance matching tuner and method
US6575969B1 (en) 1995-05-04 2003-06-10 Sherwood Services Ag Cool-tip radiofrequency thermosurgery electrode system for tumor ablation
US6689127B1 (en) 1995-08-15 2004-02-10 Rita Medical Systems Multiple antenna ablation apparatus and method with multiple sensor feedback
SE519310C2 (sv) 1997-10-02 2003-02-11 Prostalund Operations Ab Anordning för värmetillförsel
US6427089B1 (en) 1999-02-19 2002-07-30 Edward W. Knowlton Stomach treatment apparatus and method
US7097641B1 (en) 1999-12-09 2006-08-29 Cryocath Technologies Inc. Catheter with cryogenic and heating ablation
US7206462B1 (en) 2000-03-17 2007-04-17 The General Hospital Corporation Method and system for the detection, comparison and volumetric quantification of pulmonary nodules on medical computed tomography scans
US6942661B2 (en) 2000-08-30 2005-09-13 Boston Scientific Scimed, Inc. Fluid cooled apparatus for supporting diagnostic and therapeutic elements in contact with tissue
JP5361103B2 (ja) * 2000-10-24 2013-12-04 株式会社東芝 画像処理装置
ITPI20010006A1 (it) 2001-01-31 2002-07-31 Cnr Consiglio Naz Delle Ricer Antenna interstiziale con choke miniaturizzato per applicazioni di ipertemia a microonde in medicina e chirurgia
US7998062B2 (en) * 2004-03-29 2011-08-16 Superdimension, Ltd. Endoscope structures and techniques for navigating to a target in branched structure
US7123008B1 (en) * 2002-04-19 2006-10-17 Fonar Corporation Positional magnetic resonance imaging
US7379769B2 (en) 2003-09-30 2008-05-27 Sunnybrook Health Sciences Center Hybrid imaging method to monitor medical device delivery and patient support for use in the method
EP1691666B1 (en) * 2003-12-12 2012-05-30 University of Washington Catheterscope 3d guidance and interface system
US20050245920A1 (en) 2004-04-30 2005-11-03 Vitullo Jeffrey M Cell necrosis apparatus with cooled microwave antenna
JP4335817B2 (ja) * 2005-01-07 2009-09-30 ザイオソフト株式会社 関心領域指定方法、関心領域指定プログラム、関心領域指定装置
US20070127791A1 (en) * 2005-11-15 2007-06-07 Sectra Ab Automated synchronization of 3-D medical images, related methods and computer products
US7630531B2 (en) 2006-01-31 2009-12-08 Mevis Medical Solutions, Inc. Enhanced navigational tools for comparing medical images
EP3797721A1 (en) 2006-03-24 2021-03-31 Neuwave Medical, Inc. Transmission line with heat transfer ability
JP5865702B2 (ja) 2008-04-03 2016-02-17 メドトロニック,インク.Medtronic,Inc. 温熱治療のためのシステムおよび方法
CN102365655A (zh) * 2009-06-10 2012-02-29 三菱电机株式会社 图像核对装置以及使用了该图像核对装置的患者定位装置
US8551083B2 (en) 2009-11-17 2013-10-08 Bsd Medical Corporation Microwave coagulation applicator and system
US9993294B2 (en) 2009-11-17 2018-06-12 Perseon Corporation Microwave coagulation applicator and system with fluid injection
CN108714022A (zh) 2010-11-27 2018-10-30 Securus医药集团股份有限公司 消融和温度测量设备
US20120232549A1 (en) 2011-03-09 2012-09-13 Vivant Medical, Inc. Systems for thermal-feedback-controlled rate of fluid flow to fluid-cooled antenna assembly and methods of directing energy to tissue using same
CN103841913B (zh) 2011-04-08 2016-02-24 柯惠有限合伙公司 用于天然或人造管腔的柔性微波导管
US9020229B2 (en) 2011-05-13 2015-04-28 Broncus Medical, Inc. Surgical assistance planning method using lung motion analysis
US9292917B2 (en) * 2011-11-23 2016-03-22 Siemens Aktiengesellschaft Method and system for model-based fusion of computed tomography and non-contrasted C-arm computed tomography
US9044254B2 (en) 2012-08-07 2015-06-02 Covidien Lp Microwave ablation catheter and method of utilizing the same
CN105377177B (zh) * 2013-03-14 2018-08-07 Vida诊断公司 肺减容手术的治疗设计
CN106659455B (zh) 2014-07-02 2020-06-05 柯惠有限合伙公司 用于患者肺部的多张ct扫描片的统一坐标系

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005124895A (ja) * 2003-10-24 2005-05-19 Hitachi Medical Corp 画像診断支援装置
JP2009112531A (ja) * 2007-11-06 2009-05-28 Toshiba Corp 画像表示装置

Also Published As

Publication number Publication date
EP3164075B1 (en) 2021-03-24
CA2953691A1 (en) 2016-01-07
CN106659455A (zh) 2017-05-10
US9727986B2 (en) 2017-08-08
AU2015284153B2 (en) 2019-07-18
US10282873B2 (en) 2019-05-07
US20160005224A1 (en) 2016-01-07
EP3164075A4 (en) 2018-01-24
AU2015284153A1 (en) 2017-01-12
WO2016004154A1 (en) 2016-01-07
US20170330356A1 (en) 2017-11-16
EP3164075A1 (en) 2017-05-10
US20180342089A1 (en) 2018-11-29
US10049471B2 (en) 2018-08-14
CN106659455B (zh) 2020-06-05
JP6514724B2 (ja) 2019-05-15

Similar Documents

Publication Publication Date Title
US10282873B2 (en) Unified coordinate system for multiple CT scans of patient lungs
Wang et al. Video see‐through augmented reality for oral and maxillofacial surgery
US11361439B2 (en) System and method for detecting trachea
US10460441B2 (en) Trachea marking
CN105232152B (zh) 荧光镜位姿估计
Murphy et al. Evaluation of registration methods on thoracic CT: the EMPIRE10 challenge
EP2189942A2 (en) Method and system for registering a medical image
US20130293578A1 (en) Four Dimensional Image Registration Using Dynamical Model For Augmented Reality In Medical Applications
RU2711140C2 (ru) Редактирование медицинских изображений
CN103548054B (zh) 界标的自动投影以产生图像配准中的额外对应
Hachaj et al. Visualization of perfusion abnormalities with GPU-based volume rendering
US11423554B2 (en) Registering a two-dimensional image with a three-dimensional image
Karner et al. Single-shot deep volumetric regression for mobile medical augmented reality
WO2022054541A1 (ja) 画像処理装置、方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180918

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180921

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190408

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190412

R150 Certificate of patent or registration of utility model

Ref document number: 6514724

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees