JP6636535B2 - 自動的な動き検出 - Google Patents

自動的な動き検出 Download PDF

Info

Publication number
JP6636535B2
JP6636535B2 JP2017548943A JP2017548943A JP6636535B2 JP 6636535 B2 JP6636535 B2 JP 6636535B2 JP 2017548943 A JP2017548943 A JP 2017548943A JP 2017548943 A JP2017548943 A JP 2017548943A JP 6636535 B2 JP6636535 B2 JP 6636535B2
Authority
JP
Japan
Prior art keywords
image
fluoroscopic
movement
operating
sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017548943A
Other languages
English (en)
Other versions
JP2018507758A (ja
Inventor
オリビエ ピエール ネムポント
オリビエ ピエール ネムポント
ギヨーム ジュリアン ジョセフ ピザイネ
ギヨーム ジュリアン ジョセフ ピザイネ
ラウル フローレント
ラウル フローレント
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2018507758A publication Critical patent/JP2018507758A/ja
Application granted granted Critical
Publication of JP6636535B2 publication Critical patent/JP6636535B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12Devices for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/48Diagnostic techniques
    • A61B6/486Diagnostic techniques involving generating temporal series of image data
    • A61B6/487Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/504Clinical applications involving diagnosis of blood vessels, e.g. by angiography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/363Use of fiducial points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M25/00Catheters; Hollow probes
    • A61M25/01Introducing, guiding, advancing, emplacing or holding catheters
    • A61M25/09Guide wires
    • A61M2025/09166Guide wires having radio-opaque features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • G06T2207/10121Fluoroscopy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30021Catheter; Guide wire
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular
    • G06T2207/30104Vascular flow; Blood flow; Perfusion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03Recognition of patterns in medical or anatomical images
    • G06V2201/034Recognition of patterns in medical or anatomical images of medical instruments

Description

本発明は、装置が解剖学的構造に対する安定位置であって、解剖学的構造内の安定位置を離れる事象を自動的に検出するための方法及びシステムに関する。言い換えると、本発明は、解剖学的構造に対する装置の動きであって、解剖学的構造内の装置の動きを自動的に検出するための方法及びシステムに関する。さらに、本発明は、対応するコンピュータプログラムに関する。
ガイドワイヤ及び介在装置のナビゲーション並びに精密な位置決めは、退屈で、時間がかかり、関連する血管に対する装置の位置を明確にするために追加的な造影剤バーストを必要とする。診断用脈管造影図の取得及び介入型蛍光透視法の間、散乱に起因して、患者と医療従事者との両方がX線に曝される。介入期間を短くし、位置決め精度を改善するために、ナビゲーションによる支援が望まれる。
したがって、X線ガイダンス下での多くの介入において、3Dロードマッピングが重要である。造影剤の注入なしでは、蛍光透視像内で脈管の解剖学的構造はほぼ視認不能であるので、(静的又は動的に)位置合わせされた3Dロードマップが、装置のナビゲーション、位置決め、又は配備、及び/若しくは、結果の評価などの様々な作業のための視覚的な参照情報を介入者に提供する。
静的な動き補償は、3Dロードマップを位置合わせして、蛍光透視シーケンス全体のための単一の幾何学的変換を導出することを伴うのに対し、動的な動き補償は、シーケンス内の各フレームのための正しい幾何学的変換を導出することを必要とする。
動的な動き補償を達成する2つの手法が存在する。第1のアプローチは、例えば、TAVI処置中の弁の位置決め及び配備の場合における血管と同じ動きをする、脈管の解剖学的構造に関連付けられた解剖学的標識を追跡することである。
第2のアプローチは、脈管の解剖学的構造に接続されており、その結果同様の動きをする装置を追跡することである。装置は、明瞭に視認可能であり、動的な動き補償アルゴリズムのための良い候補となる。
両方のアプローチには次のような欠点がある。
・多くの場合、解剖学的標識は非常に微弱であり、不透過な物体により乱されるので、解剖学的標識を追跡することは非常に困難な作業である。さらに、このような標識を検出及び追跡することは、使用者からの追加的な入力を必要とする。
・血管の内部に介入型装置を固定することはプロトコルの一部であり、せいぜい強制的に実施される。人工装具又はステントが配備される場合には、この装置は、完全に引き戻されることすらあり得る。したがって、装置の固定が解除されることが一般的であり、動き補償の有効性を評価するために検出されなければならない。
さらに、ナビゲーションシステムは、ライブ蛍光透視画像の隣に表示された、又はライブ蛍光透視法画像上に位置合わせされた心臓ロードマップを提供することにより心臓専門医を補助する。理想的には、この心臓ロードマップは、脈管造影中に取得された血管網を表す。
WO2011/039681A1は、血管介入処置のための正確な位置決めのための方法及び医療像形成システムについて説明する。まず、注入された造影剤を使用して、対象の血管領域の少なくとも1つのX線像が取得される。さらに、少なくとも1つの取得された像内で、血管情報データが識別される。次に、少なくとも1つの取得された像の中で、対象の血管領域内における血管の第1の石灰化部位の特徴が検出される。さらに、血管情報データと検出された石灰化部位の特徴とを使用して血管表現が生成される。さらに、対象の血管領域における少なくとも1つの現在の蛍光透視像が取得される。次に、少なくとも1つの現在の蛍光透視像内で、対象の血管領域内の血管の第2の石灰化部位の特徴が検出され、第2の石灰化部位の特徴は、第1の石灰化部位の特徴に一致する。さらに、血管表現が蛍光透視像に位置合わせされ、位置合わせのために石灰化部位の特徴が使用される。次に、血管表現を少なくとも1つの蛍光透視像と組み合わせることにより、複合材料像が生成される。最後に合成像が表示される。
WO2004/034329A2では、心周期及び呼吸周期の抽出を利用すると共に、(充填された状態における)脈管造影像とライブ像との間におけるそれらの周期のマッチングを利用して、心臓ロードマッピングを実現するための基本的な方法が説明される。
本発明は、装置と解剖学的標識との両方の存在を示唆する。特に、装置ベースの動き補償と結び付けられて、完全に自動的な動的な動き補償アプローチを設計することを可能にする解剖学的標識を使用した、自動的な装置の固定解除検出のための方法が提案される。
上述の欠点をなくすか、又は、少なくとも抑制する方法及び装置を提供することが本発明の目的であると理解される。
解剖学的構造部分に対する器具の動きであって、解剖学的構造部分内の器具の動きの指標を提供することが本発明のさらなる目的である。
これは、各独立請求項の各々の主題により達成される。別の実施形態が、各従属請求項において説明される。
全体的に、装置が解剖学的構造に対する安定位置であって、解剖学的構造内の安定位置を離れる事象を自動的に検出するための方法は、蛍光透視像のシーケンスを受信するステップと、蛍光透視像のうちの少なくとも2つの中で装置を検出するステップと、蛍光透視像のシーケンス中で、検出された装置の動き場を決定するステップと、動き場を考慮して蛍光透視像のシーケンスを統合することにより統合された像のシーケンスを生成するステップと、統合された像に基づいて特徴的尺度を決定するステップと、特徴的尺度に基づいて、統合された像の中で標識を識別するステップとを含む。さらに、特徴的尺度の変動に基づいて、装置に対して標識が動いているか否かが判定される。
装置又は装置の対象の構成部分が、手動で、又は、適切な画像処理コンピュータソフトウェアを使用した自動工程により、蛍光透視法像の中で検出されることに留意されたい。このような検出に基づいて、さらに、器具の構成部分を取り囲むエリアが、例えば、入力により手動で規定されるか、又は、事前に決定された工程又はソフトウェアアルゴリズムに従って自動的に規定される。装置の構成部分が手動で検出された後にエリアの規定が自動的に実行されるか、又は、システムが、装置を含む蛍光透視像の中でアスペクトを検出し、例えばそれを強調表示することによって構成部分を推定した後に、エリアが手動で規定されることが理解されよう。
説明される方法のコンテキストにおいて、装置は、治療又は診断を目的とした体内に導入される介入型器具、例えば、脈管構造内へのステントの挿入のためのカテーテルである。このような装置の対象の構成部分は、特に、装置の先端部分、すなわち装置の遠位端部分、例えば、体内への導入のためにステントが収容されるカテーテルの遠位部分である。例えば、器具は、一方では、可撓性又は硬質のカテーテル、又はワイヤ先端、又は電極であり、もう一方では、生検装置、套管又は套管針でもあってもよい。これは、例えば、ステント、閉鎖器(例えば、卵円孔開存閉鎖器)、人工弁などの内部人工装具でもある。
動き場が、所与の像から他の1つの像へのピクセルの動きを与える数学的関数であることが理解されよう。例えば、ピッグテールカテーテルの動き場は、次のフレーム内でのピッグテールの位置を導出するために、現在のフレーム内でのピッグテールの位置からピッグテールをどのように及びどの程度移動させるかを示す。言い換えると、蛍光透視像のシーケンスは、第1の蛍光透視像と第2の蛍光透視像とを含み、動き場の決定は、第1の蛍光透視像の中で検出された位置と第2の蛍光透視像の中で検出された位置との間での、例えば、装置の移動の決定を含む。動き場は、その結果、1つの装置に関する複数のピクセルの移動を含む。説明される方法において、装置に関する少なくとも1つのピクセルの移動が、複数の、すなわち少なくとも2つの蛍光透視像を統合するために考慮される。
特徴的尺度という用語は、像の中で所望の特性をもつ領域を強調表示することを可能にする定量的尺度を表すことにさらに留意されたい。特徴的尺度は、統合された像から計算されるマップであり、ピクセル値が大きいほど、このピクセルが、装置よりも、同じ動きをする構造物に属する可能性が高い。構造物は、特性をもつことで「特徴的」である。本明細書では、この特性は、「装置と同じ動き又は移動をする」ことである。言い換えると、特徴的尺度という用語は、少なくとも1つの特徴的構造物を含むマップを表し、特徴的構造物は標識と呼ばれる。標識、特に石灰化部位といった解剖学的標識が、ピクセル値の高さに基づいて、統合された像の中で決定される。
本発明の目的は、装置の動き場を利用して、微弱すぎて他の手法では検出が不可能なこのような構造物又は標識を強調することである。
本方法の一実施形態によると、蛍光透視像のシーケンスの統合は、時間的な統合である。すなわち、受信された蛍光透視像のシーケンスは、これらの蛍光透視像が生成された時間における順序に従って処理、すなわち、統合される。
3つ以上の統合された像のシーケンスでは、特徴的尺度のシーケンスが生成されるように、新たに受信された統合された像の各々に対して特徴的尺度が新たに決定される。このようなシーケンスでは、1つの特徴的尺度における標識のピクセル値を他の特徴的尺度と比較したときに特徴的尺度が変動する。例えば、標識のピクセル値が1つの特徴的尺度から次の1つの特徴的尺度に増加するときには、装置が標識に対して移動されない可能性が高い。その一方で、標識のピクセル値が1つの特徴的尺度から次の特徴的尺度に減少するときには、標識に対して装置が動いていると推測される。
一実施形態によると、本方法は、少なくとも1つの蛍光透視像上へのロードマップのオーバーレイとして、ロードマップと一緒に蛍光透視像のシーケンスから少なくとも1つの蛍光透視像を可視化するステップをさらに含む。
上述のように装置に対する標識の動き(又は、その逆)が決定されると、ロードマップがマスクされる。
解剖学的標識は、脈管系内の石灰化部位を含むことに留意されたい。その他の例において、標識は、脈管構造内に導入された装置の近傍に既に埋め込まれたステント、又は、他のあらゆる外科インプラント又は整形外科インプラントといった、既に埋め込まれた要素をさらに含んでもよい。
石灰化部位が術前3D CTボリュームから事前区分される場合、石灰化部位は、リアルタイムで2Dシーケンス上に投影される。したがって、石灰化部位の2D形状と外観とが知られており、特徴的尺度を改善するために使用される。
石灰化部位が術前3D CTボリュームから事前区分される場合、2Dシーケンス上へのそれらの射影を使用して、時間的な統合が実行される領域を精緻化する。
特徴的尺度が算出される領域は、まず、他の装置(例えば、人工大動脈弁)を検出及びマスキングすることにより狭められる。
配備中にわたって動的な動き補償を確実なものとするために、固定解除(したがって、失敗)を検出することは、現在の追跡アルゴリズム、例えば、石灰化部位の追跡に対する代替例をもたらす。
本発明の他の一態様によると、装置が解剖学的構造に対する安定位置であって、解剖学的構造内の安定位置を離れる事象を自動的に検出するためのシステムは、概して、蛍光透視像を生成するための装置と、上述の方法に従って蛍光透視法像を処理するための処理装置とを備える。
システムは、少なくとも1つのロードマップを提供するデータベースをさらに備える。
本方法の結果、すなわち、達成される結合された像は、適切な装置に、例えばモニターに表示される。
さらなる一態様によると、装置が解剖学的構造に対する安定位置であって、解剖学的構造内の安定位置を離れる事象を自動的に検出するためのコンピュータプログラムが提供され、コンピュータプログラムは、システムの処理装置において実行されるとき、上述の方法をシステムに実施させる。
したがって、本発明に従った方法は、実質的に自動的に、又は、少なくとも大部分が自動的に実行される。したがって、コンピュータプログラムは、適切なシステムにより生成された少なくとも2つの蛍光透視像を収集して少なくとも一時的に記憶するための命令のセットと、蛍光透視法像に示された装置を識別するための命令のセットと、蛍光透視像内における検出された装置の動き場を決定するための命令のセットと、動き場に基づいて、蛍光透視像を統合するための命令のセットと、統合された像に基づいて、特徴的尺度を決定するための命令のセットと、特徴的尺度に基づいて、統合された像の中で標識を識別するための命令のセットと、特徴的尺度の変動に基づいて、装置に対して標識が動いているか否かを決定するための命令のセットと、を含む。
さらに、コンピュータプログラムは、事前に記録された像情報を含むデータベースからデータをロードするための命令のセットを含むか、又は、ユーザーから情報を入手するための命令のセットを含む。
このようなコンピュータプログラムは、好ましくは、データプロセッサの作業メモリにロードされる。したがって、データプロセッサは本発明の方法を実施するように装備される。さらに、本発明は、コンピュータプログラムが記憶されるCD−ROMなどのコンピュータ可読媒体に関する。しかし、コンピュータプログラムは、ワールドワイドウェブといったネットワークを通じて提示されてもよく、このようなネットワークからデータプロセッサの作業メモリ内にダウンロードされてもよい。
本発明の実施形態が様々な主題との関連において説明されることに注意が必要である。特に、いくつかの実施形態が方法形態の請求項に関連して説明されるのに対し、他の実施形態が装置形態の請求項に関連して説明される。しかし、当業者は、上述の内容と以下の説明とを参照して、他の記載がない限り、一つの形態の主題に属する特徴のあらゆる組み合わせに加えて、異なる主題に関する特徴の間のあらゆる組み合わせも、本出願において開示されるとみなされることを理解されよう。
ここまでに規定される態様、並びに、本発明のさらなる態様、特徴、及び利点は、本明細書において以下で説明される実施形態の例からも導かれ、図にも示される実施形態の例を参照しながら説明されるが、本発明はこれらに限定されない。
本発明に従った方法を示すフローチャートの図である。 本発明に従ったシステムの一例を示す図である。 強調表示された標識を含む蛍光透視法像の一例を示す図である。 脈管造影像の一例を示す図である。 ロードマップを含む蛍光透視像の一例を示す図である。
図1に示すフローチャートは、本発明に従った方法の原理を示す。方法に関連して説明されるステップは主なステップであり、これらの主なステップが、いくつかのサブステップに分化又は分割されてもよいことが理解されよう。さらに、これらの主なステップの間にもサブステップが存在してもよい。したがって、サブステップは、本発明に従った方法の原理の理解のためにそのステップが重要である場合にのみ言及される。
以下で例示としてTAVI処置が検討されるが、その場合、動的な動き補償は、弁の位置決め及び弁の配備時に特に有用である。
TAVI介入を受ける患者は、通常、石灰化大動脈及び/又は冠動脈をもつ。これらの石灰化部位が大動脈基部に十分近ければ、これらの石灰化部位は解剖学的標識として機能する。
診断及び介入計画は診断用脈管造影図に基づく。カテーテルがアクセス地点において脈管系内に挿入された後、カテーテルは、大きな血管に沿って、処置を必要とする脈管構造物まで進められる。造影剤がカテーテルを介して注入され、カテーテル検査室のX線設備が、造影剤で充填されたときの血管を示す脈管造影シーケンスを記録する。診断用脈管造影図の取得は、撮像器形状の変動を伴って反復される。
以下の介入中、部分的又は完全に放射線不透過の可撓性のガイドワイヤが、罹患した脈管構造物(例えば、冠動脈における狭窄、神経血管動脈瘤、又は動静脈奇形)まで進められる。蛍光透視低線量X線観察は、ガイドワイヤを可視化して、ガイドワイヤを進める間、介入者の手と目との協調動作を可能にする。配置されると、ガイドワイヤは、介入型装置(例えば、膨張のためのバルーン及びステントの送達、動脈瘤凝固用取り外し可能コイル)を送達するレールとして機能する。介入型装置の送達及び配備も、蛍光透視法により制御される。
介入者は、大動脈の弁尖上にカテーテルを固定する。入力として、術前3D CTボリュームの中で大動脈基部が区分されていると仮定される(図1に示すステップS1への入力A)。さらに、1つの脈管造影図又は複数の脈管造影図が、対象領域のX線像形成システムにより提供される(図1に示すステップS1への入力B)。
ステップS1において、大動脈基部の3Dロードマップが、以前の脈管造影図に静的に位置合わせされる。次に、介入者は、脈管造影図と同じ形状パラメータを使用して蛍光透視シーケンスを取得し、そのため、3Dロードマップの位置合わせは依然として有効である(図1に示すステップS2への入力C)。
ステップS2において、2D X線シーケンスの中で注入カテーテルの徴候が検出される。すなわち、X線像又はフレームのうちの少なくとも2つの中でカテーテルが識別される。
ステップS3において、現在のフレームに対する移動場又は動き場が得られるように、X線/蛍光透視像のシーケンスの中でカテーテルが追跡される。
ステップS4において、解剖学的標識が現れると想定される領域内で、動き場を使用して、様々な動き(心拍、呼吸…)を補償する。動き補償された領域において、信号の時間的な統合が実行される。その結果、装置と比べて同じ動きをするすべての解剖学的構造が同じ位置にあるので、それらの信号は、時間的な統合により強調される。逆に、時間的な統合は、異なる動きをする物体又は解剖学的構造を混在させるので、それらは不鮮明な領域として現れる。
次に、ステップS5において、統合された領域から特徴的尺度が計算され、高い値は、解剖学的構造が強調されたことを示し、低い値は、解剖学的構造が不鮮明にされたことを示す。
ステップS6において、値が高いか低いかが判定される。高い値(図1に示す経路H)の場合、装置及び解剖学的標識は同じ移動/動き場に従い、このことは、装置が依然として大動脈基部上に固定されていることを意味し、本方法はステップS7に進む。低い値(図1に示す経路L)の場合、少なくとも1つの解剖学的標識が、装置の動きと同一ではない動きをするので、この場合は装置が固定されていないと結論づけられる。この場合、本方法は、ステップS10に進む。
ステップS7において、血管構造自体は放射線不透過ではないので、すなわち、介入中に視認不能であるので、ライブ像内への脈管造影図のオーバーレイ技術(ロードマッピングと呼ばれる)が使用される。同様の撮像器形状を使用して取得された静的な診断用脈管造影図が、ライブ介入型蛍光透視法に隣接して表示される。血管内におけるガイドワイヤ及び装置のナビゲーションのために、静的な脈管造影図及びライブ蛍光透視法の本質的で視覚的な融合が有益である。改善されたコンテキストリッチな可視化は、ナビゲーションにおける重要な支援をもたらす。したがって、血管と介入型装置とが1つの画面に同調して表示されるように、少なくとも前処理された脈管造影図の輪郭が蛍光透視像ストリーム上に位置合わせされる。
ステップS8において、特徴的尺度が表示され、すなわち、装置の近傍における少なくとも1つの標識が示されたマップが表示される。適切な特徴的尺度は、介入者への視覚フィードバックとして機能し、装置が固定されているときの強調された解剖学的構造を示す。また、ステップS8が省略されてもよいことに留意されたい。
ステップS9において、現在処理される蛍光透視フレームが最後のフレームであるか否かが確認される。そうである場合(y)、工程は完了し、そうではない場合(n)、工程は、次のフレーム内で装置を追跡することによりステップS3を繰り返す。
ステップS6において、値が低いと判定された場合、すなわち、固定解除が検出された場合、ステップS10において、3Dロードマップの表示装置がオフに切り替えられ、ステップS11において、視覚的な警告が発令される。
ステップS9と同様に、ステップS12において、現在処理される蛍光透視フレームが最後のフレームであるか否かが確認される。そうである場合(y)、工程は完了し、そうではない場合(n)、工程は、次のフレーム内で装置を追跡することにより、ステップS3を繰り返す。
図2は、本発明に従った例示的なシステムを示し、システムは、器具200のためのコンソール100を含み、器具200は、患者300内に導入される。さらに、器具200の先端部分220が位置する領域の蛍光透視法像が生成されるように、患者に対してX線装置400が配置される。最後に、X線装置400による蛍光透視法像の生成を制御する処理ユニット600と、適切な場合には、器具200の機能を制御するコンソール100とが提供される。
本例では、制御装置100がユニット110をさらに含み、ユニット110により造影剤が送達され、その結果、例えば、脈管造影法像又は一連の脈管造影法像が生成される。その一方で、ユニット110により薬剤が注入される。さらに、コンソール100が装置120を備え、装置120により、例えば、器具200の先端部分220の配向が制御されるか、又は、装置120は、レーザーの適用といった器具の特殊機能、又は、ステントといった人工装具の配置、又は、バルーンを導入及び膨張させることを制御する。また、意図される処置に応じて、コンソール100が3つ以上のユニット又は装置を含むことに留意されたい。
X線装置400は、X線源420とX線放射用検出器440とを含み、X線源420とX線検出器440との両方がCアーム430に配置されて、互いに対する両方の適切な配向を確実なものとする。患者300はテーブル460に配置される。
処理ユニット600は、まず制御装置620を含み、さらにはモニター610を含み、例えば、器具の先端の現在位置に関する情報の出力がモニターに示される。
処理ユニット600は、処理装置又は作業メモリをさらに備え、作業メモリ上で、本発明に従った固定解除検出を実施するコンピュータプログラムが記憶及び/又は実行される。
図3は、一方には、装置の遠位端部分/カテーテル200、本例では特に、カテーテル上の潰れたステントベースの心臓弁を示し、もう一方に、図1に示される方法で解剖学的標識として使用される石灰化部位500を示す蛍光透視法像の一例を示す。
図4は、上行大動脈内の造影剤を使用した黒ずんだエリア510を含む脈管造影法像の一例を示す。このような脈管造影法像に基づいて、黒ずんだエリア510の輪郭としてロードマップ520が生成される。
図5は、上述の方法のステップS1において生成されたロードマップと一緒に蛍光透視像の一例を示す。
本発明が図面及びここまでの説明において詳細に例示及び説明されたが、このような例示及び説明は例示又は一例とみなされ、限定とはみなされず、本発明は、開示される実施形態に限定されない。
開示される実施形態に対する他の変形例が、図面、本開示、及び、付属の請求項を考察することにより、請求項に記載された発明を実施する当業者により理解及び実現される。請求項において、「備える(comprising)」という用語は、他の構成要素もステップも排除せず、「a」又は「an」という不定冠詞は、複数を排除しない。単一のプロセッサ又は他のユニットが、請求項に記載されるいくつかの項目の機能を実現する。
単に、相互に異なる従属請求項に特定の手段が記載されているという事実は、利点を得るためにこれらの測定値の組み合わせが使用され得ないということを示すわけではない。コンピュータプログラムは、他のハードウェアと一緒に、又は他のハードウェアの一部分として供給される光記憶媒体又は固体媒体などの適切な媒体に記憶/分散されてもよいが、インターネット又は他の有線又は無線電気通信システムを介するなどにより、他の形態でも分散されてもよい。請求項における参照符号はいずれも範囲を限定するように解釈されてはならない。
100 コンソール
110 ユニット
120 装置
200 器具
220 器具の先端部分
300 患者
400 X線装置
420 X線源
430 Cアーム
440 X線検出器
460 テーブル
500 標識
510 黒ずんだエリア
520 ロードマップ
600 処理ユニット
610 モニター
620 制御装置

Claims (13)

  1. 体の解剖学的構造内の器具の前記体の解剖学的構造に対する動きを自動的に検出するためのシステムの作動方法であって、
    前記システムの処理装置が、蛍光透視像のシーケンスを受信するステップと、
    前記処理装置が、前記蛍光透視像のうちの少なくとも2つの中で前記器具を検出するステップと、
    前記処理装置が、前記蛍光透視像のシーケンス中で、検出された前記器具の動き場を決定するステップと、
    前記処理装置が、前記動き場を考慮して前記蛍光透視像のシーケンスを統合することにより統合された像のシーケンスを生成するステップと、
    前記処理装置が、前記統合された像に基づいて、像の中で所望の特性をもつ領域を強調表示することを可能にする定量的尺度となる特徴的尺度を決定するステップと、
    前記処理装置が、前記特徴的尺度に基づいて、前記統合された像の中で前記器具と同じ動き又は移動をする構造物を識別するステップと、
    前記処理装置が、前記特徴的尺度の変動に基づいて、前記器具に対して前記解剖学的構造が強調されたか否かを判定することにより、前記体の解剖学的構造に対する前記器具の動きを検出するステップと、を含む、システムの作動方法。
  2. 前記蛍光透視像のシーケンスは、第1の蛍光透視像と第2の蛍光透視像とを含み、前記動き場を決定するステップは、前記第1の蛍光透視像の中で検出された位置と前記第2の蛍光透視像の中で検出された位置との間での前記器具の移動の決定を含み、前記移動は、複数の蛍光透視像を統合するために考慮される、請求項1に記載のシステムの作動方法。
  3. 前記蛍光透視像のシーケンスの統合は、時間的な統合である、請求項1又は2に記載のシステムの作動方法。
  4. 前記特徴的尺度は、統合された像のピクセル値のマップを含み、前記統合された像の中の前記器具と同じ動き又は移動をする構造物は、前記統合された像の各ピクセルのピクセル値の高さに基づいて決定される、請求項1乃至3の何れか一項に記載のシステムの作動方法。
  5. 前記ピクセル値が前記統合された像のシーケンスの中で変動するとき、前記特徴的尺度が変動する、請求項4に記載のシステムの作動方法。
  6. 前記処理装置が、前記蛍光透視像のシーケンスに含まれる少なくとも1つの蛍光透視像にロードマップを重ね合わせて表示して、前記少なくとも1つの蛍光透視像を前記ロードマップと共に可視化するステップをさらに含む、請求項1乃至5の何れか一項に記載のシステムの作動方法。
  7. 前記処理装置が、前記器具に対して前記解剖学的構造が不鮮明にされたと判定されるとき、前記ロードマップの表示をオフにするステップをさらに含む、請求項6に記載のシステムの作動方法。
  8. 前記器具と同じ動き又は移動をする構造物は、脈管系内の石灰化部位を含む、請求項1乃至7の何れか一項に記載のシステムの作動方法。
  9. 前記器具と同じ動き又は移動をする構造物は、既に埋め込まれた要素を含む、請求項1乃至8の何れか一項に記載のシステムの作動方法。
  10. 前記体の解剖学的構造内の前記器具の前記体の解剖学的構造に対する動きを自動的に検出するためのシステムであって、
    前記蛍光透視像を生成するための装置と、
    請求項1乃至9の何れか一項に記載のシステムの作動方法に従って前記蛍光透視像を処理するための処理装置と、を備える、システム。
  11. 前記統合された像を表示するためのモニターをさらに含む、請求項10に記載のシステム。
  12. ロードマップを提供するデータベースをさらに含む、請求項10又は11に記載のシステム。
  13. 前記体の解剖学的構造内の前記器具の前記体の解剖学的構造に対する動きを自動的に検出するためのコンピュータプログラムであって、前記コンピュータプログラムが請求項10に記載のシステムの処理装置において実行されるとき、請求項1に記載のシステムの作動方法を前記システムに実施させる、コンピュータプログラム。
JP2017548943A 2015-03-16 2016-03-02 自動的な動き検出 Active JP6636535B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15305383.0 2015-03-16
EP15305383 2015-03-16
PCT/EP2016/054345 WO2016146380A1 (en) 2015-03-16 2016-03-02 Automatic movement detection

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019085270A Division JP6828083B2 (ja) 2015-03-16 2019-04-26 自動的な動き検出

Publications (2)

Publication Number Publication Date
JP2018507758A JP2018507758A (ja) 2018-03-22
JP6636535B2 true JP6636535B2 (ja) 2020-01-29

Family

ID=52686305

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017548943A Active JP6636535B2 (ja) 2015-03-16 2016-03-02 自動的な動き検出
JP2019085270A Active JP6828083B2 (ja) 2015-03-16 2019-04-26 自動的な動き検出

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2019085270A Active JP6828083B2 (ja) 2015-03-16 2019-04-26 自動的な動き検出

Country Status (5)

Country Link
US (1) US10869642B2 (ja)
EP (1) EP3270786B1 (ja)
JP (2) JP6636535B2 (ja)
CN (1) CN107347249B (ja)
WO (1) WO2016146380A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6636535B2 (ja) * 2015-03-16 2020-01-29 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 自動的な動き検出
JP6486548B2 (ja) 2016-02-26 2019-03-20 富士フイルム株式会社 画像処理装置、撮像装置及び画像処理方法
CN110891490A (zh) * 2017-07-26 2020-03-17 深圳帧观德芯科技有限公司 X射线成像系统及x射线图像跟踪方法
CN107874760B (zh) * 2017-09-27 2020-12-25 中国科学院深圳先进技术研究院 一种医学影像中的导丝追踪方法、装置、设备及存储介质

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2792133B2 (ja) * 1989-08-30 1998-08-27 株式会社島津製作所 画像処理装置
US5253169A (en) * 1991-11-29 1993-10-12 General Electric Company Method and apparatus for reducing x-ray dosage during fluoroscopic examinations
US5274551A (en) * 1991-11-29 1993-12-28 General Electric Company Method and apparatus for real-time navigation assist in interventional radiological procedures
US6320976B1 (en) * 1999-04-01 2001-11-20 Siemens Corporate Research, Inc. Computer-assisted diagnosis method and system for automatically determining diagnostic saliency of digital images
JP4426297B2 (ja) * 2001-11-30 2010-03-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ノイズの多い画像中の構造を強調する医用ビューイングシステム及び方法
DE10247299A1 (de) 2002-10-10 2004-04-22 Philips Intellectual Property & Standards Gmbh Bildverarbeitungseinheit und Verfahren für die Zuordnung von gespeicherten zu aktuellen Aufnahmen
CN100415163C (zh) * 2003-06-16 2008-09-03 皇家飞利浦电子股份有限公司 用于介入放射学的成像系统
DE102004004604B4 (de) * 2004-01-29 2016-12-29 Siemens Healthcare Gmbh Verfahren und Bildgebungssystem zur Kompensation von Patientenbewegungen bei Serienaufnahmen in der medizinischen Bildgebung
CN101242787A (zh) * 2005-08-09 2008-08-13 皇家飞利浦电子股份有限公司 用盲去卷积空间增强具有噪声的图像中的结构的系统和方法
US7826884B2 (en) * 2006-07-31 2010-11-02 Siemens Medical Solutions Usa, Inc. Live fluoroscopic roadmapping including targeted automatic pixel shift for misregistration correction
US7907217B2 (en) * 2006-10-31 2011-03-15 Siemens Medical Solutions Usa, Inc. Systems and methods of subtraction angiography utilizing motion prediction
US8111895B2 (en) * 2006-12-06 2012-02-07 Siemens Medical Solutions Usa, Inc. Locally adaptive image enhancement for digital subtraction X-ray imaging
US7609814B2 (en) * 2008-01-15 2009-10-27 Siemens Medical Solutions Usa, Inc. Adaptive medical image and mask data processing system
TWI535267B (zh) * 2008-04-25 2016-05-21 湯姆生特許公司 影像序列的圖像之圖像部位寫碼方法及所用寫碼器和解碼器
JP5523791B2 (ja) * 2008-10-27 2014-06-18 株式会社東芝 X線診断装置および画像処理装置
JP2010115429A (ja) * 2008-11-14 2010-05-27 Toshiba Corp X線診断装置および画像処理装置
CN102573632B (zh) * 2009-09-29 2015-06-17 皇家飞利浦电子股份有限公司 脉管路线图绘制
EP2482727B1 (en) 2009-09-29 2013-01-23 Koninklijke Philips Electronics N.V. Live registration for vessel treatment
US9189851B2 (en) 2010-01-07 2015-11-17 Siemens Aktiengesellschaft Method of motion compensation for trans-catheter aortic valve implantation
US8565859B2 (en) * 2010-06-29 2013-10-22 Siemens Aktiengesellschaft Method and system for image based device tracking for co-registration of angiography and intravascular ultrasound images
US8712177B2 (en) * 2011-01-25 2014-04-29 Siemens Aktiengesellschaft Motion compensated overlay
EP2685900B1 (en) * 2011-03-15 2022-12-21 Koninklijke Philips N.V. Medical imaging device for providing an image representation supporting in positioning an intervention device
US8600538B2 (en) * 2011-04-11 2013-12-03 Disney Enterprises, Inc. System and method for producing three-dimensional multi-layer objects from digital models
US9186087B2 (en) 2011-04-13 2015-11-17 Siemens Aktiengesellschaft Combined cardiac and respiratory motion compensation for atrial fibrillation ablation procedures
US8891009B2 (en) * 2011-08-29 2014-11-18 Futurewei Technologies, Inc. System and method for retargeting video sequences
WO2013165565A1 (en) * 2012-04-30 2013-11-07 Nikon Corporation Method of detecting a main subject in an image
US9082158B2 (en) * 2012-09-19 2015-07-14 Siemens Aktiengesellschaft Method and system for real time stent enhancement on live 2D fluoroscopic scene
US9259200B2 (en) * 2012-10-18 2016-02-16 Siemens Aktiengesellschaft Method and system for obtaining a sequence of x-ray images using a reduced dose of ionizing radiation
US9147255B1 (en) * 2013-03-14 2015-09-29 Hrl Laboratories, Llc Rapid object detection by combining structural information from image segmentation with bio-inspired attentional mechanisms
JP6636535B2 (ja) * 2015-03-16 2020-01-29 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 自動的な動き検出

Also Published As

Publication number Publication date
JP2018507758A (ja) 2018-03-22
CN107347249A (zh) 2017-11-14
US20180055462A1 (en) 2018-03-01
JP6828083B2 (ja) 2021-02-10
JP2019162451A (ja) 2019-09-26
US10869642B2 (en) 2020-12-22
CN107347249B (zh) 2021-10-01
EP3270786A1 (en) 2018-01-24
EP3270786B1 (en) 2018-12-19
WO2016146380A1 (en) 2016-09-22

Similar Documents

Publication Publication Date Title
JP5965840B2 (ja) 血管ロードマッピング
US8255037B2 (en) Cardiac roadmapping
US9042628B2 (en) 3D-originated cardiac roadmapping
JP6581598B2 (ja) カテーテルの特定の位置を決定するための装置
US7778685B2 (en) Method and system for positioning a device in a tubular organ
JP6828083B2 (ja) 自動的な動き検出
CN107174263B (zh) 用于采集和处理检查对象的图像数据的方法
US10682112B2 (en) Suppression of independent movements in a series of 2D X-ray fluoroscopy images using a 3D pre-operative volume
KR101703564B1 (ko) 혈관 정보를 포함하는 의료 영상을 디스플레이하는 장치 및 방법
US10478140B2 (en) Nearest available roadmap selection
CN116894865A (zh) 结果数据集的提供

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170915

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20170915

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180319

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180618

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181105

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190426

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190507

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190719

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191016

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191119

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191218

R150 Certificate of patent or registration of utility model

Ref document number: 6636535

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250