JP2015504721A - ポジション決定装置 - Google Patents

ポジション決定装置 Download PDF

Info

Publication number
JP2015504721A
JP2015504721A JP2014549605A JP2014549605A JP2015504721A JP 2015504721 A JP2015504721 A JP 2015504721A JP 2014549605 A JP2014549605 A JP 2014549605A JP 2014549605 A JP2014549605 A JP 2014549605A JP 2015504721 A JP2015504721 A JP 2015504721A
Authority
JP
Japan
Prior art keywords
intervention
spatial relationship
determining
instrument
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014549605A
Other languages
English (en)
Other versions
JP6130856B2 (ja
Inventor
ヘンドリキュス ウィルヘルミュス ヘンドリクス,ベルナルデュス
ヘンドリキュス ウィルヘルミュス ヘンドリクス,ベルナルデュス
アフネス ウィルヘルミュス スフメイツ,ハロルト
アフネス ウィルヘルミュス スフメイツ,ハロルト
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2015504721A publication Critical patent/JP2015504721A/ja
Application granted granted Critical
Publication of JP6130856B2 publication Critical patent/JP6130856B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/00234Surgical instruments, devices or methods, e.g. tourniquets for minimally invasive surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/065Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • A61B5/066Superposing sensor position on an image of the patient, e.g. obtained by ultrasound or x-ray imaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2061Tracking techniques using shape-sensors, e.g. fiber shape sensors with Bragg gratings
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Robotics (AREA)
  • Human Computer Interaction (AREA)
  • Gynecology & Obstetrics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Endoscopes (AREA)

Abstract

本発明は、対象(4)内のインターベンション器具(1)のポジションを決定するポジション決定装置(6)に関する。対象の外のインターベンション器具の第2部分(3)のポジションと対象内のインターベンション器具の第1部分(2)のポジションとの間の空間関係は、優先的にX線画像である対象内のインターベンション器具の実画像と、第2部分の提供されるポジションとに基づき、決定される。空間関係が決定されると、対象内のインターベンション器具のポジションは、インターベンション器具が対象内で動かされる間、決定された空間関係と、対象の外の第2部分の決定された実際のポジションとに基づき、必ずしも更なる実画像を取得することなく決定され得る。これは、X線が実画像を取得するために使用される場合に、放射線量の低減を可能にすることができる。

Description

本発明は、対象内のインターベンション器具のポジションを決定するポジション決定装置、ポジション決定方法、及びポジション決定コンピュータプログラムに関する。本発明は更に、インターベンションプロシージャを実行するインターベンションシステム、インターベンション方法、及びインターベンションコンピュータプログラムに関する。
インターベンションプロシージャにおいて、概して、X線透視システムは、患者内のインターベンション器具を示すX線透視画像を生成するために使用される。インターベンション器具のポジション、特に、インターベンション器具の先端のポジションは、その場合に、X線透視画像に基づき決定され、医師がインターベンション器具の決定されて示されたポジションのガイダンス下でインターベンションプロシージャを実行することを可能にするためにディスプレイ上に示される。患者内のインターベンション器具のポジションを決定するためにX線を印加する必要性は、患者及びインターベンションプロシージャを実行する作業者に印加される比較的高い放射線量につながる。
本発明の目的は、対象に印加される放射線量を低減可能な、対象内のインターベンション器具のポジションを決定するポジション決定装置、ポジション決定方法、及びポジション決定コンピュータプログラムを提供することである。本発明の更なる目的は、そのようなポジション決定装置を用いてインターベンションプロシージャを実行するインターベンションシステム、インターベンション方法、及びインターベンションコンピュータプログラムを提供することである。
本発明の第1の態様において、
対象内のインターベンション器具のポジションを決定するポジション決定装置であって、前記インターベンション器具は、前記対象内に挿入される第1部分と、該第1部分が前記対象内に挿入される場合に該対象の外側にある第2部分とを有する、ポジション決定装置において、
前記対象の画像データセットを供給する画像データセット供給部と、
前記インターベンション器具の前記第2部分のポジションを決定する器具ポジション供給部と、
前記対象内の前記インターベンション器具の実画像を供給する実画像供給部と、
前記対象の外の前記第2部分のポジションと、前記対象内の前記第1部分のポジションとの間の空間関係を、前記実画像及び前記第2部分のポジションに基づき決定する空間関係決定部と、
前記第2部分のポジション及び前記第1部分と前記第2部分との間の空間関係に依存して、前記供給された画像データセット内の前記第1部分のポジションを決定するポジション決定部と
を有するポジション決定装置が与えられる。
前記空間関係決定部は、前記対象の外の前記第2部分のポジションと前記対象内の前記第1部分のポジションとの間の空間関係を、前記実画像及び前記第2部分のポジションに基づき決定し、このとき、前記ポジション決定部は、前記第2部分のポジション及び前記第1部分と前記第2部分との間の空間関係に依存して、前記供給された画像データセット内の前記第1部分のポジションを決定するので、一般的に対象へ放射線量を適用することによって生成される前記実画像は、前記空間関係を決定するためのみならず、前記第1部分のポジションを決定するためにも必要とされる。よって、前記空間関係が決定されると、前記インターベンション器具は、前記対象内を移動され得、前記対象内の前記インターベンション器具のポジションは、前記対象の外の前記第2部分の実際のポジション及び前記決定された空間関係に基づき、必ずしも更なる実画像の生成を必要とせずに決定され得る。これは、放射線が対象内のインターベンション器具の実画像を取得するために使用される場合に、対象に印加される放射線量を低減することを可能にする。
前記インターベンション器具は、優先的に、ニードル又はカテーテルである。
前記画像データセットは、優先的に、コンピュータ断層撮影、磁気共鳴、超音波、単光子放出コンピュータ断層撮影、陽電子放出断層撮影等のデータセットのような、3次元画像データセットである。前記画像データセット供給部は、前記画像データセットが予め記憶される記憶部を有することができ、該記憶部から前記画像データセットは供給され得る。前記画像データセット供給部はまた、有線又は無線データ接続を介して前記画像データセットを受信するための及び該受信された画像データセットを供給するための受信部であることができる。前記画像データセット供給部はまた、夫々のイメージングモダリティ自体であることができる。
前記実画像供給部は、優先的に、前記対象内の前記インターベンション器具の実際のX線投影画像を取得するX線撮像部である。前記実画像は、優先的に、2次元のX線透視画像である。
当該ポジション決定装置は、優先的に、前記供給された画像データセット内の前記第1部分の前記決定されたポジションでの前記第1部分の描写を表示する表示部を更に有する。
インターベンションプロシージャにおいて、対象内のインターベンション器具の先端のポジションを知ることは、一般的に重要である。前記決定された空間関係は、従って、優先的に、前記インターベンション器具の前記第2部分における1以上のマークと前記インターベンション器具の先端との間の空間関係を提供する。前記インターベンション器具の前記第2部分における1以上のマークは、前記インターベンション器具の前記第2部分のポジションを供給するために前記器具ポジション供給部によって使用される技術に依存する。例えば、マークは、赤外線光源のような光源であることができ、このとき、前記器具ポジション供給部は、異なる方向においてそれらの光源の少なくとも2つの画像を取得し、それら少なくとも2つの画像において光源を検出し、少なくとも2つの画像における検出された光源のポジションに基づき前記第2部分のポジションを決定することができる。
前記対象は、優先的に、患者のような又は動物のような生物であり、このとき、当該ポジション決定装置は、バイオプシープロシージャ、アブレーションプロシージャ、等の間の生物内の例えばニードル又はカテーテルの先端のポジションを決定するよう適応され得る。
前記供給された画像データセット、前記第2部分の前記決定されたポジション、及び前記対象内の前記インターベンション器具の少なくとも前記第1部分の前記実画像は、優先的に、前記空間関係決定部が前記第1部分と前記第2部分との間の空間関係を決定し且つ前記ポジション決定部が前記供給された画像データセット内の前記第1部分のポジションを決定することを可能にするために、同じ基準座標系に関連付けられるか又は関連付けられ得る。
実施形態において、前記実画像は、透視撮像部である前記実画像供給部によって取得される2次元画像であり、そのポジションはまた、3次元の基準座標系に対して前記器具ポジション供給部によって又は他のポジション決定部によって決定され得、このとき、前記空間関係決定部は、前記2次元画像に基づき前記インターベンション器具の先端の2次元ポジションを決定し、該2次元ポジションを前記3次元の基準座標系内の3次元ポジションに変換する。更に、優先的に、前記器具ポジション供給部はまた、前記3次元の基準座標系に対する前記第2部分のポジションを決定し、このとき、前記空間関係決定部は、前記第1部分及び前記第2部分の決定されたポジションに依存して前記第1部分と前記第2部分との間の空間関係を決定する。
前記空間関係決定部は、前記実画像に基づき前記インターベンション器具の遠位端のポジションを決定するよう、且つ、前記対象の外の前記第2部分の、特に、前記第2部分におけるマーカのポジションと前記第1部分のポジションとの間の空間関係を、前記対象の外の前記第2部分のポジションと前記対象内の前記遠位端の決定されたポジションとの間の空間関係を決定することによって決定するよう適応されることが好ましく、このとき、前記ポジション決定部は、前記第2部分のポジション及び前記遠位端と前記第2部分との間の空間関係に依存して、前記供給された画像データセット内の前記遠位端のポジションを決定するよう適応される。特に、前記実画像供給部は、前記インターベンション器具の前記第1部分の前記遠位端を示す前記対象内の前記インターベンション器具の実際の画像を供給するよう適応され得、このとき、前記空間関係決定部は、前記実画像において前記遠位端を検出することによって、前記対象内の前記遠位端のポジションを決定するよう適応される。これは、前記対象内の前記インターベンション器具の遠位端のポジションを正確に決定することを可能にする。
前記空間関係決定部は、前記遠位端のポジションを検出するために、ユーザが前記実画像において前記遠位端のポジションを示すことを可能にするグラフィカルユーザインターフェースを提供することができ、及び/又は、前記空間関係決定部は、前記実画像において前記遠位端のポジションを検出するために、例えば閾値化に基づく既知のセグメンテーション技術を使用するよう適応され得る。
前記インターベンション器具の前記第1部分は、優先的に、長手状且つ屈曲可能である。実施形態において、それは前記対象内で既知の長さを有し、このとき、前記空間関係決定部は、前記対象内の前記インターベンションの形状、特に、屈曲を検出するよう、且つ、前記対象内の前記検出された形状及び前記対象内の前記既知の長さに依存して前記対象内の前記遠位端のポジションを決定するよう適応される。更に、前記実画像は、前記対象内の前記インターベンション器具の前記第1部分の中間範囲のみを示してよく、このとき、前記空間関係決定部は、前記中間範囲の形状を検出して前記対象内の前記中間範囲の進路を検出するよう、且つ、前記検出された進路を前記対象内の前記既知の長さの終わりへ外挿することによって前記遠位端のポジションを決定するよう適応され得る。これは、たとえ遠位端自体が前記実画像において可視的でないとしても、正確に前記対象内の前記遠位端のポジションを決定することを可能にする。
実施形態において、前記空間関係決定部は、前記対象の外の前記第2部分のポジションと前記対象内の前記第1部分のポジションとの間の空間関係を決定するために光学的形状検知プロシージャを実行するよう適応され、このとき、前記空間関係は、前記対象内の前記第1部分の形状及び前記対象の外の前記第2部分のポジションに基づき決定され、このとき、前記対象内の前記第1部分の形状は、該第1部分の決定された形状が前記実画像で示される前記第1部分の形状に対応すべきであるとの制約の下で光学的形状検知によって決定される。従って、前記実画像は、光学的形状検知プロシージャの精度を改善するために使用され得る。そのような光学的形状検知プロシージャは、国際公開第2011/141829(A1)号で開示されているプロシージャに従って実行され得る。なお、この特許文献は、参照により本願に援用される。
優先的に、前記実画像供給部は、異なる取得方向において取得された少なくとも2つの実画像を供給するよう適応され、このとき、前記空間関係決定部は、前記供給された少なくとも2つの実画像に基づき前記対象内の前記第1部分のポジションを決定するよう適応される。これは、空間関係を決定する、従って、前記対象内の前記第1部分のポジションを決定する、精度を更に高める。
好ましい実施形態において、前記空間関係決定部は、最初に与えられている空間関係を、前記実画像で示される前記対象内の前記第1部分及び前記第2部分のポジションに基づき補正することによって、前記空間関係を決定するよう適応される。実際の空間関係を決定するための、正確に決定された初期空間関係の使用は、空間関係を決定する、従って、前記対象内の前記第1部分のポジションを決定する、精度を更に高めることができる。
前記決定された空間関係は、優先的に、前記インターベンション器具の前記第2部分における1以上のマークと前記第1部分における1以上の位置との間の空間関係を提供する。例えば、空間関係は、前記インターベンション器具の前記第2部分における1以上のマークと前記インターベンション器具の遠位端との間の空間関係であることができる。空間関係を決定するために、前記対象内の前記インターベンション器具の形状及び/又は先端のポジションは前記実画像において検出され得、このとき、このポジション及び/又は形状の情報は、前記対象の外の前記第2部分と、前記対象内の前記第1部分との間の空間関係を決定するために使用され得る。実施形態において、空間関係は、最初に、既知の基準位置に前記インターベンション器具の先端を位置付けることによって、及び前記第2部分における1以上のマークのポジションを決定することによって、与えられる。
前記器具ポジション供給部は、光学又は磁気技術のうちの少なくとも1つによって前記インターベンション器具の前記第2部分のポジションを決定するよう適応されることが更に好ましい。例えば、前記インターベンション器具の前記第2部分のポジションを決定するために、特に、前記インターベンション器具が動かされる間、前記インターベンション器具の前記第2部分を追跡するために、前記器具ポジション供給部は、国際公開第1999/056654(A1)号で開示されている光学的トラッキング方法を使用するよう適応され得る。この特許文献は、参照により本願に援用される。特に、前記インターベンション器具の前記第2部分は、特に、前記インターベンション器具に対して知られているポジションに位置するマーカとして赤外線光源を有することができ、このとき、前記器具ポジション供給部は、赤外線光源を示す画像を生成する少なくとも2つのカメラを有し、それにより生成された画像における赤外線光源のポジションに依存して前記インターベンション器具の前記第2部分のポジションを決定することができる。
本発明の更なる態様において、
インターベンションプロシージャを実行するインターベンションシステムであって、
対象内でインターベンションプロシージャを実行するインターベンション器具と、
前記対象内の前記インターベンション器具のポジションを決定する、請求項1に記載のポジション決定装置と
を有するインターベンションシステムが与えられる。
本発明の更なる態様において、
対象内のインターベンション器具のポジションを決定するポジション決定方法であって、前記インターベンション器具は、前記対象内に挿入される第1部分と、該第1部分が前記対象内に挿入される場合に該対象の外側にある第2部分とを有する、ポジション決定方法において、
画像データセット供給部によって、前記対象の画像データセットを供給するステップと、
器具ポジション供給部によって、前記インターベンション器具の前記第2部分のポジションを決定するステップと、
実画像供給部によって前記対象内の前記インターベンション器具の実画像を供給するステップと、
空間関係決定部によって、前記対象の外の前記第2部分のポジションと、前記対象内の前記第1部分のポジションとの間の空間関係を、前記実画像及び前記第2部分のポジションに基づき決定するステップと、
ポジション決定部によって、前記第2部分のポジション及び前記第1部分と前記第2部分との間の空間関係に依存して前記供給された画像データセット内の前記第1部分のポジションを決定するステップと
を有するポジション決定方法が与えられる。
本発明の更なる態様において、
インターベンションプロシージャを実行するインターベンション方法であって、
インターベンション器具によって、対象内でインターベンションプロシージャを実行するステップと、
ポジション決定装置によって、前記対象内の前記インターベンション器具のポジションを決定する、請求項12に記載のポジション決定方法を実行するステップと
を有するインターベンション方法が与えられる。
本発明の更なる態様において、
対象内のインターベンション器具のポジションを決定するポジション決定コンピュータプログラムであって、
請求項1に記載のポジション決定装置に、当該コンピュータプログラムが前記ポジション決定装置を制御するコンピュータで実行される場合に、請求項12に記載のポジション決定方法のステップを実行させるプログラムコード手段
を有するポジション決定コンピュータプログラムが与えられる。
本発明の更なる態様において、
インターベンションプロシージャを実行するインターベンションコンピュータプログラムであって、
請求項11に記載のインターベンションシステムに、当該コンピュータプログラムが前記インターベンションシステムを制御するコンピュータで実行される場合に、請求項13に記載のインターベンション方法のステップを実行させるプログラムコード手段
を有するインターベンションコンピュータプログラムが与えられる。
請求項1のポジション決定装置、請求項11のインターベンションシステム、請求項12のポジション決定方法、請求項13のインターベンション方法、請求項14のポジション決定コンピュータプログラム、及び請求項15のインターベンションコンピュータプログラムは、特に、従属請求項で定義されるような、同様の及び/又は同じ好ましい実施形態を有する点が理解されるべきである。
本発明の好ましい実施形態はまた、夫々の独立請求項と従属請求項との如何なる組み合わせであってもよい点が理解されるべきである。
本発明のそれら及び他の態様は、以降で記載される実施形態から明らかであり、それらを参照して説明されるであろう。
インターベンションプロシージャを実行するインターベンションシステムの実施形態を概略的に且つ見本となるように示す。 インターベンションプロシージャを実行するインターベンション方法の実施形態を見本となるように図解するフローチャートを示す。
図1は、インターベンションプロシージャを実行するインターベンションシステム20の実施形態を概略的に且つ見本となるように示す。インターベンションシステム20は、台5の上に置かれている患者4内でインターベンションプロシージャを実行するための、本実施形態ではニードルであるインターベンション器具1を有する。インターベンションシステム20は、患者4内のインターベンション器具1のポジションを決定するポジション決定装置6を更に有する。インターベンション器具1は、患者4に挿入される第1部分2と、第1部分2が患者4に挿入される場合に患者4の外にある第2部分3とを有する。
ポジション決定装置6は、患者4の内部の画像データセットを供給する画像データセット供給部7と、インターベンション器具1の第2部分3のポジションを決定する器具ポジション供給部8,9,10と、患者4内のインターベンション器具1の実画像を供給する実画像供給部11とを有する。ポジション決定装置6は、患者4の外の第2部分3のポジションと患者4内の第1部分2との間の空間関係を実画像及び第2部分3のポジションに基づき決定する空間関係決定部15と、第2部分3のポジション及び第1部分2と第2部分3との間の空間関係に依存して、供給された画像データセット内の第1部分2のポジションを決定するポジション決定部16とを更に有する。
実画像供給部11は、インターベンションプロシージャの間、患者4内のインターベンション器具1の実際のX線投影画像を取得するX線撮像部である。この実施形態では、実画像供給部11は、患者4内のインターベンション器具1の実画像を供給する2次元X線透視画像を取得するCアーム型X線透視システムである。それは、インターベンション器具1が配置されている患者4内の部位に向けられるX線21を生成するX線源12を有する。生成されたX線21は患者4を横断し、横断したX線22はX線検出部13によって検出される。X線源12及びX線検出部13は、実画像供給部11が所望の方向において患者4内の所望の部位を示す実画像を供給することを可能にするために、それらが患者4に対して移動、特に、回転され得るように、Cアーム上に取り付けられる。X線源12及びX線検出部13は、透視制御部14によって制御される。
画像データセットは、この実施形態では、3次元のコンピュータ断層撮影画像データセットである3次元画像データセットである。他の実施形態では、画像データセットは、2次元画像データセットであることもできる。更に、画像データセットは、磁気共鳴、超音波、単光子放出コンピュータ断層撮影、陽電子放出断層撮影等の画像データセットのような、他のイメージングモダリティの画像データセットであることができる。画像データセット供給部7は、画像データセットが予め記憶される記憶部を有することができ、該記憶部から画像データセットは供給され得る。画像データセット供給部7はまた、有線又は無線データ接続を介して画像データセットを受信するための及びそのようにして受信された画像データセットを供給するための受信部であることができる。更に、他の実施形態では、画像データセット供給部はまた、夫々のイメージングモダリティ自体であることができる。この実施形態では、実画像供給部11は、異なる方向において患者4の投影画像を取得するよう、且つ、インターベンションプロシージャを実行する前に投影データに基づき、記憶部に記憶される供給された画像データセットとしてコンピュータ断層撮影画像を再構成するよう適応される。なお、画像データセットは、コンピュータ断層撮影システムによっても生成され得る。
器具ポジション供給部は、光学的にインターベンション器具1の第2部分3のポジションを決定するよう適応される。器具ポジション供給部は、インターベンション器具1の第2部分3に取り付けられたマーカ23の画像を取得する2つのカメラ8,9を有する。マーカ23は、カメラ8,9へ光学的放射を能動的に送信しない受動マーカであることができ、あるいは、それらは、能動マーカ、すなわち、カメラ8,9へ放射線を送信する光源であることができる。例えば、マーカ23は、赤外線光源であることができ、カメラ8,9は、赤外線光源23を示す赤外線画像を取得する赤外線カメラであることができる。カメラ8,9によって取得された画像は、インターベンション器具1の第2部分3の、特に、第2部分3におけるマーカ23のポジションを、取得された画像におけるマーカ23のポジションに基づき決定するために、器具ポジション決定部10へ供給される。必要に応じて、次いで、第2部分3全体のポジションが、インターベンション器具1の第2部分3に対するマーカ23の既知の実際のポジションと、マーカ23の決定されたポジションとに基づき、決定され得る。カメラ8,9によって取得された画像に基づき第2部分3のポジションを決定するために、国際公開第1999/056654(A1)号において開示されるトラッキングアルゴリズムのような、既知のトラッキングアルゴリズムが使用され得る。なお、当該特許文献は、参照により本願に援用される。また、他の既知の光学的又は非光学的、例えば、磁気によるトラッキング技術が、患者4の外のインターベンション器具1の第2部分3のポジションを決定するために使用され得る。
この実施形態では、空間関係決定部15は、実画像に基づきインターベンション器具1の遠位端17のポジションを決定するよう、且つ、患者4の外の第2部分3のポジションと第1部分2のポジションとの間の空間関係を、第2部分3のポジションの、特に、患者4の外の第2部分3のマーカ23のポジションと、患者4内の遠位端17の決定されたポジションとの間の空間関係を決定することによって決定するよう適応され、このとき、ポジション決定部16は、第2部分3のポジション及び遠位端17と第2部分3との間の空間関係に依存して、供給された画像データセット内の遠位端17のポジションを決定するよう適応される。特に、実画像供給部11は、インターベンション器具1の第1部分2の遠位端17を示す患者4内のインターベンション器具の実画像を供給するよう適応され、このとき、空間関係決定部15は、実画像において遠位端17を検出することによって、対象4内の遠位端17のポジションを決定するよう適応される。空間関係決定部15は、遠位端17のポジションを検出するために、ユーザが実画像において遠位端17のポジションを示すことを可能にするグラフィカルユーザインターフェースを提供することができ、及び/又は、空間関係決定部15は、実画像において遠位端17のポジションを検出するために、例えば、閾値化に基づく既知のセグメンテーション技術を使用するよう適応され得る。
空間関係の決定は、実画像において示される患者4内の第1部分2と、第2部分3のポジションとに基づき、最初に与えられている空間関係を補正することによって実行され得る。初期空間関係を決定するために、インターベンション器具1の遠位端17は、インターベンションプロシージャが実行される前に患者4の外にある既知の位置に位置付けられ得、一方、第2部分3の、特に、マーカ23のポジションは、器具ポジション供給部8,9,10によって決定される。このように、初期空間関係は較正プロシージャによって提供され得、このとき、遠位端17は既知の基準点に配置される。
特に、インターベンション器具1の第2部分3の決定されたポジション及び最初に与えられている空間関係に基づき、患者4内の遠位端17の補正されていないポジションは、インターベンションプロシージャの間に決定され得る。投影面は、この補正されていないポジションを含み、且つ、X線源12及びX線検出器13を接続する透視システム11の軸に垂直であるように、定義され得る。この投影面において、実画像における、すなわち、透視画像における遠位端17の実際のポジションは、実質的に投影され得、その上で、補正されていない遠位端ポジションと実際の遠位端ポジションとの間のオフセットが決定され得る。このオフセットは、空間関係を補正して、患者4の外の第2部分3のポジションと対象4内の第1部分2のポジションとの間の実際の空間関係を決定するために、遠位端と第2部分との間、特に、遠位端と第2部分におけるマーカとの間の初期空間関係へ加えられ得る。
カメラ8,9は、器具ポジション供給部8,9,10及び実画像供給部11が互いに対してレジストレーションされるようにX線検出器13に堅固に取り付けられる。すなわち、第1及び第2の部分の、特に、第2部分におけるマーカ及び遠位端の関連のポジションは、検出及び決定プロシージャが実行され得る同じ基準座標系に対して知られる。代替的に、又は追加的に、カメラは、X線源12及びX線検出器13を保持するCアームに堅固に取り付けられ得る。他の実施形態において、器具ポジション供給部及び実画像供給部が互いに堅固に取り付けられていない場合は、それらは他の手段によってレジストレーションされ得る。例えば、器具ポジション供給部はまた、実画像供給部及び器具ポジション供給部を互いに対してレジストレーションするために、実画像供給部の、特に、透視システム11のポジションを決定するよう適応され得る。実画像供給部のポジションを決定するために、実画像供給部は、器具ポジション供給部によって検出可能なマーカを有することができる。
供給された画像データセットは、器具ポジション供給部及び実画像供給部によって供給されるポジション及び画像に対してレジストレーションされる。このレジストレーションは、例えば、実画像供給部11が1以上の実画像を供給するためのみならず、画像データセット、すなわち、本実施形態では、X線コンピュータ断層撮影画像データセットを再構成するために使用される投影データを供給するためにも使用される場合に、自動的に達成され得る。代替的に、又は追加的に、他のレジストレーション技術が、患者4の内部の画像データセットを、器具ポジション供給部及び実画像供給部によって供給されるポジション及び画像とレジストレーションするために使用され得る。例えば、実画像及び画像データセットにおいて可視的である特徴は、実画像及び画像データセットを互いに対してレジストレーションするために使用され得る。
ポジション決定装置6は、供給された画像データセット内の、すなわち、本実施形態では、3次元のコンピュータ断層撮影画像データセット内の決定されたポジションでの第1部分2の、特に、遠位端17の描写を表示する表示部19を更に有する。
透視システム11は、異なる取得方向において取得された2以上の実画像、すなわち、2以上の2次元X線透視画像を供給することができ、このとき、空間関係決定部15は、供給された少なくとも2つの実画像に基づき患者4内の第1部分2のポジション、特に、遠位端17のポジションを決定するよう適応され得る。
インターベンション器具1の第1部分2は、優先的に、長手状の屈曲可能部分である。実施形態において、患者4内のインターベンション器具1の部分の長さは知られており、実画像はインターベンション器具1の遠位端17を示さない。患者4内のインターベンション器具1の長さは、例えば、患者4のまさに外にあり且つ患者4内の夫々の長さが割り当てられているマーカから認知可能であり、あるいは、患者4の外のインターベンション器具1の長さが決定され、インターベンション器具1の全長から減じられ得る。この実施形態では、空間関係決定部15は、患者4内のインターベンション器具1の形状、特に、屈曲を検出するよう、且つ、患者4内の検出された形状及び患者4内の既知の長さに依存して患者4内の遠位端17のポジションを決定するよう適応され得る。実画像は、患者4内のインターベンション器具1の第1部分2の中間範囲のみを示してよく、このとき、空間関係決定部15は、中間範囲の形状を検出して、患者4内の中間範囲の進路を検出するよう、且つ、検出された進路を患者4内の既知の長さの終わりへ外挿することによって遠位端17のポジションを決定するよう適応されてよい。
更なる実施形態において、空間関係決定部15は、患者4の外の第2部分3のポジションと患者4内の第1部分2との間の空間関係を決定するために光学的形状検知プロシージャを実行するよう適応され得、このとき、空間関係は、患者4内の第1部分2の形状及び患者4の外の第2部分3のポジションに基づき決定され、このとき、患者4内の第1部分2の形状は、第1部分2の決定された形状が実画像で示される第1部分2の形状に対応すべきであるとの制約の下で光学的形状検知によって決定される。特に、光学的形状検知によって決定された第1部分2の形状は、X線検出部13の2次元検出面上に実質的に投影され得、このとき、光学的形状検知プロシージャは、投影された形状が実画像において検出される第1部分の形状と同じようであるように、患者4内の第1部分2の形状を決定することができる。光学的形状検知プロシージャを実行するために、インターベンション器具は、光ファイバを有することができ、インターベンション器具は、空間関係決定部が患者内のインターベンション器具の第1部分の形状を決定することを可能にするために、任意の光接続18を介して空間関係決定部と接続される。既知の光学的形状検知技術は、光ファイバ歪の測定に基づく3次元ファイバ形状の逐次再構成に基づく。この既知の光学的形状検知プロシージャのより詳細な記載のために、例えば、参照により本願に援用される国際公開第2011/141829(A1)号が参照される。
下記で、インターベンションプロシージャを実行するためのインターベンション方法の実施形態が、図2に示されるフローチャートを参照して実例として記載される。
ステップ101で、患者の内部の画像データセットが、画像データセット供給部7によって供給される。特に、患者4の3次元コンピュータ断層撮影画像が供給される。ステップ102で、患者4内のインターベンションプロシージャが、インターベンション器具1を用いることによって実行される。例えば、ニードルが患者4に挿入される。次いで、ステップ103で、インターベンション器具の第2部分のポジションが、器具ポジション供給部8,9,10によって決定され、ステップ104で、患者4内のインターベンション器具の実画像が、実画像供給部11によって供給される。ステップ105で、患者の外の第2部分のポジションと患者内の第1部分との間の空間関係が、空間関係決定部15によって、実画像及び第2部分のポジションに基づき決定される。ステップ106で、供給された画像データセット内の第1部分のポジションが、ポジション決定部16によって、第2部分のポジション、及び第1部分と第2部分との間の空間関係に依存して、決定される。このとき、ステップ107で、表示部19は、第1部分の決定されたポジションとともに、供給された画像データセットを表示する。
他の実施形態では、それらのステップは他の順序で実行され得る。例えば、インターベンション器具の第2部分のポジションは、実画像の供給後に決定され得、あるいは、それらの決定及び供給動作は、同時に実行され得る。更に、ステップ105及び106も同時に実行され得る。例えば、空間関係は、最初に与えられている空間関係に基づき決定された患者内の第1部分の補正されていない決定されたポジションを補正することによって、決定され得る。このとき、実画像で示される第1部分の実際のポジションに基づき、第1部分の決定されたポジションは補正され、それにより、空間関係及び患者内の第1部分のポジションを同時に補正して決定することができる。インターベンションプロシージャが続く場合、例えば、インターベンション器具が更に患者内を動かされる場合、第1部分の、特に、インターベンション器具の遠位端の、実際のポジションは、必ずしも更なる実画像を必要とせずに、特に、更なるX線透視画像を必要とせずに、補正された空間関係及び第2部分の実際のポジションに基づき決定され得る。
ステップ102乃至107は、対象内のインターベンション器具のポジションを決定するためのポジション決定方法のステップであると見なされ得る。
人体における最小限侵襲的なプロシージャの間のインターベンション装置トラッキング、すなわち、インターベンション器具トラッキングは、診断又は治療のために正確な位置に的確に到達することができるために重要である。インターベンション装置をトラッキングする方法は、X線ガイダンスを用いることによる。トラッキングはX線ガイダンスにより実行され得るが、欠点は、患者及び医師の両者へ印加されるX線量である。このX線量を減らすために、光学的ガイダンスが、例えば、国際公開第1999/056654(A1)号において開示されるように、X線装置の検出器に取り付けられた複数台のカメラに基づき導入されてきた。この光学的ガイダンスは、患者の外のインターベンション装置の3次元画像と、患者の3次元画像とに基づき、X線量によらない器具トラッキングを可能にする。この光学的技術の欠点は、体内が見られず、従って、装置のトラッキングが体外で見えるものに基づく点である。この既知の光学的ガイダンス方法より生じる問題は、インターベンション装置が変形している時、例えば、挿入中のニードルの屈曲であり、光学的ガイダンス方法は正確でなくなる。
図1を参照して上述されたポジション決定装置は、光学的にトラッキングされる場合に、必要とされるX線量を最小限としながら、インターベンション装置の遠位端の定位を改善することができる。ポジション決定装置は、国際公開第1999/056654(A1)号において記載される光学的マーカによるインターベンション器具トラッキングを実行することによるインターベンション器具の先端の不正確な定位の先行技術の問題を解決することができ、インターベンション器具の挿入の間、少なくとも1つの実画像、すなわち、少なくとも1つの2次元X線透視画像が撮られ、この画像から、インターベンション器具の屈曲、又はインターベンション器具の先端の実際のポジションが推測され、屈曲、又は先端の実際のポジションは、体内のインターベンション器具の先端の予測を補正するために光学的トラッキングにおいて使用される。インターベンション器具の更なる挿入の間、前の検出された屈曲から外れる屈曲、又は予測された先端ポジションとは異なる先端ポジションをもたらす屈曲が予期される場合に、医師は、より正確な光学的ガイダンスを得るために、インターベンション器具の変形を決定するか又は正確な先端ポジションを決定する追加的な更新を実行することができる。よって、実画像に基づき、患者の外にあるインターベンション器具の外側部分、特に、インターベンション器具のこの外側部分におけるマーカと、患者内の先端との間の空間関係は補正され得、次いで、光学的ガイダンスは、この補正された空間関係に基づいて、光学的ガイダンスの精度を改善することができる。インターベンション器具の変形及び/又は患者内の先端のポジションを決定するために、優先的に、2つの透視画像が異なる角度で撮られる。
インターベンションシステムは、優先的に光学的ガイダンスシステムである器具ポジション供給部と、優先的に透視システムである実画像供給部と、例えば、コンピュータ断層撮影システム、磁気共鳴撮像システム、又は陽電子放出撮影及びコンピュータ断層撮影の複合システムからの3次元画像データセットである画像データセットとをコレジストレーションするよう適応され得る。インターベンション器具が患者に挿入されるべき軌道、及び/又は、インターベンション器具がナビゲーションされるべき関心のある位置は、供給された画像データセットにおいて決定され得る。特に、ユーザは、例えば、グラフィカルユーザインターフェースと、キーボード又はマウスのような入力手段とを用いることによって、表示部19に示され得る画像データセットにおいて軌道及び/又は関心のある位置を示すことができる。インターベンションシステムはまた、自動的に軌道及び/又は関心のある位置を決定する軌道及び/又は関心位置決定部を有することができる。その場合に、ユーザは、優先的に光学的ガイダンスシステムである器具ポジション供給部を用いることによって、決定された軌道に沿って及び/又は関心のある位置に向かってインターベンション器具を導くことができ、このとき、患者内のインターベンション器具のポジションの決定は、体外のインターベンション器具の可視的な第2部分に基づく。次いで、優先的に、部分的に挿入されているインターベンション器具の透視画像である実画像が取得され得、体内の第1部分の屈曲及び/又は体内の遠位端のポジションを決定するために使用され得る。屈曲情報及び/又はインターベンション器具の遠位端の実際のポジションに関する情報は、次いで、インターベンション器具の光学的ガイダンスを補正するために使用され得る。体内の所望の位置へのインターベンション器具の更なるガイダンスは、次いで、インターベンション器具の可視的な外側の第2部分とインターベンション器具の内部の第1部分との間の補正された空間関係を使用する補正された光学的ガイダンスシステムに基づき実行され得る。
インターベンション器具は、既知の基準点に対してインターベンション器具の先端を置くことによって、及び基準点に対するインターベンション器具の第2部分におけるマーカの位置を測定することによって、優先的に光学的トラッキングシステムである器具ポジション供給部とレジストレーションされ得る。使用中のインターベンション器具の変形又は屈曲により、先端位置は、既知のインターベンションシステムにおいてトラッキングが不正確であり得るように、較正されたポジションとは異なることがある。しかし、図1を参照して上述されたインターベンションシステムを用いることによって、患者内の先端のポジションは、たとえインターベンション器具が変形又は屈曲されるとしても、正確に決定され得る。
特に、インターベンション器具が医師によって、インターベンション器具の先端を既知の基準点に置くことによって較正された後、患者内の標的位置は決定され得る。次いで、インターベンション器具は、部分的に患者内に挿入され得る。このとき、インターベンション器具の先端のポジションは、インターベンション器具の外側の第2部分の決定されたポジション、及びポジション決定装置の較正によって決定される、患者の外の第2部分、特に、患者の外の第2部分のマーカと、インターベンション器具の先端との間の初期空間関係に基づき、決定され得る。次いで、実画像、すなわち、優先的に、透視画像が取得され得る。このとき、透視画像は、インターベンション器具の先端を示す。実画像におけるインターベンション器具の先端の2次元位置は、手動により又はコンピュータビジョンアルゴリズムによって自動的に決定され得、実画像供給部、特に透視システムの姿勢及びトラッキングされたインターベンション器具の姿勢を組み合わせることによって、3次元基準座標系へ変換され得る。両者の姿勢は、器具ポジション供給部によって、特に、光学的トラッキングシステムによって、及び/又はポジションエンコーダによって、供給され得る。次いで、インターベンション器具の較正、すなわち、インターベンション器具の第2部分のマーカに対するインターベンション器具の先端の位置を定義する空間関係が、実画像供給部の軸に垂直な先端位置を調整することによって、すなわち、画像平面内又は該画像平面に平行な先端位置を調整することによって、更新され得る。必要に応じて、異なる角度からの、特に、第1の実画像の角度方向に垂直である角度方向からの少なくとも1つの更なる実画像は、先端位置の完全な3次元補正を提供するために使用され得る。次いで、医師は、更新された器具較正を用いることによって、すなわち、インターベンション器具の第2部分におけるマーカとインターベンション器具の先端との間の更新された空間関係を用いることによって、ポジション決定装置のガイダンス下で、特に、光学的ガイダンス下で、インターベンションプロシージャを続けることができる。このように、医師が患者内のインターベンション器具をナビゲーションする間、表示部は、優先的に3次元のコンピュータ断層撮影画像データセットである供給された3次元画像データセットにおいて患者内のインターベンション器具の先端の決定されたポジションを示すことができ、このとき、患者内の先端のポジションの決定は、補正された空間関係に基づく。実画像の取得、実画像に基づく空間関係の補正、及び、よって、患者内の決定された先端ポジションの補正は、望まれるように繰り返され得る。
第2部分、特に、第2部分のマーカと、インターベンション器具の先端との間の初期空間関係を決定するための初期較正プロシージャを実行することに代えて、ポジション決定方法及びインターベンション方法は、そのような初期較正なしで実行されてよい。例えば、インターベンション器具がニードルのような長手状の器具である場合は、ポジション決定部は、最初に、器具ポジション供給部によって決定された方向における患者の外のインターベンション器具の第2部分の伸長として決定される線によって定義されるおおよその先端位置を決定することができる。インターベンション器具は部分的に患者内に挿入されてよく、一方、表示部は、患者の内部を示す供給された画像データセット内で、おおよその先端位置、すなわち、対応する線を示してよい。医師は、インターベンション器具において標的深さをマークし、標的が到達されるよりかなり前に挿入を止めることができる。
患者内のインターベンション器具の長さが知られていない場合は、患者内のインターベンション器具の実画像を用いずに、ポジション決定部は、インターベンション器具の先端の正確な位置を決定せず、伸長線によって定義されるおおよその先端位置しか決定することができない。しかし、空間関係決定部は、インターベンション器具の先端とインターベンション器具の第2部分におけるマーカとの間の空間関係を、インターベンション器具の第2部分の、特に、第2部分におけるマーカの決定されたポジションと、インターベンション器具の先端を示す実画像とに基づき決定することができる。次いで、医師の更なるガイダンスは、その決定された空間関係に基づくことができる。すなわち、ポジション決定部は、インターベンション器具の第2部分のポジション及びインターベンション器具の先端と第2部分との間の空間関係に依存して、供給された画像データセット内で先端のポジションを決定することができ、このとき、画像データセット内の先端の決定されたポジションは、医師が表示部に示されている患者内の先端の実際のポジションに基づきインターベンション器具をナビゲーションすることを可能にするために、表示部に示され得る。
ポジション決定装置へのアドオンとして、器具の変形の外挿が実行され得る。非対称な先端を有するニードルのような幾つかのインターベンション器具は、一方向へ流れる(ドリフトする)傾向がある。少なくとも1つの実画像から、ニードルの湾曲が抽出され、ドリフトの量及び方向を予測するために使用され得る。ニードルが挿入されると、予測される先端位置は、ドリフト及び挿入長さの関数として更新され得る。予測される先端位置を更新することによって、インターベンション器具の先端とインターベンション器具の第2部分との間の空間関係は更新され、更新された空間関係は、インターベンション器具の先端のポジションを決定するために使用され得、一方、インターベンション器具は、所望の位置へ更にナビゲーションされる。
インターベンションシステムは、インターベンション器具の第1部分の決定されたポジションが計画された軌道から外れる場合に警告を供給する警報部を有することができる。
上記の実施形態において、器具ポジション供給部は2つのカメラを用いる光学的トラッキングシステムを有するが、他の実施形態において、器具ポジション供給部は、上記の光学的形状検知システム、電磁気式トラッキングシステム、多関節アーム、無線周波数式トラッキングシステム等のような他の光学的又は非光学的トラッキングシステムを更に有することができる。
インターベンションシステム及びポジション決定装置は、ニードルバイオプシー、無線周波数アブレーション等のような、X線による装置トラッキングを必要とする最小限侵襲的なプロシージャの間に使用され得る。
開示される実施形態に対する他の変形例は、図面、本開示、及び添付の特許請求の範囲の検討から、請求される発明を実施する際に当業者によって理解され達成され得る。
特許請求の範囲において、語「有する(comprising)」は、他の要素又はステップを除外せず、単称(a又はan)は、複数個を除外しない。
単一のユニット又は装置は、特許請求の範囲において挙げられている複数の項目の機能を満たしてよい。ある手段が相互に異なる従属請求項において挙げられている単なる事実は、それらの手段の組み合わせが有利に使用され得ないことを示すわけではない。
空間関係の決定及び対象内の第1部分のポジションの決定のような、1以上のユニット又は装置による決定は、如何なる他の数のユニット又は装置によっても実行され得る。例えば、ステップ105及び106は、単一のユニットによって、又は如何なる他の数の異なるユニットによっても、実行され得る。インターベンション方法に従うインターベンションシステムの決定及び/又は制御、及び/又はポジション決定方法に従うポジション決定装置の制御は、コンピュータプログラムのプログラムコード手段として、及び/又は専用のハードウェアとして実施され得る。
コンピュータプログラムは、他のハードウェアとともに又はその部分として供給される光学記憶媒体又は固体状態媒体のような適切な媒体において記憶/分配されてよいが、他の形態においても、例えば、インターネット又は他の有線若しくは無線電気通信システムを介して分配されてよい。
特許請求の範囲における如何なる参照符号も、適用範囲を制限するよう解釈されるべきではない。
本発明は、対象内のインターベンション器具のポジションを決定するポジション決定装置に関する。対象の外のインターベンション器具の大部分のポジションと対象内のインターベンション器具の第1部分のポジションとの間の空間関係は、優先的にX線画像である対象内のインターベンション器具の実画像と、第2部分の供給されたポジションとに基づき、決定される。空間関係が決定されると、対象内のインターベンション器具のポジションが決定され得、一方、インターベンション器具は、決定された空間関係及び決定された第2部分の実際のポジションに基づき、必ずしも更なる実画像を取得せずに、対象内を動かされる。これは、X線が実画像を取得するために使用される場合に、放射線量の低減を可能にすることができる。
本発明の更なる態様において、
インターベンションプロシージャを実行するインターベンションコンピュータプログラムであって、
請求項11に記載のインターベンションシステムに、当該コンピュータプログラムが前記インターベンションシステムを制御するコンピュータで実行される場合に、
インターベンション器具によって対象内でインターベンションプロシージャを実行するステップと、
ポジション決定装置によって、前記対象内の前記インターベンション器具のポジションを決定する、請求項12に記載のポジション決定方法を実行するステップと
を実行させるプログラムコード手段を有するインターベンションコンピュータプログラムが与えられる。
請求項1のポジション決定装置、請求項11のインターベンションシステム、請求項12のポジション決定方法、請求項1のポジション決定コンピュータプログラム、及び請求項1のインターベンションコンピュータプログラムは、特に、従属請求項で定義されるような、同様の及び/又は同じ好ましい実施形態を有する点が理解されるべきである。

Claims (15)

  1. 対象内のインターベンション器具のポジションを決定するポジション決定装置であって、前記インターベンション器具は、前記対象内に挿入される第1部分と、該第1部分が前記対象内に挿入される場合に該対象の外側にある第2部分とを有する、ポジション決定装置において、
    前記対象の画像データセットを供給する画像データセット供給部と、
    前記インターベンション器具の前記第2部分のポジションを決定する器具ポジション供給部と、
    前記対象内の前記インターベンション器具の実画像を供給する実画像供給部と、
    前記対象の外の前記第2部分のポジションと、前記対象内の前記第1部分のポジションとの間の空間関係を、前記実画像及び前記第2部分のポジションに基づき決定する空間関係決定部と、
    前記第2部分のポジション及び前記第1部分と前記第2部分との間の空間関係に依存して、前記供給された画像データセット内の前記第1部分のポジションを決定するポジション決定部と
    を有するポジション決定装置。
  2. 前記空間関係決定部は、前記実画像に基づき前記インターベンション器具の遠位端のポジションを決定するよう、且つ、前記対象の外の前記第2部分のポジションと前記対象内の前記遠位端の決定されたポジションとの間の空間関係を決定することによって前記対象の外の前記第2部分のポジションと前記第1部分のポジションとの間の空間関係を決定するよう適応され、
    前記ポジション決定部は、前記第2部分のポジション及び前記遠位端と前記第2部分との間の空間関係に依存して、前記供給された画像データセット内の前記遠位端のポジションを決定するよう適応される、
    請求項1に記載のポジション決定装置。
  3. 前記実画像供給部は、前記インターベンション器具の前記第1部分の前記遠位端を示す前記対象内の前記インターベンション器具の実際の画像を供給するよう適応され、
    前記空間関係決定部は、前記実画像において前記遠位端を検出することによって、前記対象内の前記遠位端のポジションを決定するよう適応される、
    請求項2に記載のポジション決定装置。
  4. 前記インターベンション器具の前記第1部分は、前記対象内で既知の長さを有する長手状屈曲可能部分であり、
    前記空間関係決定部は、前記対象内の前記インターベンションの形状を検出するよう、且つ、前記対象内の前記検出された形状及び前記対象内の前記既知の長さに依存して前記対象内の前記遠位端のポジションを決定するよう適応される、
    請求項2に記載のポジション決定装置。
  5. 前記実画像は、前記対象内の前記インターベンション器具の前記第1部分の中間範囲を示し、
    前記空間関係決定部は、前記中間範囲の形状を検出して前記対象内の前記中間範囲の進路を検出するよう、且つ、前記検出された進路を前記対象内の前記既知の長さの終わりへ外挿することによって前記遠位端のポジションを決定するよう適応される、
    請求項4に記載のポジション決定装置。
  6. 前記空間関係決定部は、前記対象の外の前記第2部分のポジションと前記対象内の前記第1部分のポジションとの間の空間関係を決定するために光学的形状検知プロシージャを実行するよう適応され、
    前記空間関係は、前記対象内の前記第1部分の形状及び前記対象の外の前記第2部分のポジションに基づき決定され、
    前記対象内の前記第1部分の形状は、該第1部分の決定された形状が前記実画像で示される前記第1部分の形状に対応すべきであるとの制約の下で光学的形状検知によって決定される、
    請求項1に記載のポジション決定装置。
  7. 前記実画像供給部は、異なる取得方向において取得された少なくとも2つの実画像を供給するよう適応され、
    前記空間関係決定部は、前記供給された少なくとも2つの実画像に基づき前記対象内の前記第1部分のポジションを決定するよう適応される、
    請求項1に記載のポジション決定装置。
  8. 前記空間関係決定部は、最初に与えられている空間関係を、前記実画像で示される前記対象内の前記第1部分及び前記第2部分のポジションに基づき補正することによって、前記空間関係を決定するよう適応される、
    請求項1に記載のポジション決定装置。
  9. 前記器具ポジション供給部は、光学又は磁気技術のうちの少なくとも1つによって前記インターベンション器具の前記第2部分のポジションを決定するよう適応される、
    請求項1に記載のポジション決定装置。
  10. 前記供給された画像データセット内の前記第1部分の前記決定されたポジションでの前記第1部分の描写を表示する表示部
    を更に有する請求項1に記載のポジション決定装置。
  11. インターベンションプロシージャを実行するインターベンションシステムであって、
    対象内でインターベンションプロシージャを実行するインターベンション器具と、
    前記対象内の前記インターベンション器具のポジションを決定する、請求項1に記載のポジション決定装置と
    を有するインターベンションシステム。
  12. 対象内のインターベンション器具のポジションを決定するポジション決定方法であって、前記インターベンション器具は、前記対象内に挿入される第1部分と、該第1部分が前記対象内に挿入される場合に該対象の外側にある第2部分とを有する、ポジション決定方法において、
    画像データセット供給部によって、前記対象の画像データセットを供給するステップと、
    器具ポジション供給部によって、前記インターベンション器具の前記第2部分のポジションを決定するステップと、
    実画像供給部によって前記対象内の前記インターベンション器具の実画像を供給するステップと、
    空間関係決定部によって、前記対象の外の前記第2部分のポジションと、前記対象内の前記第1部分のポジションとの間の空間関係を、前記実画像及び前記第2部分のポジションに基づき決定するステップと、
    ポジション決定部によって、前記第2部分のポジション及び前記第1部分と前記第2部分との間の空間関係に依存して前記供給された画像データセット内の前記第1部分のポジションを決定するステップと
    を有するポジション決定方法。
  13. インターベンションプロシージャを実行するインターベンション方法であって、
    インターベンション器具によって、対象内でインターベンションプロシージャを実行するステップと、
    ポジション決定装置によって、前記対象内の前記インターベンション器具のポジションを決定する、請求項12に記載のポジション決定方法を実行するステップと
    を有するインターベンション方法。
  14. 対象内のインターベンション器具のポジションを決定するポジション決定コンピュータプログラムであって、
    請求項1に記載のポジション決定装置に、当該コンピュータプログラムが前記ポジション決定装置を制御するコンピュータで実行される場合に、請求項12に記載のポジション決定方法のステップを実行させるプログラムコード手段
    を有するポジション決定コンピュータプログラム。
  15. インターベンションプロシージャを実行するインターベンションコンピュータプログラムであって、
    請求項11に記載のインターベンションシステムに、当該コンピュータプログラムが前記インターベンションシステムを制御するコンピュータで実行される場合に、請求項13に記載のインターベンション方法のステップを実行させるプログラムコード手段
    を有するインターベンションコンピュータプログラム。
JP2014549605A 2012-01-03 2012-12-24 ポジション決定装置 Active JP6130856B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261582514P 2012-01-03 2012-01-03
US61/582,514 2012-01-03
PCT/IB2012/057682 WO2013102827A1 (en) 2012-01-03 2012-12-24 Position determining apparatus

Publications (2)

Publication Number Publication Date
JP2015504721A true JP2015504721A (ja) 2015-02-16
JP6130856B2 JP6130856B2 (ja) 2017-05-17

Family

ID=47741196

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014549605A Active JP6130856B2 (ja) 2012-01-03 2012-12-24 ポジション決定装置

Country Status (6)

Country Link
US (1) US10842409B2 (ja)
EP (1) EP2800534B1 (ja)
JP (1) JP6130856B2 (ja)
CN (1) CN104039260B (ja)
RU (1) RU2634296C2 (ja)
WO (1) WO2013102827A1 (ja)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016539713A (ja) * 2013-12-10 2016-12-22 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. イメージングシステムへの光学形状検知システムの放射線のない登録
JP2019501704A (ja) * 2015-12-18 2019-01-24 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 医療機器の追跡
JP2020022730A (ja) * 2018-06-07 2020-02-13 グローバス メディカル インコーポレイティッド 自然基準を使用した共登録を提供するロボットシステムおよび関連方法
US10842461B2 (en) 2012-06-21 2020-11-24 Globus Medical, Inc. Systems and methods of checking registrations for surgical systems
US10874466B2 (en) 2012-06-21 2020-12-29 Globus Medical, Inc. System and method for surgical tool insertion using multiaxis force and moment feedback
US11045267B2 (en) 2012-06-21 2021-06-29 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11253327B2 (en) 2012-06-21 2022-02-22 Globus Medical, Inc. Systems and methods for automatically changing an end-effector on a surgical robot
US11298196B2 (en) 2012-06-21 2022-04-12 Globus Medical Inc. Surgical robotic automation with tracking markers and controlled tool advancement
US11317971B2 (en) 2012-06-21 2022-05-03 Globus Medical, Inc. Systems and methods related to robotic guidance in surgery
US11399900B2 (en) 2012-06-21 2022-08-02 Globus Medical, Inc. Robotic systems providing co-registration using natural fiducials and related methods
JP2022550876A (ja) * 2020-02-14 2022-12-05 ブレインラボ アーゲー 追跡の不正確性の補償
US11589771B2 (en) 2012-06-21 2023-02-28 Globus Medical Inc. Method for recording probe movement and determining an extent of matter removed
US11786324B2 (en) 2012-06-21 2023-10-17 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11793570B2 (en) 2012-06-21 2023-10-24 Globus Medical Inc. Surgical robotic automation with tracking markers
US11819365B2 (en) 2012-06-21 2023-11-21 Globus Medical, Inc. System and method for measuring depth of instrumentation
US11857149B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. Surgical robotic systems with target trajectory deviation monitoring and related methods
US11857266B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. System for a surveillance marker in robotic-assisted surgery
US11864839B2 (en) 2012-06-21 2024-01-09 Globus Medical Inc. Methods of adjusting a virtual implant and related surgical navigation systems
US11864745B2 (en) 2012-06-21 2024-01-09 Globus Medical, Inc. Surgical robotic system with retractor
US11883217B2 (en) 2016-02-03 2024-01-30 Globus Medical, Inc. Portable medical imaging system and method
US11896446B2 (en) 2012-06-21 2024-02-13 Globus Medical, Inc Surgical robotic automation with tracking markers
US11963755B2 (en) 2012-06-21 2024-04-23 Globus Medical Inc. Apparatus for recording probe movement
US11974822B2 (en) 2012-06-21 2024-05-07 Globus Medical Inc. Method for a surveillance marker in robotic-assisted surgery
US12004905B2 (en) 2012-06-21 2024-06-11 Globus Medical, Inc. Medical imaging systems using robotic actuators and related methods

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9510771B1 (en) 2011-10-28 2016-12-06 Nuvasive, Inc. Systems and methods for performing spine surgery
US9848922B2 (en) 2013-10-09 2017-12-26 Nuvasive, Inc. Systems and methods for performing spine surgery
JP6118465B2 (ja) 2013-12-19 2017-04-19 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 対象物トラッキング装置
FR3015883B1 (fr) * 2013-12-31 2021-01-15 Inria Inst Nat Rech Informatique & Automatique Systeme et procede de suivi du deplacement d'un instrument medical dans le corps d'un sujet
US10307079B2 (en) 2014-01-27 2019-06-04 Edda Technology, Inc. Method and system for surgical instrument guidance and tracking with position and orientation correction
EP3037056B1 (en) 2014-12-23 2021-04-21 Stryker European Holdings I, LLC System for reconstructing a trajectory of an optical fiber
CN104523230B (zh) * 2014-12-29 2016-07-13 华中科技大学 一种静脉穿刺针头位置定位的装置
CN104644205A (zh) 2015-03-02 2015-05-27 上海联影医疗科技有限公司 用于影像诊断的患者定位方法及系统
US11576645B2 (en) * 2015-03-02 2023-02-14 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for scanning a patient in an imaging system
US11576578B2 (en) * 2015-03-02 2023-02-14 Shanghai United Imaging Healthcare Co., Ltd. Systems and methods for scanning a patient in an imaging system
CN108366834B (zh) * 2015-12-17 2021-04-09 皇家飞利浦有限公司 导航辅助系统
US10806468B2 (en) * 2016-03-16 2020-10-20 Koninklijke Philips N.V. Optical camera selection in multi-modal X-ray imaging
US10695134B2 (en) * 2016-08-25 2020-06-30 Verily Life Sciences Llc Motion execution of a robotic system
JP7049325B6 (ja) * 2016-09-23 2022-06-01 コーニンクレッカ フィリップス エヌ ヴェ 体外画像における器具に関連する画像オブジェクトの可視化
DE102019207803A1 (de) * 2019-05-28 2020-12-03 Friedrich-Alexander-Universität Erlangen-Nürnberg Registrierungseinrichtung, Verfahren zum Registrieren, entsprechendes Computerprogramm und computerlesbares Speichermedium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH105245A (ja) * 1996-06-25 1998-01-13 Shimadzu Corp 外科手術支援装置
JP2001245880A (ja) * 2000-02-03 2001-09-11 Koninkl Philips Electronics Nv 医療器具の位置判定方法
JP2007296341A (ja) * 2006-04-27 2007-11-15 Siemens Medical Solutions Usa Inc X線ベースでカテーテル先端位置決定を行うためのシステムおよび方法
US20100030063A1 (en) * 2008-07-31 2010-02-04 Medtronic, Inc. System and method for tracking an instrument

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69929026T2 (de) 1998-05-05 2006-08-24 Koninklijke Philips Electronics N.V. Bildgebungsverfahren für bildgesteuerte chirurgie
WO2002039917A1 (en) * 1998-05-14 2002-05-23 Calypso Medical, Inc. Systems and methods for locating and defining a target location within a human body
US20040006268A1 (en) * 1998-09-24 2004-01-08 Super Dimension Ltd Was Filed In Parent Case System and method of recording and displaying in context of an image a location of at least one point-of-interest in a body during an intra-body medical procedure
DE10037491A1 (de) * 2000-08-01 2002-02-14 Stryker Leibinger Gmbh & Co Kg Verfahren zum dreidimensionalen Visualisieren von Strukturen im Körperinneren
JP4219170B2 (ja) * 2001-02-27 2009-02-04 スミス アンド ネフュー インコーポレーテッド 膝関節全置換術のシステム及び方法
US8150495B2 (en) * 2003-08-11 2012-04-03 Veran Medical Technologies, Inc. Bodily sealants and methods and apparatus for image-guided delivery of same
US7313430B2 (en) * 2003-08-28 2007-12-25 Medtronic Navigation, Inc. Method and apparatus for performing stereotactic surgery
US7720521B2 (en) * 2004-04-21 2010-05-18 Acclarent, Inc. Methods and devices for performing procedures within the ear, nose, throat and paranasal sinuses
DE102005062582B4 (de) 2005-12-27 2017-08-03 Siemens Healthcare Gmbh Abbilduingssystem und Verfahren zur Anfertigung von Röntgen- und optischen Bildern
WO2007113713A2 (en) 2006-03-31 2007-10-11 Koninklijke Philips Electronics, N.V. Image guided surgery system
WO2007141784A2 (en) 2006-06-05 2007-12-13 Technion Research & Development Foundation Ltd. Controlled steering of a flexible needle
EP1886641A1 (de) * 2006-08-11 2008-02-13 BrainLAB AG Verfahren und System zum Bestimmen der relativen Lage eines medizinischen Instruments relativ zu einer Körperstruktur
US8248414B2 (en) 2006-09-18 2012-08-21 Stryker Corporation Multi-dimensional navigation of endoscopic video
US8175677B2 (en) 2007-06-07 2012-05-08 MRI Interventions, Inc. MRI-guided medical interventional systems and methods
BRPI0917591A2 (pt) 2008-12-11 2015-11-17 Koninkl Philips Electronics Nv sistema para gerar uma imagem e método para gerar uma imagem
DE102009025249A1 (de) 2009-06-17 2010-12-30 Siemens Aktiengesellschaft Medizinsystem
JP5517526B2 (ja) 2009-08-27 2014-06-11 Ntn株式会社 遠隔操作型アクチュエータの工具先端位置検出装置
WO2011098926A1 (en) * 2010-02-09 2011-08-18 Koninklijke Philips Electronics N.V. Apparatus, system and method for imaging and treatment using optical position sensing
DE102010028446A1 (de) * 2010-04-30 2011-11-03 Siemens Aktiengesellschaft Verfahren zur Rekonstruktion eines aktuellen dreidimensionalen Bilddatensatzes eines Objekts während eines Überwachungsvorgangs und Röntgeneinrichtung
WO2011141829A1 (en) 2010-05-11 2011-11-17 Koninklijke Philips Electronics N.V. Method and apparatus for dynamic tracking of medical devices using fiber bragg gratings

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH105245A (ja) * 1996-06-25 1998-01-13 Shimadzu Corp 外科手術支援装置
JP2001245880A (ja) * 2000-02-03 2001-09-11 Koninkl Philips Electronics Nv 医療器具の位置判定方法
JP2007296341A (ja) * 2006-04-27 2007-11-15 Siemens Medical Solutions Usa Inc X線ベースでカテーテル先端位置決定を行うためのシステムおよび方法
US20100030063A1 (en) * 2008-07-31 2010-02-04 Medtronic, Inc. System and method for tracking an instrument

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11786324B2 (en) 2012-06-21 2023-10-17 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11864839B2 (en) 2012-06-21 2024-01-09 Globus Medical Inc. Methods of adjusting a virtual implant and related surgical navigation systems
US11793570B2 (en) 2012-06-21 2023-10-24 Globus Medical Inc. Surgical robotic automation with tracking markers
US11974822B2 (en) 2012-06-21 2024-05-07 Globus Medical Inc. Method for a surveillance marker in robotic-assisted surgery
US10874466B2 (en) 2012-06-21 2020-12-29 Globus Medical, Inc. System and method for surgical tool insertion using multiaxis force and moment feedback
US11045267B2 (en) 2012-06-21 2021-06-29 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11253327B2 (en) 2012-06-21 2022-02-22 Globus Medical, Inc. Systems and methods for automatically changing an end-effector on a surgical robot
US11298196B2 (en) 2012-06-21 2022-04-12 Globus Medical Inc. Surgical robotic automation with tracking markers and controlled tool advancement
US11317971B2 (en) 2012-06-21 2022-05-03 Globus Medical, Inc. Systems and methods related to robotic guidance in surgery
US11399900B2 (en) 2012-06-21 2022-08-02 Globus Medical, Inc. Robotic systems providing co-registration using natural fiducials and related methods
US11963755B2 (en) 2012-06-21 2024-04-23 Globus Medical Inc. Apparatus for recording probe movement
US11589771B2 (en) 2012-06-21 2023-02-28 Globus Medical Inc. Method for recording probe movement and determining an extent of matter removed
US12004905B2 (en) 2012-06-21 2024-06-11 Globus Medical, Inc. Medical imaging systems using robotic actuators and related methods
US11896446B2 (en) 2012-06-21 2024-02-13 Globus Medical, Inc Surgical robotic automation with tracking markers
US10842461B2 (en) 2012-06-21 2020-11-24 Globus Medical, Inc. Systems and methods of checking registrations for surgical systems
US11819283B2 (en) 2012-06-21 2023-11-21 Globus Medical Inc. Systems and methods related to robotic guidance in surgery
US11819365B2 (en) 2012-06-21 2023-11-21 Globus Medical, Inc. System and method for measuring depth of instrumentation
US11857149B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. Surgical robotic systems with target trajectory deviation monitoring and related methods
US11857266B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. System for a surveillance marker in robotic-assisted surgery
US11864745B2 (en) 2012-06-21 2024-01-09 Globus Medical, Inc. Surgical robotic system with retractor
JP2016539713A (ja) * 2013-12-10 2016-12-22 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. イメージングシステムへの光学形状検知システムの放射線のない登録
JP2019501704A (ja) * 2015-12-18 2019-01-24 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 医療機器の追跡
US11883217B2 (en) 2016-02-03 2024-01-30 Globus Medical, Inc. Portable medical imaging system and method
JP2020022730A (ja) * 2018-06-07 2020-02-13 グローバス メディカル インコーポレイティッド 自然基準を使用した共登録を提供するロボットシステムおよび関連方法
JP2022550876A (ja) * 2020-02-14 2022-12-05 ブレインラボ アーゲー 追跡の不正確性の補償
JP7375182B2 (ja) 2020-02-14 2023-11-07 ブレインラボ アーゲー 追跡の不正確性の補償

Also Published As

Publication number Publication date
RU2634296C2 (ru) 2017-10-24
CN104039260B (zh) 2017-12-19
CN104039260A (zh) 2014-09-10
RU2014132069A (ru) 2016-02-20
EP2800534A1 (en) 2014-11-12
JP6130856B2 (ja) 2017-05-17
WO2013102827A1 (en) 2013-07-11
US10842409B2 (en) 2020-11-24
EP2800534B1 (en) 2021-04-28
US20140357989A1 (en) 2014-12-04

Similar Documents

Publication Publication Date Title
JP6130856B2 (ja) ポジション決定装置
JP6828047B2 (ja) 画像誘導手術における透視撮像システムの姿勢推定及び較正のシステム及び方法
CN105408939B (zh) 用于配准成像设备与跟踪设备的配准系统
JP5291619B2 (ja) 座標系レジストレーション
JP7284736B2 (ja) 投影画像における介入器具の位置を決定する装置
JP6559532B2 (ja) X線透視画像のリアルタイムシミュレーション
EP3193765B1 (en) Processing system arranged to cooperate with an optical-shape-sensing-enabled interventional device
JP6243533B2 (ja) イメージングシステムへの光学形状検知システムの放射線のないレジストレーション
US20170065353A1 (en) Identifying and presenting suspected map shifts
WO2013016286A2 (en) System and method for automatically determining calibration parameters of a fluoroscope
JP7079771B2 (ja) 軟性点特徴部を使用して呼吸周期を予測し、端部位置合わせを改善する方法
JP2016539713A5 (ja) イメージングシステムへの光学形状検知システムの放射線のないレジストレーション
US11918309B2 (en) Imaging a robotically moved medical object
US10292773B2 (en) Position determination system
US20160253804A1 (en) Assisting apparatus for assisting in registering an imaging device with a position and shape determination device
EP3515288B1 (en) Visualization of an image object relating to an instrument in an extracorporeal image
CN111402144A (zh) 生成运动补偿图像的医学成像设备,系统和方法和介质
US8457720B2 (en) Apparatus for assisting with the positioning of an implant
US20220022964A1 (en) System for displaying an augmented reality and method for generating an augmented reality
US11250565B2 (en) Medical assistance device, system, and method for determining a deformation of a subject, computer program, corresponding computer-readable storage medium
US20220301100A1 (en) Providing a corrected dataset
US20180318016A1 (en) Navigation assistance system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170220

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170321

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170414

R150 Certificate of patent or registration of utility model

Ref document number: 6130856

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250