JP2019511285A5 - - Google Patents

Download PDF

Info

Publication number
JP2019511285A5
JP2019511285A5 JP2018547907A JP2018547907A JP2019511285A5 JP 2019511285 A5 JP2019511285 A5 JP 2019511285A5 JP 2018547907 A JP2018547907 A JP 2018547907A JP 2018547907 A JP2018547907 A JP 2018547907A JP 2019511285 A5 JP2019511285 A5 JP 2019511285A5
Authority
JP
Japan
Prior art keywords
image
imaging modality
pose
radiopaque
combination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018547907A
Other languages
English (en)
Other versions
JP2019511285A (ja
JP6976266B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/IB2017/000276 external-priority patent/WO2017153839A1/en
Publication of JP2019511285A publication Critical patent/JP2019511285A/ja
Publication of JP2019511285A5 publication Critical patent/JP2019511285A5/ja
Application granted granted Critical
Publication of JP6976266B2 publication Critical patent/JP6976266B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (6)

  1. 第1の画像化モダリティから第1の画像を取得するステップと、
    前記第1の画像化モダリティから得る前記第1の画像から得る少なくとも1つの要素を抽出するステップであって、
    ここで前記少なくとも1つの要素は、気道、血管、体腔、またはそれらの任意の組み合わせを含む、ステップと、
    第2の画像化モダリティから、少なくとも(i)第2の画像化モダリティの第1のポーズにおける放射線不透過性機器の第1の画像、および(ii)第2の画像化モダリティの第2のポーズにおける前記放射線不透過性機器の第2の画像を取得するステップであって、
    ここで前記放射線不透過性機器は、患者の体腔にある、ステップと、
    少なくとも2つの拡張気管支造影図を生成するステップであって、
    ここで第1の拡張気管支造影図は、前記第1のポーズにおける前記第2の画像化モダリティの前記第1の画像に対応し、
    第2の拡張気管支造影図は、前記第2のポーズにおける前記第2の画像化モダリティの前記第2の画像に対応する、ステップと、
    (i)前記第2の画像化モダリティの前記第1のポーズと、
    (ii)前記第2の画像化モダリティの前記第2のポーズと
    の間の相互幾何学的制約を判定するステップと、
    前記第2の画像化モダリティの前記第1のポーズおよび前記第2の画像化モダリティの前記第2のポーズを推定するステップであって、
    ここで前記推定は、
    (i)前記第1の拡張気管支造影図、
    (ii)前記第2の拡張気管支造影図、および
    (iii)前記少なくとも1つの要素
    を用いて実行され、
    前記第2の画像化モダリティの前記推定された第1のポーズおよび前記第2の画像化モダリティの前記推定された第2のポーズは、前記判定された相互幾何学的制約を満たす、ステップと、
    第3の画像を生成するステップであって、ここで前記第3の画像は、対象領域を強調する前記第2の画像化モダリティから導かれた拡張画像であり、
    前記対象領域は、前記推定された第1のポーズおよび前記推定された第2のポーズから得る投影データから判定される、ステップと
    を含む方法。
  2. 前記第1の画像化モダリティからの前記第1の画像からの追加の要素があり、第2の画像化モダリティの第2の画像は、肋骨、椎骨、隔膜、またはそれらの任意の組み合わせをさらに含む、請求項1に記載の方法。
  3. 前記相互幾何学的制約が、
    a.前記放射線不透過性機器の前記第1の画像と、前記放射線不透過性機器の前記第2の画像とを比較することによって、(i)前記第1のポーズと(ii)前記第2のポーズとの間の差を推定することであって、
    ここで前記推定することは、分度器、加速度計、ジャイロスコープ、またはそれらの任意の組み合わせを含む装置を使用して実行され、前記装置は、前記第2の画像化モダリティに取り付けられる、推定すること、
    b.相対ポーズ変化を推定するために複数の画像特徴を抽出することであって、
    ここで前記複数の画像特徴は、解剖学的要素、非解剖学的要素、またはそれらの任意の組み合わせを含み、
    前記画像特徴は、患者に取り付けられたパッチ、前記第2の画像化モダリティの視野に配置された放射線不透過性マーカー、またはそれらの任意の組み合わせを含み、
    前記画像特徴は、前記放射線不透過性機器の前記第1の画像および前記放射線不透過性機器の前記第2の画像で可視である、抽出することと、
    c.少なくとも1つのカメラを使用することによって、(i)前記第1のポーズと(ii)前記第2のポーズとの間の差を推定することであって、
    ここで前記カメラは、ビデオカメラ、赤外線カメラ、深度カメラ、またはそれらの任意の組み合わせを備え、
    前記カメラは固定位置にあり、
    前記カメラは、少なくとも1つの特徴を追跡するように構成され、
    ここで前記少なくとも1つの特徴は、前記患者に取り付けられたマーカー、前記第2の画像化モダリティに取り付けられたマーカー、またはそれらの任意の組み合わせを含み、
    前記少なくとも1つの特徴を追跡する、推定することと、
    d.またはそれらの任意の組合せによって生成される、請求項1に記載の方法。
  4. 軌道を特定し、
    さらなる幾何学的制約として前記軌道を使用する
    ために前記放射線不透過性機器を追跡するステップであって、
    ここで前記放射線不透過性機器は、内視鏡、気管支内器具、またはロボットのアームを備える、ステップ、
    をさらに含む、請求項1に記載の方法。
  5. 前記第1の画像化モダリティから得る前記第1の画像が術前画像である、請求項1に記載の方法。
  6. 前記第2の画像化モダリティから得る前記放射線不透過性機器の前記少なくとも1つの画像は、術中画像である、請求項1に記載の方法。
JP2018547907A 2016-03-10 2017-03-10 多視点ポーズ推定を使用するための方法およびシステム Active JP6976266B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662306502P 2016-03-10 2016-03-10
US62/306,502 2016-03-10
US201662407720P 2016-10-13 2016-10-13
US62/407,720 2016-10-13
PCT/IB2017/000276 WO2017153839A1 (en) 2016-03-10 2017-03-10 Methods and systems for using multi view pose estimation

Publications (3)

Publication Number Publication Date
JP2019511285A JP2019511285A (ja) 2019-04-25
JP2019511285A5 true JP2019511285A5 (ja) 2020-04-23
JP6976266B2 JP6976266B2 (ja) 2021-12-08

Family

ID=59787775

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018547907A Active JP6976266B2 (ja) 2016-03-10 2017-03-10 多視点ポーズ推定を使用するための方法およびシステム

Country Status (7)

Country Link
US (2) US10674970B2 (ja)
EP (1) EP3426134B1 (ja)
JP (1) JP6976266B2 (ja)
CN (1) CN109069009B (ja)
AU (3) AU2017231889A1 (ja)
CA (1) CA3017091A1 (ja)
WO (1) WO2017153839A1 (ja)

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9129359B2 (en) 2006-11-10 2015-09-08 Covidien Lp Adaptive navigation technique for navigating a catheter through a body channel or cavity
WO2009147671A1 (en) 2008-06-03 2009-12-10 Superdimension Ltd. Feature-based registration method
US8218847B2 (en) 2008-06-06 2012-07-10 Superdimension, Ltd. Hybrid registration method
US9633431B2 (en) 2014-07-02 2017-04-25 Covidien Lp Fluoroscopic pose estimation
US9603668B2 (en) 2014-07-02 2017-03-28 Covidien Lp Dynamic 3D lung map view for tool navigation inside the lung
CN106572834B (zh) 2014-07-02 2019-12-03 柯惠有限合伙公司 对准ct
US9986983B2 (en) 2014-10-31 2018-06-05 Covidien Lp Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same
US10716525B2 (en) 2015-08-06 2020-07-21 Covidien Lp System and method for navigating to target and performing procedure on target utilizing fluoroscopic-based local three dimensional volume reconstruction
US10702226B2 (en) 2015-08-06 2020-07-07 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
US10674982B2 (en) 2015-08-06 2020-06-09 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
CN110248585B (zh) 2016-10-07 2022-03-08 博迪维仁医疗有限公司 在介入和外科手术中使用的装置及其使用方法
WO2018078445A2 (en) * 2016-10-31 2018-05-03 Dorian Averbuch Jigs for use in medical imaging and methods for using thereof
US10235771B2 (en) * 2016-11-11 2019-03-19 Qualcomm Incorporated Methods and systems of performing object pose estimation
US11793579B2 (en) 2017-02-22 2023-10-24 Covidien Lp Integration of multiple data sources for localization and navigation
US10699448B2 (en) 2017-06-29 2020-06-30 Covidien Lp System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data
US10966720B2 (en) 2017-09-01 2021-04-06 RevMedica, Inc. Surgical stapler with removable power pack
US11331099B2 (en) 2017-09-01 2022-05-17 Rev Medica, Inc. Surgical stapler with removable power pack and interchangeable battery pack
WO2019075074A1 (en) 2017-10-10 2019-04-18 Covidien Lp SYSTEM AND METHOD FOR IDENTIFICATION AND MARKING OF A TARGET IN A THREE-DIMENSIONAL FLUOROSCOPIC RECONSTRUCTION
US12004849B2 (en) 2017-12-11 2024-06-11 Covidien Lp Systems, methods, and computer-readable media for non-rigid registration of electromagnetic navigation space to CT volume
US10905498B2 (en) 2018-02-08 2021-02-02 Covidien Lp System and method for catheter detection in fluoroscopic images and updating displayed position of catheter
US10893842B2 (en) 2018-02-08 2021-01-19 Covidien Lp System and method for pose estimation of an imaging device and for determining the location of a medical device with respect to a target
US10930064B2 (en) 2018-02-08 2021-02-23 Covidien Lp Imaging reconstruction system and method
US11464576B2 (en) 2018-02-09 2022-10-11 Covidien Lp System and method for displaying an alignment CT
US20200405397A1 (en) * 2018-02-26 2020-12-31 Cornell University Augmented reality guidance system for cardiac interventional surgery
US11705238B2 (en) 2018-07-26 2023-07-18 Covidien Lp Systems and methods for providing assistance during surgery
US11071591B2 (en) 2018-07-26 2021-07-27 Covidien Lp Modeling a collapsed lung using CT data
AU2019322080A1 (en) * 2018-08-13 2021-03-11 Body Vision Medical Ltd. Methods and systems for multi view pose estimation using digital computational tomography
US11944388B2 (en) 2018-09-28 2024-04-02 Covidien Lp Systems and methods for magnetic interference correction
US11877806B2 (en) 2018-12-06 2024-01-23 Covidien Lp Deformable registration of computer-generated airway models to airway trees
US11045075B2 (en) 2018-12-10 2021-06-29 Covidien Lp System and method for generating a three-dimensional model of a surgical site
US11617493B2 (en) 2018-12-13 2023-04-04 Covidien Lp Thoracic imaging, distance measuring, surgical awareness, and notification system and method
US11801113B2 (en) 2018-12-13 2023-10-31 Covidien Lp Thoracic imaging, distance measuring, and notification system and method
US11357593B2 (en) 2019-01-10 2022-06-14 Covidien Lp Endoscopic imaging with augmented parallax
DE102019200786A1 (de) * 2019-01-23 2020-07-23 Siemens Healthcare Gmbh Bildgebendes medizinisches Gerät, Verfahren zum Unterstützen von medizinischem Personal, Computerprogrammprodukt und computerlesbares Speichermedium
US11625825B2 (en) 2019-01-30 2023-04-11 Covidien Lp Method for displaying tumor location within endoscopic images
US11564751B2 (en) 2019-02-01 2023-01-31 Covidien Lp Systems and methods for visualizing navigation of medical devices relative to targets
US11925333B2 (en) 2019-02-01 2024-03-12 Covidien Lp System for fluoroscopic tracking of a catheter to update the relative position of a target and the catheter in a 3D model of a luminal network
US11744643B2 (en) 2019-02-04 2023-09-05 Covidien Lp Systems and methods facilitating pre-operative prediction of post-operative tissue function
US11918406B2 (en) 2019-02-15 2024-03-05 Koninklijke Philips N.V. Marker registration correction by virtual model manipulation
JP2022520933A (ja) 2019-02-15 2022-04-04 コーニンクレッカ フィリップス エヌ ヴェ X線較正のためのx線リップルマーカ
US11931198B2 (en) 2019-02-15 2024-03-19 Koninklijke Philips N.V. X-ray calibration for display overlays onto X-ray images
US11819285B2 (en) 2019-04-05 2023-11-21 Covidien Lp Magnetic interference detection systems and methods
EP3998960A4 (en) 2019-07-19 2022-12-14 Revmedica, Inc. SURGICAL STAPLER WITH REMOVABLE POWER SUPPLY
US11269173B2 (en) 2019-08-19 2022-03-08 Covidien Lp Systems and methods for displaying medical video images and/or medical 3D models
US12059281B2 (en) 2019-08-19 2024-08-13 Covidien Lp Systems and methods of fluoro-CT imaging for initial registration
US11931111B2 (en) 2019-09-09 2024-03-19 Covidien Lp Systems and methods for providing surgical guidance
US11864935B2 (en) 2019-09-09 2024-01-09 Covidien Lp Systems and methods for pose estimation of a fluoroscopic imaging device and for three-dimensional imaging of body structures
US11627924B2 (en) 2019-09-24 2023-04-18 Covidien Lp Systems and methods for image-guided navigation of percutaneously-inserted devices
US11847730B2 (en) 2020-01-24 2023-12-19 Covidien Lp Orientation detection in fluoroscopic images
JP2023520618A (ja) * 2020-01-24 2023-05-18 ボディ・ビジョン・メディカル・リミテッド 多視点姿勢推定を使用するための方法及びシステム
US11380060B2 (en) 2020-01-24 2022-07-05 Covidien Lp System and method for linking a segmentation graph to volumetric data
CN111513740B (zh) * 2020-04-13 2023-09-12 北京东软医疗设备有限公司 血管造影机的控制方法、装置、电子设备、存储介质
US12064191B2 (en) 2020-06-03 2024-08-20 Covidien Lp Surgical tool navigation using sensor fusion
US11950950B2 (en) 2020-07-24 2024-04-09 Covidien Lp Zoom detection and fluoroscope movement detection for target overlay
CN112419415B (zh) * 2020-12-08 2022-06-17 浙江德尚韵兴医疗科技有限公司 一种基于crs曲线拟合实现位姿规划的超声扫查方法
US11950951B2 (en) 2021-01-29 2024-04-09 Covidien Lp Systems and methods for C-arm fluoroscope camera pose refinement with secondary movement compensation
US11816768B1 (en) 2022-12-06 2023-11-14 Body Vision Medical Ltd. System and method for medical imaging

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4674948B2 (ja) * 2000-09-29 2011-04-20 オリンパス株式会社 手術ナビゲーション装置および手術ナビゲーション装置の作動方法
JP2002119507A (ja) * 2000-10-17 2002-04-23 Toshiba Corp 医用装置および医用画像収集表示方法
JP4334839B2 (ja) * 2002-09-12 2009-09-30 オリンパス株式会社 内視鏡観測装置
US7660623B2 (en) * 2003-01-30 2010-02-09 Medtronic Navigation, Inc. Six degree of freedom alignment display for medical procedures
US7949386B2 (en) * 2006-03-21 2011-05-24 A2 Surgical Computer-aided osteoplasty surgery system
US7885441B2 (en) * 2006-10-11 2011-02-08 General Electric Company Systems and methods for implant virtual review
US20080119712A1 (en) 2006-11-20 2008-05-22 General Electric Company Systems and Methods for Automated Image Registration
JP2010522597A (ja) * 2007-03-26 2010-07-08 スーパーディメンション, リミテッド Ct強化型x線透視
CN101301192B (zh) * 2007-05-10 2010-06-23 中国科学院自动化研究所 一种多模态自发荧光断层分子影像仪器及重建方法
JP2009225933A (ja) * 2008-03-21 2009-10-08 Fujifilm Corp カプセル内視鏡システム及びカプセル内視鏡の動作制御方法
JP2010200894A (ja) * 2009-03-02 2010-09-16 Tadashi Ukimura 手術支援システム及び手術ロボットシステム
US20110301447A1 (en) * 2010-06-07 2011-12-08 Sti Medical Systems, Llc Versatile video interpretation, visualization, and management system
US20130303887A1 (en) * 2010-08-20 2013-11-14 Veran Medical Technologies, Inc. Apparatus and method for four dimensional soft tissue navigation
US20120203067A1 (en) * 2011-02-04 2012-08-09 The Penn State Research Foundation Method and device for determining the location of an endoscope
CN203724652U (zh) * 2011-03-15 2014-07-23 迈克尔·格特纳 用于治疗通向肾脏血管周围神经的系统
CN102254339A (zh) * 2011-03-28 2011-11-23 深圳市蓝韵实业有限公司 一种实时医学超声三维成像方法
US11064955B2 (en) * 2011-03-31 2021-07-20 Koninklijke Philips N.V. Shape sensing assisted medical procedure
US9265468B2 (en) * 2011-05-11 2016-02-23 Broncus Medical, Inc. Fluoroscopy-based surgical device tracking method
US9105207B2 (en) * 2012-05-02 2015-08-11 Empire Technology Development Llc Four dimensional image registration using dynamical model for augmented reality in medical applications
CN103040430A (zh) * 2013-01-24 2013-04-17 北京理工大学 一种三维内窥镜装置
WO2014141968A1 (ja) * 2013-03-12 2014-09-18 オリンパスメディカルシステムズ株式会社 内視鏡システム
US8880151B1 (en) * 2013-11-27 2014-11-04 Clear Guide Medical, Llc Surgical needle for a surgical system with optical recognition
JP6509906B2 (ja) * 2014-01-06 2019-05-08 ボディ・ビジョン・メディカル・リミテッドBody Vision Medical Ltd. 医療機器の作動方法
US11188285B2 (en) * 2014-07-02 2021-11-30 Covidien Lp Intelligent display
US9986983B2 (en) * 2014-10-31 2018-06-05 Covidien Lp Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same
CN110248618B (zh) * 2016-09-09 2024-01-09 莫比乌斯成像公司 用于在计算机辅助手术中显示患者数据的方法及系统
US10796481B2 (en) * 2018-04-20 2020-10-06 Siemens Healthcare Gmbh Visualization of lung fissures in medical imaging

Similar Documents

Publication Publication Date Title
JP2019511285A5 (ja)
JP6976266B2 (ja) 多視点ポーズ推定を使用するための方法およびシステム
JP2023181259A (ja) デジタル・コンピュータ・トモグラフィを用いた多視点姿勢推定のための方法及びシステム
US11033188B2 (en) Imaging device and method for generating an image of a patient
JP6159030B2 (ja) 外科ナビゲーションのための座標変換を決定するコンピュータ実施技術
JP6293495B2 (ja) 動いている器官の標的エリア内のオブジェクトを追跡するための方法および装置
RU2529380C2 (ru) Оценка глубины в реальном времени по монокулярным изображениям эндоскопа
JP7284736B2 (ja) 投影画像における介入器具の位置を決定する装置
US20210267448A1 (en) Jigs for use in medical imaging and methods for using thereof
Gsaxner et al. Markerless image-to-face registration for untethered augmented reality in head and neck surgery
JP2018501839A5 (ja)
US20200129240A1 (en) Systems and methods for intraoperative planning and placement of implants
US20120296202A1 (en) Method and System for Registration of Ultrasound and Physiological Models to X-ray Fluoroscopic Images
US20130281821A1 (en) Intraoperative camera calibration for endoscopic surgery
JP6049202B2 (ja) 画像処理装置、方法、及びプログラム
US20130279780A1 (en) Method and System for Model Based Fusion on Pre-Operative Computed Tomography and Intra-Operative Fluoroscopy Using Transesophageal Echocardiography
JP2012528604A (ja) 距離ベースの位置追跡方法及びシステム
US20170196643A1 (en) Image ntegration and robotic endoscope control in x-ray suite
EP3201876B1 (en) Medical image processing apparatus, medical image processing method
Sun et al. Probe localization for freehand 3D ultrasound by tracking skin features
Luo et al. A discriminative structural similarity measure and its application to video-volume registration for endoscope three-dimensional motion tracking
WO2015045366A1 (ja) 画像位置合わせ装置、方法、およびプログラム、並びに3次元変形モデル生成方法
Yang et al. Vision-based endoscope tracking for 3D ultrasound image-guided surgical navigation
JP2012165838A (ja) 内視鏡挿入支援装置
JP6493885B2 (ja) 画像位置合せ装置、画像位置合せ装置の作動方法および画像位置合せプログラム