JP2019511285A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2019511285A5 JP2019511285A5 JP2018547907A JP2018547907A JP2019511285A5 JP 2019511285 A5 JP2019511285 A5 JP 2019511285A5 JP 2018547907 A JP2018547907 A JP 2018547907A JP 2018547907 A JP2018547907 A JP 2018547907A JP 2019511285 A5 JP2019511285 A5 JP 2019511285A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- imaging modality
- pose
- radiopaque
- combination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 claims 21
- 239000000203 mixture Substances 0.000 claims 8
- 239000003550 marker Substances 0.000 claims 3
- 210000004204 Blood Vessels Anatomy 0.000 claims 1
- 210000000188 Diaphragm Anatomy 0.000 claims 1
- 210000004279 Orbit Anatomy 0.000 claims 1
- 210000000614 Ribs Anatomy 0.000 claims 1
- 230000003190 augmentative Effects 0.000 claims 1
- 230000002708 enhancing Effects 0.000 claims 1
- 238000004805 robotic Methods 0.000 claims 1
Claims (6)
- 第1の画像化モダリティから第1の画像を取得するステップと、
前記第1の画像化モダリティから得る前記第1の画像から得る少なくとも1つの要素を抽出するステップであって、
ここで前記少なくとも1つの要素は、気道、血管、体腔、またはそれらの任意の組み合わせを含む、ステップと、
第2の画像化モダリティから、少なくとも(i)第2の画像化モダリティの第1のポーズにおける放射線不透過性機器の第1の画像、および(ii)第2の画像化モダリティの第2のポーズにおける前記放射線不透過性機器の第2の画像を取得するステップであって、
ここで前記放射線不透過性機器は、患者の体腔にある、ステップと、
少なくとも2つの拡張気管支造影図を生成するステップであって、
ここで第1の拡張気管支造影図は、前記第1のポーズにおける前記第2の画像化モダリティの前記第1の画像に対応し、
第2の拡張気管支造影図は、前記第2のポーズにおける前記第2の画像化モダリティの前記第2の画像に対応する、ステップと、
(i)前記第2の画像化モダリティの前記第1のポーズと、
(ii)前記第2の画像化モダリティの前記第2のポーズと
の間の相互幾何学的制約を判定するステップと、
前記第2の画像化モダリティの前記第1のポーズおよび前記第2の画像化モダリティの前記第2のポーズを推定するステップであって、
ここで前記推定は、
(i)前記第1の拡張気管支造影図、
(ii)前記第2の拡張気管支造影図、および
(iii)前記少なくとも1つの要素
を用いて実行され、
前記第2の画像化モダリティの前記推定された第1のポーズおよび前記第2の画像化モダリティの前記推定された第2のポーズは、前記判定された相互幾何学的制約を満たす、ステップと、
第3の画像を生成するステップであって、ここで前記第3の画像は、対象領域を強調する前記第2の画像化モダリティから導かれた拡張画像であり、
前記対象領域は、前記推定された第1のポーズおよび前記推定された第2のポーズから得る投影データから判定される、ステップと
を含む方法。 - 前記第1の画像化モダリティからの前記第1の画像からの追加の要素があり、第2の画像化モダリティの第2の画像は、肋骨、椎骨、隔膜、またはそれらの任意の組み合わせをさらに含む、請求項1に記載の方法。
- 前記相互幾何学的制約が、
a.前記放射線不透過性機器の前記第1の画像と、前記放射線不透過性機器の前記第2の画像とを比較することによって、(i)前記第1のポーズと(ii)前記第2のポーズとの間の差を推定することであって、
ここで前記推定することは、分度器、加速度計、ジャイロスコープ、またはそれらの任意の組み合わせを含む装置を使用して実行され、前記装置は、前記第2の画像化モダリティに取り付けられる、推定すること、
b.相対ポーズ変化を推定するために複数の画像特徴を抽出することであって、
ここで前記複数の画像特徴は、解剖学的要素、非解剖学的要素、またはそれらの任意の組み合わせを含み、
前記画像特徴は、患者に取り付けられたパッチ、前記第2の画像化モダリティの視野に配置された放射線不透過性マーカー、またはそれらの任意の組み合わせを含み、
前記画像特徴は、前記放射線不透過性機器の前記第1の画像および前記放射線不透過性機器の前記第2の画像で可視である、抽出することと、
c.少なくとも1つのカメラを使用することによって、(i)前記第1のポーズと(ii)前記第2のポーズとの間の差を推定することであって、
ここで前記カメラは、ビデオカメラ、赤外線カメラ、深度カメラ、またはそれらの任意の組み合わせを備え、
前記カメラは固定位置にあり、
前記カメラは、少なくとも1つの特徴を追跡するように構成され、
ここで前記少なくとも1つの特徴は、前記患者に取り付けられたマーカー、前記第2の画像化モダリティに取り付けられたマーカー、またはそれらの任意の組み合わせを含み、
前記少なくとも1つの特徴を追跡する、推定することと、
d.またはそれらの任意の組合せによって生成される、請求項1に記載の方法。 - 軌道を特定し、
さらなる幾何学的制約として前記軌道を使用する
ために前記放射線不透過性機器を追跡するステップであって、
ここで前記放射線不透過性機器は、内視鏡、気管支内器具、またはロボットのアームを備える、ステップ、
をさらに含む、請求項1に記載の方法。 - 前記第1の画像化モダリティから得る前記第1の画像が術前画像である、請求項1に記載の方法。
- 前記第2の画像化モダリティから得る前記放射線不透過性機器の前記少なくとも1つの画像は、術中画像である、請求項1に記載の方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662306502P | 2016-03-10 | 2016-03-10 | |
US62/306,502 | 2016-03-10 | ||
US201662407720P | 2016-10-13 | 2016-10-13 | |
US62/407,720 | 2016-10-13 | ||
PCT/IB2017/000276 WO2017153839A1 (en) | 2016-03-10 | 2017-03-10 | Methods and systems for using multi view pose estimation |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019511285A JP2019511285A (ja) | 2019-04-25 |
JP2019511285A5 true JP2019511285A5 (ja) | 2020-04-23 |
JP6976266B2 JP6976266B2 (ja) | 2021-12-08 |
Family
ID=59787775
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018547907A Active JP6976266B2 (ja) | 2016-03-10 | 2017-03-10 | 多視点ポーズ推定を使用するための方法およびシステム |
Country Status (7)
Country | Link |
---|---|
US (2) | US10674970B2 (ja) |
EP (1) | EP3426134B1 (ja) |
JP (1) | JP6976266B2 (ja) |
CN (1) | CN109069009B (ja) |
AU (3) | AU2017231889A1 (ja) |
CA (1) | CA3017091A1 (ja) |
WO (1) | WO2017153839A1 (ja) |
Families Citing this family (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9129359B2 (en) | 2006-11-10 | 2015-09-08 | Covidien Lp | Adaptive navigation technique for navigating a catheter through a body channel or cavity |
WO2009147671A1 (en) | 2008-06-03 | 2009-12-10 | Superdimension Ltd. | Feature-based registration method |
US8218847B2 (en) | 2008-06-06 | 2012-07-10 | Superdimension, Ltd. | Hybrid registration method |
US9633431B2 (en) | 2014-07-02 | 2017-04-25 | Covidien Lp | Fluoroscopic pose estimation |
US9603668B2 (en) | 2014-07-02 | 2017-03-28 | Covidien Lp | Dynamic 3D lung map view for tool navigation inside the lung |
CN106572834B (zh) | 2014-07-02 | 2019-12-03 | 柯惠有限合伙公司 | 对准ct |
US9986983B2 (en) | 2014-10-31 | 2018-06-05 | Covidien Lp | Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same |
US10716525B2 (en) | 2015-08-06 | 2020-07-21 | Covidien Lp | System and method for navigating to target and performing procedure on target utilizing fluoroscopic-based local three dimensional volume reconstruction |
US10702226B2 (en) | 2015-08-06 | 2020-07-07 | Covidien Lp | System and method for local three dimensional volume reconstruction using a standard fluoroscope |
US10674982B2 (en) | 2015-08-06 | 2020-06-09 | Covidien Lp | System and method for local three dimensional volume reconstruction using a standard fluoroscope |
CN110248585B (zh) | 2016-10-07 | 2022-03-08 | 博迪维仁医疗有限公司 | 在介入和外科手术中使用的装置及其使用方法 |
WO2018078445A2 (en) * | 2016-10-31 | 2018-05-03 | Dorian Averbuch | Jigs for use in medical imaging and methods for using thereof |
US10235771B2 (en) * | 2016-11-11 | 2019-03-19 | Qualcomm Incorporated | Methods and systems of performing object pose estimation |
US11793579B2 (en) | 2017-02-22 | 2023-10-24 | Covidien Lp | Integration of multiple data sources for localization and navigation |
US10699448B2 (en) | 2017-06-29 | 2020-06-30 | Covidien Lp | System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data |
US10966720B2 (en) | 2017-09-01 | 2021-04-06 | RevMedica, Inc. | Surgical stapler with removable power pack |
US11331099B2 (en) | 2017-09-01 | 2022-05-17 | Rev Medica, Inc. | Surgical stapler with removable power pack and interchangeable battery pack |
WO2019075074A1 (en) | 2017-10-10 | 2019-04-18 | Covidien Lp | SYSTEM AND METHOD FOR IDENTIFICATION AND MARKING OF A TARGET IN A THREE-DIMENSIONAL FLUOROSCOPIC RECONSTRUCTION |
US12004849B2 (en) | 2017-12-11 | 2024-06-11 | Covidien Lp | Systems, methods, and computer-readable media for non-rigid registration of electromagnetic navigation space to CT volume |
US10905498B2 (en) | 2018-02-08 | 2021-02-02 | Covidien Lp | System and method for catheter detection in fluoroscopic images and updating displayed position of catheter |
US10893842B2 (en) | 2018-02-08 | 2021-01-19 | Covidien Lp | System and method for pose estimation of an imaging device and for determining the location of a medical device with respect to a target |
US10930064B2 (en) | 2018-02-08 | 2021-02-23 | Covidien Lp | Imaging reconstruction system and method |
US11464576B2 (en) | 2018-02-09 | 2022-10-11 | Covidien Lp | System and method for displaying an alignment CT |
US20200405397A1 (en) * | 2018-02-26 | 2020-12-31 | Cornell University | Augmented reality guidance system for cardiac interventional surgery |
US11705238B2 (en) | 2018-07-26 | 2023-07-18 | Covidien Lp | Systems and methods for providing assistance during surgery |
US11071591B2 (en) | 2018-07-26 | 2021-07-27 | Covidien Lp | Modeling a collapsed lung using CT data |
AU2019322080A1 (en) * | 2018-08-13 | 2021-03-11 | Body Vision Medical Ltd. | Methods and systems for multi view pose estimation using digital computational tomography |
US11944388B2 (en) | 2018-09-28 | 2024-04-02 | Covidien Lp | Systems and methods for magnetic interference correction |
US11877806B2 (en) | 2018-12-06 | 2024-01-23 | Covidien Lp | Deformable registration of computer-generated airway models to airway trees |
US11045075B2 (en) | 2018-12-10 | 2021-06-29 | Covidien Lp | System and method for generating a three-dimensional model of a surgical site |
US11617493B2 (en) | 2018-12-13 | 2023-04-04 | Covidien Lp | Thoracic imaging, distance measuring, surgical awareness, and notification system and method |
US11801113B2 (en) | 2018-12-13 | 2023-10-31 | Covidien Lp | Thoracic imaging, distance measuring, and notification system and method |
US11357593B2 (en) | 2019-01-10 | 2022-06-14 | Covidien Lp | Endoscopic imaging with augmented parallax |
DE102019200786A1 (de) * | 2019-01-23 | 2020-07-23 | Siemens Healthcare Gmbh | Bildgebendes medizinisches Gerät, Verfahren zum Unterstützen von medizinischem Personal, Computerprogrammprodukt und computerlesbares Speichermedium |
US11625825B2 (en) | 2019-01-30 | 2023-04-11 | Covidien Lp | Method for displaying tumor location within endoscopic images |
US11564751B2 (en) | 2019-02-01 | 2023-01-31 | Covidien Lp | Systems and methods for visualizing navigation of medical devices relative to targets |
US11925333B2 (en) | 2019-02-01 | 2024-03-12 | Covidien Lp | System for fluoroscopic tracking of a catheter to update the relative position of a target and the catheter in a 3D model of a luminal network |
US11744643B2 (en) | 2019-02-04 | 2023-09-05 | Covidien Lp | Systems and methods facilitating pre-operative prediction of post-operative tissue function |
US11918406B2 (en) | 2019-02-15 | 2024-03-05 | Koninklijke Philips N.V. | Marker registration correction by virtual model manipulation |
JP2022520933A (ja) | 2019-02-15 | 2022-04-04 | コーニンクレッカ フィリップス エヌ ヴェ | X線較正のためのx線リップルマーカ |
US11931198B2 (en) | 2019-02-15 | 2024-03-19 | Koninklijke Philips N.V. | X-ray calibration for display overlays onto X-ray images |
US11819285B2 (en) | 2019-04-05 | 2023-11-21 | Covidien Lp | Magnetic interference detection systems and methods |
EP3998960A4 (en) | 2019-07-19 | 2022-12-14 | Revmedica, Inc. | SURGICAL STAPLER WITH REMOVABLE POWER SUPPLY |
US11269173B2 (en) | 2019-08-19 | 2022-03-08 | Covidien Lp | Systems and methods for displaying medical video images and/or medical 3D models |
US12059281B2 (en) | 2019-08-19 | 2024-08-13 | Covidien Lp | Systems and methods of fluoro-CT imaging for initial registration |
US11931111B2 (en) | 2019-09-09 | 2024-03-19 | Covidien Lp | Systems and methods for providing surgical guidance |
US11864935B2 (en) | 2019-09-09 | 2024-01-09 | Covidien Lp | Systems and methods for pose estimation of a fluoroscopic imaging device and for three-dimensional imaging of body structures |
US11627924B2 (en) | 2019-09-24 | 2023-04-18 | Covidien Lp | Systems and methods for image-guided navigation of percutaneously-inserted devices |
US11847730B2 (en) | 2020-01-24 | 2023-12-19 | Covidien Lp | Orientation detection in fluoroscopic images |
JP2023520618A (ja) * | 2020-01-24 | 2023-05-18 | ボディ・ビジョン・メディカル・リミテッド | 多視点姿勢推定を使用するための方法及びシステム |
US11380060B2 (en) | 2020-01-24 | 2022-07-05 | Covidien Lp | System and method for linking a segmentation graph to volumetric data |
CN111513740B (zh) * | 2020-04-13 | 2023-09-12 | 北京东软医疗设备有限公司 | 血管造影机的控制方法、装置、电子设备、存储介质 |
US12064191B2 (en) | 2020-06-03 | 2024-08-20 | Covidien Lp | Surgical tool navigation using sensor fusion |
US11950950B2 (en) | 2020-07-24 | 2024-04-09 | Covidien Lp | Zoom detection and fluoroscope movement detection for target overlay |
CN112419415B (zh) * | 2020-12-08 | 2022-06-17 | 浙江德尚韵兴医疗科技有限公司 | 一种基于crs曲线拟合实现位姿规划的超声扫查方法 |
US11950951B2 (en) | 2021-01-29 | 2024-04-09 | Covidien Lp | Systems and methods for C-arm fluoroscope camera pose refinement with secondary movement compensation |
US11816768B1 (en) | 2022-12-06 | 2023-11-14 | Body Vision Medical Ltd. | System and method for medical imaging |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4674948B2 (ja) * | 2000-09-29 | 2011-04-20 | オリンパス株式会社 | 手術ナビゲーション装置および手術ナビゲーション装置の作動方法 |
JP2002119507A (ja) * | 2000-10-17 | 2002-04-23 | Toshiba Corp | 医用装置および医用画像収集表示方法 |
JP4334839B2 (ja) * | 2002-09-12 | 2009-09-30 | オリンパス株式会社 | 内視鏡観測装置 |
US7660623B2 (en) * | 2003-01-30 | 2010-02-09 | Medtronic Navigation, Inc. | Six degree of freedom alignment display for medical procedures |
US7949386B2 (en) * | 2006-03-21 | 2011-05-24 | A2 Surgical | Computer-aided osteoplasty surgery system |
US7885441B2 (en) * | 2006-10-11 | 2011-02-08 | General Electric Company | Systems and methods for implant virtual review |
US20080119712A1 (en) | 2006-11-20 | 2008-05-22 | General Electric Company | Systems and Methods for Automated Image Registration |
JP2010522597A (ja) * | 2007-03-26 | 2010-07-08 | スーパーディメンション, リミテッド | Ct強化型x線透視 |
CN101301192B (zh) * | 2007-05-10 | 2010-06-23 | 中国科学院自动化研究所 | 一种多模态自发荧光断层分子影像仪器及重建方法 |
JP2009225933A (ja) * | 2008-03-21 | 2009-10-08 | Fujifilm Corp | カプセル内視鏡システム及びカプセル内視鏡の動作制御方法 |
JP2010200894A (ja) * | 2009-03-02 | 2010-09-16 | Tadashi Ukimura | 手術支援システム及び手術ロボットシステム |
US20110301447A1 (en) * | 2010-06-07 | 2011-12-08 | Sti Medical Systems, Llc | Versatile video interpretation, visualization, and management system |
US20130303887A1 (en) * | 2010-08-20 | 2013-11-14 | Veran Medical Technologies, Inc. | Apparatus and method for four dimensional soft tissue navigation |
US20120203067A1 (en) * | 2011-02-04 | 2012-08-09 | The Penn State Research Foundation | Method and device for determining the location of an endoscope |
CN203724652U (zh) * | 2011-03-15 | 2014-07-23 | 迈克尔·格特纳 | 用于治疗通向肾脏血管周围神经的系统 |
CN102254339A (zh) * | 2011-03-28 | 2011-11-23 | 深圳市蓝韵实业有限公司 | 一种实时医学超声三维成像方法 |
US11064955B2 (en) * | 2011-03-31 | 2021-07-20 | Koninklijke Philips N.V. | Shape sensing assisted medical procedure |
US9265468B2 (en) * | 2011-05-11 | 2016-02-23 | Broncus Medical, Inc. | Fluoroscopy-based surgical device tracking method |
US9105207B2 (en) * | 2012-05-02 | 2015-08-11 | Empire Technology Development Llc | Four dimensional image registration using dynamical model for augmented reality in medical applications |
CN103040430A (zh) * | 2013-01-24 | 2013-04-17 | 北京理工大学 | 一种三维内窥镜装置 |
WO2014141968A1 (ja) * | 2013-03-12 | 2014-09-18 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
US8880151B1 (en) * | 2013-11-27 | 2014-11-04 | Clear Guide Medical, Llc | Surgical needle for a surgical system with optical recognition |
JP6509906B2 (ja) * | 2014-01-06 | 2019-05-08 | ボディ・ビジョン・メディカル・リミテッドBody Vision Medical Ltd. | 医療機器の作動方法 |
US11188285B2 (en) * | 2014-07-02 | 2021-11-30 | Covidien Lp | Intelligent display |
US9986983B2 (en) * | 2014-10-31 | 2018-06-05 | Covidien Lp | Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same |
CN110248618B (zh) * | 2016-09-09 | 2024-01-09 | 莫比乌斯成像公司 | 用于在计算机辅助手术中显示患者数据的方法及系统 |
US10796481B2 (en) * | 2018-04-20 | 2020-10-06 | Siemens Healthcare Gmbh | Visualization of lung fissures in medical imaging |
-
2017
- 2017-03-10 EP EP17762598.5A patent/EP3426134B1/en active Active
- 2017-03-10 WO PCT/IB2017/000276 patent/WO2017153839A1/en active Application Filing
- 2017-03-10 JP JP2018547907A patent/JP6976266B2/ja active Active
- 2017-03-10 US US15/456,130 patent/US10674970B2/en active Active
- 2017-03-10 CN CN201780029166.8A patent/CN109069009B/zh active Active
- 2017-03-10 AU AU2017231889A patent/AU2017231889A1/en not_active Abandoned
- 2017-03-10 CA CA3017091A patent/CA3017091A1/en active Pending
-
2020
- 2020-06-08 US US16/895,022 patent/US11350893B2/en active Active
-
2022
- 2022-03-11 AU AU2022201732A patent/AU2022201732A1/en not_active Abandoned
-
2024
- 2024-07-10 AU AU2024204763A patent/AU2024204763A1/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019511285A5 (ja) | ||
JP6976266B2 (ja) | 多視点ポーズ推定を使用するための方法およびシステム | |
JP2023181259A (ja) | デジタル・コンピュータ・トモグラフィを用いた多視点姿勢推定のための方法及びシステム | |
US11033188B2 (en) | Imaging device and method for generating an image of a patient | |
JP6159030B2 (ja) | 外科ナビゲーションのための座標変換を決定するコンピュータ実施技術 | |
JP6293495B2 (ja) | 動いている器官の標的エリア内のオブジェクトを追跡するための方法および装置 | |
RU2529380C2 (ru) | Оценка глубины в реальном времени по монокулярным изображениям эндоскопа | |
JP7284736B2 (ja) | 投影画像における介入器具の位置を決定する装置 | |
US20210267448A1 (en) | Jigs for use in medical imaging and methods for using thereof | |
Gsaxner et al. | Markerless image-to-face registration for untethered augmented reality in head and neck surgery | |
JP2018501839A5 (ja) | ||
US20200129240A1 (en) | Systems and methods for intraoperative planning and placement of implants | |
US20120296202A1 (en) | Method and System for Registration of Ultrasound and Physiological Models to X-ray Fluoroscopic Images | |
US20130281821A1 (en) | Intraoperative camera calibration for endoscopic surgery | |
JP6049202B2 (ja) | 画像処理装置、方法、及びプログラム | |
US20130279780A1 (en) | Method and System for Model Based Fusion on Pre-Operative Computed Tomography and Intra-Operative Fluoroscopy Using Transesophageal Echocardiography | |
JP2012528604A (ja) | 距離ベースの位置追跡方法及びシステム | |
US20170196643A1 (en) | Image ntegration and robotic endoscope control in x-ray suite | |
EP3201876B1 (en) | Medical image processing apparatus, medical image processing method | |
Sun et al. | Probe localization for freehand 3D ultrasound by tracking skin features | |
Luo et al. | A discriminative structural similarity measure and its application to video-volume registration for endoscope three-dimensional motion tracking | |
WO2015045366A1 (ja) | 画像位置合わせ装置、方法、およびプログラム、並びに3次元変形モデル生成方法 | |
Yang et al. | Vision-based endoscope tracking for 3D ultrasound image-guided surgical navigation | |
JP2012165838A (ja) | 内視鏡挿入支援装置 | |
JP6493885B2 (ja) | 画像位置合せ装置、画像位置合せ装置の作動方法および画像位置合せプログラム |