JP2017508506A5 - - Google Patents

Download PDF

Info

Publication number
JP2017508506A5
JP2017508506A5 JP2016549122A JP2016549122A JP2017508506A5 JP 2017508506 A5 JP2017508506 A5 JP 2017508506A5 JP 2016549122 A JP2016549122 A JP 2016549122A JP 2016549122 A JP2016549122 A JP 2016549122A JP 2017508506 A5 JP2017508506 A5 JP 2017508506A5
Authority
JP
Japan
Prior art keywords
image
depth
subsurface structure
real
overlay
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016549122A
Other languages
English (en)
Other versions
JP6649260B2 (ja
JP2017508506A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/IB2015/050551 external-priority patent/WO2015118423A1/en
Publication of JP2017508506A publication Critical patent/JP2017508506A/ja
Publication of JP2017508506A5 publication Critical patent/JP2017508506A5/ja
Application granted granted Critical
Publication of JP6649260B2 publication Critical patent/JP6649260B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

  1. 解剖学的標的を可視化するためのシステムであって、
    解剖学的標的のリアルタイム画像を収集するように構成されるイメージング装置と、
    前記イメージング装置からの画像では見えない前記解剖学的標的の表面下構造の画像を含む、術前若しくは術中画像から生成される三次元モデルと、
    前記リアルタイム画像にレジストレーションされ、前記イメージング装置からの画像では見えない前記解剖学的標的の前記表面下構造を表示し、前記表面下構造の深さを示す、オーバーレイを生成するように構成される画像処理モジュールと、
    前記リアルタイム画像と前記オーバーレイを同時に表示するように構成される表示装置と
    を有するシステム。
  2. 前記表面下構造の深さが、前記オーバーレイにおいてレンダリングされる構造の色、テクスチャ若しくはサイズのうち一つによって示される、請求項1に記載のシステム。
  3. 前記表面下構造の深さが、色強度が深さに比例するカラーグラデーションによって示される、請求項1に記載のシステム。
  4. 前記表面下構造の深さが、前記リアルタイム画像におけるツールの位置に対して示される、請求項1に記載のシステム。
  5. 前記表面下構造の深さが、前記深さを示す英数字ラベルを生成する前記オーバーレイの上のカーソルを用いて示される、請求項1に記載のシステム。
  6. 前記表面下構造の深さが、ツール先端付近の成形エリア内に示される、請求項1に記載のシステム。
  7. 前記表面下構造の一つ以上に対応する経路に沿ってスコープをロボット制御でガイドするように構成される画像ガイダンスモジュールをさらに有する、請求項1に記載のシステム。
  8. 前記表面下構造の内部ビューを示す仮想画像をさらに有する、請求項1に記載のシステム。
  9. 解剖学的標的を可視化するためのシステムであって、
    解剖学的標的のリアルタイム画像を収集するように構成されるイメージング装置と、
    術前若しくは術中画像から生成される、前記イメージング装置からの画像では見えない前記解剖学的標的の表面下構造の画像を含む、三次元モデルと、
    前記リアルタイム画像にレジストレーションされ、前記表面下構造を示す、オーバーレイを生成するように構成される画像処理モジュールと、
    前記表面下構造の少なくとも一部の内部ビューを表示するように構成される可視化機能と、
    前記リアルタイム画像、前記オーバーレイ若しくは前記内部ビューのうち少なくとも二つを同時に表示するように構成される表示装置と
    を有するシステム。
  10. 前記表面下構造の深さが、前記構造の色、テクスチャ若しくはサイズのうち一つによって前記オーバーレイにおいて示される、請求項9に記載のシステム。
  11. 前記表面下構造の深さが、色強度が深さに比例するカラーグラデーション、前記リアルタイム画像に表示されるツールへの相対位置、若しくは前記深さを示す英数字ラベルを生成する前記オーバーレイの上のカーソル、のうち少なくとも一つによって示される、請求項9に記載のシステム。
  12. 前記表面下構造の深さがツール先端付近の成形エリア内に示される、請求項9に記載のシステム。
  13. 前記内部ビューが前記表面下構造の三次元フライスルー画像若しくは断面を含む、請求項9に記載のシステム。
  14. 解剖学的標的を可視化するための方法であって、
    リアルタイム画像を収集するためにスコープを用いて解剖学的標的をイメージングするステップと、
    前記リアルタイム画像を前記解剖学的標的の内部ボリュームの三次元モデルとレジストレーションするステップと、
    前記リアルタイム画像にレジストレーションされるオーバーレイとともに前記リアルタイム画像を表示するステップと、
    前記オーバーレイの上に、前記イメージング装置からの画像では見えない前記解剖学的標的の表面下構造を表示し及び前記表面下構造の深さを示すステップと
    を有する方法。
  15. 前記表面下構造の少なくとも一つに対応する経路に沿ってロボットをガイドするステップをさらに有し、前記表面下構造の三次元フライスルー画像を含む内部ビューが表示される、請求項14に記載の方法。
JP2016549122A 2014-02-04 2015-01-26 血管の深さ及び位置の可視化並びに血管断面のロボットガイド可視化 Active JP6649260B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201461935643P 2014-02-04 2014-02-04
US61/935,643 2014-02-04
PCT/IB2015/050551 WO2015118423A1 (en) 2014-02-04 2015-01-26 Visualization of depth and position of blood vessels and robot guided visualization of blood vessel cross section

Publications (3)

Publication Number Publication Date
JP2017508506A JP2017508506A (ja) 2017-03-30
JP2017508506A5 true JP2017508506A5 (ja) 2018-01-25
JP6649260B2 JP6649260B2 (ja) 2020-02-19

Family

ID=52633326

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016549122A Active JP6649260B2 (ja) 2014-02-04 2015-01-26 血管の深さ及び位置の可視化並びに血管断面のロボットガイド可視化

Country Status (5)

Country Link
US (2) US11523874B2 (ja)
EP (1) EP3102141B1 (ja)
JP (1) JP6649260B2 (ja)
CN (1) CN105979900B (ja)
WO (1) WO2015118423A1 (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011078212B4 (de) 2011-06-28 2017-06-29 Scopis Gmbh Verfahren und Vorrichtung zum Darstellen eines Objektes
DE102013211055B3 (de) 2013-06-13 2014-09-18 Scopis Gmbh Adapter zur Aufnahme eines medizintechnischen Geräts sowie eines Lageerfassungssystems
EP3104801B1 (en) * 2014-02-11 2019-03-13 Koninklijke Philips N.V. System for spatial visualization of internal mammary artery during minimally invasive bypass surgery
GB2524955A (en) 2014-04-01 2015-10-14 Scopis Gmbh Method for cell envelope segmentation and visualisation
GB201501157D0 (en) * 2015-01-23 2015-03-11 Scopis Gmbh Instrument guidance system for sinus surgery
JP6243364B2 (ja) * 2015-01-26 2017-12-06 富士フイルム株式会社 内視鏡用のプロセッサ装置、及び作動方法、並びに制御プログラム
JP6392190B2 (ja) * 2015-08-31 2018-09-19 富士フイルム株式会社 画像位置合せ装置、画像位置合せ装置の作動方法およびプログラム
EP3355823A1 (en) 2015-09-28 2018-08-08 Koninklijke Philips N.V. Single-port surgical procedure using image guided articulated robot
CN106446578B (zh) * 2016-10-13 2019-05-17 北京东方惠尔图像技术有限公司 用于植入手术的图像显示方法、装置和系统
US10887581B2 (en) * 2016-11-11 2021-01-05 Disney Enterprises, Inc. Object reconstruction from dense light fields via depth from gradients
WO2018097831A1 (en) 2016-11-24 2018-05-31 Smith Joshua R Light field capture and rendering for head-mounted displays
JPWO2018220930A1 (ja) * 2017-05-30 2019-06-27 オリンパス株式会社 画像処理装置、画像処理システム及び画像処理装置の作動方法
CN107194928B (zh) * 2017-06-15 2019-12-24 华中科技大学同济医学院附属协和医院 一种基于视觉的静脉采血扎针点自动提取方法
EP3727180A1 (en) * 2017-12-20 2020-10-28 Koninklijke Philips N.V. Torsional deployment detection of a vascular therapy device
US20210030510A1 (en) * 2018-02-09 2021-02-04 Sony Corporation Surgery system, image processor, and image processing method
US11911210B2 (en) * 2018-06-15 2024-02-27 Bk Medical Aps Combination ultrasound / optical image for an image-guided procedure
US20200015899A1 (en) 2018-07-16 2020-01-16 Ethicon Llc Surgical visualization with proximity tracking features
US10643398B2 (en) * 2018-07-23 2020-05-05 Microsoft Technology Licensing, Llc Depth ray layer for reduced visual noise
WO2020092262A1 (en) * 2018-10-30 2020-05-07 Intuitive Surgical Operations, Inc. Anatomical structure visualization systems and methods
US11172184B2 (en) * 2018-12-13 2021-11-09 Covidien Lp Systems and methods for imaging a patient
IT201800011117A1 (it) * 2018-12-14 2020-06-14 Marco Farronato Sistema e metodo per la visualizzazione di un sito anatomico in realta' aumentata
US11625825B2 (en) * 2019-01-30 2023-04-11 Covidien Lp Method for displaying tumor location within endoscopic images
CN110051435A (zh) * 2019-04-25 2019-07-26 李汉忠 经尿道前列腺手术机器人切除系统
EP3975847A1 (en) * 2019-05-31 2022-04-06 Intuitive Surgical Operations, Inc. Systems and methods for integrating imagery captured by different imaging modalities into composite imagery of a surgical space
CN114126527A (zh) * 2019-05-31 2022-03-01 直观外科手术操作公司 复合医学成像系统和方法
US11832996B2 (en) 2019-12-30 2023-12-05 Cilag Gmbh International Analyzing surgical trends by a surgical system
US11759283B2 (en) 2019-12-30 2023-09-19 Cilag Gmbh International Surgical systems for generating three dimensional constructs of anatomical organs and coupling identified anatomical structures thereto
US11284963B2 (en) 2019-12-30 2022-03-29 Cilag Gmbh International Method of using imaging devices in surgery
US11648060B2 (en) 2019-12-30 2023-05-16 Cilag Gmbh International Surgical system for overlaying surgical instrument data onto a virtual three dimensional construct of an organ
US11776144B2 (en) 2019-12-30 2023-10-03 Cilag Gmbh International System and method for determining, adjusting, and managing resection margin about a subject tissue
US11219501B2 (en) 2019-12-30 2022-01-11 Cilag Gmbh International Visualization systems using structured light
US11896442B2 (en) 2019-12-30 2024-02-13 Cilag Gmbh International Surgical systems for proposing and corroborating organ portion removals
US11744667B2 (en) 2019-12-30 2023-09-05 Cilag Gmbh International Adaptive visualization by a surgical system
US20220079462A1 (en) * 2020-09-16 2022-03-17 Biosense Webster (Israel) Ltd. Systems and methods for cardiac chamber visualization
CN112509410A (zh) * 2020-12-08 2021-03-16 中日友好医院(中日友好临床医学研究所) 一种基于虚拟现实的髋关节镜手术辅助教学系统
US11295460B1 (en) 2021-01-04 2022-04-05 Proprio, Inc. Methods and systems for registering preoperative image data to intraoperative image data of a scene, such as a surgical scene
US20230053189A1 (en) * 2021-08-11 2023-02-16 Terumo Cardiovascular Systems Corporation Augmented-reality endoscopic vessel harvesting
EP4231246A1 (en) * 2022-02-16 2023-08-23 Siemens Healthcare GmbH Technique for optical guidance during a surgical procedure

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU3573900A (en) * 1999-03-31 2000-10-16 Ultra-Guide Ltd. Apparatus and methods for medical diagnostic and for medical guided interventions and therapy
US7493154B2 (en) 2002-10-23 2009-02-17 Medtronic, Inc. Methods and apparatus for locating body vessels and occlusions in body vessels
US8377082B2 (en) 2003-01-14 2013-02-19 Medtronic, Inc. Methods and apparatus for making precise incisions in body vessels
US20080009895A1 (en) 2006-07-05 2008-01-10 Pokomey James L Vessel cutting tool
US8672836B2 (en) * 2007-01-31 2014-03-18 The Penn State Research Foundation Method and apparatus for continuous guidance of endoscopy
US20090156895A1 (en) * 2007-01-31 2009-06-18 The Penn State Research Foundation Precise endoscopic planning and visualization
EP2348954A1 (en) 2008-10-20 2011-08-03 Koninklijke Philips Electronics N.V. Image-based localization method and system
EP2346398B1 (en) * 2008-10-23 2013-08-14 Koninklijke Philips Electronics N.V. Cardiac- and/or respiratory-gated image acquisition system for virtual anatomy enriched real-time 2d imaging in interventional radiofrequency ablation or pacemaker placement procedures
WO2010081094A2 (en) * 2009-01-09 2010-07-15 The Johns Hopkins University A system for registration and information overlay on deformable surfaces from video data
EP2377457B1 (en) 2010-02-22 2016-07-27 Olympus Corporation Medical apparatus
JP5457247B2 (ja) * 2010-03-26 2014-04-02 富士フイルム株式会社 電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法
JP5486432B2 (ja) * 2010-07-28 2014-05-07 富士フイルム株式会社 画像処理装置、その作動方法およびプログラム
JP5616304B2 (ja) 2010-08-24 2014-10-29 富士フイルム株式会社 電子内視鏡システム及び電子内視鏡システムの作動方法
CN103108602B (zh) * 2010-09-15 2015-09-30 皇家飞利浦电子股份有限公司 从血管树图像对内窥镜的机器人控制
JP5657467B2 (ja) * 2011-05-13 2015-01-21 オリンパスメディカルシステムズ株式会社 医療用画像表示システム
WO2012156873A1 (en) 2011-05-18 2012-11-22 Koninklijke Philips Electronics N.V. Endoscope segmentation correction for 3d-2d image overlay
WO2012172474A1 (en) * 2011-06-17 2012-12-20 Koninklijke Philips Electronics N.V. System and method for guided injection during endoscopic surgery
WO2013061225A1 (en) 2011-10-26 2013-05-02 Koninklijke Philips Electronics N.V. Endoscopic registration of vessel tree images
EP2793680A2 (en) 2011-12-21 2014-10-29 Koninklijke Philips N.V. Overlay and motion compensation of structures from volumetric modalities onto video of an uncalibrated endoscope
EP2867864A1 (en) 2012-06-28 2015-05-06 Koninklijke Philips N.V. Overlay and registration of preoperative data on live video using a portable device
JP6265627B2 (ja) * 2013-05-23 2018-01-24 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
KR101578770B1 (ko) * 2013-11-21 2015-12-18 삼성전자주식회사 의료 영상 처리 장치 및 그에 따른 의료 영상 처리 방법

Similar Documents

Publication Publication Date Title
JP2017508506A5 (ja)
JP2017056212A5 (ja)
WO2014153139A3 (en) Systems and methods for displaying a three-dimensional model from a photogrammetric scan
JP2015228954A5 (ja)
RU2015154279A (ru) Ориентация и визуализация виртуального объекта
JP2015507514A5 (ja)
WO2011122394A1 (ja) カーソルの表示方法およびカーソルの表示プログラム
JP2016024273A5 (ja)
EP2922029A3 (en) System for visualizing a three dimensional (3D) model as printed from a 3D printer
JP2016052608A5 (ja)
JP2011185872A5 (ja)
JP2018142164A5 (ja) 画像処理装置、情報処理方法及びプログラム
NZ745790A (en) Direct light compensation technique for augmented reality system
JP2014106543A5 (ja)
JP2016107945A5 (ja)
EP2509046A3 (en) Method and Device for Displaying an Indication of the Quality of the Three-Dimensional Data for a Surface of a Viewed Object
EP3136204A3 (en) Image processing device and image processing method
JP2013150680A5 (ja)
JP2018512913A5 (ja)
WO2012136669A9 (en) Measurement system for medical images
JP2014110883A5 (ja)
JP2013097699A5 (ja)
EP2631696A3 (en) Image generator
JP2017521112A5 (ja)
JP2009116856A5 (ja)