JP2016511049A5 - - Google Patents

Download PDF

Info

Publication number
JP2016511049A5
JP2016511049A5 JP2015562379A JP2015562379A JP2016511049A5 JP 2016511049 A5 JP2016511049 A5 JP 2016511049A5 JP 2015562379 A JP2015562379 A JP 2015562379A JP 2015562379 A JP2015562379 A JP 2015562379A JP 2016511049 A5 JP2016511049 A5 JP 2016511049A5
Authority
JP
Japan
Prior art keywords
video
exploration
endoscope
medical system
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015562379A
Other languages
English (en)
Other versions
JP2016511049A (ja
JP6348130B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/IB2014/000838 external-priority patent/WO2014140813A1/en
Publication of JP2016511049A publication Critical patent/JP2016511049A/ja
Publication of JP2016511049A5 publication Critical patent/JP2016511049A5/ja
Application granted granted Critical
Publication of JP6348130B2 publication Critical patent/JP6348130B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (8)

  1. 特定の場所が内視鏡によって既に探査されている第1または「基準探査」の後の少なくとも1つの「新しい探査」中に、前記特定の場所に可撓性内視鏡の手動または自動の再位置決めを可能にする医療システムにして、
    i)撮像装置(3)が少なくとも装備される可撓性内視鏡(2)、および場合によっては少なくとも1つのツールまたは器具と、
    ii)表示手段(3’)、および前記内視鏡(3)と関連した移動制御手段(3″)と、
    iii)電磁追跡デバイスまたは光ファイバー追跡デバイスなどの、内視鏡(2)の先端(2’)の位置および向きを提供する追跡デバイスまたはシステム(4)と、
    iiii)コンピュータ手段(5)および関連した格納手段と
    を備え、
    内視鏡(2)の前端または先端(2’)には、電磁センサ(4’)または同様な追跡デバイスが設けられ、電磁センサ(4’)または同様な追跡デバイスが、可撓性内視鏡(2)の先端(2’)にはり付けられまたは取り付けられ、対応する追跡システム(4)が、3D位置の追跡、およびまた前記先端の向きの追跡を可能にする、医療システム(1)であって、
    前記格納手段が、対応する内視鏡先端(2’)の姿勢と共に、その「基準探査」中に可撓性内視鏡を通して取得されるビデオを格納するのに適応しており、前記医療システム(1)が、「新しい探査」可撓性内視鏡ビデオ、および格納された「基準探査」ビデオを1つまたは複数のスクリーン上で、並行して、または、2つの異なるウィンドウ内で表示することができる手段(5、3)をさらに備え、「基準探査」と「新しい探査」との間の内視鏡先端(2″)のライブの向き誤差を計算するように、かつ、コンピュータ手段(5)によって行われ、前述の向き誤差を補償するように画像を回転させ、被験者の身体内で内視鏡(2)の現在の場所に空間的に合致させる「基準探査」の対応する画像を選択する、適応同期アルゴリズムを使用して、人間のユーザによって手動でまたはロボットシステムによって自動的に、ライブの「新しい探査」と格納された「基準探査」との間の同期処理を実現することによって「基準探査」中に既に探査された特定の場所において可撓性内視鏡(2)の再位置決めを行なうように、捕捉されたビデオ画像フレームの各々が、同期して記録される内視鏡先端の姿勢と関連することを特徴とする、医療システム。
  2. 使用される追跡システム(4)または他の追跡システムによってその位置が記録され得る少なくとも2つのマーカー(6)をまた備え、これが、被験者の所与の解剖学的場所に配置されることができ、前記場所が、探査される管状器官に依存し、好ましくは被験者が姿勢を変え得るときに顕著な変形または変位を受けず、前記マーカー(6)が、以前のおよびその後の探査において基準点を与えることを特徴とする、請求項1に記載の医療システム。
  3. 第1または基準探査とその後のまたは新しい探査の両方の間に視認可能な類似の特徴の抽出およびマッチングを行なう、リアルタイム内視鏡ビデオ解析を実現する手段を備えることを特徴とする、請求項1または2に記載の医療システム。
  4. 探査される被験者の身体において特定の対象点を示す第1または基準探査可撓性内視鏡ビデオの1つまたは複数の画像の対話式の仮想タグ付けを行なうために、マウス、パッド、トラックボール、ジョイスティック、または光トラッキングによってなど、ビデオの画素または画素のグループを正確に選択することを可能にするヒューマンインターフェース装置を備え、この仮想タグ付けが、ビデオの任意の選択された画像にタグを付加することを可能にする特定の「基準探査」ビデオ読み出しによって実現されることを特徴とする、請求項1から3のいずれか一項に記載の医療システム。
  5. 探査される被験者の身体における解剖学的、病理学的、または外科的な特定の特徴などの、視認可能な対象点を抽出し、前記特定の対象点を示す「基準探査」可撓性内視鏡ビデオの1つまたは複数の画像に自動仮想タグ付けを実現することができる、ビデオ解析アルゴリズム手段を備えることを特徴とする、請求項1から3のいずれか一項に記載の医療システム。
  6. 基準探査ビデオの画像にタグ付けされる探査される被験者の身体の同じ特定の対象点を、その後の「新しい探査ビデオ」で位置特定させ、これらの仮想タグの重ね合わせによって、同期化されたその後の「新しい探査」ビデオの同じ場所にこれを付加するために、その後の「新しい探査ビデオ」の解析を実現することができる手段をまた備えることを特徴とする、請求項4または請求項5に記載の医療システム。
  7. その後の探査中に時刻tにおけるビデオ画像で管腔位置を解析する画像処理を行い、同様な管腔位置によって「新しい探査」中にその後のライブ位置に近い位置と関連する「基準探査」から画像を選択する手段を備えることを特徴とする、請求項1から6のいずれか一項に記載の医療システム。
  8. 解剖学的および/または病理学的な構造の3D身体モデルの仮想レンダリングを使った拡張現実技術を用いて、特定の対象点を示す仮想タグによって向上されるかまたはされない、2つの同期化された可撓性内視鏡ビデオを融合することができる手段を備え、この3Dモデルが、被験者の身体の「新しい探査」前に実現される術前医用画像から抽出されることを特徴とする、請求項1から7のいずれか一項に記載の医療システム。
JP2015562379A 2013-03-11 2014-03-11 デュアルデータ同期を用いた解剖学的部位の位置の再特定 Active JP6348130B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361775930P 2013-03-11 2013-03-11
US61/775,930 2013-03-11
PCT/IB2014/000838 WO2014140813A1 (en) 2013-03-11 2014-03-11 Anatomical site relocalisation using dual data synchronisation

Publications (3)

Publication Number Publication Date
JP2016511049A JP2016511049A (ja) 2016-04-14
JP2016511049A5 true JP2016511049A5 (ja) 2017-04-06
JP6348130B2 JP6348130B2 (ja) 2018-06-27

Family

ID=50943347

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015562379A Active JP6348130B2 (ja) 2013-03-11 2014-03-11 デュアルデータ同期を用いた解剖学的部位の位置の再特定

Country Status (4)

Country Link
US (1) US10736497B2 (ja)
EP (1) EP2996557B1 (ja)
JP (1) JP6348130B2 (ja)
WO (1) WO2014140813A1 (ja)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6348130B2 (ja) * 2013-03-11 2018-06-27 アンスティテュ・オスピタロ−ユニベルシテール・ドゥ・シルルジー・ミニ−アンバシブ・ギデ・パル・リマージュ デュアルデータ同期を用いた解剖学的部位の位置の再特定
CN105530852B (zh) * 2013-09-27 2017-08-25 奥林巴斯株式会社 内窥镜系统
WO2015126457A1 (en) * 2014-02-19 2015-08-27 Indiana University Research And Technology Corporation Tracking real-time assessment of quality monitoring in endoscopy
US11033182B2 (en) 2014-02-21 2021-06-15 3Dintegrated Aps Set comprising a surgical instrument
US10013808B2 (en) 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
US9905000B2 (en) * 2015-02-19 2018-02-27 Sony Corporation Method and system for surgical tool localization during anatomical surgery
CN107624192B (zh) 2015-05-11 2020-10-27 西门子公司 通过内窥镜组织分化的外科引导和术中病理的系统和方法
US11020144B2 (en) 2015-07-21 2021-06-01 3Dintegrated Aps Minimally invasive surgery system
CN108024806B (zh) 2015-07-21 2022-07-01 3D集成公司 套管组装套件、套管针组装套件、套筒组件、微创手术系统及其方法
DK178899B1 (en) 2015-10-09 2017-05-08 3Dintegrated Aps A depiction system
BR112018007473A2 (pt) * 2015-10-14 2018-10-23 Surgical Theater LLC navegação cirúrgica de realidade aumentada
JP6646133B2 (ja) * 2016-02-23 2020-02-14 オリンパス株式会社 画像処理装置および内視鏡
JP2019524353A (ja) * 2016-10-24 2019-09-05 シーエスエー メディカル, インコーポレイテッド 末梢肺病変の凍結療法を実施するための方法および装置
WO2018235255A1 (ja) * 2017-06-23 2018-12-27 オリンパス株式会社 医療システムとその作動方法
US20190254753A1 (en) 2018-02-19 2019-08-22 Globus Medical, Inc. Augmented reality navigation systems for use with robotic surgical systems and methods of their use
US10902616B2 (en) * 2018-08-13 2021-01-26 Nvidia Corporation Scene embedding for visual navigation
US11529038B2 (en) * 2018-10-02 2022-12-20 Elements Endoscopy, Inc. Endoscope with inertial measurement units and / or haptic input controls
US11514576B2 (en) * 2018-12-14 2022-11-29 Acclarent, Inc. Surgical system with combination of sensor-based navigation and endoscopy
WO2020193640A1 (en) * 2019-03-26 2020-10-01 Koninklijke Philips N.V. Persistent guide wire identification
US11992373B2 (en) 2019-12-10 2024-05-28 Globus Medical, Inc Augmented reality headset with varied opacity for navigated robotic surgery
US11464581B2 (en) 2020-01-28 2022-10-11 Globus Medical, Inc. Pose measurement chaining for extended reality surgical navigation in visible and near infrared spectrums
US11382699B2 (en) 2020-02-10 2022-07-12 Globus Medical Inc. Extended reality visualization of optical tool tracking volume for computer assisted navigation in surgery
US11207150B2 (en) 2020-02-19 2021-12-28 Globus Medical, Inc. Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment
US11607277B2 (en) 2020-04-29 2023-03-21 Globus Medical, Inc. Registration of surgical tool with reference array tracked by cameras of an extended reality headset for assisted navigation during surgery
US11153555B1 (en) 2020-05-08 2021-10-19 Globus Medical Inc. Extended reality headset camera system for computer assisted navigation in surgery
US11510750B2 (en) 2020-05-08 2022-11-29 Globus Medical, Inc. Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications
US11382700B2 (en) 2020-05-08 2022-07-12 Globus Medical Inc. Extended reality headset tool tracking and control
US11737831B2 (en) 2020-09-02 2023-08-29 Globus Medical Inc. Surgical object tracking template generation for computer assisted navigation during surgical procedure
USD1022197S1 (en) 2020-11-19 2024-04-09 Auris Health, Inc. Endoscope
US11642016B2 (en) * 2021-08-10 2023-05-09 Altek Biotechnology Corporation Image capturing module, endoscope and method of manufacturing image capturing module
US20230100698A1 (en) * 2021-09-29 2023-03-30 Cilag Gmbh International Methods for Controlling Cooperative Surgical Instruments
KR102637484B1 (ko) * 2021-10-26 2024-02-16 주식회사 카이미 인공지능 기반의 내시경 진단 보조 시스템 및 이의 제어방법
CN114191078B (zh) * 2021-12-29 2024-04-26 上海复旦数字医疗科技股份有限公司 一种基于混合现实的内窥镜手术导航机器人系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5829444A (en) * 1994-09-15 1998-11-03 Visualization Technology, Inc. Position tracking and imaging system for use in medical applications
JP2001197485A (ja) * 2000-01-11 2001-07-19 Asahi Optical Co Ltd 電子内視鏡システムおよび電子内視鏡用信号切替装置
WO2003045222A2 (en) * 2001-11-21 2003-06-05 Viatronix Incorporated System and method for visualization and navigation of three-dimensional medical images
US7505809B2 (en) 2003-01-13 2009-03-17 Mediguide Ltd. Method and system for registering a first image with a second image relative to the body of a patient
US20050085718A1 (en) 2003-10-21 2005-04-21 Ramin Shahidi Systems and methods for intraoperative targetting
US7397364B2 (en) * 2003-11-11 2008-07-08 Biosense Webster, Inc. Digital wireless position sensor
EP1691666B1 (en) * 2003-12-12 2012-05-30 University of Washington Catheterscope 3d guidance and interface system
WO2006005075A2 (en) * 2004-06-30 2006-01-12 Amir Belson Apparatus and methods for capsule endoscopy of the esophagus
EP1924197B1 (en) 2005-08-24 2017-10-11 Philips Electronics LTD System for navigated flexible endoscopy
US7945310B2 (en) 2006-09-18 2011-05-17 Stryker Corporation Surgical instrument path computation and display for endoluminal surgery
US8248414B2 (en) * 2006-09-18 2012-08-21 Stryker Corporation Multi-dimensional navigation of endoscopic video
US7892165B2 (en) * 2006-10-23 2011-02-22 Hoya Corporation Camera calibration for endoscope navigation system
US8672836B2 (en) * 2007-01-31 2014-03-18 The Penn State Research Foundation Method and apparatus for continuous guidance of endoscopy
JP5148227B2 (ja) * 2007-09-25 2013-02-20 富士フイルム株式会社 内視鏡システム
IE20090299A1 (en) * 2008-04-15 2009-10-28 Trinity College Dublin An endoscopy system
EP2348954A1 (en) * 2008-10-20 2011-08-03 Koninklijke Philips Electronics N.V. Image-based localization method and system
WO2010065786A1 (en) * 2008-12-03 2010-06-10 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for determining the positioin of the tip of a medical catheter within the body of a patient
WO2010128411A1 (en) * 2009-05-08 2010-11-11 Koninklijke Philips Electronics, N.V. Real-time scope tracking and branch labeling without electro-magnetic tracking and pre-operative scan roadmaps
CN102428496B (zh) * 2009-05-18 2015-08-26 皇家飞利浦电子股份有限公司 用于em跟踪内窥镜系统的无标记物跟踪的配准和校准
JP6348130B2 (ja) * 2013-03-11 2018-06-27 アンスティテュ・オスピタロ−ユニベルシテール・ドゥ・シルルジー・ミニ−アンバシブ・ギデ・パル・リマージュ デュアルデータ同期を用いた解剖学的部位の位置の再特定

Similar Documents

Publication Publication Date Title
JP2016511049A5 (ja)
US10835344B2 (en) Display of preoperative and intraoperative images
Wang et al. Video see‐through augmented reality for oral and maxillofacial surgery
JP6348130B2 (ja) デュアルデータ同期を用いた解剖学的部位の位置の再特定
CN107016717B (zh) 用于患者的透视视图的系统和方法
JP5153620B2 (ja) 連続的にガイドされる内視鏡と関係する画像を重ね合わせるためのシステム
CN111031958B (zh) 在微创手术期间合成多个相机视点之间的空间感知过渡
JP2018532467A5 (ja)
US20130281821A1 (en) Intraoperative camera calibration for endoscopic surgery
JP2019506922A (ja) ロボット手術のために仮想現実デバイスを使用するシステム、コントローラ、及び方法
JP2018514352A (ja) 後期マーカー配置による融合イメージベース誘導のためのシステムおよび方法
US20150272423A1 (en) Endoscope system
CN105611877A (zh) 引导超声图像采集的方法和系统
JP2018509204A (ja) 顎の動きの追跡
WO2015124795A1 (en) Automatic multimodal real-time tracking of a moving marker for image plane alignment inside a mri scanner
JP2013150650A (ja) 内視鏡画像診断支援装置および方法並びにプログラム
JP2020512089A (ja) 奥行き知覚を高める仮想陰影
US11123036B2 (en) Image registration
US10806520B2 (en) Imaging apparatus for imaging a first object within a second object
JP2016518150A5 (ja)
US20180049808A1 (en) Method of using soft point features to predict breathing cycles and improve end registration
JPWO2020182997A5 (ja)
JP6356623B2 (ja) 画像処理装置、方法、及びプログラム
US9911225B2 (en) Live capturing of light map image sequences for image-based lighting of medical data
JP5613353B2 (ja) 医療装置