JP2016511049A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2016511049A5 JP2016511049A5 JP2015562379A JP2015562379A JP2016511049A5 JP 2016511049 A5 JP2016511049 A5 JP 2016511049A5 JP 2015562379 A JP2015562379 A JP 2015562379A JP 2015562379 A JP2015562379 A JP 2015562379A JP 2016511049 A5 JP2016511049 A5 JP 2016511049A5
- Authority
- JP
- Japan
- Prior art keywords
- video
- exploration
- endoscope
- medical system
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000875 corresponding Effects 0.000 claims 3
- 239000000523 sample Substances 0.000 claims 3
- 230000001360 synchronised Effects 0.000 claims 3
- 239000000284 extract Substances 0.000 claims 2
- 230000001575 pathological Effects 0.000 claims 2
- 230000003044 adaptive Effects 0.000 claims 1
- 230000003190 augmentative Effects 0.000 claims 1
- 238000006073 displacement reaction Methods 0.000 claims 1
- 238000001839 endoscopy Methods 0.000 claims 1
- 238000005516 engineering process Methods 0.000 claims 1
- 239000000835 fiber Substances 0.000 claims 1
- 238000003384 imaging method Methods 0.000 claims 1
- 230000002452 interceptive Effects 0.000 claims 1
- 239000003550 marker Substances 0.000 claims 1
- 238000000034 method Methods 0.000 claims 1
- 210000000056 organs Anatomy 0.000 claims 1
- 238000004805 robotic Methods 0.000 claims 1
Claims (8)
- 特定の場所が内視鏡によって既に探査されている第1または「基準探査」の後の少なくとも1つの「新しい探査」中に、前記特定の場所に可撓性内視鏡の手動または自動の再位置決めを可能にする医療システムにして、
i)撮像装置(3)が少なくとも装備される可撓性内視鏡(2)、および場合によっては少なくとも1つのツールまたは器具と、
ii)表示手段(3’)、および前記内視鏡(3)と関連した移動制御手段(3″)と、
iii)電磁追跡デバイスまたは光ファイバー追跡デバイスなどの、内視鏡(2)の先端(2’)の位置および向きを提供する追跡デバイスまたはシステム(4)と、
iiii)コンピュータ手段(5)および関連した格納手段と
を備え、
内視鏡(2)の前端または先端(2’)には、電磁センサ(4’)または同様な追跡デバイスが設けられ、電磁センサ(4’)または同様な追跡デバイスが、可撓性内視鏡(2)の先端(2’)にはり付けられまたは取り付けられ、対応する追跡システム(4)が、3D位置の追跡、およびまた前記先端の向きの追跡を可能にする、医療システム(1)であって、
前記格納手段が、対応する内視鏡先端(2’)の姿勢と共に、その「基準探査」中に可撓性内視鏡を通して取得されるビデオを格納するのに適応しており、前記医療システム(1)が、「新しい探査」可撓性内視鏡ビデオ、および格納された「基準探査」ビデオを1つまたは複数のスクリーン上で、並行して、または、2つの異なるウィンドウ内で表示することができる手段(5、3)をさらに備え、「基準探査」と「新しい探査」との間の内視鏡先端(2″)のライブの向き誤差を計算するように、かつ、コンピュータ手段(5)によって行われ、前述の向き誤差を補償するように画像を回転させ、被験者の身体内で内視鏡(2)の現在の場所に空間的に合致させる「基準探査」の対応する画像を選択する、適応同期アルゴリズムを使用して、人間のユーザによって手動でまたはロボットシステムによって自動的に、ライブの「新しい探査」と格納された「基準探査」との間の同期処理を実現することによって「基準探査」中に既に探査された特定の場所において可撓性内視鏡(2)の再位置決めを行なうように、捕捉されたビデオ画像フレームの各々が、同期して記録される内視鏡先端の姿勢と関連することを特徴とする、医療システム。 - 使用される追跡システム(4)または他の追跡システムによってその位置が記録され得る少なくとも2つのマーカー(6)をまた備え、これが、被験者の所与の解剖学的場所に配置されることができ、前記場所が、探査される管状器官に依存し、好ましくは被験者が姿勢を変え得るときに顕著な変形または変位を受けず、前記マーカー(6)が、以前のおよびその後の探査において基準点を与えることを特徴とする、請求項1に記載の医療システム。
- 第1または基準探査とその後のまたは新しい探査の両方の間に視認可能な類似の特徴の抽出およびマッチングを行なう、リアルタイム内視鏡ビデオ解析を実現する手段を備えることを特徴とする、請求項1または2に記載の医療システム。
- 探査される被験者の身体において特定の対象点を示す第1または基準探査可撓性内視鏡ビデオの1つまたは複数の画像の対話式の仮想タグ付けを行なうために、マウス、パッド、トラックボール、ジョイスティック、または光トラッキングによってなど、ビデオの画素または画素のグループを正確に選択することを可能にするヒューマンインターフェース装置を備え、この仮想タグ付けが、ビデオの任意の選択された画像にタグを付加することを可能にする特定の「基準探査」ビデオ読み出しによって実現されることを特徴とする、請求項1から3のいずれか一項に記載の医療システム。
- 探査される被験者の身体における解剖学的、病理学的、または外科的な特定の特徴などの、視認可能な対象点を抽出し、前記特定の対象点を示す「基準探査」可撓性内視鏡ビデオの1つまたは複数の画像に自動仮想タグ付けを実現することができる、ビデオ解析アルゴリズム手段を備えることを特徴とする、請求項1から3のいずれか一項に記載の医療システム。
- 基準探査ビデオの画像にタグ付けされる探査される被験者の身体の同じ特定の対象点を、その後の「新しい探査ビデオ」で位置特定させ、これらの仮想タグの重ね合わせによって、同期化されたその後の「新しい探査」ビデオの同じ場所にこれを付加するために、その後の「新しい探査ビデオ」の解析を実現することができる手段をまた備えることを特徴とする、請求項4または請求項5に記載の医療システム。
- その後の探査中に時刻tにおけるビデオ画像で管腔位置を解析する画像処理を行い、同様な管腔位置によって「新しい探査」中にその後のライブ位置に近い位置と関連する「基準探査」から画像を選択する手段を備えることを特徴とする、請求項1から6のいずれか一項に記載の医療システム。
- 解剖学的および/または病理学的な構造の3D身体モデルの仮想レンダリングを使った拡張現実技術を用いて、特定の対象点を示す仮想タグによって向上されるかまたはされない、2つの同期化された可撓性内視鏡ビデオを融合することができる手段を備え、この3Dモデルが、被験者の身体の「新しい探査」前に実現される術前医用画像から抽出されることを特徴とする、請求項1から7のいずれか一項に記載の医療システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361775930P | 2013-03-11 | 2013-03-11 | |
US61/775,930 | 2013-03-11 | ||
PCT/IB2014/000838 WO2014140813A1 (en) | 2013-03-11 | 2014-03-11 | Anatomical site relocalisation using dual data synchronisation |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2016511049A JP2016511049A (ja) | 2016-04-14 |
JP2016511049A5 true JP2016511049A5 (ja) | 2017-04-06 |
JP6348130B2 JP6348130B2 (ja) | 2018-06-27 |
Family
ID=50943347
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015562379A Active JP6348130B2 (ja) | 2013-03-11 | 2014-03-11 | デュアルデータ同期を用いた解剖学的部位の位置の再特定 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10736497B2 (ja) |
EP (1) | EP2996557B1 (ja) |
JP (1) | JP6348130B2 (ja) |
WO (1) | WO2014140813A1 (ja) |
Families Citing this family (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6348130B2 (ja) * | 2013-03-11 | 2018-06-27 | アンスティテュ・オスピタロ−ユニベルシテール・ドゥ・シルルジー・ミニ−アンバシブ・ギデ・パル・リマージュ | デュアルデータ同期を用いた解剖学的部位の位置の再特定 |
CN105530852B (zh) * | 2013-09-27 | 2017-08-25 | 奥林巴斯株式会社 | 内窥镜系统 |
WO2015126457A1 (en) * | 2014-02-19 | 2015-08-27 | Indiana University Research And Technology Corporation | Tracking real-time assessment of quality monitoring in endoscopy |
US11033182B2 (en) | 2014-02-21 | 2021-06-15 | 3Dintegrated Aps | Set comprising a surgical instrument |
US10013808B2 (en) | 2015-02-03 | 2018-07-03 | Globus Medical, Inc. | Surgeon head-mounted display apparatuses |
US9905000B2 (en) * | 2015-02-19 | 2018-02-27 | Sony Corporation | Method and system for surgical tool localization during anatomical surgery |
CN107624192B (zh) | 2015-05-11 | 2020-10-27 | 西门子公司 | 通过内窥镜组织分化的外科引导和术中病理的系统和方法 |
US11020144B2 (en) | 2015-07-21 | 2021-06-01 | 3Dintegrated Aps | Minimally invasive surgery system |
CN108024806B (zh) | 2015-07-21 | 2022-07-01 | 3D集成公司 | 套管组装套件、套管针组装套件、套筒组件、微创手术系统及其方法 |
DK178899B1 (en) | 2015-10-09 | 2017-05-08 | 3Dintegrated Aps | A depiction system |
BR112018007473A2 (pt) * | 2015-10-14 | 2018-10-23 | Surgical Theater LLC | navegação cirúrgica de realidade aumentada |
JP6646133B2 (ja) * | 2016-02-23 | 2020-02-14 | オリンパス株式会社 | 画像処理装置および内視鏡 |
JP2019524353A (ja) * | 2016-10-24 | 2019-09-05 | シーエスエー メディカル, インコーポレイテッド | 末梢肺病変の凍結療法を実施するための方法および装置 |
WO2018235255A1 (ja) * | 2017-06-23 | 2018-12-27 | オリンパス株式会社 | 医療システムとその作動方法 |
US20190254753A1 (en) | 2018-02-19 | 2019-08-22 | Globus Medical, Inc. | Augmented reality navigation systems for use with robotic surgical systems and methods of their use |
US10902616B2 (en) * | 2018-08-13 | 2021-01-26 | Nvidia Corporation | Scene embedding for visual navigation |
US11529038B2 (en) * | 2018-10-02 | 2022-12-20 | Elements Endoscopy, Inc. | Endoscope with inertial measurement units and / or haptic input controls |
US11514576B2 (en) * | 2018-12-14 | 2022-11-29 | Acclarent, Inc. | Surgical system with combination of sensor-based navigation and endoscopy |
WO2020193640A1 (en) * | 2019-03-26 | 2020-10-01 | Koninklijke Philips N.V. | Persistent guide wire identification |
US11992373B2 (en) | 2019-12-10 | 2024-05-28 | Globus Medical, Inc | Augmented reality headset with varied opacity for navigated robotic surgery |
US11464581B2 (en) | 2020-01-28 | 2022-10-11 | Globus Medical, Inc. | Pose measurement chaining for extended reality surgical navigation in visible and near infrared spectrums |
US11382699B2 (en) | 2020-02-10 | 2022-07-12 | Globus Medical Inc. | Extended reality visualization of optical tool tracking volume for computer assisted navigation in surgery |
US11207150B2 (en) | 2020-02-19 | 2021-12-28 | Globus Medical, Inc. | Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment |
US11607277B2 (en) | 2020-04-29 | 2023-03-21 | Globus Medical, Inc. | Registration of surgical tool with reference array tracked by cameras of an extended reality headset for assisted navigation during surgery |
US11153555B1 (en) | 2020-05-08 | 2021-10-19 | Globus Medical Inc. | Extended reality headset camera system for computer assisted navigation in surgery |
US11510750B2 (en) | 2020-05-08 | 2022-11-29 | Globus Medical, Inc. | Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications |
US11382700B2 (en) | 2020-05-08 | 2022-07-12 | Globus Medical Inc. | Extended reality headset tool tracking and control |
US11737831B2 (en) | 2020-09-02 | 2023-08-29 | Globus Medical Inc. | Surgical object tracking template generation for computer assisted navigation during surgical procedure |
USD1022197S1 (en) | 2020-11-19 | 2024-04-09 | Auris Health, Inc. | Endoscope |
US11642016B2 (en) * | 2021-08-10 | 2023-05-09 | Altek Biotechnology Corporation | Image capturing module, endoscope and method of manufacturing image capturing module |
US20230100698A1 (en) * | 2021-09-29 | 2023-03-30 | Cilag Gmbh International | Methods for Controlling Cooperative Surgical Instruments |
KR102637484B1 (ko) * | 2021-10-26 | 2024-02-16 | 주식회사 카이미 | 인공지능 기반의 내시경 진단 보조 시스템 및 이의 제어방법 |
CN114191078B (zh) * | 2021-12-29 | 2024-04-26 | 上海复旦数字医疗科技股份有限公司 | 一种基于混合现实的内窥镜手术导航机器人系统 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5829444A (en) * | 1994-09-15 | 1998-11-03 | Visualization Technology, Inc. | Position tracking and imaging system for use in medical applications |
JP2001197485A (ja) * | 2000-01-11 | 2001-07-19 | Asahi Optical Co Ltd | 電子内視鏡システムおよび電子内視鏡用信号切替装置 |
WO2003045222A2 (en) * | 2001-11-21 | 2003-06-05 | Viatronix Incorporated | System and method for visualization and navigation of three-dimensional medical images |
US7505809B2 (en) | 2003-01-13 | 2009-03-17 | Mediguide Ltd. | Method and system for registering a first image with a second image relative to the body of a patient |
US20050085718A1 (en) | 2003-10-21 | 2005-04-21 | Ramin Shahidi | Systems and methods for intraoperative targetting |
US7397364B2 (en) * | 2003-11-11 | 2008-07-08 | Biosense Webster, Inc. | Digital wireless position sensor |
EP1691666B1 (en) * | 2003-12-12 | 2012-05-30 | University of Washington | Catheterscope 3d guidance and interface system |
WO2006005075A2 (en) * | 2004-06-30 | 2006-01-12 | Amir Belson | Apparatus and methods for capsule endoscopy of the esophagus |
EP1924197B1 (en) | 2005-08-24 | 2017-10-11 | Philips Electronics LTD | System for navigated flexible endoscopy |
US7945310B2 (en) | 2006-09-18 | 2011-05-17 | Stryker Corporation | Surgical instrument path computation and display for endoluminal surgery |
US8248414B2 (en) * | 2006-09-18 | 2012-08-21 | Stryker Corporation | Multi-dimensional navigation of endoscopic video |
US7892165B2 (en) * | 2006-10-23 | 2011-02-22 | Hoya Corporation | Camera calibration for endoscope navigation system |
US8672836B2 (en) * | 2007-01-31 | 2014-03-18 | The Penn State Research Foundation | Method and apparatus for continuous guidance of endoscopy |
JP5148227B2 (ja) * | 2007-09-25 | 2013-02-20 | 富士フイルム株式会社 | 内視鏡システム |
IE20090299A1 (en) * | 2008-04-15 | 2009-10-28 | Trinity College Dublin | An endoscopy system |
EP2348954A1 (en) * | 2008-10-20 | 2011-08-03 | Koninklijke Philips Electronics N.V. | Image-based localization method and system |
WO2010065786A1 (en) * | 2008-12-03 | 2010-06-10 | St. Jude Medical, Atrial Fibrillation Division, Inc. | System and method for determining the positioin of the tip of a medical catheter within the body of a patient |
WO2010128411A1 (en) * | 2009-05-08 | 2010-11-11 | Koninklijke Philips Electronics, N.V. | Real-time scope tracking and branch labeling without electro-magnetic tracking and pre-operative scan roadmaps |
CN102428496B (zh) * | 2009-05-18 | 2015-08-26 | 皇家飞利浦电子股份有限公司 | 用于em跟踪内窥镜系统的无标记物跟踪的配准和校准 |
JP6348130B2 (ja) * | 2013-03-11 | 2018-06-27 | アンスティテュ・オスピタロ−ユニベルシテール・ドゥ・シルルジー・ミニ−アンバシブ・ギデ・パル・リマージュ | デュアルデータ同期を用いた解剖学的部位の位置の再特定 |
-
2014
- 2014-03-11 JP JP2015562379A patent/JP6348130B2/ja active Active
- 2014-03-11 US US14/774,516 patent/US10736497B2/en active Active
- 2014-03-11 EP EP14730578.3A patent/EP2996557B1/en active Active
- 2014-03-11 WO PCT/IB2014/000838 patent/WO2014140813A1/en active Application Filing
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2016511049A5 (ja) | ||
US10835344B2 (en) | Display of preoperative and intraoperative images | |
Wang et al. | Video see‐through augmented reality for oral and maxillofacial surgery | |
JP6348130B2 (ja) | デュアルデータ同期を用いた解剖学的部位の位置の再特定 | |
CN107016717B (zh) | 用于患者的透视视图的系统和方法 | |
JP5153620B2 (ja) | 連続的にガイドされる内視鏡と関係する画像を重ね合わせるためのシステム | |
CN111031958B (zh) | 在微创手术期间合成多个相机视点之间的空间感知过渡 | |
JP2018532467A5 (ja) | ||
US20130281821A1 (en) | Intraoperative camera calibration for endoscopic surgery | |
JP2019506922A (ja) | ロボット手術のために仮想現実デバイスを使用するシステム、コントローラ、及び方法 | |
JP2018514352A (ja) | 後期マーカー配置による融合イメージベース誘導のためのシステムおよび方法 | |
US20150272423A1 (en) | Endoscope system | |
CN105611877A (zh) | 引导超声图像采集的方法和系统 | |
JP2018509204A (ja) | 顎の動きの追跡 | |
WO2015124795A1 (en) | Automatic multimodal real-time tracking of a moving marker for image plane alignment inside a mri scanner | |
JP2013150650A (ja) | 内視鏡画像診断支援装置および方法並びにプログラム | |
JP2020512089A (ja) | 奥行き知覚を高める仮想陰影 | |
US11123036B2 (en) | Image registration | |
US10806520B2 (en) | Imaging apparatus for imaging a first object within a second object | |
JP2016518150A5 (ja) | ||
US20180049808A1 (en) | Method of using soft point features to predict breathing cycles and improve end registration | |
JPWO2020182997A5 (ja) | ||
JP6356623B2 (ja) | 画像処理装置、方法、及びプログラム | |
US9911225B2 (en) | Live capturing of light map image sequences for image-based lighting of medical data | |
JP5613353B2 (ja) | 医療装置 |