JP2023545637A - ロボット人工知能による経鼻/経口/経直腸の腸内チューブ - Google Patents

ロボット人工知能による経鼻/経口/経直腸の腸内チューブ Download PDF

Info

Publication number
JP2023545637A
JP2023545637A JP2023518197A JP2023518197A JP2023545637A JP 2023545637 A JP2023545637 A JP 2023545637A JP 2023518197 A JP2023518197 A JP 2023518197A JP 2023518197 A JP2023518197 A JP 2023518197A JP 2023545637 A JP2023545637 A JP 2023545637A
Authority
JP
Japan
Prior art keywords
stylet
patient
distal end
catheter tube
tube
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023518197A
Other languages
English (en)
Inventor
ウィリアム ビー. ゴームリー
ブリタニー ストッパ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brigham and Womens Hospital Inc
Original Assignee
Brigham and Womens Hospital Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brigham and Womens Hospital Inc filed Critical Brigham and Womens Hospital Inc
Publication of JP2023545637A publication Critical patent/JP2023545637A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6846Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive
    • A61B5/6847Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive mounted on an invasive device
    • A61B5/6852Catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/32Surgical robots operating autonomously
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013Medical image data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6846Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive
    • A61B5/6867Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive specially adapted to be attached or implanted in a specific body part
    • A61B5/6871Stomach
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6846Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive
    • A61B5/6867Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive specially adapted to be attached or implanted in a specific body part
    • A61B5/6873Intestine
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00221Electrical control of surgical instruments with wireless transmission of data, e.g. by infrared radiation or radiowaves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/303Surgical robots specifically adapted for manipulations within body lumens, e.g. within lumen of gut, spine, or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06Measuring instruments not otherwise provided for
    • A61B2090/063Measuring instruments not otherwise provided for for measuring volume
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/309Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/373Surgical systems with images on a monitor during operation using light, e.g. by using optical scanners

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • Robotics (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Gynecology & Obstetrics (AREA)
  • Endoscopes (AREA)
  • Media Introduction/Drainage Providing Device (AREA)

Abstract

被験者の腸腔又は気道など、被験者の内部の目標位置にカテーテルチューブを自動的に駆動することができるシステム及び方法。カテーテルチューブは、カテーテルチューブの遠位端の管壁に埋め込まれた、撮像装置、トランシーバ、分光計、及び電池を含んでもよい。撮像装置は、カテーテルチューブの遠位端に近い構造の画像データをキャプチャしてもよい。関節式スタイレットをカテーテルチューブに挿入することができ、トポグラフィ画像データに基づく人工知能(AI)モデルによって生成されるナビゲーションデータに従って、ロボット制御エンジンによって制御されてもよい。分光計は、カテーテルチューブに近いバイオマーカをサンプリングして識別してもよい。リモートコンピューターは、ロボット制御エンジンとAIモデルを実装し、トランシーバから画像データを無線で受信してもよい。【選択図】図1A

Description

<関連出願の相互参照>
本出願は、2020年9月21日に出願された、米国特許出願第17/027,364の優先権に基づき、その利益を主張するものであり、その全体は参照により全ての目的のためにここに援用される。
<連邦政府の支援による研究に関する言明>
本発明は、政府の支援、パートナーシップ、又は助成金なしで行われた。
本発明は、(例えば、鼻/口/直腸の)体腔の外面から、胃~小腸若しくは大腸にかけてのいずれかの場所の腸腔内まで、又は、気道を含む他の体腔及び開口部まで、チューブを配置するための方法及びシステムに関する。
医療の過程で、腸管系にアクセスする必要性は非常に一般的である。例えば、腸管系へのアクセスは、胃若しくは腸の化合物を除去するため、腸管系に材料を導入するため、又は画像若しくはサンプルを取得するために必要となる場合がある。胃若しくは腸の化合物を除去する例には、胃若しくは腸の麻痺の状況、又は毒性化合物の摂取の状況における、胃若しくは腸の減圧が含まれる。より一般的な材料の導入の必要性の例には、これらの活動を単独で完了することができない患者への食事又は投薬が含まれる。イメージングの必要性は、これらの領域からサンプルを観察して取得するために、上部と下部の両方の腸管で一般的である。これには、診断用食道胃十二指腸鏡検査、及び大腸内視鏡検査の使用が含まれる。これは一般に、経鼻胃管(nasogastric tube, NGT)若しくは経口胃管(orogastric tube, OGT)、直腸管、又は上部若しくは下部の腸管の内視鏡を手動で配置することによって達成される。腸管系へのアクセスは、吻側又は尾側から行うことができる。
腸管系にアクセスする吻側アプローチには、鼻/口からのアクセスが含まれる。ここで吻側アプローチについて説明する。
経鼻/経口腸内チューブの手動配置は、病院環境では一般的な手順であり、経口摂取が損なわれた患者の治療に不可欠である。これらの手動配置は、緊急治療室、入院患者の状況、時には外来患者の状況など、複数の病院の状況で実行される。これらのチューブの使用は、集中治療室(ICU)状況で特に一般的である。これらのデバイスは、米国だけで年間120万台以上設置されていると推定されている。この手順は頻繁に実行され、一般的に単純であると考えられているが、デバイスを手動で正確に配置するには、対象分野の専門知識を持つ臨床医が必要である。施設のポリシーに応じて、この手順は専門的なスキルを持つ医師又は看護師によってのみ実行される場合がある。
経鼻/経口腸内チューブ留置の現在のモデルに関する主な懸念事項は、(1)患者にとってのこの留置の安全性、及び(2)留置プロセスの効率という2つの点である。
経鼻/経口腸内チューブを留置する手順は単純であると推定されているにもかかわらず、頻繁に、時には致命的な合併症の原因となることが知られている。これらの合併症の最悪の原因は、気道へのチューブの不注意な配置から生じ、肺への栄養物質の導入、肺炎、結果として生じる気胸及び気管支胸膜瘻を伴う肺破裂を含む潜在的な合併症を伴う。これらの合併症はすべて致命的となる可能性がある。これらの合併症の理由は、経鼻/経口腸内チューブの70%以上が鼻又は口から手動で盲目的に配置され、食道を通って胃又は腸に移動することにある。この盲目的な配置は、視覚的な誘導なしで実行され、多くの場合、誤ったチューブの配置とその結果生じる合併症につながる。少数のケースでは、これらのチューブは、適切な配置を支援するために内視鏡又は放射線技術を使用するための訓練を受けて装備している高度に専門化された医師によって配置される。しかし、そのような専門家の関与はリソース集約的であり、患者の腸管系へのアクセスが大幅に遅れる。その結果、医療システムにとっても患者にとっても、これらのデバイスを配置するためにそのようなリソースを利用することは理想的ではない。
更に、経鼻/経口腸内チューブの留置に関連して、患者にかなりの不快感を与えることが多い。従来のシステムではチューブが柔軟性に欠けるため、鼻/口から腸管系への複雑な経路をナビゲートすることが困難となっていた。その結果、チューブが患者の喉に何らかの力で接触することが多く、不快感や怪我を引き起こす可能性がある。
この手順の安全上の懸念を超えて、経鼻/経口腸内チューブを配置するプロセスは非効率になる傾向がある。典型的な設定では、チューブは臨床医によって手動で盲目的にベッドサイドに配置される。チューブを肺に挿入すると致命的な合併症を引き起こす可能性があるため、胃又は腸内のチューブの位置を放射線検査で確認する必要がある。例えば、経鼻/経口腸内チューブの留置後、訓練を受けた放射線科医又は医師が経鼻/経口腸内チューブが正しく留置されていることを確認できるように、胸部と腹部のX線スキャンを取得する必要がある。この確認の必要性は、放射線スキャンが常にすぐに利用できるとは限らないため、大幅な遅延をもたらす。放射線スキャンが実行されたら、チューブを臨床的に利用する前に、放射線科医又は医師がスキャンを見直して、遠位側のチューブが正しく配置されていることを確認する必要がある。X線スキャンでチューブが正しくない位置にあることが判明した場合、又は位置が完全に識別できない場合は、チューブを再配置してX線スキャンを繰り返す必要がある。この多段階プロセスにより、経腸減圧、投薬、又は栄養供給開始のいずれかに対する患者の臨床的ニーズは、場合によってはプロセス開始後最大24時間まで大幅に遅れる可能性がある。
放射線技術者と臨床医、ベッドサイドの臨床医、放射線画像、潜在的に追加の経鼻/経口腸内チューブなど、このような確認リソースの使用は、それが起こす治療の遅延を上回る、この手順にかなりのコストを追加する可能性がある。
放射線画像の使用は、既知のリスクに関連する追加の電離放射線を患者にもたらす。放射線にさらされると、細胞、組織、臓器に損傷が生じ、がんやその他の医学的問題につながる可能性がある。医療業界全体で、患者を不必要なリスクから保護するために、可能な限り放射線への被ばくを減らす取り組みが進行中である。小児患者、放射線治療を受けた患者、原子力事故による放射線にさらされた患者、高地に住む人々など、特定の集団には、放射線による害のリスクが高くなる。
専門の臨床医がチューブの軌跡を見ることを可能にする視覚的誘導を備えた経鼻/経口腸内チューブが存在するが、これらのデバイスは臨床医の専門知識を必要とし、臨床医は、デバイスを配置する際に、チューブの理想的な位置に到達したかをキャプチャした画像から識別できなければならない。この専門知識を持つ臨床医がいる施設では、そのような専門家が利用できるようになるまでに時間がかかる。そのような専門知識を持たない施設では、このソリューションは機能しなくなる。更に、視覚的な誘導を使用しても、視覚的なイメージの解釈における人間のミスや配置の失敗が依然として発生する可能性がある。視覚的な誘導が提供されている場合でも、これらのチューブが誤って配置される可能性があることは広く理解されている。
更に、腸管系内でのチューブ移動の必然性と、経鼻/経口腸内チューブの適切な配置を一定期間維持する必要があることを考えると、専門の臨床医による継続的な監視が必要である。経鼻/経口腸内チューブ留置の従来の方法は、チューブの留置を定期的に確認するために、X線スキャンを繰り返すことに依存している。放射線画像に関連する有害な放射線への曝露は、追加のスキャンが取得されるたびに増加する。経鼻/経口腸内チューブに関連する留置局在化メカニズムがない場合、不適切な腸内位置への薬物の供給又は送達による損傷のリスクが増加する。
従って、経鼻/経口腸内チューブ留置の効率的かつ安全な態様が必要である。
複雑な配置には、多くの場合、配置のために専門の内視鏡と内視鏡について訓練を受けた医師の関与が必要である。これは配置を遅らせ、システムの複雑さが増したことを考えると、患者にとってより大きなリスクを意味する。したがって、上部腸管をガイド及び撮像する、より安全で複雑でない自動化された方法が必要である。これにより、自動化されたシステムが腸内システムの画像とサンプルを取得することもできる。
腸管系にアクセスするための尾側アプローチには、直腸アクセスが含まれる。ここで、尾側アプローチについて説明する。
上部腸管へのアクセスに関する問題と同様に、直腸を介した経腸チューブの配置は盲目的で手動の手順である。これには、下部腸管への損傷や誤配置を引き起こす可能性のある合併症を伴う。直腸から下部腸管に腸内チューブを留置するための、安全でシンプルな自動システムが必要であり、それは、専門の担当者が実行する必要のない自動化されたシステムを介して、材料の注入、大腸の減圧、及び画像とサンプルの取得を可能にする。
経直腸腸内チューブ留置の従来の方法に関する主な懸念事項は,(1)患者にとってのこの留置の安全性、及び(2)留置プロセスの効率という2つの点である。
前述のように、大腸の減圧を目的とした直腸チューブの配置は手動で行われ、誘導は無い。言い換えれば、これは、出血、腸の破裂、又は誤配置の作成を含む、ガイドなしでのデバイスの導入に固有のリスクを伴う盲目的な手順として実行される。これは、このチューブの配置に続いて、腸の減圧を促進することを目的とした物質などの導入が続く場合、更に深刻になる。
チューブ留置の目的が画像と組織サンプルの取得である場合、問題は異なり、より重要になる。この場合、消化器内科医などの専門医による直視が必要なため、高度に専門化された人員と機器の存在が必要になる。この場合、直腸及び大腸全体で使用するように設計された内視鏡装置を使用できる消化器専門医の必要性が存在する。専門スタッフと手順を実行するために必要な機器の両方の複雑さは、適切な患者ケアを提供する上で2つの大きな問題を引き起こす。
第一の問題は、患者へのアクセスである。世界中の専門家と機器の利用可能性の性質を考えると、腸管系内から病変を識別することができる必要な診断画像へのアクセスは非常に限られている。特定の年齢を超えるすべての患者に対する診断用大腸内視鏡検査の推奨は、これらのリソースの利用可能性によって厳しく制限されている。
2つ目の問題は、これが複雑な手順であり、患者に重大な不快感とリスクが伴うことである。医師が結腸全体をリアルタイムで視覚化できるようにする必要があるため、結腸の調査用に開発された大型の内視鏡を使用する必要がある。これには、患者の不快感を避けるために、鎮静/麻酔下で行われる完全な病院処置が必要である。これは、必要な機器が必然的に大きくなることと、手順が長くなる可能性があることという事実の組み合わせである。この組み合わせにより、完全な手術と麻酔の介入が必要になり、コストが大幅に増加し、重要なことに、手術と麻酔の両方による患者のリスクが増加する。
これらは、危険で、不快で、費用がかかり、非効率的なプロセスであるだけでなく、必要なケアも制限される。これらの一般的な問題を改善するシステムは、患者、臨床医、及び医療システムに価値と利益をもたらす。
医療環境で困難をもたらす別のタイプのチューブ留置には、気道へのアクセスが含まれる。気道、特に肺に入る必要性は、多くの場合、患者の呼吸を制御する必要がある緊急の状況にある。これらの状況では、口腔/鼻腔、咽頭、声門、及び気管に代表される体の自然な経路を通過して肺にアクセスできないと、致命的となる可能性がある。気管と肺へのアクセスを確立することで、患者の換気と酸素供給が可能になる。
ここで気道アプローチについて説明する。
腸管系へのアクセスに関する問題と同様に、気道へのアクセスのための気管内挿管チューブの配置は複雑な手動手順である。これには、誤配置又は配置の失敗の問題に加えて、唇、歯、口腔、喉頭蓋、喉頭、又は気管に損傷を与える潜在的な合併症がある。これら後者の2つのシナリオのいずれにおいても、患者の換気と酸素供給の緊急の必要性は未解決のままである。換気、酸素化、気道管理、及び呼吸補助を可能にする、気管内挿管チューブを中咽頭から気管に配置するための安全でシンプルな自動システムが必要である。現在、これは高度なスキルと訓練を受けた個人が行う手動の手順で行われている。本明細書で提案するのは、腸内システムにアクセスするためにこの文書に記載されている自動化システムを利用し、医療関係者が行う必要のない解決策である。
このような自動挿管システムの必要性は、患者が標準的な病院の設定の外、特に、緊急対応者(first responders)や医療従事者が外傷患者に遭遇することが多い現場で遭遇した場合に特に価値がある。外傷の状況において、最も重要な関心事は常に患者の安全である。多くの場合、患者は基本的な生理学的機能のすべての制御を失っている。その中で最も重要なのは、機能的な気道の維持、呼吸能力、及び適切な循環を維持する必要性である。これらの3つは、気道(Airway)、呼吸(Breathing)、循環(Circulation)という「ケアのABC」において不滅である。外傷性損傷は、生存可能な気道の喪失を伴うことが多く、それに伴い、患者がリスクのある組織に酸素を供給し続ける能力が失われるため、生存可能な気道の確立が重要になる。
すべての外傷患者に緊急気道を提供できるコンパクトで持ち運び可能な完全自律型ロボットデバイスの開発は、これらの患者の回復と生存のレベルに大きな影響を与えるであろう。これは、視覚ベースのデータ、高度なデータ分析、及び人工知能を使用して、早期の安全で信頼できる気管内挿管を可能にするデバイスを駆動することで達成できる。外傷の転帰は、ケアの最初の30~60分間で行われる意思決定と行動によって決定され、ケアの時点で可能な限り迅速に介護者に高度な支援を提供することで、そのような状況に巻き込まれた患者の転帰が改善される。
現在、民間又は軍の最初の医療対応者のうち、気管内挿管で気道を確保することによって高度な気道制御ができるのはごく少数である。これは、特に、心肺停止、外傷性脳損傷、又は、顔面、首、若しくは胸部に傷を負っている患者にとって重大な問題である。病院以外の環境で高度な気道確保を試みた場合、高レベルの合併症が発生することが研究で実証されているため、これは救急医療技術者(Emergency Medical Technicians、EMT)の認定に必要なスキルではない。しかし、負傷又は心肺不全の最初の1時間、つまり、「ゴールデンアワー」として知られる時間で、これらすべての患者に適切な気道を提供することが重要である。これは、ケアの最初の30~60分間で行われる決定と行動によって決定される重要な役割のためである。介護現場で可能な限り迅速に介護者に高度な支援を提供することで、そのような状況に巻き込まれた患者の転帰が改善される。
気管内挿管チューブの従来の配置方法に関する主な懸念事項は、(1)患者にとってのこの配置の安全性、(2)配置プロセスの複雑さと効率に基づいたケアへのアクセス、及び(3)医療関係者へのリスク、という3つの点である。
1)患者の安全:気道管理及び呼吸補助を目的とした気管内チューブの配置は、直接喉頭鏡又はビデオ喉頭鏡を含むさまざまなデバイスを使用して手動で視覚的な誘導を使用して実行される。場合によっては、鼻気管内挿管を使用して、これらのチューブを盲目的に配置することができる。これらのアプローチのいずれにおいても、視覚化は様々な程度に制限されており、出血、組織の破裂、更に重要なことに、誤配置や配置の失敗など、ガイドなしでのデバイスの導入に固有のリスクにつながる。これらの困難を考えると、患者が肺換気と組織の酸素化の欠如の生命を脅かす期間にさらされる長期の挿管の試みを見ることは珍しくない。
2)ケアへのアクセス:手順の複雑さと関連するリスクにより、高度な訓練を受けた専門の臨床チームが介入を実行する必要がある。気管へのアクセスと気道の確保のための洗練された医療関係者のチームの必要性は、特にこれが必要とされる状況がしばしば緊急で生命を脅かすものであるため、特に問題である。患者に効果的に挿管することによってこの設定で呼吸不全を解決できないと、致命的になる可能性がある。これは、患者の自宅、戦場、又は緊急輸送車両などの非臨床環境にいる患者にとって特別な懸念事項である。この救命処置への患者のアクセスの欠如は、現在の気管内挿管システムの主な問題の1つである。
3)医療関係者へのリスク:気管内挿管チューブの留置中に、口腔/鼻腔及び咽頭腔の留置アクセス位置の性質を考えると、患者は飛沫を空中に放出する可能性がある。エアロゾル化として知られるこのプロセスは、現在処置のすぐ近くにいるすべての医療従事者が、患者が持っている可能性のある病原体に感染する危険性が最も高いと考えられている。呼吸不全はウイルス性肺炎や細菌性肺炎などの感染性原因に関連していることが多いという事実を考えると、これは挿管手順に関与する医療従事者にとって重大な安全上のリスクである。感染伝播への曝露を制限することは、すべての状況で重要であるが、COVID-19感染伝播などの呼吸器パンデミックの状況では特に重要である。この感染伝播から処置に関与する医療関係者を保護するために、個人用保護具(PPE)が採用されている。しかし、この盲目的で手動の気管内挿管に必要な医療チームが大規模であることは、多くの医療関係者を感染の危険にさらす。このリスクは、すべての入院患者を治療する場合に存在するが、世界が現在COVID-19で経験しているように、呼吸器疾患の世界的大流行時には特に大きくなる。
手動の気管内挿管は、危険で不快で、費用がかかり、非効率的なプロセスであるだけでなく、医療従事者を空気感染のリスクにさらす。
従って、医療従事者がこのような感染リスクにさらされるのを制限する自動気管内挿管ソリューションが必要とされている。
被験者の内部の目標位置にカテーテルチューブを自動的に配置するためのシステム及び方法が開示される。例えば、カテーテルチューブは、鼻腔/口腔からの吻側アプローチ、直腸からの尾側アプローチのいずれかによって腸腔内へ、又は口腔から気道へ、自動的にナビゲートされ導かれてもよい。この自動ナビゲーションは、人工知能モデルによって誘導されるロボット機械デバイスを使用して実行され、「セルフナビゲーション」カテーテルを作成する。そのような配置を実行するシステムは、臨床医の介入を必要としない場合があり、したがって、被験者(患者など)の腸管系又は気道へのデバイスの配置又は配置に関する特定の専門知識の必要性をなくすことができる。
従って、システムは、システムの1つ又は複数の画像センサによってキャプチャされ、チューブが配置されるキャビティに対応するトポグラフィ撮像データを使用して、チューブの正しい配置の指示された配置及び即時の確認を可能にすることができる。本明細書に記載の実施形態は、経鼻及び経口腸内チューブの配置、経直腸腸内チューブの配置、並びに経皮栄養チューブの配置、及び気管内挿管チューブの配置に適用することができる。しかしながら、説明された実施形態は、例示を意図したものであり、限定を意図したものではないことを理解されたい。例えば、本明細書に記載の実施形態は、腸管系又は気道にアクセスするための特定の入口ポートやチューブ自体の最終位置に決して限定されない。
このシステムは、キャビティ内からの撮像データ及び/又はサンプルの取得も可能にする。本明細書で説明される撮像データは、1つ又は複数の(例えば、マルチモーダル)ソースを介して取得された、及び/又は、1つ又は複数の画像技術を使用して取得された撮像データを指してもよいことが理解されるべきであり、その例は以下で説明される。
このシステムは、画像センサからのデータ入力を処理するために人工知能モデルを採用することができ、これにより、「セルフナビゲート(self-navigating)」によって、カテーテルを配置することと、その後に腸又は呼吸環境の計算をすること、との両方が可能になる。
システムは更に、臨床的に示されるように、患者に留置されたままであってもよい。このようにして、遠位カテーテル内のセンサから得られたデータは、臨床チームが腸又は呼吸環境を継続的に監視するために利用することができる。この監視には、カテーテルの局在化情報が含まれることがあり、腸管系においては、バイオマーカとpH測定基準、及び腸内容積の測定値が含まれることがある。
本明細書に記載の実施形態は、経鼻及び経口腸経皮栄養チューブ、直腸チューブの配置、気管内挿管による気道へのアクセス、及びそれらのその後の監視、画像化、及びサンプリング機能に適用することができる。しかしながら、説明された実施形態は、例示を意図したものであり、限定を意図したものではないことを理解されたい。例えば、本明細書に記載の実施形態は、腸管系又は気道にアクセスするための特定の入口ポートやチューブ自体の最終位置に決して限定されない。
例示的な実施形態では、システムは、管腔を画定する管壁と、画像データをキャプチャするように構成され、カテーテルチューブの遠位端に配置された撮像装置と、前記撮像装置に結合され、キャプチャされた前記画像データを無線で送信するように構成されたトランシーバであって、前記カテーテルチューブの前記遠位端に配置されたトランシーバとを備えるカテーテルチューブと、前記カテーテルチューブの前記管腔内に配置され、関節遠位端を備える関節式スタイレットと、ロボット制御及び表示センタと、を備えてもよい。前記ロボット制御及び表示センタは、前記トランシーバと通信し、前記トランシーバから前記キャプチャされた画像データを受信する無線通信回路と、前記キャプチャされた画像データを分析し、対応するナビゲーションデータを出力する少なくとも1つの人工知能モデルを実行するように構成された処理回路と、前記ナビゲーションデータに基づいて、被験者の内部の目標位置に向かって前記関節式スタイレットを駆動するロボット制御エンジンと、を備えてもよい。
幾つかの実施形態では、前記撮像装置はトポグラフィ撮像装置であってもよく、前記キャプチャされた画像データはトポグラフィ画像データを含んでもよい。
幾つかの実施形態では、前記撮像装置は視覚撮像装置であってもよく、前記キャプチャされた画像データは静止画データ又は視覚画像ビデオデータを更に含んでもよい。
幾つかの実施形態では、前記撮像装置及び前記トランシーバは、前記関節式スタイレットに埋め込まれてもよい。前記関節式スタイレットは、また、前記関節式スタイレットに埋め込まれた送気チャネルと、前記関節式スタイレットに埋め込まれた光源とを含んでもよい。
幾つかの実施形態では、前記撮像装置及び前記トランシーバは、前記カテーテルチューブの前記管壁に埋め込まれてよい。前記カテーテルチューブは更に、前記カテーテルチューブの前記管壁に埋め込まれた送気チャネルを含んでもよい。前記カテーテルチューブは更に、前記カテーテルチューブの前記管壁に埋め込まれた光源を含んでもよい。
幾つかの実施形態では、前記撮像装置はタイムオブフライト(Time-of-Flight、TOF)型撮像装置を含んでもよく、前記キャプチャされた撮像データはタイムオブフライト型撮像データを更に含んでもよく、前記タイムオブフライト型撮像装置は、光の複数の波長を使用して前記タイムオブフライト型画像データをキャプチャするように構成されてもよい。
幾つかの実施形態では、前記処理回路は、光の複数の波長を使用するタイムオブフライト(Time-of-Flight、TOF)イメージングに基づいて、前記カテーテルチューブが配置される腸腔、気道、又は他のキャビティの容積測定値を取得するように構成された容積感知モジュールを実行するように構成されてもよい。前記容積感知モジュールは、前記容積測定値に基づいて、腸腔の総容積に対応する第1の容積値を導出し、空である前記総容積の第1の部分に対応する第2の容積値を導出し、材料で満たされた前記総容積の第2の部分の第3の容積値を導出してもよい。前記第3の容積値は、前記第1の容積値から前記第2の容積値を引くことによって計算されてもよい。
幾つかの実施形態では、前記ロボット制御エンジンは、前記関節式スタイレットの少なくとも1つの関節を制御することにより前記関節式スタイレットを駆動し、前記関節式スタイレットの移動方向を制御するように構成されてもよく、前記関節式スタイレットは、プランジ(plunge)、回転(rotation)、及び先端湾曲(tip deflection)を含む三自由度を有する。
幾つかの実施形態では、前記カテーテルチューブは、前記関節式スタイレットの遠位端に配置された、スタイレット分光計と、スタイレットトランシーバとを含んでもよい。前記スタイレット分光計は、前記関節式スタイレットの遠位端で物質をサンプリング及び分析して、スタイレット分光計データを生成するように構成され、前記スタイレットトランシーバは、前記スタイレット分光計データを前記ロボット制御及び表示センタに無線で送信するように構成されてもよい。
幾つかの実施形態では、前記カテーテルチューブは、更に、前記カテーテルチューブの遠位端に配置され、分光計データを生成するためにサンプルを収集及び分析するように構成されている分光計を備えてもよい。
幾つかの実施形態では、前記ロボット制御及び表示センタは表示装置を含んでもよい。前記トランシーバは、前記無線通信回路を介して前記分光計データを前記処理回路に送信するように構成されてもよい。前記処理回路は、前記分光計データを分析して、前記サンプルに対応するバイオマーカを識別するように構成されてもよい。前記表示装置は、前記カテーテルチューブ及び前記バイオマーカの位置及び状態に関する情報を表示するように構成されてもよい。
幾つかの実施形態では、前記少なくとも1つの人工知能モデルは、キャプチャされた前記画像データをニアリアルタイムで処理する検出及び追跡モデルと、統一された階層表現を学習するように訓練され、キャプチャされた画像データに基づいて前記開口部と前記構造を特定し、キャプチャされた前記画像データと前記目標位置に基づいて前記ナビゲーションデータを計算する、少なくとも1つの畳み込みニューラルネットワークベースの検出アルゴリズムを含み、腸腔又は気道内の開口部及び構造を識別するように構成された深層学習検出器と、スパースオプティカルフロー(Sparse Optical Flow)を使用して前記関節式スタイレットの動きベクトルを予測するように構成されたメディアンフローフィルタリング(Median-Flow Filtering)ベースのビジュアルトラッキングモジュールと、を備えてもよい。
例示的な実施形態では、前記ロボット制御及び表示センタは、前記カテーテルチューブの前記トランシーバと通信し、トポグラフィ画像データを受信する無線通信回路と、前記トポグラフィ画像データ及び前記目標位置を分析し、対応するナビゲーションデータを出力する人工知能モデルを実行するように構成された処理回路と、前記ナビゲーションデータに基づいて、前記カテーテルチューブ内に配置された前記関節式スタイレットを前記被験者の内部の目標位置に向けて自動的に駆動するロボット制御エンジンと、を備えてもよい。
幾つかの実施形態では、前記ロボット制御エンジンは、前記関節式スタイレットの遠位端における関節を制御することによって、前記関節式スタイレットの移動方向を制御するように構成される。
幾つかの実施形態では、前記ロボット制御エンジンは、前記関節式スタイレットの回転位置を変更することによって、前記関節式スタイレットの移動方向を制御するように構成されてもよい。
幾つかの実施形態では、前記無線通信回路は、前記トランシーバから分光計データを受信するように構成され、前記分光計データは、前記カテーテルチューブの分光計によってサンプリングされた物質に対応してもよい。前記処理回路は、前記分光計データを受信し、前記物質が対応するバイオマーカのアイデンティティを出力する追加の人工知能モデルを実行するように構成されてもよい。
幾つかの実施形態では、前記ロボット制御及び表示センタは、前記カテーテルチューブの位置及び状態、並びに前記バイオマーカの前記アイデンティティに関連する情報を表示するように構成された表示装置を更に備えてもよい。
幾つかの実施形態では、前記ロボット制御エンジンは、手動の誘導を受けずに前記関節式スタイレットを駆動するように構成されてもよい。
例示的な実施形態では、カテーテルアセンブリは、カテーテルチューブと、関節式スタイレットとを含んでもよい。前記カテーテルチューブは、管腔を画定する管壁と、画像データをキャプチャするように構成され、前記カテーテルチューブの遠位端に配置された撮像装置と、前記撮像装置に結合され、キャプチャされた前記画像データをリモートコンピュータシステムに無線で送信するように構成され、前記カテーテルチューブの遠位端に配置されたトランシーバと、を含んでもよい。前記関節式スタイレットは、前記管腔内に配置され、キャプチャされた前記画像データに少なくとも基づいて被験者内の目標位置に自動的に駆動されるように構成されてもよい。
幾つかの実施形態では、前記関節式スタイレットは関節を含み、前記関節は、前記関節式スタイレットが前記目標位置まで自動的に駆動されている間、前記関節式スタイレットの運動の方向を制御するように曲がるように構成されてもよい。
幾つかの実施形態では、前記関節式スタイレットの前記関節は、プランジ(plunge)、回転(rotation)、及び先端湾曲(tip deflection)を含む三自由度を有してもよい。
幾つかの実施形態では、前記カテーテルチューブは、前記カテーテルチューブの遠位端に配置された分光計を更に備えてもよく、前記分光計は、前記カテーテルチューブの前記遠位端に近い物質をサンプリング及び分析して、分光計データを生成してもよい。前記トランシーバは、前記分光計データを前記リモートコンピュータシステムに無線で送信するように構成されてもよい。
幾つかの実施形態では、前記撮像装置、前記分光計、及び前記トランシーバは、前記カテーテルチューブの前記管壁の異なる位置にそれぞれ埋め込まれてもよい。前記カテーテルチューブは、更に、前記管壁に埋め込まれた送気チャネルを備えてもよい。
幾つかの実施形態では、前記画像データは、前記撮像装置に近接する構造を表すトポグラフィ画像データを含んでもよい。
本開示の幾つかの実施形態は、誘導システムを提供する。前記誘導システムは、患者の内部を照明するように構成された照明源と、撮像装置を含むロボットシステムと、患者の開口部に挿入されるように構成されたスタイレットと、を含むことができる。前記スタイレットは、近位端及び遠位端を有することができる。前記スタイレットは、前記撮像装置に光学的に結合された光ファイバを有する光バンドルを含む。前記光ファイバは、光を患者の内部から前記撮像装置に送るように構成されている
幾つかの実施形態では、前記スタイレットは、前記スタイレットの本体に結合又は統合された複数のフィラメントを含むことができる。前記ロボットシステムは複数のアクチュエータを含むことができる。それぞれの前記複数のフィラメントは、それぞれのアクチュエータのエクステンダに結合されることができる。記アクチュエータのエクステンダの伸長及び収縮は、それぞれの前記フィラメントに引張荷重を加えて、前記ロボットシステムに対する前記スタイレットの向きを調整する。
幾つかの実施形態では、ロボットシステムは、前記スタイレットを回転させて前記スタイレットの遠位端を前記患者の内部で更に前進させるように構成されたモータを含むことができる。
幾つかの実施形態では、スタイレットは、COセンサを含むことができる。ロボットシステムは、前記COセンサと通信するコントローラを含むことができる。前記コントローラは、COセンサを使用して、CO量の値を受信し、前記CO量の値に基づいて、前記スタイレットの遠位端が前記患者の内部の目標位置にあることを判断するように構成されることができる。
幾つかの実施形態では、コントローラは、前記照明源及び前記撮像装置と通信することができる。更に、前記コントローラは、前記照明源に光を放射させて患者の内部を照らし、前記撮像装置を使用して、前記患者の前記内部の画像を受信し、前記画像内の対象解剖学的領域を識別し、前記画像内の前記対象解剖学的領域の識別に基づいて、所望の向きを決定し、前記スタイレットが前記所望の向きに向けられるように、前記複数のアクチュエータに前記スタイレットを調整させ、前記スタイレットを前記患者の内部で更に進めるように構成されることができる。
幾つかの実施形態では、前記コントローラは、更に、前記撮像装置を使用して、前記患者の内部の別の画像を受信し、前記別の画像内の気管分岐を識別し、前記CO量の値が閾値を超えていること、及び前記別の画像内の前記気管分岐の識別に基づいて、前記スタイレットの前記遠位端が前記患者の内部の前記目標位置にあると判断するように構成されることができる。
幾つかの実施形態では、前記スタイレットは、チャネルを含むことができる。前記ロボットシステムは、前記チャネルと流体的に連通するように構成されたガス源を含むことができる。前記ガス源からのガスは、前記チャネルを通って出て、前記患者の内部に導かれるように構成されることができる。
幾つかの実施形態では、前記スタイレットは、チャネルを含むことができる。前記ロボットシステムは、前記チャネルと流体的に連通するように構成された真空源を含むことができる。前記真空源は、前記患者の内部から流体を吸引し、前記チャネルを通じて排出することができる。
幾つかの実施形態では、前記スタイレットは、前記照明源に光学的に結合されるライトパイプを含むことができる。前記ライトパイプは、前記照明源から放射された光を前記患者の内部に送ることができる。レンズが、前記光ファイバの遠位端に光学的に結合されることができる。前記レンズは、前記患者の内部からの光を前記光ファイバの前記遠位端に集束させるように構成されることができる。
幾つかの実施形態では、スタイレットは、チャネルと、前記照明源に光学的に結合されたライトパイプと、を含むことができる。前記照明源はロボットシステムの一部であることができる。前記スタイレットは、COセンサを含むことができる。光バンドル、前記ライトパイプ、及び前記COセンサは、それぞれ前記チャネル内に配置されることができる。
幾つかの実施形態では、前記誘導システムは、前記患者の口に挿入されるように構成された口腔咽頭デバイスを更に含むことができる。
幾つかの実施形態では、前記口腔咽頭デバイスは、ハンドルと、ハンドルに結合されたマウスピースを含むことができる。前記ハンドルは、前記マウスピースの断面高さより大きい断面高さを有することができる。前記マウスピースは、前記口腔咽頭デバイスの長軸から離れて湾曲する湾曲セクションを有することができる。前記マウスピースは、前記口腔咽頭デバイスが前記患者の前記開口部に配置される際、前記患者の口の内部に配置されるように構成されることができる。前記ハンドルは、前記口腔咽頭デバイスが前記患者の前記開口部に配置される際、前記患者の口の外側に配置されるように構成されることができる。
幾つかの実施形態では、口腔咽頭デバイスのマウスピースは、前記患者の舌に接触するように構成されることができる。マウスピースの遠位端は、前記患者の喉の中に配置されるように構成されることができる。
幾つかの実施形態では、口腔咽頭デバイスは、前記ハンドル及び前記マウスピースを通って延びる導管と、酸素ガス源と接続するように構成されるポートコネクタと、を含むことができる。前記ポートコネクタは、前記導管と流体的に連通することができる。前記酸素ガス源からの酸素ガスは、前記ポートコネクタに流れ込み、前記導管を通って出て前記患者の喉に入るように構成されることができる。
幾つかの実施形態では、前記誘導システムは、気管内チューブを含むことができる。前記気管内チューブの遠位端が前記患者の口及び喉に挿入されるように構成されることができる。前記気管内チューブは、前記口腔咽頭デバイス、及び前記患者の頭部に結合されるように構成された固定装置、に取り外し可能に結合されるように構成されることがでいる。
本開示の幾つかの実施形態は、患者に挿管する方法を提供する。前記方法は、口腔咽頭デバイスの遠位端を前記患者の口及び前記患者の喉に挿入し、気管内チューブの遠位端が前記患者の咽喉内に配置されるまで、前記口腔咽頭デバイスに沿って前記気管内チューブの前記遠位端を前進させ、前記気管内チューブを前記口腔咽頭デバイスに結合し、スタイレットの遠位端が前記患者の気管内の目標位置に到達するまで、前記スタイレットの前記遠位端を前記気管内チューブに挿入する、ことを含むことができる。
幾つかの実施形態では、方法は、前記口腔咽頭デバイスから前記気管内チューブを切り離し、前記気管内チューブの前記遠位端が前記スタイレットの前記遠位端と重なり合うか、又は近位になるまで、前記スタイレットに沿って前記気管内チューブの前記遠位端を前進させ、前記スタイレット全体が前記患者の体外に出るまで、前記気管内チューブを通して前記スタイレットを後退させ、人工呼吸器を前記気管内チューブの近位端に接続する、ことを更に含むことができる。
幾つかの実施形態では、方法は、前記スタイレットの前記遠位端が前記目標位置に到達するまで、前記スタイレットを前記気管内チューブに挿入している間、酸素ガスを、加圧酸素ガス源から、前記口腔咽頭デバイスのポートコネクタを介して、前記口腔咽頭デバイスの導管を介して、前記患者の喉に導入することを更に含むことができる。
図1Aは、電源、分光計、トランシーバ、及び撮像装置を含む例示的なカテーテルチューブと、デバイスの配置中に消化管への送気のために使用されても使用されなくてもよいチャネルと、を示す。 図1B~Eは、電源、分光計、トランシーバ、及び撮像装置を含む例示的なカテーテルチューブと、デバイスの配置中に消化管への送気のために使用されても使用されなくてもよいチャネルと、を示す。 図2は、カテーテルチューブの遠位端内の回路の例示的なブロック図を示し、前記回路は、電源、分光計、トランシーバ、及び撮像装置と、デバイスの配置中に消化管への送気のために使用されても使用されなくてもよいチャネルを含む。 図3は、被験者の胃内への例示的なカテーテルチューブの配置を示す。 図4Aは、関節式スタイレットを介して被験者の腸管系又は気道内の目標位置にカテーテル腸管を誘導することができる例示的なロボット制御及び表示センタ(Robotic Control and Display Center、RCDC)を示し、関節式スタイレットは、人工知能モデルによって生成されたナビゲーションデータに従って制御され、腸腔又は気道内の目標位置にチューブを向ける関節端を有する。 図4Bは、関節式スタイレットを介して被験者の腸管系又は気道内の目標位置にカテーテル腸管を誘導することができる例示的なロボット制御及び表示センタ(Robotic Control and Display Center、RCDC)を示し、関節式スタイレットは、人工知能モデルによって生成されたナビゲーションデータに従って制御され、腸腔又は気道内の目標位置にチューブを向ける関節端を有する。 図5A~Cは、関節式スタイレットが挿入された例示的なカテーテル腸内チューブを示す。図5Bは、関節式スタイレットの可動域を示す。 図6は、カテーテルチューブの遠位端に配置された撮像装置によって生成された画像データから1つ又は複数の人工知能モデルによって導出されたナビゲーションデータを使用して、カテーテルチューブを目標位置まで自動的に駆動する例示的な方法のプロセスフローを示す。 図7は、カテーテルチューブを所望の位置に操作することができる例示的なロボット制御システムの等角図である。 図8Aは、関節式スタイレットに結合された撮像装置を含むことができ、関節式スタイレットを回転又は関節運動させることができる、ロボット制御システムに含めることができるキャリッジの等角図を示す。 図8Bは、関節式スタイレットに結合された撮像装置を含むことができ、関節式スタイレットを回転又は関節運動させることができる、ロボット制御システムに含めることができるキャリッジの上面図を示す。 図9は、イメージガイド、ライトパイプ、及び関節運動のためのプルワイヤを有する屈曲部を特徴としてもよい関節式スタイレットの例示的な断面を示す。 図10は、カテーテルチューブに挿入され、経腸アクセス及び/又は送気を可能にする近位接続ポートを含み、撮像のための近位光コネクタを含む例示的な関節式スタイレットを示す。 図11は、被験者の腸の一部の腸腔を通って目標位置まで駆動された例示的な関節式スタイレットの図を示す。 図12Aは、内側の関節式スタイレットと外側のカテーテルチューブを備えたカテーテル装置を前進させるロボットを示し、自動運転ロボットが喉頭の変曲点に進み、そこにおいて、ロボットが喉頭と気管に前方に向かう、又は、食道に後方に向かうことを実証する。 図12Bは、内側の関節式スタイレットと外側のカテーテルチューブを備えたカテーテル装置を前進させるロボットを示し、自動運転ロボットが喉頭の変曲点に進み、そこにおいて、ロボットが喉頭と気管に前方に向かう、又は、食道に後方に向かうことを実証する。 図12Cは、内側の関節式スタイレットと外側のカテーテルチューブを備えたカテーテル装置を前進させるロボットを示し、自動運転ロボットが喉頭の変曲点に進み、そこにおいて、ロボットが喉頭と気管に前方に向かう、又は、食道に後方に向かうことを実証する。 図13は、案内システムのブロック図の概略図を示す。 図14は、スタイレットの側面図の概略図を示す。 図15は、図14の線15-15に沿った、図14のスタイレットの軸方向断面図を示す。 図16は、図14の線16-16に沿った、図14のスタイレットの長手方向断面図を示す。 図17は、オープン構成における、ロボットシステムの上面等角図を示す。 図18は、クローズ構成における、図17のロボットシステムの上面等角図を示す。 図19は、オープン構成における、図17のロボットシステムの上面図を示す。 図20は、クローズ構成における、図17のロボットシステムの上面図を示す。 図21は、固定装置の正面等角図を示す。 図22Aは、口腔咽頭デバイスの正面等角図を示す。 図22Bは、図22Aの口腔咽頭デバイスの背面等角図を示す。 図23は、スタイレットを患者の内部の目標位置に誘導するプロセスのフローチャートを示す。 図24は、患者の喉に挿入された気管内チューブと、気管内チューブに挿入されたスタイレットとの概略図を示す。 図25は、画像検出コンピュータがスタイレットの遠位端に配置されたロボットのカメラから視覚フィードバックを受信するシステム構成を示す。画像検出アルゴリズムはデータを処理し、画像の解剖学的ランドマークを認識する。このデータは、ロボット制御アルゴリズムがロボットのスタイレットの解剖学的位置に従って移動の指示を処理するロボット制御コンピュータに送信される。ロボットは、ROS通信を介してロボット制御コンピュータによって制御される。ロボット制御コンピュータは、画像検出コンピュータからの入力を受信し、制御を調整する。 図26Aは、ロボット誘導アルゴリズムの例を提供する。 図26Bは、ロボット制御アルゴリズムの例を提供する。 図27は、ロボット制御スキームの図、特にロボット制御アルゴリズムの概略図を示す。ロボットは、画像検出コンピュータから受信した追跡情報に基づいて制御される。
本明細書で開示されるシステム及び方法は、(例えば、被験者の鼻、口、若しくは直腸を介して被験者の腸管系に、鼻腔若しくは口腔を介して気道に、又は被験者の胃若しくは腸に直接及ぶ外科的切開を介して)被験者の内部の目標位置へのカテーテルチューブの自動に留置することに関する。カテーテルチューブは、デバイスの配置中に消化管又は気道への送気のために使用されても使用されなくてもよいチャネルを更に含んでもよい。カテーテルチューブは、カテーテルチューブの遠位端(例えば、先端)付近の構造のトポグラフィ画像をキャプチャするトポグラフィ撮像装置、及び/又は腸腔内からの写真又はビデオをキャプチャする視覚撮像装置であってもよい撮像装置を含んでもよい。そのような撮像装置によって生成される撮像データは、トポグラフィ画像データ、静止画データ、ビデオデータ、又はこれらの幾つか又は全ての組み合わせであってよい。カテーテルチューブは、被験者の腸空間又は気道の光学的分析を実行するために使用されてもよい、被験者の外側に配置されたカメラ又は分光計に接続することができるイメージガイド及びライトガイドを更に含んでもよい。カテーテルチューブは、カテーテルチューブの遠位端付近のバイオマーカ(例えば、カテーテルチューブの先端周辺の組織のバイオマーカ)又は他の化学物質を分析することができる分光計を更に含むことができる。カテーテルチューブは、遠隔装置との間で無線でデータを送受信できるトランシーバを更に含むことができる。遠隔装置のトランシーバ及び無線通信回路は、例えばBluetooth(登録商標)などのUHF無線技術規格に従って無線パーソナルエリアネットワーク(WPAN)を使用して通信することができる。一部の実施形態では、ZigBee(登録商標)などの他のWPAN規格を代わりに使用できることを理解されたい。カテーテルチューブのトランシーバと通信する遠隔装置は、ディスプレイ、関節式スタイレット、ロボット制御エンジン、処理回路、及び無線通信回路を含んでもよいロボット制御及び表示センタ(Robotic Control and Display Center、RCDC)であってもよい。関節式スタイレットは、カテーテルチューブ内に配置されるようにサイズが決めされた、関節式ロボット誘導式関節式スタイレットであってもよい。ロボット制御エンジンは、関節式スタイレットを駆動しその方向を制御して、関節式スタイレット、つまり、カテーテルチューブが、被験者の身体の開口部(例えば、被験者の鼻又は口)を通じて被験者の内部の目標位置に自動的にナビゲートされるようにしてもよい。RCDCの処理回路によって、1つ又は複数の人工知能(AI)モデルが実装されてもよい。AIモデルは、トランシーバを介してカテーテルチューブの撮像装置から受信した画像データを処理して、ロボット制御エンジンが関節式スタイレットとカテーテルチューブを駆動する方向を決定する、1つ又は複数のトレーニング済み機械学習ニューラルネットワークを含んでもよい。ディスプレイは、デジタル表示画面であってもよく、被験者の内部のカテーテルチューブの遠位端の配置に関する情報、継続的に更新されるカテーテルチューブのステータス情報、及びカテーテルチューブの分光計によって収集されたバイオマーカ情報を表示してもよい。
人工知能ベースの検出及び追跡モデルを実行して、RCDCが自律的に横断できるようにすることができ、リアルタイムでキャプチャされた(例えば、トポグラフィイック画像データ、静止画データ、及び/又はビデオデータによって代表される)腸の画像又は他のセンサーデータを使用してもよく、これらは、関節式スタイレット/カテーテルチューブの遠位端に配置された1つ又は複数の撮像装置によってキャプチャされてもよい。目的は、最初に腸又は気道の画像から鼻/口/直腸の開口部を検出し、次に検出追跡ベースのメカニズムによって予測された経路をたどることである。検出のために、深層学習YOLOベースの検出器を使用して、鼻/口/直腸の開口部、環境の特徴、及び腸腔又は気道内の構造を検出することができる。例えば、深層学習YOLOベースの検出器は、鼻/口/直腸の開口部と、視覚的に類似した近くの構造とを更に区別することができる。例えば、腸腔又は気道内に入ると、深層学習YOLOベースの検出器は、その後、腸又は気管の目標へのパスの過程で、視覚的に類似した構造を識別することができる。追跡には、(例えば、関節式スタイラスを目的地までナビゲートするために、関節式スタイラスの動きベクトルを少なくとも部分的に予測するために)高速で計算効率の高いメディアンフィルタリング手法を使用できる。
開口部、構造、及び周囲環境の検出には、畳み込みニューラルネットワーク(CNN)ベースの検出器を深層学習YOLOベースの検出器(例えば、「深層学習検出器」と総称される場合がある)と組み合わせて使用されてもよい。なぜならば、これは、リアルタイム検出タスクで最先端のパフォーマンスを達成したためである。事前定義された特徴抽出と分類器を組み合わせた従来の方法とは異なり、これらのCNNベースの検出アルゴリズムは、撮像データを使用して学習したオブジェクトの統一された階層表現によって設計できる。これらの階層的な特徴表現は、入力ベクトルを高次元の特徴空間に変換する連鎖畳み込み層によって実現できる。腸又は気管の検出には、26層以上のCNNベースの検出モデルを使用できる。このようなモデルでは、最初の24層はImagenetデータセットで事前にトレーニングされた完全な畳み込み層であってよく、最後の2層は検出された領域を出力する完全に接続された層であってよい。アルゴリズムは、腸管領域のカラー画像で更に微調整することができる。
追跡のために、ロボット配置デバイスの動きベクトルを予測するために、(例えば、メディアンフロー(median-flow)フィルタリング・ベースの視覚追跡モジュールによって実行される)メディアンフローフィルタリング・ベースの視覚追跡技術が採用されてもよい。メディアンフローアルゴリズムは、まばらなオプティカルフローを使用してオブジェクトの位置を推定してもよく、追跡ベースのシステムは、オブジェクトが、オブジェクト全体の動きとより同期する、小さく堅固に接続されたブロック又はパーツで構成されているという仮定に基づいていてもよい。幾つかの実施形態では、物体は、鼻腔、口、直腸の開口部、又は腸腔若しくは気道内の構造であってもよい。アルゴリズムの初期化は、腸/気管腔が最初に位置するバウンディングボックスを設定することによって実行されてもよく、この対象領域内で点のまばらなグリッドを生成してもよい。キャプチャされた画像内のオプティカルフローによって検出された腸/気管腔の動きは、現在の画像と前の画像に位置するそれぞれの点の座標間の差の中央値として計算される。フィルタリング中に信頼できると見なされたポイントのみを考慮に入れることができる。アルゴリズムは、オブジェクトのスケールの変動を推定することができてもよい。
実装のために、オブジェクト検出は、YOLOベースのアルゴリズムを介して実行されてもよく、オブジェクト追跡は、(例えば、Pythonで実装される)メディアンフロー・トラッカーを介して実行されてもよい。環境は、例えばUbuntu上に構築されてもよい。これらのアルゴリズム/モデルを実装するのには、グラフィックス・プロセッシング・ユニット(GPU)統合cuDNN及びCUDAツールキットが使用されてもよい。
トレーニングセグメントは、注釈付きの画像をYOLOのKeras実装に供給することで実装されてもよい。Keras及びTensorFlowバックエンドを使用されてもよい。データセットは、1000トレーニングエポックに対して10の学習率を採用し、100エポックごとにモデルパラメーターを保存して、アノテーション・ソフトウェアVoTT(Microsoft、ワシントン州レドモンド)を使用して作成されてもよい。保存されたモデルの中で、検証セットで正と見なされる、50%以上のIoU(Intersection over Union)について最高の平均適合率(AP)を達成するものは、トレーニングセットで評価される最終モデルとして選択されてもよい。
検出セグメントも、バックエンドでTensorFlowを実行しているKerasに基づいて実装されてもよい。追跡には、OpenCVの追跡APIを使用されてもよい。バウンディングボックスはYOLOによって検出され、リアルタイムの検出と追跡を実現するために、m:nの比率でメディアンフロー・トラッカーに渡されてもよい。
図1A~1Eは、例示的なカテーテルチューブ100の遠位端を示し、カテーテルチューブ100は、電源102(例えば、電池)と、分光計104と、トランシーバ106と、デバイスの配置中に消化管への送気のために使用されてもされなくてもよいチャネル111と、撮像装置108と、を含んでもよい。図1A~1Eの例は、構成要素がカテーテルチューブ100の管壁に埋め込まれている状況で提供されているものの、電源102、分光計104、トランシーバ106、及び/又は撮像装置108のいずれか(ここではまとめて「組み込み構成要素」と呼ぶ)を、追加的又は代替的に、カテーテルチューブ100などのカテーテルチューブに挿入されてもよい関節式スタイレット(例えば、図4A、図4B、及び図5A~5Cの関節式スタイレット420、502)に含めることができ(例えば、その壁に埋め込むことができ)、これにより、関節式スタイレットがカテーテルチューブに完全に挿入されると、埋め込まれた構成要素がカテーテルチューブの遠位端に配置されると理解されなければならず。
図1Aに示されるように、撮像装置108は、先端に最も近いカテーテルチューブ100の遠位端に配置されてもよく、トランシーバ106、分光計104、及び電源102がこの順に続いて配置される。カテーテルチューブ100は、例えば、ポリウレタン又はシリコーンで作られた中空の実質的に円筒形の管であってもよい。カテーテルチューブ100は、例えば、Pebax(又は他のポリマー)から形成されてもよい。幾つかの実施形態では、カテーテルチューブ100は、インナーライナー(例えば、レーザー硬化ステンレス鋼、ポリイミド、FEP、又はPTFE)と、ジャケット(例えば、Pebax、複数の硬度(デュロメーター)のものであってもよい)と、オプションとして、押しやすさ、「操縦性」、又は柔軟性の要件に応じて、ステンレス鋼の編組若しくはコイル又はその両方と、を含む多層カテーテルであってもよい。チャネル111は、遠隔装置(例えば、図4A、4BのRCDC)に収容されてもよいポンプ(例えば、空気又は二酸化炭素ポンプ)に結合されてもよい。例えば被験者の消化管への送気を行うために、空気又は他のガスが、ポンプによってチャネル111を通ってカテーテルチューブ100の端部の開口部に送られてもよい。
図1Bの断面図に示すように、電源102が電池である時を含め、電源102は、カテーテルチューブ100の管壁112に部分的若しくは完全に埋め込むか、又は取り付けることができる(例えば、電源102はカプセル化され、カテーテルチューブ100の内腔から隔離されている)。電源102は、分光計104、トランシーバ106、及び撮像装置108に電力を供給することができる。幾つかの実施形態では、電源102は、カテーテルチューブ100の管腔110内に配置されてもよい。幾つかの場合には、電源102がカテーテルチューブ100に結合され、カテーテルチューブ100によって取り囲まれている状態で、電源102は、電源102が電力を供給する構成要素のそれぞれにより近く位置することができ、これにより、(例えば、電源102がカテーテルチューブ100の外部に配置される時に)各構成要素(例えば、撮像装置108、トランシーバ106、分光計104など)から電源102へ長い電線が配線されるのを防ぐことができる。更に、バッテリとして実装される電源102は、他の電源102とは対照的に、バッテリのフットプリントを好ましく小さくすることができるという点で有利でありえる。例えば、電源102はリチウムイオン電池とすることができる。本明細書で使用される「管腔」は、カテーテルチューブの中央キャビティを指し、管腔110は、カテーテルチューブ100の中央キャビティを指す。示されるように、チャネル111は、管壁112に埋め込まれてもよい。
図1Cの断面図に示すように、分光計104は、カテーテルチューブ100の管壁112に部分的又は完全に埋め込まれてもよいし、取り付けられてもよい。幾つかの代替実施形態では、分光計は、代わりに、カテーテルチューブ100の外側に配置され、管腔110内に配置された光ファイバ又はバンドルなどの光ガイドを介してカテーテルチューブ100の遠位端に接続されてもよい。分光計は、カテーテルチューブ100の遠位端付近の物質(例えば、人体の器官によって生成されるものなどのバイオマーカ)を連続的に分析してもよい。例えば、分光計104は、試験されるサンプル物質と直接相互作用することなく、この分析を実行することができ、代わりに光の特性を利用してスペクトル分析を実行することができる。分光計104によって実行される分析の結果は、イオン濃度、酸性度、ホルモンレベル、及び毒物学分析など、対象器官に含まれ得るバイオマーカに関連する特定の結果を生成してもよい。
図1Dの断面図に示すように、トランシーバ106は、カテーテルチューブ100の管壁112に部分的又は完全に埋め込まれるか、又は取り付けられてもよい。例えば、トランシーバ106は、データを無線で送受信するように構成された、WPANプロトコル(Bluetooth(登録商標)又はZigbee(登録商標)など)に従った無線パーソナルエリアネットワーク(WPAN)トランシーバであってもよい。トランシーバ106は、分析のために遠隔装置(例えば、図4A、4BのRCDCデバイス400)にデータを無線で送信してもよい。例えば、トランシーバ106によって送信されるデータは、カテーテルチューブ100の遠位端の状態(例えば、器官内の位置、周囲構造への近接)、カテーテルチューブが位置する器官の状態(例えば、体液量、バイオマーカの状態など)を含んでもよい。トランシーバ106はまた、撮像装置108によってキャプチャされた撮像データ(例えば、トポグラフィ画像データ、静止画像データ、及び/又はビデオデータ)を遠隔装置に無線送信してもよい。トランシーバ106は、デバイス配置プロセス中(例えば、カテーテルチューブ100が自動的に目標位置に駆動されるとき)と、カテーテルチューブ100が目標位置に到達すると発生しうる連続モニタリング段階と、の両方において、データを遠隔装置に送信してもよい。幾つかの実施形態では、トランシーバ106は、遠隔装置から命令を受信することなく、遠隔装置にデータを送るのみであってもよい。他の実施形態では、トランシーバ106は、遠隔装置へのデータを受信することに加えて、遠隔装置から、実行されると分光計104などのカテーテル先端内の装置に実行させる命令などの命令を受信し、特定の機能の実行(例えば、分光計104の例における特定のテストの実行)をしてもよい。
幾つかの構成では、トランシーバ106は、そこから無線信号を送信及び受信するように構成された単一のアンテナを含むことができ、他の場合では、トランシーバ106は、少なくとも2つの別個のアンテナを含むことができ、第1のアンテナは、そこから無線信号を受信するように構成することができ、第2のアンテナは、そこから無線信号を送信するように構成することができる。いくつかの非限定的な例では、カテーテルチューブ100は、トランシーバ106を有する代わりに(又はそれに加えて)、送信機を含むことができ、送信機は、そこから、例えば遠隔装置に無線信号を送信することができる。
図1Eの断面図に示すように、撮像装置108は、カテーテルチューブ100の管壁112に、部分的又は完全に埋め込むか、又は取り付けることができる。撮像装置108は、例えばトポグラフィ画像センサ及び/又は視覚画像センサであってもよい。撮像装置108は、カテーテルチューブ100の遠位端を取り囲む構造(例えば、カテーテルチューブ100によって横断されている器官の構造)に対応する画像データ(「キャプチャされた画像データ」)をキャプチャしてもよい。例えば、LiDAR、タイムオブフライト(Time-of-Flight、TOF)イメージング、視覚画像センシング(例えば、静止画像及び/又はビデオのキャプチャを含んでもよい)、又は他の適用可能なイメージング技術が、画像データをキャプチャするために適用されてもよい。キャプチャされた画像データに含まれてもよいトポグラフィ画像データは、カテーテルチューブ100の遠位端が通過する器官又は器官の一部の形状、体積、一貫性(consistency)、及び位置に関連する情報を提供してもよい。取り込まれた画像データは、トランシーバ106と無線電子通信している遠隔装置によって実行される1つ又は複数の人工知能(AI)モデルに送信され使用されてもよく、これにより、被験者の身体(例えば、その臓器)内のカテーテルチューブ100の場所及び位置に関するフィードバックをAIモデルに提供する。従って、撮像装置108によって生成された画像データを使用して、カテーテルチューブ100の配置をガイドし、カテーテルチューブ100が目標位置に到達したら、(例えば、カテーテルチューブ100が目標位置から離れないようにするために)、カテーテルチューブ100の位置を連続的に監視してもよい。チャネル111を介して送気を行うことにより、カテーテルチューブ100が挿入される被験者の内部構造(例えば、胃腸構造)の視覚化(例えば、撮像装置108によって生成されたキャプチャされた画像データに表されるような視覚化)を改善してもよい。この改善された視覚化により、AIモデルによって達成されるランドマークの認識も改善されるかもしれない。カテーテルチューブ100および関節式スタイラスが腸管系を介して操作する際に撮像装置108によって取得されるトポグラフィ及び/又は視覚(例えば、2次元)画像データは、AIモデル/アルゴリズムによる同時解釈のために、又は腸腔内の異常組織の識別のために有資格者によるキャプチャされた画像データの後の解釈のために、遠隔装置のコンピュータメモリに保存されてもよい。
図2は、カテーテルチューブ200(例えば、図1Aのカテーテルチューブ100に対応してもよい)の遠位端内のデバイス及び構成要素の例示的なブロック図を示す。カテーテルチューブ200は、電源202(例えば、図1Aの電源102に対応する)、分光計204(例えば、図1Aの分光計204に対応する)、トランシーバ206(例えば、図1Aのトランシーバ106に対応する)、及び撮像装置208(例えば、図1Aの撮像装置108に対応する)を含んでもよい。幾つかの実施形態では、分光計204は分光光度計であってもよい。分光計204は、光源220、コリメータ222、モノクロメータ224、出口スリット226、サンプリングモジュール228、アクセスポイント230、及び検出器232を含んでもよい。光源220は、1つ又は複数の発光ダイオード(LED)を含んでもよい。コリメータ222は、光源220によって生成された光をモノクロメータ224上に(例えば、図示しない、その入口スリットを通して)集束させるレンズを含んでもよい。モノクロメータ224は、プリズム(例えば、ブンゼン(Bunsen)プリズムモノクロメータなど)を含んでもよく、又は、コリメータ222から受け取った光の波長の機械的に選択可能な狭帯域の波長を、出口スリット226を通じてサンプリングモジュール228に送信する他の光学装置を含んでもよい。出口スリット226のサイズは、出口スリット226を通して出力されてもよい光の波長に影響を及ぼすかもしれない。サンプリングモジュール228内のサンプリングされた材料を通過する光(例えば、出口スリット226を通って出力される光)は、検出器232によって受け取られる。例えば、検出器232は、サンプルを通過できる光の大きさを測定する光検出器であってもよく、これによって、光の波長に対するサンプルの吸光度及び/又はパーセント透過率を導出することができる。
検出器232によって検出された光の大きさから導出されたサンプルの吸光度及び/又はパーセント透過率に基づいて、サンプルの化学的構成が特定されてもよい。例えば、サンプルの特定は、研究されている化合物(例えば、サンプル)の既知の分光特性に基づいてもよい。例えば、化合物のスペクトル波長を導出することができ、RCDC又はクラウドに配置されたアルゴリズム又はモデルを使用して、スペクトル波長に基づいて化合物を特定することができる。例えば、分光計204を使用してサンプリング及び特定されてもよいバイオマーカは、ナトリウム、カリウム、浸透圧、pH、医薬品、違法薬物、消化酵素、脂質、脂肪酸、血液、血液製剤、胃がん及び/又は胃炎症のバイオマーカ、腸がん及び/又は腸炎症のバイオマーカ、胃プロテオーム、及び/又は腸のプロテオームを含んでもよく、それには限定されない。
幾つかの実施形態では、分光計204によってサンプリングされた物質を特定するための分析は、遠隔コンピューティングデバイスのプロセッサ(例えば、図4A及び4Bのデバイス400のGPU404)によって実行されてもよい。幾つかの実施形態では、この分析は、クラウドコンピューティング環境の1つ又は複数のプロセッサを使用して実行してもよい。
図3及び図12Cは、被験者の腸管系346内(例えば、被験者の胃腸管内)のカテーテルチューブ300(例えば、図1Aのカテーテルチューブ100又は図2のカテーテルチューブ200に対応する)の配置の例を示す。示されるように、腸管系346は、胃346、十二指腸344、及び食道342を含んでもよい。カテーテルチューブ300は、(例えば、臨床医からの手動誘導なしに自動的に)食道342を通って胃346の幽門洞348の目標位置に駆動されてもよい。幾つかの実施形態では、カテーテルチューブ300は、十二指腸344、胃346の他の部分、又は被験者の小腸又は大腸の他の部分など、腸管系346内の他の目標位置に駆動されてもよい。同様に、腸管系へのアクセス領域は、図11に示されるように、下部腸管の配置及び分析のために直腸領域を通ってもよく、又は図12Bに示されるように肺管にあってもよい。
カテーテルチューブ300の先端が目標位置に到達すると、カテーテルチューブ300を使用して1つ又は複数の処置を行うことができる。例えば、外部コンテンツ(例えば、薬物、経腸栄養、又は他の生物学的又は化学的に活性な物質、呼吸補助、換気)は、カテーテルチューブを介して目標位置に送られてもよく、腸(大腸を含む)の内容物又は胃の内容物が除去されてもよく(例えば、生検され(biopsied)てもよく)、及び/又は、バイオマーカ(例えば、物理的及び/又は生化学的バイオマーカ)は、カテーテルチューブ300の遠位端に配置された分光計(例えば、図1A、1C、2の分光計104、204)を使用して連続的にサンプリングされてもよい。更に、カテーテルチューブ300を腸管に配置する間に得られた全ての腸/気管撮像データは、1つ又は複数のAIモデル/アルゴリズムによって、又は、その後、腸/気管腔内の異常組織の識別のため有資格者によって、保存され、分析されてもよい(例えば、同時に分析されてもよい)。
図4A及び4Bは、カテーテルチューブ(例えば、図1A、2のカテーテルチューブ100、200)の管腔(例えば、図1B~1Eの管腔110)に挿入され、カテーテルチューブの遠位端を被験者の内部の目標位置まで自動的に駆動する関節式スタイレットのロボット制御用のデバイス400(本明細書ではロボット制御及び表示センタ(Robotic Control and Display Center、RCDC)400と呼ばれることもある)を示す。デバイス400は、処理回路402、無線通信回路408、ディスプレイ414、420、送気ポンプ421、ねじベースのロック機構416、ワイヤモータ制御418、ロボット制御エンジン424、スレッドドライブ422、及びローディングドック426を含んでもよい。
処理回路402は、(例えば、1つ又は複数のコンピュータプロセッサを含んでもよい)グラフィック処理ユニット(GPU)404及びコントローラ406を含んでもよい。処理回路は、デバイス400に、(例えば、ローカルストレージデバイスとして)含まれる、又は(例えば、クラウドストレージデバイスとして)結合される、1つ又は複数のメモリデバイス(図示せず)に格納されたコンピュータ可読命令を実行してもよい。例えば、コンピュータ可読命令の実行により、プロセッサに1つ又は複数のAIモデルを実装させてもよい。これらのAIモデルには、例えば、決定木モデル、ナイーブベイズ分類モデル、通常の最小二乗回帰モデル、ロジスティック回帰モデル、サポートベクターマシンモデル、アンサンブル方法モデル、クラスタリングモデル(例えば、ニューラルネットワークを含む)、主成分分析モデル、特異値分解モデル、及び独立コンポーネント分析モデルなどの、1つ又は複数の訓練された機械学習モデルを含んでもよい。
例えば、カテーテルチューブ(例えば、図1A、2のカテーテルチューブ100、200)の周りの特徴(例えば、臓器組織)の画像ストリーム(例えば、図1の撮像装置108によってキャプチャ/生成され、無線通信回路408を介してデバイス400に送信される腸/気管の画像)とともに被験者の腸腔内の目標位置を受信し、受信した画像に基づいてロボット制御エンジン424及び関節式スタイレット420を制御する命令を出力し、カテーテルチューブが目標位置に到達するまで、関節式スタイレット420を被験者の腸腔又は気道を通って移動させる処理回路402によってニューラルネットワークが実装されてもよい。ニューラルネットワークは、例えば、人間の腸/呼吸経路の3Dモデルと、複数(例えば、数千)の人間の被験者におけるカテーテルチューブの配置に対応する鼻/口/直腸の腸及び気管の軌跡の解剖学的画像を使用して、訓練及び検証されてもよい。
幾つかの実施形態では、処理回路402は、カテーテルチューブが挿入された腸腔の容積測定値を取得するように構成された容積感知モジュールを実行してもよい。容積測定値は、ハイパースペクトルイメージング、光の複数の波長を使用したタイムオブフライト(Time-of-Flight、TOF)イメージング、及びステレオイメージングなどの1つ又は複数のイメージング技術を使用して生成/取得された3次元ボリュームデータに基づいて計算される。容積感知モジュールは、容積測定値に基づいて、腸管腔の総容積に対応する第1の容積値、空である総容積の第1の部分に対応する第2の容積値と、材料で満たされる総容積の第2の部分に対応する第3の容積値とを導出してもよい。第3の容積は、第1の容積から第2の容積を差し引くことによって計算してもよい。
例えば、RCDCが自律的に横断できるようにする人工知能(AI)ベースの検出及び追跡モデルは、深層学習YOLOベースの検出器と畳み込みニューラルネットワーク(CNN)の両方を含んでもよい深層学習検出器を使用して、近位環境で視覚的に類似した構造を更に区別することによって、鼻、口、直腸の開口部、及び腸/呼吸腔を検出してもよい。腸管/気管空間検出の場合、26層以上のCNNベースの検出モデルを使用できる。このようなモデルでは、最初の24層はImagenetデータセットで事前トレーニングされた完全な畳み込み層であり、最後の2層は検出された組織/臓器を出力する完全に接続された層であってもよい。追跡のために、まばらなオプティカルフローによるオブジェクトの位置の推定を使用して、ロボット配置デバイスの動きベクトルを予測するために、メディアンフローフィルタリング・ベースの視覚追跡技術が採用されてもよい。追跡ベースのシステムは、オブジェクトが、腸腔又は気道などのオブジェクト全体の動きとより同期する、小さく堅固に接続されたブロック又はパーツで構成されているという仮定に基づいていてもよい。
例えば、AIモデルの初期化は、鼻/口/直腸の開口部又は腸腔が最初に位置するバウンディングボックスを設定することによって実行されてもよく、この対象領域内で点のまばらなグリッドを生成してもよい。キャプチャされた画像でオプティカルフローによって検出された腸管構造の動きは、現在の画像と前の画像にある各点の座標の差の中央値として計算されてもよい。フィルタリング中に信頼できるとみなされた点のみを考慮して、アルゴリズムがオブジェクトのスケールの変動を推定してもよい。
例えば、AIモデルの実装と腸/気管のオブジェクト検出は、YOLOベースのアルゴリズムと、Pythonを介して実装されるメディアンフロー・トラッカーを介して実行できるオブジェクトトラッキングを介して実行できる。環境は、例えばUbuntu上に構築されてもよい。グラフィックス・プロセッシング・ユニット(GPU)統合cuDNN及びCUDAツールキットが使用されてもよい。トレーニングセグメントは、注釈付きの画像をYOLOのKeras実装に供給することで実装されてもよい。Keras及びTensorFlowバックエンドを使用されてもよく、データセットは、1000トレーニングエポックに対して10の学習率を採用し、100エポックごとにモデルパラメーターを保存して、アノテーション・ソフトウェアVoTT(Microsoft、ワシントン州レドモンド)を使用して作成されてもよい。検出セグメントも、バックエンドでTensorFlowを実行しているKerasに基づいて実装されてもよい。追跡には、OpenCVの追跡APIを使用されてもよい。バウンディングボックスはYOLOによって検出され、リアルタイムの検出と追跡を実現するために、m:nの比率でメディアンフロー・トラッカーに渡されてもよい。
幾つかの実施形態では、処理回路402によって格納及び実行されるのではなく、AIモデルに対応するコンピュータ可読命令は、クラウドベースのメモリデバイス及びコンピュータプロセッサによって格納及び実行されてもよい。AIモデルによって入力として取得されたデータ(例えば、画像及び分光計データ)は、無線通信回路408を使用して、1つ又は複数の通信ネットワークを介してデバイス400によってそのようなクラウドベースのメモリデバイス及びコンピュータプロセッサに送信されてもよい。無線通信回路408は、これらのAIモデルがデータを処理した後に、これらのAIモデルの出力を更に受信してもよい。このように、デバイス400のローカル処理回路402の処理能力に対する要件は、AIモデルがローカルで実行される必要がある場合よりも少なくてよく、それは一般にコストを削減し、場合によっては、デバイス400のフットプリントを削減するかもしれない。ただし、このようなクラウドベースのソリューションは一般にネットワーク(インターネットなど)接続を必要とし、ローカルハードウェアよりもAIモデルの実行に時間がかかる場合がある(例えば、クラウドとローカルの処理能力が等しいと想定される場合など)。幾つかの実施形態では、AIモデルを実行して、ローカル処理回路402とクラウドベースのプロセッサの両方によってデータ分析を実行してもよい(例えば、バイオマーカ分析がローカルで実行され、ロボット駆動のナビゲーション分析がクラウドベースのプロセッサによって実行される、又は、その逆など)。
無線通信回路408は、ローカルエリアネットワーク(LAN)モジュール410及びワイヤレスパーソナルエリアネットワーク(WPAN)モジュール412を含んでよい。LANモジュール410は、ワイヤレスルータ、スイッチ、又はハブへの無線接続を介して、システム400をLANに通信可能に結合してもよい。例えば、LANモジュール410は、LANと外部ネットワークとの間のネットワーク接続を介して、1つ又は複数のクラウドコンピューティングリソース(例えば、クラウドコンピューティングサーバ)と通信することができ、外部ネットワークには、(例えば、インターネットなどの広域ネットワーク(WAN)経由で)クラウドコンピューティングリソースが接続されている。WPANモジュール412は、確立されたWPANを介して、UHF無線技術企画(Bluetooth(登録商標)など)に従って1つ又は複数のアンテナを使用して、カテーテルチューブの遠位端に配置されたトランシーバ(例えば、図1A、1D、2のトランシーバ106、206)と通信してもよい。例えば、WPANモジュール412は、カテーテルチューブの遠位端に配置される、トポグラフィイメージングデバイスであってもよい、撮像装置(例えば、図1A、1E、2の撮像装置108、208)によって生成される画像データ(例えば、3Dトポグラフィ画像データ)を受信してもよい。画像データは、カテーテルチューブが被験者の腸腔又は気道内の目標位置に向かって駆動されるときに、リアルタイムでWPANモジュール412に送信されてもよい。WPANモジュール412は、分光計(例えば、図1A、1C、2の分光計104、204)から分光計データを受信してもよい。WPANモジュール412は、この分光計データを処理回路402に提供してもよく、処理回路402は分光計データを分析して、分光計によってサンプリングされた1つ又は複数の化学物質を特定してもよい(例えば、そのような分析を実行するように訓練された1つ又は複数のAIモデルを使用して)。
幾つかの実施形態では、カテーテルチューブの遠位端に配置された通信回路(例えば、トランシーバ)と通信するためにWPANモジュール412を使用するのではなく、通信回路又はLANモジュール410への直接の有線接続を使用して、カテーテルチューブの通信回路との間でデータを転送してもよい。
関節式スタイレット420(本明細書では「ロボット誘導関節式スタイレット」と呼ばれることもある)は、カテーテルチューブ(例えば、図1A、2のカテーテルチューブ100、200)の管腔(例えば、図1B~1Eの管腔110)に挿入されてもよい。関節式スタイレット420は、ねじベースのロック機構416を使用してデバイス400のポートにロックすることができる。ねじベースのロック機構416は、いくつかの異なる方法で機能することができる。1つの実施形態では、ねじベースのロック機構416は、関節式スタイレット420の周りを圧縮して所定の位置にロックするシリコーン又はエラストマーリングをねじ込む、Tuohy Borst弁又は標準的な同軸関節式スタイレットロックと同様に動作してもよい。別の実施形態では、ねじベースのロック機構416は、関節式スタイレット420の長さに対して実質的に垂直に位置合わせされた、ねじ/くさびを含むことができ、ねじ/くさびが回転して「ロック」状態になると、関節式スタイレット420を「挟み」、関節式スタイレット420を所定の位置にロックしてもよい。更に別の実施形態では、ねじベースのロック機構416は、関節式スタイレット420を所定の位置にロックするために機構が回転する際に、(例えば、ドリルビットチャックと同様に)関節式スタイレット420の周りにいくつかの金属(又はプラスチック)フィンガを持ってくることによって作動する同軸ねじ機構を含むコルト機構を含んでもよい。幾つかの実施形態では、関節式スタイレット420は、カテーテルチューブの内腔に挿入するのではなく、カテーテルチューブ自体に埋め込まれてもよい。関節式スタイレット420は、様々な適用可能な材料のうちの1つから形成されてもよい。幾つかの実施形態では、関節式スタイレット420は、ステンレス鋼から形成されてもよい。例えば、関節式スタイレット420は、単一のステンレス鋼フィラメント、又は編組若しくは巻かれたステンレス鋼ケーブルを含んでもよい。幾つかの実施形態では、関節式スタイレット420は、ニチノールから作られてもよく、ニチノールは、形状記憶又は極度の柔軟性特性を提供してもよい。関節式スタイレット420は、ロボット制御エンジン424によって制御されてもよい関節遠位端(例えば、図5A、5Bの関節504)を有してもよく、これによって、関節式スタイレット420は、被験者の腸腔又は気道を通ってカテーテルチューブを案内するときに方向を変えることができる。例えば、ロボット制御エンジン424は、アクセス部位(例えば、被験者の鼻又は口)から被験者の腸腔又は気道を通って関節の遠位端まで、関節式スタイレット420を、従って、カテーテルチューブを、直接ナビゲートしてもよい。ロボット制御エンジンは、無線通信回路408と通信する処理回路402及び/又はクラウドベースの処理回路によって実行される、AIモデルのナビゲーションAIモデルによるナビゲーションデータ出力に基づいて、関節式スタイレット420の方向を制御してもよい。幾つかの実施形態では、関節式スタイレット420の遠位端が関節式であるのみでなく、関節式スタイレット420の長さの一部又は全部に沿って追加の関節が含まれてもよい。このようにして、ロボット制御エンジン424によって制御されることにより、関節式スタイレット420は、被験者の喉頭、声帯、下気道など、被験者に安全上のリスクをもたらす可能性のある領域を避けながら、カテーテルチューブを被験者の腸腔又は気道の目標位置に誘導してもよい。ロボット制御エンジン424は、カテーテルチューブが被験者の腸腔又は気道内のその目標位置に到達すると、(例えば、カテーテルチューブに埋め込まれた画像装置によって生成されたトポグラフィ画像データに基づく1つ又は複数のAIモデルを使用して、カテーテルチューブの遠位端の位置を継続的に監視することによって)カテーテルチューブを目標位置に維持するロボットフィードバックシステムのような、ロボットフィードバックシステムをさらに適用することができる。ロボット制御エンジン424によって様々な制御機構を実行して、関節式スタイレットの関節遠位端の動きを制御してもよい。幾つかの実施形態では、制御機構は、カテーテルチューブの動き(例えば、屈曲/屈曲)が望まれる場所(例えば、関節接合部)の周りのカテーテルチューブ内の異なる点に複数のワイヤが取り付けられるプルワイヤタイプの構成を含んでもよい。これらのワイヤは、ロボット制御エンジン424のモータ機構内のスプールに接続される。スプールは、第1の方向(例えば、時計回り又は反時計回り)に回転してワイヤを巻き上げ(カテーテルチューブの先端をその近位端に向かって曲げる)、第2の方向(例えば、第1の方向と反対)に回転してワイヤを延ばしてもよい(例えば、カテーテルチューブの屈曲を停止させる)。カテーテルチューブの長手方向軸(例えば、長さ)に沿った「戦略的な」ポイントにこれらのワイヤを配置することで、カテーテルチューブをほぼあらゆる方向に操縦することができる。別の実施形態では、この制御機構は、一連のリンクに結合された複数のニチノールワイヤを介して対処することができる、カテーテル内に配置された一連のリンクを利用することができる。ニチノールワイヤに電流が供給されると(例えば、ロボット制御エンジン424によって制御される電源によって供給されると)、ニチノールワイヤは収縮し、カテーテルを屈曲させる。電流を除去すると、ニチノールワイヤが弛緩し、カテーテルが伸びる。
関節式スタイレット420の前進と後退のために、駆動システム(例えば、必要な精度に応じて、ドライブロッド、ウォームギア、又はラックアンドピニオンベースの駆動システム)が、(例えば、単一のモータを使用して)関節式スタイレットを前後に駆動するように制御するロボット制御エンジン424に含まれてもよい。関節式スタイレット420が挿入されたときのカテーテルの自動回転及び関節運動、並びに関節式スタイレット420の前方/後方駆動を可能にするために使用されるトランスミッションが、ロボット制御エンジン424に含まれてもよい。トランスミッションはステアリングも可能にする。
LCD、LED、又は他の適用可能なスクリーンを含む電子ディスプレイとすることができるディスプレイ414をデバイス400に含めてもよい。ディスプレイ414は、関節式スタイレット、カテーテルチューブ、カテーテルチューブの構成要素、及びカテーテルチューブの遠位端の近位にある被験者の1つ又は複数の器官に関連するステータス情報を表示してもよい。例えば、表示されたデータは、カテーテルチューブの配置に関する情報(例えば、カテーテルチューブの先端及び/又は遠位端)カテーテルチューブの構成要素の状態、及びカテーテルチューブの遠位端に埋め込まれた分光計によって検出されたバイオマーカを含んでよい。幾つかの実施形態では、ディスプレイ414上に示される情報の一部又は全部は、LANモジュール410によって他の電子装置に送信され、続いてそのような装置上に表示されてもよい。例えば、そのような電子デバイスは、医師及び看護師の個人用電子デバイス電話及びタブレット、並びに被験者のベッドサイドに配置されたモニターを有するコンピュータシステムを含んでよく、それらのいずれもが、LANモジュール410と同じLANに接続されてよい。これらのデバイスに送信されたデータは、(例えば、患者管理で使用するため)対応する被験者の電子健康記録の一部として保存される場合があり、臨床意思決定支援システムに組み込まれる場合がある。
送気ポンプ421は、RCDC400に含まれてもよく、これは、空気ポンプ、二酸化炭素ポンプ、又はガス(例えば、送気での使用に適したガス)を出力するように構成された任意の適用可能なポンプであってよい。送気ポンプ421は、送気チャネル(例えば、図1A~1E、5Cのチャネル111、511)に結合されてよく、これを通して、被験者の内部のキャビティ(例えば、被験者の胃腸管)への送気が実行されてよい。
スレッドドライブ422は、前述のナビゲーションAIモデルによって出力されたナビゲーションデータに従って、関節式スタイレット420の伸長及び収縮を制御してもよい。
ローディングドック426は、使用されていないガイドワイヤの部分を格納することができる。関節式スタイレット420は、カテーテルチューブを関節式スタイレット420の全長を利用することなく完全に前方に駆動できるように、配置されるカテーテルより長くてもよい。幾つかの実施形態では、関節式スタイレット420は、用途及び/又は駆動機構に応じて、スプール上を走行するか、ローディングドック426の線形チューブを通って走行することができる。幾つかの実施形態では、関節式スタイレット420は、スレッドドライブ422の駆動ギア/ロッド/ラック内に関節式スタイレット先端を供給することによって、スレッドドライブ422によってロード及びアドレス指定されてよい。幾つかの実施形態では、関節式スタイレット420の長さは、スレッドドライブ422を患者から十分に離して、RCDCを患者のベッドの側面に配置できるように選択されてもよい。そのような実施形態では、関節式スタイレット420の機械的駆動を改善するために、関節式スタイレット420を患者の口に(例えば、バイトブロックを介して)固定されてもよい。
図5Aは、カテーテルアセンブリを形成する、カテーテルチューブ500(例えば、図1A~1E、及び図2のカテーテルチューブ100、200)内の関節式スタイレット502(例えば、図4A、4Bの関節式スタイレット420)の例示的な配置を示す。関節式スタイレット502は、関節504を有する遠位端を含んでよく、関節504は、関節504のプランジ(plunge)、回転(rotation)、及び先端湾曲(tip deflection)の使用を含む、三自由度を持っていてよく、関節式スタイレット502はこの三自由度によって三次元空間をナビゲートしてもよい。例えば、関節504は、関節式スタイレット502の遠位端から約10cm離れて配置されてもよい。カテーテルチューブ500の管壁内の送気チャネル511(例えば、図1のチャネル111)の例示的な配置が示されている。
図5Bは、関節504がRCDCデバイス(例えば、図4A、4Bのデバイス400)のロボット制御エンジン(例えば、図4Aのロボット制御エンジン424)によって制御される時の、関節式スタイレット502の遠位端の例示的な運動範囲を示し、これによって、ロボット制御エンジンは、関節式スタイレット502をナビゲートし、それによってカテーテルチューブ500を被験者の腸系又は気道内の目標位置までナビゲートしてもよい。
図5Cは、関節式スタイレット502がカテーテルチューブ500に完全に挿入されたときのカテーテルチューブ500の遠位部分の断面を示す。示されるように、完全に挿入されると、関節式スタイレット502は、カテーテルチューブ500の管壁506に埋め込まれている撮像装置(例えば、図1の撮像装置108)など、カテーテルチューブの1つ又は複数の埋め込まれた構成要素と重なることがある。
図6は、方法600の例示的なプロセスフローを示し、この方法600によって、関節式スタイレット(例えば、図4A、5A~5Cの関節式スタイレット420、502)及びカテーテルチューブ(例えば、図1A、2、5Aのカテーテルチューブ100、200、500)を被験者の腸系内の目標位置にナビゲートするために、1つ又は複数のAIモデルを実装することができる。例えば、方法600は、1つ又は複数のコンピュータプロセッサ(例えば、図4の処理回路402、又は電子通信ネットワークを介してコンピュータシステムに結合されたクラウドベースの処理回路)を使用して、コンピュータシステム(例えば、デバイス400)の1つ又は複数のローカルストレージデバイス又はリモートストレージデバイス(例えば、電子通信ネットワークを介してコンピュータシステムに結合されたクラウドベースのストレージデバイス)に格納されたコンピュータ可読命令を実行することによって実行されてもよい。
ステップ602で、関節式スタイレットが完全に挿入されたカテーテルチューブが、被験者の体外位置から導入される。例えば、カテーテルチューブが導入される身体の体外位置は、被験者の口、鼻、直腸、又は、被験者の身体の外科的切開であってもよい。
ステップ604で、カテーテルチューブは、関節式スタイレットを駆動することによって、被験者の内部(例えば、被験者の腸腔内)の目標位置に向かってナビゲートされてもよい。カテーテルチューブのナビゲーションは、関節式スタイレットを対象の内部に延ばし、ロボット制御エンジン(例えば、図4A、4Bのロボット制御エンジン424)を使用して関節式スタイレットの少なくとも関節遠位端の方向、回転、及び移動を制御することによって実行されてもよい。
ステップ606で、カテーテルチューブに含まれる撮像装置(例えば、図1A、1Eの撮像装置108)は、カテーテルチューブの遠位端に近接する構造(例えば、臓器組織)の、3Dトポグラフィ画像データ、タイムオブフライト(Time-of-Flight、TOF)画像データ、視覚(例えば、2D)画像データ、及び/又は他の適用可能な腸/気管画像データなどの画像データをキャプチャしてもよい(例えば、連続的にキャプチャしてもよい)。撮像装置は、キャプチャされた画像データを、カテーテルチューブの遠位端に含まれるトランシーバに送信してもよい。キャプチャされた画像データは、ロボット制御エンジンに含まれる、又はロボット制御エンジンに通信可能に結合されたコンピュータメモリに格納されてもよい。保存されると、キャプチャされた画像データは、1つ又は複数のAIモデル/アルゴリズムによって同時に分析されてもよく(例えば、ニアリアルタイムに分析されてもよく)、又は、その後、腸腔内の異常組織を特定するため有資格者によって分析されてもよい。
ステップ608で、トランシーバは、キャプチャされた画像データをコンピュータシステムの処理回路(例えば、図4Aの処理回路402)に無線で送信してもよい。この無線送信は、トランシーバとコンピュータシステムのWPANモジュール(例えば、WPANモジュール412)との間の通信を介して実行されてもよい。
ステップ610で、コンピュータシステムの処理回路は、1つ又は複数のAIモデル(例えば、ニューラルネットワークを含んでもよいナビゲーションAIモデル)を実行し得る。AIモデルは、キャプチャされた画像データを入力として受け取り、キャプチャされた画像データをニューラルネットワーク及び/又はメディアンフローフィルタリングによって処理した後、ナビゲーションデータをロボット制御エンジンに出力してもよい。ナビゲーションデータには、ロボット制御エンジンがどのように関節式スタイレットを目標位置に向かって操作、関節運動、回転、及び/又は駆動するかについての命令を含んでよく、更に、被験者の腸腔又は気道内のカテーテルチューブの位置を定義する情報を含んでもよい。
ステップ612で、処理回路は、ナビゲーションデータに基づいてカテーテルチューブ先端の現在位置を導出してもよい。処理回路は、カテーテルチューブ先端の現在位置が目標位置に対応するかどうかをさらに判定することができる。
ステップ614で、カテーテルチューブ先端の現在の位置が目標位置に対応すると判定された場合、方法600はステップ616に進む。そうでない場合、方法600はステップ604に戻り、ロボット制御エンジンは、AIモデルによるナビゲーション出力に基づいて、カテーテルチューブと関節式スタイレットをナビゲートし続ける。
ステップ616では、関節式スタイレットがカテーテルチューブから取り外され、カテーテルチューブを使用して手術が行われる。例えば、物質(例えば、栄養物質、薬、又は人工呼吸器)は、カテーテルチューブの管腔を通して被験者の腸腔又は気道の目標位置に送られてもよい。あるいは、被験者の腸腔の目標位置にある物質(例えば、生検組織又は体液)は、カテーテルチューブの管腔を通して回収されてもよい。
幾つかの実施形態では、カテーテルチューブは、臨床的に示されるように、ステップ616に続く標準的な期間、患者に留置されたままであってもよい。留置カテーテルチューブは、継続的な監視、継続的なサンプリング、食事の提供、薬の送達、又は気道のサポートの提供に使用できる。
図7は、RCDC(例えば、図4A及び4BのRCDC400に全体的又は部分的に対応してもよい)の潜在的な実施形態を示す。例示的なRCDC700は、キャリッジ701、関節式スタイレット702、及びスライド703を含んでもよい。キャリッジ701は、関節式スタイレット702が挿入されるカテーテルと共に移動し得る撮像デバイス及びモータを収容してもよい。関節式スタイレット702は、キャリッジ701に取り付けられてもよい。キャリッジ701は、スライド703に沿って移動して、関節式スタイレット702の先端の位置を制御する。制御可能なモータ(例えば、リニアスライドモータ802、図8A)は、スライド703に沿ったキャリッジ701の移動を駆動してもよい。例えば、制御可能なモータは、RCDC700のコンピュータプロセッサ(例えば、処理回路402、図4A)から制御可能なモータによって受信された命令に従って、キャリッジ701をスライド703に沿って移動させてもよい。
図8A及び8Bは、それぞれ、図7のキャリッジ701の内部詳細の、斜視図及び上から見下ろした図を示す。例示的なキャリッジ内部800は、関節式スタイレット804(例えば、図7の関節式スタイレット702)の回転及び先端作動を制御するためのモータを含む。本実施形態のモータは、管をナビゲートするのに必要な最小数である三自由度で関節式スタイレット804の制御を可能にすることができる。関節式スタイレット804が目標位置にナビゲート/駆動される際に、関節の数を増やしたり、輪郭または形状を変更したりするために、自由度を増加させてもよい。関節式スタイレット804の回転は、回転モータ801によって制御され、関節式スタイレット804の先端の作動は、プルワイヤモータ803によって制御される。キャリッジ(例えば、キャリッジ701、図7)は、リニアスライドモータ802によって制御されるリニアスライド808(例えば、スライド703、図7)に沿って移動する。回転モータ801は、キャリッジ内部の中心軸も回転させてもよい。カメラ805及び光源806は、中心シャフトに取り付けられてもよい。カメラ805及び光源806は、イメージガイド(例えば、図9のイメージガイド903)及びライトパイプ(例えば、図9のライトパイプ904)の埋め込みを可能にするために、関節式スタイレット804と共に回転してもよい。カメラ805及び光源806は、様々な波長の照明、又は、トポグラフィ画像、タイムオブフライト(Time-of-Flight、TOF)画像、及び/又は静止画像及び/又はビデオ画像(例えば、2D)画像を含む、様々なイメージング・メソドロジー(imaging methodologies)を利用することができる。シャフト809は、カメラ805又は光源806との電力又は通信に必要な配線を束縛することなく、連続的に360度回転することができてもよい。
図9は、例示的な関節式スタイレット900の横断面を示す。関節式スタイレット900は、その遠位先端に曲げセクション901を有する。曲げ部は、プルワイヤモータ(例えば、プルワイヤモータ803、図8A及び8B)によって作動され得るプルワイヤ902に取り付けられる。強化型関節式スタイレット(Enhanced Articulated Stylet)は、レンズ905を備えたイメージガイド903を含んでもよい。イメージガイド903は、レンズ905を介して受け取った光学データをキャリッジ(例えば、キャリッジ701、キャリッジ内部800、図7、8A、および8B)。内のカメラ(例えば、カメラ805、図8A及び8B)に戻す経路を提供する。カメラの照明は、キャリッジ内の光源(例えば、光源806、図8A及び8B)に接続するライトパイプ904を通して提供される。幾つかの実施形態では、イメージガイド903及びライトパイプ904を含む光バンドルは、追加的又は代替的に、(例えば、関節式スタイレット900が挿入される)関節式スタイレット900の外部のカテーテルチューブ(例えば、図1A、2、5Aのカテーテルチューブ100、200、500)内に埋め込まれてもよい。幾つかの実施形態では、関節式スタイレット900は、遠位端又はその近くにスタイレット分光計906及び/又はスタイレットトランシーバ907を含んでもよい(図9)。
図7のRCDC700の潜在的な実施形態は、図8A及び図8Bの連続回転機構809を使用して、キャリッジ701内に保持されたローカルコンポーネントを中央処理及び/又は表示ユニット(例えば、ディスプレイ414、図4A)に配線する。
図10は、カテーテルチューブ1002に挿入された関節式スタイレット1001を含む例示的なアセンブリ1000を示す。関節式スタイレット1001は、遠位曲げセクション1005及び光学窓1006を含む。光学窓は、イメージガイド(例えば、イメージガイド903、図9)に接続し、光コネクタ1007を介してRCDC(例えば、RCDC400、700、図4A、図4B、及び図7)に戻るように接続することができる。幾つかの実施形態では、追加的又は代替的に、カテーテルチューブ1000(例えば、図1A、図2、図5A、及び図10のカテーテルチューブ100、200、500、1002)の壁内に光学部品を埋め込んでもよい。カテーテルチューブ1002は、その中に挿入された関節式スタイレット1001を有し、関節式スタイレット1001が除去された後、患者の腸腔又は気道内に留置されたままであってもよい。関節式スタイレット1001はまた、近位送気ポート1003及び近位経腸アクセスポート1004を含んでもよい。ポート1003及び1004の両方が、関節式スタイレット1001又はカテーテルチューブ1002のいずれかに埋め込まれてもよい、埋め込まれた管腔へのRCDCアクセスを提供する。
図11は、被験者の結腸内の関節式スタイレット1118(例えば、関節式スタイレット420、502、702、804、900、1001、図4A、図5A、図5B、図7、図8A、図8B、図9、図10)の配置例を示す。示されるように、関節式スタイレット1118は、肛門1102に入り、直腸1104を通過し、S状結腸1106を通過し、下行結腸1108を通過し、横行結腸1110を通過し、上行結腸1114を通過して、目標位置に到達する。示されるように、直腸1104からS状結腸1106まで、S状結腸1106から下行結腸1108まで、下行結腸1108から横行結腸1110まで、及び横行結腸1110から上行結腸1114までの移行は、スタイレット1118の関節を介して行われてよい。関節式スタイレット1118の遠位端1112は、目標位置に配置されてもよく、撮像装置(例えば、撮像装置108、208、図1A、図1E、及び図2)を含んでもよい。撮像装置は、関節式スタイレット1118が結腸を横切るときに、結腸の、又は、結腸内の、構造、内容物、内壁などの画像データ(例えば、トポグラフィ、タイムオブフライト(Time-of-Flight、TOF)、及び/又は視覚画像データ)を取得してもよく、画像データは、ロボット制御デバイス(例えば、RCDC400、700、図4A、図4B、図7)のコンピュータメモリ装置、又は、又はロボット制御デバイスに通信可能に結合されたコンピュータメモリ装置に記憶されてもよい。キャプチャされた画像データは、関節式スタイレット1118が結腸を通過して目標位置に到達する際に、リアルタイム又はニアリアルタイムで分析されてもよい。ロボット制御デバイスは、関節式スタイレット1118の近位端1116に結合されてもよく、関節式スタイレット1118のプランジ(plunge)、回転(rotation)、先端湾曲(tip deflection)、及び前進/後退(advancement/retraction)を制御してもよい。
上述のカテーテルチューブ及びRCDCは、様々な実用的な用途を有してもよい。
1つの適用例では、異常組織サンプルの識別、画像化、及び潜在的なサンプリングのための、自動化された消化管インビボ(in vivo)直接カテーテルチューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、異常組織サンプルの監視のための、自動化された胃腸管インビボ(in vivo)直接カテーテルチューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、AIモデル/アルゴリズムによって、又は腸腔内の異常組織の識別のために有資格者によって同時に分析されることができる、RCDCのコンピュータメモリに格納されるか、又はRCDCに通信可能に結合されるコンピュータメモリに格納されるトポグラフィ又は視覚画像データを取得する、異常組織サンプルの監視のための自動化された下部腸管インビボ(in vivo)直接カテーテルチューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、胃腸がん、炎症性疾患、及び吸収不良症候群のバイオマーカのサンプリング用の、自動化された消化管インビボ(in vivo)直接カテーテルチューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、経皮的栄養アクセスを含む手術手順の支援、及び/又は、内視鏡肥満手術や胆道の内視鏡手術を含む様々な腹腔鏡介入の支援のために、自動化された消化管インビボ(in vivo)直接カテーテルチューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、自動挿管のための自動化された気道インビボ(in vivo)直接気管内挿管チューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
別の適用例では、換気サポートのための自動化された気道インビボ(in vivo)直接気管内挿管チューブナビゲーションのために、カテーテルチューブ及びRCDCを共に適用することができる。
この実施形態では、気管内挿管のための自動化された自律的な移動ロボットの使用が重要である可能性がある。これは、本明細書に開示されている視覚ベースのデータ、高度なデータ分析、及び人工知能を使用して、早期、安全、かつ信頼できる気管内挿管を可能にするデバイスを駆動することで達成できる。
この実施形態では、RCDCから延びるロボットのスタイレットは、挿入される気管内チューブの一端を通して配置され、他端から引き出される。次いで、スタイレットは、患者の鼻孔(左又は右の鼻孔のいずれか)又は患者の口(標準的な口腔咽頭チューブに沿って)のいずれかに配置される。ロボットはこの時点でプロセスを開始する。スタイレットの先端にある視覚カメラとトポグラフィカメラから取得した画像を使用して、コンピュータのアルゴリズムが(挿入部位に応じて)鼻咽頭又は中咽頭の構造を認識し始め、これらの画像が与えられると、ロボットはスタイレットを咽頭から喉頭に向けて移動させる。この時点で、喉頭蓋がロボットの視界に入り、認識される。アルゴリズムは、前方の喉頭と後方の食道の接合部を認識し、すべての自由度を制御するアクチュエータとモータを使用して、スタイレットを前方に動かし、喉頭を通り、声帯を通って気管に入る。これはすべて、コンピュータビジョンをガイドとして使用して行われ、患者側の臨床医からの入力は必要ない。スタイレットの方向を導く決定はすべて、コンピュータアルゴリズムによって自動化され、デバイスの機械システムによって制御される。
気管に入ると、デバイスは気管内部の画像を提供する。スタイレットが気管内、声帯を通り、分岐部として知られる主幹気管支への気管の分割レベルより上に正しく配置されていることを確認する確証を与えることができる。これは、声帯の識別によってスタイレットの位置を確認し、安全な気道を確保するため重要であるが、片肺のみの換気を引き起こす可能性のある気管支の1つの挿管を起こすほど深く配置されない。
1つの実施形態では、この確認は、ライブ写真として患者側の臨床医に提供するか、3次元のトポグラフィ再構成として提供できる。
1つの実施形態では、スタイレットトランシーバ907(図9)と共にスタイレットの遠位端に取り付けられ、サンプリングされている試料中の二酸化炭素を検出するために使用することができる、前述の分光計と同様のスタイレット分光計906(図9)を使用して、気管内スタイレットの配置が気道内にあることを確認できる。二酸化炭素の検出は、スタイレットが、二酸化炭素が検出されないと想定される食道ではなく、気道にあるというインディケーションを提供する。これは、(声帯の識別とともに)適切な配置の確認の2番目の形態である。
不適切に配置された気管内チューブは、患者を低酸素化及び組織虚血に長時間さらす可能性がある主要な合併症であるため、気管内チューブの正しい配置は重要である。
スタイレットが正しい位置にあることが確認されると、可視画像又は3次元画像再構成の使用と、管腔内二酸化炭素の分光学的識別の使用の両方によって、ロボットスタイレットの外側に配置された気管内チューブは、患者の気管内の正しい配置へスタイレットの上を単純に進ませられる。
図12Aは、ロボット制御センタ1200がカテーテル装置をその内側関節式スタイレット1210及び外側カテーテルチューブ1220と共に前進させる図を示し、自動運転ロボットが喉頭の変曲点に進み、そこにおいて、ロボットが喉頭と気管に前方に向かう、又は、食道に後方に向かうことを実証する。この時点で、ロボットのスタイレットのカメラから取得した画像に基づいて判断を下すコンピュータアルゴリズムは、ロボット制御の機械部分をガイドして、スタイレットを咽頭で前方に喉頭へ進ませ、声帯を通って気管に入らせる。
図12Bは、内側関節式スタイレット及び外側カテーテルチューブを備えたカテーテル装置を前進させるロボットの図を示し、自動運転ロボットが喉頭の変曲点を超えて進み、肺アクセスのために喉頭と気管へ前方に駆動されること実証する。
図12Cは、内側関節式スタイレット及び外側のカテーテルチューブを備えたカテーテル装置を前進させるロボットの図を示し、自動運転ロボットが喉頭の変曲点を超えて進み、上部の腸へのアクセスのために食道へ後方に駆動されること実証する。
図13は、誘導システム1300のブロック図の概略図を示す。誘導システム1300は、ロボットシステム1302、スタイレット1304(又は言い換えればガイドワイヤ)、固定装置1306、及び医療用チューブ1308を含むことができる。ロボットシステム1302は、デバイス400(例えば、ロボット制御及び表示センタ)又は本明細書に記載の他のロボットシステムと同様の方法で実装することができる。幾つかの実施形態では、ロボットシステム1302は、コントローラ1310、撮像装置1312、照明源1314、1つ又は複数のアクチュエータ1316、ガス源1318、ディスプレイ1320、及び電源1322を含むことができる。幾つかの場合には、コントローラ1310は、コントローラ406と同様の方法で実装することができ、撮像装置1312は、撮像装置108、208と同様の方法で実装することができ、照明源1314は、光源220と同様の方法で実装することができる。例えば、コントローラ1310は、1つ又は複数のプロセッサを含むことができ、撮像装置1312は、撮像センサ(例えば、CCD、アクティブピクセルセンサなど)を含むことができ、照明源1314は、1つ又は複数の光源(例えば、1つ又は複数のLED)を含むことができる。
幾つかの構成では、ロボットシステム1302は、5つのアクチュエータ1316を含むことができるが、他の構成では、ロボットシステム1302は、他の数(例えば、1、2、3、4など)のアクチュエータ1316を含むことができる。アクチュエータ1316は、異なる方法で実装することができる。例えば、アクチュエータ1316は、モータ(例えば電気モータ)と、モータに結合されたエクステンダ(例えばリードスクリュー)とを含むことができ、モータの回転がエクステンダの伸長(及び収縮)を駆動する。従って、場合によっては、各アクチュエータ1316をリニアアクチュエータとすることができる。別の例として、各アクチュエータ1316は、モータの回転がモータに結合されたコンポーネントの回転を駆動する単なるモータとして実施することができる。以下により詳細に説明するように、1つ又は複数のアクチュエータ1316は、(例えば、スタイレット1304が患者内に前進するにつれて)スタイレット1304の伸長及び向きを調整するように構成される。幾つかの実施形態では、各アクチュエータ1316は、ステッピングモータを含むことができる。
ガス源1318は、さまざまな方法で実装することができる。例えば、ガス源1318は、流体(例えば、酸素、二酸化炭素など)をスタイレット1304に送り込むか、スタイレット1304から流体を追い出すか、又はその両方を行うように構成することができる。例えば、ガス源1318は酸素源(例えば、加圧酸素源)とすることができ、ガス源1318は酸素をスタイレット1304に導入することができる。この場合、ガス源1318は、スタイレット1304への酸素の流量を調整するために弁を選択的に(及び様々な程度に)開く(又は閉じる)ために、コントローラ1310によって制御可能な弁(例えば、電磁弁)を含むことができる。別の例として、ガス源1318は、患者からスタイレット1304を介して(例えば、ロボットシステム1302の)リザーバに流体を引き出すように構成されたポンプを含むことができる。場合によっては、ガス源1318は、酸素源及びポンプ(例えば、吸引ポンプ)を含むことができ、(例えば、コントローラ1310を介して)それらの間で切り替えることができ、これによって、スタイレット1304への酸素送達を選択的に引き起こす、又は、患者からスタイレット1304を通じて流体を流し、ロボットシステム1302(例えば、リザーバ)に戻す。例えば、ガス源1318は、第1の構成と第2の構成との間でコントローラ1310によって制御可能である1つ又は複数の弁を含むことができる。第1の構成では、コントローラ1310は、1つ又は複数の弁に、酸素を酸素源からスタイレット1304内(及び患者内)に流し、流体が患者からスタイレット1304を通ってロボットシステム1302に流れるのを阻止する。第2の構成では、コントローラ1310は、1つ又は複数の弁に、酸素が酸素源からスタイレット1304に流れるのをブロックさせ、流体が患者からスタイレット1304を通ってロボットシステム1302に流れることを可能にする。
幾つかの場合には、ディスプレイ1320及び電源1322は、それぞれディスプレイ414及び電源102と同様の方法で実装することができる。例えば、ディスプレイ1320は、LCDディスプレイ、タッチスクリーンディスプレイ、LEDディスプレイ、OLEDディスプレイなどであることができる。他の例としては、電源1322は、例えば、電池(例えば、リチウムイオン電池)を含む電源とすることができる。幾つかの構成では、電源1322は、必要に応じて、ロボットシステム1302の各構成要素に電力を供給することができる。例えば、電源1322は、コントローラ1310、撮像装置1312、照明源1314、アクチュエータ1316、ガス源1318、及びディスプレイ1320に電力を供給することができる。幾つかの構成では、図13には示されていないが、ロボットシステム1302は、他のコンピューティングデバイス(図示せず)と通信する(例えば、双方向通信する)ように構成することができる。例えば、ロボットシステム1302は、コンピュータと通信して、例えば、その後の分析のためにデータ(例えば、撮像データ)をコンピュータに送信することができる。このようにして、ロボットシステム1302は、より高速な分析のために他の計算資源を利用することができる。幾つかの場合には、次に、ロボットシステム1302は、他のコンピューティングデバイスとの通信を容易にするために、例えば、アンテナ、受信機、トランシーバなどを含む通信システム(例えば、無線モジュール、シリアルモジュールなど)を含むことができる。
幾つかの実施形態では、図13には示されていないが、ロボットシステム1302は、分光計(例えば、分光計104)、GPUを含む他の処理回路(例えば、GPU404)などを含むことができる。幾つかの構成では、ロボットシステム1302の構成要素のそれぞれは、ロボットシステム1302の単一のハウジング内に統合することができ、しかしながら、ロボットシステム1302のいくつかのコンポーネントは、単一のハウジングの外部にあってもよい。例えば、ディスプレイ1320は、ロボットシステム1302のハウジングの外部に(例えば、別個のコンピューティングデバイスの一部として)存在することができ、ガス源1318は、例えば、ロボットシステム1302のハウジングの内部に存在することができる。図13は、ロボットシステム1302が、1つの撮像装置1312、1つの照明源1314、1つのガス源1318を有することを示すものの、ロボットシステム1302は、他の数のこれらの構成要素を含むことができる。例えば、ロボットシステム1302は、複数の撮像装置1312、複数の照明源1314、複数のガス源1318(例えば、酸素ガス源及びCOガス源)を含むことができる。同様に、ロボットシステム1302は、複数の分光計を含むことができる。
スタイレット1304は、例えば関節式スタイレット420、502、702、804、900、1001、1118を含む前述のスタイレットと同様の方法で実施することができ、従って、これらのスタイレットはスタイレット1304に属する(及びその逆も成り立つ)。スタイレット1304は、光バンドル1324、ライトパイプ1326(又は、言い換えると、ライトガイド)、1つ又は複数のフィラメント1328、チャネル1330、及び二酸化炭素(「CO」)センサ1332を含むことができる。光バンドル1324は、1つ又は複数の光ファイバ(例えば、コヒーレント光ファイバ)を含むことができ、その各々は、光を患者の内部からロボットシステム1302の1つ又は複数の光センサに送るように構成されている。例えば、光バンドル1324の第1の光ファイバは、(例えば、スタイレット1304がロボットシステム1302に(例えば、ロボットシステム1302のハウジングで)結合されるときに)、ロボットシステム1302の撮像装置1312に光学的に結合することができる。同様に、光バンドル1324の第2の光ファイバは、ロボットシステム1302の分光計に光学的に結合することができる。これらの方法で、スタイレット1304が撮像装置(又は分光計)を含む必要なく、患者の内部からの光を撮像装置1312によって撮像することができる。従って、(例えば、撮像装置1312または分光計が処置中に患者と直接接触していないため)、好都合なことに、スタイレット1304は処置後に廃棄することができ、ロボットシステム1302はその後の処置のために再利用することができる。従って、スタイレット1304は、撮像装置1312、分光計、他の高価な構成要素などを含まないため、スタイレット1304はかなり費用対効果の高い(例えば、より安価な)ものにすることができ、それにも関わらず、ロボットシステム1302を介して、患者の内部の画像を取得しスタイレット1304の前進を誘導することができる。
光バンドル1324と同様に、ライトパイプ1326も、ロボットシステム1302の照明源1314に光学的に結合することができる。このようにして、照明源1314によって放出された光は、ライトパイプ1326内に放射され、ライトパイプ1326を通って進行し、ライトパイプ1326から患者の内部に放出されることができる。スタイレット1304が複数のライトパイプ1326を含むときを含め、幾つかの場合には、(例えば、ロボットシステム1302が複数の照明源1314を含む場合)、各ライトパイプ1326は、ロボットシステム1302の対応する照明源1314に光学的に結合することができる。幾つかの構成では、ライトパイプ1326は、光バンドルと同様の理由で有利になることができる(例えば、照明源1314を再利用することができる)が、他の構成では、スタイレット1304は、(ロボットシステム1032ではなく)1つ又は複数の照明源1314を含むことができる。この場合、例えば、各照明源1314は、スタイレット1304の遠位端に結合することができ、ロボットシステム1302に電気的に接続することができる。例えば、電線は、照明源1314から電源1322へ及びコントローラ1310へ通すことができる。構成に関係なく、コントローラ1310は、各照明源1314に選択的に光を放射させ、それによって患者の内部を照明する(又は照明を停止する)ことができる。
幾つかの構成では、スタイレット1304は、1つ又は複数のレンズを含むことができる。例えば、第1のレンズ(例えば、収束レンズ)は、光バンドル1324の1つの光ファイバに光学的に結合することができる。特に、第1のレンズは、光バンドル1324の1つの光ファイバの遠位端の前に配置することができる。このようにして、患者の内部からの光を1つの光ファイバの遠位端に集束させることができ、これにより、撮像装置1312の視野を有利に拡大することができる。幾つかの場合には、第1のレンズは、スタイレット1304に(例えば、スタイレット1304の遠位端で)結合することができる。幾つかの構成では、第1のレンズは、スタイレット1304内に配置することができる。他の例としては、第2のレンズ(例えば、収束レンズ)は、光バンドル1324の第2の光ファイバに光学的に結合することができ、第2の光ファイバの遠位端の前に配置することができる。このようにして、患者の内部からの光を第2の光ファイバの遠位端に集束させることができ、ロボットシステム1302の分光計によって受信される光の量を増加させることができる。更に別の例として、第3のレンズ(例えば発散レンズ)をライトパイプ1326の遠位端(又は照明源1314の遠位端)に光学的に結合することができる。このようにして、ライトパイプ1326(又は照明源1314)から放射された光は、第3のレンズによって分散されて、患者の内部をよりよく照らすことができ、それは、撮像装置1312によるより良い画像取得を容易にすることができる。
幾つかの実施形態では、スタイレット1304は、1つ又は複数のフィラメント1328を含むことができる。例えば、スタイレット1304は、4つのフィラメント1328、又は例えば、1つ、2つ、3つ、5つなどを含む他の数のフィラメントを含むことができる。各フィラメント1328は、スタイレット1304の本体の一部(又はスタイレット1304の本体の長手方向の範囲全体)に結合又は一体化することができる。例えば、各フィラメント1328の一部は、スタイレット1304の本体の遠位端でスタイレット1304の本体に結合(又はその中に統合)することができる。次いで、各フィラメント1328の残りの範囲を、スタイレット1304の本体から切り離すことができ、これによって、各フィラメント1328に張力がかかった場合(例えば、引っ張られた場合)、各フィラメント1328が結合されるスタイレット1304の遠位端は、張力で引っ張られたフィラメントに向かって(例えば、張力の量に対応する偏向量で)偏向する。幾つかの場合には、スタイレット1304の本体に結合された端部とは反対側の各フィラメント1328の端部は、それぞれのアクチュエータ1316に結合されることができる。このようにして、コントローラ1310は、アクチュエータ1316にそれぞれのフィラメント1328を引っ張らせ、スタイレット1304の遠位端の撓み方向を調整することができる。
幾つかの実施形態では、フィラメント1328は、異なる方法でスタイレット1304の本体に対して配置することができる。例えば、スタイレット1304の本体は、長手方向軸に沿って延びることができ、第1のフィラメント1328は、長手方向軸の周りに実質的に(すなわち、10パーセント未満だけずれて)0度に配置することができ、第2のフィラメント1328は、長手方向軸の周りに実質的に90度で配置することができ、第3のフィラメント1328は、長手方向軸の周りに実質的に180度で配置することができ、第4のフィラメント1328は、長手方向軸の周りに実質的に270度で配置することができる。この構成においては、第1、第2、第3、及び第4のフィラメント1328は、正方形(又は長方形)の断面(例えば、長手方向軸の一部における軸方向断面)を形成することができる。これはフィラメント1328の位置決めの1つの構成であるが、他の構成も可能である。例えば、フィラメント1328は、三角形、六角形などを含む軸方向断面において、全体として他の形状を形成することができる。幾つかの実施形態では、フィラメント1328は、異なる方法で実装することができる。例えば、各フィラメント1328は、単一の糸(例えば、ポリマーの)、編組糸、ワイヤ、編組ワイヤなどであることができる。
幾つかの実施形態では、スタイレット1304は、(例えば、スタイレット1304の近位端からスタイレット1304の遠位端まで)スタイレット1304を完全に貫通することができるチャネル1330を含むことができる。例えば、チャネル1330は、スタイレット1304の本体を通って本体の一端から反対側の端まで延びることができる。幾つかの場合には、チャネル1330は、スタイレット1304の構成要素のいくつかを収容することができる。例えば、光バンドル1324をチャネル1330内に配置することができ、ライトパイプ1326をチャネル1330内に配置することができ、COセンサをチャネル1330内に配置することができる。幾つかの場合には、チャネル1330は、ガス源1318(又はガス源1318)と流体的に連通することができる。このようにして、ガス源1318からの流体(例えば、酸素、COなど)は、チャネル1330に流入し、チャネル1330を通って患者の内部に流入することができ、又は、流体は、患者の内部からチャネル1330に流れ、チャネル1330を通ってロボットシステム1302(又は他のリザーバ)に戻ることができる。これは、ガス源1318が吸引源である時などである。
幾つかの実施形態では、スタイレット1304は、COセンサ1332を含むことができ、COセンサ1332は、様々な方法で実装することができる。例えば、COセンサ1332は、非分散赤外線センサ、光音響分光センサ、化学COセンサなどであることができ、これらのそれぞれは、COセンサ1332と流体的に連通しているCOの量を感知するように構成されている。COセンサ1332は、スタイレット1304の本体に(例えば、スタイレット1304の遠位端で)結合することができる。このようにして、スタイレット1304が患者内に前進すると、COセンサは患者の内部容積と流体的に連通する。幾つかの場合には、スタイレット1304上のCOセンサ1332の位置は、スタイレット1304上の光バンドルの遠位端の位置に実質的に対応することができる。このようにして、撮像装置1312によって取得された画像は、COセンサ1332によって感知されたCO量と実質的に同様の場所に対応することができる。幾つかの場合には、COセンサ1332は、ロボットシステム1302の電源1322及びコントローラ1310に(例えば、ワイヤを介して)電気的に接続することができる。このようにして、コントローラ1310は、COセンサ1332からCO量を受信し、CO量に基づいてスタイレット1304の遠位端の延長又は向きを調整することができる。
幾つかの構成では、スタイレット1304は、遠位端及び近位端を有することができる。スタイレット1304の近位端は、ロボットシステム1302のハウジングに取り外し可能に結合することができる。スタイレット1304の近位端がロボットシステム1302のハウジングに結合されると、各光ファイバは、それぞれの撮像装置(又は分光計)に光学的に結合し、ライトパイプ1326は照明源1314に光学的に結合し、チャネル1330はガス源1318と流体的に連通し、COセンサはコントローラ1310に電気的に接続する。幾つかの場合には、スタイレット1304の近位端がロボットシステム1302のハウジングに連結されると、各フィラメント1328はそれぞれのアクチュエータ1316(例えば、それぞれのアクチュエータのエクステンダ)に連結される。例えば、各フィラメント1328の端部は、(例えば、スタイレット1304の近位端がロボットシステム1302のハウジングに結合されるとき)各アクチュエータ1316のエクステンダの対応するクリップと係合して各フィラメント1328を各アクチュエータ1316に結合するクリップを有することができる。これらの方法で、スタイレット1304は、1つの手順のためにロボットシステム1302と簡単に接続でき、(廃棄のために)取り外すことができ、そして、次のスタイレット(例えば、スタイレット1304と同様)は、(例えば、異なる患者に対する)次の手順のためにロボットシステム1302と容易にインターフェースすることができる。幾つかの実施形態では、スタイレット1304はコイル状にすることができ、モータとして実装されたアクチュエータ1316はスタイレット1304と係合し、従って、コイル状の構成で回転させることができる。このようにして、モータを回転させることによって、コイル状スタイレット1304が回転し(例えば、コイルを解いて)、スタイレットの遠位端がコイル状スタイレット1304の近位端から離れて前進する。
幾つかの実施形態では、スタイレット1304及びスタイレット1304の構成要素は、関節運動するように構成することができる。例えば、スタイレット1304の本体、光バンドル1324、ライトパイプ1326などはそれぞれ、異なる向きに関節運動するように構成することができる。例えば、光バンドル1324、ライトパイプ1326を含むスタイレット1304の遠位端は、スタイレット1304の遠位端の向きを調整するために湾曲するように構成することができる。
幾つかの構成では、誘導システム1300は、固定装置1306及び医療用チューブ1308を含むことができる。固定装置1306は、固定装置1306に対する医療用チューブ1308の移動を選択的に防止(及び許可)するように構成することができる。更に、固定装置1306は、患者に取り外し可能に結合することができる。幾つかの場合には、固定装置1306は、第1の位置と第2の位置との間で動くことができるロックを含むことができる。ロックが第1の位置にある場合、医療用チューブ1308(又は他のデバイス)は、固定装置1306内で更に前進し、従って患者の内部に更に前進することが可能になる。しかし、ロックが第2の位置にあると、医療用チューブ1308は、固定装置1306内へのさらなる前進が阻止され、従って、患者の内部への更なる前進が阻止される。言い換えれば、第1の位置にあるロックは、固定装置1306と医療用チューブ1308との間の相対的な動きを可能にし、第2の位置にあるロックは、固定装置1306と医療用チューブ1308との間の相対的な動きをブロックする。
幾つかの実施形態では、誘導システム1300は、本明細書に記載の口腔咽頭デバイスを含むことができる。この場合、後述するように、口腔咽頭デバイスを患者の口に挿入することができ、その後、固定装置1306を患者に固定する(及び固定装置1306に連結する)ことができる。
図13に示すように、スタイレット1304の遠位端を医療用チューブ1308に挿入し、固定装置1306に前進させることができる。次に、スタイレット1304を患者の内部に前進させ、スタイレット1304の遠位端が所望の位置に到達するまで、ロボットシステム1302によって誘導することができる。その時点で、医療用チューブ1308がスタイレット1304の遠位端に到達するまで、医療用チューブ1308をスタイレット1304に沿って前進させることができる。幾つかの場合には、スタイレット1304は、スタイレット1304の遠位端に配置された機械的ストップ(例えば、突起、凹部など)を含むことができ、これは、医療用チューブ1308が機械的停止部を越えてさらに前進するのを阻止することができる。医療用チューブ1308が配置された後、スタイレット1304を除去することができる(例えば、スタイレット1304を所望の位置に駆動するのと反対のアクチュエータコマンドを使用して)。
図14は、スタイレット1304(又は本明細書に記載の他のスタイレット)の特定の実装であり得るスタイレット1400の側面図の概略図を示す。スタイレット1400は、遠位端1404及び近位端1406を画定する本体1402、光バンドル1408、ライトパイプ1410、フィラメント1412、1414、1416、1418、チャネル1420、及びCO2センサ1422を含むことができる。図14に示されるように、本体1402は、長手方向軸1424に沿って延びる。
図15は、図14の線15-15に沿ったスタイレット1400の軸方向断面図を示す。図15に示すように、各フィラメント1412、1414、1416、1418はスタイレット1400の本体1402に埋め込まれているが、他の構成では、各フィラメント1412、1414、1416、1418は本体1402に結合することができる。フィラメント1412、1414、1416、1418は、フィラメント1412、1414、1416、1418が長手方向軸1424を取り囲むように、長手方向軸1424の周りに配置される。例えば、フィラメント1412は、長手方向軸1424の周りに実質的に0度に配置され、フィラメント1414は、長手方向軸1424の周りに実質的に90度で配置され、フィラメント1416は、長手方向軸1424の周りに実質的に180度で配置され、フィラメント1418は、長手方向軸1424の周りに実質的に270度で配置される。各フィラメント1412、1414、1416、1418は、対応するアクチュエータに連結されるように構成され、それぞれのアクチュエータが対応するフィラメントを引っ張ると、フィラメントは、引っ張られたフィラメントに向かってスタイレット1400を偏向させる。このようにして、フィラメント1412、1414、1416、1418が本体1402に対して適切に位置決めされた状態で、(例えば、軸1424の周りでスタイレット1400を回転させる必要なしに)スタイレット1400を実質的に任意の方向に向けることができる。三角形に配置された3つのフィラメント1412、1414、1416がある(例えば、1つのフィラメントが軸1424の周りに0度に配置され、別のフィラメントは軸1424の周りに120度に配置され、別のフィラメントは軸1424の周りに240度に配置される)時を含み、幾つかの場合には、(例えば、スタイレット1400を軸1424の周りで回転させる必要なしに)スタイレット1400は、実質的に任意の方向に向けることができる。
図15に示すように、光バンドル1408は、本体1402を通って延びるチャネル1420内に配置され、ライトパイプ1410(又は照明源1314を含む照明源)は、チャネル1420内に配置され、COセンサ1422は、チャネル1420内に配置される。幾つかの場合には、光バンドル1408、ライトパイプ1410、及びCOセンサ1422は、本体1402(例えば、本体1402の内部)に結合することができる。幾つかの実施形態では、本体1402は、4.45ミリメートル以下の外幅を有することができ、本体1402の長さは、953mm以下とすることができる。
図16は、図14の線16-16に沿ったスタイレット1400の長軸方向断面を示す。図16に示すように、光バンドル1408の遠位端は、それぞれがスタイレット1400の遠位端の近位に配置される1つ又は複数のレンズに光学的に結合される。例えば、第1のレンズ(例えば集束レンズ)は、光バンドル1408の遠位端の前のスタイレット1400の遠位端に配置することができ、光バンドル1408の光ファイバに光学的に結合することができ、これはまた、撮像装置(例えば、撮像装置1312)に光学的に結合することができる。このようにして、光は、第1のレンズによって光ファイバに集束することができる。構成に関係なく、光バンドル1408の遠位端は、スタイレット1400の遠位端の近位に配置することができ、患者内の光が光バンドルの遠位端に放射され、光バンドルを通って進行し、撮像装置によって受信される(例えば、撮像データを取得するため)。
図16に示すように、COセンサ1422は、スタイレット1400の遠位端の近位に配置される。このようにして、COセンサ1422は、COセンサ1422の位置(例えば、患者の内部)でCO量を感知するために、患者の内部と流体的に連通することができる。図16に示すように、COセンサ1422は、ロボットシステム(例えば、ロボットシステム1302、特にコントローラ1310)に電気的に接続され得る1つ又は複数のワイヤ1428に電気的に接続され得る。
図17は、本明細書に記載のロボットシステム1302(又は他のもの)の特定の実装であってもよい、オープン構成のロボットシステム1450の上面等角図を示す。ロボットシステム1450は、ハウジング1452、コントローラ1454、電源1456、アクチュエータ1458、1460、1462、1464、1466、ディスプレイ1468を含むことができる。ハウジング1452は、本体1470と、本体1470に取り外し可能に結合されるカートリッジ1472とを有することができる。図17に示すように、カートリッジ1472は、スタイレット1400を支持することができる。例えば、カートリッジ1472は、スタイレット1400が巻き付けられる突出部1480を含むことができる。幾つかの場合には、カートリッジ1472は、ローラ1474、1476を含むことができ、ローラ1474、1476のそれぞれは、カートリッジ1472の穴1478を通って前進するようにスタイレット1400に接触し、ガイドすることができる。幾つかの構成では、ディスプレイ1468は、ハウジング1452の本体1470に結合することができる。
図18は、クローズ構成のロボットシステム1450の上面等角図を示す。図18に示すように、カートリッジ1472は、本体1470の内部容積に滑り込んでいる。幾つかの場合には、カートリッジ1472が本体1470内にスライドされるとき(例えば、カートリッジ1472がクリップを含むとき)、カートリッジ1472をロックすることができる。カートリッジ1472が本体1470と係合する(例えば、ハウジング1452がクローズ構成にある)と、突出部1480は、アクチュエータ1466のモータ(例えば、突出部1480に接触するモータ)と整列して係合する。このようにして、コントローラ1454は、モータ1466を回転させ、それによって突起部1480を回転させ、スタイレット1400の遠位端1406を穴1478を通して前進させ、ハウジング1452から遠ざけることができる。
図18に示すように、カートリッジ1472が本体1470と係合して、ハウジング1452がクローズ構成にあるとき、各フィラメント1412、1414、1416、1418は、それぞれのアクチュエータ1458、1460、1462、1464のエクステンダに結合することができる。例えば、フィラメント1412の近位端は、アクチュエータ1458のエクステンダに結合することができ、フィラメント1414の近位端は、アクチュエータ1460のエクステンダに結合することができ、フィラメント1416の近位端は、アクチュエータ1462のエクステンダに結合することができ、フィラメント1418の近位端は、アクチュエータ1464のエクステンダに結合することができる。動作中、コントローラ1454は、各アクチュエータ1458、1460、1462、1464を伸長又は収縮させ、それによって、それぞれのフィラメント1412、1414、1416、1418にかかる張力を調整することができ、これにより、(例えば、フィラメントの反対側の端部、ひいてはフィラメントに結合されたスタイレットの本体をフィラメントに近づけるフィラメントに対するより大きな引張力を伴って)ハウジング1452に対するスタイレット1400の向きを調整する。幾つかの場合には、スタイレット1400の近位端1404はハウジング1452内に配置することができ、遠位端1406はハウジング1452の外側に配置することができる。
図19及び20は、ロボットシステム1450の別の図を示している。図19は、オープン構成のロボットシステム1450の上面図を示す。図20は、クローズ構成のロボットシステム1450の上面図を示す。図19に示すように、カートリッジ1472は本体1470の内部容積の外側に配置され、スタイレット1400は突出部1480の周りに予め巻かれ、スタイレット1400の遠位端1406は穴1478を通って延び(そしてローラ1474、1476と接触している)。図20に示されるように、カートリッジ1472は、(例えば、ロボットシステム1450がオープン構成にあるときに、本体1470に向かってカートリッジ1472を押すことによって)、本体1470の内部容積に滑り込んでいる。図17~20には示されていないが、ロボットシステム1450は、撮像装置、分光計、照明源、及びガス源も含むことができる。幾つかの場合には、ロボットシステム1450がクローズ構成にあるとき(例えば、カートリッジ1472が本体1470に挿入されているとき)、光バンドル1408の各光ファイバは、ロボットシステム1450のそれぞれの光学部品(例えば、撮像装置又は分光計)に光学的に結合することができ、ライトパイプ1410は、ロボットシステム1450の照明源に光学的に結合することができ(又はスタイレットの照明源は、コントローラ1454を含むロボットシステム1450に電気的に接続することができ)、COセンサ1422は、ロボットシステム1450(例えばコントローラ1454)に電気的に接続することができる。
手順が完了し、スタイレット1450が配置されたとき(及び患者が挿管されたとき)を含み幾つかの実施形態では、カートリッジ1472を廃棄することができ、追加のカートリッジ1472を装填して本体1470と係合させることができる。このように、撮像装置、分光計、照明源、電源、ガス源、アクチュエータなどを含むロボットシステム1450のより高価な構成要素は、使用後に廃棄する必要がない。むしろ、光バンドル、ライトパイプ、フィラメント、COセンサなどを含むスタイレット1400の安価な構成要素は、処置が完了した後に廃棄することができる。このようにして、スタイレット1400は洗浄を必要とせずに単に廃棄することができるので、汚染の懸念が回避される。
ロボットシステム1450は、カートリッジ1472が本体1470に(及び本体1470から)取り外し可能に連結されている状態で説明されてきたが、他の場合には、ハウジング1452が本体1470とカートリッジ1472との間のモノリシックであるように、カートリッジ1472を本体1470に結合することができる。この構成においては、例えば、スタイレット1400をハウジング1452に装填し、所望の構成要素と光学的に結合し、所望の構成要素に結合する(例えば、各フィラメントを各アクチュエータに結合する)ことができる。次いで、処置が完了した後、スタイレット1400を廃棄することができ、追加のスタイレットを、その後の処置のために(例えば、別の患者のために)上記の処置に従って係合することができる。
図21は、固定装置1306の特定の実装であることができる、固定装置1500の正面等角図を示す。例えば、固定装置1500は、(例えば、気管内チューブを固定装置1500に固定するように構成されている)気管内チューブ固定装置であることができる。固定装置1500は、パッド1502、1504、1506、1つ又は複数のタイ1508、貫通チャネル1512を有するハウジング1510、及びブラケット1514を含むことができる。ハウジング1510は、パッド1502、1504に結合することができる。例えば、ハウジング1510の第1端は、パッド1502に結合することができ、ハウジング1510の第2端は、パッド1504に結合することができる。パッド1506は、パッド1502、1504にも結合することができる。例えば、パッド1506の第1端は、パッド1502のスロットに挿入することができ、パッド1506の異なる部分に結合することができ、一方、パッド1506の第2端は、パッド1504のスロットに挿入することができ、パッド1506の異なる部分に結合することができる。タイ1508は、ハウジング1510に(例えば、ハウジング1510の両端で)結合することができ、ある場合には、タイ1508の第1端は、パッド1502に結合することができ、タイ1508の第2の端部は、パッド1504に結合することができる。幾つかの場合には、タイ1508はジップタイとして構成することができる。構成に関係なく、タイ1508(及びパッド1506の端部)を引っ張って(又は他の方法で結んで)、固定装置1500の周囲(例えば、円周)を減少させて、固定装置1500を患者に固定することができる。幾つかの場合には、パッド1502、1504の各々は、パッド1502、1504の各々が患者に取り外し可能に結合できるように、接着層を含むことができる。例えば、パッド1502の接着剤は、パッド1502を患者の第1の頬に結合することができ、パッド1504の接着剤は、パッド1504を患者の第2の頬に結合することができる。次に、パッド1502、1504が固定された状態で、パッド1506の端部及びタイ1508を締めて固定装置1500を患者に固定することができる。図21に示すように、チャネル1512は、ハウジング1510を通って延び、気管内チューブを受け入れるように構成することができる。幾つかの場合には、ブラケット1514は、ハウジング1510に連結することができ、気管内チューブの固定位置を提供するためにチャネル1512の上に配置することができる。例えば、気管内チューブがチャネル1512に挿入された後、気管内チューブはブラケット1514に(例えば、タイを介して)結合され、気管内チューブと固定装置1500との間の相対的な動きをブロックすることができる。
図22A及び22Bは、口腔咽頭デバイス1550と係合した気管内チューブ1552を有する口腔咽頭デバイス1550の等角図を示す。特に、図22Aは、口腔咽頭デバイス1550の正面等角図を示し、一方、図22Bは、口腔咽頭デバイス1550の背面等角図を示す。口腔咽頭デバイス1550は、ハンドル1554及びマウスピース1556を有する本体1551、本体1551を通って延びる導管1558、及び導管1558と流体的に連通するポートコネクタ1560を含むことができる。ハンドル1554は、マウスピース1556よりも大きな断面高さを有することができる。このようにして、口腔咽頭デバイス1550が患者の口の中に配置されると、ハンドル1554が患者の口の中に移動するのが阻止される。幾つかの場合には、ハンドル1554は、ハンドル1554の長さに沿って実質的に真っ直ぐな上面1562を有することができる。
図22Aに示すように、ハンドル1554に結合されたマウスピース1556は、ハンドル1554が沿って延びる長手方向軸1564に沿って湾曲し、マウスピース1556の湾曲セクション1566を画定する。換言すれば、マウスピースの遠位端1572は、ハンドル1554及びマウスピース1556が同じ長手方向平面内(例えば、長手方向軸1564を含む)内に延在する状態で、長手方向軸1564から離れて湾曲する。マウスピース1556の(例えば、長手方向軸1564に沿って実質的に真っ直ぐに延びる)実質的に真っ直ぐなセクション1568は、セクション1568の第1の端部でハンドル1554の遠位端に連結され(又は一体的に形成され)、一方、反対側の第2の端にあるセクション1568は、湾曲セクション1566の近位端に結合されている(又は一体的に形成されている)。幾つかの構成では、マウスピース1556は、(例えば、ハンドル1554の遠位端の近位のマウスピース1556に)マウスピース1556の断面高さの減少を規定するノッチ1570を含むことができる。同様に、マウスピースの湾曲セクション1566は、ハンドル1554の断面高さ(及びハンドル1554のセクション1568の断面高さ)よりも小さい断面高さを有する。幾つかの場合には、口腔咽頭デバイス1550の断面高さは、長手方向軸1564に沿って、口腔咽頭デバイス1550の近位端から(例えば、マウスピース1556の遠位端1572を含む)口腔咽頭デバイス1550の遠位端への方向に減少する。
幾つかの実施形態では、導管1558は、口腔咽頭デバイス1550の近位端から口腔咽頭デバイス1550の遠位端まで、口腔咽頭デバイス1550を完全に貫通して延びる。例えば、導管1558は、ハンドル1554を通り、マウスピース1556を通り、マウスピース1556の外に延びることができる。導管1558はポートコネクタ1560と流体的に連通しており、ポートコネクタ1560は、酸素ガス源(例えば、ガス源1318のうちの1つ)とインターフェースするように構成される。このようにして、(酸素ガス源からの)酸素ガスは、導管1558を通ってポートコネクタ1560に流入し、導管1558から出て患者の気管に入るように構成される。したがって、気管内チューブ1552を配置している間でも、酸素ガスを患者の気道に送ることができる。
幾つかの実施形態では、マウスピースの湾曲セクション1566は、口腔咽頭腔の湾曲の輪郭を描くことができる。例えば、口腔咽頭デバイス1550が患者と係合するように配置されると、湾曲セクション1566は、口腔咽頭腔を画定する構造に沿って湾曲する。幾つかの構成では、マウスピース1556の湾曲セクション1566の下面1574は実質的に平坦である。このように、口腔咽頭デバイス1550が配置されると、(例えば、丸みを帯びた下面1574とは対照的に)下面1574のより大きい表面積は、患者の口腔咽頭腔を画定し口腔咽頭デバイス1550と患者との間の相対運動を防止する構造に接触する。幾つかの構成では、湾曲セクション1566の遠位端1572は、ノッチ1576、1578を含むことができ、ノッチ1576、1578は、湾曲セクション1566の反対側に向けられる。例えば、ノッチ1576は、長手方向軸1564に向かって湾曲する湾曲セクション1566の第1の側面に向けられ、ノッチ1578は、長手方向軸1564に向かって湾曲する湾曲セクション1566の第2の側面に向けられる。幾つかの場合には、ノッチ1576、1578は、気管内チューブ1552を口腔咽頭デバイス1550に連結するためのタイのための固定位置を提供することができる。
幾つかの実施形態では、口腔咽頭デバイス1550は、長手方向軸1564に沿って延在するチャネルを含むことができる。例えば、チャネルは、ハンドル1554の上面1562、マウスピース1556のセクション1568の上面、及び湾曲セクション1566の上面に向けることができる。幾つかの場合には、チャネルは、ハンドル1554に沿って、マウスピース1556のセクション1568に沿って、及びマウスピース1556の湾曲セクション1566に沿って、長手方向に部分的に(または全体的に)延びることができる。構成にかかわらず、チャネルは、挿管チューブ1552を受け入れるように構成することができる。このようにして、チャネルは、挿管チューブ1552を支えることができ(例えば、構成要素間の相対的な動きを防止する)、気管内チューブ1552の配置を案内することができる。例えば、口腔咽頭デバイス1550が配置された後、気管内チューブ1552は、チャネル内に配置され、挿管チューブ1552のチャンネル案内の前進と共に、遠位端1572に向かって前進することができる。
幾つかの実施形態では、気管内チューブ1552は、口腔咽頭デバイス1550に固定することができる。例えば、口腔咽頭デバイス1550は、クリップ1580、及びタイ1582、1584を含むことができる。クリップ1580は、気管内チューブ1552及び口腔咽頭デバイス1550にリトラクタブルに係合して、気管内チューブ1552を口腔咽頭デバイス1550に固定するアームを含むことができる。幾つかの場合には、クリップ1580は、気管内チューブ1552を口腔咽頭デバイス1550のハンドル1554で口腔咽頭デバイス1550に連結することができる。タイ1582、1584は、気管内チューブ1552を口腔咽頭デバイス1550に固定することもできる。例えば、各タイ1582、1584は、気管内チューブ1552及び口腔咽頭デバイス1550を(例えば、ハンドル1554で)巻き付けて、気管内チューブ1552を口腔咽頭デバイス1550に固定することができる。図22Aに示すように、タイ1582、1584及びクリップ1580は、長手方向軸1564に沿って互いに分離されている。幾つかの実施形態では、口腔咽頭デバイス1550は、長手方向軸1564に沿って互いに分離された複数のクリップ(例えば、複数のクリップ1580)を含むことができる。同様に、口腔咽頭デバイス1550は、長手方向に沿ってそれぞれ分離された、1つ、2つ、3つ、4つのタイなどを含む、追加のタイ(例えば、タイ1582、1584と同様のタイ)を含むことができる。
幾つかの実施形態では、口腔咽頭デバイス1550は、患者の口内に配置することができ、舌を後退させることができ、喉頭を画定する構造に接触して喉頭を露出させることができる(例えば、喉頭腔の断面を増加させる)。例えば、医療関係者は、ハンドル1554をつかむことができ、湾曲セクション1566の遠位端を患者の口に挿入し、そして、患者の喉に挿入することができる。口腔咽頭デバイス1550が配置されると、マウスピース1556は患者の口内に配置され、患者の唇がノッチ1570でマウスピース1556に接触し、マウスピース1556が患者の舌に接触して押し下げる。更に、口腔咽頭デバイス1550が配置されると、気管内チューブ1552を口腔咽頭デバイス1550に(例えば、口腔咽頭デバイス1550のハンドル1554で)固定できるように、ハンドル1554が患者の口の外側に配置される。幾つかの構成では、口腔咽頭デバイス1550が配置されると、湾曲セクション1566の遠位端1572は、喉の中に(例えば、喉頭の上を含めてその近くに)配置される。従って、導管1558の遠位端は、喉の中に(例えば、喉頭の上を含めてその近くに)配置される。このようにして、ポートコネクタ1560から送られた酸素は、導管1558を通って流れ、患者の喉に放出されて、(装置の配置中であっても)患者の気道に酸素を送る。
幾つかの実施形態では、口腔咽頭デバイス1550が配置された後を含め、固定装置(例えば、固定装置1500)は、患者と係合するように配置することができる。次に、口腔咽頭デバイス1550を固定装置に結合することができる。例えば、口腔咽頭デバイス1550(例えば、口腔咽頭デバイス1550のハンドル1554)は、ブラケット1514に結合することができ、それによって口腔咽頭デバイス1550を固定装置に固定する。幾つかの場合には、口腔咽頭デバイス1550は、口腔咽頭デバイス1550を固定装置から結合(及び分離)できるクリップ(例えば、口腔咽頭デバイス1550のハンドル1554を固定装置のブラケットに結合するクリップ)を含むことができる。
図23は、スタイレット(又は言い換えればガイドワイヤ)を患者内の目標位置に誘導するためのプロセス1600のフローチャートを示す。幾つかの場合には、プロセス1600は、(例えば、ガイドワイヤ、特にガイドワイヤの遠位端が目標位置に来た後)患者内の目標位置にカテーテル(又は他の医療装置)を誘導することを含むことができる。幾つかの場合には、プロセス1600は、必要に応じて、コントローラ、他の処理回路(例えば、GPU)などを含むことができる1つ又は複数のコンピューティングデバイスを使用して実装することができる。更に、プロセス1600は、本明細書に記載のシステムのいずれかを適宜使用して実施することができる。幾つかの場合には、しかしながら、プロセス1600の一部は、必要に応じて、他の計算リソースの助けなしに、ロボットシステムによって完全に実施することができる。このようにして、プロセス1600は、インターネット、セルラー、又は他の通信アクセスのない場所(例えば、戦場、遠隔地など)で有利に実行することができる。幾つかの場合には、プロセス1600の一部又はすべての部分は、患者が緊急車両(例えば、救急車)に乗っているときに完了することができ、患者が医療施設に到着したときに患者の治療を促進する。
1602において、プロセス1600は、上述のように、口腔咽頭デバイス(例えば、口腔咽頭デバイス1550)を患者の口及び喉に配置することを含むことができる。例えば、これは、口腔咽頭デバイスの遠位端を患者の口に挿入し、患者の喉に挿入することを含むことができ、これによって、口腔咽頭デバイスの近位端(例えば、口腔咽頭デバイスのハンドルを含む)は、患者の外側(例えば、患者の口の外側)に配置される。幾つかの場合には、これは、患者の舌に接触(及び押し下げ)し、喉頭を画定する構造を口腔咽頭デバイスの遠位端に接触させ、それによって喉頭腔を更に開くことを含むことができる。幾つかの実施形態では、口腔咽頭デバイスが配置されている時を含め、ブロック1602は、酸素源(例えば、酸素の加圧タンクを含む加圧酸素源)を口腔咽頭デバイスのポートコネクタに結合することを含むことができる。次に、ブロック1602は、酸素を口腔咽頭デバイスのポートコネクタに送り込み、口腔咽頭デバイスの導管を通して(及び導管から)患者の喉(例えば、喉頭の近位)に酸素を送ること(コンピューティング装置)を含むことができる。幾つかの場合には、好都合なことに、口腔咽頭デバイスが配置された状態で、プロセス1600全体で酸素ガスを患者の喉に送ることができる。従って、酸素ガスは、プロセス1600の各ブロック中に(例えば、この方法で)患者に送ることができる。
ブロック1602は、固定装置(例えば、気管内チューブ固定装置)を患者に連結することを含むことができる。幾つかの場合には、これには、固定装置の1つ又は複数のパッドを患者に接着することが含まれる(例えば、患者の第1の頬に第1のパッドを、患者の第2の頬に第2のパッドを)。幾つかの実施形態では、口腔咽頭デバイスが配置されている時を含め、ブロック1602は、口腔咽頭デバイスを固定装置に(例えば、クリップ、タイなどで)結合することを含むことができる。幾つかの実施形態では、口腔咽頭デバイスと固定装置が配置されている時を含み、ブロック1602は、チューブの遠位端が患者の咽頭に到達するまで、チューブ(例えば、気管内チューブ)を患者の開口部(例えば、患者の口から喉まで)に前進させることを含むことができる。幾つかの構成では、これには、固定装置の穴を通してチューブを挿入すること、チューブを口腔咽頭デバイスのチャネルと接触させること、及びチューブの遠位端が患者の咽頭に到達するまで、口腔咽頭デバイスのチャネルに沿ってチューブを前進させることを含むことができる。幾つかの場合には、チューブが配置された後も含めて、プロセス1600のブロック1602は、チューブを固定装置にロックして、チューブと固定装置との間の相対的な動きを阻止することを含むことができる。例えば、これは、固定装置のロックがチューブに接触するまで、ロックを回転させる(又は前進させる)ことを含むことができる。幾つかの場合には、これは、チューブを口腔咽頭デバイスに連結して、口腔咽頭デバイスとチューブとの間の相対運動をブロックすることを含み得る。例えば、これには、(例えば、チューブを口腔咽頭デバイスに一時的に固定するため)、口腔咽頭デバイスをチューブに(1つ又は複数のタイを使用して)繋ぐ(tie)すること、(1つ又は複数のクリップを使用して)クリップすることなどが含まれる。
1604において、プロセス1600は、スタイレットをロードしてロボットシステムと係合させることを含むことができる。幾つかの場合には、これは、スタイレットを突起の周りにコイル状の構成に巻き付け、スタイレットの近位端をロボットシステムの穴に前進させることを含むことができる。幾つかの場合には、これは、ロボットシステムのハウジングの本体と係合するスタイレット(例えば、コイル状の構成)を含むカートリッジを閉じることを含むことができる。幾つかの場合には、これには、スタイレットの光バンドルをロボットシステムの1つ又は複数の光学コンポーネントと光学的に結合することが含まれる。例えば、これは、光バンドルの第1の光ファイバの近位端をロボットシステムの撮像装置に光学的に結合すること、及び光バンドルの第2の光ファイバをロボットシステムの分光計に光学的に結合することを含むことができる。幾つかの場合には、これは、ライトガイドの近位端をロボットシステムの照明源に光学的に結合することを含むことができる。幾つかの構成では、これは、各フィラメントの近位端をロボットシステムのそれぞれのアクチュエータのエクステンダに結合することを含むことができる。
幾つかの構成では、プロセス1600のブロック1604は、スタイレットを固定装置の穴を通して患者の内部(例えば、患者の口及び患者の喉)に進めることを含むことができる。
1606で、プロセス1600は、ロボットシステムの撮像装置を使用して、患者の内部の1つ又は複数の画像を取得するコンピューティング装置を含むことができる。例えば、患者の内部からの光は、(例えば、レンズによって集束されることによって)光バンドルの光ファイバの遠位端に送られ、光ファイバを通って戻ることができ、撮像装置は、1つ又は複数の画像の撮像データを生成する。幾つかの場合には、コンピュータデバイスが撮像データを取得している間、コンピュータデバイスは照明源に患者の内部を照明させ、それによって撮像装置の視野を照明することができる。
1608で、プロセス1600は、(例えば、ブロック1606から取得された1つ又は複数の画像に基づいて)スタイレットを所望の向きに向けるコンピューティングデバイスを含むことができる。幾つかの場合には、これには、1つ又は複数の画像を分析するコンピューティングデバイスを含むことができる。例えば、コンピューティングデバイスは、解剖学的な対象領域(例えば、気道を示す解剖学的な対象領域の構造)を識別するように訓練された機械学習モデルに1つ又は複数の画像を入力することができる。次に、コンピューティングデバイスは、解剖学的な対象領域が1つ又は複数の画像内で識別されたかどうかのインディケーション(indication)を機械学習モデルから受け取ることができ、識別された場合は、特定された解剖学的な対象領域のサイズ(例えば、1つ又は複数の画像から特定された解剖学的な対象領域をセグメント化する機械学習モデル)を受け取ることができる。特定された解剖学的な対象領域のサイズは、スタイレットの遠位端が解剖学的な対象領域から離れている距離を示すことができる。従って、場合によっては、コンピューティングデバイスは、1つ又は複数の画像内の識別された解剖学的な対象領域のサイズに基づいて、スタイレットの遠位端から解剖学的な対象領域までの距離を導出することができる。幾つかの実施形態では、コンピューティングデバイスは、解剖学的な対象領域の識別、及び解剖学的な対象領域がどれだけスタイレットの遠位端から離れているかを示す距離から、所望の向きを導出することができる。例えば、1つ又は複数の画像の中心に対する識別された解剖学的領域の位置は、1つ又は複数の画像の中心に解剖学的領域の中心を合わせるためにスタイレットをどの方向に向けるべきかを示すことができる。また、距離は向きの調整量に対応することができる。例えば、識別された解剖学的な対象領域が小さければ小さいほど、スタイレットの遠位端は解剖学的な対象領域から遠くなり、従って、スタイレットの遠位端を補償及び整列させるために必要とされる所望の向きの大きさは小さくなる。
幾つかの実施形態では、プロセス1600のブロック1608は、1つ又は複数のアクチュエータのエクステンダを動かし、それによって、スタイレットの現在の向きが所望の向きと整列するまで、スタイレットの1つ又は複数のフィラメントに対する引張荷重を調整するコンピューティングデバイスを含むことができる。
1610において、プロセス1600は、コンピューティングデバイスがスタイレットを所望の向きに沿って患者内に前進させることを含むことができる。例えば、これは、スタイレットのコイルを受け入れる突出部をモータに回転させ、それによってスタイレットを患者内に更に進める(例えば、患者の喉内に更に進める)コンピューティングデバイスを含むことができる。1612において、プロセス1600は、患者の内部に配置された(例えば、スタイレットの)COセンサからCO量の値を受信するコンピューティングデバイスを含むことができる。
1614で、プロセス1600は、コンピューティングデバイスが、1つ又は複数の基準が満たされているかどうかを判断することを含むことができる。ブロック1614で、コンピューティングデバイスが、1つ又は複数の基準が満たされていないと判断した場合、プロセス1600はブロック1606に戻り、撮像デバイスを使用して追加の画像を取得することができる。あるいは、ブロック1614で、コンピューティングデバイスが、1つ又は複数の基準が満たされていると判断した場合、プロセス1600は、ブロック1616に進み、スタイレットに沿ってチューブを前進させることができる。幾つかの実施形態では、第1の基準は、CO量値と閾値との比較の結果であり得る。例えば、第1の基準は、(例えば、ブロック1612で)CO量の値が閾値を超えることに基づいて満たされることができる。より具体的な例として、比較的高いCO量の値は、スタイレットの遠位端が(食道と比較して)気管内に配置されていることを示す。この場合、コンピューティングデバイスが、CO量の値が閾値よりも大きいと判断した場合、第1の基準を満たすことができる(例えば、対象領域が気管への移動を必要とする場合)。他の例としては、比較的低いCO量の値は、スタイレットの遠位端が(気管と比較して)食道内に配置されていることを示す。この場合、コンピューティングデバイスが、CO量の値が閾値未満であると判断した場合、コンピューティングデバイスは、第1の基準が満たされていると判断できる(例えば、ターゲット領域が食道への移動を必要とする場合)。
幾つかの実施形態では、第2の基準は、気管分岐の識別である。例えば、コンピューティングデバイスは、1つ又は複数の画像を受け取ることができ(又は、例えば、1つ又は複数の画像が取得された後に追加の画像を取得することができ)、この画像は、気管分岐(つまり、気管カリーナ)を識別するために使用できる。これは、コンピューティングデバイスが、気管分岐を識別する(及びセグメント化する)ように訓練された機械学習モデルに1つ又は複数の画像(又は追加の画像)を入力できるプロセス1600のブロック1608に類似しているかもしれない。幾つかの場合には、(例えば、1つ又は複数の画像からのセグメント化された画像の存在によって)機械学習モデルが気管分岐を識別した場合、コンピュータデバイスは、画像(例えば、気管分岐が識別されたセグメント化された画像)における気管分岐のサイズを決定することができる。次に、コンピューティングデバイスは、画像内の気管分岐のサイズに基づいて、気管分岐とスタイレットの遠位端の間の距離を導出できる(例えば、画像内の気管分岐のサイズが小さいほど、スタイレットの遠位端が気管分岐から離れているため)。
幾つかの構成では、第3の基準は、気管分岐とスタイレットの遠位端との間の距離を閾値(例えば、3mm)と比較した結果でありえる。例えば、コンピューティングデバイスは、この距離が閾値以下であることに基づいて、第3の基準が満たされていると判断することができる。幾つかの実施形態では、ブロック1614で1つ又は複数の基準が満たされている場合、コンピューティングデバイスは(例えば、ディスプレイ上にインディケーションを提示することによって)デバイスの遠位端がターゲット領域であることを医療従事者に通知することができる。
1616において、プロセス1600は、チューブをスタイレットに沿って(例えば、チューブが目標位置に到達するまで)前進させることを含むことができる。幾つかの場合には、これは、チューブと固定装置との間の相対運動を可能にするために、固定装置からチューブを切り離すことを含むことができる。幾つかの構成では、これには、チューブと口腔咽頭デバイスとの間の相対運動を可能にするために、チューブを口腔咽頭デバイスから分離することが含まれる。幾つかの場合には、これには、チューブと口腔咽頭デバイスの間の係合から1つ又は複数のクリップを取り外すこと、チューブと口腔咽頭デバイスの間の係合から1つ又は複数のタイを取り外すことなどが含まれる。チューブが自由に動くようになると、チューブの遠位端がスタイレットの遠位端に到達するか近位になるまで、スタイレットに沿ってチューブを前進させることができる。幾つかの実施形態では、コンピューティングデバイスは、チューブの遠位端がスタイレットの遠位端に重なるか近位の位置に到達したことを判断することができる。例えば、チューブがスタイレットの遠位端に近づくにつれて、照明源から光バンドルの遠位端に送られる光(例えば、ライトパイプを使用してスタイレットの遠位端から放射される)はより少なくなる。従って、コンピューティングデバイスが、光バンドルの光ファイバから光を受信することによって画像を取得できない場合、又は、患者の内部の画像の1つ又は複数のピクセル値(例えば、画像の平均ピクセル値)が閾値を超える(例えば、閾値未満である)場合、コンピューティングデバイスは、チューブの遠位端が目標位置にあると判断することができる。この場合、コンピューティングデバイスは、例えば、チューブが理想的に配置されたことを示すためにディスプレイ上にグラフィックを提示することによって医療従事者に通知することができる。
幾つかの実施形態では、ブロック1616は、(再び)チューブを固定装置にロックして、チューブと固定装置との間の相対的な動きをブロックすること(例えば、チューブの遠位端が目標位置にくるようにチューブをロックすること)を含むことができる。幾つかの場合には、ブロック1616は、チューブの配置を確認することを含むことができる。例えば、これには、例えば、モータを反対の回転方向に回転させてスタイレットを再びコイル状に巻いて、ブロック1606で1つ又は複数の画像を取得するのと同様の方法で画像を取得することにより、スタイレットの遠位端をある量(例えば、1cm)だけ後退させることが含まれる。この画像は、医療従事者が確認できるようにディスプレイに表示することができる。幾つかの場合には、チューブの遠位端が正しく配置されていることが確認されると(正しい配置を示すユーザー入力を受け取った後)、プロセスはブロック1618に進むことができる。
1618において、プロセス1600は、患者からスタイレットを除去するコンピューティングデバイスを含むことができる。例えば、これには、患者を通してスタイレットを後退させることを含むことができる。幾つかの場合には、コンピューティングデバイスは、スタイレットを患者内に伸展させるために使用された以前のアクチュエータコマンドを利用できる。例えば、スタイレットの後退を駆動するために、アクチュエータコマンドを逆にすることができます。他の場合では、ブロック1606~1610は、(例えば、ブロック1610で)スタイレットを前進させることを除いて、スタイレットが所望の量だけ後退するまで繰り返すことができ、スタイレットは後退する。更に別の場合では、ブロック1618は、スタイレットをチューブから手動で取り外し、固定装置を通して外に出すことを含むことができる。幾つかの実施形態では、ブロック1618は、人工呼吸器をチューブと係合させて、患者の換気を開始することを含むことができる。
図24は、患者の喉に挿入された気管内チューブと、気管内チューブに挿入されたスタイレットとの概略図を示す。
実施例
以下は、本発明の実施形態による非限定的な例である。
実験データのサポート
自律的な気管内チューブ挿入のプロセスは、ロボットをガイドするオブジェクト検出機能と、ロボットを個別に制御する統合システムの2つの部分に分割することによって検証された。
画像データセット(ロボット誘導実験用)とファントムモデル(ロボット制御実験用)
市販のトレーニングモデルである、吸引及び経管栄養シミュレーター用のコーケンモデル:LM-097B(コーケン株式会社、日本国文京区)を実験用に購入した。気管検出におけるモデルのトレーニングに使用される画像は、このファントムを利用して取得された。これらの画像は、画像/データ収集中のロボットの手動制御及び自動制御によって取得された。
システム構成
1)ロボット、2)ロボット制御コンピュータ、及び3)気管検出コンピュータからなる、巨視的に一方向の閉ループシステムが構築された。ロボットは、ロボット制御コンピュータからROS(登録商標)(Open Robotics, Mountain View, CA and Symbiosis, Singapore)に基づく通信で制御された。ロボット制御コンピュータは、基本的なソケット通信を介して気管検出コンピュータから提供される情報に基づいて、複数のモード間で遷移する。気管検出コンピュータは、ロボットが搭載したカメラからストリーム画像を受信した(図25)。
ロボット誘導
AIベースの検出及び追跡モデルが開発され、リアルタイムでキャプチャされた画像を使用してロボットが自律的に移動できるようになった。目的は、最初に画像から気管の開口部を検出し、次に検出追跡ベースのメカニズムによって予測された経路をたどることである。検出のために、深層学習ベースの検出器(YOLO)が、食道と気管の開口部を更に区別することにより、気管を検出するようにトレーニングされた。追跡には、特に高速で計算効率の高いメディアンフィルタリング手法を使用する。
A.気管の検出
畳み込みニューラルネットワーク(CNN)ベースの検出器は、リアルタイム検出タスクで最先端のパフォーマンスを達成した。事前定義された特徴抽出を分類器と組み合わせた従来の方法とは異なり、これらの畳み込みニューラルネットワークベースの検出アルゴリズムは、画像データを使用して学習したオブジェクトの統一された階層表現によって設計されている。これらの階層的な特徴表現は、入力ベクトルを高次元の特徴空間に変換する連鎖畳み込み層によって実現される。我々は、食道の検出には、26層のCNNベースの検出モデルを使用した。最初の24層は完全な畳み込み層で、Imagenetデータセットで事前トレーニングされ、最後の2層は検出された領域を出力する完全に接続された層です。26レイヤーのCNNベースの検出モデルのバリアントは、鼻胃領域のカラー画像で微調整されています。
B.追跡
メディアンフローフィルタリングベースの追跡手法は、ロボットチューブのモーションベクトルを予測するために設計された。
C.ロボット制御
YOLOv3による物体検出とメディアンフロー・トラッカーによる物体追跡は、Python3.7.6で実装された。環境は、Ubuntu 18.04で構築されている。グラフィックスプロセッシングユニット(GPU)統合に関しては、cuDNN7.6.5及びCUDAツールキット10.0が使用された。
トレーニング部分は、注釈付きの画像をYOLOv3のKeras版実装にフィードすることで実装された。Kerasのバージョンは2.2.4で、このバージョンはバックエンドで TensorFlow 1.15を実行する。データセットは、アノテーション・ソフトウェアVoTT(登録商標)(Microsoft、ワシントン州レドモンド)で作成された。
我々は、1000トレーニングエポックに対して学習率を採用し、100エポックごとにモデルパラメーターを保存した。保存されたモデルの中で、50%以上のIoU(Intersection over Union)について最高の平均適合率(AP)を達成するものは、検証セットで正と見なされ、従って、トレーニングセットで評価される最終モデルとして選択された。検出部分も、バックエンドでTensorFlow 1.15 を実行する Keras 2.2.4に基づいて実装された。トラッキング部分は、OpenCV 4.1.0 のトラッキングAPIを使用した。YOLOv3によって検出されたバウンディングボックスは、1:5の比率でメディアンフロー・トラッカーに渡され、それによって2つのファミリーのアルゴリズムを使用したリアルタイムの検出、追跡、及び制御が実現された(図26A、26B)。気管までのロボットの距離は、検出されたバウンディングボックスのサイズによって概算された。気管の探索、気管の追跡、及び気管へのガイドの挿入をそれぞれ目的とする、特定のモード間での移行戦略が構築された(図27)。
実験モデル
システムは、ロボット気管内挿管プロセスを2つの個別のフェーズに分割することによって評価された。1つは誘導と検出、もう1つは制御である。
ロボット誘導の検証
我々のシステムのCNNベースのオブジェクト検出が実際の気管を検出できるかどうかを判断するために評価が行われた。
アスペクトの3分の2以上が見えており、気管がはっきりと開いている内視鏡画像、気管がはっきりと閉じている内視鏡画像を選んだ。取得した画像は、「ロボット誘導」のセクションで上記説明したYOLOv3トレーニングに組み込まれた。
人間の認識と比較した気管認識の精度は、平均適合率の平均(mAP)と平均適合率(AP)を使用して評価された。更に、各検出クラスのPR曲線(Precision-Recall curve)が描かれた。
ロボット制御の検証
ここでは、ロボットが気管まで自分自身を制御できるかどうかを評価した。トレーニングは、ロボット誘導の検証実験と同じ方法で実施された。気管内にロボットがある場合とない場合で、チューブが気管に到達する成功率を比較することにより、気管内チューブが実際にロボットの上を気管まで移動できるかどうかを評価した。
気管に到達する際の気管内チューブの成功率は、内径7mmの市販の気管内チューブを使用して評価された。
結果
提案手法と内部統制の成功率の差の有意性を評価するために、ロボット制御検証実験のチューブ挿入部分に統計分析を利用した。Prism(GraphPad Software、カリフォルニア州サンディエゴ)によって統計分析が行われた。有意性カットオフポイントは、0.05に設定された。パイロット実験に基づいて、各実験設定に必要な試行回数を最適化するために検出力分析が行われた。
ロボット誘導検証実験
mAP及びAPに関する検出の精度は、各データセットについて評価された。プログラムアルゴリズムは、閉じた構成(97%)と開いた構成(100%)で気管を検出する能力を示した。
ロボット制御検証実験
ロボットが気管に移動する成功率は、完全に統合された検出ベースの制御では96.7%(29/30)、ブラインド手動挿入では6.7%(2/30)であった。
この好ましい実施形態に対する多くの修正及び変形は、当業者には明らかであり、それらは本発明の精神及び範囲内にある。従って、本発明は、説明された実施形態に限定されるべきではない。本発明の全範囲を確認するために、以下の特許請求の範囲を参照すべきである。

Claims (39)

  1. カテーテルチューブと、
    関節式スタイレットと、
    ロボット制御及び表示センタと、
    を備えるシステムであって、
    前記カテーテルチューブは、
    管腔を画定する管壁と、
    画像データをキャプチャするように構成され、前記カテーテルチューブの遠位端に配置された撮像装置と、
    前記撮像装置に結合され、キャプチャされた前記画像データを無線で送信するように構成されたトランシーバであって、前記カテーテルチューブの前記遠位端に配置されたトランシーバと、
    を備え、
    前記関節式スタイレットは、前記カテーテルチューブの前記管腔内に配置され、関節遠位端を備え、
    前記ロボット制御及び表示センタは、
    前記トランシーバと通信し、前記トランシーバから前記キャプチャされた画像データを受信する無線通信回路と、
    前記キャプチャされた画像データを分析し、対応するナビゲーションデータを出力する少なくとも1つの人工知能モデルを実行するように構成された処理回路と、
    前記ナビゲーションデータに基づいて、被験者の内部の目標位置に向かって前記関節式スタイレットを駆動するロボット制御エンジンと、
    を備えることを特徴とするシステム。
  2. 前記撮像装置はトポグラフィ撮像装置を含み、前記キャプチャされた画像データはトポグラフィ画像データを含むことを特徴とする請求項1に記載のシステム。
  3. 前記撮像装置は視覚撮像装置をさらに含み、前記キャプチャされた画像データは視覚画像ビデオデータを更に含むことを特徴とする請求項2に記載のシステム。
  4. 前記撮像装置及び前記トランシーバは、前記カテーテルチューブの前記管壁に埋め込まれており、
    前記カテーテルチューブは更に、
    前記カテーテルチューブの前記管壁に埋め込まれた送気チャネルと、
    前記カテーテルチューブの前記管壁に埋め込まれた光源と、
    を含むことを特徴とする請求項1に記載のシステム。
  5. 前記撮像装置はタイムオブフライト(Time-of-Flight、TOF)撮像装置を含み、前記キャプチャされた画像データはタイムオブフライト画像データを更に含み、
    前記タイムオブフライト撮像装置は、光の複数の波長を使用して前記タイムオブフライト画像データをキャプチャするように構成されることを特徴とする請求項1に記載のシステム。
  6. 前記処理回路は、
    ハイパースペクトルイメージング、タイムオブフライト(Time-of-Flight、TOF)イメージング、及びステレオイメージングからなる群から選択された技術を介して生成された三次元容積データに基づいて、前記カテーテルチューブが配置される腸内空間の容積測定値を取得し、
    前記容積測定値に基づいて、腸腔の総容積に対応する第1の容積値を導出し、
    前記容積測定値に基づいて、空である前記総容積の第1の部分に対応する第2の容積値を導出し、
    前記第1の容積値から前記第2の容積値を引くことによって、材料で満たされた前記総容積の第2の部分の第3の容積値を導出する、
    ように構成された容量感知モジュールを実行するように更に構成されることを特徴とする請求項5に記載のシステム。
  7. 前記ロボット制御エンジンは、前記関節式スタイレットの少なくとも1つの関節を制御することにより前記関節式スタイレットを駆動し、前記関節式スタイレットの移動方向を制御するように構成され、前記関節式スタイレットは、プランジ(plunge)、回転(rotation)、及び先端湾曲(tip deflection)を含む三自由度を有することを特徴とする請求項1に記載のシステム。
  8. 遠位端に配置された、スタイレット分光計と、前記関節式スタイレットのスタイレットトランシーバと、を更に備え、
    前記スタイレット分光計は、前記関節式スタイレットの遠位端で物質をサンプリング及び分析して、スタイレット分光計データを生成するように構成され、
    前記スタイレットトランシーバは、前記スタイレット分光計データを前記ロボット制御及び表示センタに無線で送信するように構成されていることを特徴とする請求項1に記載のシステム。
  9. 前記カテーテルチューブは、更に、前記カテーテルチューブの遠位端に配置され、サンプルを収集及び分析して、分光計データを生成するように構成されている分光計を備えることを特徴とする請求項1に記載のシステム。
  10. 前記ロボット制御及び表示センタは表示装置を含み、
    前記トランシーバは、前記無線通信回路を介して前記分光計データを前記処理回路に送信するように構成され、
    前記処理回路は、前記分光計データを分析して、前記サンプルに対応するバイオマーカを識別するように構成され、
    前記表示装置は、前記カテーテルチューブ及び前記バイオマーカの位置及び状態に関する情報を表示するように構成されている
    ことを特徴とする請求項9に記載のシステム。
  11. 前記少なくとも1つの人工知能モデルは、
    キャプチャされた前記画像データをニアリアルタイムで処理する検出及び追跡モデルと、
    統一された階層表現を学習するように訓練され、キャプチャされた画像データに基づいて腸腔又は気道内の開口部及び構造を特定し、キャプチャされた前記画像データと前記目標位置に基づいて前記ナビゲーションデータを計算する、少なくとも1つの畳み込みニューラルネットワークベースの検出アルゴリズムを含み、前記開口部と前記構造を識別するように構成された深層学習検出器と、
    スパースオプティカルフロー(Sparse Optical Flow)を使用して前記関節式スタイレットの動きベクトルを予測するように構成されたメディアンフローフィルタリング・ベースのビジュアルトラッキングモジュールと、
    を備えることを特徴とする請求項1に記載のシステム。
  12. 前記撮像装置及び前記トランシーバは前記関節式スタイレットに埋め込まれており、
    前記関節式スタイレットは、更に、
    前記関節式スタイレットに埋め込まれた送気チャネルと、
    前記関節式スタイレットに埋め込まれた光源と、
    を含むことを特徴とする請求項1に記載のシステム。
  13. カテーテルチューブのトランシーバと通信し、トポグラフィ画像データを受信する無線通信回路と、
    前記トポグラフィ画像データ及び目標位置を分析し、対応するナビゲーションデータを出力する人工知能モデルを実行するように構成された処理回路と、
    前記ナビゲーションデータに基づいて、前記カテーテルチューブ内に配置された関節式スタイレットを被験者の内部の前記目標位置に向けて自動的に駆動するロボット制御エンジンと、
    を備えることを特徴とするロボット制御及び表示センタ。
  14. 前記ロボット制御エンジンは、前記関節式スタイレットの遠位端における関節のプランジ(plunge)、回転(rotation)、又は先端湾曲(tip deflection)のうちの1つ又は複数を制御することによって、前記関節式スタイレットの移動方向を制御するように構成される
    ことを特徴とする請求項13に記載のロボット制御及び表示センタ。
  15. 前記無線通信回路は、前記トランシーバから分光計データを受信するように構成され、前記分光計データは、前記カテーテルチューブの分光計によってサンプリングされた物質に対応し、
    前記処理回路は、前記分光計データを受信し、前記物質が対応するバイオマーカのアイデンティティを出力する追加の人工知能モデルを実行するように構成される
    ことを特徴とする請求項13に記載のロボット制御及び表示センタ。
  16. 前記カテーテルチューブの位置及び状態、並びに前記バイオマーカの前記アイデンティティに関連する情報を表示するように構成された表示装置
    を更に備えることを特徴とする請求項15に記載のロボット制御及び表示センタ。
  17. カテーテルチューブと、
    関節式スタイレットと、
    を備えるカテーテルアセンブリであって、
    前記カテーテルチューブは、
    管腔を画定する管壁と、
    画像データをキャプチャするように構成され、前記カテーテルチューブの遠位端に配置された撮像装置と、
    前記撮像装置に結合され、キャプチャされた前記画像データをリモートコンピュータシステムに無線で送信するように構成され、前記カテーテルチューブの遠位端に配置されたトランシーバと、
    を含み、
    前記関節式スタイレットは、前記管腔内に配置され、キャプチャされた前記画像データに少なくとも基づいて被験者内の目標位置に自動的に駆動されるように構成されたことを特徴とするカテーテルアセンブリ。
  18. 前記関節式スタイレットは関節を含み、
    前記関節は、前記関節式スタイレットが前記目標位置まで自動的に駆動されている間、前記関節式スタイレットの運動の方向を制御するように曲がるように構成されることを特徴とする請求項17に記載のカテーテルアセンブリ。
  19. 前記カテーテルチューブは、更に、
    前記カテーテルチューブの前記遠位端に配置された分光計を備え、
    前記分光計は、前記カテーテルチューブの前記遠位端に近い物質をサンプリング及び分析して、分光計データを生成するように構成され、
    前記トランシーバは、前記分光計データを前記リモートコンピュータシステムに無線で送信するように構成されることを特徴とする請求項17に記載のカテーテルアセンブリ。
  20. 前記撮像装置、前記分光計、及び前記トランシーバは、前記カテーテルチューブの前記管壁の異なる位置にそれぞれ埋め込まれており、
    前記カテーテルチューブは、更に、前記管壁に埋め込まれた送気チャネルを備える
    ことを特徴とする請求項19に記載のカテーテルアセンブリ。
  21. 前記画像データは、前記撮像装置に近接する構造を表すトポグラフィ画像データを含むことを特徴とする請求項17に記載のカテーテルアセンブリ。
  22. 患者の内部を照明するように構成された照明源と、
    撮像装置を含むロボットシステムと、
    近位端及び遠位端を有し、前記撮像装置に光学的に結合された光ファイバを有する光バンドルを含み、前記患者の開口部に挿入されるように構成されたスタイレットと、
    を備えることを特徴とする誘導システムであって、
    前記光ファイバは、光を前記患者の内部から前記撮像装置に送るように構成されていることを特徴とする誘導システム。
  23. 前記スタイレットは、前記スタイレットの本体に結合又は統合された複数のフィラメントを含み、
    前記ロボットシステムは複数のアクチュエータを含み、
    それぞれの前記複数のフィラメントは、それぞれのアクチュエータのエクステンダに結合され、
    前記アクチュエータのエクステンダの伸長及び収縮は、それぞれの前記フィラメントに引張荷重を加えて、前記ロボットシステムに対する前記スタイレットの向きを調整することを特徴とする請求項22に記載の誘導システム。
  24. 前記ロボットシステムは、前記スタイレットを回転させて前記スタイレットの遠位端を前記患者の内部で更に前進させるように構成されたモータを含むことを特徴とする請求項23に記載の誘導システム。
  25. 前記スタイレットは、COセンサを含み、
    前記ロボットシステムは、前記COセンサと通信するコントローラを含み、
    前記コントローラは、
    COセンサを使用して、CO量の値を受信し、
    前記CO量の値に基づいて、前記スタイレットの遠位端が前記患者の内部の目標位置にあることを判断する
    ように構成されることを特徴とする請求項23に記載の誘導システム。
  26. 前記コントローラは、前記照明源及び前記撮像装置と通信し、
    前記コントローラは、更に、
    前記照明源に光を放射させて前記患者の内部を照らし、
    前記撮像装置を使用して、前記患者の前記内部の画像を受信し、
    前記画像内の対象解剖学的領域を識別し、
    前記画像内の前記対象解剖学的領域の識別に基づいて、所望の向きを決定し、
    前記スタイレットが前記所望の向きに向けられるように、前記複数のアクチュエータに前記スタイレットを調整させ、
    前記スタイレットを前記患者の内部で更に進める
    ように構成されていることを特徴とする請求項25に記載の誘導システム。
  27. 前記コントローラは、更に、
    前記撮像装置を使用して、前記患者の内部の別の画像を受信し、
    前記別の画像内の気管分岐を識別し、
    前記CO量の値が閾値を超えていること、及び前記別の画像内の前記気管分岐の識別に基づいて、前記スタイレットの前記遠位端が前記患者の内部の前記目標位置にあると判断するように構成されることを特徴とする請求項26に記載の誘導システム。
  28. 前記スタイレットは、チャネルを含み、
    前記ロボットシステムは、前記チャネルと流体的に連通するように構成されたガス源を含み、
    前記ガス源からのガスは、前記チャネルを通って出て、前記患者の内部に導かれるように構成される
    ことを特徴とする請求項23に記載の誘導システム。
  29. 前記スタイレットは、チャネルを含み、
    前記ロボットシステムは、前記チャネルと流体的に連通するように構成された真空源を含み、
    前記真空源は、前記患者の内部から流体を吸引し、前記チャネルを通じて排出する
    ことを特徴とする請求項23に記載の誘導システム。
  30. 前記スタイレットは、
    前記照明源に光学的に結合され、前記照明源から放射された光を前記患者の内部に送るライトパイプと、
    前記光ファイバの遠位端に光学的に結合され、前記患者の内部からの光を前記光ファイバの前記遠位端に集束させるように構成されたレンズと、
    を含むことを特徴とする請求項22に記載の誘導システム。
  31. 前記スタイレットは、
    チャネルと、
    前記照明源に光学的に結合されたライトパイプと、
    COセンサと、
    を含み、
    前記光バンドル、前記ライトパイプ、及び前記COセンサは、それぞれ前記チャネル内に配置され、
    前記照明源は前記ロボットシステムの一部である
    ことを特徴とする請求項22に記載の誘導システム。
  32. 前記患者の口に挿入されるように構成された口腔咽頭デバイスを更に含むことを特徴とする請求項23に記載の誘導システム。
  33. 前記口腔咽頭デバイスは、ハンドルと、ハンドルに結合されたマウスピースを含み、
    前記ハンドルは、前記マウスピースの断面高さより大きい断面高さを有し、
    前記マウスピースは、前記口腔咽頭デバイスの長軸から離れて湾曲する湾曲セクションを有し、
    前記マウスピースは、前記口腔咽頭デバイスが前記患者の前記開口部に配置される際、前記患者の口の内部に配置されるように構成され、
    前記ハンドルは、前記口腔咽頭デバイスが前記患者の前記開口部に配置される際、前記患者の口の外側に配置されるように構成されていることを特徴とする請求項32に記載の誘導システム。
  34. 前記口腔咽頭デバイスのマウスピースは、前記患者の舌に接触するように構成され、
    前記マウスピースの遠位端は、前記患者の喉の中に配置されるように構成されていることを特徴とする請求項33に記載の誘導システム。
  35. 前記口腔咽頭デバイスは、
    前記ハンドル及び前記マウスピースを通って延びる導管と、
    酸素ガス源と接続するように構成され、前記導管と流体的に連通するポートコネクタと、
    を含み、
    前記酸素ガス源からの酸素ガスは、前記ポートコネクタに流れ込み、前記導管を通って出て前記患者の喉に入るように構成されることを特徴とする請求項33に記載の誘導システム。
  36. 遠位端が前記患者の口及び喉に挿入されるように構成される気管内チューブを更に含み、
    前記気管内チューブは、前記口腔咽頭デバイス、及び前記患者の頭部に結合されるように構成された固定装置、に取り外し可能に結合されるように構成されることを特徴とする請求項33に記載の誘導システム。
  37. 患者に挿管する方法であって、
    口腔咽頭デバイスの遠位端を前記患者の口及び前記患者の喉に挿入し、
    気管内チューブの遠位端が前記患者の咽喉内に配置されるまで、前記口腔咽頭デバイスに沿って前記気管内チューブの前記遠位端を前進させ、
    前記気管内チューブを前記口腔咽頭デバイスに結合し、
    スタイレットの遠位端が前記患者の気管内の目標位置に到達するまで、前記スタイレットの前記遠位端を前記気管内チューブに挿入する、
    ことを含むことを特徴とする患者に挿管する方法。
  38. 前記口腔咽頭デバイスから前記気管内チューブを切り離し、
    前記気管内チューブの前記遠位端が前記スタイレットの前記遠位端と重なり合うか、又は前記遠位端の近位になるまで、前記スタイレットに沿って前記気管内チューブの前記遠位端を前進させ、
    前記スタイレット全体が前記患者の体外に出るまで、前記気管内チューブを通して前記スタイレットを後退させ、
    人工呼吸器を前記気管内チューブの近位端に接続する、
    ことを更に含むことを特徴とする請求項37に記載の方法。
  39. 前記スタイレットの前記遠位端が前記目標位置に到達するまで、前記スタイレットを前記気管内チューブに挿入している間、酸素ガスを、加圧酸素ガス源から、前記口腔咽頭デバイスのポートコネクタを介して、前記口腔咽頭デバイスの導管を介して、前記患者の喉に導入することを更に含むことを特徴とする請求項37に記載の方法。
JP2023518197A 2019-03-21 2021-09-21 ロボット人工知能による経鼻/経口/経直腸の腸内チューブ Pending JP2023545637A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962821606P 2019-03-21 2019-03-21
US17/027,364 US20210059607A1 (en) 2019-03-21 2020-09-21 Robotic artificial intelligence nasal/oral/rectal enteric tube
US17/027,364 2020-09-21
PCT/US2021/051376 WO2022061313A1 (en) 2019-03-21 2021-09-21 Robotic artificial intelligence nasal/oral/rectal enteric tube

Publications (1)

Publication Number Publication Date
JP2023545637A true JP2023545637A (ja) 2023-10-31

Family

ID=72519169

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023518197A Pending JP2023545637A (ja) 2019-03-21 2021-09-21 ロボット人工知能による経鼻/経口/経直腸の腸内チューブ

Country Status (4)

Country Link
US (1) US20210059607A1 (ja)
EP (1) EP4213757A1 (ja)
JP (1) JP2023545637A (ja)
WO (2) WO2020191269A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111666998B (zh) * 2020-06-03 2022-04-22 电子科技大学 一种基于目标点检测的内窥镜智能插管决策方法
AU2021392646A1 (en) * 2020-12-01 2023-06-22 The Brigham And Women's Hospital, Inc. Spectrometry systems, methods, and applications
US11045271B1 (en) * 2021-02-09 2021-06-29 Bao Q Tran Robotic medical system
US11948303B2 (en) * 2021-02-26 2024-04-02 Capsovision Inc. Method and apparatus for objective assessment of gastrointestinal conditions based on images captured in the GI tract
US20230010416A1 (en) * 2021-07-08 2023-01-12 University Of Maryland, College Park Systems and methods for compound concentration sensing in fluids
CN114010919B (zh) * 2021-11-17 2023-09-19 中国人民解放军陆军特色医学中心 一种提高胸腹腔顺应性和气体交换效率的全小肠减压管
WO2023167668A1 (en) * 2022-03-03 2023-09-07 Someone Is Me, Llc Imaging system for automated intubation

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5363838B1 (en) * 1992-12-09 2000-03-28 Gordon P George Fiberoptic intubating scope with camera and lightweight portable screen and method of using same
US6119031A (en) * 1996-11-21 2000-09-12 Boston Scientific Corporation Miniature spectrometer
US7130834B2 (en) * 1997-12-12 2006-10-31 Idaho Potato Commission Identification system and method for determining the geographic origin of a fresh commodity
IL154392A (en) * 2002-02-11 2010-06-30 Given Imaging Ltd Self-propelled device with magneto-hydrodynamic boost system
EP1615673B1 (en) * 2003-04-25 2012-10-31 Tyco Healthcare Group LP Surgical access apparatus
AU2005265048B2 (en) * 2004-06-18 2011-06-16 Elamleh, David R. Intravascular imaging device and uses thereof
EP2446803A1 (en) * 2004-06-25 2012-05-02 Carnegie-Mellon University Steerable, follow the leader device
US7742567B2 (en) * 2007-04-11 2010-06-22 Searete Llc Compton scattered X-ray visualization, imaging, or information provider with time of flight computation
EP2148608A4 (en) * 2007-04-27 2010-04-28 Voyage Medical Inc CATHETER FOR VISUALIZATION AND HANDLING OF MANUFACTURED FABRICS OF COMPLEX SHAPES
WO2011053931A2 (en) * 2009-11-02 2011-05-05 Board Of Regents, The University Of Texas System Catheter for intravascular ultrasound and photoacoustic imaging
US8652033B2 (en) * 2010-09-23 2014-02-18 Karl Storz Endovision, Inc. Video stylet with directable tip
WO2012064769A2 (en) * 2010-11-08 2012-05-18 Vasonova, Inc. Endovascular navigation system
CN116712655A (zh) * 2011-10-14 2023-09-08 直观外科手术操作公司 导管系统
US20120302875A1 (en) * 2012-08-08 2012-11-29 Gregory Allen Kohring System and method for inserting intracranial catheters
WO2014201035A1 (en) * 2013-06-10 2014-12-18 Chandler Jr Howard C Method and system for intraoperative imaging of soft tissue in the dorsal cavity
JP6348078B2 (ja) * 2015-03-06 2018-06-27 富士フイルム株式会社 分岐構造判定装置、分岐構造判定装置の作動方法および分岐構造判定プログラム
CA3029482A1 (en) * 2016-07-01 2018-01-04 Brio Device Llc Intubation stylet with video feed
US10806334B2 (en) * 2017-02-28 2020-10-20 Verily Life Sciences Llc System and method for multiclass classification of images using a programmable light source
US10424069B2 (en) * 2017-04-07 2019-09-24 Nvidia Corporation System and method for optical flow estimation
US10646288B2 (en) * 2017-04-12 2020-05-12 Bio-Medical Engineering (HK) Limited Automated steering systems and methods for a robotic endoscope
WO2018200063A1 (en) * 2017-04-27 2018-11-01 Wedge Therapeutics, Llc Lower jaw thrusting, mandibular protracting, tongue holding, universal oropharyngeal airway device
EP3417901A1 (en) * 2017-06-20 2018-12-26 Siemens Healthcare GmbH Autonomous catheterization assembly

Also Published As

Publication number Publication date
EP4213757A1 (en) 2023-07-26
WO2020191269A1 (en) 2020-09-24
US20210059607A1 (en) 2021-03-04
WO2022061313A1 (en) 2022-03-24

Similar Documents

Publication Publication Date Title
JP2023545637A (ja) ロボット人工知能による経鼻/経口/経直腸の腸内チューブ
US11000452B2 (en) Temporary tubes and a system for placing same in a patient
US11596494B2 (en) Robotic-assisted navigation and control for airway management procedures, assemblies and systems
KR20220143817A (ko) 로봇 기관지경 검사용 시스템 및 방법
JP2023553267A (ja) 自動挿管のためのシステムおよび方法
US20230372032A1 (en) Robotic artificial intelligence nasal/oral/rectal enteric tube
US20230414089A1 (en) Devices and expert systems for intubation and bronchoscopy
US20240057859A1 (en) Disposable controls, re-usable devices, and their methods of use
WO2023060241A1 (en) Navigation and control for airway management procedures, assemblies and systems
WO2023167669A1 (en) System and method of automated movement control for intubation system
WO2023167668A1 (en) Imaging system for automated intubation
WO2023164434A2 (en) Robotic-assisted navigation and control for airway management procedures, assemblies and systems
CN116615132A (zh) 用于气道管理程序、组件和系统的机器人辅助导航和控制