JP2021194544A - ナビゲートされた整形外科手術のための機械学習システム - Google Patents

ナビゲートされた整形外科手術のための機械学習システム Download PDF

Info

Publication number
JP2021194544A
JP2021194544A JP2021099220A JP2021099220A JP2021194544A JP 2021194544 A JP2021194544 A JP 2021194544A JP 2021099220 A JP2021099220 A JP 2021099220A JP 2021099220 A JP2021099220 A JP 2021099220A JP 2021194544 A JP2021194544 A JP 2021194544A
Authority
JP
Japan
Prior art keywords
surgical
patient
data
robot
machine learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021099220A
Other languages
English (en)
Inventor
コストシェフスキー シモン
Kostrzewski Szymon
ゲリゲル ダニエル
Gehriger Daniel
ジョンソン ノーバート
Johnson Norbert
カナガセガル ケルティハン
Kanagasegar Keerthighaan
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Globus Medical Inc
Original Assignee
Globus Medical Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Globus Medical Inc filed Critical Globus Medical Inc
Publication of JP2021194544A publication Critical patent/JP2021194544A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references
    • G16H70/20ICT specially adapted for the handling or processing of medical references relating to practices or guidelines
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/14Surgical saws ; Accessories therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/108Computer aided selection or customisation of medical implants or cutting guides
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • A61B2034/2057Details of tracking cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2072Reference field transducer attached to an instrument or patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/45For evaluating or diagnosing the musculoskeletal system or teeth
    • A61B5/4528Joints

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Robotics (AREA)
  • Pathology (AREA)
  • Data Mining & Analysis (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Gynecology & Obstetrics (AREA)
  • Databases & Information Systems (AREA)
  • Urology & Nephrology (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Bioethics (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Manipulator (AREA)

Abstract

【課題】ナビゲートされた整形外科手術のための機械学習システムが提供される。【解決手段】手術中のコンピュータ支援ナビゲーションのための外科ガイダンスシステムが開示されている。外科ガイダンスシステムは、複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、術後フィードバックデータに基づいて機械学習モデルをトレーニングするように構成されている。外科ガイダンスシステムは、定義された患者を特徴付ける分散型ネットワークコンピュータの1つから術前データを取得し、機械学習モデルによる術前データの処理に基づいて定義された患者の外科手術計画を生成するようにさらに構成される。外科手術計画は、ユーザによるレビューのためにディスプレイデバイスに提供される。【選択図】図13

Description

本開示は、医療機器およびシステム、より具体的には、整形外科手術のためのユーザおよび/または外科手術ロボットへのナビゲーション情報の提供に関する。
骨切り術、すなわち、骨などの解剖学的構造を目標面に沿って切断することを必要とする、いくつかの外科手術的介入がある。人工膝関節全置換術(TKA)は通常、大腿骨端と脛骨骨端の両方を切断して、損傷した骨と軟骨を取り除き、人工膝関節の装着を可能にすることを含む。
現在TKA手術では、患者の満足度は通常約80%である。これは、患者の満足度が通常約95%である股関節形成術など、他のいくつかのタイプの整形外科手術と比較して低い。これらの満足度は、次のような革新にもかかわらず、数十年にわたって主に変化していない。
・新しいインプラント設計、
・コンピュータ支援手術(CAS):ナビゲーションおよびロボット手術システム、
・カスタムカッティングテンプレートソリューション、および
・カスタマイズされたインプラント。
これは、以前の医療手順および関連する革新によって対処されていないTKAおよびその他の整形外科手術に問題があることを示唆している。
本開示のいくつかの実施形態は、手術中のコンピュータ支援ナビゲーションのための外科ガイダンスシステムを対象とする。外科ガイダンスシステムは、複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、術後フィードバックデータに基づいて機械学習モデルをトレーニングするように構成されている。外科ガイダンスシステムは、定義された患者を特徴付ける分散型ネットワークコンピュータの1つから術前データを取得し、機械学習モデルによる術前データの処理に基づいて定義された患者の外科手術計画を生成するようにさらに構成される。外科手術計画は、ユーザによるレビューのためにディスプレイデバイスに提供される。
いくつかの他の実施形態は、少なくとも1つのコントローラに外科ガイダンスシステム、追跡システムを含む外科手術システムを対象とする。外科ガイダンスシステムは、複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、術後フィードバックデータに基づいて機械学習モデルをトレーニングするように構成されている。外科ガイダンスシステムは、定義された患者を特徴付ける分散型ネットワークコンピュータの1つから術前データを取得し、機械学習モデルによる術前データの処理に基づいて定義された患者の外科手術計画を生成するようにさらに構成される。外科手術計画は、ユーザによるレビューのためにディスプレイデバイスに提供される。追跡システムは、外科手術鋸によって切断される定義された患者の解剖学的構造の姿勢を決定し、外科手術鋸の姿勢を決定するように構成される。少なくとも1つのコントローラは、外科ガイダンスシステムから外科手術計画を取得し、解剖学的構造が切断される場所を定義する外科手術計画に基づいて、および解剖学的構造の姿勢に基づいて、目標面の姿勢を決定し、ならびに目標面の姿勢と外科手術鋸の姿勢の比較に基づいて操縦情報を生成するように構成されるものであって、操縦情報は、外科手術鋸の切断面を配置して目標面と位置合わせするために外科手術鋸を移動する必要がある場所を示す。
実施形態による他の外科手術システム、外科ガイダンスシステム、ならびに対応する方法およびコンピュータプログラム製品は、以下の図面および詳細な説明を検討する際に当業者には明らかであるか、または明らかになるであろう。このような外科手術システム、外科ガイダンスシステム、ならびに対応する方法およびコンピュータプログラム製品が、この発明を実施するための形態の範囲に含まれ、また本開示の範囲内にあり、添付の特許請求の範囲によって保護されることが意図されている。さらに、本明細書に開示されるすべての実施形態が別々に実装されても、任意の方法および/または組み合わせで組み合わされてもよいことが意図される。
本開示のさらなる理解を提供するために含まれ、かつ本出願に組み込まれてその一部を構成する添付の図面は、本発明の概念の特定の非限定的な実施形態を例示する。図面では、以下の通りである。
図1は、本開示のいくつかの実施形態にかかる外科手術システムの実施形態を示している。 図2は、本開示のいくつかの実施形態にかかる、図1の外科手術システムの外科手術ロボットコンポーネントを示している。 図3Aは、本開示のいくつかの実施形態にかかる、図1の外科手術システムのカメラ追跡システム構成要素を示している。 図3Bは、本開示のいくつかの実施形態にかかる、図1の外科手術システムとともに使用されることができる別のカメラ追跡システム構成要素の正面図を示している。 図3Cは、本開示のいくつかの実施形態にかかる、図1の外科手術システムとともに使用されることができる別のカメラ追跡システム構成要素の等角図を示している。 図4は、ロボットアームに接続可能であり、かつ本開示のいくつかの実施形態に従って構成されたエンドエフェクタの実施形態を示している。 図5は、外科手術ロボットおよびカメラシステムが患者の周りに配設されている医療手術を示している。 図6は、医療手術に使用される図5の外科手術システムのコンポーネントのブロック図を示している。 図7は、外科手術システムのナビゲーション機能を使用するときに図5および図6のディスプレイに表示されることができる様々な表示画面を示している。 図8は、本開示のいくつかの実施形態にかかる、外科手術ロボットのいくつかの電気的コンポーネントのブロック図を示している。 図9は、本開示のいくつかの実施形態にかかる、カメラ追跡システムおよび/または外科手術ロボットに動作可能に接続できるコンピュータプラットフォームに接続された撮像デバイスを含む外科手術システムの構成要素のブロック図を示している。 図10は、本開示のいくつかの実施形態により構成された受動的なエンドエフェクタの代替的な実施形態を例示している。 図11は、本開示のいくつかの実施形態により構成された受動的なエンドエフェクタの代替的な実施形態を例示している。 図12は、いくつかの実施形態により構成された外科ガイダンスシステムを使用するナビゲートされた外科ワークフローを示す。 図13は、術前、術中、および術後での関連データフローを伴う外科ガイダンスシステムのブロック図を示し、いくつかの実施形態によりユーザディスプレイおよびロボット手術システムに提供される外科ガイダンスを示している。 図14は、術前計画ワークフローを実行する機能ブロックを示し、これは、いくつかの実施形態による、外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図15は、いくつかの実施形態による、例示的な外科的症例計画を実行する機能ブロックを示す。 図16は、画像分析のための機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図17は、プランデバイスインプラントワークフローの機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図18は、ナビゲートされたワークフローの機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図19は、関節可動域(ROM)ワークフローをテストするための機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図20は、いくつかの実施形態による、インプラントの位置計画を支援するために、XRヘッドセットを通して患者の骨にオーバーレイとして表示される外科手術計画の一部を示す。 図21は、いくつかの実施形態による、外科手術計画に従って骨に1つ以上の切り込みを入れるために実行される外科手術ロボットワークフローを示す。 図22は、平面性のチェックワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図23は、ナビゲートされたジグで骨を切断するワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図24は、インプラントデバイスの埋め込み結果を評価するワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。 図25は、いくつかの実施形態による、カメラ追跡システムによってそれらの集合的な姿勢を追跡させ得るインプラントデバイスに提供されるディボットを示す。 図26は、いくつかの実施形態による、外科ガイダンスシステムによって少なくとも部分的に実行され得る患者検査ワークフローを示す。
ここで、本発明の概念の例示的な実施形態が示されている添付の図面を参照して、本発明の概念を以下でより完全に説明する。ただし、本発明の概念は、多くの様々な形態で具体化され得、本明細書に打ち出される実施形態に限定されると解釈されるべきではない。むしろ、本開示が徹底的かつ完全になり、当業者に様々な本発明の概念の範囲を完全に伝えるように、これらの実施形態が提供される。これらの実施形態が相互排他的ではないことにも留意されたい。ある実施形態からの構成要素が別の実施形態に存在するまたは使用されることが暗黙のうちに前提とされ得る。
本明細書に開示される様々な実施形態は、関節インプラントの骨切り術などの整形外科的処置を計画および実行するときにナビゲートされたガイダンスを提供する外科手術システムの動作の改善を対象とする。機械学習(ML)ガイダンスシステムは、術前段階の計画、術中段階の外科的処置、および術後段階の評価中に、患者にカスタマイズされたガイダンスを提供する。中央データベースには、以前にMLガイダンスシステムを使用した、または現在使用しているすべての患者全体の各段階のぞれぞれで取得できるデータが格納される。MLシステムは、中央データベースからのデータに基づいて時間の経過とともにトレーニングされるため、患者がカスタマイズしたガイダンスにより、改善された手術結果が提供される。
図1は、本開示のいくつかの実施形態による、外科手術システム2の一実施形態を示す。整形外科手術または他の外科的処置の実施前に、例えば、図10のCアーム撮像デバイス104または図11のOアーム撮像デバイス106を使用して、またはコンピュータ断層撮影(CT)画像もしくはMRIなどの別の医療撮像デバイスから、患者の計画された外科手術エリアの三次元(「3D」)画像スキャンを行うことができる。このスキャンは、術前(例えば、最も一般的には処置の数週間前)または術中に行うことができる。しかしながら、外科手術システム2の様々な実施形態に従って、任意の既知の3Dまたは2D画像スキャンを使用することができる。画像スキャンは、カメラ追跡システム構成要素6、外科手術ロボット4(例えば、図1のロボット2)、撮像デバイス(例えば、Cアーム104、Oアーム106など)、および患者の画像スキャンを保存するための画像データベース950を含むことができる手術システム900(図9)のコンピュータプラットフォーム910などの、外科手術システム2と通信するコンピュータプラットフォームに送信される。コンピュータプラットフォーム910(図9)のディスプレイデバイス上で画像スキャン(単数または複数)をレビューする外科医は、患者の解剖学的構造に対する外科的処置中に使用される手術道具の目標姿勢を定義する外科手術計画を生成する。ツールとも呼ばれる外科ツール例には、ドリル、ねじ回し、鋸、開創器、またねじ、スペーサ、椎体間融合デバイス、プレート、ロッドなどの移植片が含まれ得るが、これらに限定されるわけではない。実施形態によっては、目標平面を定義する外科手術計画は、ディスプレイデバイス上に表示された3D画像スキャン上に計画される。
本明細書で使用される際、「姿勢(pose)」という用語は、ある物体(例えば、ダイナミックリファレンスアレイ、エンドエフェクタ、外科ツール、解剖学的構造体など)の別の物体に対するかつ/または定義された座標系に対する位置および/または回転角を指す。したがって、姿勢は、ある物体の別の物体にかつ/または定義された座標系に対する多次元位置のみに、物体の別の物体にかつ/または定義された座標系に対する多次元回転角のみに、あるいは多次元位置と多次元回転角との組み合わせに、基づき定義され得る。したがって、「姿勢」という用語は、位置、回転角度、またはそれらの組み合わせを指すために使用される。
図1の外科手術システム2は、例えば、使用するために器具を保持すること、器具を位置合わせすること、器具を使用すること、器具を誘導すること、および/または器具を位置決めすることによって、医療処置中に外科医を支援することができる。実施形態によっては、外科手術システム2は、外科手術ロボット4およびカメラ追跡システム構成要素6を含む。外科手術ロボット4とカメラ追跡システム構成要素6とを機械的に結合する能力によって、外科手術システム2が単一ユニットとして巧みに操り、動くのが可能になり、外科手術システム2が小さな設置面積で済むようにし、狭い通路および曲がり角のより楽な通過が可能になり、またより小さな面積内での収納が可能になる。
整形外科手術処置は、外科手術システム2を医療ストレージから医療処置室まで移動させることで開始することができる。外科手術システム2は、出入口、ホール、およびエレベータから医療処置室に到達するまでずっと操作することができる。部屋の中で、外科手術システム2は、2つの分離した別個のシステム、外科手術ロボット4およびカメラ追跡システム6に、物理的に分離され得る。外科手術ロボット4は、医療従事者を適切に支援するために、任意の好適な場所で患者に隣接して位置決めされ得る。カメラ追跡システム構成要素6は、患者の基部に、患者の肩に、または外科手術ロボット4および患者の追跡部分のその時の姿勢と、姿勢の動きとを追跡するのに適したいずれの他の場所にも位置付けされ得る。外科手術ロボット4およびカメラ追跡システム構成要素6は、内蔵電力源によって給電され、かつ/または外壁コンセントに差し込まれ得る。
外科手術ロボット4は、医療処置中にツールを保持しかつ/または使用することによって外科医を補助するのに使用され得る。ツールを正しく利用し、保持するのに、外科手術ロボット4は、複数のモータ、コンピュータ、および/またはアクチュエータが正しく機能することに頼る場合がある。図1に示されるロボット本体8は、複数のモータ、コンピュータ、および/またはアクチュエータが外科手術ロボット4内で固定され得る構造体としての役割を果たし得る。ロボット本体8はまた、ロボット伸縮式支持アーム16に支持を与えることができる。ロボット本体8のサイズは、取り付けられたコンポーネントを支持する強固なプラットフォームを提供することができ、かつ取り付けられたコンポーネントを動作させることができる複数のモータ、コンピュータ、および/またはアクチュエータを収容し、隠し、かつ保護することができる。
ロボット基部10は、外科手術ロボット4の下部支持として作用することができる。実施形態によっては、ロボット基部10は、ロボット本体8を支持することができ、ロボット本体8を複数の動力付き車輪12に取り付けることができる。車輪へのこの取り付けにより、ロボット本体8が空間を効率良く動くことが可能になる。ロボット基部10は、ロボット本体8の長さおよび幅に及び得る。ロボット基部10は、約2インチ〜約10インチの高さであり得る。ロボット基部10は、動力付き車輪12を覆い、保護し、また支持することができる。
実施形態によっては、図1に示されるように、少なくとも1つの動力付き車輪12がロボット基部10に取り付けられ得る。動力付き車輪12は、ロボット基部10のいずれの場所にでも取り付けてもよい。それぞれの個々の動力付き車輪12は、いずれの方向にも垂直軸を中心として回転することができる。モータは、動力付き車輪12の上に、中に、またはそれに隣接して配置され得る。このモータによって、外科手術システム2は、いずれの場所にも移動し、外科手術システム2を安定化させかつ/または水平にすることができる。動力付き車輪12内またはそれに隣接して位置するロッドは、モータによって表面に押し込められ得る。ロッドは、描かれていないが、外科手術システム2を持ち上げるのに適したいずれの金属からも作られ得る。ロッドは、外科手術システム2を持ち上げることができる動力付き車輪10を、患者との関係で外科手術システム2の向きを水平にする、またはそうでなければ固定するのに必要ないずれの高さにも持ち上げることができる。各車輪上のロッドによる小さな接触範囲を通して支持される、外科手術システム2の重さは、外科手術システム2が医療処置中に動くのを防ぐ。この堅固な位置決めは、物体および/または人々が偶発的に外科手術システム2を移動させることを阻止することができる。
外科手術システム2の移動を、ロボット手すり14を使用して容易にすることができる。ロボット手すり14は、人に、ロボット本体8をつかむことなく、外科手術システム2を動かす能力を与える。図1に示されるように、ロボット手すり14は、ロボット本体8よりも短く、ロボット本体8の長さによりわたることがあり、かつ/またはロボット本体8の長さより長くわたることがある。ロボット手すり14は、ロボット本体8に対する保護をさらに備え、物体および/または従事者がロボット本体8に接触すること、ぶつかること、または衝突することを阻止することができる。
ロボット本体8は、以後「SCARA」と称する水平多関節ロボットのための支持を提供することができる。SCARA 24は、ロボットアームの同時再現性およびコンパクトさゆえに、外科手術システム2内で使用するのに有益であり得る。SCARAのコンパクトさは、医療処置内に追加の空間を提供することができ、それにより、医療専門家は、過度な乱雑さと制限されたエリアなしに、医療処置を実施することが可能になる。SCARA 24は、ロボット伸縮式支持体16、ロボット支持アーム18、および/またはロボットアーム20で構成され得る。ロボット伸縮式支持体16は、ロボット本体8に沿って配置され得る。図1に示されるように、ロボット伸縮式支持体16は、SCARA 24およびディスプレイ34に支持を与えることができる。実施形態によっては、ロボット伸縮式支持体16は、垂直方向に伸縮することができる。ロボット伸縮式支持体16の本体は、本体に加えられる応力および重量を支持するように構成された任意の幅および/または高さとすることができる。
いくつかの実施形態では、医療従事者は、医療従事者によって提出されたコマンドを介してSCARA 24を移動させることができる。コマンドは、以下にさらに詳細に説明するように、ディスプレイ34、タブレット、および/またはXRヘッドセット(例えば、図9のヘッドセット920)で受信された入力から発信されることができる。XRヘッドセットは、医療従事者がディスプレイ34またはタブレットなどの任意の他のディスプレイを参照する必要性を排除することができ、これにより、ディスプレイ34および/またはタブレットなしでSCARA 24を構成することが可能になる。コマンドは、1つのスイッチの押下および/または複数のスイッチの押下によって起こされ得、かつ/または以下に、より詳細に説明するように、XRヘッドセットによって感知されるハンドジェスチャコマンドおよび/または音声コマンドに基づき起こされ得る。
起動アセンブリ60は、1つのスイッチおよび/または複数のスイッチを含み得る。起動アセンブリ60は、移動コマンドをSCARA 24に送信して、オペレータがSCARA 24を手動で操作することを可能にするように動作可能であり得る。1つのスイッチまたは複数のスイッチが押されると、医療従事者は、適用された手の動きを通してSCARA 24を動かす能力を得ることができる。代替としてまたは追加として、オペレータは、以下に、より詳細に説明するように、XRヘッドセットによって感知されるハンドジェスチャコマンドおよび/または音声コマンドを通して、SCARA 24の動きを制御することができる。さらに、SCARA 24が動くことを求めるコマンドを受信していない場合、SCARA 24は、従事者および/または他の物体による偶発的な動きを防ぐように所定位置にロックされ得る。所定の位置にロックすることにより、SCARA 24は、エンドエフェクタ26が医療処置中に外科手術器具を誘導することができる堅固なプラットフォームを提供する。
ロボット支持アーム18は、様々な機構によってロボット伸縮式支持体16に接続されることができる。実施形態によっては、図1および2で一番よく分かるが、ロボット支持アーム18は、ロボット伸縮式支持体16に対していずれの方向にも回転することができる。ロボット支持アーム18は、ロボット伸縮式支持体16を中心として360度回転することができる。ロボットアーム20は、適切ないずれの場所にも、またロボット支持アーム18に対していずれの方向にも回転することを可能にする様々な機構によって、ロボット支持アーム18に接続することができる。ある実施形態において、ロボットアーム20は、ロボット支持アーム18に対して360度回転することができる。この自由回転により、オペレータは、外科手術計画に従って、ロボットアーム20を位置付けることができる。
図4および5の受動的なエンドエフェクタ1000は、任意の好適な場所でロボットアーム20に取り付けられ得る。以下でさらに詳細に説明されるように、受動的なエンドエフェクタ1000は、基部、第1の機構、および第2の機構を含み得る。基部は、外科手術ロボット4によって位置決めされるロボットアーム20のエンドエフェクタカプラ22に取り付けられるように構成される。第1の機構は、基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第2の機構は、基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第1および第2の機構は、回転可能な接続部を中心として旋回し、かつ用具取り付け機構の動きを作業面内の動きの範囲に制約するように構成され得る。回転可能な接続部は、1つの自由度(DOF)の運動を可能にする旋回関節であっても、2つのDOFの運動を可能にするユニバーサル関節であっても、3つのDOFの運動を可能にするボール関節であってもよい。用具取り付け機構は、鋸ブレードを有する外科手術鋸1040に接続されるように構成される。外科手術鋸1040は、切断するために鋸ブレードを振幅させるように構成され得る。第1および第2の機構は、作業面と平行になるように鋸ブレードの切断面を制約するように構成され得る。旋回関節は、好ましくは、受動的なエンドエフェクタが、鋸ブレードの運動を切断面に制約するように構成される場合、平面状の機構を接続するために使用され得る。
用具取り付け機構は、ねじ、ナットおよびボルト、クランプ、ラッチ、接合、圧入嵌合、または磁石を含み得るが、これらに限定されない、様々な機構を介して、外科手術鋸1040に接続され得る。いくつかの実施形態では、動的基準アレイ52は、受動的なエンドエフェクタ1000、例えば、用具取り付け機構に取り付けられ、かつ/または外科手術鋸1040に取り付けられる。本明細書では「DRA」および「基準配列」とも呼ばれる動的基準配列は、手術室内で従事者が装着する1つ以上のXRヘッドセット、エンドエフェクタ、外科手術ロボット、ナビゲート式外科処置における外科ツール、および患者の解剖学的構造体(例えば、骨)上に配置または形成され得る剛体、マーカ、または他の兆候であり得る。カメラ追跡システム構成要素6または他の3D位置特定システムと組み合わせたコンピュータプラットフォーム910は、DRAの姿勢(例えば、位置および回転方向)をリアルタイムで追跡するように構成されている。DRAは、図示されたボールの配置など、基準を含み得る。DRAの3D座標のこの追跡により、外科手術システム2は、図5の患者50の目標の解剖学的構造に関連する任意の多次元空間におけるDRAの姿勢を判定することができる。
図1に示されるように、光表示器28は、SCARA 24の頂部上に位置決めされることができる。光表示器28は、外科手術システム2がその時働いている「状態」を示すように、任意のタイプの光として照らすことができる。実施形態によっては、光は、光表示器28の周りに環を形成し得る、LED電球によって生み出される。光表示器28は、光表示器28の全体にわたり光を輝かせることができる完全透過性の材料から成り得る。光表示器28は、下部ディスプレイ支持体30に取り付けられ得る。下部ディスプレイ支持体30は、図2に示されるように、オペレータが、適切ないずれの場所にもディスプレイ34をうまく移動させるのを可能にし得る。下部ディスプレイ支持体30は、任意の適切な機構によって光表示器28に取り付けることができる。実施形態によっては、下部ディスプレイ支持体30は、光表示器28を中心として回転し得るか、または光表示器に堅固に取り付けられ得る。上部ディスプレイ支持体32は、任意の好適な機構によって下部ディスプレイ支持体30に取り付けられることができる。
いくつかの実施形態では、タブレットをディスプレイ34と併せて、および/またはディスプレイ34なしで使用することができる。タブレットは、ディスプレイ34の代わりに、上部ディスプレイ支持体32上に配置され得、医療手術中、上部ディスプレイ支持体32から取り外し可能であり得る。さらに、タブレットは、ディスプレイ34と通信することができる。タブレットは、任意の適切な無線接続および/または有線接続によって、外科手術ロボット4に接続することが可能であり得る。実施形態によっては、タブレットは、医療手術中、外科手術システム2をプログラムし、かつ/または制御することが可能であり得る。タブレットで外科手術システム2を制御する際、すべての入力コマンドおよび出力コマンドがディスプレイ34上に再現され得る。タブレットの使用により、オペレータは、患者50の周りで動くかつ/または外科手術ロボット4に移動する必要なく外科手術ロボット4を巧みに操ることができる。
図3Aおよび5に示されるように、カメラ追跡システム構成要素6は、有線または無線の通信ネットワークを通して外科手術ロボット4と連動して働く。図1、3、および5を参照すると、カメラ追跡システム構成要素6は、外科手術ロボット4と同様の構成要素をいくつか含み得る。例えば、カメラ本体36は、ロボット本体8に見られる機能性をもたらすことができる。ロボット本体8は、カメラ46が据え付けられる補助追跡バーをもたらすことができる。ロボット本体8内の構造もまた、カメラ追跡システム構成要素6を働かせるのに使用される、電子機器、通信デバイス、および電力源に支持を与えることができる。カメラ本体36は、ロボット本体8と同じさ材料で作られている可能性がある。カメラ追跡システム構成要素6は、無線および/または有線のネットワークによってXRヘッドセット、タブレット、および/またはディスプレイ34と直接通信して、XRヘッドセット、タブレット、および/またはディスプレイ34がカメラ追跡システム構成要素6の機能を制御することを可能にすることができる。
カメラ本体36は、カメラ基部38によって支持される。カメラ基部38は、ロボット基部10として機能し得る。図1の実施形態では、カメラ基部38は、ロボット基部10よりも幅が広くなっている可能性がある。カメラ基部38の幅は、カメラ追跡システム構成要素6が外科手術ロボット4と接続するのを可能にし得る。図1に示されるように、カメラ基部38の幅は、外側ロボット基部10を固定するのに十分に広くすることができる。カメラ追跡システム構成要素6と外科手術ロボット4とが接続されているとき、カメラ基部38の追加の幅は、外科手術システム2の追加の操作性と外科手術システム2の支持を可能にすることができる。
ロボット基部10と同様に、複数の動力付き車輪12がカメラ基部38に取り付けられることができる。動力付き車輪12は、ロボット基部10および動力付き車輪12の働きと同様に、カメラ追跡システム構成要素6が患者50に対して固定された向きを安定化し、水平にするかまたはそれを設定するのを可能にし得る。この安定化により、カメラ追跡システム構成要素6が医療処置中に動くのを防ぐことができ、補助追跡バー上のカメラ46が、XRヘッドセットおよび/または外科手術ロボット4に接続されたDRAの軌跡を見失わないように、かつ/または図3Aおよび5に示されるような指示範囲56内の解剖学的構造体54および/またはツール58に接続された1つ以上のDRA 52の軌跡を見失わないようにすることができる。追跡のこの安定性および維持は、カメラ追跡システム構成要素6と事実上働く外科手術ロボット4の能力を高める。さらに、幅広カメラ基部38は、カメラ追跡システム構成要素6にさらなる支持を与えることができる。具体的には、図3Aおよび図5に示されるように、幅広のカメラ基部38により、カメラ46が患者の上に配設されたときに、カメラ追跡システム構成要素6が転倒するのを防止することができる。
カメラ伸縮式支持体40は、補助追跡バー上のカメラ46を支持することができる。実施形態によっては、伸縮式支持体40は、垂直方向にカメラ46を上げるまたは下げることができる。カメラハンドル48が、カメラ伸縮式支持体40の適切ないずれの場所にも取り付けられ、オペレータが、医療手術の前に、カメラ追跡システム構成要素6を予定の位置に動かすことを可能にするように構成され得る。実施形態によっては、カメラハンドル48は、カメラ伸縮式支持体40を上げ下げするのに使用される。カメラハンドル48は、ボタン、スイッチ、レバー、および/またはそれらの任意の組み合わせの押し下げによって、カメラ伸縮式支持体40の上昇および下降を実施することができる。
下部カメラ支持アーム42は、任意の好適な場所でカメラ伸縮式支持体40に取り付けることができ、実施形態では、図1に示されるように、下部カメラ支持アーム42は、伸縮式支持体40の周りで360度回転することができる。この自由回転により、オペレータは、適切ないずれの場所にでもカメラ46を位置付けることができる。下部カメラ支持アーム42は、任意の好適な機構によって伸縮式支持体40に接続することができる。下部カメラ支持アーム42を使用して、カメラ46に支持を与えることができる。カメラ46は、任意の適切な機構によって下部カメラ支持アーム42に取り付けられ得る。カメラ46は、カメラ46と下部カメラ支持アーム42との間の取り付け個所でいずれの方向にも枢動することができる。実施形態では、湾曲レール44は、下部カメラ支持アーム42上に配設されることができる。
湾曲レール44は、下部カメラ支持アーム42上の任意の好適な場所に配設されることができる。図3Aに示されるように、湾曲レール44は、任意の好適な機構によって下部カメラ支持アーム42に取り付けることができる。湾曲レール44は、適切ないずれの形状であってもよく、適切な形状は、三日月形、円形、卵形、楕円形、および/またはそれらの任意の組み合わせであり得る。カメラ46は、湾曲レール44に沿って移動可能に配置され得る。カメラ46は、例えば、ローラ、ブラケット、ブレース、モータ、および/またはそれらの任意の組み合わせによって湾曲レール44に取り付けることができる。モータおよびローラは、図示されていないが、湾曲レール44に沿ってカメラ46を動かすのに使用され得る。図3Aに示されるように、医療処置中、ある物体により、カメラ46が追跡される1つ以上のDRAを見るのを妨げられる場合、モータが、これに反応して、湾曲レール44に沿ってカメラ46を動かすことができる。このモータ駆動式動きにより、カメラ46は、カメラ追跡システム構成要素6を動かすことなく、物体によってもう邪魔されない新しい位置に移動することができる。カメラ46が1つ以上の追跡対象DRAを見ることを妨げられている間、カメラ追跡システム構成要素6は、停止信号を、外科手術ロボット4、XRヘッドセット、ディスプレイ34、および/またはタブレットに送信することができる。停止信号は、カメラ46が追跡対象DRA 52を再取得するかつ/またはオペレータにXRヘッドセットを装着するようかつ/またはディスプレイ34および/またはタブレットを見るよう注意喚起することができるようになるまで、SCARA 24が動かないようにすることができる。このSCARA 24は、カメラ追跡システムがDRAの追跡を再開することができるようになるまで、基部および/またはエンドエフェクタカプラ22のさらなる動きを止めることによって、停止信号の受信に応答するように構成され得る。
エンドエフェクタカプラ22は、鞍関節と、接続された受動的なエンドエフェクタとの間に介在するロードセルを含み得る。ロードセルは、力を検出および測定するために使用される任意の好適な器具であり得る。いくつかの実施例では、ロードセルは、6軸ロードセル、3軸ロードセル、または単軸ロードセルであり得る。ロードセルを使用して、エンドエフェクタカプラ22に加えられた力を追跡することができる。実施形態によっては、ロードセルは、複数のモータ850、851、852、853、および/または854と通信することができる。ロードセルが力を感知すると、加えられた力の量に関する情報がコントローラ846に分配され得る(図8)。コントローラ846は、ロードセルから力情報を取り出し、力情報をスイッチアルゴリズムで処理することができる。スイッチアルゴリズムは、コントローラ846によって使用されて、モータドライバ842を制御する。モータドライバ842は、モータのうちの1つ以上の動作を制御する。モータドライバ842は、特定のモータに、例えば、モータを通してロードセルによって測定された同じ程度の力を生み出すよう指示することができる。実施形態によっては、生み出される力は、コントローラ846によって指示される通りに、複数のモータ、例えば850〜854から来る可能性がある。さらに、モータドライバ842は、コントローラ846から入力を受信することができる。コントローラ846は、ロードセルによって感知された力の方向に関する情報をロードセルから受信することができる。コントローラ846は、この情報を、モーションコントローラアルゴリズムを使用して処理することができる。このアルゴリズムは、特定のモータドライバ842に情報を提供するのに使用され得る。力の方向を複製するために、コントローラ846は、特定のモータドライバ842を起動および/または起動解除することができる。コントローラ846は、1つ以上のモータ、例えば、850〜854のうちの1つ以上を制御して、ロードセルによって感知された力の方向に受動的なエンドエフェクタ1000の運動を誘発することができる。この力制御型の運動により、オペレータはSCARA 24および受動的なエンドエフェクタ1000を楽に、かつ/またはほとんど抵抗なく移動させることができる。受動的なエンドエフェクタ1000の動きは、医療従事者が使用するために、受動的なエンドエフェクタ1000を任意の好適な姿勢(すなわち、規定された三次元(3D)直交基準軸に対する場所および角度の向き)に位置決めするように実施され得る。
図3Bと図3Cは、図1の外科手術システムで使用され得る、または外科手術ロボットから独立して使用され得る、別のカメラ追跡システム構成要素6’の正面図と等角投影図を示す。例えば、カメラ追跡システム構成要素6’が、ロボットガイダンスの使用なしにナビゲート式外科手術を提供するのに使用され得る。図3Bおよび3Cのカメラ追跡システム構成要素6’と図3Aのカメラ追跡システム構成要素6との違いのうちの1つは、図3Bおよび3Cのカメラ追跡システム構成要素6’がコンピュータプラットフォーム910を運ぶハウジングを含むことである。コンピュータプラットフォーム910は、DRAを追跡するカメラ追跡作業を行い、ディスプレイデバイス、例えばXRヘッドセットおよび/または他のディスプレイデバイスに外科ナビゲーション情報を提供する、ナビゲーション式外科手術を行い、また本明細書に開示されている他の計算演算を行うように構成され得る。したがって、コンピュータプラットフォーム910は、図14の1つ以上のナビゲーションコンピュータなどのナビゲーションコンピュータを含むことができる。
図6は、医療手術に使用される図5の外科手術システムのコンポーネントのブロック図を示している。図6を参照すると、補助追跡バー上の追跡カメラ46は、ナビゲーション視野600を有し、ここで、患者に取り付けられた参照アレイ602の姿勢(例えば、位置および向き)、外科手術器具に取り付けられた参照アレイ604、およびロボットアーム20が、追跡される。追跡カメラ46は、以下に記載される動作を実行するように構成されたコンピュータプラットフォーム910を含む、図3Bおよび図3Cのカメラ追跡システム構成要素6’の一部とすることができる。参照アレイは、既知のパターンで光を反射することによって追跡を可能にし、既知のパターンがデコードされて、外科手術ロボット4の追跡サブシステムによってそれぞれの姿勢を判定する。患者の参照アレイ602と補助追跡バー上の追跡カメラ46との間の視線が(例えば、医療従事者、器具などによって)遮断された場合、外科手術器具のさらなるナビゲーションを実行することができない可能性があり、応答通知は、ロボットアーム20および外科手術ロボット4のさらなる移動を一時的に停止し、ディスプレイ34に警告を表示し、および/または医療従事者に可聴警告を提供することができる。ディスプレイ34は、外科医610および助手612がアクセス可能であるが、視認するには、患者から顔をそらし、眼の焦点を異なる距離および場所に変化させる必要がある。ナビゲーションソフトウェアは、外科医からの音声指示に基づいて、技術従事者614によって制御されることができる。
図7は、外科手術システム2のナビゲーション機能を使用するときに、外科手術ロボット4によって図5および図6のディスプレイ34に表示されることができる様々な表示画面を示している。表示画面は、開発された外科手術計画に基づいて、および/または追跡される参照アレイの姿勢に基づいて、解剖学的構造に対して表示画面に位置決めされた器具のモデルのグラフィック表現がオーバーレイされた患者の放射線写真、外科的処置の異なる段階および仮想的に投影されたインプラントの寸法パラメータ(例えば、長さ、幅、および/または直径)を制御するための様々なユーザ選択可能なメニューを含むことができるが、これに限定されるものではない。
ナビゲートされる外科手術のために、外科手術の術前計画、例えば、インプラント配置、および計画された外科的処置中の1人または複数のユーザにナビゲーション情報を提供するためのコンピュータプラットフォーム910への計画の電子転送を可能にする、以下に記載される様々な処理コンポーネント(例えば、コンピュータプラットフォーム910)および関連付けられたソフトウェアが提供される。
ロボットナビゲーションのために、外科手術の術前計画、例えば、インプラント配置、および外科手術ロボット4への計画の電子転送を可能にする、以下に記載される様々な処理コンポーネント(例えば、コンピュータプラットフォーム910)および関連付けられたソフトウェアが提供される。外科手術ロボット4は、計画を使用して、ロボットアーム20および接続されたエンドエフェクタ26を誘導して、計画された外科的処置のステップのための患者の解剖学的構造に対する外科手術器具の目標姿勢を提供する。
以下の様々な実施形態は、外科医610、助手612、および/または他の医療従事者が着用できる1つ以上のXRヘッドセットを使用して、外科手術ロボット、カメラ追跡システム6/6’、および/または手術室の他の医療機器から情報を受信し、および/またはこれらに制御コマンドを提供するための改善されたユーザインターフェースを提供することを対象とする。
図8は、本開示のいくつかの実施形態にかかる、外科手術ロボット4のいくつかの電気的コンポーネントのブロック図を示している。図8を参照すると、ロードセル(図示せず)は、エンドエフェクタカプラ22に加えられた力を追跡するように構成され得る。実施形態によっては、ロードセルは、複数のモータ850、851、852、853、および/または854と通信することができる。ロードセルが力を感知するに従って、加えられた力の程度に関する情報が、1つのスイッチアレイおよび/または複数のスイッチアレイからコントローラ846に配信され得る。コントローラ846は、ロードセルから力情報を取り出し、力情報をスイッチアルゴリズムで処理することができる。スイッチアルゴリズムは、モータドライバ842を制御するのにコントローラ846によって使用される。モータドライバ842は、モータ850、851、852、853、および854のうちの1つ以上の働きを制御する。モータドライバ842は、特定のモータに、例えば、モータを通してロードセルによって測定された同じ程度の力を生み出すよう指示することができる。実施形態によっては、生み出される力は、コントローラ846によって指示される通りに、複数のモータ、例えば850〜854から来る可能性がある。さらに、モータドライバ842は、コントローラ846から入力を受信することができる。コントローラ846は、ロードセルによって感知された力の方向に関する情報をロードセルから受信することができる。コントローラ846は、この情報を、モーションコントローラアルゴリズムを使用して処理することができる。このアルゴリズムは、特定のモータドライバ842に情報を提供するのに使用され得る。力の方向を複製するために、コントローラ846は、特定のモータドライバ842を起動および/または起動解除することができる。コントローラ846は、1つ以上のモータ、例えば850〜854のうちの1つ以上を制御して、ロードセルによって感知された力の方向にエンドエフェクタ26の運動を誘起することができる。この力によって制御される運動により、オペレータは、SCARA 24および受動的なエンドエフェクタ26を楽に、および/またはほとんど抵抗なく移動させることができる。エンドエフェクタ26の移動は、医療従事者が使用するために、エンドエフェクタ26を任意の好適な姿勢(すなわち、規定された三次元(3D)直交基準軸に対する場所および角度の向き)に位置決めするように実行されることができる。
図5に最もよく例示されている起動アセンブリ60は、エンドエフェクタカプラ22を包むブレスレットの形態をなすことができる。起動アセンブリ60は、SCARA 24のいずれの部分にでも位置し得、エンドエフェクタカプラ22の任意の部分が医療スタッフによって装着され得(また無線で通信する)、かつ/またはそれらの組み合わせであり得る。起動アセンブリ60は、一次ボタンおよび二次ボタンを備えることができる。
一次ボタンを押し下げることにより、オペレータは、SCARA 24およびエンドエフェクタカプラ22を移動させることができ得る。ある実施形態によれば、所定位置に設定されると、SCARA 24およびエンドエフェクタカプラ22は、オペレータがSCARA 24およびエンドエフェクタカプラ22を動かすように外科手術ロボット4をプログラムするまで動かないようになり得るか、または一次ボタンを使用して動かされる。例によっては、SCARA 24およびエンドエフェクタカプラ22がオペレータコマンドに応答するようになる前に、少なくとも2つの非隣接の一次起動スイッチの押下が必要となり得る。少なくとも2つの一次起動スイッチを押し下げることにより、医療処置中のSCARA 24およびエンドエフェクタカプラ22の偶発的な移動を防止することができる。
一次ボタンによって起動されると、ロードセルは、オペレータ、すなわち、医療従事者によってエンドエフェクタカプラ22に及ぼされる力の大きさおよび/または方向を測定することができる。この情報は、SCARA 24およびエンドエフェクタカプラ22を移動させるために使用されることができる、SCARA 24内の1つ以上のモータ、例えば850〜854のうちの1つ以上に転送されることができる。ロードセルによって測定された力の大きさおよび方向に関する情報は、1つ以上のモータ、例えば850〜854のうちの1つ以上に、ロードセルによって感知されるのと同じ方向にSCARA 24およびエンドエフェクタカプラ22を移動させることができる。この力制御型の動きにより、モータがSCARA 24およびエンドエフェクタカプラ22を移動させるのと同時に、オペレータがSCARA 24およびエンドエフェクタカプラ22を移動させるため、オペレータは、楽に、かつ大きな労力なしに、SCARA 24およびエンドエフェクタカプラ22を移動することが可能になり得る。
いくつかの例では、二次ボタンは、「選択」デバイスとしてオペレータによって使用されることができる。医療手術中、外科手術ロボット4は、XRヘッドセット920、ディスプレイ34および/または光表示器28によって、医療スタッフに特定の状態を通知することができる。XRヘッドセット920は、それぞれ、透明表示画面上に画像を表示して、透明表示画面を通して見ることができる実世界物体上に重ね合わせられる拡張現実画像を形成するように構成されている。医療スタッフは、機能、モードを選択するよう、かつ/または外科手術システム2の状態を見極めるよう、外科手術ロボット4によって促される可能性がある。二次ボタンを一回押すと、特定の機能、モード、および/またはXRヘッドセット920、ディスプレイ34および/または光表示器28を通して医療スタッフに伝えられる肯定応答情報を有効にすることができる。これに加えて、二次ボタンを素早く連続して複数回押し下げると、追加の機能、モードを起動し、および/またはXRヘッドセット(単数または複数)920、ディスプレイ34、および/もしくは光表示器28を介して医療従事者に伝達される情報を選択することができる。
図8をさらに参照すると、外科手術ロボット4の電気的コンポーネントは、プラットフォームサブシステム802、コンピュータサブシステム820、運動制御サブシステム840、および追跡サブシステム830を含む。プラットフォームサブシステム802は、バッテリ806、配電モジュール804、コネクタパネル808、および充電ステーション810を含む。コンピュータサブシステム820は、コンピュータ822、ディスプレイ824、およびスピーカ826を含む。運動制御サブシステム840は、ドライバ回路842、モータ850、851、852、853、854、安定化装置855、856、857、858、エンドエフェクタコネクタ844、およびコントローラ846を含む。追跡サブシステム830は、位置センサ832およびカメラコンバータ834を含む。外科手術ロボット4はまた、取り外し可能なフットペダル880、および取り外し可能なタブレットコンピュータ890を含むことができる。
入力電力は、配電モジュール804に提供されることができる電源を介して外科手術ロボット4に供給される。配電モジュール804は、入力電力を受け取り、外科手術ロボット4の他のモジュール、構成要素、およびサブシステムに提供される様々な電源電圧を起こすように構成されている。配電モジュール804は、例えば、モータ850〜854およびエンドエフェクタカプラ844に給電するために、コンピュータ822、ディスプレイ824、スピーカ826、ドライバ842などの他の構成要素に提供され得、またカメラコンバータ834および外科手術ロボット4用の他の構成要素に提供され得る、様々な電圧供給をコネクタパネル808に提供するように構成され得る。配電モジュール804はまた、配電モジュール804が入力電力から電力を受け取らない場合、一時的な電力源としての役割を果たすバッテリ806に接続され得る。他の場合には、配電モジュール804は、バッテリ806を充電するのに役立つ場合がある。
コネクタパネル808は、異なるデバイスおよびコンポーネントを外科手術ロボット4ならびに/または関連付けられたコンポーネントおよびモジュールに接続するのに役立つことができる。コネクタパネル808は、様々な構成要素からの線または接続を受け取る1つ以上のポートを含み得る。例えば、コネクタパネル808は、外科手術ロボット4を他の機器、フットペダル880を接続するポート、位置センサ832を含み得る追跡サブシステム830に接続するポート、カメラコンバータ834、およびDRA追跡カメラ870に接地させることができる接地端子ポートを備え得る。コネクタパネル808は、コンピュータ822などの他の構成要素へのUSB通信、イーサネット通信、HDMI通信を可能にする他のポートも含み得る。いくつかの実施形態に従えば、コネクタパネル808は、1つ以上のXRヘッドセット920を追跡サブシステム830および/またはコンピュータサブシステム820に動作可能に接続するための有線および/または無線インターフェースを含むことができる。
制御パネル816は、外科手術ロボット4の動作を制御し、および/またはオペレータが観察するための外科手術ロボット4からの情報を提供する、様々なボタンまたはインジケータを提供することができる。例えば、制御パネル816は、外科手術ロボット4の電源を入り切りするボタン、垂直柱16を上げ下げするボタン、キャスタ12に係合して外科手術ロボット4が物理的に動かないようにするように設計され得る安定化装置855〜858を上げ下げするボタンを含み得る。他のボタンは、すべてのモータ電源を取り外し、機械式ブレーキを掛けて、すべての動きが起こらないようにする可能性がある緊急時に、外科手術ロボット4を止めることができる。制御パネル816はまた、配線電力インジケータまたはバッテリ806の充電状態などの特定のシステムの状況をオペレータに通知するインジケータを有することができる。いくつかの実施形態によれば、1つ以上のXRヘッドセット920は、例えばコネクタパネル808を介して通信して、外科手術ロボット4の動作を制御し、および/またはXRヘッドセット920を装着している人による観察のために外科手術ロボット4によって生成された情報を受信および表示することができる。
コンピュータサブシステム820のコンピュータ822は、外科手術ロボット4の割り当てられた機能を動作させるためのオペレーティングシステムおよびソフトウェアを含む。コンピュータ822は、オペレータに情報を表示するために、他の構成要素(例えば、追跡サブシステム830、プラットフォームサブシステム802、および/または運動制御サブシステム840)からの情報を受信し、処理することができる。また、コンピュータサブシステム820は、オペレータにスピーカ826を通して出力を提供することができる。スピーカは、外科手術ロボットの一部、XRヘッドセット920の一部、または外科手術システム2の別の構成要素内であり得る。ディスプレイ824は、図1および図2に示されるディスプレイ34に対応することができる。
追跡サブシステム830は、位置センサ832、およびカメラコンバータ834を含むことができる。追跡サブシステム830は、図3のカメラ追跡システム構成要素6に対応し得る。DRA追跡カメラ870は、DRA52の姿勢を確定するように、位置センサ832とともに働く。この追跡は、LEDまたは反射基準(マーカとも呼ばれる)などのDRA52の能動的または受動的な要素の場所をそれぞれ追跡する赤外線または可視光技術の使用を含む、本開示に矛盾しない様式で行うことができる。
DRA52などのこれらのタイプのマーカを有する構造の場所、向き、および位置は、コンピュータ822に提供され、ディスプレイ824上でオペレータに示すことができる。例えば、図4および5に示されるように、DRA52を有するか、またはこの様式で追跡されるDRA52を有するエンドエフェクタカプラ22に接続されている、外科手術鋸1040(ナビゲーション空間とも称され得る)は、患者の解剖学的構造の三次元画像に関連してオペレータに示され得る。
追跡サブシステム830およびコンピュータサブシステム820の機能動作は、図3Aおよび3Bのカメラ追跡システム構成要素6’によって運ばれ得る、コンピュータプラットフォーム910に含まれ得る。追跡サブシステム830は、追跡対象のDRAの姿勢、例えば場所および角度向きを確定するように構成され得る。コンピュータプラットフォーム910は、確定された姿勢を使用して、予定の外科処置中に位置見当合わせされた患者画像および/または追跡対象の解剖学的構造体に対して追跡対象のツールのそれらの動きを誘導する、ナビゲーション情報をユーザに提供するように構成されている、ナビゲーションコントローラも含み得る。コンピュータプラットフォーム910は、図3Bおよび3Cのディスプレイ上に、かつ/または1つ以上のXRヘッドセット920に情報を表示することができる。コンピュータプラットフォーム910は、外科手術ロボットとともに使用される場合、コンピュータサブシステム820および図8の他のサブシステムと通信して、エンドエフェクタ26の移動を制御するように構成されることができる。例えば、以下に説明するように、コンピュータプラットフォーム910は、表示されるサイズ、形状、色、および/または姿勢を有する、患者の解剖学的構造、外科手術器具、ユーザの手などの、1つ以上の追跡されるDRAの判定された姿勢(単数または複数)に基づいて制御されるグラフィック表現を生成することができ、および表示されるそのグラフィック表現を動的に修正して、判定された姿勢の経時的な変化を追跡することができる。
運動制御サブシステム840は、垂直柱16、上部アーム18、下部アーム20を物理的に移動させるか、またはエンドエフェクタカプラ22を回転させるように構成されることができる。物理的な動きは、1つ以上のモータ850〜854の使用を通して行われ得る。例えば、モータ850は、垂直柱16を垂直に上げるまたは下げるように構成され得る。モータ851は、図2に示されるように、垂直柱16との係合点の周りに上部アーム18を横方向に動かすように構成され得る。モータ852は、図2に示されるように、上部アーム18との係合点の周りに下部アーム20を横方向に動かすように構成され得る。モータ853および854は、三次元軸の周りに沿った並進の動きおよび回転をもたらすようにエンドエフェクタカプラ22を動かすように構成され得る。図9に示されるコンピュータプラットフォーム910は、エンドエフェクタカプラ22の移動を誘導するコントローラ846に制御入力を提供して、エンドエフェクタカプラに接続された受動的なエンドエフェクタを、計画された外科的処置中に手術される解剖学的構造に対して、計画された姿勢(すなわち、定義された3D直交基準軸に対する場所および角度の向き)で位置決めすることができる。運動制御サブシステム840は、統合された位置センサ(例えば、エンコーダ)を使用して、エンドエフェクタカプラ22および/またはエンドエフェクタ26の位置を測定するように構成されることができる。
図9は、本開示のいくつかの実施形態による、カメラ追跡システム構成要素6(図3A)もしくは6’(図3B、図3C)に、かつ/または外科手術ロボット4に、運用上接続され得るコンピュータプラットフォーム910に接続された撮像デバイス(例えば、Cアーム、Oアームなど)を含む外科手術システムの構成要素のブロック図を示す。代替として、コンピュータプラットフォーム910によって果たされるとして本明細書に開示されている少なくともいくつかの働きは、追加としてまたは代替として、外科手術システムの構成要素によって果たされ得る。
図9を参照すると、コンピュータプラットフォーム910は、ディスプレイ912、少なくとも1つのプロセッサ回路914(簡潔にするためにプロセッサとも呼ばれる)、コンピュータ可読プログラムコード918を内包する少なくとも1つのメモリ回路916(簡潔にするためにメモリとも呼ばれる)、および少なくとも1つのネットワークインターフェース902(簡潔にするためにネットワークインターフェースとも呼ばれる)を含む。ディスプレイ912は、本開示のいくつかの実施形態による、XRヘッドセット920の一部であり得る。ネットワークインターフェース902は、Cアーム撮像デバイス104、Oアーム撮像デバイス106、別の医療撮像デバイス、患者の医療画像が入っている画像データベース950、外科手術ロボット4の構成要素、および/または他の電子機器に接続するように構成され得る。
外科ロボット4とともに使用される場合、ディスプレイ912は、図2のディスプレイ34および/もしくは図8のタブレット890、ならびに/または外科手術ロボット4に動作可能に接続されているXRヘッドセット920に対応し得、ネットワークインターフェース902は、図8のプラットフォームネットワークインターフェース812に対応し得、プロセッサ914は、図8のコンピュータ822に対応し得る。XRヘッドセット920のネットワークインターフェース902は、有線ネットワーク、例えば、シンワイヤEthernetを介して、および/または1つ以上の無線通信プロトコル、例えば、WLAN、3GPP 4Gおよび/または5G(新無線)セルラー通信規格などに従って無線RF送受信リンクを介して通信するように構成されることができる。
プロセッサ914は、汎用および/または専用プロセッサ、例えば、マイクロプロセッサおよび/またはデジタル信号プロセッサなどの1つ以上のデータ処理回路を含むことができる。プロセッサ914は、メモリ916内のコンピュータ可読プログラムコード918を実行して、外科手術計画立案、ナビゲート式外科手術、および/またはロボット型外科手術で行われるとして本明細書に記載の動作の一部またはすべてを含み得る動作を行うように構成されている。
プロセッサ914は、撮像デバイス104および106のうちの一方から、および/またはネットワークインターフェース902を介して画像データベース950から受信された骨の画像をディスプレイデバイス912に表示するように動作し得る。プロセッサ914は、計画された外科手術切断のためにディスプレイ912上の場所を選択するオペレータタッチによって、または計画された外科手術切断の場所を規定するためにマウスベースのカーソルを使用することなどによって、1つ以上の画像で示される解剖学的構造、すなわち、1つ以上の骨が切断される場所のオペレータの規定を受信する。
コンピュータプラットフォーム910は、外科手術計画立案機能性を提供するように構成され得る。プロセッサ914は、撮像デバイス104および106のうちの一方から、かつ/またはネットワークインターフェース902を通して画像データベース950から受信した解剖学的構造体、例えば椎骨の画像をディスプレイデバイス912上にかつ/またはXRヘッドセット920上に表示するように動作し得る。プロセッサ914は、オペレータタッチが予定の処置対象のディスプレイ912上の場所を選択することによって、またはマウスベースのカーソルを使用して予定の処置対象の場所を定義することによってなど、1つ以上の画像に示される解剖学的構造体が、外科処置、例えばねじ配置を有する場所のオペレータの定義を受信する。画像がXRヘッドセット920に表示される場合、XRヘッドセットは、メニュー項目間の選択を制御するのに、かつ/または以下でさらに詳細に説明するように、XRヘッドセット920上に物体がどのように表示されるかを制御するのに使用され得る、装着者によって形成されたジェスチャベースのコマンドで感知するように、かつ/または装着者によって発せられた音声ベースのコマンドを感知するように構成され得る。
コンピュータプラットフォーム910は、股関節の中心、角度の中心、天然の目印(例えば、トランス上顆線、ホワイトサイド線、後顆線など)などを決定する様々な角度の測定のような、膝の外科手術に特に有用であり得る生体構造の測定を可能にするように構成されることができる。いくつかの測定は、自動とすることができる一方で、いくつかの他の測定は、人間の入力または支援を伴う。このコンピュータプラットフォーム910により、オペレータは、サイズおよび一致度の選択を含む、患者のための正しいインプラントの選択が可能になり得る。以下でさらに説明するように、MLガイダンスシステム1220(図12)は、術前計画中および外科手術計画の術中外科的実行中にユーザにガイダンスを提供する。MLガイダンスシステムにより、インプラントの自動または半自動(人間の入力を含む)選択と外科手術計画の生成が可能になる。
外科手術計画コンピュータ910は、CT画像または他の医療画像のための自動または半自動セグメント化(画像処理)を可能にする。患者の外科手術計画は、外科手術ロボット800による検索のために中央データベース1210(図12)に記憶され得る。外科手術中、外科医は、コンピュータ画面(例えば、タッチスクリーン)または例えば、頭部装着型ディスプレイを介した拡張現実の相互作用を使用して、どの切断(例えば、後部大腿骨、近位脛骨など)を行うかを選択する。外科手術ロボット4は、計画された切断の目標面が外科手術鋸1040とロボットアーム20とを相互接続する受動的なエンドエフェクタの作業空間内に最適に配置されるように、外科手術鋸1040を計画された位置まで自動的に移動させることができる。
例えば、TKA中に、外科医は、コンピュータ画面(例えば、タッチ画面)または例えばXRヘッドセット920を介した拡張現実(XR)インタラクション(例えば、ハンドジェスチャベースのコマンドおよび/またはボイスベースのコマンド)を使用して、どの切断を作成するか(例えば、後部大腿骨、近位脛骨など)を選択することができる。コンピュータプラットフォーム910は、外科処置を行うのに、外科医に視覚的ガイダンスを提供するナビゲーション情報を生成することができる。外科手術ロボット4とともに使用される場合、コンピュータプラットフォーム910は、外科ツールが目標場所と位置が揃い、解剖学的構造体に対して外科処置を行うように、外科手術ロボット4がエンドエフェクタ26を目標姿勢に自動的または半自動的に動かすのを可能にするガイダンスを提供することができる。
いくつかの実施形態では、コンピュータプラットフォーム910は、2つのDRAを使用して、1つは患者の脛骨、もう1つは患者の大腿骨に関して、患者の解剖学的位置を追跡することができる。プラットフォーム900は、位置合わせおよび確認のための標準のナビゲート器具(例えば、脊椎外科手術のためにGlobus ExcelsiusGPSシステムで使用されるものと同様のポインタ)を使用することができる。追跡された解剖学的形態に関連してDRAの動きを検出することができるDRAを使用することもできる。
膝の外科手術における特有の困難は、膝のインプラントの位置をどのように計画するかであり、それを、多くの外科医は、3Dの解剖学的形態の2D表現であるコンピュータ画面で行うため苦労している。システム900は、XRヘッドセット920を使用して、実際の患者の膝にオーバーレイされる3次元(3D)コンピュータ生成表現を表示することによって、この問題に対処することが可能であり得る。コンピュータ生成表現は、コンピュータプラットフォーム910のガイダンスの下、ディスプレイ画面上に互いに対して拡大縮小され、姿勢が決められ、そして姿勢はXRヘッドセット920を通して見ながら外科医によって巧みに操作され得る。外科医は、例えば、XRヘッドセット920によって感知されるハンドジェスチャベースのコマンドおよび/または音声ベースのコマンドを使用して、解剖学的構造体、移植片、外科ツールなどの表示されたコンピュータ生成表現を巧みに操作することができる。
例えば、術前段階で外科医は、仮想インプラント上に表示された仮想ハンドルを見ることができ、仮想ハンドルを巧みに操作し(例えば、つかんで、動かし)、仮想インプラントを望ましい姿勢に動かし、患者の膝または他の解剖学的構造のグラフィカル表現に対して予定のインプラント配置を調整することができる。その後、外科手術中に、コンピュータプラットフォーム910は、インプラントを挿入するための外科手術計画により正確に従い、および/または膝に対して別の外科処置を行う外科医の能力を促進するナビゲーション情報を、XRヘッドセット920を通して表示することができる。外科処置が骨除去を伴う場合、骨除去の進行、例えば切り込みの深さが、XRヘッドセット920を介してリアルタイムで表示され得る。XRヘッドセット920を介して表示されることができる他の特徴として、関節運動の範囲に沿った間隙または靭帯のバランス、関節運動の範囲に沿ったインプラントの接触線、色または他のグラフィックレンダリングによる靭帯の緊張および/または弛緩などを挙げることができるが、これらに限定されるものではない。
実施形態によっては、コンピュータプラットフォーム910は、標準外科ツールおよび/または移植片、例えば、後方安定化移植片および十字型保持移植片、セメント固定およびセメントレス移植片、例えば、膝関節および/または股関節の全置換または部分置換、および/または外傷に関連した外科手術用の改正システムの使用を計画することを可能にすることができる。
コンピュータプラットフォーム910は、解剖学的構造を切断するためにオペレータによって選択された場所で、表示された解剖学的構造と交差する1つ以上の切断面をグラフィカルに例示することができる。コンピュータプラットフォーム910はまた、外科手術鋸ブレードの切断面と目標面とを一致させて、オペレータが規定された切断を実施するように、エンドエフェクタカプラ22を位置決めしなければならない角度の向きおよび場所の1つ以上のセットを決定し、それらの角度の向きおよび場所のセットを外科手術計画データ構造内のデータとして記憶する。コンピュータプラットフォーム910は、受動的なエンドエフェクタの用具取り付け機構の動きの既知の範囲を使用して、ロボットアーム20に取り付けられたエンドエフェクタカプラ22を位置決めする必要がある場所を決定する。
外科手術ロボット800のコンピュータサブシステム820は、外科手術計画データ構造からのデータ、ならびに切断される解剖学的構造の現在の姿勢を示し、受動的なエンドエフェクタおよび/またはDRAを介して追跡された外科手術鋸の現在の姿勢を示すカメラ追跡システム構成要素6からの情報を受信する。コンピュータサブシステム820は、解剖学的構造が切断される場所を定義する外科手術計画に基づいて、および解剖学的構造の姿勢に基づいて、目標面の姿勢を決定する。コンピュータサブシステム820は、目標面の姿勢と外科手術鋸の姿勢との比較に基づいて操縦情報を生成する。操縦情報は、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、受動的なエンドエフェクタを移動させる必要がある場所を示す。
上で説明されるように、外科手術ロボットは、ロボット基部と、ロボット基部に接続されたロボットアームと、ロボット基部に対してロボットアームを移動させるように動作可能に接続された少なくとも1つのモータと、を含む。外科手術ロボットはまた、少なくとも1つのモータに接続され、動作を実施するように構成されている、少なくとも1つのコントローラ、例えば、コンピュータサブシステム820および運動制御サブシステム840を含む。
図10および11に関して以下でさらに詳細に説明されるように、受動的なエンドエフェクタは、ロボットアームの起動アセンブリに取り付けられるように構成された基部と、第1の機構と、第2の機構と、を含む。第1の機構は、基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第2の機構は、基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第1および第2の機構は、回転可能な接続部を中心として旋回し、用具取り付け機構の動きを作業面内の動きの範囲に制約するように構成され得る。回転可能な接続部は、1つの自由度(DOF)の運動を可能にする旋回関節であっても、2つのDOFの運動を可能にするユニバーサル関節であっても、3つのDOFの運動を可能にするボール関節であってもよい。用具取り付け機構は、切断用の鋸ブレードを含む外科手術鋸に接続するように構成される。第1および第2の機構は、作業面と平行になるように鋸ブレードの切断面を制約するように構成され得る。
いくつかの実施形態では、外科手術ロボットの少なくとも1つのコントローラによって実施される動作には、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、操縦情報に基づいて少なくとも1つのモータの動きを制御して、受動的なエンドエフェクタを再位置決めすることも含まれる。操縦情報は、外科手術鋸のオペレータの動きを誘導するように表示されてもよいし、かつ/または外科手術鋸を自動的に移動させるように少なくとも1つのコントローラによって使用されてもよい。
一実施形態では、外科手術ロボットの少なくとも1つのコントローラによって実施される動作には、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、操縦情報を表示用にディスプレイデバイスに提供して、受動的なエンドエフェクタのオペレータの動きを誘導することも含まれる。
例えば、操縦情報は、シースルーディスプレイ画面に画像を投影し、シースルーディスプレイ画面を介して視認可能な実世界の物体にオーバーレイされるXR画像を形成する、XRヘッドセット920上に表示され得る。本動作は、骨にオーバーレイされた姿勢と、それらの間の相対的な向きとを有する目標面のグラフィック表現を表示することができ、骨をどのように切断するかを計画するための外科手術計画に対応する。本動作は、代替的にまたは追加的に、鋸ブレードの切断面のグラフィック表現を表示することができ、それにより、オペレータは、切断面と、骨を切断するための計画された目標面とをより容易に一致させることができる。それによって、オペレータは、鋸ブレードの切断面と目標面とを一致させる動きを視覚的に監視および実施することができ、それにより、鋸ブレードは、骨に対して計画された姿勢で、かつ受動的なエンドエフェクタの用具取り付け機構の動きの範囲内に位置決めされる。
自動撮像システムを外科手術計画コンピュータ910および/または外科手術システム2と併せて使用して、患者の術前、術中、術後、および/またはリアルタイムの画像データを取得することができる。いくつかの実施形態では、自動撮像システムは、C−arm撮像デバイスまたはO−arm(登録商標)である。(O−arm(登録商標)は、米国コロラド州ルイビルに事業所があるMedtronic Navigation,Inc.が著作権を所有している)X線システムで必要とされ得る、患者の頻繁な手動による再位置決めを必要とすることなく、いくつかの異なる位置から患者のX線を撮影することが望ましい場合がある。C−armのX線診断機器は、頻繁な手動による再位置決めの問題を解決することができ、外科手術および他の介在する処置の医療分野でよく知られている場合がある。C−armは、「C」形状の対向する遠位端で終端する細長いC形状の部材を含む。C形状の部材は、X線源および画像受信器に取り付けられている。アームのC−arm内の空間は、X線支持構造体からの干渉が実質的にない状態で医師が患者に付き添う余地を提供する。
C−armは、2つの自由度でのアームの回転運動を可能にするように(すなわち、球面運動での2つの直角軸を中心として)据え付けられている。C−armは、X線支持構造体にスライド可能に据え付けられ、これにより、C−armの曲率中心を中心とした周回回転運動が可能になり、X線源および画像受信器を垂直方向にかつ/または水平方向に選択的に向けるのを可能にすることができる。C−armはまた、横方向(すなわち、患者の幅および長さの両方に対するX線源および画像受信器の選択的に調節可能な位置付けを可能にする周回方向に対して直角の方向)に回転可能であり得る。C−arm装置の球面回転の態様により、医師は、撮像されている特定の解剖学的条件に関して確定された通りに最適な角度で患者のX線写真を撮ることができる。
O−arm(登録商標)は、示されていない画像取り込み部分を収めることができるガントリハウジングを含む。画像取り込み部分は、X線源および/またはX線放出部分と、X線受光および/または画像受信部分と、を含み、これらは、互いに約180度離れて配設され、画像取り込み部分の軌道に対してロータ上に据え付けられ得る。画像捕捉部分は、画像取得中に360度回転するように動作可能であってもよい。画像取り込み部分は、中心点および/または軸を中心として回転することができ、患者の画像データが複数の方向から、または複数の平面で取得されることを可能にする。
ガントリハウジングを備えたO−arm(登録商標)は、撮像される物体の周りに位置付けるための中央開口と、ガントリハウジングの内部を中心に回転可能である放射線源と、を有し、放射線源は、複数の異なる投射角から放射線を投射するように適合され得る。検出器システムは、投射角ごとに放射線を検出して、物体画像を複数の投射平面から擬似同時的に取得するように適合されている。ガントリは、カンチレバー様式で、車輪を備えた車輪付き移動式カートなどの支持構造O−arm(登録商標)支持構造体に取り付けられ得る。位置付けユニットは、好ましくはコンピュータ化された運動制御システムの制御下で、ガントリを予定の位置および向きに並進させかつ/または傾斜させる。ガントリは、ガントリ上で互いに対向して配設された供給源と検出器とを含み得る。供給源および検出器は、供給源および検出器を互いに協調する状態でガントリの内部を中心として回転させることができるモータ付きロータに固定され得る。供給源は、ガントリの内側に位置する目標物体の多平面撮像のために、部分的および/または完全360度の回転にわたって複数の位置および向きでパルス化され得る。ガントリは、ロータが回転するに従ってロータを誘導するためのレールおよび軸受けシステムをさらに備え得、このシステムは、供給源および検出器を担持することができる。O−arm(登録商標)およびC−armの両方および/またはいずれかを自動撮像システムとして使用して、患者をスキャンし、情報を外科手術システム2に送信することができる。
自動撮像システムによってキャプチャされた画像は、外科手術計画コンピュータ910、外科手術ロボット800、および/または外科手術システム2の別の構成要素のディスプレイデバイスに表示され得る。
ここで、外科手術システムで使用するように構成される受動的なエンドエフェクタの様々な実施形態を、図10および11の文脈において記載する。
以下でさらに詳細に説明されるように、図10および11に例示される様々な受動的なエンドエフェクタは各々、基部、第1のプレーナ機構、および第2のプレーナ機構を含む。基部は、外科手術ロボットによって位置決めされるロボットアーム(例えば、図1および2のロボットアーム18)のエンドエフェクタカプラ(例えば、図4および5のエンドエフェクタカプラ22)に取り付けられるように構成される。様々なクランプ機構を使用して、基部をエンドエフェクタカプラにしっかりと取り付け、バックラッシュを取り除き、好適な剛性を確保することができる。第1の機構は、2つの基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第2の機構は、基部への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する。第1および第2の機構は、回転可能な接続部を中心として旋回する。回転可能な接続部は、1つの自由度(DOF)の運動を可能にする旋回関節であっても、2つのDOFの運動を可能にするユニバーサル関節であっても、3つのDOFの運動を可能にするボール関節であってもよい。旋回関節を使用する場合、第1および第2の機構は、用具取り付け機構の動きを作業面内の動きの範囲に制約するように構成され得る。用具取り付け機構は、切断するために発振するように構成される鋸ブレードを有する外科手術鋸に接続するように構成される。第1および第2の機構は、例えば、1つのDOFの運動を有する旋回関節を介して、作業面と平行になるように鋸ブレードの切断面を制約するように構成され得る。用具取り付け機構は、ねじ、ナットおよびボルト、クランプ、ラッチ、接合、圧入嵌合、または磁石を含み得るが、これらに限定されない、様々な機構を介して、外科手術鋸に接続され得る。DRAを用具取り付け機構または外科手術鋸に接続して、カメラ追跡システム6(図3)による鋸ブレードの姿勢の追跡を可能にすることができる。
上で説明されるように、外科手術システム(例えば、図1および2の外科手術システム2)は、外科手術ロボット(例えば、図1および2の外科手術ロボット4)と、鋸ブレードによって切断される解剖学的構造の姿勢を決定し、鋸ブレードの姿勢を決定するように構成される追跡システム(例えば、図1および3のカメラ追跡システム6)と、を含む。外科手術ロボットは、ロボット基部と、ロボット基部に回転可能に接続され、受動的なエンドエフェクタを位置決めするように構成されたロボットアームと、を含む。少なくとも1つのモータは、ロボット基部に対してロボットアームを移動させるように動作可能に接続されている。少なくとも1つのコントローラは、少なくとも1つのモータに接続され、かつ解剖学的構造が切断される場所を規定する外科手術計画と、解剖学的構造の姿勢とに基づいて、目標面の姿勢を決定することを含む、動作を実施するように構成されており、外科手術計画は、オペレータ、例えば、外科医または他の外科手術人員からの入力に基づいて、図9の外科手術計画コンピュータ910によって生み出され得る。本動作は、目標面の姿勢と外科手術鋸の姿勢との比較に基づいて操縦情報を生み出すことをさらに含む。操縦情報は、鋸ブレードの切断面と目標面とが一致するように、受動的なエンドエフェクタの作業面を位置決めするために、受動的なエンドエフェクタを移動させる必要がある場所を示す。
いくつかのさらなる実施形態では、少なくとも1つのコントローラによって実施される動作には、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、操縦情報に基づいて少なくとも1つのモータの動きを制御して、受動的なエンドエフェクタを再位置決めすることもさらに含まれる。
本動作には、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、操縦情報を表示用にディスプレイデバイスに提供して、受動的なエンドエフェクタのオペレータの動きを誘導することが含まれ得る。
上で説明されるように、いくつかの外科手術システムは、外科医、診療看護師、および/または外科手術処置を支援する他の人物が着用することができる頭部装着型ディスプレイデバイスを含み得る。外科手術システムは、着用者が受動的なエンドエフェクタをより正確に位置決めすること、および/または鋸ブレードと、解剖学的構造上の計画された場所を切断するための目標面とが一致した状態で、受動的なエンドエフェクタが正確に位置決めされたことを確認することを可能にする情報を表示することができる。ディスプレイデバイスに操縦情報を提供する動作には、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、解剖学的構造からの距離に位置決めされるように、切断される解剖学的構造上のオーバーレイとして操縦情報を表示するシースルーディスプレイ画面を有する頭部装着型ディスプレイデバイスへの表示用に操縦情報を構成して、受動的なエンドエフェクタのオペレータの動きを誘導することが含まれ得る。
頭部装着型ディスプレイデバイスへの表示用に操縦情報を構成する動作には、切断される解剖学的構造に係留され、それと一致したオーバーレイとして表示される目標面のグラフィック表現を生み出すことと、鋸ブレードに係留され、それと一致したオーバーレイとして表示される鋸ブレードの切断面の別のグラフィック表現を生み出すことと、が含まれ得る。それによって、着用者は、外科手術鋸を移動させて、グラフィカルにレンダリングされた目標面とグラフィカルにレンダリングされた切断面との間に視覚的に観察された一致を提供することができる。
頭部装着型ディスプレイデバイス上への表示用に操縦情報を構成する動作には、切断されている解剖学的構造のグラフィック表現内に、鋸ブレードによって行われた切断の深さのグラフィック表現を生み出すことが含まれ得る。したがって、着用者は、切断が組織または他の構造によって妨げられていることを直接観察しているにもかかわらず、鋸ブレードがどのように骨を貫いて切断しているかをよりよく監視するために、切断の深さのグラフィック表現を使用することができる。
追跡システムは、追跡マーカ、例えば、解剖学的構造に取り付けられたDRAの姿勢を決定することに基づいて、鋸ブレードによって切断される解剖学的構造の姿勢を決定するように構成され得、外科手術鋸および受動的なエンドエフェクタのうちの少なくとも1つに接続された追跡マーカの姿勢を決定することに基づいて、外科手術鋸の姿勢を決定するように構成され得る。追跡システムは、用具取り付け機構が作業面内で動いている間、第1および第2の機構の回転位置を測定するように構成される回転式位置センサに基づいて、外科手術鋸の姿勢を決定するように構成され得る。上で説明されるように、位置センサは、受動的なエンドエフェクタ構造の少なくとも1つの関節に直接接続され得るが、構造内の別の場所に位置決めし、タイミングベルト、ワイヤの相互接続、または任意の他の同期送信相互接続によって関節位置を遠隔で測定することもできる。さらに、鋸ブレードの姿勢は、構造基部に取り付けられた追跡マーカ、受動的な構造の位置センサ、および構造の運動学的なモデルに基づいて決定され得る。
本明細書に開示される様々な受動的なエンドエフェクタは、滅菌可能なまたは非滅菌(滅菌ドレープで被覆された)の受動的な3つのDOF(自由度)の機械構造であってもよく、鋸ブレードに平行な平面における2回の並進(切断面を規定する)、およびこの切断面と直交する1回の回転(器具の向き)に沿った、矢状鋸などの外科手術鋸の機械的誘導を可能にする。外科手術中、外科手術ロボット4は、切断されるすべての骨が受動的なエンドエフェクタの作業空間内にあるように、エンドエフェクタカプラ22、ならびに受動的なエンドエフェクタおよびそこに取り付けられた外科手術鋸を、膝または他の解剖学的構造に近い位置まで自動的に移動させる。この位置は、行われる切断、ならびに外科手術計画およびインプラント構築物に依存する。図10に示されるように、受動的なエンドエフェクタは、切断面で矢状鋸を誘導するための3つのDOFを有することができ、2回の並進(XおよびY方向)と1回の(Z軸を中心とした)回転を提供する。
外科手術ロボット4は、計画された位置に到達すると、その位置を(ブレーキまたは能動的なモータ制御のいずれかで)保持し、特定の骨の切断中に移動しない。計画された目標面に沿って外科手術鋸の鋸ブレードを動かすことを可能にするのが受動的なエンドエフェクタである。かかる平面状の切断は、すべての骨の切断が平面状である古典的な膝関節全置換術に特に有用である。膝関節部分置換術には、「オンレイ」と呼ばれる特別なタイプのインプラントがあり、これを鋸で準備した骨表面(saw−prepared bone surface)と併せて使用することができる。様々な受動的なエンドエフェクタは、古典的なジグよりも高い精度で切断時の誘導の精度を確保することができる機械構造を有し、計画されたすべての骨を切断するための作業空間範囲の十分な範囲を提供し、かつ一方で、外科医が加える力および骨の反動力に加えて、外科手術鋸から生じる考えられるかなりの量の振動にもかかわらず、(ロックされたDOFに対応する)十分な横剛性を提供する。
同時に、外科手術ロボット4が外科医にどれだけの骨が取り除かれたか(処置の進捗)を知らせることが可能であるため、受動的なエンドエフェクタの位置を測定することが好ましい。骨の取り除きに関するリアルタイムの情報を提供する1つの方法は、骨が切断された場所のみをブレードは通過することができるため、鋸ブレードが骨に対してどこを通過したかを、外科手術ロボット4が測定することである。鋸ブレードの位置を測定するために、DRAを外科手術鋸および/または受動的なエンドエフェクタに装着することができる。これにより、3D空間での鋸の位置を直接または間接的に測定することができる。鋸ブレードの位置を測定する代替的な方法は、受動的なエンドエフェクタの幾何学形状の位置と鋸ブレードの位置との間の規定された関係の数理モデルを使用して鋸ブレードの位置を計算するために、受動的なエンドエフェクタの位置情報に位置(回転または並進)センサ(例えば、エンコーダ、リゾルバ)を統合することである。
一実施形態では、従来の矢状鋸機構を、ほとんどまたはまったく変更することなく、コンピュータプラットフォーム910と共に使用することができる。潜在的な変更は、外科手術鋸を受動的なエンドエフェクタに簡単に取り付けることを可能にするように外部シールドを適合することを伴うことになるが、必ずしも内部機構の変更を伴うとは限らない。受動的なエンドエフェクタは、例えば、DeSoutter社によって提供される従来の矢状鋸に接続するように構成され得る。
受動的なエンドエフェクタの第1の実施形態が図10に示されている。図10を参照すると、受動的なエンドエフェクタ1000は、外科手術ロボットによって位置決めされるロボットアーム(例えば、図1および2のロボットアーム18)のエンドエフェクタカプラ(例えば、図4および5のエンドエフェクタカプラ22)に取り付けられるように構成された、基部1002を含む。受動的なエンドエフェクタ1000は、基部1002への回転可能な接続部と用具取り付け機構への回転可能な接続部との間に延在する、第1および第2の機構をさらに含む。回転可能な接続部は、1つの自由度(DOF)の運動を可能にする旋回関節であっても、2つのDOFの運動を可能にするユニバーサル関節であっても、3つのDOFの運動を可能にするボール関節であってもよい。第1および第2の機構は、外科手術鋸の回転軸を切断面に位置決めする平行アーキテクチャを形成する。
第1および第2の連結セグメント1010aおよび1020aは第1のプレーナ機構を形成し、第3および第4の連結セグメント1010bおよび1020bは第2のプレーナ機構を形成する。第1の連結セグメント1010aは、基部1002上の第1の場所への回転可能な接続部と第2の連結セグメント1020aの端部への回転可能な接続部との間に延在する。第3の連結セグメント1010bは、基部1002上の第2の場所への回転可能な接続部と第4の連結セグメント1020bの端部への回転可能な接続部との間に延在する。基部1002上の第1および第2の場所は、ロボットアームによって回転されたときに、基部カラーの回転軸の両側に離間されている。用具取り付け機構は、基部1002に対して第2の連結セグメント1020aおよび第4の連結セグメント1020bの遠位端への回転可能な接続部の間に延在する第5の連結セグメントによって形成される。第1および第2の機構(第1および第2の連結セグメント1010a〜1020a、ならびに第3および第4の連結セグメント1010b〜1020b)は、それらの回転可能な接続部を中心として旋回して、用具取り付け機構1030の動きを作業面内の動きの範囲に制約する。用具取り付け機構1030は、切断するために発振するように構成される鋸ブレード1042を有する外科手術鋸1040に接続するように構成される。第1および第2の機構(第1および第2の連結セグメント1010a〜1020a、ならびに第3および第4の連結セグメント1010b〜1020b)は、例えば、1つのDOFの運動を有する旋回関節を介して、作業面と平行になるように鋸ブレード1042の切断面を制約するように構成され得る。用具取り付け機構1030は、ねじ、ナットおよびボルト、クランプ、ラッチ、接合、圧入嵌合、または磁石を含み得るが、これらに限定されない、様々な機構を介して、外科手術鋸1040に接続され得る。DRA52を用具取り付け機構1030または外科手術鋸1040に接続して、カメラ追跡システム6(図3)による鋸ブレード1042の姿勢の追跡を可能にすることができる。
受動的なエンドエフェクタ1000は、外科手術鋸1040の受動的な誘導を提供して、鋸ブレード1042を規定された切断面に制約し、その可動性を3つの自由度(DOF)、鋸ブレード1042の切断面に平行な平面での2回の並進TxおよびTyと、切断面と直交する軸を中心とした1回の回転Rzと、に低減する。
いくつかの実施形態では、追跡システムは、受動的なエンドエフェクタ1000の連結セグメントのうちの少なくともいくつかの回転関節に接続された回転式位置センサに基づいて、鋸ブレード1042の姿勢を決定するように構成される。回転式位置センサは、作業面内で用具取り付け機構が動いている間、接合された連結セグメントの回転位置を測定するように構成される。例えば、回転式位置センサは、基部1002に対する第1の連結セグメント1010aの回転を測定するように構成することができ、別の回転式位置センサは、第1の連結セグメント1010aに対する第2の連結セグメント1020aの回転を測定するように構成することができ、別の回転式位置センサは、第2の連結セグメント1020aに対する用具取り付け機構1030の回転を測定するように構成することができる。外科手術鋸1040は、用具取り付け機構1030に対して固定された向きを有するように接続され得る。直列化された連結セグメントおよび旋回関節を有する、鋸ブレード1042およびロボットアーム22を接続する受動的なエンドエフェクタ1000の直列の運動学的な連鎖は、必要な可動性を外科手術鋸1040に提供する。受動的な運動学的な連鎖によって画定された、平面における鋸ブレード1042の先端の位置は、回転式位置センサを介して感知される関節角度、および相互接続された連結セグメントの構造上の幾何学形状によって完全に決定され得る。したがって、例えば、基部1002と外科手術鋸1040との間の1つ以上の相互接続経路に沿った、接続された各連結セグメント間の相対的な角度を測定することによって、切断空間における鋸ブレード1042の先端の位置を、提案された順運動学的なモデルを使用してコンピュータ化することができる。骨に対するロボットアーム22の遠位端の位置および向きの位置および向きが既知である場合、骨に対する鋸ブレード1042の位置および向きをコンピュータ化し、外科医へのフィードバックとして表示することができる。
本明細書における受動的なエンドエフェクタと共に使用され得る回転式位置センサの例示的なタイプとしては、電位差計、光学エンコーダ、容量式エンコーダ、回転式可変差動変圧器(RVDT)センサ、線形可変差動変圧器(LVDT)センサ、ホール効果センサ、およびインコーダ(incoder)センサを挙げることができるが、これらに限定されない。
受動的なエンドエフェクタの別の実施形態が図11に示されている。受動的なエンドエフェクタ1100は、外科手術ロボットによって位置決めされるロボットアーム(例えば、図1および2のロボットアーム18)のエンドエフェクタカプラ(例えば、図4および5のエンドエフェクタカプラ22)に取り付けられるように構成される、基部1102を含む。受動的なエンドエフェクタ1100は、第1の連結セグメント1110および第2の連結セグメント1120をさらに含む。第1の連結セグメント1110は、基部1102への回転可能な接続部と、第2の連結セグメント1120の一方の端部への回転可能な接続部との間に延在する。第2の連結セグメント1120のもう一方の端部は、用具取り付け機構に回転可能に接続される。この実施形態について開示される回転可能な接続部のうちの1つ以上は、1つのDOFの運動を可能にする旋回関節であっても、2つのDOFの運動を可能にするユニバーサル関節であっても、3つのDOFの運動を可能にするボール関節であってもよい。
例示的な外科手術処置
手術室(OR)で外科手術ロボット4を使用する例示的な外科手術処置としては、以下を挙げることができる。
I.外科手術は医療画像に基づいて術前に計画される。
2.外科手術ロボット4システムは、手術室(OR)の外側にある。看護師は、患者が外科手術の準備を受けているときに、システムをORに運ぶ。
3.看護師は、ロボットの電源を入れ、ロボットアームを展開する。看護師は、ロボットおよび追跡システムの精度を検証する。
4.滅菌された受動的なエンドエフェクタの場合、手術室看護師がロボットアーム上に滅菌ドレープを付け、矢状鋸を備えた受動的なエンドエフェクタをロボットアーム上に装着する。手術室看護師は、受動的なエンドエフェクタをロック機構でロックする。(必要な場合)手術室看護師はドレープを介してDRAを受動的な構造に取り付ける。滅菌されていない受動的なエンドエフェクタの場合、ロボットアーム上に受動的なエンドエフェクタを取り付けた後にドレープが配置され、DRAは間にドレープが介在する状態で受動的なエンドエフェクタに取り付けられ、滅菌鋸は間にドレープが介在する状態で受動的なエンドエフェクタに取り付けられる。
5.外科医は、参照アレイ(例えば、DRAまたはナビゲーションマーカ)を患者の骨(複数可)、例えば、脛骨および大腿骨に取り付ける。DRAは、例えば、Hornアルゴリズム、面合わせアルゴリズム、または他のアルゴリズムを使用して、カメラ追跡システム6と位置合わせされる。軟部組織バランスの評価を実施することができ、これにより、本システムは、例えば、外科医が異なる方向に力(例えば、内反/外反力)を加えたときの大腿骨と脛骨の相対的な動きを追跡することによって、外科医が手術室内で軟部組織バランスを評価することを可能にする。軟部組織バランスの情報を使用して、外科手術計画を変更することができる(例えば、インプラント部品の移動、インプラントタイプの変更など)。
6.外科医が骨を切断する準備が整うと、手術室看護師は、外科手術ロボット4を手術される膝の近くに手術台へと運び、床上で外科手術ロボット4を安定化する。本システムは、すべての切断面がロボットおよび受動的な構造の作業空間にあるように、ロボット4の位置を見つける際に看護師を誘導することができる。
7.外科医は、外科手術ロボット4の画面上で、最初の切断を行うために、外科手術の計画に従って、異なるパラメータ(切断される骨、所望の切断計画など)を選択する。
8.外科手術ロボット4は、鋸ブレードの切断面と目標面とが一致し、鋸ブレードが、受動的なエンドエフェクタの用具取り付け機構の動きの範囲内にある、切断される解剖学的構造からの距離に位置決めされるように、ロボットアーム22を自動的に移動させて、受動的なエンドエフェクタを再位置決めする。
9.外科医は受動的なエンドエフェクタをロック解除する。
10.外科医は、受動的なエンドエフェクタによって提供される切断面に制約された切断を実施する。外科手術ロボット4は、骨に対する鋸ブレードの追跡された場所のリアルタイム表示を提供することができ、それにより、外科医は骨を取り除く進捗を監視することができる。次いで、外科医は、切断が完了すると、ロック機構を使用して受動的なエンドエフェクタをロックすることができる。
11.外科医は、画面上で実行する次の切断を選択し、前と同じように続行する。
12.外科医は、試行的なインプラント配置および中間の軟部組織バランス評価を実施することができ、かつそれらに基づいて、インプラント計画および関連付けられた切断を変更することができる。
13.すべての切断の完了後、看護師は外科手術ロボット4を手術台から取り除き、受動的なエンドエフェクタをロボットアームから装着解除する。
14.外科医は、インプラントを配置し、外科手術を終了する。
受動的なエンドエフェクタは、ロボットアーム22に関して外科手術鋸が拘束される平面を正確に定義するために、外科手術ロボット4およびカメラ追跡システム6を介したキャリブレーションを必要とし得ることに留意されたい。このキャリブレーションは、外科手術鋸を空間内で動かし、追跡カメラで対応する位置を測定して平面を定義することによって実行し得る。代替として、ナビゲーションプローブで接触する受動的なエンドエフェクタに提供されている特定のディボットを使用して、キャリブレーションを実行し得る。
ナビゲートされた整形外科手術のための機械学習システム
上で説明したように、人工膝関節全置換術(TKA)手術では、インプラント設計、ナビゲーションシステムおよび/またはロボットシステムなどのコンピュータ支援手術(CAS)、カスタムカッティングテンプレート、およびカスタマイズされたインプラントの革新にもかかわらず、患者の満足度は数十年にわたって基本的に変化していない。これは、以前の医療処置および関連する革新では対処されていない問題があることを示唆している。
このような問題の可能性のある原因には、次のものがある。
・不適切な計画:
oすべての患者のTKA手術は、手術後に0°±3°の股関節−膝−足首(HKA)角度を有するように計画されている。しかしながら、このカスタマイズされていないHKAはすべての人に適しているわけではない。
o当然のことながら、この線は垂直ではないが、手術後の関節線は、膝の機械軸に垂直になるように手術によって目標とされる。
・不適切な実行:
o手動手術の約30%が試みるが、0°±3°HKAの目標を達成しないことが実証されている。CASでは、エラー率は小さくなるが、それでもゼロではない。
・代表的な術後データ収集ではない:患者報告アウトカム指標(PROM)および機能テストは、患者の満足度とは強く相関していない。
・術後のフォローアップ費用の変動が大きい。最近、専門家によるリハビリテーションは、自宅で行われる患者の自己リハビリテーションと比較して、手術の結果を改善しないことが実証されている。
手術の結果に影響を与える可能性のある多くの変数がある。
・計画:より患者固有になるように手術を適応させる方法は?モデルから現在の患者の変形をどのように考慮するか?目標の変形補正とは何であろうか?
・選択した患者に最適なインプラントタイプは何か?外科医が患者のために選択することができる可能性がある利用可能なインプラントのタイプは数十を超える可能性があることに留意されたい。
・インプラントには4つの要素(脛骨、大腿骨、ポリエチレン(PE)、膝蓋骨)を含めることができ、これらの要素のうち3つには6つのDOF位置と異なる高さのPEがある。
これらの変数は、選択された患者の整形外科手術で使用するために外科医が選択する必要がある可能性のある多数の可能な組み合わせをもたらす。
本開示のいくつかの実施形態は、患者の手術の術前、術中、および術後の間に取得および/または報告されたデータを処理する機械学習処理回路を含む外科ガイダンスシステムを対象とする。時間の経過とともに、機械学習処理回路は、例えば、術前段階で外科医によって選択された変数(メトリックまたは他のデータ)、ナビゲートされた手術中の追跡された動き、および結果として生じる患者の結果の間で決定された履歴相関および/または他の傾向に基づいて機械学習モデルをトレーニングする。トレーニングには、人工知能(AI)アルゴリズムのルール、意思決定操作の1つ以上のセットのルール、および/またはニューラルネットワークモードのノードの重みおよび/または発火しきい値を適応させて、1つ以上の定義されたしきい値または他のルールが満たされていることに対する1つ以上の定義されたキーパフォーマンス外科的結果を駆動することが含まれ得る。外科ガイダンスシステムは、機械学習モデルを通じて新しい特許の特性に関する術前データを処理し、インプラント選択を伴う外科手術計画を作成する際に、術前段階で外科医にナビゲートされたガイダンスを提供する。外科手術計画は、外科手術計画の術中段階の実行中に外科医にガイダンスを提供するためにナビゲーションシステムに提供することができ、さらに、外科医を支援するロボットアームの動きを制御するために外科手術ロボットに提供することができる。
図12は、いくつかの実施形態により構成された外科ガイダンスシステム1220を使用するナビゲートされた外科ワークフローを示す。図12を参照すると、ワークフローの3つの段階が示されている、すなわち、術前段階1200、術中段階1202、および術後段階1204。術前段階1200の間に、ユーザ(例えば、外科医)は、外科ガイダンスシステム1220の支援を受けて、分析された患者画像に基づいて外科手術計画(症例)を生成する。術中段階1202の間、ユーザは、正確な計画実行のための外科手術ロボット4の操作を含み得る外科ガイダンスシステム1220によって支援されてナビゲートされて提供される。術後段階1204の間に、手術結果を特徴付ける術後フィードバックデータは、患者測定および/または患者調査などによって、外科ガイダンスシステム1220によって収集される。すべてのフェーズ1200〜1204全体で取得されたデータは、機械学習処理回路1222の機械学習モデルをトレーニングするために外科ガイダンスシステム1220によって使用されるための中央データベース1210に保存され得る。機械学習モデルには、人工知能(AI)プロセス、ニューラルネットワークコンポーネントなどを含めることができる。機械学習モデルは、時間の経過とともにトレーニングされ、外科手術計画を生成するために使用され、結果として手術結果が改善される。
図12に示される例示的な外科ガイダンスシステム1220は、術前計画コンポーネント1224、術中ガイダンスコンポーネント1226、機械学習処理回路1222、およびフィードバックトレーニングコンポーネント1228を含む。
以下でさらに詳細に説明するように、フィードバックトレーニングコンポーネント1228は、複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、術後フィードバックデータに基づいて機械学習モデルをトレーニングするように構成されている。図12は、単一のコンピュータ、例えば、スマートフォンを示しているが、術後段階1204の間に、1つ以上のネットワーク1230(例えば、パブリック(インターネット)ネットワークおよび/またはプライベートネットワーク)を介して外科ガイダンスシステム1220に中央データベース1210に記憶するための術後フィードバックデータを提供し、多数のネットワークコンピュータ(例えば、数百のコンピュータ)が、多くの患者のそれぞれについて、外科ガイダンスシステム1220(すなわち、フィードバックトレーニングコンポーネント1228)に機械学習モデルのトレーニングに使用するための術後フィードバックデータを提供することを理解されたい。さらに、以下でさらに詳細に説明するように、フィードバックトレーニングコンポーネント1228は、多数の患者の術前段階1200の間に取得された術前データに基づいて、および多数の患者の術中段階1202の間に取得された術中データに基づいて機械学習モデルをさらにトレーニングすることができる。例えば、トレーニングには、AIアルゴリズムのルール、意思決定操作の1つ以上のセットのルール、および/またはニューラルネットワークモードのノードの重みおよび/または発火しきい値を適応させて、1つ以上の定義されたしきい値または他のルールが満たされていることに対し、術前データおよび/または術中データによって示される1つ以上の定義されたキーパフォーマンス外科的結果を駆動することが含まれ得る。
術前計画コンポーネント1224は、定義された患者を特徴付ける分散型ネットワークコンピュータの1つから術前データを取得し、機械学習モデルによる術前データの処理に基づいて定義された患者の外科手術計画を生成する。術前計画コンポーネント1224は、ユーザによるレビューのために、外科手術計画をディスプレイデバイスに提供する。したがって、機械学習処理回路1222の術前計画コンポーネント1224は、複数の患者の手術結果に関する術後フィードバックデータに基づいてトレーニングされた機械学習モデルを使用して、定義された患者の外科手術計画を生成する。機械学習モデルのトレーニングは、フィードバックトレーニングコンポーネント1228によってより多くの術後フィードバックが取得されるため、繰り返すことができ、その結果、生成される外科手術計画により、患者の手術結果がより継続的に改善される。
図13は、術前、術中、および術後での関連データフローを伴う外科ガイダンスシステム1220のブロック図を示し、ユーザディスプレイおよびロボット手術システムに提供される外科ガイダンスを示している。
図13を参照すると、外科ガイダンスシステム1220は、フィードバックトレーニングコンポーネント1228、術前計画コンポーネント1224、および術中ガイダンスコンポーネント1226を含む。外科ガイダンスシステム1220はまた、機械学習モジュール1300を含む機械学習処理回路122を含み、これは、以下でさらに詳細に説明されるように、人工知能および/またはニューラルネットワークコンポーネント1310を含み得る。
フィードバックトレーニングコンポーネント1228は、複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後段階フィードバックデータを取得するように構成されている。フィードバックトレーニングコンポーネント1228はまた、術前段階データおよび/または術中段階データを取得するように構成され得る。フィードバックトレーニングコンポーネント1228は、取得されたデータを使用して、機械学習モデル1300をトレーニングする。
いくつかの実施形態では、フィードバックトレーニングコンポーネント1228は、関節運動測定、軟組織バランス測定、変形矯正測定、関節線測定、および患者報告結果の測定のうちの少なくとも1つを含む術後フィードバックデータに基づいて機械学習モデル1300をトレーニングするように構成される。
いくつかの追加または代替の実施形態では、フィードバックトレーニングコンポーネント1228は、術後段階と比較した術前段階中の定義された患者の関節運動測定値間の偏差を示すデータ、術後段階と比較した術前段階中の定義された患者の組織バランス測定値間の偏差を示すデータ、術後段階で定義された患者に対して測定された変形矯正と比較した、術前段階で定義された患者に対して計画された変形矯正との間の偏差を示すデータ、および術後段階と比較した術前段階での定義された患者の関節線測定値間の偏差を示すデータのうちの少なくとも1つに基づいて機械学習モデル1300をトレーニングするように構成される。
いくつかの追加または代替の実施形態では、フィードバックトレーニングコンポーネント1228は、外科手術計画によって定義された外科手術鋸切断面から手術中に測定された外科手術鋸切断面の偏差を示すデータ、外科手術計画によって定義された外科手術鋸の動きからの手術中の外科手術鋸の動きの測定値の偏差を示すデータ、外科手術計画によって定義されたインプラントデバイスサイズから手術中に患者に埋め込まれるインプラントデバイスサイズの偏差を示すデータ、および外科手術計画によって定義されたインプラントデバイスの姿勢から手術中の患者への埋め込み後のインプラントデバイスの姿勢の偏差を示すデータのうちの少なくとも1つを含む術後フィードバックデータに基づいて機械学習モデル1300をトレーニングするように構成される。
フィードバックトレーニングコンポーネント1228は、術後フィードバックデータを処理して、定義されたルールを満たす類似性を有する術後フィードバックデータのサブセットを形成することができる。各サブセット内で、フィードバックトレーニングコンポーネント1228は、術後フィードバックデータの少なくともいくつかの値の間の相関を識別し、次に、サブセットのそれぞれについて識別された相関に基づいて機械学習モデルをトレーニングすることができる。
いくつかの実施形態では、機械学習モデルは、入力ノードを有する入力層、それぞれが複数の結合ノードを有する一連の隠れ層、および出力ノードを有する出力層を含むニューラルネットワークコンポーネントを含む。機械学習モデルは、ニューラルネットワークモデルの入力ノードの異なるエントリに術前データの異なるエントリを提供し、ニューラルネットワークコンポーネントの出力ノードの出力に基づく外科手術計画を生成するように構成された少なくとも1つの(すなわち、機械学習処理回路1222の)処理回路によって処理される。フィードバックトレーニングコンポーネント1228は、術後フィードバックデータの値に基づいて、ニューラルネットワークコンポーネントの結合ノードによって使用される重みおよび/または発火しきい値を適応させるように構成され得る。
例えば、ランタイムモードとトレーニングモードの間、入力層の入力ノード、隠れ層の結合ノード、および出力層の出力ノードの間のニューラルネットワークの相互接続構造により、入力値が同時に処理され、外科手術計画の生成に使用される生成された出力値に影響を与え得る。入力層の各入力ノードは、入力特性データ値に、入力ノードに割り当てられた重みを掛けて、加重ノード値を生成する。加重ノード値が入力ノードに割り当てられた発火しきい値を超えると、次に入力ノードは、隠れ層のシーケンスの最初のノードの結合ノードに加重ノード値を提供する。加重ノード値が割り当てられた発火しきい値を超える条件が満たされない限り、入力ノードは加重ノード値を出力しない。
さらに、ニューラルネットワークは、入力ノードによって提供された加重ノード値を乗算および数学的に結合するためにそれに割り当てられた重みを使用して、隠れ層のシーケンスの最初の1つの結合ノードを動作させ、結合ノード値を生成し、および結合ノードの1つによって生成された結合ノード値が、結合ノードに割り当てられた発火しきい値を超えるときには、結合ノード値を、隠れ層のシーケンスの次の1つの結合ノードに提供する。さらに、ニューラルネットワーク回路は、隠れ層のシーケンスの前の1つの複数の結合ノードによって提供される結合ノード値を乗算および結合するためにそれに割り当てられた重みを使用して、隠れ層のシーケンスの最後の1つの結合ノードを動作させ、結合ノード値を生成し、および結合ノードの1つによって生成された結合ノード値が結合ノードに割り当てられた発火しきい値を超えるときには、結合ノード値を、出力層の出力ノードに提供する。最後に、出力層の出力ノードは次に、隠れ層のシーケンスの最後の1つから結合ノード値を組み合わせるために動作し、外科手術計画の生成に使用される出力値を生成する。
取得されたデータの様々なタイプの正規化および/または重み付けを提供することなどによって、取得されたデータを前処理する機械学習データ事前調整回路1320が提供され得、次に、それは、ランタイムフェーズ1322中に機械学習処理回路1222へ、または機械学習モデル1300のトレーニングで使用するためのトレーニングフェーズ中にフィードバックトレーニングコンポーネント1228へ提供される。いくつかの実施形態では、トレーニングは、ランタイム中に継続的にまたは少なくとも時折実行される。
術前計画コンポーネント1224は、定義された患者を特徴付ける分散型ネットワークコンピュータの1つから術前データを収容し、機械学習モデル1300による術前データの処理に基づいて定義された患者の外科手術計画を生成し、ユーザによるレビューのためにディスプレイデバイスに外科手術計画を提供する。
したがって、上で説明したように、トレーニングには、AIアルゴリズムのルール、意思決定操作の1つ以上のセットのルール、および/またはニューラルネットワークモードのノードの重みおよび/または発火しきい値を適応させて、1つ以上の定義されたしきい値または他のルールが満たされていることに対し、術前データおよび/または術中データによって示される1つ以上の定義されたキーパフォーマンス外科的結果を駆動することが含まれ得る。
機械学習モデル1300は、術前データを処理して、インプラントデバイス、定義された患者へのインプラントデバイスの埋め込みの姿勢、およびインプラントデバイスの埋め込み後に定義された患者の予測された術後パフォーマンスメトリックを識別する外科手術計画を出力するように構成することができる。
機械学習モデルは、定義された患者にインプラントデバイスの埋め込みのための切除面の姿勢を識別して外科手術計画を生成するようにさらに構成することができる。術前計画コンポーネント1224は、切除面の姿勢を示すデータを、定義された患者のオーバーレイとして拡張現実(XR)ヘッドセット920(図9)内のディスプレイデバイスを通して表示される切除面の姿勢のグラフィック表現を生成するコンピュータプラットフォーム910(例えば、図9)に提供することができる。術前計画コンポーネント1224は、切除面の姿勢を示すデータを、外科手術ロボット4(図9)の少なくとも1つのコントローラに提供して、外科手術ロボットのアームに取り付けられた外科手術鋸の一連の動きを制御することができ、したがって、外科手術鋸の切断面(例えば、図10または図11の外科手術鋸1040)は、切除面の姿勢と順次位置決めするようになる。
いくつかの実施形態では、機械学習モデル1300は、定義された患者の関節運動測定、定義された患者の軟組織バランス測定、定義された患者の変形矯正測定、および定義された患者の関節線測定のうちの少なくとも1つを含む術前データの処理に基づいて外科手術計画を生成するように構成される。
いくつかの追加または代替の実施形態では、機械学習モデル1300は、定義された患者の解剖学的ランドマーク位置、定義された患者の前方基準点、および定義された患者の解剖学的寸法のうちの少なくとも1つを含む術前データの処理に基づいて外科手術計画を生成するように構成される。さらなる実施形態では、解剖学的ランドマーク位置は、股関節中心、膝中心、および足首中心の位置を識別する。さらなる実施形態では、前方基準点は、近位脛骨機械軸点および脛骨プラトーレベルを識別する。さらなる実施形態では、解剖学的寸法は、脛骨プラトーサイズおよび大腿骨サイズを識別する。
手術中(すなわち、術中段階)、外科ガイダンスシステム1220は、手術中にユーザ(例えば、外科医)を支援するためにディスプレイデバイスに外科手術計画を提供するように構成することができ、および/または外科手術計画を、上述の外科手術ロボット4などのロボット手術システムに提供することができる。
いくつかの実施形態では、外科手術システムは、外科手術中のコンピュータ支援ナビゲーションのための外科ガイダンスシステム1220、追跡システム、および少なくとも1つのコントローラを含む。上述のように、外科ガイダンスシステム1220は、複数の患者の手術結果に関して、分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、術後のフィードバックデータに基づいて機械学習モデルをトレーニングし、定義された患者を特徴付ける分散ネットワークコンピュータの1つから術前データを取得し、機械学習モデルによる術前データの処理に基づいて、定義された患者の外科手術計画を生成するように構成される。追跡システム(例えば、図9のカメラ追跡システム構成要素6および/または6’)は、外科手術鋸によって切断される、定義された患者の解剖学的構造の姿勢を決定し、外科手術鋸の姿勢を決定するように構成される。少なくとも1つのコントローラは術中ガイダンスコンポーネント1226内に少なくとも部分的にあり得、外科手術計画を取得することと、解剖学的構造が切断されるべき場所を定義する外科手術計画および解剖学的構造の姿勢に基づいて、目標面の姿勢を決定することと、目標面の姿勢と外科手術鋸の姿勢との比較に基づいて操縦情報を生成することとを行うように構成され得る。操縦情報は、外科手術鋸の切断面を配置して目標面と位置決めするために、外科手術鋸が移動する必要がある場所を示す。
いくつかの実施形態では、外科手術システムは、少なくとも1つのシースルーディスプレイデバイスを伴うXRヘッドセット920を含む。図9のコンピュータプラットフォーム910に部分的に存在し得る少なくとも1つのコントローラは、XRヘッドセット920の少なくとも1つのシースルーディスプレイデバイスに提供される操縦情報のグラフィック表現を生成するように構成され、外科手術鋸の切断面を配置して目標面と位置決めするように、外科手術鋸のオペレータの動きを誘導する。
いくつかの追加または代替の実施形態では、外科手術システムはさらに、ロボット基部を有する外科手術ロボット(例えば、上部の外科手術ロボット4)、ロボット基部に接続され、ロボットアームに接続された外科手術鋸を配置するように構成されたロボットアーム、およびロボット基部に対してロボットアームを移動させるように動作可能に接続された少なくとも1つのモータを含む。少なくとも1つのコントローラは、操縦情報に基づいて少なくとも1つのモータの動きを制御して、外科手術鋸の切断面が目標面と位置決めするように外科手術鋸を再配置するように構成される。
機械学習モデル1300は、術前データを処理して、インプラントデバイス、定義された患者へのインプラントデバイスの埋め込みのため切除面の姿勢、およびインプラントデバイスの埋め込み後に定義された患者の予測された術後パフォーマンスメトリックを識別する外科手術計画を出力するように構成することができる。
外科ガイダンスシステムは、術後段階と比較した術前段階中の定義された患者の関節運動測定値間の偏差を示すデータ、術後段階と比較した術前段階中の定義された患者の組織バランス測定値間の偏差を示すデータ、術後段階で定義された患者に対して測定された変形矯正と比較した、術前段階で定義された患者に対して計画された変形矯正との間の偏差を示すデータ、および術後段階と比較した術前段階での定義された患者の関節線測定値間の偏差を示すデータのうちの少なくとも1つに基づいて機械学習モデルをトレーニングするように構成され得る。
外科ガイダンスシステムは、外科手術計画によって定義された外科手術鋸切断面から手術中に測定された外科手術鋸切断面の偏差を示すデータ、外科手術計画によって定義された外科手術鋸の動きからの手術中の外科手術鋸の動きの測定値の偏差を示すデータ、外科手術計画によって定義されたインプラントデバイスサイズから手術中に患者に埋め込まれるインプラントデバイスサイズの偏差を示すデータ、および外科手術計画によって定義されたインプラントデバイスの姿勢から手術中の患者への埋め込み後のインプラントデバイスの姿勢の偏差を示すデータのうちの少なくとも1つを含む術後フィードバックデータに基づいて機械学習モデルをトレーニングするように構成され得る。
機械学習モデルは、定義された患者の関節運動測定、定義された患者の軟組織バランス測定、定義された患者の変形矯正測定、定義された患者の関節線測定、定義された患者の解剖学的ランドマーク位置、定義された患者の前方基準点、および定義された患者の解剖学的寸法のうちの少なくとも1つを含む術前データの処理に基づいて外科手術計画を生成するように構成され得る。
外科ガイダンスシステム1220によって処理される術前データは、ランドマーク位置(例えば、股関節中心、膝中心、足首中心など)、機械軸を定義する大腿骨特性データ(股関節中心−遠位大腿骨機械軸点など)、上顆線、ホワイトサイド線、後顆線、前部基準点、機械軸を定義する脛骨特性データ(足首の中心−近位脛骨機械軸点など)、脛骨A/P方向、脛骨プラトーレベル、解剖学的寸法(例えば、脛骨MLプラトーサイズ、大腿骨APサイズなど)、および患者の人口統計(例えば、年齢、性別、BMI、人種、追加、併存疾患など)のうちの少なくとも1つを含み得る。
機械学習モデル1300をトレーニングするために使用される術後フィードバックデータは、入力データのリストおよび結果として生じる出力ガイダンスを含むログデータ構造、測定された結果(例えば、可動域(ROM)テスト、軟組織バランス測定、関節運動測定、変形矯正測定、関節線測定、その他の機能的結果、PROM、患者満足度など)、手術イベント(例えば、タイミング、問題(計画からのロボット軸位置の逸脱、計画からの鋸ブレード姿勢の逸脱、予測からのインプラント適合の逸脱、ロボットアームの計画外のユーザの再配置、計画からのアクションツールの動きの逸脱、計画外の手術ステップなど)、失敗(例えば、外科医が計画完了前に外科手術ロボットシステムの使用を時期尚早に停止するなど)、およびエラー(例えば、計画からの実際の切断面の逸脱、実際のギャップからの予測ギャップの逸脱、手順ステップ中の追跡マーカのカメラ追跡システムの損失など)、ならびに観察メトリックのうちの少なくとも1つを含むことができる。
機械学習モデル1300をトレーニングするために使用することができる術中段階データは、ロボットの姿勢追跡、鋸ブレードの姿勢追跡、他のツールと患者の姿勢追跡、力センサデータ追跡、機器の運用イベントの追跡、および追跡カメラで識別可能なイベント追跡のうちの少なくとも1つを含むことができる。
外科手術計画は、インプラントタイプ、インプラントサイズ、インプラント姿勢の配置(例えば、位置と回転)、予測されるパフォーマンスメトリック(例えば、軟部組織バランス、関節運動、変形矯正(例えば、股関節−膝−足首の角度)、関節線)、切除面(例えば、各切除面の姿勢、予測されるギャップの内側および外側のサイズなど)および手術のタイムラインのうちの少なくとも1つを示す場合がある。
本明細書の様々な実施形態は、以下のような現在利用可能な様々な製品と組み合わせて使用することができる、すなわち、Globus MedicalのGENUシステム(術前計画および術中ロボット支援実行を提供する)、StrykerのMAKOロボットシステム(Makoシステム)(術前計画および術中ロボット支援実行)、Smith and NephewのNAVIO(Navio System)(術中計画と実行を提供する)、Zimmer BiometのROSA(Rosa System)(術前計画、ロボットによる術中実行、ウェアラブルとモバイルアプリケーション(マイモビリティなど)を使用した術後フォローアップを実装する)。
本開示の様々な実施形態は、上記のシステムの1つ以上、または他の既存または新規のシステムと協働して、外科手術計画および実行との相関のために術後に取得されたデータを使用して、以下を行うことができる。
o利用可能な外科手術計画変数の選択を通じて取得されると予測されるパフォーマンスメトリックをユーザが理解できるようにするガイダンス情報を提供する、および
o人工知能(AI)、患者固有の計画を実行する際の外科医への支援などを含み得る、機械学習を提供する、すなわち、
・計画された外科的処置による目標変形矯正および/または関節線を定義する、および/または
・患者に使用するのに最適なインプラントの選択を定義する。
いくつかの他の追加または代替の実施形態は、膝または他の整形外科手術の前後に、体系的なデータ収集(機能データおよび患者報告の結果測定PROM)のために、1つ以上の患者ウェアラブルデバイスと通信接続可能な(例えば、WiFiまたはBluetoothのペア)モバイルアプリケーション(例えば、スマートフォンまたは他のコンピュータアプリケーション)の提供を対象としている。
機械学習モデル1300を伴う機械学習処理回路1222は、AIを動力源とするアルゴリズムコンポーネントおよび/または患者の手術結果、患者の特徴、手術計画、および手術の実行の間の相関を決定するニューラルネットワークコンポーネントを含むことができる。
これらの実施形態は、外科医または他のユーザが中央データベース1210に存在する他の測定値の以前の患者のパフォーマンスおよび要約統計量をレビューすることができるダッシュボードを備えた術前計画(すなわち、AI計画アシスタントの有無にかかわらず)に使用することができる。術中ガイダンスコンポーネント1226は、ロボット支援およびデータ収集を使用して正確な計画実行のために構成することができる。術後フィードバックデータには、スマートフォンアプリケーションを介して実行できるPROM、機能およびアクティビティデータの収集が含まれ得る。スマートフォンアプリケーションおよびクラウドインフラストラクチャ。
ナビゲーションシステムで使用できる3つの主要なイメージングワークフロー、すなわち、CTベース、X線ベース、およびイメージレスベースのワークフローについて説明する。
次に、外科ガイダンスシステム1220によって実行することができる様々なさらなる動作が、図14〜26の文脈で説明される。本明細書のこれらおよび他の図は、通信の主要な方向を示すために通信経路上に例示的な矢印を示しているが、通信は、図示されている矢印と反対の方向で発生する場合があることを理解されたい。さらに、これらの他の要素と、図面を単純化するために矢印で示されていない他の図との間で通信が発生する場合がある。
術前段階
図14は、術前計画ワークフローを実行する機能ブロックを示し、これは、いくつかの実施形態による、外科ガイダンスシステム1220によって少なくとも部分的に実行され得る。術前計画が図14に示され、これにより、ユーザは、デスクトップコンピュータ、ラップトップコンピュータ、携帯電話を含み得るがこれらに限定されない、様々なタイプのデバイスで手術を計画することができる。認証後、ユーザには新しい症例計画またはダッシュボードレビューが提供される。すべての計画データは中央データベースと同期される。手術計画は、ロボット手術システムを含むすべてのデバイス間で自動的に同期できる。代替的に、症例計画をポータブルストレージにエクスポートして、後でロボット手術システムにインポートすることもできる。図15は、例示的な外科的症例計画[WF05]を実行する機能ブロックを示す。図17は、プランデバイスインプラントワークフロー[WF04]の機能ブロックを示す。外科的症例計画[WF05]は、外科ガイダンスシステム1220の動作によって、より具体的には、術前計画コンポーネント1224によって生成することができる。
図15を参照すると、ユーザは新しい患者症例を作成するか、既存の患者症例を選択できる。ユーザは、様々なソース、すなわち、CD/DVD、ポータブルストレージ、病院のPACSシステムまたは中央データベースからDICOM画像をインポートすることができる。その後、この症例と医用画像データをインポートする膝固有のアプリケーションが実行される。ユーザは最初に、術前計画のためのイメージングワークフロー、例えば、CTイメージングワークフローとX線イメージングワークフローを選択できる。次のステップでは、ユーザは画像を分析し、1つ以上のデバイスの埋め込みを計画する。患者の画像を分析するための関連する2つのワークフロー[WF03]を図15に示し、デバイスの埋め込みを計画するための[WF14]を図17に示す。
図16に示すように、イメージングワークフローがCTイメージングとX線イメージングのどちらを選択するかに応じて、システムの画像分析には2つの変異型があり得る。図16は、画像分析のための機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。
CTベースのイメージングワークフローの場合、CT画像の品質を最初に評価できる。品質評価では、CT画像の品質(ボクセルサイズ、股関節、膝関節、足首関節の範囲など)が十分であるかどうか、スキャン中に患者の動きが過剰で誤った結果になる可能性があるかどうかを決定できる。次に、CT画像がセグメント化される。このプロセスでは、大腿骨および脛骨の3Dモデルを生成できる。このプロセスは、それ以上のユーザ入力なしで自動的に実行できるが、ユーザ支援がプロセスに提供される場合がある。膝計画手術の次の重要なランドマークが決定される、すなわち、股関節、膝および足首の中心、大腿骨および脛骨の解剖学的軸、脛骨プラトーサイズ、大腿骨APサイズおよび機械軸である。
X線イメージングワークフローでは、最初にX線画像の画質とタイプを評価できる。フルレッグビューが利用可能な場合は、股関節、膝、足首の中心を見つけ、画像上で機械軸を決定できる。このビューが利用できない場合は、ユーザの好みに基づいて機械軸を想定する必要がある(例えば、解剖学的軸から6°)。次のステップでは、主要な解剖学的軸と寸法が画像上で識別される。
最終的に、画像分析の結果は、表示された画像(ランドマーク、軸)または3Dモデル(骨、CTボリュームレンダリング)上でユーザが表示するオーバーレイとしてユーザに表示される。
プランデバイスインプラントワークフローを図17に示す。最初に、ユーザは、対象となる患者の外科手術で使用するインプラントファミリーを選択する。インプラントファミリーは、例えば、十字靭帯保持(CR)または後方安定化(PS)インプラント、セメントまたはセメントレスインプラントなどであり得る。次に、システムは、画像分析に基づいて初期インプラントサイズおよび配置を自動的に提案するように動作することができる。次のステップでは、ユーザはインプラントのサイズと配置を変更し、医用画像に表示される更新された視覚的フィードバックによってそのような変更の結果を観察できる。ユーザが計画の受け入れ可能性を示すと、計画は手術の承認として検証される。
次に、レビューダッシュボードのワークフローについて説明する。ダッシュボードにアクセスした後(例えば、図14による)、機械学習処理回路1222(図12)は、中央データベース1010から関連データを選択し、機械学習モデル1300を通してデータを処理して、外科手術計画を生成する。関連するデータは、レビューのためにユーザに表示され得る。機械学習モデル1300を介して処理するために選択できる例示的データ、ただし、以下のいずれか1つ以上に限定されない。
・手術:
o行われた手術の数
o予定されている手術の数
・タイミング分析:
o平均
o最短
o最長
・精度分析(計画と完了):平均
・患者の人口統計:
o年齢
o性別
oBMI
o人種
o追加
o併存症
・インプラント統計:
oタイプ
oサイズ
・結果:
oPROM
o機能的な結果
o患者の満足度
・手術イベント:問題、失敗、エラー、観察
・分析:
o結果と精度
o結果とタイミング
o結果と患者の人口統計
o結果とインプラント
o結果と手術イベント
機械学習処理回路1222によって処理され、ユーザ(例えば、外科医)に表示され得るデータは、例えば、外科医がダッシュボードを使用して経時的にパフォーマンスを追跡できるようにし得、ならびに/あるいは外科医が、例えば、外科医自身の手術、他の外科医によって行われた手術(匿名化され得る)からの簡単にアクセスできる分析データのレビュー、および/または分析データのエピソード全体のレビューによってパフォーマンスを改善することを可能にし得る。
術中ワークフロー
術中ワークフローは、システムのセットアップから始まり得る。看護師はロボットとナビゲーションステーションをORに運び、電源に接続する。システムは標準の電源コンセントを使用する。起動後、システムは認証を要求する。成功した場合、ユーザは、以前に計画された症例をポータブルストレージまたは中央データベース1210からインポートすることができる(例えば、図14のワークフロー)。ユーザは、手術中に画像分析を含め、症例を完全に計画する可能性がある。症例を続行する前に、外科医は計画の概要を示す画面で症例関連データを確認する必要がある。
症例の構成と患者の計画と並行して、看護師はロボットをドレープし、エンドエフェクタアーム(EEA)をロボットのフランジに取り付けることができる。次に、ナビゲートされた機器が組み立てられる。これらは、動的参照配列(DRA)またはEEA参照要素(RE)のディボットを使用して検証される。鋸ブレードはEEAに取り付けられ、鋸のハンドピースは鋸ブレードに取り付けられている。最後に、EEAと鋸ブレードは、鋸ブレードのディボットを使用したナビゲーションシステムによって検証される。
患者登録ワークフローには、レッグホルダー(IMPの「De Mayo V2 Surgical Positioningヒップセンターホルダー」からの標準レッグホルダー)に脚が付いたORテーブルに患者をつかせることが含まれる。次に、外科医はTKAの標準的な開口部を作る。大腿骨と脛骨のDRAは、骨のピンを使用して取り付けられる。監視マーカは大腿骨と脛骨に取り付けられている。ユーザはカメラの位置を調整して、すべてのREが確実に正しく表示されるようにすることができる。
登録プロセスの最初の部分として、股関節の回転中心が見つかる。これは、ナビゲーションが大腿骨の位置を記録している間に外科医が脚を回転させることによって達成される。外科医は、股関節中心の登録に必要な可動域に関するコンピュータ画面上の関連する表示によって支援されるものとする。股関節は主に球形の関節であるため、その中心は一連の大腿骨DRA位置測定から計算できる。
大腿骨と脛骨の次の自然のランドマークは、ナビゲートされたスタイラスを使用して測定される。これらは大腿骨用である、すなわち、機械軸(股関節中心−遠位大腿骨機械軸点)、上顆線、ホワイトサイド線、後顆線、前方基準点、および脛骨用:機械軸(足首中心−近位脛骨機械軸点)、脛骨A/P方向、脛骨プラトーレベルである。ソフトウェアは、ユーザがこれらの点を収集するのを支援する。
選択したイメージングワークフローに応じて、大腿骨の遠位端を登録する方法は次の通りである。
(1)CTベースのワークフローの場合、オプションの粗い大腿骨登録ステップが最初に実行される。このステップでは、ユーザは骨の表面の事前に計画された点を測定する。事前に計画された点を収集するこのステップは不要であり、前のステップで測定された自然のランドマークで十分である可能性がある。次にユーザは、大腿骨の表面上のいくつか(10から50)の点を収集する。これには、軟骨を通して骨に到達できるようにするために鋭いスタイラスを使用する必要があり得る。ソフトウェアは、点によってカバーされていない領域をユーザに表示することにより、このタスクでユーザを支援し得る。自動表面マッチングアルゴリズム(例えば、反復クローズポイント(ICP)アルゴリズム)は、測定された点をセグメント化された骨モデルとマッチングし、マッチングエラーを計算する。エラーが十分に小さい場合、登録マトリックスが保存され、大腿骨が登録される。同様のプロセスを使用して脛骨を登録する。
(2)X線および画像のないワークフローの場合、以前に収集された自然のランドマークに加えて、後顆表面のみが測定される。これは、術中に取得された「スティックマン」と呼ばれる、自然のランドマークと膝関節面で構成される患者の仮想モデルを完成させるためのものである。
次に、外科医はスタイラスを使用して監視マーカのディボットを測定し、どの監視マーカがどのDRA(大腿骨または脛骨)にリンクされているかを定義する。最後に、外科医はスタイラスで骨の選択された点に触れ、ナビゲーション画面でポインタの先端が骨に配置されていることを確認することにより、登録の精度をレビューする。登録精度が十分に高い場合、外科医は次のステップに進む。
いくつかの実施形態では、登録は、透視マッチングおよび/またはレーザースキャナを使用する表面スキャンを使用して実行される。
患者が登録されると、ナビゲーション情報が表示され、これには、脛骨と大腿骨の位置が、外科医によるレビューのための重要な情報の要約とともにリアルタイムで表示されることが含まれ得る。この情報の例には、瞬間的な内反/外反、膝の屈曲/伸展、内部/外部の回転角、ギャップサイズが含まれ、例えば、次のものが使用される。
o大腿骨および脛骨マーカ
o仮想モデル(「スティックマン」)
o登録変換
o計画されたインプラント
表示される情報には、生成または取得された3Dモデルが含まれる場合がある。
外科医は、患者の関節構造、運動学、および軟組織バランスについてさらに学ぶために、値を観察しながら、可動域全体で脚を動かすことができる。
ナビゲーションディスプレイのデータは、図18に示すナビゲーションワークフローから得られる。図18は、ナビゲートされたワークフローの機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステム(例えば、術中ガイダンスコンポーネント1226)によって少なくとも部分的に実行され得る。データは、追跡システムによるDRA測定および統合されたエンコーダによるロボットおよびEEA位置測定に基づいてリアルタイムで計算できる。変換行列とロボットモデルを使用して、骨、器具、ロボットアームリンク、およびEEAの位置を計算し、アプリケーション全体で使用できる。加えて、監視マーカは、それぞれのDRAを参照してリアルタイムで追跡される。2つの間の相対位置が大きく変化する場合は、DRAが骨を基準にして移動し、登録が失われた可能性があることを示す。このような場合、ユーザに警告が表示され、登録をやり直す必要がある。
いくつかの実施形態では、角度および測定値を示すナビゲーションデータは、XRヘッドセットを介して、患者の解剖学的構造に直接オーバーレイして表示することができる。
軟組織バランスと関節運動学に関する情報を取得するために、外科医は図19に示すような関節可動域ROMテストを実行する。図19は、関節可動域(ROM)ワークフローをテストするための機能ブロックを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。このワークフローでは、ユーザは完全なROM定義の回数、例えば3回、すなわち、横方向の力を加えずに、内反力を加え、および外反力を加えて脚を動かすことができる。外科ガイダンスシステム、例えば、術前計画コンポーネント1224またはナビゲーションシステムの他のコンポーネントは、大腿骨と脛骨の相対位置を収集し、横方向および医療用コンパートメントの最大ギャップサイズと屈曲角の機能内の最大内反/外反角を計算し、これは、インプラント計画段階で使用される。
いくつかの実施形態では、ロボットアームを脚に取り付け、経路に沿って移動させて標準化されたROM運動を生成し、同時に脚から反応(例えば、ロボットアームの追跡された姿勢および/または感知力フィードバック)を収集し、外科医と患者全体で、客観的で反復可能な参照を確立することができる。
インプラントの計画中(図17で示す)、外科医または他のユーザは、靭帯のバランスへの影響をリアルタイムで観察しながら、骨を基準にしてインプラントの位置と回転を変更できる。これは、取得した可動域全体の元のおよび計画された内側および外側のギャップサイズのグラフを表示することで達成できる。インプラントサイズと位置が変更されると、計画されたグラフが更新される。加えて、このシステムは、現在の屈曲角度での靭帯バランス情報、および現在測定されている屈曲角度でのギャップの内側および外側のサイズの表示を提供することにより、手術中の計画において外科医を支援する。このデータは、インプラントのサイズと位置、または屈曲角度が変更されたときに更新される。
外科ガイダンスシステムは以下のいずれか1つ以上を含み得る機能を提供することにより、術中インプラント計画においてユーザを支援するように動作され得る。
・CTワークフローの場合、脛骨と大腿骨の3Dオーバーレイビューで、次を伴う、すなわち、
o3Dモデル
o計画されたインプラント
o切除面
o選択可能なビュー深度でのCTスライス(断面図)
・画像なし/X線ワークフローの場合、一般的な3Dモデルと計画されたインプラントで構成される脛骨と大腿骨のオーバーレイビュー。
・すべて:自然のランドマークと関連する「スティックマン」を表示する。
計画の最終段階として、外科医は表示された計画を検証できる。
外科手術計画は、XRヘッドセットまたはインプラント計画段階で使用される他のディスプレイを介して表示できる。外科医は、患者の骨に直接インプラントの仮想オーバーレイを表示し、図20に示すように、ハンドルを使用してインプラントと相互作用し、骨を基準にしてインプラントを回転または平行移動させることができる。図20は、いくつかの実施形態による、インプラントの位置計画を支援するために、XRヘッドセットを通して患者の骨にオーバーレイとして表示される外科手術計画の一部を示す。
図21は、外科手術計画による、およびいくつかの実施形態による、骨に1つ以上の切り込みを入れるために実行される外科手術ロボットワークフローを示す。ロボットの支援により骨を切断するためには、ロボットステーションをテーブルに持ってくる必要がある。システムは、ロボットステーションを移動することなく、計画されたすべての切断面がロボットワークスペース内にあるときを示すことにより、システムの位置決めをユーザに誘導する。次に、ロボットステーションが安定し、オプションで鋸ブレードがディボットを使用してもう一度検証される。
外科医は、脛骨の近位、遠位、前部、前部の面取り、大腿骨の後部または後部の面取りなどの切除面を選択する。システムは、ユーザが監視マーカのディボットを測定する必要があることについて監視マーカが表示されている場合、登録が自動的に有効であることも確認する。ロボットアームは、切除面がEEAワークスペース内にあり、EEA切断面と位置合わせされている目標位置に移動する。外科医はロックをロック解除し、骨が取り除かれるまでの鋸を駆動する。この段階で、システムはナビゲーション画面に、骨ならびに除去する残りの骨を基準にした鋸ブレードの位置を表示する。
図22は、平面性のチェックワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。各切断後、外科医は、骨に平面チェッカーを配置し、計画された平面からの実行された平面の偏差を画面上で確認することによって、切断の平面性を測定することができる。
代替的に、例えば故障のためにロボットシステムを使用しない場合、外科医は引き続きナビゲーション支援を使用して手動で骨を切断する可能性がある。ロボットによる切断と同様に、外科医は切除面を選択し、登録を確認する。次に、目標の実装に応じて2つの可能性がある。
・ナビゲートされたジグ:システムは、使用するナビゲートされたジグを外科医に示し、目標位置を示す。外科医は、システムによって示された位置でジグを骨に固定し(例えば、ナビゲートされたジグがそれから特定の最大距離内にある場合、システムは目標位置を緑色で示す)、ジグを介して矢状鋸で、手動で切断する。
・ナビゲートされたピンガイド:システムは、ピンを骨に配置する際にユーザを誘導する。その後、ユーザは適切なジグをピンにスライドさせ、手動で切断する。
切断の平面性を確認できる。
図23は、ナビゲートされたジグで骨を切断するワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。
すべての切断を行った後、外科医はトライアルインプラントを配置し、前述のようにROMをテストできる。軟組織バランスに満足できない場合、インプラントを再計画して切断をやり直すことができる。その後、外科医はセメントの有無にかかわらず最終的なインプラントを配置することができる。
手術が終了すると、外科医は結果を評価する。これは、図24および25に示すように、インプラントのスタイラスとディボットを使用してインプラントの位置を測定することによって行われる。図24は、インプラントデバイスの埋め込み結果を評価するワークフローを示し、これは、いくつかの実施形態による外科ガイダンスシステムによって少なくとも部分的に実行され得る。図25は、いくつかの実施形態による、カメラ追跡システムによってそれらの集合的な姿勢を追跡され得るインプラントデバイスに提供されるディボットを示す。適切な空間配置とディボットインプラントのタイプの数によって、位置とサイズを特定すべきである。手術の概要が外科医に表示される、すなわち、
・測定されたインプラント位置
・インプラントのタイプとサイズ
・最後のROMテストの結果
・手術のタイムライン
システムは、主要な手術データを保存し、それを中央データベース1210にアップロードして、フィードバックトレーニングコンポーネント1228による機械学習モデル1300のトレーニングで使用する、すなわち、
・システムとソフトウェアのバージョン
・症例の識別
・UIテレメトリ
・ステートマシン:
oタイムスタンプ
o信号
oステート
・登録データ:
o測定された自然のランドマーク(点、表面、および関連するトラッキングエラー)
o登録の変換
o登録精度(CTイメージングワークフロー)
・セットアップ:
o空間の参照要素とDRAの位置
o検証測定(ナビゲートされた機器のディボット)
・計画:
o使用されたいずれかの医用画像への参照
oセグメンテーション
o計画されたインプラント位置
・ロボットステーションとEEA:
o移動中のロボット軸の位置(最大20Hz)
oロック解除時のEEAおよび鋸ブレードの位置(最大20Hz)
o集約された力センサデータ
・ROMテスト:
o完了した各ROMテストのソースデータと結果
・インプラントコンポーネント(脛骨、大腿骨、PE)の最終評価:
oディボット測定
o位置
oサイズ
oタイプ
・追跡:
oナビゲートされた計器とマーカの集約された位置とエラー
oいずれかの追跡の問題
術後の段階
図26は、いくつかの実施形態による、外科ガイダンスシステムによって少なくとも部分的に実行され得る患者検査ワークフローを示す。
術後の段階では、外科ガイダンスシステムは、関連する結果データを収集し、院内の患者のリハビリテーションを可能にするように構成されている。TKA後の専門的なリハビリテーションは、患者が行う自動リハビリテーションよりも良い結果をもたらさないことが実証されている。一方、患者は退院後に同行し、どのようなタイプの運動を行うべきかを知っている必要がある。いくつかの実施形態は、携帯電話またはタブレットにインストールすることができるモバイルアプリケーションを提供する。モバイルアプリケーションは、定期的に患者にクエリを実行して、患者報告アウトカム指標PROMアンケートを介して患者のステータスを評価するように構成できる。モバイルデバイスにリンクされたウェアラブルデバイス(スマートウォッチ、靴センサなど)は、患者のアクティビティを測定する。モバイルアプリケーションには、説明ビデオを含むカスタマイズ可能なリハビリプログラム、および患者が定義されたリハビリプロセスに従っているかどうかを確認する方法がある(フォローアップの質問やウェアラブルデバイスの信号処理など)。緊急の場合、患者はアプリケーションを介して病院に連絡し、すぐにアドバイスを受けることができる。
すべての患者データが収集され、保存のために中央データベース1210にアップロードされ、特定の患者および症例にリンクされる。病院のスタッフと外科医は、プログラムに登録されているすべての患者をリアルタイムで、標準的なワークフロー外の症例(例えば、活動が非常に少ない、PROMが悪い)を強調されたものを見る。病院のスタッフと外科医は、必要に応じて患者に連絡できるものとする。フィードバックトレーニングコンポーネント1228は、この術後結果データを使用して、機械学習モデル1300をさらにトレーニングすることができる。
中央データベース1210は、結果データを収集し、それらを、例えば、図12に示されるように、ケアのエピソード全体からのデータとリンクするために使用される。機械学習モデル1300は、収集されたデータに基づいて経時的にトレーニングされ、インプラントのタイプ、寸法、および配置、目標変形矯正、特定の患者の目標関節線を含む最良の治療オプションを識別することができる。上述のように、機械学習モデル1300は、人工知能アルゴリズムを使用して相関関係を見つけ、AI計画アシスタントおよび外科医ダッシュボード拡張を提供することにより、インプラント計画段階で実際に使用することができる。
さらなる規定および実施形態:
本発明の概念の様々な実施形態の上記の説明において、本明細書において使用される用語は、特定の実施形態を説明することのみを目的とし、本発明の概念を限定することを意図しないことを理解されたい。別段に定義されない限り、本明細書で使用されるすべての用語(技術用語および科学用語を含む)は、本発明の概念が属する当技術分野の当業者によって一般に理解されるのと同じ意味を有する。一般的に使用される辞書に定義されるような用語は、本明細書および関連する技術分野の文脈におけるそれらの意味に矛盾しない意味を有するものとして解釈されるべきであり、本明細書で明確にそのように定義された理想化された、または過度に形式的な意味では解釈されないことがさらに理解されよう。
ある要素が別の要素に対して「接続された(connected)」、「結合された(coupled)」、「応答する(responsive)」、またはそれらの変異型であるように参照される場合、その要素は、他の要素に直接接続、結合、もしくは応答することができるか、または介在する要素が存在してもよい。対照的に、ある要素が別の要素に対して「直接接続された(directly connected)」、「直接結合された(directly coupled)」、「直接応答する(directly responsive)」、またはそれらの変異型であるように参照される場合、介在する要素は存在しない。同様の符号は、全体を通して同様の要素を指す。さらにまた、本明細書において使用される場合、「結合された(coupled)」、「接続された(connected)」、「応答する(responsive)」、またはそれらの変異型は、無線で結合、接続、または応答することを含むことができる。本明細書において使用される場合、単数形「a」、「an」、および「the」は、文脈がそうでないことを明確に示さない限り、複数形も含むことを意図している。周知の機能または構造は、簡潔さおよび/または明確さのために詳細に説明されない場合がある。「および/または」という用語は、関連する列挙された項目のうちの1つ以上のいずれかおよびすべての組み合わせを含む。
本明細書では、第1、第2、第3などの用語を使用して様々な要素/動作を説明することがあるが、これらの要素/動作は、これらの用語によって限定されるべきではないことが理解される。これらの用語は、ある要素/動作を他の要素/動作から区別するためにのみ使用される。したがって、いくつかの実施形態における第1の要素/動作は、本発明の概念の教示から逸脱することなく、他の実施形態における第2の要素/動作と呼ぶことができる。同じ参照番号または同じ参照符号は、明細書全体を通して同じまたは類似の要素を示す。
本明細書において使用される場合、「備える(comprise)」、「備える(comprising)」、「備える(comprises)」、「含む(include)」、「含む(including)」、「含む(includes)」、「有する(have)」、「有する(has)」、「有する(having)」という用語、またはそれらの変異型は、限定がなく、1つ以上の記された特徴、整数、要素、ステップ、コンポーネント、または機能を含むが、1つ以上の他の特徴、整数、要素、ステップ、コンポーネント、機能、またはそれらのグループの存在もしくは追加を排除するものではない。さらにまた、本明細書において使用される場合、ラテン語の「例えば(exempli gratia)」から派生した一般的な略語「例えば(e.g.)」は、前述の項目の全般的な例(複数可)を紹介または指定するために使用されてもよく、かかる項目を限定することを意図するものではない。ラテン語の「すなわち(id est)」から派生した一般的な略語「すなわち(i.e.)」は、より全般的な列挙から特定の項目を指定するために使用されてもよい。
例示的な実施形態は、コンピュータ実装方法、装置(システムおよび/もしくはデバイス)、ならびに/またはコンピュータプログラム製品を示すブロック図および/またはフローチャート図を参照して本明細書において説明される。ブロック図および/またはフローチャート図のブロック、ならびにブロック図および/またはフローチャート図におけるブロックの組み合わせは、1つ以上のコンピュータ回路によって実行されるコンピュータプログラム命令によって実装されることができることが理解される。これらのコンピュータプログラム命令を汎用コンピュータ回路、専用コンピュータ回路、および/または他のプログラム可能なデータ処理回路のプロセッサ回路に提供して機械を生成することができ、それにより、コンピュータのプロセッサおよび/または他のプログラム可能なデータ処理装置を介して実行される命令は、トランジスタ、メモリの場所に記憶された値、およびかかる回路網内の他のハードウェアコンポーネントを変換および制御して、ブロック図および/またはフローチャートブロック(複数可)において指定された機能/作用を実装し、かつそれによって、ブロック図および/またはフローチャートブロック(複数可)において指定された機能/作用を実装するための手段(機能)および/または構造を作り出す。
これらのコンピュータプログラム命令はまた、コンピュータ可読媒体に記憶された命令がブロック図および/またはフローチャートブロックまたは複数のブロックにおいて指定された機能/作用を実装する命令を含む製造物品を製造するように、コンピュータまたは他のプログラム可能なデータ処理装置が特定の方法で機能するように指示することができる有形のコンピュータ可読媒体に記憶されてもよい。したがって、本発明の概念の実施形態は、集合的に「回路網」、「モジュール」、またはそれらの変異型と称されることができる、デジタル信号プロセッサなどのプロセッサで動作するハードウェアおよび/またはソフトウェア(ファームウェア、常駐ソフトウェア、マイクロコードなどを含む)で具体化されることができる。
また、いくつかの代替実装形態では、ブロックに記載されている機能/作用が、フローチャートに記載されている順序とは異なる順序で発生する場合があることにも留意されたい。例えば、連続して示されている2つのブロックは、関与する機能/作用に応じて、実際には実質的に同時に実行されてもよいかまたはブロックが逆の順序で実行されてもよい。さらに、フローチャートおよび/またはブロック図の所与のブロックの機能は、複数のブロックに分離されてもよく、および/またはフローチャートおよび/またはブロック図の2つ以上のブロックの機能は、少なくとも部分的に統合されてもよい。最後に、本発明の概念の範囲から逸脱することなく、図示されているブロックの間に他のブロックが追加/挿入されてもよく、および/またはブロックまたは動作が省略されてもよい。さらに、いくつかの図は、通信の主要な方向を示すために通信経路上に矢印を含んでいるが、通信は、描かれた矢印と反対の方向で発生する場合があることを理解されたい。
本発明の概念の原理から実質的に逸脱しない限り、実施形態に対して多くの変更および修正を行うことができる。すべてのこのような変更および修正は、本発明の概念の範囲内で本明細書に含まれることが意図されている。したがって、上で開示された発明の対象は、限定的ではなく例示的であると見なされるべきであり、付け加えられた実施形態の例は、本発明の概念の趣旨および範囲内にあるすべてのこのような修正、強化、および他の実施形態に及ぶことが意図されている。したがって、法律によって許される最大限の範囲で、本発明の概念の範囲は、以下の実施形態の例およびそれらの均等物を含む本開示の最も広い許容可能な解釈によって決定されるべきであり、前述の発明を実施するための形態に制限または限定されるものではないとする。

Claims (21)

  1. 手術中のコンピュータ支援ナビゲーションのための外科ガイダンスシステムであって、前記外科ガイダンスシステムが、
    複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、
    前記術後フィードバックデータに基づいて機械学習モデルをトレーニングし、
    定義された患者を特徴付ける前記分散型ネットワークコンピュータの1つから術前データを取得し、
    前記機械学習モデルによる前記術前データの処理に基づいて、前記定義された患者の外科手術計画を生成し、
    ユーザによるレビューのために、前記外科手術計画をディスプレイデバイスに提供するように構成された外科ガイダンスシステム。
  2. 前記機械学習モデルが、
    前記術前データを処理して、インプラントデバイス、前記定義された患者への前記インプラントデバイスの埋め込みの姿勢、および前記インプラントデバイスの前記埋め込み後に前記定義された患者の予測された術後パフォーマンスメトリックを識別する前記外科手術計画を出力するように構成される、請求項1に記載の外科ガイダンスシステム。
  3. 前記機械学習モデルが
    前記定義された患者に前記インプラントデバイスの前記埋め込みのための切除面の姿勢を識別して前記外科手術計画を生成するようにさらに構成される、請求項2に記載の外科ガイダンスシステム。
  4. 前記切除面の前記姿勢を示すデータを、前記定義された患者のオーバーレイとして拡張現実(XR)ヘッドセット内の前記ディスプレイデバイスを通して表示される前記切除面の前記姿勢のグラフィック表現を生成するコンピュータプラットフォームに提供するようにさらに構成される、請求項3の外科ガイダンスシステム。
  5. 前記切除面の前記姿勢を示すデータを、外科手術ロボットの少なくとも1つのコントローラに提供して、前記外科手術ロボットのアームに取り付けられた外科手術鋸の一連の動きを制御して、前記外科手術鋸の切断面が、前記切除面の前記姿勢と順次位置決めするようにさらに構成される、請求項3の外科ガイダンスシステム。
  6. 関節運動測定と、
    軟組織バランス測定と、
    変形矯正測定と、
    関節線測定と、
    患者報告アウトカム指標とのうちの少なくとも1つを含む前記術後フィードバックデータに基づいて前記機械学習モデルをトレーニングするようにさらに構成される、請求項1に記載の外科ガイダンスシステム。
  7. 術後段階と比較した術前段階での前記定義された患者の関節運動測定値間の偏差を示すデータと、
    術後段階と比較した術前段階での前記定義された患者の組織バランス測定値間の偏差を示すデータと、
    術後段階で前記定義された患者に対して測定された変形矯正と比較した術前段階での前記定義された患者に対して計画された変形矯正との間の偏差を示すデータと、
    術後段階と比較した術前段階での前記定義された患者の関節線測定値間の偏差を示すデータとのうちの少なくとも1つに基づいて前記機械学習モデルをトレーニングするようにさらに構成される、請求項1に記載の外科ガイダンスシステム。
  8. 外科手術計画によって定義された外科手術鋸切断面からの手術中に測定された外科手術鋸切断面の偏差を示すデータと、
    外科手術計画によって定義された外科手術鋸の動きからの手術中の外科手術鋸の動きの測定値の偏差を示すデータと、
    外科手術計画によって定義されたインプラントデバイスサイズからの手術中に患者に埋め込まれるインプラントデバイスサイズの偏差を示すデータと、
    外科手術計画によって定義されたインプラントデバイスの姿勢からの手術中の患者への埋め込み後のインプラントデバイスの姿勢の偏差を示すデータとのうちの少なくとも1つを含む前記術後フィードバックデータに基づいて前記機械学習モデルをトレーニングするようにさらに構成される、請求項1に記載の外科ガイダンスシステム。
  9. 定義されたルールを満たす類似性を有する前記術後フィードバックデータのサブセットを形成し、
    各前記サブセット内で、前記術後フィードバックデータの少なくともいくつかの値の間の相関を識別し、
    前記サブセットごとに識別された前記相関に基づいて、前記機械学習モデルをトレーニングするようにさらに構成される、請求項1に記載の外科ガイダンスシステム。
  10. 前記機械学習モデルが、
    入力ノードを有する入力層、それぞれが複数の結合ノードを有する一連の隠れ層、および出力ノードを有する出力層を含むニューラルネットワークコンポーネントと、
    前記ニューラルネットワークモデルの前記入力ノードの異なるエントリに前記術前データの異なるエントリを提供し、前記ニューラルネットワークコンポーネントの出力ノードの出力に基づいて前記外科手術計画を生成するように構成された少なくとも1つの処理回路と、を備える、請求項1に記載の外科ガイダンスシステム。
  11. 前記術後フィードバックデータの値に基づいて、前記ニューラルネットワークコンポーネントの前記結合ノードによって使用される重みおよび/または発火しきい値を適応させるように構成されるフィードバックトレーニングコンポーネントをさらに備える、請求項10に記載の外科ガイダンスシステム。
  12. 前記機械学習モデルが、
    前記定義された患者の関節運動測定と、
    前記定義された患者の軟組織バランス測定と、
    前記定義された患者の変形矯正測定と、
    前記定義された患者の関節線測定とのうちの少なくとも1つを含む前記術前データの処理に基づいて前記外科手術計画を生成するように構成される、請求項1に記載の外科ガイダンスシステム。
  13. 前記機械学習モデルが、
    前記定義された患者の解剖学的ランドマーク位置と、
    前記定義された患者の前方基準点と、
    前記定義された患者の解剖学的寸法とのうちの少なくとも1つを含む前記術前データの処理に基づいて前記外科手術計画を生成するように構成される、請求項1に記載の外科ガイダンスシステム。
  14. 前記解剖学的ランドマーク位置は、股関節中心、膝中心、および足首中心の位置を識別し、
    前記前方基準点は、近位脛骨機械的軸点および脛骨プラトーレベルを識別し、
    前記解剖学的寸法は、脛骨プラトーサイズおよび大腿骨サイズを識別する、請求項13に記載の外科ガイダンスシステム。
  15. 外科手術システムであって、
    手術中のコンピュータ支援ナビゲーションのための外科ガイダンスシステムであって、前記外科ガイダンスシステムが、
    複数の患者の手術結果に関して分散型ネットワークコンピュータによって提供される術後フィードバックデータを取得し、
    前記術後フィードバックデータに基づいて機械学習モデルをトレーニングし、
    定義された患者を特徴付ける前記分散型ネットワークコンピュータの1つから術前データを取得し、前記機械学習モデルによる前記術前データの処理に基づいて前記定義された患者の外科手術計画を生成するように構成された外科ガイダンスシステムと、
    外科手術鋸によって切断される前記定義された患者の解剖学的構造の姿勢を決定し、前記外科手術鋸の姿勢を決定するように構成された追跡システムと、
    前記外科ガイダンスシステムから前記外科計画を取得し、前記解剖学的構造が切断される場所を定義する前記外科計画に基づいて、および前記解剖学的構造の前記姿勢に基づいて、目標面の姿勢を決定し、ならびに前記目標面の前記姿勢と前記外科手術鋸の前記姿勢との比較に基づいて操縦情報を生成するように構成される少なくとも1つのコントローラと、を備え、前記操縦情報は、前記外科手術鋸の切断面を配置して前記目標面と位置合わせするために前記外科手術鋸を移動する必要がある場所を示す、外科手術システム。
  16. 少なくとも1つのシースルーディスプレイデバイスを含む拡張現実(XR)ヘッドセットをさらに備え、
    前記少なくとも1つのコントローラは、前記XRヘッドセットの前記少なくとも1つのシースルーディスプレイデバイスに提供される前記操縦情報のグラフィック表現を生成して、前記外科手術鋸の切断面を配置して前記目標面と位置決めするように、前記外科手術鋸のオペレータの動きを誘導するように構成される、請求項15に記載の外科手術システム。
  17. 外科手術ロボットであって、
    ロボット基部と、
    前記ロボット基部に接続され、前記ロボットアームに接続された前記外科手術鋸を配置するように構成されたロボットアームと、
    前記ロボット基部に対して前記ロボットアームを移動させるように動作可能に接続された少なくとも1つのモータと、を含む、外科手術ロボットをさらに備え、
    前記少なくとも1つのコントローラは、前記操縦情報に基づいて前記少なくとも1つのモータの動きを制御して、前記外科手術鋸の前記切断面が前記目標面と位置決めするように前記外科手術鋸を再配置するように構成される、請求項15に記載の外科手術システム。
  18. 前記機械学習モデルが、
    前記術前データを処理して、インプラントデバイス、前記定義された患者への前記インプラントデバイスの前記埋め込みのため切除面の姿勢、および前記インプラントデバイスの前記埋め込み後に前記定義された患者の予測された術後パフォーマンスメトリックを識別する前記外科手術計画を出力するように構成される、請求項15に記載の外科手術システム。
  19. 前記外科ガイダンスシステムが、
    術後段階と比較した術前段階での前記定義された患者の関節運動測定値間の偏差を示すデータと、
    術後段階と比較した術前段階での前記定義された患者の組織バランス測定値間の偏差を示すデータと、
    術後段階で前記定義された患者に対して測定された変形矯正と比較した術前段階での前記定義された患者に対して計画された変形矯正との間の偏差を示すデータと、
    術後段階と比較した術前段階での前記定義された患者の関節線測定値間の偏差を示すデータとのうちの少なくとも1つに基づいて前記機械学習モデルをトレーニングするようにさらに構成される、請求項15に記載の外科手術システム。
  20. 前記外科ガイダンスシステムが、
    外科手術計画によって定義された外科手術鋸切断面からの手術中に測定された外科手術鋸切断面の偏差を示すデータと、
    外科手術計画によって定義された外科手術鋸の動きからの手術中の外科手術鋸の動きの測定値の偏差を示すデータと、
    外科手術計画によって定義されたインプラントデバイスサイズからの手術中に患者に埋め込まれるインプラントデバイスサイズの偏差を示すデータと、
    外科手術計画によって定義されたインプラントデバイスの姿勢からの手術中の患者への埋め込み後のインプラントデバイスの姿勢の偏差を示すデータとのうちの少なくとも1つを含む前記術後フィードバックデータに基づいて前記機械学習モデルをトレーニングするようにさらに構成される、請求項15に記載の外科手術システム。
  21. 前記機械学習モデルが、
    前記定義された患者の関節運動測定と、
    前記定義された患者の軟組織バランス測定と、
    前記定義された患者の変形矯正測定と、
    前記定義された患者の関節線測定と、
    前記定義された患者の解剖学的ランドマーク位置と、
    前記定義された患者の前方基準点と、
    前記定義された患者の解剖学的寸法とのうちの少なくとも1つを含む前記術前データの処理に基づいて前記外科手術計画を生成するように構成される、請求項15に記載の外科手術システム。

JP2021099220A 2020-06-16 2021-06-15 ナビゲートされた整形外科手術のための機械学習システム Pending JP2021194544A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/902,370 US20210391058A1 (en) 2020-06-16 2020-06-16 Machine learning system for navigated orthopedic surgeries
US16/902,370 2020-06-16

Publications (1)

Publication Number Publication Date
JP2021194544A true JP2021194544A (ja) 2021-12-27

Family

ID=76444258

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021099220A Pending JP2021194544A (ja) 2020-06-16 2021-06-15 ナビゲートされた整形外科手術のための機械学習システム

Country Status (4)

Country Link
US (1) US20210391058A1 (ja)
EP (1) EP3926639A1 (ja)
JP (1) JP2021194544A (ja)
CN (1) CN113796956A (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110191678A (zh) * 2017-02-02 2019-08-30 史密夫和内修有限公司 用于使用机器学习进行术中韧带平衡的技术
US11986251B2 (en) 2019-09-13 2024-05-21 Treace Medical Concepts, Inc. Patient-specific osteotomy instrumentation
US11931106B2 (en) 2019-09-13 2024-03-19 Treace Medical Concepts, Inc. Patient-specific surgical methods and instrumentation
US20220241014A1 (en) * 2021-02-01 2022-08-04 Mazor Robotics Ltd. Systems and methods for predicting surgical outcomes
US20220346882A1 (en) * 2021-05-03 2022-11-03 Mazor Robotics Ltd. Devices, methods, and systems for robot-assisted surgery
US20230233258A1 (en) * 2022-01-26 2023-07-27 Polarisar, Inc. Augmented reality systems and methods for surgical planning and guidance using removable resection guide marker
DE102022111285A1 (de) * 2022-05-06 2023-11-09 Aesculap Ag Integrierte Therapiekette
US20240029881A1 (en) * 2022-07-15 2024-01-25 Optum, Inc. Planning system based on risks of surgical error
US11547486B1 (en) * 2022-08-03 2023-01-10 Ix Innovation Llc Digital image analysis for robotic installation of surgical implants

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020037308A1 (en) * 2018-08-17 2020-02-20 Smith & Nephew, Inc. Patient-specific surgical method and system

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10991070B2 (en) * 2015-12-18 2021-04-27 OrthoGrid Systems, Inc Method of providing surgical guidance
EP3551098B1 (en) * 2016-12-08 2024-03-20 Orthotaxy Surgical system for cutting an anatomical structure according to at least one target cutting plane
EP3568773A4 (en) * 2017-01-12 2020-11-04 Mazor Robotics Ltd. IMAGE-BASED PATHOLOGY PREDICTION USING ARTIFICIAL INTELLIGENCE
US11967422B2 (en) * 2018-03-05 2024-04-23 Medtech S.A. Robotically-assisted surgical procedure feedback techniques
EP3810015A1 (en) * 2018-06-19 2021-04-28 Tornier, Inc. Mixed-reality surgical system with physical markers for registration of virtual models
WO2020123705A1 (en) * 2018-12-12 2020-06-18 Tornier, Inc. Soft tissue structure determination from ct images
US20220084651A1 (en) * 2018-12-21 2022-03-17 Smith & Nephew, Inc. Methods and systems for providing an episode of care
CN113473936A (zh) * 2019-02-05 2021-10-01 史密夫和内修有限公司 机器人手术数据用于长期护理期
US10779890B2 (en) * 2019-02-27 2020-09-22 Jared Weir System and method for performing joint replacement surgery using artificial neural network
US11877801B2 (en) * 2019-04-02 2024-01-23 Medicrea International Systems, methods, and devices for developing patient-specific spinal implants, treatments, operations, and/or procedures
US20220249168A1 (en) * 2019-06-28 2022-08-11 Formus Labs Limited Orthopaedic pre-operative planning system
AU2020358717B2 (en) * 2019-10-02 2024-04-11 Encore Medical, Lp Dba Djo Surgical Systems and methods for reconstruction and characterization of physiologically healthy and physiologically defective anatomical structures to facilitate preoperative surgical planning
US20220351828A1 (en) * 2019-10-03 2022-11-03 Howmedica Osteonics Corp. Cascade of machine learning models to suggest implant components for use in orthopedic joint repair surgeries

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020037308A1 (en) * 2018-08-17 2020-02-20 Smith & Nephew, Inc. Patient-specific surgical method and system

Also Published As

Publication number Publication date
CN113796956A (zh) 2021-12-17
US20210391058A1 (en) 2021-12-16
EP3926639A1 (en) 2021-12-22

Similar Documents

Publication Publication Date Title
EP3926639A1 (en) Machine learning system for navigated orthopedic surgeries
CN113749769B (zh) 外科手术引导系统
JP7204663B2 (ja) 慣性計測装置を使用して手術の正確度を向上させるためのシステム、装置、及び方法
JP7157111B2 (ja) 受動的なエンドエフェクタを有する外科手術ロボット
JP7253377B2 (ja) 自動化された関節形成プランニング
US11864857B2 (en) Surgical robot with passive end effector
JP7263300B2 (ja) 受動的なエンドエフェクタを有する外科手術ロボット
US11844532B2 (en) Rotary motion passive end effector for surgical robots in orthopedic surgeries
US20200289050A1 (en) Systems and methods for robotic soft tissue evaluation
JP7291170B2 (ja) ピンガイドドライバをナビゲートするためのシステムおよび方法
JP2021171657A (ja) 手術中の支援されたナビゲーションのための拡張現実ヘッドセットのカメラによって追跡された参照アレイを備えた手術器具の位置合わせ
US20210093333A1 (en) Systems and methods for fixating a navigation array
US20200289208A1 (en) Method of fluoroscopic surgical registration
Zheng et al. Computer-aided orthopaedic surgery: state-of-the-art and future perspectives
JP2023514042A (ja) 関節伸張システム
CN114730484A (zh) 根据二维图像数据的三维选择性骨匹配
JP2023001903A (ja) ロボット外科手術システムのためのエンドエフェクタアームの重力補償
JP7265596B2 (ja) ロボット支援膝関節置換手術のためのシステム
US20220015773A1 (en) Systems and methods for robot-assisted knee arthroplasty surgery
EP3977949A1 (en) Systems and methods for fixating a navigation array
US12121240B2 (en) Rotary motion passive end effector for surgical robots in orthopedic surgeries
US20220257263A1 (en) Systems and methods for navigating a pin guide driver
Thomas Real-time Navigation Procedure for Robot-assisted Surgery
Raczkowsky et al. Karlsruhe Surgical Robotics Research

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210615

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220517

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20230525

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20230613

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20230707