JP2024530424A - ユーザの必要性にカスタム化されたデータをオーバーレイするためのｏｒ内のオブジェクト及び人員のハブ識別及び追跡 - Google Patents

ユーザの必要性にカスタム化されたデータをオーバーレイするためのｏｒ内のオブジェクト及び人員のハブ識別及び追跡 Download PDF

Info

Publication number
JP2024530424A
JP2024530424A JP2024503656A JP2024503656A JP2024530424A JP 2024530424 A JP2024530424 A JP 2024530424A JP 2024503656 A JP2024503656 A JP 2024503656A JP 2024503656 A JP2024503656 A JP 2024503656A JP 2024530424 A JP2024530424 A JP 2024530424A
Authority
JP
Japan
Prior art keywords
surgical
hub
display
data
operating room
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2024503656A
Other languages
English (en)
Inventor
シェルトン・ザ・フォース・フレデリック・イー
アロンホルト・テイラー
フィービッグ・ケビン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cilag GmbH International
Original Assignee
Cilag GmbH International
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cilag GmbH International filed Critical Cilag GmbH International
Priority claimed from PCT/IB2022/056671 external-priority patent/WO2023002385A1/en
Publication of JP2024530424A publication Critical patent/JP2024530424A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00011—Operational features of endoscopes characterised by signal transmission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/00048—Constructional features of the display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A61B1/00149—Holding or positioning arrangements using articulated arms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A61B1/0016—Holding or positioning arrangements using motor drive units
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/1206—Generators therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B34/32—Surgical robots operating autonomously
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B34/37—Master-slave robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/08—Accessories or related features not otherwise provided for
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/0265—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric the criterion being a learning criterion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/40—Bus structure
    • G06F13/4063—Device-to-bus coupling
    • G06F13/4068—Electrical coupling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/211—Schema design and management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • G06F16/285—Clustering or classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00—Computing arrangements using knowledge-based models
    • G06N5/01—Dynamic search techniques; Heuristics; Dynamic trees; Branch-and-bound
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N7/00—Computing arrangements based on specific mathematical models
    • G06N7/01—Probabilistic graphical models, e.g. probabilistic networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/30—Administration of product recycling or disposal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22—Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/40—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/22—Arrangements for detecting or preventing errors in the information received using redundant apparatus to increase reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0876—Aspects of the degree of configuration automation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63—Routing a service request depending on the request content or context
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/14—Multichannel or multilink protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/046—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for infrared imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/068—Surgical staplers, e.g. containing multiple staples or clamps
    • A61B17/072—Surgical staplers, e.g. containing multiple staples or clamps for applying a row of staples in a single action, e.g. the staples being applied simultaneously
    • A61B17/07207—Surgical staplers, e.g. containing multiple staples or clamps for applying a row of staples in a single action, e.g. the staples being applied simultaneously the staples being applied sequentially
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/32—Surgical cutting instruments
    • A61B17/320068—Surgical cutting instruments using mechanical vibrations, e.g. ultrasonic
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/14—Probes or electrodes therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00115—Electrical control of surgical instruments with audible or visual output
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00199—Electrical control of surgical instruments with a console, e.g. a control panel with a display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00203—Electrical control of surgical instruments with speech control or speech recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00207—Electrical control of surgical instruments with hand gesture control or hand gesture recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00216—Electrical control of surgical instruments with eye tracking or head position tracking control
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00221—Electrical control of surgical instruments with wireless transmission of data, e.g. by infrared radiation or radiowaves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00225—Systems for controlling multiple different instruments, e.g. microsurgical systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00367—Details of actuation of instruments, e.g. relations between pushing buttons, or the like, and activation of the tool, working tip, or the like
    • A61B2017/00398—Details of actuation of instruments, e.g. relations between pushing buttons, or the like, and activation of the tool, working tip, or the like using powered actuators, e.g. stepper motors, solenoids
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00681—Aspects not otherwise provided for
    • A61B2017/00734—Aspects not otherwise provided for battery operated
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/068—Surgical staplers, e.g. containing multiple staples or clamps
    • A61B17/072—Surgical staplers, e.g. containing multiple staples or clamps for applying a row of staples in a single action, e.g. the staples being applied simultaneously
    • A61B2017/07214—Stapler heads
    • A61B2017/07257—Stapler heads characterised by its anvil
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/068—Surgical staplers, e.g. containing multiple staples or clamps
    • A61B17/072—Surgical staplers, e.g. containing multiple staples or clamps for applying a row of staples in a single action, e.g. the staples being applied simultaneously
    • A61B2017/07214—Stapler heads
    • A61B2017/07285—Stapler heads characterised by its cutter
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00636—Sensing and controlling the application of energy
    • A61B2018/00696—Controlled or regulated parameters
    • A61B2018/00702—Power or energy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00994—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body combining two or more different kinds of non-mechanical energy or combining one or more non-mechanical energies with ultrasound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/1206—Generators therefor
    • A61B2018/1246—Generators therefor characterised by the output polarity
    • A61B2018/1253—Generators therefor characterised by the output polarity monopolar
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/1206—Generators therefor
    • A61B2018/1246—Generators therefor characterised by the output polarity
    • A61B2018/126—Generators therefor characterised by the output polarity bipolar
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2048—Tracking techniques using an accelerometer or inertia sensor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2059—Mechanical position encoders
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2063—Acoustic tracking systems, e.g. using ultrasound
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2072—Reference field transducer attached to an instrument or patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/252—User interfaces for surgical systems indicating steps of a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/254—User interfaces for surgical systems being adapted depending on the stage of the surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/258—User interfaces for surgical systems providing specific settings for specific users
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06—Measuring instruments not otherwise provided for
    • A61B2090/064—Measuring instruments not otherwise provided for for measuring force, pressure or mechanical tension
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/371—Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/372—Details of monitor hardware
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/373—Surgical systems with images on a monitor during operation using light, e.g. by using optical scanners
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50—Supports for surgical instruments, e.g. articulated arms
    • A61B2090/502—Headgear, e.g. helmet, spectacles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2218/00—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2218/001—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body having means for irrigation and/or aspiration of substances to and/or from the surgical site
    • A61B2218/002—Irrigation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2218/00—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2218/001—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body having means for irrigation and/or aspiration of substances to and/or from the surgical site
    • A61B2218/007—Aspiration
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2218/00—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2218/001—Details of surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body having means for irrigation and/or aspiration of substances to and/or from the surgical site
    • A61B2218/007—Aspiration
    • A61B2218/008—Aspiration for smoke evacuation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0223—Magnetic field sensors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/06—Measuring blood flow
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A61B90/94—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text
    • A61B90/96—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text using barcodes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A61B90/98—Identification means for patients or instruments, e.g. tags using electromagnetic means, e.g. transponders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00—ICT specially adapted for the handling or processing of medical references
    • G16H70/20—ICT specially adapted for the handling or processing of medical references relating to practices or guidelines
    • H—ELECTRICITY
    • H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
    • H02J7/00—Circuit arrangements for charging or depolarising batteries or for supplying loads from batteries
    • H02J7/0063—Circuit arrangements for charging or depolarising batteries or for supplying loads from batteries with circuits adapted for supplying loads from the battery
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40—Bus networks
    • H04L12/40169—Flexible bus arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/42—Loop networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/44—Star or tree networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46—Interconnection of networks
    • H04L12/4604—LAN interconnection over a backbone network, e.g. Internet, Frame Relay
    • H04L12/462—LAN interconnection over a bridge based backbone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0213—Standardised network management protocols, e.g. simple network management protocol [SNMP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/147—Network analysis or design for predicting network behaviour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Signal Processing (AREA)
  • Pathology (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Radiology & Medical Imaging (AREA)
  • Software Systems (AREA)
  • Robotics (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Resources & Organizations (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)

Abstract

医療提供者（ＨＣＰ）にデータオーバーレイを提供する外科用ハブのためのシステム、方法、及び／又は手段が提供され得る。外科用オブジェクトの状態及び／又は外科用オブジェクトが位置する手術室の領域が決定され得る。外科用オブジェクトが位置する手術室の領域を決定することは、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、及び／又は手術室内のカメラからのビデオを使用することを含んでもよい。外科用オブジェクト及び／又は手術室の領域に関連付けられた時間が決定され得る。外科用オブジェクトの状態は、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すように決定され得る。

Description

（関連出願の相互参照）
本出願は、２０２１年７月２２日に出願された米国特許仮出願第６３／２２４，８１３号の利益を主張するものであり、その開示は、参照によりその全体が本明細書に組み込まれる。
本出願は、同時に出願された以下の出願に関連し、その各々の内容は、参照により本明細書に組み込まれる：
・ＭＥＴＨＯＤ ＯＦ ＳＵＲＧＩＣＡＬ ＳＹＳＴＥＭ ＰＯＷＥＲ ＭＡＮＡＧＥＭＥＮＴ，ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＰＲＯＣＥＳＳＩＮＧ，ＳＴＯＲＡＧＥ，ＡＮＤ ＤＩＳＰＬＡＹと題され、２０２１年７月２３日に出願された米国特許出願第１７／３８４２７４号、代理人整理番号ＥＮＤ９３４０ＵＳＮＰ１
・ＣＯＮＦＩＧＵＲＡＴＩＯＮ ＯＦ ＴＨＥ ＤＩＳＰＬＡＹ ＳＥＴＴＩＮＧＳ ＡＮＤ ＤＩＳＰＬＡＹＥＤ ＩＮＦＯＲＭＡＴＩＯＮ ＢＡＳＥＤ ＯＮ ＴＨＥ ＲＥＣＯＧＮＩＴＩＯＮ ＯＦ ＴＨＥ ＵＳＥＲ ＡＮＤ ＡＷＡＲＥＮＥＳＳ ＯＦ ＰＲＯＣＥＤＵＲＥ，ＬＯＣＡＴＩＯＮ ＯＲ ＵＳＡＧＥと題され、２０２１年７月２３日に出願された米国特許出願第１７／３８４５５３号、代理人整理番号ＥＮＤ９３４０ＵＳＮＰ１４
外科手技は、典型的には、例えば、病院などの医療施設内の手術室又は部屋で実行される。様々な外科用デバイス及びシステムが、外科手技の実行に利用される。デジタル情報時代において、医療システム及び医療施設は、多くの場合、患者の安全性及び従来の慣行を維持するための一般的な要望により、より新しい技術及び改良された技術を利用してシステム又は手技を実施することがより遅い。
医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブは、プロセッサであって、外科用オブジェクトの状態及び外科用オブジェクトが位置する手術室の領域を決定し、医療処置中に外科用オブジェクトを使用する手術タスクを決定し、オブジェクトの状態、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、任意選択で、ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知をＨＣＰに送信させるように構成されたプロセッサを備えてもよく、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
プロセッサは、ディスプレイがＨＣＰの位置からある距離内にあることを決定するように更に構成されてもよい。
手術室の領域は、ストック領域、メイヨースタンド、手術部位、滅菌野、又は非滅菌野のうちの少なくとも１つであってもよい。
プロセッサは、タスク又は医療処置のうちの少なくとも１つの間に外科用オブジェクトが手術室の領域に入ったことを決定するように更に構成されてもよい。
プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すことを決定するように更に構成されてもよい。
プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用されるために準備されていないことを示すことを決定するように更に構成されてもよく、コンテキストデータは、手術タスクにおいて使用されるように外科用オブジェクトを準備するための１つ又は２つ以上の命令を更に含む。
ディスプレイは、ルームディスプレイ、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、又はスマートフォンのうちの少なくとも１つであってもよい。
医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブは、プロセッサであって、医療処置中に外科用オブジェクトを使用する手術タスクを決定し、外科用オブジェクトが位置する手術室の領域を決定し、外科用オブジェクト及び手術室の領域に関連付けられた時間を決定し、時間、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、任意選択で、ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知をＨＣＰに送信させるように構成されたプロセッサを備えてもよく、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
プロセッサは、外科用オブジェクトが位置する手術室の領域が、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、外科用オブジェクトに関連付けられたセンサデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、又は手術室内のカメラからのビデオのうちの少なくとも１つを使用することを含むことを決定するように更に構成されてもよい。
プロセッサは、外科用オブジェクトが位置する手術室の領域に基づいて、外科用オブジェクトが手術室に入ったことを決定するように更に構成されてもよく、時間は、外科用オブジェクトが手術室に入ったときを示す。
プロセッサは、外科用オブジェクトが手術室の領域を出たことを決定するように更に構成されてもよく、時間は、外科用オブジェクトが領域を出たときを示してもよい。
プロセッサは、外科用オブジェクトが患者に保持されていないことを決定するように更に構成されてもよく、コンテキストデータは、外科用オブジェクトが患者に保持されていないという指示を含んでもよい。
コンテキストデータは、外科用オブジェクトが使用されたという指示を更に含んでもよく、外科用オブジェクトを洗浄するための命令、又は外科用オブジェクトを処分するための命令のうちの少なくとも１つを含んでもよい。
外科用オブジェクトは、パッケージを備えてもよく、プロセッサは、パッケージがその時間に領域で開封されたことを決定し、メッセージをデータベースに送信するように更に構成されてもよく、メッセージは、パッケージが開封されたことを示し、外科用オブジェクトが在庫から除去されるべきであることを示す。
医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブは、プロセッサであって、医療処置中に手術タスクを実行するために使用される外科用器具を決定し、外科用器具に関連付けられた手術室の領域及び外科用器具の向きを決定し、手術タスク、手術室の領域、及び外科用器具の向きに基づいてコンテキストデータを決定し、任意選択で、ＨＣＰに関連付けられたディスプレイを決定し、メッセージをディスプレイに送信することによって、通知をＨＣＰに送信させるように構成されたプロセッサを備えてもよく、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
外科用器具は、基準マーカを備えてもよく、プロセッサは、基準マーカを使用して外科用器具を決定するように更に構成されてもよい。
コンテキストデータは、器具の画像及びステータスを含んでもよく、メッセージは、器具の画像及びステータスがディスプレイ上に示されている表示データ上にオーバーレイされることを更に示してもよい。
手術室の領域はストック領域であってもよく、メッセージは、ＨＣＰをストック領域の外科用器具にガイドする、ＨＣＰへの通知を更に含んでもよい。
外科用ハブは、コンテキストデータが、外科用器具の向きが改善され得ることを含むことを決定するように更に構成されてもよく、コンテキストデータは、外科用器具の向きを改善するためのＨＣＰへの命令を含んでもよい。
プロセッサは、ＨＣＰに関連付けられたディスプレイの能力を決定するように更に構成されてもよく、プロセッサは、ディスプレイの能力に基づいてコンテキストデータを変更するように更に構成されてもよい。
コンテキストデータは、データオーバーレイとしてディスプレイ上に表示されてもよい。
通知は、音声メッセージとしてＨＣＰに送信されるようにしてもよい。
医療提供者（ＨＣＰ）にデータオーバーレイを提供する外科用ハブのためのシステム、方法、及び／又は手段が提供され得る。外科用オブジェクトの状態及び／又は外科用オブジェクトが位置する手術室の領域が決定され得る。外科用オブジェクトが位置する手術室の領域を決定することは、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、及び／又は手術室内のカメラからのビデオを使用することを含んでもよい。外科用オブジェクト及び／又は手術室の領域に関連付けられた時間が決定され得る。外科用オブジェクトの状態は、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すように決定され得る。
医療処置中に外科用オブジェクトを使用する手術タスクが決定され得る。タスク及び／又は医療処置中に手術室の領域に入る外科用オブジェクトが決定され得る。例では、外科用オブジェクトが手術室に入ったことを決定することは、外科用オブジェクトが位置する手術室の領域に基づき得る。時間は、外科用オブジェクトが手術室に入ったときを示し得る。例では、外科用オブジェクトが手術室の領域を出たことが決定され得る。時間は、外科用オブジェクトが領域を出たときを示し得る。
ディスプレイを構成する外科用ハブのためのシステム、方法、及び／又は手段が提供され得る。例では、医療提供者（ＨＣＰ）及び／又は医療器具が、手術室内で追跡され得る。例では、第１のＨＣＰ及び第２のＨＣＰは、手術室内で追跡され得る。例では、ＨＣＰ及び／又は患者は、手術室内で追跡され得る。医療処置中に医療器具を使用する手術タスクが決定され得る。
ディスプレイのためのディスプレイ構成は、例えば、手術タスク及び／又はＨＣＰと医療器具との間の相互作用に基づいて決定され得る。例では、第１のディスプレイ構成は、ＨＣＰと医療器具との間の第１の相互作用に基づいて決定され得る。例えば、第２の相互作用は、ＨＣＰと医療器具との間、ＨＣＰとディスプレイとの間、及び／又はＨＣＰと患者との間で決定され得る。ディスプレイ構成は、第２の相互作用に基づいて変更されてもよい。ディスプレイのためのディスプレイ構成は、手術タスク及び第１のＨＣＰと第２のＨＣＰとの間の相互作用に基づいて決定され得る。例えば、第１のＨＣＰと第２のＨＣＰとの間の相互作用は、バーバルコミュニケーションであってもよい。バーバルコミュニケーションは、手術タスクを実行する際に第２のＨＣＰからの支援を求める第１のＨＣＰからの要求であると決定され得る。ディスプレイ構成は、ディスプレイ構成が、第２のＨＣＰに関連する１つ又は２つ以上の選好を用いてディスプレイを構成し得るように変更され得る。
コンピュータ実装外科用システムのブロック図である。 コンピュータ実装多層外科用システムのブロック図である。 外科用システムの制御プレーン及びデータプレーンを示す論理図である。 手術室における例示的な外科用システムを示す。 様々なシステムとペアリングされた例示的な外科用ハブを例示する。 感知システムのセット、環境感知システム、デバイスのセットなどと接続するように構成された通信外科用ハブのセットを有する外科用データネットワークを例示する。 外科用システムの一部であってもよい、例示的なコンピュータ実装双方向外科用システムを例示する。 外科用器具の制御システムの論理図を例示する。 コントローラ及びモータを有するハンドル、ハンドルに解放可能に連結されたアダプタ、及びアダプタに解放可能に連結された装填ユニットを含む、例示的な外科用システムを示す。 例示的な状況認識外科用システムを示す。 外科用ハブのディスプレイを例示する。 外科用ハブの例示的な一次ディスプレイを例示する。 処置中の４つの別個の時間における手術部位の４つの広角ビュー画像の図を例示する。 本開示の少なくとも１つの態様による、第１の情報層をオーバーレイする第２の情報層を例示する。 本開示の少なくとも１つの態様による、外科医が安全眼鏡を着用している状態で、外科手技中にハンドル組立体ハウジングと無線回路基板とを含む外科用器具を使用している外科医の斜視図を図示する。 本開示の少なくとも１つの態様による、外科用ハブと手術室壁との間の距離を決定するための手術室壁の超音波ピング送出を例示する。 本開示の少なくとも１つの態様による、手術室の境界内に位置する外科用システムの外科用デバイスとの外科用ハブペアリングのための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成及び切断するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、新しいデバイスを検出した後の手術室の境界を選択的に再評価するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、ペアリングされたデバイスの接続解除後の手術室の境界を選択的に再評価するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、外科用ハブの位置の変化を検出した後に外科用ハブによって手術室の境界を再評価するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成及び切断するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。 本開示の少なくとも１つの態様による、外科用システムを介して手術室で実施される外科手技の部分的な人為的な予定表を例示する。 本開示の少なくとも１つの態様による、例示的な手術室（ＯＲ）セットアップの図である。 患者、医療提供者、外科用オブジェクト、手術プロジェクト、及び／又は外科用器具を追跡するための外科用ハブを含み得る、ＯＲの図を図示する。 外科ＯＲ内のオブジェクト及び人員の空間認識に基づいて変化し得る、適応及び／又は制御を提供するために、外科用ハブによって行われ得る方法を図示する。 ユーザ、機器、並びに／又は使用及びユーザ若しくは機器の必要性の認識に基づき得る、適応制御、ディスプレイの動作、及び／又はディスプレイ相互作用を提供するために、外科用ハブによって行われ得る方法を図示する。
本願の出願人は、以下の米国特許出願を所有しており、これらの各々は、参照によりその全体が本明細書に組み込まれる。
・ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＰＡＴＩＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ ＤＥＴＥＲＭＩＮＥ ＤＥＶＩＣＥＳ ＩＮ ＯＰＥＲＡＴＩＮＧ ＴＨＥＡＴＥＲと題され、２０１８年３月２９日に出願された米国特許出願公開第２０１９－０２０１１０４（Ａ１）号（米国特許出願第１５／９４０６７１号、代理人整理番号ＥＮＤ８５０２ＵＳＮＰ）
・ＳＵＲＧＩＣＡＬ ＡＰＰＡＲＡＴＵＳ ＷＩＴＨ ＩＮＤＩＣＡＴＯＲと題され、２０１６年３月１５日に発行された、米国特許第９２８３０５４号（米国特許出願第１３／９７４２０８号、代理人整理番号ＥＮＤ７３０４ＵＳＮＰ）
・ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＷＩＴＨ ＳＡＦＥＴＹ ＧＬＡＳＳＥＳと題され、２０１５年４月２１日に発行された、米国特許第９０１１４２７号（米国特許出願第１３／２７６６８７号、代理人整理番号ＥＮＤ６８９５ＵＳＮＰ２７）
・ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＩＴＵＡＴＩＯＮＡＬ ＡＷＡＲＥＮＥＳＳと題され、２０１８年３月２９日に出願された、米国特許出願公開第２０１９－０２０１１４０（Ａ１）号（米国特許出願第１５／９４０６５４号、代理人整理番号ＥＮＤ８５０１ＵＳＮＰ）、及び
・ＩＭＡＧＥ ＣＡＰＴＵＲＩＮＧ ＯＦ ＴＨＥ ＡＲＥＡＳ ＯＵＴＳＩＤＥ ＴＨＥ ＡＢＤＯＭＥＮ ＴＯ ＩＭＰＲＯＶＥ ＰＬＡＣＥＭＥＮＴ ＡＮＤ ＣＯＮＴＲＯＬ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＩＮ ＵＳＥと題され、２０１８年１１月６日に出願された、米国特許出願公開第２０１９－０２０１１２９（Ａ１）号（米国特許出願第１６／１８２２６９号、代理人整理番号ＥＮＤ９０１８ＵＳＮＰ３）。
図１Ａは、コンピュータ実装の患者及び外科用システム２００００のブロック図である。外科用システム２００００などの例示的な外科用システムは、１つ又は２つ以上の外科用システム（例えば、外科用サブシステム）２０００２、２０００３、及び２０００４を含むことができる。例えば、各外科用システム２０００２は、コンピュータ実装双方向外科用システムを含み得る。例えば、外科用システム２０００２は、例えば図２に記載されるように、クラウドコンピューティングシステム２０００８と通信する外科用ハブ２０００６及び／又はコンピューティングデバイス２００１６を含んでもよい。クラウドコンピューティングシステム２０００８は、少なくとも１つのリモートクラウドサーバ２０００９と、少なくとも１つのリモートクラウドストレージユニット２００１０と、を含み得る。例示的な外科用システム２０００２、２０００３、又は２０００４は、ウェアラブル感知システム２００１１、環境感知システム２００１５、ロボットシステム２００１３、１つ又は２つ以上のインテリジェント器具２００１４、ヒューマンインターフェースシステム２００１２などを含んでもよい。ヒューマンインターフェースシステムは、本明細書ではヒューマンインターフェースデバイスとも称される。ウェアラブル感知システム２００１１は、１つ若しくは２つ以上のＨＣＰ感知システム、及び／又は１つ若しくは２つ以上の患者感知システムを含んでもよい。環境感知システム２００１５は、例えば、図２に更に記載されるように、例えば、１つ又は２つ以上の環境属性を測定するために使用される、１つ又は２つ以上のデバイスを含んでもよい。ロボットシステム２００１３は、例えば、図２に更に記載されるように、外科手技を実施するために使用される複数のデバイスを含んでもよい。
外科用システム２０００２は、クラウドコンピューティングシステム２０００８の一部であり得るリモートサーバ２０００９と通信し得る。一例では、外科用システム２０００２は、インターネットサービスプロバイダのケーブル／ＦＩＯＳネットワーキングノードを介してリモートサーバ２０００９と通信してもよい。一例では、患者感知システムは、リモートサーバ２０００９と直接通信してもよい。外科用システム２０００２及び／又はその構成要素は、ＧＳＭ／ＧＰＲＳ／ＥＤＧＥ（２Ｇ）、ＵＭＴＳ／ＨＳＰＡ（３Ｇ）、ロングタームエボリューション（long term evolution、ＬＴＥ）又は４Ｇ、ＬＴＥアドバンスト（LTE-Advanced、ＬＴＥ－Ａ）、ニューラジオ（new radio、ＮＲ）又は５Ｇのセルラープロトコルのうちの１つ又は２つ以上を使用して、セルラー送信／受信ポイント（transmission/reception point、ＴＲＰ）又は基地局を介してリモートサーバ２０００９と通信してもよい。
外科用ハブ２０００６は、腹腔鏡スコープからの画像を、並びに１つ又は２つ以上の他のスマートデバイス及び１つ又は２つ以上の感知システム２００１１からの情報を、表示する１つ又は２つ以上の手段と協働的相互作用を有し得る。外科用ハブ２０００６は、１つ又は２つ以上の感知システム２００１１、１つ又は２つ以上のスマートデバイス、及び複数のディスプレイと相互作用し得る。外科用ハブ２０００６は、１つ又は２つ以上の感知システム２００１１から測定値データを収集し、通知又は制御メッセージを１つ又は２つ以上の感知システム２００１１に送信するように構成され得る。外科用ハブ２０００６は、通知情報を含む情報を、ヒューマンインターフェースシステム２００１２との間で、送信及び／又は受信し得る。ヒューマンインターフェースシステム２００１２は、１つ又は２つ以上のヒューマンインターフェースデバイス（human interface device、ＨＩＤ）を含み得る。外科用ハブ２０００６は、音響機器、ディスプレイへの通知情報若しくは制御情報、及び／又は外科用ハブと通信する様々なデバイスへの制御情報を、送信及び／又は受信し得る。
例えば、感知システム２０００１は、図１Ａで考察されるように、ウェアラブル感知システム２００１１（１つ又は２つ以上のＨＣＰ感知システム及び１つ又は２つ以上の患者感知システムを含み得る）と、環境感知システム２００１５と、を含んでもよい。１つ又は２つ以上の感知システム２０００１は、様々なバイオマーカに関するデータを測定し得る。１つ又は２つ以上の感知システム２０００１は、１つ又は２つ以上のセンサ、例えば、光センサ（例えば、フォトダイオード、フォトレジスタ）、機械センサ（例えば、モーションセンサ）、音響センサ、電気センサ、電気化学センサ、熱電センサ、赤外線センサなどを使用して、バイオマーカを測定してもよい。１つ又は２つ以上のセンサは、フォトプレチスモグラフィ、心電図検査、脳波検査、比色分析、インペディメンタリ、電位差測定、電流測定などの感知技術のうちの１つ又は２つ以上を使用して、本明細書に記載されるように、バイオマーカを測定してもよい。
１つ又は２つ以上の感知システム２０００１によって測定されるバイオマーカは、睡眠、中核体温、最大酸素消費量、身体活動、アルコール摂取、呼吸数、酸素飽和度、血圧、血糖、心拍変動、水素の血液電位、水和状態、心拍数、皮膚コンダクタンス、末梢温度、組織灌流圧、咳及びくしゃみ、胃腸運動、消化管撮像、気道細菌、浮腫、精神態様、汗、循環腫瘍細胞、自律神経緊張、概日リズム、並びに／又は月経周期を含んでもよいが、それらに限定されない。
バイオマーカは、行動及び心理学、心血管系、腎臓系、皮膚系、神経系、胃腸系、呼吸器系、内分泌系、免疫系、腫瘍、筋骨格系、及び／又は生殖系を含み得るが、これらに限定されない、生理学的系に関連し得る。バイオマーカからの情報は、例えば、コンピュータ実装患者及び外科用システム２００００によって判定及び／又は使用されてもよい。バイオマーカからの情報は、コンピュータ実装患者及び外科用システム２００００によって判定及び／又は使用されて、例えば、上記システムを改善し、及び／又は患者転帰を改善し得る。１つ又は２つ以上の感知システム２０００１、バイオマーカ２０００５、及び生理学的システムは、２０２１年１月２２日に出願された「ＭＥＴＨＯＤ ＯＦ ＡＤＪＵＳＴＩＮＧ Ａ ＳＵＲＧＩＣＡＬ ＰＡＲＡＭＥＴＥＲ ＢＡＳＥＤ ＯＮ ＢＩＯＭＡＲＫＥＲ ＭＥＡＳＵＲＥＭＥＮＴＳ」と題する米国特許出願第１７／１５６，２８７号（代理人整理番号ＥＮＤ９２９０ＵＳＮＰ１）により詳細に記載されており、その開示は、参照によりその全体が本明細書に組み込まれる。
図１Ｂは、コンピュータ実装多層外科用システムのブロック図である。図１Ｂに例示されるように、コンピュータ実装多層外科用システム４００５０は、外科固有サブネットワーク層システム４００５２、外科固有サブネットワーク層システム４００５２に関連付けられたエッジ層システム４００５４、及びクラウド層システム４００５６などのシステムの複数の層を含んでもよい。
外科固有サブネットワーク層システム４００５２は、複数の相互接続された外科用サブシステムを含み得る。例えば、外科用サブシステムは、外科手技のタイプ及び／又は医療施設若しくは病院内の他部署によってグループ化され得る。例えば、医療施設又は病院は、緊急治療室（emergency room、ＥＲ）部門４００７０、結腸直腸部門４００７８、肥満部門４００７２、胸部部門４００６６、及び課金部門４００６８などの複数の外科手技固有部門を含み得る。外科手技固有部門の各々は、手術室（operating room、ＯＲ）及び／又は医療専門家（healthcare care professional、ＨＣＰ）に関連付けられた１つ若しくは２つ以上の外科用サブシステムを含んでもよい。例えば、結腸直腸部門４００７８は、外科用ハブのセット（例えば、図１Ａに記載されるような外科用ハブ２０００６）を含んでもよい。外科用ハブは、ＨＣＰ Ａ４００８２及びＨＣＰ Ｂ４００８０などのそれぞれのＨＣＰに対して指定されてもよい。一例では、結腸直腸部門は、ＯＲ１、４００７４及びＯＲ ２、４００７６などのそれぞれのＯＲに配置され得る外科用ハブのグループを含むことができる。医療施設又は病院はまた、課金部門サブシステム４００６８を含んでもよい。課金部門サブシステム４００６８は、ＥＲ部門４００７０、結腸直腸部門４００７８、肥満部門４００７２、及び／又は胸部部門４００６６などのそれぞれの部門に関連する課金データを記憶及び／又は管理することができる。
エッジ層システム４００５４は、医療施設又は病院に関連付けられてもよく、例えば、１つ又は２つ以上のエッジコンピューティングシステム４００６４を含んでもよい。エッジコンピューティングシステム４００６４は、記憶サブシステムと、サーバサブシステムと、を含み得る。一例では、エッジサーバ及び／又はストレージユニットを備えるエッジコンピューティングシステムは、部門別ＯＲ（例えば、結腸直腸部門のＯＲ１及びＯＲ２）のうちの１つの一部である外科用ハブに追加の処理及び／又はストレージサービスを提供し得る。
外科固有サブネットワーク層システム４００５２及びエッジ層システム４００５４は、医療保険の相互運用性及び説明責任に関する法律（Health Insurance Portability and Accountability Act、ＨＩＰＡＡ）の境界４００６２内に位置し得る。外科固有サブネットワークシステム４００５２及びエッジ層システム４００５４は、同じローカルデータネットワークに接続され得る。ローカルデータネットワークは、医療施設又は病院のローカルデータネットワークであってもよい。ローカルデータネットワークは、ＨＩＰＡＡ境界内にあってもよい。外科固有サブネットワーク層システム４００５２及びエッジ層システム４００５４はＨＩＰＡＡ境界４００６２内に位置するので、エッジコンピューティングシステム４００６４と外科固有サブネットワーク層システム４００５２のエンティティのうちの１つのエンティティ内に配置されたデバイスとの間の患者データは、編集及び／又は暗号化なしで流れ得る。例えば、エッジコンピューティングシステム４００６４と、結腸直腸部門４００７８のＯＲ１ ４００７４に配置された外科用ハブとの間の患者データは、編集及び／又は暗号化なしで流れ得る。
クラウド層システム４００５６は、企業クラウドシステム４００６０及びパブリッククラウドシステム４００５８を含んでもよい。例えば、企業クラウドシステム４００６０は、図１Ａに記載されるように、リモートクラウドサーバサブシステム及び／又はリモートクラウドストレージサブシステムを含むクラウドコンピューティングシステム２０００８であってもよい。企業クラウドシステム４００６０は、民間企業などの組織によって管理されてもよい。企業クラウドシステム４００６０は、ＨＩＰＡＡ境界４００６２内に配置された１つ又は２つ以上のエンティティ（例えば、エッジコンピューティングシステム４００６４、様々な部門（例えば、結腸直腸部門４００７８）のＯＲ（例えば、ＯＲ１ ４００７４）に配置された外科用ハブ）と通信することができる。
パブリッククラウドシステム４００５８は、クラウドコンピューティングサービスプロバイダによって運用されてもよい。例えば、クラウドコンピューティングサービスプロバイダは、複数の企業クラウドシステム（例えば、企業クラウドシステム４００６０）にストレージサービス及び／又はコンピューティングサービスを提供してもよい。
図１Ｃは、外科用システムにおける様々な通信プレーンを示す論理ブロック図４００００である。図１Ｃに例示するように、コントローラ４０００２と、一方の側の管理アプリケーション４００１４及び４００１６と、他方の側のシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎとの間の通信プレーンは、制御プレーン４０００８及びデータプレーン４００１０を使用してもよい。一例では、制御プレーン４０００８に加えて、データプレーンもまた、システムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎと外科用ハブとの間に存在し得る。データプレーン４００１０は、１つ又は２つ以上の外科用ハブに関連付けられたシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎの間にデータプレーン経路（例えば、冗長データプレーン経路）を提供してもよい。外科用ハブ又は外科用ハブのうちの１つ（例えば、手術室内に複数の外科用ハブが存在する場合）は、コントローラ４０００２として作用してもよい。一例では、コントローラ４０００２は、例えば図１Ｂに例示するように、外科用システムが位置する医療保険の相互運用性及び説明責任に関する法律（ＨＩＰＡＡ）の境界内に存在し得るエッジコンピューティングシステムであってもよい。コントローラ４０００２は、企業クラウドシステム４００２０と通信し得る。図１Ｃに例示するように、企業クラウドシステム４００２０は、ＨＩＰＡＡ境界４００１８の外側に配置されてもよい。したがって、企業クラウドシステム４００２０との間で流れる患者データは、編集及び／又は暗号化されてもよい。
コントローラ４０００２は、ノースバウンドインターフェース４０００４及びサウスバウンドインターフェース４０００６を提供するように構成されてもよい。ノースバウンドインターフェース４０００４は、制御プレーン４０００８を提供するために使用され得る。制御プレーン４０００８は、ユーザが、外科用システムに関連付けられたシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎを構成及び／又は管理することを可能にし得る１つ若しくは２つ以上の管理アプリケーション４００１４及び４００１６を含み得る。管理アプリケーション４００１４及び４００１６は、様々なシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎのステータスを取得するために使用され得る。
制御プレーンを使用する管理アプリケーション４００１４及び４００１６は、例えば、アプリケーションプログラミングインターフェース（application programming interface、ＡＰＩ）コールのセットを使用して、コントローラ４０００２と相互作用し得る。管理アプリケーション４００１４及び４００１６は、管理プロトコル又はアプリケーション層プロトコルを介してコントローラ４０００２と対話して、システムモジュール及び／又はモジュール式デバイスのステータスを構成及び／又は監視することができる。ステータスを監視し、かつ／又は外科用システムに関連付けられたシステムモジュール若しくはモジュール式デバイスを構成するために使用される管理プロトコル又はアプリケーション層プロトコルは、簡易ネットワーク管理プロトコル（simple network management protocol、ＳＮＭＰ）、ＴＥＬＮＥＴプロトコル、セキュアシェル（secure shell、ＳＳＨ）プロトコル、ネットワーク構成プロトコル（network configuration protocol、ＮＥＴＣＯＮＦ）などを含んでもよい。
ＳＮＭＰ又は類似のプロトコルを使用して、ステータス情報を収集し、かつ／又はシステムモジュール及び／又はモジュール式デバイスに関連付けられた構成関連データ（例えば、構成関連制御プログラム）をコントローラに送信することができる。ＳＮＭＰ又は類似のプロトコルは、メッセージ（例えば、ＳＮＭＰメッセージ）を使用して、中央ネットワーク管理コンソールから外科用システムに関連付けられたデバイスを選択することによって、情報を収集し得る。メッセージは、固定間隔又はランダム間隔で送信及び／又は受信され得る。メッセージは、Ｇｅｔメッセージ及びＳｅｔメッセージを含んでもよい。Ｇｅｔメッセージ又はＧｅｔメッセージに類似するメッセージは、外科用システムと関連付けられたシステムモジュール又はモジュール式デバイスから情報を取得するために使用されてもよい。Ｓｅｔメッセージ又はＳｅｔメッセージに類似するメッセージは、外科用システムに関連付けられたシステムモジュール又はモジュール式デバイスに関連付けられた構成を変更するために使用され得る。
例えば、Ｇｅｔメッセージ又は類似のメッセージは、ＳＮＭＰメッセージＧｅｔＲｅｑｕｅｓｔ、ＧｅｔＮｅｘｔＲｅｑｕｅｓｔ、又はＧｅｔＢｕｌｋＲｅｑｕｅｓｔを含んでもよい。Ｓｅｔメッセージは、ＳＮＭＰ ＳｅｔＲｅｑｕｅｓｔメッセージを含んでもよい。ＧｅｔＲｅｑｕｅｓｔ、ＧｅｔＮｅｘｔＲｅｑｕｅｓｔ、ＧｅｔＢｕｌｋＲｅｑｕｅｓｔメッセージ又は類似のメッセージは、コントローラ４０００２上で実施される構成マネージャ（例えば、ＳＮＭＰマネージャ）によって使用され得る。構成マネージャは、外科用システム内のシステムモジュール及び／又はモジュール式デバイスの一部であり得る通信エージェント（例えば、ＳＮＭＰエージェント）と通信し得る。ＳＮＭＰメッセージＳｅｔＲｅｑｕｅｓｔメッセージなどは、外科用システムのシステムモジュール及び／又はモジュール式デバイス上の通信エージェント内のパラメータ又はオブジェクトインスタンスの値を設定するために、コントローラ４０００２上の通信マネージャによって使用されてもよい。一例では、例えば、ＳＮＭＰモジュールを使用して、外科用システムに関連付けられたシステムモジュール及び／又はモジュール式デバイス間の通信経路を確立してもよい。
管理アプリケーション４００１４及び４００１６などの管理アプリケーションから受信された問い合わせ又は構成関連メッセージに基づいて、コントローラ４０００２は、外科用ハブ又は外科用システムに関連付けられるシステムモジュール及び／又はモジュール式デバイスを問い合わせるか又は構成するための構成問い合わせ及び／又は構成データを生成してもよい。外科用ハブ（例えば、図１Ａに示す外科用ハブ２０００６）又はエッジコンピューティングシステム（例えば、図１Ｂに示すエッジコンピューティングシステム４００６４）は、外科用システムに関連付けられた様々なシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎを管理及び／又は制御することができる。例えば、コントローラ４０００２のノースバウンドインターフェース４０００４は、外科用システムに関連付けられた１つ若しくは２つ以上のモジュール及び／又は外科用システムに関連付けられたデバイス間の制御相互作用を変更するために使用されてもよい。一例では、コントローラ４０００２は、外科用システムに関連付けられた複数のモジュール及び／又はデバイスの間に１つ若しくは２つ以上の通信データ経路を確立するために使用され得る。コントローラ４０００２は、そのサウスバウンドインターフェース４０００６を使用して、問い合わせ及び／又は構成変更を含む制御プログラムを、外科用システムのシステムモジュール及び／又はモジュール式デバイスに送信することができる。
外科用システムのシステムモジュール及び／若しくはモジュール式デバイス４００１２ａ～４００１２ｎ、又はシステムモジュール及び／若しくはモジュール式デバイスの一部であり得る通信エージェントは、コントローラ４０００２に通知メッセージ又はトラップを送信し得る。コントローラは、通知メッセージ又はトラップを、ディスプレイ上に表示するために、コントローラのノースバウンドインターフェース４０００４を介して管理アプリケーション４００１４及び４００１６に転送することができる。一例では、コントローラ４０００２は、外科用システムの一部である他のシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎに通知を送信することができる。
外科用システムのシステムモジュール及び／若しくはモジュール式デバイス４００１２ａ～４００１２ｎ、又はシステムモジュール及び／若しくはモジュール式デバイスの一部である通信エージェントは、コントローラ４０００２から受信された問い合わせに対する応答を送信し得る。例えば、システムモジュール又はモジュール式デバイスの一部であり得る通信エージェントは、コントローラ４０００２から受信されたＧｅｔ若しくはＳｅｔメッセージ又はＧｅｔ若しくはＳｅｔメッセージと類似のメッセージに応答して応答メッセージを送信し得る。一例では、コントローラ４０００２から受信されたＧｅｔメッセージ又は類似のメッセージに応答して、システムモジュール又はモジュール式デバイス４００１２ａ～４００１２ｎからの応答メッセージは、要求されたデータを含み得る。一例では、システムモジュール又はモジュール式デバイス４００１２ａ～４００１２ｎから受信されたＳｅｔメッセージ又は類似のメッセージに応答して、コントローラ４０００２からの応答メッセージは、値が設定されたことの確認として、新たに設定された値を含み得る。
トラップ若しくは通知メッセージ、又はトラップ若しくは通知メッセージに類似するメッセージは、システムモジュール又はモジュール式デバイス４００１２ａ～４００１２ｎによって使用されて、システムモジュール又はモジュール式デバイスに関連付けられた事象についての情報を提供し得る。例えば、トラップ又は通知メッセージは、システムモジュール又はモジュール式デバイス４００１２ａ～４００１２ｎからコントローラ４０００２に送信されて、通信インターフェースのステータス（例えば、通信のために利用可能であるか又は利用不可能であるか）を示し得る。コントローラ４０００２は、トラップメッセージの受信をシステムモジュール又はモジュール式デバイス４００１２ａ～４００１２ｎに（例えば、システムモジュール又はモジュール式デバイス上のエージェントに）送り返すことができる。
一例では、ＴＥＬＮＥＴプロトコルを使用して、システムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎとコントローラ４０００２との間に双方向対話型テキスト指向通信機能を提供し得る。ＴＥＬＮＥＴプロトコルは、ステータス情報を収集し、かつ／又はコントローラ４０００２から／へ構成データ（例えば、制御プログラム）を送信するために使用され得る。ＴＥＬＮＥＴは、伝送制御プロトコルポート番号２３を使用してコントローラ４０００２との接続を確立するために、管理アプリケーション４００１４又は４００１６のうちの１つによって使用され得る。
一例では、暗号化プロトコルであるＳＳＨを使用して、リモートログインを可能にし、ステータス情報を収集し、かつ／又はシステムモジュール及び／若しくはモジュール式デバイス４００１２ａ～４００１２ｎに関する構成データをコントローラ４０００２から／へ送信することができる。ＳＳＨは、伝送制御プロトコルポート番号２２を使用してコントローラ４０００２との暗号化された接続を確立するために、管理アプリケーション４００１４又は４００１６のうちの１つによって使用され得る。
一例では、ＮＥＴＣＯＮＦを使用して、例えば＜ｒｐｃ＞、＜ｒｐｃ－ｒｅｐｌｙ＞、又は＜ｅｄｉｔ－ｃｏｎｆｉｇ＞動作を使用してリモートプロシージャコールを呼び出すことによって管理機能を実施することができる。＜ｒｐｃ＞及び＜ｒｐｃ－ｒｅｐｌｙ＞プロシージャコール又は類似のプロシージャコールは、外科用システムに関連付けられたシステムモジュール及び／又はモジュール式デバイスからの情報を交換するために使用され得る。ＮＥＴＣＯＮＦ＜ｅｄｉｔ－ｃｏｎｆｉｇ＞動作又は類似の動作は、外科用システムに関連付けられたシステムモジュール及び／又はモジュール式デバイスを構成するために使用され得る。
コントローラ４０００２は、データプレーン４００１０を確立するようにシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎを構成することができる。データプレーン４００１０（例えば、ユーザプレーン又は転送プレーンとも称される）は、複数のシステムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎの間の通信データ経路を可能にし得る。データプレーン４００１０は、外科用システムに関連付けられたシステムモジュール及び／又はモジュール式デバイス間でデータのデータフローを通信するために、システムモジュール及び／又はモジュール式デバイス４００１２ａ～４００１２ｎによって利用され得る。データフローは、外科用システムの１つ若しくは２つ以上の外科用ハブに関連付けられたシステムモジュール及び／又はモジュール式デバイス間の１つ若しくは２つ以上の専用通信インターフェースを使用して確立されてもよい。一例では、データフローは、１つ又は２つ以上のローカルエリアネットワーク（local area network、ＬＡＮ）及びインターネットなどの１つ又は２つ以上のワイドエリアネットワーク（wide area network、ＷＡＮ）を介して確立され得る。
一例では、データプレーン４００１０は、システムモジュール及び／又はモジュール式デバイス４００１２ｂと４００１２ｎ間のデータフローのための第１及び第２の独立した、分離した、並列の、冗長な通信経路を確立するためのサポートを提供することができる。図１Ｃに例示するように、システムモジュール／モジュール式デバイス４００１２ｂと４００１２ｎ間に、冗長通信経路が確立され得る。冗長通信経路は、システムモジュール及び／又はモジュール式デバイス間で同じ／冗長データフローを搬送することができる。一例では、システムモジュール／モジュール式デバイス４００１２ｂ及び４００１２ｎ上の通信インターフェースのうちの１つに関する問題に起因して、データパケットのうちのいくつかが冗長通信経路のうちの１つの経路上でドロップされたとき、又はドロップされた場合、システムモジュール及び／又はモジュール式デバイスは、ドロップされたデータパケットの少なくとも１つのコピーを第２の通信経路を介して送信／受信し続けることができる。
図２は、外科手術室内の外科用システム２０００２の一例を示している。図２に例示するように、患者は、１人又は２人以上の医療専門家（ＨＣＰ）によって手術される。ＨＣＰは、ＨＣＰによって装着された１つ又は２つ以上のＨＣＰ感知システム２００２０によって監視される。ＨＣＰ、及びＨＣＰを囲む環境はまた、例えば、手術室内に配備され得るカメラ２００２１のセット、マイクロフォン２００２２のセット、及び他のセンサを含む１つ又は２つ以上の環境感知システムによって監視されてもよい。ＨＣＰ感知システム２００２０及び環境感知システムは、外科用ハブ２０００６と通信してもよく、外科用ハブは、図１Ａに示すように、次いでクラウドコンピューティングシステム２０００８の１つ又は２つ以上のクラウドサーバ２０００９と通信し得る。環境感知システムは、１つ又は２つ以上の環境属性、例えば、手術室内のＨＣＰ位置、ＨＣＰ移動、手術室内の周囲ノイズ、手術室内の温度／湿度などを測定するために使用されてもよい。
図２に例示するように、主ディスプレイ２００２３及び１つ又は２つ以上の音声出力デバイス（例えば、スピーカ２００１９）は、手術台２００２４のオペレータに見えるように滅菌野に配置される。加えて、可視化／通知タワー２００２６が、滅菌野の外に配置される。可視化／通知タワー２００２６は、互いに反対側を向いている第１の非滅菌ヒューマン双方向デバイス（ＨＩＤ）２００２７及び第２の非滅菌ＨＩＤ２００２９を含み得る。ＨＩＤは、ディスプレイであってもよく、又は人間がＨＩＤと直接インターフェースすることを可能にするタッチスクリーンを有するディスプレイであってもよい。外科用ハブ２０００６によってガイドされるヒューマンインターフェースシステムは、ＨＩＤ２００２７、２００２９及び２００２３を利用して、滅菌野の内側及び外側のオペレータへの情報フローを調整するように構成され得る。一例では、外科用ハブ２０００６により、ＨＩＤ（例えば、主ＨＩＤ２００２３）は、患者及び／又は外科手技ステップに関する通知及び／又は情報を表示してもよい。一例では、外科用ハブ２０００６は、滅菌野又は非滅菌領域内の人に入力を促しても、及び／又は人の入力を受信してもよい。一例では、外科用ハブ２０００６により、ＨＩＤは、主ＨＩＤ２００２３上に外科部位のライブ映像を維持しつつ、撮像デバイス２００３０によって記録される手術部位のスナップショットを非滅菌ＨＩＤ２００２７又は２００２９に表示してもよい。非滅菌ディスプレイ２００２７又は２００２９上のスナップショットは、例えば、非滅菌オペレータが、外科手技に関連する診断ステップを実施することを許可し得る。
一態様では、外科用ハブ２０００６は、可視化タワー２００２６にいる非滅菌オペレータによって入力された診断入力又はフィードバックを滅菌野内の主ディスプレイ２００２３に送り、これを手術台にいる滅菌オペレータが見ることができるように構成されてもよい。一例では、入力は、外科用ハブ２０００６によって主ディスプレイ２００２３に送られ得る、非滅菌ディスプレイ２００２７又は２００２９上に表示されるスナップショットへの修正の形態であってもよい。
図２を参照すると、外科用器具２００３１は、外科手技において外科用システム２０００２の一部として使用されている。ハブ２０００６は、外科用器具２００３１のディスプレイへの情報フローを調整するようにも構成され得る。例えば、２０１８年１２月４日に出願された、「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＰＲＯＣＥＳＳＩＮＧ，ＳＴＯＲＡＧＥ ＡＮＤ ＤＩＳＰＬＡＹ」と題する、米国特許出願公開第ＵＳ ２０１９－０２００８４４（Ａ１）号（米国特許出願第１６／２０９３８５号）で、その開示は、その全体が参照により本明細書に組み込まれる。可視化タワー２００２６にいる非滅菌オペレータによって入力された診断入力又はフィードバックは、ハブ２０００６によって滅菌野内の外科用器具ディスプレイに送られ、これを外科用器具２００３１のオペレータが見ることができる。外科用システム２０００２と共に使用するために好適である例示的な外科用器具は、例えば、２０１８年１２月４日出願の「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＰＲＯＣＥＳＳＩＮＧ，ＳＴＯＲＡＧＥ ＡＮＤ ＤＩＳＰＬＡＹ」と題する米国特許出願公開第２０１９／０２００８４４（Ａ１）号（米国特許出願第１６／２０９，３８５号）において「Ｓｕｒｇｉｃａｌ Ｉｎｓｔｒｕｍｅｎｔ Ｈａｒｄｗａｒｅ」という見出しの下で記載されており、その開示は、参照によりその全体が本明細書に組み込まれる。
図２は、手術室２００３５内の手術台２００２４上に横たわっている患者に対して外科手技を実施するために使用されている外科用システム２０００２の一例を例示している。ロボットシステム２００３４は、外科手技において外科用システム２０００２の一部として使用され得る。ロボットシステム２００３４は、外科医のコンソール２００３６と、患者側カート２００３２（外科用ロボット）と、外科用ロボットハブ２００３３と、を含み得る。外科医が外科医のコンソール２００３６を通して手術部位を見る間、患者側カート２００３２は、患者の身体の低侵襲切開部を通して、少なくとも１つの着脱可能に連結された外科用ツール２００３７を操作し得る。手術部位の画像は、撮像デバイス２００３０の向きを変えるために、患者側カート２００３２によって操作され得る医療撮像デバイス２００３０によって取得され得る。ロボットハブ２００３３を使用して、手術部位の画像を処理し、その後、外科医のコンソール２００３６を通して、外科医に表示し得る。
他のタイプのロボットシステムが、外科用システム２０００２と共に使用するように容易に適合され得る。本開示と共に使用するのに好適なロボットシステム及び外科用ツールの様々な例は、２０１８年１２月４日出願の「ＭＥＴＨＯＤ ＯＦ ＲＯＢＯＴＩＣ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＤＥＴＥＣＴＩＯＮ，ＡＮＤ ＣＯＮＴＲＯＬ」と題する米国特許出願公開第２０１９－０２０１１３７（Ａ１）号（米国特許出願第１６／２０９，４０７号）に記載されており、その開示は、参照によりその全体が本明細書に組み込まれる。
クラウドコンピューティングシステム２０００８によって実施され、本開示と共に使用するために好適であるクラウドベース分析法の様々な例は、２０１８年１２月４日出願の「ＭＥＴＨＯＤ ＯＦ ＣＬＯＵＤ ＢＡＳＥＤ ＤＡＴＡ ＡＮＡＬＹＴＩＣＳ ＦＯＲ ＵＳＥ ＷＩＴＨ ＴＨＥ ＨＵＢ」と題する米国特許出願公開第２０１９－０２０６５６９（Ａ１）号（米国特許出願第１６／２０９，４０３号）に記載されており、その開示は、参照によりその全体が本明細書に組み込まれる。
様々な態様では、撮像デバイス２００３０は、少なくとも１つの画像センサと、１つ又は２つ以上の光学部品と、を含んでもよい。好適な画像センサとしては、電荷結合素子（Charge-Coupled Device、ＣＣＤ）センサ及び相補型金属酸化膜半導体（Complementary Metal-Oxide Semiconductor、ＣＭＯＳ）センサを挙げることができるが、これらに限定されない。
撮像デバイス２００３０の光学部品は、１つ又は２つ以上の照明源、及び／又は１つ又は２つ以上のレンズを含んでもよい。１つ又は２つ以上の照明源は、術野の部分を照明するように方向付けられ得る。１つ若しくは２つ以上の画像センサは、組織及び／又は外科用器具から反射若しくは屈折された光を含む、術野から反射若しくは屈折された光を受信することができる。
１つ又は２つ以上の照明源は、可視スペクトル並びに不可視スペクトル内の電磁エネルギーを照射するように構成され得る。可視スペクトルは、場合によっては、光スペクトル又は発光スペクトルとも称され、人間の目に見える（すなわち、人間の目によって検出することができる）電磁スペクトルの一部分であり、可視光、又は単に光と称されることがある。通常人間の目は、空気中の約３８０ｎｍ～約７５０ｎｍの波長に応答する。
不可視スペクトル（例えば、非発光スペクトル）は、可視スペクトルの下方及び上方に位置する（すなわち、約３８０ｎｍ未満及び約７５０ｎｍ超の波長の）電磁スペクトルの一部分である。不可視スペクトルは、人間の目で検出可能ではない。約７５０ｎｍを超える波長は、赤色可視スペクトルよりも長く、これらは不可視赤外線（infrared、ＩＲ）、マイクロ波及び無線電磁放射線になる。約３８０ｎｍ未満の波長は、紫色スペクトルよりも短く、これらは不可視紫外線、Ｘ線及びガンマ線電磁放射線になる。
様々な態様では、撮像デバイス２００３０は、低侵襲性手技において使用するように構成されている。本開示と共に使用するのに好適な撮像デバイスの例としては、関節鏡、血管鏡、気管支鏡、胆道鏡、結腸鏡、サイトスコープ（cytoscope）、十二指腸鏡、腸鏡、食道胃十二指腸鏡（胃鏡）、内視鏡、喉頭鏡、鼻咽喉－腎盂鏡（nasopharyngo-neproscope）、Ｓ状結腸鏡、胸腔鏡、及び尿管鏡が挙げられるが、これらに限定されない。
撮像デバイスは、トポグラフィと下層構造とを区別するために、マルチスペクトルモニタリングを採用してもよい。マルチスペクトル画像は、電磁スペクトル全体から特定の波長範囲内の画像データを取り込むものである。波長は、フィルタによって、又は可視光範囲を超える周波数、例えば、ＩＲ、及び紫外からの光を含む特定の波長に対する感度を有する器具を使用することによって分離することができる。スペクトル撮像により、人間の目がもつ赤、緑、青の受容体では捕捉し得ない追加情報を抽出することが可能になる。マルチスペクトル撮像の使用は、２０１８年１２月４日出願の「ＭＥＴＨＯＤ ＯＦ ＨＵＢ ＣＯＭＭＵＮＩＣＡＴＩＯＮ，ＰＲＯＣＥＳＳＩＮＧ，ＳＴＯＲＡＧＥ ＡＮＤ ＤＩＳＰＬＡＹ」と題する米国特許出願公開第２０１９／０２００８４４（Ａ１）号（米国特許出願第１６／２０９，３８５号）において「Ａｄｖａｎｃｅｄ Ｉｍａｇｉｎｇ Ａｃｑｕｉｓｉｔｉｏｎ Ｍｏｄｕｌｅ」という見出しの下で詳述されており、その開示は、参照によりその全体が本明細書に組み込まれる。マルチスペクトルモニタリングは、処置された組織に対して上述の試験のうちの１つ又は２つ以上を実行するための手術タスクが完了した後に術野を再配置するのに有用なツールであり得る。いかなる外科手術中でも、手術室及び外科用機器の厳格な滅菌が必要であることは自明である。「手術室」、すなわち、手術室又は処置室において要求される厳格な衛生条件及び滅菌条件は、全ての医療デバイス及び機器の可能な最も高い滅菌性を必要とする。滅菌プロセスの一部は、撮像デバイス２００３０並びにその付属品及び構成要素を含む、患者と接触する、又は滅菌野に侵入するあらゆるものを滅菌する必要性である。滅菌野は、トレイ内又は滅菌タオル上などの微生物を含まないと見なされる特定の領域と見なされ得ること、あるいは滅菌野は、外科手技の準備が整った患者の直ぐ周囲の領域と見なされ得ることは理解されよう。滅菌野は、適切に衣類を着用している洗浄済みのチーム構成員、並びにその領域内の全ての備品及び固定具を含み得る。
図１Ａに例示するウェアラブル感知システム２００１１は、１つ又は２つ以上の感知システム、例えば、図２に示すようなＨＣＰ感知システム２００２０を含んでもよい。ＨＣＰ感知システム２００２０は、医療関係者（ＨＣＰ）の身体的状態のセット及び／又は生理学的状態のセットを監視し、検出するための感知システムを含み得る。ＨＣＰは、一般的に、外科医又は他の医療サービス提供者を支援する１人又は２人以上の医療関係者であってもよい。一例では、感知システム２００２０は、ＨＣＰの心拍数を監視するためにバイオマーカのセットを測定してもよい。一例では、外科医の手首に装着された感知システム２００２０（例えば、時計又はリストバンド）は、加速度計を使用して、手の動き及び／又は揺れを検出し、振戦の大きさ及び周波数を判定してもよい。感知システム２００２０は、バイオマーカのセットに関連付けられた測定値データ、及び外科医の身体的状態に関連付けられたデータを、更なる処理のために外科用ハブ２０００６に送信し得る。１つ又は２つ以上の環境感知デバイスは、環境情報を外科用ハブ２０００６に送信し得る。例えば、環境感知デバイスは、ＨＣＰの手／身体の位置を検出するためのカメラ２００２１を含んでもよい。環境感知デバイスは、手術室内の周囲ノイズを測定するためのマイクロフォン２００２２を含んでもよい。他の環境感知デバイスは、例えば、温度を測定するための温度計、及び手術室内の周囲の湿度を測定するための湿度計などのデバイスを含んでもよい。外科用ハブ２０００６は、単独で、若しくはクラウドコンピューティングシステムと通信して、外科医バイオマーカ測定値データ及び／又は環境感知情報を使用して、例えば、振戦を最小限に抑えるために、手持ち式器具の制御アルゴリズム、又はロボットインターフェースの平均遅延を修正してもよい。一例では、ＨＣＰ感知システム２００２０は、ＨＣＰに関連付けられた１つ又は２つ以上の外科医バイオマーカを測定し、外科医バイオマーカに関連付けられた測定値データを外科用ハブ２０００６に送信してもよい。ＨＣＰ感知システム２００２０は、外科用ハブ２０００６と通信するために、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ－Ｅｎｅｒｇｙ（ＢＬＥ）、Ｂｌｕｅｔｏｏｔｈ Ｓｍａｒｔ、Ｚｉｇｂｅｅ、Ｚ－ｗａｖｅ、ＩＰｖ６低電力無線パーソナルエリアネットワーク（６ＬｏＷＰＡＮ）、Ｗｉ－ＦｉのＲＦプロトコルのうちの１つ又は２つ以上を使用し得る。外科医バイオマーカは、ストレス、心拍数などのうちの１つ又は２つ以上を含み得る。手術室からの環境測定値は、外科医又は患者、外科医及び／又はスタッフの動き、外科医及び／又はスタッフの注意レベルなどに関連する周囲ノイズレベルを含み得る。
外科用ハブ２０００６は、ＨＣＰに関連付けられた外科医バイオマーカ測定値データを使用して、１つ又は２つ以上の外科用器具２００３１を適応的に制御し得る。例えば、外科用ハブ２０００６は、制御プログラムを外科用器具２００３１に送信して、そのアクチュエータを制御して、疲労及び細かい運動技能の使用を制限又は補償してもよい。外科用ハブ２０００６は、状況認識及び／又はタスクの重要性若しくは臨界に関する事情に基づいて、制御プログラムを送信し得る。制御プログラムは、制御が必要とされるとき、多くの制御を提供するために動作を変更するように器具に命令し得る。
図３は、ウェアラブル感知システム２００１１、環境感知システム２００１５、ヒューマンインターフェースシステム２００１２、ロボットシステム２００１３、及びインテリジェント器具２００１４とペアリングされた外科用ハブ２０００６を有する例示的な外科用システム２０００２を示している。ハブ２０００６は、ディスプレイ２００４８と、撮像モジュール２００４９と、発生器モジュール２００５０と、通信モジュール２００５６と、プロセッサモジュール２００５７と、ストレージアレイ２００５８と、手術室マッピングモジュール２００５９と、を含む。特定の態様では、図３に例示されるように、ハブ２０００６は、排煙モジュール２００５４及び／又は吸引／灌注モジュール２００５５を更に含む。外科手技中、封止及び／又は切断のために、組織へエネルギーを印加することは、一般に、排煙、過剰な流体の吸引、及び／又は組織の灌注と関連付けられる。異なる供給源からの流体ライン、電力ライン及び／又はデータラインは、外科手技中に絡まり合うことが多い。外科手技中にこの問題に対処することで貴重な時間が失われる場合がある。ラインの絡まりをほどくには、それらの対応するモジュールからラインを抜くことが必要となる場合があり、そのためにはモジュールをリセットすることが必要となる場合がある。ハブモジュール式エンクロージャ２００６０は、電力ライン、データライン、及び流体ラインを管理するための統合環境を提供し、このようなライン間の絡まりの頻度を低減させる。本開示の態様は、手術部位における組織へのエネルギー印加を伴う外科手技において使用するための外科用ハブ２０００６を提示する。外科用ハブ２０００６は、ハブエンクロージャ２００６０と、ハブエンクロージャ２００６０のドッキングステーション内に摺動可能に受け入れ可能な組み合わせ発生器モジュールと、を含む。ドッキングステーションはデータ接点及び電力接点を含む。組み合わせ発生器モジュールは、単一ユニット内に収納されている、超音波エネルギー発生器構成要素、双極ＲＦエネルギー発生器構成要素、及び単極ＲＦエネルギー発生器構成要素のうちの２つ又は３つ以上を含む。一態様では、組み合わせ発生器モジュールはまた、排煙構成要素と、組み合わせ発生器モジュールを外科用器具に接続するための少なくとも１つのエネルギー供給ケーブルと、組織への治療エネルギーの印加によって発生した煙、流体及び／又は微粒子を排出するように構成された少なくとも１つの排煙構成要素と、リモート手術部位から排煙構成要素まで延在する流体ラインと、を含む。一態様では、流体ラインは、第１の流体ラインであってもよく、第２の流体ラインは、リモート手術部位から、ハブエンクロージャ２００６０内に摺動可能に受け入れられる吸引及び灌注モジュール２００５５まで延在してもよい。一態様では、ハブエンクロージャ２００６０は、流体インターフェースを含んでもよい。ある特定の外科手技は、２つ以上のエネルギータイプを組織に印加することを必要とする場合がある。１つのエネルギータイプは、組織を切断するのにより有益であり得るが、別の異なるエネルギータイプは、組織を封止するのにより有益であり得る。例えば、双極発生器は組織を封止するために使用することができ、一方で、超音波発生器は封止された組織を切断するために使用することができる。本開示の態様は、ハブモジュール式エンクロージャ２００６０が異なる発生器を収容して、これらの間の双方向通信を促進するように構成される解決法を提示する。ハブモジュール式エンクロージャ２００６０の利点の１つは、様々なモジュールの迅速な取り外し及び／又は交換を可能にすることである。本開示の態様は、組織へのエネルギー印加を伴う外科手技で使用するためのモジュール式外科用エンクロージャを提示する。モジュール式外科用エンクロージャは、組織に印加するための第１のエネルギーを発生させるように構成された第１のエネルギー発生器モジュールと、第１のデータ及び電力接点を含む第１のドッキングポートを備える第１のドッキングステーションと、を含み、第１のエネルギー発生器モジュールは、電力及びデータ接点と電気係合するように摺動可能に移動可能であり、また第１のエネルギー発生器モジュールは、第１の電力及びデータ接点との電気係合から外れるように摺動可能に移動可能である。上記に加えて、モジュール式外科用エンクロージャはまた、第１のエネルギーとは異なる、組織に印加するための第２のエネルギーを発生させるように構成された第２のエネルギー発生器モジュールと、第２のデータ接点及び第２の電力接点を含む第２のドッキングポートを備える第２のドッキングステーションと、を含み、第２のエネルギー発生器モジュールは、電力接点及びデータ接点と電気係合するように摺動可能に移動可能であり、また第２のエネルギー発生器モジュールは、第２の電力接点及び第２のデータ接点との電気係合から外れるように摺動可能に移動可能である。加えて、モジュール式外科用エンクロージャはまた、第１のエネルギー発生器モジュールと第２のエネルギー発生器モジュールとの間の通信を容易にするように構成された、第１のドッキングポートと第２のドッキングポートとの間の通信バスを含む。図３を参照すると、発生器モジュール２００５０と、排煙モジュール２００５４、及び吸引／灌注モジュール２００５５のモジュール式統合を可能にするハブモジュール式エンクロージャ２００６０に関する本開示の態様が提示される。ハブモジュール式エンクロージャ２００６０は、モジュール２００５９とモジュール２００５４とモジュール２００５５との間の双方向通信を更に促進する。発生器モジュール２００５０は、ハブのモジュール式エンクロージャ２００６０に摺動可能に挿入可能な単一のハウジングユニット内に支持される、一体化された単極構成要素、双極構成要素及び超音波構成要素を備えてもよい。発生器モジュール２００５０は、単極デバイス２００５１、双極デバイス２００５２、及び超音波デバイス２００５３に接続するように構成されてもよい。代替的に、発生器モジュール２００５０は、ハブモジュール式エンクロージャ２００６０を介して相互作用する一連の単極発生器モジュール、双極発生器モジュール、及び／又は超音波発生器モジュールを備えてもよい。複数の発生器が単一の発生器として機能するように、ハブモジュール式エンクロージャ２００６０は、複数の発生器の挿入と、ハブモジュール式エンクロージャ２００６０にドッキングされた発生器間の双方向通信と、を促進するように構成することができる。
図４は、本開示の少なくとも１つの態様による、医療施設の１つ又は２つ以上の手術室、患者回復室、又は手術用に特別に装備された医療施設内の部屋に配置された、感知システムのセット、環境感知システム、及び他のモジュール式デバイスのセットを、クラウドに接続するように構成された通信ハブのセットを有する外科用データネットワークを例示している。
図４に例示するように、外科用ハブシステム２００６０は、医療施設内に配置されたモジュール式デバイスをクラウドベースシステム（例えば、リモートストレージ２００６８に連結されたリモートサーバ２００６７を含み得るクラウドコンピューティングシステム２００６４）に接続するように構成されるモジュール式通信ハブ２００６５を含み得る。モジュール式通信ハブ２００６５及びデバイスは、外科手術のために特別に装備された医療施設内の部屋において接続され得る。一態様では、モジュール式通信ハブ２００６５は、ネットワークルータ２００６６と通信するネットワークハブ２００６１及び／又はネットワークスイッチ２００６２を含んでもよい。モジュール式通信ハブ２００６５はまた、ローカルコンピュータシステム２００６３に連結し、ローカルコンピュータ処理及びデータ操作を提供し得る。
コンピュータシステム２００６３は、プロセッサと、ネットワークインターフェース２０１００と、を備え得る。プロセッサは、システムバスを介して、通信モジュール、ストレージ、メモリ、不揮発性メモリ、及び入力／出力（Ｉ／Ｏ）インターフェースに連結され得る。システムバスは、任意の様々な利用可能なバスアーキテクチャを使用する、メモリバス若しくはメモリコントローラ、ペリフェラルバス若しくは外部バス、及び／又はローカルバスを含むいくつかのタイプのバス構造のうちのいずれかとすることができ、それらのアーキテクチャの例としては、９ビットバス、業界標準アーキテクチャ（Industrial Standard Architecture、ＩＳＡ）、マイクロチャネルアーキテクチャ（Micro-Charmel Architecture、ＭＳＡ）、拡張ＩＳＡ（Extended ISA、ＥＩＳＡ）、インテリジェントドライブエレクトロニクス（Intelligent Drive Electronics、ＩＤＥ）、ＶＥＳＡローカルバス（VESA Local Bus、ＶＬＢ）、周辺装置相互接続（Peripheral Component Interconnect、ＰＣＩ）、ＵＳＢ、アドバンストグラフィックスポート（Advanced Graphics Port、ＡＧＰ）、パーソナルコンピュータメモリカード国際協会バス（Personal Computer Memory Card International Association、ＰＣＭＣＩＡ）、小型計算機システムインターフェース（Small Computer Systems Interface、ＳＣＳＩ）、又は任意の他の独自バスが挙げられるが、これらに限定されない。
プロセッサは、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓによって商品名ＡＲＭ Ｃｏｒｔｅｘで知られているものなどの、任意のシングルコア又はマルチコアプロセッサであってもよい。一態様では、プロセッサは、例えば、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓから入手可能なＬＭ４Ｆ２３０Ｈ５ＱＲ ＡＲＭ Ｃｏｒｔｅｘ－Ｍ４Ｆプロセッサコアであってもよい。このプロセッサコアは、最大４０ＭＨｚの２５６ＫＢのシングルサイクルフラッシュメモリ若しくは他の不揮発性メモリのオンチップメモリ、性能を４０ＭＨｚ超に改善するためのプリフェッチバッファ、３２ＫＢのシングルサイクルシリアルランダムアクセスメモリ（serial random access memory、ＳＲＡＭ）、ＳｔｅｌｌａｒｉｓＷａｒｅ（登録商標）ソフトウェアを搭載した内部読み出し専用メモリ（read-only memory、ＲＯＭ）、２ＫＢの電気的消去可能プログラマブル読み出し専用メモリ（electrically erasable programmable read-only memory、ＥＥＰＲＯＭ）及び／又は、１つ若しくは２つ以上のパルス幅変調（pulse width modulation、ＰＷＭ）モジュール、１つ若しくは２つ以上の直交エンコーダ入力（quadrature encoder input、ＱＥＩ）アナログ、１２個のアナログ入力チャネルを備える１つ若しくは２つ以上の１２ビットアナログ－デジタル変換器（analog-to-digital converter、ＡＤＣ）を含み、その詳細は、製品データシートで入手可能である。
一例では、プロセッサは、同じくＴｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製のＨｅｒｃｕｌｅｓ ＡＲＭ Ｃｏｒｔｅｘ Ｒ４の商品名で知られるＴＭＳ５７０及びＲＭ４ｘなどの２つのコントローラベースのファミリを備える安全コントローラを備えてもよい。安全コントローラは、スケーラブルな性能、接続性及びメモリの選択肢を提供しながら、高度な集積型安全機構を提供するために、とりわけ、ＩＥＣ６１５０８及びＩＳＯ２６２６２の安全限界用途専用に構成され得る。
コンピュータシステム２００６３は、好適な動作環境において、記載したユーザと基本コンピュータリソースとの間で媒介として機能するソフトウェアを含み得ることを理解されたい。このようなソフトウェアとしてはオペレーティングシステムを挙げることができる。ディスクストレージ上に記憶され得るオペレーティングシステムは、コンピュータシステムのリソースを制御及び割り当てするように機能し得る。システムアプリケーションは、システムメモリ内又はディスクストレージ上のいずれかに記憶されたプログラムモジュール及びプログラムデータを介して、オペレーティングシステムによるリソース管理を活用し得る。本明細書に記載される様々な構成要素は、様々なオペレーティングシステム又はオペレーティングシステムの組み合わせで実装することができることを理解されたい。
ユーザは、Ｉ／Ｏインターフェースに連結された入力デバイスを介してコンピュータシステム２００６３にコマンド又は情報を入力し得る。入力デバイスとしては、マウス、トラックボール、スタイラス、タッチパッドなどのポインティングデバイス、キーボード、マイクロフォン、ジョイスティック、ゲームパッド、衛星放送受信アンテナ、スキャナ、ＴＶチューナカード、デジタルカメラ、デジタルビデオカメラ、ウェブカメラなどを挙げることができるが、これらに限定されない。これら及び他の入力デバイスは、インターフェースポートを介し、システムバスを通してプロセッサ２０１０２に接続する。インターフェースポートとしては、例えば、シリアルポート、パラレルポート、ゲームポート及びＵＳＢが挙げられる。出力デバイスは、入力デバイスと同じタイプのポートのうちのいくつかを使用する。したがって、例えば、ＵＳＢポートを使用して、コンピュータシステム２００６３に入力を提供し、コンピュータシステム２００６３からの情報を出力デバイスに出力してもよい。出力アダプタは、特別なアダプタを必要とし得る出力デバイスの中でもとりわけ、モニタ、ディスプレイ、スピーカ及びプリンタなどのいくつかの出力デバイスが存在できることを例示するために提供され得る。出力アダプタとしては、出力デバイスとシステムバスとの間の接続手段を提供するビデオ及びサウンドカードを挙げることができるが、これは例示としてのものであり、限定するものではない。リモートコンピュータなどの他のデバイス及び／又はデバイスのシステムは、入力及び出力機能の両方を提供することができることに留意されたい。
コンピュータシステム２００６３は、クラウドコンピュータなどの１つ若しくは２つ以上のリモートコンピュータ、又はローカルコンピュータへの論理接続を使用するネットワーク化環境で動作し得る。リモートクラウドコンピュータは、パーソナルコンピュータ、サーバ、ルータ、ネットワークＰＣ、ワークステーション、マイクロプロセッサベースの機器、ピアデバイス又は他の一般的なネットワークノードなどであり得るが、典型的には、コンピュータシステムに関して説明される要素の多く又は全てを含む。簡潔にするために、リモートコンピュータと共に、メモリストレージデバイスのみが例示される。リモートコンピュータは、ネットワークインターフェースを介してコンピュータシステムに論理的に接続され、続いて、通信接続を介して物理的に接続され得る。ネットワークインターフェースは、ローカルエリアネットワーク（local area network、ＬＡＮ）及びワイドエリアネットワーク（wide area network、ＷＡＮ）などの通信ネットワークを包含し得る。ＬＡＮ技術としては、光ファイバ分散データインターフェース（Fiber Distributed Data Interface、ＦＤＤＩ）、銅線分散データインターフェース（Copper Distributed Data Interface、ＣＤＤＩ）、Ｅｔｈｅｒｎｅｔ／ＩＥＥＥ８０２．３、Ｔｏｋｅｎ Ｒｉｎｇ／ＩＥＥＥ８０２．５などを挙げることができる。ＷＡＮ技術としては、ポイントツーポイントリンク、統合サービスデジタルネットワーク（Integrated Services Digital Network、ＩＳＤＮ）及びその変形などの回路交換ネットワーク、パケット交換ネットワーク並びにデジタル加入者回線（Digital Subscriber Line、ＤＳＬ）を挙げることができるが、これらに限定されない。
様々な例では、コンピュータシステム２００６３は、デジタル画像の処理に使用される画像プロセッサ、画像処理エンジン、メディアプロセッサ、又は任意の特殊なデジタル信号プロセッサ（digital signal processor、ＤＳＰ）を備えてもよい。画像プロセッサは、単一命令複数データ（single instruction，multiple data、ＳＩＭＤ）、又は複数命令、複数データ（multiple instruction，multiple data、ＭＩＭＤ）技術を用いた並列コンピューティングを用いて速度及び効率を高めることができる。デジタル画像処理エンジンは、様々なタスクを実施することができる。画像プロセッサは、マルチコアプロセッサアーキテクチャを備えるチップ上のシステムであってもよい。
通信接続部とは、ネットワークインターフェースをバスに接続するために利用されるハードウェア／ソフトウェアを指してもよい。例示的な明瞭さのため、通信接続部は、コンピュータシステム２００６３の内部に示されているが、通信接続部は、コンピュータシステム２００６３の外部にあってもよい。例示のみを目的として、ネットワークインターフェースへの接続に必要なハードウェア／ソフトウェアとしては、通常の電話グレードモデム、ケーブルモデム、光ファイバモデム、及びＤＳＬモデムを含むモデム、ＩＳＤＮアダプタ、並びにイーサネットカードなどの内部及び外部技術を挙げることができる。いくつかの例では、ネットワークインターフェースはまた、ＲＦインターフェースを使用して提供されてもよい。
外科用ハブシステム２００６０に関連付けられた外科用データネットワークは、パッシブ、インテリジェント、又はスイッチングとして構成されてもよい。受動的外科用データネットワークはデータの導管として機能し、データが１つのデバイス（又はセグメント）から別のデバイス（又はセグメント）に、及びクラウドコンピューティングリソースに行くことを可能にする。インテリジェント外科用データネットワークは、トラフィックが監視対象の外科用データネットワークを通過することを可能にし、ネットワークハブ２００６１又はネットワークスイッチ２００６２内の各ポートを構成する追加の特徴部を含む。インテリジェント外科用データネットワークは、管理可能なハブ又はスイッチと称され得る。スイッチングハブは、各パケットの宛先アドレスを読み取り、次いでパケットを正しいポートに転送する。
手術室に配置されたモジュール式デバイス１ａ～１ｎは、モジュール式通信ハブ２００６５に連結され得る。ネットワークハブ２００６１及び／又はネットワークスイッチ２００６２は、ネットワークルータ２００６６に連結されて、デバイス１ａ～１ｎをクラウドコンピューティングシステム２００６４又はローカルコンピュータシステム２００６３に接続し得る。デバイス１ａ～１ｎに関連付けられたデータは、リモートデータ処理及び操作のためにルータを介してクラウドベースのコンピュータに転送されてもよい。デバイス１ａ～１ｎに関連付けられたデータはまた、ローカルでのデータ処理及び操作のためにローカルコンピュータシステム２００６３に転送され得る。同じ手術室に配置されたモジュール式デバイス２ａ～２ｍもまた、ネットワークスイッチ２００６２に連結されてもよい。ネットワークスイッチ２００６２は、ネットワークハブ２００６１に、及び／又はネットワークルータ２００６６に連結されて、デバイス２ａ～２ｍをクラウド２００６４に接続し得る。デバイス２ａ～２ｍに関連付けられたデータは、データ処理及び操作のためにネットワークルータ２００６６を介してクラウドコンピューティングシステム２００６４に転送され得る。デバイス２ａ～２ｍに関連付けられたデータはまた、ローカルでのデータ処理及び操作のためにローカルコンピュータシステム２００６３に転送されてもよい。
ウェアラブル感知システム２００１１は、１つ又は２つ以上の感知システム２００６９を含み得る。感知システム２００６９は、ＨＣＰ感知システム及び／又は患者感知システムを含み得る。１つ又は２つ以上の感知システム２００６９は、ネットワークルータ２００６６のうちの１つを介して直接、又はネットワークルータ２００６６と通信するネットワークハブ２００６１若しくはネットワークスイッチング２００６２を介して、外科用ハブシステム２００６０のコンピュータシステム２００６３又はクラウドサーバ２００６７と通信してもよい。
感知システム２００６９は、感知システム２００６９を、ローカルコンピュータシステム２００６３及び／又はクラウドコンピューティングシステム２００６４に接続するために、ネットワークルータ２００６６に連結され得る。感知システム２００６９に関連付けられたデータは、データ処理及び操作のために、ネットワークルータ２００６６を介してクラウドコンピューティングシステム２００６４に転送され得る。感知システム２００６９に関連付けられたデータはまた、ローカルでのデータ処理及び操作のために、ローカルコンピュータシステム２００６３に転送されてもよい。
図４に例示されるように、外科用ハブシステム２００６０は、複数のネットワークハブ２００６１及び／又は複数のネットワークスイッチ２００６２を複数のネットワークルータ２００６６と相互接続することによって、拡張され得る。モジュール式通信ハブ２００６５は、複数のデバイス１ａ～１ｎ／２ａ～２ｍを受け入れるように構成されたモジュール式制御タワー内に収容され得る。ローカルコンピュータシステム２００６３はまた、モジュール式制御タワーに収容されてもよい。モジュール式通信ハブ２００６５は、ディスプレイ２００６８に接続されて、例えば外科手技中に、デバイス１ａ～１ｎ／２ａ～２ｍのうちのいくつかによって取得された画像を表示し得る。様々な態様では、デバイス１ａ～１ｎ／２ａ～２ｍは、例えば、外科用データネットワークのモジュール式通信ハブ２００６５に接続され得る他のモジュール式デバイスの中でも、内視鏡に連結された撮像モジュール、エネルギーベースの外科用デバイスに連結された発生器モジュール、排煙モジュール、吸引／灌注モジュール、通信モジュール、プロセッサモジュール、ストレージアレイ、ディスプレイに連結された外科用デバイス、及び／又は非接触センサモジュールなどの様々なモジュールを含んでもよい。
一態様では、図４に例示する外科用ハブシステム２００６０は、デバイス１ａ～１ｎ／２ａ～２ｍ、又は感知システム２００６９をクラウドベースシステム２００６４に接続するネットワークハブ、ネットワークスイッチ、及びネットワークルータの組み合わせを備えてもよい。ネットワークハブ２００６１又はネットワークスイッチ２００６２に連結されたデバイス１ａ～１ｎ／２ａ～２ｍ又は感知システム２００６９のうちの１つ若しくは２つ以上は、リアルタイムにデータを収集し、データ処理及び操作のためにクラウドコンピュータにデータを転送し得る。クラウドコンピューティングは、ソフトウェアアプリケーションを取り扱うために、ローカルサーバ又はパーソナルデバイスを有するのではなく、コンピューティングリソースを共有することに依存することは理解されるであろう。「クラウド」という語は、「インターネット」の隠喩として使用され得るが、この用語はそのように限定はされない。したがって、「クラウドコンピューティング」という用語は、本明細書では「インターネットベースのコンピューティングのうちの１つのタイプ」を指すように使用することができ、この場合、サーバ、ストレージ及びアプリケーションなどの様々なサービスは、手術室（例えば、固定式、移動式、一時的又は現場の手術室又はスペース）に配置されたモジュール式通信ハブ２００６５及び／又はコンピュータシステム２００６３、並びにインターネットを介して、モジュール式通信ハブ２００６５及び／又はコンピュータシステム２００６３に接続されたデバイスに配信される。クラウドインフラストラクチャは、クラウドサービスプロバイダによって維持され得る。この文脈において、クラウドサービスプロバイダは、１つ又は２つ以上の手術室内に位置するデバイス１ａ～１ｎ／２ａ～２ｍの使用及び制御を調整するエンティティであり得る。クラウドコンピューティングサービスは、スマート外科用器具、ロボット、感知システム、及び手術室内に配置された他のコンピュータ化デバイスによって収集されたデータに基づいて、多数の計算を実施し得る。ハブハードウェアは、複数のデバイス、感知システム、及び／又は接続部がクラウドコンピューティングリソース及びストレージと通信するコンピュータに接続することを可能にする。
デバイス１ａ～１ｎ／２ａ～２ｍによって収集されたデータにクラウドコンピュータデータ処理技術を適用することで、外科用データネットワークは、外科的転帰の改善、コスト低減及び患者満足度の改善を提供することができる。組織の封止及び切断手技後に、組織の状態を観察して封止された組織の漏出又は灌流を評価するために、デバイス１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。クラウドベースのコンピューティングを使用して、身体組織のサンプルの画像を含むデータを診断目的で検査して疾患の影響などの病理を識別するために、デバイス１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。これには、組織の位置特定及びマージン確認並びに表現型が含まれ得る。撮像デバイスと一体化された様々なセンサを使用し、かつ複数の撮像デバイスによって捕捉された画像をオーバーレイするなどの技術を使用して、身体の解剖学的構造を識別するために、デバイス１ａ～１ｎ／２ａ～２ｍのうちの少なくともいくつかを用いることができる。画像データを含む、デバイス１ａ～１ｎ／２ａ～２ｍによって収集されたデータは、画像処理及び操作を含むデータ処理及び操作のために、クラウドコンピューティングシステム２００６４若しくはローカルコンピュータシステム２００６３又はその両方に転送され得る。データは、組織特異的部位及び状態に対する内視鏡的介入、新興技術、標的化放射線、標的化介入及び精密ロボットの適用などの更なる治療を遂行することができるかを判定することによって、外科手技の結果を改善するために分析されてもよい。そのようなデータ分析は、予後分析処理を更に採用し得、標準化された手法を使用することは、外科的治療及び外科医の挙動を確認するか、又は外科的治療及び外科医の挙動に対する修正を提案するかのいずれかのために有益なフィードバックを提供し得る。
感知システム２００６９によって収集された測定値データにクラウドコンピュータデータ処理技術を適用すると、外科用データネットワークは、改善された外科手術結果、改善された回復結果、低減されたコスト、及び改善された患者満足度をもたらし得る。感知システム２００６９のうちの少なくともいくつかは、患者を手術する外科医、外科手技のために準備中の患者、又は外科手技後に回復する患者の生理学的状態を評価するために用いられてもよい。クラウドベースのコンピューティングシステム２００６４は、外科医又は患者に関連付けられたバイオマーカをリアルタイムに監視し、外科手技前に収集された測定値データに少なくとも基づいて外科用計画を生成し、外科手技中に外科用器具に制御信号を供給し、術後期間中に患者に合併症を通知するために使用され得る。
手術室デバイス１ａ～１ｎは、ネットワークハブ２００６１に対するデバイス１ａ～１ｎの構成に応じて、有線チャネル又は無線チャネルを介して、モジュール式通信ハブ２００６５に接続され得る。ネットワークハブ２００６１は、一態様では、開放型システム間相互接続（Open System Interconnection、ＯＳＩ）モデルの物理層上で機能するローカルネットワークブロードキャストデバイスとして実装されてもよい。ネットワークハブは、同じ手術室ネットワーク内に位置するデバイス１ａ～１ｎに接続性を提供することができる。ネットワークハブ２００６１は、パケットの形態のデータを収集し、それらを半二重モードでルータに送信し得る。ネットワークハブ２００６１は、デバイスデータを転送するためのいかなる媒体アクセス制御／インターネットプロトコル（media access control、ＭＡＣ／Internet Protocol、ＩＰ）も記憶することができない。デバイス１ａ～１ｎのうちの１つのみが、ネットワークハブ２００６１を介して一度にデータを送信し得る。ネットワークハブ２００６１は、情報の送信先に関するルーティングテーブル又はインテリジェンスを有することができず、全てのネットワークデータを、各接続にわたり、及びクラウドコンピューティングシステム２００６４のリモートサーバ２００６７にブロードキャストする。ネットワークハブ２００６１は、コリジョンなどの基本的なネットワークエラーを検出し得るが、全ての情報を複数のポートにブロードキャストすることは、セキュリティリスクとなりボトルネックを引き起こすおそれがある。
手術室デバイス２ａ～２ｍは、有線チャネル又は無線チャネルを介してネットワークスイッチ２００６２に接続され得る。ネットワークスイッチ２００６２は、ＯＳＩモデルのデータリンク層内で機能する。ネットワークスイッチ２００６２は、同じ手術室内に配置されたデバイス２ａ～２ｍをネットワークに接続するためのマルチキャストデバイスであってもよい。ネットワークスイッチ２００６２は、フレームの形態のデータをネットワークルータ２００６６に送信し、全二重モードで機能し得る。複数のデバイス２ａ～２ｍは、ネットワークスイッチ２００６２を介して同時にデータを送信し得る。ネットワークスイッチ２００６２は、データを転送するためにデバイス２ａ～２ｍのＭＡＣアドレスを記憶し、使用する。
ネットワークハブ２００６１及び／又はネットワークスイッチ２００６２は、クラウドコンピューティングシステム２００６４に接続するためにネットワークルータ２００６６に連結され得る。ネットワークルータ２００６６は、ＯＳＩモデルのネットワーク層内で機能する。ネットワークルータ２００６６は、デバイス１ａ～１ｎ／２ａ～２ｍ及びウェアラブル感知システム２００１１のいずれか１つ又は全てによって収集されたデータを、更に処理及び操作するために、ネットワークハブ２００６１及び／又はネットワークスイッチ２００６２から受信したデータパケットをクラウドベースコンピュータリソースに送信するためのルートを作成する。ネットワークルータ２００６６は、例えば、同じ医療施設の異なる手術室、又は異なる医療施設の異なる手術室に配置された異なるネットワークなど、異なる位置に配置された２つ又は３つ以上の異なるネットワークを接続するために利用されてもよい。ネットワークルータ２００６６は、パケットの形態のデータをクラウドコンピューティングシステム２００６４に送信し、全二重モードで機能し得る。複数のデバイスが同時にデータを送信することができる。ネットワークルータ２００６６は、データを転送するためにＩＰアドレスを使用し得る。
一例では、ネットワークハブ２００６１は、複数のＵＳＢデバイスをホストコンピュータに接続することを可能にするＵＳＢハブとして実装されてもよい。ＵＳＢハブは、デバイスをホストシステムコンピュータに接続するためにより多くの利用可能なポートが存在するように、単一のＵＳＢポートをいくつかの階層に拡張することができる。ネットワークハブ２００６１は、有線チャネル又は無線チャネルを介して情報を受信するための有線機能又は無線機能を含み得る。一態様では、無線ＵＳＢ短距離高帯域無線通信プロトコルが、手術室内に位置するデバイス１ａ～１ｎとデバイス２ａ～２ｍとの間の通信のために用いられてもよい。
例では、手術室デバイス１ａ～１ｎ／２ａ～２ｍ及び／又は感知システム２００６９は、固定及びモバイルデバイスから短距離にわたってデータを交換し（２．４～２．４８５ＧＨｚのＩＳＭ帯域における短波長ＵＨＦ電波を使用して）、パーソナルエリアネットワーク（personal area network、ＰＡＮ）を構築するために、Ｂｌｕｅｔｏｏｔｈ無線技術規格を介してモジュール式通信ハブ２００６５と通信してもよい。手術室デバイス１ａ～１ｎ／２ａ～２ｍ及び又は感知システム２００６９は、いくつかの無線通信規格若しくは有線通信規格又はプロトコルを介してモジュール式通信ハブ２００６５と通信してもよく、このような規格又はプロトコルとしては、Ｂｌｕｅｔｏｏｔｈ、Ｌｏｗ－Ｅｎｅｒｇｙ Ｂｌｕｅｔｏｏｔｈ、近距離無線通信規格（near-field communication、ＮＦＣ）、Ｗｉ－Ｆｉ（ＩＥＥＥ８０２．１１ファミリ）、ＷｉＭＡＸ（ＩＥＥＥ８０２．１６ファミリ）、ＩＥＥＥ８０２．２０、ニューラジオ（ＮＲ）、ロングタームエボリューション（ＬＴＥ）、並びにＥｖ－ＤＯ、ＨＳＰＡ＋、ＨＳＤＰＡ＋、ＨＳＵＰＡ＋、ＥＤＧＥ、ＧＳＭ、ＧＰＲＳ、ＣＤＭＡ、ＴＤＭＡ、ＤＥＣＴ、及びこれらのイーサネット派生物のみならず３Ｇ、４Ｇ、５Ｇ、及びそれ以降に指定される任意の他の無線プロトコル及び有線プロトコルが挙げられるが、これらに限定されない。コンピューティングモジュールは、複数の通信モジュールを含んでもよい。例えば、第１の通信モジュールは、Ｗｉ－Ｆｉ及びＢｌｕｅｔｏｏｔｈ、Ｌｏｗ－Ｅｎｅｒｇｙ Ｂｌｕｅｔｏｏｔｈ，Ｂｌｕｅｔｏｏｔｈ Ｓｍａｒｔなどの短距離の無線通信専用であってもよく、第２の通信モジュールは、ＧＰＳ、ＥＤＧＥ、ＧＰＲＳ、ＣＤＭＡ、ＷｉＭＡＸ、ＬＴＥ、Ｅｖ－ＤＯ、ＨＳＰＡ＋、ＨＳＤＰＡ＋、ＨＳＵＰＡ＋、ＥＤＧＥ、ＧＳＭ、ＧＰＲＳ、ＣＤＭＡ、ＴＤＭＡなどの長距離の無線通信専用であってもよい。
モジュール式通信ハブ２００６５は、手術室デバイス１ａ～１ｎ／２ａ～２ｍ及び／又は感知システム２００６９のうちの１つ又は２つ以上の中央接続部として機能し、フレームとして知られるデータタイプを取り扱い得る。フレームは、デバイス１ａ～１ｎ／２ａ～２ｍ及び／又は感知システム２００６９によって生成されたデータを搬送し得る。フレームがモジュール式通信ハブ２００６５によって受信されると、フレームは増幅されてネットワークルータ２００６６へ送信され、このネットワークルータは、本明細書に記載されるように、多数の無線通信規格若しくは有線通信規格又はプロトコルを使用することによって、このデータをクラウドコンピューティングシステム２００６４又はローカルコンピュータシステム２００６３に転送し得る。
モジュール式通信ハブ２００６５は、スタンドアロンのデバイスとして使用されてもよく、又は大きいネットワークを形成するために互換性のあるネットワークハブ２００６１及びネットワークスイッチ２００６２に接続されてもよい。モジュール式通信ハブ２００６５は、一般に設置、構成、及び維持が容易であるため、手術室デバイス１ａ～１ｎ／２ａ～２ｍをネットワーク形成するための良好な選択肢とさせ得る。
図５は、外科用システム２０００２の一部であってもよいコンピュータ実装双方向外科用システム２００７０を例示している。コンピュータ実装双方向外科用システム２００７０は、多くの点でＨＣＰ感知システム２０００２と類似している。例えば、コンピュータ実装双方向外科用システム２００７０は、多くの点で外科用システム２０００２と類似する１つ又は２つ以上の外科用サブシステム２００７２を含んでもよい。各サブ外科用システム２００７２は、リモートサーバ２００７７及びリモートストレージ２００７８を含み得るクラウドコンピューティングシステム２００６４と通信する少なくとも１つの外科用ハブ２００７６を含んでもよい。一態様では、コンピュータ実装双方向外科用システム２００７０は、感知システム２０００１、インテリジェント外科用器具、ロボット、及び手術室内に配置された他のコンピュータ化デバイスなどの複数の手術室デバイスに接続されたモジュール式制御デバイス２００８５を含んでもよい。
図５の例に例示されるように、モジュール式制御デバイス２００８５は、内視鏡２００８７に連結され得る撮像モジュール２００８８、エネルギーデバイス２００８９に連結され得る発生器モジュール２００９０、排煙器モジュール２００９１、吸引／灌注モジュール２００９２、通信モジュール２００９７、プロセッサモジュール２００９３、ストレージアレイ２００９４、任意選択的に、それぞれ、ディスプレイ２００８６及び２００８４に連結されたスマートデバイス／器具２００９５、並びに非接触センサモジュール２００９６に連結され得る。非接触センサモジュール２００９６は、超音波、レーザタイプ、及び／又は同様の非接触測定デバイスを使用して、手術室の寸法を測定し、手術室のマップを生成してもよい。他の距離センサを用いて、手術室の境界を判定することができる。その全体が参照により本明細書に組み込まれる「ＩＮＴＥＲＡＣＴＩＶＥ ＳＵＲＧＩＣＡＬ ＰＬＡＴＦＯＲＭ」と題する２０１７年１２月２８日出願の米国特許仮出願第６２／６１１，３４１号では、同文献中の「Ｓｕｒｇｉｃａｌ Ｈｕｂ Ｓｐａｔｉａｌ Ａｗａｒｅｎｅｓｓ Ｗｉｔｈｉｎ ａｎ Ｏｐｅｒａｔｉｎｇ Ｒｏｏｍ」の見出しの下に記載されるように、超音波ベースの非接触センサモジュールは、超音波のバーストを送信し、超音波のバーストが手術室の外壁に反射したときのエコーを受信することによって手術室を走査し得る。センサモジュールは、手術室のサイズを判定し、Ｂｌｕｅｔｏｏｔｈペアリング距離限界を調整するように構成されてもよい。レーザベースの非接触センサモジュールは、例えば、レーザ光パルスを送信することによって手術室を走査することができ、手術室の外壁に反射するレーザ光パルスを受信し、送信されたパルスの位相を受信したパルスと比較して手術室のサイズを判定し、Ｂｌｕｅｔｏｏｔｈペアリング距離限界を調整する。
モジュール式制御装置２００８５はまた、１つ又は２つ以上の感知システム２００６９及び環境感知システム２００１５と通信し得る。感知システム２００６９は、ルータを介して直接的に、又は通信モジュール２００９７を介して、モジュール式制御装置２００８５に接続され得る。手術室デバイスは、モジュール式制御デバイス２００８５を介してクラウドコンピューティングリソース及びデータストレージに連結され得る。ロボット外科用ハブ２００８２もまた、モジュール式制御装置２００８５及びクラウドコンピューティングリソースに接続され得る。とりわけ、デバイス／器具２００９５又は２００８４、ヒューマンインターフェースシステム２００８０は、本明細書に記載されるように、有線通信規格若しくは無線通信規格又はプロトコルを介して、モジュール式制御デバイス２００８５に連結され得る。ヒューマンインターフェースシステム２００８０は、表示サブシステムと、通知サブシステムと、を含み得る。モジュール式制御デバイス２００８５は、ハブディスプレイ２００８１（例えば、モニタ、スクリーン）に連結されて、撮像モジュール２００８８、デバイス／器具ディスプレイ２００８６、及び／又は他のヒューマンインターフェースシステム２００８０から受信した画像を表示し、オーバーレイし得る。ハブディスプレイ２００８１はまた、画像及びオーバーレイ画像と共にモジュール式制御デバイス２００８５に接続されたデバイスから受信したデータを表示し得る。
図６は、本開示の１つ又は２つ以上の態様による、外科用器具又は外科用ツールの制御システム２０２２０の論理図を例示している。外科用器具又は外科用ツールは、構成可能であってもよい。外科用器具は、撮像デバイス、外科用ステープラ、エネルギーデバイス、エンドカッターデバイスなどの手元にあって、手技に特有の外科用備品を含んでもよい。例えば、外科用器具は、電動ステープラ、電動ステープラ発生器、エネルギーデバイス、高度エネルギーデバイス、高度エネルギージョーデバイス、エンドカッタークランプ、エネルギーデバイス発生器、手術室内撮像システム、排煙器、吸引灌注デバイス、吹送システムなどのうちのいずれかを含んでもよい。システム２０２２０は、制御回路を備え得る。制御回路は、プロセッサ２０２２２及びメモリ２０２２３を備えるマイクロコントローラ２０２２１を含み得る。例えば、センサ２０２２５、２０２２６、２０２２７のうちの１つ又は２つ以上が、プロセッサ２０２２２にリアルタイムなフィードバックを提供する。モータドライバ２０２２９によって駆動されるモータ２０２３０は、長手方向に移動可能な変位部材を動作可能に連結して、Ｉビームナイフ要素を駆動する。追跡システム２０２２８は、長手方向に移動可能な変位部材の位置を判定するように構成され得る。位置情報は、長手方向に移動可能な駆動部材の位置を、並びに発射部材、発射バー、及びＩビームナイフ要素の位置を、判定するようにプログラムされ得る、又は構成され得るプロセッサ２０２２２に提供され得る。追加のモータが、Ｉビームの発射、閉鎖管の移動、シャフトの回転、及び関節運動を制御するために、ツールドライバインターフェースに提供されてもよい。ディスプレイ２０２２４は、器具の様々な動作状態を表示し、データ入力のためのタッチスクリーン機能を含み得る。ディスプレイ２０２２４上に表示された情報は、内視鏡撮像モジュールを介して取得された画像とオーバーレイされ得る。
マイクロコントローラ２０２２１は、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製のＡＲＭ Ｃｏｒｔｅｘの商品名で知られているものなど、任意のシングルコア又はマルチコアプロセッサであってもよい。一態様では、主マイクロコントローラ２０２２１は、例えば、その詳細が製品データシートで入手可能である、最大４０ＭＨｚの２５６ＫＢのシングルサイクルフラッシュメモリ若しくは他の不揮発性メモリのオンチップメモリ、性能を４０ＭＨｚ超に改善するためのプリフェッチバッファ、３２ＫＢのシングルサイクルＳＲＡＭ、ＳｔｅｌｌａｒｉｓＷａｒｅ（登録商標）ソフトウェアを搭載した内部ＲＯＭ、２ＫＢのＥＥＰＲＯＭ、１つ若しくは２つ以上のＰＷＭモジュール、１つ若しくは２つ以上のＱＥＩアナログ、及び／又は１２個のアナログ入力チャネルを有する１つ若しくは２つ以上の１２ビットＡＤＣを備える、Ｔｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓから入手可能なＬＭ４Ｆ２３０Ｈ５ＱＲ ＡＲＭ Ｃｏｒｔｅｘ－Ｍ４Ｆプロセッサコアであってもよい。
マイクロコントローラ２０２２１は、同じくＴｅｘａｓ Ｉｎｓｔｒｕｍｅｎｔｓ製のＨｅｒｃｕｌｅｓ ＡＲＭ Ｃｏｒｔｅｘ Ｒ４の商品名で知られるＴＭＳ５７０及びＲＭ４ｘなどの２つのコントローラベースのファミリを備える安全コントローラを備えてもよい。安全コントローラは、スケーラブルな性能、接続性及びメモリの選択肢を提供しながら、高度な集積型安全機構を提供するために、とりわけ、ＩＥＣ６１５０８及びＩＳＯ２６２６２の安全限界用途専用に構成され得る。
マイクロコントローラ２０２２１は、ナイフ及び関節運動システムの速度及び位置に対する精密制御など、様々な機能を実施するようにプログラムされてもよい。一態様では、マイクロコントローラ２０２２１は、プロセッサ２０２２２と、メモリ２０２２３と、を含んでもよい。電気モータ２０２３０は、ギアボックス、及び関節運動又はナイフシステムへの機械的連結部を備えたブラシ付き直流（direct current、ＤＣ）モータであってもよい。一態様では、モータドライバ２０２２９は、Ａｌｌｅｇｒｏ Ｍｉｃｒｏｓｙｓｔｅｍｓ，Ｉｎｃから入手可能なＡ３９４１であってもよい。他のモータドライバが、絶対位置決めシステムを備える追跡システム２０２２８で使用するために容易に代用され得る。絶対位置決めシステムの詳細な説明は、その全体が参照により本明細書に組み込まれる「ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ ＦＯＲ ＣＯＮＴＲＯＬＬＩＮＧ Ａ ＳＵＲＧＩＣＡＬ ＳＴＡＰＬＩＮＧ ＡＮＤ ＣＵＴＴＩＮＧ ＩＮＳＴＲＵＭＥＮＴ」と題する２０１７年１０月１９日公開の米国特許出願公開第２０１７／０２９６２１３号に記載されている。
マイクロコントローラ２０２２１は、変位部材及び関節運動システムの速度及び位置に対する正確な制御を提供するようにプログラムされ得る。マイクロコントローラ２０２２１は、マイクロコントローラ２０２２１のソフトウェア内で応答を計算するように構成され得る。計算された応答は、実際のシステムの測定された応答と比較されて「観測された」応答を得ることができ、これが実際のフィードバックの意思決定に使用される。観測された応答は、シミュレートされた応答の滑らかで連続的な性質と、測定された応答とのバランスをとる好適な調整された値であってもよく、これはシステムに及ぼす外部の影響を検出することができる。
モータ２０２３０は、モータドライバ２０２２９によって制御されてもよく、外科用器具又はツールの発射システムによって用いられることもできる。様々な形態において、モータ２０２３０は、約２５，０００ＲＰＭの最大回転速度を有するブラシ付きＤＣ駆動モータであってもよい。いくつかの例では、モータ２０２３０としては、ブラシレスモータ、コードレスモータ、同期モータ、ステッパモータ、又は任意の他の好適な電気モータが挙げられ得る。モータドライバ２０２２９は、例えば、電界効果トランジスタ（field-effect transistor、ＦＥＴ）を備えるＨブリッジドライバを備えてもよい。モータ２０２３０は、外科用器具又はツールに制御電力を供給するために、ハンドル組立体又はツールハウジングに解放可能に取り付けられた電源組立体によって給電され得る。電源組立体は、外科用器具又はツールに給電するための電源として使用され得る、直列に接続された多数の電池セルを含み得る電池を備えてもよい。特定の状況下では、電源組立体の電池セルは、交換可能及び／又は再充電可能であってもよい。少なくとも１つの例では、電池セルは、電源組立体に連結可能かつ電源組立体から分離可能であり得るリチウムイオン電池であり得る。
モータドライバ２０２２９は、Ａｌｌｅｇｒｏ Ｍｉｃｒｏｓｙｓｔｅｍｓ，Ｉｎｃから入手可能なＡ３９４１であってもよい。Ａ３９４１は、ブラシ付きＤＣモータなどの誘導負荷を目的として特に設計された外部Ｎチャネルパワー金属酸化膜半導体電界効果トランジスタ（metal-oxide semiconductor field-effect transistor、ＭＯＳＦＥＴ）と共に使用するためのフルブリッジコントローラであってもよい。ドライバ２０２２９は、固有の電荷ポンプレギュレータを備えてもよく、これは、完全（＞１０Ｖ）ゲート駆動を７Ｖまでの電池電圧に供給し、Ａ３９４１が５．５Ｖまでの低減ゲート駆動で動作することを可能にする。ＮチャネルＭＯＳＦＥＴに必要な上記の電池供給電圧を供給するために、ブートストラップコンデンサが用いられてもよい。ハイサイド駆動用の内部電荷ポンプにより、ＤＣ（１００％デューティサイクル）動作が可能となる。フルブリッジは、ダイオード又は同期整流を使用して高速又は低速減衰モードで駆動され得る。低速減衰モードでは、電流の再循環は、ハイサイドのＦＥＴによっても、ローサイドのＦＥＴによっても可能である。電力ＦＥＴは、抵抗器で調節可能なデッドタイムによって、シュートスルーから保護され得る。統合診断は、低電圧、温度過昇、及びパワーブリッジの異常を示すものであり、ほとんどの短絡状態下でパワーＭＯＳＦＥＴを保護するように構成され得る。他のモータドライバが、絶対位置決めシステムを備えた追跡システム２０２２８で使用するために容易に代用され得る。
追跡システム２０２２８は、本開示の一態様による位置センサ２０２２５を備える制御されたモータ駆動回路構成を備え得る。絶対位置決めシステムのための位置センサ２０２２５は、変位部材の位置に対応する固有の位置信号を供給し得る。いくつかの例では、変位部材は、ギア減速機組立体の対応する駆動ギアと噛合係合するための駆動歯のラックを備える長手方向に移動可能な駆動部材を表すことができる。いくつかの例では、変位部材は、駆動歯のラックを含むように適合され、構成され得る発射部材を表すことができる。いくつかの例では、変位部材は、発射バー又はＩビームを表すことができ、それらの各々は、駆動歯のラックを含むように適合され、構成され得る。したがって、本明細書で使用するとき、変位部材という用語は、一般的に、駆動部材、発射部材、発射バー、Ｉビーム、又は変位され得る任意の要素など、外科用器具又はツールの任意の可動部材を指すために使用され得る。一態様では、長手方向に移動可能な駆動部材は、発射部材、発射バー、及びＩビームに連結され得る。したがって、絶対位置決めシステムは、実際には、長手方向に移動可能な駆動部材の直線変位を追跡することによって、Ｉビームの直線変位を追跡することができる。様々な態様では、変位部材は、直線変位を測定するために好適な任意の位置センサ２０２２５に連結されてもよい。したがって、長手方向に移動可能な駆動部材、発射部材、発射バー、若しくはＩビーム、又はそれらの組み合わせは、任意の好適な直線変位センサに連結されてもよい。直線変位センサは、接触式変位センサ又は非接触式変位センサを含んでもよい。直線変位センサは、線形可変差動変圧器（linear variable differential transformer、ＬＶＤＴ）、差動可変磁気抵抗型変換器（differential variable reluctance transducer、ＤＶＲＴ）、スライドポテンショメータ、移動可能な磁石及び一連の直線状に配置されたホール効果センサを備える磁気感知システム、固定された磁石及び一連の移動可能な直線状に配置されたホール効果センサを備える磁気感知システム、移動可能な光源及び一連の直線状に配置された光ダイオード若しくは光検出器を備える光学検出システム、固定された光源及び一連の移動可能な直線状に配置されたフォトダイオード若しくは光検出器を備える光学感知システム、又はこれらの任意の組み合わせを含んでもよい。
電気モータ２０２３０は、変位部材上の駆動歯のセット、又は駆動歯のラックと噛合係合で取り付けられるギア組立体と動作可能に接続する回転式シャフトを含み得る。センサ要素は、位置センサ２０２２５要素の１回転が、変位部材のいくつかの直線長手方向並進に対応するように、ギア組立体に動作可能に連結され得る。ギアリング及びセンサの構成は、ラックピニオン構成によって直線アクチュエータに、又はスパーギア若しくは他の接続によって回転アクチュエータに接続することができる。電源は、絶対位置決めシステムに電力を供給し、出力インジケータは、絶対位置決めシステムの出力を表示してもよい。変位部材は、ギア減速機組立体の対応する駆動ギアと噛合係合するための、その上に形成された駆動歯のラックを備える長手方向に移動可能な駆動部材を表すことができる。変位部材は、長手方向に移動可能な発射部材、発射バー、Ｉビーム、又はこれらの組み合わせを表すことができる。
位置センサ２０２２５に関連付けられたセンサ要素の１回転は、変位部材の長手方向直線変位ｄ１に相当することができ、ｄ１は、変位部材に連結されたセンサ要素の１回転の後で、変位部材が点「ａ」から点「ｂ」まで移動する長手方向の直線距離である。センサ構成は、位置センサ２０２２５が変位部材のフルストロークに対して１回又は２回以上の回転を完了する結果をもたらすギアの減速を介して連結され得る。位置センサ２０２２５は、変位部材のフルストロークに対して複数回の回転を完了し得る。
位置センサ２０２２５の２回以上の回転に対する固有の位置信号を提供するために、一連のスイッチ（ここでｎは１よりも大きい整数である）が、単独で、又はギアの減速との組み合わせで用いられてもよい。スイッチの状態は、マイクロコントローラ２０２２１にフィードバックすることができ、そのマイクロコントローラは、論理を適用して、変位部材の長手方向の直線変位ｄ１＋ｄ２＋．．．ｄｎに対応する固有の位置信号を判定する。位置センサ２０２２５の出力は、マイクロコントローラ２０２２１に供給される。センサ構成の位置センサ２０２２５は、位置信号又は値の固有の組み合わせを出力する、磁気センサ、電位差計などのアナログ回転センサ、又はアナログホール効果要素のアレイを備えてもよい。
位置センサ２０２２５は、例えば、全磁界又は磁界のベクトル成分を測定するか否かに従って分類される磁気センサなど、任意の数の磁気検出素子を備えてもよい。両タイプの磁気センサを生産するために使用される技術は、物理学及び電子工学の多数の側面を包含し得る。磁界の感知に使用される技術としては、とりわけ、探りコイル、フラックスゲート、光ポンピング、核摂動（nuclear precession）、ＳＱＵＩＤ、ホール効果、異方性磁気抵抗、巨大磁気抵抗、磁気トンネル接合、巨大磁気インピーダンス、磁歪／圧電複合材、磁気ダイオード、磁気トランジスタ、光ファイバ、磁気光学、及び微小電気機械システムベースの磁気センサを挙げることができる。
絶対位置決めシステムを備える追跡システム２０２２８の位置センサ２０２２５は、磁気回転絶対位置決めシステムを備えてもよい。位置センサ２０２２５は、Ａｕｓｔｒｉａ Ｍｉｃｒｏｓｙｓｔｅｍｓ，ＡＧから入手可能なＡＳ５０５５ＥＱＦＴシングルチップ磁気回転位置センサとして実装されてもよい。位置センサ２０２２５は、マイクロコントローラ２０２２１に接続され、絶対位置決めシステムを実現する。位置センサ２０２２５は、低電圧低電力の構成要素であり、磁石の上方に配置され得る位置センサ２０２２５のエリアに、４つのホール効果要素を含み得る。また、高解像度ＡＤＣ及びスマート電力管理コントローラをチップ上に設けてもよい。加算、減算、ビットシフト、及びテーブル参照演算のみを必要とする、双曲線関数及び三角関数を計算する簡潔で、効率的なアルゴリズムを実装するために、桁毎法及びボルダーアルゴリズムとしても知られる、座標回転デジタルコンピュータ（coordinate rotation digital computer、ＣＯＲＤＩＣ）プロセッサが設けられ得る。角度位置、アラームビット、及び磁界情報は、シリアル周辺インターフェース（serial peripheral interface、ＳＰＩ）インターフェースなどの標準的なシリアル通信インターフェースを介してマイクロコントローラ２０２２１に送信され得る。位置センサ２０２２５は、１２ビット又は１４ビットの解像度を提供し得る。位置センサ２０２２５は、小型のＱＦＮ１６ピン４×４×０．８５ｍｍパッケージで提供されるＡＳ５０５５チップであってもよい。
絶対位置決めシステムを備える追跡システム２０２２８は、ＰＩＤ、状態フィードバック、及び適応コントローラなどのフィードバックコントローラを備えてもよく、及び／又はこれを実装するようにプログラムされてもよい。電源は、フィードバックコントローラからの信号を、システムへの物理的入力、この場合は電圧へと変換する。他の例としては、電圧、電流、及び力のＰＷＭが挙げられる。位置センサ２０２２５によって測定される位置に加えて、物理的システムの物理パラメータを測定するために、他のセンサが設けられてもよい。いくつかの態様では、他のセンサとしては、その全体が参照により本明細書に組み込まれる、「ＳＴＡＰＬＥ ＣＡＲＴＲＩＤＧＥ ＴＩＳＳＵＥ ＴＨＩＣＫＮＥＳＳ ＳＥＮＳＯＲ ＳＹＳＴＥＭ」と題する２０１６年５月２４日発行の米国特許第９，３４５，４８１号、その全体が参照により本明細書に組み込まれる、「ＳＴＡＰＬＥ ＣＡＲＴＲＩＤＧＥ ＴＩＳＳＵＥ ＴＨＩＣＫＮＥＳＳ ＳＥＮＳＯＲ ＳＹＳＴＥＭ」と題する２０１４年９月１８日公開の米国特許出願公開第２０１４／０２６３５５２号、及びその全体が参照により本明細書に組み込まれる、「ＴＥＣＨＮＩＱＵＥＳ ＦＯＲ ＡＤＡＰＴＩＶＥ ＣＯＮＴＲＯＬ ＯＦ ＭＯＴＯＲ ＶＥＬＯＣＩＴＹ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＳＴＡＰＬＩＮＧ ＡＮＤ ＣＵＴＴＩＮＧ ＩＮＳＴＲＵＭＥＮＴ」と題する２０１７年６月２０日出願の米国特許出願第１５／６２８，１７５号に記載されているものなどのセンサ配置を挙げることができる。デジタル信号処理システムでは、絶対位置決めシステムはデジタルデータ取得システムに連結され、ここで絶対位置決めシステムの出力は有限の解像度及びサンプリング周波数を有する。絶対位置決めシステムは、計算された応答を測定された応答に向けて駆動する加重平均及び理論制御ループなどのアルゴリズムを使用して、計算された応答を測定された応答と組み合わせるために、比較及び組み合わせ回路を備え得る。入力を知ることによって物理的システムの状態及び出力がどうなるかを予測するために、物理的システムの計算された応答は、質量、慣性、粘性摩擦、誘導抵抗などの特性を考慮に入れてよい。
絶対位置決めシステムは、モータ２０２３０がとった前方又は後方へのステップの数を単に計数して、デバイスアクチュエータ、駆動バー、ナイフなどの位置を推定する従来の回転エンコーダが必要とされ得る、変位部材をリセット（ゼロ又はホーム）位置に後退又は前進させることなく、器具の電源投入時に変位部材の絶対位置を提供することができる。
例えば、歪みゲージ又は微小歪みゲージなどのセンサ２０２２６は、例えば、アンビルに適用される閉鎖力を示すことができ、クランプ動作中にアンビルに及ぼされる歪みの振幅など、エンドエフェクタの１つ又は２つ以上のパラメータを測定するように構成されてもよい。測定した歪みは、デジタル信号に変換されて、プロセッサ２０２２２に提供され得る。センサ２０２２６の代わりに、又はこれに加えて、例えば、負荷センサなどのセンサ２０２２７が、閉鎖駆動システムによってアンビルに加えられる閉鎖力を測定してもよい。例えば、負荷センサなどのセンサ２０２２７は、外科用器具又はツールの発射ストローク中にＩビームに加えられる発射力を測定してもよい。Ｉビームは、楔形スレッドと係合するように構成されており、楔形スレッドは、ステープルドライバを上向きにカム作用して、ステープルを押し出してアンビルと変形接触させるように構成されている。Ｉビームはまた、Ｉビームを発射バーによって遠位に前進させる際に組織を切断するために使用することができる、鋭利な切刃を含み得る。代替的に、モータ２０２３０によって消費される電流を測定するために、電流センサ２０２３１を用いてもよい。発射部材を前進させるために必要な力は、例えば、モータ２０２３０によって消費される電流に対応し得る。測定された力は、デジタル信号に変換されて、プロセッサ２０２２２に提供され得る。
例えば、歪みゲージセンサ２０２２６を使用して、エンドエフェクタによって組織に加えられる力を測定してもよい。処置されている組織に対するエンドエフェクタによる力を測定するために、歪みゲージをエンドエフェクタに連結することができる。エンドエフェクタによって把持された組織に加えられた力を測定するためのシステムは、例えば、エンドエフェクタの１つ又は２つ以上のパラメータを測定するように構成され得る微小歪みゲージなどの歪みゲージセンサ２０２２６を備えてもよい。一態様では、歪みゲージセンサ２０２２６は、組織圧縮を示し得る、クランプ動作中にエンドエフェクタのジョー部材に及ぼされる歪みの振幅又は規模を測定してもよい。測定された歪みは、デジタル信号に変換されて、マイクロコントローラ２０２２１のプロセッサ２０２２２に供給され得る。負荷センサ２０２２７は、例えば、アンビルとステープルカートリッジとの間に捕捉された組織を切断するために、ナイフ要素を動作させるために使用される力を測定してもよい。磁界センサは、捕捉された組織の厚さを測定するために用いることができる。磁界センサの測定値も、デジタル信号に変換されて、プロセッサ２０２２２に供給されてもよい。
センサ２０２２６、２０２２７によってそれぞれ測定される、組織圧縮、組織の厚さ、及び／又はエンドエフェクタを組織上で閉鎖するために必要な力の測定値は、発射部材の選択された位置、及び／又は発射部材の速度の対応する値を特性決定するために、マイクロコントローラ２０２２１によって使用され得る。一実施例では、メモリ２０２２３は、評価の際にマイクロコントローラ２０２２１によって用いられ得る技術、等式及び／又はルックアップテーブルを記憶してもよい。
外科用器具又はツールの制御システム２０２２０はまた、図５に示すようにモジュール式通信ハブ２００６５と通信するための有線又は無線通信回路を備えてもよい。
図７は、本開示による例示的外科用システム２０２８０を例示し、有線及び／又は無線接続を介してローカルエリアネットワーク２０２９２及び／又はクラウドネットワーク２０２９３を通じてコンソール２０２９４又はポータブルデバイス２０２９６と通信することができる外科用器具２０２８２を含み得る。コンソール２０２９４及びポータブルデバイス２０２９６は、任意の好適なコンピューティングデバイスであってもよい。外科用器具２０２８２は、ハンドル２０２９７と、アダプタ２０２８５と、装填ユニット２０２８７と、を含み得る。アダプタ２０２８５は、ハンドル２０２９７に解放可能に連結し、装填ユニット２０２８７は、アダプタ２０２８５が駆動シャフトから装填ユニット２０２８７に力を伝達するように、アダプタ２０２８５に解放可能に連結する。アダプタ２０２８５又は装填ユニット２０２８７は、装填ユニット２０２８７にかかる力を測定するために、内部に配置される力ゲージ（明示的に図示せず）を含み得る。装填ユニット２０２８７は、第１のジョー２０２９１及び第２のジョー２０２９０を有するエンドエフェクタ２０２８９を含み得る。装填ユニット２０２８７は、装填ユニット２０２８７を再装填するために、装填ユニット２０２８７を手術部位から除去する必要なく、臨床医が複数の締結具を複数回発射し得る生体内装填、つまり複数回発射装填ユニット（multi-firing loading unit、ＭＦＬＵ）であってもよい。
第１のジョー２０２９１及び第２のジョー２０２９０は、それらの間に組織をクランプし、クランプされた組織を通して締結具を発射し、クランプされた組織を切断するように構成され得る。第１のジョー２０２９１は、少なくとも１つの締結具を複数回発射するように構成されてもよく、又は交換される前に２回以上発射し得る複数の締結具（例えば、ステープル、クリップなど）を含む交換可能な複数回発射締結具カートリッジを含むように構成されてもよい。第２のジョー２０２９０は、締結具が複数回発射締結具カートリッジから排出される際に、締結具を変形させるか、又は他の方法で固定するアンビルを含み得る。
ハンドル２０２９７は、駆動シャフトの回転に作用するように、駆動シャフトに連結されるモータを含み得る。ハンドル２０２９７は、モータを選択的に作動させるための制御インターフェースを含み得る。制御インターフェースは、ボタン、スイッチ、レバー、スライダ、タッチスクリーン、及び任意の他の好適な入力機構又はユーザインターフェースを含んでもよく、これらは、モータを起動するために臨床医によって係合され得る。
ハンドル２０２９７の制御インターフェースは、ハンドル２０２９７のコントローラ２０２９８と通信して、モータを選択的に作動させ、駆動シャフトの回転に作用し得る。コントローラ２０２９８は、ハンドル２０２９７内に配置されてもよく、制御インターフェースからの入力、及びアダプタ２０２８５からのアダプタデータ、又は装填ユニット２０２８７からの装填ユニットデータを受信するように構成されてもよい。コントローラ２０２９８は、モータを選択的に起動するために、制御インターフェースからの入力を、並びにアダプタ２０２８５及び／又は装填ユニット２０２８７から受信されたデータを分析し得る。ハンドル２０２９７はまた、ハンドル２０２９７の使用中に臨床医が見ることができるディスプレイを含んでもよい。ディスプレイは、器具２０２８２の発射前、発射中、又は発射後に、アダプタ又は装填ユニットデータの部分を表示するように構成され得る。
アダプタ２０２８５は、内部に配置されるアダプタ識別デバイス２０２８４を含み、装填ユニット２０２８７は、内部に配置される装填ユニット識別デバイス２０２８８を含み得る。アダプタ識別デバイス２０２８４は、コントローラ２０２９８と通信し、装填ユニット識別デバイス２０２８８は、コントローラ２０２９８と通信し得る。装填ユニット識別デバイス２０２８８は、装填ユニット識別デバイス２０２８８からコントローラ２０２９８への通信を中継又は通過するアダプタ識別デバイス２０２８４と通信し得ることが理解されるであろう。
アダプタ２０２８５はまた、アダプタ２０２８５又は環境の様々な状態（例えば、アダプタ２０２８５が装填ユニットに接続されているか否か、アダプタ２０２８５がハンドルに接続されているか否か、駆動シャフトが回転しているか否か、駆動シャフトのトルク、駆動シャフトの歪み、アダプタ２０２８５内の温度、アダプタ２０２８５の発射回数、発射中のアダプタ２０２８５のピーク力、アダプタ２０２８５に加えられる力の総量、アダプタ２０２８５のピーク後退力、発射中のアダプタ２０２８５の休止回数など）を検出するために、その周囲に配置される複数のセンサ２０２８６（１つが示される）を含み得る。複数のセンサ２０２８６は、データ信号の形態でアダプタ識別デバイス２０２８４に入力を提供し得る。複数のセンサ２０２８６のデータ信号は、アダプタ識別デバイス２０２８４内に記憶されてもよく、又はアダプタ識別デバイス２０２８４内に記憶されたアダプタデータを更新するために使用されてもよい。複数のセンサ２０２８６のデータ信号は、アナログ又はデジタルであってもよい。複数のセンサ２０２８６は、発射中に装填ユニット２０２８７に及ぼされる力を測定するための力ゲージを含み得る。
ハンドル２０２９７及びアダプタ２０２８５は、電気的インターフェースを介して、アダプタ識別デバイス２０２８４及び装填ユニット識別デバイス２０２８８をコントローラ２０２９８と相互接続するように構成され得る。電気的インターフェースは、直接電気的インターフェースであってもよい（すなわち、エネルギー及び信号をそれらの間で伝送するために互いに係合する電気接点を含む）。追加的に、又は代替的に、電気的インターフェースは、エネルギー及び信号をそれらの間で無線送信する（例えば、誘導伝送する）ための非接触電気的インターフェースであってもよい。アダプタ識別デバイス２０２８４及びコントローラ２０２９８は、電気的インターフェースとは別個の無線接続を介して、互いに無線通信し得ることも企図される。
ハンドル２０２９７は、コントローラ２０２９８からシステム２０２８０の他の構成要素（例えば、ＬＡＮ２０２９２、クラウド２０２９３、コンソール２０２９４、又はポータブルデバイス２０２９６）に器具データを送信するように構成されるトランシーバ２０２８３を含み得る。コントローラ２０２９８はまた、１つ又は２つ以上のセンサ２０２８６に関連付けられた器具データ及び／又は測定値データを外科用ハブに送信してもよい。トランシーバ２０２８３は、外科用ハブ２０２７０からデータ（例えば、カートリッジのデータ、装填ユニットデータ、アダプタデータ、又は他の通知）を受信し得る。トランシーバ２０２８３は、システム２０２８０の他の構成要素からデータ（例えば、カートリッジのデータ、装填ユニットデータ、又はアダプタデータ）を受信し得る。例えば、コントローラ２０２９８は、ハンドル２０２９７に取り付けられた取り付けアダプタ（例えば、アダプタ２０２８５）のシリアル番号、アダプタ２０２８５に取り付けられた装填ユニット（例えば、装填ユニット２０２８７）のシリアル番号、及び装填ユニットに装填された複数回発射締結具カートリッジのシリアル番号を含む器具データをコンソール２０２９４に送信してもよい。その後、コンソール２０２９４は、それぞれ、取り付けられたカートリッジ、装填ユニット、及びアダプタに関連付けられたデータ（例えば、カートリッジのデータ、装填ユニットデータ、又はアダプタデータ）をコントローラ２０２９８に返信してもよい。コントローラ２０２９８は、ローカル器具ディスプレイ上にメッセージを表示してもよく、あるいはトランシーバ２０２８３を介してコンソール２０２９４又はポータブルデバイス２０２９６にメッセージを送信して、メッセージを、それぞれディスプレイ２０２９５又はポータブルデバイススクリーン上に表示してもよい。
図８は、本開示の少なくとも１つの態様による、状況認識外科用システム５１００の図を例示する。データソース５１２６は、例えば、モジュール式デバイス５１０２（患者、ＨＣＰ、及び環境、並びに／又はモジュール式デバイス自体と関連付けられるパラメータを検出するように構成されたセンサを含み得る）、データベース５１２２（例えば、患者記録を含むＥＭＲデータベース）、患者監視デバイス５１２４（例えば、血圧（blood pressure、ＢＰ）モニタ、及び心電図（electrocardiography、ＥＫＧ）モニタ）、ＨＣＰ監視デバイス３５５１０、及び／又は環境監視デバイス３５５１２を含むことができる。外科用ハブ５１０４は、例えば、受信されたデータの特定の組み合わせ又はデータソース５１２６からデータが受信された特定の順序に基づいて、データから外科手技に関するコンテキスト情報を導出するように構成することができる。受信されたデータから推測されるコンテキスト情報は、例えば、行われている外科手技のタイプ、外科医が行っている外科手技の特定のステップ、手術されている組織のタイプ、又は手技の対象である体腔を含むことができる。受信されたデータから外科手技に関する情報を導出又は推測するための外科用ハブ５１０４のいくつかの態様によるこの機能は、「状況認識」と称され得る。例えば、外科用ハブ５１０４は、状況認識システムを組み込むことができ、状況認識システムは、エッジコンピューティングシステム３５５１４又は企業クラウドサーバ３５５１６から受信された受信データ及び／又は手術計画情報から外科手技に関するコンテキスト情報を導出する、外科用ハブ５１０４に関連付けられたハードウェア及び／又はプログラミングである。
外科用ハブ５１０４の状況認識システムは、様々な異なる方式でデータソース５１２６から受信されたデータから、コンテキスト情報を導出するように構成することができる。例えば、状況認識システムは、様々な入力（例えば、データベース５１２２、患者監視デバイス５１２４、モジュール式デバイス５１０２、ＨＣＰ監視デバイス３５５１０、及び／又は環境監視デバイス３５５１２からのデータ）を、外科手技に関する対応するコンテキスト情報と相関させるために、訓練データで訓練されたパターン認識システム、又は機械学習システム（例えば、人工ニューラルネットワーク）を含むことができる。機械学習システムは、提供された入力から外科手技に関するコンテキスト情報を正確に導出するように訓練することができる。例では、状況認識システムは、外科手技に関する事前に特性評価されたコンテキスト情報を、そのコンテキスト情報に対応する１つ又は２つ以上の入力（又は、入力の範囲）と関連付けて記憶する、ルックアップテーブルを含むことができる。１つ又は２つ以上の入力による問い合わせに応答して、ルックアップテーブルは、モジュール式デバイス５１０２を制御するために状況認識システムの対応するコンテキスト情報を返すことができる。例では、外科用ハブ５１０４の状況認識システムによって受信されたコンテキスト情報は、１つ若しくは２つ以上のモジュール式デバイス５１０２の特定の制御調整、又は一連の制御調整と関連付けることができる。例では、状況認識システムは、コンテキスト情報を入力として提供された際、１つ若しくは２つ以上のモジュール式デバイス５１０２の１つ若しくは２つ以上の制御調整を生成又は読み出す、更なる機械学習システム、ルックアップテーブル、又は他のかかるシステムを含むことができる。
状況認識システムを組み込む外科用ハブ５１０４は、外科用システム５１００に多くの利点を提供することができる。１つの利点は、感知及び収集されたデータの解釈の改善を提供することを含み得、これは、外科手技の過程中の処理精度、及び／又はデータの使用を改善させる。先の例に戻ると、状況認識外科用ハブ５１０４は、どのタイプの組織が手術されているかを判定することができ、したがって、外科用器具のエンドエフェクタを閉鎖するための予想外に高い力が検出されると、状況認識外科用ハブ５１０４は、組織タイプに合わせて外科用器具のモータを正しく加速、あるいは減速させることができる。
手術されている組織のタイプは、特定の組織間隙測定用の外科用ステープル留め及び切断用器具の圧縮速度及び負荷閾値になされる調整に影響を及ぼし得る。状況認識外科用ハブ５１０４は、行われている外科手技が胸部手技であるのか、又は腹部手技であるのかを推測することができ、これにより、外科用ハブ５１０４は、外科用ステープル留め及び切断用器具のエンドエフェクタによってクランプされている組織が肺組織であるのか（胸部手技の場合）、又は胃組織であるのか（腹部手技の場合）を判定することができる。次いで、外科用ハブ５１０４は、外科用ステープル留め及び切断用器具の圧縮速度及び負荷閾値を、組織のタイプに合わせて適切に調整することができる。
吹送手技中に手術されている体腔のタイプは、排煙器の機能に影響を及ぼし得る。状況認識外科用ハブ５１０４は、手術部位が（外科手技が吹送を利用していることを判定することによって）圧力下にあるかどうかを判定し、手技のタイプを判定することができる。一般に、ある手技タイプが固有の体腔内で行われ得るので、外科用ハブ５１０４は、手術されている体腔に合わせて適切に排煙器のモータ速度を制御することができる。かくして、状況認識外科用ハブ５１０４は、胸部手技及び腹部手技の両方用に一貫した量の煙排出を提供し得る。
行われている手技のタイプは、超音波外科用器具、又は高周波（radio frequency、ＲＦ）電気外科用器具が動作するのに最適なエネルギーレベルに影響を及ぼし得る。例えば、関節鏡手技では、超音波外科用器具、又はＲＦ電気外科用器具のエンドエフェクタが流体中に浸漬されるので、より高いエネルギーレベルを必要とし得る。状況認識外科用ハブ５１０４は、外科手技が関節鏡手技であるかどうかを判定することができる。次いで、外科用ハブ５１０４は、流体で満たされた環境を補償するために、発電機のＲＦ電力レベル又は超音波振幅（例えば、「エネルギーレベル」）を調整することができる。関連して、手術されている組織のタイプは、超音波外科用器具又はＲＦ電気外科用器具が動作するのに最適なエネルギーレベルに影響を及ぼし得る。状況認識外科用ハブ５１０４は、どのタイプの外科手技が行われているかを判定し、次いで、外科手技について予想される組織形状に従って、それぞれ、超音波外科用器具又はＲＦ電気外科用器具のエネルギーレベルをカスタマイズすることができる。更に、状況認識外科用ハブ５１０４は、単に手技毎にではなく、外科手技の過程にわたって、超音波外科用器具又はＲＦ電気外科用器具のエネルギーレベルを調整するように構成することができる。状況認識外科用ハブ５１０４は、外科手技のどのステップが行われているか、又は引き続き行われるかを判定し、次いで、発電機、及び／又は超音波外科用器具若しくはＲＦ電気外科用器具の制御アルゴリズムを更新して、外科手技のステップに従って予想される組織のタイプに適切な値までエネルギーレベルを設定し得る。
例では、外科用ハブ５１０４が１つのデータソース５１２６から導き出される結論を改善するために、追加のデータソース５１２６からデータを導き出すことができる。状況認識外科用ハブ５１０４は、モジュール式デバイス５１０２から受信したデータを、他のデータソース５１２６から外科手技に関して構築したコンテキスト情報で強化し得る。例えば、状況認識外科用ハブ５１０４は、医療用撮像デバイスから受信されたビデオ又は画像データに従って、止血が生じたかどうか（例えば、手術部位での出血が止まったかどうか）を判定するように構成することができる。外科用ハブ５１０４は、生理学的測定（例えば、外科用ハブ５１０４へと通信可能に接続されたＢＰモニタで感知された血圧）を、（例えば、外科用ハブ５１０４へと通信可能に連結された医療用撮像デバイスからの）止血の視覚データ又は画像データと比較して、ステープルライン又は組織溶着の完全性に関する判定を行うように更に構成することができる。外科用ハブ５１０４の状況認識システムは、生理学的測定データを考慮して、可視化データを分析する際に追加のコンテキストを提供することができる。追加のコンテキストは、可視化データがそれ自体では決定的ではないか、又は不完全であり得る場合に有用となり得る。
例えば、状況認識外科用ハブ５１０４は、手技の後続のステップで器具の使用が必要とされることが判定された場合に、ＲＦ電気外科用器具が接続されている発電機を積極的に起動させ得る。エネルギー源を積極的に起動することは、手技の先行するステップが完了すると直ぐに、器具を使用準備完了にすることを可能にすることができる。
状況認識外科用ハブ５１０４は、外科医が見る必要があると予想される手術部位の特徴部に従って、外科手技の現ステップ、又は後続のステップが、ディスプレイ上の異なるビュー若しくは倍率を必要とするかどうかを判定することができる。外科用ハブ５１０４は、表示されたビュー（例えば、可視化システム用に医療用撮像デバイスから供給される）を、適宜、積極的に変化させることができ、これにより、ディスプレイは外科手技にわたって自動的に調整する。
状況認識外科用ハブ５１０４は、外科手技のどのステップが行われているか、又は次に行われるか、及び特定のデータ又はデータ間の比較が外科手技のそのステップに必要とされるかどうかを判定することができる。外科用ハブ５１０４は、外科医が特定の情報を尋ねるのを待機することなく、行われている外科手技のステップに基づいて、データスクリーンを自動的に呼び出すように構成することができる。
外科手技のセットアップ中、又は外科手技の過程中に、エラーがチェックされ得る。例えば、状況認識外科用ハブ５１０４は、手術室が、行われるべき外科手技用に適切に又は最適にセットアップされているかどうかを判定することができる。外科用ハブ５１０４は、行われている外科手技のタイプを判定し、対応するチェックリスト、製品位置、又はセットアップ要件を（例えば、メモリから）読み出し、次いで、現在の手術室のレイアウトを、行われていると外科用ハブ５１０４が判定した外科手技のタイプの標準レイアウトと比較するように構成することができる。いくつかの例示では、外科用ハブ５１０４は、手技のための項目リスト、及び／又は外科用ハブ５１０４とペアリングされたデバイスのリストを、所与の外科手技のための項目及び／又はデバイスの推奨又は予想されるマニフェストと比較することができる。リスト間に何らかの分断が存在する場合、外科用ハブ５１０４は、特定のモジュール式デバイス５１０２、患者監視デバイス５１２４、ＨＣＰ監視デバイス３５５１０、環境監視デバイス３５５１２、及び／又は他の外科用物品が欠落していることを示すアラートを提供することができる。いくつかの例では、外科用ハブ５１０４は、例えば、近接センサを介してモジュール式デバイス５１０２及び患者監視デバイス５１２４の相対距離又は相対位置を判定することができる。外科用ハブ５１０４は、デバイスの相対位置を、特定の外科手技用に推奨又は予想されるレイアウトと比較することができる。レイアウト間に何らかの分断が存在する場合、外科用ハブ５１０４は、外科手技の現在のレイアウトが推奨レイアウトから逸脱していることを示すアラートを提供するように構成することができる。
状況認識外科用ハブ５１０４は、外科医（又は、他のＨＣＰ）が誤りを犯しているかどうか、又は外科手技の過程中に予想される一連のアクションから逸脱しているかどうかを判定することができる。例えば、外科用ハブ５１０４は、行われている外科手技のタイプを判定し、機器使用のステップ又は順序の対応リストを（例えば、メモリから）読み出し、次いで、外科手技の過程中に行われているステップ又は使用されている機器を、外科用ハブ５１０４が行われていることを判定した外科手技のタイプについて予想されるステップ又は機器と比較するように構成することができる。外科用ハブ５１０４は、外科手技における特定のステップで予想外のアクションが行われているか、又は予想外のデバイスが利用されていることを示すアラートを提供することができる。
外科用器具（及び他のモジュール式デバイス５１０２）は、各外科手技の特定のコンテキストに合わせて調整され得（異なる組織のタイプへの調整など）、外科手技中のアクションを検証し得る。次のステップ、データ、及び表示調整は、手技の固有のコンテキストに従って、手術室内の外科用器具（及び他のモジュール式デバイス５１０２）に提供され得る。
機械学習は、人間の介入なしにデータから学習し得るコンピュータシステムを構築しようとする人工知能の一分野である。これらの技法は、データ集合体などのデータセット内のパターンを認識するように訓練され得る分析モデルの作成に依存し得る。これらのモデルを配備して、これらのパターンをバイオマーカなどのデータに適用して、更なるガイダンスなしに性能を改善し得る。
機械学習は、教師あり（例えば、教師あり学習）であり得る。教師あり学習アルゴリズムは、データセット（例えば、訓練データ）を訓練することから数学モデルを作成し得る。訓練データは、訓練例のセットを備え得る。訓練例は、１つ又は２つ以上の入力及び１つ又は２つ以上のラベル付き出力を含み得る。ラベル付き出力は、監視フィードバックとして機能し得る。数学モデルでは、訓練例は、特徴ベクトルと呼ばれるときがあるアレイ又はベクトルによって表され得る。訓練データは、行列を構成する特徴ベクトルの行によって表され得る。目的関数（例えば、コスト関数）の反復最適化を通して、教師あり学習アルゴリズムは、１つ又は２つ以上の新しい入力と関連付けられた出力を予測するために使用され得る関数（例えば、予測関数）を学習し得る。好適に訓練された予測関数は、訓練データの一部ではなかった可能性がある１つ又は２つ以上の入力に対する出力を判定し得る。例示的なアルゴリズムは、線形回帰、ロジスティック回帰、及びニューラルネットワークを含み得る。教師あり学習アルゴリズムによって解くことができる例示的な問題は、分類、回帰問題などを含み得る。
機械学習は、教師なし（例えば、教師なし学習）であり得る。教師なし学習アルゴリズムは、入力を含み得るデータセット上で訓練し得、教師なし学習アルゴリズムは、データ内の構造を見出し得る。データ内の構造は、データポイントのグループ化又はクラスタ化に類似し得る。したがって、アルゴリズムは、ラベル付けされていない可能性がある訓練データから学習し得る。監視フィードバックに応答する代わりに、教師なし学習アルゴリズムは、訓練データにおける共通性を識別し得、各訓練例におけるそのような共通性の有無に基づいて反応し得る。例示的なアルゴリズムは、アプリオリアルゴリズム、Ｋ平均、Ｋ最近傍（K-Nearest Neighbor、ＫＮＮ）、Ｋ中央値などを含み得る。教師なし学習アルゴリズムによって解くことができる例示的な問題は、クラスタ化問題、異常／外れ値検出問題などを含み得る。
機械学習は、強化学習を含み得、強化学習は、累積報酬の概念を最大化するために、ソフトウェアエージェントが環境内でどのようにアクションをとることができるかに関係し得る機械学習の領域であり得る。強化学習アルゴリズムは、（例えば、マルコフ決定過程（Markov decision process、ＭＤＰ）によって表される）環境の正確な数学モデルの知識を仮定しない場合があり、正確なモデルが実現可能でないことがあるときに使用され得る。強化学習アルゴリズムは、自律車両において、又は人間の対戦相手に対してゲームをプレイする学習において使用され得る。
機械学習は、認知コンピューティング（cognitive computing、ＣＣ）と呼ばれる技術プラットフォームの一部であり得、認知コンピューティングは、コンピュータサイエンス及び認知科学などの様々な分野を構成し得る。ＣＣシステムは、スケールで学習し、目的をもって推論し、人間と自然に対話することが可能であり得る。データマイニング、視覚認識、及び／又は自然言語処理を使用し得る自己教示アルゴリズムによって、ＣＣシステムは、問題を解決し、人間のプロセスを最適化することが可能であり得る。
機械学習の訓練プロセスの出力は、新しいデータセットに対する転帰を予測するためのモデルであり得る。例えば、線形回帰学習アルゴリズムは、線形予測関数の係数及び定数を調整することによって、訓練プロセス中に線形予測関数の予測誤差を最小にし得るコスト関数であり得る。最小値に達すると、調整された係数を有する線形予測関数は、訓練されたと見なされ得、訓練プロセスが生成したモデルを構成し得る。例えば、分類のためのニューラルネットワーク（neural network、ＮＮ）アルゴリズム（例えば、多層パーセプトロン（multilayer perceptron、ＭＬＰ））は、バイアスが割り当てられ、重み接続で相互接続されたノードの層のネットワークによって表される仮説関数を含み得る。仮説関数は、線形関数と、１つ又は２つ以上のロジスティック関数からなる最外層を伴うにネストされたロジスティック関数と、を含み得る、非線形関数（例えば、高度非線形関数）であり得る。ＮＮアルゴリズムは、フィードフォワード伝搬及び逆方向伝搬のプロセスを通してバイアス及び重みを調整することによって、分類誤差を最小限に抑えるためのコスト関数を含み得る。大域的最小値に到達すると、調整されたバイアス及び重みの層を伴う最適化された仮説関数は、訓練されたと見なされ得、訓練プロセスが生成したモデルを構成し得る。
データ集合体は、機械学習ライフサイクルの第１の段階として機械学習のために実行され得る。データ集合体は、様々なデータソースを識別すること、データソースからデータを収集すること、データを統合することなどのステップを含み得る。例えば、外科的合併症及び／又は外科手術後回復速度を予測するための機械学習モデルを訓練するために、患者の病状及びバイオマーカ測定データなどの外科手術前データを含むデータソースが、識別され得る。そのようなデータソースは、患者の電子医療記録（electronical medical record、ＥＭＲ）、患者の外科手術前バイオマーカ測定データを記憶するコンピューティングシステム、及び／又は他の同様のデータストアであり得る。そのようなデータソースからのデータは、取り出され、機械学習ライフサイクルにおける更なる処理のために中央の場所に記憶され得る。そのようなデータソースからのデータは、リンク（例えば、論理的にリンク）され得、それらが中央に記憶されているかのようにアクセスされ得る。外科データ及び／又は外科後データは、同様に識別及び／又は収集され得る。更に、収集されたデータが、統合され得る。例では、患者の外科手術前医療記録データ、外科手術前バイオマーカ測定データ、外科手術前データ、外科手術データ、及び／又は外科手術後データが、患者の記録に組み合わされ得る。患者の記録は、ＥＭＲであり得る。
データ準備は、機械学習ライフサイクルの別の段階として機械学習のために行われ得る。データ準備は、データフォーマッティング、データクリーニング、及びデータサンプリングなどのデータ前処理ステップを含み得る。例えば、収集されるデータは、モデルを訓練するのに好適なデータフォーマットではない場合がある。一例では、前外科的ＥＭＲ記録データ及び前外科的バイオマーカ測定データ、外科的データ、及び後外科的データの患者の統合データ記録は、有理データベース内にあり得る。そのようなデータ記録は、モデル訓練のためにフラットファイル形式に変換され得る。一例では、患者の前外科的ＥＭＲデータは、患者の肺気腫の診断、術前治療（例えば、化学療法、放射線、血液希釈剤）など、テキスト形式の医療データを含み得る。そのようなデータは、モデル訓練のための数値にマッピングされ得る。例えば、患者の統合データ記録は、個人識別子情報、又は年齢、勤務先、肥満度指数（body mass index、ＢＭＩ）、人口統計情報、及び同等物などの、患者を識別し得る他の情報を含み得る。そのような識別データは、モデル訓練の前に除去され得る。例えば、識別データは、プライバシーの理由で除去され得る。別の例として、モデル訓練のために使用され得るよりも多くの利用可能なデータがあり得るので、データが除去され得る。そのような場合に、利用可能なデータのサブセットは、ランダムにサンプリングされ、モデル訓練のために選択され得、残りは廃棄され得る。
データ準備は、スケーリング及び集約などのデータ変換処置（例えば、前処理後）を含み得る。例えば、前処理されたデータは、様々なスケールのデータ値を含み得る。これらの値は、例えば、モデル訓練のために０～１の間になるようにスケールアップ又はスケールダウンされ得る。例えば、前処理済みデータは、集計されるとより多くの意味を搬送するデータ値を含み得る。一例では、患者が受けた複数の以前の結腸直腸手技があり得る。以前の結腸直腸手技の合計数は、癒着に起因する外科的合併症を予測するためのモデルを訓練するためにより有意義であり得る。そのような場合、以前の結腸直腸手技の記録は、モデル訓練目的のために合計数に集計され得る。
モデル訓練は、機械学習ライフサイクルの別の態様であり得る。本明細書に記載されるモデル訓練プロセスは、使用される機械学習アルゴリズムに依存し得る。モデルは、それが訓練され、相互検証され、検査された後に、好適に訓練されたと見なされ得る。したがって、データ準備段階からのデータセット（例えば、入力データセット）は、訓練データセット（例えば、入力データセットの６０％）、検証データセット（例えば、入力データセットの２０％）、及び試験データセット（例えば、入力データセットの２０％）に分割され得る。モデルが訓練データセットで訓練された後、モデルは、過剰適合を低減するために検証データセットに対して実行され得る。過剰適合は、例えば、モデルの精度が増加した後に検証データセットに対して実行されたときにモデルの精度が減少し得るときに検出され得る。試験データセットは、最終モデルの精度をテストして、試験データセットが展開の準備ができているか、又はより多くの訓練が必要とされ得るかを判定するために使用され得る。
モデル展開は、機械学習ライフサイクルの別の態様であり得る。モデルは、スタンドアロンコンピュータプログラムの一部として展開され得る。モデルは、より大きなコンピューティングシステムの一部として展開され得る。モデルは、モデル性能パラメータを用いて展開され得る。そのような性能パラメータは、稼働中のデータセットで予測するために使用されるため、モデル精度を監視し得る。例えば、そのようなパラメータは、偽陽性及び分類モデルの偽陰性を追跡し得る。そのようなパラメータは、モデルの精度を改善するための更なる処理のために、偽陽性及び偽陰性を更に記憶し得る。
展開後のモデル更新は、機械学習サイクルの別の態様であり得る。例えば、展開されたモデルは、偽陽性及び／又は偽陰性がプロダクションデータ上で予測されるときに更新され得る。一例では、分類のために展開されたＭＬＰモデルの場合、偽陽性が生じると、展開されたＭＬＰモデルは、偽陽性を低減するため、陽性を予測するための確率カットオフを増加させるように更新され得る。一例では、分類のために展開されたＭＬＰモデルの場合、偽陰性が生じると、展開されたＭＬＰモデルは、偽陰性を低減するために陰性を予測するための確率カットオフを減少させるように更新され得る。一例では、外科的合併症の分類のための展開されたＭＬＰモデルの場合、偽陽性及び偽陰性の両方が生じるとき、展開されたＭＬＰモデルは、偽陽性を予測することが偽陰性よりも重大でない場合があるので、偽陰性を低減するために、陽性を予測するための確率カットオフを減少させるように更新され得る。
例えば、展開されたモデルは、より多くのライブ産生データが訓練データとして利用可能になるにつれて更新され得る。そのような場合、展開されたモデルは、そのような追加のライブ産生データを用いて更に訓練され、検証され、検査され得る。一例では、更に訓練されたＭＬＰモデルの更新されたバイアス及び重みは、展開されたＭＬＰモデルのバイアス及び重みを更新し得る。当業者であれば、展開後モデル更新は、１回限りの発生でない場合があり、展開されたモデルの精度を改善するのに好適な頻度で行われ得ることを認識する。
図９は、外科用ハブのディスプレイを例示する。例えば、図９は、本開示の一態様による、グローバル表示ウィンドウ４５６０２及びローカル器具表示ウィンドウ４５６０４を備える外科用ハブ２０００６に関連付けられた例示的な一次ディスプレイ４５６００を例示する。グローバル表示ウィンドウ４５６０２は、例えば、本明細書ではディスプレイ及び／又はモニタとも称される、ディスプレイの中心において、例えば、撮像モジュールに連結された腹腔鏡／内視鏡などの医療撮像デバイスを通して見られる、手術部位４５６０８の視野４５６０６を示し得る。接続された器具のエンドエフェクタ４５６１８部分は、グローバル表示ウィンドウ４５６０２内の手術部位４５６０８の視野４５６０６内に示され得る。外科用ハブ２０００６に連結された器具上に位置するディスプレイ上に示される画像は、例えば、図９に示すように、モニタ（例えば、一次ディスプレイ）４５６００の右下隅に位置するローカル器具ディスプレイウィンドウ４５６０４上に示されるか、又はミラーリングされ得る。
動作中、関連する器具情報及びメニューは、器具が外科用ハブ２０００６への器具の接続を感知するまで、器具上に位置するディスプレイ上に表示されてもよく、その時点で、器具ディスプレイ上に提示される情報の全て又はそのいくつかのサブセットが、外科用ハブ２０００６を通じて外科用ハブディスプレイ（例えば、一次ディスプレイ）４５６００のローカル器具ディスプレイウィンドウ４５６０４部分上に（例えば、これのみが）表示されてもよい。ローカル器具表示ウィンドウ上に表示された情報は、器具上に配置されたディスプレイ上にミラーリングされてもよく、又は器具ディスプレイの起動スクリーン上ではもはやアクセス可能でなくてもよい。この技術は、器具を自由にして、異なる情報を示すか、又は外科用ハブディスプレイ４５６００上により大きなフォント情報を示す。
一次ディスプレイ４５６００は、手術部位の周術期可視化を提供し得る。高度撮像は、尿管４５６２０（又は神経など）などの重要構造を識別し、視覚的に強調表示４５６２２してもよく、ディスプレイ４５６００の左側に示される器具近接ディスプレイ４５６１０を追跡してもよい。示された例では、器具近接ディスプレイ４５６１０は、器具固有の設定を示してもよい。例えば、上部器具近接ディスプレイ４５６１２は、単極器具の設定を示してもよく、中間器具近接ディスプレイ４５６１４は、双極器具の設定を示してもよく、下部器具近接ディスプレイ４５６１６は、超音波器具の設定を示してもよい。
専用ローカルディスプレイであり得る、１つ又は２つ以上の二次ディスプレイが、タッチスクリーンディスプレイを介した相互作用ポータル、及び／又はステータスを提供するために任意の数の外科用ハブ２０００６の追跡されたデータフィードを表示し得る二次スクリーンの両方を提供するように、外科用ハブ２０００６にリンクされ得る。二次スクリーンは、発射力（ＦＴＦ）、組織間隙、電力レベル、インピーダンス、組織圧縮安定性（クリープ）などを表示してもよく、一方、一次スクリーンは、フィードをクラッタのない状態に保つために、キー変数（例えば、キー変数のみ）を表示してもよい。対話型ディスプレイは、ディスプレイ上にあり得る情報を所望の位置に移動させるために使用されてもよい。対話型ディスプレイは、ユーザが、情報に関連付けられたサイズ、情報に関連付けられた色、及び／又は同等物などの情報の文字を変更することを可能にしてもよい。例えば、ユーザは、対話型ディスプレイを使用して、情報を一次ディスプレイに移動させてもよく、そこで、情報を他のデータよりも目立つように強調表示及び／又は表示してもよい。
図９に示されるように、二次スクリーンは、ディスプレイ４５６００の左側に器具近接ディスプレイ４５６１０を表示し、ディスプレイ４５６００の右下側にローカル器具ディスプレイウィンドウ４５６０４を表示する。外科用ハブディスプレイ４５６００上に提示されるローカル器具ディスプレイ４５６０４は、エンドエフェクタ４５６１８のアイコン、例えば、現在使用中のステープルカートリッジ４５６２４のアイコン、ステープルカートリッジ４５６２４のサイズ４５６２６（例えば、６０ｍｍ）、及びエンドエフェクタのナイフ４５６２８の現在位置のアイコンを表示する。
器具上に位置するディスプレイは、外科用ハブ２０００６への器具の無線又は有線取り付け、及び外科用ハブ２０００６上の器具の通信／記録を表示し得る。設定は、ユーザが両方の監視デバイスへの表示をミラーリング又は拡張することを選択することを可能にするように、器具上に提供されてもよい。器具制御部は、器具上に示されている情報のディスプレイと相互作用するために使用されてもよい。本明細書に開示されるように、器具は、外科用ハブ２０００６と無線で通信するための無線通信回路を備えてもよい。
外科用ハブ２０００６に連結された第１の器具は、外科用ハブ２０００６に連結された第２の器具のスクリーンとペアになり得る。これは、両方の器具が、一次ディスプレイの部分のミラーになる両方の２つのデバイスからの情報の何らかのハイブリッド組み合わせを表示することを可能にし得る。
外科用ハブ２０００６の一次ディスプレイ４５６００は、側副構造を回避するために、手術部位４５６０８の３６０°複合上面視覚図を提供し得る。例えば、エンドエフェクタ外科用ステープラの二次ディスプレイは、現在の視野４５６０６内の領域の周囲により良好な遠近感を提供するために、外科用ハブ２０００６の一次ディスプレイ４５６００内に、又は別のディスプレイ上に提供されてもよい。
図１０は、外科用ハブの例示的な一次ディスプレイを例示する。例えば、図１０は、外科用ステープラのエンドエフェクタ４５６３４部分の複合俯瞰図を含む例示的な一次ディスプレイを示し得る。ビューは、２つ以上の撮像アレイ、並びにアレイ及び時間、及び／又は同等物を使用してマッピングされ、エンドエフェクタ４５６３４の複数の斜視ビューを提供し、頭上視野の複合撮像を可能にしてもよい。本明細書に記載される技術は、超音波器具、電気外科用器具、超音波器具／電気外科用器具の組み合わせ、及び／又は外科用ステープラ／電気外科用器具の組み合わせに適用されてもよい。複数の画像／テキストソースからの画像及び／又はテキストをオーバーレイするか、又は拡張して、ディスプレイ（例えば、単一のディスプレイ）上に合成画像を提示するためのいくつかの技法が実施され得る。更なる例は、米国特許に開示されている。ＳＵＲＧＩＣＡＬ ＨＵＢ ＳＰＡＴＩＡＬ ＡＷＡＲＥＮＥＳＳ ＴＯ ＤＥＴＥＲＭＩＮＥ ＤＥＶＩＣＥＳ ＩＮ ＯＰＥＲＡＴＩＮＧ ＴＨＥＡＴＥＲと題され、２０１８年３月２９日に出願された米国特許出願公開第２０１９－０２０１１０４（Ａ１）号（米国特許出願第１５／９４０６７１号）で、その全体が参照により本明細書に組み込まれる。
図１０に示すように、外科用ハブ２０００６の一次ディスプレイ４５６００は、一次ウィンドウ４５６３０を表示してもよい。一次ウィンドウ４５６３０は、スクリーンの中心に位置してもよく、外科用視野４５６３２の拡大又は分解狭角図を示してもよい。スクリーンの中心に位置する一次ウィンドウ４５６３０は、血管４５６３６を把持する外科用ステープラのエンドエフェクタ４５６３４の拡大又は狭角図を示してもよい。一次ウィンドウ４５６３０は、視野４５６３２に隣接する構造の可視化を可能にする合成画像を生成するために、編成画像を表示してもよい。第２のウィンドウ４５６３８は、一次ディスプレイ４５６００の左下角に示され得る。第２のウィンドウ４５６３８は、俯瞰図において一次ウィンドウ４５６３０に示される画像の標準焦点で広角図における編成画像を表示してもよい。第２のウィンドウ４５６３８内に提供される俯瞰図は、閲覧者が、腹腔鏡、又は外科用ハブ２０００６の撮像モジュールに連結される他の撮像デバイスを移動させることなく、狭視野外科用視野４５６３２の外にある物品を容易に見ることを可能にし得る。一次ディスプレイ４５６００の右下角に示される第３のウィンドウ４５６４０は、エンドエフェクタ４５６３４のステープルカートリッジ（例えば、この事例ではステープルカートリッジ）を表すアイコン４５６４２、並びにステープル列４５６４４の数を示す「４列」及びステープルカートリッジの長さに沿ってナイフが移動した距離６２４８を示す「３５ｍｍ」などの追加情報を示してもよい。第３のウィンドウ４５６４０の下には、クランプ安定化を示すクランプ安定化シーケンス６２５０の現在の状態のフレームのアイコン４５６４６が表示される。
一例示的な可視化制御モードでは、表示は、例えば、動き追跡（例えば、モニタに対する頭部の向き）、手のジェスチャ、音声起動、及び滅菌野内の他の手段を介して、ユーザが制御してもよい。ユーザは、１つのディスプレイから別のディスプレイにデータを移動させるために、ジェスチャ、運動追跡コマンド、音声起動などを使用し得る。例えば、ユーザは、ジェスチャを使用して、データを第１のディスプレイから第２のディスプレイに移動させてもよい。ジェスチャは、ハブによって検出されてもよく、ハブは、第１のディスプレイに、データを削除するか、又はデータの表示を停止するように命令してもよく、第２のディスプレイに、データを表示するように命令してもよい。
図１１は、処置中の４つの別個の時間における手術部位の４つの広角ビュー画像の図を例示する。例えば、図１１は、本開示の一態様による、処置中の４つの別個の時間における手術部位の４つの別個の広角ビュー画像４５６５０、４５６５２、４５６５４、４５６５６の図４５６４８を示す。
画像のシーケンスは、経時的な広い焦点及び狭い焦点におけるオーバーヘッド複合画像の作成を示し得る。第１の画像４５６５０は、先行時間（例えば、０９：３５：０９）に撮影された、血管４５６３６をクランプしているエンドエフェクタ４５６３４の広角ビューであり得る。第２の画像４５６５２は、現時点ｔ１（例えば、０９：３５：１３）に撮影された、血管４５６３６をクランプしているエンドエフェクタ４５６３４の別の広角ビューであり得る。第３の画像４５６５４は、現時点ｔ１で撮影された、血管４５６３６をクランプしているエンドエフェクタ４５６３４の俯瞰図の複合画像であり得る。第３の画像４５６５４は、図１０に示されるように、外科用ハブ２０００６の一次ディスプレイ４５６００の第２のウィンドウ４５６３８に表示されてもよい。第４の画像４５６５６は、現時点ｔ１（例えば、０９：３５：１３）で血管４５６３６をクランプしているエンドエフェクタ４５６３４の狭角ビューであり得る。第４の画像４５６５６は、図１０に示されるように、外科用ハブ２０００６の一次ディスプレイ４５６００の一次ウィンドウ４５６３０に示される手術部位の狭角ビューであり得る。
本開示の一態様では、一次ディスプレイ及び／又は二次ディスプレイは、第１の画像、第２の画像、第３の画像、及び／又は第４の画像のうちの１つ又は２つ以上を表示し得る。例えば、一次ディスプレイは第３の画像を表示し得、二次ディスプレイは第４の画像を表示し得る。別の例として、一次ディスプレイは第４の画像を表示し得、第２のディスプレイは第３の画像を表示し得る。
図１２は、本開示の少なくとも１つの態様による、第１の情報層をオーバーレイする第２の情報層を例示する。例えば、図１２は、第１の情報層の上にオーバーレイされる第２の情報層を示す。第２の情報層は、第１の情報層に示される使い捨て装填ユニット（disposable loading unit、ＤＬＵ）内のナイフの検出された位置に重複する、ナイフの記号表現を含み得る。更なる例は、２０１６年３月１５日に発行された「ＳＵＲＧＩＣＡＬ ＡＰＰＡＲＡＴＵＳ ＷＩＴＨ ＩＮＤＩＣＡＴＯＲ」と題する米国特許第９，２８３，０５４号に開示されており、その全体が参照により本明細書に組み込まれる。
本明細書に説明されるように、ディスプレイは、一次ディスプレイ、二次ディスプレイ、モニタ、外科用ハブディスプレイ、ＯＲディスプレイ、ルームディスプレイ、外科用器具ディスプレイ、ウェアラブルディスプレイ、及び／又は同等物と称されてもよい。
図１２を参照すると、第２の情報層６９６３は、ディスプレイ６９６０上の第１の情報層６９６２の少なくとも一部をオーバーレイし得る。更に、一次ディスプレイ及び／又は二次ディスプレイであり得るタッチスクリーン６９６１は、ユーザが、ディスプレイ６９６０上の下層の第１の情報層６９６２内のビデオフィードバックに対して第２の情報層６９６３を操作することを可能にし得る。例えば、ユーザは、タッチスクリーン６９６１を操作して、第２の情報層６９６３に表示された情報を選択、操作、再フォーマット、サイズ変更、及び／又は他の方法で修正し得る。一態様では、ユーザは、第１の情報層及び／又は第２の情報層を、一次ディスプレイ及び／又は二次ディスプレイを含み得る１つ又は２つ以上のディスプレイに移動させ得る。一態様では、ユーザは、ディスプレイ６９６０上の第１の情報層６９６２に示された外科用器具６９６４に対して第２の情報層６９６３を操作するために、タッチスクリーン６９６１を操作し得る。ユーザは、例えば、その制御パネル６９６７のメニュー、カテゴリ、及び／又は分類を選択してもよく、第２の情報層６９６３及び／又は制御パネル６９６７は、ユーザの選択を反映するように調整されてもよい。様々な態様では、ユーザは、第１の情報層６９６２中に示される外科用器具６９６４の特定の特徴部（１つ又は複数）に対応する、器具フィードバックメニュー６９６９からカテゴリを選択してもよい。ユーザが選択したカテゴリに対応するフィードバックを、外科用器具６９６４の特定の特徴部（１つ又は複数）に関するディスプレイ６９６０上の位置に、移動させる、それ自身を位置付ける、及び／又は「スナップ」してもよい。例えば、選択されたフィードバックは、第１の情報層６９６２に示された外科用器具６９６４の特定の１つ又は２つ以上の特徴部に近い及び／又は重なる位置に移動し得る。
器具フィードバックメニュー６９６９は、複数のフィードバックカテゴリを含んでもよく、外科手技中に外科用器具６９６４によって測定及び／又は検出されたフィードバックデータに関連し得る。本明細書に記載されるように、外科用器具６９６４は、例えば、開放配向と閉鎖配向との間の可動ジョーの位置６９７０、クランプされた組織の厚さ６９７３、クランプされた組織に対するクランプ力６９７６、使い捨て装填ユニット（ＤＬＵ）６９６５の関節屈曲６９７４、並びに／又は発射要素の位置６９７１、速度６９７２、及び／若しくは力６９７５を検出及び／又は測定し得る。更に、外科用器具６９６４と信号通信するフィードバックコントローラは、感知されたフィードバックをディスプレイ６９６０に提供してもよく、これは、第２の情報層６９６３にフィードバックを表示し得る。本明細書に記載されるように、第２の情報層６９６３中に表示されるフィードバックデータの選択、配置、及び／又は形態は、例えば、タッチスクリーン６９６１へのユーザの入力に基づいて変更し得る。
ＤＬＵ６９６５のナイフがエンドエフェクタジョー６９６６及び／又は組織Ｔによって視界から遮られるとき、例えば、操作者は、フィードバックデータの変化する値及び／又は下層の第１の情報層６９６２に示されるＤＬＵ６９６５に対するフィードバックデータのシフト位置に基づいて、ＤＬＵ６９６５内のナイフの位置を追跡及び／又は概算してもよい。
様々な態様では、制御パネル６９６７の表示メニュー６９７７は、例えば、単位系（例えば、単位系カテゴリ）６９７８及び／又はデータモード（例えば、データモードカテゴリ）６９７９などの複数のカテゴリに関連し得る。特定の態様では、ユーザは、単位系カテゴリ６９７８を選択して、例えばメートル法単位と米国慣習単位との間など、単位系の間で切り替え得る。加えて、ユーザは、データモードカテゴリ６９７９を選択して、例えば、フィードバックデータの数値表現のタイプ及び／又はフィードバックデータのグラフ表現のタイプを切り替え得る。フィードバックデータの数値表示は、例えば、数値及び／又は百分率として表示し得る。更に、フィードバックデータのグラフ表現は、例えば、時間及び／又は距離の関数として表示し得る。本明細書に記載されるように、ユーザは、制御パネル６９６７から器具コントローラメニュー６９８０を選択して、外科用器具６９６４に対する指示を入力することができ、これは、例えば、器具コントローラ及び／又はマイクロコントローラを介して実装され得る。ユーザは、最小化／最大化アイコン６９６８を選択することによって制御パネル６９６７を最小化又は折り畳み得、最小化／最大化アイコン６９６８を再選択することによって制御パネル６９６７を最大化又は展開し得る。
図１３は、本開示の少なくとも１つの態様による、外科医が安全眼鏡を着用している状態で、外科手技中にハンドル組立体ハウジングと無線回路基板とを含む外科用器具を使用している外科医の斜視図を図示する。無線回路基板は、処置中、外科用器具を使用する外科医が着用している安全眼鏡のセットに信号を送信し得る。信号は、安全眼鏡上の無線ポートにより受信され得る。安全眼鏡の前部レンズ上の１つ又は２つ以上の点灯デバイスは、受信した信号に応答して変色し、又は光を消失し、又は白熱して、外科用器具のステータスに関する情報を外科医に示してもよい。点灯デバイスは、外科医の真っ直ぐな視線を妨げないように、前部レンズの周縁上に配設可能である。更なる例は、２０１５年４月２１日に発行された「ＳＵＲＧＩＣＡＬ ＩＮＳＴＲＵＭＥＮＴ ＷＩＴＨ ＳＡＦＥＴＹ ＧＬＡＳＳＥＳ」と題する米国特許第９，０１１，４２７号に開示されており、その全体が参照により本明細書に組み込まれる。
図１３は、外科手技中、医療デバイスを使用している間、外科医６９９２が装着し得る安全眼鏡６９９１の一変形物を示す。安全眼鏡６９９１は、一次ディスプレイ及び／又は二次ディスプレイを含み得る。安全眼鏡６９９１は、外科医６９９２が見ている方向を決定するために使用され得る。例えば、安全眼鏡６９９１は、（例えば、内部又は外部カメラを使用して）外科医６９９２の瞳孔の移動を分析してもよく、外科医がモニタ６９９７を見ていることを判定してもよい。別の例として、安全眼鏡６９９１は、１つ又は２つ以上のセンサを使用して外科医の頭部の移動を追跡し、外科医がどこを見ているか（例えば、外科医がモニタ６９９７を見ているか）を判定し得る。
使用時、外科用器具６９９３内に収容されている無線通信ボードは、安全眼鏡６９９１上の無線ポート６９９４と通信し得る。例示的な外科用器具６９９３は電池式のデバイスであるが、器具６９９３は、ケーブル又はその他の方法により給電されてもよい。器具６９９３は、エンドエフェクタを含む。特に、無線通信ボード６９９５は、矢印（Ｂ、Ｃ）で示される１つ又は２つ以上の無線信号を、安全眼鏡６９９１の無線ポート６９９４に送信し得る。安全眼鏡６９９１は信号を受信し、受信した信号を分析し、信号によって受信された、示されたステータス情報を、安全眼鏡６９９１を装着している外科医６９９２などのユーザに、レンズ６９９６上にて表示し得る。
無線通信基板６９９５は、本明細書に記載されるように、外科用モニタ６９９７が受信された示されたステータス情報を外科医６９９２に表示し得るように、無線信号を外科用モニタ６９９７に送信し得る。外科用モニタ６９９７は、一次ディスプレイ又は二次ディスプレイであってもよい。
安全眼鏡６９９１の一変形物は、安全眼鏡６９９１の周縁部に照明デバイスを含んでもよい。照明デバイスは、安全眼鏡６９９１が、安全眼鏡６９９１を装着しているユーザに通信する器具６９９３の周辺視野感覚フィードバックを提供し得る。照明デバイスは、例えば、発光ダイオード（light-emitted diode、「ＬＥＤ」）、一連のＬＥＤ、又は当業者に公知であり、本明細書の教示を考慮すると明白である、任意の他の好適な照明デバイスであってもよい。
ＬＥＤは、ユーザが照明デバイスを見るために手術部位から目を逸らす必要がないように、依然としてユーザの視野内に位置付けられながら、ユーザの視野の中心から逸れないように、安全眼鏡６９９１の正面レンズの縁又は側面に位置してもよい。表示された光は、点滅し、及び／又は変色して、器具６９９３から読み出された情報の様々な態様（例えば、システムステータス情報又は組織感知情報（すなわち、エンドエフェクタが組織を十分に切断及び封止したか否か））を安全眼鏡６９９１の着用者に通信し得る。収容された無線通信基板６９９５からのフィードバックは、器具６９９３の使用に関する情報をユーザに示すために、照明デバイスを起動させ、点滅させ、又は変色してもよい。例えば、デバイスは、感知される１つ又は２つ以上の組織パラメータに基づいたフィードバック機構を組み込んでもよい。この場合、状態変化と同期したこのフィードバックに基づくデバイス出力の変化は、無線通信基板６９９５を介して安全眼鏡６９９１に信号を送り、照明デバイスの起動をトリガし得る。安全眼鏡６９９１を介してユーザに器具６９９３のステータス情報を示す他の手段が企図されるので、照明デバイスの起動のそのような説明された手段は、限定と見なされるべきではない。更に、安全眼鏡６９９１は、使い捨て又は再使用可能なアイウェアであってもよい。ボタン型電池などのボタン型電力供給装置を使用して、無線受信機と、安全眼鏡（６９９１）の諸変形物のＬＥＤとに電力を供給してもよく、変形物もまた、収容された無線ボード及び３色ＬＥＤを含み得る。このようなボタン型電力供給装置は、使用時、器具（６９９３）に関する情報の感覚フィードバックを、安全眼鏡（６９９１）を着用している外科医（６９９２）に提供する低コスト手段を提供し得る。
手術室におけるデバイスペアリングの協調を提供し得る、外科用ハブが提供されてもよい。外科用ハブ２０００６の機能のうちの１つは、外科用システム２０００２の構成要素間の相互作用を制御する、それらから情報を収集する、又はそれらを調整するために、外科用システム２０００２の他の構成要素とペアリングすることである（本明細書では「接続」又は「連結」とも称される）。病院の手術室が互いに物理的に近接している可能性が高いため、外科用システム２０００２の外科用ハブ２０００６は、隣接する手術室内の外科用システム２０００２の構成要素と知らずにペアリングされる場合があり、これは、外科用ハブ２０００６の機能との顕著に干渉することになる。例えば、外科用ハブ２０００６は、異なる手術室で外科用器具を非意図的に作動させるか、又は隣接する手術室で異なる進行中の外科手技から記録情報を読み出す場合がある。
本開示の態様は、その手術室の境界内に位置する外科用システム２０００２の検出されたデバイスとペアリングし得る外科用ハブ２０００６を提示する。外科用ハブ２０００６は、別の手術室内のデバイスと誤ってペアリングすることを回避し得る。
更に、外科用ハブ２０００６は、例えば、どの外科用器具が互いにペアリングされるべきか、又は起動されるべきかについての決定を行う際に、その手術室内の外科用システム２０００２の他の構成要素の位置についてのその知識に依存し得る。外科用ハブ２０００６又は外科用システム２０００２の別の構成要素の位置の変化は、問題となり得る。
本開示の態様は更に、外科用ハブ２０００６が移動されたことを検出すると、その手術室の境界を再評価又は再判定するように構成され得る、外科用ハブ２０００６を提示する。
本開示の態様は、外科用ハブ２０００６が移動されたという指示であり得る、外科用システム２０００２の潜在的デバイスの検出時に、その手術室の境界を再決定するように構成され得る、外科用ハブ２０００６を更に提示する。
様々な態様では、外科用ハブ２０００６は、手術室で行われる外科手技において外科用システム２０００２と共に使用され得る。外科用ハブ２０００６は、手術室の境界を決定し、手術室の境界内に位置する外科用システム２０００２のデバイスを決定し、外科用ハブ２０００６を手術室の境界内に位置する外科用システム２０００２のデバイスとペアリングするように構成された制御回路を備えてもよい。
一態様では、制御回路は、外科用ハブ２０００６の起動後に手術室の境界を決定するように構成され得る。一態様では、外科用ハブ２０００６は、手術室の境界内に位置する外科用システムのデバイスを検出し、それとペアリングするように構成された通信回路を含み得る。一態様では、制御回路は、外科用システム２０００２の潜在的デバイスが検出された後に、手術室の境界を再決定するように構成され得る。一態様では、制御回路は、手術室の境界を周期的に判定するように構成され得る。
一態様では、外科用ハブ２０００６は、手術室の境界を測定するように構成された複数の非接触センサを含む手術室マッピング回路を備え得る。
様々な態様では、外科用ハブ２０００６は、プロセッサと、プロセッサに連結されたメモリとを含み得る。メモリは、上記のように、外科用ハブを、手術室の境界内に位置する外科用システム２０００２のデバイスとペアリングするために、プロセッサによって実行可能な命令を記憶し得る。様々な態様では、本開示は、本明細書に記載されるように、実行されると、機械に、外科用ハブ２０００６を手術室の境界内に位置する外科用システム２０００２のデバイスとペアリングさせる、コンピュータ可読命令を記憶する非一時的コンピュータ可読媒体を提供し得る。
図１５及び図１６は、本明細書に記載されるように、外科用ハブ２０００６を、手術室の境界内に位置する外科用システム２０００２のデバイスとペアリングするための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。図１５は、本開示の少なくとも１つの態様による、手術室の境界内に位置する外科用システムの外科用デバイスとの外科用ハブペアリングのための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。図１６は、本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成及び切断するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。
外科用ハブ２０００６は、外科手技の支援、外科用システム２０００２のデバイス間の調整、並びにデータの収集及びクラウドへの送信などの、短距離及び長距離通信を使用し得る広範囲の機能を実行し得る。その機能を実行するために、外科用ハブ２０００６は、外科用システム２０００２の他のデバイスとの短距離通信が可能な通信モジュールを備えてもよい。通信モジュールはまた、クラウドと長距離通信することもでき得る。
外科用ハブ２０００６はまた、手術室の境界を識別し、手術室内の外科用システム２０００２のデバイスを識別することが可能であり得る、手術室マッピングモジュールを備えてもよい。外科用ハブ２０００６は、手術室の境界を識別するように構成されてもよく、手術室内で検出された外科用システム２０００２の潜在的デバイスとペアリング（例えば、ペアリングのみであってもよい）又は接続してもよい。
一態様では、ペアリングは、通信リンク又は経路を確立することを含み得る。別の態様では、ペアリングは、制御リンク又は経路を確立することを含み得る。
手術室の境界のマッピング又は評価は、外科用ハブ２０００６の起動（例えば、初期起動）中に行われ得る。外科用ハブ２０００６は、その手術室を周期的にマッピングすることによって、手術中に空間認識を維持するように構成されてもよく、これは、外科用ハブ２０００６が移動されたかどうかを判定する際に有用であり得る。再評価３０１７は、周期的に行われてもよく、又は手術室内にあると見なされる外科用システム２０００２のデバイスの変化を観察することなどの事象によってトリガされてもよい。一態様では、変化は、図１７に示すように、手術室の境界内にあると以前に見なされなかったデバイス（例えば、新しいデバイス）の検出３０１０である。図１７は、本開示の少なくとも１つの態様による、新しいデバイスを検出した後の手術室の境界を選択的に再評価するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。別の態様では、変化は、図１８に示されるように、以前に手術室内に常駐すると見なされたペアリングされたデバイスの消失、切断、又はペアリング解除であってもよい。図１８は、本開示の少なくとも１つの態様による、ペアリングされたデバイスの接続解除後の手術室の境界を選択的に再評価するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。外科用システム２０００６は、ペアリングされたデバイスとの接続を連続的に監視して（３０３５）、ペアリングされたデバイスの消失、接続解除、又はペアリング解除を検出し得る（３０３４）。
他の態様では、再評価トリガ事象は、例えば、外科医の位置の変化、器具交換、又は外科用システム２０００６によって行われている新しいタスクのセットの感知であってもよい。
一態様では、外科用システム２０００６による部屋の境界の評価は、外科システム２０００６が手術室の壁を検出することを可能にする、外科システム内の手術室マッピングモジュールのセンサアレイの起動によって達成される。
外科用システム２０００２の他の構成要素は、外科用ハブ２０００６と同じ又は同様の方法で空間的に認識するように作製され得る。例えば、ロボットハブはまた、手術室マッピングモジュールを備えてもよい。一次ディスプレイ及び／又は二次ディスプレイはまた、手術室マッピングモジュールを備えてもよい。
外科用ハブ２０００６の空間認識、及び外科用システム２０００２の潜在的な構成要素のための手術室をマッピングするその能力は、外科用ハブ２０００６が、そのような潜在的な構成要素を外科用システム２０００２の一部として含めるか、又は除外するかについての自律的な決定を行うことを可能に得、手術スタッフがそのようなタスクを扱うことから解放し得る。更に、外科用ハブ２０００６は、例えば、外科手技の実施前、実施中、及び／又は実行後に収集された情報に基づいて、手術室で実施される外科手技の種類についての推定を行うように構成され得る。収集された情報の例としては、手術室内に持ち込まれるデバイスの種類、手術室内へのそのようなデバイスの導入時間、及び／又はデバイス起動シーケンスが挙げられる。外科用ハブ２０００６の空間認識はまた、手術室内の１つ又は２つ以上のディスプレイを更新するために使用され得る。例えば、外科用ハブ２０００６の空間認識は、器具の検出、手術室のマッピング、ユーザの検出、外科用ハブの場所の変化、器具の切断及び／又は同様のことのうちの少なくとも１つに基づいて、一次ディスプレイ上にデータを表示してもよく、二次ディスプレイ上にデータを表示してもよく、及び／又は一次ディスプレイと二次ディスプレイとの間でデータを移動させてもよい。
一態様では、外科用ハブ２０００６は、手術室マッピングモジュールを用いて、超音波又はレーザ非接触測定デバイスを使用して、手術室の境界（例えば、固定、可動、又は一時的な手術室又はスペース）を判定し得る。
図１４を参照すると、超音波ベースの非接触センサ３００２が、超音波のバーストを送信し、超音波が手術室の外周壁３００６で反射したときのエコーを受信することによって手術室をスキャンして、手術室のサイズを判定し、Ｂｌｕｅｔｏｏｔｈペアリング距離限界を調整するために用いられ得る。一例では、非接触センサ（例えば、超音波ベースの非接触センサ）３００２は、図１４に示されるように、ピング超音波距離センサとし得る。
図１４は、本開示の少なくとも１つの態様による、外科用ハブと手術室壁との間の距離を決定するための手術室壁の超音波ピング送出を例示する。
図１４は、超音波センサ３００２がその超音波スピーカ３００３で短いチャープをどのように送信し、手術室マッピングモジュールのマイクロコントローラ３００４が、エコーが超音波センサの超音波マイクロフォン３００５に戻るのにどのくらいかかるのかを測定することをどのように可能にするかを示している。マイクロコントローラ３００４は、超音波センサ３００２にパルスを送信して、測定を開始し得る。超音波センサ３００２は、次いで、マイクロコントローラプログラムがパルス入力コマンドを開始するのに十分な時間、待機し得る。次いで、超音波センサ３００２が４０ｋＨｚトーンをチャープするとほぼ同時に、超音波センサはマイクロコントローラ３００４に高信号を送信し得る。超音波センサ３００２は、その超音波マイクロフォン３００５を用いてエコーを検出すると、その高信号を低に戻すように変化させ得る。マイクロコントローラのパルス入力コマンドは、高い変化と低い変化との間の時間を測定し得、その測定値を変数に記憶し得る。この値は、外科用ハブ２０００６と手術室壁（例えば、手術室外周壁）３００６との間の距離を計算するために、空気中の音の速度と共に使用され得る。
一例では、図１４に示されるように、外科用ハブ２０００６は、４つの超音波センサ３００２を備え得、４つの超音波センサの各々は、外科用ハブ２０００６と手術室３０００の壁との間の距離を評価するように構成される。外科用ハブ２０００６は、手術室の境界を判定するために、４つ超又は４つ未満の超音波センサ３００２を備えてもよい。
他の距離センサが、手術室の境界を決定するために、手術室マッピングモジュールによって採用されてもよい。一例では、手術室マッピングモジュールは、手術室の境界を評価するために採用され得る、１つ又は２つ以上の光電センサを備えてもよい。一例では、好適なレーザ距離センサもまた、手術室の境界を評価するために用いられてもよい。レーザベースの非接触センサは、レーザ光パルスを送信し、手術室の周壁から跳ね返るレーザ光パルスを受信し、送信されたパルスの位相を受信されたパルスと比較し、手術室のサイズを判定し、Ｂｌｕｅｔｏｏｔｈペアリング距離限界を調整することによって、手術室をスキャンしてもよい。
図２２は、本開示の少なくとも１つの態様による、外科用システムを介して手術室で実施される外科手技の部分的な人為的な予定表を例示する。
図２２の左上隅を参照すると、外科用ハブ２０００６が手術室３０００に持ち込まれ得る。外科用ハブ２０００６は、外科手技の前に発生するセットアップの開始時に起動され得る。図２２の例では、セットアップは、リアルタイムクロックに基づいて１１：３１：１４（ＥＳＴ）の実際の時間で開始し得る。しかしながら、記載された手順のセットアップ開始時間では、外科用ハブ２０００６は、個人の患者情報を保護するために、人為的なリアルタイム０７：３６：００で人為的にランダム化されたリアルタイムクロックタイミングスキームを開始し得る（３００１）。
人為的なリアルタイム０７：３６：０１では、手術室マッピングモジュールが、超音波距離センサを用いて、手術室に超音波でピング送出して（例えば、上記のように超音波のバーストを送信し、それが手術室の外周壁から反射したときのエコーを待つ）、手術室のサイズを検証し、ペアリング距離限界を調整し得る。
人為的なリアルタイム０７：３６：０３では、データが取り除かれ、タイムスタンプされ得る。人為的なリアルタイム０７：３６：０５では、外科用ハブ２０００６は、手術室マッピングモジュールの超音波距離センサ３００２を使用して検証された際の手術室３０００内のみに位置するデバイスのペアリングを開始し得る。図２２の右上隅は、手術室３０００の境界内にあり、かつ二次ディスプレイデバイス３０２０、二次ハブ３０２１、共通インターフェースデバイス３０２２、電動ステープラ３０２３、ビデオタワーモジュール３０２４、及び電動ハンドヘルド式切開器具３０２５を含む、外科用ハブ２０００６とペアリングされるいくつかの例示的なデバイスを示す。一方、二次ハブ３０２１’、二次ディスプレイデバイス３０２０’、及び電動ステープラ３０２６は全て、手術室３０００の境界の外側にあり、したがって、外科用ハブ２０００６とペアリングされない。
手術室内にある外科用システム２０００２のデバイスとの通信リンクを確立することに加えて、外科用ハブ２０００６はまた、デバイスの各々に固有の識別及び通信シーケンス又は番号を割り当て得る。固有のシーケンスは、デバイスの名前と、通信が最初に確立されたときのタイムスタンプとを含み得る。他の好適なデバイス情報もまた、デバイスの固有のシーケンスに組み込まれ得る。
図２２の左上隅に示されるように、外科用ハブ２０００６は、手術室３０００の境界が、外科用ハブ２０００６から距離ａ、－ａ、ｂ、及び－ｂにあると判定している。デバイス「Ｄ」は、その手術室３０００の決定された境界の外側にあるので、外科用ハブ２０００６は、デバイス「Ｄ」とペアリングしなくてもよい。
図１５は、外科用ハブ２０００６が、その手術室の境界内のデバイスとどのようにペアリングし得る（例えば、ペアリングのみし得る）かを例示する、例示的アルゴリズムである。起動後、外科用ハブ２０００６は、本明細書で説明されるように、手術室マッピングモジュールを使用して手術室の境界を判定し得る（３００７）。初期判定後、外科用ハブ２０００６は、ペアリング範囲内のデバイスを連続的に探索又は検出し得る（３００８）。デバイスが検出された場合（３０１０）、外科用ハブ２０００６は、次いで、検出されたデバイスが手術室の境界内にあるかを判定し得る（３０１１）。デバイスが手術室の境界内にあると判定された場合、外科用ハブ２０００６は、デバイスとペアリングし得る（３０１２）。外科用ハブ２０００６は、ペアリングされたデバイスに関連付けられたデータを一次ディスプレイ及び／又は二次ディスプレイ上に表示してもよい。特定の事例では、外科用ハブ２０００６はまた、デバイスに識別子を割り当て得る（３０１３）。しかしながら、検出されたデバイスが手術室の境界の外側にあると外科用ハブ２０００６が判定した場合、外科用ハブ２０００６は、デバイスを無視し得る（３０１４）。
図１６を参照すると、手術室の境界の初期判定後、及びそのような境界内に位置するデバイスの初期ペアリング後、外科用ハブ２０００６は、ペアリングのために利用可能となる新しいデバイスを検出し続け得る（３０１５）。新しいデバイスが検出された場合（３０１６）、外科用ハブ２０００６は、新しいデバイスとのペアリングの前に、手術室の境界を再評価する（３０１７）ように構成され得る。新しいデバイスが、手術室の新たに判定された境界内にあると判定された場合（３０１８）、外科用ハブ２０００６は、デバイスとペアリングし（３０１９）、新しいデバイスに固有の識別子を割り当て得る（３０３０）。しかしながら、新しいデバイスが手術室の新たに判定された境界の外側にあると外科用ハブ２０００６が判定した場合、外科用ハブ２０００６は、デバイスを無視し得る（３０３１）。
ペアリングのために、手術室マッピングモジュールは、コンパス及び統合Ｂｌｕｅｔｏｏｔｈトランシーバを備えてもよい。病院環境又は地理的位置によって著しく影響されない他の通信機構が使用されてもよい。Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ（ＢＬＥ）ビーコン技術は、現在、約１～２メートルの精度で屋内距離測定を達成し得、より近位（０～６メートル以内）での改善された精度を有する。距離測定の精度を改善するために、コンパスがＢＬＥと共に使用され得る。手術室マッピングモジュールは、ＢＬＥ及びコンパスを利用して、モジュールが患者に対してどこに位置しているかを判定し得る。例えば、互いに対向する２つのモジュール（コンパスによって検出される）は、それらの間の距離が１メートル超である状態で、モジュールが患者の両側にあることを明確に示し得る。手術室内により多くの「ハブ」対応モジュールが存在すると、三角測量技術に起因して、達成可能な精度がより高くなり得る。
複数の外科用ハブ２０００６、モジュール及び／又は他の周辺装置が、図２２の右上隅に示されるように、同じ手術室内に存在する状況では、手術室マッピングモジュールは、手術室内に存在する各モジュールの物理的位置をマッピングするように構成され得る。この情報は、ユーザインターフェースによって使用されて、手術室の仮想マップを表示し得、ユーザが、どのモジュールが存在して有効化されているか、及びそれらの現在のステータスをより容易に識別することを可能にする。一態様では、外科用ハブ２０００６によって収集されたマッピングデータは、クラウドにアップロードされ得、データは、例えば、手術室がどのように物理的にセットアップされているかを識別するために分析され得る。
外科用ハブ２０００６は、送信無線信号の強度及び方向を評価することによってデバイスの位置を決定するように構成され得る。Ｂｌｕｅｔｏｏｔｈプロトコルについて、受信信号強度インジケーション（Received Signal Strength Indication、ＲＳＳＩ）は、受信された無線信号強度の測定値である。一態様では、外科用システム２０００２のデバイスは、ＵＳＢ Ｂｌｕｅｔｏｏｔｈドングルを備え得る。外科用ハブ２０００６は、ＵＳＢ Ｂｌｕｅｔｏｏｔｈビーコンをスキャンして距離情報を取得し得る。別の態様では、可変減衰器を有するＢｌｕｅｔｏｏｔｈアクセスポイント上の複数の高ゲインアンテナは、ＲＳＳＩ測定よりも正確な結果を生成し得る。一態様では、ハブは、複数のアンテナからの信号強度を測定することによってデバイスの場所を判定するように構成され得る。代替的に、いくつかの例では、外科用ハブ２０００６は、外科用ハブ２０００６の位置の変化を検出するように構成された１つ又は２つ以上の運動センサデバイスを備え得る。
図２２の左下隅を参照すると、外科用ハブ２０００６は、破線で図示されているその元の位置から、依然として手術室３０００の境界の外側にあるデバイス「Ｄ」により近い新しい位置に移動されている。外科用ハブ２０００６は、その新しい位置にあり、以前に判定された手術室の境界に基づいて、デバイス「Ｄ」が外科用システム２０００２の変圧構成要素であると自然に結論付け得る。しかしながら、新しいデバイスの導入は、図１５、図１７の例示的なアルゴリズムに示されるように、手術室の境界の再評価（３０１７）のためのトリガ事象であり得る。再評価を実施した後、外科用ハブ２０００６は、手術室境界が変化したと判定し得る。新しい境界に基づいて、距離ａｎｅｗ、－ａｎｅｗ、ｂｎｅｗ、及び－ｂｎｅｗにおいて、外科用ハブ２０００６は、それが移動されたこと、及びデバイス「Ｄ」がその手術室の新しく判定された境界の外側にあることを結論付け得る。したがって、外科用ハブ２０００６は、依然として、デバイス「Ｄ」とペアリングしないことになり得る。外科用ハブ２０００６はまた、変化を反映するように、一次ディスプレイ及び／又は二次ディスプレイを更新してもよい。
一態様では、図１５～図１９に示されるプロセスのうちの１つ又は２つ以上は、外科用ハブ２０００６の制御回路によって実行され得る。別の態様では、図１５～図１９に示されるプロセスのうちの１つ又は２つ以上は、クラウドコンピューティングシステム２０００８によって実行され得る。更に別の態様では、図１５～１９に示されるプロセスのうちの１つ又は２つ以上は、前述のクラウドコンピューティングシステム２０００８のうちの少なくとも１つ、及び／又は外科用器具のマイクロコントローラ、ロボット外科用の制御回路、外科用器具の制御回路、及び／又は任意の他の好適なマイクロコントローラなどのモジュール式デバイスの制御回路と組み合わせた外科用ハブ２０００６の制御回路によって実行され得る。
外科手技中、超音波又はＲＦ外科用器具などの外科用器具は、外科用ハブ２０００６の発生器モジュール１４０に連結され得る。加えて、足、手、スイッチ、及び／又は別の起動デバイスによって制御され得るコントローラなどの別個の外科用器具コントローラが、発生器から外科用器具へのエネルギーの流れを起動するために、外科用器具の操作者によって使用され得る。複数の外科用器具コントローラ及び複数の外科用器具は、手術室で同時に使用され得る。誤った外科用器具コントローラを押す又は起動することは、望ましくない結果をもたらし得る。本開示の態様は、外科用ハブ２０００６が外科用器具コントローラと外科用器具とのペアリングを調整して、患者及び操作者の安全を確保する解決策を提示する。
本開示の態様は、手術室の境界内の外科用システム２０００２の構成要素間のペアリングを確立及び切断して、そのような構成要素間の情報の流れ及び制御動作を調整するように構成された外科用ハブ２０００６について提示される。外科用ハブ２０００６は、外科用ハブ２０００６の手術室の境界内に存在する外科用器具コントローラと外科用器具との間のペアリングを確立するように構成され得る。
様々な態様では、外科用ハブ２０００６は、操作者要求又は状況及び／若しくは空間認識に基づいて、外科用システム２０００２の構成要素間のペアリングを確立及び切断するように構成され得る。
本開示の態様は、手術室で実施される外科手技で外科用システムと共に使用するための外科用ハブについて提示される。外科用ハブは、外科用システムのデバイス間のペアリングを選択的に形成及び切断する制御回路を含み得る。外科用ハブは、形成又は切断されたペアリングを反映するように、一次ディスプレイ及び／又は二次ディスプレイを更新してもよい。図２０で示されるなどの一態様では、ハブは、３１００でハブを外科用システムの第１のデバイスとペアリングするように構成された制御回路を含み得、３１０２で第１のデバイスに第１の識別子を割り当て得、３１０６でハブを外科システムの第２のデバイスとペアリングし得、３１１２で第２の識別子を第２のデバイスに割り当て得、及び／又は３１１２で第１のデバイスを第２のデバイスと選択的にペアリングし得る。一態様では、外科用ハブは記憶媒体を含み得、制御回路は、記憶媒体内に第１のデバイスと第２のデバイスとの間のペアリングを示すレコードを記憶するように構成される。一態様では、第１のデバイスと第２のデバイスとの間のペアリングは、それらの間の通信経路を画定し得る。一態様では、第１のデバイスと第２のデバイスとの間のペアリングは、第２のデバイスから第１のデバイスに制御動作を送信するための制御経路を画定し得る。
図２１に示されるような態様では、制御回路は、３１２０でハブを外科用システムの第３のデバイスとペアリングし、３１２５で第３の識別子を第３のデバイスに割り当て、３１２８で第１のデバイスと第２のデバイスとの間のペアリングを切断し、及び／又は３１３０で第１のデバイスを第３のデバイスと選択的にペアリングするように更に構成され得る。一態様では、制御回路は、記憶媒体内に第１のデバイスと第３のデバイスとの間のペアリングを示すレコードを記憶するように更に構成され得る。一態様では、第１のデバイスと第３のデバイスとの間のペアリングは、それらの間の通信経路を画定し得る。一態様では、第１のデバイスと第３のデバイスとの間のペアリングは、第３のデバイスから第１のデバイスに制御動作を送信するための制御経路を画定し得る。
様々な態様では、外科用ハブは、プロセッサと、プロセッサに連結されたメモリとを含み得る。メモリは、上記のように、外科用システムのデバイス間のペアリングを選択的に形成及び切断するように、プロセッサによって実行可能な命令を記憶し得る。様々な態様では、本開示は、非一時的コンピュータ可読命令を記憶する非一時的コンピュータ可読媒体を提供し、コンピュータ可読命令は、実行されると、機械に、上記のように、外科用システムのデバイス間のペアリングを選択的に形成及び切断させ得る。図２０及び図２１は、本明細書中に記載されるような、外科用システムのデバイス間のペアリングを選択的に形成及び切断するための制御プログラム又は論理構成を示すプロセスの論理フロー図である。図２０は、本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。図２１は、本開示の少なくとも１つの態様による、外科用システムのデバイス間の接続を選択的に形成及び切断するための制御プログラム又は論理構成を図示するプロセスの論理フロー図である。
一態様では、外科用ハブ２０００６は、外科用器具との第１のペアリング、及び外科用器具コントローラとの第２のペアリングを確立し得る。外科用ハブ２０００６は、次いで、外科用器具及び外科用器具コントローラが互いに動作することを可能にするように、ペアリングを一緒にリンクさせ得る。外科用ハブ２０００６は、リンクされたペアリングを反映するように、一次ディスプレイ及び／又は二次ディスプレイの表示を更新し得る。別の態様では、外科用ハブ２０００６は、外科用器具と外科用器具コントローラとの間の既存の通信リンクを切断し得、次いで、外科用器具を外科用ハブ２０００６にリンクされる別の外科用器具コントローラにリンクし得る。外科用ハブ２０００６は、切断された通信リンク及び／又は別の外科用器具コントローラへのリンクを反映するように、一次ディスプレイ及び／又は二次ディスプレイの表示を更新し得る。
一態様では、外科用器具コントローラは、２つのソースにペアリングされ得る。外科用器具コントローラは、その起動の制御のために、発生器モジュールを含む外科用ハブ２０００６とペアリングされ得る。外科用器具コントローラはまた、誤った外科用器具の不注意な起動を防止するために、特定の外科用器具とペアリングされ得る。
図２０を参照すると、外科用ハブ２０００６は、通信モジュールに、第１の外科用器具であり得る、外科用システム２０００２の第１のデバイス３１０２とペアリングさせるか（３１００）、又はそれとの第１の通信リンク３１０１を確立させ得る。次いで、ハブは、第１の識別番号を第１のデバイス３１０２に割り当て得る（３１０４）。これは、デバイスの名前及び通信が最初に確立されたときのタイムスタンプを含み得る、固有の識別及び通信シーケンス又は番号であり得る。
加えて、外科用ハブ２０００６は次いで、通信モジュールに、外科用器具コントローラであり得る、外科用システム２０００２の第２のデバイス３１０８とペアリングさせるか（３１０６）、又はそれとの第２の通信リンク３１０７を確立させ得る。外科用ハブ２０００６は、次いで、第２の識別番号を第２のデバイス３１０８に割り当て得る（３１１０）。
様々な態様では、外科用ハブ２０００６をデバイスとペアリングすることは、本明細書に記載されるように、新しいデバイスの存在を検出すると、新しいデバイスが手術室の境界内にあることを判定することと、新しいデバイスが手術室の境界内に位置する場合、新しいデバイスとペアリングする（例えば、ペアリングのみ）こととを含み得る。
図２１を参照すると、外科用ハブ２０００６は、例えば、別の外科用器具コントローラであり得る、外科用システム２０００２の第３のデバイス３１１６を検出し、それと第３の通信リンク３１２４をペアリング（３１２０）又は確立し得る。外科用ハブ２０００６は、次いで、第３の識別番号を第３のデバイス３１１６に割り当て得る（３１２６）。外科用ハブ２０００６は、第３のデバイスが検出及び／又はペアリングされたことを示すために、一次ディスプレイ及び／又は二次ディスプレイを更新し得る。
一態様では、コンピュータシステムは、手術部位（例えば、腹腔鏡手術を受ける患者の腹部）の外部にあるＯＲのビデオ／画像を利用し得る。この態様では、本明細書に記載されるコンピュータシステムによる分析のために画像を取り込むカメラアセンブリは、腹腔鏡、胸腔鏡、又は患者の身体の内部を可視化するために利用される別のそのような内視鏡及び／若しくはビデオカメラからの画像を除外又は含み得る。むしろ、カメラアセンブリは、ＯＲ内で起こっている動作に関してより幅広いコンテキストを提供するために、外科用デバイスがどのように利用されているか、並びに手術スタッフが互いに及び外科用デバイスとどのように相互作用しているかを可視化するための、ＯＲの方々に位置付けられたカメラを含み得る。別の態様では、外部で取り込まれたビデオ／画像は、内視鏡からのビデオ／画像と併せて、分析用に及び／又は使用中の外科用デバイスの制御を改善するために利用し得る。更なる例は、米国特許に開示されている。ＩＭＡＧＥ ＣＡＰＴＵＲＩＮＧ ＯＦ ＴＨＥ ＡＲＥＡＳ ＯＵＴＳＩＤＥ ＴＨＥ ＡＢＤＯＭＥＮ ＴＯ ＩＭＰＲＯＶＥ ＰＬＡＣＥＭＥＮＴ ＡＮＤ ＣＯＮＴＲＯＬ ＯＦ Ａ ＳＵＲＧＩＣＡＬ ＤＥＶＩＣＥ ＩＮ ＵＳＥと題され、２０１８年１１月６日に出願された、米国特許出願公開第２０１９－０２０１１２９（Ａ１）号（米国特許出願第１６／１８２２６９号）で、これは開示の全内容が参照により本明細書に組み込まれる。
図２３は、本開示の少なくとも１つの態様による、例示的なＯＲセットアップの図である。様々な実施態様では、外科用ハブ２１１８０１は、「外科用ハブ」の項で上述したように、通信プロトコル（例えば、Ｂｌｕｅｔｏｏｔｈ）を介して、１つ又は２つ以上のカメラ２１１８０２、外科用器具２１１８１０、ディスプレイ２１１８０６、オーバーハードライト（overheard lights）２１１８０８、及びＯＲ ２１１８００内の他の外科用デバイスに接続され得る。カメラ２１１８０２は、外科手技の過程でＯＲ２１１８００内の外科職員２１１８０３及び／又は外科用器具２１１８１０（又は他の外科用デバイス）の画像及び／又はビデオを捕捉するために配向され得る。捕捉された画像（複数可）は、静止画像又は動画像（すなわち、ビデオ）を含み得る。外科職員２１１８０３及び／又は外科用器具２１１８１０の画像は、様々な角度及び倍率で、様々なフィルタを利用するなどして、捕捉し得る。一実施態様では、カメラ２１１８０２は、処置を行う各手術スタッフ員を集合的に可視化し得るように、ＯＲ ２１１８００内に配置され得る。したがって、外科用ハブ２１１８０１は、外科手技中に外科職員２１１８０３及び／又は外科用器具２１１８１０を視覚的に分析するために、捕捉された画像及び／又はビデオデータをカメラ２１１８０２から受信し得る。画像及び／又はビデオデータは、様々な機械視覚、画像処理、オブジェクト認識、及び光学追跡技術を利用して処理されて、外科職員２１１８０３及び／又は外科用器具２１１８１０の特徴、特性、動作、及び移動を追跡し得る。
ＨＣＰは、看護師、医師、外科医、医療技術者、内科医及び／又は同様の人であってもよい。
拡張現実ディスプレイは、１つ又は２つ以上の画像をオーバーレイすることが可能であり得るディスプレイであってもよい。例えば、ディスプレイは、患者の画像上に医療画像をオーバーレイし得る。一例では、ディスプレイは、患者のビデオの上に医療画像をオーバーレイし得る。一例では、ディスプレイは、インジケータ及び／又は１つ若しくは２つ以上の命令を画像上にオーバーレイし得る。拡張現実ディスプレイは、ウェアラブルデバイスであってもよい。
例では、１つ又は２つ以上の外科用ハブは、オブジェクトが外科手術室（ＯＲ）内に位置する（例えば、存在する）かどうかを判定してもよい。例では、外科用ハブ（複数可）は、オブジェクトが外科用ＯＲに存在しないかどうかを判定してもよい。例では、外科用ハブ（複数可）は、外科用ＯＲに隣接し得る部屋などの部屋にオブジェクトが位置するかどうかを判定してもよい。外科用ハブは、協調して動作してもよく、又は独立して動作してもよい。オブジェクトは、スマート医療器具などのスマートデバイスであってもよい。
外科用ハブは、例えば、外科用ＯＲの境界（例えば、壁）を画定するために、ピング（例えば、超音波ピング）を使用してもよい。外科用ハブは、オブジェクトが外科用ＯＲに入る又は出るときを認識し得る。
外科用ハブは、階層化ソフトウェアシステムに含まれてもよい。外科用ハブは、例えば、オブジェクトが手術ＯＲ内に位置するかどうかを判定するとき、空間認識を使用してもよい。オブジェクトは、外科用ハブに登録され得る。例えば、オブジェクトは、それぞれの識別及び／又はシリアル番号を外科用ハブに送信し得る。例では、外科用ハブは、手術ＯＲ内のオブジェクトのそれぞれの位置を追跡し得る。例では、オブジェクトを追跡するために１つ又は２つ以上のカメラが使用され得る。カメラは、外科用ハブと通信し得る。
例では、外科用ハブは、オブジェクトが患者の内部にあるかどうかを判定してもよく、オブジェクトを除去するように指示してもよい。例えば、外科用ハブは、オブジェクトが患者の内部にあり、オブジェクトが除去される必要があり得るという通知を外科医に送信し得る。例では、外科用ハブは、各オブジェクトに関連付けられた空間時間構成要素を追跡し得る。例えば、外科用ハブは、例えば、所与の時間に、どのデバイスが医療スタッフメンバーの手にあるかを追跡し得る。
外科用ハブは、オブジェクト上にデータをオーバーレイし得る。例えば、オブジェクトは医療器具であってもよい。ディスプレイは、オーバーレイされたデータのために構成され得る。ディスプレイは、医療器具に含まれてもよい。ディスプレイは、医療器具に取り付け可能であってもよい。データは、ユーザが見るためにスクリーン上に図示されてもよい。本明細書で説明されるようなカメラは、外科用ＯＲ内の変化を観察してもよく、変化に関連付けられるデータを医療器具ディスプレイにオーバーレイしてもよい。
外科用ハブは、保管先に位置する二次オブジェクトを認識し得る。保管先は、外科用ＯＲの外部に位置してもよい。外科用ハブは、１つ又は２つ以上の二次オブジェクトが手術に関与するときを判定してもよい。例では、外科用ハブは、医療スタッフメンバー（例えば、ローテーション看護師）に通信して、手術に関与する二次オブジェクトを取り出し得る。
外科用ハブは、外科用ＯＲ内に位置するオブジェクト（例えば、各オブジェクト）を特定し得る。例では、外科用ハブは、手術に関与する器具を認識し得る。例えば、器具は、手術の次の手術タスクに関与し得る。ディスプレイは、テーブル看護師がアクセス可能であってもよく、外科用ハブと通信してもよい。外科用ハブは、手術に関与する器具をディスプレイ上に示してもよい。例えば、外科用ハブは、ディスプレイ上で器具を強調表示してもよい。手術に関与する器具は、本明細書に説明されるように、保管先に位置してもよい。外科用ハブは、器具が位置する保管先を示してもよい。
拡張現実は、器具を示すために外科用ハブによって使用され得る。例えば、拡張現実は、別のディスプレイ上の二次ディスプレイオーバーレイと関連付けられてもよい。外科用ハブは、拡張現実を使用して、手術に関与する器具を強調表示してもよい。本明細書で説明するカメラは、器具の向き及び／又は構成に関連付けられたデータ（例えば、メタデータ）を記録し得る。拡張現実ディスプレイは、各器具に関連付けられたメタデータに関する情報を示し得る。例えば、拡張現実ディスプレイは、１つのペアの視覚化眼鏡であってもよい。拡張現実ディスプレイは、医療スタッフが実行するステップを示してもよい。各医療スタッフメンバーは、例えば、医療スタッフが実行しなければならない個人化されたステップを見るために、個々の拡張現実ディスプレイにアクセスし得る。外科用ハブは、医療スタッフメンバーが手術の次のステップが何であるかについて確信がないときを決定し得、医療スタッフメンバーがアクセス可能なディスプレイにステップを出力し得る。
例では、外科用ハブは、どの器具が滅菌されているか、又は滅菌されていないかを認識し得る。例えば、外科用ハブは、器具が滅菌されていない医療スタッフによって触れられたかどうかを追跡してもよく、器具が滅菌されていないことを決定してもよい。外科用ハブは、器具が滅菌野又は非滅菌野のいずれに位置しているかを示し得る。
オブジェクト（例えば、各オブジェクト）に関連付けられた空間時間データは、外科用ハブによって収集され得る。例えば、空間時間データは、器具が交換された回数であってもよい。外科用ハブは、空間時間データを分析し得る。例えば、空間時間データは、器具が手術中に何度も交換されたことを示してもよい。そのような場合、外科用ハブは、器具が手術に著しく関与していると評価してもよい。外科用ハブは、空間時間データを使用して、手術ＯＲセットアップを最適化してもよい。
外科用ハブは、手術ＯＲ内のオブジェクト間で交換されるデータを調整してもよい。例えば、器具が間違った表示スクリーンに情報を送ろうとする場合がある。そのような場合、外科用ハブは、表示スクリーンが情報を望まないことを識別し得、器具が情報を送信することを防止し得る。
オブジェクト（例えば、各オブジェクト）は、電力シグネチャに関連付けられ得る。電力シグネチャは、外科用ハブに送信されてもよい。外科用ハブは、電力シグネチャを使用して、オブジェクトが電源オンされているかどうかを判定してもよい。電力構造シグネチャは、オブジェクトの識別情報を決定するために外科用ハブによって使用され得る。例えば、外科用ハブは、その電力シグネチャに基づいてオブジェクトを識別し得る。
外科用ハブは、データクラスタ及び／又はデータポイントのネクサスを使用することによって、器具を識別及び／又は検証し得る。例では、器具の向き及び／又は器具に関連する人間工学的情報は、データクラスタ及び／又はデータポイントのネクサスを使用して決定されてもよい。外科用ハブは、外科用ＯＲ内のディスプレイ（例えば、各ディスプレイ）に関連付けられたデータを受信してもよい。例えば、外科用ハブは、医療器具などのディスプレイに関連付けられ得るデータソースからデータを受信し得る。
別の例として、外科用ハブは、スクリーン上に表示されるデータを決定してもよく、スクリーン上のデータを修正し、スクリーン上のデータを増強し、スクリーンからデータを除去し、及び／又はスクリーンにデータを追加してもよい。例えば、外科用ＯＲ内に位置する発生器に関連付けられたディスプレイは、データを外科用ハブに送信してもよい。例では、１つ又は２つ以上のカメラが、ディスプレイを監視し、監視に関連付けられたデータを外科用ハブに送信してもよい。例えば、カメラは、発生器上の電力レベルを見て、電力レベルに関連付けられたデータを外科用ハブに送信してもよい。例えば、カメラは、発生器上のエラーコードを見てもよく、エラーコードに関連付けられたデータを外科用ハブに送信してもよい。
器具は、器具が外科用ＯＲ内に位置することをハブに通知するメッセージを外科用ハブに送信してもよい。メッセージは、器具のシリアル番号を含んでもよい。外科用ハブは、ハブがメッセージを受信したときにシリアル番号を記録してもよい。器具は、外科用ハブにデータを送信するときにシリアル番号を含んでもよい。外科用ハブは、どの器具がデータを送信したかを識別するためにシリアル番号を使用してもよい。外科用ハブは、外科用ハブがメッセージを受信したことを器具に示す応答メッセージを送信してもよい。
例では、外科手術ＯＲの境界は、外科用ハブに送信されたカメラ情報によって決定されてもよい。外科用ハブは、例えば、カメラ情報に基づいて、外科用ＯＲ内のオブジェクトが移動したときを識別し得る。例えば、外科用ＯＲは、医療スタッフメンバーの動き及び外科用ロボットアームの動きを追跡したカメラ情報に基づいて、医療スタッフメンバーが外科用ロボットアームにぶつかったことを識別し得る。
外科用ハブは、ある期間にわたるカメラ情報の変化に関連する情報を生成し得る。外科用ハブは、医療スタッフがアクセス可能な１つ又は２つ以上のディスプレイに情報を送信してもよい。例では、外科用ハブは、カメラ情報に基づいて医療スタッフメンバーが混乱したときを決定し得る。そのような場合、外科用ハブは、医療スタッフメンバーによって使用されている器具を決定することができ、器具に基づいて、外科用ハブは、医療スタッフメンバーがアクセス可能なディスプレイに次のステップを出力し得る。
例では、外科用ハブは、患者に関連付けられた情報を受信し得る。例えば、外科医は、患者の身体の領域上にエネルギービームを発射してもよい。そのような場合、外科用ハブは、外科医によって使用されている発射デバイスのモニタ上に発射位置をオーバーレイし得る。発射情報は、外科医を支援する医療スタッフがアクセス可能な二次ディスプレイ上に出力され得る。そのような場合、医療スタッフは、どの器具が発射されているかを知り得る。
外科用ハブは、各医療器具上のインジケータを認識してもよい。カメラは、インジケータを識別し、（例えば、座標点を介して）医療器具の位置と共にインジケータを外科用ハブに送信してもよい。例では、インジケータは、インデックスポート及び／又は基準マーカを含んでもよい。インジケータは、器具シャフトの長さ及び厚さなどの器具に関する品質を含んでもよい。外科用ハブは、品質に基づいて、器具に送信されるデータをスケーリングし得る。カメラは、１つ又は２つ以上の器具のインデックス調整及び／又は登録点を識別してもよい。
例では、カメラは、器具の特性に基づいて器具を識別してもよい。例えば、カメラは、器具の形状をモデル化するために空間認識を使用してもよい。そのような場合、カメラは、形状に基づいて器具を識別し得る。例えば、カメラは、エンドカッターハンドルに類似するハンドルを識別してもよく、器具がエンドカッターであることを決定してもよい。
カメラは、外科用ＯＲ内のディスプレイに基づいてデータを生成してもよい。カメラは、ディスプレイ上に情報をオーバーレイしてもよい。情報は、別のディスプレイからの情報を含んでもよい。例えば、外科医は、発生器電力レベル、ＥＫＧ測定、及び器具発射ステータスに関連する情報を要求し得る。そのような場合、器具は、これらの値の３つ全てを示すディスプレイを含んでもよい。外科用ハブは、外科医が腹腔鏡の視点から見ているディスプレイに情報を移し得る。
外科用ハブは、互いに互換性がない可能性がある１つ又は２つ以上のデバイスを識別及び／又は認識し得る。外科用ハブは、データがデバイス間で交換されることを可能にし得る形態にデータを標準化し得る。
外科用ハブは、本明細書で説明されるようなメタデータを経時的に分析する機械学習を含み得る。メタデータは、外科用ハブに送信されるカメラ情報に基づいてもよい。例えば、カメラは、ディスプレイ上の情報を読み取り、ある持続時間にわたって外科用ハブに情報を送信してもよい。外科用ハブは、情報を機械学習モデルに入力して、例えば、外科医が何をしている可能性があるかを決定してもよい。機械学習モデルは、外科医のための提案を決定してもよく、外科医は、外科医によってアクセス可能なディスプレイに提案を送信してもよい。機械学習モジュールは、外科用ハブがいつ及び／又はどこに情報を送信すべきかを決定し得る。例えば、機械学習モデルは、外科医が可動化を行うときにＩＭＡの結紮に関連する情報を送信するように外科用ハブに伝えてもよい。
本明細書に説明されるような機械学習は、外科用ハブが、医療スタッフに基づいて交換されるデータをカスタマイズすることを可能にし得る。例えば、外科用ハブは、手術を行っている外科医の識別情報を取り出し、その識別情報を機械学習モデルに入力し得る。機械学習モデルは、識別情報に基づいて提案を調整し得る。
外科用ハブは、医療スタッフが所与の時間に何を必要とするかに基づいて、データをフィルタリング及び／又は調整し得る。例えば、外科用ハブは、ハーモニックスカルペルのバッテリレベルに関連するデータを含み得る。外科医は、ハーモニックスカルペルを含まない手術タスクを行っている場合がある。そのような場合、外科用ハブは、ハーモニックスカルペルデータをフィルタリングしてもよい。外科用ハブは、フィルタリングされたデータを、外科医がアクセス可能なディスプレイに送信してもよい。
外科用ハブは、医療スタッフが何を行っているかに基づいて、表示スクリーンに送信され得るデータの数量を決定し得る。例えば、外科医は、手術の重要なタスクを実行している場合がある。外科用ハブは、例えば、外科医の気を散らす可能性があるため、視覚的グラフを表示スクリーンに送信しないことを決定してもよい。
１つ又は２つ以上の監視システムを設けてもよい。ハブ適応及び／又はハブ制御は、外科手術ＯＲ内のオブジェクト及び人員の空間認識に基づいて変化してもよい。
外科用ＯＲ内のハブ識別及び／又はオブジェクトの追跡及び／又は人員の追跡は、ユーザの必要性に対してカスタムであるデータをオーバーレイするために使用されてもよい。外科用ハブは、例えば、行われている手技に関連するタスクを通して、外科用ＯＲ内の１人又は２人以上のユーザ及び／又は外科用ＯＲ内の異なる所定のスペースに入る若しくは出る外科用器具を監視するためのシステムを含んでもよい。スペースは、ストック領域、メイヨースタンド、及び／又は手術部位を含んでもよい。器具の追跡は、器具が、必要とされる手技タスクにおいて使用される準備ができていること、及び／又は正しく動作する状態にあることを確実にすることを含み得る。外科用ハブは、手術ステップに基づいて、及び／又はデバイスを見ているユーザ及び／又はモニタに基づいて、データを器具に取り付けてもよい。取り付けられたデータは、内蔵ディスプレイ、部屋のディスプレイ及び／又はタブレット、及び／又はＡＲギア（例えば、眼鏡、パーソナルディスプレイ、及び／又は可聴命令）を介してもよい。追跡のためのステップは、最終ステップであってもよく、患者内に保持されたオブジェクトがなく、製品（例えば、全ての製品）が適切に処分されることを確実にするクリーンアップを含んでもよい。
オブジェクト及び／又は人のハブ空間認識及び／又は手術室監視及び追跡が提供され得る。外科用製品及び／又は器具の空間認識は、外科用ＯＲ内のそれらの移動、位置、及び／又は向きを含み得る。ＯＲ内での器具識別、空間登録、及び／又は追跡が提供され得る。
製品が由来する位置及び／又は製品が検出される位置は、ＨＣＰとの異なる相互作用をトリガし得る。ＨＣＰは、例えば、デバイスがＯＲに入った場合に警告され得る。このような場合、デバイスを在庫管理に追加し得る。
例では、包装が開封されたかどうかを追跡することが提供され得る。外科用ハブは、カメラ、センサ、及び／又は同等物を使用して、パッケージが、手術室の領域などの領域内に存在するかどうかを判定してもよい。外科用ハブは、パッケージが開封されたかどうかを判定してもよい。例えば、外科用ハブは、パッケージに関連付けられたセンサから、パッケージが開封されたことを示す信号を受信してもよい。別の例として、外科用ハブは、カメラを使用して、パッケージが開封されたことを判定してもよい。パッケージが開封されたと判定されると、外科用ハブは、開封されているパッケージに関連付けられた時間をロックし得る。外科用ハブは、オブジェクトが使用されたことを在庫が反映し得るように、パッケージが開封されたことを在庫データベースに書き留め得る。
製品の向き及び／又は環境パラメータは、例えば、アクション及び／又は注意のために、ＨＣＰへの対話及び／又は通知をトリガするために使用され得る。例えば、ジャイロスコープ及び／又は３軸加速度計が、デバイスの向き及び／又は位置を決定するために使用され得る。
外科用ハブは、注意すべき特別な環境条件をデバイスに警告し得る。例えば、現在のＯＲ大気圧は、デバイス性能に影響を及ぼし得る。そのような場合、デバイスは、最適な性能のために行う必要があり得る潜在的な調整について警告され得る。ハブは、患者が提示する特別な内部状態（例えば、任意の特別な内部状態）をデバイスに通知し得る。
器具は、ハブによって監視可能である、及び／又はハブのセンサアレイである、デバイス上の空間登録マーカ及び／又は可視基準マーカを備えてもよい。マークは、所定のパターンであってもよく、ハブは、それらのマーカ及び／又は器具構成のためにデバイスのインデックスを使用してもよい。例では、ハブは、マークを使用して、ハブが作成及び／又は記録する３Ｄコンピュータ環境で器具を識別及び／又はモデル化することが可能であり得る。
マークは、ハブが、並進、回転、スケール、スキュー、及び／又は遠近について器具の画像及び／又は投影を調整することを可能にし得る。例えば、ハブは、スケール変更され得る医療器具の一部を示し得る拡張現実画像を提示し得る。ハブは、例えば、器具の一部が不明瞭である場合、器具を検出及び／又は監視することを可能にされてもよい。
可視監視のために、例えば、システムが始動するときに自動的に行われ得るカメラ較正が存在し得る。固定され得、ハブが距離及び／又は焦点距離に関してカメラを較正することを可能にし得る、ハブカメラに関連付けられた所定のセットのマーカが存在し得る。例では、ハブは、例えば、ＯＲ内にあり得る、ハブ又は別の較正プリセットスケールから正確な長さを決定し得る。ハブは、カメラ及び／又はスケールを使用して、カメラ及び／又は焦点距離を較正し得る。
ハブは、レーザドップラー、超音波ピンギング、ＲＦ、及び／又は他のエネルギーデジタル通信など、ハブに一体化された別の測定システムを介して正確な距離を決定し得る。距離は、アクティブ又はパッシブ電子信号処理から推測し得る。信号強度を監視し、放射電力、放射デバイスアンテナ経路、光経路、受信デバイスアンテナ経路、及び受信機感度を補償することによって、２つのＢｌｕｅｔｏｏｔｈペアリングシステム間の通信を使用して、Ｂｌｕｅｔｏｏｔｈペアリングシステムが離れている室内の距離を決定し得る。
ＵＨＦ又はＨＦ ＲＦＩＤタグ付きオブジェクト追跡は、未知のタグと組み合わせた所定のタグ及び／又は距離の組み合わせを含み得る。タグは、問題の製品を識別し得、製品に関する情報を提供し得る。タグは、例えば、識別されると、製品が部屋内で追跡されることを可能にしてもよい。
既知の位置（例えば、ランドマーク）を伴うパッシブ又はアクティブ基準タグから作成されたＲＦＩＤマップは、ＲＦＩＤリーダアンテナによって検出された未知のタグの位置を特定し得る。
システムは、例えば、大規模経路損失伝搬モデルを使用して、リーダと共通の検出されたタグとの間の１つ又は２つ以上の距離を測定し得る。例では、システムは、未知のタグと検出されたランドマークとの間の距離（例えば、タグ間距離）を計算し得る。
ミリ波レーダの使用及び／又はオブジェクトの追跡が提供され得る。マイクロメートル精度のミリ波レーダを提供し得る。周波数変調連続波（ＦＭＣＷ）を使用して動作するレーダは、レーダビート信号の周波数及び／又は位相が、レーダセンサとレーダ信号が反射されるオブジェクトとの間の距離を決定するためにどのように使用され得るかを示し得る。
ＯＲ内での器具識別、空間登録、及び／又は追跡が提供され得る。ＯＲ内で空間的に及び／又は利用を通じて器具追跡することは、他の収集された及び／又はストリーミングされたデータのステップ及び／又は補足に関するガイダンスを提供し得る。器具は、ＯＲ内のカメラ及び／又は患者内のカメラによって追跡されてもよい。
ハブは、取り付けられた有線及び／又は無線デバイスの接続性、部屋の検出、並びに／あるいはＯＲ内のデバイス及び／又は人々の位置を監視してもよい（例えば、超音波及び／又は視覚カメラ、並びにディスプレイを見ているユーザのためのディスプレイ上のデータのカスタマイズを介して）。例では、ルームディスプレイは、ＯＲを見るために、及び／又はピクチャインピクチャビューを通してＯＲを見るために使用され得る。外科医が見るディスプレイは、同じルームビュー及びスコープビューを示すことを可能にされ得る。例では、ディスプレイは、スクラブ看護師及びアシスタント外科医にそれぞれ異なる情報を示すことを可能にされてもよい。異なる情報は、スクラブ看護師及びアシスタント外科医が、彼らの仕事、及び使用されているデバイスが彼らの特定のタスクにどのように関連するかを見ることを可能にし得る。
セットアップ及びクリーンアップ器具の計数が提供され得る。例えば、外科用ハブは器具を追跡してもよい。外科用ハブは、器具がセットアップされる必要があり得ることを決定し得、通知及び／又は命令をＨＣＰに送信し得る。外科用ハブは、器具が洗浄される必要があり得ることを決定し得る。外科用ハブは、通知及び命令をＨＣＰに送信してもよい。
ＨＣＰ装着カメラ又は同心カメラの利用は、どのデバイスがＯＲに持ち込まれたか、及び／又はＯＲを離れ得るかを監視し得る。例えば、ＨＣＰはカメラを装着していてもよい。カメラは、ＨＣＰによって装着され得る安全眼鏡内にあってもよい。カメラは、ＨＣＰが見得るものを見得る。カメラは、器具がＨＣＰの視野に入った可能性があることを検出し得る。カメラは器具を識別し得る。カメラは、器具がＯＲに持ち込まれた可能性があると判定し得る。
ＨＣＰ拡張現実ギア上のカメラは、どの器具が取り扱われているかを見得る。例えば、拡張現実ギアを使用して、器具が識別情報を提供し得るラベルを備え得ることが決定されてもよい。例において、カメラは、例えば、シリアル番号及び／又は製品仕様を識別するために、バーコード及び／又はＱＲコードをスキャンし得る。
ＡＲデバイスは、例えば、器具が、手技計画を通して手技のために指定されている場合、又はＨＣＰが再装填のストック室保管を見渡す際にＯＲ内でパッケージ解除されている場合、実行可能な再装填を強調表示してもよい。ＡＲデバイスは、複数のレベルを介して、患者及び／又は手技のために推奨される競合相手を強調表示してもよい。
製品走査デバイス（例えば、バーコード走査レーザ、無線周波数識別（ＲＦＩＤ）ハンドヘルドスキャナ、ＲＦＩＤ戸口スキャナ、光学ＱＲコードリーダ若しくはカメラ、及び／又は別の在庫走査システム）は、どの製品がＯＲ内で使用されたかを追跡及び／又はタグ付けするために使用され得る。これらのスキャナは、ＯＲに持ち込まれた製品が除去されることを確実にし得る。
関連する２つの物品がスキャンインされると、ハブは、物品の互換性を識別し得、不一致を強調表示し得る。走査システムが互換性のない再装填又は器具を走査するとき、ハブ、スキャナ、及び／又は他のユーザ対話デバイスは、製品がそれらの滅菌包装から除去される前に不一致を強調表示し得る。製品が除去のために走査されると、デバイスは、デバイスのための許容可能な使い捨て及び／又は回収方法を強調表示し得る。ハブは、例えば、ハブが、手技が行われていることを知っている場所に基づいて、スキャナを地域情報で更新し得る。
例では、ハブは、施設と通信して、その施設のベンダがシステムを廃棄することを望む処分ベンダ及び／又は方法及び／又は位置を決定し得る。ハブは、例えば、処分を集計及び／又は通知するように、エッジ処理システムに通知してもよい。ハブは、例えば、十分な製品を除去するための準備ができている場合に、ベンダを回収し得る。
ハブは、例えば、再滅菌され得るデバイスの数量を分析し得る。ハブは、例えば、病院の洗浄及び／又は滅菌部門が能力を予測すること及び／又は作業負荷を予想することを支援するために、所与のデバイスに対してどのような方法が関与するかを分析し得る。
患者治療部位に入る又は出る監視器具が設けられてもよい。例えば、スポンジ、縫合糸、器具などがメイヨーカートから手術部位に移動されると、物品は、光学、ＲＦＩＤ、電磁、及び／又は超音波感知システムを介して個別に識別及び／又は監視されてもよい。これは、進行中のステップ又はタスクの状況認識をハブに提供し得る。ハブは、次のステップのためにサポートＨＣＰに通知し、及び／又は参加を予想し得る。例では、ハブは、保持された外科用器具が患者内に存在しないことを確実にし得る。
ハブは、手術で使用される器具を追跡してもよく、例えば、製品が手技に関与したか、又は最終的に無駄な製品であったかどうかを判定するために、手術の間に器具がどれだけ長く使用され得るかを追跡してもよい。他のデータ監視システムの監視及び／又は注釈が、器具近接及び使用と共に提供されてもよい。器具は、ＯＲ内及び／又は患者内部のカメラによって追跡されてもよい。
ＨＣＰ相互作用は、例えば、イベント及び状況認識に注釈を付けるために識別され得る。ＯＲ内のＨＣＰ追跡及び／又は相互作用の監視を提供し得る。
ハブ、スキャナ、及び／又は監視システムは、器具並びにそれらと相互作用するユーザ及びＨＣＰを追跡してもよい。例では、ハブは、どのＨＣＰが在庫を部屋にいつ持ってきたかを追跡し得る。例では、ハブは、滅菌包装を開封したＨＣＰ、及びどの時点でのＨＣＰかを記録してもよい。例では、ハブは、製品がどのくらい長く開封しているか、及びどのような環境条件下にあるかを追跡してもよい。
例では、ハブは、製品が信頼できるとき、及び／又は製品の有効性が影響を受け始めているときを追跡し得る。ハブは、影響を最小化するためにとられるべき１つ又は２つ以上の命令を提供し得る。例では、ハブは、製品を使用したＨＣＰ又は外科医を追跡してもよい。
記録されたメタデータは、使用特性を含み得る。使用特性は、以下のうちの１つ又は２つ以上を含み得る、すなわち、患者、手技、手技ステップ、使用量、選好データ、向き、位置、及び／又は同等物、ＯＲ内のＨＣＰ追跡並びに相互作用の監視、あるいは器具及び機器動作及び使用の空間的及び／若しくは時間的追跡並びに記録である。
使用中の器具の時間、位置、及び向きの記録の監視及び記録が提供されてもよい。
互いに対する器具、手術スタッフ、室内機器、家具、及び患者の検出、監視、及び／又は記録は、使用、使いやすさ、共通使用グリップ、及び／又は取り扱い、並びに器具が異なる向きにある時間の数量のデータ分析を可能にし得る。
器具及び器具の向き、並びにどのカメラが器具を視覚化し得るかを追跡することは、ハブが、例えば、器具のユーザを支援するために、ステータス、強調表示、及び／又は命令を示すデータ及び／又は二次撮像を器具上にオーバーレイすることを可能にし得る。
器具態様上へのデータのオーバーレイは、異なるビュー及び／又は閲覧者に対して異なり得る。例では、オーバーレイは、ユーザがデバイスと対話することに基づいて、システムによって変更され得る。例では、オーバーレイは、デバイスの異なるモニタに対して異なり得る。
例えば、外科医は胸部肺葉切除を行ってもよく、血管切断ステップに近づいていてもよい。血管エンドカッターは、ＯＲメイヨーカートから欠落していてもよく、部屋の周囲のキャビネット内のストック領域に存在してもよい。そのような場合、メイカート上のスペースは、ハブによって強調表示されてもよく、ハブは、スペースを監視してもよく、及び／又はデバイスがスペースにおいて紛失していることを示す画像を表示してもよい。ハブは、血管エンドカッターがどこに位置するかを循環看護師に示し得る。看護師は、デバイスを領域に持ってきてもよく、開いてそれを滅菌的にメイヨースタンド上に落としてもよく、カメラは、デバイスを自動的に識別してもよく、デバイスが装填解除されたことを識別してもよい。看護師のためのモニタは、装填解除ステータス、及び例えば、装填ステップを開始するために作動させる制御をオーバーレイし得る。そのような場合、外科医のためのモニタは、デバイスを示してもよく、装填強調表示の代わりに、モニタは、組織タイプ適合性、再装填必要性、及び／又はデバイスのステータスを示してもよい。そのような場合、データ及び強調表示されたデータのオーバーレイは、異なるユーザに対して異なり得、デバイスを見ている異なるディスプレイに対して異なり得る。ハブは、コンパイル（例えば、後のコンパイル）に間に合うように全ての動作及びタスクを記録し得る。ディスプレイは、ウェアラブルなどのパーソナルディスプレイ、デバイス上のローカルディスプレイ、及び／又はＡＲ眼鏡若しくは機器であってもよい。
例では、器具態様へのデータのオーバーレイは、異なるビュー又は閲覧者に対して異なり得る。
腹部の外側の領域の画像捕捉（例えば、デバイスの向き、位置、及びステータス、並びにユーザの身体位置、スタッフの活動、及びＯＲ内の他のアクションなど）は、使用中の外科用デバイスの配置及び／又は制御を改善し得る。
システム統合及び接続の空間認識が提供され得る。
相互作用の適応制御は、距離、配線リンケージ、及び／又はポートアタッチメントに基づいてもよい。
ＯＲルーム及びＯＲ内のハブの検出は、システムがルーム境界を画定すること、どのハブに通信するかを知ること、並びに／又は認証及び／若しくは互換性問題に関して製品を比較するためにどのリスト及び／若しくは手順が必要であるかを知ることを可能にし得る。
例において、カメラ（複数可）は、システムのセットアップを構成するために、ハブ、ロボット、又は部屋に接続された機器のセットアップ、位置、相互接続、及び／又は向きを決定するために、ＯＲ内で利用され得る。
ＯＲカメラ及びディスプレイは、機器を識別し得る。ＯＲカメラ及びディスプレイは、機器をセットアップ及び開始するために使用され得る。
例では、カメラは、例えば、相互接続性を達成するために複数のシステムの結合の相互接続を再構成するため、システムレイアウトの再構成及び／又はトラブルシューティングにおいてユーザをガイドし得る。
互いに近く、機器のうちの１つ又は２つ以上の機能を妨害又は抑制し得る機器が識別され得る。
患者に取り付けられたリード及び／又は他の誤ったセットアップ及び接続が識別されてもよく、ユーザは、問題を修正する方法について指示されてもよい。
例では、部屋内の１つ又は２つ以上のディスプレイは、医療専門家を支援するように構成され得る。例えば、１つのディスプレイは、第１のＨＣＰを支援するように構成されてもよく、第２のディスプレイは、第２のＨＣＰに対して構成されてもよい。一例では、ディスプレイは、医療器具、手技タスク及び／又は同等物のための使用ステップを提供するように構成されてもよい。
ユーザに基づいて表示される情報。例えば、第１のディスプレイは、第２のＨＣＰによって実行されるタスク及び／又はジョブに基づいて、第１のＨＣＰに関する第１の情報セットを表示してもよく、第２のディスプレイは、第２のＨＣＰによって実行されるタスク及び／又はジョブに基づいて、第２のＨＣＰに関する第２の情報セットを表示してもよい。ディスプレイ又はディスプレイの第１の部分は、手術のタスク及び／又は位置を示してもよく、別のディスプレイ又はディスプレイの第２の部分は、手術ビューを示してもよい。
ユーザ及び／又はＯＲ内のユーザの位置に基づいて表示される情報は、カスタマイズされてもよい。
手術中、ＯＲチームは、例えば、患者に利点となる雰囲気を作り出すために、互いに協調して機能を実行し得る。ＯＲ内の人員は、手術する外科医、外科医のアシスタント、スクラブ人員、麻酔医、及び／又は循環看護師を含み得る。チームの各メンバーは、手技を通して異なる責任を構成してもよく、互いに相互作用してもよく、効率及び成功した結果のために互いに同期してもよい。例では、ＯＲルームは、医療スタッフメンバーが、個人及び／又は他のチームメンバーとのフォーカスの遅延及び／又は混乱を引き起こし得る重要なステップを逸らさせる及び／又は忘れる可能性がある、激しい、高いストレスの、困難な環境であり得る。
ＯＲルームディスプレイ及び／又はタブレットの利用は、医療提供者の各々が、どのアクションを行うべきか（例えば、閲覧ユーザを監視することに基づいて）、使用のためのステップ、必要とされる手技ステップを知ること、又はチームの効率及び／若しくは焦点を最適化するためのステップを予測することを支援するようにカスタマイズされ得る。ＯＲ表示は、各スタッフメンバー及び各スタッフメンバーの責任に固有であってもよい。そのような場合、モニタを見ている個人が識別されてもよく、モニタは、その個人のタスク詳細を表示してもよい。
外科用ＯＲに関与する個人の例は、外科医であり得る。
例えば、手技中、外科医の視界を遮らないディスプレイ又はディスプレイの隅は、どの器具及び／又はデバイスが外科医の手の中にあったかを識別し得、使用のためのステップを提供し得る（例えば、テキスト又は視覚画像のいずれかが、ボタンをユーザに強調表示する）。ステップが間違った順序で押されたことが検出された場合、ディスプレイは、ステップを強調表示してもよく、ユーザに警告してもよい。
例では、手術の開始に先立って、外科医及び／又はアシスタントが見ているディスプレイは、ゴールドスタンダードのスナップショット及び／又は患者バイオマーカに基づくその患者のリスクの監視を示してもよい。
例では、手術中に、外科医は、手術台又は器具台の上で器具を取り上げるか又は置き得、スクリーンは、（例えば、外科医が器具を必要とする前に）器具が位置する場所のスクリーンの隅に表示を提供し得、外科医は、スクリーンに焦点を合わせ続け、手で器具に手を伸ばし得る。例では、手技ステップを知り、どの器具がそれに差し込まれているかを知っているハブは、使用前にいつ器具が必要とされるかを知り得る。監視システムは、タスクが完了したことを検証し得、次にどのステップが必要であるかを知り得る。どの器具が必要とされ、いつ必要とされるかの通知は、スクラブ看護師及び／又はアシスタントに通知されてもよく、外科医が器具を要求又は必要とする前に外科医に手渡す準備ができてもよく、例えば、これは、ＯＲ内の効率性を向上させ、外科医が焦点を維持することを可能にし得る。
外科用ＯＲに関与する個人の例は、スクラブ看護師であり得る。
例えば、手術中に、スクラブ看護師、循環看護師、及び／又はアシスタントが、外科医のための機器の設定を変更する責任を負う場合がある。そのような場合、ディスプレイは、ＯＲルームレイアウトの概要を提供してもよく、修正を必要とする機器の位置を強調表示してもよい。ディスプレイは、機器の１つの視覚画像を示してもよく、設定をどのように補助するかについて使用するためのステップを示してもよい。例では、モニタ、ハブ、及び／又はディスプレイは、例えば検証として、正しい設定が正しい値に調整されていることを確認し得る。
例えば、スクラブ看護師は、ツール及びフィールドが滅菌であることを確実にする責任があり得る。そのような場合、ディスプレイは、例えば、必要な物品を示し、物品が滅菌であることを確認するためのチェックリストとして設定されてもよい。ディスプレイは、手技タイプ、必要とされる機器、及び／又はルームレイアウトに基づく指示を提供してもよい。ディスプレイは、滅菌野がどのようにあるべきかを示してもよく、滅菌野の準備ができていることを確認してもよい。
外科用ＯＲに関与する個人の例は、循環看護師であり得る。
例えば、循環看護師の責任は、手術物品が患者内に保持されていないことを確実にするための、例えば手術前及び手術後の手術物品の数量の説明責任であり得る。そのような場合、ディスプレイは、チェックリストとして使用されてもよく、手技を知っているハブは、手術に関与する物品のチェックリストを作成してもよく、物品が収集されることを確実にするために、手術が行われる際及び手術が行われた後に追跡してもよい。ディスプレイは、例えば、不一致がある場合、強調表示してもよく、手技を開始するか、又は部位を閉鎖する前に、チームに警告してもよい。
例えば、循環看護師の責任は、テーブル上での患者の準備及び位置決めであってもよい。そのような場合、ディスプレイは、患者がテーブル上にどのように位置付けられるべきかを示すために使用されてもよく、システムが、手術を開始する前に検証してもよい。例では、患者配置は、外科医選好及び／又はゴールドスタンダード手技データに基づき得る。
例えば、循環看護師の責任は、正しい部位及び手技が患者に対して完了されることを確実にすることであり得る。そのような場合、ディスプレイは、部位及び完了した手技の準備及び／又は検証におけるガイダンスとして使用されてもよい。
アプローチは、ＯＲ内のジョブ及び／又は位置（例えば、地理的）に基づき得る。例では、チームは、そのメンバーの機能により部門に分割されてもよい。１つのチームは、滅菌ＯＲチームであってもよく、手術外科医、外科医のアシスタント、及びスクラブ人員を含んでもよい。１つのチームは、非滅菌ＯＲチームであってもよく、麻酔医又は看護麻酔士、外回り看護師、及び特殊機械又はデバイスを操作する際に必要とされ得る他のＯＲメンバーを含んでもよい。
例では、滅菌ＯＲチームは、外科的手洗い（例えば、腕が含まれる）を行ってもよく、滅菌ガウン及び手袋を準備してもよい。そのような場合、ＯＲ内のディスプレイは、割り当てられたスタッフの各々に必要とされる物品を識別してもよく、例えば、スクリーンが手技モードに入ることを可能にする前に、タスクが完了したことを確認するために監視システムを使用してもよい。ディスプレイは、例えば、スタッフメンバーがステップを見落とした場合に、強調表示して通知し得る。外科用ＯＲチームは、滅菌野に入ってもよい。そのような場合、ディスプレイは、ＯＲルームのレイアウトを示してもよく、滅菌野の異なる区画又は境界をスタッフに強調表示してもよい。手術室は、レイアウト及び／若しくは境界、又はモニタがＯＲ室のための滅菌野境界を通知及び／若しくは思い出させるために使用され得る新しいスタッフメンバーにおいて異なり得る。外科用ＯＲチームは、滅菌物品を取り扱い得る。そのような場合、ハブは、誰が滅菌器具を使用及び／又は通過する許可を有するかを監視し、ディスプレイ上に通知を提供してもよく、非滅菌チームメンバーが使用及び／又は通過を試みた場合、ハブは、そのスタッフメンバーに向けられた警告及び／又は通知をディスプレイ上に提供してもよい。
例では、非滅菌ＯＲチームは、麻酔医、外回り看護師、生物医学技術者、放射線技術者、並びに／又は手術中に患者を監視するのに不可欠な専用機器及び／若しくはデバイスを設定及び／若しくは動作させ得る他のスタッフを含み得る。
表示される情報は、ユーザ及び／又はＯＲ内のユーザの位置に基づいてカスタマイズされてもよい。例では、空間認識は、時間認識で補足され得る。例えば、手技に対してタスクが必要とされるとき、補足は、ハブがどこにあるか、及びハブがＯＲ内の他のシステムにどのように接続されるかを含んでもよい。ハブへのモジュール及びシステム接続の時間的及び空間的認識が提供されてもよい。ハブは、ＯＲスイート内のＯＲスタッフ位置を追跡し得る。例えば、一次タスク及び／又は二次タスクは、スタッフの現在位置に最も近いモニタ上に表示されてもよい。リスト内に追加のタスクを視覚的に示し得る。例えば、現在のタスクを強調表示及び／又は太字にし得る。例では、ハブは、現在の指示を示し得、スタッフが現在の手技ステップに従っていないかどうかを示し得る。
サブシステム自己識別、インデックス付け、及び／又は統合が提供され得る。ハブ又はより高いレベルの階層システムは、デバイスのＩＤ、デバイスの電力使用量若しくは提供されたデータストリームのシグネチャに基づいて、及び／又は取り付けられたデバイスを視覚的又は電子的に見ることによって、取り付けられたデバイスを自動的に識別し得る。それらのデータ又は電力シグネチャに基づいて、取り付けられたデバイスの自動識別及びセットアップが提供され得る。
例では、デバイスからハブに通信されているデータストリームは、データストリームをデバイスによって提供されたデータストリームの以前の要約と比較することによって、デバイス、デバイスのセットアップ構成、及びデバイスの動作プログラムを識別するために使用され得る。メタデータのシグネチャ、データの編成、及び／又は通信パケットの編成は、デバイスの機能、型、及びモデルに特有であってもよく、例えば、デバイスがより高いレベルのシステムに接続されるとき、システムを追跡し、自動的にセットアップするために使用されてもよい。
ヘッダ、データパケット詳細、メタデータ、送信頻度、及び／又はハンドシェイクは、特定の機器を他の同様の機器に対して識別するために使用され得る。
エラー、一貫性ノイズ、及び／又は他の個別化された付加要素は、ＩＤユニットへのデータ送信及び／又は電力使用の追跡可能なシグネチャを作成し得る。
それらのデータ又は電力シグネチャに基づいて、取り付けられたデバイスの自動識別及び／又はセットアップが提供され得る。
ユーザの必要性にカスタム化されたデータをオーバーレイするために、ＯＲ内のオブジェクト及び／又は人員のハブ識別及び／又は追跡が提供され得る。例えば、外科用ハブは、行われている手技に関連する特定のステップ及び／又はタスクを通じて、部屋内のユーザ及びＯＲ内の異なる所定のスペースに入る又は出る外科用器具を監視するためのシステムを含んでもよい。スペースは、ストック領域、メイヨースタンド、及び／又は手術部位を含んでもよい。器具の追跡は、器具が、必要とされる手技ステップにおいて使用される準備ができていること、及び正しく動作する状態にあることを確実にすることを含み得る。例では、ハブは、手術ステップ、及び／又はデバイスを見ているユーザ又はモニタに基づいて、データを器具に取り付けてもよい。例えば、取り付けられたデータは、内蔵ディスプレイ、部屋のディスプレイ及び／又はタブレット、及び／又はＡＲギア（例えば、眼鏡、パーソナルディスプレイ、又は可聴命令）を介してもよい。追跡のためのタスクの１つは、患者内に保持されたオブジェクトが存在せず、製品が適切に処分されることを保証する最終ステップ及びクリーンアップであり得る。
他の施設システム及びサーバとの相互作用が提供されてもよい。ＯＲ在庫管理システムがハブに含まれてもよい。例えば、ＯＲ在庫管理システムは、治療調整の請求及び／又は償還承認を含んでもよい。
例えば、ＯＲ在庫管理システムは、事前承認又は手技分類に基づいて、手技アプローチ、使用される器具、及び／又は薬剤補助の調整を含んでもよい。
高度な撮像が提供され得る。監視システムが設けられてもよい。
ディスプレイ及びディスプレイ相互作用のハブ適応制御及び／又は動作は、ユーザ、機器、及び／又は使用、並びにユーザ又は機器の必要性の認識に基づき得る。
例では、表示設定及び／又は表示される情報の構成は、ユーザの認識、及び／又は手技、位置、若しくは使用の認識に基づいてもよい。例では、外科用ハブは、ＯＲ内のディスプレイデバイスに相互接続されてもよく、人員、手技、及び／又は患者を監視及び追跡してもよい。ハブは、手元の状況及び／又はディスプレイのユーザ若しくは閲覧者に基づいて、ディスプレイの各々における変更を通信する能力を備えてもよい。ハブは、手技及び／又は患者を監視してもよく、ＯＲ内の人員を追跡してもよく、ディスプレイの位置及び／又は方向をディスプレイのユーザと関連付けることが可能であってもよい。例では、ハブは、ＯＲ内のハブのセンサの視野内のユーザ、機器、及び／又は器具をハブが区別することを可能にする認識アルゴリズムを備え得る。ハブは、表示設定、表示された情報、及び／又はユーザ及び手近なステップ又はタスクのための命令をカスタマイズしてもよい。例えば、ディスプレイは、ＡＲデバイス、手術インターフェーステーブル、機器ディスプレイ、ローカル器具ディスプレイ、及び／又はあるユーザ位置に位置付けられ、そこに向けられたルームモニタなどのパーソナルディスプレイユニットであってもよい。
スマートディスプレイシステムの対話及び制御が提供され得る。１つのディスプレイ上のカメラ及び／又はセンサは、ＯＲ内の他のディスプレイシステムを監視するために使用されてもよい。カメラによる１つのディスプレイの監視は、ディスプレイ制御及び／又はデータ収集のために使用されてもよい。
例では、システムを使用して、利用率を監視し、パラメータをセットアップし、及び／又はどのユーザがＯＲ内のディスプレイを見ているか及び／又はそれと相互作用しているかを判定し得る。ディスプレイは、制御キューのために別のディスプレイ上の情報を監視してもよく、他のディスプレイからの情報を反復又は再表示することが可能であってもよい。
例では、外科医相互作用ディスプレイ（例えば、主外科医相互作用ディスプレイ）は、ＥＫＧ、血圧、鎮静レベル、Ｏ２レベルなどの患者監視システムを見ていてもよく、患者監視システムに関連する情報をその一次ディスプレイに追加してもよい。そのような場合、外科医は、コンパイルされたデータ（例えば、全てのコンパイルされたデータ）について１つの位置を見てもよい。
ディスプレイは、例えば、ＨＣＰであり得る、ユーザのためのディスプレイ間で情報を調整するために、視覚範囲外の光帯域又は聴覚範囲外の可聴レベルで情報をブロードキャストし得る。
例では、複数のディスプレイの監視は、手技確認ステップ、患者バイタル、使用中の器具、及び／又は同等物のレベルとして使用されてもよい。複数のカメラが、ハブシステムに情報を供給してもよく、カメラは、異なる情報を導出してもよく、互いを確認するために使用されてもよい。
システムとの対話を介したディスプレイの支援及び／又は拡張された制御は、言葉で、視覚的に、又は物理的に、ディスプレイ対話にディープコンテキストを提供し得る。ユーザからの可変入力を介したディスプレイの支援ＡＩ制御が提供されてもよい。
スマートデバイス制御及び／又はスマートディスプレイとの相互作用は、部屋内のユーザが、ユーザの制御内のデバイスを用いてディスプレイを制御することを可能にするために使用されてもよい。例えば、ＡＲギア、スマートウォッチ、外科医テーブル、及び／又は他の器具が、例えば、表示されるもの、及びディスプレイのパラメータを制御するために、ＯＲ内のいくつか又は全てのディスプレイへの個々のリンク及び／又はペアリングを作成するために使用されてもよい。
手技、ＨＣＰ、及び／又は患者データは、ディスプレイのためのデフォルト相互作用制御を決定するために使用され、ユーザが直観的相互作用並びにディスプレイ及びディスプレイのデータの制御を可能にし得る。
音声制御ディスプレイは、ディスプレイパラメータ又はディスプレイに表示若しくは接続されるものを変更するために使用されてもよい。
ディスプレイの制御パラメータのＡＩ相互作用及び／又は方向が提供されてもよく、例えば、所定の制御語及び／又はジェスチャ、並びに所定の変数間でコマンドを補間する能力検索挙動及び／又はシステムを含んでもよい。
例では、システムが、音声認識、ユーザの撮像、及び／又は個人の他の電子識別に基づいて個人を区別し得るので、個別化された経験及び／又は応答が使用され得る。
ディスプレイ設定及び制御のタッチディスプレイ補足は、オプションを通したナビゲーションを可能にしてもよく、表示された撮像及び分析の態様を調査してもよい。ユーザからの可変入力を介したディスプレイの支援ＡＩ制御が提供されてもよい。
通信ポータルは、別のＨＣＰと通信するためにＨＣＰによって使用されてよい。例では、口頭入力は、ＯＲの外部の通信を制御するためにスマートディスプレイによって利用され得る。
ディスプレイは、スポーク要求及び／又は情報を転記してもよく、ＳＭＳ、電子メール、及び／又は他の電子手段を介してメッセージ及び／又は要求を送信（例えば、デジタル送信）してもよい。
スキルセット及び／又は人を要求することは、ディスプレイ及び／又はハブが、要求されたタスクを支援することに関与する個人を識別及び位置特定することを可能にし得、ヘルプの必要性及びヘルプが必要とされる場所を示す通知を人に送信し得る。
例では、システムは、要求されたヘルプ又はステップをシステムの必要とされるタスクに分割してもよく、必要とされるスキルセットを用いて応対可能な人員（例えば、最も応対可能な人員）を識別し、人員にヘルプの必要性を通知してもよい。
システムは、外科医に対してスキルセット及び／又は個人推奨を行ってもよく、推奨の強さ又は弱さ、及び／又は同等物を強調表示、ランク付け、指定してもよく、外科医が選択することを可能にしてもよい。そのような場合、外科医は、通知され得る（例えば、有意に通知される）。
スマートディスプレイセットアップ構成は、ユーザ及び／若しくはスタッフの識別、以前の使用、並びに／又は手技若しくは患者パラメータに基づき得る。
ディスプレイのスマートセットアップ、構成、及び／又は向き制御は、ユーザＩＤに基づいてもよい。例では、以前の使用は、位置、向き、及び／又は表示された情報を改善するために使用され得る。
内部ディスプレイ設定は、例えば、感知されたユーザ、手技、及び／又は患者構成に基づいて調節されてもよく、それは、コントラストを増加させてもよく、色飽和度をより大きく若しくは小さくしてもよく、及び／又はユーザによって表示されているデータの視認性及び／又は解釈を改善するように背景又はベース着色を変化させてもよい。
ユーザ相互作用及び利用は、どのＨＣＰが表示された情報を使用するか、使用されるシステム又はディスプレイがどのくらいの頻度であるか、使用されるディスプレイ情報が何であるか、どのＨＣＰがシステムと最も相互作用するか、向き、利用タイミング及び数量、並びにユーザが部屋内でどこに位置するかを含み得る。
ディスプレイのスマートセットアップ、構成、及び／又は向き制御は、ユーザＩＤに基づいてもよい。どのシステムによる収集及び／又は通信されたデータの制御かが知られ得、どの手段及びパイプ経路を通した通信かが知られ得る。
監視される製品に関する状況及びどのオブジェクトによって監視されるかを記録して、例えば、施設を通るワークフロー及び製品フローを理解し得る。
例では、監視されたデータは、どのシステム（複数可）が物品を検出したか、検出されたときに物品がどこで、いつ、及びどの状態にあり得るかを含み得る。
監視されたデータのソースのメタデータ識別は、データに結び付けられ得る。メタデータ識別は、以下のうちの１つ又は２つ以上を含んでもよい、すなわち、測定及び／又は追跡、向き、距離及び／又は位置、高さ区別、時間監視システム、ＮＦＣ超広帯域（ＵＷＢ）Ｂｌｕｅｔｏｏｔｈ視覚可視光スペクトル、マルチスペクトル態様、パッシブサーモグラフィ、手術スタッフストレッサー、並びに病気タスクの重大性である。
他の施設システム及びサーバとの相互作用が提供されてもよい。ＯＲ在庫管理システムがハブに含まれてもよい。例えば、ＯＲ在庫管理システムは、治療調整の請求及び／又は償還承認を含んでもよい。例えば、ＯＲ在庫管理システムは、事前承認又は手技分類に基づいて、手技アプローチ、使用される器具、及び／又は薬剤補助の調整を含んでもよい。
図２４は、患者、医療提供者、外科用オブジェクト、手術プロジェクト、及び／又は外科用器具を追跡するための外科用ハブを含み得る、ＯＲの図を図示する。本明細書で説明されるように、センサは、外科用ハブ２０００６によって使用され得る信号を送信又は受信し得る。例えば、センサは、ＲＦＩＤ、Ｂｌｕｅｔｏｏｔｈデバイス、コンピュータ、ウェアラブルデバイス、スマートフォン、スマートウォッチ、無線送信機ダッシュ受信機及び／又は同等物であってもよい。
例では、１つ又は２つ以上の外科用ハブは、オブジェクトが外科用ＯＲ内に位置するかどうかを判定してもよい。例では、外科用ハブ（複数可）は、オブジェクトが外科用ＯＲに存在しないかどうかを判定してもよい。例では、外科用ハブ（複数可）は、外科用ＯＲに隣接した部屋にオブジェクトが位置するかどうかを判定してもよい。外科用ハブ（複数可）は、協調して動作してもよく、又は独立して動作してもよい。オブジェクトは、スマート医療器具などのスマートデバイスであってもよい。
手術室４７０００は、外科用ハブ２０００６などの外科用ハブを含んでもよい。外科用ハブ２０００６は、例えば、外科用ＯＲの境界（例えば、壁）を画定するために、ピング（例えば、超音波ピング）を使用してもよい。外科用ハブ２０００６は、オブジェクトが外科用ＯＲに入る又は出るときを認識し得る。外科用ハブ２０００６は、患者、ＨＣＰ、外科用製品、外科用器具、及び／又は同等物の存在、不在、及び／又は動きを検出するために使用され得るいくつかのセンサに接続され得る。本明細書で使用される場合、外科用器具は、医療器具と称されてもよく、その逆も同様である。
外科用ハブ２０００６は、手術室の１つ又は２つ以上の領域及び／又はスペースを決定するために、いくつかのセンサを含んでもよく、及び／又はいくつかのセンサと通信してもよい。例えば、外科用ハブ２０００６は、手術室４７０００が滅菌野及び非滅菌野を含み得ることを決定し得る。外科用ハブ２０００６は、手術室４７０００が、手術のための医療器具及び／又は製品を準備するためにＨＣＰによって使用され得るバックテーブル４７００２を含み得ることを決定し得る。外科用ハブ２０００６は、手術室４７０００が手術台４７００４を含み得ることを決定し得る。外科用ハブ２００６はまた、患者によって占有される領域、ＨＣＰによって占有される領域、手術室４７０００の外側の領域、手術室４７０００に隣接する手術室、及び／又は同等物などの手術室４７０００に関連付けられ得る他の領域を決定してもよい。領域は、ストック領域、メイヨースタンド、及び／又は手術部位を含んでもよい。
手術室４７０００は、患者側カート２００３２を含んでもよい。患者側カート２００３２はまた、手術ロボットと称されてもよい。外科用ハブ２０００６は、手術ロボット２００３２を監視し得る。外科用ハブ２０００６は、手術ロボット２００３２の位置を決定し得る。外科用ハブ２０００６は、手術ロボット２００３２が、滅菌野を含み得る領域内にあり得るかどうかを決定し得る。外科用ハブ２０００６は、手術ロボット２００３２が、非滅菌野を含み得る領域内にあり得るかどうかを決定し得る。一例では、手術ロボット２００３２が非滅菌野にあった可能性があり、手術ロボット２００３２が手術の準備ができていない可能性があると外科用ハブ２０００６が判定したとき、外科用ハブ２０００６は、手術ロボット２００３２が使用前に洗浄及び／又は手術の準備をされるべきであることをＨＣＰに通知してもよい。
手術室４７０００は、ＨＣＰ ４７００６、ＨＣＰ ４７００８、ＨＣＰ ４７００１０、ＨＣＰ ４７０１２、ＨＣＰ ４７０１４、ＨＣＰ ４７０１６、及び／又はＨＣＰ ４７０１８などの１つ又は２つ以上のＨＣＰを含み得る。外科用ハブ２０００６は、手術室４７０００内の１つ又は２つ以上のセンサ及び／又は１つ又は２つ以上のカメラを使用して、１つ又は２つ以上のＨＣＰＳを監視、追跡、及び／又は検出してもよい。例えば、ＨＣＰ ４７０１４、ＨＣＰ ４７０１６、及び／又はＨＣＰ ４７００６は、外科用ハブ２０００６によって検出され得るウェアラブルセンサを装着していてもよい。ウェアラブルセンサは、ＨＣＰ ４７０１４に関連付けられ得るセンサ４７０２０、ＨＣＰ ４７０１６に関連付けられ得るセンサ４７０２２、ＨＣＰ ４７０１８に関連付けられ得るセンサ４７０２４、及び／又はＨＣＰ ４７００６に関連付けられ得るセンサ４７０２６を含み得る。ウェアラブルセンサは、ＲＦＩＤタグ、スマートウォッチ、スマートフォン、コンピュータ、Ｂｌｕｅｔｏｏｔｈデバイス、及び／又は同等物などの人を追跡するための任意の好適なセンサであってもよい。
外科用ハブ２０００６は、ウェアラブルデバイスを使用してＨＣＰを監視及び／又は追跡してもよい。例えば、外科用ハブ２０００６は、ウェアラブルデバイスを人に関連付けることによって、部屋期間におけるデバイスの存在を示し得る信号をウェアラブルデバイスから受信し得る。外科用ハブ２０００６は、その人がＯＲ内のどこにいる可能性があるかを推定及び／又は決定し得る。外科用ハブ２０００６は、ウェアラブルデバイスから決定された位置を使用して、関連付けられた人がＯＲ内に存在し得る領域を決定し得る。例えば、外科用ハブ２０００６は、ＨＣＰ ４７０１４がバックテーブルにある可能性があることを決定してもよい。コンテキスト情報を使用して、外科用ハブ２００６は、手術中に実行され得るタスクを決定し得、ＨＣＰの位置をそのタスクに関連付け得る。例えば、外科用ハブ２０００６は、現在の手術タスクで使用される医療器具を準備するためにＨＣＰ ４７０１４がバックテーブル４７００２にあることを決定してもよい。
手術室は、１つ又は２つ以上のカメラを含み得る。１つ又は２つ以上のカメラは、ＨＣＰによって装着され得るウェアラブルデバイス上にあり得るカメラを含み得る。例えば、ＨＣＰは、カメラを含み得る安全眼鏡を着用していてもよい。外科用ハブ２０００６は、ＨＣＰなどの人の位置を決定するために、ＯＲ内の１つ又は２つ以上のカメラからのデータを利用してもよい。例えば、外科用ハブ２０００６は、手術室内のカメラを使用して、ＨＣＰ ４７０１０の位置を決定してもよい。別の例として、外科用ハブ２００６は、ＨＣＰ ４７００８の位置を決定するために、４７０１０によって装着された安全眼鏡に関連付けられたカメラを使用してもよい。
手術室４７０００は、手術室の領域に関連付けられたセンサを含み得る。例えば、センサ４７０２８は、外科用ハブ２００６がセンサ４７０２８を手術台４７００４に関連付け得るように、手術台４７００４上又はその近くに配置されてもよい。別の例として、センサ４７０３０は、外科用ハブ２０００６がセンサ４７０３０を手術室４７０００の入口に関連付け得るように、手術室４７０００の入口の近くにあってもよい。
手術室４７０００は、ディスプレイ４７０３２、ディスプレイ４７０３４、ディスプレイ４７０３６、及び／又はディスプレイ４７０３８などの１つ又は２つ以上のディスプレイを含んでもよい。外科用ハブ２０００６は、ディスプレイの存在を決定し得、ディスプレイの能力を決定し得、ディスプレイ上に何が表示され得るかを決定し得る。例えば、外科用ハブ２０００６は、ディスプレイ４７０３８が、外科手技の手術タスクの間に患者のＸ線を表示するために使用され得る一次ディスプレイであり得ることを決定し得る。外科用ハブ２０００６は、ディスプレイ４７０３８が１つ又は２つ以上の画像を重ね合わせることが可能であり得るディスプレイであると決定し得る。外科用ハブ２０００６は、手術中にＨＣＰ ４７００８によって使用されている医療器具から取得されたビデオストリームと共に患者のＸ線を表示するようにディスプレイ４７０３８に命令し得る。別の例として、外科用ハブ２０００６は、ディスプレイ４７０３６がＨＣＰ ４７０１４によって使用され得ることを決定してもよい。外科用ハブ２０００６は、ＨＣＰ ４７０１４に関連し得るデータを決定し得、ＨＣＰ ４７０１４に関連するデータを表示する命令２４７０３６を送信し得る。
手術室４７０００は、メイヨースタンド４７０４０及びメイヨースタンド４７０４２を含んでもよい。外科用ハブ２０００６は、メイヨースタンド４７０４０及び／又はメイヨースタンド４７０４２の終端位置を決定してもよい。例えば、外科用ハブ２０００６は、メイヨースタンド７０４０及び／又はメイヨースタンド４７０４２の位置を判定するために、手術室４７０００内に位置するカメラを使用してもよい。外科用ハブ２０００６は、メイヨースタンド４７０４０及び／又はメイヨースタンド７０４２が滅菌野内に位置し得ることを決定し得る。外科用ハブ２０００６は、メイヨースタンド４７０４０がいくつかの医療器具に関連付けられ得ることを決定し得る。例えば、外科用ハブ２０００６は、医療器具４７０４４、医療器具４７０４６、医療器具４７０４８、及び医療器具４７０５０がメイヨースタンド４７０４０の上部にあり得ることを決定し得る。外科用ハブ２０００６は、メイヨースタンド４７０４２がいくつかの医療製品に関連付けられ得ることを決定し得る。例えば、医療製品（例えば、外科用製品）４７０５２及び医療製品４７０５４は、メイヨースタンド４７０４２の上部に位置され得る。外科用ハブ２０００６は、外科用製品４７０５４が第１の時間に手術室に入った可能性があり、第２の時間に開封された可能性があることを決定し得る。外科用ハブ２０００６は、外科用製品４７０５２が一度に手術室に入った可能性があり、開封されていない可能性があることを決定し得る。外科用ハブ２０００６は、外科用製品４７０５２が保管場所４７０５６に格納され得る別の外科用製品に関連付けられ得ることを決定し得、外科用ハブ２０００６は、外科用製品４７０５２に関連付けられた外科用製品が保管場所４７０５６に配置され得ることをＨＣＰに通知し得る。
外科用ハブ２０００６は、患者の位置を決定し得る。例えば、患者４７０５８はセンサ４７０６０に関連付けられてもよい。センサ４７０６０は、ウェアラブルデバイスであってもよい。外科用ハブ２００６は、患者４７０５８が手術室４７０００に一度に入った可能性があると判定してもよい。外科用ハブ２０００６は、患者４７０５がその時点で手術室４７００に入ったことを記録し得る。外科用ハブ２０００６は、患者４７０５８が手術のために準備されている可能性があり、非滅菌野を通って移動している可能性があり、手術台４７００４に向かって移動している可能性があることを決定し得る。外科用ハブ２０００６は、患者４７０５８と接触し得る個人及びそのオブジェクトを識別してもよい。例えば、外科用ハブ２０００６は、患者４７０５８に使用された可能性がある医療器具のリストをログ記録し得る。患者４７０５８に使用され得る医療器具、患者４７０５８に対して行われる外科手技中に使用され得る外科用製品、患者４７０５８に対して行われる外科手技に関与し得るＨＣＰ、外科手技及び／又は同様のことの前、間、又は後に患者４７０５と接触した可能性のあるＨＣＰ。
外科用ハブ２０００６は、患者４７０５８に対して行われる外科手技に関与し得る手術スタッフのログを保持し得る。例えば、４７０６２に示されるように、外科用ハブ２０００６は、ＨＣＰが手術室４７０００に入るときを記録してもよく、ＨＣＰが手術室４７０００から出るときを記録してもよい。外科用ハブ２０００６は、患者４７０５８が手術室４７０００に入る又は出るときを記録してもよい。
外科用ハブ２０００６は、患者４７０５８に対して行われる外科手技に関与し得る医療器具、デバイス、及び／又は医療オブジェクト（例えば、医療製品）のログを保持し得る。例えば、４７０６４に示されるように、外科用ハブ２０００６は、医療器具などの医療デバイスが手術室４７０００に入るときを記録してもよく、医療デバイスが手術室４７０００から出るときを記録してもよい。
外科用ハブ２０００６は、階層化ソフトウェアシステムに含まれてもよい。外科用ハブ２０００６は、例えば、外科用オブジェクトが手術ＯＲ内に位置するかどうかを判定するとき、空間認識を使用してもよい。本明細書に開示されるように、外科用オブジェクトは、外科用器具、外科用製品、医療デバイス、外科用デバイス、医療器具、及び／又は同等物のうちの１つ又は２つ以上であってもよい。医療オブジェクトは、外科用ハブ２０００６に登録されてもよい。例えば、医療器具４７０４６は、それぞれの識別及び／又はシリアル番号を外科用ハブ２０００６に送信し得る。外科用ハブ２０００６は、手術室４７０００内の医療器具４７０４６のそれぞれの位置を追跡し得る。例では、オブジェクトを追跡するために１つ又は２つ以上のカメラが使用され得る。カメラは、外科用ハブ２７０００と通信し得る。
外科用ハブ２０００６は、オブジェクトが患者の内部にあるかどうかを判定してもよく、オブジェクトを除去するように指示してもよい。例えば、外科用ハブ２０００６は、外科手技中に外科用製品４７０５４が開封されており、患者４７０５８の内部に配置されている可能性があることを判定し得る。外科用ハブ２０００６は、外科用製品４７０５４に関連付けられた空間時間構成要素を決定及び／又は追跡し得る。例えば、外科用ハブ２０００６は、外科用製品４７０５４が開封された可能性のあるとき、及び外科用製品４７０５４が患者４７０５８の内部に配置された可能性のあるときを追跡し得る。一例では、外科用ハブ２０００６は、外科用製品４７０５４が患者４７０５８から除去されるべきであることを決定し得る。
外科用ハブ２０００６は、医療器具４７０４４、医療器具４７０４６、医療器具４７０４８、及び／又は医療器具４７０５０に関連付けられた空間時間構成要素を決定及び／又は追跡してもよい。外科用ハブは、医療器具４７０４４、医療器具４７０４６、医療器具４７０４８、及び／又は医療器具４７０５０上にデータをオーバーレイし得る。例えば、オブジェクトは医療器具４７０４４であってもよい。ディスプレイは、オーバーレイされたデータのために構成され得る。ディスプレイは、医療器具４７０４４に含まれてもよい。ディスプレイは、医療器具４７０４４に取り付け可能であってもよい。データは、ユーザが見るためにスクリーン上に図示されてもよい。本明細書で説明されるようなカメラは、外科用ＯＲ内の変化を観察してもよく、変化に関連付けられるデータを医療器具ディスプレイにオーバーレイしてもよい。
外科用ハブ２０００６は、保管場所４７０５６などの保管先に位置する二次オブジェクトを認識し得る。外科用ハブは、１つ又は２つ以上の二次オブジェクトが手術に関与するときを判定してもよい。例では、外科用ハブは、ＨＣＰ（例えば、ローテーション看護師）に通信して、手術タスクが実行される時間に保管場所４７０５６から二次オブジェクトを取り出し得る。
外科用ハブ２０００６は、外科手術に関与し得る医療器具を認識し得る。例えば、医療器具４７０４４、医療器具４７０４６、医療器具４７０４８、及び／又は医療器具４７０５０は、手術の次の手術タスクに関与し得る。ディスプレイ４７０３４は、ＨＣＰ ４７０１６などのテーブル看護師がアクセス可能であってもよく、外科用ハブ２７０００と通信してもよい。外科用ハブは、手術に関与する器具をディスプレイ上に示してもよい。例えば、外科用ハブ２０００６は、ディスプレイ４７０３４上で医療器具４７０４６を強調表示してもよい。手術に関与する器具は、本明細書に説明されるように、保管先に位置してもよい。外科用ハブは、器具が位置する保管先を示してもよい。
拡張現実は、使用されている医療器具を示すために外科用ハブ２０００６によって使用され得る。例えば、拡張現実は、別のディスプレイ上にオーバーレイされた二次ディスプレイと関連付けられてもよい。外科用ハブ２０００６は、拡張現実を使用して、手術に関与する器具を強調表示してもよい。例えば、外科用ハブ２０００６は、医療器具４７０５０がＨＣＰ ４７００８によって使用され得ることを決定してもよい。外科用ハブ２０００６は、ＨＣＰ ４７００８がディスプレイを含む安全ゴーグルを着用していると判定し得る。外科用ハブ２０００６は、医療器具４５０５０２に関連付けられたデータを、ＨＣＰ ４７００８に関連付けられた安全ゴーグルに送信し得、ＨＣＰ ４７００８が安全ゴーグルを通して見るときにデータがビュー上にオーバーレイされるようにする。
外科用ハブ２０００６は、ＨＣＰ ４７００８などのＨＣＰを分析するために、ＯＲ ４７０００内の１つ又は２つ以上のカメラを使用してもよい。外科用ハブ２０００６は、ＨＣＰ ４７００８が医療器具４７０４６を使用している可能性があると判定し得る。外科用ハブ２０００６はおそらく、ＨＣＰ ４７００８が、ＨＣＰ ４７００８を含む現在の手術検査について不確かであり得ることを決定し得る。例えば、外科用ハブ２０００６は、ＨＣＰ ４７００８のジェスチャ及び／又は姿勢を分析してもよく、ＨＣＰ ４７００８が混乱している可能性があるか、又は医療器具４７０４６を非効率的に使用している可能性があると判定してもよい。外科用ハブ２０００６は、ディスプレイ４７０３８を使用してＨＣＰ ４７００８に通知を送信し得る。通知は、医療器具４７０４６を使用して実行される手術タスクに関する命令を示し得る。外科用ハブ２０００６は、命令がＨＣＰ ４７００８を支援したかどうかを決定するために、ＨＣＰ ４７００８を監視し続け得る。
外科用ハブ２０００６は、ＨＣＰのための１つ又は２つ以上のディスプレイをカスタマイズ及び／又は個人化し得る。例えば、外科用ハブ２０００６は、ＨＣＰ ４７０１６のためにディスプレイ４７０３２をカスタマイズしてもよい。別の例として、外科用ハブ２０００６は、ＨＣＰ ４７００８のためにディスプレイ４７０３８をカスタマイズしてもよい。
例では、外科用ハブ２０００６は、どの器具が滅菌されているか、又は滅菌されていないかを認識し得る。例えば、外科用ハブ２０００６は、器具が滅菌されていない医療スタッフによって触れられたかどうかを追跡してもよく、器具が滅菌されていないことを決定してもよい。外科用ハブは、器具が滅菌野又は非滅菌野のいずれに位置しているかを示し得る。例えば、外科用ハブ２０００６は、医療器具４７０４６が滅菌であったと判定してもよく、ＨＣＰ ４７０１８が医療器具７０４６と接触したと判定してもよく、医療器具４７０４６がもはや滅菌ではないと判定してもよい。別の例として、外科用ハブ２０００６は、医療器具４７０４８が手術室４７０００の床に落とされた可能性があり、もはや滅菌されていない可能性があることを判定し得る。別の例として、外科用ハブ２０００６は、外科用製品４７０５４が開封された可能性があり、もはや滅菌ではない可能性があることを決定し得る。
医療オブジェクトに関連付けられた空間時間データは、外科用ハブ２０００６によって収集され得る。空間時間データは、器具が交換された回数であってもよい。例えば、空間時間データは、医療器具４７０４４がＨＣＰ ４７００８とＨＣＰ ４７０１４との間で５回交換されたことを示してもよい。外科用ハブは、空間時間データを分析し得る。例えば、外科用ハブ２０００６は、ＨＣＰ ４７００８とＨＣＰ ４７０１４との間の交換の回数に基づいて、医療器具４７０４４が手術に関与している可能性があると判定してもよい。外科用ハブは、空間時間データを分析して、手術ＯＲセットアップを最適化してもよい。
外科用ハブは、手術ＯＲ内の医療オブジェクト間で交換されるデータを調整してもよい。例えば、医療器具４７０４６は、誤ったディスプレイであり得る、情報をディスプレイ４７０３８に送信しようとし得る。そのような場合、外科用ハブ２０００６は、ディスプレイ４７０３６が好適なディスプレイであり得ることを識別し得る。外科用ハブ２０００６は、データをディスプレイ４７０３６に送信してもよい。外科用ハブ２０００６は、医療器具４７０４６がディスプレイ４７０３８に情報を送信することを防止し得る。
医療器具及び／又は医療製品は、電力シグネチャと関連付けられてもよい。外科用ハブ２０００６は、電力シグネチャを判定してもよく、電力シグネチャに基づいて、医療器具及び／又は医療製品が電源オンされたことを判定してもよい。
外科用ハブ２０００６は、データクラスタ及び／又はデータポイントのネクサスを使用することによって、医療器具を識別及び／又は検証し得る。例では、器具の向き及び／又は器具に関連する人間工学的情報は、データクラスタ及び／又はデータポイントのネクサスを使用して決定されてもよい。例えば、外科用ハブ２０００６は、ＯＲ ４７０００内に位置する発生器に関連付けられ得る、ディスプレイ４７０３８及びディスプレイ４７０３６に関連付けられたデータを受信してもよい。発生器は、データを外科用ハブ２０００６に直接送信することができない場合がある。外科用ハブ２０００６は、外科用ハブ２０００６がディスプレイ４７０３６を読み取る能力を有し得るように、ディスプレイ４７０３６を監視するために１つ又は２つ以上のカメラを使用してもよい。例えば、外科用ハブ２０００６は、ディスプレイ４７０３６から発生器の電力レベルを決定してもよく、発生器の決定された電力レベルに基づいてＯＲ ４７０００内の１つ又は２つ以上の医療器具を調整してもよい。別の例として、外科用ハブ２０００６は、発生器の設定を決定してもよく、発生器の設定をディスプレイ４７０３８上に表示してもよい。別の例として、外科用ハブ２０００６は、ディスプレイ４７０３６上にエラーコードがあると判定してもよく、エラーに関する通知をＨＣＰ ４７００８に送信してもよい。
外科用ハブ２０００６は、医療器具の識別情報を示すメッセージを医療器具から受信し得る。例えば、医療器具４７０４６は、医療器具４７０４６のシリアル番号を含み得るメッセージを外科用ハブ２０００６に送信し得る。外科用ハブ２７００６は、医療器具４７０４６のシリアル番号をログ記録し得る。外科用ハブ２７００６は、シリアル番号を使用して医療器具４７０４６を識別し得、識別に基づいて医療器具４７０４６の１つ又は２つ以上の設定をカスタマイズし得る。外科用ハブ２７００６は、シリアル番号を使用して、医療デバイス（例えば、医療器具）４７０４６の１つ又は２つ以上の能力を決定してもよい。
例では、外科手術ＯＲの境界は、外科用ハブに送信されたカメラ情報によって決定されてもよい。外科用ハブは、例えば、カメラ情報に基づいて、外科用ＯＲ内のオブジェクトが移動したときを識別し得る。例えば、外科用ＯＲは、医療スタッフメンバーの動き及び外科用ロボットアームの動きを追跡したカメラ情報に基づいて、医療スタッフメンバーが外科用ロボットアームにぶつかったことを識別し得る。例えば、外科用ハブ２０００６は、ＨＣＰ ４７０１２が手術ロボット２００３２と接触するようになった可能性があることを決定するために、ＯＲ ４７０００内のカメラを使用してもよい。外科用ハブ２０００６は、手術ロボット２００３２とＨＣＰ ４７００８との間で発生した接触を示す通知をＨＣＰ ４７０１２に送信し得る。
例では、外科用ハブは、患者４７０５８に関連付けられた情報を受信し得る。例えば、ＨＣＰ ４７０１０は、医療器具４７０４８を使用して患者４７０５８の身体の領域にエネルギービームを発射していてもよい。そのような場合、外科用ハブ２０００６は、医療器具の発射中にＨＣＰ ４７０１０によって使用され得るディスプレイ４７０３８上に発射位置をオーバーレイし得る。発射情報は、ＨＣＰ ４７０１０をサポートしている可能性があるＨＣＰ ４７０１６にアクセス可能であり得るディスプレイ４７０３２などの二次ディスプレイ上に出力され得る。
外科用ハブ２０００６は、医療器具４７０５０などの医療器具上のインジケータを識別し得る。例えば、外科用ハブ２０００６は、ＯＲ ４７０００内のカメラを使用して、医療器具４７０５０を識別し得る。外科用ハブ２０００６は、インジケータに関連付けられた情報を取り出してもよい。インジケータは、インデックスポート及び／又は基準マーカを含んでもよい。インジケータは、器具シャフトの長さ及び厚さなどの医療器具４７０５０に関する品質を含んでもよい。外科用ハブ２０００６は、品質に基づいて、医療器具４７０５０に送信されるデータをスケーリングし得る。例えば、外科用ハブ２０００６は、医療器具４７０５０が高速プロセッサを備えていない可能性があると判定してもよく、医療デバイス４７０５０に送信されるデータの数量を低減して、医療デバイス４７０５０の応答性が低下することを防止してもよい。外科用ハブ２０００６によって使用され得るカメラは、１つ又は２つ以上の器具のインデックス調整及び／又は登録点を識別し得る。
外科用ハブ２０００６は、カメラを使用して、医療器具の特性に基づいて医療器具を識別し得る。例えば、外科用ハブ２０００６は、例えばカメラを介して空間認識を使用して、器具の形状をモデル化し得る。そのような場合、カメラは、形状に基づいて器具を識別し得る。例えば、外科用ハブ２０００６は、エンドカッターに類似する形状を含むカメラによって捕捉された画像に基づいて、医療器具４７０４４をエンドカッターとして識別し得る。
外科用ハブ２０００６は、手術室４７０００内のディスプレイに基づいてデータを生成するために、手術室４７０００内の１つ又は２つ以上のカメラを使用してもよい。例えば、外科用ハブ２０００６は、カメラを使用して医療器具４７０４６を監視し、医療器具４７０４６の一部であるディスプレイ上に表示されている設定を決定し得る。外科用ハブ２０００６は、医療器具４７０４６から設定を読み取ってもよく、ディスプレイ４７０３８上に設定を表示してもよい。外科用ハブ２０００６は、ディスプレイ上に情報をオーバーレイし得る。情報は、別のディスプレイからの情報を含んでもよい。例えば、ＨＣＰ ４７００８は、発生器電力レベル、ＥＫＧ測定、及び器具発射ステータスに関連する情報を要求し得る。そのような場合、外科用ハブ２０００６は、医療器具４７０４８に関連付けられたディスプレイが、発生器電力レベル、ＥＫＧ測定、及び器具発射ステータスを示し得るように、医療器具４７０４８に関連付けられたディスプレイを構成し得る。器具は、これらの値の３つ全てを示すディスプレイを含んでもよい。外科用ハブ２０００６は、ＨＣＰ ４７００８が腹腔鏡の視点から見ている可能性があるという情報をディスプレイに移し得る。
外科用ハブ２０００６は、互いに互換性がない可能性がある１つ又は２つ以上のデバイスを認識し得る。例えば、外科用ハブ２０００６は、医療器具４７０４６が医療製品４７０５２と互換性がない可能性があると決定してもよい。
外科用ハブ２０００６は、１つのデバイスが別のデバイスと互換性があることを可能にするために、１つ又は２つ以上のアクションをとってもよい。例えば、外科用ハブ２０００６は、医療器具４７０５０が医療器具４７０４６とデータを交換することができ得るように、医療器具４７０４６からのデータを標準化してもよい。
外科用ハブ２０００６は、本明細書で説明されるようなメタデータを経時的に分析する機械学習を含み得る。メタデータは、外科用ハブ２０００６に送信されるカメラ情報に基づいてもよい。例えば、カメラは、ディスプレイ上の情報を読み取り、ある持続時間にわたって外科用ハブ２０００６に情報を送信してもよい。外科用ハブは、情報を機械学習モデルに入力して、例えば、ＨＣＰ ４７０１０などのＨＣＰが何をしているかを判定してもよい。機械学習モデルは、ＨＣＰ ４７０１０に対する提案を決定し得、ＨＣＰ ４７０１０は、ディスプレイ４７０３８などのＨＣＰ ４７０１０によってアクセス可能なディスプレイに提案を送信してもよい。機械学習モジュールは、外科用ハブ２０００６がいつ及び／又はどこに情報を送信し得るかを決定し得る。
外科用ハブ２０００６は、医療スタッフが所与の時間に何を必要とするかに基づいて、データをフィルタリング及び／又は調整し得る。例えば、外科用ハブ２０００６は、ハーモニックスカルペルのバッテリレベルに関連するデータを含み得る。ＨＣＰ ４７００８は、ハーモニックスカルペルを含まない手術タスクを行っている場合がある。そのような場合、外科用ハブ２０００６は、ハーモニックスカルペルデータをフィルタリングしてもよい。外科用ハブ２０００６は、フィルタリングされたデータを、外科医がアクセス可能なディスプレイに送信してもよい。
図２５は、外科ＯＲ内のオブジェクト及び人員の空間認識に基づいて変化し得る、適応及び／又は制御を提供するために、外科用ハブによって行われ得る方法を図示する。
例では、外科用ハブは、オブジェクトが患者の内部にあるかどうかを判定してもよく、オブジェクトを除去するように指示してもよい。例では、外科用ハブは、各オブジェクトに関連付けられた空間時間構成要素を追跡し得る。例えば、外科用ハブは、例えば、所与の時間に、どのデバイスが医療スタッフメンバーの手にあるかを追跡し得る。
外科用ハブは、オブジェクト上にデータをオーバーレイし得る。例えば、オブジェクトは医療器具であってもよい。ディスプレイは、オーバーレイされたデータのために構成され得る。ディスプレイは、医療器具に含まれてもよい。ディスプレイは、医療器具に取り付け可能であってもよい。データは、ユーザが見るためにスクリーン上に図示されてもよい。本明細書で説明されるようなカメラは、外科用ＯＲ内の変化を観察してもよく、変化に関連付けられるデータを医療器具ディスプレイにオーバーレイしてもよい。
外科用ハブは、保管先に位置する二次オブジェクトを認識し得る。保管先は、外科用ＯＲの外部に位置してもよい。外科用ハブは、１つ又は２つ以上の二次オブジェクトが手術に関与するときを判定してもよい。例では、外科用ハブは、医療スタッフメンバー（例えば、ローテーション看護師）に通信して、手術に関与する二次オブジェクトを取り出し得る。
外科用ハブは、外科用ＯＲ内に位置する各オブジェクトを特定し得る。例では、外科用ハブは、手術に関与する器具を認識し得る。例えば、器具は、手術の次の手術タスクに関与し得る。ディスプレイは、テーブル看護師がアクセス可能であってもよく、外科用ハブと通信してもよい。外科用ハブは、手術に関与する器具をディスプレイ上に示してもよい。例えば、外科用ハブは、ディスプレイ上で器具を強調表示してもよい。手術に関与する器具は、本明細書に説明されるように、保管先に位置してもよい。外科用ハブは、器具が位置する保管先を示してもよい。
図２５に示されるように、一方法が提供され得る。本方法は、外科ＯＲ内のオブジェクト及び人員の空間認識に基づいて変化し得る、適応及び／又は制御を提供するために、外科用ハブによって行われ得る。本方法は、任意の順序で実行され得るいくつかのプロセスを含み得る。プロセスは、４５６５８、４５６６０、４５６６２、４５６６４、４５６６６、４５６６８、及び／又は４５６７０を含んでもよい。
４５６５８において、外科用オブジェクトの状態が、判定され得る。例えば、外科用ハブは、外科用オブジェクトを検出してもよく、外科用オブジェクトの状態を決定してもよい。外科用オブジェクトは、医療器具、共通の外科用器具、外科用製品、医療製品、医療機器、手術室内のオブジェクト及び／又は同等物であってもよい。外科用オブジェクトの状態は、外科用製品が新しい可能性があること、開封されていない可能性があること、開封されている可能性があること、使用されている可能性があること、廃棄される必要がある可能性があることなど、又はそれらの任意の組み合わせを示し得る。外科用オブジェクトの状態は、外科用器具が使用される準備ができている可能性があること、外科用器具が洗浄される必要がある可能性があること、外科用器具が、準備ができていない可能性があること、外科用器具が使用されていること及び／又は同様のことを示し得る。
４５６６０において、手術室の領域が決定され得る。手術室の領域は、外科用オブジェクトに関連付けられ得る。手術室の領域は、医療器具及び／又は医療機器に関連付けられ得る。手術室の領域は、保管領域、棚、手術台、ＨＣＰに関連付けられた領域、患者に関連付けられた領域、メイヨーカート、手術バックテーブル、医療器具の準備のための領域、医療器具を洗浄するための領域、滅菌野、非滅菌野及び／又は同様のことであってもよい。
一例では、外科用ハブは、メイヨーカートが手術室内に存在し得ることを決定し得る。外科用ハブは、１つ又は２つ以上の医療器具がメイヨーカート上に存在し得ることを決定し得る。外科用ハブは、１つ又は２つ以上のＨＣＰがメイヨーカートの近くにあり得ることを決定し得る。
一例では、外科用ハブは、手術室の一部が滅菌野であり得ることを決定し得る。滅菌野は、滅菌された領域であり得る。外科用ハブは、滅菌野内の１つ又は２つ以上のオブジェクトが滅菌されていると判定してもよい。外科用ハブは、医療器具が非滅菌野から滅菌野へ通過し得ることを決定し得、医療器具が洗浄され得、滅菌され得ること、及び医療器具が滅菌野において許容され得ることを決定し得る。外科用ハブは、医療器具が非滅菌野から滅菌野へ通過することを許可され得ないことを決定し得る。医療ハブは、非滅菌医療器具が滅菌野に入った可能性があることを判定してもよい。医療ハブは、非滅菌医療器具が滅菌野内にあり得ることを１つ又は２つ以上のＨＣＰに通知してもよく、医療ハブは、非滅菌医療器具に接触した可能性がある個人も非滅菌であり得ることを示してもよい。
一例では、外科用ハブは、手術室の一部が手術室の床に関連付けられ得ることを決定し得る。外科用ハブは、手術室の床を監視して、オブジェクトが床と接触する可能性があるかどうかを判定し得る。例えば、外科用ハブは、ＨＣＰによって床に落とされた可能性がある医療器具を識別し得る。外科用ハブは、１つ又は２つ以上のＨＣＰに、医療器具が床にあり、滅菌されていない可能性があることを通知し得る。外科用ハブは、床上の医療器具を回収するようにＨＣＰに示し得、医療器具を洗浄する方法に関する命令をＨＣＰに提供し得る。
一例では、外科用ハブは、手術室の一部が保管領域に関連付けられ得ることを決定し得る。外科用ハブは、保管領域を監視してもよい。外科用ハブは、１つ又は２つ以上の医療器具及び／又は医療製品が保管領域内に位置し得ることを決定し得る。外科用ハブは、保管領域内に配置され得る１つ又は２つ以上の医療器具及び／又は医療製品の在庫を保持し得る。例えば、外科用ハブは、ＨＣＰが保管領域から医療器具を取り出すときに、在庫から医療器具を除去してもよい。
外科用ハブは、本明細書に説明される方法のうちのいずれか１つにおいて、手術室の領域を判定してもよい。例えば、外科用ハブは、手術室の１つ又は２つ以上の領域を判定するために超音波ピングを使用してもよい。別の例として、外科用ハブは、レーザレーダ（ライダ）を使用してもよい。外科用ハブは、電気信号、Ｗｉ－Ｆｉ信号、無線信号、信号強度の判定、デバイス間の距離の判定、超音波測定、センサ、インジケータ、ＲＦＩＤ及び／又は同様のことを使用して、手術室の１つ又は２つ以上の領域を判定してもよい。外科用ハブは、１つ又は２つ以上のカメラを使用して、手術室の領域を判定してもよい。例えば、外科用ハブは、手術室の１つ又は２つ以上の領域を決定するために、カメラから取得されたビデオ及び／又は画像を分析してもよい。
外科用ハブは、外科用オブジェクトを決定してもよく、外科用オブジェクトに関連付けられた領域を決定してもよい。例えば、外科用ハブは、１つ又は２つ以上のセンサ及び／又は１つ又は２つ以上のカメラを使用して、医療器具などの外科用オブジェクトを決定し得る。一例では、外科用ハブは、カメラを使用してメイヨーカートを識別し得、メイヨーカート上の１つ又は２つ以上の医療器具を識別し得る。一例では、外科用ハブは、ＨＣＰによって占有され得る手術室のエリアを識別し得、ＨＣＰによって保持され得る医療器具を識別し得る。
外科用ハブは、患者の上、近く、及び／又は中にあり得る１つ又は２つ以上のオブジェクトを識別し得る。例えば、外科用ハブは、患者に対して手技を行うために使用され得る医療器具を識別し得る。外科用ハブは、医療器具が患者に接触した可能性があることを識別し得る。外科用ハブは、医療器具が患者に挿入され得ることを識別し得る。外科用ハブは、医療器具が患者内にある可能性があることを追跡し得、医療器具が患者の体内に残されている可能性がある場合にＨＣＰに通知し得る。外科用ハブは、患者に適用され得る医療製品を識別し得る。外科用ハブは、患者の内部に配置され得る医療デバイスを識別し得る。
４５６６２において、外科用オブジェクトを使用し得る手術タスクが決定され得る。例えば、医療処置中に外科用オブジェクトを使用し得る手術タスクが決定され得る。一例では、外科用ハブは、外科手技を決定し得、外科手技に関連付けられ得る１つ又は２つ以上の手術タスクを決定し得る。手術タスクは、ＨＣＰが医療器具を使用して患者に対してタスクを実行することを示し得る。例えば、手術タスクは、ＨＣＰが手術中に患者の組織を一緒にステープル留めするために医療用ステープラを使用することを示してもよい。一例において、手術タスクは、医療器具が患者に対して使用され得る前に、ＨＣＰが医療器具を洗浄することを示し得る。一例では、手術タスクは、ＨＣＰが医療器具を洗浄し、及び／又は使用される医療器具を準備するための１つ又は２つ以上の命令を示し得る。
４５６６４において、外科用オブジェクト及び／又は手術室の領域に関連付けられた時間が決定され得る。例えば、時間は、医療器具及び／又は医療製品などの外科用オブジェクトに関連付けられてもよい。時間は、医療器具が手術室に入った可能性がある、洗浄された可能性がある、滅菌された可能性がある、使用された可能性がある、非滅菌にされた可能性がある、患者と接触した可能性がある、ＨＣＰと接触した可能性がある、手術室から出た可能性がある、患者に入った可能性がある、患者から出た可能性がある及び／又は同様のことを示し得る。時間は、医療製品が使用された可能性があるとき、開封された可能性があるとき、医療製品が開封されていた時間、医療製品が手術室に入ったとき、医療製品が患者と接触したとき、医療製品が滅菌された可能性があるとき、医療製品が滅菌されたとき、医療製品が滅菌されていない可能性があるとき、医療製品が滅菌されなくなったとき、医療製品が患者の内部に配置された可能性があるとき、医療製品が患者から除去された可能性があるとき、医療製品がＨＣＰと接触した可能性があるとき及び／又は同様のことを示し得る。
時間は、手術室の領域に関連付けられ得る。例えば、時間は、ＨＣＰが手術室に入った可能性があるとき、手術室の領域に入った可能性があるとき、手術室の領域を出た可能性があるとき、手術室を出た可能性があるとき、及び／又は同様のことを示し得る。時間は、患者が手術室に入った可能性があるとき、手術室の領域に入った可能性があるとき、手術室の領域を出た可能性があるとき、手術室を出た可能性があるとき、及び／又は同様のことを示し得る。
４５６６６において、コンテキストデータが決定され得る。コンテキストデータは、時間、外科用オブジェクトの状態、手術室の領域、ＨＣＰ、手術タスク、及び／又は同等物に基づいてもよい。コンテキストデータは、本明細書で説明される任意のコンテキストデータであり得る。例えば、コンテキストデータは、医療器具が手術室の領域内のＨＣＰと接触した可能性があることを示し得、医療器具の１つ又は２つ以上の設定を示し得る。一例では、コンテキストデータは、手術室の領域内に位置し得る患者の１つ又は２つ以上のバイタルサインを示し得る。
４５６６８において、メッセージは、ＨＣＰに関連付けられたディスプレイに送信され得る。一例では、ディスプレイを決定し得、メッセージを決定されたディスプレイに送信し得る。メッセージは、ディスプレイがコンテキストデータを表示することを示し得る。コンテキストデータは、本明細書で説明される任意のコンテキストデータであり得る。
４５６７０において、通知がＨＣＰに送信され得る。通知は、コンテキストデータを含み得る。医療器具の使用方法に関する指示をＨＣＰに提供するために、通知がＨＣＰに送信されてもよい。通知は、どの設定が医療器具に適用され得るか、及び／又はどの設定が医療器具に適用されたかに関する指示をＨＣＰに提供するために、ＨＣＰに送信され得る。通知は、患者のバイタルサイン及び／又は医療器具の提案された設定などのコンテキストデータをＨＣＰに提供するためにＨＣＰに送信されてもよい。
医療提供者（ＨＣＰ）にデータオーバーレイを提供する外科用ハブのためのシステム、方法、及び／又は手段が提供され得る。外科用オブジェクトの状態及び／又は外科用オブジェクトが位置する手術室の領域が決定され得る。
外科用オブジェクトが位置する手術室の領域を決定することは、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、及び／又は手術室内のカメラからのビデオを使用することを含んでもよい。外科用オブジェクト及び／又は手術室の領域に関連付けられた時間が決定され得る。外科用オブジェクトの状態は、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すように決定され得る。
医療処置中に外科用オブジェクトを使用する手術タスクが決定され得る。タスク及び／又は医療処置中に手術室の領域に入る外科用オブジェクトが決定され得る。例では、外科用オブジェクトが手術室に入ったことを決定することは、外科用オブジェクトが位置する手術室の領域に基づき得る。時間は、外科用オブジェクトが手術室に入ったときを示し得る。例では、外科用オブジェクトが手術室の領域を出たことが決定され得る。時間は、外科用オブジェクトが領域を出たときを示し得る。
例では、コンテキストデータは、オブジェクトの状態、手術室の領域、及び／又は手術タスクに基づいて決定され得る。例では、コンテキストデータは、外科用オブジェクト及び／又は手術室の領域に関連付けられた時間に基づいて決定され得る。例では、外科用オブジェクトの状態は、外科用オブジェクトが手術タスクで使用するために準備されていないことを示すように決定されてもよい。例えば、コンテキストデータは、手術タスクにおいて外科用オブジェクトを準備するための１つ又は２つ以上の命令を含んでもよい。外科用オブジェクトが患者内に保持されていないことが決定され得る。例えば、コンテキストデータは、外科用オブジェクトが患者内に保持されていないという表示を含んでもよい。コンテキストデータは、外科用オブジェクトが使用されたという指示を含んでもよい。例えば、コンテキストデータは、外科用オブジェクトを洗浄するための命令及び／又は外科用オブジェクトを処分するための命令を含んでもよい。例では、外科用オブジェクトはパッケージを含み得る。パッケージは、その時間に領域で開封されたと決定され得る。例では、手術室の領域は、ストック領域、メイヨースタンド、手術部位、滅菌野、及び／又は非滅菌野であってもよい。
メッセージは、ＨＣＰに関連付けられたディスプレイに送信され得る。例では、メッセージは、ディスプレイがコンテキストデータを表示することを示し得る。メッセージは、データベースに送信され得る。メッセージは、パッケージが開封されたことを示し得る。メッセージは、コンテキストデータを含み得る。メッセージは、外科用オブジェクトが在庫から除去されるべきであることを示し得る。例では、ディスプレイがＨＣＰの位置からある距離内にあることが決定され得る。例では、ディスプレイは、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、及び／又はスマートフォンを含み得る。通知が、ＨＣＰに送信され得る。例えば、通知は、コンテキストデータを含み得る。
例では、医療処置中に手術タスクを実行するために使用される外科用器具が決定され得る。外科用器具に関連付けられた手術室の領域が決定され得る。手術室の領域はストック領域であってもよい。ディスプレイに送信されるメッセージは、ＨＣＰをストック領域内の外科用器具にガイドするＨＣＰへの通知を含み得る。外科用器具の向きが決定され得る。例では、ＨＣＰに関連付けられたディスプレイが決定され得る。コンテキストデータは、手術タスク、手術室の領域、及び／又は外科用器具の向きに基づいて決定され得る。コンテキストデータは、器具の画像及び／又はステータスを含んでもよい。ディスプレイに送信されるメッセージは、ディスプレイ上に示されている表示データ上にオーバーレイされるべき器具の画像及び／又はステータスを示し得る。
外科用器具は、基準マーカを備えてもよい。例えば、外科用器具が基準マーカを使用していると判定されてもよい。コンテキストデータが、改善され得る外科用器具の向きを含み得ることが決定され得る。例えば、コンテキストデータは、外科用器具の向きを改善するためのＨＣＰへの命令を含んでもよい。ＨＣＰに関連付けられたディスプレイの能力が決定され得る。例えば、コンテキストデータは、ディスプレイの能力に基づいて修正され得る。
図２６は、ユーザ、機器、並びに／又は使用及びユーザ若しくは機器の必要性の認識に基づき得る、適応制御、ディスプレイの動作、及び／又はディスプレイ相互作用を提供するために、外科用ハブによって行われ得る方法を図示する。
外科用ハブは、各医療器具上のインジケータを認識してもよい。カメラは、インジケータを識別し、（例えば、座標点を介して）医療器具の位置と共にインジケータを外科用ハブに送信してもよい。例では、インジケータは、インデックス点及び／又は基準マーカを含んでもよい。インジケータは、器具シャフトの長さ及び厚さなどの器具に関する品質を含んでもよい。外科用ハブは、品質に基づいて、器具に送信されるデータをスケーリングし得る。カメラは、１つ又は２つ以上の器具のインデックス調整及び／又は登録点を識別してもよい。
例では、カメラは、器具の特性に基づいて器具を識別してもよい。例えば、カメラは、器具の形状をモデル化するために空間認識を使用してもよい。そのような場合、カメラは、形状に基づいて器具を識別し得る。例えば、カメラは、エンドカッターハンドルに類似するハンドルを識別してもよく、器具がエンドカッターであることを決定してもよい。
カメラは、外科用ＯＲ内のディスプレイに基づいてデータを生成してもよい。カメラは、ディスプレイ上に情報をオーバーレイしてもよい。情報は、別のディスプレイからの情報を含んでもよい。例えば、外科医は、発生器電力レベル、ＥＫＧ測定、及び器具発射ステータスに関連する情報を要求し得る。そのような場合、器具は、これらの値の３つ全てを示すディスプレイを含んでもよい。外科用ハブは、外科医が腹腔鏡の視点から見ているディスプレイに情報を移し得る。
外科用ハブは、１つ又は２つ以上のデバイスが互いに互換性がないことを識別及び／又は認識し得る。外科用ハブは、データがデバイス間で交換されることを可能にする形態にデータを標準化し得る。
外科用ハブは、本明細書で説明されるようなメタデータを経時的に分析する機械学習を含み得る。メタデータは、外科用ハブに送信されるカメラ情報に基づいてもよい。例えば、カメラは、ディスプレイ上の情報を読み取り、ある持続時間にわたって外科用ハブに情報を送信してもよい。外科用ハブは、情報を機械学習モデルに入力して、例えば、外科医が何をしているかを決定してもよい。機械学習モデルは、外科医のための提案を決定してもよく、外科医によってアクセス可能なディスプレイに提案を送信してもよい。機械学習モジュールは、外科用ハブがいつ及び／又はどこに情報を送信すべきかを決定し得る。例えば、機械学習モデルは、外科医が可動化を行うときにＩＭＡの結紮に関連する情報を送信するように外科用ハブに伝えてもよい。
図２６に示されるように、一方法が提供され得る。本方法は、１つ又は２つ以上の相互作用、ユーザの認識、機器の認識、使用、ユーザ要求、機器要求、及び／又は同様のことに基づいて変化し得る、適応及び／又は制御を提供するために、外科用ハブによって行われてもよい。１つ又は２つ以上の相互作用は、表示相互作用、患者との相互作用、ＨＣＰとの相互作用、１つ又は２つ以上のＨＣＰ間の相互作用、ＨＣＰと患者との間の相互作用及び／又は同様のことを含んでもよい。本方法は、任意の順序で実行され得るいくつかのプロセスを含み得る。プロセスは、４５６７２、４５６７４、４５６７６、４５６７８、４５６８０、４５６８２、及び／又は４５６８４を含んでもよい。
４５６７２において、患者及び／又は１つ又は２つ以上のＨＣＰが追跡され得る。例えば、外科用ハブは、患者、第１のＨＣＰ、及び第２のＨＣＰを追跡し得る。患者、第１のＨＣＰ、及び第２のＨＣＰは、手術室内に位置し得る。外科用ハブは、本明細書に記載の方法のいずれかを使用して、患者、第１のＨＣＰ、及び第２のＨＣＰを追跡し得る。例えば、外科用ハブは、カメラ、ＲＦＩＤ、超音波デバイス、追跡デバイス、センサ、及び／又は同等物を使用して、患者を追跡してもよい。一例では、外科用ハブは、スマートウォッチなど、ＨＣＰに関連付けられ得るデバイスを使用して、第１のＨＣＰを追跡し得る。
４５６７４において、医療器具及び／又は医療製品であり得る医療オブジェクトが追跡され得る。例えば、外科用ハブは、手術室内に位置され得る医療器具を追跡し得る。別の例として、外科用ハブは、手術室内に位置されない可能性のある医療器具を追跡し得る。外科用ハブは、医療器具などの医療製品の位置をＨＣＰなどのユーザに通知し得る。例えば、外科用ハブは、医療器具が、メイヨーカートを示す領域などの手術室内に位置し得ることをユーザに通知し得、医療器具が、使用されるために洗浄される必要があり得ることなどの医療器具のステータスを示し得る。
４５６７６において、患者及び／又は１つ又は２つ以上のＨＣＰに関連付けられ得るディスプレイが決定され得る。例えば、外科用ハブは、ＨＣＰがディスプレイの近くにあることを決定し得る。外科用ハブは、ディスプレイの識別情報を判定してもよく、ＨＣＰによって見られるデータをＨＣＰに関連付けられたディスプレイに送信してもよい。一例では、外科用ハブは、患者が、ＨＣＰによって見られる可能性が高いディスプレイの近くにいる可能性があると判定し得る。外科用ハブは、ＨＣＰがデータを見得るように、患者の近くにあり得るディスプレイに送信され得るデータを決定し得る。
４５６７８において、医療処置中に医療オブジェクトを使用し得る手術タスクが決定され得る。医療オブジェクトは、医療器具及び／又は医療製品であってもよい。手術タスクは、ＨＣＰによって実行され得る医療処置の一部であり得るタスクであり得る。例えば、タスクは、外科医が患者にステープラを使用し得ることを示してもよい。一例では、タスクは、医療器具が外科医に提供され得る前に看護師が医療器具を洗浄する必要があり得ることを示し得る。一例では、タスクは、医療器具が第１のＨＣＰによって手術室の外側の領域から回収される必要があり得ること、医療器具を準備及び洗浄し得る第２のＨＣＰに医療器具が提供される必要があり得ること、及び第３のＨＣＰが患者に医療処置を行うために医療器具を使用し得ることを示し得る。
４５６８０において、ディスプレイのためのディスプレイ構成が決定され得る。例えば、ディスプレイのためのディスプレイ構成は、手術タスク、ＨＣＰと医療オブジェクトとの間の相互作用、第１のＨＣＰと第２のＨＣＰとの間の相互作用、ＨＣＰと患者との間の相互作用、患者と医療オブジェクトとの間の相互作用及び／又は同様のことのうちの１つ又は２つ以上に基づいて決定され得る。医療オブジェクトは、医療器具、医療製品、外科用器具、外科用製品、医療機器及び／又は同等物などであってもよい。
構成は、ＨＣＰのためにカスタマイズされ得る。例えば、外科用ハブは、手術タスクが、ＨＣＰが患者に対して医療器具を使用することを要求し得ることを決定している場合がある。外科用ハブは、医療器具が１つ又は２つ以上の設定を含む可能性があると判定し得る。外科用ハブは、ＨＣＰが１つ又は２つ以上の設定の一部を見ることを好む可能性があると判定し得る。外科用ハブは、ＨＣＰが医療器具のための１つ又は２つ以上の好ましい設定を有する可能性があることを決定し得る。外科用ハブは、ディスプレイが医療器具のためのＨＣＰの好ましい設定を表示し得、外科用ハブがＨＣＰの好ましい設定により医療器具を構成し得るように、ディスプレイの構成を決定し得る。
外科用ハブは、患者の結果の分析に基づいて１つ又は２つ以上の設定を決定してもよい。例えば、外科用ハブは、実行された手術の履歴を分析し得、ディスプレイ設定及び／又は医療器具設定が改善された結果をもたらし得ることを決定し得る。外科用ハブは、これらのディスプレイ設定及び／又は医療器具設定を使用して、ディスプレイ構成を決定してもよく、そのディスプレイ構成をディスプレイ及び／又は医療器具に提供してもよい。
４５６８２において、ディスプレイ構成を示し得るメッセージがディスプレイに送信され得る。メッセージは、表示のための指示及び／又は命令を含んでもよい。例えば、メッセージは、ディスプレイがディスプレイ構成によりデータを表示すべきであることを示し得る。一例では、メッセージは、ディスプレイがディスプレイ構成に含まれ得るデータを表示することを示し得る。一例では、メッセージは、ディスプレイが、ディスプレイ構成により、別のディスプレイ又は医療器具などの別のデバイスと協調することを示し得る。
一例では、メッセージは、拡張現実ディスプレイに送信され得る。例えば、ＨＣＰは、拡張表示をＨＣＰに提供することができるデバイスを含み得る安全眼鏡を着用している場合がある。メッセージは、ＨＣＰが見ているビュー上にデータがオーバーレイされ得ることを拡張安全眼鏡に示し得る。例えば、ＨＣＰは、安全眼鏡を通して患者を見ていてもよく、安全眼鏡は、患者のバイタルサインを患者の上又は近くにオーバーレイしてもよい。一例では、ＨＣＰは、安全眼鏡を通して患者を見ていてもよく、安全眼鏡は、患者の医療画像を患者の上に又は患者を覆ってオーバーレイしてもよい。
４５６８４において、通知は１つ又は２つ以上のＨＣＰに送信され得る。通知は、コンテキストデータを含み得る。コンテキストデータは、本明細書で説明されるコンテキストデータであり得る。例えば、コンテキストデータは、手術タスク、患者、医療器具の設定、患者のバイタルサイン、医療画像及び／又は同様のことに関連付けられ得るデータを含み得る。通知は、ディスプレイ、スピーカ、電子メール、メッセージ及び／又は同等物を介してＨＣＰに送信され得る。例えば、通知は、ＨＣＰによって装着され得るスマートウォッチに送信され得る。一例では、通知は、ＨＣＰがＨＣＰにデータを話す音声を聞くことができ得るように、話し手に送信されてもよい。
ディスプレイを構成する外科用ハブのためのシステム、方法、及び／又は手段が提供され得る。例では、医療提供者（ＨＣＰ）及び／又は医療器具が、手術室内で追跡され得る。例では、第１のＨＣＰ及び第２のＨＣＰは、手術室内で追跡され得る。例では、ＨＣＰ及び／又は患者は、手術室内で追跡され得る。医療処置中に医療器具を使用する手術タスクが決定され得る。
ディスプレイのためのディスプレイ構成は、例えば、手術タスク及び／又はＨＣＰと医療器具との間の相互作用に基づいて決定され得る。例では、第１のディスプレイ構成は、ＨＣＰと医療器具との間の第１の相互作用に基づいて決定され得る。例えば、第２の相互作用は、ＨＣＰと医療器具との間、ＨＣＰとディスプレイとの間、及び／又はＨＣＰと患者との間で決定され得る。ディスプレイ構成は、第２の相互作用に基づいて変更されてもよい。ディスプレイのためのディスプレイ構成は、手術タスク及び第１のＨＣＰと第２のＨＣＰとの間の相互作用に基づいて決定され得る。例えば、第１のＨＣＰと第２のＨＣＰとの間の相互作用は、バーバルコミュニケーションであってもよい。バーバルコミュニケーションは、手術タスクを実行する際に第２のＨＣＰからの支援を求める第１のＨＣＰからの要求であると決定され得る。ディスプレイ構成は、ディスプレイ構成が、第２のＨＣＰに関連する１つ又は２つ以上の選好を用いてディスプレイを構成し得るように変更され得る。
例では、手術タスクの実行を支援することができる第３のＨＣＰが決定され得る。第３のＨＣＰは、手術室の外にあってもよい。例において、ＨＣＰと患者との間の相互作用は、手術タスクが実行されていることを示すように決定され得る。通知が、第３のＨＣＰに送信され得る。例えば、通知は、第３のＨＣＰが手術室において手術タスクを支援するように要求されていることを示してもよい。例では、第１のＨＣＰと第２のＨＣＰとの間の相互作用を決定することは、第１のＨＣＰが医療器具を第２のＨＣＰに提供することを含んでもよい。例えば、ディスプレイは、拡張現実ディスプレイ、パーソナルディスプレイ、外科用インターフェーステーブルに関連付けられたディスプレイ、機器ディスプレイ、医療器具ディスプレイ、ルームモニタ、一次モニタ、及び／又は二次モニタを含んでもよい。例では、ディスプレイ構成は、コンテキストデータ、医療器具データ、特許データ、手術タスクに関連付けられた命令、患者に関するＨＣＰに対する通知、医療器具に関するＨＣＰに対する通知、手術タスクに関するＨＣＰに対する通知、及び／又は医療器具のステータスを含み得る。ディスプレイ構成は、第２のＨＣＰのための１つ又は２つ以上の選好を含み得る。
例では、ＨＣＰに対するディスプレイの向きが決定され得る。例えば、向きは、ＨＣＰに対するディスプレイの位置、ＨＣＰに対するディスプレイの方向、及び／又はディスプレイとＨＣＰとの間の距離を含んでもよい。ＨＣＰの位置及び／又は向きが決定され得る。ディスプレイ構成は、例えば、ＨＣＰの向き及び／又は位置に基づいて修正されてもよい。例えば、メッセージは、ディスプレイに送信され得る。メッセージはディスプレイ構成を含んでもよい。ディスプレイへのメッセージは、手術タスクに関連付けられた命令、患者データ、医療器具のステータス、及び／又は医療器具に関連付けられたパラメータを含んでもよい。例では、第１のメッセージが第１のディスプレイに送信され得る。例えば、ＨＣＰが第２のディスプレイを見たと判定されてもよい。第２のディスプレイ上に表示されている表示データが判定され得る。第２のメッセージは、第１のディスプレイに送信され得る。例えば、第２のメッセージは、表示されたデータを表示するように第１のディスプレイに命令してもよい。
ディスプレイが配置される手術室の位置が決定されてもよい。ディスプレイとＨＣＰとの間の方向が決定され得る。例では、ディスプレイ構成は、手術室の位置及び／又はディスプレイとＨＣＰとの間の方向に基づいて修正され得る。例では、ディスプレイの能力が、手術室内のカメラを使用して判定されてもよい。ディスプレイ構成は、ディスプレイの能力に基づいて修正され得る。
例では、手術タスクに関連付けられた患者データが決定され得る。ディスプレイ構成は、患者データに基づいて修正されてもよい。ＨＣＰによって提供される音声コマンドが受信され得る。例えば、音声コマンドは、ディスプレイの設定が変更されるべきであることを示し得る。ディスプレイ構成は、例えば、音声コマンドに基づいて修正されてもよい。
以下は、本開示の一部を形成する実施例の非網羅的リストである。
実施例１．医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
外科用オブジェクトの状態及び外科用オブジェクトが位置する手術室の領域を決定し、
医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
オブジェクトの状態、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、
任意選択で、ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知をＨＣＰに送信させるように構成されており、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
実施例２．プロセッサは、ディスプレイがＨＣＰからある位置の距離内にあることを決定するように更に構成されている、実施例１の外科用ハブ。
実施例３．手術室の領域が、ストック領域、メイヨースタンド、手術部位、滅菌野、又は非滅菌野のうちの少なくとも１つである、実施例１又は実施例２の外科用ハブ。
実施例４．プロセッサは、タスク又は医療処置のうちの少なくとも１つの間に外科用オブジェクトが手術室の領域に入ったことを決定するように更に構成されている、実施例１～３のいずれか一項の外科用ハブ。
実施例５．プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すことを決定するように更に構成されている、実施例１～４のいずれか一項の外科用ハブ。
実施例６．プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用されるために準備されていないことを示すことを決定するように更に構成され、コンテキストデータは、手術タスクにおいて使用されるように外科用オブジェクトを準備するための１つ又は２つ以上の命令を更に含む、実施例１～５のいずれか一項の外科用ハブ。
実施例７．ディスプレイが、ルームディスプレイ、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、又はスマートフォンのうちの少なくとも１つである、請求項１～６のいずれか一項に記載の外科用ハブ。
実施例８．医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
外科用オブジェクトが位置する手術室の領域を決定し、
外科用オブジェクト及び手術室の領域に関連付けられた時間を決定し、
時間、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、
任意選択で、ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知をＨＣＰに送信させるように構成されており、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
実施例９．プロセッサは、外科用オブジェクトが位置する手術室の領域が、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、外科用オブジェクトに関連付けられたセンサデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、又は手術室内のカメラからのビデオのうちの少なくとも１つを使用することを含むことを決定するように更に構成されている、実施例８の外科用ハブ。
実施例１０．プロセッサは、外科用オブジェクトが位置する手術室の領域に基づいて、外科用オブジェクトが手術室に入ったことを決定するように更に構成され、時間は、外科用オブジェクトが手術室に入ったときを示す、実施例８又は実施例９の外科用ハブ。
実施例１１．プロセッサは、外科用オブジェクトが手術室の領域を出たことを決定するように更に構成され、時間は、外科用オブジェクトが領域を出たときを示す、実施例８～１０のいずれか一項の外科用ハブ。
実施例１２．プロセッサは、外科用オブジェクトが患者に保持されていないことを決定するように更に構成され、コンテキストデータは、外科用オブジェクトが患者に保持されていないという指示を含む、実施例８～１１のいずれか一項の外科用ハブ。
実施例１３．コンテキストデータは、外科用オブジェクトが使用されたという指示を更に含み、外科用オブジェクトを洗浄するための命令、又は外科用オブジェクトを処分するための命令のうちの少なくとも１つを含む、実施例８から１２のいずれか一項の外科用ハブ。
実施例１４．外科用オブジェクトはパッケージを備え、プロセッサは、
パッケージが時間に領域で開封されたと決定し、
メッセージをデータベースに送信するように更に構成され、メッセージは、パッケージが開封されたことを示し、外科用オブジェクトが在庫から除去されるべきであることを示す、実施例８から１３のいずれか一項の外科用ハブ。
実施例１５．医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
医療処置中に手術タスクを実行するために使用される外科用器具を決定し、
外科用器具に関連付けられた手術室の領域及び外科用器具の向きを決定し、
手術タスク、手術室の領域、及び外科用器具の向きに基づいてコンテキストデータを決定し、
任意選択で、ＨＣＰに関連付けられたディスプレイを決定し、ディスプレイにメッセージを送信することによって、通知をＨＣＰに送信させるように構成されており、通知は、コンテキストデータを含み、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
ＨＣＰにコンテキストデータを提供することの利点は、ＨＣＰが、医療処置に関連する情報であって、そうでなければ確認することが困難であり得る情報を、便利かつ適時に備えていることであり得る。次に、これは、ＨＣＰが医療処置をより効率的かつ安全に完了することを可能にし得る。
実施例１６．外科用器具は、基準マーカを備え、プロセッサは、基準マーカを使用して外科用器具を決定するように更に構成されている、実施例１５の外科用ハブ。
実施例１７．コンテキストデータは、器具の画像及びステータスを含み、メッセージは、器具の画像及びステータスがディスプレイ上に示されている表示データ上にオーバーレイされることを更に示す、実施例１５又は実施例１６の外科用ハブ。
実施例１８．手術室の領域はストック領域であり、メッセージは、ＨＣＰをストック領域の外科用器具にガイドする、ＨＣＰへの通知を更に含む、実施例１５から１７のいずれか一項の外科用ハブ。
実施例１９．外科用ハブは、コンテキストデータが、外科用器具の向きが改善され得ることを含むことを決定するように更に構成され、コンテキストデータは、外科用器具の向きを改善するためのＨＣＰへの命令を含む、実施例１５から１８のいずれか一項の外科用ハブ。
実施例２０．プロセッサは、ＨＣＰに関連付けられたディスプレイの能力を決定するように更に構成され、プロセッサは、ディスプレイの能力に基づいてコンテキストデータを変更するように更に構成されている、実施例１５から１９のいずれか一項の外科用ハブ。
実施例２１．コンテキストデータが、データオーバーレイとしてディスプレイに表示される、実施例１から２０のいずれか一項の外科用ハブ。
実施例２２．通知が、音声メッセージとしてＨＣＰに送信されるようにさせられる、実施例１から２１のいずれか一項の外科用ハブ。
以下は、本開示の一部を形成する態様の非網羅的なリストである。
態様１．医療提供者（ＨＣＰ）にデータオーバーレイを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
外科用オブジェクトの状態及び外科用オブジェクトが位置する手術室の領域を決定し、
医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
オブジェクトの状態、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、
ＨＣＰに関連付けられたディスプレイにメッセージを送信するように構成され、メッセージは、ディスプレイがコンテキストデータを表示すべきであることを示す。
態様２．プロセッサは、ディスプレイがＨＣＰからある位置の距離内にあることを決定するように更に構成されている、態様１の外科用ハブ。
態様３．手術室の領域が、ストック領域、メイヨースタンド、手術部位、滅菌野、又は非滅菌野のうちの少なくとも１つである、態様１の外科用ハブ。
態様４．プロセッサは、タスク又は医療処置のうちの少なくとも１つの間に外科用オブジェクトが手術室の領域に入ったことを決定するように更に構成されている、態様１の外科用ハブ。
態様５．プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用される準備ができていることを示すことを決定するように更に構成されている、態様１の外科用ハブ。
態様６．プロセッサは、外科用オブジェクトの状態が、外科用オブジェクトが手術タスクにおいて使用されるために準備されていないことを示すことを決定するように更に構成され、コンテキストデータは、手術タスクにおいて使用されるように外科用オブジェクトを準備するための１つ又は２つ以上の命令を更に含む、態様１の外科用ハブ。
態様７．ディスプレイが、ルームディスプレイ、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、又はスマートフォンのうちの少なくとも１つである、態様１の外科用ハブ。
態様８．医療提供者（ＨＣＰ）にデータオーバーレイを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
外科用オブジェクトが位置する手術室の領域を決定し、
外科用オブジェクト及び手術室の領域に関連付けられた時間を決定し、
時間、手術室の領域、及び手術タスクに基づいてコンテキストデータを決定し、
ＨＣＰに通知を送信するように構成され、通知は、コンテキストデータを含む。
態様９．プロセッサは、外科用オブジェクトが位置する手術室の領域が、領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、外科用オブジェクトに関連付けられたセンサデータ、ＨＣＰに関連付けられたセンサデータ、手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、又は手術室内のカメラからのビデオのうちの少なくとも１つを使用することを含むことを決定するように更に構成されている、態様８の外科用ハブ。
態様１０．プロセッサは、外科用オブジェクトが位置する手術室の領域に基づいて、外科用オブジェクトが手術室に入ったことを決定するように更に構成され、時間は、外科用オブジェクトが手術室に入ったときを示す、態様８の外科用ハブ。
態様１１．プロセッサは、外科用オブジェクトが手術室の領域を出たことを決定するように更に構成され、時間は、外科用オブジェクトが領域を出たときを示す、態様８の外科用ハブ。
態様１２．プロセッサは、外科用オブジェクトが患者に保持されていないことを決定するように更に構成され、コンテキストデータは、外科用オブジェクトが患者に保持されていないという指示を含む、態様８の外科用ハブ。
態様１３．コンテキストデータは、外科用オブジェクトが使用されたという指示を更に含み、外科用オブジェクトを洗浄するための命令、又は外科用オブジェクトを処分するための命令のうちの少なくとも１つを含む、態様８の外科用ハブ。
態様１４．外科用オブジェクトはパッケージを備え、プロセッサは、
パッケージが時間に領域で開封されたと決定し、
メッセージをデータベースに送信するように更に構成され、メッセージは、パッケージが開封されたことを示し、外科用オブジェクトが在庫から除去されるべきであることを示す、態様８の外科用ハブ。
態様１５．医療提供者（ＨＣＰ）にデータオーバーレイを提供するための外科用ハブであり、外科用ハブは、
プロセッサを備え、プロセッサは、
医療処置中に手術タスクを実行するために使用される外科用器具を決定し、
外科用器具に関連付けられた手術室の領域及び外科用器具の向きを決定し、
ＨＣＰに関連付けられたディスプレイを決定し、
手術タスク、手術室の領域、及び外科用器具の向きに基づいてコンテキストデータを決定し、
ディスプレイにメッセージを送信するように構成され、メッセージは、コンテキストデータを含む。
態様１６．外科用器具は、基準マーカを備え、プロセッサは、基準マーカを使用して外科用器具を決定するように更に構成されている、態様１５の外科用ハブ。
態様１７．コンテキストデータは、器具の画像及びステータスを含み、メッセージは、器具の画像及びステータスがディスプレイ上に示されている表示データ上にオーバーレイされることを更に示す、態様１５の外科用ハブ。
態様１８．手術室の領域はストック領域であり、メッセージは、ＨＣＰをストック領域の外科用器具にガイドする、ＨＣＰへの通知を更に含む、態様１５の外科用ハブ。
態様１９．外科用ハブは、コンテキストデータが、外科用器具の向きが改善され得ることを含むことを決定するように更に構成され、コンテキストデータは、外科用器具の向きを改善するためのＨＣＰへの命令を含む、態様１５の外科用ハブ。
態様２０．プロセッサは、ＨＣＰに関連付けられたディスプレイの能力を決定するように更に構成され、プロセッサは、ディスプレイの能力に基づいてコンテキストデータを変更するように更に構成されている、態様１５の外科用ハブ。
〔実施の態様〕
（１） 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
プロセッサを備え、前記プロセッサが、
外科用オブジェクトの状態及び前記外科用オブジェクトが位置する手術室の領域を決定し、
医療処置中に前記外科用オブジェクトを使用する手術タスクを決定し、
前記オブジェクトの前記状態、前記手術室の前記領域、及び前記手術タスクに基づいてコンテキストデータを決定し、
任意選択で、前記ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
（２） 前記プロセッサは、前記ディスプレイが前記ＨＣＰの位置からある距離内にあることを決定するように更に構成されている、実施態様１に記載の外科用ハブ。
（３） 前記手術室の前記領域が、ストック領域、メイヨースタンド、手術部位、滅菌野、又は非滅菌野のうちの少なくとも１つである、実施態様１に記載の外科用ハブ。
（４） 前記プロセッサは、前記タスク又は前記医療処置のうちの少なくとも１つの間に前記外科用オブジェクトが前記手術室の前記領域に入ったことを決定するように更に構成されている、実施態様１に記載の外科用ハブ。
（５） 前記プロセッサは、前記外科用オブジェクトの前記状態が、前記外科用オブジェクトが前記手術タスクにおいて使用される準備ができていることを示すことを決定するように更に構成されている、実施態様１に記載の外科用ハブ。
（６） 前記プロセッサは、前記外科用オブジェクトの前記状態が、前記外科用オブジェクトが前記手術タスクにおいて使用されるために準備されていないことを示すことを決定するように更に構成され、前記コンテキストデータは、前記手術タスクにおいて使用されるように前記外科用オブジェクトを準備するための１つ又は２つ以上の命令を更に含む、実施態様１に記載の外科用ハブ。
（７） 前記ディスプレイが、ルームディスプレイ、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、又はスマートフォンのうちの少なくとも１つである、実施態様１に記載の外科用ハブ。
（８） 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
プロセッサを備え、前記プロセッサが、
医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
前記外科用オブジェクトが位置する手術室の領域を決定し、
前記外科用オブジェクト及び前記手術室の前記領域に関連付けられた時間を決定し、
前記時間、前記手術室の前記領域、及び前記手術タスクに基づいてコンテキストデータを決定し、
任意選択で、前記ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
（９） 前記プロセッサは、前記外科用オブジェクトが位置する前記手術室の前記領域が、前記領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、前記外科用オブジェクトに関連付けられたセンサデータ、前記ＨＣＰに関連付けられたセンサデータ、前記手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、又は前記手術室内の前記カメラからのビデオのうちの少なくとも１つを使用することを含むことを決定するように更に構成されている、実施態様８に記載の外科用ハブ。
（１０） 前記プロセッサは、前記外科用オブジェクトが位置する前記手術室の前記領域に基づいて、前記外科用オブジェクトが前記手術室に入ったことを決定するように更に構成され、前記時間は、前記外科用オブジェクトが前記手術室に入ったときを示す、実施態様８に記載の外科用ハブ。
（１１） 前記プロセッサは、前記外科用オブジェクトが前記手術室の前記領域を出たことを決定するように更に構成され、前記時間は、前記外科用オブジェクトが前記領域を出たときを示す、実施態様８に記載の外科用ハブ。
（１２） 前記プロセッサは、前記外科用オブジェクトが患者に保持されていないことを決定するように更に構成され、前記コンテキストデータは、前記外科用オブジェクトが前記患者に保持されていないという指示を含む、実施態様８に記載の外科用ハブ。
（１３） 前記コンテキストデータは、前記外科用オブジェクトが使用されたという指示を更に含み、前記外科用オブジェクトを洗浄するための命令、又は前記外科用オブジェクトを処分するための命令のうちの少なくとも１つを含む、実施態様８に記載の外科用ハブ。
（１４） 前記外科用オブジェクトはパッケージを備え、前記プロセッサは、
前記パッケージが前記時間に前記領域で開封されたと決定し、
メッセージをデータベースに送信するように更に構成され、前記メッセージは、前記パッケージが開封されたことを示し、前記外科用オブジェクトが在庫から除去されるべきであることを示す、実施態様８に記載の外科用ハブ。
（１５） 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
プロセッサを備え、前記プロセッサが、
医療処置中に手術タスクを実行するために使用される外科用器具を決定し、
前記外科用器具に関連付けられた手術室の領域及び前記外科用器具の向きを決定し、
前記手術タスク、前記手術室の前記領域、及び前記外科用器具の前記向きに基づいてコンテキストデータを決定し、
任意選択で、前記ＨＣＰに関連付けられたディスプレイを決定し、前記ディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
（１６） 前記外科用器具は、基準マーカを備え、前記プロセッサは、前記基準マーカを使用して前記外科用器具を決定するように更に構成されている、実施態様１５に記載の外科用ハブ。
（１７） 前記コンテキストデータは、前記器具の画像及びステータスを含み、前記メッセージは、前記器具の前記画像及びステータスが前記ディスプレイ上に示されている表示データ上にオーバーレイされることを更に示す、実施態様１５に記載の外科用ハブ。
（１８） 前記手術室の前記領域はストック領域であり、前記メッセージは、前記ＨＣＰを前記ストック領域の前記外科用器具にガイドする、前記ＨＣＰへの通知を更に含む、実施態様１５に記載の外科用ハブ。
（１９） 前記外科用ハブは、コンテキストデータが、前記外科用器具の向きが改善され得ることを含むことを決定するように更に構成され、前記コンテキストデータは、前記外科用器具の前記向きを改善するための前記ＨＣＰへの命令を含む、実施態様１５に記載の外科用ハブ。
（２０） 前記プロセッサは、前記ＨＣＰに関連付けられた前記ディスプレイの能力を決定するように更に構成され、前記プロセッサは、前記ディスプレイの前記能力に基づいて前記コンテキストデータを変更するように更に構成されている、実施態様１５に記載の外科用ハブ。
（２１） 前記コンテキストデータが、データオーバーレイとして前記ディスプレイに表示される、実施態様１に記載の外科用ハブ。
（２２） 前記通知が、音声メッセージとして前記ＨＣＰに送信されるようにさせられる、実施態様１に記載の外科用ハブ。

Claims (22)

  1. 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
    プロセッサを備え、前記プロセッサが、
    外科用オブジェクトの状態及び前記外科用オブジェクトが位置する手術室の領域を決定し、
    医療処置中に前記外科用オブジェクトを使用する手術タスクを決定し、
    前記オブジェクトの前記状態、前記手術室の前記領域、及び前記手術タスクに基づいてコンテキストデータを決定し、
    任意選択で、前記ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
  2. 前記プロセッサは、前記ディスプレイが前記ＨＣＰの位置からある距離内にあることを決定するように更に構成されている、請求項１に記載の外科用ハブ。
  3. 前記手術室の前記領域が、ストック領域、メイヨースタンド、手術部位、滅菌野、又は非滅菌野のうちの少なくとも１つである、請求項１に記載の外科用ハブ。
  4. 前記プロセッサは、前記タスク又は前記医療処置のうちの少なくとも１つの間に前記外科用オブジェクトが前記手術室の前記領域に入ったことを決定するように更に構成されている、請求項１に記載の外科用ハブ。
  5. 前記プロセッサは、前記外科用オブジェクトの前記状態が、前記外科用オブジェクトが前記手術タスクにおいて使用される準備ができていることを示すことを決定するように更に構成されている、請求項１に記載の外科用ハブ。
  6. 前記プロセッサは、前記外科用オブジェクトの前記状態が、前記外科用オブジェクトが前記手術タスクにおいて使用されるために準備されていないことを示すことを決定するように更に構成され、前記コンテキストデータは、前記手術タスクにおいて使用されるように前記外科用オブジェクトを準備するための１つ又は２つ以上の命令を更に含む、請求項１に記載の外科用ハブ。
  7. 前記ディスプレイが、ルームディスプレイ、ウェアラブルディスプレイ、タブレット、拡張現実デバイス、又はスマートフォンのうちの少なくとも１つである、請求項１に記載の外科用ハブ。
  8. 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
    プロセッサを備え、前記プロセッサが、
    医療処置中に外科用オブジェクトを使用する手術タスクを決定し、
    前記外科用オブジェクトが位置する手術室の領域を決定し、
    前記外科用オブジェクト及び前記手術室の前記領域に関連付けられた時間を決定し、
    前記時間、前記手術室の前記領域、及び前記手術タスクに基づいてコンテキストデータを決定し、
    任意選択で、前記ＨＣＰに関連付けられたディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
  9. 前記プロセッサは、前記外科用オブジェクトが位置する前記手術室の前記領域が、前記領域に関連付けられたセンサデータ、ウェアラブルデバイスデータ、前記外科用オブジェクトに関連付けられたセンサデータ、前記ＨＣＰに関連付けられたセンサデータ、前記手術室内のカメラからの画像、超音波センサ、レーザセンサ、レーザドップラーセンサ、無線周波数センサ、又は前記手術室内の前記カメラからのビデオのうちの少なくとも１つを使用することを含むことを決定するように更に構成されている、請求項８に記載の外科用ハブ。
  10. 前記プロセッサは、前記外科用オブジェクトが位置する前記手術室の前記領域に基づいて、前記外科用オブジェクトが前記手術室に入ったことを決定するように更に構成され、前記時間は、前記外科用オブジェクトが前記手術室に入ったときを示す、請求項８に記載の外科用ハブ。
  11. 前記プロセッサは、前記外科用オブジェクトが前記手術室の前記領域を出たことを決定するように更に構成され、前記時間は、前記外科用オブジェクトが前記領域を出たときを示す、請求項８に記載の外科用ハブ。
  12. 前記プロセッサは、前記外科用オブジェクトが患者に保持されていないことを決定するように更に構成され、前記コンテキストデータは、前記外科用オブジェクトが前記患者に保持されていないという指示を含む、請求項８に記載の外科用ハブ。
  13. 前記コンテキストデータは、前記外科用オブジェクトが使用されたという指示を更に含み、前記外科用オブジェクトを洗浄するための命令、又は前記外科用オブジェクトを処分するための命令のうちの少なくとも１つを含む、請求項８に記載の外科用ハブ。
  14. 前記外科用オブジェクトはパッケージを備え、前記プロセッサは、
    前記パッケージが前記時間に前記領域で開封されたと決定し、
    メッセージをデータベースに送信するように更に構成され、前記メッセージは、前記パッケージが開封されたことを示し、前記外科用オブジェクトが在庫から除去されるべきであることを示す、請求項８に記載の外科用ハブ。
  15. 医療提供者（ＨＣＰ）にコンテキストデータを提供するための外科用ハブであって、前記外科用ハブが、
    プロセッサを備え、前記プロセッサが、
    医療処置中に手術タスクを実行するために使用される外科用器具を決定し、
    前記外科用器具に関連付けられた手術室の領域及び前記外科用器具の向きを決定し、
    前記手術タスク、前記手術室の前記領域、及び前記外科用器具の前記向きに基づいてコンテキストデータを決定し、
    任意選択で、前記ＨＣＰに関連付けられたディスプレイを決定し、前記ディスプレイにメッセージを送信することによって、通知を前記ＨＣＰに送信させるように構成されており、前記通知は、前記コンテキストデータを含み、前記メッセージは、前記ディスプレイが前記コンテキストデータを表示すべきであることを示す、外科用ハブ。
  16. 前記外科用器具は、基準マーカを備え、前記プロセッサは、前記基準マーカを使用して前記外科用器具を決定するように更に構成されている、請求項１５に記載の外科用ハブ。
  17. 前記コンテキストデータは、前記器具の画像及びステータスを含み、前記メッセージは、前記器具の前記画像及びステータスが前記ディスプレイ上に示されている表示データ上にオーバーレイされることを更に示す、請求項１５に記載の外科用ハブ。
  18. 前記手術室の前記領域はストック領域であり、前記メッセージは、前記ＨＣＰを前記ストック領域の前記外科用器具にガイドする、前記ＨＣＰへの通知を更に含む、請求項１５に記載の外科用ハブ。
  19. 前記外科用ハブは、コンテキストデータが、前記外科用器具の向きが改善され得ることを含むことを決定するように更に構成され、前記コンテキストデータは、前記外科用器具の前記向きを改善するための前記ＨＣＰへの命令を含む、請求項１５に記載の外科用ハブ。
  20. 前記プロセッサは、前記ＨＣＰに関連付けられた前記ディスプレイの能力を決定するように更に構成され、前記プロセッサは、前記ディスプレイの前記能力に基づいて前記コンテキストデータを変更するように更に構成されている、請求項１５に記載の外科用ハブ。
  21. 前記コンテキストデータが、データオーバーレイとして前記ディスプレイに表示される、請求項１に記載の外科用ハブ。
  22. 前記通知が、音声メッセージとして前記ＨＣＰに送信されるようにさせられる、請求項１に記載の外科用ハブ。
JP2024503656A 2021-07-22 2022-07-20 ユーザの必要性にカスタム化されたデータをオーバーレイするためのｏｒ内のオブジェクト及び人員のハブ識別及び追跡 Pending JP2024530424A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202163224813P 2021-07-22 2021-07-22
US63/224,813 2021-07-22
US17/384,508 2021-07-23
US17/384,508 US20230023635A1 (en) 2021-07-22 2021-07-23 Hub identification and tracking of objects and personnel within the or to overlay data that is custom to the user's need
PCT/IB2022/056671 WO2023002385A1 (en) 2021-07-22 2022-07-20 Hub identification and tracking of objects and personnel within the or to overlay data that is custom to the user's need

Publications (1)

Publication Number Publication Date
JP2024530424A true JP2024530424A (ja) 2024-08-21

Family

ID=84975706

Family Applications (9)

Application Number Title Priority Date Filing Date
JP2024503656A Pending JP2024530424A (ja) 2021-07-22 2022-07-20 ユーザの必要性にカスタム化されたデータをオーバーレイするためのｏｒ内のオブジェクト及び人員のハブ識別及び追跡
JP2024503633A Pending JP2024530421A (ja) 2021-07-22 2022-07-20 マルチレベル外科用データ分析システム
JP2024503661A Pending JP2024530879A (ja) 2021-07-22 2022-07-20 外科用システム内での外科用デバイスの検出
JP2024503668A Pending JP2024530426A (ja) 2021-07-22 2022-07-20 位置及び外科手技固有データの記憶及び検索
JP2024503649A Pending JP2024530877A (ja) 2021-07-22 2022-07-20 手術部位及び器具に重ねられた協働的コンポジットビデオストリーム
JP2024503657A Pending JP2024530878A (ja) 2021-07-22 2022-07-20 外科用システム内の電力利用及び需要の監視
JP2024503641A Pending JP2024529392A (ja) 2021-07-22 2022-07-20 外科用データシステム及び管理
JP2024503653A Pending JP2024530423A (ja) 2021-07-22 2022-07-20 ユーザの認識及び手順、場所又は使用の認識に基づく表示設定及び表示情報の構成
JP2024503659A Pending JP2024529924A (ja) 2021-07-22 2022-07-20 外科用装置の相互通信及び協調動作

Family Applications After (8)

Application Number Title Priority Date Filing Date
JP2024503633A Pending JP2024530421A (ja) 2021-07-22 2022-07-20 マルチレベル外科用データ分析システム
JP2024503661A Pending JP2024530879A (ja) 2021-07-22 2022-07-20 外科用システム内での外科用デバイスの検出
JP2024503668A Pending JP2024530426A (ja) 2021-07-22 2022-07-20 位置及び外科手技固有データの記憶及び検索
JP2024503649A Pending JP2024530877A (ja) 2021-07-22 2022-07-20 手術部位及び器具に重ねられた協働的コンポジットビデオストリーム
JP2024503657A Pending JP2024530878A (ja) 2021-07-22 2022-07-20 外科用システム内の電力利用及び需要の監視
JP2024503641A Pending JP2024529392A (ja) 2021-07-22 2022-07-20 外科用データシステム及び管理
JP2024503653A Pending JP2024530423A (ja) 2021-07-22 2022-07-20 ユーザの認識及び手順、場所又は使用の認識に基づく表示設定及び表示情報の構成
JP2024503659A Pending JP2024529924A (ja) 2021-07-22 2022-07-20 外科用装置の相互通信及び協調動作

Country Status (5)

Country Link
US (15) US20230027210A1 (ja)
EP (9) EP4189701A1 (ja)
JP (9) JP2024530424A (ja)
CN (8) CN118076313A (ja)
WO (1) WO2023002381A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8944313B2 (en) * 2012-06-29 2015-02-03 Honeywell International Inc. Computer configured to display multimedia content
US10821614B2 (en) 2016-11-11 2020-11-03 Sarcos Corp. Clutched joint modules having a quasi-passive elastic actuator for a robotic assembly
US10828767B2 (en) 2016-11-11 2020-11-10 Sarcos Corp. Tunable actuator joint modules having energy recovering quasi-passive elastic actuators with internal valve arrangements
US11241801B2 (en) 2018-12-31 2022-02-08 Sarcos Corp. Robotic end effector with dorsally supported actuation mechanism
US11833676B2 (en) 2020-12-07 2023-12-05 Sarcos Corp. Combining sensor output data to prevent unsafe operation of an exoskeleton
US11790898B1 (en) * 2021-06-29 2023-10-17 Amazon Technologies, Inc. Resource selection for processing user inputs
US20230027210A1 (en) 2021-07-22 2023-01-26 Cilag Gmbh International Surgical data system and control
JP2023019795A (ja) * 2021-07-29 2023-02-09 株式会社日立製作所 データ流通仲介装置およびデータ流通仲介方法
US11357582B1 (en) * 2022-01-04 2022-06-14 Ix Innovation Llc System for transcribing and performing analysis on patient data
US12107699B2 (en) * 2022-03-11 2024-10-01 Read AI, Inc. Systems and methods for creation and application of interaction analytics
US20240029881A1 (en) * 2022-07-15 2024-01-25 Optum, Inc. Planning system based on risks of surgical error
US11747891B1 (en) * 2022-07-15 2023-09-05 Google Llc Content output management in a head mounted wearable device
US11826907B1 (en) 2022-08-17 2023-11-28 Sarcos Corp. Robotic joint system with length adapter
US11924023B1 (en) 2022-11-17 2024-03-05 Sarcos Corp. Systems and methods for redundant network communication in a robot
US11897132B1 (en) * 2022-11-17 2024-02-13 Sarcos Corp. Systems and methods for redundant network communication in a robot
EP4408034A1 (de) * 2023-01-30 2024-07-31 Erbe Elektromedizin GmbH Verfahren zur herstellung einer datenverbindung zwischen geräten und einrichtung zur durchführung des verfahrens
WO2024184871A1 (en) * 2023-03-09 2024-09-12 Arthrex, Inc. Assisted surgical device operation from camera feed
KR102715571B1 (ko) * 2023-07-07 2024-10-11 이준 엣지컴퓨팅 기반 실시간 수술 영상 전송 시스템
KR102715575B1 (ko) * 2023-07-07 2024-10-11 이준 엣지컴퓨팅 기반 실시간 수술 영상 전송 방법

Family Cites Families (124)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2289186A (en) * 1994-04-05 1995-11-08 Ibm Collaborative working method and system
WO1998045923A1 (en) * 1997-04-08 1998-10-15 Reipur Technology A/S An apparatus for controlling and power feeding a number of power-consuming parts
US6398105B2 (en) 1999-01-29 2002-06-04 Intermec Ip Corporation Automatic data collection device that intelligently switches data based on data type
US6766373B1 (en) 2000-05-31 2004-07-20 International Business Machines Corporation Dynamic, seamless switching of a network session from one connection route to another
US7519714B2 (en) 2004-03-18 2009-04-14 The Johns Hopkins University Adaptive image format translation in an ad-hoc network
US8380126B1 (en) 2005-10-13 2013-02-19 Abbott Medical Optics Inc. Reliable communications for wireless devices
US20070140235A1 (en) * 2005-12-21 2007-06-21 Nortel Networks Limited Network visible inter-logical router links
US7518502B2 (en) 2007-05-24 2009-04-14 Smith & Nephew, Inc. System and method for tracking surgical assets
US8565073B2 (en) 2010-08-18 2013-10-22 At&T Intellectual Property I, L.P. Dynamic rerouting of data paths in a wireless communication network
US9072523B2 (en) 2010-11-05 2015-07-07 Ethicon Endo-Surgery, Inc. Medical device with feature for sterile acceptance of non-sterile reusable component
US20130051220A1 (en) 2011-08-22 2013-02-28 Igor Ryshakov Method and Apparatus for Quick-Switch Fault Tolerant Backup Channel
US20130092727A1 (en) * 2011-10-14 2013-04-18 Codonics, Inc. Networkable medical labeling apparatus and method
US11871901B2 (en) * 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
BR112015001381A8 (pt) 2012-07-26 2019-07-30 Olive Medical Corp sistema e método para imageamento digital em um ambiente com iluminação deficiente
BR112015001369A2 (pt) 2012-07-26 2017-07-04 Olive Medical Corp sistema de câmera com sensor de imagem cmos monolítico de área mínima
CN103685144A (zh) 2012-08-31 2014-03-26 中兴通讯股份有限公司 一种媒体流传输方法及装置
US20140081659A1 (en) 2012-09-17 2014-03-20 Depuy Orthopaedics, Inc. Systems and methods for surgical and interventional planning, support, post-operative follow-up, and functional recovery tracking
US9345481B2 (en) 2013-03-13 2016-05-24 Ethicon Endo-Surgery, Llc Staple cartridge tissue thickness sensor system
WO2014168734A1 (en) * 2013-03-15 2014-10-16 Cedars-Sinai Medical Center Time-resolved laser-induced fluorescence spectroscopy systems and uses thereof
US11961624B2 (en) * 2013-03-15 2024-04-16 James Paul Smurro Augmenting clinical intelligence with federated learning, imaging analytics and outcomes decision support
JP2016519591A (ja) 2013-03-15 2016-07-07 オリーブ・メディカル・コーポレイションＯｌｉｖｅ Ｍｅｄｉｃａｌ Ｃｏｒｐｏｒａｔｉｏｎ パルスカラー撮像システムにおける超解像度及び色運動アーチファクト補正
US20150053746A1 (en) 2013-08-23 2015-02-26 Ethicon Endo-Surgery, Inc. Torque optimization for surgical instruments
US8908678B1 (en) 2013-09-11 2014-12-09 Vonage Network Llc Intelligent call routing
US9380508B2 (en) * 2013-10-28 2016-06-28 Aruba Networks, Inc. System, apparatus and method for managing network device connectivity on heterogenous networks
US9392007B2 (en) 2013-11-04 2016-07-12 Crypteia Networks S.A. System and method for identifying infected networks and systems from unknown attacks
CN113349707A (zh) 2013-12-31 2021-09-07 纪念斯隆-凯特琳癌症中心 用于荧光源实时多通道成像的系统、方法和设备
US20210290046A1 (en) 2014-05-09 2021-09-23 X-Biomedical, Inc. Portable surgical methods, systems, and apparatus
US12114986B2 (en) * 2014-09-23 2024-10-15 SST Canada Inc. System and method for biometric data capture for event prediction
WO2016149794A1 (en) * 2015-03-26 2016-09-29 Surgical Safety Technologies Inc. Operating room black-box device, system, method and computer readable medium
GB201520886D0 (en) 2015-11-26 2016-01-13 Univ Aston Non-invasive human condition monitoring device
WO2017089910A1 (en) * 2015-11-27 2017-06-01 Nz Technologies Inc. Method and system for interacting with medical information
TW201740101A (zh) * 2016-04-01 2017-11-16 黑光外科公司 用於時間分辨螢光光譜法的系統、裝置和方法
US11607239B2 (en) 2016-04-15 2023-03-21 Cilag Gmbh International Systems and methods for controlling a surgical stapling and cutting instrument
US11515030B2 (en) 2016-06-23 2022-11-29 Siemens Healthcare Gmbh System and method for artificial agent based cognitive operating rooms
JP7481114B2 (ja) * 2016-11-11 2024-05-10 インテュイティブ サージカル オペレーションズ， インコーポレイテッド 走査ベースの位置付けを伴う遠隔操作手術システム
US9922172B1 (en) * 2017-02-28 2018-03-20 Digital Surgery Limited Surgical guidance system based on a pre-coded surgical procedural map
US10881399B2 (en) 2017-06-20 2021-01-05 Ethicon Llc Techniques for adaptive control of motor velocity of a surgical stapling and cutting instrument
US20190019163A1 (en) 2017-07-14 2019-01-17 EasyMarkit Software Inc. Smart messaging in medical practice communication
CN111465994B (zh) * 2017-12-18 2024-08-16 德尔格制造股份两合公司 使用虚拟通信总线的生理数据监测
EP3729907A4 (en) 2017-12-19 2021-08-25 Radio IP Software Inc. TUNNEL FILTER SYSTEM AND PROCEDURE
DE102017130980B4 (de) 2017-12-21 2024-07-25 Schölly Fiberoptic GmbH Bildübertragungsanordnung und Verfahren zur Bildübertragung
US10892899B2 (en) 2017-12-28 2021-01-12 Ethicon Llc Self describing data packets generated at an issuing instrument
US11179208B2 (en) * 2017-12-28 2021-11-23 Cilag Gmbh International Cloud-based medical analytics for security and authentication trends and reactive measures
US11818052B2 (en) * 2017-12-28 2023-11-14 Cilag Gmbh International Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US20190201115A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Aggregation and reporting of surgical hub data
US11969216B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US11559307B2 (en) 2017-12-28 2023-01-24 Cilag Gmbh International Method of robotic hub communication, detection, and control
US11786245B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Surgical systems with prioritized data transmission capabilities
US11076921B2 (en) 2017-12-28 2021-08-03 Cilag Gmbh International Adaptive control program updates for surgical hubs
US11576677B2 (en) 2017-12-28 2023-02-14 Cilag Gmbh International Method of hub communication, processing, display, and cloud analytics
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US11678881B2 (en) 2017-12-28 2023-06-20 Cilag Gmbh International Spatial awareness of surgical hubs in operating rooms
US11423007B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Adjustment of device control programs based on stratified contextual data in addition to the data
US10944728B2 (en) 2017-12-28 2021-03-09 Ethicon Llc Interactive surgical systems with encrypted communication capabilities
US20190206569A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Method of cloud based data analytics for use with the hub
US10892995B2 (en) * 2017-12-28 2021-01-12 Ethicon Llc Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11273001B2 (en) 2017-12-28 2022-03-15 Cilag Gmbh International Surgical hub and modular device response adjustment based on situational awareness
US20190206555A1 (en) * 2017-12-28 2019-07-04 Ethicon Llc Cloud-based medical analytics for customization and recommendations to a user
US11308075B2 (en) 2017-12-28 2022-04-19 Cilag Gmbh International Surgical network, instrument, and cloud responses based on validation of received dataset and authentication of its source and integrity
US11832899B2 (en) * 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11633237B2 (en) 2017-12-28 2023-04-25 Cilag Gmbh International Usage and technique analysis of surgeon / staff performance against a baseline to optimize device utilization and performance for both current and future procedures
US11857152B2 (en) 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11132462B2 (en) 2017-12-28 2021-09-28 Cilag Gmbh International Data stripping method to interrogate patient records and create anonymized record
US11419630B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Surgical system distributed processing
US11278281B2 (en) 2017-12-28 2022-03-22 Cilag Gmbh International Interactive surgical system
US20190201140A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Surgical hub situational awareness
US11056244B2 (en) 2017-12-28 2021-07-06 Cilag Gmbh International Automated data scaling, alignment, and organizing based on predefined parameters within surgical networks
US20190200980A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Surgical system for presenting information interpreted from external data
US11266468B2 (en) * 2017-12-28 2022-03-08 Cilag Gmbh International Cooperative utilization of data derived from secondary sources by intelligent surgical hubs
US10943454B2 (en) 2017-12-28 2021-03-09 Ethicon Llc Detection and escalation of security responses of surgical instruments to increasing severity threats
US20190205567A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Data pairing to interconnect a device measured parameter with an outcome
US11937769B2 (en) 2017-12-28 2024-03-26 Cilag Gmbh International Method of hub communication, processing, storage and display
US11304699B2 (en) * 2017-12-28 2022-04-19 Cilag Gmbh International Method for adaptive control schemes for surgical network control and interaction
US11304763B2 (en) * 2017-12-28 2022-04-19 Cilag Gmbh International Image capturing of the areas outside the abdomen to improve placement and control of a surgical device in use
US11410259B2 (en) 2017-12-28 2022-08-09 Cilag Gmbh International Adaptive control program updates for surgical devices
US20190200906A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Dual cmos array imaging
US11844579B2 (en) 2017-12-28 2023-12-19 Cilag Gmbh International Adjustments based on airborne particle properties
US11189379B2 (en) * 2018-03-06 2021-11-30 Digital Surgery Limited Methods and systems for using multiple data structures to process surgical data
US11232556B2 (en) * 2018-04-20 2022-01-25 Verily Life Sciences Llc Surgical simulator providing labeled data
US20210212670A1 (en) * 2018-06-01 2021-07-15 Stryker Corporation Surgical Handpiece Housing A Visible Light Emitter And Elements For Transmitting The Visible Light Emitted By The Visible Light Emitter
US20220079675A1 (en) 2018-11-16 2022-03-17 Philipp K. Lang Augmented Reality Guidance for Surgical Procedures with Adjustment of Scale, Convergence and Focal Plane or Focal Point of Virtual Data
WO2020160259A1 (en) 2019-01-30 2020-08-06 Practechal Solutions,Inc A method and system for surveillance system management
JP7448551B2 (ja) * 2019-01-31 2024-03-12 インテュイティブ サージカル オペレーションズ， インコーポレイテッド コンピュータ支援手術システムのためのカメラ制御システム及び方法
US20200285771A1 (en) * 2019-03-05 2020-09-10 Abhishek Dey System and method for removing personally identifiable information from medical data
US11369443B2 (en) 2019-06-27 2022-06-28 Cilag Gmbh International Method of using a surgical modular robotic assembly
US20210005321A1 (en) * 2019-07-03 2021-01-07 DePuy Synthes Products, Inc. System and method for predicting patient risk outcomes
US10758309B1 (en) * 2019-07-15 2020-09-01 Digital Surgery Limited Methods and systems for using computer-vision to enhance surgical tool control during surgeries
WO2021016429A1 (en) 2019-07-25 2021-01-28 Tornier, Inc. Positioning a camera for perspective sharing of a surgical site
CN114554939A (zh) 2019-09-12 2022-05-27 皇家飞利浦有限公司 用于vats和微创手术中的术中虚拟注释的交互式内窥镜检查
US11096036B2 (en) * 2019-09-12 2021-08-17 Intel Corporation Multi-access Edge Computing service for mobile User Equipment method and apparatus
JP2021048570A (ja) 2019-09-20 2021-03-25 ソニー株式会社 無線通信装置、基地局および通信制御方法
JP7324121B2 (ja) * 2019-11-07 2023-08-09 川崎重工業株式会社 使用器具推定装置及び方法並びに手術補助ロボット
WO2021097241A1 (en) * 2019-11-15 2021-05-20 Verily Life Sciences Llc Robotic surgery depth detection and modeling
US11146690B2 (en) 2019-11-18 2021-10-12 InContact Inc. Systems and methods for dynamic voice-over-internet-protocol routing
CN115004315A (zh) * 2019-11-26 2022-09-02 直观外科手术操作公司 将设备与医疗系统通信地配对的基于信标的系统和方法
EP4096550A4 (en) 2020-01-31 2024-02-21 Gauss Surgical, Inc. INSTRUMENT TRACKING MACHINE
WO2021203077A1 (en) * 2020-04-03 2021-10-07 Smith & Nephew, Inc. Methods for arthroscopic surgery video segmentation and devices therefor
US20210313051A1 (en) * 2020-04-05 2021-10-07 Theator inc. Time and location-based linking of captured medical information with medical records
JP7526985B2 (ja) * 2020-04-13 2024-08-02 株式会社Cureapp 治療用アプリケーション管理システム、治療用アプリケーション管理方法、治療用アプリケーション管理プログラム、及び端末
US11166765B1 (en) * 2020-05-08 2021-11-09 Verb Surgical Inc. Feedback for surgical robotic system with virtual reality
US11315678B2 (en) * 2020-07-15 2022-04-26 Ospitek, Inc. Method and apparatus for an intelligent schedule board for operating rooms for surgical centers and hospitals
WO2022031835A1 (en) 2020-08-05 2022-02-10 Avesha, Inc. Networked system for real-time computer-aided augmentation of live input video stream
US11883022B2 (en) 2020-10-02 2024-01-30 Cilag Gmbh International Shared situational awareness of the device actuator activity to prioritize certain aspects of displayed information
US11877897B2 (en) * 2020-10-02 2024-01-23 Cilag Gmbh International Situational awareness of instruments location and individualization of users to control displays
US11963683B2 (en) * 2020-10-02 2024-04-23 Cilag Gmbh International Method for operating tiered operation modes in a surgical system
US20220104910A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Monitoring of user visual gaze to control which display system displays the primary information
US20220104713A1 (en) 2020-10-02 2022-04-07 Ethicon Llc Tiered-access surgical visualization system
US20220108789A1 (en) 2020-10-02 2022-04-07 Ethicon Llc Cloud analytics packages
US20220104896A1 (en) 2020-10-02 2022-04-07 Ethicon Llc Interactive information overlay on multiple surgical displays
US20220202508A1 (en) 2020-10-27 2022-06-30 Verily Life Sciences Llc Techniques for improving processing of video data in a surgical environment
US20220233135A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Prediction of adhesions based on biomarker monitoring
US20220233254A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Prediction of hemostasis issues based on biomarker monitoring
US20220241028A1 (en) 2021-01-22 2022-08-04 Ethicon Llc Prediction of blood perfusion difficulties based on biomarker monitoring
US20220233119A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Method of adjusting a surgical parameter based on biomarker measurements
US20220233136A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Colorectal surgery post-surgical monitoring
US20220238216A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Machine learning to improve artificial intelligence algorithm iterations
US12011163B2 (en) 2021-01-22 2024-06-18 Cilag Gmbh International Prediction of tissue irregularities based on biomarker monitoring
US20220240869A1 (en) 2021-01-22 2022-08-04 Ethicon Llc Hysterectomy surgery post-surgical monitoring
US20220233151A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Bariatric surgery post-surgical monitoring
US20220233252A1 (en) 2021-01-22 2022-07-28 Ethicon Llc Pre-surgical and surgical processing for surgical data context
US20220241474A1 (en) 2021-01-22 2022-08-04 Ethicon Llc Thoracic post-surgical monitoring and complication prediction
US20220375605A1 (en) * 2021-05-04 2022-11-24 Carnegie Mellon University Methods of automatically generating formatted annotations of doctor-patient conversations
US11232868B1 (en) * 2021-05-12 2022-01-25 Orbsurgical Ltd. Machine learning-based surgical instrument characterization
US20230027210A1 (en) 2021-07-22 2023-01-26 Cilag Gmbh International Surgical data system and control

Also Published As

Publication number Publication date
US12068068B2 (en) 2024-08-20
CN118076313A (zh) 2024-05-24
US20230025827A1 (en) 2023-01-26
US20230025061A1 (en) 2023-01-26
JP2024530421A (ja) 2024-08-21
US12046358B2 (en) 2024-07-23
CN117981010A (zh) 2024-05-03
JP2024530877A (ja) 2024-08-27
CN117981001A (zh) 2024-05-03
US20230023083A1 (en) 2023-01-26
CN117957618A (zh) 2024-04-30
US20230021832A1 (en) 2023-01-26
US20230021920A1 (en) 2023-01-26
EP4189702A1 (en) 2023-06-07
CN117999610A (zh) 2024-05-07
JP2024530879A (ja) 2024-08-27
US12057219B2 (en) 2024-08-06
JP2024529924A (ja) 2024-08-14
JP2024530878A (ja) 2024-08-27
EP4189701A1 (en) 2023-06-07
EP4188266A1 (en) 2023-06-07
EP4185230A1 (en) 2023-05-31
US20230027543A1 (en) 2023-01-26
JP2024529392A (ja) 2024-08-06
US20230026893A1 (en) 2023-01-26
EP4186066A1 (en) 2023-05-31
WO2023002381A1 (en) 2023-01-26
JP2024530426A (ja) 2024-08-21
EP4186071A1 (en) 2023-05-31
US20230028633A1 (en) 2023-01-26
US11601232B2 (en) 2023-03-07
EP4374385A1 (en) 2024-05-29
US11783938B2 (en) 2023-10-10
US20230026634A1 (en) 2023-01-26
US20230022604A1 (en) 2023-01-26
EP4186070A1 (en) 2023-05-31
JP2024530423A (ja) 2024-08-21
CN117940087A (zh) 2024-04-26
CN118077015A (zh) 2024-05-24
US20230025790A1 (en) 2023-01-26
US20230023635A1 (en) 2023-01-26
US20230028677A1 (en) 2023-01-26
CN117981003A (zh) 2024-05-03
US20230027210A1 (en) 2023-01-26
EP4218023A1 (en) 2023-08-02
US20230028059A1 (en) 2023-01-26

Similar Documents

Publication Publication Date Title
US12046358B2 (en) Configuration of the display settings and displayed information based on the recognition of the user(s) and awareness of procedure, location or usage
JP2023544360A (ja) 複数の外科用ディスプレイ上へのインタラクティブ情報オーバーレイ
JP2023544593A (ja) 協働的外科用ディスプレイ
JP2023544594A (ja) 容量及びユーザ操作に基づく階層化されたシステムの表示制御
US11510743B2 (en) Communication control for a surgeon controlled secondary display and primary display
JP2023544367A (ja) クラウド分析パッケージ
EP4100963A1 (en) Surgical hub having variable interconnectivity capabilities
JP2024521826A (ja) 効率分析のための外科用ハブの集約ネットワーク
WO2022249084A1 (en) Aggregated network of surgical hubs for efficiency analysis
US20230377726A1 (en) Adapted autonomy functions and system interconnections
WO2023002385A1 (en) Hub identification and tracking of objects and personnel within the or to overlay data that is custom to the user's need
US20230372012A1 (en) Detecting failure mitigation associated with autonomous surgical task
US20230397969A1 (en) Autonomous Adaptation of Surgical Device Control Algorithm
US20230371950A1 (en) Dynamically determining surgical autonomy level
US20220238202A1 (en) Cooperative processing of surgical sensor-data streams
EP4189699A1 (en) Surgical data processing and metadata annotation
WO2023002377A1 (en) Multi-level surgical data analysis system
JP2024526029A (ja) 手術室内の仮想境界に対する医療専門家の移動の監視
EP4377967A1 (en) Automatic compilation, annotation, and dissemination of surgical data to systems to anticipate related automated operations
CN117957617A (zh) 外科数据处理和元数据注释