WO2017115425A1 - 医療用マニピュレータシステム - Google Patents

医療用マニピュレータシステム Download PDF

Info

Publication number
WO2017115425A1
WO2017115425A1 PCT/JP2015/086539 JP2015086539W WO2017115425A1 WO 2017115425 A1 WO2017115425 A1 WO 2017115425A1 JP 2015086539 W JP2015086539 W JP 2015086539W WO 2017115425 A1 WO2017115425 A1 WO 2017115425A1
Authority
WO
WIPO (PCT)
Prior art keywords
manipulator
mode
unit
visual field
medical
Prior art date
Application number
PCT/JP2015/086539
Other languages
English (en)
French (fr)
Inventor
啓能 並木
満彰 長谷川
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to JP2017525128A priority Critical patent/JP6180692B1/ja
Priority to PCT/JP2015/086539 priority patent/WO2017115425A1/ja
Publication of WO2017115425A1 publication Critical patent/WO2017115425A1/ja
Priority to US16/018,190 priority patent/US11051897B2/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/74Manipulators with manual electric input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/00149Holding or positioning arrangements using articulated arms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/76Manipulators having means for providing feel, e.g. force or tactile feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2059Mechanical position encoders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1692Calibration of manipulator
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/39Robotics, robotics to robotics hand
    • G05B2219/39389Laparoscopic surgery, camera on center of operated part, view around, scale

Definitions

  • the present invention relates to a medical manipulator system.
  • Patent Literature 1 discloses a technique for displaying the position and orientation of a treatment tool positioned outside the field of view of an endoscope in a boundary region set outside an endoscope image display region. According to the technique disclosed in Patent Document 1, the operator can easily grasp the position and orientation of the treatment tool located outside the field of view of the endoscope, and the treatment tool outside the field of view of the endoscope can be brought into the field of view. It can be moved easily.
  • the treatment tool positioned outside the field of view of the endoscope can be freely moved by the operator even in a state where it cannot be visually recognized by the endoscopic image.
  • the presence of the obstacle cannot be grasped, so the treatment instrument and the obstacle can collide outside the field of view of the endoscope.
  • the movement of the treatment tool outside the visual field of the endoscope is limited to a simple movement that returns the treatment tool out of the visual field to the visual field. Is bad.
  • An object of the present invention is to provide an easy-to-use medical manipulator system.
  • One embodiment of the present invention includes a first manipulator having an imaging unit, a second manipulator having an end effector, a display unit displaying an image captured by the imaging unit, and operating the first manipulator or the second manipulator.
  • An operation unit that issues an operation command for performing the operation, and a control unit that selects one mode from a plurality of control modes and controls the first manipulator or the second manipulator based on the operation command.
  • a position information acquisition unit that acquires a position of a predetermined part set in the first manipulator as a first position and acquires a position of the predetermined part set in the second manipulator as a second position; and the imaging A field-of-view area acquisition unit that acquires an image captured by the unit and calculates a field-of-view area;
  • a determination unit that selects one mode from a plurality of control modes based on two positions, and the plurality of control modes include a first mode that permits operation of the second manipulator by the operation unit; A second mode for allowing the operation of the second manipulator within the range of the restriction after adding a predetermined restriction to the operation command by the operation unit, and a second mode for prohibiting the operation of the second manipulator by the operation unit.
  • the discriminating unit selects the first mode when the second position is within the visual field region, the second position is outside the visual field region, and the first mode is selected.
  • the second mode is selected when the distance between the position and the second position is equal to or less than a predetermined value, the second position is outside the field of view area, and the distance between the first position and the second position Exceeds the predetermined value A medical manipulator system and selects the third mode when that.
  • the display unit may include a visual field display unit that displays an image captured by the imaging unit, and an auxiliary display unit that can display an index corresponding to the presence of the second manipulator.
  • the second mode may limit the operation speed of the second manipulator so that the second manipulator is operated at a lower speed than the operation speed of the second manipulator in the first mode.
  • the operable direction of the second manipulator may be limited more than in the first mode.
  • the operable direction may be limited only to a direction in which the second position is directed to the visual field region.
  • the medical manipulator system of the above aspect may further include setting means for setting the content of restriction in the second mode.
  • the second manipulator further includes contact detection means capable of detecting that the second manipulator contacts an object, and the second mode detects the contact between the second manipulator and the object.
  • the means detects the operator may be notified that the second manipulator and the object are in contact, and the operation of the second manipulator by the operation unit may be prohibited.
  • the medical manipulator system of the present invention operates the second manipulator under a predetermined restriction as long as the distance from the first manipulator is not more than a predetermined value even if the second manipulator is located outside the field of view of the imaging unit. Therefore, even if the second manipulator is outside the field of view of the image pickup unit, the second manipulator can be freely operated within the above-described range, and the usability is good.
  • FIG. 1 is a block diagram of the medical manipulator system of the present embodiment.
  • the medical manipulator system 1 includes a first manipulator 2 having an imaging unit 3 and a first position and orientation that detects the position and orientation of the first manipulator 2 in a predetermined reference coordinate system.
  • a detection unit 4 a first drive unit 6 for driving the first manipulator 2, a second manipulator 7 having an end effector 8, and a second for detecting the position and orientation of the second manipulator 7 in the reference coordinate system.
  • the position and orientation detection unit 9, the second drive unit 11 that drives the second manipulator 7, the image processing device 12 connected to the imaging unit 3 of the first manipulator 2, and the first manipulator 2 and the second manipulator 7 are operated.
  • the first manipulator 2 and the second manipulator 7 are controlled based on the operation unit 13 for performing the operation and the operation input to the operation unit 13 It includes a control unit 15, and a display unit 22 connected to the control unit 15.
  • the first manipulator 2 is a manipulator for observing a treatment target site in the body using the imaging unit 3.
  • the imaging unit 3 of the first manipulator 2 is electrically connected to the image processing device 12 so as to image an imaging target and transmit an electrical signal to the image processing device 12.
  • the first position and orientation detection unit 4 has a first articulated arm 5 that holds the first manipulator 2.
  • the first articulated arm 5 includes an encoder (not shown) for detecting the position and posture of the first manipulator 2.
  • the encoder provided in the first multi-joint arm 5 is connected to the control unit 15.
  • the first drive unit 6 has an actuator (not shown) for moving the imaging unit 3 of the first manipulator 2.
  • the actuator of the first drive unit 6 is disposed at each joint of the first multi-joint arm 5.
  • the first drive unit 6 drives the first manipulator 2 by driving the first articulated arm 5 with an actuator in accordance with a control signal from the control unit 15.
  • another actuator (not shown) for changing the visual field direction of the imaging unit 3 of the first manipulator 2 may be arranged in the first manipulator 2, and in this case, this actuator is the first drive unit 6. It is controlled by the control unit 15 as a part.
  • the second manipulator 7 is a manipulator for surgically treating a treatment target site in the body using the end effector 8.
  • the end effector 8 of the second manipulator 7 is connected to the second drive unit 11 so as to be driven by the second drive unit 11.
  • the end effector 8 of the present embodiment is a forceps or a scissor that is opened and closed by the second drive unit 11.
  • the end effector 8 may not be mechanically driven.
  • the end effector 8 may be an electric knife or an ultrasonic knife.
  • the second position / posture detection unit 9 includes a second multi-joint arm 10 that holds the second manipulator 7.
  • the second articulated arm 10 includes an encoder (not shown) for detecting the position and posture of the second manipulator 7.
  • the encoder provided in the second multi-joint arm 10 is connected to the control unit 15.
  • the encoder of the second position / orientation detection unit 9 detects the position and orientation of the second manipulator 7 itself.
  • a first encoder and a second encoder for detecting the position and posture of the end effector 8 may be included.
  • the second drive unit 11 has an actuator (not shown) for moving the entire second manipulator 7 and an actuator (not shown) for driving the end effector 8 of the second manipulator 7.
  • the actuator for moving the entire second manipulator 7 is arranged at each joint of the second multi-joint arm 10 in this embodiment.
  • the actuator for driving the end effector 8 is arranged at the distal end of the second articulated arm 10 in this embodiment.
  • the second drive unit 11 drives the second manipulator 7 by driving the end effector 8 and the second multi-joint arm 10 by each actuator in accordance with a control signal from the control unit 15.
  • the image processing device 12 receives the electrical signal transmitted from the imaging unit 3 and converts the electrical signal into a video signal.
  • the image processing device 12 outputs the video signal to the control unit 15.
  • the image processing apparatus 12 may include a plurality of outputs so that the video signal can be output to the display unit 22 in addition to the control unit 15.
  • the operation unit 13 is an input device used by an operator who operates the first manipulator 2 and the second manipulator 7.
  • the operation unit 13 issues an operation command corresponding to the input by the operator.
  • the operation command issued by the operation unit 13 is output to the control unit 15.
  • the operation unit 13 of the present embodiment for operating the second manipulator 7 has a master arm 14 similar to the distal portion of the second manipulator 7 and the end effector 8.
  • the master arm 14 has resistance means (not shown) for changing an amount of force necessary for the operator to operate the master arm 14.
  • FIG. 2 is a block diagram showing a part of the medical manipulator system of the present embodiment.
  • 3 and 4 are schematic views showing a visual field space and a boundary space defined by the medical manipulator system of the present embodiment.
  • 5, 6 and 7 are schematic views showing images displayed on the display unit of the medical manipulator system of the present embodiment.
  • the control unit 15 controls the first manipulator 2 and the second manipulator 7, so that the first manipulator 2, the first position / orientation detection unit 4, the first drive unit 6, and the second manipulator 7.
  • the second position and orientation detection unit 9, the second drive unit 11, the image processing device 12, and the operation unit 13 are electrically connected.
  • the control unit 15 includes a position information acquisition unit 16, a visual field region acquisition unit 17, an image generation unit 18, an image superimposition unit 19, a control signal output unit 20, and a determination unit 21. Have.
  • the position information acquisition unit 16 refers to an encoder provided in the first position and orientation detection unit 4 and acquires information on the position and orientation of the first manipulator 2. Further, the position information acquisition unit 16 refers to an encoder provided in the second position and orientation detection unit 9 and acquires the position and orientation of the second manipulator 7. In the present embodiment, the position information acquisition unit 16 acquires the part of the imaging unit 3 of the first manipulator 2 in the reference coordinate system as the first position P1 (see FIGS. 3 and 4), and the second manipulator in the reference coordinate system. 7 is obtained as the second position P2 (see FIGS. 3 and 4).
  • the reference coordinate system in the present embodiment is an orthogonal coordinate system having a predetermined position set with respect to the medical manipulator of the present embodiment as an origin.
  • the information on the first position P1 includes the coordinates of the position of the imaging unit 3 and information on its posture
  • the information on the second position P2 includes the coordinates of the position of the end effector 8 and information on its posture.
  • the visual field area acquisition unit 17 receives the video signal output from the image processing device 12. That is, the visual field area acquisition unit 17 acquires the video captured by the imaging unit 3 via the image processing device 12. Further, the visual field area acquisition unit 17 is based on the optical characteristics such as the angle of view of the imaging unit 3 and the position and orientation of the imaging unit 3 (information on the first position P1). Defines a visual field space S1 (see FIGS. 3 and 4). For example, the visual field area acquisition unit 17 calculates the position of the visual field space S1 in the reference coordinate system based on optical characteristics such as the angle of view of the imaging unit 3 and the position and orientation of the imaging unit 3 (information on the first position P1). To do.
  • the visual field space S ⁇ b> 1 may be a part including the center of the visual field in the range that can be imaged by the imaging unit 3, or may be a space defined by the angle of view of the imaging unit 3.
  • the field of view space S1 corresponds to the imaging field of view of the imaging unit 3 (see field region A1, see FIG. 5) in the image displayed on the display unit 22.
  • the visual field area acquisition unit 17 defines a boundary space S2 (see FIGS. 3 and 4) around the visual field space S1.
  • the outer extension of the boundary space S ⁇ b> 2 is set based on the movable range of the second manipulator 7.
  • the extension of the boundary space S2 may be set based on, for example, the shape of a space in which the second manipulator 7 can move at a site in the body where the second manipulator 7 is disposed.
  • the setting of the extension of the boundary space S2 based on the shape of the space in which the second manipulator 7 can move in the body may be based on the result of measuring the shape of the space, or the internal organ in which the second manipulator 7 is arranged.
  • the general shape may be based on a general shape.
  • the boundary space S2 corresponds to an area outside the imaging field of view (see the boundary area A2 and FIG. 5) located around the visual field area A1 in the image displayed on the display unit 22.
  • the image generation unit 18 generates an image indicating the state of the second manipulator 7 viewed from the viewing direction of the imaging unit 3 by computer graphics (see FIG. 6). For example, the image generation unit 18 draws the second manipulator 7 on the image and the second manipulator based on the position and orientation of the imaging unit 3 in the reference coordinate system and the position and orientation of the second manipulator 7 in the reference coordinate system. 7 is calculated and an image including an index M imitating the shape of the second manipulator 7 is generated.
  • the image generated by the image generation unit 18 includes an index M having a shape corresponding to at least the end effector 8 of the second manipulator 7.
  • the image generation unit 18 generates an image including the index M when the end effector 8 is located outside the visual field space S1 and within the boundary space S2, and the end effector 8 is within the visual field space S1. If it is located, an image not including the index M is generated.
  • the image generation unit 18 generates a stereoscopic image (for example, a set of images configured in consideration of parallax so as to correspond to the left and right eyes of the operator) including the index M imitating the shape of the end effector 8. Also good.
  • the image generation unit 18 may generate an image including a background in addition to the index M.
  • the background in the image generated by the image generation unit 18 is, for example, an image (a CT image or an image obtained by image diagnosis performed in advance on a patient to be treated using the medical manipulator system 1 of the present embodiment. MRI images, etc.) or images reconstructed based on past images captured by the imaging unit 3 of the first manipulator 2.
  • the image superimposing unit 19 outputs a superimposed image configured by integrating the video signal output from the image processing device 12 to the control unit 15 and the image generated by the image generating unit 18 to the display unit 22.
  • the image superimposing unit 19 sets a part of the entire displayable region in the display unit 22 as a display region (a visual field region A1 on the display) of the image captured by the imaging unit 3. Furthermore, the image superimposing unit 19 sets a region other than the visual field region A1 among the displayable regions in the display unit 22 as a display region (a boundary region A2 on display) generated by the image generation unit 18.
  • the image superimposing unit 19 of the present embodiment places the image on the image generated by the image generating unit 18 so that the video from the image processing device 12 is positioned at the center of the image generated by the image generating unit 18.
  • the video from the processing device 12 is superimposed and output to the display unit 22.
  • the central portion of the displayable area in the display unit 22 becomes the visual field area A1
  • the outside of the visual field area A1 becomes the boundary area A2.
  • the control signal output unit 20 generates a control signal for operating the first manipulator 2 in accordance with an operation input to the operation unit 13 and outputs the control signal to the first drive unit 6.
  • the control signal output unit 20 generates a control signal for operating the second manipulator 7 in accordance with an operation input to the operation unit 13 and outputs the control signal to the second drive unit 11.
  • the control signal output unit 20 outputs to the operation unit 13 a control signal that changes the restriction content for the operation command by the operation unit 13 according to one mode selected by the determination unit 21 among the plurality of control modes.
  • the plurality of control modes include a first mode that permits operation of the second manipulator 7 by the operation unit 13 and a second manipulator 7 within a limited range after adding a predetermined restriction to an operation command by the operation unit 13. And a third mode in which the operation of the second manipulator 7 by the operation unit 13 is prohibited.
  • the resistance means does not function as a resistance, and the operator can freely operate the master arm 14.
  • the predetermined restriction in the second mode is a restriction for improving the usability of the second manipulator 7 compared to the first mode.
  • the predetermined restriction in the second mode of the present embodiment is such a restriction that the moving speed of the second manipulator 7 is lower than the moving speed of the second manipulator 7 in the first mode.
  • the second manipulator reduces the speed of the input to the master arm 14 by increasing the resistance by the resistance means with respect to the operation input to the master arm 14 of the operation unit 13. The moving speed of 7 is reduced.
  • the prohibition of operation in the third mode is control in which the resistance means increases the resistance so that the master arm 14 of the operation unit 13 becomes inoperable.
  • the determination unit 21 is based on a plurality of conditions corresponding to the positional relationship between the position of the imaging unit 3 (first position P1) and the position of the end effector 8 (second position P2) in the space where the imaging unit 3 is located.
  • One mode is selected from the first mode, the second mode, and the third mode.
  • FIG. 8 is a table for explaining conditions for selecting one mode from a plurality of control modes.
  • the discriminating unit 21 of the present embodiment is the first when the second position P2 is in the visual field space S1 (when the second position P2 is in the visual field region A1 on the display of the display unit 22) (see FIG. 5). Select one mode.
  • the second position P2 is outside the visual field space S1 (the second position P2 is outside the visual field region A1 on the display of the display unit 22), and the first position P1 and the second position The second mode is selected when the distance from the position P2 (the distance measured along a plane orthogonal to the visual field direction of the imaging unit 3) is equal to or less than a predetermined value (see FIG. 6).
  • the second position P2 is outside the visual field space S1 (the second position P2 is outside the visual field region A1 on the display of the display unit 22), and the first position P1 and the second position
  • the third mode is selected when the distance to the position P2 (the distance measured along the plane orthogonal to the visual field direction of the imaging unit 3) exceeds the predetermined value (see FIG. 7).
  • the predetermined value related to the distance between the first position P1 and the second position P2 is, for example, a boundary region from the visual field center of the imaging unit 3 on a plane that is orthogonal to the visual field direction of the imaging unit 3 and includes the second position P2. It is the distance to the extension of A2.
  • the predetermined value is not limited to a constant value. For example, when the boundary area A2 is circular (when the extension of the boundary space S2 is cylindrical or conical), the predetermined value is a constant value. Further, for example, when the boundary area A2 is other than a circle, the predetermined value is the distance between the extension of the boundary area A2 and the center of the visual field, and varies depending on the part.
  • the extension of the boundary space S2 is determined in advance or based on the measurement result of the body tissue corresponding to the shape of the tissue. For this reason, in the present embodiment, it can be considered that the space inside the boundary space S2 is less likely to contact the tissue in the body even if the end effector 8 is moved.
  • the display unit 22 displays the superimposed image configured by the image superimposing unit 19 of the control unit 15.
  • the display unit 22 includes a display panel 23 that can display a superimposed image. In a state where the superimposed image is displayed on the display panel 23, the display panel 23 displays the index M corresponding to the presence of the visual field display unit 22 a that is a part for displaying the video imaged by the imaging unit 3 and the second manipulator 7. Can be distinguished from the auxiliary display part 22b, which is a part capable of displaying.
  • the display unit 22 may have a plurality of input systems and selectors so that either the image output from the control unit 15 or the image output from the image processing device 12 can be displayed according to the selection. Good.
  • the determination unit 21 switches the control mode based on the positional relationship between the imaging unit 3 and the end effector 8.
  • the determination unit 21 selects the first mode from a plurality of control modes, so that the end effector 8 can freely move according to the operation on the operation unit 13. It is.
  • the discriminating unit 21 selects the second mode from the plurality of control modes. While being done, it can move freely.
  • the determination unit 21 selects the third mode from the plurality of control modes, so the end effector 8 stops without responding to the operation by the operation unit 13. To do.
  • the first manipulator 2 uses the operation unit 13 in any of the first mode, the second mode, and the third mode. Accordingly, when the end effector 8 stops when the state is controlled from the state controlled in the first mode or the second mode and the end effector 8 stops, the first manipulator 2 is operated to enter the first space in the visual field space S1 or the boundary space S2. If the operator returns to the state where the two manipulators 7 are located, the operation of the second manipulator 7 and its end effector 8 can be resumed by shifting from the third mode to the first mode or the second mode. The method of returning may be operated via the operation unit 13, or the position of the first manipulator 2 may be directly changed by hand.
  • the second manipulator 7 In a state where the second manipulator 7 is located outside the visual field space S1 and within the boundary space S2, the second manipulator 7 is not included in the image from the imaging unit 3. For example, when the end effector 8 is located outside the visual field space S1 and within the boundary space S2, the end effector 8 is not displayed in the visual field region A1, but is drawn as an index M by computer graphics in the boundary region A2. Is done.
  • the medical manipulator system 1 of the present embodiment has a predetermined restriction (the first limit) as long as the end effector 8 is located within the boundary space S2.
  • the second manipulator 7 can be operated under two modes. When the end effector 8 is located outside the visual field space S1 and within the boundary space S2, an index M indicating the end effector 8 is displayed in the boundary region A2 in the superimposed image displayed on the display unit 22. For this reason, even if the end effector 8 is not imaged by the imaging unit 3, it is easy to grasp the position and orientation of the end effector 8. As a result, the medical manipulator system 1 according to the present embodiment can freely operate the second manipulator 7 within the above-mentioned limitation even if the second manipulator 7 is outside the field of view of the imaging unit 3. good.
  • Modification 1 A modification of the above embodiment will be described.
  • the same components as those disclosed in the above embodiment are denoted by the same reference numerals as those in the above embodiment, and redundant description is omitted.
  • the second manipulator 7 is arranged such that the movable speed of the second manipulator 7 gradually decreases as the second manipulator 7 approaches its extension in the boundary space S2. It is different from the above embodiment in that it is controlled.
  • control unit 15 controls the resistance means so that the resistance by the resistance means of the master arm 14 gradually increases as the end effector 8 approaches the extension of the boundary space S2. Thereby, the master arm 14 becomes difficult to move gradually as the end effector 8 approaches the extension of the boundary space S2.
  • control unit 15 controls the resistance means so that the resistance by the resistance means is gradually changed as the end effector 8 moves away from the boundary space S2 and moves toward the visual field space S1. Thereby, as the end effector 8 moves away from the boundary space S2 toward the visual field space S1, the difficulty of moving the master arm 14 is gradually eliminated.
  • the moving speed of the second manipulator 7 at the time of shifting from the first mode to the second mode is substantially equal to the moving speed of the first mode, and immediately before shifting from the second mode to the third mode, the second manipulator 7 is a substantially stopped state.
  • region A2 is smooth, it is convenient.
  • FIG. 9 is a block diagram of a medical manipulator system according to this modification.
  • the medical manipulator system 1 of this modification includes a tactile sensor 24 that detects the amount of force that the second manipulator 7 pushes back the second manipulator 7 when the second manipulator 7 contacts the object.
  • Contact detection means and the master arm 14 has feedback means (not shown) for transmitting the force detected by the sensor of the second manipulator 7 to the operator's hand.
  • the feedback means operates with a predetermined correspondence with the force detected by the touch sensor 24 in the first mode. For example, in response to the elasticity when the second manipulator 7 comes into contact with the tissue in the body, the feedback means is provided so that the operator operating the master arm 14 feels the elasticity equivalent to that directly touching the tissue. The master arm 14 transmits the power to the operator.
  • the medical manipulator system 1 transmits from the master arm 14 to the operator a larger amount of force than the operator feels in the first mode with respect to the amount of force detected by the tactile sensor 24 in the second mode. .
  • the operator in the second mode, the operator can grasp using the display unit 22 that the end effector 8 is located outside the visual field space S1 and within the boundary space S2.
  • the second manipulator 7 since the end effector 8 is not displayed in the image picked up by the image pickup unit 3, the second manipulator 7 is operated in a hand-drawn state depending on the sense of touch with caution.
  • the tactile sensor 24 detects contact between the second manipulator 7 and the object when the medical manipulator system 1 is operating in the second mode, the second manipulator 7 and the object contact each other.
  • the control unit 15 may notify the operator of the fact (including those that can be perceived visually or by hearing), and the control unit 15 may prohibit the operation of the second manipulator 7 by the operation unit 13. In this case, instead of the control unit 15 prohibiting the operation of the second manipulator 7 by the operation unit 13, the second manipulator 7 can be moved only in the direction in which the contact between the second manipulator 7 and the object is eliminated. Thus, the movable direction of the second manipulator 7 may be limited in the second mode.
  • Modification 3 Still another modification of the above embodiment will be described.
  • one of the operations disclosed in the embodiment, the first modification, and the second modification can be selected and set as the operation in the second mode.
  • the operation unit 13 has a switch (not shown) for selecting an operation in the second mode.
  • the operation in the second mode can be selected according to the operator's preference, so that it is easy to use.
  • FIG. 10 is a block diagram of a medical manipulator system according to this modification. As shown in FIG. 10, the medical manipulator system 1 of this modification has a third manipulator 25 in addition to the first manipulator 2 and the second manipulator 7.
  • the third manipulator 25 is an observation device such as an endoscope for observing the inside of the body, and has an imaging unit 26. For this reason, in this modification, it is possible to observe the treatment target site from the viewpoint different from that of the imaging unit 3 of the first manipulator 2 by the third manipulator 25.
  • the third manipulator 25 includes a third multi-joint arm 28 (third position / posture detection unit 27) similar to the first multi-joint arm 5 and a third drive unit 29 similar to the first drive unit 6. It is controlled by the control unit 15.
  • control unit 15 of the medical manipulator system 1 according to any one of the first mode, the second mode, and the third mode, similarly to the control for moving the second manipulator 7.
  • the third manipulator 25 is controlled.
  • the third manipulator 25 of the present embodiment is the same manipulator as the second manipulator 7 in that it receives restrictions on operation in the second mode and restrictions on operation in the third mode.
  • an instrument that performs a treatment on a treatment target region and an instrument (third manipulator 25) that observes the treatment target region from a different viewpoint from the imaging unit 3. Since both devices can be freely operated within a certain range in the second mode, it is easy to use.
  • the control method in the second mode may be different according to the configuration of other manipulators used together with the first manipulator 2.
  • the mode is changed from the first mode to the second mode.
  • the operation speed may be reduced to such an extent that the second manipulator 7 is substantially stopped.
  • the control unit 15 causes the second manipulator 7 to permit a part of the operation of the second manipulator 7 in the third mode. The operation may be controlled.
  • the second manipulator 7 is moved in the second mode so that the second manipulator 7 can move only in the direction in which the end effector 8 enters the visual field area A1.
  • the direction may be limited.
  • FIG. 11 is a block diagram of a medical manipulator system according to this modification.
  • FIG. 12 is a schematic diagram illustrating an example of an image displayed on the display unit of the medical manipulator system according to the present modification.
  • the display unit 22 is a first panel 23A serving as a visual field display unit 22a that displays an image captured by the imaging unit 3, and a second display unit 22b serving as an auxiliary display unit 22b that can display an index M corresponding to the presence of the second manipulator 7. And a panel 23B.
  • the image captured by the imaging unit 3 and the image including the index M are displayed on different display panels 23 (first panel 23A, second panel 23B). Even if the visual field directions in the video image 3 and the image including the index M are different from each other, there is little discomfort.
  • the image generation unit 18 (see FIG. 11) generates a bird's-eye view image including the first manipulator 2 and the second manipulator 7 as computer graphics, and the first manipulator 2 and the second manipulator 7 can be easily shown on the second panel 23B.
  • the control unit 15 may draw a mark line L1 that serves as a guide for the position of the treatment target region on the second panel 23B. For example, the mark line L1 is drawn on the second panel 23B based on the result of analyzing the image captured by the imaging unit 3 and measuring the distance between the imaging unit 3 and the treatment target.
  • the first panel 23A that displays an image captured by the imaging unit 3 may be disposed on the front, and the second panel 23B that displays the above-described overhead image may be disposed on the lower side.
  • the treatment target part imaged by the imaging unit 3 is captured in front, the treatment is performed, and when confirming the positional relationship of each manipulator in the region including the treatment target part, the line of sight is lowered first. It is possible to look down on the manipulator 2 and the second manipulator 7 in a natural posture looking down from above.
  • FIG. 13 is a schematic diagram showing a visual field space and a boundary space defined by the medical manipulator system of the present modification.
  • FIG. 14 is a schematic diagram illustrating an example of an image displayed on the display unit of the medical manipulator system according to the present modification.
  • a part of the visual field space S1 (corresponding to the visual field region A1 in the display unit 23) is outside the boundary space S2 (corresponding to the boundary region A2 in the display unit 23). It differs from the above embodiment in a certain point.
  • the boundary space S2 is defined as a range in which the second manipulator 7 can be operated in accordance with the operator's intention.
  • the visual field space S1 is defined based on the position and orientation of the imaging unit 3 in correspondence with the position of the part to be observed, independently of the movement of the second manipulator 7. For this reason, when the field-of-view center of the imaging unit 3 is set in the vicinity of the outer periphery of the boundary space S2, a space “that is inside the field-of-view space S1 and outside the boundary space S2” is generated.
  • the control unit 15 makes the second manipulator within this space. 7 is operated in the first mode. That is, the space that is inside the visual field space S1 and outside the boundary space S2 can easily grasp the positional relationship between the tissue and the second manipulator 7 by using the imaging unit 3, and thus there is a restriction on the control of the second manipulator 7. do not do.
  • control different from the first mode of the above embodiment may be performed in that the second manipulator 7 notifies the operator that the second manipulator 7 is operating outside the boundary region S2.
  • the control unit 15 notifies the operator that the second manipulator 7 is operating outside the boundary region S2, and allows the operator to freely move the master arm 14 without causing the resistance means to function as a resistor.
  • a fourth mode (see FIG. 15) that can be operated may be included in the control mode.
  • the determination unit 21 has the second position P2 in the visual field space S1 (the second position P2 is in the visual field region A1 on the display of the display unit 22), and the first position P1 and the second position P2.
  • the fourth mode is selected when the distance (the distance measured along the plane orthogonal to the viewing direction of the imaging unit 3) exceeds the predetermined value.
  • the restrictions according to the second mode in the above embodiment and its modifications may be combined as appropriate.
  • the moving speed of the second manipulator 7 may decrease and the feedback force based on the tactile sensor 24 may be increased.
  • the restriction content may be gradually tightened as the second manipulator 7 approaches the extension of the boundary space S2.
  • the restriction content may be gradually tightened. For example, with respect to the position of the end effector 8 of the second manipulator 7, if the end effector 8 is located in the boundary space S2 at a position close to the visual field space S1, only the operation speed of the second manipulator 7 is limited, and within the boundary space S2. If the end effector 8 is located at a position close to the extension, in addition to limiting the operation speed of the second manipulator 7, the operation method of the second manipulator 7 may be limited.
  • the present invention can be used for a manipulator system.

Abstract

 第一マニピュレータ及び第二マニピュレータを備えた医療用マニピュレータシステムを制御するための複数の制御モードは、操作部による第二マニピュレータの操作を許可する第一モードと、操作部による操作指令に対して所定の制限を加えた上で制限の範囲内で第二マニピュレータの操作を許可する第二モードと、操作部による第二マニピュレータの操作を禁止する第三モードと、を含み、医療用マニピュレータシステムに設けられた判別部は、第二マニピュレータの所定の一部が第一マニピュレータによる視野領域の内にある場合に第一モードを選択し、上記所定の一部が視野領域の外にあり且つ第一マニピュレータと第二マニピュレータとの距離が所定値以下である場合に第二モードを選択し、上記所定の一部が視野領域の外にあり且つ第一マニピュレータと第二マニピュレータとの距離が前記所定値を超えている場合に第三モードを選択する。

Description

医療用マニピュレータシステム
 本発明は、医療用マニピュレータシステムに関する。
 従来、処置対象部位を内視鏡により観察しながらこの部位に対して処置具を用いて手術を行う医療用マニピュレータシステムが知られている。
たとえば、内視鏡画像の表示領域の外側に設定された境界領域に内視鏡の視野外に位置する処置具の位置及び配向を表示させる技術が特許文献1に開示されている。
 特許文献1に開示された技術によれば、内視鏡の視野外に位置する処置具の位置及び配向を操作者に容易に把握させ、内視鏡の視野外の処置具を視野内へと容易に移動させることができる。
特表2009-542362号公報
 特許文献1に開示された技術では、内視鏡の視野外に位置する処置具は、内視鏡画像により視認できない状態であっても操作者によって自在に移動可能である。しかしながら、この場合、処置具の移動を妨げる障害物が視野外に位置していたとしてもこの障害物の存在を把握できないので、内視鏡の視野外で処置具と障害物とが衝突する可能性を考慮しつつ視野外で処置具を移動させる操作が必要である。このため、特許文献1に開示された技術では、内視鏡の視野外における処置具の移動が、視野から外れた処置具を視野内に戻すような単純な移動に限られてしまうので、使い勝手が悪い。
 本発明は、使い勝手の良い医療用マニピュレータシステムを提供することを目的とする。
 本発明の一態様は、撮像部を有する第一マニピュレータと、エンドエフェクタを有する第二マニピュレータと、前記撮像部が撮像した映像を表示する表示部と、前記第一マニピュレータ又は前記第二マニピュレータを操作するための操作指令を発する操作部と、複数の制御モードから1つのモードを選択して前記操作指令に基づいて前記第一マニピュレータ又は前記第二マニピュレータを制御する制御部と、を備え、前記制御部は、前記第一マニピュレータに設定された所定部位の位置を第一位置として取得するとともに前記第二マニピュレータに設定された所定部位の位置を第二位置として取得する位置情報取得部と、前記撮像部が撮像した映像を取得し、視野領域を算出する視野領域取得部と、前記視野領域,前記第一位置,及び前記第二位置に基づいて複数の制御モードから1つのモードを選択する判別部と、を有し、前記複数の制御モードは、前記操作部による前記第二マニピュレータの操作を許可する第一モードと、前記操作部による操作指令に対して所定の制限を加えた上で前記制限の範囲内で前記第二マニピュレータの操作を許可する第二モードと、前記操作部による前記第二マニピュレータの操作を禁止する第三モードと、を含み、前記判別部は、前記第二位置が前記視野領域の内にある場合に前記第一モードを選択し、前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が所定値以下である場合に前記第二モードを選択し、前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が前記所定値を超えている場合に前記第三モードを選択することを特徴とする医療用マニピュレータシステムである。
 前記表示部は、前記撮像部が撮像した映像を表示する視野表示部と、前記第二マニピュレータの存在に対応する指標を表示可能な補助表示部と、を有していてもよい。
 前記第二モードは、前記第一モードにおける前記第二マニピュレータの動作速度よりも低速で前記第二マニピュレータを動作させるように前記第二マニピュレータの動作速度を制限してもよい。
 前記第二モードは、前記第二マニピュレータの動作可能方向を前記第一モードよりも制限してもよい。
 前記第二モードは、前記動作可能方向を前記第二位置が前記視野領域に向かう方向のみに制限してもよい。
 上記態様の医療用マニピュレータシステムは、前記第二モードにおける制限の内容を設定する設定手段をさらに有していてもよい。
 前記第二マニピュレータは、前記第二マニピュレータが物体に接触したことを検知可能な接触検知手段をさらに有し、前記第二モードは、前記第二マニピュレータと前記物体とが接触したことを前記接触検知手段が検知したときに、前記第二マニピュレータと前記物体とが接触したことを操作者に報知し、且つ、前記操作部による前記第二マニピュレータの操作を禁止してもよい。
 本発明の医療用マニピュレータシステムは、撮像部の視野領域外に第二マニピュレータが位置していても第一マニピュレータとの距離が所定値以下であれば所定の制限の下で第二マニピュレータを動作させることができるので、撮像部の視野外に第二マニピュレータがあっても上記の制限の範囲で自由に第二マニピュレータの操作が可能であり、使い勝手が良い。
本発明の一実施形態の医療用マニピュレータシステムのブロック図である。 同実施形態の医療用マニピュレータシステムの一部を示すブロック図である。 同実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 複数の制御モードから1つのモードを選択するため条件を説明するための表である。 同実施形態の変形例の医療用マニピュレータシステムのブロック図である。 同実施形態の他の変形例の医療用マニピュレータシステムのブロック図である。 同実施形態の他の変形例の医療用マニピュレータシステムのブロック図である。 同変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。 同実施形態の他の変形例の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。 複数の制御モードから1つのモードを選択するため条件を説明するための表である。
 本発明の一実施形態について説明する。図1は、本実施形態の医療用マニピュレータシステムのブロック図である。
 図1に示すように、本実施形態の医療用マニピュレータシステム1は、撮像部3を有する第一マニピュレータ2と、所定の基準座標系における第一マニピュレータ2の位置及び姿勢を検知する第一位置姿勢検知部4と、前記第一マニピュレータ2を駆動させる第一駆動部6と、エンドエフェクタ8を有する第二マニピュレータ7と、上記の基準座標系における第二マニピュレータ7の位置及び姿勢を検知する第二位置姿勢検知部9と、第二マニピュレータ7を駆動させる第二駆動部11と、第一マニピュレータ2の撮像部3に接続された画像処理装置12と、第一マニピュレータ2及び第二マニピュレータ7を操作するための操作部13と、操作部13に対する操作入力に基づいて第一マニピュレータ2及び第二マニピュレータ7を制御する制御部15と、制御部15に接続された表示部22とを備えている。
 第一マニピュレータ2は、体内の処置対象部位を撮像部3を用いて観察するためのマニピュレータである。第一マニピュレータ2の撮像部3は、撮像対象物を撮像して電気信号を画像処理装置12へ送信するように、画像処理装置12に電気的に接続されている。
 第一位置姿勢検知部4は、第一マニピュレータ2を保持する第一多関節アーム5を有している。第一多関節アーム5は、第一マニピュレータ2の位置及び姿勢を検知するためのエンコーダ(不図示)を含む。第一多関節アーム5に設けられたエンコーダは、制御部15に接続されている。
 第一駆動部6は、第一マニピュレータ2の撮像部3を移動させるためのアクチュエータ(不図示)を有している。第一駆動部6のアクチュエータは、本実施形態では第一多関節アーム5の各関節に配されている。第一駆動部6は、制御部15からの制御信号に従ってアクチュエータにより第一多関節アーム5を駆動することによって、第一マニピュレータ2を駆動する。
 なお、第一マニピュレータ2の撮像部3の視野方向を変更するための別のアクチュエータ(不図示)が第一マニピュレータ2に配されていてもよく、この場合、このアクチュエータは第一駆動部6の一部として制御部15により制御される。
 第二マニピュレータ7は、体内の処置対象部位をエンドエフェクタ8を用いて外科的に処置するためのマニピュレータである。
 第二マニピュレータ7のエンドエフェクタ8は、第二駆動部11によって駆動されるように、第二駆動部11に接続されている。たとえば本実施形態のエンドエフェクタ8は、第二駆動部11によって開閉動作する鉗子や鋏である。なお、エンドエフェクタ8は、機械的に駆動されるものでなくてもよい。たとえばエンドエフェクタ8は、電気メスや超音波メスなどであってもよい。
 第二位置姿勢検知部9は、第二マニピュレータ7を保持する第二多関節アーム10を有している。第二多関節アーム10は、第二マニピュレータ7の位置及び姿勢を検知するためのエンコーダ(不図示)を含む。第二多関節アーム10に設けられたエンコーダは、制御部15に接続されている。
 なお、第二マニピュレータ7においてエンドエフェクタ8が首振り等の動作をすることができる場合には、第二位置姿勢検知部9のエンコーダは、第二マニピュレータ7自身の位置及び姿勢を検知するための第一のエンコーダと、エンドエフェクタ8の位置及び姿勢を検知するための第二のエンコーダとを含んでいてもよい。
 第二駆動部11は、第二マニピュレータ7全体を移動させるためのアクチュエータ(不図示)と、第二マニピュレータ7のエンドエフェクタ8を駆動するためのアクチュエータ(不図示)とを有している。第二マニピュレータ7全体を移動させるためのアクチュエータは、本実施形態では第二多関節アーム10の各関節に配されている。エンドエフェクタ8を駆動するためのアクチュエータは、本実施形態では第二多関節アーム10の遠位端に配されている。第二駆動部11は、制御部15からの制御信号に従って各アクチュエータによりエンドエフェクタ8及び第二多関節アーム10を駆動することによって、第二マニピュレータ7を駆動する。
 画像処理装置12は、撮像部3から送信された電気信号を受け付けて、この電気信号を映像信号に変換する。画像処理装置12は、映像信号を制御部15へと出力する。なお、画像処理装置12は、映像信号を制御部15に加えて表示部22にも出力できるように、複数系統の出力を備えていてもよい。
 操作部13は、第一マニピュレータ2及び第二マニピュレータ7を操作する操作者が用いる入力デバイスである。操作部13は、操作者による入力に対応した操作指令を発する。操作部13が発した操作指令は、制御部15へと出力される。たとえば、第二マニピュレータ7を操作するための本実施形態の操作部13は、第二マニピュレータ7の遠位部分及びエンドエフェクタ8と相似形のマスタアーム14を有している。マスタアーム14を操作者が移動させることにより、第二マニピュレータ7全体を移動させることができる。マスタアーム14においてエンドエフェクタ8に対応する部位を操作者が動作させることにより、エンドエフェクタ8を動作させることができる。また、マスタアーム14は、操作者がマスタアーム14を動作させるために必要な力量を変更するための抵抗手段(不図示)を有している。
 図2は、本実施形態の医療用マニピュレータシステムの一部を示すブロック図である。図3及び図4は、本実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。図5、図6及び図7は、本実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。
 図1に示すように、制御部15は、第一マニピュレータ2及び第二マニピュレータ7を制御するために、第一マニピュレータ2、第一位置姿勢検知部4、第一駆動部6、第二マニピュレータ7、第二位置姿勢検知部9、第二駆動部11、画像処理装置12、及び操作部13に、電気的に接続されている。
 図2に示すように、制御部15は、位置情報取得部16と、視野領域取得部17と、画像生成部18と、画像重畳部19と、制御信号出力部20と、判別部21とを有している。
 位置情報取得部16は、第一位置姿勢検知部4に設けられたエンコーダを参照し、第一マニピュレータ2の位置及び姿勢の情報を取得する。また、位置情報取得部16は、第二位置姿勢検知部9に設けられたエンコーダを参照し、第二マニピュレータ7の位置及び姿勢を取得する。本実施形態では、位置情報取得部16は、基準座標系における第一マニピュレータ2の撮像部3の部位を第一位置P1(図3および図4参照)として取得し、基準座標系における第二マニピュレータ7のエンドエフェクタ8の部位を第二位置P2(図3及び図4参照)として取得する。
 本実施形態における基準座標系は、本実施形態の医療用マニピュレータに対して設定された所定の位置を原点とする直交座標系である。
 第一位置P1の情報は撮像部3の位置の座標及びその姿勢の情報を含み、第二位置P2の情報はエンドエフェクタ8の位置の座標及びその姿勢の情報を含む。
 視野領域取得部17は、画像処理装置12が出力した映像信号を受け付ける。すなわち、視野領域取得部17は、撮像部3が撮像した映像を画像処理装置12を介して取得する。
 また、視野領域取得部17は、撮像部3の画角等の光学特性並びに撮像部3の位置及び姿勢(第一位置P1の情報)に基づいて、撮像部3が配される体内の空間内に視野空間S1(図3及び図4参照)を規定する。たとえば、視野領域取得部17は、撮像部3の画角等の光学特性並びに撮像部3の位置及び姿勢(第一位置P1の情報)に基づいて、基準座標系における視野空間S1の位置を算出する。視野空間S1は、撮像部3によって撮像可能な範囲のうち視野中心を含む一部であってもよいし、撮像部3の画角によって規定される空間であってもよい。
 視野空間S1は、表示部22に表示される画像において、撮像部3の撮像視野(視野領域A1,図5参照)と対応する。
 視野領域取得部17は、視野空間S1の周囲に、境界空間S2(図3及び図4参照)を規定する。たとえば、境界空間S2の外延は、第二マニピュレータ7の可動範囲に基づいて設定される。また、境界空間S2の外延は、例えば、第二マニピュレータ7が配される体内の部位において第二マニピュレータ7が移動可能な空間の形状に基づいて設定されてもよい。体内で第二マニピュレータ7が移動可能な空間の形状に基づく境界空間S2の外延の設定は、空間の形状を計測した結果に基づいていてもよいし、第二マニピュレータ7が配される体内の臓器の概略形状として一般的な形状に基づいていてもよい。
 境界空間S2は、表示部22に表示される画像において、視野領域A1の周囲に位置する撮像視野外の領域(境界領域A2,図5参照)と対応する。
 画像生成部18は、第二マニピュレータ7を撮像部3の視野方向から見た状態を示す画像をコンピュータグラフィックスによって生成する(図6参照)。たとえば、画像生成部18は、基準座標系における撮像部3の位置及び姿勢並びに基準座標系における第二マニピュレータ7の位置及び姿勢に基づいて、画像上における第二マニピュレータ7の描画位置及び第二マニピュレータ7の姿勢を算出して第二マニピュレータ7の形状を模した指標Mを含む画像を生成する。画像生成部18が生成する画像は、第二マニピュレータ7のうち少なくともエンドエフェクタ8に対応する形状の指標Mを含む。
 本実施形態では、画像生成部18は、エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置している場合には指標Mを含む画像を生成し、エンドエフェクタ8が視野空間S1内に位置している場合には指標Mを含まない画像を生成する。
 画像生成部18は、エンドエフェクタ8の形状を模した指標Mを含む立体画像(たとえば操作者の左目と右目に対応するように視差を考慮して構成された一組の画像)を生成してもよい。
 画像生成部18は、指標Mに加えて背景を含む画像を生成してもよい。画像生成部18が生成する画像における背景は、例えば、本実施形態の医療用マニピュレータシステム1を用いて処置を行う対象となる患者に対して予め行った画像診断によって得られた画像(CT画像やMRI画像等)や、第一マニピュレータ2の撮像部3が撮像した過去の画像に基づいて再構成した画像などであってよい。
 画像重畳部19は、画像処理装置12が制御部15へ出力した映像信号と画像生成部18が生成した画像とを統合して構成された重畳画像を表示部22へ出力する。画像重畳部19は、表示部22における表示可能領域の全域のうちの一部を、撮像部3により撮像された映像の表示領域(表示上の視野領域A1)として設定する。さらに、画像重畳部19は、表示部22における表示可能領域のうち視野領域A1以外の領域を、画像生成部18が生成した画像の表示領域(表示上の境界領域A2)として設定する。たとえば、本実施形態の画像重畳部19は、画像生成部18により生成された画像の中央に画像処理装置12からの映像が位置するように、画像生成部18により生成された画像の上に画像処理装置12からの映像を重ねて表示部22へと出力する。これにより、図5に示すように、表示部22における表示可能領域の中央部分が視野領域A1となり、視野領域A1の外側が境界領域A2となる。
 図2に示すように、制御信号出力部20は、操作部13に対する操作入力に従って第一マニピュレータ2を動作させるための制御信号を生成して第一駆動部6へと出力する。
 また、制御信号出力部20は、操作部13に対する操作入力に従って第二マニピュレータ7を動作させるための制御信号を生成して第二駆動部11へと出力する。さらに、制御信号出力部20は、複数の制御モードのうち判別部21により選択された1つのモードに従って、操作部13による操作指令に対する制限内容を変更する制御信号を操作部13へと出力する。
 複数の制御モードは、操作部13による第二マニピュレータ7の操作を許可する第一モードと、操作部13による操作指令に対して所定の制限を加えた上で制限の範囲内で第二マニピュレータ7の操作を許可する第二モードと、操作部13による第二マニピュレータ7の操作を禁止する第三モードとを含む。
 第一モードでは、抵抗手段は抵抗として機能せず、操作者が自在にマスタアーム14を操作することができる。
 第二モードにおける所定の制限とは、第二マニピュレータ7の動作に関して第一モードよりも使い勝手を良くするための制限である。本実施形態の第二モードにおける所定の制限とは、第二マニピュレータ7の移動速度が第一モードにおける第二マニピュレータ7の移動速度よりも低速となるような制限である。たとえば、第二モードが選択された場合、操作部13のマスタアーム14に対する操作の入力に対して抵抗手段が抵抗を高めることでマスタアーム14への入力の速度を低下させることにより、第二マニピュレータ7の移動速度を低下させる。
 第三モードにおける操作の禁止とは、操作部13のマスタアーム14が動作不能となるように抵抗手段が抵抗を高める制御である。
 判別部21は、撮像部3が位置する空間における撮像部3の位置(第一位置P1)とエンドエフェクタ8の位置(第二位置P2)との位置関係に対応した複数の条件に基づいて、上記の第一モード、第二モード、及び第三モードから1つのモードを選択する。
 図8は、複数の制御モードから1つのモードを選択するため条件を説明するための表である。
 本実施形態の判別部21は、第二位置P2が視野空間S1の内にある場合(表示部22の表示上では第二位置P2が視野領域A1内にある場合)(図5参照)に第一モードを選択する。
 また、本実施形態の判別部21は、第二位置P2が視野空間S1の外(表示部22の表示上では第二位置P2が視野領域A1の外)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が所定値以下である場合(図6参照)に第二モードを選択する。
 また、本実施形態の判別部21は、第二位置P2が視野空間S1の外(表示部22の表示上では第二位置P2が視野領域A1の外)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が前記所定値を超えている場合(図7参照)に第三モードを選択する。
 第一位置P1と第二位置P2との距離に関する前記所定値とは、例えば、撮像部3の視野方向に対して直交し且つ第二位置P2を含む面における撮像部3の視野中心から境界領域A2の外延までの距離である。なお、前記所定値は、一定値には限られない。たとえば、境界領域A2が円形である場合(境界空間S2の外延が円柱状や円錐状である場合)には前記所定値は一定値である。また、例えば、境界領域A2が円形以外の場合には、前記所定値は、境界領域A2の外延と視野中心との間の距離であり、部位により異なる。
 本実施形態において、境界空間S2の外延は、組織の形状に対応して、予め、あるいは体内組織の計測結果に基づいて、決定される。このため、本実施形態では、境界空間S2の外延よりも内側の空間は、エンドエフェクタ8を移動させてもエンドエフェクタ8が体内の組織等に接触しにくいと見做すことができる。
 表示部22は、制御部15の画像重畳部19によって構成された重畳画像を表示する。表示部22は、重畳画像を表示可能な表示パネル23を有している。この表示パネル23に重畳画像が表示されている状態において、表示パネル23は、撮像部3が撮像した映像を表示する部位である視野表示部22aと、第二マニピュレータ7の存在に対応する指標Mを表示可能な部位である補助表示部22bとに区別できる。
 表示部22は、制御部15から出力された画像と画像処理装置12から出力された画像とのいずれか一方を選択に応じて表示できるように、複数の入力系統及びセレクタを有していてもよい。
 本実施形態の医療用マニピュレータシステム1の作用について説明する。
 本実施形態の医療用マニピュレータシステム1の使用時には、医療用マニピュレータシステム1は、撮像部3とエンドエフェクタ8との位置関係に基づいて、判別部21が制御モードを切り替える。
 エンドエフェクタ8が視野領域A1内にあるとき(図5参照)には、判別部21は複数の制御モードから第一モードを選択するので、エンドエフェクタ8は操作部13における操作に従って自在に移動可能である。
 エンドエフェクタ8が視野領域A1外且つ境界領域A2内にあるとき(図6参照)には、判別部21は複数の制御モードから第二モードを選択するので、エンドエフェクタ8はその移動速度が制限されつつも自在に移動可能である。
 エンドエフェクタ8が境界領域A2外にあるとき(図7参照)には、判別部21は複数の制御モードから第三モードを選択するので、エンドエフェクタ8は操作部13による操作に反応せず停止する。
 なお、第一モード、第二モード、及び第三モードのいずれにおいても、操作部13を用いて第一マニピュレータ2を動作させることは可能である。従って、第一モード又は第二モードで制御されている状態から第三モードへ移行してエンドエフェクタ8が停止した場合、第一マニピュレータ2を動作させて視野空間S1内又は境界空間S2内に第二マニピュレータ7が位置する状態に操作者が復帰させれば、第三モードから第一モード又は第二モードへ移行して第二マニピュレータ7及びそのエンドエフェクタ8の操作を再開できる。復帰のさせ方は、操作部13を介して操作しても良いし、手で直接第一マニピュレータ2の位置を変えるなどしても良い。
 第二マニピュレータ7が視野空間S1外且つ境界空間S2内に位置している状態では、第二マニピュレータ7は、撮像部3からの映像には含まれない。たとえば、エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置している状態では、エンドエフェクタ8は、視野領域A1には表示されず、境界領域A2内にコンピュータグラフィックスによる指標Mとして描画される。
 本実施形態の医療用マニピュレータシステム1は、第二マニピュレータ7のエンドエフェクタ8が視野空間S1外に位置していても、エンドエフェクタ8が境界空間S2内に位置していれば所定の制限(第二モード)の下で第二マニピュレータ7を動作させることができる。エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置しているときには、表示部22に表示される重畳画像における境界領域A2内に、エンドエフェクタ8を示す指標Mが表示される。このため、エンドエフェクタ8が撮像部3により撮像されていなくてもエンドエフェクタ8の位置及び姿勢を把握しやすい。その結果、本実施形態の医療用マニピュレータシステム1は、撮像部3の視野外に第二マニピュレータ7があっても上記の制限の範囲で自由に第二マニピュレータ7の操作が可能であり、使い勝手が良い。
 また、エンドエフェクタ8が境界空間S2外へ移動したときにエンドエフェクタ8の移動が停止するので、エンドエフェクタ8が体内の組織などに意図せず接触する可能性を低く抑えることができる。
(変形例1)
 上記実施形態の変形例について説明する。以下の各変形例において、上記の実施形態に開示された構成要素と同様の構成要素には、上記実施形態と同一の符号を付し、重複する説明を省略する。
 本変形例の医療用マニピュレータシステム1(図1参照)は、第二マニピュレータ7が境界空間S2内でその外延に近づくに従って第二マニピュレータ7の移動可能速度が漸次低下するように第二マニピュレータ7が制御される点で、上記実施形態と異なっている。
 一例として、本変形例では、エンドエフェクタ8が境界空間S2の外延に近づくに従ってマスタアーム14の抵抗手段による抵抗が漸次大きくなるように、制御部15が抵抗手段を制御する。これにより、マスタアーム14は、エンドエフェクタ8が境界空間S2の外延に近づくに従って、徐々に移動させにくくなる。逆に、制御部15は、エンドエフェクタ8が境界空間S2から離れて視野空間S1へ向かって移動するに従って、抵抗手段による抵抗を漸次小さく変更するように抵抗手段を制御する。これにより、エンドエフェクタ8が境界空間S2から離れて視野空間S1へ向かって移動するに従って、マスタアーム14の移動させにくさは徐々に解消される。
 本変形例では、第一モードから第二モードに移行した時点における第二マニピュレータ7の移動速度は第一モードにおける移動速度と略等しく、第二モードから第三モードに移行する直前では第二マニピュレータ7は略停止状態である。このため、本変形例では、視野領域A1から外れて境界領域A2へ進入した時の第二マニピュレータ7の移動速度の変化がなめらかなので、使い勝手が良い。
(変形例2)
 上記実施形態の他の変形例について説明する。図9は、本変形例の医療用マニピュレータシステムのブロック図である。
 図9に示すように、本変形例の医療用マニピュレータシステム1は、第二マニピュレータ7が、第二マニピュレータ7が物体に接触したことにより物体が第二マニピュレータ7を押し返す力量を検知する触覚センサ24(接触検知手段)を有し、マスタアーム14が、第二マニピュレータ7のセンサが検知した力量を操作者の手に伝えるフィードバック手段(不図示)を有している。
 本変形例の医療用マニピュレータシステム1は、第一モードにおいて、触覚センサ24が検知した力量に対して所定の対応関係を有してフィードバック手段が動作する。たとえば、第二マニピュレータ7が体内の組織に接触した時の弾力に対応して、マスタアーム14を操作する操作者がこの組織に直接触れたのと同程度の弾力を感じるように、フィードバック手段がマスタアーム14から操作者に力量を伝える。
 また、本変形例の医療用マニピュレータシステム1は、第二モードにおいて、触覚センサ24が検知した力量に対して、第一モードにおいて操作者が感じるよりも大きな力量をマスタアーム14から操作者に伝える。
 本変形例では、第二モードにおいて、操作者は、視野空間S1外且つ境界空間S2内にエンドエフェクタ8が位置していることを表示部22を用いて把握することができる。しかしながら、撮像部3が撮像した画像にはエンドエフェクタ8が表示されていないので、慎重を期して、触覚に頼って手さぐり状態で第二マニピュレータ7を動作させる。第二モードでは、第二マニピュレータ7が物体に接触したことを第一モードよりも知覚しやすいので、境界空間S2内で第二マニピュレータ7を移動させる際の使い勝手が良い。
 なお、本変形例において、医療用マニピュレータシステム1が第二モードで動作している時に触覚センサ24が第二マニピュレータ7と物体との接触を検知した場合に、第二マニピュレータ7と物体とが接触した旨を制御部15が操作者に報知(視覚や聴覚により知覚可能なものも含む)するとともに、操作部13による第二マニピュレータ7の操作を制御部15が禁止してもよい。また、この場合、操作部13による第二マニピュレータ7の操作を制御部15が禁止することに代えて、第二マニピュレータ7と物体との接触が解消する方向にのみ第二マニピュレータ7が移動可能となるように第二モードにおいて第二マニピュレータ7の移動可能方向が制限されてもよい。
(変形例3)
 上記実施形態のさらに他の変形例について説明する。
 本変形例では、第二モードにおける動作として、上記実施形態,変形例1,及び変形例2に開示した動作から1つを選択して設定することができる。
 たとえば、操作部13が、第二モードにおける動作を選択するためのスイッチ(不図示)を有している。
 本変形例の医療用マニピュレータシステム1では、操作者の好みに合わせて第二モードにおける動作を選択できるので、使い勝手が良い。
(変形例4)
 上記実施形態のさらに他の変形例について説明する。図10は、本変形例の医療用マニピュレータシステムのブロック図である。
 図10に示すように、本変形例の医療用マニピュレータシステム1は、第一マニピュレータ2及び第二マニピュレータ7に加えて第三マニピュレータ25を有している。
 第三マニピュレータ25は、体内を観察する内視鏡等の観察装置であり、撮像部26を有している。このため、本変形例では、第三マニピュレータ25によって、第一マニピュレータ2の撮像部3とは異なる視点から処置対象部位を観察することができる。
 また、第三マニピュレータ25は、第一多関節アーム5と同様の第三多関節アーム28(第三位置姿勢検知部27)と、第一駆動部6と同様の第三駆動部29とを有しており、制御部15によって制御される。
 たとえば、本変形例の医療用マニピュレータシステム1の制御部15は、第二マニピュレータ7を移動させる制御と同様に、第一モード、第二モード、及び第三モードのうちのいずれか1つのモードに従って第三マニピュレータ25を制御する。本実施形態の第三マニピュレータ25は、第二モードにおける動作の制限及び第三モードにおける動作の禁止の制約を受ける点において、第二マニピュレータ7と同様のマニピュレータである。
 本変形例の医療用マニピュレータシステム1では、処置対象部位に対して処置をする器具(第二マニピュレータ7)と処置対象部位を撮像部3とは異なる視点から観察する器具(第三マニピュレータ25)とを併用することができ、いずれの器具も第二モードにおいて一定の制限の範囲で自由に操作が可能であるので、使い勝手が良い。
 なお、本変形例では、第一マニピュレータ2と共に使用される他のマニピュレータの構成に対応して第二モードにおける制御の仕方が異なっていてもよい。たとえば、エンドエフェクタ8として鋭利なナイフを有する第二マニピュレータ7の場合、エンドエフェクタ8が体内の組織に意図せず接触すると組織を傷つける可能性があるので、第一モードから第二モードへ移行した時にこの第二マニピュレータ7が略停止状態となる程度に動作速度が低下するようになっていてもよい。また、例えば第二マニピュレータ7が体内の組織に接触しても悪影響が少ない場合には、第三モードにおいて第二マニピュレータ7の操作の一部を許可するように制御部15が第二マニピュレータ7の動作を制御してもよい。
 また、第一モードから第二モードへ移行した時に、エンドエフェクタ8が視野領域A1内に進入する方向にのみ第二マニピュレータ7が移動可能となるように、第二モードにおいて第二マニピュレータ7の移動方向が制限されるようになっていてもよい。
 (変形例5)
 上記実施形態のさらに他の変形例について説明する。図11は、本変形例の医療用マニピュレータシステムのブロック図である。図12は、本変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。
 図11に示すように、本変形例では、上記の画像重畳部19に代えて、撮像部3が撮像した映像と画像生成部18が生成した画像とをそれぞれ別の表示パネル23に表示させる画像出力部30を有している。表示部22は、撮像部3が撮像した映像を表示する視野表示部22aとなる第一パネル23Aと、第二マニピュレータ7の存在に対応する指標Mを表示可能な補助表示部22bとなる第二パネル23Bとを有している。
 本変形例では、例えば、撮像部3が撮像した映像と指標Mを含む画像とが異なる表示パネル23(第一パネル23A,第二パネル23B)に表示されるようになっているので、撮像部3が撮像した映像と指標Mを含む画像とにおける視野方向が互いに異なっていても違和感が少ない。たとえば、図12に示すように、第一マニピュレータ2と第二マニピュレータ7とを含んだ俯瞰画像をコンピュータグラフィックスとして画像生成部18(図11参照)が生成し、第一マニピュレータ2と第二マニピュレータ7との位置関係をわかりやすく第二パネル23Bに示すことができる。さらに、制御部15は、処置対象部位の位置の目安となる目印線L1を第二パネル23Bに描画してもよい。この目印線L1は、例えば、撮像部3が撮像した画像を解析して撮像部3と処置対象物との距離を測定した結果に基づいて第二パネル23B上に描画される。
 また、本変形例では、撮像部3が撮像した画像を表示する第一パネル23Aを正面に配し、上記の俯瞰画像を表示する第二パネル23Bを下側に配置するとよい。この場合、撮像部3が撮像している処置対象部位を正面に捉えて処置を行い、処置対象部位を含む領域における各マニピュレータの位置関係を確認する際には視線を下に落とすことで第一マニピュレータ2及び第二マニピュレータ7を上から見下ろす自然な姿勢で俯瞰することができる。
(変形例6)
 上記実施形態のさらに他の変形例について説明する。図13は、本変形例の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。図14は、本変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。
 図13及び図14に示すように、本変形例では、視野空間S1(表示部23における視野領域A1に対応)の一部が境界空間S2(表示部23における境界領域A2に対応)の外にある点で上記の実施形態と異なっている。
 本変形例において、境界空間S2は、第二マニピュレータ7を操作者の意図に沿って動作させることができる範囲として規定されている。また、本変形例において、視野空間S1は、第二マニピュレータ7の移動とは独立して、観察対象となる部位の位置に対応して撮像部3の位置及び姿勢に基づいて規定されている。このため、境界空間S2の外延近傍に撮像部3の視野中心を設定すると、「視野空間S1内であるとともに境界空間S2外である」という空間が生じる。
 本変形例では、視野空間S1内であるとともに境界空間S2外であるような空間が第二マニピュレータ7の可動域に含まれている場合には、制御部15は、この空間内で第二マニピュレータ7を第一モードで動作させる。すなわち、視野空間S1内であるとともに境界空間S2外である空間は、撮像部3を用いて組織と第二マニピュレータ7との位置関係を容易に把握できるので、第二マニピュレータ7の制御に関する制限をしない。
 本変形例では、視野空間S1に対応する視野領域A1及び境界空間S2に対応する境界領域A2を両方とも表示部22に表示させるために、表示部22における表示可能領域の中に図14に示すように視野領域A1及び境界領域A2を表示させる。この場合、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者が容易に把握することができ、また、第二マニピュレータ7をどちらに移動させるのがより適切であるかを操作者が容易に判断できる。
 なお、本変形例では、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者に報知する点で上記実施形態の第一モードとは異なる制御が行われてもよい。たとえば、制御部15は、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者に報知しながら、抵抗手段を抵抗として機能させずに操作者が自在にマスタアーム14を操作することができる第四モード(図15参照)を制御モードに含んでいてもよい。この場合、判別部21は、第二位置P2が視野空間S1の中(表示部22の表示上では第二位置P2が視野領域A1の中)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が前記所定値を超えている場合に第四モードを選択する。
 以上、本発明の実施形態について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
 たとえば、上記実施形態及びその各変形例における第二モードによる制限が適宜組み合わされていてもよい。たとえば、第一モードから第二モードへ移行した時に、第二マニピュレータ7の移動速度が低下するとともに触覚センサ24に基づくフィードバック力量を増加させてもよい。
 また、第二モードにおいて第二マニピュレータ7が境界空間S2の外延に近づくに従って制限内容が漸次厳しくなるようになっていてもよい。たとえば、第二マニピュレータ7のエンドエフェクタ8の位置に関して、境界空間S2内で視野空間S1に近い位置にエンドエフェクタ8があれば第二マニピュレータ7の動作速度の制限のみをかけ、境界空間S2内でその外延に近い位置にエンドエフェクタ8があれば第二マニピュレータ7の動作速度の制限に加えて第二マニピュレータ7の動作方法の制限もかけるようになっていてもよい。
 なお、上記具体的な構成に対する設計変更等は上記事項には限定されない。
 本発明は、マニピュレータシステムに利用可能である。
 1 医療用マニピュレータシステム
 2 第一マニピュレータ
 3 撮像部
 4 第一位置姿勢検知部
 5 第一多関節アーム
 6 第一駆動部
 7 第二マニピュレータ
 8 エンドエフェクタ
 9 第二位置姿勢検知部
 10 第二多関節アーム
 11 第二駆動部
 12 画像処理装置
 13 操作部
 14 マスタアーム
 15 制御部
 16 位置情報取得部
 17 視野領域取得部
 18 画像生成部
 19 画像重畳部
 20 制御信号出力部
 21 判別部
 22 表示部
 22a 視野表示部
 22b 補助表示部
 23 表示パネル
 24 触覚センサ
 25 第三マニピュレータ
 26 撮像部
 27 第三位置姿勢検知部
 28 第三多関節アーム
 29 第三駆動部
 30 画像出力部

Claims (7)

  1.  撮像部を有する第一マニピュレータと、
     エンドエフェクタを有する第二マニピュレータと、
     前記撮像部からの映像を表示する表示部と、
     前記第一マニピュレータ又は前記第二マニピュレータを操作するための操作指令を発する操作部と、
     複数の制御モードから1つのモードを選択して前記操作指令に基づいて前記第一マニピュレータ又は前記第二マニピュレータを制御する制御部と、
     を備え、
     前記制御部は、
      前記第一マニピュレータに設定された所定部位の位置を第一位置として取得するとともに前記第二マニピュレータに設定された所定部位の位置を第二位置として取得する位置情報取得部と、
      前記撮像部が撮像した映像を取得し、視野領域を算出する視野領域取得部と、
      前記視野領域,前記第一位置,及び前記第二位置に基づいて複数の制御モードから1つのモードを選択する判別部と、
      を有し、
     前記複数の制御モードは、
      前記操作部による前記第二マニピュレータの操作を許可する第一モードと、
      前記操作部による操作指令に対して所定の制限を加えた上で前記制限の範囲内で前記第二マニピュレータの操作を許可する第二モードと、
      前記操作部による前記第二マニピュレータの操作を禁止する第三モードと、
      を含み、
     前記判別部は、
      前記第二位置が前記視野領域の内にある場合に前記第一モードを選択し、
      前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が所定値以下である場合に前記第二モードを選択し、
      前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が前記所定値を超えている場合に前記第三モードを選択する
     ことを特徴とする医療用マニピュレータシステム。
  2.  前記表示部は、
      前記撮像部が撮像した映像を表示する視野表示部と、
      前記第二マニピュレータの存在に対応する指標を表示可能な補助表示部と、
     を有する請求項1に記載の医療用マニピュレータシステム。
  3.  前記第二モードは、前記第一モードにおける前記第二マニピュレータの動作速度よりも低速で前記第二マニピュレータを動作させるように前記第二マニピュレータの動作速度を制限する
     請求項1または請求項2に記載の医療用マニピュレータシステム。
  4.  前記第二モードは、
     前記第二マニピュレータの動作可能方向を前記第一モードよりも制限する
     請求項1から請求項3のいずれか一項に記載の医療用マニピュレータシステム。
  5.  前記第二モードは、
     前記動作可能方向を前記第二位置が前記視野領域に向かう方向のみに制限する
     請求項4に記載の医療用マニピュレータシステム。
  6.  前記第二モードにおける制限の内容を設定する設定手段をさらに有する請求項1から請求項5のいずれか一項に記載の医療用マニピュレータシステム。
  7.  前記第二マニピュレータは、前記第二マニピュレータが物体に接触したことを検知可能な接触検知手段をさらに有し、
     前記第二モードは、前記第二マニピュレータと前記物体とが接触したことを前記接触検知手段が検知したときに、前記第二マニピュレータと前記物体とが接触したことを操作者に報知し、且つ、前記操作部による前記第二マニピュレータの操作を禁止する
     請求項1から請求項6のいずれか一項に記載の医療用マニピュレータシステム。
PCT/JP2015/086539 2015-12-28 2015-12-28 医療用マニピュレータシステム WO2017115425A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017525128A JP6180692B1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム
PCT/JP2015/086539 WO2017115425A1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム
US16/018,190 US11051897B2 (en) 2015-12-28 2018-06-26 Medical manipulator system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/086539 WO2017115425A1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/018,190 Continuation US11051897B2 (en) 2015-12-28 2018-06-26 Medical manipulator system

Publications (1)

Publication Number Publication Date
WO2017115425A1 true WO2017115425A1 (ja) 2017-07-06

Family

ID=59225376

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/086539 WO2017115425A1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム

Country Status (3)

Country Link
US (1) US11051897B2 (ja)
JP (1) JP6180692B1 (ja)
WO (1) WO2017115425A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200028046A (ko) * 2017-08-10 2020-03-13 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 수술 시스템에서 사용 가능한 기구 수명 증가
WO2020054268A1 (ja) * 2018-09-14 2020-03-19 国立大学法人 東京大学 情報処理装置、ロボットハンド制御システム、及びロボットハンド制御プログラム
WO2023238891A1 (ja) * 2022-06-09 2023-12-14 株式会社メディカロイド 手術システム

Families Citing this family (243)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070084897A1 (en) 2003-05-20 2007-04-19 Shelton Frederick E Iv Articulating surgical stapling instrument incorporating a two-piece e-beam firing mechanism
US9060770B2 (en) 2003-05-20 2015-06-23 Ethicon Endo-Surgery, Inc. Robotically-driven surgical instrument with E-beam driver
US11896225B2 (en) 2004-07-28 2024-02-13 Cilag Gmbh International Staple cartridge comprising a pan
US11484312B2 (en) 2005-08-31 2022-11-01 Cilag Gmbh International Staple cartridge comprising a staple driver arrangement
US11246590B2 (en) 2005-08-31 2022-02-15 Cilag Gmbh International Staple cartridge including staple drivers having different unfired heights
US10159482B2 (en) 2005-08-31 2018-12-25 Ethicon Llc Fastener cartridge assembly comprising a fixed anvil and different staple heights
US7934630B2 (en) 2005-08-31 2011-05-03 Ethicon Endo-Surgery, Inc. Staple cartridges for forming staples having differing formed staple heights
US7669746B2 (en) 2005-08-31 2010-03-02 Ethicon Endo-Surgery, Inc. Staple cartridges for forming staples having differing formed staple heights
US20070106317A1 (en) 2005-11-09 2007-05-10 Shelton Frederick E Iv Hydraulically and electrically actuated articulation joints for surgical instruments
US20120292367A1 (en) 2006-01-31 2012-11-22 Ethicon Endo-Surgery, Inc. Robotically-controlled end effector
US8820603B2 (en) 2006-01-31 2014-09-02 Ethicon Endo-Surgery, Inc. Accessing data stored in a memory of a surgical instrument
US11793518B2 (en) 2006-01-31 2023-10-24 Cilag Gmbh International Powered surgical instruments with firing system lockout arrangements
US20110290856A1 (en) 2006-01-31 2011-12-01 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical instrument with force-feedback capabilities
US8186555B2 (en) 2006-01-31 2012-05-29 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting and fastening instrument with mechanical closure system
US7845537B2 (en) 2006-01-31 2010-12-07 Ethicon Endo-Surgery, Inc. Surgical instrument having recording capabilities
US7753904B2 (en) 2006-01-31 2010-07-13 Ethicon Endo-Surgery, Inc. Endoscopic surgical instrument with a handle that can articulate with respect to the shaft
US8708213B2 (en) 2006-01-31 2014-04-29 Ethicon Endo-Surgery, Inc. Surgical instrument having a feedback system
US8992422B2 (en) 2006-03-23 2015-03-31 Ethicon Endo-Surgery, Inc. Robotically-controlled endoscopic accessory channel
US10568652B2 (en) 2006-09-29 2020-02-25 Ethicon Llc Surgical staples having attached drivers of different heights and stapling instruments for deploying the same
US11291441B2 (en) 2007-01-10 2022-04-05 Cilag Gmbh International Surgical instrument with wireless communication between control unit and remote sensor
US8684253B2 (en) 2007-01-10 2014-04-01 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between a control unit of a robotic system and remote sensor
US20080169332A1 (en) 2007-01-11 2008-07-17 Shelton Frederick E Surgical stapling device with a curved cutting member
US8727197B2 (en) 2007-03-15 2014-05-20 Ethicon Endo-Surgery, Inc. Staple cartridge cavity configuration with cooperative surgical staple
US11672531B2 (en) 2007-06-04 2023-06-13 Cilag Gmbh International Rotary drive systems for surgical instruments
US8931682B2 (en) 2007-06-04 2015-01-13 Ethicon Endo-Surgery, Inc. Robotically-controlled shaft based rotary drive systems for surgical instruments
US11849941B2 (en) 2007-06-29 2023-12-26 Cilag Gmbh International Staple cartridge having staple cavities extending at a transverse angle relative to a longitudinal cartridge axis
US7819298B2 (en) 2008-02-14 2010-10-26 Ethicon Endo-Surgery, Inc. Surgical stapling apparatus with control features operable with one hand
US9179912B2 (en) 2008-02-14 2015-11-10 Ethicon Endo-Surgery, Inc. Robotically-controlled motorized surgical cutting and fastening instrument
BRPI0901282A2 (pt) 2008-02-14 2009-11-17 Ethicon Endo Surgery Inc instrumento cirúrgico de corte e fixação dotado de eletrodos de rf
US7866527B2 (en) 2008-02-14 2011-01-11 Ethicon Endo-Surgery, Inc. Surgical stapling apparatus with interlockable firing system
US8636736B2 (en) 2008-02-14 2014-01-28 Ethicon Endo-Surgery, Inc. Motorized surgical cutting and fastening instrument
US8210411B2 (en) 2008-09-23 2012-07-03 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting instrument
US9386983B2 (en) 2008-09-23 2016-07-12 Ethicon Endo-Surgery, Llc Robotically-controlled motorized surgical instrument
US9005230B2 (en) 2008-09-23 2015-04-14 Ethicon Endo-Surgery, Inc. Motorized surgical instrument
US11648005B2 (en) 2008-09-23 2023-05-16 Cilag Gmbh International Robotically-controlled motorized surgical instrument with an end effector
US8608045B2 (en) 2008-10-10 2013-12-17 Ethicon Endo-Sugery, Inc. Powered surgical cutting and stapling apparatus with manually retractable firing system
US11298125B2 (en) 2010-09-30 2022-04-12 Cilag Gmbh International Tissue stapler having a thickness compensator
US9320523B2 (en) 2012-03-28 2016-04-26 Ethicon Endo-Surgery, Llc Tissue thickness compensator comprising tissue ingrowth features
US9211120B2 (en) 2011-04-29 2015-12-15 Ethicon Endo-Surgery, Inc. Tissue thickness compensator comprising a plurality of medicaments
US8657176B2 (en) 2010-09-30 2014-02-25 Ethicon Endo-Surgery, Inc. Tissue thickness compensator for a surgical stapler
US11849952B2 (en) 2010-09-30 2023-12-26 Cilag Gmbh International Staple cartridge comprising staples positioned within a compressible portion thereof
US10945731B2 (en) 2010-09-30 2021-03-16 Ethicon Llc Tissue thickness compensator comprising controlled release and expansion
US11812965B2 (en) 2010-09-30 2023-11-14 Cilag Gmbh International Layer of material for a surgical end effector
US9272406B2 (en) 2010-09-30 2016-03-01 Ethicon Endo-Surgery, Llc Fastener cartridge comprising a cutting member for releasing a tissue thickness compensator
US9629814B2 (en) 2010-09-30 2017-04-25 Ethicon Endo-Surgery, Llc Tissue thickness compensator configured to redistribute compressive forces
US8695866B2 (en) 2010-10-01 2014-04-15 Ethicon Endo-Surgery, Inc. Surgical instrument having a power control circuit
CA2834649C (en) 2011-04-29 2021-02-16 Ethicon Endo-Surgery, Inc. Staple cartridge comprising staples positioned within a compressible portion thereof
US9072535B2 (en) 2011-05-27 2015-07-07 Ethicon Endo-Surgery, Inc. Surgical stapling instruments with rotatable staple deployment arrangements
MX350846B (es) 2012-03-28 2017-09-22 Ethicon Endo Surgery Inc Compensador de grosor de tejido que comprende cápsulas que definen un ambiente de baja presión.
BR112014024102B1 (pt) 2012-03-28 2022-03-03 Ethicon Endo-Surgery, Inc Conjunto de cartucho de prendedores para um instrumento cirúrgico, e conjunto de atuador de extremidade para um instrumento cirúrgico
US9101358B2 (en) 2012-06-15 2015-08-11 Ethicon Endo-Surgery, Inc. Articulatable surgical instrument comprising a firing drive
US9226751B2 (en) 2012-06-28 2016-01-05 Ethicon Endo-Surgery, Inc. Surgical instrument system including replaceable end effectors
BR112014032776B1 (pt) 2012-06-28 2021-09-08 Ethicon Endo-Surgery, Inc Sistema de instrumento cirúrgico e kit cirúrgico para uso com um sistema de instrumento cirúrgico
US9649111B2 (en) 2012-06-28 2017-05-16 Ethicon Endo-Surgery, Llc Replaceable clip cartridge for a clip applier
US9289256B2 (en) 2012-06-28 2016-03-22 Ethicon Endo-Surgery, Llc Surgical end effectors having angled tissue-contacting surfaces
US20140001231A1 (en) 2012-06-28 2014-01-02 Ethicon Endo-Surgery, Inc. Firing system lockout arrangements for surgical instruments
BR112015021098B1 (pt) 2013-03-01 2022-02-15 Ethicon Endo-Surgery, Inc Cobertura para uma junta de articulação e instrumento cirúrgico
BR112015026109B1 (pt) 2013-04-16 2022-02-22 Ethicon Endo-Surgery, Inc Instrumento cirúrgico
US10405857B2 (en) 2013-04-16 2019-09-10 Ethicon Llc Powered linear surgical stapler
US9510828B2 (en) 2013-08-23 2016-12-06 Ethicon Endo-Surgery, Llc Conductor arrangements for electrically powered surgical instruments with rotatable end effectors
CN106028966B (zh) 2013-08-23 2018-06-22 伊西康内外科有限责任公司 用于动力外科器械的击发构件回缩装置
US10013049B2 (en) 2014-03-26 2018-07-03 Ethicon Llc Power management through sleep options of segmented circuit and wake up control
BR112016023698B1 (pt) 2014-04-16 2022-07-26 Ethicon Endo-Surgery, Llc Cartucho de prendedores para uso com um instrumento cirúrgico
CN106456158B (zh) 2014-04-16 2019-02-05 伊西康内外科有限责任公司 包括非一致紧固件的紧固件仓
JP6532889B2 (ja) 2014-04-16 2019-06-19 エシコン エルエルシーEthicon LLC 締結具カートリッジ組立体及びステープル保持具カバー配置構成
US20150297223A1 (en) 2014-04-16 2015-10-22 Ethicon Endo-Surgery, Inc. Fastener cartridges including extensions having different configurations
US9737301B2 (en) 2014-09-05 2017-08-22 Ethicon Llc Monitoring device degradation based on component evaluation
BR112017004361B1 (pt) 2014-09-05 2023-04-11 Ethicon Llc Sistema eletrônico para um instrumento cirúrgico
US11311294B2 (en) 2014-09-05 2022-04-26 Cilag Gmbh International Powered medical device including measurement of closure state of jaws
US11523821B2 (en) 2014-09-26 2022-12-13 Cilag Gmbh International Method for creating a flexible staple line
US9924944B2 (en) 2014-10-16 2018-03-27 Ethicon Llc Staple cartridge comprising an adjunct material
US10517594B2 (en) 2014-10-29 2019-12-31 Ethicon Llc Cartridge assemblies for surgical staplers
US11141153B2 (en) 2014-10-29 2021-10-12 Cilag Gmbh International Staple cartridges comprising driver arrangements
US9844376B2 (en) 2014-11-06 2017-12-19 Ethicon Llc Staple cartridge comprising a releasable adjunct material
US10736636B2 (en) 2014-12-10 2020-08-11 Ethicon Llc Articulatable surgical instrument system
US9987000B2 (en) 2014-12-18 2018-06-05 Ethicon Llc Surgical instrument assembly comprising a flexible articulation system
US9844374B2 (en) 2014-12-18 2017-12-19 Ethicon Llc Surgical instrument systems comprising an articulatable end effector and means for adjusting the firing stroke of a firing member
US9844375B2 (en) 2014-12-18 2017-12-19 Ethicon Llc Drive arrangements for articulatable surgical instruments
US10085748B2 (en) 2014-12-18 2018-10-02 Ethicon Llc Locking arrangements for detachable shaft assemblies with articulatable surgical end effectors
MX2017008108A (es) 2014-12-18 2018-03-06 Ethicon Llc Instrumento quirurgico con un yunque que puede moverse de manera selectiva sobre un eje discreto no movil con relacion a un cartucho de grapas.
US9943309B2 (en) 2014-12-18 2018-04-17 Ethicon Llc Surgical instruments with articulatable end effectors and movable firing beam support arrangements
US11154301B2 (en) 2015-02-27 2021-10-26 Cilag Gmbh International Modular stapling assembly
US10441279B2 (en) 2015-03-06 2019-10-15 Ethicon Llc Multiple level thresholds to modify operation of powered surgical instruments
US10052044B2 (en) 2015-03-06 2018-08-21 Ethicon Llc Time dependent evaluation of sensor data to determine stability, creep, and viscoelastic elements of measures
US9993248B2 (en) 2015-03-06 2018-06-12 Ethicon Endo-Surgery, Llc Smart sensors with local signal processing
JP2020121162A (ja) 2015-03-06 2020-08-13 エシコン エルエルシーEthicon LLC 測定の安定性要素、クリープ要素、及び粘弾性要素を決定するためのセンサデータの時間依存性評価
US10390825B2 (en) 2015-03-31 2019-08-27 Ethicon Llc Surgical instrument with progressive rotary drive systems
US10238386B2 (en) 2015-09-23 2019-03-26 Ethicon Llc Surgical stapler having motor control based on an electrical parameter related to a motor current
US10105139B2 (en) 2015-09-23 2018-10-23 Ethicon Llc Surgical stapler having downstream current-based motor control
US11890015B2 (en) 2015-09-30 2024-02-06 Cilag Gmbh International Compressible adjunct with crossing spacer fibers
US10271849B2 (en) 2015-09-30 2019-04-30 Ethicon Llc Woven constructs with interlocked standing fibers
US10292704B2 (en) 2015-12-30 2019-05-21 Ethicon Llc Mechanisms for compensating for battery pack failure in powered surgical instruments
JP6911054B2 (ja) 2016-02-09 2021-07-28 エシコン エルエルシーEthicon LLC 非対称の関節構成を備えた外科用器具
US11213293B2 (en) 2016-02-09 2022-01-04 Cilag Gmbh International Articulatable surgical instruments with single articulation link arrangements
US11224426B2 (en) 2016-02-12 2022-01-18 Cilag Gmbh International Mechanisms for compensating for drivetrain failure in powered surgical instruments
US10448948B2 (en) 2016-02-12 2019-10-22 Ethicon Llc Mechanisms for compensating for drivetrain failure in powered surgical instruments
US10492783B2 (en) 2016-04-15 2019-12-03 Ethicon, Llc Surgical instrument with improved stop/start control during a firing motion
US11607239B2 (en) 2016-04-15 2023-03-21 Cilag Gmbh International Systems and methods for controlling a surgical stapling and cutting instrument
US10357247B2 (en) 2016-04-15 2019-07-23 Ethicon Llc Surgical instrument with multiple program responses during a firing motion
US10426467B2 (en) 2016-04-15 2019-10-01 Ethicon Llc Surgical instrument with detection sensors
US10828028B2 (en) 2016-04-15 2020-11-10 Ethicon Llc Surgical instrument with multiple program responses during a firing motion
US11317917B2 (en) 2016-04-18 2022-05-03 Cilag Gmbh International Surgical stapling system comprising a lockable firing assembly
US10433840B2 (en) 2016-04-18 2019-10-08 Ethicon Llc Surgical instrument comprising a replaceable cartridge jaw
US20170296173A1 (en) 2016-04-18 2017-10-19 Ethicon Endo-Surgery, Llc Method for operating a surgical instrument
US11571210B2 (en) 2016-12-21 2023-02-07 Cilag Gmbh International Firing assembly comprising a multiple failed-state fuse
JP6983893B2 (ja) 2016-12-21 2021-12-17 エシコン エルエルシーEthicon LLC 外科用エンドエフェクタ及び交換式ツールアセンブリのためのロックアウト構成
US20180168615A1 (en) 2016-12-21 2018-06-21 Ethicon Endo-Surgery, Llc Method of deforming staples from two different types of staple cartridges with the same surgical stapling instrument
US10736629B2 (en) 2016-12-21 2020-08-11 Ethicon Llc Surgical tool assemblies with clutching arrangements for shifting between closure systems with closure stroke reduction features and articulation and firing systems
US10758230B2 (en) 2016-12-21 2020-09-01 Ethicon Llc Surgical instrument with primary and safety processors
US10492785B2 (en) 2016-12-21 2019-12-03 Ethicon Llc Shaft assembly comprising a lockout
US11419606B2 (en) 2016-12-21 2022-08-23 Cilag Gmbh International Shaft assembly comprising a clutch configured to adapt the output of a rotary firing member to two different systems
JP7010956B2 (ja) 2016-12-21 2022-01-26 エシコン エルエルシー 組織をステープル留めする方法
US10537325B2 (en) 2016-12-21 2020-01-21 Ethicon Llc Staple forming pocket arrangement to accommodate different types of staples
US10588632B2 (en) 2016-12-21 2020-03-17 Ethicon Llc Surgical end effectors and firing members thereof
US10779820B2 (en) 2017-06-20 2020-09-22 Ethicon Llc Systems and methods for controlling motor speed according to user input for a surgical instrument
US11382638B2 (en) 2017-06-20 2022-07-12 Cilag Gmbh International Closed loop feedback control of motor velocity of a surgical stapling and cutting instrument based on measured time over a specified displacement distance
US11653914B2 (en) 2017-06-20 2023-05-23 Cilag Gmbh International Systems and methods for controlling motor velocity of a surgical stapling and cutting instrument according to articulation angle of end effector
US11517325B2 (en) 2017-06-20 2022-12-06 Cilag Gmbh International Closed loop feedback control of motor velocity of a surgical stapling and cutting instrument based on measured displacement distance traveled over a specified time interval
US10881399B2 (en) 2017-06-20 2021-01-05 Ethicon Llc Techniques for adaptive control of motor velocity of a surgical stapling and cutting instrument
US10307170B2 (en) 2017-06-20 2019-06-04 Ethicon Llc Method for closed loop control of motor velocity of a surgical stapling and cutting instrument
US11324503B2 (en) 2017-06-27 2022-05-10 Cilag Gmbh International Surgical firing member arrangements
US10993716B2 (en) 2017-06-27 2021-05-04 Ethicon Llc Surgical anvil arrangements
EP3420947B1 (en) 2017-06-28 2022-05-25 Cilag GmbH International Surgical instrument comprising selectively actuatable rotatable couplers
US11564686B2 (en) 2017-06-28 2023-01-31 Cilag Gmbh International Surgical shaft assemblies with flexible interfaces
US11696759B2 (en) 2017-06-28 2023-07-11 Cilag Gmbh International Surgical stapling instruments comprising shortened staple cartridge noses
USD906355S1 (en) 2017-06-28 2020-12-29 Ethicon Llc Display screen or portion thereof with a graphical user interface for a surgical instrument
US10765427B2 (en) 2017-06-28 2020-09-08 Ethicon Llc Method for articulating a surgical instrument
US20190000459A1 (en) 2017-06-28 2019-01-03 Ethicon Llc Surgical instruments with jaws constrained to pivot about an axis upon contact with a closure member that is parked in close proximity to the pivot axis
US10932772B2 (en) 2017-06-29 2021-03-02 Ethicon Llc Methods for closed loop velocity control for robotic surgical instrument
WO2019014493A1 (en) * 2017-07-13 2019-01-17 Intuitive Surgical Operations, Inc. SYSTEMS AND METHODS FOR CONTROL SWITCHING BETWEEN MULTIPLE ARMS OF INSTRUMENTS
US11304695B2 (en) 2017-08-03 2022-04-19 Cilag Gmbh International Surgical system shaft interconnection
US11471155B2 (en) 2017-08-03 2022-10-18 Cilag Gmbh International Surgical system bailout
US11944300B2 (en) 2017-08-03 2024-04-02 Cilag Gmbh International Method for operating a surgical system bailout
US10842490B2 (en) 2017-10-31 2020-11-24 Ethicon Llc Cartridge body design with force reduction based on firing completion
US10779826B2 (en) 2017-12-15 2020-09-22 Ethicon Llc Methods of operating surgical end effectors
US10835330B2 (en) 2017-12-19 2020-11-17 Ethicon Llc Method for determining the position of a rotatable jaw of a surgical instrument attachment assembly
US11311290B2 (en) 2017-12-21 2022-04-26 Cilag Gmbh International Surgical instrument comprising an end effector dampener
US11179152B2 (en) 2017-12-21 2021-11-23 Cilag Gmbh International Surgical instrument comprising a tissue grasping system
US11324501B2 (en) 2018-08-20 2022-05-10 Cilag Gmbh International Surgical stapling devices with improved closure members
JP7163115B2 (ja) * 2018-09-12 2022-10-31 キヤノン株式会社 ロボットシステム、ロボットシステムの制御方法、物品の製造方法、制御装置、操作装置、撮像装置、制御プログラム及び記録媒体
US11696761B2 (en) 2019-03-25 2023-07-11 Cilag Gmbh International Firing drive arrangements for surgical systems
US11903581B2 (en) 2019-04-30 2024-02-20 Cilag Gmbh International Methods for stapling tissue using a surgical instrument
US11452528B2 (en) 2019-04-30 2022-09-27 Cilag Gmbh International Articulation actuators for a surgical instrument
US11432816B2 (en) 2019-04-30 2022-09-06 Cilag Gmbh International Articulation pin for a surgical instrument
US11648009B2 (en) 2019-04-30 2023-05-16 Cilag Gmbh International Rotatable jaw tip for a surgical instrument
US11426251B2 (en) 2019-04-30 2022-08-30 Cilag Gmbh International Articulation directional lights on a surgical instrument
US11471157B2 (en) 2019-04-30 2022-10-18 Cilag Gmbh International Articulation control mapping for a surgical instrument
US11627959B2 (en) 2019-06-28 2023-04-18 Cilag Gmbh International Surgical instruments including manual and powered system lockouts
US11853835B2 (en) 2019-06-28 2023-12-26 Cilag Gmbh International RFID identification systems for surgical instruments
US11291451B2 (en) 2019-06-28 2022-04-05 Cilag Gmbh International Surgical instrument with battery compatibility verification functionality
US11478241B2 (en) 2019-06-28 2022-10-25 Cilag Gmbh International Staple cartridge including projections
US11399837B2 (en) 2019-06-28 2022-08-02 Cilag Gmbh International Mechanisms for motor control adjustments of a motorized surgical instrument
US11638587B2 (en) 2019-06-28 2023-05-02 Cilag Gmbh International RFID identification systems for surgical instruments
US11464601B2 (en) 2019-06-28 2022-10-11 Cilag Gmbh International Surgical instrument comprising an RFID system for tracking a movable component
US11523822B2 (en) 2019-06-28 2022-12-13 Cilag Gmbh International Battery pack including a circuit interrupter
US11771419B2 (en) 2019-06-28 2023-10-03 Cilag Gmbh International Packaging for a replaceable component of a surgical stapling system
US11361176B2 (en) 2019-06-28 2022-06-14 Cilag Gmbh International Surgical RFID assemblies for compatibility detection
US11298127B2 (en) 2019-06-28 2022-04-12 Cilag GmbH Interational Surgical stapling system having a lockout mechanism for an incompatible cartridge
US11684434B2 (en) 2019-06-28 2023-06-27 Cilag Gmbh International Surgical RFID assemblies for instrument operational setting control
US11553971B2 (en) 2019-06-28 2023-01-17 Cilag Gmbh International Surgical RFID assemblies for display and communication
US11298132B2 (en) 2019-06-28 2022-04-12 Cilag GmbH Inlernational Staple cartridge including a honeycomb extension
US11426167B2 (en) 2019-06-28 2022-08-30 Cilag Gmbh International Mechanisms for proper anvil attachment surgical stapling head assembly
US11660163B2 (en) 2019-06-28 2023-05-30 Cilag Gmbh International Surgical system with RFID tags for updating motor assembly parameters
US11350938B2 (en) 2019-06-28 2022-06-07 Cilag Gmbh International Surgical instrument comprising an aligned rfid sensor
US11376098B2 (en) 2019-06-28 2022-07-05 Cilag Gmbh International Surgical instrument system comprising an RFID system
US11497492B2 (en) 2019-06-28 2022-11-15 Cilag Gmbh International Surgical instrument including an articulation lock
US11304696B2 (en) 2019-12-19 2022-04-19 Cilag Gmbh International Surgical instrument comprising a powered articulation system
US11911032B2 (en) 2019-12-19 2024-02-27 Cilag Gmbh International Staple cartridge comprising a seating cam
US11446029B2 (en) 2019-12-19 2022-09-20 Cilag Gmbh International Staple cartridge comprising projections extending from a curved deck surface
US11576672B2 (en) 2019-12-19 2023-02-14 Cilag Gmbh International Surgical instrument comprising a closure system including a closure member and an opening member driven by a drive screw
US11291447B2 (en) 2019-12-19 2022-04-05 Cilag Gmbh International Stapling instrument comprising independent jaw closing and staple firing systems
US11529139B2 (en) 2019-12-19 2022-12-20 Cilag Gmbh International Motor driven surgical instrument
US11844520B2 (en) 2019-12-19 2023-12-19 Cilag Gmbh International Staple cartridge comprising driver retention members
US11529137B2 (en) 2019-12-19 2022-12-20 Cilag Gmbh International Staple cartridge comprising driver retention members
US11504122B2 (en) 2019-12-19 2022-11-22 Cilag Gmbh International Surgical instrument comprising a nested firing member
US11607219B2 (en) 2019-12-19 2023-03-21 Cilag Gmbh International Staple cartridge comprising a detachable tissue cutting knife
US11464512B2 (en) 2019-12-19 2022-10-11 Cilag Gmbh International Staple cartridge comprising a curved deck surface
US11559304B2 (en) 2019-12-19 2023-01-24 Cilag Gmbh International Surgical instrument comprising a rapid closure mechanism
US11701111B2 (en) 2019-12-19 2023-07-18 Cilag Gmbh International Method for operating a surgical stapling instrument
USD974560S1 (en) 2020-06-02 2023-01-03 Cilag Gmbh International Staple cartridge
USD966512S1 (en) 2020-06-02 2022-10-11 Cilag Gmbh International Staple cartridge
USD975850S1 (en) 2020-06-02 2023-01-17 Cilag Gmbh International Staple cartridge
USD975851S1 (en) 2020-06-02 2023-01-17 Cilag Gmbh International Staple cartridge
USD976401S1 (en) 2020-06-02 2023-01-24 Cilag Gmbh International Staple cartridge
USD975278S1 (en) 2020-06-02 2023-01-10 Cilag Gmbh International Staple cartridge
USD967421S1 (en) 2020-06-02 2022-10-18 Cilag Gmbh International Staple cartridge
US20220031350A1 (en) 2020-07-28 2022-02-03 Cilag Gmbh International Surgical instruments with double pivot articulation joint arrangements
USD1013170S1 (en) 2020-10-29 2024-01-30 Cilag Gmbh International Surgical instrument assembly
US11844518B2 (en) 2020-10-29 2023-12-19 Cilag Gmbh International Method for operating a surgical instrument
US11931025B2 (en) 2020-10-29 2024-03-19 Cilag Gmbh International Surgical instrument comprising a releasable closure drive lock
US11517390B2 (en) 2020-10-29 2022-12-06 Cilag Gmbh International Surgical instrument comprising a limited travel switch
US11534259B2 (en) 2020-10-29 2022-12-27 Cilag Gmbh International Surgical instrument comprising an articulation indicator
US11617577B2 (en) 2020-10-29 2023-04-04 Cilag Gmbh International Surgical instrument comprising a sensor configured to sense whether an articulation drive of the surgical instrument is actuatable
US11779330B2 (en) 2020-10-29 2023-10-10 Cilag Gmbh International Surgical instrument comprising a jaw alignment system
US11896217B2 (en) 2020-10-29 2024-02-13 Cilag Gmbh International Surgical instrument comprising an articulation lock
US11452526B2 (en) 2020-10-29 2022-09-27 Cilag Gmbh International Surgical instrument comprising a staged voltage regulation start-up system
US11717289B2 (en) 2020-10-29 2023-08-08 Cilag Gmbh International Surgical instrument comprising an indicator which indicates that an articulation drive is actuatable
USD980425S1 (en) 2020-10-29 2023-03-07 Cilag Gmbh International Surgical instrument assembly
US20240090962A1 (en) * 2020-11-30 2024-03-21 Intuitive Surgical Operations, Inc. Systems and methods for providing synthetic indicators in a user interface for a robot-assisted system
US11653920B2 (en) 2020-12-02 2023-05-23 Cilag Gmbh International Powered surgical instruments with communication interfaces through sterile barrier
US11890010B2 (en) 2020-12-02 2024-02-06 Cllag GmbH International Dual-sided reinforced reload for surgical instruments
US11944296B2 (en) 2020-12-02 2024-04-02 Cilag Gmbh International Powered surgical instruments with external connectors
US11653915B2 (en) 2020-12-02 2023-05-23 Cilag Gmbh International Surgical instruments with sled location detection and adjustment features
US11849943B2 (en) 2020-12-02 2023-12-26 Cilag Gmbh International Surgical instrument with cartridge release mechanisms
US11678882B2 (en) 2020-12-02 2023-06-20 Cilag Gmbh International Surgical instruments with interactive features to remedy incidental sled movements
US11744581B2 (en) 2020-12-02 2023-09-05 Cilag Gmbh International Powered surgical instruments with multi-phase tissue treatment
US11627960B2 (en) 2020-12-02 2023-04-18 Cilag Gmbh International Powered surgical instruments with smart reload with separately attachable exteriorly mounted wiring connections
US11737751B2 (en) 2020-12-02 2023-08-29 Cilag Gmbh International Devices and methods of managing energy dissipated within sterile barriers of surgical instrument housings
US11793514B2 (en) 2021-02-26 2023-10-24 Cilag Gmbh International Staple cartridge comprising sensor array which may be embedded in cartridge body
US11950777B2 (en) 2021-02-26 2024-04-09 Cilag Gmbh International Staple cartridge comprising an information access control system
US11696757B2 (en) 2021-02-26 2023-07-11 Cilag Gmbh International Monitoring of internal systems to detect and track cartridge motion status
US11812964B2 (en) 2021-02-26 2023-11-14 Cilag Gmbh International Staple cartridge comprising a power management circuit
US11950779B2 (en) 2021-02-26 2024-04-09 Cilag Gmbh International Method of powering and communicating with a staple cartridge
US11744583B2 (en) 2021-02-26 2023-09-05 Cilag Gmbh International Distal communication array to tune frequency of RF systems
US11751869B2 (en) 2021-02-26 2023-09-12 Cilag Gmbh International Monitoring of multiple sensors over time to detect moving characteristics of tissue
US11723657B2 (en) 2021-02-26 2023-08-15 Cilag Gmbh International Adjustable communication based on available bandwidth and power capacity
US11925349B2 (en) 2021-02-26 2024-03-12 Cilag Gmbh International Adjustment to transfer parameters to improve available power
US11749877B2 (en) 2021-02-26 2023-09-05 Cilag Gmbh International Stapling instrument comprising a signal antenna
US11701113B2 (en) 2021-02-26 2023-07-18 Cilag Gmbh International Stapling instrument comprising a separate power antenna and a data transfer antenna
US11730473B2 (en) 2021-02-26 2023-08-22 Cilag Gmbh International Monitoring of manufacturing life-cycle
US11826012B2 (en) 2021-03-22 2023-11-28 Cilag Gmbh International Stapling instrument comprising a pulsed motor-driven firing rack
US11717291B2 (en) 2021-03-22 2023-08-08 Cilag Gmbh International Staple cartridge comprising staples configured to apply different tissue compression
US11737749B2 (en) 2021-03-22 2023-08-29 Cilag Gmbh International Surgical stapling instrument comprising a retraction system
US11723658B2 (en) 2021-03-22 2023-08-15 Cilag Gmbh International Staple cartridge comprising a firing lockout
US11826042B2 (en) 2021-03-22 2023-11-28 Cilag Gmbh International Surgical instrument comprising a firing drive including a selectable leverage mechanism
US11806011B2 (en) 2021-03-22 2023-11-07 Cilag Gmbh International Stapling instrument comprising tissue compression systems
US11759202B2 (en) 2021-03-22 2023-09-19 Cilag Gmbh International Staple cartridge comprising an implantable layer
US11793516B2 (en) 2021-03-24 2023-10-24 Cilag Gmbh International Surgical staple cartridge comprising longitudinal support beam
US11786239B2 (en) 2021-03-24 2023-10-17 Cilag Gmbh International Surgical instrument articulation joint arrangements comprising multiple moving linkage features
US11849945B2 (en) 2021-03-24 2023-12-26 Cilag Gmbh International Rotary-driven surgical stapling assembly comprising eccentrically driven firing member
US11903582B2 (en) 2021-03-24 2024-02-20 Cilag Gmbh International Leveraging surfaces for cartridge installation
US11944336B2 (en) 2021-03-24 2024-04-02 Cilag Gmbh International Joint arrangements for multi-planar alignment and support of operational drive shafts in articulatable surgical instruments
US11896218B2 (en) 2021-03-24 2024-02-13 Cilag Gmbh International Method of using a powered stapling device
US11744603B2 (en) 2021-03-24 2023-09-05 Cilag Gmbh International Multi-axis pivot joints for surgical instruments and methods for manufacturing same
US11896219B2 (en) 2021-03-24 2024-02-13 Cilag Gmbh International Mating features between drivers and underside of a cartridge deck
US11857183B2 (en) 2021-03-24 2024-01-02 Cilag Gmbh International Stapling assembly components having metal substrates and plastic bodies
US11786243B2 (en) 2021-03-24 2023-10-17 Cilag Gmbh International Firing members having flexible portions for adapting to a load during a surgical firing stroke
US11849944B2 (en) 2021-03-24 2023-12-26 Cilag Gmbh International Drivers for fastener cartridge assemblies having rotary drive screws
US11832816B2 (en) 2021-03-24 2023-12-05 Cilag Gmbh International Surgical stapling assembly comprising nonplanar staples and planar staples
US11826047B2 (en) 2021-05-28 2023-11-28 Cilag Gmbh International Stapling instrument comprising jaw mounts
US11877745B2 (en) 2021-10-18 2024-01-23 Cilag Gmbh International Surgical stapling assembly having longitudinally-repeating staple leg clusters
US11937816B2 (en) 2021-10-28 2024-03-26 Cilag Gmbh International Electrical lead arrangements for surgical instruments
WO2023187586A1 (en) * 2022-03-31 2023-10-05 Medical Microinstruments Inc. Method for controlling a slave device, controlled by a master device movable by an operator in a robotic system for medical or surgical teleoperation, close to motion limits of the slave device, and related robotic system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009542362A (ja) * 2006-06-29 2009-12-03 インテュイティブ サージカル インコーポレイテッド コンピュータディスプレイ画面の境界領域に表示されるツール位置および識別指標
US20140046341A1 (en) * 2012-08-08 2014-02-13 Intuitive Surgical Operations, Inc. Auto exposure of a camera in a surgical robot
JP2015150340A (ja) * 2014-02-18 2015-08-24 オリンパス株式会社 マニピュレータ装置の制御方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6468265B1 (en) * 1998-11-20 2002-10-22 Intuitive Surgical, Inc. Performing cardiac surgery without cardioplegia
JP4624572B2 (ja) * 2001-01-30 2011-02-02 オリンパス株式会社 内視鏡
WO2012078989A1 (en) * 2010-12-10 2012-06-14 Wayne State University Intelligent autonomous camera control for robotics with medical, military, and space applications
US8911453B2 (en) * 2010-12-21 2014-12-16 Restoration Robotics, Inc. Methods and systems for directing movement of a tool in hair transplantation procedures
US9119655B2 (en) * 2012-08-03 2015-09-01 Stryker Corporation Surgical manipulator capable of controlling a surgical instrument in multiple modes
US10052157B2 (en) * 2011-08-21 2018-08-21 M.S.T. Medical Surgery Technologies Ltd Device and method for assisting laparoscopic surgery—rule based approach
WO2013027202A2 (en) * 2011-08-21 2013-02-28 M.S.T. Medical Surgery Technologies Ltd. Device and method for asissting laparoscopic surgery - rule based approach
US9204939B2 (en) * 2011-08-21 2015-12-08 M.S.T. Medical Surgery Technologies Ltd. Device and method for assisting laparoscopic surgery—rule based approach
EP2953520A4 (en) * 2013-02-05 2016-11-09 Olympus Corp ROBOT-ASSISTED SURGICAL SYSTEM AND CONTROL PROCESS THEREFOR
EP3084747B1 (en) * 2013-12-20 2022-12-14 Intuitive Surgical Operations, Inc. Simulator system for medical procedure training
CN115590628A (zh) * 2014-03-17 2023-01-13 直观外科手术操作公司(Us) 用于对成像装置和输入控制装置重定中心的系统和方法
US11116383B2 (en) * 2014-04-02 2021-09-14 Asensus Surgical Europe S.à.R.L. Articulated structured light based-laparoscope

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009542362A (ja) * 2006-06-29 2009-12-03 インテュイティブ サージカル インコーポレイテッド コンピュータディスプレイ画面の境界領域に表示されるツール位置および識別指標
US20140046341A1 (en) * 2012-08-08 2014-02-13 Intuitive Surgical Operations, Inc. Auto exposure of a camera in a surgical robot
JP2015150340A (ja) * 2014-02-18 2015-08-24 オリンパス株式会社 マニピュレータ装置の制御方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200028046A (ko) * 2017-08-10 2020-03-13 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 수술 시스템에서 사용 가능한 기구 수명 증가
CN111093551A (zh) * 2017-08-10 2020-05-01 直观外科手术操作公司 远程手术系统的增加的可用器械寿命
JP2020529901A (ja) * 2017-08-10 2020-10-15 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 遠隔手術システムでの器具の使用可能寿命の延長
KR102378260B1 (ko) * 2017-08-10 2022-03-25 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 수술 시스템에서 사용 가능한 기구 수명 증가
KR20220042477A (ko) * 2017-08-10 2022-04-05 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 수술 시스템에서 사용 가능한 기구 수명 증가
US11617628B2 (en) 2017-08-10 2023-04-04 Intuitive Surgical Operations, Inc. Increased usable instrument life in telesurgical systems
CN111093551B (zh) * 2017-08-10 2023-08-11 直观外科手术操作公司 远程手术系统的增加的可用器械寿命
KR102607089B1 (ko) * 2017-08-10 2023-11-29 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 수술 시스템에서 사용 가능한 기구 수명 증가
WO2020054268A1 (ja) * 2018-09-14 2020-03-19 国立大学法人 東京大学 情報処理装置、ロボットハンド制御システム、及びロボットハンド制御プログラム
JP2020044581A (ja) * 2018-09-14 2020-03-26 国立大学法人 東京大学 情報処理装置、ロボットハンド制御システム、及びロボットハンド制御プログラム
JP7248271B2 (ja) 2018-09-14 2023-03-29 国立大学法人 東京大学 情報処理装置、ロボットハンド制御システム、及びロボットハンド制御プログラム
WO2023238891A1 (ja) * 2022-06-09 2023-12-14 株式会社メディカロイド 手術システム

Also Published As

Publication number Publication date
JP6180692B1 (ja) 2017-08-16
JPWO2017115425A1 (ja) 2017-12-28
US11051897B2 (en) 2021-07-06
US20180296290A1 (en) 2018-10-18

Similar Documents

Publication Publication Date Title
JP6180692B1 (ja) 医療用マニピュレータシステム
US20230157776A1 (en) Systems and methods for constraining a virtual reality surgical system
US11872006B2 (en) Systems and methods for onscreen identification of instruments in a teleoperational medical system
US10542908B2 (en) Surgical equipment control input visualization field
US20190022857A1 (en) Control apparatus and control method
US10881268B2 (en) Device to set and retrieve a reference point during a surgical procedure
US20210322125A1 (en) Medical safety control apparatus, medical safety control method, and medical support system
CN113440263B (zh) 计算机辅助式远程操作系统中的次级器械控制
KR20120004479A (ko) 수술 로봇의 통합적 표현
CN107107338A (zh) 用于安全地联接和断开输入设备的方法
US11209954B2 (en) Surgical robotic system using dynamically generated icons to represent orientations of instruments
JP2021019949A (ja) 手術システム
US11880513B2 (en) System and method for motion mode management
CN113271884A (zh) 用于与成像设备集成运动的系统和方法
JP5800609B2 (ja) 医療用マスタスレーブマニピュレータ
US20210030502A1 (en) System and method for repositioning input control devices
US10729505B2 (en) Medical system
GB2545291A (en) Robotic system

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2017525128

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15912091

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15912091

Country of ref document: EP

Kind code of ref document: A1