WO2009107703A1 - 体内挿入器具の種類を識別可能な手術支援システム - Google Patents

体内挿入器具の種類を識別可能な手術支援システム Download PDF

Info

Publication number
WO2009107703A1
WO2009107703A1 PCT/JP2009/053507 JP2009053507W WO2009107703A1 WO 2009107703 A1 WO2009107703 A1 WO 2009107703A1 JP 2009053507 W JP2009053507 W JP 2009053507W WO 2009107703 A1 WO2009107703 A1 WO 2009107703A1
Authority
WO
WIPO (PCT)
Prior art keywords
instrument
marker
dimensional shape
support system
dimensional
Prior art date
Application number
PCT/JP2009/053507
Other languages
English (en)
French (fr)
Inventor
清二 山本
利久 高井
悦一 林本
三浦　曜
Original Assignee
国立大学法人浜松医科大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2008045330A external-priority patent/JP5213200B2/ja
Priority claimed from JP2008045331A external-priority patent/JP5213201B2/ja
Application filed by 国立大学法人浜松医科大学 filed Critical 国立大学法人浜松医科大学
Publication of WO2009107703A1 publication Critical patent/WO2009107703A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/90—Identification means for patients or instruments, e.g. tags
    • A61B90/94—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983—Reference marker arrangements for use with image guided surgery

Definitions

  • the present invention relates to a surgery support system that can identify the type of in-vivo insertion instrument (surgical instrument, rigid endoscope, etc.) in use.
  • a surgery support system that performs surgery in an MRI or X-ray CT apparatus
  • problems such as limitations on instruments that can be used and limitations on surgical space.
  • a 3D tomographic image of a patient is captured by MRI or X-ray CT before surgery, and the patient is fixed during surgery and the position of the patient and the 3D tomographic image captured before surgery.
  • Techniques for matching are also known.
  • Patent Document 1 describes a surgery support system developed by the present inventors.
  • a three-dimensional tomographic image is captured in advance by MRI, X-ray CT, etc., and the shape and position of the patient are measured by a non-contact optical (grid projection) three-dimensional shape measuring device during the operation. Measure. Then, while measuring the shape and position of the patient in real time, the patient is aligned with a pre-imaged three-dimensional tomogram and used for surgical support.
  • this operation support system since only a non-contact optical three-dimensional shape measuring device is used during the operation, there are almost no problems such as limitation of instruments that can be used and limitation of the surgical field, and further exposure of X-rays and the like. There is no worry. Further, even if the patient moves, it can be followed by the three-dimensional shape measuring apparatus, so there is no need to fix the patient.
  • the three-dimensional shape measurement is a measurement for acquiring coordinate data (point group data) of a large number of points on the surface.
  • point group data since the portion inserted into the body of the surgical instrument is elongated, the point group data acquired at the elongated portion is small. In order to acquire the coordinate data of the point at the tip of the elongated portion, it is necessary to measure the point cloud data to be acquired many times more than usual.
  • the in-body insertion instrument of the surgical support system shown in Patent Document 1 is used for detecting the position and posture of the instrument.
  • a plurality of markers are provided. These markers have a size and a three-dimensional shape that can be easily measured by an optical three-dimensional shape measuring device. The relative positions between the markers, the three-dimensional shape of the markers, and The three-dimensional relative positional relationship is registered in advance. Therefore, if the position and three-dimensional shape of each marker are measured with an optical three-dimensional shape measuring apparatus, each marker can be identified and the position of each marker can be measured, and the position and posture of the insertion tool can be measured. .
  • the optical three-dimensional shape measuring apparatus By using a marker that can be easily detected by the optical three-dimensional shape measuring apparatus, it becomes easy to measure and calculate the position and posture of the intracorporeal instrument, and the position and posture can be measured in real time.
  • the material and shape of the marker are not particularly limited as long as they can withstand sterilization operations for surgery (for example, autoclaving such as 120 degrees Celsius for 15 minutes), but white Teflon spheres or the like are used.
  • the position and posture of the intracorporeal instrument can be measured. However, since a part of the marker body may enter the blind spot of the optical three-dimensional shape measuring apparatus, there are four marker bodies. The degree is preferred.
  • Patent Documents 2 to 6 can be cited as conventional techniques other than Patent Document 1 in which similar techniques are written.
  • Patent Documents 2 to 6 describe providing a marker (marker) for position detection on an instrument used under a surgery support system.
  • the label bodies (markers) themselves are illuminants, or these labels are separate from the three-dimensional shape measuring device for measuring the three-dimensional surface shape of a patient.
  • the operation support system of Patent Document 1 that detects the position of the marker using the three-dimensional shape measuring apparatus for measuring the three-dimensional surface shape of the patient;
  • the system is complicated by installing a device that detects the position separately from the three-dimensional shape measuring device, and it is also necessary to coordinate the data among a plurality of three-dimensional measuring devices. Not right.
  • JP 2007-209531 A Japanese National Publication No. 9-511430 Special table 2003-528688 gazette JP 2005-518264 JP 2007-260404 A JP 2007-531596 A
  • various in-vivo insertion instruments such as surgical instruments and rigid endoscopes
  • a plurality of intracorporeal instruments may be used by switching, or a plurality may be used simultaneously.
  • the position and orientation of the in-vivo insertion instrument are measured based on the positions of the plurality of marker bodies for position and orientation detection, and the in-vivo insertion instrument is determined based on the pre-registered shape data of the in-vivo insertion instrument.
  • the coordinates of the tip and the like are calculated.
  • shape data is registered for each type.
  • Patent Document 6 describes a technique for identifying the type of an in-vivo insertion instrument using a plurality of display detection devices (130, 132, 134) provided in the in-body insertion instrument.
  • the display detection device (130, 132, 134) is provided separately from a plurality of reference members (102, 104, 106) for measuring the position and posture of the intracorporeal instrument, the display detection A device for reading the device (identifier) also needs to be provided separately, which complicates the system.
  • the in-body insertion instrument requires delicate operability, it is desirable that an extra device such as the display detection device (identifier) is not attached as much as possible. This is because the size, shape, balance, etc. of surgical instruments have been established based on many years of experience, and instruments with poor balance can significantly impair operability.
  • the display detection device of Patent Document 6 displays identification information on a plane, and the direction range in which the identification information can be detected is narrow. Further, since the display detection device is provided separately from a plurality of reference members for measuring the position and posture of the intracorporeal insertion instrument, the display detection device is likely to enter a blind spot such as the reference member or an operator's hand. Therefore, in order to identify an in-vivo insertion tool that is operated by a surgeon with a hand, a display detection apparatus such as Patent Document 6 is not convenient.
  • the marker is large and has a diameter of about several centimeters, which is a hindrance in surgery that requires accuracy in mm units. For this reason, it is conceivable to devise the arrangement of a plurality of markers so as not to obstruct the field of view and operation as much as possible.
  • an instrument used with the right hand an instrument for the left hand may be inserted on the left side toward the patient. Therefore, it is conceivable to arrange a marker so as to open the left side as much as possible toward the patient.
  • an intracorporeal instrument such as a surgical instrument is used for very fine work, and even a slight shift in the position of the center of gravity may affect the work. This is because the size, shape, balance, etc. of surgical instruments have been established based on many years of experience, and instruments with poor balance can significantly impair operability.
  • the present invention solves the above-described problems.
  • a surgical support system using a three-dimensional shape measuring apparatus for measuring a three-dimensional surface shape of a patient the measurement is performed by the three-dimensional shape measuring apparatus without attaching a new identifier.
  • the present invention when a plurality of position detection markers are provided on an in-vivo insertion instrument used within a measurement range of a three-dimensional position measuring device (particularly, an optical three-dimensional shape measuring device), the plurality of marker bodies are asymmetrical.
  • an intraoperative instrument for a surgical support system with good operability in which the center of gravity of all the plurality of marker bodies is close to the axis of the intracorporeal instrument.
  • a surgical support system comprising a three-dimensional shape measuring means for measuring a three-dimensional surface shape of a patient, a plurality of types of in-vivo insertion devices to be inserted into the patient's body, and a control means
  • the in-vivo insertion device has a plurality of marker bodies whose positions and three-dimensional shapes can be measured by the three-dimensional shape measuring means in a portion that is not inserted into the body, and based on the positions and three-dimensional shapes of these marker bodies.
  • the position and posture of the internal insertion instrument can be measured, At least one of the relative position between the labeled bodies and the three-dimensional shape of the labeled body of the body insertion device is different for each body insertion device, and these pieces of information are stored in advance in the control means,
  • the control means calculates the position and posture of the in-vivo insertion instrument and identifies the type of the in-vivo insertion instrument based on the position and three-dimensional shape of the marker of the in-vivo insertion instrument measured by the three-dimensional shape measurement means.
  • An intracorporeal instrument used within a measurement range of the three-dimensional shape measuring means in a surgical support system having a three-dimensional shape measuring means for measuring a three-dimensional surface shape of a patient has at least a plurality of marker bodies whose positions and three-dimensional shapes can be measured by the three-dimensional shape measuring means in a portion that is not inserted into the body, and based on the positions and three-dimensional shapes of these marker bodies.
  • the position and posture of the internal insertion instrument can be measured,
  • the relative position between the labeled bodies and the three-dimensional shape of the labeled body of the body insertion device are different for each type of body insertion device,
  • Based on the position and three-dimensional shape of the marker of the in-vivo insertion instrument measured by the three-dimensional shape measuring means it is possible to calculate the position and posture of the in-vivo insertion instrument and identify the type of the in-vivo insertion instrument.
  • the marker is a sphere, and the type of the body insertion device is identified by making the diameter of the sphere different for each body insertion device.
  • the intracorporeal instrument is a surgical instrument or a rigid endoscope.
  • At least one of the plurality of marker bodies of the internal insertion instrument has a different weight from the other marker bodies;
  • the arrangement and weight of the plurality of marker bodies are set so that the axial center of the body insertion instrument and the center of gravity of the entire marker body are close to each other.
  • the body insertion device is provided with a first arm that extends in the body insertion direction of the body insertion device, and a second arm that extends in a direction that forms a certain angle with the first arm,
  • the two marker bodies disposed on the second arm are disposed asymmetrically with respect to the central axis of the in-vivo insertion instrument and have different weights. By varying the size or specific gravity of the labeled body, the weight of the labeled body is varied.
  • At least one of the relative position between the labeled bodies and the three-dimensional shape can be used for identification of the insertion tool in the body, but the three-dimensional shape is first obtained in the measurement by the three-dimensional shape measuring apparatus. It is preferable to identify the insertion instrument using the three-dimensional shape of the marker. Further, the in-vivo insertion device may be identified using both the three-dimensional shape of the marker and the relative position between the markers. Note that the difference in three-dimensional shape includes not only different shapes but also similar shapes and different sizes (such as different sphere diameters and cube side lengths).
  • identifying the type of internal insertion device means not only identifying which type / shape of the internal insertion device of different types / shapes, but also in the case of the same shape of the internal insertion device. Since the shape may be different due to manufacturing errors or deformation during use, it also includes individual identification of these intracorporeal instruments. In addition, since the present invention can identify an intracorporeal instrument, an alarm unit that issues an alarm when an incorrect instrument is selected may be further provided.
  • the phrase “so that the axial center of the internal insertion instrument and the center of gravity of the entire marker body are close to each other” means that the axial center of the internal insertion instrument and the center of gravity of the entire marker body operate the internal insertion instrument. It means that the distance is set so as not to impair the performance, and it is most preferable that the axial center of the in-vivo insertion instrument and the center of gravity of the entire marker body are located closest to each other.
  • the “center of gravity position of the entire marker” includes the center of gravity including the weight of the arm to which the marker is attached, in addition to the center of gravity based on the weight of the marker itself.
  • the present invention employs the above-described configuration, so that in the operation support system using the three-dimensional shape measuring apparatus for measuring the three-dimensional surface shape of the patient, the marker for position and orientation detection measured by the three-dimensional shape measuring apparatus is used. Based on the position and the three-dimensional shape, the in-vivo insertion device in use can be identified quickly and accurately. In addition, the position and three-dimensional shape of the marker body of the intracorporeal insertion instrument are measured using a three-dimensional shape measuring apparatus that measures the three-dimensional surface shape of the patient, and the position and orientation of the intracorporeal insertion instrument are measured based on the measurement result. Therefore, the system configuration can be simplified.
  • the three-dimensional shape of the marker is used for identifying the body insertion device, many identifiable variations can be taken, and many body insertion devices can be identified. Further, since the type of the in-vivo insertion instrument is identified by the position / orientation detection marker, there is no need to provide a new identifier, and the operability of the in-vivo insertion instrument is not impaired. In addition, since the marker for position and orientation detection is used for identification of the in-vivo insertion instrument, even if the in-vivo insertion instrument is held in hand, it is less likely to enter the blind spot of the three-dimensional shape measuring apparatus, with higher accuracy. Identification of the type of intracorporeal instrument is possible.
  • the three-dimensional shape (shape, size) of the plurality of markers attached to the in-body insertion device it becomes easier to identify which of the plurality of markers is the in-body insertion.
  • the accuracy and detection speed of the position / orientation detection of the instrument is improved.
  • the position of the center of gravity can be brought closer to the axis of the body insertion instrument by adjusting the weight of the plurality of marker bodies, and the operation of the body insertion instrument can be performed.
  • Improves Since the influence of the moment due to the provision of the marker body can be canceled by adjusting the weight of the marker body, the degree of freedom of the position where the marker body is provided is increased and the marker body can be operated easily. Can be placed.
  • the present invention is particularly effective for a marker for position and posture detection in a surgical operation support system using a three-dimensional shape measuring apparatus in which the marker tends to be large.
  • the block diagram which shows schematic structure of a surgery assistance system.
  • the figure which shows the relationship between a surgical instrument and a three-dimensional shape measuring apparatus.
  • the figure showing an example of a surgical instrument.
  • the schematic diagram of FIG. The figure which looked at the arrangement
  • An example of a marker arrangement different from FIG. An example in which the marker is a sphere, and the insertion tool is identified by the diameter of the sphere.
  • Another example of an intracorporeal instrument (surgical scissors).
  • FIG. 1 shows a surgery support system 10 according to the present embodiment.
  • the surgery support system 10 includes a computer 12 composed of a personal computer (PC) or the like.
  • the computer 12 includes a CPU 12A, a ROM 12B, a RAM 12C, and an input / output port 12D.
  • the input / output port 12D has a keyboard 14 and mouse 16 for allowing the user to input arbitrary information and give various instructions, a display 18 comprising an LCD or CRT, which can display arbitrary information, a hard disk drive (HDD). ) 20 and the CD-ROM drive 22 are connected to each other.
  • a computer 12 composed of a personal computer (PC) or the like.
  • the computer 12 includes a CPU 12A, a ROM 12B, a RAM 12C, and an input / output port 12D.
  • the input / output port 12D has a keyboard 14 and mouse 16 for allowing the user to input arbitrary information and give various instructions, a display 18 comprising an LCD or CRT, which can
  • An input / output port 12D of the computer 12 has an MRI imaging apparatus 24 capable of imaging a high-definition tomographic image (MRI image) of a living body in an arbitrary direction by nuclear magnetic resonance computed tomography, and a three-dimensional shape measurement. Each device 30 is connected. Note that video cameras (for example, three) can be connected to the input / output port 12D. The video camera is not essential to the present invention and can be used as necessary.
  • the MRI imaging apparatus 24 is installed in an MRI imaging room that is provided separately from the operating room in which surgery is performed. Note that when the computer 12 executes the MRI image display process, the computer 12 only needs to be able to acquire the data of the MRI image taken by the MRI imaging apparatus 24 before the operation from the MRI imaging apparatus 24.
  • the MRI image data may be sent from the MRI imaging apparatus 24 to the computer 12 via any one of various recording media by a corresponding reading device.
  • FIG. 1 shows a surgical instrument 36 used by an operator during an operation.
  • This surgical instrument 36 is a rod-shaped instrument, and includes a non-exposed side 39 including a distal end portion 38 that is a non-exposed portion that contacts or enters an object (surgical site) in the surgical field, And an exposed side 40 that becomes an exposed portion such as possessed.
  • a predetermined number for example, four
  • spheres 37 having a predetermined diameter for example, 11 to 19 mm
  • the sphere 37 serves as a detection reference for specifying the position (position and posture) of each part of the surgical instrument 36.
  • the shape of the surgical instrument 36 is measured in advance, and the positional relationship of the sphere 37 with respect to the surgical instrument 36 is also measured in advance. These measurement data are stored in the HDD 20 in advance.
  • the three-dimensional shape measuring device 30 is provided as the surgery support system 10, but this three-dimensional shape measuring device 30 measures the shape of the patient's face and the like, and the surgical instrument during the operation. It is also used to measure different objects (three-dimensional positions thereof) in which position and orientation are detected.
  • the three-dimensional shape measuring apparatus 30 includes a three-dimensional region that covers at least the entire face portion of the object that is the patient and covers the operation range in which the operator operates the surgical instrument 36. It is preferable to install as described above. In this case, as an example of a position that does not interfere with the operator during the operation of the operation, it is preferable to install the vicinity of the surgical site at a position where the three-dimensional shape can be measured from obliquely above the target object (upper right direction in FIG. 2). In this way, the three-dimensional shape measuring apparatus 30 detects the shape of the head or the face of the subject that is the patient, and measures the three-dimensional coordinates of each part.
  • the three-dimensional shape measuring apparatus 30 measures the three-dimensional coordinates of the sphere 37 made of a material having a high light reflectance attached to the surgical instrument 36.
  • sinus surgery is shown as an example, but a cloth called drape covering a patient whose nose is exposed during the surgery is omitted.
  • FIG. 3 shows an example of the surgical instrument 36 used in the surgery support system of the present embodiment.
  • 4 is a photograph showing a state in which the surgical instrument 36 is inserted into the nasal cavity
  • FIG. 5 is a schematic diagram thereof.
  • the surgical instrument 36 in FIG. 3 is a suction tube, but the surgical instrument is not limited to a suction tube, and may be a rigid endoscope, surgical forceps, surgical scissors, or the like.
  • a sign body attaching portion 41 is attached to the surgical instrument 36, and sign bodies 37A to 37D for position and orientation detection are attached to the sign body attaching portion 41.
  • the marker 37 has a shape and size (for example, a sphere having a diameter of 11 to 19 mm) that can be easily detected by the three-dimensional shape measuring apparatus 30.
  • the shapes of the marker bodies 37A to 37D are spheres. However, the shape is not limited to this. It does not matter in shape. Moreover, in the example of a figure, although the number of the label
  • the surgical instrument 36, the sign body attaching portion 41, and the sign bodies 37A to 37D are firmly fixed.
  • FIG. 6 shows an example of the arrangement of the label bodies 37A to 37D.
  • FIG. 6 is a view of the marker bodies 37A to 37D of FIGS. 3 to 5 as viewed from directly above, and the upper part of the drawings is the insertion direction in the body.
  • Each of the marker bodies 37A to 37D is attached to an arm 42 provided in the marker body attaching portion 41.
  • one arm is parallel to the body insertion direction and the other arm is orthogonal to the body insertion direction, but the direction of the arm is not limited to this.
  • two arms may intersect at an angle other than a right angle, or the arms and the body insertion direction may not be parallel but may have a certain angle as shown in FIG.
  • FIG. 8 shows an example in which a sphere is used as the marker 37 for position and orientation detection, and the diameter of the sphere is varied for each type of in-body insertion device.
  • a sphere having a small diameter is used as the marker 37D
  • a sphere having a large diameter is used in FIG. 8B
  • the type of instrument is identified by the diameter of the sphere.
  • 8 (A) and 8 (B) are suction pipes having different tip shapes, and (A) and (B) the three-dimensional shape of each suction pipe, the relative position between the marked bodies, and the marked body's shape.
  • the three-dimensional shape (spherical information and diameter) is registered in the computer 12 in advance.
  • the in-vivo device may be identified by a combination of different diameters of a plurality of markers.
  • the in-vivo device By using a combination of the diameters of a plurality of marker bodies, more variations can be taken, and a large number of in-vivo insertion devices can be identified.
  • the in-vivo insertion device is identified by the combination of the diameter of the marker and the relative position between the markers, many more variations are possible.
  • the diameter of the marker 37 is identified in units of about 0.4 mm. Is possible. Therefore, for example, if the diameter of the label 37D can be changed between about 11 and 19 mm, about 20 ((19-11) /0.4) diameters can be taken. Since there are a plurality of label bodies 37, many variations are possible depending on the combination if the diameters of the plurality of label bodies are different. Moreover, if Fscan which is a lattice projection type three-dimensional shape measuring device manufactured by Pulstec Industrial Co., Ltd.
  • the distance between the labeled bodies is about 1.0 mm. Can be identified. Therefore, the body insertion device can be identified even if the length of the arms 42A to 42D is different for each body insertion device. Further, more variations are possible by using a combination of the diameter of the marker and the relative position between the markers.
  • FIG. 9 shows an example in which something other than a sphere is used as a marker for position and orientation detection.
  • a cube is used as the marker 37D.
  • the identification by the three-dimensional shape is possible.
  • by registering the position of the cube in advance it can be used as a marker for the position and orientation of the intracorporeal instrument.
  • a cube is used as the marker 37, and since a sphere is used in FIG. 9B, the type of the intracorporeal instrument can be identified by the three-dimensional shape.
  • a cube and a sphere is shown, but the present invention is not limited to this, and anything that can be identified by a three-dimensional shape may be used.
  • a rectangular parallelepiped, a polygonal pyramid (triangular pyramid, quadrangular pyramid,...), An ellipsoid, a polyhedron, a donut shape, and the like are conceivable.
  • the three-dimensional shape of only one label body among the plurality of label bodies is different.
  • the present invention is not limited to this, and a combination of the three-dimensional shapes of the plurality of label bodies can be used for the types of in-vivo insertion devices. Identification may be made. Different three-dimensional shapes include not only different shapes but also similar shapes and different sizes. Therefore, it can also be identified by changing the size. Further, as described above, different relative positions between the labeled bodies may be combined.
  • FIG. 11 shows an example in which the diameters of the spheres of the marker 37 are made different in order to identify the instrument.
  • the diameters of the spheres of the label bodies 37B and 37D are different.
  • 11A shows a large label 37B and a large label 37D
  • FIG. 11B shows a large label 37B and a small label 37D
  • FIG. 11C shows a small label 37B and a label.
  • FIG. 11D shows an example where the label 37B is small and the label 37D is small.
  • This example shows an example in which only the size of the marker is varied.
  • the three-dimensional shape measuring apparatus can actually measure the diameter in units of 0.4 mm, the diameter can be varied in multiple stages. Is possible.
  • the label 37B and the label 37D are different in size.
  • the labels 37A and 37C may be different in size.
  • an example is shown in which an instrument is identified based on the size of two marker bodies.
  • a part of the marker body becomes a blind spot of a three-dimensional shape measuring apparatus. If some of the multiple marking bodies enter the blind spot of the three-dimensional shape measuring device, it is necessary to provide redundancy so that the instrument can be identified from the diameter and arrangement of the other marking bodies. , Become more reliable.
  • FIG. 6 shows an example of the arrangement of the label bodies 37A to 37D.
  • FIG. 6 is a view of the marker bodies 37A to 37D of FIGS. 3 to 5 as viewed from directly above, and the upper part of the drawings is the insertion direction in the body.
  • Each of the marker bodies 37A to 37D is attached to an arm 42 provided in the marker body attaching portion 41. In order to improve the position and orientation detection accuracy of the surgical instrument 36, the arm 42 should be as long as possible.
  • the marker 37 has a slight weight, and the center of gravity of the markers 37A to 37D is preferably as close to the surgical instrument body as possible. Therefore, the markers 37A to 37D are preferably arranged symmetrically.
  • the marker 37 becomes an obstacle in some places.
  • another instrument may be inserted on the left hand side, so it is desirable to keep the left side of the surgical instrument as open as possible. Therefore, it is preferable to shorten the length L A of the arm 42A with the left marker 37A.
  • the arm is long. Therefore, the length L B of the arm 42B with the marker 37B on the right side is preferably long.
  • FIG. 6 shows an example in which one axis of the arm is parallel to the insertion direction in the body and the two arms are orthogonal to each other.
  • the two arms are not necessarily orthogonal to each other.
  • the axis need not be parallel to the body insertion direction. Even in this case, the weight of the marker and the length of the arm in the direction of the long axis indicating the insertion direction in the body and the direction perpendicular thereto so that the position of the center of gravity of the marker and the entire arm is closest to the axis of the surgical instrument main body 36. Can be adjusted.
  • FIG. 7 shows an example in which none of the arms is parallel to the body insertion direction.
  • the weight of the marker and the length of the arm may be adjusted in the following relationship so that the rotational moment with respect to the axis in the body insertion direction is made equal.
  • the center of gravity of the label 37A and the label 37B in the left-right direction is focused.
  • the length of the arm and the weight of the label can be adjusted in the same manner in the label 37C and the label 37D before and after the insertion direction.
  • the arm 42C should be as short as possible.
  • the direction of the marker 37D has a relatively large margin, the arm 42D can be lengthened.
  • the gravity center position in the front-rear direction can be moved by adjusting the weights of the marker 37C and the marker 37D, but the center of gravity in the front-rear direction does not necessarily need to be the center of the arm, and is the most convenient position to use. Adjust so that the center of gravity comes to the center. Even in this way, the center of gravity of the whole of the markers 37A to 37D is the position closest to the axis of the surgical instrument body 36.
  • the longer the arm the higher the accuracy of detecting the position and orientation of the internal insertion device, so the longer the arm in the front-rear direction compared to the left and right direction, the higher the accuracy in detecting the position and orientation of the internal insertion device, and It is possible to improve the position detection accuracy of the tip, which is an important part of the instrument.
  • the size of each of the label bodies 37A to 37D is the same, and the weight of each label body is changed by changing the specific gravity. May be changed.
  • the present invention is not limited to this, and the present invention is also applied to a marker attached to a surgical forceps as shown in FIGS. 10 and 11. can do. Furthermore, the present invention can be applied not only to surgical instruments but also to rigid endoscopes inserted into the body.

Abstract

　患者の３次元表面形状を測定する３次元形状測定装置を用いた手術支援システムにおいて、新たな識別子を取り付けることなく、３次元形状測定装置で測定された位置姿勢検出用の標識体の位置及び立体形状に基づいて、素早く正確に使用中の体内挿入器具を識別する。 　患者の３次元表面形状を測定する３次元形状測定手段と、患者の体内に挿入する複数種類の体内挿入器具と、制御手段とを有する手術支援システムであって、体内挿入器具３６は、３次元形状測定手段で位置及び立体形状が測定可能な標識体３７を複数個有しており、体内挿入器具の標識体の標識体間相対位置と立体形状の少なくとも一方は体内挿入器具ごとに異なっていて、３次元形状測定手段で測定された体内挿入器具の標識体の位置及び立体形状に基づき、体内挿入器具の位置及び姿勢を算出するとともに体内挿入器具の種類を識別する。

Description

体内挿入器具の種類を識別可能な手術支援システム
　本発明は、使用中の体内挿入器具（手術器具、硬性内視鏡、等）の種類を識別可能な手術支援システムに関する。
　ＭＲＩ、Ｘ線ＣＴ等の３次元断層撮影装置を用いた手術支援システムについては研究が進んでおり、既にいくつかの装置は実用化されている。多くの手術支援システムは、ＭＲＩやＸ線ＣＴ等で３次元断層像を撮像しながら手術対象部位や手術器具のモニタリングを行うものであるが、ＭＲＩを用いた場合は手術室内での磁性体や電子機器の使用に制限があり、また、Ｘ線ＣＴを用いた場合は術者の被爆の問題がある。さらに、手術をしながら３次元断層像を撮像する場合は、撮像及び画像処理に十分に時間を取ることができないので解像度や精度に問題がある。加えてＭＲＩやＸ線ＣＴの装置内で手術を行う手術支援システムでは、使用できる器具の制限、手術スペースの制限などの問題がある。これとは別に、手術前にＭＲＩやＸ線ＣＴにより患者の３次元断層像を撮像しておき、手術中は患者を固定しておいて手術前に撮像した３次元断層画像と患者との位置合わせを行う技術も知られている。
　しかしこの手術支援システムでは、患者を動かないように固定する必要があり、患者の負担が大きく、また、固定器具が邪魔になるため手術野を制限してしまう。本発明者らはこれらの問題を解決するために、特許文献１のような手術支援システムを開発している。
　特許文献１には、本発明者らが開発した手術支援システムが記載されている。この手術支援システムでは、事前にＭＲＩやＸ線ＣＴ等で３次元断層像を撮像しておき、手術中には非接触の光学式（格子投影式）３次元形状測定装置により患者の形状及び位置を測定する。そして患者の形状及び位置をリアルタイムで測定しながら、事前に撮像した３次元断層像と位置合わせを行い、手術支援に用いる。この手術支援システムによれば手術中は、非接触の光学式３次元形状測定装置を用いるだけなので、使用できる器具の制限、手術野の制限などの問題はほとんど無く、さらにＸ線等の被爆の心配も無い。また、患者が動いても、３次元形状測定装置で追従できるので、患者を固定する必要もない。
　このような手術支援システムにおいては、手術中に使用する体内挿入器具（手術器具、硬性内視鏡、等）の位置及び姿勢も正確に測定する必要がある。体内挿入器具の位置を検出する装置を、３次元形状測定装置とは別に設けることも考えられるが、新たな装置を設置するとシステムが複雑になり、また複数の３次元測定装置間のデータの座標合わせも必要になり、実用的ではない。このため特許文献１の手術支援システムでは、患者の表面形状を測定する光学式３次元形状測定装置を用いて、体内挿入器具の位置及び姿勢も測定している。
　患者の３次元表面形状を測定する光学式３次元形状測定装置を用いて体内挿入器具の位置及び姿勢を測定する場合、光学式３次元形状測定装置の精度が高ければ、体内挿入器具そのものの形状及び位置を測定することは理論上は可能である。しかしながら、体内挿入器具は複雑で細かい形状をしており、この形状を正確に測定しようとすると測定及び演算に非常に時間が掛かってしまい、リアルタイム性を損なってしまう。また、手術器具の先端位置を正確に検出しないと手術において患部を損傷するという危険があるため、特に手術器具の先端位置の検出は高精度で行う必要がある。３次元形状測定は表面の多数の点の座標データ（点群データ）を取得する測定であるが、手術器具における体内に挿入される箇所は細長いためこの細長い箇所で取得される点群データは少なく、細長い箇所の先端の点の座標データを取得するには取得する点群データを通常より何倍も多くする測定が必要になる。
　そこで適度の測定精度でも体内挿入器具の位置及び姿勢を正確に測定できるようにし演算も簡単にするため、特許文献１に示される手術支援システムの体内挿入器具には器具の位置及び姿勢検出用の複数の標識体が設けられている。これらの標識体は光学式３次元形状測定装置で測定しやすいような大きさ及び立体形状を有しており、標識体間の相対位置、標識体の立体形状、及び標識体と体内挿入器具の３次元相対位置関係は事前に登録されている。したがって、光学式３次元形状測定装置で各標識体の位置及び立体形状を測定すればそれぞれの標識体を識別したうえで各標識体の位置を測定でき、体内挿入器具の位置及び姿勢を測定できる。光学式３次元形状測定装置で検出しやすい標識体を用いることで、体内挿入器具の位置及び姿勢の測定及び演算がしやすくなり、リアルタイムに位置及び姿勢を測定できるようになる。標識体の材質や形状は手術のための滅菌操作（たとえば摂氏１２０度１５分間などオートクレーブ処理）に耐えうるものであれば特に限定されないが、白色テフロン球などが用いられる。また、標識体は少なくとも３個あれば体内挿入器具の位置及び姿勢の測定が可能であるが、標識体の一部が光学式３次元形状測定装置の死角に入ってしまうことがあるので４個程度が好ましい。
　類似の技術が書かれている特許文献１以外の従来技術として、特許文献２～６が挙げられる。特許文献２～６には、手術支援システム下で用いる器具に位置検出用の標識体（マーカー）を設けることが記載されている。しかし、これらの標識体（マーカー）を検出するために、標識体（マーカー）自体が発光体であったり、患者の３次元表面形状を測定するための３次元形状測定装置とは別にこれらの標識体（マーカー）の位置を検出する装置を設けているので、患者の３次元表面形状を測定するための３次元形状測定装置により標識体の位置検出を行っている特許文献１の手術支援システムとは異なり、前述したように３次元形状測定装置とは別に位置を検出する装置を設置することによりシステムが複雑になり、また複数の３次元測定装置間のデータの座標合わせも必要になるため実用的ではない。
特開２００７－２０９５３１号公報 特表平９－５１１４３０号公報 特表２００３－５２８６８８号公報 特表２００５－５１８２６４号公報 特開２００７－２６０４０４号公報 特開２００７－５３１５９６号公報
　上述のような特許文献１に示される３次元形状測定装置を用いた手術支援システム下で行われる手術では、様々な体内挿入器具（手術器具や硬性内視鏡など）が用いられる。複数の体内挿入器具を切り替えて使用することもあるし、複数を同時に使用することもある。このような手術支援システムにおいては、位置姿勢検出用の複数の標識体の位置により体内挿入器具の位置姿勢を測定し、予め登録されている体内挿入器具の形状データに基づいて前記体内挿入器具の先端部等の座標を算出している。この場合、体内挿入器具の形状は器具ごとに異なるため、種類ごとに形状データが登録されている。したがって、現在使用中の体内挿入器具が何であるかを識別する必要がある。手術中は体内挿入器具を頻繁に交換するため、瞬時に体内挿入器具を識別できる必要がある。また、間違って識別してしまうと誤ったナビゲーション情報を提供することになってしまうので、正確に識別する必要もある。
　使用する体内挿入器具を交換するたびに操作卓に器具の種類を入力する方法が考えられるが、手間が掛かるため実用的ではない。また特許文献６には、体内挿入器具に設けられた複数の表示検出装置（１３０、１３２、１３４）により体内挿入器具の種類を識別する技術が記載されている。しかしながら、前記表示検出装置（１３０、１３２、１３４）は、体内挿入器具の位置及び姿勢を測定するための複数の基準部材（１０２、１０４、１０６）とは別に設けられているため、前記表示検出装置（識別子）を読み取るための装置も別途設ける必要があり、システムが複雑になってしまう。さらに、体内挿入器具は繊細な操作性を必要とされるので、前記表示検出装置（識別子）のような余分なものはできるだけ取り付けないほうが望ましい。なぜなら手術器具の大きさ、形状、バランスなどは長年の経験に基づいて確立されてきたものであり、バランスが悪い器具は著しく操作性を損なってしまう可能性があるからである。
　また、特許文献６の前記表示検出装置は平面上に識別情報を表示するものであり、識別情報を検出できる方向範囲が狭い。さらに、前記表示検出装置は、体内挿入器具の位置及び姿勢を測定するための複数の基準部材とは別に設けられているため、前記基準部材や術者の手などの死角に入りやすい。したがって、術者が手で持って操作するような体内挿入器具を識別するのには、特許文献６のような表示検出装置では使い勝手が悪い。
　また、特許文献１に示される３次元形状測定装置を用いた手術支援システムにおいて、３次元形状測定装置により体内挿入器具の位置及び姿勢を測定するためには、体内挿入器具に少なくとも３個の位置検出用の標識体を設ける必要がある。この場合、位置及び姿勢を精度良く測るには、標識体間の距離が大きく、標識体自体もできるだけ大きいほうが望ましい。一方で、手術時に使用する器具であるので、できるだけ視界や動作の妨げになるものは取り付けないほうが望ましく、さらにバランスが悪く操作性を損なうものであってはならない。また、標識体は、大きいもので直径が数ｃｍ程度あり、ｍｍ単位の精度が必要な手術においては邪魔な存在である。そのため、できるだけ視界や動作の妨げにならないように、複数の標識体の配置を工夫することが考えられる。例えば、右手で使う器具の場合は、患者に向かって左側に左手用の器具を挿入することがあるので、患者に向かって左側をできるだけ開放するように標識体を配置するなどが考えられる。しかしながら、このように配置すると、複数の標識体全体の重心が体内挿入器具の軸心から大きく外れてしまうことがある。標識体自体はそんなに重いものではないが、手術器具等の体内挿入器具は非常に細かい作業で用いられるものであるので、ちょっとの重心位置のずれでも作業に影響を与えてしまう可能性がある。なぜなら手術器具の大きさ、形状、バランスなどは長年の経験に基づいて確立されてきたものであり、バランスが悪い器具は著しく操作性を損なってしまう可能性があるからである。
　本発明は上記問題点を解決するもので、患者の３次元表面形状を測定する３次元形状測定装置を用いた手術支援システムにおいて、新たな識別子を取り付けることなく、前記３次元形状測定装置で測定された位置姿勢検出用の標識体の位置及び立体形状に基づいて、素早く正確に使用中の体内挿入器具を識別するシステムを提供することを目的とする。さらに、本発明は、３次元位置測定装置（特に、光学式３次元形状測定装置）の測定範囲内で用いる体内挿入器具に複数の位置検出用の標識体を設けるにあたって、複数の標識体を非対称に設けても、複数の標識体全体の重心位置を前記体内挿入器具の軸心に近くなるようにした、操作性のよい手術支援システム用体内挿入器具を提供することを目的とする。
　上記目的を達成するため、本発明は以下の構成を有する。
　患者の３次元表面形状を測定する３次元形状測定手段と、前記患者の体内に挿入する複数種類の体内挿入器具と、制御手段とを有する手術支援システムであって、
　前記体内挿入器具は、体内に挿入されない部分に、前記３次元形状測定手段で位置及び立体形状が測定可能な標識体を複数個有しており、これらの標識体の位置及び立体形状に基づいて前記体内挿入器具の位置及び姿勢が測定可能であり、
　前記体内挿入器具の標識体の標識体間相対位置と立体形状の少なくとも一方は体内挿入器具ごとに異なっていて、これらの情報は前記制御手段に事前に記憶されており、
　前記制御手段は、前記３次元形状測定手段で測定された前記体内挿入器具の標識体の位置及び立体形状に基づき、前記体内挿入器具の位置及び姿勢を算出するとともに前記体内挿入器具の種類を識別する、
手術支援システム。
　患者の３次元表面形状を測定する３次元形状測定手段を有する手術支援システムにおいて前記３次元形状測定手段の測定範囲内で用いる体内挿入器具であって、
　前記体内挿入器具は、体内に挿入されない部分に、前記３次元形状測定手段で位置及び立体形状が測定可能な標識体を少なくとも複数個有しており、これらの標識体の位置及び立体形状に基づいて前記体内挿入器具の位置及び姿勢が測定可能であり、
　前記体内挿入器具の標識体の標識体間相対位置と立体形状の少なくとも一方は体内挿入器具の種類ごとに異なっており、
　前記３次元形状測定手段で測定された前記体内挿入器具の標識体の位置及び立体形状に基づき、前記体内挿入器具の位置及び姿勢の算出と前記体内挿入器具の種類の識別とが可能である、
手術支援システム用体内挿入器具。
　また、以下の実施態様を採用しても良い。
　前記標識体は球体であり、前記体内挿入器具ごとに球体の直径を異ならせることにより、前記体内挿入器具の種類を識別する。
　前記体内挿入器具は、手術器具または硬性内視鏡である。
　さらに、以下の実施態様を採用しても良い。
　前記体内挿入器具の複数の標識体の少なくとも１個は他の標識体と重さが異なっており、
　前記体内挿入器具の軸心と標識体全体の重心位置とが近くなるように複数の前記標識体の配置及び重さを設定している。
　前記体内挿入器具には、前記体内挿入器具の体内挿入方向に延びた第１アームと、前記第１アームと一定の角度をなす方向に延びた第２アームと、が設けられており、
　前記標識体は４個であり、そのうち２個は前記第１アームに配置されており、残りの２個は前記第２アームに配置されており、
　前記第２アームに配置された２個の標識体は、前記体内挿入器具の中心軸に対して非対称に配置されているとともに、それぞれ重さが異なる。
　前記標識体の大きさまたは比重を異ならせることにより、前記標識体の重さを異ならせる。
　本発明においては体内挿入器具の識別には標識体の標識体間相対位置と立体形状の少なくとも一方を用いることができるが、３次元形状測定装置による測定では立体形状が先に取得されるので、標識体の立体形状を用いて体内挿入器具の識別をするのが好ましい。さらに、標識体の立体形状及び標識体間相対位置の両方を用いて体内挿入器具の識別をしても良い。
　なお、立体形状が異なるというのは、形状そのものが異なるもののほか、相似形状で大きさが異なるもの（球の直径や立方体の辺の長さが異なるなど）も含む。また、標識体間相対位置が異なるというのは、相対位置そのものが異なるもののほか、標識体の定点座標間の位置関係は同じでも標識体自体の３次元的な向き（姿勢）が異なるものも含む。
　および、体内挿入器具の種類を識別する、というのは、異なる種類・形状の体内挿入器具のうちどの種類・形状の体内挿入器具であるかを識別することのほか、同一形状の体内挿入器具でも製造上の誤差や使用中の変形により形状が異なっていることがあるので、それらの体内挿入器具を個体識別することも含んでいる。
　なお、本発明は体内挿入器具の識別ができるので、誤った器具を選択してしまった場合に警報を発する警報手段をさらに設けても良い。
　なお、上記「体内挿入器具の軸心と標識体全体の重心位置とが近くなるように」とは、前記体内挿入器具の軸心と前記標識体全体の重心位置とが前記体内挿入器具の操作性を損なわない程度の距離になるようにすることを意味しており、前記体内挿入器具の軸心と前記標識体全体の重心位置とが最も近い位置になるようにするのが最も好ましい。また、「標識体全体の重心位置」とは、標識体そのものの重さによる重心位置のほか、標識体を取り付けているアームの重さも含めた重心位置も含む。
　本発明は上記構成を採用したことにより、患者の３次元表面形状を測定する３次元形状測定装置を用いた手術支援システムにおいて、３次元形状測定装置で測定された位置姿勢検出用の標識体の位置及び立体形状に基づいて、素早く正確に使用中の体内挿入器具を識別できる。また患者の３次元表面形状を測定する３次元形状測定装置を用いて体内挿入器具の標識体の位置及び立体形状を測定し、その測定結果に基づいて体内挿入器具の位置姿勢を測定するとともに器具の識別を行っているため、システム構成が簡単で済む。また、体内挿入器具の識別に標識体の立体形状を用いていれば、識別可能なバリエーションを多くとることができ、多くの体内挿入器具の識別が可能である。また、位置姿勢検出用の標識体により体内挿入器具の種類を識別しているため、新たな識別子を設ける必要が無く、体内挿入器具の操作性を損なわない。また、位置姿勢検出用の標識体を体内挿入器具の識別に用いているため、体内挿入器具を手に持って使用しても３次元形状測定装置の死角に入ることが少なく、より高い精度で体内挿入器具の種類の識別が可能である。さらに、体内挿入器具に取付けられている複数の標識体の立体形状（形状、大きさ）を異ならせることにより、複数の標識体のうちどの標識体であるかの特定がしやすくなり、体内挿入器具の位置姿勢検出の精度及び検出速度が向上する。
　また、位置検出用の複数の標識体を非対称に配置しても、複数の標識体の重さを調整することで重心位置を体内挿入器具の軸心に近づけることができ、体内挿入器具の操作性が向上する。そして非対称に標識体を設けることによるモーメントの影響を、標識体の重さを調整することでキャンセルできるため、標識体を設ける位置の自由度が上がり、体内挿入器具を操作しやすいように標識体を配置できる。本発明は、標識体が大きくなる傾向がある３次元形状測定装置を用いた手術支援システムにおける位置及び姿勢検出用の標識体に対して特に有効である。
手術支援システムの概略構成を示すブロック図。 手術器具と３次元形状測定装置との関係を示す図。 手術器具の一例を表す図。 手術器具を鼻腔に挿入した写真。 図４の模式図。 標識体の配置を上から見た図。 図６とは異なる標識体配置の例。 標識体が球体で、球体の直径により体内挿入器具を識別する例。 標識体の立体形状により体内挿入器具を識別する例。 体内挿入器具の別の例（手術用ハサミ）。 複数の標識体の大きさを異ならせた例。
　以下、図面を参照して本発明の実施形態の一例を詳細に説明する。なお、以下では本発明を、手術部位としての患者の頭部（特に、顔面や副鼻腔等）についての手術の支援に適用した場合を例に説明するが、本発明はこれに限定されるものではない。
　図１には本実施形態に係る手術支援システム１０が示されている。手術支援システム１０はパーソナル・コンピュータ（ＰＣ）等から成るコンピュータ１２を備えている。コンピュータ１２はＣＰＵ１２Ａ、ＲＯＭ１２Ｂ、ＲＡＭ１２Ｃ及び入出力ポート１２Ｄを備えている。また、入出力ポート１２Ｄには、ユーザが任意の情報を入力したり各種の指示を与えるためのキーボード１４及びマウス１６、ＬＣＤ又はＣＲＴから成り任意の情報を表示可能なディスプレイ１８、ハードディスクドライブ（ＨＤＤ）２０及びＣＤ－ＲＯＭドライブ２２が各々接続されている。また、コンピュータ１２の入出力ポート１２Ｄには、核磁気共鳴コンピュータ断層撮影法により任意の方向についての生体の高精細な断層画像（ＭＲＩ画像）を撮影可能なＭＲＩ撮影装置２４、及び３次元形状測定装置３０が各々接続されている。なお、入出力ポート１２Ｄには、ビデオカメラ（例えば３個）を接続することができる。ビデオカメラは、本発明に必須の構成ではなく、必要に応じて用いることができる。ＭＲＩ撮影装置２４は、手術を行う手術室とは別に設けられたＭＲＩ撮影室に設置されている。なお、コンピュータ１２がＭＲＩ画像表示処理を実行するにあたり、ＭＲＩ撮影装置２４からは手術前にＭＲＩ撮影装置２４によって撮影されたＭＲＩ画像のデータを取得できていればよいので、コンピュータ１２はＭＲＩ撮影装置２４と接続されていなくてもよく、ＭＲＩ画像のデータは各種記録媒体の何れかを介して対応する読み取り装置によりＭＲＩ撮影装置２４からコンピュータ１２へ送られるようにしてもよい。
　図１には、手術者が手術中に用いる手術器具３６が示されている。この手術器具３６は、棒状の器具であり、手術野にあって対象物（手術部位）に接触したり進入したりする非露出部分となる先端部分３８を含む非露出側３９と、手術者が所持する等の露出部分となる露出側４０と、から構成されている。露出側４０には、所定径（例えば１１～１９ｍｍ）の球体３７がアームを介して所定個数（例えば４個）取り付けられている。この球体３７は、手術器具３６の各部分の位置（位置及び姿勢）を特定するための検出基準となるものである。手術器具３６の形状は予め測定されており、手術器具３６に対する球体３７の位置関係も予め測定されている。これらの測定データは、ＨＤＤ２０に予め格納されている。
　ここで、本実施の形態では手術支援システム１０として３次元形状測定装置３０を備えているが、この３次元形状測定装置３０は患者の顔面等の形状測定を行うと共に、手術中の手術器具の位置及び姿勢の検出を行うという、異なる対象物（の３次元位置）を測定することを兼用している。
　図２に示すように、３次元形状測定装置３０は、測定範囲が患者である対象物の顔部分全域を少なくとも含みかつ手術者が手術器具３６を操作する操作範囲を網羅する３次元領域を含むように設置することが好ましい。この場合、手術の操作で手術者の邪魔にならない位置の一例として患者である対象物の斜め上方（図２では右上方向）から手術部位付近を３次元形状測定できる位置に設置することが好ましい。このようにすれば、３次元形状測定装置３０によって、患者である対象物の頭部の形状または顔部の形状が検出され、各部位の３次元座標が測定される。これと共に、３次元形状測定装置３０によって、手術器具３６に取り付けられた光反射率の高い材料から成る球体３７の３次元座標が３次元形状測定装置３０によって測定される。なお、図２では、副鼻腔の手術を一例として示しているが、手術中に鼻が露出される患者を覆うドレープと呼ばれる布は省略している。
　図３は、本実施形態の手術支援システムで用いられる手術器具３６の一例を示したものである。また、図４はこの手術器具３６が鼻腔に挿入された状態を表す写真で、図５はその模式図である。図３の手術器具３６は吸引管であるが、手術器具は吸引管に限らず、硬性内視鏡や手術用鉗子や手術用ハサミなどでも良い。手術器具３６には標識体取付部４１が取付けられており、標識体取付部４１には位置姿勢検出用の標識体３７Ａ～３７Ｄが取付けられている。標識体３７は、３次元形状測定装置３０により検出しやすい形状及び大きさ（例えば、直径１１～１９ｍｍの球体）を有している。図の例では標識体３７Ａ～３７Ｄの形状は球体であるが、これに限らず、３次元形状測定装置で位置及び形状を測定でき、位置及び立体形状で手術器具３６を識別できるならば任意の形状で構わない。また、図の例では、標識体３７の数は４個であるが、少なくとも３個あれば良い。なお、標識体３７の立体形状を工夫すれば標識体３７の数は２個でも良い。手術器具３６と標識体取付部４１と各標識体３７Ａ～３７Ｄとはしっかりと固定されている。各標識体３７Ａ～３７Ｄの形状（球体という情報および直径）、相対位置、手術器具３６の形状などのデータは事前に登録されており、各標識体３７Ａ～３７Ｄの位置及び形状を測定すれば、手術器具３６の位置及び姿勢を算出できる。図６に、各標識体３７Ａ～３７Ｄの配置の一例を示す。図６は、図３乃至図５の標識体３７Ａ～３７Ｄを真上から見た図であり、図面の上方が体内挿入方向である。各標識体３７Ａ～３７Ｄは、標識体取付部４１に設けられたアーム４２に取付けられている。
　なお、これらの図では、一方のアームが体内挿入方向に平行であり、もう一方のアームが体内挿入方向とは直交する例を示しているが、アームの方向はこれに限らない。たとえば、２本のアームが直角以外の角度で交差していたり、アームと体内挿入方向とが平行ではなく図７のように一定の角度を有していても良い。
　図８は、位置姿勢検出用の標識体３７として球体を用い、体内挿入器具の種類ごとに球体の直径を異ならせた例である。図８（Ａ）では標識体３７Ｄとして直径の小さな球体を用い、図８（Ｂ）では直径の大きな球体を用いており、球体の直径により器具の種類を識別している。図８（Ａ）と図８（Ｂ）は、先端部の形状が異なる吸引管であり、（Ａ）及び（Ｂ）それぞれの吸引管の３次元形状、標識体間の相対位置及び標識体の立体形状（球体という情報および直径）についてはコンピュータ１２に事前に登録されている。３次元形状測定装置３０により標識体３７Ｄの直径を測定することにより、どちらの形状の吸引管であるか識別できるので、これにより事前に登録されている吸引管の３次元形状を読み込み、手術ナビゲーションを行う。この例では、１つの標識体の直径を異ならせることを示したが、複数の標識体の直径を異ならせてその組合せにより体内挿入器具を識別しても良い。複数の標識体の直径の組合せを用いることで、より多くのバリエーションをとることができ、多数の体内挿入器具の識別が可能である。また、標識体間の相対位置を体内挿入器具ごとに異ならせても体内挿入器具の識別が可能である。さらに、標識体の直径と標識体間の相対位置の組合せにより体内挿入器具を識別すれば、さらに多くのバリエーションが可能である。
　本実施形態で用いられている３次元形状測定装置にパルステック工業（株）製の格子投影式３次元形状測定装置であるＦｓｃａｎを用いれば、標識体３７の直径は約０．４ｍｍ単位で識別が可能である。したがって、例えば、標識体３７Ｄの直径を約１１～１９ｍｍの間で変化させられるとすると、約２０通り（（１９－１１）／０．４）の直径をとることができる。標識体３７は複数個あるので、複数の標識体の直径を異ならせれば組合せにより多数のバリエーションが可能である。また、本実施形態で用いられている３次元形状測定装置にパルステック工業（株）製の格子投影式３次元形状測定装置であるＦｓｃａｎを用いれば、標識体間の距離は約１．０ｍｍ単位で識別が可能である。したがって、アーム４２Ａ～Ｄの長さを体内挿入器具ごとに異ならせても体内挿入器具の識別が可能である。また標識体の直径と標識体間相対位置との組み合わせを用いればさらに多くのバリエーションが可能である。
　図９は、位置姿勢検出用の標識体として球体以外のものを用いたものの例である。図９（Ａ）では、標識体３７Ｄとして立方体を用いている。本実施形態では、標識体の立体形状（立方体という情報および大きさ）を登録し、３次元形状測定装置により標識体の立体形状を測定しているので、立体形状による識別が可能である。また、立方体の位置を事前に登録しておくことで、体内挿入器具の位置姿勢用の標識体としても用いることができる。図９（Ａ）では標識体３７として立方体を用いており、図９（Ｂ）では球体を用いているので、立体形状により体内挿入器具の種類を識別できる。この例では、立方体と球体の例を示したがこれに限られず、立体形状により識別できるものであれば何でも良い。例えば、直方体、多角錐（三角錐、四角錐、・・）、楕円体、多面体、ドーナツ型などが考えられる。また、この例では、複数の標識体のうち１つの標識体のみの立体形状を異ならせることを示したが、これに限られず、複数の標識体の立体形状を組み合わせて体内挿入器具の種類の識別をしてもよい。立体形状が異なるというのは、形状そのものが異なるもののほか、相似形状で大きさが異なるものも含む。したがって、大きさを異ならせることでも識別可能である。さらに、前述のように、標識体間の相対位置を異ならせることを組み合わせても良い。
　図１１は器具の識別のために標識体３７の球体の直径を異ならせた例である。この例では、標識体３７Ｂ及び３７Ｄの球体の直径を異ならせる例を示している。図１１（Ａ）は標識体３７Ｂが大で標識体３７Ｄも大、図１１（Ｂ）は標識体３７Ｂが大で標識体３７Ｄが小、図１１（Ｃ）は標識体３７Ｂが小で標識体３７Ｄが大、図１１（Ｄ）は標識体３７Ｂが小で標識体３７Ｄも小、である例を示している。この例では標識体の大小のみを異ならせた例を示しているが、実際には３次元形状測定装置は０．４ｍｍ単位で直径を測定可能であるので、直径を多段階で異ならせることが可能である。また、この例では標識体３７Ｂと標識体３７Ｄの大きさを異ならせた例を示したが、標識体３７Ａや標識体３７Ｃの大きさを異ならせても良いことは言うまでも無い。さらに、この例では２つの標識体の大きさに基づいて器具の識別をする例を示したが、実際に手術支援システムで使用するときは標識体の一部が３次元形状測定装置の死角に入ってしまうこともあるので、複数の標識体の一部が３次元形状測定装置の死角に入っても他の標識体の直径や配置から器具が識別できるように冗長性を持たせておけば、より信頼性が高くなる。
　さらに、位置検出用の複数の標識体を非対称に配置しても複数の標識体の重さを調整することで重心位置を体内挿入器具の軸心に近づけることができる体内挿入器具の実施形態について説明する。
　図６に、各標識体３７Ａ～３７Ｄの配置の一例を示す。図６は、図３乃至図５の標識体３７Ａ～３７Ｄを真上から見た図であり、図面の上方が体内挿入方向である。各標識体３７Ａ～３７Ｄは、標識体取付部４１に設けられたアーム４２に取付けられている。手術器具３６の位置姿勢検出精度を高めるためにはアーム４２はできるだけ長い方が良い。一方、標識体３７には多少の重さがあり、標識体３７Ａ～３７Ｄの全体の重心位置はできるだけ手術器具本体に近いほうが良いので、各標識体３７Ａ～３７Ｄは対称に配置するのが望ましい。しかしながら、手術器具３６は使いやすいことが重要であるので、場所によっては標識体３７は邪魔になってしまう。例えば、例えば右手で使用する手術器具の場合、左手側に別の器具を挿入することがあるため、手術器具の左側はできるだけ開放しておきたい。したがって、左側の標識体３７Ａが付いているアーム４２Ａの長さＬAを短くするのが好ましい。一方で、位置姿勢検出精度を高めるためにはアームは長い方が良いので、右側の標識体３７Ｂが付いているアーム４２Ｂの長さＬBは長い方が良い。
　したがって、左側のアーム４２Ａが短く、右側のアーム４２Ｂが長いため、標識体３７Ａ及び標識体３７Ｂの全体の重心位置は右側に寄ってしまう。これでは手術器具３６の操作性に影響を与える可能性があるので、本実施形態では標識体Ａ及び標識体Ｂの重さを異ならせることでこの問題を解決する。すなわち以下の関係になるように、標識体３７Ａ及び３７Ｂの重さを調整する。
　（標識体３７Ａの重さ）／（標識体３７Ｂの重さ）
　　＝（アーム４２Ｂの長さＬB）／（アーム４２Ａの長さＬA）
このように調整すれば、標識体３７Ａ及び標識体３７Ｂの全体の重心位置は、手術器具本体３６の軸心に最も近いところになり、操作性が良くなる。この例では、標識体の重さのみに着目したが、アームそのものの重さも無視できない場合は、アームの重さも考慮して、標識体３７Ａ及び標識体３７Ｂの重さを決定する。
　また、図６では、アームの１つの軸が体内挿入方向に平行で、２つのアームが直交する場合を例に挙げたが、必ずしも２つのアームが直交する必要はなく、さらに、アームの１つの軸が体内挿入方向に平行である必要もない。その場合にも標識体およびアームの全体の重心位置が手術器具本体３６の軸心に最も近づくように、体内挿入方向を示す長軸方向とそれに直交する方向で標識体の重さとアームの長さを調整すればよい。図７に、いずれのアームも体内挿入方向とは平行ではない場合の例を示す。この例では、体内挿入方向の軸に対する回転モーメントを均等にするように、以下の関係で標識体の重さ及びアームの長さを調整すれば良い。
　（標識体３７Ａ重さ）×（距離ａ）＋（標識体３７Ｄ重さ）×（距離ｄ）
　＝（標識体３７Ｃ重さ）×（距離ｃ）＋（標識体３７Ｂ重さ）×（距離ｂ）
　上記では左右方向の標識体３７Ａ及び標識体３７Ｂの重心に着目したが、挿入方向前後の標識体３７Ｃ及び標識体３７Ｄでも同様にアームの長さ及び標識体の重さを調整可能である。例えば、体内挿入方向にある標識体３７Ｃは体内挿入時に邪魔になってしまう可能性があるのでアーム４２Ｃはできるだけ短いほうが良い。一方で、標識体３７Ｄの方向は比較的余裕があるのでアーム４２Ｄは長くできる。この場合も標識体３７Ｃ及び標識体３７Ｄの重さを調整することで前後方向の重心位置を移動させることができるが前後方向の重心については必ずしもアームの中心である必要は無く、最も使いやすい位置に重心が来るように調整すれば良い。このようにしても標識体３７Ａ～３７Ｄの全体の重心位置は手術器具本体３６の軸心に最も近い位置である。さらに、アームは長い方が体内挿入器具の位置姿勢の検出精度が高まるため、前後方向のアームを左右方向のアームに比べて長くすることにより体内挿入器具の位置姿勢の検出精度が高まり、体内挿入器具の重要な部分である先端部の位置検出精度を高めることができる。
　図６および図７の例は、各標識体３７Ａ～３７Ｄの大きさは同じで比重を変えることで各標識体の重さを変えるものであるが、標識体の大きさそのものを変えて重さを変えても良い。
　なお、図３乃至図９では吸引管を用いているが、これに限られることはなく、図１０及び図１１に示されるような手術用鉗子等に取り付けられた標識体にも本発明は適用することができる。さらに、手術器具に限らず、体内に挿入する硬性内視鏡等にも本発明は適用できる。
　以上、本発明の実施形態の一例を説明したが、本発明はこれに限定されるものではなく、特許請求の範囲に記載された技術的思想の範疇において各種の変更が可能であることは言うまでもない。
符号の説明
１０：手術支援システム、　１２：コンピュータ（ＰＣ等）、　３６：体内挿入器具（手術器具）、　３７Ａ～Ｄ：標識体（球体）、　３８：先端部分、　３９：非露出側（体内挿入部分）、　４０：露出側（体内に挿入されない部分）、　４１：標識体取付部、　４２：アーム

Claims (8)

  1. 　患者の３次元表面形状を測定する３次元形状測定手段と、前記患者の体内に挿入する複数種類の体内挿入器具と、制御手段とを有する手術支援システムであって、
    　前記体内挿入器具は、体内に挿入されない部分に、前記３次元形状測定手段で位置及び立体形状が測定可能な標識体を複数個有しており、これらの標識体の位置及び立体形状に基づいて前記体内挿入器具の位置及び姿勢が測定可能であり、
    　前記体内挿入器具の標識体の標識体間相対位置と立体形状の少なくとも一方は体内挿入器具ごとに異なっていて、これらの情報は前記制御手段に事前に記憶されており、
    　前記制御手段は、前記３次元形状測定手段で測定された前記体内挿入器具の標識体の位置及び立体形状に基づき、前記体内挿入器具の位置及び姿勢を算出するとともに前記体内挿入器具の種類を識別する、
    手術支援システム。
  2. 　前記標識体は球体であり、前記体内挿入器具ごとに球体の直径を異ならせることにより、前記体内挿入器具の種類を識別する、
    請求項１記載の手術支援システム。
  3. 　前記体内挿入器具は、手術器具または硬性内視鏡である、
    請求項１または２記載の手術支援システム。
  4. 　患者の３次元表面形状を測定する３次元形状測定手段を有する手術支援システムにおいて前記３次元形状測定手段の測定範囲内で用いる体内挿入器具であって、
    　前記体内挿入器具は、体内に挿入されない部分に、前記３次元形状測定手段で位置及び立体形状が測定可能な標識体を少なくとも複数個有しており、これらの標識体の位置及び立体形状に基づいて前記体内挿入器具の位置及び姿勢が測定可能であり、
    　前記体内挿入器具の標識体の標識体間相対位置と立体形状の少なくとも一方は体内挿入器具の種類ごとに異なっており、
    　前記３次元形状測定手段で測定された前記体内挿入器具の標識体の位置及び立体形状に基づき、前記体内挿入器具の位置及び姿勢の算出と前記体内挿入器具の種類の識別とが可能である、
    手術支援システム用体内挿入器具。
  5. 　前記体内挿入器具の複数の標識体の少なくとも１個は他の標識体と重さが異なっており、
    　前記体内挿入器具の軸心と標識体全体の重心位置とが近くなるように複数の前記標識体の配置及び重さを設定している、
    請求項４記載の手術支援システム用体内挿入器具。
  6. 　前記体内挿入器具には、前記体内挿入器具の体内挿入方向に延びた第１アームと、前記第１アームと一定の角度をなす方向に延びた第２アームと、が設けられており、
    　前記標識体は４個であり、そのうち２個は前記第１アームに配置されており、残りの２個は前記第２アームに配置されており、
    　前記第２アームに配置された２個の標識体は、前記体内挿入器具の中心軸に対して非対称に配置されているとともに、それぞれ重さが異なる、
    請求項５記載の手術支援システム用体内挿入器具。
  7. 　前記標識体の大きさまたは比重を異ならせることにより、前記標識体の重さを異ならせる、
    請求項５または６記載の手術支援システム用体内挿入器具。
  8. 　前記体内挿入器具は、手術器具または硬性内視鏡である、
    請求項５～７いずれか記載の手術支援システム用体内挿入器具。
PCT/JP2009/053507 2008-02-27 2009-02-26 体内挿入器具の種類を識別可能な手術支援システム WO2009107703A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2008045330A JP5213200B2 (ja) 2008-02-27 2008-02-27 手術支援システム用体内挿入器具
JP2008-045330 2008-02-27
JP2008045331A JP5213201B2 (ja) 2008-02-27 2008-02-27 体内挿入器具の種類を識別可能な手術支援システム
JP2008-045331 2008-02-27

Publications (1)

Publication Number Publication Date
WO2009107703A1 true WO2009107703A1 (ja) 2009-09-03

Family

ID=41016091

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/053507 WO2009107703A1 (ja) 2008-02-27 2009-02-26 体内挿入器具の種類を識別可能な手術支援システム

Country Status (1)

Country Link
WO (1) WO2009107703A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013508039A (ja) * 2009-10-20 2013-03-07 イムリス インク． マーカーを使用する画像システム
WO2014037524A1 (en) * 2012-09-06 2014-03-13 Norwegian University Of Science And Technology (Ntnu) Intervention device
CN110573111A (zh) * 2017-04-28 2019-12-13 美敦力导航股份有限公司 器械的自动标识
CN110740676A (zh) * 2017-06-15 2020-01-31 奥林巴斯株式会社 内窥镜系统、内窥镜系统的工作方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005046200A (ja) * 2003-07-29 2005-02-24 Olympus Corp 内視鏡下手術システム
JP2005258891A (ja) * 2004-03-12 2005-09-22 Nippon Telegr & Teleph Corp <Ntt> ３ｄモーションキャプチャ方法および装置
WO2006060631A1 (en) * 2004-12-02 2006-06-08 Smith & Nephew, Inc. Systems, methods, and apparatus for automatic software flow using instrument detection during computer-aided surgery
WO2007091464A1 (ja) * 2006-02-09 2007-08-16 National University Corporation Hamamatsu University School Of Medicine 手術支援装置、方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005046200A (ja) * 2003-07-29 2005-02-24 Olympus Corp 内視鏡下手術システム
JP2005258891A (ja) * 2004-03-12 2005-09-22 Nippon Telegr & Teleph Corp <Ntt> ３ｄモーションキャプチャ方法および装置
WO2006060631A1 (en) * 2004-12-02 2006-06-08 Smith & Nephew, Inc. Systems, methods, and apparatus for automatic software flow using instrument detection during computer-aided surgery
WO2007091464A1 (ja) * 2006-02-09 2007-08-16 National University Corporation Hamamatsu University School Of Medicine 手術支援装置、方法及びプログラム

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013508039A (ja) * 2009-10-20 2013-03-07 イムリス インク． マーカーを使用する画像システム
WO2014037524A1 (en) * 2012-09-06 2014-03-13 Norwegian University Of Science And Technology (Ntnu) Intervention device
AU2013311565B2 (en) * 2012-09-06 2016-03-24 Norwegian University Of Science And Technology (Ntnu) Intervention device
US9579368B2 (en) 2012-09-06 2017-02-28 Norwegian University Of Science And Technology (Ntnu) Treatment of headache by injection of neuroinhibitory substance to sphenopalatine ganglion or otic ganglion
US10716834B2 (en) 2012-09-06 2020-07-21 Norwegian University Of Science And Technology (Ntnu) Intervention device
US11712464B2 (en) 2012-09-06 2023-08-01 Norwegian University Of Science And Technology (Ntnu) Intervention device
CN110573111A (zh) * 2017-04-28 2019-12-13 美敦力导航股份有限公司 器械的自动标识
CN110573111B (zh) * 2017-04-28 2023-05-02 美敦力导航股份有限公司 器械的自动标识
US11672611B2 (en) 2017-04-28 2023-06-13 Medtronic Navigation, Inc. Automatic identification of instruments
CN110740676A (zh) * 2017-06-15 2020-01-31 奥林巴斯株式会社 内窥镜系统、内窥镜系统的工作方法
CN110740676B (zh) * 2017-06-15 2022-02-25 奥林巴斯株式会社 内窥镜系统、内窥镜图像处理方法以及记录介质

Similar Documents

Publication Publication Date Title
EP3003180B1 (en) Localization of robotic remote center of motion point using custom trocar
US11596480B2 (en) Navigation, tracking and guiding system for the positioning of operatory instruments within the body of a patient
US5823958A (en) System and method for displaying a structural data image in real-time correlation with moveable body
US8463360B2 (en) Surgery support device, surgery support method, and computer readable recording medium storing surgery support program
US7671887B2 (en) System and method of navigating a medical instrument
US20130338490A1 (en) Apparatus and method for nuclear imaging
JP2010519635A (ja) 医学的画像形成のためのポインティングデバイス
JP2001104333A (ja) 手術支援装置
WO2017017496A1 (en) Dynamic reference frame for surgical navigation system
EP2124737A2 (en) System and method for registration of localization and imaging systems for navigational control of medical devices
EP3212104B1 (en) Hybrid navigation system for surgical interventions
JP5213201B2 (ja) 体内挿入器具の種類を識別可能な手術支援システム
US20110046636A1 (en) Surgical Guide Instrument Capable of Omni-Directional Positioning and Omni-Directional Positioning Unit Thereof
EP3295887A1 (en) Robotic fluoroscopic navigation
WO2009107703A1 (ja) 体内挿入器具の種類を識別可能な手術支援システム
JP5213200B2 (ja) 手術支援システム用体内挿入器具
Maier-Hein et al. Comparative assessment of optical tracking systems for soft tissue navigation with fiducial needles
US20210378644A1 (en) Device and methods for transrectal ultrasound-guided prostate biopsy
JP4472080B2 (ja) 顕微鏡下手術支援システム
US20230368418A1 (en) Accuracy check and automatic calibration of tracked instruments
JP5560424B2 (ja) 長軸部先端からの光軸を有する物体における光軸位置と該物体の位置姿勢を定義する手段との３次元相対関係測定方法、装置およびシステム
US20240074819A1 (en) Robotic fluoroscopic navigation
US20230397957A1 (en) Surgical navigation system with flat panel registration fixture
JP2023507434A (ja) プローブの遠位端からの方向による医用画像上のカーソル位置の選択
CN115475006A (zh) 用于确定所跟踪的椎骨的姿态的技术

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09713834

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09713834

Country of ref document: EP

Kind code of ref document: A1