WO2015136853A1 - 画像処理装置、画像処理方法及びプログラム - Google Patents

画像処理装置、画像処理方法及びプログラム Download PDF

Info

Publication number
WO2015136853A1
WO2015136853A1 PCT/JP2015/000874 JP2015000874W WO2015136853A1 WO 2015136853 A1 WO2015136853 A1 WO 2015136853A1 JP 2015000874 W JP2015000874 W JP 2015000874W WO 2015136853 A1 WO2015136853 A1 WO 2015136853A1
Authority
WO
WIPO (PCT)
Prior art keywords
blood vessel
branch
tubular object
image
information
Prior art date
Application number
PCT/JP2015/000874
Other languages
English (en)
French (fr)
Inventor
真透 坂本
Original Assignee
テルモ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by テルモ株式会社 filed Critical テルモ株式会社
Priority to JP2016507297A priority Critical patent/JPWO2015136853A1/ja
Publication of WO2015136853A1 publication Critical patent/WO2015136853A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0891Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular

Definitions

  • the present invention relates to an image processing apparatus, an image processing method, and a program.
  • an apparatus that performs tomography by inserting a probe into a tubular object is known for diagnostic imaging of tubular objects such as blood vessels.
  • diagnostic imaging apparatuses are widely used for diagnosis of arteriosclerosis, preoperative diagnosis at the time of endovascular treatment with a high-function catheter such as a balloon catheter or a stent, or confirmation of postoperative results.
  • typical image diagnostic apparatuses for example, an intravascular ultrasonic diagnostic apparatus (IVUS), an optical coherence tomographic image diagnostic apparatus (OCT / OFDI), and the like have been developed.
  • Citation 1 discloses a technique for associating a three-dimensional image reconstructed from a tomographic image obtained by IVUS or OCT with a three-dimensional image obtained by CT or MRI.
  • a blood vessel bifurcation is automatically extracted from an image obtained by IVUS or OCT for matching.
  • An object of the present invention is to automatically provide information on a branch pipe portion branched from a tubular object based on information obtained by tomographic imaging of the tubular object.
  • an image processing apparatus comprises the following arrangement. That is, Of the tubular object image obtained by scanning the inside of the first tubular object using a probe, a portion corresponding to the first tubular object and a second tubular object branched from the first tubular object An information acquisition means for acquiring information for distinguishing the portion corresponding to Generating means for generating quantitative information indicating the form of the second tubular object at a branch from the first tubular object using the information; Is provided.
  • FIG. 1 is a diagram showing a schematic configuration of an image processing apparatus 100 according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a schematic configuration of the boundary extraction unit 200 according to an embodiment.
  • FIG. 3 is a flowchart of processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 4A is a diagram illustrating processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 4B is a diagram illustrating processing performed by the boundary extraction unit 200 in an embodiment.
  • FIG. 4C is a diagram illustrating processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 4D is a diagram illustrating processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 4E is a diagram illustrating processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 4F is a diagram illustrating processing performed by the boundary extraction unit 200 in one embodiment.
  • FIG. 5A is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 5B is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 5C is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 6A is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 6B is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 6A is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 6B is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 6C is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 7A is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 7B is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 7C is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 8A is a diagram illustrating processing performed by the determination update unit 250 in one embodiment.
  • FIG. 8B is a diagram illustrating processing performed by the determination update unit 250 according to an embodiment.
  • FIG. 9 is a diagram illustrating an example of a screen that displays the determination result by the boundary extraction unit 200.
  • FIG. 10 is a diagram illustrating a schematic configuration of the information calculation unit 1000 according to an embodiment.
  • FIG. 10 is a diagram illustrating a schematic configuration of the information calculation unit 1000 according to an embodiment.
  • FIG. 12A is a diagram for explaining an example of a method for approximating a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12B is a diagram for explaining an example of an approximation method for a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12C is a diagram for explaining an example of an approximation method of a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12D is a diagram for explaining an example of an approximation method of a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12A is a diagram for explaining an example of a method for approximating a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12B is a diagram for explaining an example of an approximation method for a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 12C is a diagram for explaining an example
  • FIG. 12E is a diagram for explaining an example of a method for approximating a boundary point group between a main blood vessel and a branch blood vessel.
  • FIG. 13 is a diagram illustrating an example of the definition of the branch angle of the branch blood vessel.
  • FIG. 14A is a diagram for explaining a method of selecting points projected onto a cross section of a branch blood vessel.
  • FIG. 14B is a diagram for explaining a method of selecting points to be projected onto the cross section of the branch blood vessel.
  • FIG. 14C is a diagram for explaining a method of selecting points projected onto the cross section of the branch blood vessel.
  • FIG. 14D is a diagram for explaining a method of selecting points to be projected onto the cross section of the branch blood vessel.
  • FIG. 15 is a diagram illustrating an example of a display screen for information generated by the information calculation unit 1000.
  • FIG. 16 is a diagram illustrating a basic configuration of a computer according to an embodiment.
  • FIG. 1 shows an image processing apparatus 100 according to an embodiment of the present invention.
  • the image processing apparatus 100 includes a display control unit 110, a boundary extraction unit 200, and an information calculation unit 1000.
  • the image processing apparatus 100 may be part of an imaging system that includes an imaging apparatus (not shown) that acquires the blood vessel image 190.
  • the tubular object image obtained by scanning the tubular object using the probe is input to the image processing apparatus 100.
  • the type of the tubular object is not particularly limited. In the following description, it is assumed that the tubular object is a blood vessel, and a blood vessel image 190 is input to the image processing apparatus 100.
  • the blood vessel image 190 is image information indicating the form of the blood vessel, and the form is not particularly limited.
  • the blood vessel image acquisition method is not particularly limited, and for example, an existing ultrasonic diagnostic apparatus (IVUS), an optical coherent tomographic image diagnostic apparatus (OCT), an optical coherent tomographic image diagnostic apparatus (OFDI), or the like can be used.
  • IVUS ultrasonic diagnostic apparatus
  • OCT optical coherent tomographic image diagnostic apparatus
  • OFDI optical coherent tomographic image diagnostic apparatus
  • the blood vessel into which the probe is inserted is called a main blood vessel.
  • the blood vessel image 190 can be acquired as follows. That is, a plurality of line data is acquired by inserting a probe into a blood vessel and scanning the inside of the blood vessel. Each line corresponds to one scan, and one line data indicates the relationship between the distance from the probe in the depth direction of the blood vessel and the obtained signal intensity. A plurality of line data can be obtained by scanning while changing the probe direction and the position of the probe in the blood vessel length direction.
  • the blood vessel image 190 is composed of the plurality of line data.
  • the blood vessel image 190 may be an image in which one-dimensional images indicated by line data are arranged side by side.
  • the blood vessel image 190 is a plurality of cross-sectional images obtained by arranging one-dimensional images indicated by line data in a circle (cross-sectional images in a direction crossing the blood vessel axis, for example, tomographic images perpendicular to the blood vessel axis). It may be constituted by. Further, the blood vessel image 190 may be subjected to gain correction, contrast correction, ⁇ correction, or the like. In the present embodiment, the blood vessel image 190 is composed of a plurality of cross-sectional images whose gain and contrast are adjusted.
  • the blood vessel image 190 is not limited to a combination of a plurality of transverse cross-sectional images, and may be a combination of a plurality of cross-sectional images in the blood vessel axis direction (tomographic images in a cross section parallel to the blood vessel axis) or a 3D image of a blood vessel. May be. As already known, these cross-sectional images, vascular axial cross-sectional images, and 3D images can be transformed into each other.
  • the boundary extraction unit 200 detects a portion corresponding to the main blood vessel from the blood vessel image 190. Further, the boundary extraction unit 200 detects a portion corresponding to the branched blood vessel that branches off from the main blood vessel from the blood vessel image 190. In this way, the boundary extraction unit 200 detects the boundary portion between the main blood vessel and the branch blood vessel. According to the detection result, the boundary extraction unit 200 outputs information indicating a part corresponding to the main blood vessel in the blood vessel image 190 and information for distinguishing a part corresponding to the branch blood vessel to the information calculation unit 1000.
  • the branch blood vessel is a structure connected to the main blood vessel into which the probe is inserted, and includes not only a tubular shape but also a umbilical shape.
  • the information calculation unit 1000 refers to the information obtained from the boundary extraction unit 200 and generates quantitative information indicating the shape of the branch blood vessel at the branch portion from the main blood vessel. Then, the information calculation unit 1000 causes the display unit 120 to display the generated information via the display control unit 110.
  • the display control unit 110 controls the display unit 120 to display desired information.
  • the display unit 120 is a device that can display an image.
  • the type of the display unit 120 is not particularly limited, and may be a liquid crystal display, for example.
  • the boundary extraction unit 200 includes an image acquisition unit 210, a position acquisition unit 220, a detection unit 230, and a determination unit 240.
  • the image acquisition unit 210 acquires the blood vessel image 190.
  • the image acquisition unit 210 acquires a plurality of tomographic images. Each tomographic image is processed by each unit described later, and information indicating a part corresponding to the main blood vessel and information identifying a part corresponding to the branch blood vessel are generated.
  • the image acquisition unit 210 also performs preprocessing on the acquired tomographic image.
  • the position acquisition unit 220 acquires the estimated position of the central point of the main blood vessel on the tomographic image.
  • the position acquisition unit 220 calculates the estimated position of the central point of the main blood vessel by image processing on the tomographic image.
  • the center point of the main blood vessel may be designated by a user input via an input unit (not shown).
  • the position acquisition unit 220 acquires the estimated positions of the guide wire and the catheter sheath image on the tomographic image.
  • the position acquisition unit 220 calculates these estimated positions by image processing on the tomographic image. However, these positions may be designated by user input via an input unit (not shown).
  • the detection unit 230 detects a plurality of points indicating the inner surface of the blood vessel on the tomographic image. Although various methods such as template matching can be considered as the detection method, in the present embodiment, the detection unit 230 extracts the position of the inner wall of the blood vessel on the tomographic image by scanning the tomographic image. Specifically, the detection unit 230 extracts a crossing point with the blood vessel when proceeding outward from the center point of the main blood vessel as the position of the blood vessel inner wall.
  • the determining unit 240 determines whether each of the plurality of points detected by the extracting unit 230 indicates a main blood vessel. Further, the determination unit 240 determines whether or not the intersection detected by the extraction unit 230 indicates a branch blood vessel. The determination unit 240 can also determine whether each of the plurality of points detected by the extraction unit 230 indicates the boundary between the main blood vessel and the branch blood vessel. These determinations are made based on the positions of a plurality of points detected by the extraction unit 230. In one embodiment, these determinations are made based on the positional relationship between a plurality of consecutive points detected by the extraction unit 230.
  • the point detected by the extraction unit 230 indicates a main blood vessel or a branch blood vessel. be able to.
  • whether each point indicates a main blood vessel or a branch blood vessel based on a comparison between the distance from the center of the main blood vessel and a threshold value for a plurality of consecutive points detected by the extraction unit 230 Is also included in the determination based on the positional relationship between a plurality of consecutive points.
  • it can be determined that a branch blood vessel is present at a point where a plurality of continuous points are interrupted, and it can be determined that the ends of the plurality of continuous points indicate a boundary between the main blood vessel and the branch blood vessel.
  • the determination unit 240 indicates whether the point detected by the extraction unit 230 indicates a main blood vessel and a branch blood vessel, or whether the point detected by the extraction unit 230 indicates a boundary between the main blood vessel and the branch blood vessel, At least one of them can be determined. By these determinations, the boundary between the main blood vessel and the branch blood vessel is detected.
  • the determination unit 240 For the determination by the determination unit 240, the distance between the center point of the main blood vessel and the intersection is mainly used. However, the determination unit 240 performs this determination using various other criteria. For example, in one embodiment, the determination unit 240 performs determination in consideration of the positions of the guide wire and the catheter sheath image on the tomographic image.
  • the boundary extraction unit 200 further includes a determination update unit 250.
  • the determination update unit 250 updates the determination result by the determination unit 240.
  • the determination update unit 250 can correct the determination result by the determination unit 240.
  • the determination update unit 250 can detect a new intersection and determine that the detected intersection indicates a main blood vessel or a branch blood vessel. Further, the determination update unit 250 can update the determination result by the determination unit 240 for another tomographic image based on the determination result by the determination unit 240 for one tomographic image constituting the blood vessel image 190.
  • step S305 the image acquisition unit 210 acquires the blood vessel image 190.
  • the image acquisition unit 210 acquires a blood vessel image 190 including a plurality of tomographic images at a time.
  • the image acquisition unit 210 may sequentially acquire tomographic images that are sequentially generated while performing blood vessel scanning using a probe.
  • the following processing from step S310 is sequentially performed on each tomographic image.
  • FIG. 4A shows a tomographic image to be processed in the following description.
  • step S310 the image acquisition unit 210 performs preprocessing on the acquired tomographic image.
  • the image acquisition unit 210 may acquire a tomographic image that has already been preprocessed.
  • the type of pre-processing is not particularly limited, but in one embodiment, filtering processing and binarization processing are performed.
  • filtering processing and binarization processing are performed.
  • the kind of filter used is not specifically limited, For example, a smoothing filter process can be used, and the isolated point contained as noise can be reduced by performing a smoothing filter process with respect to a tomogram.
  • the tomographic image after the filter processing is shown in FIG. 4B.
  • a threshold value is used such that the inner wall of the blood vessel becomes a white pixel and the blood vessel lumen becomes a black pixel.
  • a threshold value may be set in advance or may be automatically determined by the image acquisition unit 210 with reference to a tomographic histogram.
  • the threshold value may be input by the user via an input unit (not shown). Below, it demonstrates on the assumption that the binarization process was performed in step S310. However, it is not essential to perform binarization processing.
  • a pixel having a pixel value within a predetermined range defined by the threshold is determined to be a white pixel, and a pixel having a pixel value outside the predetermined range is determined to be a black pixel.
  • the binarization processing is not performed, for example, in step S325 described later, it is determined that a pixel having a pixel value within a predetermined range is a white pixel, and a pixel having a pixel value outside the predetermined range is It can be determined that the pixel is a black pixel.
  • the tomographic image after binarization is shown in FIG. 4C.
  • step S315 the position acquisition unit 220 acquires the estimated position of the central point of the main blood vessel on the tomographic image.
  • the estimated position of the center point may be input by the user, but in the present embodiment, the position acquisition unit 220 calculates the estimated position of the center point by image processing on the tomographic image.
  • the calculation method of the estimated position of the center point is not particularly limited.
  • the main blood vessel on the tomographic image is detected, and the center of gravity is used as the estimated position of the central point of the main blood vessel.
  • Hough transform is used as a main blood vessel detection method. That is, the position acquisition unit 220 performs a Hough transform process on the binarized tomographic image to detect a circle that approximates the inner wall shape of the main blood vessel. Then, the position acquisition unit 220 acquires the center position of the detected circle as the estimated position of the center point.
  • An example of a circle detected by the Hough transform is shown in FIG. 4D.
  • the position acquisition unit 220 extracts a black pixel circle (a circle having a black pixel inside the outline and a white pixel outside the outline (background)) by Hough transform. And the position acquisition part 220 specifies the largest thing among the circles which contain the center of a tomogram as a circle (henceforth a blood vessel circle) which shows the inner wall of a main blood vessel. The center of this blood vessel circle is treated as the estimated position of the central point of the main blood vessel. The position acquisition unit 220 also calculates the radius of the blood vessel circle.
  • the position acquisition unit 220 can use the center of the blood vessel circle extracted from the tomographic image at another position of the main blood vessel as the estimated position of the center point.
  • the radius of the blood vessel circle a tomographic image in which a blood vessel circle can be extracted by the Hough transform, and the center of the blood vessel circle extracted from the closest tomographic image is used as the estimated position of the center point.
  • the estimated position of the center point in the tomographic image at the adjacent position is used as the estimated position of the center point.
  • the position acquisition unit 220 may detect the inscribed circle of the blood vessel and treat the center of the inscribed circle as the estimated position of the central point of the main blood vessel. For example, a circle that is inscribed in three or more white pixels and does not pass through the white pixels on the binarized tomographic image can be detected as an inscribed circle of the blood vessel. Further, for example, the maximum circle among the circles inscribed in the blood vessel can be detected using Euclidean distance conversion. The distance conversion is not limited to Euclidean and may be weighted. As yet another method, the center of gravity of a plurality of points detected by the extraction unit 230 may be treated as the estimated position of the center point of the main blood vessel.
  • the barycentric position of the intersection indicating the main blood vessel can also be calculated.
  • the position acquisition unit 220 may use the barycentric position of the intersection indicating the main blood vessel calculated for the tomographic image at another position of the main blood vessel as the estimated position of the central point.
  • the position acquisition unit 220 calculates the barycentric position of the intersection indicating the main blood vessel in a tomographic image at another position of the main blood vessel, and estimates the center point It can be used as a position.
  • the determination unit 240 may determine an intersection serving as a wire shadow boundary pair with reference to the wire shadow boundary pair detected for the adjacent tomographic image.
  • the determination unit 240 can determine that a wire shadow boundary pair exists in the same angular direction as the wire shadow boundary pair detected for the adjacent tomographic images. Further, the determination unit 240 can determine that a wire shadow boundary exists at the center in the angular direction of each wire shadow boundary detected for two adjacent tomographic images.
  • the position acquisition unit 220 further detects the estimated positions of the guide wire and the catheter sheath image from the tomographic image.
  • a guiding catheter (not shown) is inserted into the main blood vessel via a guide wire, and a probe covered with a catheter sheath is inserted into the guiding catheter.
  • the tomographic image includes an image of the guide wire and catheter sheath inserted into the main blood vessel.
  • the determination unit 240 performs determination in consideration of the positions of the guide wire and catheter sheath images on the tomographic image.
  • the position acquisition unit 220 extracts a white pixel circle (a circle in which the inside of the contour is a white pixel and the outside of the contour is a black pixel) by Hough transform.
  • the position acquisition unit 220 identifies the circle closest to the center of the tomographic image as a circle indicating the catheter sheath (hereinafter referred to as a sheath circle).
  • the position acquisition unit 220 may treat only the extracted circles inside the circle indicating the inner wall of the main blood vessel as circle candidates indicating the catheter sheath. The center of this sheath circle is treated as the estimated position of the catheter sheath image.
  • the position acquisition unit 220 detects a pixel having the highest luminance among the pixels between the sheath circle and the blood vessel circle in the tomographic image before binarization.
  • the detected pixel is treated as a pixel indicating a part of the guide wire (hereinafter referred to as a guide wire pixel), and the position of the guide wire pixel is treated as an estimated position of the guide wire image.
  • step S325 the detection unit 230 extracts the intersection with the blood vessel when traveling outward from the center point of the main blood vessel as the position of the inner wall of the blood vessel. The specific process will be described below.
  • the detection unit 230 performs preprocessing on the binarized tomographic image. Specifically, the detection unit 230 sets all pixels within a predetermined distance from the center of the blood vessel circle as black pixels. This predetermined distance is determined to be equal to or less than the radius of the blood vessel circle. By this processing, it is possible to reduce the possibility that a pixel that is close to the center of the blood vessel circle and is not the inner wall of the blood vessel is erroneously detected as the inner wall of the blood vessel. On the other hand, by making this predetermined distance smaller than the radius of the blood vessel circle, it is possible to reduce the possibility of failing to detect pixels indicating the inner wall of the blood vessel located near the blood vessel circle.
  • the predetermined distance is not particularly limited, and may be 0.95 times or less of the radius of the blood vessel circle, or may be 0.50 times or more of the radius of the blood vessel circle, for example.
  • a guide wire image, a catheter sheath image, and blood vessel lumen noise can be erased from the tomographic image. For this reason, the intersection is not detected from the region where the distance from the center point of the main blood vessel is equal to or less than the predetermined distance.
  • Other methods can be used to eliminate guide wire images, catheter sheath images, and vessel lumen noise.
  • a guide wire image or a catheter sheath image can be recognized using template matching, and the recognized image can be erased.
  • noise or a catheter sheath image may be recognized and erased by using morphological processing.
  • a tomographic image immediately before the intersection detection is shown in FIG. 4E.
  • the detection unit 230 performs scanning in each angular direction from the central point of the main blood vessel, and detects an intersection with the blood vessel, that is, an intersection with the white pixel. In other words, for each of a plurality of half lines extending in the respective angular directions from the central point of the main blood vessel, the detection unit 230 selects a pixel closest to the central point among the white pixels on the half line as an intersection corresponding to the angular direction. Detect as. By performing 360 ° scanning, pixels indicating the inner wall of the blood vessel are extracted. The detection unit 230 stores each detected intersection in association with the angular direction and the distance from the center point of the main blood vessel. Using the stored information, a graph can be created in which the horizontal axis indicates the scanning angle and the vertical axis indicates the distance from the center point of the main blood vessel.
  • FIG. 4F An example of detection by the detection unit 230 is shown in FIG. 4F.
  • scanning is performed for each of the angular directions 411, 412, and 413 from the center 400 of the blood vessel circle. As a result, intersections 421, 422, and 423 are detected.
  • the determination unit 240 determines whether the intersection indicates the main blood vessel based on the distance from the center point of the main blood vessel to the intersection.
  • the determination unit 240 determines whether the intersection indicates a branch blood vessel.
  • the branch blood vessel is separated from the main blood vessel, so that the inner wall of the branch blood vessel is considered to be further away from the center point of the main blood vessel than the inner wall of the main blood vessel. Therefore, the determination unit 240 determines that the intersection indicates the inner wall of the main blood vessel when the distance from the central point of the main blood vessel to the intersection is equal to or less than the threshold value.
  • This threshold is determined based on the radius of the blood vessel circle.
  • a specific threshold value determination method is not particularly limited, and may be, for example, 0.90 times or more of the radius of the blood vessel circle or 1.10 times or less of the radius of the blood vessel circle.
  • the determination unit 240 determines that the intersection indicates the inner wall of the branch blood vessel when the distance from the central point of the main blood vessel to the intersection exceeds a threshold value.
  • the inner wall of the main blood vessel located behind the guide wire as viewed from the probe is not shown in the tomographic image.
  • an unrecognized region 430 hereinafter referred to as a guide wire shadow
  • the determination unit 240 further considers the positions of the catheter sheath image and the guide wire image, and guides whether an intersection whose distance from the center point of the main blood vessel exceeds the threshold indicates a branch blood vessel. It is determined whether the shadow of the wire is shown.
  • the determination unit 240 indicates that an intersection near the extension from the center of the sheath circle to the position of the guide wire pixel indicates a shadow of the guide wire, and an intersection not near the extension line indicates a branch blood vessel. judge.
  • the determination unit 240 has an intersection within a predetermined angle range from the direction from the catheter sheath image to the guide wire image on the tomographic image when the distance between the central point of the main blood vessel and the intersection exceeds a threshold value. Is determined to show the shadow of the guide wire.
  • the determination unit 240 is such that the distance between the center point of the main blood vessel and the intersection exceeds the threshold and is not within a predetermined angle range from the direction from the catheter sheath image to the guide wire image on the tomographic image. It is determined that the intersection indicates a branch vessel.
  • This angle range is not particularly limited, and can be set as appropriate.
  • the determination method by the determination unit 240 is not limited to this method. For example, when the distance from the center point of the main blood vessel to the intersection is greatly changed at two intersections located in the adjacent angular directions, the determination unit 240 determines whether the two intersections are a shadow of a guide wire or a branched blood vessel. Can be determined. And the determination part 240 can determine with the intersection which was not determined to show the shadow of a guide wire or a branch blood vessel showing a main blood vessel. This method can be applied to, for example, a tomographic image in which a blood vessel circle cannot be detected by the Hough transform.
  • step S335 the determination unit 240 detects an intersection indicating the boundary between the main blood vessel and the branch blood vessel according to the determination result.
  • the determination unit 240 also detects an intersection indicating the boundary between the main blood vessel and the guide wire shadow.
  • the determination unit 240 determines that the intersection indicating the main blood vessel is the main blood vessel. It is determined that the boundary with the branch vessel is indicated. However, in this case, it may be determined that the intersection indicating the branch blood vessel indicates the boundary between the main blood vessel and the branch blood vessel.
  • the determination unit 240 determines that the intersection indicating the main blood vessel is the main blood vessel and the guide wire. It is determined to indicate the boundary with the shadow of. However, in this case, it may be determined that the intersection indicating the shadow of the guide wire indicates the boundary between the main blood vessel and the shadow of the guide wire.
  • an intersection indicating a shadow of a branch blood vessel or a guide wire may not be detected in a portion where the inner wall of the main blood vessel is interrupted.
  • an intersection indicating a guidewire shadow may not be detected in the angular direction in which the guidewire shadow is located.
  • the intersection indicating the branch blood vessel is not detected around the branch position.
  • the determination unit 240 determines that the point indicating the inner surface is located at the boundary between the main blood vessel and the branch blood vessel (or the shadow of the guide wire) based on the position of the location where the inner surface of the main blood vessel is interrupted on the tomographic image. You can decide whether to do it.
  • the determination unit 240 when the determination unit 240 has an intersection indicating a main blood vessel in one direction with respect to adjacent angular directions, but does not have an intersection indicating a main blood vessel in the other direction, the determination unit 240 Can be determined to indicate the boundary between the main blood vessel and the branch blood vessel or the shadow of the guide wire (this is the boundary candidate point). More specifically, when there is a boundary candidate point within a predetermined angle range from the direction from the catheter sheath image to the guide wire image, the determination unit 240 determines that the boundary candidate point is the main blood vessel and the guide wire. It is determined to indicate the boundary with the shadow.
  • the determination unit 240 indicates the boundary between the main blood vessel and the branch blood vessel. Is determined.
  • the determination unit 240 can determine whether each of the plurality of points detected by the extraction unit 230 indicates the boundary between the main blood vessel and the branch blood vessel.
  • whether the point detected by the extraction unit 230 indicates the boundary between the main blood vessel and the branch blood vessel is determined by whether the point detected by the extraction unit 230 indicates the main blood vessel and the branch blood vessel. This is done after judging.
  • the determination of whether the point detected by the extraction unit 230 indicates the boundary between the main blood vessel and the branch blood vessel is the determination of whether the point detected by the extraction unit 230 indicates the main blood vessel and the branch blood vessel. Can be done independently.
  • step S340 the determination unit 240 detects an intersection pair indicating the boundary between the main blood vessel and the branch blood vessel, which sandwiches the branch blood vessel portion. Specifically, the determination unit 240 indicates a boundary between the main blood vessel and the branch blood vessel, and is a set of two intersections existing in two different angular directions, and the intersection existing between the two angular directions is A set of intersections that all show branch vessels (or no intersection exists) is detected.
  • the pair of intersections thus detected is referred to as a branch boundary pair.
  • the determination unit 240 indicates a boundary between the main blood vessel and the shadow of the guide wire, and is a set of two intersections existing in two different angular directions, and all the intersections existing between the two angular directions are all A set of intersections showing a shadow of the guide wire (or no intersection exists) is detected.
  • the detected intersection pair is referred to as a wire shadow boundary pair.
  • Such detected branch boundary pairs and wire shadow boundary pairs are used for processing by the determination update unit 250.
  • the determination update unit 250 updates the determination result by the determination unit 240 in step S330.
  • the determination update unit 250 refers to at least one of the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel and the position of the intersection indicating the boundary between the main blood vessel and the shadow of the guide wire.
  • the determination update unit 250 can determine whether or not a parameter determined based on the position of an intersection indicating these boundaries matches a predetermined condition, and can correct the determination result if they match.
  • the determination update unit 250 can detect a new intersection based on the position of the intersection indicating these boundaries, and can determine the detected intersection.
  • five examples of the determination result update method will be described. However, various methods can be considered for the determination result update method, and the determination result update method is not limited to the following example.
  • the determination update unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel, and determines that the determination unit 240 indicates the branch blood vessel when the predetermined condition is met. It is determined that the crossing point indicates the main blood vessel. Then, the determination update unit 250 updates the determination by the determination unit 240. Specifically, the determination update unit 250 determines that the intersection determined to indicate a branch blood vessel by the determination unit 240 when the difference in distance from the center point of the main blood vessel to each of the branch boundary pairs is equal to or greater than a threshold value. It is determined that the main blood vessel is indicated. In the case of FIG.
  • the determination update unit 250 determines that the intersection 502 determined by the determination unit 240 to indicate a branch blood vessel indicates a main blood vessel. In addition, the determination update unit 250 determines that the intersections 501 and 503 do not indicate the boundary between the main blood vessel and the branch blood vessel and are not a branch portion boundary pair.
  • the determination update unit 250 additionally detects an intersection indicating a main blood vessel that exists between the intersections 501 and 503 determined not to be a branch boundary pair.
  • An example of the additional detection method will be described with reference to FIG. 5C.
  • the determination update unit 250 calculates a straight line 505 obtained by translating a straight line 502 that passes through the intersections 501 and 503 determined not to be a branch boundary pair by a predetermined distance in a direction away from the central point of the main blood vessel. Set.
  • the determination update unit 250 detects the intersections 504 and 506 between the parallel line 505 and the blood vessel as the intersections indicating the main blood vessel. Specifically, the determination updating unit 250 moves a point 505s obtained by moving the middle point 502m of the intersections 501 and 503 by a predetermined distance in a direction perpendicular to the straight line 502 passing through the intersections 501 and 503 and away from the center point of the main blood vessel. Set as a reference point. Then, the determination update unit 250 performs scanning on the straight line 505 in both directions from the set reference point 505s, and detects pairs of intersections with blood vessels, that is, pairs 504 and 506 of intersections with white pixels.
  • the determination update unit 250 considers the size of the blood vessel in the upstream or downstream cross-sectional image, and determines whether or not the determination that the detected intersections 504 and 506 indicate the main blood vessel is appropriate. judge.
  • an upstream or downstream cross-sectional image that is substantially circular is referenced.
  • a cross-sectional image in which an intersection indicating a main blood vessel is additionally detected because it has the shape shown in FIG. 5A is not considered in this determination.
  • the updated blood vessel size is the approximate size of the blood vessel in the upstream or downstream cross-sectional image. Can be determined to be valid. If the determination update unit 250 determines that the intersection is appropriate, the determination update unit 250 updates the determination by the determination unit 240 if the intersections 504 and 506 indicate main blood vessels.
  • the determination update unit 250 can sequentially detect the intersections indicating the main blood vessels by setting, translating, and scanning the straight line passing through the pair of intersections indicating the newly detected main blood vessels. That is, the determination update unit 250 sets a straight line 508 obtained by translating a straight line 505 passing through the intersections 504 and 506 by a predetermined distance in a direction away from the central point of the main blood vessel. In addition, the determination update unit 250 uses, as a reference point, a point 508s obtained by moving the middle point 505m of the intersections 504 and 506 by a predetermined distance in a direction perpendicular to the straight line 505 passing through the intersections 504 and 506 and away from the center point of the main blood vessel. Set.
  • the determination update unit 250 performs scanning on the straight line 508 in both directions from the set reference point 508s, and detects a pair of intersections with blood vessels, that is, pairs 507 and 509 of intersections with white pixels.
  • the determination update unit 250 determines the detected intersections 507 and 509 as intersections indicating main blood vessels. If the reference point becomes a white pixel when this process is repeated, the repetition may be terminated, or the distance to be translated may be made smaller.
  • FIG. 6B shows a tomographic image 620 at a site where the stenosis is the highest, and 625 shows a distance between the branch boundary pairs 621 and 624 in the tomographic image 620.
  • FIG. 6B shows a tomographic image 620 at a site where the stenosis is the highest, and 625 shows a distance between the branch boundary pairs 621 and 624 in the tomographic image 620.
  • 6A shows a tomographic image 610 upstream from the tomographic image 620, and 612 shows the distance between the branch boundary pairs 611 and 613 in the tomographic image 610.
  • 6C shows a tomographic image 630 downstream of the tomographic image 620, and 632 shows the distance between the branch boundary pairs 631 and 633 in the tomographic image 630.
  • the distance between the branch boundary pairs becomes shorter as it approaches the stenosis site from the upstream side, and becomes longer as it advances from the stenosis site to the downstream side.
  • the distance between the branch boundary pairs increases as it approaches the center of the branch blood vessel from the upstream side and approaches the downstream side from the center of the branch blood vessel. As it gets shorter.
  • the determination update unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel, and determines that the determination unit 240 indicates a branch blood vessel when the predetermined condition is met. It is determined that the crossing point indicates the main blood vessel. Specifically, the determination update unit 250 determines whether or not the distance 612 between the branch boundary pairs detected from the tomogram 610 is greater than the distance 625 between the branch boundary pairs detected from the tomogram 620. judge. Further, the determination update unit 250 determines whether or not the distance 632 between the branch boundary pairs detected from the tomogram 630 is larger than the distance 625 between the branch boundary pairs detected from the tomogram 620.
  • an intersection determined to indicate a branch blood vessel by the determination unit 240 in the tomographic images 610, 620, and 630 may indicate a main blood vessel.
  • an intersection determined to indicate a branch blood vessel by the determination unit 240 may also indicate a main blood vessel.
  • the determination update unit 250 considers whether or not it is appropriate to determine that the detected intersections 622 and 623 indicate a main blood vessel in consideration of the size of the blood vessel in the upstream or downstream cross-sectional image. judge. This determination can be performed in the same manner as the determination for the intersections 504 and 506 described with reference to FIGS. 5A to 5C. If the determination update unit 250 determines that the intersection is appropriate, the determination unit 240 updates the determination by the determination unit 240 if the intersections 622 and 623 indicate main blood vessels. In addition, the determination update unit 250 determines that the intersections 621 and 624 do not indicate the boundary between the main blood vessel and the branch blood vessel and are not a branch portion boundary pair.
  • the determination update unit 250 additionally detects an intersection indicating a main blood vessel that exists between the intersections 621 and 624 determined not to be a branch boundary pair. Additional detection can be performed in the same manner as when the main blood vessel has the shape shown in FIG. 5A.
  • the intersection that originally shows the branch vessel may be If it shows a shadow, it may be misjudged.
  • the intersection 723 indicates a branched blood vessel, but is erroneously determined to indicate a shadow of a guide wire.
  • the intersection 722 also shows the shadow of the guide wire, and the intersections 721 and 724 are determined as wire shadow boundary pairs.
  • FIG. 7A is a tomographic image 710 at a position in the vicinity of the tomographic image 720 shown in FIG. 7B.
  • FIG. 7C is also a tomographic image 730 at a position near the tomographic image 720 shown in FIG. 7B.
  • the branch blood vessel and the shadow of the guide wire do not overlap.
  • the size of the guide wire shadow indicated by the wire shadow boundary pair 711 and 712 is not significantly different from the size of the guide wire shadow by the wire shadow boundary pair 731 and 732.
  • the determination update unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the guide wire shadow, and the intersection determined by the determination unit 240 to indicate the guide wire shadow indicates a branch blood vessel. judge. Specifically, the determination updating unit 250 determines that the shadow of the guide wire and the branch blood vessel overlap when the size of the shadow of the guide wire is larger than the tomographic image at the neighboring position, and the guide It is determined that some of the intersections determined to indicate the shadow of the wire indicate the branch blood vessel.
  • the determination update unit 250 calculates an angle width and a center angle for the detected wire shadow boundary pair.
  • the angle width represents a difference between an angle direction from the center point of the main blood vessel to one of the wire shadow boundary pairs and an angle direction from the center point of the main blood vessel to the other of the wire shadow boundary pairs.
  • the central angle is the angular direction located at the center of the angle direction from the center point of the main blood vessel to one of the wire shadow boundary pairs and the angle direction from the center point of the main blood vessel to the other of the wire shadow boundary pairs.
  • 7A and 7C, 713 and 733 indicate angular widths
  • 714 and 734 indicate central angles.
  • the determination update unit 250 detects a tomographic image that clearly has a wide angle width of the wire shadow boundary pair. Specifically, the determination update unit 250 detects a tomographic image in which the angle width of the wire shadow boundary pair exceeds a threshold value.
  • the threshold value may be set in advance or may be calculated by the determination update unit 250. For example, this threshold value can be calculated based on the average value of the angular widths calculated for a predetermined number of tomographic images adjacent to the tomographic image to be detected. In one example, the threshold value may be a value obtained by adding a predetermined value to the average value thus calculated.
  • the determination update unit 250 determines that the angular width 725 exceeds the threshold value.
  • the determination update unit 250 determines the position of the shadow of the guide wire in the tomographic image 720, that is, the position of the wire shadow boundary pair. presume. The determination update unit 250 performs this estimation based on the position of the wire shadow boundary pair calculated for the tomographic images 710 and 730 located in the vicinity of the tomographic image to be processed. Specifically, the determination update unit 250 refers to the positions of the wire shadow boundary pairs 711 and 712 detected from the tomographic image 710 and the positions of the wire shadow boundary pairs 731 and 732 detected from the tomographic image 730. The position of the wire shadow boundary pair in the second tomographic image is estimated.
  • the tomographic image 710, the tomographic image 720, and the tomographic image 730 are tomographic images at the first, second, and third positions of the blood vessel, respectively, and the second position is the first position and the third position. Exists between.
  • the determination update unit 250 performs linear interpolation between the center angle 714 of the wire shadow boundary pair detected from the tomographic image 710 and the center angle 734 of the wire shadow boundary pair detected from the tomographic image 730. Can be calculated. In this case, the determination update unit 250 can estimate the calculated value as the center angle 727 of the wire shadow boundary pair for the tomographic image 720. Further, the determination update unit 250 calculates a value by linear interpolation between the angle width 713 of the wire shadow boundary pair detected from the tomographic image 710 and the angle width 733 of the wire shadow boundary pair detected from the tomographic image 730. Can do.
  • the determination update unit 250 can estimate the calculated value as the angle width 728 of the wire shadow boundary pair for the tomographic image 720.
  • the linear interpolation may be weighted according to the distance, or may be nonlinear interpolation from three or more frames.
  • the determination update unit 250 selects a part of the intersections determined to show the shadow of the guide wire in the tomographic image 720. Specifically, the determination update unit 250 determines the region 728 specified by the estimated center angle 727 and angular width 726 of the wire shadow boundary pair among the intersections determined to show the shadow of the guide wire in the tomographic image 720. An intersection 723 that does not exist within can be selected. However, the determination update unit 250 considers the calculation error of the estimated angle width 726 of the wire shadow boundary pair, adds a predetermined angle value to the angle width 726, and then selects the intersection 723. May be.
  • the determination update unit 250 determines that the selected intersection 723 indicates a branch blood vessel. Further, the determination update unit 250 can detect the intersection 724 indicating the boundary point between the main blood vessel and the branch blood vessel in the same manner as the determination unit 240 according to the new determination.
  • the determination update unit 250 can select a tomographic image in which the branch vessel and the shadow of the guide wire do not overlap as a tomographic image used for estimation. That is, in one embodiment, the angle width 713 of the wire shadow boundary pair in the tomographic image 710 detected by the detection unit 230 is equal to or smaller than the threshold, and the angle width 733 of the wire shadow boundary pair in the tomographic image 730 is equal to or smaller than the threshold.
  • the detection unit 230 detects an intersection with the blood vessel when proceeding in each angular direction from the center point of the main blood vessel according to a predetermined angular direction resolution.
  • the determination update unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel, and detects a portion where there is a possibility that an undetected branch blood vessel exists.
  • the determination update part 250 detects an intersection according to higher angular direction resolution about the detected part, and determines whether the detected intersection shows a branch blood vessel.
  • the determination update unit 250 detects a combination of the tomographic image 810 in which the branch boundary pair is detected and the tomographic image 820 in which the branch boundary pair is not detected.
  • the tomographic image 810 is a tomographic image at a first position of the blood vessel
  • the tomographic image 820 is a tomographic image at a second position adjacent to the first position. Since the branch blood vessel is shown in a plurality of adjacent tomographic images, there is a possibility that the branch blood vessel is shown although the branch blood vessel was not detected from the tomographic image 820.
  • the determination update unit 250 refers to the angle direction 814 of the branch boundary pair 811 and 812 calculated from the tomogram 810 as shown in FIG. 8A, and detects the detection range in the tomogram 820 as shown in FIG. 8B.
  • 825 is set.
  • This detection range 825 is defined by a detection start angle and a detection end angle.
  • the detection range 825 is set to include the angular direction 814.
  • the width of the set detection range 825 is not particularly limited. In one embodiment, the width of the detection range 825 is set to match the angular width 813 of the branch boundary pair 811 812.
  • the detection start angle coincides with the angular direction from the main blood vessel center point to the intersection 811
  • the detection end angle coincides with the angular direction from the main blood vessel center point to the intersection 812.
  • the width of the detection range 825 is a predetermined value than the angular width 813 of the branch boundary pair 811 812. Is set to be only larger.
  • the angular width and the angular direction of the branch boundary pair can be calculated in the same manner as the angular width and the angular direction of the wire shadow boundary pair.
  • the determination update unit 250 detects an intersection in the set detection range 825 using a detection method with higher sensitivity while using the same method as the detection unit 230.
  • a detection method with higher sensitivity while using the same method as the detection unit 230.
  • the determination update unit 250 can detect an intersection according to an angular direction resolution higher than the angular direction resolution when the detection unit 230 performs scanning. In one example, if the detection unit 230 scans every 1 °, the determination update unit 250 can scan every 0.25 °. Then, similarly to the determination unit 240, the determination update unit 250 determines whether the detected intersection indicates a main blood vessel or a branch blood vessel.
  • the determination unit 240 determines that the two intersections are branched blood vessels. (Or a shadow of a guide wire).
  • the determination update unit 250 can also determine that the intersection indicates a branch blood vessel using the same method, but the determination threshold used in this case is made smaller than the threshold used when the determination unit 240 performs the determination. Can do. For example, the determination unit 240 determines that the two intersections indicate a branch blood vessel (or a shadow of a guide wire) when the difference in distance from the center point of the main blood vessel to the two intersections is greater than the first threshold. Can do.
  • the determination update unit 250 determines that the two intersections indicate a branch blood vessel (or a shadow of a guide wire) when the distance difference from the center point of the main blood vessel to the two intersections is larger than the second threshold. be able to.
  • the second threshold value is smaller than the first threshold value.
  • a trend of a change in the distance from the center point of the main blood vessel is detected, and an intersection where the change in the distance is greater than a threshold is determined to indicate a branch vessel.
  • a threshold is determined to indicate a branch vessel.
  • the determination unit 240 can determine that the first intersection indicates a branch blood vessel (or a shadow of a guide wire).
  • the determination update part 250 can determine with the 1st intersection showing a branch blood vessel, when this difference is larger than a 2nd threshold value. Again, the second threshold is smaller than the first threshold.
  • the determination update unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel, specifically, the position of the branch boundary boundary pair, and detects and detects a further intersection indicating the branch blood vessel. It is determined that a branch blood vessel is indicated at the intersection.
  • the specific method is the same as the method of additionally detecting the intersection indicating the main blood vessel described with reference to FIG. 5C. That is, the determination update unit 250 sets a straight line obtained by translating a straight line passing through an intersection determined to be a branch boundary pair by a predetermined distance in a direction away from the central point of the main blood vessel. Then, the determination update unit 250 detects an intersection between the translated straight line and the blood vessel as an intersection indicating a branch blood vessel.
  • the determination updating unit 250 refers to the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel that does not form the branch boundary pair, and detects and detects a further intersection indicating the branch blood vessel. It is determined that a branched blood vessel is indicated at the intersection. For example, as shown in FIG. 7B, when the branch blood vessel and the shadow of the guide wire overlap, an intersection indicating a boundary between the main blood vessel and the branch blood vessel that does not form a branch boundary pair may occur.
  • the determination update unit 250 sets a straight line that passes through the intersection 724 indicating the boundary between the main blood vessel and the branch blood vessel and is orthogonal to the direction indicated by the estimated center angle 727 of the wire shadow boundary pair to the center point of the main blood vessel.
  • a straight line obtained by translating a predetermined distance in the direction away from the center is set. Then, the determination update unit 250 can detect an intersection between the translated straight line and the blood vessel as an intersection indicating a branch blood vessel.
  • the determination update unit 250 determines a point away from the intersection 724 by a predetermined distance in a direction approaching the central point of the main blood vessel along a straight line orthogonal to the direction indicated by the central angle 727. Then, the determination update unit 250 sets, as a reference point, a point that has been moved by a predetermined distance in the direction indicated by the center angle 727 in the direction away from the center point of the main blood vessel. Further, the determination update unit 250 performs scanning on a straight line set in a direction approaching the intersection 724 from the set reference point, and uses the intersection with the blood vessel, that is, the intersection with the white pixel as an intersection indicating a branch blood vessel. Can be detected.
  • the determination update unit 250 instead of the intersection determined to be a branch boundary pair, includes an intersection 721 indicating a boundary between the main blood vessel and the shadow of the guide wire, a main blood vessel, and a branch blood vessel. It is also possible to use a pair with an intersection 724 indicating the boundary of. That is, the determination update unit 250 sets a straight line obtained by translating a straight line passing through the pair by a predetermined distance in a direction away from the central point of the main blood vessel. Then, the determination update unit 250 detects, as an intersection indicating a branch blood vessel, an intersection closer to the intersection 724 out of a pair of intersections of the translated straight line and the blood vessel.
  • the determination updating unit 250 refers to the position of the wire shadow boundary pair in the same manner, detects a further intersection indicating the guide wire shadow, and determines that the detected intersection indicates the guide wire shadow. Good.
  • the determination update unit 250 may use only one of the above methods (1) to (5), or may use a plurality of methods in combination.
  • the order in which the above methods are applied is not particularly limited.
  • the determination update unit 250 performs the process (5) after performing the processes (1) to (4).
  • the position of the intersection indicating the boundary between the main blood vessel and the branch blood vessel in the tomographic image at a position different from the tomographic image to be processed, and the shadow of the main blood vessel and the guide wire Processing is performed with reference to at least one of the positions of intersections indicating boundaries.
  • the boundary between the main blood vessel and the branch blood vessel can be detected with higher accuracy.
  • the boundary extraction unit 200 sends the determination result thus obtained to the information calculation unit 1000 in order to calculate quantitative information about the branch blood vessel. Specifically, the position information about each intersection and the determination result by the determination unit 240 or the determination update unit 250 are sent to the information calculation unit 1000. In one embodiment, this position information includes the angular direction from the central point of the main blood vessel and the distance from the central point. In this case, the boundary extraction unit 200 can send the estimated position of the central point of the main blood vessel in the tomographic image to the information calculation unit 1000. In another embodiment, this position information may include the XY coordinates of the intersection on the tomographic image. As described above, the boundary extraction unit 200 generates determination results for a plurality of intersections for each tomographic image and sends the determination results to the information calculation unit 1000.
  • the boundary extraction unit 200 stores information that distinguishes at least a portion corresponding to the main blood vessel and a portion corresponding to the branch blood vessel branching from the main blood vessel. This is sent to the calculation unit 1000.
  • the boundary extraction unit 200 may send only the position information about the intersection indicating the boundary between the main blood vessel and the branch blood vessel to the information calculation unit 1000. Further, the boundary extraction unit 200 may send only the position information about the intersection indicating the branch blood vessel to the information calculation unit 1000.
  • the boundary extraction unit 200 can display the determination result on the display unit 120 via the display control unit 110.
  • An example of the display screen is shown in FIG.
  • a cross-sectional image 910 and a blood vessel axis direction cross-sectional image 920 are displayed.
  • dots 911 to 915 showing the detected intersection and displayed in different colors are superimposed and displayed.
  • Each of the dots 911 to 915 includes an intersection indicating a main blood vessel, an intersection indicating a branch blood vessel, an intersection indicating a shadow of the guide wire, an intersection indicating a boundary point between the main blood vessel and the branch blood vessel, and a shadow of the main blood vessel and the guide wire.
  • the intersection which shows the boundary point of is represented.
  • the user can stop the display of these dots 911 to 915 by operating the check box 916, for example.
  • dots 911 to 915 are superimposed on the blood vessel axis direction cross-sectional image.
  • the user can easily identify a portion corresponding to the branch blood vessel or the shadow of the guide wire in the blood vessel image. Is possible.
  • the information calculation unit 1000 includes an information acquisition unit 1010 and a generation unit 1020.
  • the information acquisition unit 1010 acquires information for distinguishing a portion corresponding to the main blood vessel and a portion corresponding to the branch blood vessel branching from the main blood vessel in the blood vessel image 190. As described above, the information acquisition unit 1010 acquires the determination result obtained by the boundary extraction unit 200. In this embodiment, the information acquisition unit 1010 acquires from the boundary extraction unit 200 at least position information about an intersection indicating a boundary between a main blood vessel and a branch blood vessel or position information about an intersection indicating a branch blood vessel. The information acquisition unit 1010 can also acquire a blood vessel image 190.
  • the generation unit 1020 uses the information acquired by the information acquisition unit 1010 to generate quantitative information indicating the form of the branch blood vessel in the branch portion from the main blood vessel.
  • Examples of the quantitative information include information indicating the size of the branch blood vessel at a branch portion from the main blood vessel, information indicating the branch direction of the branch blood vessel from the main blood vessel, and the like.
  • the generation unit 1020 generates both information indicating the size of the branch blood vessel and information indicating the branch direction, but the generation unit 1020 may generate one of these pieces of information.
  • step S1110 the information acquisition unit 1010 acquires information that distinguishes between a portion corresponding to the main blood vessel and a portion corresponding to a branch blood vessel branching from the main blood vessel in the blood vessel image 190.
  • step S1120 the generation unit 1020 detects a branch portion of the branch blood vessel included in the blood vessel image 190.
  • the generation unit 1020 determines that one branch portion exists for continuous tomographic images in which branch blood vessels exist. Whether or not a branch blood vessel exists in the tomographic image can be easily determined by confirming the presence of an intersection indicating the boundary between the main blood vessel and the branch blood vessel or an intersection indicating the branch blood vessel. When a plurality of branch portions are detected, the following processing is performed for each branch portion.
  • the generation unit 1020 calculates branch plane information for the branch portion detected in step S1120.
  • the branch plane is a plane connecting the main blood vessel and the branch blood vessel. Examples of the branch plane information include the position, direction, size, and the like of the branch plane.
  • the size of the branch surface corresponds to the size of the branch blood vessel at the branch portion from the main blood vessel.
  • the size of the branch surface includes not only the area of the branch surface, but also the length indicating the characteristics of the branch surface (radius and diameter for a circle, minor axis and major axis for an ellipse, etc.) and the length of the circumference of the branch surface Also included.
  • step S1130 the generation unit 1020 derives an approximate polygon or an approximate ellipse that approximates the boundary point group between the main blood vessel and the branch blood vessel.
  • FIG. 12A shows a boundary point group 1201 that is an intersection group indicating a boundary between a main blood vessel and a branch blood vessel.
  • the generation unit 1020 derives an approximate plane 1202 that approximates the boundary point group 1201 as illustrated in FIG. 12B.
  • the generation unit 1020 obtains a projection point group 1203 by projecting each boundary point group 1201 onto the approximate plane 1202 perpendicularly.
  • an approximate polygon 1204 configured by the projected point group 1203 is derived.
  • the approximate polygon 1204 is obtained by linearly connecting adjacent projection point groups 1203. However, instead of the approximate polygon 1204, an approximate curve obtained by nonlinearly connecting the projection point group 1203 using, for example, a spline curve or the like may be derived. Then, the generation unit 1020 derives an approximate ellipse 1205 that approximates the approximate polygon 1204 as illustrated in FIG. 12E.
  • the algorithm used for the approximation is not particularly limited, and a conventionally known method such as least square approximation can be used.
  • the generation unit 1020 determines the size of the derived approximate polygon (or approximate curve), the size of the maximum inscribed circle of the derived approximate polygon (or approximate curve), or the derived approximate ellipse. Is calculated as quantitative information. For example, the generation unit 1020 can calculate the area of the derived approximate polygon. Further, the generation unit 1020 can calculate the radius, diameter, or area of the maximum inscribed circle of the derived approximate polygon. Furthermore, the generation unit 1020 can calculate the short axis length, the long axis length, the area, or the like of the derived approximate ellipse. Further, the generation unit 1020 can calculate the circumference of the derived approximate polygon or approximate ellipse.
  • the generation unit 1020 further calculates the center of the maximum inscribed circle of the derived approximate polygon, the intersection of the major axis and the minor axis of the derived approximate ellipse, or the center of gravity of the derived approximate polygon or approximate ellipse. May be.
  • the short axis length of the approximate ellipse approximates the diameter of the branch blood vessel at the branch portion.
  • the area of the approximate polygon or approximate ellipse is considered to approximate the area of the branch plane.
  • the branch plane information thus obtained is used as reference information for selecting a device such as a balloon or a stent to be inserted into the branch blood vessel.
  • the generation unit 1020 derives the maximum inscribed sphere inscribed in the boundary point group between the main blood vessel and the branch blood vessel, and calculates the size and position of the derived maximum inscribed sphere. Good.
  • the value calculated in this way is also branch information and represents the size and position of the branch portion.
  • the generation unit 1020 calculates the branch direction of the branch blood vessel from the main blood vessel for the branch portion detected in step S1120.
  • the generation unit 1020 calculates the direction of the main blood vessel at the branch portion.
  • the generation unit 1020 can calculate the center of gravity of the lumen of the main blood vessel in two or more tomographic images in the vicinity of the branch portion, and can derive a vector that approximates the position of the center of gravity. For this calculation, it is possible to use position information about the intersection indicating the main blood vessel acquired from the boundary extraction unit 200. The vector derived in this way represents the direction of the main blood vessel. The calculation of the center of gravity can be performed using position information about the intersection indicating the main blood vessel.
  • the tomographic image used for calculating the direction of the main blood vessel may be a tomographic image in which a branched portion is reflected, or a tomographic image within a predetermined range from the branched portion.
  • the center of the approximate ellipse of the lumen of the main blood vessel or the center of the maximum inscribed circle of the lumen of the main blood vessel can be used instead of the center of gravity of the lumen of the main blood vessel.
  • the lumen of the main blood vessel becomes narrower and the position of the center of gravity moves in the lesion.
  • a tomographic image closer to the branch portion than the lesion is used. In this case, the influence of the lesion when calculating the direction of the main blood vessel can be suppressed.
  • the detection method of the lesion is not particularly limited. For example, when the lumen of the main blood vessel is smaller than the threshold value, it can be determined that the lesion is reflected in the tomographic image.
  • the generation unit 1020 identifies a tomographic image in which the maximum inscribed circle of the lumen of the main blood vessel is the smallest among the tomographic images in which the lesion is reflected.
  • the center of the inscribed circle in the identified tomographic image can be used instead of the center of gravity of the lumen of the main blood vessel.
  • the calculated branching direction approximates the traveling direction of the branching blood vessel relative to the traveling direction of the catheter or the like in the blood vessel, which is useful in making a treatment plan.
  • step S1160 the generation unit 1020 calculates the branch direction of the branch blood vessel in the branch portion.
  • the generation unit 1020 calculates the branch direction of the branch blood vessel with reference to the position information about the intersection indicating the branch blood vessel. For example, the generation unit 1020 can derive an inscribed sphere inscribed in the branch blood vessel. Then, the generation unit 1020 determines the branch direction of the branch blood vessel based on the direction from the center of the approximate polygon (or approximate curve) or approximate ellipse derived in step S1140 toward the center of the derived inscribed sphere. Can be calculated.
  • the generation unit 1020 derives the maximum inscribed sphere inscribed in the intersection group indicating the branch blood vessel.
  • the maximum inscribed sphere is derived so as not to protrude from the space surrounded by the intersection group indicating the branch blood vessel on the branch portion side or the open portion side (downstream side) away from the branch portion.
  • the maximum inscribed sphere may be derived after adding a point group representing the start point of the branch blood vessel and a point group on the open side (downstream side) away from the branch portion to the intersection group indicating the branch blood vessel. Good.
  • the generation unit 1020 calculates a vector from the approximate polygon (or approximate curve) or approximate ellipse calculated in step S1140 toward the center of the maximum inscribed sphere as a vector indicating the branch direction of the branch blood vessel.
  • the generation unit 1020 may use the center of the maximum inscribed circle of the approximate polygon (or approximate curve) derived in step S1140 instead of the approximate polygon (or approximate curve) or the center of gravity of the approximate ellipse.
  • a predetermined number of point groups that are further away from the branch portion are selected from the intersection group indicating the branch blood vessel, and the maximum inscribed inscribed in the selected point group is selected.
  • a sphere is derived.
  • the generation unit 1020 derives two or more inscribed spheres inscribed in the intersection group indicating the branch blood vessel, and the direction from the center of one inscribed sphere toward the center of the other inscribed sphere May be calculated as the branch direction of the branch vessel.
  • the branch direction of the branch blood vessel can be calculated based only on the position information about the intersection indicating the branch blood vessel.
  • one inscribed sphere is the maximum inscribed sphere, and the distance between the centers of the two inscribed spheres is equal to or greater than a threshold value.
  • Two inscribed spheres are derived such that the difference between the inscribed sphere radii is equal to or less than a threshold value.
  • the generation unit 1020 can quantitatively represent the branch direction of the branch blood vessel in the branch portion thus obtained using an angle.
  • this branch direction can be expressed as an angle with respect to the scanning direction when the blood vessel image 190 is captured.
  • the branch direction thus obtained can be used as reference information when a guide wire or the like is inserted into the branch blood vessel.
  • the generation unit 1020 calculates the branch angle of the branch blood vessel from the main blood vessel in order to provide more useful information.
  • the branch angle calculated in this way corresponds to quantitative information indicating the form of the branch blood vessel in the branch portion from the main blood vessel.
  • the method for calculating the branch angle is not particularly limited.
  • the generation unit 1020 may calculate an angle between a vector representing the direction of the main blood vessel and a vector representing the branch direction of the branch blood vessel.
  • angles ⁇ and ⁇ shown in FIG. 13 are calculated so that the user can more easily understand the branch angle.
  • an xyz coordinate system (right-handed Cartesian coordinate system) is set so that a vector 1301 representing the direction of the main blood vessel is on the xy plane and is parallel to the x-axis.
  • the xyz coordinate system of the vector 1302 representing the branch direction of the branch blood vessel is set so that the start point is located at the origin and the end point is located in the first quadrant of the xy plane.
  • a projection point 1303 is a point obtained by projecting the end point of a vector 1302 onto the xy plane.
  • the branch angle thus obtained can be used as reference information when a guide wire or the like is inserted into the branch blood vessel.
  • step S1180 the generation unit 1020 calculates information indicating the size of the branch blood vessel in the cross section orthogonal to the branch direction calculated in step S1160.
  • the information calculated in this way also corresponds to quantitative information indicating the shape of the branch blood vessel in the branch portion from the main blood vessel.
  • Examples of the information indicating the size of the branch blood vessel include a cross-sectional area, a circumference, a radius or a diameter of the maximum inscribed circle, and the like.
  • the generation unit 1020 can generate information indicating the size of the branch blood vessel according to the intersection group indicating the branch blood vessel.
  • a cross-sectional image of a branch blood vessel can also be generated by projecting the luminance of the intersection group.
  • the brightness of the projected intersection group is the brightness value of the corresponding pixel in the blood vessel image 190 (for example, a cross-sectional image).
  • the generation unit 1020 may project the intersection group indicating the branch blood vessel onto a cross section orthogonal to the branch direction, and can calculate information indicating the size of the branch blood vessel according to the position of the projected point. In this case, it is possible to project a point group having a distance from the cross section within a predetermined range from the cross point group indicating the branch blood vessel onto the cross section.
  • a point cloud to be projected is selected as follows. This selection method will be described with reference to FIGS. 14A to 14D.
  • a vector 1401 representing the branch direction of the branch blood vessel comes on the plane, and a plane orthogonal to the imaging section 1402 at the time of imaging the blood vessel image 190 is defined as an XY plane.
  • the X axis represents the scanning direction when the blood vessel image 190 is captured.
  • the angle formed by the scanning direction X and the vector representing the branch direction is ⁇ .
  • the i-th imaging section at the time of imaging the blood vessel image 190 is referred to as a section i
  • a projection target section 1403 orthogonal to the vector 1401 representing the branch direction is referred to as a section j.
  • a point closest to the cross-section j is selected from the intersection group indicating the branch blood vessel.
  • the selected point is called P i, j .
  • a vertical bisector 1404 that divides the two projection points is calculated.
  • FIG. 14B shows the position of the vertical bisector 1404.
  • an intersection group indicating a branch blood vessel on the cross section i between the vertical bisector 1404 and a plane passing through Pi, j parallel to the vertical bisector 1404 is projected onto the cross section j. Selected as a point.
  • intersection group indicating a branch vessel on the cross section i + 1 between the vertical bisector 1404 and a plane parallel to the vertical bisector 1404 and passing through P i + 1, j is projected onto the cross section j. Selected as a point.
  • the selected point 1405 is represented.
  • the intersection group indicating the branch blood vessel on the cross section i between the vertical bisector 1406 and the plane passing through P i, j parallel to the vertical bisector 1406 is , Selected as a point that is projected onto section j but not onto section j + 1. Further, an intersection group indicating a branching vessel on the cross section i between the vertical bisector 1406 and a plane parallel to the vertical bisector 1406 and passing through P i, j + 1 is projected onto the cross section j + 1. However, it is selected as a point that is not projected onto the section j.
  • a method for creating a tomographic image at an arbitrary cross section from the blood vessel image 190 is known as a multi-section reconstruction method. Therefore, the method in which the generation unit 1020 reconstructs the blood vessel image 190 to create a tomographic image in a cross section orthogonal to the branch direction of the branch blood vessel is not limited to the above method.
  • an approximate ellipse, approximate curve and approximate polygon that approximate the projected point are derived, and the area and the length of the circumference are derived.
  • a method of deriving the maximum inscribed circle of the projected point and determining its radius, diameter, or area is derived.
  • the generation unit 1020 can also create and output a tomographic image in a cross section perpendicular to the branch direction of the branch blood vessel.
  • the generation unit 1020 can create a tomographic image that passes through the approximate polygon (or approximate curve) or approximate ellipse center of gravity calculated in step S1140.
  • the generation unit 1020 can also create a tomographic image that passes through the position of the most upstream side or the most downstream side of the branch plane.
  • the generation unit 1020 can also generate a surface rendering image or a volume rendering image of the branch blood vessel in the line-of-sight direction along the branch direction of the branch blood vessel or in the line-of-sight direction orthogonal to the branch direction.
  • the generation unit 1020 may calculate the size, for example, the width or thickness of the stent strut (stent strut). Stent struts appear as high-luminance points on the tomographic image. Therefore, similarly to the estimated position of the guide wire image, the detection unit 230 can extract the stent strut morphologically as an object, and can detect the position. In this case, the generation unit 1020 can project the object representing the stent strut vertically onto the branch plane.
  • generation part 1020 can calculate the area of the division area produced by dividing
  • the generation unit 1020 can project the object representing the stent strut onto a cross section orthogonal to the branch direction of the branch blood vessel. And the production
  • the information thus obtained corresponds to the width of the stent struts in the direction perpendicular to the catheter when manipulating the catheter through the stent strut gap. Thus, this information is useful for manipulating a guidewire or the like through the stent strut gap, for example, to select a balloon to be used to perform a kissing balloon technique.
  • the generation unit 1020 corrects quantitative information indicating the form of the branch blood vessel in the branch portion from the main blood vessel using the information indicating the size of the stent. Can do.
  • Information indicating the size of the stent is acquired by the information acquisition unit 1010.
  • Information indicating the size of the stent may be input by the user via an input unit (not shown), or may be recorded in the information calculation unit 1000 in advance.
  • the information acquisition unit 1010 can acquire information indicating the width or thickness (I1) of the stent strut.
  • the generation unit 1020 can calculate the correction parameter (I1 / I2) using the calculated width or thickness (I2) of the stent strut.
  • the calculated width or thickness of the stent strut may be an average value of values measured for each of the plurality of stent struts.
  • the generation unit 1020 more accurately multiplies the correction parameter (I1 / I2) calculated in this way by quantitative information indicating the morphology of the branching blood vessel, for example, the short axis length of the approximate ellipse calculated in step S1140. Can be obtained.
  • the width of the stent strut is used, the length in the blood vessel axis direction can be corrected. Further, when the thickness of the stent strut is used, the length in the scanning line direction can be corrected.
  • the information calculation unit 1000 can cause the display unit 120 to display quantitative information indicating the shape of the obtained branch blood vessel via the display control unit 110.
  • the display control unit 110 can display a display screen including quantitative information on the display unit 120.
  • the display control unit 110 can also cause the display unit 120 to display a display screen that includes at least one of the cross-sectional image of the blood vessel, the axial cross-sectional image, and the three-dimensional image.
  • FIG. 15 shows an example of a display screen including both quantitative information and a blood vessel image. However, it is not essential that the display screen includes both quantitative information and a blood vessel image.
  • the blood vessel axis direction cross-sectional image 1510 is displayed on the display screen 1500, and the blood vessel axis direction cross-sectional image 1510 shows branch portions SB1 to SB5 from the detected main blood vessel to the branch blood vessel.
  • the user can specify a branching portion for which information is desired via an input unit (not shown).
  • the display control unit 110 updates the display screen so as to include quantitative information indicating the morphology of the branch blood vessel in the designated branch portion in response to an input designating one of the plurality of branch portions. Can do.
  • the display control unit 110 in response to an input designating one of the plurality of branch portions, includes a cross-sectional image of the blood vessel including the specified branch portion, an axial cross-sectional image, and a three-dimensional image.
  • the display screen can be updated to include at least one.
  • the branch portion SB5 is selected.
  • the branch angle ( ⁇ 5, ⁇ 5) of the branch blood vessel, the diameter of the branch blood vessel (D5), and the area of the branch surface (S5) are displayed. Further, the region 1520 further displays the diameter (D5) of the branch blood vessel and the area (S5) of the branch surface after correction by the width or thickness of the stent strut.
  • enlarged images 1530, 1540, and 1550 of the blood vessel axis direction cross-sectional image including the branch portion SB5 and a cross-sectional image 1560 including the branch portion SB5 are displayed.
  • the cross-sectional position of the displayed enlarged image 1530 can be changed in the screen depth direction.
  • the orientation of the cross section of the enlarged image 1530 can be controlled using the user interface 1580 at the lower right of the display screen 1500.
  • the enlarged image 1540 is a cross section in the blood vessel axis direction parallel to the xz plane shown in FIG. 13 and passing through the center (probe).
  • the position of the detected stent strut is highlighted.
  • the display screen 1500 displays the blood vessel axial direction cross-sectional image and the cross-sectional image of the main blood vessel, but the blood vessel axial direction cross-sectional image or the cross-sectional image of the branch blood vessel in the branch portion SB5 may be displayed. .
  • 3D image 1570 displays a three-dimensional image of a blood vessel including branch portion SB5.
  • the line-of-sight direction of the displayed three-dimensional image is determined according to the branch direction of the branch blood vessel in the designated branch portion.
  • the display control unit 110 can determine the line-of-sight direction of the 3D image 1570 so as to match the branch direction vector of the branch blood vessel in the selected branch portion SB5.
  • the method of determining the line-of-sight direction is not limited to this method.
  • the display control unit 110 determines the line-of-sight direction of the 3D image 1570 so as to be orthogonal to the branch direction vector of the branch blood vessel in the selected branch portion SB5. Also good.
  • the image processing apparatus 100 including the boundary extraction unit 200 and the information calculation unit 1000 has been described above.
  • the image processing apparatus including the boundary extraction unit 200 and the image processing apparatus including the information calculation unit 1000 may be separate devices.
  • the image processing apparatus including the boundary extraction unit 200 can acquire the blood vessel image 190 and output the determination result by the determination unit 240 or the determination update unit 250. Based on the output information, the user can easily identify the portion of the blood vessel image 190 corresponding to the branch blood vessel or the shadow of the guide wire.
  • the image processing apparatus including the information calculation unit 1000 is information that distinguishes between a part corresponding to the main blood vessel and a part corresponding to the branch blood vessel generated by a method different from the method used by the boundary extraction unit 200. May be obtained. Even if such information is used, the image processing apparatus including the information calculation unit 1000 can generate and output quantitative information indicating the shape of the obtained branched blood vessel.
  • the functions of the units included in the image processing apparatus 100 shown in FIG. 1 can be realized using a general-purpose computer. As described above, even when the image processing apparatus including the boundary extraction unit 200 and the image processing apparatus including the information calculation unit 1000 are separate apparatuses, the functions of the respective apparatuses are realized using a general-purpose computer. be able to.
  • FIG. 16 is a diagram showing a basic configuration of a computer.
  • a processor 1610 is a CPU, for example, and controls the operation of the entire computer.
  • the memory 1620 is, for example, a RAM, and temporarily stores programs, data, and the like.
  • the computer-readable storage medium 1630 is, for example, a hard disk or a CD-ROM, and stores programs, data, and the like for a long time.
  • a program that realizes the function of each unit stored in the storage medium 1630 is read into the memory 1620. Then, when the processor 1610 executes the program on the memory 1620, the processing of each step described above is performed, and the function of each unit is realized.
  • an input interface 1640 is an interface for acquiring information from an external device.
  • the output interface 1650 is an interface for outputting information to an external device, and is connected to the display unit 120, for example.
  • a bus 1660 connects the above-described units and enables data exchange.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Geometry (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Endoscopes (AREA)

Abstract

 管状物体を断層撮影して得られた情報に基づいて、管状物体から分岐する分岐管部についての情報を自動的に提供する。 プローブを用いて第1の管状物体内を走査することにより得られた管状物体画像のうち、第1の管状物体に相当する部位と、第1の管状物体から分岐する第2の管状物体に相当する部位と、を区別する情報を取得する。情報を使用して、第1の管状物体からの分岐部分における第2の管状物体の形態を示す定量的な情報を生成する。

Description

画像処理装置、画像処理方法及びプログラム
 本発明は、画像処理装置、画像処理方法及びプログラムに関するものである。
 従来より、血管等の管状物体の画像診断のために、管状物体内にプローブを挿入して断層撮影を行う装置が知られている。例えば、動脈硬化の診断や、バルーンカテーテル又はステント等の高機能カテーテルによる血管内治療時の術前診断、あるいは、術後の結果確認のために、このような画像診断装置が広く利用されている。代表的な画像診断装置としては、例えば血管内超音波診断装置(IVUS)、光干渉断層画像診断装置(OCT/OFDI)等が開発されている。
 これらの装置により撮影された血管画像を、医師が容易に確認できるようにする技術もまた開発されている。引用文献1には、IVUS又はOCTにより得られた断層像から再構成された3次元画像を、CT又はMRIにより得られた3次元画像と対応づける技術が開示されている。引用文献1に記載の技術においては、対応付けのために、IVUS又はOCTにより得られた画像から、血管の分岐部が自動的に抽出される。
特開2012-075702号公報
 プローブを挿入した管状物体についての情報だけでなく、管状物体から分岐する分岐管部についての情報を確認することが望まれる場合がある。例えば、血管の分岐部にステントを留置する場合には、主血管の情報のみならず、主血管から分岐している分岐血管の情報を確認することが望まれる。しかしながら、分岐管部の情報を容易に取得することを可能とする技術は開発されていなかった。
 本発明は、管状物体を断層撮影して得られた情報に基づいて、管状物体から分岐する分岐管部についての情報を自動的に提供することを目的とする。
 本発明の課題を解決するために、例えば、本発明の一実施形態に係る画像処理装置は以下の構成を備える。すなわち、
 プローブを用いて第1の管状物体内を走査することにより得られた管状物体画像のうち、前記第1の管状物体に相当する部位と、前記第1の管状物体から分岐する第2の管状物体に相当する部位と、を区別する情報を取得する情報取得手段と、
 前記情報を使用して、前記第1の管状物体からの分岐部分における前記第2の管状物体の形態を示す定量的な情報を生成する生成手段と、
 を備える。
 管状物体を断層撮影して得られた情報に基づいて、管状物体から分岐する分岐管部についての情報を自動的に提供することができる。
 本発明のその他の特徴及び利点は、添付図面を参照とした以下の説明により明らかになるであろう。なお、添付図面においては、同じ若しくは同様の構成には、同じ参照番号を付す。
 添付図面は明細書に含まれ、その一部を構成し、本発明の実施の形態を示し、その記述と共に本発明の原理を説明するために用いられる。
図1は本発明の一実施形態に係る画像処理装置100の概略構成を示す図である。 図2は一実施形態における境界抽出部200の概略構成を示す図である。 図3は一実施形態において境界抽出部200が行う処理のフローチャートである。 図4Aは一実施形態において境界抽出部200が行う処理を説明する図である。 図4Bは一実施形態において境界抽出部200が行う処理を説明する図である。 図4Cは一実施形態において境界抽出部200が行う処理を説明する図である。 図4Dは一実施形態において境界抽出部200が行う処理を説明する図である。 図4Eは一実施形態において境界抽出部200が行う処理を説明する図である。 図4Fは一実施形態において境界抽出部200が行う処理を説明する図である。 図5Aは一実施形態において判定更新部250が行う処理を説明する図である。 図5Bは一実施形態において判定更新部250が行う処理を説明する図である。 図5Cは一実施形態において判定更新部250が行う処理を説明する図である。 図6Aは一実施形態において判定更新部250が行う処理を説明する図である。 図6Bは一実施形態において判定更新部250が行う処理を説明する図である。 図6Cは一実施形態において判定更新部250が行う処理を説明する図である。 図7Aは一実施形態において判定更新部250が行う処理を説明する図である。 図7Bは一実施形態において判定更新部250が行う処理を説明する図である。 図7Cは一実施形態において判定更新部250が行う処理を説明する図である。 図8Aは一実施形態において判定更新部250が行う処理を説明する図である。 図8Bは一実施形態において判定更新部250が行う処理を説明する図である。 図9は境界抽出部200による判定結果を表示する画面の一例を示す図である。 図10は一実施形態における情報算出部1000の概略構成を示す図である。 図11は一実施形態において情報算出部1000が行う処理のフローチャートである。 図12Aは主血管と分岐血管との境界点群の近似方法の一例を説明する図である。 図12Bは主血管と分岐血管との境界点群の近似方法の一例を説明する図である。 図12Cは主血管と分岐血管との境界点群の近似方法の一例を説明する図である。 図12Dは主血管と分岐血管との境界点群の近似方法の一例を説明する図である。 図12Eは主血管と分岐血管との境界点群の近似方法の一例を説明する図である。 図13は分岐血管の分岐角度の定義の一例を説明する図である。 図14Aは分岐血管の断面へと投影される点の選択方法を説明する図である。 図14Bは分岐血管の断面へと投影される点の選択方法を説明する図である。 図14Cは分岐血管の断面へと投影される点の選択方法を説明する図である。 図14Dは分岐血管の断面へと投影される点の選択方法を説明する図である。 図15は情報算出部1000により生成された情報の表示画面の一例を示す図である。 図16は一実施形態におけるコンピュータの基本構成を示す図である。
 以下、本発明の実施形態を図面に基づいて説明する。ただし、本発明の範囲は以下の実施形態に限定されるものではない。
 図1は、本発明の一実施形態に係る画像処理装置100を示す。画像処理装置100は、表示制御部110と、境界抽出部200と、情報算出部1000とを備える。画像処理装置100は、血管画像190を取得する撮影装置(不図示)を備える撮影システムの一部であってもよい。
 画像処理装置100には、プローブを用いて管状物体内を走査することにより得られた管状物体画像が入力される。管状物体の種類は特に限定されないが、以下では管状物体は血管であり、画像処理装置100には血管画像190が入力されるものとして説明する。
 血管画像190は、血管の形態を示す画像情報であって、その形態は特に限定されない。血管画像の取得方法は特に限定されず、例えば既存の超音波診断装置(IVUS)、光干渉断層画像診断装置(OCT)、又は光干渉断層画像診断装置(OFDI)等を用いることができる。以下では、プローブが挿入された血管のことを主血管と呼ぶ。
 血管画像190は、以下のようにして取得することができる。すなわち、血管にプローブを挿入して血管内を走査することにより、複数のラインデータが取得される。それぞれのラインは1走査に対応し、1つのラインデータは、プローブから血管の深さ方向への距離と得られた信号強度との関係を示す。プローブの向き及びプローブの血管長さ方向の位置を変えながら走査を行うことにより、複数のラインデータを得ることができる。一実施形態において、血管画像190はこの複数のラインデータにより構成されている。例えば、血管画像190は、ラインデータにより示される1次元の画像を横に並べたものであってもよい。また、血管画像190は、ラインデータにより示される1次元の画像を円状に並べることにより得られる複数の横断断面画像(血管軸を横断する方向の断面像、例えば血管軸に垂直な断層像)により構成されていてもよい。また、血管画像190に対しては、ゲイン補正、コントラスト補正、又はγ補正等が行われていてもよい。本実施形態においては、血管画像190は、ゲイン及びコントラストが調整された、複数の横断断面画像で構成されている。
 血管画像190は複数の横断断面画像の組み合わせには限られず、複数の血管軸方向断面画像(血管軸と平行な断面での断層像)の組み合わせであってもよいし、血管の3D画像であってもよい。既に知られているように、これらの横断断面画像、血管軸方向断面画像、及び3D画像は、互いに変換することが可能である。
 境界抽出部200は、血管画像190から、主血管に相当する部分を検出する。また、境界抽出部200は、血管画像190から、主血管から分岐している分岐血管に相当する部分を検出する。このようにして、境界抽出部200は、主血管と分岐血管との境界部分を検出する。検出結果に従って、境界抽出部200は、血管画像190のうち主血管に相当する部位を示す情報と分岐血管に相当する部位とを区別する情報とを、情報算出部1000へと出力する。もっとも、後述するように、主血管と分岐血管との境界部分を検出することに先立って、主血管に相当する部分と分岐血管に相当する部分とを検出することは必須ではない。境界抽出部200の詳しい構成については後述する。ここで、分岐血管とは、プローブが挿入された主血管に接続している構造体であって、管状のものだけでなく、瘤状のものをも含む。
 情報算出部1000は、境界抽出部200から得た情報を参照して、主血管からの分岐部分における分岐血管の形態を示す定量的な情報を生成する。そして、情報算出部1000は、生成された情報を表示制御部110を介して表示部120に表示させる。
 表示制御部110は、表示部120を制御して所望の情報を表示させる。表示部120は、画像を表示可能な装置である。表示部120の種類は特に限定されず、例えば液晶ディスプレイ等でありうる。
[境界抽出部]
 まず、境界抽出部200の概略構成について、図2を参照して説明する。境界抽出部200は、画像取得部210、位置取得部220、検出部230、及び判定部240を備える。
 画像取得部210は、血管画像190を取得する。本実施形態において、画像取得部210は複数の断層像を取得する。それぞれの断層像に対して、後述する各部による処理が行われ、主血管に相当する部位を示す情報と分岐血管に相当する部位とを区別する情報が生成される。また、画像取得部210は、取得した断層像に対する前処理も行う。
 位置取得部220は、断層像上における主血管の中心点の推定位置を取得する。本実施形態において、位置取得部220は、断層像に対する画像処理により、主血管の中心点の推定位置を算出する。しかしながら、入力部(不図示)を介したユーザ入力により、主血管の中心点が指定されてもよい。
 一実施形態において、位置取得部220は、断層像上におけるガイドワイヤ及びカテーテルシースの像の推定位置を取得する。位置取得部220は、断層像に対する画像処理により、これらの推定位置を算出する。しかしながら、入力部(不図示)を介したユーザ入力により、これらの位置が指定されてもよい。
 検出部230は、断層像上における血管の内表面を示す複数の点を検出する。検出方法としては、テンプレートマッチング等の様々な方法が考えられるが、本実施形態において、検出部230は、断層像を走査することにより断層像上における血管内壁の位置を抽出する。具体的には、検出部230は、主血管の中心点から外側に進んだ際における血管との交差点を、血管内壁の位置として抽出する。
 判定部240は、抽出部230によって検出された複数の点のそれぞれが、主血管を示しているか否かを判定する。また、判定部240は、抽出部230によって検出された交差点が、分岐血管を示しているか否かを判定する。また、判定部240は、抽出部230によって検出された複数の点のそれぞれが、主血管と分岐血管との境界を示すか、を判定することもできる。これらの判定は、抽出部230によって検出された複数の点の位置に基づいて行われる。一実施形態において、これらの判定は、抽出部230によって検出された、連続した複数の点同士の位置関係に基づいて行われる。例えば、後述するように、連続した複数の点についての主血管の中心からの距離の変化に基づいて、抽出部230によって検出された点が主血管を示すか及び分岐血管を示すかを判定することができる。後述するように、抽出部230によって検出された連続した複数の点についての主血管の中心からの距離と閾値との比較に基づいて、それぞれの点が主血管を示すか及び分岐血管を示すかを判定することも、連続した複数の点同士の位置関係に基づく判定に含まれる。また、連続した複数の点が途切れている箇所には分岐血管が存在すると判定することができ、連続した複数の点の末端は主血管と分岐血管との境界を示すと判定することができる。
 また、これらの判定は、独立に行うことができる。すなわち、判定部240は、抽出部230によって検出された点が主血管を示すか及び分岐血管を示すか、又は抽出部230によって検出された点が主血管と分岐血管との境界を示すか、のうちの少なくとも一方を判定することができる。これらの判定により、主血管と分岐血管との境界が検出される。
 判定部240による判定には、主血管の中心点と交差点との距離が主に用いられる。しかしながら、判定部240は、他の様々な基準を用いてこの判定を行う。例えば、一実施形態において、判定部240は断層像上におけるガイドワイヤ及びカテーテルシースの像の位置を考慮して判定を行う。
 一実施形態において、境界抽出部200は判定更新部250をさらに備える。判定更新部250は、判定部240による判定結果を更新する。例えば、判定更新部250は、判定部240による判定結果を修正することができる。また、判定更新部250は、新たな交差点を検出し、検出された交差点が主血管又は分岐血管を示すと判定することができる。また、判定更新部250は、血管画像190を構成する1つの断層像についての判定部240による判定結果に基づいて、別の断層像についての判定部240による判定結果を更新することができる。
 次に、図3のフローチャートを参照して、境界抽出部200が行う処理について詳しく説明する。
 ステップS305において、画像取得部210は、血管画像190を取得する。本実施例において、画像取得部210は、複数の断層像で構成される血管画像190を一度に取得するものとする。しかしながら、画像取得部210は、プローブを用いた血管の走査を行いながら順次生成された断層像を、順次取得してもよい。以下のステップS310以降の処理は、それぞれの断層像に対して順次行われる。以下の説明において処理対象となる断層像を図4Aに示す。
 ステップS310において、画像取得部210は、取得した断層像に対する前処理を行う。もっとも、画像取得部210は既に前処理が行われている断層像を取得してもよい。前処理の種類は特に限定されないが、一実施形態においては、フィルタ処理及び2値化処理が行われる。用いられるフィルタの種類は特に限定されないが、例えば平滑化フィルタ処理を用いることができ、断層像に対して平滑化フィルタ処理を行うことにより、ノイズとして含まれる孤立点を低減することができる。フィルタ処理後の断層像を図4Bに示す。
 また、所定の閾値を用いて2値化処理を行うことにより、後述する処理を簡略化することができる。2値化処理においては、血管内壁が白画素となり、血管内腔が黒画素となるような閾値が用いられる。このような閾値は、予め設定されていてもよいし、断層像のヒストグラムを参照して画像取得部210により自動的に決定されてもよい。また、閾値は入力部(不図示)を介してユーザにより入力されてもよい。以下では、ステップS310において2値化処理を行ったことを前提として説明する。しかしながら、2値化処理を行うことは必須ではない。2値化処理を行う場合は、閾値により規定される所定範囲内の画素値を有する画素が白画素であると判定され、所定範囲外の画素値を有する画素は黒画素であると判定される。また、2値化処理を行わない場合であっても、例えば後述するステップS325において、所定範囲内の画素値を有する画素が白画素であると判定し、所定範囲外の画素値を有する画素は黒画素であると判定することができる。2値化後の断層像を図4Cに示す。
 ステップS315において、位置取得部220は、断層像上における主血管の中心点の推定位置を取得する。前述したように、中心点の推定位置はユーザにより入力されてもよいが、本実施形態において、位置取得部220は、断層像に対する画像処理により中心点の推定位置を算出する。
 中心点の推定位置の算出方法は特に限定されない。一実施形態においては、断層像上の主血管が検出され、その重心が主血管の中心点の推定位置として用いられる。本実施形態においては、主血管の検出方法としてはハフ変換が用いられる。すなわち、位置取得部220は、2値化後の断層像に対してハフ変換処理を行うことにより、主血管の内壁形状を近似する円を検出する。そして、位置取得部220は、検出された円の中心位置を中心点の推定位置として取得する。ハフ変換により検出された円の例を図4Dに示す。
 ハフ変換を用いた中心点の推定方法について、以下に詳しく説明する。まず、位置取得部220は、黒画素の円(輪郭の内側が黒画素であり、輪郭の外側(背景)が白画素である円)をハフ変換により抽出する。そして、位置取得部220は、断層像の中心を内包する円のうち最大のものを、主血管の内壁を示す円(以下、血管円と呼ぶ)として特定する。この血管円の中心が、主血管の中心点の推定位置として扱われる。また、位置取得部220は、血管円の半径も算出する。
 もっとも、主血管の内腔が略円形状ではない場合には、ハフ変換により血管円を抽出できない可能性がある。この場合、位置取得部220は、主血管の他の位置における断層像から抽出された血管円の中心を、中心点の推定位置として用いることができる。血管円の半径についても同様である。一実施形態においては、ハフ変換により血管円を抽出できた断層像であって、最も近い位置の断層像から抽出された血管円の中心が、中心点の推定位置として用いられる。別の実施形態においては、隣接する位置の断層像における中心点の推定位置が、中心点の推定位置として用いられる。
 さらなる方法として、ハフ変換により血管円を抽出できない場合、位置取得部220は血管の内接円を検出し、この内接円の中心を主血管の中心点の推定位置として扱ってもよい。例えば、2値化後の断層像上において、3点以上の白画素に内接し、白画素を通らない円を、血管の内接円として検出することができる。また例えば、ユークリッド距離変換を用いて、血管に内接する円のうち最大の円を検出することができる。距離変換はユークリッドに限らず、また重み付けを行ってもよい。さらに別の方法として、抽出部230によって検出された複数の点の重心を、主血管の中心点の推定位置として扱ってもよい。
 後述するように断層像における主血管を示す交差点が決定された後に、主血管を示す交差点の重心位置を算出することもできる。この場合、位置取得部220は、主血管の他の位置における断層像について算出された主血管を示す交差点の重心位置を、中心点の推定位置として用いてもよい。さらなる実施形態において、位置取得部220は、ハフ変換により血管円を抽出できなかった場合に、主血管の他の位置における断層像について主血管を示す交差点の重心位置を算出し、中心点の推定位置として用いることができる。
 このように、主血管の他の位置における断層像から抽出された血管円の中心を、中心点の推定位置として用いる場合、交差点の誤判定が生じる可能性がある。そこで、このような断層像については、判定部240は、隣接する断層像について検出されたワイヤ影境界ペアを参照して、ワイヤ影境界ペアとなる交差点を決定してもよい。具体的な一例としては、判定部240は、隣接する断層像について検出されたワイヤ影境界ペアと同じ角度方向に、ワイヤ影境界ペアが存在すると判定することができる。また、判定部240は、隣接する2つの断層像について検出されたワイヤ影境界のそれぞれの角度方向の中央に、ワイヤ影境界が存在すると判定することができる。
 ステップS320において、位置取得部220は、断層像からガイドワイヤ及びカテーテルシースの像の推定位置をさらに検出する。通常、血管画像を撮影する際には、ガイドワイヤを介してガイディングカテーテル(不図示)が主血管内へと挿入され、カテーテルシースで覆われているプローブはガイディングカテーテル内へと挿入される。このため、断層像には、主血管に挿入されたガイドワイヤ及びカテーテルシースの像が含まれている。本実施形態においては、判定部240は断層像上におけるガイドワイヤ及びカテーテルシースの像の位置を考慮して判定を行う。
 具体的には、位置取得部220は、白画素の円(輪郭の内側が白画素であり、輪郭の外側が黒画素である円)をハフ変換により抽出する。そして、位置取得部220は、断層像の中心に最も近い円を、カテーテルシースを示す円(以下、シース円と呼ぶ)として特定する。位置取得部220は、抽出された円のうち、主血管の内壁を示す円の内側にあるもののみを、カテーテルシースを示す円の候補として扱ってもよい。このシース円の中心が、カテーテルシース像の推定位置として扱われる。
 また、位置取得部220は、2値化前の断層像において、シース円と血管円との間にある画素のうち、最高輝度を有する画素を検出する。検出された画素は、ガイドワイヤの一部を示す画素(以下、ガイドワイヤ画素と呼ぶ)として扱われ、ガイドワイヤ画素の位置が、ガイドワイヤ像の推定位置として扱われる。
 ステップS325において、検出部230は、主血管の中心点から外側に進んだ際における血管との交差点を、血管内壁の位置として抽出する。以下に、その具体的な処理について説明する。
 まず、検出部230は、2値化された断層像に対する前処理を行う。具体的には、検出部230は、血管円の中心から所定距離内にある画素を全て黒画素とする。この所定距離は、血管円の半径以下となるように定められる。この処理により、血管円の中心に近く、血管内壁ではない画素が、誤って血管内壁として検出される可能性を低くすることができる。一方で、この所定距離を血管円の半径よりも小さくすることにより、血管円付近に位置する血管内壁を示す画素の検出に失敗する可能性を低くすることができる。この所定距離は特に限定されず、例えば血管円の半径の0.95倍以下であってもよいし、血管円の半径の0.50倍以上であってもよい。
 この処理により、例えば、ガイドワイヤ像、カテーテルシース像、及び血管内腔のノイズ等を、断層像から消すことができる。このため、主血管の中心点からの距離が所定距離以下である領域からは交差点が検出されなくなる。ガイドワイヤ像、カテーテルシース像、及び血管内腔のノイズを消すためには、別の方法を用いることもできる。例えば、テンプレートマッチングを用いてガイドワイヤ像又はカテーテルシース像等を認識し、認識した像を消すことができる。さらに、形態学的処理を用いることにより、ノイズ又はカテーテルシース像等を認識して消してもよい。交差点検出の直前の断層像を図4Eに示す。
 その後、検出部230は、主血管の中心点から各角度方向へと走査を行い、血管との交差点、すなわち白画素との交差点を検出する。言い換えれば、検出部230は、主血管の中心点から各角度方向に伸びる複数の半直線のそれぞれについて、半直線上の白画素のうち中心点に最も近い画素を、この角度方向に対応する交差点として検出する。360°の走査を行うことにより、血管内壁を示す画素が抽出される。検出部230は、検出されたそれぞれの交差点に、角度方向と、主血管の中心点からの距離と、を対応づけて保存する。保存された情報を用いて、横軸が走査角度を示し、縦軸が主血管の中心点からの距離を示すグラフを作成することができる。
 検出部230による検出の例を図4Fに示す。図4Fにおいては、血管円の中心400から、各角度方向411,412,413のそれぞれについて走査が行われている。その結果、交差点421,422,423が検出されている。
 ステップS330において、判定部240は、主血管の中心点から交差点までの距離に基づいて、交差点が主血管を示すかを判定する。また、判定部240は、交差点が分岐血管を示すかを判定する。一般的に、断層像において分岐血管は主血管から離れていくので、分岐血管の内壁は主血管の内壁と比べて主血管の中心点からより離れていると考えられる。そこで、判定部240は、主血管の中心点から交差点までの距離が閾値以下である場合に、この交差点が主血管の内壁を示すと判定する。この閾値は、血管円の半径に基づいて決定される。具体的な閾値の決定方法は特に限定されず、例えば血管円の半径の0.90倍以上であってもよいし、血管円の半径の1.10倍以下であってもよい。
 また、一実施形態においては、判定部240は、主血管の中心点から交差点までの距離が閾値を超える場合に、この交差点が分岐血管の内壁を示すと判定する。しかしながら、プローブから見てガイドワイヤの後ろに位置する主血管の内壁は断層像に写らない。そして、図4Fに示す写らない領域430(以下、ガイドワイヤの影と呼ぶ)が分岐血管として誤認識される可能性がある。そこで、本実施形態において、判定部240は、さらにカテーテルシースの像及びガイドワイヤの像の位置を考慮して、主血管の中心点からの距離が閾値を超える交差点が、分岐血管を示すかガイドワイヤの影を示すのかを判定する。
 具体的には、判定部240は、シース円の中心からガイドワイヤ画素の位置への延長上付近にある交差点はガイドワイヤの影を示し、この延長線上付近にはない交差点は分岐血管を示すと判定する。例えば、判定部240は、主血管の中心点と交差点との間の距離が閾値を超え、かつ断層像上でカテーテルシースの像からガイドワイヤの像へと向かう方向から所定の角度範囲内に交差点が存在する場合に、この交差点はガイドワイヤの影を示すと判定する。また、判定部240は、主血管の中心点と交差点との間の距離が閾値を超え、かつ断層像上でカテーテルシースの像からガイドワイヤの像へと向かう方向から所定の角度範囲内にない交差点は分岐血管を示すと判定する。この角度範囲は特に限定されず、適宜設定することができる。
 判定部240による判定方法はこの方法には限定されない。例えば、判定部240は、隣接する角度方向に位置する2つの交差点について、主血管の中心点から交差点までの距離が大きく変化している場合に、この2つの交差点はガイドワイヤの影又は分岐血管を示すと判定することができる。そして、判定部240は、ガイドワイヤの影又は分岐血管を示すと判定されなかった交差点は、主血管を示すと判定することができる。この方法は、例えば、ハフ変換により血管円が検出できなかった断層像に対して適用することができる。
 ステップS335において、判定部240は、判定結果に従って、主血管と分岐血管との境界を示す交差点を検出する。また、判定部240は、主血管とガイドワイヤの影との境界を示す交差点を検出する。本実施形態においては、隣接する角度方向にある交差点について、一方が主血管を示し、他方が分岐血管を示すと判定されている場合、判定部240は、主血管を示す交差点が、主血管と分岐血管との境界を示すと判定する。もっとも、この場合、分岐血管を示す交差点が、主血管と分岐血管との境界を示すと判定してもよい。検出部230による角度方向への走査の解像度が十分に高ければ、どちらの方法を採用しても得られる情報に大差はない。また、隣接する角度方向にある交差点について、一方が主血管を示し、他方がガイドワイヤの影を示すと判定されている場合、判定部240は、主血管を示す交差点が、主血管とガイドワイヤの影との境界を示すと判定する。もっとも、この場合、ガイドワイヤの影を示す交差点が、主血管とガイドワイヤの影との境界を示すと判定してもよい。
 また、主血管の内壁が途切れている部分に、分岐血管又はガイドワイヤの影を示す交差点が検出されない可能性もある。例えば、図4Fに示す場合、ガイドワイヤの影が位置する角度方向において、ガイドワイヤの影を示す交差点は検出されないかもしれない。また、主血管の内壁と分岐血管の内壁とがなす角度によっては、分岐位置の周辺で分岐血管を示す交差点が検出されない可能性がある。そこで、判定部240は、断層像上において主血管の内表面が途切れている箇所の位置に基づいて、内表面を示す点が主血管と分岐血管(又はガイドワイヤの影)との境界に位置するかを判定することができる。
 具体的な一例としては、判定部240は、隣接する角度方向について、一方の方向に主血管を示す交差点が存在するが、他方の方向には主血管を示す交差点が存在しない場合に、この交差点は主血管と分岐血管又はガイドワイヤの影との境界を示すと判定することができる(これを境界候補点とする)。より具体的には、判定部240は、カテーテルシースの像からガイドワイヤの像へと向かう方向から所定の角度範囲内に境界候補点が存在する場合、この境界候補点は主血管とガイドワイヤの影との境界を示すと判定する。また、判定部240は、カテーテルシースの像からガイドワイヤの像へと向かう方向から所定の角度範囲内に境界候補点が存在しない場合、この境界候補点は主血管と分岐血管との境界を示すと判定する。このような方法により、判定部240は、抽出部230によって検出された複数の点のそれぞれが、主血管と分岐血管との境界を示すかを判定することができる。本実施形態においては、抽出部230によって検出された点が主血管と分岐血管との境界を示すかの判定は、抽出部230によって検出された点が主血管を示すか及び分岐血管を示すかを判定した後に行われる。しかしながら、抽出部230によって検出された点が主血管と分岐血管との境界を示すかの判定は、抽出部230によって検出された点が主血管を示すか及び分岐血管を示すかの判定とは独立に行うことができる。
 ステップS340において、判定部240は、分岐血管部分を挟む、主血管と分岐血管との境界を示す交差点ペアを検出する。具体的には、判定部240は、主血管と分岐血管との境界を示し、異なる2つの角度方向に存在する2つの交差点の組であって、この2つの角度方向の間に存在する交差点が全て分岐血管を示す(又は交差点が存在しない)交差点の組を検出する。以下では、こうして検出された交差点のペアのことを、分岐部境界ペアと呼ぶ。また、判定部240は、主血管とガイドワイヤの影との境界を示し、異なる2つの角度方向に存在する2つの交差点の組であって、この2つの角度方向の間に存在する交差点が全てガイドワイヤの影を示す(又は交差点が存在しない)交差点の組を検出する。以下では、こうして検出された交差点ペアのことを、ワイヤ影境界ペアと呼ぶ。このような検出された分岐部境界ペア及びワイヤ影境界ペアは、判定更新部250による処理のために用いられる。
 ステップS345において、判定更新部250は、ステップS330における判定部240による判定結果を更新する。ここで、判定更新部250は、主血管と分岐血管との境界を示す交差点の位置と、主血管とガイドワイヤの影との境界を示す交差点の位置と、の少なくとも一方を参照する。例えば、判定更新部250は、これらの境界を示す交差点の位置に基づいて定まるパラメータが所定の条件に合致するか否かを判定し、合致する場合に、判定結果を修正することができる。また、判定更新部250は、これらの境界を示す交差点の位置に基づいて新たな交差点を検出し、検出された交差点に対して判定を行うことができる。以下では判定結果の更新方法について5つの例を説明するが、判定結果の更新方法には様々な形態が考えられ、以下の例には限定されない。
(1)三日月状主血管についての誤検出
 主血管が図5Aに示す形状(三日月形状)を有している場合、主血管の血管内壁の一部について交差点が検出されないか、又は分岐血管を示す交差点として検出される可能性がある。例えば図5Aの場合、交差点502は主血管の中心点からの距離が大きい、もしくはその距離の変化が大きいため、分岐血管を示す交差点として検出される可能性がある。このような場合には、主血管の中心点から、分岐部境界ペア501,503のそれぞれへの距離の差が大きくなることが考えられる。一方で、図5Bに示すように、主血管が略円形状であり、分岐血管を示す交差点512が検出された場合には、主血管の中心点から、分岐部境界ペア511,513のそれぞれへの距離は同程度であることが多い。
 そこで、本実施形態において、判定更新部250は、主血管と分岐血管との境界を示す交差点の位置を参照して、所定の条件に適合する場合、判定部240によって分岐血管を示すと判定された交差点は、主血管を示すと判定する。そして、判定更新部250は、判定部240による判定を更新する。具体的には、判定更新部250は、主血管の中心点から分岐部境界ペアのそれぞれまでの距離の差が閾値以上である場合に、判定部240によって分岐血管を示すと判定された交差点は、主血管を示すと判定する。図5Aの場合であれば、判定更新部250は、判定部240によって分岐血管を示すと判定された交差点502は、主血管を示すと判定する。また、判定更新部250は、交差点501,503は主血管と分岐血管との境界を示さず、分岐部境界ペアではないと判定する。
 主血管が図5Aに示す形状を有している場合、主血管の中心点から各角度方向へと走査を行っても、交差点502付近で検出される、主血管を示す交差点の数は少なくなる。そこで、本実施形態において、判定更新部250は、分岐部境界ペアではないと判定された交差点501,503の間に存在する、主血管を示す交差点を追加検出する。追加検出方法の一例を、図5Cを参照して説明する。例えば、判定更新部250は、分岐部境界ペアではないと判定された交差点501,503を通る直線502を、主血管の中心点から遠ざかる方向に所定距離だけ平行移動することにより得られる直線505を設定する。そして、判定更新部250は、平行移動された直線505と血管との交差点504,506を主血管を示す交差点として検出する。具体的には、判定更新部250は、交差点501,503の中点502mを、交差点501,503を通る直線502と垂直に、主血管の中心点から遠ざかる方向に所定距離だけ移動した点505sを基準点として設定する。そして、判定更新部250は、設定された基準点505sから両方向へと直線505上で走査を行い、血管との交差点のペア、すなわち白画素との交差点のペア504,506を検出する。
 こうして検出された交差点504,506は、主血管を示す交差点である可能性がある。そこで、判定更新部250は、上流側又は下流側の横断断面画像における血管の大きさを考慮して、検出された交差点504,506が主血管を示すとの判定が妥当であるか否かを判定する。一実施形態においては、略円形である上流側又は下流側の横断断面画像が参照される。例えば、図5Aに示す形状を有するために主血管を示す交差点が追加検出された横断断面画像は、この判定においては考慮されない。判定方法の一例として、交差点504,506が主血管を示す交差点であると判定を更新することにより、更新された血管の大きさが上流側又は下流側の横断断面画像における血管のおおよその大きさに近づく場合には、判定が妥当であると判定することができる。判定更新部250は、妥当であると判定した場合、交差点504,506は主血管を示すと、判定部240による判定を更新する。
 判定更新部250は、このように新たに検出された主血管を示す交差点のペアを通る直線の設定、平行移動、及び走査を行うことにより、順次主血管を示す交差点を検出することができる。すなわち、判定更新部250は、交差点504,506を通る直線505を、主血管の中心点から遠ざかる方向に所定距離だけ平行移動することにより得られる直線508を設定する。また、判定更新部250は、交差点504,506の中点505mを、交差点504,506を通る直線505と垂直に、主血管の中心点から遠ざかる方向に所定距離だけ移動した点508sを基準点として設定する。そして、判定更新部250は、設定された基準点508sから両方向へと直線508上で走査を行い、血管との交差点のペア、すなわち白画素との交差点のペア507,509を検出する。判定更新部250は、検出された交差点507,509を、主血管を示す交差点と判定する。この処理を繰り返した際に基準点が白画素となった場合には、繰り返しを終了してもよいし、平行移動させる距離をより小さくしてもよい。
(2)ひょうたん状主血管についての誤検出
 主血管が狭窄しており、図6Bに示す形状(ひょうたん形状)を有している場合にも、主血管の血管内壁の一部について交差点が検出されないか、又は分岐血管を示す交差点として検出される可能性がある。例えば図6Bに示す断層像620の場合、交差点622,623は主血管の中心点からの距離が大きいため、分岐血管を示す交差点として検出される可能性がある。この場合、交差点621,624は、分岐部境界ペアであると判定される。
 このように、狭窄部位付近では複数の断層像について分岐血管を示す交差点が誤検出される可能性がある。狭窄部位を前後の断層像と比較してみると、一般的には、上流側から狭窄部位に近づくにつれて主血管が狭くなり、狭窄部位から下流側に進むにつれて主血管は広くなる。図6Bは、狭窄が最も高度な部位における断層像620を示し、625は、断層像620における分岐部境界ペア621,624間の距離を示す。一方で、図6Aは、断層像620よりも上流における断層像610を示し、612は、断層像610における分岐部境界ペア611,613間の距離を示す。また、図6Cは、断層像620よりも下流における断層像630を示し、632は、断層像630における分岐部境界ペア631,633間の距離を示す。このように、分岐部境界ペア間の距離は、上流側から狭窄部位に近づくにつれて短くなり、狭窄部位から下流側に進むにつれて長くなる。一方で、主血管が略円形状であって分岐血管が存在する場合、分岐部境界ペア間の距離は、上流側から分岐血管の中心に近づくにつれて長くなり、分岐血管の中心から下流側に近づくにつれて短くなる。
 そこで、本実施形態では、判定更新部250は、主血管と分岐血管との境界を示す交差点の位置を参照して、所定の条件に適合する場合、判定部240によって分岐血管を示すと判定された交差点は、主血管を示すと判定する。具体的には、判定更新部250は、断層像610から検出された分岐部境界ペア間の距離612が、断層像620から検出された分岐部境界ペア間の距離625よりも大きいか否かを判定する。また、判定更新部250は、断層像630から検出された分岐部境界ペア間の距離632が、断層像620から検出された分岐部境界ペア間の距離625よりも大きいか否かを判定する。このどちらの条件も満たされる場合、断層像610,620,630において、判定部240によって分岐血管を示すと判定された交差点は、主血管を示す可能性がある。また、断層像610と断層像630との間の断層像において、判定部240によって分岐血管を示すと判定された交差点についても、主血管を示す可能性がある。
 そして、判定更新部250は、上流側又は下流側の横断断面画像における血管の大きさを考慮して、検出された交差点622,623が主血管を示すとの判定が妥当であるか否かを判定する。この判定は、図5A~Cを参照して説明した交差点504,506についての判定と同様に行うことができる。判定更新部250は、妥当であると判定した場合、交差点622,623は主血管を示すと、判定部240による判定を更新する。また、判定更新部250は、交差点621,624は主血管と分岐血管との境界を示さず、分岐部境界ペアではないと判定する。
 主血管が図6Bに示す形状を有している場合も、主血管の中心点から各角度方向へと走査を行っても、交差点622,623付近で検出される、主血管を示す交差点の数は少なくなる。そこで、本実施形態において、判定更新部250は、分岐部境界ペアではないと判定された交差点621,624の間に存在する、主血管を示す交差点を追加検出する。追加検出は、主血管が図5Aに示す形状を有している場合と同様に行うことができる。
(3)分岐血管とワイヤ影とが重なっている場合の誤検出
 分岐血管とガイドワイヤの影とが重なっている場合、ガイドワイヤの位置によっては、本来は分岐血管を示す交差点が、ガイドワイヤの影を示すと誤判定される可能性がある。例えば図7Bに示す断層像720において、交差点723は分岐血管を示すが、ガイドワイヤの影を示すと誤判定されている。図7Bにおいては、交差点722もガイドワイヤの影を示すと判定されており、交差点721,724がワイヤ影境界ペアとして判定されている。このような誤判定が行われた場合、ワイヤ影境界ペア721,724により示されるガイドワイヤの影の大きさは大きくなる。
 一方で、互いに隣接する位置の断層像において、通常ガイドワイヤの影の大きさはあまり異ならない。図7Aは、図7Bに示す断層像720の近隣の位置における断層像710である。また、図7Cも、図7Bに示す断層像720の近隣の位置における断層像730である。断層像710及び断層像730では、分岐血管とガイドワイヤの影とは重なっていない。この場合、ワイヤ影境界ペア711,712により示されるガイドワイヤの影の大きさは、ワイヤ影境界ペア731,732によるガイドワイヤの影の大きさとは大きく異ならない。
 そこで、判定更新部250は、主血管とガイドワイヤの影との境界を示す交差点の位置を参照して、判定部240によってガイドワイヤの影を示すと判定された交差点は、分岐血管を示すと判定する。具体的には、判定更新部250は、近隣の位置の断層像と比較してガイドワイヤの影の大きさが大きい場合に、ガイドワイヤの影と分岐血管とが重なっていると判定し、ガイドワイヤの影を示すと判定された交差点のうち一部について、分岐血管を示すと判定する。
 以下に、判定更新部250が行う具体的な処理の一例を説明する。まず判定更新部250は、検出されたワイヤ影境界ペアについて、角度幅及び中心角度を算出する。角度幅とは、主血管の中心点からワイヤ影境界ペアの一方への角度方向と、主血管の中心点からワイヤ影境界ペアの他方への角度方向との差分を表す。また、中心角度とは、主血管の中心点からワイヤ影境界ペアの一方への角度方向と、主血管の中心点からワイヤ影境界ペアの他方への角度方向と、の中央に位置する角度方向を表す。図7A,Cにおいて、713,733は角度幅を示し、714,734は中心角度を示す。
 そして、判定更新部250は、明らかにワイヤ影境界ペアの角度幅が広い断層像を検出する。具体的には、判定更新部250は、ワイヤ影境界ペアの角度幅が閾値を超えている断層像を検出する。閾値は、予め設定されていてもよいし、判定更新部250によって算出されてもよい。例えば、この閾値は、検出対象となっている断層像に隣り合っている所定数の断層像について算出された角度幅の平均値に基づいて算出することができる。一例においては、閾値は、こうして算出された平均値に所定値を加算したものでありうる。以下では、図7Bに示す断層像720について、判定更新部250は、角度幅725が閾値を超えていると判定したものとする。
 ワイヤ影境界ペアの角度幅が閾値を超えている断層像720が検出されると、判定更新部250は、この断層像720においてガイドワイヤの影が位置する部分、すなわちワイヤ影境界ペアの位置を推定する。判定更新部250は、この推定を、処理対象となる断層像の近隣に位置する断層像710,730について算出されたワイヤ影境界ペアの位置に基づいて行う。具体的には、判定更新部250は、断層像710から検出されたワイヤ影境界ペア711,712の位置と、断層像730から検出されたワイヤ影境界ペア731,732の位置とを参照して、第2の断層像におけるワイヤ影境界ペアの位置を推定する。ここで、断層像710、断層像720、及び断層像730はそれぞれ血管の第1、第2、及び第3の位置における断層像であり、第2の位置は第1の位置と第3の位置との間に存在する。
 より具体的には、判定更新部250は、断層像710から検出されたワイヤ影境界ペアの中心角度714と、断層像730から検出されたワイヤ影境界ペアの中心角度734との線形補間によって値を算出することができる。この場合、判定更新部250は、算出された値を、断層像720についてのワイヤ影境界ペアの中心角度727と推定することができる。また、判定更新部250は、断層像710から検出されたワイヤ影境界ペアの角度幅713と、断層像730から検出されたワイヤ影境界ペアの角度幅733との線形補間によって値を算出することができる。この場合、判定更新部250は、算出された値を、断層像720についてのワイヤ影境界ペアの角度幅728と推定することができる。ここで、線形補間は距離に応じて重み付けされていてもよいし、また3つ以上のフレームからの非線形補間であってもよい。
 こうして推定されたワイヤ影境界ペアの中心角度727及び角度幅726を用いて、判定更新部250は、断層像720においてガイドワイヤの影を示すと判定された交差点のうち一部を選択する。具体的には、判定更新部250は、断層像720においてガイドワイヤの影を示すと判定された交差点のうち、推定されたワイヤ影境界ペアの中心角度727及び角度幅726により特定される領域728内に存在しない交差点723を選択することができる。もっとも、判定更新部250は、推定されたワイヤ影境界ペアの角度幅726の算出誤差を考慮して、この角度幅726に対して所定の角度値を加算してから、交差点723の選択を行ってもよい。そして、判定更新部250は、選択された交差点723は分岐血管を示すと判定する。また、判定更新部250は、新たな判定に従って、主血管と分岐血管との境界点を示す交差点724を、判定部240と同様に検出することができる。
 判定更新部250は、ワイヤ影境界ペアの位置を正確に推定するために、分岐血管とガイドワイヤの影とが重なっていない断層像を、推定に用いる断層像として選択することができる。すなわち、一実施形態において、検出部230が検出した断層像710におけるワイヤ影境界ペアの角度幅713は閾値以下であり、かつ断層像730におけるワイヤ影境界ペアの角度幅733は閾値以下である。
(4)分岐血管の分岐起始部付近における追加検出
 検出部230は所定の角度方向解像度に従って主血管の中心点から各角度方向に進んだ際における血管との交差点を検出する。しかしながら、解像度が粗い場合、分岐血管の分岐起始部付近、すなわち分岐血管の中心から離れた位置においては、分岐血管を抽出できない可能性がある。そこで、本実施形態において、判定更新部250は、主血管と分岐血管との境界を示す交差点の位置を参照して、検出されていない分岐血管が存在する可能性がある部分を検出する。そして、判定更新部250は、検出された部分についてより高い角度方向解像度に従って交差点の検出を行い、検出された交差点が分岐血管を示すか否かを判定する。
 具体的には、まず、判定更新部250は、分岐部境界ペアが検出された断層像810と、分岐部境界ペアが検出されなかった断層像820と、の組み合わせを検出する。ここで、断層像810は、血管の第1の位置における断層像であり、断層像820は、第1の位置に隣接する第2の位置における断層像である。分岐血管は互いに隣接する複数の断層像に写るため、断層像820からは分岐血管は検出されなかったものの分岐血管が写っている可能性がある。
 次に、判定更新部250は、図8Aに示すように断層像810から算出された分岐部境界ペア811,812の角度方向814を参照して、図8Bに示すように断層像820における検出範囲825を設定する。この検出範囲825は、検出開始角度及び検出終了角度により規定される。具体的には、検出範囲825は、角度方向814を含むように設定される。設定される検出範囲825の広さは特に制限されない。一実施形態においては、検出範囲825の広さは、分岐部境界ペア811,812の角度幅813と一致するように設定される。すなわち、検出開始角度は主血管の中心点から交差点811への角度方向に一致し、検出終了角度は主血管の中心点から交差点812への角度方向に一致する。別の実施形態においては、主血管の中心点から交差点までの距離の変化のトレンドを確認するために、検出範囲825の広さは、分岐部境界ペア811,812の角度幅813よりも所定値だけ大きくなるように設定される。分岐部境界ペアの角度幅及び角度方向は、ワイヤ影境界ペアの角度幅及び角度方向と同様に算出できる。
 そして、判定更新部250は、設定された検出範囲825において、検出部230と同様の方法を用いながらも、より感度の高い検出方法を使用して、交差点を検出する。以下に、交差点の検出感度を高める例について説明するが、感度の高め方は以下の例に限られるわけではない。
 一例として、判定更新部250は、検出部230が走査を行った際の角度方向解像度よりも高い角度方向解像度に従って、交差点を検出することができる。一例において、検出部230が1°ごとに走査を行うのであれば、判定更新部250は0.25°ごとに走査を行うことができる。そして、判定更新部250は、判定部240と同様に、検出された交差点が主血管を示すのか分岐血管を示すのかを判定する。
 また、上述のように、判定部240は、隣接する角度方向に位置する2つの交差点について、主血管の中心点から交差点までの距離が大きく変化している場合に、この2つの交差点は分岐血管(又はガイドワイヤの影)を示すと判定することができる。判定更新部250も、同様の方法を用いて交差点が分岐血管を示すと判定することができるが、この場合に用いる判定の閾値を、判定部240が判定を行う場合の閾値よりも小さくすることができる。例えば、判定部240は、主血管の中心点から2つの交差点までの距離差が第1の閾値よりも大きい場合にこの2つの交差点は分岐血管(又はガイドワイヤの影)を示すと判定することができる。また、判定更新部250は、主血管の中心点から2つの交差点までの距離差が第2の閾値よりも大きい場合にこの2つの交差点は分岐血管(又はガイドワイヤの影)を示すと判定することができる。ここで、第2の閾値は第1の閾値よりも小さい。
 別の方法においては、隣接する角度方向に位置する交差点について、主血管の中心点からの距離の変化のトレンドが検出され、距離の変化が閾値よりも大きくなる交差点が分岐血管を示すと判定される。例えば、隣接する角度方向に位置する第1、第2、及び第3交差点について、主血管の中心点から第1及び第2の交差点までの距離差と、主血管の中心点から第2及び第3の交差点までの距離差と、の差分が計算される。判定部240は、この差分が第1の閾値よりも大きい場合に、第1の交差点は分岐血管(又はガイドワイヤの影)を示すと判定することができる。また、判定更新部250は、この差分が第2の閾値よりも大きい場合に、第1の交差点は分岐血管を示すと判定することができる。ここでも、第2の閾値は第1の閾値よりも小さい。
(5)分岐血管の追加抽出
 検出部230が用いる、血管の中心点から各角度方向へと走査することにより交差点を検出する方法では、分岐血管部分においては検出される交差点の数が少なくなることが考えられる。そこで、判定更新部250は、主血管と分岐血管との境界を示す交差点の位置、具体的には分岐部境界ペアの位置を参照して、分岐血管を示すさらなる交差点を検出し、検出された交差点について分岐血管を示すと判定する。
 具体的な方法は、図5Cを参照して説明した、主血管を示す交差点を追加検出する方法と同様である。すなわち、判定更新部250は、分岐部境界ペアであると判定された交差点を通る直線を、主血管の中心点から遠ざかる方向に所定距離だけ平行移動することにより得られる直線を設定する。そして、判定更新部250は、平行移動された直線と血管との交差点を、分岐血管を示す交差点として検出する。
 さらなる実施形態において、判定更新部250は、分岐部境界ペアを形成していない、主血管と分岐血管との境界を示す交差点の位置を参照して、分岐血管を示すさらなる交差点を検出し、検出された交差点について分岐血管を示すと判定する。例えば、図7Bに示されるように分岐血管とガイドワイヤの影とが重なっている場合、分岐部境界ペアを形成していない、主血管と分岐血管との境界を示す交差点が生じうる。この場合、判定更新部250は、主血管と分岐血管との境界を示す交差点724を通り、推定されたワイヤ影境界ペアの中心角度727により示される方向に直交する直線を、主血管の中心点から遠ざかる方向に所定距離だけ平行移動することにより得られる直線を設定する。そして、判定更新部250は、平行移動された直線と血管との交差点を、分岐血管を示す交差点として検出することができる。
 この場合、判定更新部250は、交差点724から、中心角度727により示される方向に直交する直線に沿って、主血管の中心点へと近づく方向に所定距離離れた点を決定する。そして、判定更新部250は、決定された点を、中心角度727により示される方向に、主血管の中心点から遠ざかる方向に所定距離だけ移動した点を基準点として設定する。さらに、判定更新部250は、設定された基準点から交差点724に近づく方向へと設定された直線上で走査を行い、血管との交差点、すなわち白画素との交差点を、分岐血管を示す交差点として検出することができる。
 別の実施形態においては、判定更新部250は、分岐部境界ペアであると判定された交差点の代わりに、主血管とガイドワイヤの影との境界を示す交差点721と、主血管と分岐血管との境界を示す交差点724と、のペアを用いることもできる。すなわち、判定更新部250は、このペアを通る直線を、主血管の中心点から遠ざかる方向に所定距離だけ平行移動することにより得られる直線を設定する。そして、判定更新部250は、平行移動された直線と血管との交差点のペアのうち、交差点724に近い方の交差点を、分岐血管を示す交差点として検出する。
 判定更新部250は、同様の方法により、ワイヤ影境界ペアの位置を参照して、ガイドワイヤの影を示すさらなる交差点を検出し、検出された交差点についてガイドワイヤの影を示すと判定してもよい。
 判定更新部250は、以上の(1)~(5)の方法のうち1つのみを用いてもよいし、複数の方法を組み合わせて用いてもよい。また、以上の方法を適用する順序は特に制限されない。一実施形態においては、分岐血管を示す交差点を多く抽出するために、判定更新部250は、(1)~(4)の処理を行った後に、(5)の処理を行う。方法(2)~(4)では、処理対象となる断層像とは異なる位置での断層像における、主血管と分岐血管との境界を示す交差点の位置と、主血管とガイドワイヤの影との境界を示す交差点の位置と、の少なくとも一方を参照して処理が行われる。このように、複数の断層像を参照することにより、より高い精度で主血管と分岐血管との境界を検出することができる。
 境界抽出部200は、こうして得られた判定結果を、分岐血管についての定量的な情報の算出のために、情報算出部1000へと送る。具体的には、それぞれの交差点についての位置情報及び判定部240又は判定更新部250による判定結果が情報算出部1000へと送られる。一実施形態において、この位置情報には、主血管の中心点からの角度方向及び中心点からの距離が含まれる。この場合、境界抽出部200は、断層像における主血管の中心点の推定位置を、情報算出部1000に送ることができる。別の実施形態において、この位置情報には、断層像上における交差点のXY座標が含まれていてもよい。上述したように、境界抽出部200は断層像ごとに複数の交差点についての判定結果を生成し、情報算出部1000へと送る。
 もっとも、全ての判定結果を送ることは必須ではなく、境界抽出部200は、少なくとも、主血管に相当する部位と、主血管から分岐する分岐血管に相当する部位と、を区別する情報を、情報算出部1000へと送る。例えば、境界抽出部200は、主血管と分岐血管との境界を示す交差点についての位置情報のみを、情報算出部1000へと送ってもよい。また、境界抽出部200は、分岐血管を示す交差点についての位置情報のみを、情報算出部1000へと送ってもよい。
 また、境界抽出部200は、表示制御部110を介して、判定結果を表示部120に表示させることができる。表示画面の例を図9に示す。図9に示す表示画面900には、横断断面画像910及び血管軸方向断面画像920が表示されている。横断断面画像910には、検出された交差点を示し、互いに異なる色で表示されたドット911~915が重畳表示されている。それぞれのドット911~915は、主血管を示す交差点、分岐血管を示す交差点、ガイドワイヤの影を示す交差点、主血管と分岐血管との境界点を示す交差点、及び主血管とガイドワイヤの影との境界点を示す交差点を表している。ユーザは、例えばチェックボックス916を操作することにより、これらのドット911~915の表示を停止することができる。血管軸方向断面画像にも、同様にドット911~915が重畳表示されている。このように、判定部240又は判定更新部250により自動的に生成された判定結果を表示することにより、ユーザは血管画像のうち分岐血管又はガイドワイヤの影に相当する部分を容易に識別することが可能となる。
[情報算出部]
 次に、情報算出部1000の概略構成について、図10を参照して説明する。情報算出部1000は、情報取得部1010及び生成部1020を備える。
 情報取得部1010は、血管画像190のうち、主血管に相当する部位と、主血管から分岐する分岐血管に相当する部位と、を区別する情報を取得する。上述したように、情報取得部1010は、境界抽出部200により得られた判定結果を取得する。本実施形態において、情報取得部1010は、少なくとも、主血管と分岐血管との境界を示す交差点についての位置情報、又は分岐血管を示す交差点についての位置情報を、境界抽出部200から取得する。情報取得部1010は、さらに、血管画像190を取得することもできる。
 生成部1020は、情報取得部1010が取得した情報を使用して、主血管からの分岐部分における分岐血管の形態を示す定量的な情報を生成する。この定量的な情報としては、例えば、主血管からの分岐部分における分岐血管の大きさを示す情報、及び主血管からの分岐血管の分岐方向を示す情報等が挙げられる。本実施形態において、生成部1020は、分岐血管の大きさを示す情報と分岐方向を示す情報との双方を生成するが、生成部1020は、このうち一方の情報を生成してもよい。
 次に、図11のフローチャートを参照して、情報算出部1000が行う処理について詳しく説明する。
 ステップS1110において、情報取得部1010は、上述したように、血管画像190のうち、主血管に相当する部位と、主血管から分岐する分岐血管に相当する部位と、を区別する情報を取得する。
 ステップS1120において、生成部1020は、血管画像190に含まれる分岐血管の分岐部分を検出する。生成部1020は、分岐血管が存在する連続した断層像について、1つの分岐部分が存在するものと判定する。断層像に分岐血管が存在するか否かは、主血管と分岐血管との境界を示す交差点、又は分岐血管を示す交差点の存在を確認することにより、容易に行うことができる。複数の分岐部分が検出された場合、以下の処理はそれぞれの分岐部分について行われる。
 ステップS1130~S1140において、生成部1020は、ステップS1120で検出された分岐部分についての分岐面情報を算出する。分岐面とは、主血管と分岐血管とを接続する面であり、分岐面情報の例としては、分岐面の位置、向き及び大きさ等が挙げられる。分岐面の大きさは、主血管からの分岐部分における分岐血管の大きさに相当する。分岐面の大きさには、分岐面の面積だけではなく、分岐面の特徴を示す長さ(円であれば半径や直径、楕円であれば短径や長径など)及び分岐面の周囲の長さも含まれる。
 ステップS1130において、生成部1020は、主血管と分岐血管との境界点群を近似する近似多角形又は近似楕円を導出する。例えば、図12Aには、主血管と分岐血管との境界を示す交差点群である境界点群1201が表されている。本実施形態において、生成部1020は、図12Bに示すように、この境界点群1201を近似する近似平面1202を導出する。さらに、生成部1020は、図12Cに示すように、それぞれの境界点群1201を近似平面1202へと垂直に投影することにより、投影点群1203を得る。こうして、図12Dに示すように、投影点群1203により構成される近似多角形1204が導出される。近似多角形1204は隣り合う投影点群1203を線形に結んで得られる。しかしながら、近似多角形1204の代わりに、投影点群1203を例えばスプライン曲線等を用いて非線形に結んで得られる近似曲線を導出してもよい。そして、生成部1020は、図12Eに示すように、近似多角形1204を近似する近似楕円1205を導出する。近似に用いるアルゴリズムは特に限定されず、最小二乗近似等の従来知られている方法を用いることができる。
 ステップS1140において、生成部1020は、導出された近似多角形(又は近似曲線)の大きさ、導出された近似多角形(又は近似曲線)の最大内接円の大きさ、又は導出された近似楕円の大きさを、定量的な情報として算出する。例えば、生成部1020は、導出された近似多角形の面積を算出することができる。また、生成部1020は、導出された近似多角形の最大内接円の半径、直径、又は面積を算出することができる。さらに、生成部1020は、導出された近似楕円の短軸長、長軸長、又は面積等を算出することができる。また、生成部1020は、導出された近似多角形又は近似楕円の周長を算出することもできる。生成部1020は、導出された近似多角形の最大内接円の中心、導出された近似楕円の長軸と短軸との交点、又は導出された近似多角形若しくは近似楕円の重心をさらに算出してもよい。ここで、近似楕円の短軸長は、分岐部分における分岐血管の直径に近似していると考えられる。また、近似多角形又は近似楕円の面積は、分岐面の面積に近似していると考えられる。
 こうして求められた分岐面情報は、分岐血管へと挿入するバルーンやステント等のデバイスを選択するための参考情報として用いられる。ステップS1130及びステップS1140において、生成部1020は、主血管と分岐血管との境界点群に内接する最大内接球を導出し、導出された最大内接球の大きさ及び位置を算出してもよい。こうして算出された値も分岐情報であり、分岐部分の大きさ及び位置を表している。
 ステップS1150~S1170において、生成部1020は、ステップS1120で検出された分岐部分についての、主血管からの分岐血管の分岐方向を算出する。
 ステップS1150において、生成部1020は、分岐部分における主血管の向きを算出する。例えば、生成部1020は、分岐部分の近傍での2以上の断層像における主血管の内腔の重心を算出し、重心の位置を近似するベクトルを導出することができる。この計算には、境界抽出部200から取得した、主血管を示す交差点についての位置情報を使用することができる。このようにして導出されたベクトルは、主血管の向きを表している。重心の算出は、主血管を示す交差点についての位置情報を用いて行うことができる。主血管の向きを算出するために用いる断層像は、分岐部分が写っている断層像であってもよいし、分岐部分から所定の範囲内にある断層像であってもよい。もっとも、主血管の内腔の重心の代わりに、主血管の内腔の近似楕円の中心、又は主血管の内腔の最大内接円の中心等を用いることもできる。
 分岐部分の近傍に病変が存在する場合、病変部においては主血管の内腔が狭くなり、重心の位置も移動する。一実施形態においては、分岐部分の近傍に病変が存在する場合、病変よりも分岐部分に近い断層像が用いられる。この場合、主血管の向きを算出する際における病変の影響を抑えることができる。病変の検出方法は特に限定されないが、例えば主血管の内腔が閾値よりも小さい場合に、断層像には病変が写っていると判定することができる。別の実施形態において、生成部1020は、病変部が写っている断層像のうち、主血管の内腔の最大内接円が最も小さい断層像を特定する。そして、特定された断層像における内接円の中心を、主血管の内腔の重心の代わりに用いることができる。このような構成によれば、算出される分岐方向は、血管におけるカテーテル等の進行方向に対する分岐血管の進行方向に近似するため、治療計画を立てる上で有用となる。
 ステップS1160において、生成部1020は、分岐部分における分岐血管の分岐方向を算出する。本実施形態において、生成部1020は、分岐血管を示す交差点についての位置情報を参照して、分岐血管の分岐方向を算出する。例えば、生成部1020は、分岐血管に内接する内接球を導出することができる。そして、生成部1020は、ステップS1140で導出された近似多角形(又は近似曲線)又は近似楕円の重心から、導出された内接球の中心へと向かう方向に基づいて、分岐血管の分岐方向を算出することができる。
 具体的には、生成部1020は、分岐血管を示す交差点群に内接する最大内接球を導出する。ここで、最大内接球は、分岐血管を示す交差点群により囲まれる空間から、分岐部分側又は分岐部分から離れた開放部側(下流側)においてはみ出ないように導出される。また、分岐血管を示す交差点群に、分岐血管の始点を表す点群と、分岐部分から離れた開放部側(下流側)の点群と、を加えてから最大内接球を導出してもよい。そして、生成部1020は、ステップS1140で算出された近似多角形(又は近似曲線)又は近似楕円の重心から最大内接球の重心へと向かうベクトルを、分岐血管の分岐方向を示すベクトルとして算出する。もっとも、生成部1020は、近似多角形(又は近似曲線)又は近似楕円の重心の代わりに、ステップS1140で導出された近似多角形(又は近似曲線)の最大内接円の中心を用いてもよい。一実施形態においては、算出精度を高めるために、分岐血管を示す交差点群の中から、分岐部分からより離れている所定数の点群が選択され、選択された点群に内接する最大内接球が導出される。
 別の実施形態において、生成部1020は、分岐血管を示す交差点群に内接する2以上の内接球を導出し、一方の内接球の中心から、他方の内接球の中心へと向かう方向を、分岐血管の分岐方向として算出してもよい。この場合、分岐血管を示す交差点についての位置情報のみに基づいて分岐血管の分岐方向を算出することができる。一実施形態においては、分岐血管の分岐方向の算出精度を高めるために、一方の内接球が最大内接球であり、2つの内接球の中心間の距離が閾値以上であり、2つの内接球の半径の差が閾値以下となるように、2つの内接球が導出される。
 分岐血管に病変部が存在する場合には、主血管に病変が存在する場合と同様の処理を行うことができる。生成部1020は、こうして得られた分岐部分における分岐血管の分岐方向を、角度を用いて定量的に表すことができる。一実施形態においては、この分岐方向は、血管画像190を撮影した際の走査方向に対する角度で表すことができる。このように求められた分岐方向は、ガイドワイヤ等を分岐血管へと挿入する際の参考情報として用いることができる。
 一方で、本実施形態のステップS1170において、生成部1020は、より有用な情報を提供するために、主血管からの分岐血管の分岐角度を算出する。こうして算出された分岐角度は、主血管からの分岐部分における分岐血管の形態を示す定量的な情報に相当する。分岐角度の算出方法は特に限定されない。例えば、生成部1020は、主血管の向きを表すベクトルと、分岐血管の分岐方向を表すベクトルと、の間の角度を算出してもよい。
 別の実施形態においては、ユーザが分岐角度をより感覚的に理解しやすいように、図13に示す角度Φ及びΘが算出される。図13においては、主血管の向きを表すベクトル1301がxy平面上にあり、x軸と平行となるように、xyz座標系(右手系のデカルト座標系)が設定されている。また、分岐血管の分岐方向を表すベクトル1302は、始点が原点に位置し、終点がxy平面の第一象限に位置するように、このxyz座標系は設定されている。図13において、投影点1303は、ベクトル1302の終点をxy平面上に投影して得られる点である。
 こうして求められた分岐角度は、ガイドワイヤ等を分岐血管へと挿入する際の参考情報として用いることができる。
 ステップS1180において、生成部1020は、ステップS1160で算出された分岐方向と直交する断面における、分岐血管の大きさを示す情報を算出する。こうして算出された情報も、主血管からの分岐部分における分岐血管の形態を示す定量的な情報に相当する。分岐血管の大きさを示す情報としては、例えば、断面積、周長、又は最大内接円の半径若しくは直径等が挙げられる。生成部1020は、分岐血管を示す交差点群に従って分岐血管の大きさを示す情報を生成することができる。ここで、交差点群の輝度を投影することにより、分岐血管の断面画像を生成することもできる。投影される交差点群の輝度とは、血管画像190(例えば横断断面画像)における対応する画素の輝度値である。
 例えば、生成部1020は、分岐血管を示す交差点群を分岐方向と直交する断面へと投影してもよく、投影された点の位置に従って分岐血管の大きさを示す情報を算出することができる。この場合には、分岐血管を示す交差点群のうち、断面からの距離が所定範囲内にある点群を、断面へと投影することができる。
 別の実施形態においては、以下のように投影される点群が選択される。この選択方法を、図14A~Dを参照して説明する。分岐血管の分岐方向を表すベクトル1401が面上に来て、血管画像190の撮影時の撮影断面1402と直交する面をXY面とする。X軸は、血管画像190の撮影時の走査方向を表す。また、XY面上において、走査方向Xと分岐方向を表すベクトルとがなす角をΩとする。ここで、血管画像190の撮影時のi番目の撮影断面を断面iと呼び、分岐方向を表すベクトル1401と直交する投影先の断面1403を断面jと呼ぶ。これらの関係は図14Aに示されている。
 まず、各断面iについて、分岐血管を示す交差点群のうち断面jに最も近い点を選択する。選択された点をPi,jと呼ぶ。次に、点Pi,jとPi+1,jとをXY面へと垂直に投影した際に、2つの投影点間を区切る垂直二等分面1404が算出される。図14Bは、垂直二等分面1404の位置を示している。そして、垂直二等分面1404と、垂直二等分面1404に平行でPi,jを通る面と、の間にある断面i上の分岐血管を示す交差点群が、断面jへと投影される点として選択される。また、垂直二等分面1404と、垂直二等分面1404に平行でPi+1,jを通る面と、の間にある断面i+1上の分岐血管を示す交差点群が、断面jへと投影される点として選択される。図14Cには、選択された点1405が表されている。
 ただし、断面画像を複数作成する場合であって、断面jの間隔Dsと、断面iの間隔Dmとが、Ds<Dm・cosΩの関係を満たす場合には、分岐血管を示す交差点群のうち一部は、断面iと断面i+1との双方に投影される。このことを避けるために、以下の処理を行ってもよい。すなわち、Pi,jとPi,j+1とをXY面へと垂直に投影した際に、2つの投影点間を区切る垂直二等分面1406が算出される。そして、図14Dに示すように、垂直二等分面1406と、垂直二等分面1406に平行でPi,jを通る面と、の間にある断面i上の分岐血管を示す交差点群は、断面jへと投影されるが、断面j+1へは投影されない点として選択される。また、垂直二等分面1406と、垂直二等分面1406に平行でPi,j+1を通る面と、の間にある断面i上の分岐血管を示す交差点群は、断面j+1へと投影されるが、断面jへは投影されない点として選択される。
 もっとも、血管画像190からの任意の断面における断層像の作成方法は多断面再構成法として公知である。したがって、生成部1020が、血管画像190を再構成することにより、分岐血管の分岐方向と直交する断面における断層像を作成する方法は、以上の方法に限られない。
 分岐方向と直交する断面における分岐血管の大きさを示す情報の算出方法の具体例としては、投影された点を近似する近似楕円、近似曲線及び近似多角形を導出してその面積や周囲の長さを求める方法、投影された点の最大内接円を導出してその半径、直径、若しくは面積を求める方法、等が挙げられる。
 上述したように、生成部1020は、分岐血管の分岐方向と直交する断面における断層像を作成し、出力することもできる。例えば、生成部1020は、ステップS1140で算出された近似多角形(若しくは近似曲線)又は近似楕円の重心を通る断層像を作成することができる。また、生成部1020は、分岐面のうち最も上流側又は最も下流側の位置を通る断層像を作成することもできる。生成部1020は、分岐血管の分岐方向に沿った視線方向、又は分岐方向に直交する視線方向における、分岐血管のサーフェスレンダリング画像又はボリュームレンダリング画像等を生成することもできる。
 このような構成によれば、バルーンやステント等を用いて主血管に対して治療を行った後に、プラークが分岐血管方向へと移動することによる分岐血管の狭窄の度合いを容易に確認することができる。また、以上の方法によれば、例えば分岐血管とガイドワイヤの影とが重なっている等の理由で、一部の断層像について分岐血管を示す交差点が十分に検出できない場合であっても、一部の交差点を用いて分岐血管の形態を示す定量的な情報が得られる可能性がある。
 分岐部分にステントが留置されている場合、ステップS1140において、生成部1020は、ステントストラット(ステントの支柱)の大きさ、例えば幅又は厚みを算出してもよい。ステントストラットは、断層像上には輝度の高い点として現れる。したがって、ガイドワイヤの像の推定位置と同様に、検出部230はステントストラットを形態学的にオブジェクトとして抽出することができ、その位置を検出することができる。この場合、生成部1020は、ステントストラットを表すオブジェクトを、分岐面へと垂直に投影することができる。そして、生成部1020は、分岐面をステントストラットにより分割することにより生じた分割領域の面積、又は最大内接円の大きさを算出することができる。こうして得られた情報により、主血管にステントを配置した後におけるステントストラットの幅又は厚みを確認することができる。
 また、ステップS1180において、生成部1020は、ステントストラットを表すオブジェクトを、分岐血管の分岐方向と直交する断面へと投影することができる。そして、生成部1020は、この断面上で、ステントストラットにより分割された分割領域の面積、周長、又は最大内接円の大きさを算出することができる。こうして得られた情報は、ステントストラットの間隙を通るようにカテーテルを操作する際における、カテーテルに垂直な方向のステントストラットの幅に対応する。したがって、この情報は、ステントストラットの間隙を通るようにガイドワイヤ等を操作する際、例えばキッシングバルーンテクニックを行うために用いるバルーンを選択するために、有用である。
 さらに、分岐部分にステントが配置されている場合、生成部1020は、ステントの大きさを示す情報を用いて、主血管からの分岐部分における分岐血管の形態を示す定量的な情報を補正することができる。ステントの大きさを示す情報は、情報取得部1010によって取得される。ステントの大きさを示す情報は、ユーザによって入力部(不図示)を介して入力されてもよいし、予め情報算出部1000に記録されていてもよい。
 例えば、情報取得部1010は、ステントストラットの幅又は厚み(I1)を示す情報を取得することができる。この場合、生成部1020は、算出したステントストラットの幅又は厚み(I2)を用いて、補正パラメータ(I1/I2)を算出できる。算出されるステントストラットの幅又は厚みは、複数のステントストラットのそれぞれについて計測された値の平均値であってもよい。生成部1020は、こうして算出した補正パラメータ(I1/I2)を、分岐血管の形態を示す定量的な情報、例えばステップS1140で算出された近似楕円の短軸長等に乗算することにより、より正確な値を求めることができる。例えば、ステントストラットの幅を用いる場合、血管軸方向の長さを補正することができる。また、ステントストラットの厚みを用いる場合、走査ライン方向の長さを補正することができる。
 情報算出部1000は、表示制御部110を介して、得られた分岐血管の形態を示す定量的な情報を表示部120に表示させることができる。例えば、表示制御部110は、定量的な情報を含む表示画面を表示部120に表示させることができる。また、表示制御部110は、血管の横断断面画像、軸方向断面画像、及び3次元画像のうちの少なくとも1つが含む表示画面を表示部120に表示させることもできる。定量的な情報と、血管の画像との双方を含む表示画面の例を図15に示す。もっとも、定量的な情報と、血管の画像との双方を、表示画面が含むことは必須ではない。
 表示画面1500には、血管軸方向断面画像1510が表示されており、血管軸方向断面画像1510には、検出された主血管かから分岐血管への分岐部分SB1~SB5が示されている。ユーザは、入力部(不図示)を介して、情報を知りたい分岐部分を指定することができる。表示制御部110は、複数の分岐部分のうちの1つを指定する入力に応じて、指定された分岐部分における分岐血管の形態を示す定量的な情報を含むように、表示画面を更新することができる。また、表示制御部110は、複数の分岐部分のうちの1つを指定する入力に応じて、指定された分岐部分を含む血管の横断断面画像、軸方向断面画像、及び3次元画像のうちの少なくとも1つを含むように、表示画面を更新することができる。
 例えば、表示画面1500においては、分岐部分SB5が選択されている。図15に示す表示画面1500の領域1520には、分岐血管の分岐角度(Θ5,Φ5)、分岐血管の直径(D5)、及び分岐面の面積(S5)が表示されている。また、領域1520には、ステントストラットの幅又は厚みによって補正された後の、分岐血管の直径(D5)、及び分岐面の面積(S5)がさらに表示されている。
 また、表示画面1500には、分岐部分SB5を含む血管軸方向断面画像の拡大画像1530,1540,1550と、分岐部分SB5を含む横断断面画像1560が表示されている。表示される拡大画像1530の断面位置は、画面奥行き方向へと変えることができる。また、拡大画像1530の断面の向きは、表示画面1500の右下のユーザインタフェース1580を用いてコントロールできる。拡大画像1540は、図13に示すxz平面に平行で、中心(プローブ)を通る血管軸方向断面である。拡大画像1550には、検出されたステントストラットの位置が強調表示されている。表示画面1500には、主血管についての血管軸方向断面画像と横断断面画像とが表示されているが、分岐部分SB5における分岐血管についての血管軸方向断面画像又は横断断面画像を表示してもよい。
 3D画像1570は、分岐部分SB5を含む血管の3次元画像が表示されている。一実施形態においては、表示される3次元画像の視線方向は、指定された分岐部分における分岐血管の分岐方向に応じて決定される。例えば、表示制御部110は、選択された分岐部分SB5における分岐血管の分岐方向のベクトルと一致するように、3D画像1570の視線方向を決定することができる。視線方向の決定方法はこの方法に限られず、例えば、表示制御部110は、選択された分岐部分SB5における分岐血管の分岐方向のベクトルと直交するように、3D画像1570の視線方向を決定してもよい。
[その他の実施形態]
 以上、境界抽出部200及び情報算出部1000を備える画像処理装置100について説明した。しかしながら、境界抽出部200を備える画像処理装置と、情報算出部1000を備える画像処理装置とが、別個の装置であってもよい。この場合、境界抽出部200を備える画像処理装置は、血管画像190を取得し、判定部240又は判定更新部250による判定結果を出力することができる。出力された情報に基づき、ユーザは血管画像190のうち分岐血管又はガイドワイヤの影に相当する部分を容易に識別することが可能となる。また、情報算出部1000を備える画像処理装置は、境界抽出部200が用いる方法とは別の方法で生成された、主血管に相当する部位と、分岐血管に相当する部位と、を区別する情報を取得してもよい。このような情報を用いても、情報算出部1000を備える画像処理装置は、得られた分岐血管の形態を示す定量的な情報を生成及び出力することができる。
 図1に示した画像処理装置100が備える各部の機能は、汎用のコンピュータを用いて実現することができる。上述のように、境界抽出部200を備える画像処理装置と、情報算出部1000を備える画像処理装置とが、別個の装置である場合も、それぞれの装置の機能は汎用のコンピュータを用いて実現することができる。
 図16はコンピュータの基本構成を示す図である。図16においてプロセッサ1610は、例えばCPUであり、コンピュータ全体の動作をコントロールする。メモリ1620は、例えばRAMであり、プログラム及びデータ等を一時的に記憶する。コンピュータが読み取り可能な記憶媒体1630は、例えばハードディスク又はCD-ROM等であり、プログラム及びデータ等を長期的に記憶する。本実施形態においては、記憶媒体1630が格納している、各部の機能を実現するプログラムが、メモリ1620へと読み出される。そして、プロセッサ1610が、メモリ1620上のプログラムを実行することにより、上述の各ステップの処理が行われ、各部の機能が実現される。
 図16において、入力インタフェース1640は外部の装置から情報を取得するためのインタフェースである。また、出力インタフェース1650は外部の装置へと情報を出力するためのインタフェースであり、例えば表示部120等に接続されている。バス1660は、上述の各部を接続し、データのやりとりを可能とする。
 本発明は上記実施の形態に制限されるものではなく、本発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、本発明の範囲を公にするために、以下の請求項を添付する。
 本願は、2014年3月14日提出の日本国特許出願特願2014-052371を基礎として優先権を主張するものであり、その記載内容の全てを、ここに援用する。

Claims (14)

  1.  プローブを用いて第1の管状物体内を走査することにより得られた管状物体画像のうち、前記第1の管状物体に相当する部位と、前記第1の管状物体から分岐する第2の管状物体に相当する部位と、を区別する情報を取得する情報取得手段と、
     前記情報を使用して、前記第1の管状物体からの分岐部分における前記第2の管状物体の形態を示す定量的な情報を生成する生成手段と、
     を備えることを特徴とする、画像処理装置。
  2.  前記生成手段は、前記第1の管状物体からの分岐部分における前記第2の管状物体の大きさを、前記定量的な情報として算出することを特徴とする、請求項1に記載の画像処理装置。
  3.  前記生成手段は、前記第1の管状物体と前記第2の管状物体との境界点群を近似する近似多角形又は近似楕円を導出し、前記近似多角形の大きさ、前記近似多角形の最大内接円の大きさ、又は前記近似楕円の大きさを、前記定量的な情報として算出することを特徴とする、請求項2に記載の画像処理装置。
  4.  前記情報取得手段はさらに、前記管状物体画像のうち、前記第1の管状物体から前記第2の管状物体への分岐部分に留置されたステントの支柱に相当する部位を示す情報を取得し、
     前記生成手段は、前記ステントの支柱の間隙の大きさを算出することを特徴とする、請求項1乃至3の何れか1項に記載の画像処理装置。
  5.  前記情報取得手段はさらに、前記ステントの支柱の間隙の大きさを示す情報を取得し、
     前記生成手段は、前記情報取得手段が取得した前記ステントの支柱の間隙の大きさを示す情報と、前記算出された前記ステントの支柱の間隙の大きさとに基づいて、前記定量的な情報を補正することを特徴とする、請求項4に記載の画像処理装置。
  6.  前記生成手段は、前記第1の管状物体からの前記第2の管状物体の分岐方向を算出することを特徴とする、請求項1に記載の画像処理装置。
  7.  前記生成手段は、
      前記第1の管状物体と前記第2の管状物体との境界点群を近似する近似多角形又は近似楕円を導出し、
      前記第2の管状物体に内接する内接球を導出し、
      前記近似多角形又は近似楕円の重心から前記内接球の中心へと向かう方向に基づいて、前記分岐方向を算出する
     ことを特徴とする、請求項6に記載の画像処理装置。
  8.  前記生成手段は、前記定量的な情報として、前記第1の管状物体からの前記第2の管状物体の分岐角度を前記分岐方向に基づいて算出することを特徴とする、請求項6又は7に記載の画像処理装置。
  9.  前記生成手段は、前記定量的な情報として、前記分岐方向と直交する断面における前記第2の管状物体の大きさを示す情報を算出することを特徴とする、請求項6乃至8の何れか1項に記載の画像処理装置。
  10.  前記生成手段は、前記分岐方向と直交する断面における前記第2の管状物体の断面画像を生成することを特徴とする、請求項6乃至9の何れか1項に記載の画像処理装置。
  11.  前記情報取得手段はさらに、前記管状物体画像のうち、前記第1の管状物体から前記第2の管状物体への分岐部分に留置されたステントの支柱に相当する部位を示す情報を取得し、
     前記生成手段は、前記分岐方向と直交する断面へと前記ステントの支柱を垂直に投影した場合における、当該断面上での前記ステントの支柱の間隙の大きさを算出することを特徴とする、請求項6乃至10の何れか1項に記載の画像処理装置。
  12.  前記第1の管状物体及び前記第2の管状物体は血管であることを特徴とする、請求項1乃至11の何れか1項に記載の画像処理装置。
  13.  画像処理装置が行う画像処理方法であって、
     プローブを用いて第1の管状物体内を走査することにより得られた管状物体画像のうち、前記第1の管状物体に相当する部位と、前記第1の管状物体から分岐する第2の管状物体に相当する部位と、を区別する情報を取得する情報取得工程と、
     前記情報を使用して、前記第1の管状物体からの分岐部分における前記第2の管状物体の形態を示す定量的な情報を生成する生成工程と、
     を備えることを特徴とする、画像処理方法。
  14.  請求項13に記載の画像処理方法の各工程をコンピュータに実行させるためのプログラム。
PCT/JP2015/000874 2014-03-14 2015-02-23 画像処理装置、画像処理方法及びプログラム WO2015136853A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016507297A JPWO2015136853A1 (ja) 2014-03-14 2015-02-23 画像処理装置、画像処理方法及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014052371 2014-03-14
JP2014-052371 2014-03-14

Publications (1)

Publication Number Publication Date
WO2015136853A1 true WO2015136853A1 (ja) 2015-09-17

Family

ID=54071316

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/000874 WO2015136853A1 (ja) 2014-03-14 2015-02-23 画像処理装置、画像処理方法及びプログラム

Country Status (2)

Country Link
JP (1) JPWO2015136853A1 (ja)
WO (1) WO2015136853A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017066108A1 (en) * 2015-10-13 2017-04-20 Lightlab Imaging, Inc. Intravascular imaging system and methods to determine cut plane view angle of side branch
US10222956B2 (en) 2015-05-17 2019-03-05 Lightlab Imaging, Inc. Intravascular imaging user interface systems and methods
US10631718B2 (en) 2015-08-31 2020-04-28 Gentuity, Llc Imaging system includes imaging probe and delivery devices
WO2021199968A1 (ja) * 2020-03-30 2021-10-07 テルモ株式会社 コンピュータプログラム、情報処理方法、情報処理装置及びモデル生成方法
JP2021531138A (ja) * 2018-07-02 2021-11-18 博動医学影像科技(上海)有限公司Pulse Medical Imaging Technology (Shanghai) Co., Ltd 血管の圧力差の修正方法、装置及び設備
US11278206B2 (en) 2015-04-16 2022-03-22 Gentuity, Llc Micro-optic probes for neurology
WO2023042861A1 (ja) * 2021-09-17 2023-03-23 テルモ株式会社 学習モデル生成方法、画像処理装置、情報処理装置、訓練データ生成方法および画像処理方法
US11684242B2 (en) 2017-11-28 2023-06-27 Gentuity, Llc Imaging system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005508680A (ja) * 2001-10-16 2005-04-07 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ プローブ位置合わせのための枝選択方法
JP2008272025A (ja) * 2007-04-25 2008-11-13 Toshiba Corp 超音波診断装置
JP2009268741A (ja) * 2008-05-08 2009-11-19 Toshiba Corp Mri画像診断装置及びmr画像形成方法
JP2010110619A (ja) * 2008-10-07 2010-05-20 Toshiba Corp 3次元画像処理装置
JP2013534154A (ja) * 2010-08-12 2013-09-02 ハートフロー, インコーポレイテッド 患者固有の血流のモデリングのための方法およびシステム
JP2013543786A (ja) * 2010-11-24 2013-12-09 ボストン サイエンティフィック サイムド,インコーポレイテッド 身体内腔分岐を検出及び表示するためのシステム及び方法
JP2014026653A (ja) * 2012-07-24 2014-02-06 Toshiba Corp 医用画像処理装置、医用画像診断装置及び医用画像処理プログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005508680A (ja) * 2001-10-16 2005-04-07 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ プローブ位置合わせのための枝選択方法
JP2008272025A (ja) * 2007-04-25 2008-11-13 Toshiba Corp 超音波診断装置
JP2009268741A (ja) * 2008-05-08 2009-11-19 Toshiba Corp Mri画像診断装置及びmr画像形成方法
JP2010110619A (ja) * 2008-10-07 2010-05-20 Toshiba Corp 3次元画像処理装置
JP2013534154A (ja) * 2010-08-12 2013-09-02 ハートフロー, インコーポレイテッド 患者固有の血流のモデリングのための方法およびシステム
JP2013543786A (ja) * 2010-11-24 2013-12-09 ボストン サイエンティフィック サイムド,インコーポレイテッド 身体内腔分岐を検出及び表示するためのシステム及び方法
JP2014026653A (ja) * 2012-07-24 2014-02-06 Toshiba Corp 医用画像処理装置、医用画像診断装置及び医用画像処理プログラム

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11278206B2 (en) 2015-04-16 2022-03-22 Gentuity, Llc Micro-optic probes for neurology
US10222956B2 (en) 2015-05-17 2019-03-05 Lightlab Imaging, Inc. Intravascular imaging user interface systems and methods
US11583172B2 (en) 2015-08-31 2023-02-21 Gentuity, Llc Imaging system includes imaging probe and delivery devices
US11937786B2 (en) 2015-08-31 2024-03-26 Gentuity, Llc Imaging system includes imaging probe and delivery devices
US10631718B2 (en) 2015-08-31 2020-04-28 Gentuity, Llc Imaging system includes imaging probe and delivery devices
US11064873B2 (en) 2015-08-31 2021-07-20 Gentuity, Llc Imaging system includes imaging probe and delivery devices
AU2016339822B9 (en) * 2015-10-13 2021-07-08 Lightlab Imaging, Inc. Intravascular imaging system and methods to determine cut plane view angle of side branch
AU2016339822B2 (en) * 2015-10-13 2021-07-01 Lightlab Imaging, Inc. Intravascular imaging system and methods to determine cut plane view angle of side branch
JP2018530395A (ja) * 2015-10-13 2018-10-18 ライトラボ・イメージング・インコーポレーテッド 側枝カットプレーンビュー角度を決定する脈管内撮像システム及び方法
CN108135488B (zh) * 2015-10-13 2021-11-26 光学实验室成像公司 确定侧支的剖面视角的血管内成像系统和方法
CN108135488A (zh) * 2015-10-13 2018-06-08 光学实验室成像公司 确定侧支的剖面视角的血管内成像系统和方法
WO2017066108A1 (en) * 2015-10-13 2017-04-20 Lightlab Imaging, Inc. Intravascular imaging system and methods to determine cut plane view angle of side branch
US11684242B2 (en) 2017-11-28 2023-06-27 Gentuity, Llc Imaging system
JP7074952B2 (ja) 2018-07-02 2022-05-25 上海博動医療科技股▲分▼有限公司 血管の圧力差の修正方法、装置及び設備
JP2021531138A (ja) * 2018-07-02 2021-11-18 博動医学影像科技(上海)有限公司Pulse Medical Imaging Technology (Shanghai) Co., Ltd 血管の圧力差の修正方法、装置及び設備
WO2021199968A1 (ja) * 2020-03-30 2021-10-07 テルモ株式会社 コンピュータプログラム、情報処理方法、情報処理装置及びモデル生成方法
WO2023042861A1 (ja) * 2021-09-17 2023-03-23 テルモ株式会社 学習モデル生成方法、画像処理装置、情報処理装置、訓練データ生成方法および画像処理方法

Also Published As

Publication number Publication date
JPWO2015136853A1 (ja) 2017-04-06

Similar Documents

Publication Publication Date Title
JP6243763B2 (ja) 画像処理装置、画像処理装置の作動方法、及びプログラム
WO2015136853A1 (ja) 画像処理装置、画像処理方法及びプログラム
CN107920747B (zh) 导丝检测系统、方法和装置
CN107133959B (zh) 一种快速的血管边界三维分割方法及系统
JP5465402B2 (ja) 管状器官の医療用画像データについて定量解析を実行する方法、データ処理装置およびプログラム記憶デバイス
US8411927B2 (en) Marker detection in X-ray images
JP5305821B2 (ja) 医用画像処理装置及び医用画像診断装置
US8548213B2 (en) Method and system for guiding catheter detection in fluoroscopic images
US9119559B2 (en) Method and system of generating a 3D visualization from 2D images
JP2009072576A5 (ja) 管状器官の医療用画像データについて定量解析を実行する方法、データ処理装置およびプログラム記憶デバイス
JP5263995B2 (ja) ネットワーク構築装置および方法ならびにプログラム
US10433815B2 (en) Ultrasound diagnostic image generating device and method
JP2015188617A (ja) 診断画像生成装置および診断画像生成方法
CN117115150B (zh) 用于确定分支血管的方法、计算设备和介质
CN104688190B (zh) 检测冠状动脉内支架贴壁情况的装置
US9020232B2 (en) Per vessel, vessel tree modelling with shared contours
JP6608141B2 (ja) 健康状態評価支援システム
JP2015150369A (ja) ステント検出装置、ステント画像表示装置、およびそのプログラムと方法。
JP6204544B2 (ja) 診断画像生成装置
Ogiela Languages of shape feature description and syntactic methods for recognition of morphological changes in organs in analysis of selected x-ray images
JP2023051175A (ja) コンピュータプログラム、情報処理方法、及び情報処理装置
CN111986139A (zh) 颈动脉内中膜厚度的测量方法、设备及存储介质
JP2016036589A (ja) 眼底画像解析装置及び解析方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15760878

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016507297

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15760878

Country of ref document: EP

Kind code of ref document: A1