WO2016042716A1 - 光音響画像生成方法および装置 - Google Patents

光音響画像生成方法および装置 Download PDF

Info

Publication number
WO2016042716A1
WO2016042716A1 PCT/JP2015/004392 JP2015004392W WO2016042716A1 WO 2016042716 A1 WO2016042716 A1 WO 2016042716A1 JP 2015004392 W JP2015004392 W JP 2015004392W WO 2016042716 A1 WO2016042716 A1 WO 2016042716A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
photoacoustic
change
acoustic wave
photoacoustic image
Prior art date
Application number
PCT/JP2015/004392
Other languages
English (en)
French (fr)
Inventor
拓明 山本
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to EP15841830.1A priority Critical patent/EP3195809B1/en
Priority to JP2016548544A priority patent/JP6328778B2/ja
Priority to CN201580048582.3A priority patent/CN106687049B/zh
Publication of WO2016042716A1 publication Critical patent/WO2016042716A1/ja
Priority to US15/459,301 priority patent/US10729331B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0093—Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy
    • A61B5/0095—Detecting, measuring or recording by applying one single type of energy and measuring its conversion into another type of energy by applying light and detecting acoustic waves, i.e. photoacoustic measurements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/0841—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13—Tomography
    • A61B8/14—Echo-tomography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/34—Trocars; Puncturing needles
    • A61B17/3403—Needle locating or guiding means
    • A61B2017/3413—Needle locating or guiding means guided by ultrasound

Definitions

  • the present invention relates to a photoacoustic image generation method, that is, a method of emitting light toward a subject and imaging the subject based on an acoustic wave generated from a portion of the subject that has received the light.
  • the present invention also relates to an apparatus for performing such a photoacoustic image generation method.
  • Patent Documents 1 and 2 for example, a photoacoustic imaging apparatus that images the inside of a living body using a photoacoustic effect is known.
  • a living body is irradiated with pulsed light such as pulsed laser light.
  • pulsed light such as pulsed laser light.
  • the living tissue that has absorbed the energy of the pulsed light undergoes volume expansion due to heat and generates acoustic waves. Therefore, it is possible to detect this acoustic wave with a detection means such as an ultrasonic probe and to visualize the inside of the living body based on the electrical signal (photoacoustic signal) obtained thereby.
  • this photoacoustic imaging apparatus constructs an image based only on an acoustic wave radiated from a specific light absorber, it is suitable for imaging a specific tissue in a living body, such as a blood vessel. ing.
  • Patent Documents 3 and 4 for example, a puncture technique for performing tissue collection, drug injection, and the like using a puncture needle stabbed inside a living body is known.
  • the position of the puncture needle particularly the tip position, should be imaged and grasped during the procedure so that the tip of the puncture needle does not damage internal organs, tissues, etc. Is required.
  • Patent Documents 3 and 4 above as a method to meet the demand, a part of a living body including a puncture needle is displayed on an ultrasonic image, and the position of the puncture needle can be confirmed in the image.
  • the method is known.
  • Patent Document 3 proposes a method in which ultrasonic images are generated for a plurality of scanning sections, and the scanning section with the highest reflection brightness is regarded as a section through which the tip of the puncture needle passes.
  • Patent Document 4 proposes a method for determining the displacement of the puncture needle from the scanning section based on the difference between the amount of movement of the tip of the puncture needle between the frames of the ultrasonic image and the amount of movement of the puncture needle.
  • Patent Document 5 discloses a method in which a puncture needle is displayed on a photoacoustic image so that the position of the puncture needle can be confirmed on the photoacoustic image.
  • the light emitted toward the puncture needle in the subject is irradiated on the puncture needle or the like over a relatively wide range, for example, by diffusing in the subject. It will be. Therefore, even if the tip of the puncture needle is present at a position off the scanning section, a photoacoustic image is drawn so that the tip is present on the scanning section, and as a result, the tip position of the puncture needle is erroneously detected. There is a possibility.
  • the present invention has been made in view of the above circumstances, and can accurately indicate whether or not the tip of an insertion object such as a puncture needle to be inserted into a subject exists on an observation scanning plane for generating an image. It is an object to provide a photoacoustic image generation method.
  • an object of the present invention is to provide a photoacoustic imaging apparatus capable of performing such a photoacoustic image generation method.
  • a photoacoustic image generation method includes: In a photoacoustic image generation method for generating a photoacoustic image of a subject including an insert for each scanning plane, Generate a reflected acoustic wave image of the subject for each scanning plane, A plurality of photoacoustic images and a plurality of reflected acoustic wave images are generated for the observation scanning plane for image generation, From a plurality of photoacoustic images, a change in the photoacoustic image on the observation scanning plane is detected, From a plurality of reflected acoustic wave images, a change in the reflected acoustic wave image on the observation scanning plane is detected, Based on the change in the photoacoustic image and the change in the reflected acoustic wave image, it is determined whether the tip of the insert exists on the observation scanning plane, The determination result is notified.
  • both the change in the photoacoustic image and the change in the reflected acoustic wave image are equal to or greater than a predetermined reference value, it may be determined that the tip of the insert exists on the observation scanning plane.
  • the reference value described above is determined for each of the change in the photoacoustic image and the change in the reflected acoustic wave image.
  • the photoacoustic image generation method of the present invention when the frame rate for generating the photoacoustic image and the frame rate for generating the reflected acoustic wave image are different from each other, light is generated from the two most recent photoacoustic images in the generation order. It is preferable that a change in the acoustic image is detected, and a change in the reflected acoustic wave image is detected from the two reflected acoustic wave images in the most recent generation order.
  • the photoacoustic image generation apparatus is: In a photoacoustic image generation device that generates a photoacoustic image of a subject including an insert for each scanning plane, Means for generating a reflected acoustic wave image of a subject for each scanning plane; Means for detecting a change in the photoacoustic image on the observation scanning plane from a plurality of photoacoustic images relating to the observation scanning plane to generate an image; Means for detecting a change in the reflected acoustic wave image on the observation scanning plane from a plurality of reflected acoustic wave images on the observation scanning plane; Determination means for determining whether or not the tip of the insert exists on the observation scanning plane based on the change in the photoacoustic image and the change in the reflected acoustic wave image; And a notifying means for notifying the result of the determination.
  • the determination means determines that the tip of the insert exists on the observation scanning surface when both the change in the photoacoustic image and the change in the reflected acoustic wave image exist.
  • the determination means determines that the tip of the insert is present on the observation scanning surface when both the change in the photoacoustic image and the change in the reflected acoustic wave image are equal to or greater than a predetermined reference value. There may be.
  • the photoacoustic image generation apparatus of the present invention preferably has means for changing the reference value described above.
  • the reference value described above is determined for each of the change of the photoacoustic image and the change of the reflected acoustic wave image.
  • the photoacoustic image generation apparatus of the present invention When the photoacoustic image generation frame rate and the reflected acoustic wave image generation frame rate are different from each other, the photoacoustic image is generated from the two most recent photoacoustic images in the generation order.
  • the means for detecting the change in the reflected acoustic wave image is light from the two reflected acoustic wave images in the nearest generation order. It is desirable to detect changes in the acoustic image.
  • a photoacoustic image generation method for generating a photoacoustic image of a subject including an insert for each scanning plane For each scanning plane, generate a photoacoustic image and a reflected acoustic wave image of the subject including the insert, A plurality of photoacoustic images and a plurality of reflected acoustic wave images are generated for the observation scanning plane for image generation, From a plurality of photoacoustic images, a change in the photoacoustic image on the observation scanning plane is detected, From a plurality of reflected acoustic wave images, a change in the reflected acoustic wave image on the observation scanning plane is detected, Based on the change in the photoacoustic image and the change in the reflected acoustic wave image, determine whether or not the tip of the insert exists on the observation scanning plane, Since the result of the determination is notified, it is possible to accurately determine whether or not the tip of the
  • the photoacoustic image generation apparatus is a photoacoustic image generation apparatus that generates a photoacoustic image of a subject including an insert for each scanning plane.
  • Determination means for determining whether or not the tip of the insert exists on the observation scanning plane based on the change in the photoacoustic image and the change in the reflected acoustic wave image; Since the notification means for notifying the determination result is provided, the photoacoustic image generation method of the present invention described above can be implemented.
  • FIG. 1 is a block diagram showing a schematic configuration of a photoacoustic imaging apparatus according to a first embodiment of the present invention.
  • the flowchart which shows the process for showing the position of the puncture needle performed in the apparatus of FIG. Schematic showing an example of the relationship between the puncture needle and the observation scanning plane Schematic showing another example of the relationship between the puncture needle and the observation scanning plane Schematic showing a display example of a puncture needle in a photoacoustic image and an ultrasound image Schematic showing a display example of a puncture needle in an ultrasound image Schematic showing a display example of a puncture needle in a photoacoustic image
  • the block diagram which shows schematic structure of the photoacoustic imaging device which concerns on the 2nd Embodiment of this invention.
  • FIG. 1 is a block diagram showing a basic configuration of a photoacoustic image generation apparatus 10 according to the first embodiment of the present invention.
  • the photoacoustic image generation apparatus 10 is capable of generating both a photoacoustic image and an ultrasonic image, and includes an ultrasonic probe (probe) 11, an ultrasonic unit 12, a laser unit 13, and image display means. 14 is provided.
  • the laser unit 13 for example, a unit that emits a laser beam having a center wavelength of 756 nm is applied. From the laser unit 13, pulsed laser light (hereinafter simply referred to as laser light) is emitted toward the subject.
  • the path of this laser beam is schematically shown in FIG. 1, but is guided to the probe 11 using light guiding means such as a plurality of optical fibers, and directed from the probe 11 portion toward the subject. It is desirable to be irradiated.
  • the probe 11 performs output (transmission) of ultrasonic waves to the subject and detection (reception) of reflected ultrasonic waves reflected back from the subject.
  • the probe 11 has, for example, a plurality of ultrasonic transducers arranged one-dimensionally.
  • the probe 11 detects photoacoustic waves generated when the observation site in the subject absorbs the laser light from the laser unit 13 using a plurality of ultrasonic transducers.
  • the probe 11 detects the photoacoustic wave and outputs a photoacoustic wave detection signal, detects the reflected ultrasonic wave (reflected acoustic wave), and outputs an ultrasonic detection signal.
  • the end portion of the light guide means that is, the tip portions of the plurality of optical fibers, are arranged along the arrangement direction of the plurality of ultrasonic transducers. From there, laser light is emitted toward the subject.
  • the case where the light guide means is coupled to the probe 11 as described above will be described as an example.
  • the probe 11 When generating a photoacoustic image or an ultrasonic image (reflected acoustic wave image) of the subject, the probe 11 is moved in a direction substantially perpendicular to the one-dimensional direction in which a plurality of ultrasonic transducers are arranged, whereby the subject Are two-dimensionally scanned by laser light and ultrasonic waves.
  • This scanning may be performed by an inspector moving the probe 11 manually, or a more precise two-dimensional scanning may be realized using a scanning mechanism.
  • an acoustic wave having an audible frequency may be used, and an image of the reflected acoustic wave may be generated.
  • the ultrasonic unit 12 includes a reception circuit 21, an AD conversion unit 22, a reception memory 23, a data separation unit 24, a photoacoustic image generation unit 25, and an ultrasonic image generation unit 26.
  • the output of the photoacoustic image generation means 25 is input to the image display means 14 composed of, for example, a CRT or a liquid crystal display device via an image composition means 52 described later.
  • the ultrasonic unit 12 includes a transmission control circuit 30, a control unit 31 that controls the operation of each unit in the ultrasonic unit 12, an image change detection unit 50, and a determination unit 51.
  • the receiving circuit 21 receives the photoacoustic wave detection signal and the ultrasonic detection signal output from the probe 11.
  • the AD conversion unit 22 is a sampling unit that samples the photoacoustic wave detection signal and the ultrasonic detection signal received by the receiving circuit 21 and converts them into photoacoustic data and ultrasonic data, which are digital signals, respectively. This sampling is performed in a predetermined sampling period in synchronization with the AD clock signal.
  • the receiving circuit 21 may be configured to include the AD conversion means 22.
  • the laser unit 13 is composed of a Ti: Sapphire laser, an OPO (optical parametric oscillation) laser by second harmonic excitation of a YAG laser, a Q-switch pulse laser made of an alexandrite laser, or the like.
  • the laser unit 13 receives a laser oscillation trigger signal for instructing light emission from the control means 31. Upon receiving this laser oscillation trigger signal, the laser unit 13 emits a pulsed laser beam having a wavelength of 756 nm.
  • the laser unit 13 may be composed of other semiconductor lasers, for example.
  • control means 31 inputs an ultrasonic trigger signal for instructing ultrasonic transmission to the transmission control circuit 30.
  • the transmission control circuit 30 transmits an ultrasonic wave from the probe 11.
  • the control means 31 outputs the laser oscillation trigger signal first, and then outputs the ultrasonic trigger signal.
  • the laser oscillation trigger signal is output to emit laser light toward the subject and the photoacoustic wave is detected, and then the ultrasonic trigger signal is output to transmit ultrasonic waves to the subject. And the detection of reflected ultrasound is performed.
  • the control means 31 further outputs a sampling trigger signal for instructing the AD conversion means 22 to start sampling.
  • This sampling trigger signal is output after the laser oscillation trigger signal is output and before the ultrasonic trigger signal is output, more preferably at the timing when the laser light is actually emitted toward the subject.
  • the sampling trigger signal is output in synchronization with the timing at which the control means 31 outputs the laser oscillation trigger signal, for example.
  • the AD conversion means 22 starts sampling the photoacoustic wave detection signal output from the probe 11 and received by the receiving circuit 21.
  • the control means 31 outputs the ultrasonic trigger signal at the timing of ending the detection of the photoacoustic wave after outputting the laser oscillation trigger signal. At this time, the AD conversion means 22 continues sampling without interrupting the sampling of the photoacoustic wave detection signal. In other words, the control unit 31 outputs the ultrasonic trigger signal in a state where the AD conversion unit 22 continues sampling the photoacoustic wave detection signal.
  • the detection target of the probe 11 changes from a photoacoustic wave to a reflected ultrasonic wave.
  • the AD conversion means 22 continuously samples the photoacoustic wave detection signal and the ultrasonic wave detection signal by continuing sampling of the detected ultrasonic wave detection signal. Note that the ultrasonic trigger signal may be output after the AD conversion means 22 stops sampling the photoacoustic wave detection signal.
  • the AD conversion means 22 stores photoacoustic data and ultrasonic data obtained by sampling in a common reception memory 23.
  • the sampling data stored in the reception memory 23 is photoacoustic data up to a certain point, and becomes ultrasonic data from a certain point.
  • the data separation unit 24 separates the photoacoustic data and the ultrasonic data stored in the reception memory 23.
  • the ultrasonic data and photoacoustic data read from the reception memory 23 are input to the data separation unit 24 in FIG.
  • the data separator 24 inputs only the photoacoustic data to the subsequent photoacoustic image generator 25 when generating the photoacoustic image.
  • the photoacoustic image generation means 25 Based on this photoacoustic data, the photoacoustic image generation means 25 generates a photoacoustic image relating to the scanning surface (scanning section) scanned by the laser light, and data indicating the photoacoustic image is used as an image synthesis means 52 described later.
  • To the image display means 14. Thereby, a photoacoustic image relating to the scanning surface is displayed on the image display means 14.
  • the generation of the photoacoustic image is performed by processing including image reconstruction such as phase matching addition, detection, logarithmic conversion, and the like.
  • the data separation unit 24 inputs only the ultrasonic data to the subsequent ultrasonic image generation unit 26 when generating the ultrasonic image. Based on this ultrasonic data, the ultrasonic image generating means 26 generates an ultrasonic image relating to the scanning surface scanned by the ultrasonic waves. The generation of the ultrasonic image is also performed by processing including image reconstruction such as phase matching addition, detection, logarithmic conversion, and the like.
  • the photoacoustic image is generated to display a tissue such as a blood vessel of the subject, and further displays the puncture needle 15 inserted into the subject to indicate the position of the puncture needle 15; In particular, it is also used to enable the operator to confirm the tip position. And when it determines with the front-end
  • the above-described image synthesis is not performed, and the data indicating the photoacoustic image is input to the image display unit 14 through the image synthesis unit 52. .
  • the determination and the display of the determination result will be described in detail later.
  • the probe 11 is moved to scan the subject two-dimensionally with laser light, and a desired part of the subject, such as a blood vessel, is detected based on the image data regarding a plurality of cross sections obtained by the scanning. It is also possible to generate and display a photoacoustic image for three-dimensional display.
  • FIG. 2 shows a flow of processing controlled by, for example, the control means 31 of FIG. 1 in order to make this determination.
  • 3 and 4 schematically show the relationship between the scanning plane (scanning section) Ps and the puncture needle 15.
  • the scanning surface Ps is a surface that is used for observation after generating an image, and is hereinafter referred to as an observation scanning surface Ps.
  • Ultrasonic waves emitted from a plurality of ultrasonic transducers arranged one-dimensionally on the probe 11 are focused by an acoustic lens or the like, and then irradiated on the subject with a certain width, and there is also detection of reflected ultrasonic waves.
  • the entire imaged range of the puncture needle 15 including the tip 15a is within the observation scanning plane Ps.
  • the puncture needle 15 is pushed in the lower left direction in FIG. 3, that is, in a direction in which the tip 15a is advanced forward.
  • the distal end portion including the distal end 15a of the puncture needle 15 may be detached from the observation scanning plane Ps.
  • FIGS. 5 to 7 show how the puncture needle 15 is shown in the photoacoustic image and the ultrasonic image when the relationship between the puncture needle 15 and the observation scanning plane Ps is in the state shown in FIGS. It is to explain.
  • both the ultrasonic image and the photoacoustic image are drawn so that the portion including the tip 15a of the puncture needle 15 exists on the observation scanning plane Ps.
  • a position Q at which the puncture needle 15 will be removed from the observation scanning plane Ps is indicated by Q as described later.
  • the puncture needle 15 is drawn only in a range that falls within the observation scanning plane Ps.
  • the puncture needle 15 may be drawn including the distal end portion (the distal end 15a and the vicinity thereof) located at a position deviated from the observation scanning plane Ps. That is, in the generation of the photoacoustic image, the laser light emitted toward the subject is spread by diffusion or the like, and therefore the irradiation range is wider than the ultrasonic wave at the time of generating the ultrasonic image.
  • the tip of the puncture needle 15 at a position deviating from the observation scanning plane Ps is also irradiated with the laser beam, so that the photoacoustic wave generated from the tip is detected by the probe 11, as if the puncture needle 15 A photoacoustic image in which the tip portion exists on the observation scanning plane Ps is generated.
  • a laser beam is received from the distal end portion of the puncture needle 15 that is usually made of metal, a stronger photoacoustic wave is generated than the tissue or the like of the subject, so that the distal end portion is particularly easily imaged. ing.
  • the distal end portion of the puncture needle 15 As another example of strengthening the photoacoustic wave from the distal end portion of the puncture needle 15, light is introduced into the puncture needle using an optical fiber or the like, and the distal end portion, the tissue of the distal end portion, or the distal end described later It is also possible to generate a photoacoustic wave by directly irradiating light to the light absorbing member of the part. As another example, by attaching a member that generates sound waves to the distal end portion of the puncture needle 15, it is possible to generate sound waves from the distal end portion without using light.
  • a light absorbing member that enhances the absorption efficiency of laser light and promotes the generation of acoustic waves is preferably disposed near the tip 15a of the puncture needle 15 by embedding, coating, or the like. Examples of such a light absorbing member include black fluororesin.
  • step P1 When this process starts in step P1, next in steps P2, P3, P4 and P5, for each of the common observation scanning planes Ps, photoacoustic image generation, ultrasonic image generation, photoacoustic image generation, and An ultrasonic image is generated.
  • Data indicating the plurality of photoacoustic images and the plurality of ultrasonic images thus obtained is temporarily stored in, for example, a storage unit included in the control unit 31 of FIG.
  • the generation of the photoacoustic image and the ultrasonic image only needs to be performed a plurality of times, and the number and order of generation of each image are not limited to those described above.
  • the process of generating the photoacoustic image three times continuously and then generating the ultrasonic image once may be repeated a plurality of times.
  • the image change detection means 50 detects the change in the photoacoustic image and the change in the ultrasonic image on the observation scanning plane Ps based on the data read from the storage means.
  • This image change is detected by calculating a change between two photoacoustic images with the latest generation order, and between two ultrasonic images with the same generation order.
  • the frame rates for generating both images differ from each other, such as generating the photoacoustic image three times continuously and then generating the ultrasonic image once, both of the two images with the most recent generation order are generated. It is desirable to calculate the change between the photoacoustic images, and also between the two ultrasonic images having the latest generation order.
  • the calculation of the image change can be performed using a generally known method, such as checking the correlation of images between frames using block matching or template matching.
  • the amount of change in the image due to the pulsation before the insertion of the puncture needle 15 is calculated in advance so that the change in the image due to the insertion of the puncture needle 15 and the change in the image due to the pulsation of the subject can be distinguished.
  • the image change amount due to pulsation may be subtracted from the image change amount after insertion of the needle 15.
  • the pulsation changes the image by calculating the amount of change in the image in consideration of the movement in that direction. You may make it avoid affecting.
  • step P7 the determination means 51 determines whether or not the tip 15a of the puncture needle 15 is on the observation scanning plane Ps based on the changes in the photoacoustic image and the ultrasonic image obtained as described above. Is done. In this determination, when a change is detected in both the photoacoustic image and the ultrasonic image, it is determined that the tip 15a of the puncture needle 15 is on the observation scanning plane Ps, and otherwise, the determination is made on the observation scanning plane Ps. It is determined that the tip 15a of the puncture needle 15 is not present.
  • the change amount of the image is a predetermined change due to the pulsation, it may be considered that there is no change in the image. Further, as described above, when the image change amount due to pulsation is subtracted from the image change amount after insertion of the puncture needle 15, the image change amount after the subtraction is only due to the movement of the puncture needle 15. It can be judged.
  • the constant value may be the same value for the photoacoustic image and the ultrasonic image, or may be a different value for the photoacoustic image and the ultrasonic image.
  • step P8 the result of the determination is displayed.
  • Information indicating the determination result is input to the image synthesizing unit 52, a display based on the information is synthesized with the photoacoustic image, and the synthesized image is displayed on the image display unit 14.
  • the above series of processing ends at the next step P9.
  • the display in the present embodiment indicates, for example, whether or not the tip 15a of the puncture needle 15 is on the observation scanning plane Ps, but when the tip 15a of the puncture needle 15 is removed from the observation scanning plane Ps. However, a display indicating that may be made.
  • the notification unit is configured by the image composition unit 52 and the image display unit 14.
  • a warning sound may be sounded at the same time, or only a warning sound may be sounded without displaying. .
  • FIG. 8 is a block diagram showing a basic configuration of the photoacoustic image generation apparatus 100 according to the second embodiment of the present invention.
  • the photoacoustic image generation apparatus 100 is basically different from the photoacoustic image generation apparatus 10 shown in FIG. 1 in that the configuration of the determination unit 151 is different from that of the determination unit 51 and that a reference value setting unit 53 is added. Is different.
  • the reference value setting means 53 sets an assumed reference value for the amount of image change, and information indicating the reference value is input to the determination means 151.
  • the determination unit 151 compares the change in the photoacoustic image and the change in the ultrasonic image on the observation scanning plane Ps obtained by the image change detection unit 50 with the reference value, and both the changes in both images are greater than or equal to the reference value. In some cases, it is determined that the tip 15a of the puncture needle 15 is present on the observation scanning plane Ps. Otherwise, it is determined that the tip 15a of the puncture needle 15 is not present on the observation scanning plane Ps. Next, the determination result is notified by display or warning sound in the same manner as in the first embodiment.
  • the reference value may be the same value for the photoacoustic image and the ultrasonic image, or may be a different value for the photoacoustic image and the ultrasonic image. It is desirable that the reference value can be changed.
  • the insert other than the puncture needle may be, for example, a catheter inserted into a blood vessel or a guide wire of a catheter inserted into a blood vessel.
  • a radiofrequency ablation needle that accommodates an electrode used for radiofrequency ablation, an optical fiber for laser treatment, or the like may be used.
  • the generated ultrasonic image is used to determine whether or not the tip 15a of the puncture needle 15 is present on the observation scanning plane Ps, and to show the observation scanning plane Ps of the subject alone. Alternatively, it can be combined with the photoacoustic image and displayed on the image display means 14.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Acoustics & Sound (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

　穿刺針等の挿入物の先端が、観察走査面上に存在するか否かを正確に示すことができる光音響画像生成方法および装置を得ることを課題とする。　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成装置において、一つの走査面毎に被写体の反射音響波画像を生成する手段（２６）と、画像生成する観察走査面に関する複数の光音響画像から、観察走査面における光音響画像の変化を検出する手段（５０）と、観察走査面に関する複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出する手段（５０）と、光音響画像の変化および反射音響波画像の変化に基づいて、観察走査面の上に挿入物の先端が存在するか否かを判定 する判定手段（５１）と、上記判定の結果を報知する報知手段（１４、５２）とを設ける。

Description

光音響画像生成方法および装置
　本発明は光音響画像生成方法すなわち、被写体に向けて光を出射し、光を受けた被写体の部分から発生する音響波に基づいて被写体を画像化する方法に関するものである。
　また本発明は、そのような光音響画像生成方法を実施する装置に関するものである。
　従来、例えば特許文献１、２に示されているように、光音響効果を利用して生体の内部を画像化する光音響画像化装置が知られている。この光音響画像化装置においては、例えばパルスレーザ光等のパルス光が生体に照射される。このパルス光の照射を受けた生体内部では、パルス光のエネルギーを吸収した生体組織が熱によって体積膨張し、音響波を発生する。そこで、この音響波を超音波プローブなどの検出手段で検出し、それにより得られた電気的信号（光音響信号）に基づいて生体内部を可視像化することが可能となっている。
　この光音響画像化装置は、特定の吸光体から放射される音響波のみに基づいて画像を構築するようにしているので、生体における特定の組織、例えば血管等を画像化するのに好適となっている。
　他方、例えば特許文献３、４に示されているように、生体の内部に刺した穿刺針を利用して組織採取や薬物注入等を行う穿刺術が公知となっている。この穿刺術を実施する際には、穿刺針の先端で生体内部の臓器、組織等を傷付けることが無いように、施術中に穿刺針の位置、特に先端位置を画像化して把握可能としておくことが求められる。
　その要求に応える方法として、従来、上記特許文献３、４にも示されるように、穿刺針を含む生体の部分を超音波画像に表示し、その画像において穿刺針の位置を確認できるようにした方法が知られている。しかしその種の方法においては、穿刺針を観察している走査面（走査断面）から穿刺針がずれてしまった場合、そのことを確認するのが難しいという問題が認められている。
　そこで特許文献３には、複数の走査断面について超音波画像の生成を行い、最も反射の輝度が高い走査断面を穿刺針の先端が通る断面とみなす方法が提案されている。また、特許文献４には、超音波画像のフレーム間における穿刺針の先端の移動量と、穿刺針の移動量との差に基づいて、走査断面からの穿刺針のずれを判断する方法が提案されている。さらに特許文献５には、光音響画像に穿刺針を表示させて、光音響画像上で穿刺針の位置を確認可能とした方法が示されている。
特開２００５－２１３８０号公報 特開２０１１－２１７７６７号公報 特開２００５－３４２１２８号公報 特開２００６－０５５４０７号公報 特開２０１３－０２７５１３号公報
　しかし超音波画像の生成においては、穿刺針の先端で反射する反射超音波の反射方向が、穿刺針とそこに照射される超音波との角度に応じて変わってしまう。そのため、特許文献３に開示された方法においては、超音波が反射する角度によっては、輝度が高くても必ずしも走査断面とは限らないことから、穿刺針の先端位置が誤って検出される可能性がある。
　また特許文献４に開示された方法においては、穿刺針に対して垂直に超音波が当たらない場合は、反射超音波の検出信号が弱いことから、穿刺針の先端や穿刺針自身の移動量を正確に求めることが難しいという問題が認められる。
　また特許文献５に開示された方法においては、被検体中の穿刺針に向けて出射された光が、被検体中で拡散する等により、比較的広い範囲に亘って穿刺針等に照射されることになる。そこで、穿刺針先端が走査断面から外れた位置に存在していても、該先端が走査断面上に存在するように光音響画像が描画され、その結果、穿刺針の先端位置が誤って検出される可能性がある。
　本発明は上記の事情に鑑みてなされたものであり、被写体に挿入される穿刺針等の挿入物の先端が、画像生成する観察走査面上に存在するか否かを正確に示すことができる光音響画像生成方法を提供することを目的とする。
　さらに本発明は、そのような光音響画像生成方法を実施することができる光音響画像化装置を提供することを目的とする。
　本発明による光音響画像生成方法は、
　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成方法において、
　一つの走査面毎に被写体の反射音響波画像を生成し、
　画像生成する観察走査面に関して、複数の光音響画像および複数の反射音響波画像を生成し、
　複数の光音響画像から、観察走査面における光音響画像の変化を検出し、
　複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出し、
　光音響画像の変化および反射音響波画像の変化に基づいて、観察走査面の上に挿入物の先端が存在するか否かを判定し、
　判定の結果を報知することを特徴とするものである。
　なお、この光音響画像生成方法においては、例えば、光音響画像の変化および反射音響波画像の変化が共に存在する場合に、観察走査面の上に挿入物の先端が存在すると判定すればよい。ここで、「変化が・・・存在する」とは、僅かでも存在する場合と、予め定められた僅かな一定値以上となった場合の双方を含むものとする。
　あるいは、光音響画像の変化および反射音響波画像の変化が共に、予め定められた基準値以上である場合に、観察走査面の上に挿入物の先端が存在すると判定するようにしてもよい。
　なお、上に述べた基準値は、変更可能であることが望ましい。
　また、上に述べた基準値は、光音響画像の変化および反射音響波画像の変化それぞれに対して定めるのが望ましい。
　また、本発明の光音響画像生成方法においては、光音響画像の生成のフレームレートと、反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの光音響画像同士から光音響画像の変化を検出し、生成順が直近の２つの反射音響波画像同士から反射音響波画像の変化を検出することが好ましい。
　一方、本発明による光音響画像生成装置は、
　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成装置において、
　一つの走査面毎に被写体の反射音響波画像を生成する手段と、
　画像生成する観察走査面に関する複数の光音響画像から、観察走査面における光音響画像の変化を検出する手段と、
　観察走査面に関する複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出する手段と、
　光音響画像の変化および反射音響波画像の変化に基づいて、観察走査面の上に挿入物の先端が存在するか否かを判定する判定手段と、
　判定の結果を報知する報知手段とを備えたことを特徴とするものである。
　なお、上記の判定手段は、光音響画像の変化および反射音響波画像の変化が共に存在する場合に、観察走査面の上に挿入物の先端が存在すると判定するものであることが望ましい。
　あるいは、判定手段は、光音響画像の変化および反射音響波画像の変化が共に、予め定められた基準値以上である場合に、観察走査面の上に挿入物の先端が存在すると判定するものであってもよい。
　また本発明の光音響画像生成装置は、上に述べた基準値を変更する手段を有していることが望ましい。
　また、上に述べた基準値は、光音響画像の変化および反射音響波画像の変化それぞれに対して定められていることが望ましい。
　さらに、本発明の光音響画像生成装置においては、
　光音響画像の変化を検出する手段が、光音響画像の生成のフレームレートと、反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの光音響画像同士から光音響画像の変化を検出するものであり、
　反射音響波画像の変化を検出する手段が、光音響画像の生成のフレームレートと、反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの反射音響波画像同士から光音響画像の変化を検出するものであることが望ましい。
　本発明の光音響画像生成方法によれば、
　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成方法において、
　一つの走査面毎に、挿入物を含む被写体の光音響画像および反射音響波画像を生成し、
　画像生成する観察走査面に関して、複数の光音響画像および複数の反射音響波画像を生成し、
　複数の光音響画像から、観察走査面における光音響画像の変化を検出し、
　複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出し、
　光音響画像の変化および反射音響波画像の変化に基づいて、観察走査面の上に挿入物の先端が存在するか否かを判定し、
　判定の結果を報知するようにしたので、観察走査面の上に挿入物の先端が存在するか否かを正確に判定して、穿刺術の術者に示すことが可能になる。なお、観察走査面の上に挿入物の先端が存在するか否かを正確に判定できる詳しい理由は、後に実施形態の説明に即して詳しく説明する。
　一方、本発明による光音響画像生成装置は、一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成装置において、
　一つの走査面毎に被写体の反射音響波画像を生成する手段と、
　画像生成する観察走査面に関する複数の光音響画像から、観察走査面における光音響画像の変化を検出する手段と、
　観察走査面に関する複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出する手段と、
　光音響画像の変化および反射音響波画像の変化に基づいて、観察走査面の上に挿入物の先端が存在するか否かを判定する判定手段と、
　判定の結果を報知する報知手段とを備えたものであるので、上に説明した本発明の光音響画像生成方法を実施できるものとなる。
本発明の第１の実施形態に係る光音響画像化装置の概略構成を示すブロック図 図１の装置においてなされる、穿刺針の位置を示すための処理を示すフローチャート 穿刺針と観察走査面との関係の一例を示す概略図 穿刺針と観察走査面との関係の別の例を示す概略図 光音響画像と超音波画像における穿刺針の表示例を示す概略図 超音波画像における穿刺針の表示例を示す概略図 光音響画像における穿刺針の表示例を示す概略図 本発明の第２の実施形態に係る光音響画像化装置の概略構成を示すブロック図
　以下、図面を参照して本発明の実施形態を詳細に説明する。図１は、本発明の第１の実施形態に係る光音響画像生成装置１０の基本構成を示すブロック図である。この光音響画像生成装置１０は、光音響画像と超音波画像の双方を生成可能とされたもので、超音波探触子（プローブ）１１、超音波ユニット１２、レーザユニット１３、および画像表示手段１４を備えている。
　上記レーザユニット１３としては、例えば中心波長７５６ｎｍのレーザ光を発するものが適用されている。レーザユニット１３からは、被検体に向けてパルスレーザ光（以下、単にレーザ光という）が出射される。このレーザ光は、図１中ではその経路を概略的に示してあるが、例えば複数の光ファイバなどの導光手段を用いてプローブ１１まで導光され、プローブ１１の部分から被検体に向けて照射されるのが望ましい。
　プローブ１１は、被検体に対する超音波の出力（送信）、および被検体から反射して戻って来る反射超音波の検出（受信）を行う。そのためにプローブ１１は、例えば一次元に配列された複数の超音波振動子を有する。またプローブ１１は、被検体内の観察部位がレーザユニット１３からのレーザ光を吸収することで生じた光音響波を、複数の超音波振動子によって検出する。プローブ１１は、上記光音響波を検出して光音響波検出信号を出力し、また上記反射超音波（反射音響波）を検出して超音波検出信号を出力する。
　なお、このプローブ１１に上述した導光手段が結合される場合は、その導光手段の端部つまり複数の光ファイバの先端部等が、上記複数の超音波振動子の並び方向に沿って配置され、そこから被検体に向けてレーザ光が出射する。以下では、このように導光手段がプローブ１１に結合される場合を例に取って説明する。
　被検体の光音響画像あるいは超音波画像（反射音響波画像）を生成する際、プローブ１１は複数の超音波振動子が並ぶ一次元方向に対してほぼ直角な方向に移動され、それにより被検体がレーザ光および超音波によって二次元走査される。この走査は、検査者が手操作でプローブ１１を動かして行ってもよく、あるいは、走査機構を用いてより精密な二次元走査を実現するようにしてもよい。
　また、上述のような超音波に代えて、可聴域の周波数を持つ音響波を用い、その反射音響波による画像を生成するようにしてもよい。
　超音波ユニット１２は、受信回路２１、ＡＤ変換手段２２、受信メモリ２３、データ分離手段２４、光音響画像生成手段２５、および超音波画像生成手段２６を有している。光音響画像生成手段２５の出力は、後述する画像合成手段５２を経由して、例えばＣＲＴや液晶表示装置等からなる画像表示手段１４に入力される。さらに超音波ユニット１２は、送信制御回路３０、超音波ユニット１２内の各部等の動作を制御する制御手段３１、画像変化検出手段５０、および判定手段５１を有している。
　上記受信回路２１は、プローブ１１が出力した光音響波検出信号および超音波検出信号を受信する。ＡＤ変換手段２２はサンプリング手段であり、受信回路２１が受信した光音響波検出信号および超音波検出信号をサンプリングして、それぞれデジタル信号である光音響データおよび超音波データに変換する。このサンプリングは、ＡＤクロック信号に同期して、予め定められたサンプリング周期でなされる。なお受信回路２１は、ＡＤ変換手段２２を含むような形態として構成されてもよい。
　レーザユニット１３は、Ｔｉ：Ｓａｐｐｈｉｒｅレーザや、ＹＡＧレーザの第２高調波励起によるＯＰＯ（光パラメトリック発振）レーザや、アレキサンドライトレーザ等からなるＱスイッチパルスレーザなどから構成されている。このレーザユニット１３には、前記制御手段３１から、光出射を指示するレーザ発振トリガ信号が入力される。レーザユニット１３はこのレーザ発振トリガ信号を受けると、波長７５６ｎｍのパルスレーザ光を出射させる。なおレーザユニット１３は、その他の例えば半導体レーザ等から構成されてもよい。
　また制御手段３１は、送信制御回路３０に、超音波送信を指示する超音波トリガ信号を入力する。送信制御回路３０はこの超音波トリガ信号を受けると、プローブ１１から超音波を送信させる。制御手段３１は、先に前記レーザ発振トリガ信号を出力し、その後、超音波トリガ信号を出力する。レーザ発振トリガ信号が出力されることで被検体に向けたレーザ光の出射、および光音響波の検出が行われ、その後、超音波トリガ信号が出力されることで被検体に対する超音波の送信、および反射超音波の検出が行われる。
　制御手段３１はさらに、ＡＤ変換手段２２に対して、サンプリング開始を指示するサンプリングトリガ信号を出力する。このサンプリングトリガ信号は、前記レーザ発振トリガ信号が出力された後で、かつ超音波トリガ信号が出力される前、より好ましくは被検体に向けて実際にレーザ光が出射するタイミングで出力される。そのためにサンプリングトリガ信号は、例えば制御手段３１がレーザ発振トリガ信号を出力するタイミングに同期して出力される。ＡＤ変換手段２２は上記サンプリングトリガ信号を受けると、プローブ１１が出力して受信回路２１が受信した光音響波検出信号のサンプリングを開始する。
　制御手段３１は、レーザ発振トリガ信号を出力した後、光音響波の検出を終了するタイミングで超音波トリガ信号を出力する。このとき、ＡＤ変換手段２２は光音響波検出信号のサンプリングを中断せず、サンプリングを継続して実施する。言い換えれば、制御手段３１は、ＡＤ変換手段２２が光音響波検出信号のサンプリングを継続している状態で、超音波トリガ信号を出力する。超音波トリガ信号に応答してプローブ１１が超音波送信を行うことで、プローブ１１の検出対象は、光音響波から反射超音波に変わる。ＡＤ変換手段２２は、検出された超音波検出信号のサンプリングを継続することで、光音響波検出信号と超音波検出信号とを、連続的にサンプリングする。なお、ＡＤ変換手段２２が光音響波検出信号のサンプリングを中止してから、超音波トリガ信号が出力されるようにしてもよい。
　ＡＤ変換手段２２は、サンプリングして得られた光音響データおよび超音波データを、共通の受信メモリ２３に格納する。受信メモリ２３に格納されたサンプリングデータは、ある時点までは光音響データであり、ある時点からは超音波データとなる。データ分離手段２４は、受信メモリ２３に格納された光音響データと超音波データとを分離する。
　以下、光音響画像の生成および表示について説明する。図１のデータ分離手段２４には、受信メモリ２３から読み出された超音波データおよび光音響データが入力される。データ分離手段２４は、光音響画像の生成時には光音響データのみを後段の光音響画像生成手段２５に入力する。光音響画像生成手段２５はこの光音響データに基づいて、レーザ光により走査された走査面（走査断面）に関する光音響画像を生成し、その光音響画像を示すデータを、後述する画像合成手段５２を通して画像表示手段１４に入力する。それにより画像表示手段１４には、上記走査面に関する光音響画像が表示される。ここで光音響画像の生成は、例えば位相整合加算等の画像再構築や、検波、対数変換等を含む処理によってなされる。
　またデータ分離手段２４は、超音波画像の生成時には超音波データのみを後段の超音波画像生成手段２６に入力する。超音波画像生成手段２６はこの超音波データに基づいて、超音波により走査された走査面に関する超音波画像を生成する。この超音波画像の生成も、例えば位相整合加算等の画像再構築や、検波、対数変換等を含む処理によってなされる。
　本実施形態において光音響画像は、被検体の例えば血管等の組織を表示するために生成されるが、さらに、被検体中に挿入された穿刺針１５を表示して該穿刺針１５の位置、特に先端位置を術者が確認可能とするためにも利用される。そして、穿刺針１５の先端が走査面から外れていると判定された場合は、画像合成手段５２において、その旨の判定結果を示す表示が光音響画像に合成され、その合成画像が画像表示手段１４に表示される。一方、穿刺針１５の先端が走査面上に存在すると判定された場合、上記の画像合成はなされず、光音響画像を示すデータは画像合成手段５２を素通りさせて画像表示手段１４に入力される。なお、上記の判定および判定結果の表示については後に詳しく説明する。
　なお、前述したようにプローブ１１を移動して被検体をレーザ光によって二次元走査し、その走査に伴って得られた複数の断面に関する画像データに基づいて、被検体の所望部位例えば血管等を三次元表示する光音響画像を生成、表示することも可能である。
　次に、穿刺針１５の先端が走査面上に存在するか否かを判定する処理について、図２～図７を参照して説明する。図２は、この判定を行うために例えば図１の制御手段３１によって制御される処理の流れを示すものである。また図３および図４は、走査面（走査断面）Ｐｓと穿刺針１５との関係を概略的に示すものである。走査面Ｐｓは、画像生成して観察に供される面であり、以下、これを観察走査面Ｐｓと称することとする。
　プローブ１１の一次元配置された複数の超音波振動子から発せられる超音波は、音響レンズ等によって絞られた上で、ある幅を持って被検体に照射され、また反射超音波の検出もある幅を持つ超音波振動子によってなされる。そこで１つの観察走査面Ｐｓは、ある幅Ｄｓ（スライス幅）の断面についての情報を示すものとなる。したがって、この幅Ｄｓ内に穿刺針１５が存在する場合は、光音響画像や超音波画像において、観察走査面Ｐｓに穿刺針１５が有るように描画がなされる。
　図３に示す例では、穿刺針１５の画像化される範囲は、先端１５ａも含めて全てが観察走査面Ｐｓ内に収まっている。穿刺針１５を用いる例えば組織採取や薬物注入等の穿刺術が施される際には、図３中で左下方に、つまり先端１５ａを前方に進める方向に穿刺針１５が押し込まれる。そうした場合、図４に示す例のように、穿刺針１５の先端１５ａを含む先端部が、観察走査面Ｐｓから外れることも有り得る。
　図５～図７は、穿刺針１５と観察走査面Ｐｓとの関係が図３や図４のような状態にあるとき、光音響画像および超音波画像において、穿刺針１５がどのように示されるかを説明するものである。図３に示す状態の場合は、図５に示す通り、超音波画像においてもまた光音響画像においても、穿刺針１５の先端１５ａを含む部分が観察走査面Ｐｓに存在するように描画される。なお図５には、後述するようにして穿刺針１５が観察走査面Ｐｓから外れることになる位置をＱで示してある。
　また図４に示す状態の場合、超音波画像においては図６に示すように、観察走査面Ｐｓに収まっている範囲の部分だけ穿刺針１５が描画される。それに対して光音響画像においては図７に示すように、観察走査面Ｐｓから外れた位置に有る先端部（先端１５ａおよびその近傍部分）も含めて穿刺針１５が描画されることがある。つまり光音響画像の生成においては、被検体に向けて出射されたレーザ光が拡散等によって拡がるため、超音波画像生成時の超音波よりも照射範囲が広くなる。そこで、観察走査面Ｐｓから外れた位置に有る穿刺針１５の先端部にもレーザ光が照射され、それによりこの先端部から生じた光音響波がプローブ１１に検出されて、あたかも穿刺針１５の先端部が観察走査面Ｐｓ上に存在するような光音響画像が生成されてしまうのである。なお、通常金属からなる穿刺針１５の先端部からは、レーザ光を受けたとき、被検体の組織等と比べてより強い光音響波が発生するので、この先端部が特に画像化されやすくなっている。
　または、穿刺針１５の先端部からの光音響波を強くする他の例として、光ファイバ等を利用して、穿刺針内部に光を導入し、先端部や先端部の組織、あるいは後述する先端部の光吸収部材に直接光を照射して光音響波を発生させることもできる。もう１つの例として、穿刺針１５の先端部に音波を発生させる部材を取り付けることで、光を使わなくても、先端部から音波を発生させることもできる。
　穿刺術の術者が、そのような光音響画像を観察して穿刺針１５の先端を把握していると、穿刺針１５の先に血管等の臓器や組織等は認められないから、穿刺針１５をさらに押し込んでも問題は無い、と判断することもあり得る。なお穿刺針１５の先端１５ａに近い部分には、レーザ光の吸収効率を高めて、音響波の発生を促進させる光吸収部材が、埋め込みやコーティング等によって配されていることが望ましい。その種の光吸収部材としては、例えば黒色のフッ素樹脂等が挙げられる。
　本実施形態では、図２に流れを示す処理を行うことにより、そのような事態を招くことを防止可能としている。以下、この図２に示す処理について説明する。この処理がステップＰ１で開始すると、次にステップＰ２、Ｐ３、Ｐ４およびＰ５においてそれぞれ、共通の１つの観察走査面Ｐｓに関して、光音響画像の生成、超音波画像の生成、光音響画像の生成および超音波画像の生成がなされる。こうして得られた複数の光音響画像および複数の超音波画像を示すデータは、例えば図１の制御手段３１が備える記憶手段に一時的に記憶される。
　なお光音響画像および超音波画像の生成は、各々が複数回なされればよく、各画像の生成回数や順序は上述したものに限られない。例えば、光音響画像の生成を３回続けて行ってから、次いで超音波画像の生成を１回行う、という処理を複数回繰り返しても構わない。
　次にステップＰ６において画像変化検出手段５０により、上記記憶手段から読み出されたデータに基づいて、観察走査面Ｐｓにおける光音響画像の変化および超音波画像の変化が検出される。この画像変化の検出は、生成順が直近の２つの光音響画像同士間、同じく生成順が直近の２つの超音波画像同士間で変化を算出することによってなされる。前述したように光音響画像の生成を３回続けて行ってから超音波画像の生成を１回行う、というように両画像の生成のフレームレートが互いに異なる場合も、生成順が直近の２つの光音響画像同士間、同じく生成順が直近の２つの超音波画像同士間で変化を算出するのが望ましい。
　具体的に画像変化の算出は、ブロックマッチングやテンプレートマッチングなどを利用してフレーム間の画像の相関性を見るなど、一般的に知られている手法を利用して行うことができる。また、穿刺針１５の挿入による画像の変化と、被検体の脈動による画像の変化とを区別できるように、予め、穿刺針１５の挿入前の脈動による画像の変化量を算出しておき、穿刺針１５の挿入後の画像変化量から脈動による画像の変化量を差し引いてもよい。あるいは、脈動による画像の変化が、被検体のある一定方向への動きから生じることが分かっていれば、その方向の動きを考慮して画像の変化量を算出することで、脈動が画像の変化に影響することを避けるようにしてもよい。
　次にステップＰ７において判定手段５１により、上述のようにして求められた光音響画像および超音波画像の変化に基づいて、穿刺針１５の先端１５ａが観察走査面Ｐｓ上に有るか否かが判定される。この判定は、光音響画像と超音波画像の双方に変化が検出された場合には、観察走査面Ｐｓ上に穿刺針１５の先端１５ａが有ると判定し、それ以外では観察走査面Ｐｓ上に穿刺針１５の先端１５ａが無いと判定するものである。
　つまり、穿刺針１５と観察走査面Ｐｓとの関係が図３に示す状態の場合は、前述したように超音波画像および光音響画像が共に図５のように描画されるので、穿刺針１５が先端１５ａの方に押されて動けば、超音波画像および光音響画像の双方に変化が生じる。それに対して、穿刺針１５と観察走査面Ｐｓとの関係が図４に示す状態の場合は、前述した通り光音響画像が図７のように描画され、先端１５ａも含む穿刺針１５の動きに伴って光音響画像に変化が生じるが、図６のように先端部が表示されない超音波画像においては、穿刺針１５が動いてもその描画される部分が変わるだけであって、画像に変化は生じない。
　なお、脈動による組織の動きの影響も考慮して、画像の変化量が予め決めた、脈動による一定値以内の変化であれば、それは画像の変化が無いとみなすようにしてもよい。また、前述したように、穿刺針１５の挿入後の画像変化量から脈動による画像の変化量を差し引くようにした場合は、その差し引き後の画像変化量は穿刺針１５の動きだけによるものであると判断することができる。ここで上記の一定値は、光音響画像と超音波画像に対して同じ値とされてもよいし、あるいは、光音響画像と超音波画像に対して互いに異なる値とされてもよい。
　次にステップＰ８において、上記判定の結果が表示される。この判定結果を示す情報は画像合成手段５２に入力され、この情報に基づく表示が光音響画像に合成されて、その合成画像が画像表示手段１４に示される。以上の一連の処理は、次のステップＰ９において終了する。本実施形態における上記表示は、例えば、穿刺針１５の先端１５ａが観察走査面Ｐｓ上に有るか否かを示すものとされるが、穿刺針１５の先端１５ａが観察走査面Ｐｓから外れたときだけ、その旨を示す表示をするようにしてもよい。以上説明の通り本実施形態においては、画像合成手段５２と画像表示手段１４とによって報知手段が構成されている。
　なお、穿刺針１５の先端１５ａが観察走査面Ｐｓから外れたことを示す表示を出すとき、同時に警告音を鳴らすようにしてもよいし、表示は出さずに警告音だけ鳴らすようにしてもよい。
　次に図８を参照して、本発明の第２の実施形態について説明する。図８は、本発明の第２の実施形態に係る光音響画像生成装置１００の基本構成を示すブロック図である。なおこの図８において、先に説明した図１中のものと同等の要素には同番号を付してあり、それらについての説明は、特に必要の無い限り省略する。この光音響画像生成装置１００は、図１に示した光音響画像生成装置１０と比べると、判定手段１５１の構成が判定手段５１と異なり、そして基準値設定手段５３が付加された点が基本的に異なるものである。
　上記基準値設定手段５３は、画像の変化量について、想定される基準値を設定するものであり、その基準値を示す情報が判定手段１５１に入力される。判定手段１５１は、画像変化検出手段５０が求めた、観察走査面Ｐｓにおける光音響画像の変化および超音波画像の変化をそれぞれ上記基準値と比較し、双方の画像の変化が共に基準値以上である場合は、観察走査面Ｐｓ上に穿刺針１５の先端１５ａが有ると判定し、それ以外では観察走査面Ｐｓ上に穿刺針１５の先端１５ａが無いと判定する。次いで、この判定結果が表示や警告音によって報知されるのは、第１の実施形態におけるのと同じである。
　なお、上記の基準値は、光音響画像と超音波画像に対して同じ値とされてもよいし、あるいは、光音響画像と超音波画像に対して互いに異なる値とされてもよい。また、基準値の値を変更可能としておくことが望ましい。
　以上、挿入物が穿刺針１５である場合の実施形態について説明したが、本発明は、被検体に挿入される挿入物が穿刺針以外の場合にも同様に適用可能であり、その場合にも上に説明した効果と同じ効果を奏するものである。穿刺針以外の挿入物は、例えば血管内に挿入されるカテーテルであってもよいし、血管内に挿入されるカテーテルのガイドワイヤであってもよい。さらには、ラジオ波焼灼に用いられる電極を内部に収容するラジオ波焼灼用針や、レーザ治療用の光ファイバ等であってもよい。
　また、生成された超音波画像は、観察走査面Ｐｓ上に穿刺針１５の先端１５ａが有るか否かを判定するために利用する他、被検体の観察走査面Ｐｓを示すために単独で、あるいは光音響画像と合成して画像表示手段１４に表示させることも可能である。

Claims (12)

  1. 　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成方法において、
    　一つの走査面毎に前記被写体の反射音響波画像を生成し、
    　画像生成する観察走査面に関して、複数の光音響画像および複数の反射音響波画像を生成し、
    　前記複数の光音響画像から、前記観察走査面における光音響画像の変化を検出し、
    　前記複数の反射音響波画像から、前記観察走査面における反射音響波画像の変化を検出し、
    　前記光音響画像の変化および前記反射音響波画像の変化に基づいて、前記観察走査面の上に挿入物の先端が存在するか否かを判定し、
    　前記判定の結果を報知することを特徴とする光音響画像生成方法。
  2. 　前記光音響画像の変化および前記反射音響波画像の変化が共に存在する場合に、前記観察走査面の上に挿入物の先端が存在すると判定する請求項１に記載の光音響画像生成方法。
  3. 　前記光音響画像の変化および前記反射音響波画像の変化が共に、予め定められた基準値以上である場合に、前記観察走査面の上に挿入物の先端が存在すると判定する請求項１に記載の光音響画像生成方法。
  4. 　前記基準値が変更可能である請求項３に記載の光音響画像生成方法。
  5. 　前記基準値を、前記光音響画像の変化および前記反射音響波画像の変化それぞれに対して定める請求項３または４に記載の光音響画像生成方法。
  6. 　前記光音響画像の生成のフレームレートと、前記反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの光音響画像同士から光音響画像の変化を検出し、生成順が直近の２つの反射音響波画像同士から反射音響波画像の変化を検出する請求項１から５のいずれか１項に記載の光音響画像生成方法。
  7. 　一つの走査面毎に、挿入物を含む被写体の光音響画像を生成する光音響画像生成装置において、
    　一つの走査面毎に前記被写体の反射音響波画像を生成する手段と、
    　画像生成する観察走査面に関する複数の光音響画像から、観察走査面における光音響画像の変化を検出する手段と、
    　前記観察走査面に関する複数の反射音響波画像から、観察走査面における反射音響波画像の変化を検出する手段と、
    　前記光音響画像の変化および前記反射音響波画像の変化に基づいて、前記観察走査面の上に挿入物の先端が存在するか否かを判定する判定手段と、
    　前記判定の結果を報知する報知手段とを備えたことを特徴とする光音響画像生成装置。
  8. 　前記判定手段が、前記光音響画像の変化および前記反射音響波画像の変化が共に存在する場合に、前記観察走査面の上に挿入物の先端が存在すると判定するものである請求項７に記載の光音響画像生成装置。
  9. 　前記判定手段が、前記光音響画像の変化および前記反射音響波画像の変化が共に、予め定められた基準値以上である場合に、前記観察走査面の上に挿入物の先端が存在すると判定するものである請求項７に記載の光音響画像生成装置。
  10. 　前記基準値を変更する手段を有する請求項９に記載の光音響画像生成装置。
  11. 　前記基準値が、前記光音響画像の変化および前記反射音響波画像の変化それぞれに対して定められている請求項９または１０に記載の光音響画像生成装置。
  12. 　前記光音響画像の変化を検出する手段が、光音響画像の生成のフレームレートと、反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの光音響画像同士から光音響画像の変化を検出するものであり、
    　前記反射音響波画像の変化を検出する手段が、光音響画像の生成のフレームレートと、反射音響波画像の生成のフレームレートが互いに異なる場合、生成順が直近の２つの反射音響波画像同士から光音響画像の変化を検出するものである請求項７から１１のいずれか１項に記載の光音響画像生成装置。
PCT/JP2015/004392 2014-09-19 2015-08-31 光音響画像生成方法および装置 WO2016042716A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP15841830.1A EP3195809B1 (en) 2014-09-19 2015-08-31 Photoacoustic image generation method and device
JP2016548544A JP6328778B2 (ja) 2014-09-19 2015-08-31 光音響画像生成装置の作動方法および光音響画像生成装置
CN201580048582.3A CN106687049B (zh) 2014-09-19 2015-08-31 光声图像生成方法及装置
US15/459,301 US10729331B2 (en) 2014-09-19 2017-03-15 Photoacoustic image generation method and apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014191561 2014-09-19
JP2014-191561 2014-09-19

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/459,301 Continuation US10729331B2 (en) 2014-09-19 2017-03-15 Photoacoustic image generation method and apparatus

Publications (1)

Publication Number Publication Date
WO2016042716A1 true WO2016042716A1 (ja) 2016-03-24

Family

ID=55532775

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/004392 WO2016042716A1 (ja) 2014-09-19 2015-08-31 光音響画像生成方法および装置

Country Status (5)

Country Link
US (1) US10729331B2 (ja)
EP (1) EP3195809B1 (ja)
JP (1) JP6328778B2 (ja)
CN (1) CN106687049B (ja)
WO (1) WO2016042716A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018097030A1 (ja) * 2016-11-24 2018-05-31 キヤノン株式会社 情報処理装置、情報処理方法、情報処理システム及びプログラム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7244540B2 (ja) * 2018-05-04 2023-03-22 ホロジック， インコーポレイテッド 生検針の可視化

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006055407A (ja) * 2004-08-20 2006-03-02 Toshiba Corp 超音波診断装置及びその制御方法
JP2013013713A (ja) * 2011-06-07 2013-01-24 Fujifilm Corp 光音響画像生成装置及び方法
WO2014109148A1 (ja) * 2013-01-09 2014-07-17 富士フイルム株式会社 光音響画像生成装置及び挿入物

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4406226B2 (ja) 2003-07-02 2010-01-27 株式会社東芝 生体情報映像装置
JP4575033B2 (ja) 2004-06-02 2010-11-04 株式会社東芝 超音波診断装置及び超音波診断装置の作動方法
JP5709399B2 (ja) 2010-04-02 2015-04-30 キヤノン株式会社 被検体情報取得装置およびその制御方法、ならびにプログラム
US8839672B2 (en) * 2010-10-19 2014-09-23 Board Of Regents, The University Of Texas System Combined ultrasound and photoacoustic imaging of metal objects
JP2013027481A (ja) * 2011-07-27 2013-02-07 Fujifilm Corp 光音響撮像システムおよび装置並びにそれらに使用されるプローブユニット
JP5635462B2 (ja) 2011-07-28 2014-12-03 富士フイルム株式会社 光音響用穿刺針及び光音響画像生成装置
JP5681675B2 (ja) * 2011-07-29 2015-03-11 富士フイルム株式会社 光音響画像生成装置及び音響波ユニット
JP2015505679A (ja) * 2011-10-09 2015-02-26 クリア・ガイド・メディカル・リミテッド・ライアビリティ・カンパニーＣｌｅａｒ Ｇｕｉｄｅ Ｍｅｄｉｃａｌ，ＬＬＣ 超音波画像を融合することによる介入現場画像ガイダンス
WO2013134782A1 (en) * 2012-03-09 2013-09-12 The Johns Hopkins University Photoacoustic tracking and registration in interventional ultrasound

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006055407A (ja) * 2004-08-20 2006-03-02 Toshiba Corp 超音波診断装置及びその制御方法
JP2013013713A (ja) * 2011-06-07 2013-01-24 Fujifilm Corp 光音響画像生成装置及び方法
WO2014109148A1 (ja) * 2013-01-09 2014-07-17 富士フイルム株式会社 光音響画像生成装置及び挿入物

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018097030A1 (ja) * 2016-11-24 2018-05-31 キヤノン株式会社 情報処理装置、情報処理方法、情報処理システム及びプログラム

Also Published As

Publication number Publication date
EP3195809A4 (en) 2017-10-04
JP6328778B2 (ja) 2018-05-23
CN106687049A (zh) 2017-05-17
CN106687049B (zh) 2019-09-17
US20170181640A1 (en) 2017-06-29
US10729331B2 (en) 2020-08-04
EP3195809B1 (en) 2018-12-05
EP3195809A1 (en) 2017-07-26
JPWO2016042716A1 (ja) 2017-08-03

Similar Documents

Publication Publication Date Title
JP6041832B2 (ja) 光音響画像生成装置及びその作動方法
JP5655021B2 (ja) 光音響画像化方法および装置
JP5681141B2 (ja) 断層画像生成装置、方法、及びプログラム
JP5719242B2 (ja) ドプラ画像表示方法および装置
JP2009195617A (ja) 生体観測装置及び生体断層画像生成方法
JP6745889B2 (ja) 光音響画像生成装置
JP5683383B2 (ja) 光音響撮像装置およびその作動方法
JP2016101393A (ja) 被検体情報取得装置およびその制御方法
JP2012231878A (ja) 光音響画像化方法および装置
JP5936559B2 (ja) 光音響画像生成装置および光音響画像生成方法
JP2012223367A (ja) 光音響画像生成装置及び方法
WO2013046569A1 (ja) 光音響画像生成装置及び方法
JP6328778B2 (ja) 光音響画像生成装置の作動方法および光音響画像生成装置
JP5653860B2 (ja) 管壁の硬度測定方法および装置
JP6628891B2 (ja) 光音響画像生成装置
JP7127034B2 (ja) 画像生成装置および作動方法
US10898078B2 (en) Photoacoustic image generation method and apparatus
JP5946230B2 (ja) 光音響画像化方法および装置
JP6836664B2 (ja) 超音波診断装置および超音波診断装置の制御方法
JP6685413B2 (ja) 光音響計測装置
WO2019044212A1 (ja) 光音響画像生成装置および画像取得方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15841830

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016548544

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

REEP Request for entry into the european phase

Ref document number: 2015841830

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015841830

Country of ref document: EP