WO2022113585A1 - 超音波診断装置および超音波診断装置の制御方法 - Google Patents

超音波診断装置および超音波診断装置の制御方法 Download PDF

Info

Publication number
WO2022113585A1
WO2022113585A1 PCT/JP2021/038863 JP2021038863W WO2022113585A1 WO 2022113585 A1 WO2022113585 A1 WO 2022113585A1 JP 2021038863 W JP2021038863 W JP 2021038863W WO 2022113585 A1 WO2022113585 A1 WO 2022113585A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
ultrasonic
region
ultrasonic image
residue
Prior art date
Application number
PCT/JP2021/038863
Other languages
English (en)
French (fr)
Inventor
徹郎 江畑
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2022565119A priority Critical patent/JPWO2022113585A1/ja
Publication of WO2022113585A1 publication Critical patent/WO2022113585A1/ja
Priority to US18/311,611 priority patent/US20230270410A1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/469—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data

Definitions

  • the present invention relates to an ultrasonic diagnostic apparatus for taking an ultrasonic image for inspecting a swallowing disorder and a control method of the ultrasonic diagnostic apparatus.
  • an ultrasonic diagnostic apparatus using an ultrasonic image has been put into practical use.
  • an ultrasonic diagnostic apparatus includes an ultrasonic probe having a built-in transducer array and an information terminal connected to the ultrasonic probe, and transmits an ultrasonic beam from the ultrasonic probe toward a subject.
  • the subject is scanned, the ultrasonic echo from the subject is received by the ultrasonic probe, and the received signal is electrically processed to generate an ultrasonic image.
  • Patent Document 1 As the prior art document that serves as a reference for the present invention, for example, Patent Document 1 and the like are available.
  • machine learning such as YOLO (You Only Look Once) that acquires a plurality of still images constituting an ultrasonic moving image and estimates the subject included in each part from each still image.
  • YOLO You Only Look Once
  • the model By using the model to identify the position of the tube wall and food during swallowing, and by comparing the still images arranged in chronological order, the speed of movement of the tube wall and food between the still images can be calculated.
  • Methods for assessing swallowing ability are described.
  • An object of the present invention is an ultrasonic diagnostic apparatus and an ultrasonic diagnostic apparatus capable of assisting in reducing a user's burden in identifying areas of swallowing residue in the left and right pharynx when performing an examination for dysphagia.
  • the purpose is to provide a control method for an ultrasonic diagnostic apparatus.
  • the present invention has been made with an ultrasonic probe.
  • An image generator that generates an ultrasonic image from a received signal obtained by transmitting and receiving an ultrasonic beam to a subject using an ultrasonic probe, and an image generator.
  • a monitor that displays ultrasonic images and
  • a residue detection unit that detects a region of swallowing residue in the first ultrasound image by analyzing the first ultrasound image of one of the left and right pharynx of the subject.
  • An alignment unit that aligns the first ultrasound image with respect to the second ultrasound image of the other pharynx of the left and right pharynx of the subject.
  • a region determination unit that determines the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image aligned with respect to the second ultrasound image.
  • an ultrasonic diagnostic apparatus including a display control unit for superimposing a graphic including a region of a second ultrasonic image on a second ultrasonic image and displaying it on a monitor.
  • the alignment unit aligns the first ultrasonic image whose left and right sides are reversed with respect to the second ultrasonic image.
  • an input device for which the user performs an input operation and It is preferable to include an image selection unit that selects a first ultrasonic image from a plurality of frames of ultrasonic images of one pharynx according to a user's instruction input via an input device.
  • the residue detection unit determines the region of the swallowing residue in the first ultrasonic image at the time of the past examination of the same subject to be the same subject. It is preferable to use it as an area of swallowing residue in the first ultrasound image at the time of the current examination.
  • the display control unit displays a graphic including a region of swallowing residue in the first ultrasonic image of the same subject at the time of the past examination with respect to the first ultrasonic image of the same subject at the time of the current examination.
  • the graphic including the area of the swallowing residue in the first ultrasound image of the same subject at the current examination is displayed on the monitor in a superimposed manner, and the second ultrasound image of the same subject at the current examination is displayed. It is preferable to superimpose the image on the image and display it on the monitor.
  • the region determination unit is the same as the region of the swallowing residue in the first ultrasound image of the same subject at the time of the past examination or the region of the second ultrasound image of the same subject at the time of the past examination. Based on the region of the swallowing residue in the first ultrasound image of the subject at the current examination, the region of the second ultrasound image of the same subject at the current examination was determined.
  • the display control unit superimposes the graphic including the area of the second ultrasonic image at the current examination of the same subject on the second ultrasonic image at the current examination of the same subject on the monitor. It is preferable to display it.
  • a warning unit that issues a warning when the alignment of the first ultrasonic image with respect to the second ultrasonic image fails.
  • the residue detection unit further detects the swallowing residue region in the second ultrasonic image by analyzing the image of the region having a predetermined shape including the region of the second ultrasonic image.
  • the region determination unit aligns with the second ultrasonic image.
  • the region determination unit aligns with the second ultrasonic image.
  • the region determination unit once determines the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image aligned with respect to the second ultrasound image, and then the second ultrasound image. It is preferable to determine the region of the second ultrasound image of the later frame corresponding to the region of the second ultrasound image of the previous frame between adjacent frames of the ultrasound image.
  • a memory for storing the first ultrasonic image and the area of the swallowing residue in the first ultrasonic image in association with each other.
  • the graphic is preferably a surrounding line surrounding the area of the second ultrasonic image.
  • the graphic is a surrounding line having a predetermined shape that includes the area of the second ultrasonic image.
  • the area inside the surrounding line is displayed as it is, has a predetermined hatching, is colored in a translucent color, or is displayed with a diagonal line. ..
  • the graphic shall be one in which the specified hatching is applied, one in which the graphic is colored in a translucent color, or one in which diagonal lines are displayed in the area of the second ultrasonic image. Is preferable.
  • the present invention generates a first ultrasonic image from a received signal obtained by transmitting and receiving an ultrasonic beam to one of the left and right pharyns of the subject using an ultrasonic probe.
  • a second ultrasonic image is generated from the received signal obtained by transmitting and receiving an ultrasonic beam to the other pharynx of the left and right pharynx of the subject using an ultrasonic probe. Align the first ultrasound image with respect to the second ultrasound image, The region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image aligned with respect to the second ultrasound image was determined.
  • a control method of an ultrasonic diagnostic apparatus which superimposes a graphic including a region of a second ultrasonic image on a second ultrasonic image and displays it on a monitor.
  • the region of the swallowing residue in the first ultrasound image is detected, and the graphic including the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image is the second ultrasound image. It is superimposed on and displayed on the monitor. Therefore, according to the present invention, it is possible to reduce the load on the user in identifying the area of the swallowing residue in the left and right pharynx.
  • FIG. 3 is a conceptual diagram of an embodiment showing a region of swallowing residue in a first ultrasound image taken of the right pharynx.
  • FIG. 3 is a conceptual diagram of an embodiment showing a region of a second ultrasound image in which the left pharynx is imaged, corresponding to a region of swallowing residue in the first ultrasound image.
  • FIG. 3 is a conceptual diagram of another embodiment showing a region of a second ultrasound image in which the left pharynx was imaged, corresponding to a region of swallowing residue in the first ultrasound image.
  • FIG. 1 is a conceptual diagram showing the configuration of the ultrasonic diagnostic apparatus according to the embodiment of the present invention.
  • the ultrasonic diagnostic apparatus shown in FIG. 1 includes an ultrasonic probe 1 and a handheld information terminal 3 connected to the ultrasonic probe 1 by wire or wirelessly.
  • the ultrasonic diagnostic apparatus of the present embodiment is realized by an ultrasonic probe 1, a handheld information terminal 3, and an application program for ultrasonic diagnosis operating on the information terminal 3.
  • the ultrasonic probe 1 scans a subject with an ultrasonic beam, captures an ultrasonic image, and outputs data corresponding to the ultrasonic image, and in the case of the present embodiment, image information data of the ultrasonic image.
  • the ultrasonic probe 1 includes an oscillator array 11, a transmission / reception circuit 14, a signal processing unit 16, an image processing unit 17, a probe-side communication circuit 18, a probe control unit 21, and a cine memory. 22 and a battery 24 are provided.
  • a transmission / reception circuit 14 is bidirectionally connected to the oscillator array 11.
  • a signal processing unit 16, an image processing unit 17, and a probe-side communication circuit 18 are sequentially connected in series to the transmission / reception circuit 14.
  • the signal processing unit 16 and the image processing unit 17 constitute an image information data generation unit 19.
  • a cine memory 22 is connected to the image processing unit 17, and a probe-side communication circuit 18 is connected to the cine memory 22.
  • the probe control unit 21 is connected to the transmission / reception circuit 14, the signal processing unit 16, the image processing unit 17, the cine memory 22, and the probe-side communication circuit 18. Further, the ultrasonic probe 1 has a built-in battery 24.
  • the probe side processor 25 is configured by the transmission / reception circuit 14, the image information data generation unit 19 (signal processing unit 16 and image processing unit 17), and the probe control unit 21.
  • the oscillator array 11 has a plurality of ultrasonic oscillators arranged one-dimensionally or two-dimensionally. Each of these oscillators transmits ultrasonic waves according to the drive signal supplied from the transmission / reception circuit 14, receives the reflected wave from the subject, and outputs an analog reception signal.
  • Each oscillator includes, for example, a piezoelectric ceramic represented by PZT (Lead Zirconate Titanate), a polymer piezoelectric element represented by PVDF (Poly Vinylidene Di Fluoride), and PMN-PT (Piezoelectric element).
  • Lead Magnesium Niobate-Lead Titanate is composed of elements in which electrodes are formed at both ends of a piezoelectric body made of a piezoelectric single crystal or the like represented by lead magnesium niobate-lead titanate.
  • the transmission / reception circuit 14 transmits ultrasonic waves from the vibrator array 11 and performs reception focus processing on the reception signal output from the vibrator array 11 that has received the ultrasonic echo. By doing so, a sound line signal is generated.
  • the transmission / reception circuit 14 includes a pulser 51 connected to the oscillator array 11, an amplification unit 52 sequentially connected in series from the oscillator array 11, an AD (Analog to Digital) conversion unit 53, and a beam. It has a former 54 and.
  • the pulsar 51 includes, for example, a plurality of pulse generators, and ultrasonic waves transmitted from the plurality of oscillators of the oscillator array 11 emit an ultrasonic beam based on a transmission delay pattern selected by the probe control unit 21.
  • Each drive signal is supplied to a plurality of oscillators by adjusting the delay amount so as to form.
  • a pulsed or continuous wave voltage is applied to the electrodes of the vibrator of the vibrator array 11
  • the piezoelectric body expands and contracts, and pulsed or continuous wave ultrasonic waves are generated from each vibrator.
  • An ultrasonic beam is formed from the combined waves of those ultrasonic waves.
  • the transmitted ultrasonic beam is reflected by, for example, a target such as a site of a subject, and propagates toward the vibrator array 11 of the ultrasonic probe 1.
  • Each oscillator constituting the oscillator array 11 expands and contracts by receiving the ultrasonic echo propagating toward the oscillator array 11 in this way to generate a received signal which is an electric signal, and these are received.
  • the signal is output to the amplification unit 52.
  • the amplification unit 52 amplifies the signal input from each of the vibrators constituting the vibrator array 11, and transmits the amplified signal to the AD conversion unit 53.
  • the AD conversion unit 53 converts the signal transmitted from the amplification unit 52 into digital reception data, and outputs these reception data to the beam former 54.
  • the beam former 54 adds a delay to each received data converted by the AD conversion unit 53 according to the sound velocity or the distribution of the sound velocity set based on the reception delay pattern selected by the probe control unit 21. By doing so, so-called reception focus processing is performed.
  • reception focus processing each received data converted by the AD conversion unit 53 is phase-adjusted and added, and a sound line signal in which the focus of the ultrasonic echo is narrowed down is generated.
  • the image information data generation unit 19 generates image information data based on the sound line signal generated by the transmission / reception circuit 14. As described above, the image information data generation unit 19 has a signal processing unit 16 and an image processing unit 17.
  • the signal processing unit 16 Under the control of the probe control unit 21, the signal processing unit 16 generates image signal data before imaging into an ultrasonic image based on the sound line signal generated by the transmission / reception circuit 14. More specifically, the signal processing unit 16 processes the sound line signal generated by the beamformer 54 of the transmission / reception circuit 14, for example, attenuation due to the propagation distance according to the depth of the position where the ultrasonic wave is reflected. After the correction of the above, the envelope detection process is performed to generate a signal representing tomographic image information about the tissue in the subject as the image signal data before imaging.
  • the image processing unit 17 Under the control of the probe control unit 21, the image processing unit 17 generates an ultrasonic image as image information data generated by the image information data generation unit 19 based on the image signal data generated by the signal processing unit 16. do. More specifically, the image processing unit 17 raster-converts the image signal data before imaging generated by the signal processing unit 16 into an image signal according to a normal television signal scanning method, and is converted in this way. An ultrasonic image is obtained by performing various image processing such as brightness correction, gradation correction, sharpness correction, image size correction, refresh rate correction, scanning frequency correction, and color correction according to the display format of the monitor 34 on the image signal. After generating (ultrasonic image signal), the ultrasonic image generated by the image information data generation unit 19 is output to the probe side communication circuit 18 as image information data.
  • the transmission / reception circuit 14, the signal processing unit 16, and the image processing unit 17 constitute the image generation unit of the present invention.
  • the image generation unit is an ultrasonic image from a received signal obtained by transmitting and receiving an ultrasonic beam to a subject using an ultrasonic probe 1 (more strictly, an ultrasonic probe array 11), in the case of the present embodiment. , Generates an ultrasonic image as image information data.
  • the cine memory 22 stores the image information data generated by the image information data generation unit 19 under the control of the probe control unit 21. More specifically, the cine memory 22 stores the ultrasonic image generated by the image processing unit 17 of the image information data generation unit 19 as the image information data in the live mode.
  • the cine memory 22 captures tens to hundreds of frames of ultrasonic images when a plurality of frames of ultrasonic images generated in a few seconds to several tens of seconds, for example, 30 frames of ultrasonic images are taken per second. It has a memory capacity for storing.
  • the cine memory 22 is a ring buffer.
  • the ultrasonic images of the past frames corresponding to the memory capacity are stored in the cine memory 22
  • the ultrasonic images of the latest frame are sequentially stored in the cine memory 22 instead of the ultrasonic images of the oldest frame.
  • the cine memory 22 always stores the ultrasonic image of the past frame of the number of frames corresponding to the memory capacity from the ultrasonic image of the latest frame.
  • the live mode is a mode in which ultrasonic images (moving images) taken at a constant frame rate are sequentially displayed (real-time display).
  • the freeze mode the ultrasonic image (moving image) taken in the live mode is stored in the cine memory 22, and the ultrasonic image (moving image) of the past frame stored in the cine memory 22 is selected.
  • This mode reads and displays an ultrasonic image (still image) of an arbitrary frame.
  • the probe-side communication circuit 18 transmits the image information data generated by the image processing unit 17 or the image information data stored in the cine memory 22 by wire or wirelessly.
  • the probe-side communication circuit 18 includes an antenna for transmitting and receiving radio waves, and modulates the carrier based on the ultrasonic image generated by the image processing unit 17 to transmit a transmission signal.
  • An ultrasonic image is transmitted wirelessly by generating and supplying a transmission signal to an antenna and transmitting radio waves from the antenna.
  • Carrier modulation methods include ASK (Amplitude Shift Keying), PSK (Phase Shift Keying), QPSK (Quadrature Phase Shift Keying), or 16QAM (16).
  • Quadrature Amplitude Modulation (16 quadrature phase amplitude modulation) and the like are used. Further, the probe-side communication circuit 18 can also connect the ultrasonic probe 1 and the information terminal 3 by wire with a cable such as a USB (Universal Serial Bus) cable.
  • a cable such as a USB (Universal Serial Bus) cable.
  • the probe-side communication circuit 18 wirelessly transmits the image information data of the frame generated by the image information data generation unit 19 in the live mode, and transmits the image information data stored in the cine memory 22 in the freeze mode. Send wirelessly.
  • the probe control unit 21 controls each part of the ultrasonic probe 1 based on a program or the like stored in advance. More specifically, the probe control unit 21 controls the transmission / reception circuit 14 so that the transmission of the ultrasonic beam and the reception of the ultrasonic echo are performed based on the preset inspection mode and scanning method. Further, the probe control unit 21 has the signal processing unit 16 and the signal processing unit 16 of the image information data generation unit 19 so that preset signal processing is applied to the sound line signal and preset image processing is applied to the image signal data. The image processing unit 17 is controlled. In the probe control unit 21, the image information data generated by the image information data generation unit 19 is stored in the cine memory 22 in the live mode, and the past frame stored in the cine memory 22 is stored in the freeze mode. Control so that the sound wave image is read out. Further, the probe control unit 21 controls the probe-side communication circuit 18 so that the image signal data is transmitted at a preset transmission radio wave intensity.
  • the inspection mode includes B (brightness) mode, CF (color Doppler) mode, PD (power Doppler) mode, M (motion) mode, PW (pulse Doppler) mode, CW (continuous wave Doppler) mode, etc. It indicates any of the inspection modes that can be used in the ultrasonic diagnostic apparatus, and the scanning method indicates any one of scanning methods such as an electronic sector scanning method, an electronic linear scanning method, and an electronic convex scanning method.
  • the battery 24 is built in the ultrasonic probe 1 and supplies electric power to each circuit of the ultrasonic probe 1.
  • the information terminal 3 is a handheld type terminal device such as a smartphone and a tablet PC (Personal Computer), and is based on data corresponding to an ultrasonic image taken by an ultrasonic probe 1. Display an ultrasound image.
  • the information terminal 3 includes a terminal-side communication circuit 32, a display control unit 33, a residue processing unit 35, a terminal control unit 36, a monitor 34, and an input device 37. There is.
  • the display control unit 33 and the monitor 34 are sequentially connected in series to the terminal-side communication circuit 32. Further, a residue processing unit 35 is connected to the terminal-side communication circuit 32, and a display control unit 33 is connected to the residue processing unit 35.
  • the terminal control unit 36 is connected to the terminal side communication circuit 32, the display control unit 33, and the residue processing unit 35, and the input device 37 is connected to the terminal control unit 36.
  • the probe-side communication circuit 18 of the ultrasonic probe 1 and the terminal-side communication circuit 32 of the information terminal 3 are wirelessly connected by wireless communication, whereby the ultrasonic probe 1 and the information terminal 3 are connected to each other. However, it is connected so that information can be exchanged in both directions.
  • the terminal-side communication circuit 32 receives the image information data transmitted from the probe-side communication circuit 18 of the ultrasonic probe 1 by wire or wirelessly under the control of the terminal control unit 36.
  • the terminal-side communication circuit 32 includes an antenna for transmitting and receiving radio waves, and receives and receives a transmission signal wirelessly transmitted from the probe-side communication circuit 18 via the antenna. By demolishing the transmitted signal, an ultrasonic image (ultrasonic image signal), which is image information data, is output.
  • the display control unit 33 causes the monitor 34 to display various information under the control of the terminal control unit 36.
  • the display control unit 33 performs a predetermined process on the ultrasonic image, which is the image information data received by the terminal side communication circuit 32, and displays it on the monitor 34.
  • the display control unit 33 superimposes a graphic including an area of the second ultrasonic image to be described later on the second ultrasonic image and displays it on the monitor 34, and displays a warning message and various operation screens on the monitor 34. Display it.
  • the monitor 34 displays various information. Under the control of the display control unit 33, the monitor 34 displays the above-mentioned area of the second ultrasonic image, a warning message, various operation screens, and the like, in addition to the ultrasonic image. Examples of the monitor 34 include an LCD (Liquid Crystal Display) and an organic EL (Electro-Luminescence) display.
  • LCD Liquid Crystal Display
  • organic EL Electro-Luminescence
  • the input device 37 is for the user to perform an input operation and input various instructions, and in the case of the present embodiment, the input device 37 includes a touch panel or the like on which the user can perform a touch operation to input various instructions. ..
  • the residue processing unit 35 Under the control of the terminal control unit 36, the residue processing unit 35 performs various treatments on food remaining in the pharynx of the subject, for example, the pyriform sinus, that is, the swallowing residue during swallowing. .. As shown in FIG. 4, the residue processing unit 35 includes an image selection unit 60, a residue detection unit 62, a first ultrasonic image memory 64, an alignment unit 66, an area determination unit 68, and a warning. The unit 70 and the like are provided.
  • the residue detection unit 62, the first ultrasonic image memory 64, the alignment unit 66, and the area determination unit 68 are sequentially connected in series to the image selection unit 60. Further, a first ultrasonic image memory 64 is connected to the image selection unit 60, and an area determination unit 68 is connected to the first ultrasonic image memory 64. Further, a warning unit 70 is connected to the alignment unit 66.
  • the image selection unit 60 receives one frame of ultrasonic images of a plurality of frames of one of the left and right throats of the subject in response to a user's instruction input via the input device 37.
  • the first ultrasound image which is the ultrasound image, is selected.
  • the image selection unit 60 first selects a one-frame ultrasonic image (still image) acquired at the timing when the user presses the freeze button from the ultrasonic images (moving images) captured in the live mode. It can be an ultrasonic image. Alternatively, in the freeze mode, the image selection unit 60 selects one frame of ultrasonic image (still image) designated by the user from the past ultrasonic images (moving images) stored in the cine memory 22. It may be a first ultrasonic image.
  • the residue detection unit 62 detects the presence or absence of swallowing residue and its region by analyzing the first ultrasonic image which is an ultrasonic image of one of the pharynx. For example, the residue detection unit 62 detects the presence or absence of swallowing residue in the pyriform sinus and its region by analyzing the first ultrasonic image including the pyriform sinus, but swallows in a site other than the pyriform sinus. The presence or absence of residue and its region may be detected.
  • the residue detection unit 62 is not particularly limited, but includes a determination model learned by using machine learning techniques such as deep learning, template matching, Adaboost (Adaptive Boostling), SVM (Support Vector Machine), or SIFT (Scale).
  • machine learning techniques such as deep learning, template matching, Adaboost (Adaptive Boostling), SVM (Support Vector Machine), or SIFT (Scale).
  • Adaptive Boostling Adaptive Boostling
  • SVM Small Vector Machine
  • SIFT Scale
  • the presence or absence of swallowing residue and its region in the first ultrasonic image can be detected by using an image analysis technique using a feature amount such as (Invariant Feature Transform) and at least one of them.
  • the determination model uses the learning ultrasonic image obtained by taking one of the pharynx, the presence / absence of a swallowing residue in the learning ultrasonic image and its region as teacher data, and the learning ultrasonic image.
  • This is a trained model in which the relationship between the presence or absence of swallowing residue and its region in this ultrasonic image for training is learned for a plurality of teacher data.
  • the determination model takes the first ultrasonic image as an input and outputs the result of estimating the presence / absence of the swallowing residue and the region thereof in the first ultrasonic image.
  • the first ultrasonic image memory 64 associates the first ultrasonic image selected by the image selection unit 60 with the region of the swallowing residue in the first ultrasonic image detected by the residue detection unit 62. It is a memory to save.
  • the alignment unit 66 stores the second ultrasonic image, which is an ultrasonic image of the other of the left and right throats of the subject, generated in real time, in the first ultrasonic image memory 64.
  • the alignment of the first ultrasonic image is performed.
  • the alignment unit 66 is not particularly limited, but can perform alignment of the first ultrasonic image with respect to the second ultrasonic image by using a known technique such as rigid / non-rigid registration.
  • the region determination unit 68 determines the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image aligned with respect to the second ultrasound image.
  • the warning unit 70 issues a warning to the user when the alignment of the first ultrasonic image with respect to the second ultrasonic image fails.
  • the warning unit 70 may display the warning message on the monitor 34 by the display control unit 33, read the message by voice and output it from the speaker, or both may be performed at the same time.
  • the terminal control unit 36 controls each unit of the information terminal 3 based on a program stored in advance and a user's instruction input from the input device 37. More specifically, the terminal control unit 36 controls the terminal-side communication circuit 32 so that the transmission signal is received from the probe-side communication circuit 18 of the ultrasonic probe 1. Further, the terminal control unit 36 controls the display control unit 33 so that the ultrasonic image is displayed on the monitor 34 based on the image information data. Further, the terminal control unit 36 controls the residue processing unit 35 so that various treatments related to the swallowing residue are performed.
  • the terminal side processor 39 is configured by the display control unit 33, the residue processing unit 35, and the terminal control unit 36.
  • the ultrasonic wave is transmitted by the transmission / reception circuit 14 in a state where the ultrasonic probe 1 is in contact with the body surface of the subject. Transmission is started and a sound wave signal is generated (step S2).
  • an ultrasonic beam is transmitted into the subject from a plurality of vibrators of the vibrator array 11 according to a drive signal from the pulsar 51 of the transmission / reception circuit 14.
  • the ultrasonic echo from the subject based on the ultrasonic beam transmitted from the pulsar 51 is received by each oscillator of the oscillator array 11, and is an analog signal from each oscillator of the oscillator array 11 that has received the ultrasonic echo.
  • a certain received signal is output.
  • the received signal which is an analog signal output from each oscillator of the oscillator array 11, is amplified by the amplification unit 52 of the transmission / reception circuit 14, and AD-converted by the AD conversion unit 53 to acquire the received data.
  • a sound line signal is generated by performing reception focus processing on the received data by the beam former 54.
  • the image information data generation unit 19 generates an ultrasonic image as image information data based on the sound line signal generated by the beam former 54 of the transmission / reception circuit 14 (step S3).
  • the sound line signal generated by the beam former 54 is subjected to various signal processing by the signal processing unit 16 of the image information data generation unit 19, and as image signal data before imaging, a fault relating to the tissue in the subject is obtained.
  • a signal representing image information is generated.
  • the image signal data generated by the signal processing unit 16 is raster-converted by the image processing unit 17, and further subjected to various image processing to generate an ultrasonic image as image information data.
  • the ultrasonic image generated by the image processing unit 17 is stored in the cine memory 22 (step S4).
  • the ultrasonic image generated by the image processing unit 17 is wirelessly transmitted from the probe side communication circuit 18 to the information terminal 3 (step S5).
  • the ultrasonic image wirelessly transmitted from the probe-side communication circuit 18 of the ultrasonic probe 1 is received by the terminal-side communication circuit 32 under the control of the terminal control unit 36 of the information terminal 3 (step S6). ..
  • the ultrasonic image received by the terminal-side communication circuit 32 is subjected to predetermined processing by the display control unit 33 and displayed on the monitor 34 (step S7).
  • step S8 When the freeze mode is specified based on the user's instruction input from the input device 37 (step S8), the transmission of ultrasonic waves from the oscillator array 11 is stopped (step S9).
  • the ultrasonic image of the past frame stored in the cine memory 22 is read out as the image information data and wirelessly transmitted from the probe side communication circuit 18 (step S10).
  • the terminal-side communication circuit 32 receives the ultrasonic image wirelessly transmitted from the probe-side communication circuit 18 (step S11).
  • the ultrasonic image of the past frame received by the terminal-side communication circuit 32 is displayed on the monitor 34 by the display control unit 33 (step S12).
  • the user takes an ultrasonic image of one of the left and right pharynx of the subject, for example, the right pharynx (step S21).
  • the transmission / reception circuit 14 starts transmission of ultrasonic waves, and a sound line signal is generated.
  • the image information data generation unit 19 generates an ultrasonic image (moving image) in which the right pharynx is photographed based on the sound line signal generated by the transmission / reception circuit 14.
  • the ultrasonic image of the right pharynx generated by the image information data generation unit 19 is stored in the cine memory 22. Further, the ultrasonic image of the right pharynx is transmitted from the ultrasonic probe 1 to the information terminal 3 and received by the terminal-side communication circuit 32 of the information terminal 3. Subsequently, the ultrasonic image received by the terminal-side communication circuit 32 is subjected to predetermined processing by the display control unit 33 and displayed on the monitor 34.
  • the user is a one-frame ultrasonic image for detecting the presence or absence of swallowing residue and the region in the right ultrasonic image from the multi-frame ultrasonic images of the right pharynx.
  • An ultrasound image is selected (step S22).
  • the image selection unit 60 selects a first frame of ultrasonic images of a plurality of frames of the right pharynx.
  • the ultrasound image is selected.
  • the residue detection unit 62 analyzes the first ultrasonic image and detects the presence or absence of swallowing residue and the region thereof in the first ultrasonic image (step S23). For example, the presence or absence of swallowing residue in the pyriform sinus is detected, and if there is swallowing residue, the area is detected.
  • the first ultrasonic image and the region of the swallowing residue in the first ultrasonic image are associated with each other and stored in the first ultrasonic image memory 64 (step S24).
  • the display control unit 33 when the region of the swallowing residue in the first ultrasonic image is detected, the display control unit 33 superimposes the graphic including the region of the swallowing residue in the first ultrasonic image on the first ultrasonic image and monitors it. It is displayed in 34 (step S25). For example, as shown in FIG. 7, a surrounding line surrounding a region of swallowing residue is superimposed on the first ultrasound image and displayed on the monitor 34. This allows the user to visually confirm the presence or absence of swallowing residue and the region thereof in the first ultrasonic image.
  • the display control unit 33 displays, for example, the message "Please start scanning the other throat" on the monitor 34. This prompts the user to start taking an ultrasound image of the other of the left and right pharynx, for example the left pharynx.
  • the user takes an ultrasound image of the left pharynx (step S26).
  • the operation in this case is the same as when an ultrasonic image of the right pharynx is taken. That is, in a state where the ultrasonic probe 1 is in contact with the left pharynx of the subject, a second ultrasonic image (moving image) which is an ultrasonic image of the left pharynx is generated.
  • the second ultrasonic image is stored in the cine memory 22. Further, the second ultrasonic image is transmitted from the ultrasonic probe 1 to the information terminal 3, and is displayed on the monitor 34 by the display control unit 33.
  • the alignment unit 66 aligns the first ultrasonic image stored in the first ultrasonic image memory 64 with respect to the second ultrasonic image. (Step S27).
  • the alignment unit 66 inverts the left and right of the first ultrasonic image in which the right pharynx is photographed, and the left and right are in contrast to the second ultrasonic image in which the left pharynx is photographed. The inverted first ultrasonic image is aligned.
  • the warning unit 70 issues a warning to notify the user of the alignment failure. (Step S29). In this case, since there is a possibility that an inappropriate cross section is drawn in the first ultrasonic image or the second ultrasonic image, no further processing is performed, but the second ultrasonic wave under inspection is not performed. The image is still displayed on the monitor 34.
  • the region determination unit 68 corresponds to the region of the swallowing residue in the first ultrasound image aligned with respect to the second ultrasound image.
  • the region of the ultrasound image is determined (step S30).
  • the display control unit 33 superimposes the graphic including the region of the second ultrasonic image on the second ultrasonic image and displays it on the monitor 34 (step S31). For example, as shown in FIG. 8A, a surrounding line surrounding the region of the second ultrasonic image is superimposed on the second ultrasonic image and displayed on the monitor 34. Since the alignment of the first ultrasonic image whose left and right sides are inverted is performed with respect to the second ultrasonic image, the region of the second ultrasonic image shown in FIG. 8A is the first ultrasonic wave shown in FIG. 7. The left and right sides of the swallowing residue area in the image are inverted. This allows the user to visually identify areas that may be swallowing residues in the second ultrasound image.
  • the region of the swallowing residue in the first ultrasonic image is detected, and the graphic including the region of the second ultrasonic image corresponding to the region of the swallowing residue in the first ultrasonic image. Is superimposed on the second ultrasonic image and displayed on the monitor 34. Therefore, in the ultrasonic diagnostic apparatus, it is possible to reduce the load on the user when identifying the region of the swallowing residue in the left and right pharynx.
  • the ultrasonic diagnostic apparatus in the ultrasonic diagnostic apparatus, a graphic including a region of the second ultrasonic image corresponding to the region of the swallowing residue in the first ultrasonic image is superimposed and displayed on the second ultrasonic image in real time. It is not necessary to sequentially detect the region of swallowing residue in the generated second ultrasound image. Therefore, the ultrasonic diagnostic apparatus can easily display a region that may be a swallowing residue in the second ultrasonic image even when the processing capacity of the information terminal 3 is relatively low.
  • an ultrasound image of the left pharynx was taken, but conversely, after taking an ultrasound image of the left pharynx, the right An ultrasound image of the pharynx may be taken.
  • the display control unit 33 may display the surrounding line having a predetermined shape including the area of the second ultrasonic image on the monitor 34 instead of the surrounding line surrounding the area of the second ultrasonic image.
  • the brightness, color, line type, shape, etc. of the surrounding line are not particularly limited.
  • the line type may be a solid line, a dotted line, or the like.
  • the surrounding line may be a straight line or a curved line.
  • the shape of the surrounding line may be an enlarged shape with the same shape as the region of the second ultrasonic image, may be circular, or may be rectangular as shown in FIG. 8B.
  • the shape of the surrounding line is the plurality of the second ultrasonic images.
  • a rectangle including the area of, for example, an circumscribing rectangle may be used. Such a change in the shape of the surrounding line is applicable in all embodiments in which the graphic including the region of the second ultrasonic image is superimposed on the second ultrasonic image and displayed on the monitor 34.
  • the display control unit 33 may or may not display the surrounding line on the monitor 34.
  • the surrounding line as a graphic, the second ultrasonic image may be displayed as it is in the area inside the surrounding line, or a predetermined hatch may be applied, or the underlying second ultrasonic image may be displayed. It may be colored in a translucent color so that it can be visually recognized, or it may be displayed with diagonal lines.
  • a predetermined hatch may be applied as a graphic in the area of the second ultrasonic image, the color may be colored in a translucent color, or a diagonal line may be displayed. You may let me.
  • the display control unit 33 displays the surrounding line surrounding the swallowing residue area in the first ultrasonic image on the monitor 34, it is the same as when displaying the surrounding line surrounding the area of the second ultrasonic image on the monitor 34.
  • a surrounding line correction unit is provided, and after the surrounding line surrounding the area of the swallowing residue in the first ultrasonic image is displayed on the monitor 34, the swallowing residue is displayed by the surrounding line correction unit according to the user's instruction. You may modify the box surrounding the area of the object. Further, the surrounding line surrounding the area of the swallowing residue in the first ultrasound image may or may not be displayed.
  • the residue detection unit 62 sets the region of the swallowing residue in the first ultrasonic image of the same subject at the time of the past examination of the same subject to the same subject. It may be used as an area of swallowing residue in the first ultrasound image at the time of the current examination.
  • the alignment unit 66 aligns the first ultrasonic image stored in the first ultrasonic image memory 64 with respect to the second ultrasonic image at the time of the past examination of the same subject. conduct. As a result, even if the swallowing residue is not detected in the first ultrasound image at the time of the current examination, the alignment is performed using the region of the swallowing residue in the first ultrasound image at the time of the past examination. be able to.
  • the place where the first ultrasonic image of the same subject at the time of the past examination is stored may be in the above-mentioned first ultrasonic image memory 64, that is, in the ultrasonic diagnostic apparatus, or. It may be in an external server.
  • the ultrasonic diagnostic apparatus uses the terminal-side communication circuit 32 to obtain the first ultrasonic image of the same subject at the time of the past examination.
  • 1 Ultrasound images can be acquired from an external server via a network.
  • the display control unit 33 converts the graphic including the region of the swallowing residue in the first ultrasonic image of the same subject at the time of the past examination into the first ultrasonic image of the same subject at the time of the current examination. On the other hand, they may be superimposed and displayed on the monitor 34. In this case as well, the display control unit 33 displays the graphic including the region of the swallowing residue in the first ultrasound image of the same subject at the current examination, and the second ultrasound of the same subject at the current examination. It is superimposed on the image and displayed on the monitor 34. This allows the user to visually identify areas that may be swallowing residues, even when taking an ultrasound image of the right pharynx.
  • the region determination unit 68 determines the region of the swallowing residue in the first ultrasound image of the same subject in the past examination and the swallowing residue in the first ultrasound image of the same subject in the current examination.
  • the region of the second ultrasound image at the time of the current examination of the same subject may be determined based on the region of.
  • the region determination unit 68 may use the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image of the same subject in the past examination and the region of the same subject at the current examination.
  • the region of the second ultrasound image at the time of the current examination of the same subject may be determined based on the region of the swallowing residue in the first ultrasound image of.
  • the display control unit 33 superimposes the graphic including the region of the second ultrasonic image at the current examination of the same subject on the second ultrasonic image at the current examination of the same subject. And display it on the monitor.
  • the user can visually confirm the site where the swallowing residue is likely to remain from the area of the swallowing residue in the first ultrasonic image at the time of the past and present examination, and whether or not the dysphagia is improved. Can be judged.
  • the surrounding line surrounding the area of the second ultrasound image at the time of the current examination of the same subject the area of the swallowing residue in the first ultrasound image at the time of the past examination of the same subject or Two boxes corresponding to the area of the second ultrasound image of the same subject at the time of the past examination and the area of the swallowing residue in the first ultrasound image of the same subject at the time of the current examination.
  • at least one of different brightness, different colors and different line types may be displayed separately, or one boxing line covering the area within these two boxing lines may be displayed.
  • the residue detection unit 62 analyzes the image of the region having a predetermined shape including the region of the second ultrasonic image, thereby performing the second ultrasonic wave. Areas of swallowing residue in the image may be detected. In this case, instead of the surrounding line surrounding the area of the second ultrasonic image, the surrounding line surrounding the area of the swallowing residue in the second ultrasonic image is superimposed on the second ultrasonic image and displayed on the monitor 34. To. This makes it possible to suppress erroneous detection of a region of swallowing residue in the second ultrasonic image.
  • the above-mentioned alignment, determination of the region of the second ultrasound image, and superimposition display of the graphic including the region of the second ultrasound image are the second ultrasound image (moving image), that is, the second super of continuous multiple frames. It can be repeated for each of the ultrasound images.
  • the alignment unit 66 aligns the first ultrasonic image with respect to the second ultrasonic image
  • the region determination unit 68 aligns the first ultrasonic image with respect to the second ultrasonic image.
  • the region of the second ultrasonic image corresponding to the region of the swallowing residue in the ultrasonic image is determined, and the display control unit 33 superimposes the region on the second ultrasonic image and displays it on the monitor 34.
  • the graphic including the area of is repeatedly updated for each of the second ultrasonic images of a plurality of consecutive frames.
  • the alignment unit 66 aligns the first ultrasonic image with respect to the second ultrasonic image
  • the region determination unit 68 aligns the first ultrasonic image with respect to the second ultrasonic image.
  • the region of the second ultrasonic image corresponding to the region of the swallowing residue in the ultrasonic image is determined, and the display control unit 33 superimposes the region on the second ultrasonic image and displays it on the monitor 34.
  • the graphic including the area of is updated every second ultrasonic image of a predetermined number of frames in the second ultrasonic image of a plurality of consecutive frames.
  • the region determination unit 68 determines the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image at the time of the current or past examination once aligned with the second ultrasound image. Then, between adjacent frames of the second ultrasound image, the region of the second ultrasound image of the later frame corresponding to the region of the second ultrasound image of the previous frame may be determined. In this way, by determining the region of the second ultrasound image of the rear frame corresponding to the region of the second ultrasound image of the previous frame, the position of the first ultrasound image with respect to the second ultrasound image. The region of the second ultrasound image can be determined more accurately than the case of determining the region of the second ultrasound image corresponding to the region of the swallowing residue in the first ultrasound image by performing the matching.
  • an external server is provided, and the external server is allowed to execute at least one function of the residue processing unit 35, for example, the residue detection unit 62, the alignment unit 66, and the area determination unit 68. May be good.
  • the present invention is not limited to the handheld type ultrasonic diagnostic apparatus, but is similarly applicable to a stationary ultrasonic diagnostic apparatus or a portable ultrasonic diagnostic apparatus in which an information terminal is realized by a laptop type terminal apparatus.
  • the cine memory 22 may be provided only by the ultrasonic probe 1, may be provided only by the information terminal 3, or may be provided by both the ultrasonic probe 1 and the information terminal 3.
  • the image information data generation unit 19 may be provided by the ultrasonic probe 1 or the information terminal 3.
  • a process of executing various processes such as a transmission / reception circuit 14, a signal processing unit 16, an image processing unit 17, a probe control unit 21, a display control unit 33, a residue processing unit 35, and a terminal control unit 36.
  • the hardware-like configuration of the unit may be dedicated hardware, or various processors or computers that execute programs.
  • the hardware configuration such as the cine memory 22 and the first ultrasonic image memory 64 may be dedicated hardware, or a memory such as a semiconductor memory, an HDD (Hard Disk Drive), and a hard disk drive. It may be a storage device such as an SSD (Solid State Drive).
  • the circuit configuration can be changed after manufacturing the CPU (Central Processing Unit), FPGA (Field Programmable Gate Array), etc., which are general-purpose processors that execute software (programs) and function as various processing units.
  • Programmable Logic Device (PLD), ASIC (Application Specific Integrated Circuit), etc. which is a processor, includes a dedicated electric circuit, which is a processor having a circuit configuration designed exclusively for performing specific processing. ..
  • One processing unit may be composed of one of these various processors, or a combination of two or more processors of the same type or different types, for example, a combination of a plurality of FPGAs, or a combination of an FPGA and a CPU. It may be configured by such as. Further, a plurality of processing units may be configured by one of various processors, or two or more of the plurality of processing units may be collectively configured by using one processor.
  • processors are configured by a combination of one or more CPUs and software, and this processor functions as a plurality of processing units.
  • SoC system on chip
  • a processor that realizes the functions of the entire system including a plurality of processing units with one IC (Integrated Circuit) chip is used.
  • circuitry that combines circuit elements such as semiconductor elements.
  • the method of the present invention can be carried out, for example, by a program for causing a computer to execute each step. It is also possible to provide a computer-readable recording medium on which this program is recorded.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

超音波診断装置および超音波診断装置の制御方法においては、被検体の左右の咽頭部のうちの一方の咽頭部の第１超音波画像を解析することにより第１超音波画像における嚥下残留物の領域を検出する。被検体の左右の咽頭部のうちの他方の咽頭部の第２超音波画像に対して、第１超音波画像の位置合わせを行い、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定する。そして、第２超音波画像の領域を含むグラフィックを第２超音波画像に対して重畳してモニタに表示させる。

Description

超音波診断装置および超音波診断装置の制御方法
　本発明は、嚥下障害の検査を行うための超音波画像を撮影する超音波診断装置および超音波診断装置の制御方法に関する。
　従来から、医療分野において、超音波画像を利用した超音波診断装置が実用化されている。一般に、超音波診断装置は、振動子アレイを内蔵する超音波プローブと、超音波プローブに接続される情報端末と、を備えており、超音波プローブから被検体に向けて超音波ビームを送信して被検体をスキャンし、被検体からの超音波エコーを超音波プローブで受信し、その受信信号を電気的に処理することにより超音波画像が生成される。
　嚥下障害のある被検体の場合、嚥下後に、食べ物が咽頭部の梨状窩等に残留することがある。この場合、嚥下残留物がそのまま気管に入ると、誤嚥性肺炎を起こすことがあるため、梨状窩における嚥下残留物の観察は、嚥下障害の検査において非常に重要である。嚥下障害の検査を行う場合、例えば、超音波プローブを被検体の咽頭部に接触させた状態において咽頭部をスキャンすることにより、梨状窩等を含む咽頭部を可視画像化して嚥下残留物の有無を確認することが行われている。
　ここで、本発明の参考となる先行技術文献として、例えば特許文献１等がある。特許文献１には、超音波動画を構成する複数の静止画を取得し、各静止画から、画像の部分毎に各部分に含まれる被写体を推定するＹＯＬＯ（You Only Look Once）等の機械学習モデルを使って、嚥下時の管壁および食物の位置を特定し、さらに、時系列で並ぶ静止画同士を比較することにより、静止画間での管壁および食物の移動速度を算出することにより、嚥下能力を評価する方法が記載されている。
特開２０２０－０８９６１３号公報
　ところで、超音波診断装置の操作には熟練が必要であり、特に梨状窩は描出が困難である。また、嚥下障害の検査を行う場合には、左右両方の咽頭部を検査する必要があるため、超音波診断装置のユーザ（検査者）の負荷が大きいという問題がある。
　本発明の目的は、嚥下障害の検査を行う場合に、左右の咽頭部における嚥下残留物の領域を特定する際のユーザの負荷を軽減するための支援を行うことができる超音波診断装置および超音波診断装置の制御方法を提供することにある。
　上記目的を達成するために、本発明は、超音波プローブと、
　超音波プローブを用いて被検体に超音波ビームの送受信を行うことにより得られた受信信号から超音波画像を生成する画像生成部と、
　超音波画像を表示するモニタと、
　被検体の左右の咽頭部のうちの一方の咽頭部の第１超音波画像を解析することにより第１超音波画像における嚥下残留物の領域を検出する残留物検出部と、
　被検体の左右の咽頭部のうちの他方の咽頭部の第２超音波画像に対して、第１超音波画像の位置合わせを行う位置合わせ部と、
　第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定する領域決定部と、
　第２超音波画像の領域を含むグラフィックを第２超音波画像に対して重畳してモニタに表示させる表示制御部と、を備える超音波診断装置を提供する。
　ここで、位置合わせ部は、第２超音波画像に対して、左右が反転された第１超音波画像の位置合わせを行うことが好ましい。
　また、ユーザが入力操作を行う入力装置と、
　入力装置を介して入力されたユーザの指示に応じて、一方の咽頭部の複数フレームの超音波画像の中から第１超音波画像を選択する画像選択部と、を備えることが好ましい。
　また、残留物検出部は、第１超音波画像において嚥下残留物が検出されない場合に、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域を、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域として使用することが好ましい。
　また、表示制御部は、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域を含むグラフィックを、同一の被検体の現在の検査時の第１超音波画像に対して重畳してモニタに表示させ、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域を含むグラフィックを、同一の被検体の現在の検査時の第２超音波画像に対して重畳してモニタに表示させることが好ましい。
　また、領域決定部は、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域または同一の被検体の過去の検査時の第２超音波画像の領域と、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域と、に基づいて、同一の被検体の現在の検査時の第２超音波画像の領域を決定し、
　表示制御部は、同一の被検体の現在の検査時の第２超音波画像の領域を含むグラフィックを、同一の被検体の現在の検査時の第２超音波画像に対して重畳してモニタに表示させることが好ましい。
　さらに、第２超音波画像に対する第１超音波画像の位置合わせが失敗した場合に、警告を発する警告部を備えることが好ましい。
　残留物検出部は、さらに、第２超音波画像の領域を包含する、定められた形状の領域の画像を解析することにより第２超音波画像における嚥下残留物の領域を検出することが好ましい。
　また、位置合わせ部が、第２超音波画像に対して、第１超音波画像の位置合わせを行い、領域決定部が、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定し、表示制御部が、第２超音波画像に対して重畳してモニタに表示させる第２超音波画像の領域を含むグラフィックを更新することを、連続する複数フレームの第２超音波画像のそれぞれについて繰り返すことが好ましい。
　また、位置合わせ部が、第２超音波画像に対して、第１超音波画像の位置合わせを行い、領域決定部が、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定し、表示制御部が、第２超音波画像に対して重畳してモニタに表示させる第２超音波画像の領域を含むグラフィックを更新することを、連続する複数フレームの第２超音波画像のうち、定められた数のフレームの第２超音波画像毎に繰り返すことが好ましい。
　また、領域決定部は、一旦、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定した後、第２超音波画像の隣接するフレーム間において、前のフレームの第２超音波画像の領域に対応する後のフレームの第２超音波画像の領域を決定することが好ましい。
　さらに、第１超音波画像と、第１超音波画像における嚥下残留物の領域と、を対応付けて保存するメモリを備えることが好ましい。
　また、グラフィックは、第２超音波画像の領域を囲む囲み線であることが好ましい。
　また、グラフィックは、第２超音波画像の領域を包含する、定められた形状の囲み線であることが好ましい。
　また、囲み線内の領域は、超音波画像がそのまま表示されている、定められたハッチングが施されている、半透明な色に着色されている、あるいは、斜線が表示されていることが好ましい。
　また、グラフィックは、第２超音波画像の領域内において、定められたハッチングが施されているもの、半透明な色に着色されているもの、あるいは、斜線が表示されているもの、であることが好ましい。
　また、本発明は、超音波プローブを用いて被検体の左右の咽頭部のうちの一方の咽頭部に超音波ビームの送受信を行うことにより得られた受信信号から第１超音波画像を生成し、
　第１超音波画像を解析することにより第１超音波画像における嚥下残留物の領域を検出し、
　超音波プローブを用いて被検体の左右の咽頭部のうちの他方の咽頭部に超音波ビームの送受信を行うことにより得られた受信信号から第２超音波画像を生成し、
　第２超音波画像に対して第１超音波画像の位置合わせを行い、
　第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定し、
　第２超音波画像の領域を含むグラフィックを第２超音波画像に対して重畳してモニタに表示させる、超音波診断装置の制御方法を提供する。
　本発明においては、第１超音波画像における嚥下残留物の領域が検出され、第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を含むグラフィックが第２超音波画像に重畳されてモニタに表示される。従って、本発明によれば、左右の咽頭部における嚥下残留物の領域を特定する際のユーザの負荷を軽減することができる。
本発明に係る一実施形態の超音波診断装置の構成を表す概念図である。 超音波プローブおよび情報端末の構成を表すブロック図である。 送受信回路の構成を表すブロック図である。 残留物処理部の構成を表すブロック図である。 超音波画像を撮影する場合の超音波診断装置の動作を表す一実施形態のフローチャートである。 嚥下障害を検査する場合の超音波診断装置の動作を表す一実施形態のフローチャートである。 右の咽頭部が撮影された第１超音波画像における嚥下残留物の領域を示す一実施形態の概念図である。 第１超音波画像における嚥下残留物の領域に対応する、左の咽頭部が撮影された第２超音波画像の領域を示す一実施形態の概念図である。 第１超音波画像における嚥下残留物の領域に対応する、左の咽頭部が撮影された第２超音波画像の領域を示す別の実施形態の概念図である。
　以下に、添付の図面に示す好適実施形態に基づいて、本発明の超音波診断装置および超音波診断装置の制御方法を詳細に説明する。
　図１は、本発明に係る一実施形態の超音波診断装置の構成を表す概念図である。図１に示す超音波診断装置は、超音波プローブ１と、超音波プローブ１に有線または無線で接続されるハンドヘルド型の情報端末３と、を備えている。本実施形態の超音波診断装置は、超音波プローブ１と、ハンドヘルド型の情報端末３と、この情報端末３上で動作する超音波診断用のアプリケーションプログラムと、によって実現されている。
　超音波プローブ１は、超音波ビームにより被検体をスキャンして超音波画像を撮影し、超音波画像に対応するデータ、本実施形態の場合、超音波画像の画像情報データを出力する。超音波プローブ１は、図２に示すように、振動子アレイ１１と、送受信回路１４と、信号処理部１６と、画像処理部１７と、プローブ側通信回路１８と、プローブ制御部２１と、シネメモリ２２と、バッテリ２４と、を備えている。
　振動子アレイ１１には、送受信回路１４が双方向に接続されている。送受信回路１４には、信号処理部１６、画像処理部１７およびプローブ側通信回路１８が順次直列に接続されている。信号処理部１６および画像処理部１７は、画像情報データ生成部１９を構成する。また、画像処理部１７にはシネメモリ２２が接続され、シネメモリ２２にはプローブ側通信回路１８が接続されている。
　また、送受信回路１４、信号処理部１６、画像処理部１７、シネメモリ２２およびプローブ側通信回路１８には、プローブ制御部２１が接続されている。また、超音波プローブ１は、バッテリ２４を内蔵している。
　送受信回路１４、画像情報データ生成部１９（信号処理部１６および画像処理部１７）およびプローブ制御部２１により、プローブ側プロセッサ２５が構成されている。
　振動子アレイ１１は、１次元または２次元に配列された複数の超音波振動子を有している。これらの振動子は、それぞれ送受信回路１４から供給される駆動信号に従って超音波を送信し、かつ、被検体からの反射波を受信してアナログの受信信号を出力する。
　各振動子は、例えば、ＰＺＴ（Lead Zirconate Titanate：チタン酸ジルコン酸鉛）に代表される圧電セラミック、ＰＶＤＦ（Poly Vinylidene Di Fluoride：ポリフッ化ビニリデン）に代表される高分子圧電素子およびＰＭＮ－ＰＴ（Lead Magnesium Niobate-Lead Titanate：マグネシウムニオブ酸鉛－チタン酸鉛固溶体）に代表される圧電単結晶等からなる圧電体の両端に電極を形成した素子を用いて構成される。
　送受信回路１４は、プローブ制御部２１の制御の下で、振動子アレイ１１から超音波を送信させ、かつ、超音波エコーを受信した振動子アレイ１１から出力される受信信号に受信フォーカス処理を施すことにより音線信号を生成する。送受信回路１４は、図３に示すように、振動子アレイ１１に接続されるパルサ５１と、振動子アレイ１１から順次直列に接続される増幅部５２、ＡＤ（Analog to Digital）変換部５３およびビームフォーマ５４と、を有している。
　パルサ５１は、例えば複数のパルス発生器を含んでおり、プローブ制御部２１により選択された送信遅延パターンに基づいて、振動子アレイ１１の複数の振動子から送信される超音波が超音波ビームを形成するようにそれぞれの駆動信号を、遅延量を調節して複数の振動子に供給する。このように、振動子アレイ１１の振動子の電極にパルス状または連続波状の電圧が印加されると、圧電体が伸縮し、それぞれの振動子からパルス状または連続波状の超音波が発生して、それらの超音波の合成波から、超音波ビームが形成される。
　送信された超音波ビームは、例えば、被検体の部位等の対象において反射され、超音波プローブ１の振動子アレイ１１に向かって伝搬する。振動子アレイ１１を構成するそれぞれの振動子は、このように振動子アレイ１１に向かって伝搬する超音波エコーを受信することにより伸縮して、電気信号である受信信号を生成し、これらの受信信号を増幅部５２に出力する。
　増幅部５２は、振動子アレイ１１を構成するそれぞれの振動子から入力された信号を増幅し、増幅した信号をＡＤ変換部５３に送信する。ＡＤ変換部５３は、増幅部５２から送信された信号をデジタルの受信データに変換し、これらの受信データをビームフォーマ５４に出力する。
　ビームフォーマ５４は、プローブ制御部２１により選択された受信遅延パターンに基づいて設定される音速または音速の分布に従い、ＡＤ変換部５３により変換された各受信データに対してそれぞれの遅延を与えて加算することにより、いわゆる受信フォーカス処理を行う。この受信フォーカス処理により、ＡＤ変換部５３で変換された各受信データが整相加算され、かつ、超音波エコーの焦点が絞り込まれた音線信号が生成される。
　画像情報データ生成部１９は、送受信回路１４により生成された音線信号に基づいて画像情報データを生成する。画像情報データ生成部１９は、前述のように、信号処理部１６と、画像処理部１７と、を有している。
　信号処理部１６は、プローブ制御部２１の制御の下で、送受信回路１４により生成された音線信号に基づいて、超音波画像への画像化前の画像信号データを生成する。より具体的には、信号処理部１６は、送受信回路１４のビームフォーマ５４により生成された音線信号に対して信号処理、例えば超音波が反射した位置の深度に応じて伝搬距離に起因する減衰の補正を施した後、包絡線検波処理を施して、画像化前の画像信号データとして、被検体内の組織に関する断層画像情報を表す信号を生成する。
　画像処理部１７は、プローブ制御部２１の制御の下で、信号処理部１６により生成された画像信号データに基づいて、画像情報データ生成部１９により生成された画像情報データとして超音波画像を生成する。より具体的には、画像処理部１７は、信号処理部１６により生成された画像化前の画像信号データを、通常のテレビジョン信号の走査方式に従う画像信号にラスター変換し、このように変換された画像信号に対して、モニタ３４の表示フォーマットに従う明るさ補正、諧調補正、シャープネス補正、画像サイズ補正、リフレッシュレート補正、走査周波数補正および色補正等の各種の画像処理を施すことにより超音波画像（超音波画像信号）を生成した後、画像情報データ生成部１９により生成された超音波画像を画像情報データとしてプローブ側通信回路１８に出力する。
　送受信回路１４、信号処理部１６、および画像処理部１７は、本発明の画像生成部を構成する。
　画像生成部は、超音波プローブ１（より厳密には、振動子アレイ１１）を用いて被検体に超音波ビームの送受信を行うことにより得られた受信信号から超音波画像、本実施形態の場合、画像情報データとしての超音波画像を生成する。
　シネメモリ２２は、プローブ制御部２１の制御の下で、画像情報データ生成部１９により生成された画像情報データを格納する。より詳しくは、シネメモリ２２は、ライブモードの場合に、画像情報データとして、画像情報データ生成部１９の画像処理部１７により生成された超音波画像を格納する。シネメモリ２２は、数秒から数十秒の間に生成される複数フレームの超音波画像、例えば１秒間に３０フレームの超音波画像が撮影される場合、数十フレームから数百フレームの超音波画像を格納するためのメモリ容量を有している。
　シネメモリ２２はリングバッファである。従って、メモリ容量に対応するフレーム数の過去のフレームの超音波画像がシネメモリ２２に格納されると、最古のフレームの超音波画像の代わりに、最新のフレームの超音波画像がシネメモリ２２に順次格納される。これにより、シネメモリ２２には、常に、最新のフレームの超音波画像から、メモリ容量に対応するフレーム数の過去のフレームの超音波画像が格納される。
　ここで、ライブモードは、一定のフレームレートで撮影された超音波画像（動画像）を逐次表示（リアルタイム表示）するモードである。
　フリーズモードは、ライブモードの場合に撮影された超音波画像（動画像）をシネメモリ２２に格納しておき、このシネメモリ２２に格納されている過去のフレームの超音波画像（動画像）の中から任意のフレームの超音波画像（静止画像）を読み出して表示するモードである。
　プローブ側通信回路１８は、プローブ制御部２１の制御の下で、画像処理部１７により生成された画像情報データ、または、シネメモリ２２に格納されている画像情報データを有線または無線で送信する。プローブ側通信回路１８は、本実施形態の場合、電波の送信および受信を行うためのアンテナを含んでおり、画像処理部１７により生成された超音波画像に基づいてキャリアを変調して伝送信号を生成し、伝送信号をアンテナに供給してアンテナから電波を送信することにより、超音波画像を無線送信する。
　キャリアの変調方式としては、ＡＳＫ（Amplitude Shift Keying：振幅偏移変調）、ＰＳＫ（Phase Shift Keying：位相偏移変調）、ＱＰＳＫ（Quadrature Phase Shift Keying：四位相偏移変調）、または、１６ＱＡＭ（16 Quadrature Amplitude Modulation：１６直角位相振幅変調）等が用いられる。
　また、プローブ側通信回路１８は、超音波プローブ１と情報端末３とを、ＵＳＢ（Universal Serial Bus：ユニバーサル・シリアル・バス）ケーブル等のケーブルによって有線で接続することもできる。
　プローブ側通信回路１８は、ライブモードの場合に、画像情報データ生成部１９により生成されたフレームの画像情報データを無線送信し、フリーズモードの場合に、シネメモリ２２に格納されている画像情報データを無線送信する。
　プローブ制御部２１は、予め記憶されているプログラム等に基づいて、超音波プローブ１の各部の制御を行う。より詳しくは、プローブ制御部２１は、予め設定された検査モードおよび走査方式に基づいて、超音波ビームの送信および超音波エコーの受信が行われるように送受信回路１４を制御する。また、プローブ制御部２１は、予め設定された信号処理が音線信号に施され、予め設定された画像処理が画像信号データに施されるように画像情報データ生成部１９の信号処理部１６および画像処理部１７を制御する。プローブ制御部２１は、ライブモードの場合に、画像情報データ生成部１９により生成された画像情報データがシネメモリ２２に格納され、フリーズモードの場合に、シネメモリ２２に格納されている過去のフレームの超音波画像が読み出されるように制御する。さらに、プローブ制御部２１は、予め設定された送信電波強度で画像信号データの送信が行われるようにプローブ側通信回路１８を制御する。
　ここで、検査モードとは、Ｂ（輝度）モード、ＣＦ（カラードプラ）モード、ＰＤ（パワードプラ）モード、Ｍ（モーション）モード、ＰＷ（パルスドプラ）モード、ＣＷ（連続波ドプラ）モード等、超音波診断装置において使用可能な検査モードのうちのいずれかを示し、走査方式は、電子セクタ走査方式、電子リニア走査方式、電子コンベックス走査方式等の走査方式のうちのいずれかを示すものとする。
　バッテリ２４は、超音波プローブ１に内蔵されており、超音波プローブ１の各回路に電力を供給する。
　次に、情報端末３は、スマートフォンおよびタブレットＰＣ（Personal Computer：パーソナルコンピュータ）等のようなハンドヘルド型の端末装置であって、超音波プローブ１によって撮影された超音波画像に対応するデータに基づいて超音波画像を表示する。情報端末３は、図２に示すように、端末側通信回路３２と、表示制御部３３と、残留物処理部３５と、端末制御部３６と、モニタ３４と、入力装置３７と、を備えている。
　端末側通信回路３２には、表示制御部３３およびモニタ３４が順次直列に接続されている。また、端末側通信回路３２には、残留物処理部３５が接続され、残留物処理部３５には、表示制御部３３が接続されている。端末側通信回路３２、表示制御部３３および残留物処理部３５には端末制御部３６が接続され、端末制御部３６には入力装置３７が接続されている。
　超音波プローブ１のプローブ側通信回路１８と情報端末３の端末側通信回路３２とは、本実施形態の場合、無線通信により無線接続されており、これにより、超音波プローブ１と情報端末３とが、双方向に情報の受け渡しが可能に接続されている。
　端末側通信回路３２は、端末制御部３６の制御の下で、超音波プローブ１のプローブ側通信回路１８から送信されてくる画像情報データを有線または無線で受信する。本実施形態の場合、端末側通信回路３２は、電波の送信および受信を行うためのアンテナを含んでおり、プローブ側通信回路１８から無線送信された伝送信号を、アンテナを介して受信し、受信した伝送信号を復調することにより、画像情報データである超音波画像（超音波画像信号）を出力する。
　表示制御部３３は、端末制御部３６の制御の下で、各種の情報をモニタ３４に表示させる。例えば、表示制御部３３は、端末側通信回路３２により受信された画像情報データである超音波画像に所定の処理を施してモニタ３４に表示させる。また、表示制御部３３は、後述する第２超音波画像の領域を含むグラフィックを第２超音波画像に重畳してモニタ３４に表示させたり、警告のメッセージおよび各種の操作画面等をモニタ３４に表示させたりする。
　モニタ３４は、各種の情報を表示する。モニタ３４は、表示制御部３３の制御により、超音波画像の他、前述の第２超音波画像の領域、警告のメッセージおよび各種の操作画面等を表示する。モニタ３４としては、例えばＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）および有機ＥＬ（Electro-Luminescence：エレクトロルミネッセンス）ディスプレイ等を例示することができる。
　入力装置３７は、ユーザが入力操作を行って各種の指示を入力するためのものであり、本実施形態の場合、ユーザがタッチ操作を行って各種の指示を入力することができるタッチパネル等を含む。
　残留物処理部３５は、端末制御部３６の制御の下で、嚥下の際に、被検体の咽頭部、例えば、梨状窩等に残留した食べ物、つまり、嚥下残留物に関する各種の処理を行う。残留物処理部３５は、図４に示すように、画像選択部６０と、残留物検出部６２と、第１超音波画像用メモリ６４と、位置合わせ部６６と、領域決定部６８と、警告部７０と、を備えている。
　画像選択部６０には、残留物検出部６２、第１超音波画像用メモリ６４、位置合わせ部６６および領域決定部６８が順次直列に接続されている。また、画像選択部６０には、第１超音波画像用メモリ６４が接続され、第１超音波画像用メモリ６４には、領域決定部６８が接続されている。さらに、位置合わせ部６６には、警告部７０が接続されている。
　画像選択部６０は、入力装置３７を介して入力されたユーザの指示に応じて、被検体の左右の咽頭部のうちの一方の咽頭部の複数フレームの超音波画像の中から、１フレームの超音波画像である第１超音波画像を選択する。
　画像選択部６０は、ライブモードの場合に撮影される超音波画像（動画像）の中から、ユーザがフリーズボタンを押したタイミングで取得された１フレームの超音波画像（静止画像）を第１超音波画像とすることができる。あるいは、画像選択部６０は、フリーズモードの場合に、シネメモリ２２に格納されている過去の超音波画像（動画像）の中から、ユーザによって指定された１フレームの超音波画像（静止画像）を第１超音波画像としてもよい。
　残留物検出部６２は、一方の咽頭部の超音波画像である第１超音波画像を解析することにより、嚥下残留物の有無およびその領域を検出する。例えば、残留物検出部６２は、梨状窩を含む第１超音波画像を解析することにより、梨状窩における嚥下残留物の有無およびその領域を検出するが、梨状窩以外の部位における嚥下残留物の有無およびその領域を検出してもよい。
　残留物検出部６２は、特に限定されないが、深層学習等の機械学習技術を利用して学習された判定モデルと、テンプレートマッチングと、Adaboost（Adaptive Boostling）、SVM（Support Vector Machine）またはSIFT（Scale-Invariant Feature Transform）等の特徴量を利用した画像解析技術と、の少なくとも１つを用いて、第１超音波画像における嚥下残留物の有無およびその領域を検出することができる。
　ここで、判定モデルは、一方の咽頭部が撮影された学習用超音波画像と、この学習用超音波画像における嚥下残留物の有無およびその領域と、を教師データとして、学習用超音波画像と、この学習用超音波画像における嚥下残留物の有無およびその領域と、の関係を複数の教師データについて学習した学習済みモデルである。
　判定モデルは、第１超音波画像を入力として、この第１超音波画像における嚥下残留物の有無およびその領域を推定した結果を出力する。
　第１超音波画像用メモリ６４は、画像選択部６０により選択された第１超音波画像と、残留物検出部６２により検出された第１超音波画像における嚥下残留物の領域と、を対応付けて保存するメモリである。
　位置合わせ部６６は、リアルタイムに生成される被検体の左右の咽頭部のうちの他方の咽頭部の超音波画像である第２超音波画像に対して、第１超音波画像用メモリ６４に保存されている第１超音波画像の位置合わせを行う。
　位置合わせ部６６は、特に限定されないが、剛体／非剛体レジストレーション等の公知の技術を用いて、第２超音波画像に対する第１超音波画像の位置合わせを行うことができる。
　領域決定部６８は、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定する。
　警告部７０は、第２超音波画像に対する第１超音波画像の位置合わせが失敗した場合に、ユーザに対して警告を発する。
　警告部７０は、表示制御部３３により、警告のメッセージをモニタ３４に表示させてもよいし、メッセージを音声で読み上げてスピーカから出力させてもよいし、その両方を同時に行わせてもよい。
　端末制御部３６は、予め記憶されているプログラムおよび入力装置３７から入力されたユーザの指示等に基づいて、情報端末３の各部の制御を行う。より詳しくは、端末制御部３６は、超音波プローブ１のプローブ側通信回路１８から伝送信号の受信が行われるように端末側通信回路３２を制御する。また、端末制御部３６は、画像情報データに基づいて超音波画像がモニタ３４に表示されるように表示制御部３３を制御する。さらに、端末制御部３６は、嚥下残留物に関する各種の処理が行われるように残留物処理部３５を制御する。
　表示制御部３３、残留物処理部３５および端末制御部３６によって端末側プロセッサ３９が構成されている。
　次に、図５のフローチャートを参照しながら、超音波画像を撮影する場合の超音波診断装置の動作を説明する。まず、ライブモードの場合の超音波診断装置の動作を説明する。
　入力装置３７から入力されたユーザからの指示に基づいてライブモードが指定されると（ステップＳ１）、超音波プローブ１が被検体の体表面上に接触された状態において、送受信回路１４により超音波の送信が開始され、音線信号が生成される（ステップＳ２）。
　つまり、プローブ制御部２１の制御の下で、送受信回路１４のパルサ５１からの駆動信号に従って振動子アレイ１１の複数の振動子から被検体内に超音波ビームが送信される。
　パルサ５１から送信された超音波ビームに基づく被検体からの超音波エコーは、振動子アレイ１１の各振動子により受信され、超音波エコーを受信した振動子アレイ１１の各振動子からアナログ信号である受信信号が出力される。
　振動子アレイ１１の各振動子から出力されるアナログ信号である受信信号は、送受信回路１４の増幅部５２により増幅され、ＡＤ変換部５３によりＡＤ変換されて受信データが取得される。
　この受信データに対して、ビームフォーマ５４により受信フォーカス処理が施されることにより、音線信号が生成される。
　続いて、画像情報データ生成部１９により、送受信回路１４のビームフォーマ５４により生成された音線信号に基づいて、画像情報データとして超音波画像が生成される（ステップＳ３）。
　つまり、ビームフォーマ５４により生成された音線信号は、画像情報データ生成部１９の信号処理部１６により各種の信号処理が施され、画像化前の画像信号データとして、被検体内の組織に関する断層画像情報を表す信号が生成される。
　信号処理部１６により生成された画像信号データは、画像処理部１７によりラスター変換され、さらに各種の画像処理が施され、画像情報データとして超音波画像が生成される。
　画像処理部１７により生成された超音波画像は、シネメモリ２２に格納される（ステップＳ４）。
　また、画像処理部１７により生成された超音波画像は、プローブ側通信回路１８から情報端末３に向けて無線送信される（ステップＳ５）。
　続いて、超音波プローブ１のプローブ側通信回路１８から無線送信された超音波画像は、情報端末３の端末制御部３６の制御の下で、端末側通信回路３２により受信される（ステップＳ６）。
　続いて、端末側通信回路３２により受信された超音波画像に対して、表示制御部３３により所定の処理が施されて、モニタ３４に表示される（ステップＳ７）。
　次に、フリーズモードの場合の超音波診断装置の動作を説明する。
　入力装置３７から入力されたユーザの指示に基づいてフリーズモードが指定されると（ステップＳ８）、振動子アレイ１１からの超音波の送信が停止される（ステップＳ９）。
　この場合、画像情報データとして、シネメモリ２２に格納されている過去のフレームの超音波画像が読み出されてプローブ側通信回路１８から無線送信される（ステップＳ１０）。
　続いて、端末側通信回路３２により、プローブ側通信回路１８から無線送信された超音波画像が受信される（ステップＳ１１）。
　続いて、端末側通信回路３２により受信された過去のフレームの超音波画像が、表示制御部３３によりモニタ３４に表示される（ステップＳ１２）。
　次に、図６のフローチャートを参照しながら、嚥下障害の検査を行う場合の超音波診断装置の動作を説明する。
　まず、ユーザは、被検体の左右の咽頭部のうちの一方、例えば右の咽頭部の超音波画像を撮影する（ステップＳ２１）。
　この場合、超音波プローブ１が被検体の右の咽頭部上に接触された状態において、送受信回路１４により超音波の送信が開始され、音線信号が生成される。
　続いて、画像情報データ生成部１９により、送受信回路１４により生成された音線信号に基づいて、右の咽頭部が撮影された超音波画像（動画像）が生成される。
　画像情報データ生成部１９により生成された右の咽頭部の超音波画像は、シネメモリ２２に格納される。
　また、右の咽頭部の超音波画像は、超音波プローブ１から情報端末３へ送信され、情報端末３の端末側通信回路３２により受信される。
　続いて、端末側通信回路３２により受信された超音波画像に対して、表示制御部３３により所定の処理が施されて、モニタ３４に表示される。
　続いて、ユーザは、右の咽頭部の複数フレームの超音波画像の中から、右の超音波画像における嚥下残留物の有無およびその領域を検出するための１フレームの超音波画像である第１超音波画像を選択する（ステップＳ２２）。
　この場合、入力装置３７を介して入力されたユーザの指示に応じて、画像選択部６０により、右の咽頭部の複数フレームの超音波画像の中から、１フレームの超音波画像である第１超音波画像が選択される。
　第１超音波画像が選択されると、残留物検出部６２により、第１超音波画像が解析され、第１超音波画像における嚥下残留物の有無およびその領域が検出される（ステップＳ２３）。例えば、梨状窩における嚥下残留物の有無が検出され、嚥下残留物がある場合には、その領域が検出される。第１超音波画像と、第１超音波画像における嚥下残留物の領域とは、互いに対応付けられて第１超音波画像用メモリ６４に保存される（ステップＳ２４）。
　また、第１超音波画像における嚥下残留物の領域が検出されると、表示制御部３３により、第１超音波画像における嚥下残留物の領域を含むグラフィックが第１超音波画像に重畳されてモニタ３４に表示される（ステップＳ２５）。例えば、図７に示すように、嚥下残留物の領域を囲む囲み線が第１超音波画像に重畳されてモニタ３４に表示される。これにより、ユーザは、第１超音波画像における嚥下残留物の有無およびその領域を視覚的に確認することができる。
　続いて、表示制御部３３により、例えば「もう一方の喉のスキャンを開始してください」というメッセージがモニタ３４に表示される。これにより、ユーザは、左右の咽頭部のうちの他方、例えば左の咽頭部の超音波画像の撮影を開始するように促される。
　これに応じて、ユーザは、左の咽頭部の超音波画像を撮影する（ステップＳ２６）。
　この場合の動作は、右の咽頭部の超音波画像を撮影した場合と同様である。すなわち、超音波プローブ１が被検体の左の咽頭部上に接触された状態において、左の咽頭部の超音波画像である第２超音波画像（動画像）が生成される。第２超音波画像は、シネメモリ２２に格納される。また、第２超音波画像は、超音波プローブ１から情報端末３へ送信され、表示制御部３３により、モニタ３４に表示される。
　第２超音波画像が撮影されると、位置合わせ部６６により、第２超音波画像に対して、第１超音波画像用メモリ６４に保存されている第１超音波画像の位置合わせが行われる（ステップＳ２７）。位置合わせ部６６は、本実施形態の場合、右の咽頭部が撮影された第１超音波画像の左右を反転し、左の咽頭部が撮影された第２超音波画像に対して、左右が反転された第１超音波画像の位置合わせを行う。
　ここで、位置合わせが失敗した場合（ステップＳ２８においてＮｏ）、例えば、位置合わせが、定められた回数失敗し続ける場合、警告部７０により、位置合わせの失敗をユーザに通知するための警告が発せられる（ステップＳ２９）。この場合には、第１超音波画像または第２超音波画像において、不適切な断面が描出されている可能性があるため、これ以降の処理は行われないが、検査中の第２超音波画像は引き続きモニタ３４に表示される。
　一方、位置合わせが成功した場合（ステップＳ２８においてＹｅｓ）、領域決定部６８により、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域が決定される（ステップＳ３０）。
　第２超音波画像の領域が決定されると、表示制御部３３により、第２超音波画像の領域を含むグラフィックが第２超音波画像に重畳されてモニタ３４に表示される（ステップＳ３１）。例えば、図８Ａに示すように、第２超音波画像の領域を囲む囲み線が第２超音波画像に重畳されてモニタ３４に表示される。第２超音波画像に対して、左右が反転された第１超音波画像の位置合わせが行われているため、図８Ａに示す第２超音波画像の領域は、図７に示す第１超音波画像における嚥下残留物の領域の左右が反転された形状となっている。これにより、ユーザは、第２超音波画像において、嚥下残留物である可能性のある領域を視覚的に確認することができる。
　このように、超音波診断装置においては、第１超音波画像における嚥下残留物の領域が検出され、第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を含むグラフィックが第２超音波画像に重畳されてモニタ３４に表示される。従って、超音波診断装置においては、左右の咽頭部における嚥下残留物の領域を特定する際のユーザの負荷を軽減することができる。
　また、超音波診断装置においては、第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を含むグラフィックを第２超音波画像に重畳して表示させることにより、リアルタイムに生成される第２超音波画像における嚥下残留物の領域を逐次検出する必要がない。従って、超音波診断装置は、情報端末３の処理能力が比較的低い場合であっても、第２超音波画像において、嚥下残留物である可能性がある領域を容易に表示させることができる。
　なお、被検体の右の咽頭部の超音波画像を撮影した後、左の咽頭部の超音波画像を撮影しているが、逆に、左の咽頭部の超音波画像を撮影した後、右の咽頭部の超音波画像を撮影してもよい。
　表示制御部３３は、第２超音波画像の領域を囲む囲み線に代えて、第２超音波画像の領域を包含する、定められた形状の囲み線をモニタ３４に表示させてもよい。囲み線の輝度、色、線種および形状等は特に限定されない。例えば、線種は、実線または点線等でもよい。また、囲み線は、直線でもよいし、曲線でもよい。囲み線の形状は、第２超音波画像の領域と同じ形状のままサイズを拡大した形状でもよいし、円形でもよいし、図８Ｂに示すように、矩形でもよい。具体的には、第２超音波画像の領域を内接させた矩形（第２超音波画像の領域の外接矩形）でもよいし、第２超音波画像の領域と同じ形状のままサイズを拡大した形状の領域を内接させた矩形でもよいし、矩形の場合と同様にして内接させた円形等でもよい。また、第２超音波画像の領域が複数あった場合、つまり、第１超音波画像において複数の嚥下残留物の領域が見つかった場合に、囲み線の形状は、これら複数の第２超音波画像の領域を包含する矩形、例えば外接矩形でもよい。このような囲み線の形状の変更は、第２超音波画像の領域を含むグラフィックを第２超音波画像に重畳してモニタ３４に表示させる全ての実施形態において適用可能である。
　なお、表示制御部３３は、囲み線をモニタ３４に表示させてもよいし、表示させなくてもよい。囲み線を表示させる場合、グラフィックとして、囲み線内の領域において、第２超音波画像をそのまま表示させてもよいし、定められたハッチングを施してもよいし、下地の第２超音波画像が視認できるように、半透明な色に着色してもよいし、あるいは、斜線を表示させてもよい。一方、囲み線を表示させない場合、グラフィックとして、第２超音波画像の領域内において、定められたハッチングを施してもよいし、半透明な色に着色してもよいし、あるいは、斜線を表示させてもよい。
　表示制御部３３が、第１超音波画像における嚥下残留物の領域を囲む囲み線をモニタ３４に表示させる場合も、第２超音波画像の領域を囲む囲み線をモニタ３４に表示させる場合と同様である。また、囲み線修正部を設けておき、第１超音波画像における嚥下残留物の領域を囲む囲み線がモニタ３４に表示された後、ユーザの指示に応じて、囲み線修正部により、嚥下残留物の領域を囲む囲み線を修正してもよい。さらに、第１超音波画像における嚥下残留物の領域を囲む囲み線は表示してもよいし、表示しなくてもよい。
　残留物検出部６２は、第１超音波画像において嚥下残留物が検出されない場合に、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域を、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域として使用してもよい。この場合、位置合わせ部６６は、第２超音波画像に対して、第１超音波画像用メモリ６４に格納されている同一の被検体の過去の検査時の第１超音波画像の位置合わせを行う。これにより、現在の検査時の第１超音波画像において嚥下残留物が検出されない場合であっても、過去の検査時の第１超音波画像における嚥下残留物の領域を用いて、位置合わせを行うことができる。
　なお、同一の被検体の過去の検査時の第１超音波画像が格納されている場所は、上記の第１超音波画像用メモリ６４内、すなわち、超音波診断装置内でもよいし、あるいは、外部サーバ内でもよい。同一の被検体の過去の検査時の第１超音波画像が外部サーバ内に格納されている場合、超音波診断装置は、端末側通信回路３２により、同一の被検体の過去の検査時の第１超音波画像を、ネットワークを介して外部サーバから取得することができる。
　また、表示制御部３３は、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域を含むグラフィックを、同一の被検体の現在の検査時の第１超音波画像に対して重畳してモニタ３４に表示させてもよい。この場合も、表示制御部３３は、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域を含むグラフィックを、同一の被検体の現在の検査時の第２超音波画像に対して重畳してモニタ３４に表示させる。これにより、ユーザは、右の咽頭部の超音波画像を撮影しているときでも、嚥下残留物である可能性のある領域を視覚的に確認することができる。
　さらに、領域決定部６８は、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域と、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域と、に基づいて、同一の被検体の現在の検査時の第２超音波画像の領域を決定してもよい。あるいは、領域決定部６８は、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域と、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域と、に基づいて、同一の被検体の現在の検査時の第２超音波画像の領域を決定してもよい。この場合、表示制御部３３は、同一の被検体の現在の検査時の第２超音波画像の領域を含むグラフィックを、同一の被検体の現在の検査時の第２超音波画像に対して重畳してモニタに表示させる。これにより、ユーザは、過去および現在の検査時の第１超音波画像における嚥下残留物の領域から、嚥下残留物が残留しやすい部位を視覚的に確認し、嚥下障害が改善されているか否かを判断することができる。
　なお、同一の被検体の現在の検査時の第２超音波画像の領域を囲む囲み線を表示させる場合、同一の被検体の過去の検査時の第１超音波画像における嚥下残留物の領域または同一の被検体の過去の検査時の第２超音波画像の領域と、同一の被検体の現在の検査時の第１超音波画像における嚥下残留物の領域と、に対応する２つの囲み線を、例えば、異なる輝度、異なる色および異なる線種の少なくとも１つで別個に表示させてもよいし、これら２つの囲み線内の領域を包含する、１つの囲み線を表示させてもよい。
　残留物検出部６２は、第２超音波画像の領域が決定された後、この第２超音波画像の領域を包含する、定められた形状の領域の画像を解析することにより、第２超音波画像における嚥下残留物の領域を検出してもよい。この場合、第２超音波画像の領域を囲む囲み線に代えて、第２超音波画像における嚥下残留物の領域を囲む囲み線が第２超音波画像に対して重畳されてモニタ３４に表示される。これにより、第２超音波画像における嚥下残留物の領域の誤検出を抑制することができる。
　前述の位置合わせ、第２超音波画像の領域の決定および第２超音波画像の領域を含むグラフィックの重畳表示は、第２超音波画像（動画像）、すなわち、連続する複数フレームの第２超音波画像のそれぞれについて繰り返し行わせることができる。
　この場合、位置合わせ部６６により、第２超音波画像に対して、第１超音波画像の位置合わせが行われ、領域決定部６８により、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域が決定され、表示制御部３３により、第２超音波画像に対して重畳してモニタ３４に表示させる第２超音波画像の領域を含むグラフィックが更新されることが、連続する複数フレームの第２超音波画像のそれぞれについて繰り返し行われる。
　一方、位置合わせに係る計算負荷が高い場合、例えば、位置合わせに係る計算負荷によって第２超音波画像のスキャンが遅延し、不適切な第２超音波画像が生成される場合には、前述の位置合わせ、第２超音波画像の領域の決定および第２超音波画像の領域を含むグラフィックの重畳表示を、それぞれのフレームの第２超音波画像について繰り返し行うのではなく、定められた数のフレームの第２超音波画像毎に行ってもよい。
　この場合、位置合わせ部６６により、第２超音波画像に対して、第１超音波画像の位置合わせが行われ、領域決定部６８により、第２超音波画像に対して位置合わせされた第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域が決定され、表示制御部３３により、第２超音波画像に対して重畳してモニタ３４に表示させる第２超音波画像の領域を含むグラフィックが更新されることが、連続する複数フレームの第２超音波画像のうち、定められた数のフレームの第２超音波画像毎に繰り返される。
　これにより、位置合わせに係る計算負荷を低減することができ、かつ、適切な第２超音波画像を生成することができる。
　領域決定部６８は、一旦、第２超音波画像に対して位置合わせされた現在または過去の検査時の第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定した後、第２超音波画像の隣接するフレーム間において、前のフレームの第２超音波画像の領域に対応する後のフレームの第２超音波画像の領域を決定してもよい。
　このように、前のフレームの第２超音波画像の領域に対応する後のフレームの第２超音波画像の領域を決定することにより、第２超音波画像に対して第１超音波画像の位置合わせを行って、第１超音波画像における嚥下残留物の領域に対応する第２超音波画像の領域を決定する場合よりも正確に第２超音波画像の領域を決定することができる。
　さらに、外部サーバを設けておき、外部サーバにおいて、残留物処理部３５の一部の機能、例えば、残留物検出部６２、位置合わせ部６６および領域決定部６８の少なくとも１つの機能を実行させてもよい。
　本発明は、ハンドヘルド型の超音波診断装置に限らず、据置型の超音波診断装置、または情報端末がラップトップ型の端末装置によって実現される携帯型の超音波診断装置にも同様に適用可能である。また、シネメモリ２２は、超音波プローブ１だけが備えていてもよいし、情報端末３だけが備えていてもよいし、あるいは、超音波プローブ１および情報端末３の両方が備えていてもよい。さらに、画像情報データ生成部１９は、超音波プローブ１が備えていてもよいし、情報端末３が備えていてもよい。
　本発明の装置において、送受信回路１４、信号処理部１６、画像処理部１７、プローブ制御部２１、表示制御部３３、残留物処理部３５、および端末制御部３６等の各種の処理を実行する処理部（Processing Unit）のハードウェア的な構成は、専用のハードウェアであってもよいし、プログラムを実行する各種のプロセッサまたはコンピュータであってもよい。また、シネメモリ２２および第１超音波画像用メモリ６４等のハードウェア的な構成は、専用のハードウェアであってもよいし、あるいは半導体メモリ等のメモリおよびＨＤＤ（Hard Disk Drive：ハードディスクドライブ）およびＳＳＤ（Solid State Drive：ソリッドステートドライブ）等のストレージデバイスであってもよい。
　各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理をさせるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
　１つの処理部を、これら各種のプロセッサのうちの１つで構成してもよいし、同種または異種の２つ以上のプロセッサの組み合わせ、例えば、複数のＦＰＧＡの組み合わせ、または、ＦＰＧＡおよびＣＰＵの組み合わせ等によって構成してもよい。また、複数の処理部を、各種のプロセッサのうちの１つで構成してもよいし、複数の処理部のうちの２以上をまとめて１つのプロセッサを用いて構成してもよい。
　例えば、サーバおよびクライアント等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。また、システムオンチップ（System on Chip：ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。
　さらに、これらの各種のプロセッサのハードウェア的な構成は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（Circuitry）である。
　また、本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
　以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
　１　超音波プローブ、３　情報端末、１１　振動子アレイ、１４　送受信回路、１６　信号処理部、１７　画像処理部、１８　プローブ側通信回路、１９　画像情報データ生成部、２１　プローブ制御部、２２　シネメモリ、２４　バッテリ、２５　プローブ側プロセッサ、３２　端末側通信回路、３３　表示制御部、３４　モニタ、３５　残留物処理部、３６　端末制御部、３７　入力装置、３９　端末側プロセッサ、５１　パルサ、５２　増幅部、５３　ＡＤ変換部、５４　ビームフォーマ、６０　画像選択部、６２　残留物検出部、６４　第１超音波画像用メモリ、６６　位置合わせ部、６８　領域決定部、７０　警告部。

Claims (17)

  1. 　超音波プローブと、
    　前記超音波プローブを用いて被検体に超音波ビームの送受信を行うことにより得られた受信信号から超音波画像を生成する画像生成部と、
    　前記超音波画像を表示するモニタと、
    　前記被検体の左右の咽頭部のうちの一方の咽頭部の第１超音波画像を解析することにより前記第１超音波画像における嚥下残留物の領域を検出する残留物検出部と、
    　前記被検体の左右の咽頭部のうちの他方の咽頭部の第２超音波画像に対して、前記第１超音波画像の位置合わせを行う位置合わせ部と、
    　前記第２超音波画像に対して位置合わせされた前記第１超音波画像における前記嚥下残留物の領域に対応する前記第２超音波画像の領域を決定する領域決定部と、
    　前記第２超音波画像の領域を含むグラフィックを前記第２超音波画像に対して重畳して前記モニタに表示させる表示制御部と、を備える超音波診断装置。
  2. 　前記位置合わせ部は、前記第２超音波画像に対して、左右が反転された前記第１超音波画像の位置合わせを行う、請求項１に記載の超音波診断装置。
  3. 　ユーザが入力操作を行う入力装置と、
    　前記入力装置を介して入力された前記ユーザの指示に応じて、前記一方の咽頭部の複数フレームの超音波画像の中から前記第１超音波画像を選択する画像選択部と、を備える、請求項１または２に記載の超音波診断装置。
  4. 　前記残留物検出部は、前記第１超音波画像において嚥下残留物が検出されない場合に、同一の前記被検体の過去の検査時の前記第１超音波画像における前記嚥下残留物の領域を、前記同一の被検体の現在の検査時の前記第１超音波画像における前記嚥下残留物の領域として使用する、請求項１～３のいずれか一項に記載の超音波診断装置。
  5. 　前記表示制御部は、同一の前記被検体の過去の検査時の前記第１超音波画像における前記嚥下残留物の領域を含むグラフィックを、前記同一の被検体の現在の検査時の前記第１超音波画像に対して重畳して前記モニタに表示させ、前記同一の被検体の現在の検査時の前記第１超音波画像における前記嚥下残留物の領域を含むグラフィックを、前記同一の被検体の現在の検査時の前記第２超音波画像に対して重畳して前記モニタに表示させる、請求項１～３のいずれか一項に記載の超音波診断装置。
  6. 　前記領域決定部は、同一の前記被検体の過去の検査時の前記第１超音波画像における前記嚥下残留物の領域または前記同一の被検体の過去の検査時の前記第２超音波画像の領域と、前記同一の被検体の現在の検査時の前記第１超音波画像における前記嚥下残留物の領域と、に基づいて、前記同一の被検体の現在の検査時の前記第２超音波画像の領域を決定し、
    　前記表示制御部は、前記同一の被検体の現在の検査時の前記第２超音波画像の領域を含むグラフィックを、前記同一の被検体の現在の検査時の前記第２超音波画像に対して重畳して前記モニタに表示させる、請求項１～３のいずれか一項に記載の超音波診断装置。
  7. 　さらに、前記第２超音波画像に対する前記第１超音波画像の位置合わせが失敗した場合に、警告を発する警告部を備える、請求項１～６のいずれか一項に記載の超音波診断装置。
  8. 　前記残留物検出部は、さらに、前記第２超音波画像の領域を包含する、定められた形状の領域の画像を解析することにより前記第２超音波画像における嚥下残留物の領域を検出する、請求項１～７のいずれか一項に記載の超音波診断装置。
  9. 　前記位置合わせ部が、前記第２超音波画像に対して、前記第１超音波画像の位置合わせを行い、前記領域決定部が、前記第２超音波画像に対して位置合わせされた前記第１超音波画像における前記嚥下残留物の領域に対応する前記第２超音波画像の領域を決定し、前記表示制御部が、前記第２超音波画像に対して重畳して前記モニタに表示させる前記第２超音波画像の領域を含むグラフィックを更新することを、連続する複数フレームの前記第２超音波画像のそれぞれについて繰り返す、請求項１～８のいずれか一項に記載の超音波診断装置。
  10. 　前記位置合わせ部が、前記第２超音波画像に対して、前記第１超音波画像の位置合わせを行い、前記領域決定部が、前記第２超音波画像に対して位置合わせされた前記第１超音波画像における前記嚥下残留物の領域に対応する前記第２超音波画像の領域を決定し、前記表示制御部が、前記第２超音波画像に対して重畳して前記モニタに表示させる前記第２超音波画像の領域を含むグラフィックを更新することを、連続する複数フレームの第２超音波画像のうち、定められた数のフレームの第２超音波画像毎に繰り返す、請求項１～８のいずれか一項に記載の超音波診断装置。
  11. 　前記領域決定部は、一旦、前記第２超音波画像に対して位置合わせされた前記第１超音波画像における前記嚥下残留物の領域に対応する前記第２超音波画像の領域を決定した後、前記第２超音波画像の隣接するフレーム間において、前のフレームの前記第２超音波画像の領域に対応する後のフレームの前記第２超音波画像の領域を決定する、請求項９または１０に記載の超音波診断装置。
  12. 　さらに、前記第１超音波画像と、前記第１超音波画像における前記嚥下残留物の領域と、を対応付けて保存するメモリを備える、請求項１～１１のいずれか一項に記載の超音波診断装置。
  13. 　前記グラフィックは、前記第２超音波画像の領域を囲む囲み線である、請求項１～１２のいずれか一項に記載の超音波診断装置。
  14. 　前記グラフィックは、前記第２超音波画像の領域を包含する、定められた形状の囲み線である、請求項１～１２のいずれか一項に記載の超音波診断装置。
  15. 　前記囲み線内の領域は、前記超音波画像がそのまま表示されている、定められたハッチングが施されている、半透明な色に着色されている、あるいは、斜線が表示されている、請求項１３または１４に記載の超音波診断装置。
  16. 　前記グラフィックは、前記第２超音波画像の領域内において、定められたハッチングが施されているもの、半透明な色に着色されているもの、あるいは、斜線が表示されているもの、である、請求項１～１２のいずれか一項に記載の超音波診断装置。
  17. 　超音波プローブを用いて被検体の左右の咽頭部のうちの一方の咽頭部に超音波ビームの送受信を行うことにより得られた受信信号から第１超音波画像を生成し、
    　前記第１超音波画像を解析することにより前記第１超音波画像における嚥下残留物の領域を検出し、
    　前記超音波プローブを用いて前記被検体の左右の咽頭部のうちの他方の咽頭部に前記超音波ビームの送受信を行うことにより得られた受信信号から第２超音波画像を生成し、
    　前記第２超音波画像に対して前記第１超音波画像の位置合わせを行い、
    　前記第２超音波画像に対して位置合わせされた前記第１超音波画像における前記嚥下残留物の領域に対応する前記第２超音波画像の領域を決定し、
    　前記第２超音波画像の領域を含むグラフィックを前記第２超音波画像に対して重畳してモニタに表示させる、超音波診断装置の制御方法。
PCT/JP2021/038863 2020-11-26 2021-10-21 超音波診断装置および超音波診断装置の制御方法 WO2022113585A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022565119A JPWO2022113585A1 (ja) 2020-11-26 2021-10-21
US18/311,611 US20230270410A1 (en) 2020-11-26 2023-05-03 Ultrasound diagnostic apparatus and control method for ultrasound diagnostic apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-195870 2020-11-26
JP2020195870 2020-11-26

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/311,611 Continuation US20230270410A1 (en) 2020-11-26 2023-05-03 Ultrasound diagnostic apparatus and control method for ultrasound diagnostic apparatus

Publications (1)

Publication Number Publication Date
WO2022113585A1 true WO2022113585A1 (ja) 2022-06-02

Family

ID=81754247

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/038863 WO2022113585A1 (ja) 2020-11-26 2021-10-21 超音波診断装置および超音波診断装置の制御方法

Country Status (3)

Country Link
US (1) US20230270410A1 (ja)
JP (1) JPWO2022113585A1 (ja)
WO (1) WO2022113585A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001218769A (ja) * 2000-02-14 2001-08-14 Nisshin Oil Mills Ltd:The 超音波嚥下物性評価システム
US20050124888A1 (en) * 2002-05-23 2005-06-09 Hadasit Medical Research Services & Development Ltd. Apparatus, system and method for evaluation of esophageal function
CN103202703A (zh) * 2013-03-21 2013-07-17 广州龙之杰科技有限公司 一种医学吞咽影像采集装置及其影像处理方法
JP2016143194A (ja) * 2015-01-30 2016-08-08 ザイオソフト株式会社 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001218769A (ja) * 2000-02-14 2001-08-14 Nisshin Oil Mills Ltd:The 超音波嚥下物性評価システム
US20050124888A1 (en) * 2002-05-23 2005-06-09 Hadasit Medical Research Services & Development Ltd. Apparatus, system and method for evaluation of esophageal function
CN103202703A (zh) * 2013-03-21 2013-07-17 广州龙之杰科技有限公司 一种医学吞咽影像采集装置及其影像处理方法
JP2016143194A (ja) * 2015-01-30 2016-08-08 ザイオソフト株式会社 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム

Also Published As

Publication number Publication date
JPWO2022113585A1 (ja) 2022-06-02
US20230270410A1 (en) 2023-08-31

Similar Documents

Publication Publication Date Title
US20230293144A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20230240655A1 (en) Ultrasound diagnostic apparatus and display method of ultrasound diagnostic apparatus
US11957518B2 (en) Ultrasound system and control method of ultrasound system
WO2022113585A1 (ja) 超音波診断装置および超音波診断装置の制御方法
JP7500739B2 (ja) 超音波診断装置および超音波診断装置の制御方法
US20240188936A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
WO2023008155A1 (ja) 超音波診断装置および超音波診断装置の制御方法
US20240000431A1 (en) Ultrasound system and control method of ultrasound system
WO2022202351A1 (ja) 超音波診断装置および超音波診断装置の制御方法
WO2022044654A1 (ja) 超音波診断装置および超音波診断装置の制御方法
US20230190238A1 (en) Ultrasound system and control method of ultrasound system
US20230240654A1 (en) Ultrasound diagnostic apparatus and display method of ultrasound diagnostic apparatus
WO2022113527A1 (ja) 嚥下ゼリーの品質判定システムおよび嚥下ゼリーの品質判定方法
WO2022244552A1 (ja) 超音波診断装置および超音波診断装置の制御方法
WO2023281987A1 (ja) 超音波システムおよび超音波システムの制御方法
EP4360565A1 (en) Ultrasonic diagnostic device and method for controlling ultrasonic diagnostic device
US20230086973A1 (en) Ultrasound diagnostic apparatus, method for controlling ultrasound diagnostic apparatus, and processor for ultrasound diagnostic apparatus
US20230363740A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20240081783A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20230118210A1 (en) Ultrasound system, ultrasound probe, control method of ultrasound system, and control method of ultrasound probe
US20240000437A1 (en) Ultrasound diagnostic apparatus and control method for ultrasound diagnostic apparatus
US20230200782A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20240122576A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
WO2022064868A1 (ja) 超音波システムおよび超音波システムの制御方法
JP2024025865A (ja) 超音波診断装置の制御方法および超音波診断装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21897563

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022565119

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21897563

Country of ref document: EP

Kind code of ref document: A1