WO2021048834A1 - 診断支援装置、診断支援システム、及び診断支援方法 - Google Patents
診断支援装置、診断支援システム、及び診断支援方法 Download PDFInfo
- Publication number
- WO2021048834A1 WO2021048834A1 PCT/IB2020/059739 IB2020059739W WO2021048834A1 WO 2021048834 A1 WO2021048834 A1 WO 2021048834A1 IB 2020059739 W IB2020059739 W IB 2020059739W WO 2021048834 A1 WO2021048834 A1 WO 2021048834A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- line data
- support device
- control unit
- diagnostic support
- value
- Prior art date
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/12—Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
- A61B8/0841—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
- A61B8/085—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating body or organic structures, e.g. tumours, calculi, blood vessels, nodules
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0883—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the heart
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0891—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4483—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer
- A61B8/4494—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer characterised by the arrangement of the transducer elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/465—Displaying means of special interest adapted to display user selection data, e.g. icons or menus
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/54—Control of the diagnostic device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4444—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to the probe
- A61B8/4461—Features of the scanning mechanism, e.g. for moving the transducer within the housing of the probe
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
- A61B8/468—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
Definitions
- This disclosure relates to a diagnostic support device, a diagnostic support system, and a diagnostic support method.
- Patent Document 1 discloses a technique relating to OFDI or OCT that acquires an image of a blood vessel lumen by using a catheter in which an imaging core that transmits and receives light is rotatably and axially movable at the tip. ing.
- OFDI optical frequency domain imaging
- OCT optical coherence tomography
- Patent Document 1 International Publication No. 2014/115182
- OFDI is useful for evaluating the narrowing and dissociation of the side branch entrance of the bifurcation and the deformation of the stent after dilation of the side branch.
- OFDI has the ability to construct three-dimensional images of blood vessels, stents, and guidewires to ensure that the guidewires properly pass through this distal portion.
- This function makes OFDI extremely useful in understanding the anatomical information of the vascular lumen at the entrance, the running of the side branch wire, and the deformation of the stent strut due to posterior dilation in the stent treatment of bifurcation lesions.
- IVUS In stent treatment, IVUS, which acquires an image of the blood vessel lumen using a catheter in which an imaging core for transmitting and receiving ultrasonic waves is rotatably and axially movable at the tip, is also widely used.
- IVUS is an abbreviation for intravasional ultrasound.
- the purpose of the present disclosure is to generate an image in which the state of the object to be detected can be observed from the result of observing the cross section of the living tissue by ultrasonic waves.
- the diagnostic support device refers to the result of observing a cross section of the living tissue by an ultrasonic transducer that transmits ultrasonic waves in a radial manner while moving inside the living tissue.
- Line data indicating the intensity value of the reflected wave from the reflecting object existing in the ultrasonic transmission direction is generated for each combination of the moving position of the ultrasonic transducer and the ultrasonic transmission direction, and the generated line data is used.
- Anomalies in the generated line data including the corresponding pixels, arranging the pixels corresponding to the line data at the same movement position in one direction, and arranging the pixels corresponding to the line data in the same transmission direction in the vertical direction in the one direction. It is provided with a control unit that generates a detection image in which each pixel value is set according to the degree.
- control unit calculates the degree of abnormality of the feature vector representing the feature of the line data as the degree of abnormality of the line data.
- control unit generates data indicating the intensity value distribution of the reflected wave in the transmission direction of the ultrasonic wave as the line data.
- control unit refers to a cross-sectional image having a brightness value distribution corresponding to the intensity value distribution as a result of observing the cross section of the living tissue.
- control unit converts the intensity value distribution into a distribution from the center of gravity of the cross section observed by the ultrasonic vibrator, and data showing the converted distribution as the line data. To generate.
- the feature vector is a vector representing the intensity value distribution.
- the feature vector is a vector that represents the frequency distribution of the intensity of the reflected wave in the transmission direction of the ultrasonic wave, which is obtained from the intensity value distribution.
- the feature vector is a vector calculated by using a change in the intensity value distribution due to a difference in the moving position of the ultrasonic vibrator.
- the feature vector is a vector calculated by using a change in the intensity value distribution due to a difference in the transmission direction of the ultrasonic wave.
- control unit compares the feature vector with an identification vector for identifying a detection target, and calculates the degree of abnormality of the feature vector as a result of the comparison.
- control unit calculates the degree of abnormality of the feature vector using at least two different vectors as the identification vector, and RGB of each pixel as each pixel value of the detection image.
- the control unit calculates the degree of abnormality of the feature vector using at least two different vectors as the identification vector, and RGB of each pixel as each pixel value of the detection image.
- control unit when the control unit sets the RGB value of each pixel as each pixel value of the detection image, any one of the R value, the G value, and the B value or Two are set according to the statistic of the line data, and at least one of the R value, the G value, and the B value is set according to the degree of abnormality of the feature vector.
- control unit calculates the degree of abnormality of the feature vector using a vector different for each type of the detection target as the identification vector.
- the detection object includes at least one of a stent, a guide wire, a blood vessel wall, a calcified lesion, and a plaque.
- control unit analyzes the line data, detects the position of the blood cell region existing in the transmission direction of the ultrasonic wave, and sets the detected position as the degree of abnormality of the feature vector. Calculate the degree of anomaly of the vector excluding the corresponding element.
- control unit generates, as the detection image, a developed image in which the living tissue is cut open along the moving direction of the ultrasonic vibrator.
- the diagnostic support system as one aspect of the present disclosure includes the diagnostic support device and a probe including the ultrasonic vibrator.
- the ultrasonic vibrator transmits ultrasonic waves in a radial pattern while moving inside the living tissue
- the diagnostic support device uses the ultrasonic vibrator to transmit the ultrasonic waves to the living tissue.
- line data showing the intensity value of the reflected wave from the reflector existing in the transmission direction of the ultrasonic wave is obtained with the moving position of the ultrasonic vibrator and the transmission direction of the ultrasonic wave.
- the diagnostic support device includes pixels corresponding to the generated line data, arranges pixels corresponding to the line data at the same movement position in one direction, and corresponds to the line data in the same transmission direction.
- the pixels are arranged in the vertical direction in the one direction, and a detection image in which each pixel value is set according to the degree of abnormality of the generated line data is generated.
- FIG. 1 is a perspective view of a diagnostic support system according to an embodiment of the present disclosure.
- FIG. 2 is a perspective view of a probe and a drive unit according to an embodiment of the present disclosure.
- FIG. 3 is a diagram showing an example in which a detection image is generated from a cross-sectional image of a living tissue by the diagnostic support device according to the embodiment of the present disclosure.
- FIG. 4 is a block diagram showing a configuration of a diagnostic support device according to an embodiment of the present disclosure.
- FIG. 5 is a flowchart showing the operation of the diagnostic support system according to the embodiment of the present disclosure.
- FIG. 6 is a diagram showing an example in which a tomographic image is acquired by the diagnostic support device according to the embodiment of the present disclosure.
- FIG. 1 is a perspective view of a diagnostic support system according to an embodiment of the present disclosure.
- FIG. 2 is a perspective view of a probe and a drive unit according to an embodiment of the present disclosure.
- FIG. 3 is a diagram showing
- FIG. 7 is a diagram showing an example in which a cross-sectional image of a living tissue is converted into a developed image by the diagnostic support device according to the embodiment of the present disclosure.
- FIG. 8 is a diagram showing an example in which a line luminance distribution and a classification pattern are compared by a diagnostic support device according to an embodiment of the present disclosure.
- FIG. 9 is a diagram showing an example in which a detection image is generated by the diagnostic support device according to the embodiment of the present disclosure. It is a figure which shows the modification which compares the frequency distribution of line brightness and the classification pattern by a diagnosis support apparatus. It is a figure which shows the modification which the statistic of the brightness of a line is used by a diagnostic support apparatus. It is a figure which shows the modification which the slope of the maximum peak of the brightness distribution of a line is used by a diagnosis support device.
- the ultrasonic vibrator 25 transmits ultrasonic waves in a radial pattern while moving inside the living tissue.
- the diagnostic support device 11 refers to the result of observing the cross section of the living tissue by the ultrasonic vibrator 25, and refers to the line data L [, which indicates the intensity value of the reflected wave from the reflective object existing in the ultrasonic transmission direction ⁇ . z, ⁇ ] is generated for each combination of the moving position z of the ultrasonic transducer 25 and the ultrasonic wave transmission direction ⁇ .
- the diagnostic support device 11 includes the pixel P [z, ⁇ ] corresponding to the generated line data L [z, ⁇ ], and the pixel P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] at the same movement position z. ⁇ ] are arranged in one direction, and the pixels P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] in the same transmission direction ⁇ are arranged in the vertical direction in the one direction, and the generated line data L [z] is arranged. , ⁇ ] Generates a detection image in which each pixel value is set according to the degree of abnormality.
- the biological tissue to be observed is a blood vessel in this embodiment, but may be an organ such as the heart or other biological tissue.
- the object to be detected is a stent in this embodiment, but may be a guide wire, a blood vessel wall, a calcified lesion, a plaque, or other reflective material.
- the detection object includes at least one of a stent, a guide wire, a blood vessel wall, a calcified lesion, and a plaque.
- line data L [z, ⁇ ] data showing the intensity value distribution A [z, ⁇ ] of the reflected wave in the ultrasonic wave transmission direction ⁇ is generated.
- the cross section image 50 having the brightness value distribution corresponding to the intensity value distribution A [z, ⁇ ] is referred to.
- the cross-sectional image 50 is specifically a two-dimensional image of IVUS.
- a detection image a developed image 60 in which a living tissue is cut open along the moving direction of the ultrasonic vibrator 25 is generated.
- the developed image 60 is a color map.
- the features of the line data L [z, ⁇ ] are extracted, and the degree of abnormality of the feature vector p representing the extracted features is calculated. That is, as the degree of abnormality of the line data L [z, ⁇ ], the degree of abnormality of the feature vector p representing the feature of the line data L [z, ⁇ ] is calculated.
- the feature vector p is a vector representing the intensity value distribution A [z, ⁇ ].
- the comparison C between the feature vector p and the identification vector q for identifying the detection target is performed, and as a result of the comparison C, the degree of abnormality of the feature vector p is calculated.
- the identification vector q is a vector representing a pattern for identifying a detection target.
- the degree of abnormality of the feature vector p is the degree of similarity between the feature vector p and the identification vector q.
- the diagnostic support system 10 includes a diagnostic support device 11, a cable 12, a drive unit 13, a keyboard 14, a mouse 15, and a display 16.
- the diagnosis support device 11 is a dedicated computer specialized for image diagnosis in the present embodiment, but may be a general-purpose computer such as a PC. "PC” is an abbreviation for personal computer.
- the cable 12 is used to connect the diagnostic support device 11 and the drive unit 13.
- the drive unit 13 is a device used by connecting to the probe 20 shown in FIG. 2 to drive the probe 20.
- the drive unit 13 is also called an MDU.
- MDU is an abbreviation for motor drive unit.
- the probe 20 is applied to IVUS.
- the probe 20 is also called an IVUS catheter or a diagnostic imaging catheter.
- the keyboard 14, mouse 15, and display 16 are connected to the diagnostic support device 11 via an arbitrary cable or wirelessly.
- the display 16 is, for example, an LCD, an organic EL display, or an HMD.
- LCD is an abbreviation for liquid crystal display.
- EL is an abbreviation for electroluminescence.
- HMD is an abbreviation for head-mounted display.
- the diagnostic support system 10 further includes a connection terminal 17 and a cart unit 18 as options.
- connection terminal 17 is used to connect the diagnostic support device 11 and an external device.
- the connection terminal 17 is, for example, a USB terminal.
- USB is an abbreviation for Universal General Bus.
- the external device is, for example, a recording medium such as a magnetic disk drive, a magneto-optical disk drive, or an optical disk drive.
- the cart unit 18 is a cart with casters for movement.
- a diagnostic support device 11, a cable 12, and a drive unit 13 are installed in the cart body of the cart unit 18.
- a keyboard 14, a mouse 15, and a display 16 are installed on the table at the top of the cart unit 18.
- the probe 20 includes a drive shaft 21, a hub 22, a sheath 23, an outer tube 24, an ultrasonic oscillator 25, and a relay connector 26.
- the drive shaft 21 passes through the sheath 23 inserted into the body cavity of the living body and the outer tube 24 connected to the base end of the sheath 23, and extends to the inside of the hub 22 provided at the base end of the probe 20.
- the drive shaft 21 has an ultrasonic vibrator 25 at its tip that transmits and receives signals, and is rotatably provided in the sheath 23 and the outer tube 24.
- the relay connector 26 connects the sheath 23 and the outer pipe 24.
- the hub 22, the drive shaft 21, and the ultrasonic vibrator 25 are connected to each other so as to move forward and backward in the axial direction. Therefore, for example, when the hub 22 is pushed toward the tip side, the drive shaft 21 and the ultrasonic vibrator 25 move inside the sheath 23 toward the tip side. For example, when the hub 22 is pulled toward the proximal end side, the drive shaft 21 and the ultrasonic vibrator 25 move inside the sheath 23 toward the proximal end side as shown by arrows.
- the drive unit 13 includes a scanner unit 31, a slide unit 32, and a bottom cover 33.
- the scanner unit 31 is connected to the diagnosis support device 11 via the cable 12.
- the scanner unit 31 includes a probe connecting portion 34 that connects to the probe 20 and a scanner motor 35 that is a drive source for rotating the drive shaft 21.
- the probe connecting portion 34 is detachably connected to the probe 20 via the insertion port 36 of the hub 22 provided at the base end of the probe 20. Inside the hub 22, the base end of the drive shaft 21 is rotatably supported, and the rotational force of the scanner motor 35 is transmitted to the drive shaft 21. Further, a signal is transmitted and received between the drive shaft 21 and the diagnosis support device 11 via the cable 12. The diagnosis support device 11 generates a tomographic image of the biological lumen and performs image processing based on the signal transmitted from the drive shaft 21.
- the slide unit 32 mounts the scanner unit 31 so as to be able to move forward and backward, and is mechanically and electrically connected to the scanner unit 31.
- the slide unit 32 includes a probe clamp portion 37, a slide motor 38, and a switch group 39.
- the probe clamp portion 37 is provided coaxially with the probe connecting portion 34 on the tip side thereof, and supports the probe 20 connected to the probe connecting portion 34.
- the slide motor 38 is a drive source that generates a driving force in the axial direction.
- the scanner unit 31 moves forward and backward by driving the slide motor 38, and the drive shaft 21 moves forward and backward in the axial direction accordingly.
- the slide motor 38 is, for example, a servo motor.
- the switch group 39 includes, for example, a forward switch and a pullback switch that are pressed when the scanner unit 31 is moved forward and backward, and a scan switch that is pressed when the image drawing is started and ended. Not limited to the example here, various switches are included in the switch group 39 as needed.
- the slide motor 38 rotates in the forward direction and the scanner unit 31 moves forward.
- the pullback switch is pressed, the slide motor 38 rotates in the reverse direction, and the scanner unit 31 retracts.
- the scanner motor 35 When the scan switch is pressed, image drawing is started, the scanner motor 35 is driven, and the slide motor 38 is driven to retract the scanner unit 31.
- a user such as an operator connects the probe 20 to the scanner unit 31 in advance so that the drive shaft 21 moves to the axial base end side while rotating at the start of image drawing.
- the scanner motor 35 and the slide motor 38 stop when the scan switch is pressed again, and the image drawing ends.
- the bottom cover 33 covers the bottom surface of the slide unit 32 and the entire circumference of the side surface on the bottom surface side, and is freely close to and separated from the bottom surface of the slide unit 32.
- the center of rotation of the imaging core obtained by the diagnostic support device 11 moving in the catheter while rotating the imaging core that transmits an ultrasonic signal toward the blood vessel and detects the reflected signal.
- the detection image which is an image of a blood vessel, is reconstructed using the line data L [z, ⁇ ] extending radially from the blood vessel.
- the imaging core is composed of at least a drive shaft 21 and an ultrasonic vibrator 25.
- the diagnostic support device 11 refers to the line data L [z, ⁇ ] obtained by the rotation operation of the imaging core, and generates a reception vector including a value indicating the reflected signal intensity and a depth component. To do.
- the "depth" is the distance to the reflecting object in the transmission direction ⁇ of the ultrasonic signal.
- the diagnostic support device 11 calculates the similarity between the generated reception vector and the detection vector having a characteristic that makes it easy to identify the pattern of the reflected wave obtained when the stent is present in the transmission direction ⁇ of the ultrasonic signal.
- the diagnostic support device 11 classifies the collected data three-dimensionally using the position z of the ultrasonic vibrator 25, the transmission direction ⁇ of the ultrasonic signal, and the similarity as parameters, and displays the classification result.
- the reception vector corresponds to the feature vector p.
- the detection vector corresponds to the identification vector q.
- the degree of similarity corresponds to the degree of anomaly of the feature vector p.
- the reception vector may include the frequency of occurrence of signal strength as a component, or may include both the depth and the frequency of occurrence as a component.
- the diagnostic support device 11 maps each received vector into the polar coordinate space, projects it in the radial direction of the blood vessel, and assigns a color on the projective plane using the similarity, thereby causing the blood vessel to have a long axis.
- a developed image 60 that looks like it is cut open in a direction is generated. The color corresponds to the pixel value of the pixel P [z, ⁇ ].
- the stent design can be identified by the color in the developed image 60.
- the developed image 60 is particularly useful for evaluating the narrowing and dissociation of the side branch entrance of the bifurcation and the deformation of the stent after the side branch dilation.
- the diagnosis support device 11 includes components such as a control unit 41, a storage unit 42, a communication unit 43, an input unit 44, and an output unit 45.
- the control unit 41 is one or more processors.
- the processor is a general-purpose processor such as a CPU or GPU, or a dedicated processor specialized for a specific process.
- CPU is an abbreviation for central processing unit.
- GPU is an abbreviation for graphics processing unit.
- the control unit 41 may include one or more dedicated circuits, or the control unit 41 may replace one or more processors with one or more dedicated circuits.
- the dedicated circuit is, for example, FPGA or ASIC.
- FPGA is an abbreviation for field-programmable gate array.
- ASIC is an abbreviation for application specific integrated circuit.
- the control unit 41 executes information processing related to the operation of the diagnosis support device 11 while controlling each part of the diagnosis support system 10 including the diagnosis support device 11.
- the storage unit 42 is one or more semiconductor memories, one or more magnetic memories, one or more optical memories, or a combination of at least two of them.
- the semiconductor memory is, for example, RAM or ROM.
- RAM is an abbreviation for random access memory.
- ROM is an abbreviation for read only memory.
- the RAM is, for example, SRAM or DRAM.
- SRAM is an abbreviation for static random access memory.
- DRAM is an abbreviation for dynamic random access memory.
- the ROM is, for example, an EEPROM.
- EEPROM is an abbreviation for electrically erasable programmable read only memory.
- the storage unit 42 functions as, for example, a main storage device, an auxiliary storage device, or a cache memory.
- the storage unit 42 stores information used for the operation of the diagnosis support device 11 and information obtained by the operation of the diagnosis support device 11.
- the communication unit 43 is one or more communication interfaces.
- the communication interface is a wired LAN interface, a wireless LAN interface, or an image diagnostic interface that receives and A / D-converts IVUS signals.
- LAN is an abbreviation for local area network.
- a / D is an abbreviation for analog to digital.
- the communication unit 43 receives the information used for the operation of the diagnosis support device 11 and transmits the information obtained by the operation of the diagnosis support device 11.
- the drive unit 13 is connected to the diagnostic imaging interface included in the communication unit 43.
- the input unit 44 is one or more input interfaces.
- the input interface is, for example, a USB interface or an HDMI® interface.
- HDMI® is an abbreviation for High-Definition Multimedia Interface.
- the input unit 44 accepts an operation of inputting information used for the operation of the diagnosis support device 11.
- the keyboard 14 and the mouse 15 are connected to the USB interface included in the input unit 44, but the keyboard 14 and the mouse 15 may be connected to the wireless LAN interface included in the communication unit 43.
- the output unit 45 is one or more output interfaces.
- the output interface is, for example, a USB interface or an HDMI® interface.
- the output unit 45 outputs the information obtained by the operation of the diagnosis support device 11.
- the display 16 is connected to the HDMI (registered trademark) interface included in the output unit 45.
- the function of the diagnosis support device 11 is realized by executing the diagnosis support program according to the present embodiment on the processor included in the control unit 41. That is, the function of the diagnostic support device 11 is realized by software.
- the diagnosis support program is a program for causing a computer to execute a process of a step included in the operation of the diagnosis support device 11 so that the computer can realize a function corresponding to the process of the step. That is, the diagnosis support program is a program for making the computer function as the diagnosis support device 11.
- the program can be recorded on a computer-readable recording medium.
- a computer-readable recording medium is, for example, a magnetic recording device, an optical disk, a photomagnetic recording medium, or a semiconductor memory.
- the distribution of the program is carried out, for example, by selling, transferring, or renting a portable recording medium such as a DVD or CD-ROM in which the program is recorded.
- DVD is an abbreviation for digital versatile disc.
- CD-ROM is an abbreviation for compact disc read only memory.
- the program may be distributed by storing the program in the storage of the server and transferring the program from the server to another computer via the network.
- the program may be provided as a program product.
- the computer temporarily stores the program recorded on the portable recording medium or the program transferred from the server in the main storage device. Then, the computer reads the program stored in the main storage device by the processor, and executes the processing according to the read program by the processor.
- the computer may read the program directly from the portable recording medium and perform processing according to the program.
- the computer may sequentially execute processing according to the received program each time the program is transferred from the server to the computer.
- the process may be executed by a so-called ASP type service that realizes the function only by the execution instruction and the result acquisition without transferring the program from the server to the computer. "ASP" is an abbreviation for application service provider.
- the program includes information used for processing by a computer and equivalent to the program. For example, data that is not a direct command to a computer but has the property of defining the processing of a computer corresponds to "a program-like data".
- a part or all the functions of the diagnosis support device 11 may be realized by a dedicated circuit included in the control unit 41. That is, some or all the functions of the diagnostic support device 11 may be realized by hardware.
- the operation of the diagnostic support system 10 according to the present embodiment will be described with reference to FIG.
- the operation of the diagnosis support system 10 corresponds to the diagnosis support method according to the present embodiment.
- the probe 20 Prior to the start of the flow of FIG. 5, the probe 20 is primed by the user. After that, the probe 20 is fitted into the probe connecting portion 34 and the probe clamp portion 37 of the drive unit 13, and is connected and fixed to the drive unit 13. Then, the probe 20 is inserted to the target site in the blood vessel.
- step S1 the scan switch included in the switch group 39 is pressed, and the pullback switch included in the switch group 39 is pressed to perform a so-called pullback operation.
- the probe 20 transmits ultrasonic waves inside the blood vessel by an ultrasonic vibrator 25 that retracts in the axial direction by a pullback operation.
- the ultrasonic vibrator 25 transmits ultrasonic waves in a radial pattern while moving inside the blood vessel.
- the ultrasonic oscillator 25 receives the reflected wave of the transmitted ultrasonic wave.
- the probe 20 inputs the signal of the reflected wave received by the ultrasonic vibrator 25 to the control unit 41 of the diagnosis support device 11.
- the control unit 41 processes the input signal to sequentially generate cross-sectional images 50 of blood vessels, thereby acquiring a tomographic image including a plurality of cross-sectional images 50.
- the probe 20 is centered on rotation by the ultrasonic vibrator 25 while rotating the ultrasonic vibrator 25 in the ⁇ direction and moving it in the z direction inside the blood vessel.
- Ultrasonic waves are transmitted in the 512 direction from the outside to the outside.
- the probe 20 receives the reflected waves from the reflectors existing in each of the 512 directions inside the blood vessel by the ultrasonic vibrator 25.
- the probe 20 transmits the received reflected wave signal to the diagnostic support device 11 via the drive unit 13 and the cable 12.
- the communication unit 43 of the diagnosis support device 11 receives the signal transmitted from the probe 20.
- the communication unit 43 performs A / D conversion of the received signal.
- the communication unit 43 inputs the A / D converted signal to the control unit 41.
- the control unit 41 generates a tomographic image of IVUS by processing the input signal and sequentially generating frame data of the cross-sectional image 50 of IVUS.
- the control unit 41 stores the generated tomographic image in the storage unit 42.
- an ultrasonic vibrator that transmits ultrasonic waves in a plurality of directions without rotating is used. You may.
- the diagnostic support device 11 instead of the diagnostic support device 11 generating a tomographic image, another device generates a tomographic image, and the diagnostic support device 11 acquires the tomographic image from the other device. Good. That is, instead of the control unit 41 of the diagnostic support device 11 processing the IVUS signal to generate the cross-sectional image 50 of the blood vessel, another device processes the signal of IVUS to generate the cross-sectional image 50 of the blood vessel. , The generated cross-sectional image 50 may be input to the control unit 41.
- step S2 the control unit 41 of the diagnosis support device 11 controls to display an arbitrary cross-sectional image 50 included in the tomographic image.
- control unit 41 displays the cross-sectional image 50 of arbitrary frame data included in the tomographic image stored in the storage unit 42 on the display 16 via the output unit 45.
- step S3 the control unit 41 of the diagnostic support device 11 acquires the observation position on the cross-sectional image 50 as shown in FIG.
- step S4 the control unit 41 of the diagnostic support device 11 maps the observation position to the polar coordinate space 51 as shown in FIG.
- step S5 the control unit 41 of the diagnostic support device 11 creates the expanded images 60 for the required number of frames around the observation position.
- the control unit 41 refers to the result of observing the cross section of the blood vessel by the ultrasonic vibrator 25, and sets the line data L [z, ⁇ ] to the moving position z of the ultrasonic vibrator 25. It is generated for each combination with the ultrasonic wave transmission direction ⁇ .
- the line data L [z, ⁇ ] is data showing the intensity value distribution A [z, ⁇ ] of the reflected wave from the reflecting object existing in the transmission direction ⁇ of the ultrasonic wave.
- the control unit 41 stores the generated line data L [z, ⁇ ] in the storage unit 42.
- the control unit 41 generates a developed image 60 including pixels P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] stored in the storage unit 42.
- the pixels P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] at the same movement position z are arranged in the ⁇ direction, which is one direction, and the line data L [z, ⁇ ] in the same transmission direction ⁇ is arranged.
- This is an image in which the pixels P [z, ⁇ ] corresponding to [ ⁇ ] are arranged in the z direction, which is the direction perpendicular to the ⁇ direction.
- the developed image 60 is an image in which a blood vessel is cut open along the moving direction of the ultrasonic vibrator 25.
- the control unit 41 stores the generated developed image 60 in the storage unit 42.
- control unit 41 refers to the cross-sectional image 50 of the “# 1 frame data” shown in FIG. 6 as a result of observing the cross-section of the blood vessel by the ultrasonic vibrator 25 at the moving position 1.
- the cross-sectional image 50 of the "# 1 frame data” is a two-dimensional image having a brightness value distribution corresponding to the intensity value distribution A [1,1] to the intensity value distribution A [1,512].
- the control unit 41 analyzes the luminance value distribution of the cross-sectional image 50 of the “# 1 frame data” in the “line 1” shown in FIGS. 6 and 7 to generate the line data L [1,1].
- the line data L [1,1] is data showing the intensity value distribution A [1,1] of the reflected wave from the reflecting object existing in the ultrasonic wave transmission direction 1. Further, the control unit 41 analyzes the luminance value distribution of the cross-sectional image 50 of the “# 1 frame data” in the “line 2” shown in FIGS. 6 and 7 to generate the line data L [1, 2]. ..
- the line data L [1,2] is data showing the intensity value distribution A [1,2] of the reflected wave from the reflecting object existing in the ultrasonic wave transmission direction 2.
- control unit 41 analyzes the luminance value distribution in each of the “line 3” to “line 512” of the cross-sectional image 50 of the “# 1 frame data”, and from the line data L [1, 3] to the line data L. Generate [1,512].
- the control unit 41 refers to the cross-sectional image 50 of "# 2 frame data" shown in FIG. 6 as a result of observing the cross-section of the blood vessel by the ultrasonic vibrator 25 at the moving position 2.
- the cross-sectional image 50 of the "# 2 frame data” is a two-dimensional image having a brightness value distribution corresponding to the intensity value distribution A [2,1] to the intensity value distribution A [2,512].
- the control unit 41 analyzes the luminance value distribution in each line of the cross-sectional image 50 of the “# 2 frame data” as in the case of the cross-sectional image 50 of the “# 1 frame data”, and the line data L [2,1]. Line data L [2,512] is generated from.
- the control unit 41 refers to the cross-sectional image 50 after the “# 3 frame data” as in the case of the cross-sectional image 50 of the “# 1 frame data” and the “# 2 frame data”, and the line data L [1, Line data L [1,512] is generated from 3], and line data L [z, ⁇ ] other than line data L [2,512] is generated from line data L [2,1].
- the pixels P [1,1] to the pixels P [1,1] corresponding to the line data L [1,1] to the line data L [1,512] at the moving position 1 respectively. 512] are arranged in one vertical column. Pixels P [2,1] to pixels P [2,512] corresponding to the line data L [2,1] to the line data L [2,512] at the moving position 2 are arranged in the next column. Similarly, the pixels P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] after the moving position 3 are sequentially arranged in the adjacent column.
- the control unit 41 converts the intensity value distribution A [z, ⁇ ] into a distribution from the center of gravity of the cross section observed by the ultrasonic vibrator 25, and the line data L [z, ⁇ ].
- ⁇ data showing the distribution after conversion may be generated.
- the "cross section observed by the ultrasonic vibrator 25" is a cross section of the living tissue, but the stent is also regarded as a part of the living tissue at the place where the stent is placed.
- the control unit 41 calculates the luminance value distribution from the center of gravity of the cross section of the blood vessel with reference to the cross-sectional image 50, and uses the line data L [z, ⁇ ] as data showing the calculated luminance value distribution. May be generated.
- control unit 41 analyzes the IVUS image, detects the cross-sectional component of the blood vessel, and then displays the intensity value distribution obtained by inversely converting r ⁇ from the position of the center of gravity of the blood vessel as line data L [z, ⁇ ]. The data may be reconstructed.
- the starting point of the intensity value distribution A [z, ⁇ ] indicated by the line data L [z, ⁇ ] of each moving position z is the position of the center of gravity of the cross section from the position z of the ultrasonic vibrator 25. Therefore, the shape of the detection target can be expressed more accurately in the finally obtained detection image.
- step S6 the control unit 41 of the diagnostic support device 11 calculates the similarity between the luminance distribution 52 of each line and the classification pattern 53, which is a luminance pattern with respect to the depth, as shown in FIG.
- the control unit 41 extracts the features of the line data L [z, ⁇ ] stored in the storage unit 42, and stores the feature vector p representing the extracted features in the storage unit 42. That is, the control unit 41 stores the feature vector p representing the intensity value distribution A [z, ⁇ ] represented by the line data L [z, ⁇ ] in the storage unit 42.
- the control unit 41 features a comparison C between the feature vector p stored in the storage unit 42 and the identification vector q stored in the storage unit 42 in advance for identifying the stent existing in the ultrasonic transmission direction ⁇ . It is performed by calculating the similarity between the vector p and the identification vector q.
- the control unit 41 stores the similarity in the storage unit 42 as a result of the comparison C. That is, the control unit 41 calculates the degree of abnormality of the feature vector p as a result of the comparison C, and stores the calculated degree of abnormality in the storage unit 42.
- the control unit 41 has a degree of similarity between the luminance distribution 52 corresponding to the intensity value distribution A [1,1] shown in the line data L [1,1] and the predefined classification pattern 53 of the stent. Make a calculation. Further, the control unit 41 calculates the degree of similarity between the luminance distribution 52 corresponding to the intensity value distribution A [1,2] shown in the line data L [1,2] and the stent classification pattern 53. Similarly, the control unit 41 calculates the degree of similarity between the luminance distribution 52 corresponding to the intensity value distribution A [z, ⁇ ] shown by the other line data L [z, ⁇ ] and the stent classification pattern 53. Do.
- Cluster analysis is a method of classifying analysis targets into the closest class based on the distance in the feature space.
- Distance is an index indicating similarity, for example, cosine similarity, Euclidean distance, standardized Euclidean distance, average Euclidean distance, Mahalanobis distance, Pearson's correlation coefficient, Jaccard coefficient, or deviation pattern similarity.
- Cosine similarity is an index showing the closeness of angles between vectors.
- the Euclidean distance is an index showing the closeness of the distance between vectors.
- Mahalanobis distance is a distributed and normalized distance. In the cluster analysis, the classification is performed so as to minimize the distance between the input pattern and the representative pattern of each class, but in the present embodiment, the distance is used for creating the color map.
- a different classification pattern 53 may be used for each type of detection object such as a stent, a guide wire, a blood vessel wall, a calcified lesion, and a plaque. That is, the control unit 41 may calculate the degree of abnormality of the feature vector p by using a vector different for each type of the detection target as the identification vector q.
- the degree of similarity changes depending on the type of the detection target, so that the detection target can be color-coded and displayed for each type in the finally obtained detection image.
- the control unit 41 analyzes the line data L [z, ⁇ ], detects the position of the blood cell region existing in the ultrasonic transmission direction ⁇ , and determines the degree of abnormality of the feature vector p. As a result, the degree of anomaly of the vector excluding the element corresponding to the detected position may be calculated.
- the control unit 41 analyzes the line data L [z, ⁇ ], detects a region where the fluctuation of the intensity value from the neighboring data becomes larger than a certain threshold value, and suppresses the data located inside the region. Or may be excluded from the calculation.
- the control unit 41 analyzes the line data L [z, ⁇ ], detects a region where the intensity value is higher than a certain threshold value, suppresses the data located inside the region, or is a calculation target. May be excluded from.
- step S7 the control unit 41 of the diagnostic support device 11 controls to assign a color to the developed image 60 based on the similarity of each line and display it as a color map, as shown in FIG.
- the control unit 41 sets each pixel value of the developed image 60 stored in the storage unit 42 according to the result of the comparison C stored in the storage unit 42. That is, the control unit 41 sets each pixel value of the developed image 60 to a value corresponding to the degree of similarity between the feature vector p and the identification vector q.
- the pixel P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] including the line data L [z, ⁇ ] is included in the pixel P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] at the same movement position z in the ⁇ direction.
- Each pixel value is a color in the present embodiment, more specifically an RGB value, but may be a luminance, a combination of color and luminance, or other pixel values.
- the control unit 41 displays the obtained detection image on the display 16 via the output unit 45. In the example of FIG. 9, in the control unit 41, the higher the cosine similarity between the feature vector p and the identification vector q, which corresponds to the degree of abnormality of the feature vector p, the greater the pixel intensity corresponding to the pixel value of the corresponding pixel.
- Each pixel value of the developed image 60 is set so as to be.
- the control unit 41 calculates the degree of abnormality of the feature vector p using at least two different vectors as the identification vector q, and sets each pixel P [as each pixel value of the detection image.
- the RGB values of [z, ⁇ ] at least two of the R value, the G value, and the B value may be set according to the degree of abnormality calculated using vectors different from each other.
- the control unit 41 sets any one or two of the R value, the G value, and the B value when setting the RGB value of each pixel P [z, ⁇ ] as each pixel value of the detection image.
- the control unit 41 sets the G value according to the cosine similarity corresponding to the anomaly degree of the feature vector p, and sets the R value to a constant value corresponding to the statistic of the line data L [z, ⁇ ].
- the G value according to the cosine similarity corresponding to the anomaly degree of the feature vector p
- the R value sets the R value to a constant value corresponding to the statistic of the line data L [z, ⁇ ].
- the B value set according to the ratio of the luminance value above a certain threshold to the line, which corresponds to another statistic of the line data L [z, ⁇ ]. You may.
- the line statistics are utilized. , R value, G value, and B value can be set to the values corresponding to the stent. Therefore, the detection target can be more accurately color-coded and displayed in the finally obtained detection image.
- control unit 41 may accept an operation of selecting a position to be displayed by the user in the detection image via the input unit 44. In that case, the control unit 41 displays the detection image centered on the selected position on the display 16 via the output unit 45.
- control unit 41 may accept an operation of selecting a display range in the z direction via the input unit 44. In that case, the control unit 41 generates a detection image in the selected display range, and displays the generated detection image on the display 16 via the output unit 45.
- the display range is selected by a combination of a position in the z direction and a size in the z direction with respect to the position.
- the control unit 41 of the diagnostic support device 11 observes the cross section of the biological tissue by the ultrasonic vibrator 25 that transmits ultrasonic waves in a radial pattern while moving inside the biological tissue.
- the line data L [z, ⁇ ] indicating the intensity value of the reflected wave from the reflecting object existing in the ultrasonic wave transmission direction ⁇ is transmitted to the moving position z of the ultrasonic vibrator 25 and the ultrasonic wave. It is generated for each combination with the direction ⁇ .
- the control unit 41 includes the pixel P [z, ⁇ ] corresponding to the generated line data L [z, ⁇ ], and the pixel P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] at the same movement position z. ] Are arranged in one direction, and the pixels P [z, ⁇ ] corresponding to the line data L [z, ⁇ ] in the same transmission direction ⁇ are arranged in the vertical direction in the one direction, and the generated line data L [z, ⁇ ] is arranged. A detection image in which each pixel value is set according to the degree of abnormality of ⁇ ] is generated.
- the control unit 41 is line data composed of a plurality of luminance values arranged in the radial direction from the rotation center for each rotation angle based on the data obtained during the rotation and movement of the imaging core. Is derived.
- the control unit 41 classifies the pattern of the line data L [z, ⁇ ] and uses the classification result.
- the control unit 41 displays the calculated two-dimensional image data.
- the similarity between the vector for identifying the composition of blood vessels or the stent and the vector consisting of the line data is obtained, and the numerical value indicating the similarity is a pixel value such as brightness.
- the composition pattern in the blood vessel can be visualized.
- the feature vector p is a vector representing the frequency distribution F [z, ⁇ ] of the intensity of the reflected wave in the ultrasonic transmission direction ⁇ , which is obtained from the intensity value distribution A [z, ⁇ ]. But it may be.
- step S6 of this modification the control unit 41 of the diagnostic support device 11 determines the degree of similarity between the frequency distribution 54 of the brightness of each line and the classification pattern 55 which is a pattern of the frequency with respect to the brightness. calculate.
- control unit 41 converts the luminance distribution 52 corresponding to the intensity value distribution A [1,1] shown in the line data L [1,1] into the luminance frequency distribution 54, and the frequency distribution 54 and the frequency distribution 54 in advance.
- the similarity with the defined stent classification pattern 55 is calculated.
- control unit 41 converts the luminance distribution 52 corresponding to the intensity value distribution A [1, 2] shown in the line data L [1, 2] into the luminance frequency distribution 54, and the frequency distribution 54 and the stent.
- the degree of similarity with the classification pattern 55 of is calculated.
- control unit 41 converts the luminance distribution 52 corresponding to the intensity value distribution A [z, ⁇ ] represented by the other line data L [z, ⁇ ] into the luminance frequency distribution 54, and the frequency distribution 54 And the similarity with the stent classification pattern 55 is calculated.
- the feature vector p may be a vector representing a change in the intensity value distribution A [z, ⁇ ] due to a difference in the moving position z of the ultrasonic vibrator 25.
- step S6 of this modification the control unit 41 of the diagnostic support device 11 has a degree of similarity between the distribution of the amount of change in the brightness of each line between the cross-sectional images 50 and the classification pattern which is the pattern of the amount of change in the brightness with respect to the depth. To calculate.
- the control unit 41 has a luminance distribution 52 corresponding to the intensity value distribution A [1,1] shown by the line data L [1,1] and an intensity value distribution A represented by the line data L [2,1].
- the change amount distribution of the brightness is calculated by taking the difference from the brightness distribution 52 corresponding to [2,1], and the degree of similarity between the change amount distribution and the predefined classification pattern of the stent is calculated.
- the control unit 41 has a luminance distribution 52 corresponding to the intensity value distribution A [2,1] shown by the line data L [2,1] and an intensity value distribution A shown by the line data L [3,1].
- the change amount distribution of the brightness is calculated by taking the difference from the brightness distribution 52 corresponding to [3,1], and the degree of similarity between the change amount distribution and the predefined classification pattern of the stent is calculated.
- the control unit 41 calculates the change amount distribution of the luminance by taking the difference between the intensity value distributions A [z, ⁇ ] indicated by the other line data L [z, ⁇ ] in the time direction, and calculates the change.
- the similarity between the quantity distribution and the stent classification pattern is calculated.
- the vector representing the change in the intensity value distribution A [z, ⁇ ] due to the difference in the moving position z of the ultrasonic vibrator 25 is the intensity value distribution A [due to the difference in the moving position z of the ultrasonic vibrator 25.
- This is an example of a vector calculated using the change of [z, ⁇ ].
- the feature vector p uses the change in the intensity value distribution A [z, ⁇ ] due to the difference in the moving position z of the ultrasonic transducer 25 as it is, but instead uses the ultrasonic wave as a pretreatment.
- the data may be such that noise is removed by filtering so that the change in the intensity value distribution A [z, ⁇ ] due to the difference in the moving position z of the vibrator 25 becomes small.
- the feature vector p may be a vector representing a change in the intensity value distribution A [z, ⁇ ] due to a difference in the ultrasonic wave transmission direction ⁇ .
- step S6 of this modification the control unit 41 of the diagnostic support device 11 determines the distribution of the amount of change in the brightness of each line and the adjacent lines, and the classification pattern which is the pattern of the amount of change in the brightness with respect to the depth. Calculate the similarity of.
- the control unit 41 has a luminance distribution 52 corresponding to the intensity value distribution A [1,1] shown by the line data L [1,1] and an intensity value distribution A shown by the line data L [1,1].
- the change amount distribution of the brightness is calculated by taking the difference from the brightness distribution 52 corresponding to [1 and 2], and the degree of similarity between the change amount distribution and the predefined classification pattern of the stent is calculated.
- the control unit 41 has a luminance distribution 52 corresponding to the intensity value distribution A [1, 2] shown by the line data L [1, 2] and an intensity value distribution A shown by the line data L [1, 3].
- the change amount distribution of the brightness is calculated by taking the difference from the brightness distribution 52 corresponding to [1,3], and the degree of similarity between the change amount distribution and the predefined classification pattern of the stent is calculated.
- the control unit 41 calculates the change amount distribution of the luminance by taking the difference between the intensity value distributions A [z, ⁇ ] indicated by the other line data L [z, ⁇ ] in the spatial direction, and calculates the change. Calculate the similarity between the quantity distribution and the stent classification pattern.
- the vector representing the change in the intensity value distribution A [z, ⁇ ] due to the difference in the transmission direction ⁇ of the ultrasonic oscillator 25 is the intensity value distribution A [due to the difference in the transmission direction ⁇ of the ultrasonic oscillator 25.
- This is an example of a vector calculated using the change of [z, ⁇ ].
- the feature vector p uses the change in the intensity value distribution A [z, ⁇ ] due to the difference in the transmission direction ⁇ of the ultrasonic transducer 25 as it is, but instead uses the ultrasonic wave as a pretreatment.
- the data may be data in which noise is removed by filtering so that the change in the intensity value distribution A [z, ⁇ ] due to the difference in the transmission direction ⁇ of the oscillator 25 becomes small.
- control unit 41 performs abnormality detection based on the distance between the data, so that the data behaves differently from other data, that is, other data. Data that is not similar to the data is detected as an abnormal value, and the difference in distance between the data is expressed in color.
- control unit 41 extracts the features related to the identification target from the line data L [z, ⁇ ] and generates the feature vector p.
- Image quality adjustment was performed to improve the visibility of the identification target from the method (6) of calculating the distribution of (1), (2), (3), or (4) from which blood cell noise was removed (6).
- control unit 41 calculates the degree of abnormality of the feature vector p with respect to the identification target using the identification vector q.
- a method for generating the identification vector q for example, there are the following methods. -A method of holding the identification vector q as a fixed pattern for each identification target-A method of generating the identification vector q using the "depth" or "intensity value" selected by the user.
- abnormal that is, the degree of abnormality indicating the identification target is calculated. If the feature vector p does not resemble the stent's identification vector q, an "abnormality", i.e., a degree of anomaly indicating non-discrimination is calculated.
- control unit 41 assigns the degree of abnormality of the line data L [z, ⁇ ] to each pixel of the color map.
- the identification target is not limited to the stent, but may be another cluster such as a guide wire, a blood vessel wall, a calcified lesion, or a plaque. Abnormalities for multiple clusters may be used together.
- the brightness feature of the image may be used together.
- a line containing a stent has many high-brightness components, so the ratio of the high-brightness region to the entire line may be used.
- the ratio of the brightness value equal to or higher than the threshold value may be used.
- This threshold value may be a fixed value, a user input value, or a statistical value such as the mode value, the average value, or the variance of the line data L [z, ⁇ ].
- Image statistics may be used together.
- the dispersion in the high luminance region of the line or the slope of the approximate curve of the luminance distribution 52 of the line may be used.
- the luminance variance in the region of interest above the threshold value may be used.
- This threshold value may be a fixed value, a user input value, or a value calculated from statistical features such as the mode, mean, or variance of the line data L [z, ⁇ ].
- an approximate curve may be obtained for the luminance distribution, and the slope of the curve passing through the maximum peak may be used.
- the R value of each pixel of the detection image may be set according to the dispersion in the high-luminance region
- the G value may be set according to the degree of abnormality with respect to the stent
- the B value may be set according to the ratio of the high-luminance region.
- At least two of the R value, G value, and B value of each pixel of the detection image are set according to the degree of abnormality with respect to the stent, and the above-mentioned (1) and each are set.
- Different feature extraction methods such as (2) may be applied.
- the present disclosure is not limited to the above-described embodiment.
- a plurality of blocks described in the block diagram may be integrated, or one block may be divided.
- they may be executed in parallel or in a different order according to the processing capacity of the device that executes each step, or as necessary.
- Other changes are possible without departing from the spirit of this disclosure.
- Diagnostic support system 11 Diagnostic support device 12 Cable 13 Drive unit 14 Keyboard 15 Mouse 16 Display 17 Connection terminal 18 Cart unit 20 Probe 21 Drive shaft 22 Hub 23 Sheath 24 Outer tube 25 Ultrasonic transducer 26 Relay connector 31 Scanner unit 32 Slide Unit 33 Bottom cover 34 Probe connection 35 Scanner motor 36 Outlet 37 Probe clamp 38 Slide motor 39 Switch group 41 Control 42 Storage 43 Communication 44 Input 45 Output 50 Cross-sectional image 51 Polar coordinate space 52 Brightness distribution 53 Classification pattern 54 Frequency distribution 55 Classification pattern 60 Detection image
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Vascular Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Gynecology & Obstetrics (AREA)
- Cardiology (AREA)
- Physiology (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
診断支援装置は、生体組織の内部を移動しながら放射線状に超音波を送信する超音波振動子により生体組織の断面が観察された結果を参照して、超音波の送信方向に存在する反射物からの反射波の強度値を示すラインデータを、超音波振動子の移動位置と超音波の送信方向との組み合わせごとに生成し、生成したラインデータに対応する画素を含み、同じ移動位置のラインデータに対応する画素を一方向に配列し、同じ送信方向のラインデータに対応する画素を当該一方向の垂直方向に配列し、生成したラインデータの異常度に応じて各画素値を設定した検出用画像を生成する制御部を備える。
Description
本開示は、診断支援装置、診断支援システム、及び診断支援方法に関する。
特許文献1には、光の送受信を行うイメージングコアを先端部に回転自在に、且つ軸方向に移動自在に収容したカテーテルを用いて血管内腔の画像を取得するOFDI又はOCTに関する技術が開示されている。「OFDI」は、optical frequency domain imagingの略語である。「OCT」は、optical coherence tomographyの略語である。
特許文献1:国際公開第2014/115182号
分岐部病変のステント治療においてOFDIは、分岐部の側枝入口部の狭小化及び解離、並びに側枝拡張後のステントの変形の評価に有用である。主枝へのシングルステンティングで、クロスオーバーした側枝入口部のステントストラットをバルーンで拡張する場合、側枝へ挿入するガイドワイヤは入口部の遠位側から通過させるほうが、ステントの変形、及びストラットの遺残を減少させることができる。OFDIでは、血管、ステント、及びガイドワイヤの3次元画像を構築することができる機能により、ガイドワイヤが適切にこの遠位部を通過しているか確認できる。この機能によりOFDIは、分岐部病変のステント治療において、入口部の血管内腔の解剖学的情報、側枝ワイヤの走行、及び後拡張によるステントストラットの変形の理解に極めて有用となっている。
ステント治療においては、超音波の送受信を行うイメージングコアを先端部に回転自在に、且つ軸方向に移動自在に収容したカテーテルを用いて血管内腔の画像を取得するIVUSも広く用いられている。「IVUS」は、intravascular ultrasoundの略語である。
OFDIでは血管内の血球が障害となるため、血球を除去するために、造影剤などで血管内をフラッシュする必要がある。一方、IVUSでは、通常血管内をフラッシュしなくとも画像を取得可能である。血管内をフラッシュしなければ、腎臓に負担となる造影剤などの使用を抑えることができる。しかし、血球が一定以上の輝度値で画像に映ることとなるため、OFDIと同様の方法で、ガイドワイヤ及びステントストラットの状態を観察可能な画像を作成することはできない。
本開示の目的は、超音波により生体組織の断面が観察された結果から、検出対象物の状態を観察可能な画像を生成することである。
本開示の一態様としての診断支援装置は、生体組織の内部を移動しながら放射線状に超音波を送信する超音波振動子により前記生体組織の断面が観察された結果を参照して、前記超音波の送信方向に存在する反射物からの反射波の強度値を示すラインデータを、前記超音波振動子の移動位置と前記超音波の送信方向との組み合わせごとに生成し、生成したラインデータに対応する画素を含み、同じ移動位置のラインデータに対応する画素を一方向に配列し、同じ送信方向のラインデータに対応する画素を当該一方向の垂直方向に配列し、生成したラインデータの異常度に応じて各画素値を設定した検出用画像を生成する制御部を備える。
本開示の一実施形態として、前記制御部は、前記ラインデータの異常度として、前記ラインデータの特徴を表す特徴ベクトルの異常度を算出する。
本開示の一実施形態として、前記制御部は、前記ラインデータとして、前記超音波の送信方向における前記反射波の強度値分布を示すデータを生成する。
本開示の一実施形態として、前記制御部は、前記生体組織の断面が観察された結果として、前記強度値分布に相当する輝度値分布を持つ断面画像を参照する。
本開示の一実施形態として、前記制御部は、前記強度値分布を、前記超音波振動子により観察された断面の重心からの分布に変換し、前記ラインデータとして、変換後の分布を示すデータを生成する。
本開示の一実施形態として、前記特徴ベクトルは、前記強度値分布を表すベクトルである。
本開示の一実施形態として、前記特徴ベクトルは、前記強度値分布から求められる、前記超音波の送信方向における前記反射波の強度の頻度分布を表すベクトルである。
本開示の一実施形態として、前記特徴ベクトルは、前記超音波振動子の移動位置の違いによる前記強度値分布の変化を用いて算出されるベクトルである。
本開示の一実施形態として、前記特徴ベクトルは、前記超音波の送信方向の違いによる前記強度値分布の変化を用いて算出されるベクトルである。
本開示の一実施形態として、前記制御部は、前記特徴ベクトルと、検出対象物を識別するための識別ベクトルとの比較を行い、前記比較の結果として、前記特徴ベクトルの異常度を算出する。
本開示の一実施形態として、前記制御部は、前記識別ベクトルとして、少なくとも2つの異なるベクトルを用いて前記特徴ベクトルの異常度を算出し、前記検出用画像の各画素値として、各画素のRGB値を設定する際に、R値、G値、及びB値のうち少なくとも2つを、互いに異なるベクトルを用いて算出した異常度に応じて設定する。
本開示の一実施形態として、前記制御部は、前記検出用画像の各画素値として、各画素のRGB値を設定する際に、R値、G値、及びB値のうちいずれか1つ又は2つを、前記ラインデータの統計量に応じて設定し、R値、G値、及びB値のうち残りの少なくとも1つを、前記特徴ベクトルの異常度に応じて設定する。
本開示の一実施形態として、前記制御部は、前記識別ベクトルとして、前記検出対象物の種類ごとに異なるベクトルを用いて前記特徴ベクトルの異常度を算出する。
本開示の一実施形態として、前記検出対象物には、ステント、ガイドワイヤ、血管壁、石灰化病変、及びプラークのうち少なくとも1種類が含まれる。
本開示の一実施形態として、前記制御部は、前記ラインデータを分析して、前記超音波の送信方向に存在する血球領域の位置を検出し、前記特徴ベクトルの異常度として、検出した位置に対応する要素を除外したベクトルの異常度を算出する。
本開示の一実施形態として、前記制御部は、前記検出用画像として、前記生体組織を前記超音波振動子の移動方向に沿って切り開いた展開画像を生成する。
本開示の一態様としての診断支援システムは、前記診断支援装置と、前記超音波振動子を備えるプローブとを備える。
本開示の一態様としての診断支援方法では、超音波振動子が、生体組織の内部を移動しながら放射線状に超音波を送信し、診断支援装置が、前記超音波振動子により前記生体組織の断面が観察された結果を参照して、前記超音波の送信方向に存在する反射物からの反射波の強度値を示すラインデータを、前記超音波振動子の移動位置と前記超音波の送信方向との組み合わせごとに生成し、前記診断支援装置が、生成したラインデータに対応する画素を含み、同じ移動位置のラインデータに対応する画素を一方向に配列し、同じ送信方向のラインデータに対応する画素を当該一方向の垂直方向に配列し、生成したラインデータの異常度に応じて各画素値を設定した検出用画像を生成する。
本開示の一実施形態によれば、超音波により生体組織の断面が観察された結果から、検出対象物の状態を観察可能な画像を生成することができる。
[図1]本開示の一実施形態に係る診断支援システムの斜視図である。
[図2]本開示の一実施形態に係るプローブ及び駆動ユニットの斜視図である。
[図3]本開示の一実施形態に係る診断支援装置によって生体組織の断面画像から検出用画像が生成される例を示す図である。
[図4]本開示の一実施形態に係る診断支援装置の構成を示すブロック図である。
[図5]本開示の一実施形態に係る診断支援システムの動作を示すフローチャートである。
[図6]本開示の一実施形態に係る診断支援装置によって断層画像が取得される例を示す図である。
[図7]本開示の一実施形態に係る診断支援装置によって生体組織の断面画像が展開画像に変換される例を示す図である。
[図8]本開示の一実施形態に係る診断支援装置によってラインの輝度分布と分類パターンとが比較される例を示す図である。
[図9]本開示の一実施形態に係る診断支援装置によって検出用画像が生成される例を示す図である。
診断支援装置によってラインの輝度の頻度分布と分類パターンとが比較される変形例を示す図である。
診断支援装置によってラインの輝度の統計量が使用される変形例を示す図である。
診断支援装置によってラインの輝度分布の最大ピークの傾きが使用される変形例を示す図である。
[図2]本開示の一実施形態に係るプローブ及び駆動ユニットの斜視図である。
[図3]本開示の一実施形態に係る診断支援装置によって生体組織の断面画像から検出用画像が生成される例を示す図である。
[図4]本開示の一実施形態に係る診断支援装置の構成を示すブロック図である。
[図5]本開示の一実施形態に係る診断支援システムの動作を示すフローチャートである。
[図6]本開示の一実施形態に係る診断支援装置によって断層画像が取得される例を示す図である。
[図7]本開示の一実施形態に係る診断支援装置によって生体組織の断面画像が展開画像に変換される例を示す図である。
[図8]本開示の一実施形態に係る診断支援装置によってラインの輝度分布と分類パターンとが比較される例を示す図である。
[図9]本開示の一実施形態に係る診断支援装置によって検出用画像が生成される例を示す図である。
以下、本開示の一実施形態について、図を参照して説明する。
各図中、同一又は相当する部分には、同一符号を付している。本実施形態の説明において、同一又は相当する部分については、説明を適宜省略又は簡略化する。
図1、図2、及び図3を参照して、本実施形態の概要を説明する。
本実施形態では、超音波振動子25が、生体組織の内部を移動しながら放射線状に超音波を送信する。診断支援装置11が、超音波振動子25により生体組織の断面が観察された結果を参照して、超音波の送信方向θに存在する反射物からの反射波の強度値を示すラインデータL[z,θ]を、超音波振動子25の移動位置zと超音波の送信方向θとの組み合わせごとに生成する。診断支援装置11が、生成したラインデータL[z,θ]に対応する画素P[z,θ]を含み、同じ移動位置zのラインデータL[z,θ]に対応する画素P[z,θ]を一方向に配列し、同じ送信方向θのラインデータL[z,θ]に対応する画素P[z,θ]を当該一方向の垂直方向に配列し、生成したラインデータL[z,θ]の異常度に応じて各画素値を設定した検出用画像を生成する。
本実施形態によれば、超音波により生体組織の断面が観察された結果から、検出対象物の状態を観察可能な画像を生成することができる。観察対象の生体組織は、本実施形態では血管であるが、心臓などの臓器、又はその他の生体組織でもよい。検出対象物は、本実施形態ではステントであるが、ガイドワイヤ、血管壁、石灰化病変、プラーク、又はその他の反射物でもよい。例えば、検出対象物には、ステント、ガイドワイヤ、血管壁、石灰化病変、及びプラークのうち少なくとも1種類が含まれる。
本実施形態では、ラインデータL[z,θ]として、超音波の送信方向θにおける反射波の強度値分布A[z,θ]を示すデータが生成される。
本実施形態では、生体組織の断面が観察された結果として、強度値分布A[z,θ]に相当する輝度値分布を持つ断面画像50が参照される。断面画像50は、具体的には、IVUSの2次元画像である。
本実施形態では、検出用画像として、生体組織を超音波振動子25の移動方向に沿って切り開いた展開画像60が生成される。展開画像60は、具体的には、カラーマップである。
本実施形態では、ラインデータL[z,θ]の特徴が抽出され、抽出された特徴を表す特徴ベクトルpの異常度が算出される。すなわち、ラインデータL[z,θ]の異常度として、ラインデータL[z,θ]の特徴を表す特徴ベクトルpの異常度が算出される。特徴ベクトルpは、具体的には、強度値分布A[z,θ]を表すベクトルである。
本実施形態では、特徴ベクトルpと、検出対象物を識別するための識別ベクトルqとの比較Cが行われ、比較Cの結果として、特徴ベクトルpの異常度が算出される。識別ベクトルqは、具体的には、検出対象物を識別するパターンを表すベクトルである。特徴ベクトルpの異常度は、具体的には、特徴ベクトルpと識別ベクトルqとの類似度である。
図1を参照して、本実施形態に係る診断支援システム10の構成を説明する。
診断支援システム10は、診断支援装置11、ケーブル12、駆動ユニット13、キーボード14、マウス15、及びディスプレイ16を備える。
診断支援装置11は、本実施形態では画像診断に特化した専用のコンピュータであるが、PCなどの汎用のコンピュータでもよい。「PC」は、personal computerの略語である。
ケーブル12は、診断支援装置11と駆動ユニット13とを接続するために用いられる。
駆動ユニット13は、図2に示すプローブ20に接続して用いられ、プローブ20を駆動する装置である。駆動ユニット13は、MDUとも呼ばれる。「MDU」は、motor drive unitの略語である。プローブ20は、IVUSに適用される。プローブ20は、IVUSカテーテル又は画像診断用カテーテルとも呼ばれる。
キーボード14、マウス15、及びディスプレイ16は、任意のケーブルを介して、又は無線で診断支援装置11と接続される。ディスプレイ16は、例えば、LCD、有機ELディスプレイ、又はHMDである。「LCD」は、liquid crystal displayの略語である。「EL」は、electro luminescenceの略語である。「HMD」は、head-mounted displayの略語である。
診断支援システム10は、オプションとして、接続端子17及びカートユニット18をさらに備える。
接続端子17は、診断支援装置11と外部機器とを接続するために用いられる。接続端子17は、例えば、USB端子である。「USB」は、Universal Serial Busの略語である。外部機器は、例えば、磁気ディスクドライブ、光磁気ディスクドライブ、又は光ディスクドライブなどの記録媒体である。
カートユニット18は、移動用のキャスタ付きのカートである。カートユニット18のカート本体には、診断支援装置11、ケーブル12、及び駆動ユニット13が設置される。カートユニット18の最上部のテーブルには、キーボード14、マウス15、及びディスプレイ16が設置される。
図2を参照して、本実施形態に係るプローブ20及び駆動ユニット13の構成を説明する。
プローブ20は、駆動シャフト21、ハブ22、シース23、外管24、超音波振動子25、及び中継コネクタ26を備える。
駆動シャフト21は、生体の体腔内に挿入されるシース23と、シース23の基端に接続した外管24とを通り、プローブ20の基端に設けられたハブ22の内部まで延びている。駆動シャフト21は、信号を送受信する超音波振動子25を先端に有してシース23及び外管24内に回転可能に設けられる。中継コネクタ26は、シース23及び外管24を接続する。
ハブ22、駆動シャフト21、及び超音波振動子25は、それぞれが一体的に軸方向に進退移動するように互いに接続される。そのため、例えば、ハブ22が先端側に向けて押される操作がなされると、駆動シャフト21及び超音波振動子25がシース23の内部を先端側へ移動する。例えば、ハブ22が基端側に引かれる操作がなされると、駆動シャフト21及び超音波振動子25は、矢印で示すように、シース23の内部を基端側へ移動する。
駆動ユニット13は、スキャナユニット31、スライドユニット32、及びボトムカバー33を備える。
スキャナユニット31は、ケーブル12を介して診断支援装置11と接続する。スキャナユニット31は、プローブ20と接続するプローブ接続部34と、駆動シャフト21を回転させる駆動源であるスキャナモータ35とを備える。
プローブ接続部34は、プローブ20の基端に設けられたハブ22の差込口36を介して、プローブ20と着脱自在に接続する。ハブ22の内部では、駆動シャフト21の基端が回転自在に支持されており、スキャナモータ35の回転力が駆動シャフト21に伝えられる。また、ケーブル12を介して駆動シャフト21と診断支援装置11との間で信号が送受信される。診断支援装置11では、駆動シャフト21から伝わる信号に基づき、生体管腔の断層画像の生成、及び画像処理が行われる。
スライドユニット32は、スキャナユニット31を進退自在に載せており、スキャナユニット31と機械的且つ電気的に接続している。スライドユニット32は、プローブクランプ部37、スライドモータ38、及びスイッチ群39を備える。
プローブクランプ部37は、プローブ接続部34よりも先端側でこれと同軸的に配置して設けられており、プローブ接続部34に接続されるプローブ20を支持する。
スライドモータ38は、軸方向の駆動力を生じさせる駆動源である。スライドモータ38の駆動によってスキャナユニット31が進退動し、それに伴って駆動シャフト21が軸方向に進退動する。スライドモータ38は、例えば、サーボモータである。
スイッチ群39には、例えば、スキャナユニット31の進退操作の際に押されるフォワードスイッチ及びプルバックスイッチ、並びに画像描写の開始及び終了の際に押されるスキャンスイッチが含まれる。ここでの例に限定されず、必要に応じて種々のスイッチがスイッチ群39に含まれる。
フォワードスイッチが押されると、スライドモータ38が正回転し、スキャナユニット31が前進する。一方、プルバックスイッチが押されると、スライドモータ38が逆回転し、スキャナユニット31が後退する。
スキャンスイッチが押されると画像描写が開始され、スキャナモータ35が駆動するとともに、スライドモータ38が駆動してスキャナユニット31を後退させていく。術者などのユーザは、事前にプローブ20をスキャナユニット31に接続しておき、画像描写開始とともに駆動シャフト21が回転しつつ軸方向基端側に移動するようにする。スキャナモータ35及びスライドモータ38は、スキャンスイッチが再度押されると停止し、画像描写が終了する。
ボトムカバー33は、スライドユニット32の底面及び底面側の側面全周を覆っており、スライドユニット32の底面に対して近接離間自在である。
図3に示すように、IVUSの断面画像50では、血球部分があるため、OFDIと同じ手法で血管全体の把握ができない。そこで、本実施形態では、診断支援装置11が、血管に向けて超音波信号を送信しその反射信号を検出するイメージングコアを回転させながらカテーテル内を移動させることで得られる、イメージングコアの回転中心から放射線状に伸びるラインデータL[z,θ]を用いて血管の画像である検出用画像を再構成する。イメージングコアは、少なくとも駆動シャフト21及び超音波振動子25から構成される。
具体的には、診断支援装置11は、イメージングコアの回転動作で得られたラインデータL[z,θ]を参照して、反射信号強度を示す値と深度の成分とを含む受信ベクトルを生成する。「深度」とは、超音波信号の送信方向θにおける反射物までの距離のことである。診断支援装置11は、生成した受信ベクトルと、超音波信号の送信方向θにステントが存在する場合に得られる反射波のパターンを識別しやすい特性を持つ検出ベクトルとの類似度を計算する。診断支援装置11は、超音波振動子25の位置z、超音波信号の送信方向θ、及び類似度をパラメータとして使用して、3次元的に収集されたデータの分類を行い、分類結果を表示する。受信ベクトルは、特徴ベクトルpに相当する。検出ベクトルは、識別ベクトルqに相当する。類似度は、特徴ベクトルpの異常度に相当する。受信ベクトルは、信号強度の発生頻度を成分として含んでもよいし、又は深度と発生頻度との両方を成分として含んでもよい。
より具体的には、診断支援装置11は、各受信ベクトルを極座標空間へ写像して血管の径方向へ投影し、類似度を使用して投影平面上の色を割り当てることにより、血管を長軸方向で切り開いたような展開画像60を生成する。色は、画素P[z,θ]の画素値に相当する。
本実施形態によれば、展開画像60内の色によってステントデザインが識別可能である。展開画像60は、特に、分岐部の側枝入口部の狭小化及び解離、並びに側枝拡張後のステントの変形の評価に有用である。
図4を参照して、本実施形態に係る診断支援装置11の構成を説明する。
診断支援装置11は、制御部41、記憶部42、通信部43、入力部44、及び出力部45などの構成要素を備える。
制御部41は、1つ以上のプロセッサである。プロセッサは、CPU若しくはGPUなどの汎用プロセッサ、又は特定の処理に特化した専用プロセッサである。「CPU」は、central processing unitの略語である。「GPU」は、graphics processing unitの略語である。制御部41には、1つ以上の専用回路が含まれてもよいし、又は制御部41において、1つ以上のプロセッサを1つ以上の専用回路に置き換えてもよい。専用回路は、例えば、FPGA又はASICである。「FPGA」は、field-programmable gate arrayの略語である。「ASIC」は、application specific integrated circuitの略語である。制御部41は、診断支援装置11を含む診断支援システム10の各部を制御しながら、診断支援装置11の動作に関わる情報処理を実行する。
記憶部42は、1つ以上の半導体メモリ、1つ以上の磁気メモリ、1つ以上の光メモリ、又はこれらのうち少なくとも2種類の組み合わせである。半導体メモリは、例えば、RAM又はROMである。「RAM」は、random access memoryの略語である。「ROM」は、read only memoryの略語である。RAMは、例えば、SRAM又はDRAMである。「SRAM」は、static random access memoryの略語である。「DRAM」は、dynamic random access memoryの略語である。ROMは、例えば、EEPROMである。「EEPROM」は、electrically erasable programmable read only memoryの略語である。記憶部42は、例えば、主記憶装置、補助記憶装置、又はキャッシュメモリとして機能する。記憶部42には、診断支援装置11の動作に用いられる情報と、診断支援装置11の動作によって得られた情報とが記憶される。
通信部43は、1つ以上の通信用インタフェースである。通信用インタフェースは、有線LANインタフェース、無線LANインタフェース、又はIVUSの信号を受信及びA/D変換する画像診断用インタフェースである。「LAN」は、local area networkの略語である。「A/D」は、analog to digitalの略語である。通信部43は、診断支援装置11の動作に用いられる情報を受信し、また診断支援装置11の動作によって得られる情報を送信する。本実施形態では、通信部43に含まれる画像診断用インタフェースに駆動ユニット13が接続される。
入力部44は、1つ以上の入力用インタフェースである。入力用インタフェースは、例えば、USBインタフェース又はHDMI(登録商標)インタフェースである。「HDMI(登録商標)」は、High-Definition Multimedia Interfaceの略語である。入力部44は、診断支援装置11の動作に用いられる情報を入力する操作を受け付ける。本実施形態では、入力部44に含まれるUSBインタフェースにキーボード14及びマウス15が接続されるが、通信部43に含まれる無線LANインタフェースにキーボード14及びマウス15が接続されてもよい。
出力部45は、1つ以上の出力用インタフェースである。出力用インタフェースは、例えば、USBインタフェース又はHDMI(登録商標)インタフェースである。出力部45は、診断支援装置11の動作によって得られる情報を出力する。本実施形態では、出力部45に含まれるHDMI(登録商標)インタフェースにディスプレイ16が接続される。
診断支援装置11の機能は、本実施形態に係る診断支援プログラムを、制御部41に含まれるプロセッサで実行することにより実現される。すなわち、診断支援装置11の機能は、ソフトウェアにより実現される。診断支援プログラムは、診断支援装置11の動作に含まれるステップの処理をコンピュータに実行させることで、当該ステップの処理に対応する機能をコンピュータに実現させるためのプログラムである。すなわち、診断支援プログラムは、コンピュータを診断支援装置11として機能させるためのプログラムである。
プログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体は、例えば、磁気記録装置、光ディスク、光磁気記録媒体、又は半導体メモリである。プログラムの流通は、例えば、プログラムを記録したDVD又はCD-ROMなどの可搬型記録媒体を販売、譲渡、又は貸与することによって行う。「DVD」は、digital versatile discの略語である。「CD-ROM」は、compact disc read only memoryの略語である。プログラムをサーバのストレージに格納しておき、ネットワークを介して、サーバから他のコンピュータにプログラムを転送することにより、プログラムを流通させてもよい。プログラムをプログラムプロダクトとして提供してもよい。
コンピュータは、例えば、可搬型記録媒体に記録されたプログラム又はサーバから転送されたプログラムを、一旦、主記憶装置に格納する。そして、コンピュータは、主記憶装置に格納されたプログラムをプロセッサで読み取り、読み取ったプログラムに従った処理をプロセッサで実行する。コンピュータは、可搬型記録媒体から直接プログラムを読み取り、プログラムに従った処理を実行してもよい。コンピュータは、コンピュータにサーバからプログラムが転送される度に、逐次、受け取ったプログラムに従った処理を実行してもよい。サーバからコンピュータへのプログラムの転送は行わず、実行指示及び結果取得のみによって機能を実現する、いわゆるASP型のサービスによって処理を実行してもよい。「ASP」は、application service providerの略語である。プログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるものが含まれる。例えば、コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータは、「プログラムに準ずるもの」に該当する。
診断支援装置11の一部又は全ての機能が、制御部41に含まれる専用回路により実現されてもよい。すなわち、診断支援装置11の一部又は全ての機能が、ハードウェアにより実現されてもよい。
図5を参照して、本実施形態に係る診断支援システム10の動作を説明する。診断支援システム10の動作は、本実施形態に係る診断支援方法に相当する。
図5のフローの開始前に、ユーザによって、プローブ20がプライミングされる。その後、プローブ20が駆動ユニット13のプローブ接続部34及びプローブクランプ部37に嵌め込まれ、駆動ユニット13に接続及び固定される。そして、プローブ20が血管内の目的部位まで挿入される。
ステップS1において、スイッチ群39に含まれるスキャンスイッチが押され、さらにスイッチ群39に含まれるプルバックスイッチが押されることで、いわゆるプルバック操作が行われる。プローブ20は、血管の内部で、プルバック操作によって軸方向に後退する超音波振動子25により超音波を送信する。超音波振動子25は、血管の内部を移動しながら放射線状に超音波を送信する。超音波振動子25は、送信した超音波の反射波を受信する。プローブ20は、超音波振動子25により受信した反射波の信号を診断支援装置11の制御部41に入力する。制御部41は、入力された信号を処理して血管の断面画像50を順次生成することで、複数の断面画像50を含む断層画像を取得する。
具体的には、プローブ20は、図6に示すように、血管の内部で超音波振動子25をθ方向に回転させながら、且つz方向に移動させながら、超音波振動子25により、回転中心から外側に向かう512方向に超音波を送信する。プローブ20は、血管の内部で512方向のそれぞれに存在する反射物からの反射波を超音波振動子25により受信する。プローブ20は、受信した反射波の信号を、駆動ユニット13及びケーブル12を介して診断支援装置11に送信する。診断支援装置11の通信部43は、プローブ20から送信された信号を受信する。通信部43は、受信した信号をA/D変換する。通信部43は、A/D変換した信号を制御部41に入力する。制御部41は、入力された信号を処理してIVUSの断面画像50のフレームデータを順次生成することで、IVUSの断層画像を生成する。制御部41は、生成した断層画像を記憶部42に記憶する。
本実施形態の一変形例として、θ方向に回転しながら複数方向に超音波を送信する超音波振動子25の代わりに、回転することなく複数方向に超音波を送信する超音波振動子を用いてもよい。
本実施形態の一変形例として、診断支援装置11が断層画像を生成する代わりに、他の装置が断層画像を生成し、診断支援装置11はその断層画像を当該他の装置から取得してもよい。すなわち、診断支援装置11の制御部41が、IVUSの信号を処理して血管の断面画像50を生成する代わりに、他の装置が、IVUSの信号を処理して血管の断面画像50を生成し、生成した断面画像50を制御部41に入力してもよい。
ステップS2において、診断支援装置11の制御部41は、断層画像に含まれる任意の断面画像50を表示する制御を行う。
具体的には、制御部41は、記憶部42に記憶した断層画像に含まれる任意のフレームデータの断面画像50を、出力部45を介してディスプレイ16に表示させる。
ステップS3において、診断支援装置11の制御部41は、図7に示すように、断面画像50上の観察位置を取得する。
ステップS4において、診断支援装置11の制御部41は、図7に示すように、観察位置を極座標空間51へ写像する。
ステップS5において、診断支援装置11の制御部41は、観察位置を中心に必要なフレーム数分の展開画像60を作成する。
具体的には、制御部41は、超音波振動子25により血管の断面が観察された結果を参照して、ラインデータL[z,θ]を、超音波振動子25の移動位置zと超音波の送信方向θとの組み合わせごとに生成する。ラインデータL[z,θ]は、超音波の送信方向θに存在する反射物からの反射波の強度値分布A[z,θ]を示すデータである。制御部41は、生成したラインデータL[z,θ]を記憶部42に記憶する。制御部41は、記憶部42に記憶したラインデータL[z,θ]に対応する画素P[z,θ]を含む展開画像60を生成する。展開画像60は、同じ移動位置zのラインデータL[z,θ]に対応する画素P[z,θ]を一方向であるθ方向に配列し、同じ送信方向θのラインデータL[z,θ]に対応する画素P[z,θ]をθ方向の垂直方向であるz方向に配列した画像である。展開画像60は、血管を超音波振動子25の移動方向に沿って切り開いた画像である。制御部41は、生成した展開画像60を記憶部42に記憶する。
例えば、制御部41は、移動位置1で超音波振動子25により血管の断面が観察された結果として、図6に示した「#1フレームデータ」の断面画像50を参照する。「#1フレームデータ」の断面画像50は、強度値分布A[1,1]から強度値分布A[1,512]に相当する輝度値分布を持つ2次元画像である。制御部41は、「#1フレームデータ」の断面画像50の、図6及び図7に示した「ライン1」における輝度値分布を分析してラインデータL[1,1]を生成する。ラインデータL[1,1]は、超音波の送信方向1に存在する反射物からの反射波の強度値分布A[1,1]を示すデータである。また、制御部41は、「#1フレームデータ」の断面画像50の、図6及び図7に示した「ライン2」における輝度値分布を分析してラインデータL[1,2]を生成する。ラインデータL[1,2]は、超音波の送信方向2に存在する反射物からの反射波の強度値分布A[1,2]を示すデータである。同様に、制御部41は、「#1フレームデータ」の断面画像50の「ライン3」から「ライン512」のそれぞれにおける輝度値分布を分析してラインデータL[1,3]からラインデータL[1,512]を生成する。
制御部41は、移動位置2で超音波振動子25により血管の断面が観察された結果として、図6に示した「#2フレームデータ」の断面画像50を参照する。「#2フレームデータ」の断面画像50は、強度値分布A[2,1]から強度値分布A[2,512]に相当する輝度値分布を持つ2次元画像である。制御部41は、「#1フレームデータ」の断面画像50の場合と同様に、「#2フレームデータ」の断面画像50の各ラインにおける輝度値分布を分析してラインデータL[2,1]からラインデータL[2,512]を生成する。
制御部41は、「#1フレームデータ」及び「#2フレームデータ」の断面画像50の場合と同様に、「#3フレームデータ」以降の断面画像50を参照して、ラインデータL[1,3]からラインデータL[1,512]、及びラインデータL[2,1]からラインデータL[2,512]以外のラインデータL[z,θ]を生成する。
制御部41により生成される展開画像60では、移動位置1のラインデータL[1,1]からラインデータL[1,512]にそれぞれ対応する画素P[1,1]から画素P[1,512]が縦1列に配列される。移動位置2のラインデータL[2,1]からラインデータL[2,512]にそれぞれ対応する画素P[2,1]から画素P[2,512]がその隣の列に配列される。同様に、移動位置3以降のラインデータL[z,θ]に対応する画素P[z,θ]が隣の列に順次配列される。
本実施形態の一変形例として、制御部41は、強度値分布A[z,θ]を、超音波振動子25により観察された断面の重心からの分布に変換し、ラインデータL[z,θ]として、変換後の分布を示すデータを生成してもよい。「超音波振動子25により観察された断面」は、生体組織の断面であるが、ステントが留置された箇所については、ステントも生体組織の一部とみなすものとする。具体的には、制御部41は、断面画像50を参照して、血管の断面の重心からの輝度値分布を算出し、ラインデータL[z,θ]として、算出した輝度値分布を示すデータを生成してもよい。すなわち、制御部41は、IVUS画像を分析して、血管の断面成分を検出した後、ラインデータL[z,θ]として、血管の重心位置よりrθ逆変換して求めた強度値分布を示すデータを再構成してもよい。
この変形例によれば、各移動位置zのラインデータL[z,θ]で示される強度値分布A[z,θ]の始点が、超音波振動子25の位置zから、断面の重心位置に揃えられるため、最終的に得られる検出用画像で検出対象物の形状をより正確に表現することができる。
ステップS6において、診断支援装置11の制御部41は、図8に示すように、各ラインの輝度分布52と、深度に対する輝度のパターンである分類パターン53との類似度を計算する。
具体的には、制御部41は、記憶部42に記憶したラインデータL[z,θ]の特徴を抽出し、抽出した特徴を表す特徴ベクトルpを記憶部42に記憶する。すなわち、制御部41は、ラインデータL[z,θ]で示される強度値分布A[z,θ]を表す特徴ベクトルpを記憶部42に記憶する。制御部41は、記憶部42に記憶した特徴ベクトルpと、記憶部42に予め記憶された、超音波の送信方向θに存在するステントを識別するための識別ベクトルqとの比較Cを、特徴ベクトルpと識別ベクトルqとの類似度の計算によって行う。制御部41は、比較Cの結果として、類似度を記憶部42に記憶する。すなわち、制御部41は、比較Cの結果として、特徴ベクトルpの異常度を算出し、算出した異常度を記憶部42に記憶する。
例えば、制御部41は、ラインデータL[1,1]で示される強度値分布A[1,1]に相当する輝度分布52と、予め定義された、ステントの分類パターン53との類似度の計算を行う。また、制御部41は、ラインデータL[1,2]で示される強度値分布A[1,2]に相当する輝度分布52と、ステントの分類パターン53との類似度の計算を行う。同様に、制御部41は、他のラインデータL[z,θ]で示される強度値分布A[z,θ]に相当する輝度分布52と、ステントの分類パターン53との類似度の計算を行う。
類似度の計算方法としては、任意の方法が用いられてよいが、本実施形態では、クラスタ分析又は最近傍分類法のアルゴリズムが用いられる。そのようなアルゴリズムとしては、例えば、k平均法がある。クラスタ分析は、特徴空間での距離に基づいて、分析対象を最も近いクラスに分類する方法である。「距離」は、類似度を示す指標であり、例えば、コサイン類似度、ユークリッド距離、標準化ユークリッド距離、平均ユークリッド距離、マハラノビス距離、ピアソンの相関係数、Jaccard係数、又は偏差パターン類似度である。コサイン類似度は、ベクトル同士の角度の近さを示す指標である。ユークリッド距離は、ベクトル同士の距離の近さを示す指標である。マハラノビス距離は、分散で正規化した距離である。クラスタ分析では、入力パターンと各クラスの代表パターンとの距離を最小化するように分類が行われるが、本実施形態では、その距離がカラーマップ作成に使用される。
本実施形態の一変形例として、ステント、ガイドワイヤ、血管壁、石灰化病変、及びプラークなどの検出対象物の種類ごとに異なる分類パターン53が用いられてもよい。すなわち、制御部41は、識別ベクトルqとして、検出対象物の種類ごとに異なるベクトルを用いて特徴ベクトルpの異常度を算出してもよい。
この変形例によれば、検出対象物の種類によって類似度が変わるため、最終的に得られる検出用画像で検出対象物を種類ごとに色分けして表示することができる。
本実施形態の一変形例として、制御部41は、ラインデータL[z,θ]を分析して、超音波の送信方向θに存在する血球領域の位置を検出し、特徴ベクトルpの異常度として、検出した位置に対応する要素を除外したベクトルの異常度を算出してもよい。例えば、制御部41は、ラインデータL[z,θ]を分析し、近傍データからの強度値の変動がある一定の閾値より大きくなる領域を検出し、その領域より内側に位置するデータを抑制するか、又は計算対象から除外してもよい。あるいは、制御部41は、ラインデータL[z,θ]を分析し、ある一定の閾値より強度値が高くなる領域を検出し、その領域より内側に位置するデータを抑制するか、又は計算対象から除外してもよい。
この変形例によれば、血球ノイズの影響をより確実に抑えることができる。
ステップS7において、診断支援装置11の制御部41は、図9に示すように、各ラインの類似度から展開画像60に色を割り当てカラーマップとして表示する制御を行う。
具体的には、制御部41は、記憶部42に記憶した比較Cの結果に応じて、記憶部42に記憶した展開画像60の各画素値を設定する。すなわち、制御部41は、展開画像60の各画素値を、特徴ベクトルpと識別ベクトルqとの類似度に応じた値に設定する。その結果、ラインデータL[z,θ]に対応する画素P[z,θ]を含み、同じ移動位置zのラインデータL[z,θ]に対応する画素P[z,θ]をθ方向に配列し、同じ送信方向θのラインデータL[z,θ]に対応する画素P[z,θ]をz方向に配列し、比較Cの結果に応じて各画素値を設定した検出用画像が得られる。各画素値は、本実施形態では色であり、より具体的にはRGB値であるが、輝度、色及び輝度の組み合わせ、又はその他の画素値でもよい。制御部41は、得られた検出用画像を、出力部45を介してディスプレイ16に表示させる。図9の例では、制御部41は、特徴ベクトルpの異常度に相当する、特徴ベクトルpと識別ベクトルqとのコサイン類似度が高いほど、対応する画素の画素値に相当する画素強度が大きくなるように展開画像60の各画素値を設定する。
本実施形態の一変形例として、制御部41は、識別ベクトルqとして、少なくとも2つの異なるベクトルを用いて特徴ベクトルpの異常度を算出し、検出用画像の各画素値として、各画素P[z,θ]のRGB値を設定する際に、R値、G値、及びB値のうち少なくとも2つを、互いに異なるベクトルを用いて算出した異常度に応じて設定してもよい。あるいは、制御部41は、検出用画像の各画素値として、各画素P[z,θ]のRGB値を設定する際に、R値、G値、及びB値のうちいずれか1つ又は2つを、ラインデータL[z,θ]の統計量に応じて設定し、R値、G値、及びB値のうち残りの少なくとも1つを、特徴ベクトルpの異常度に応じて設定してもよい。例えば、制御部41は、G値を、特徴ベクトルpの異常度に相当するコサイン類似度に応じて設定し、R値を、ラインデータL[z,θ]の統計量に相当する、一定の閾値以上の輝度値の標準偏差に応じて設定し、B値を、ラインデータL[z,θ]の別の統計量に相当する、一定閾値以上の輝度値がラインに占める割合に応じて設定してもよい。
この変形例によれば、例えば、ステントが実際に存在するラインの輝度分布52と、ステントを検出するための分類パターン53とのコサイン類似度が小さかったとしても、ラインの統計量を活用して、R値、G値、及びB値のうち少なくともいずれかをステントに対応する値に設定することができる。よって、最終的に得られる検出用画像で検出対象物をより正確に色分けして表示することができる。
本実施形態の一変形例として、制御部41は、入力部44を介して、検出用画像の中でユーザが表示したい位置を選択する操作を受け付けてもよい。その場合、制御部41は、選択された位置を中心とした検出用画像を、出力部45を介してディスプレイ16に表示させる。あるいは、制御部41は、入力部44を介して、z方向における表示範囲を選択する操作を受け付けてもよい。その場合、制御部41は、選択された表示範囲の検出用画像を生成し、生成した検出用画像を、出力部45を介してディスプレイ16に表示させる。表示範囲は、z方向における位置と、その位置を基準とした、z方向における大きさとの組み合わせによって選択される。
上述のように、本実施形態では、診断支援装置11の制御部41は、生体組織の内部を移動しながら放射線状に超音波を送信する超音波振動子25により生体組織の断面が観察された結果を参照して、超音波の送信方向θに存在する反射物からの反射波の強度値を示すラインデータL[z,θ]を、超音波振動子25の移動位置zと超音波の送信方向θとの組み合わせごとに生成する。制御部41は、生成したラインデータL[z,θ]に対応する画素P[z,θ]を含み、同じ移動位置zのラインデータL[z,θ]に対応する画素P[z,θ]を一方向に配列し、同じ送信方向θのラインデータL[z,θ]に対応する画素P[z,θ]を当該一方向の垂直方向に配列し、生成したラインデータL[z,θ]の異常度に応じて各画素値を設定した検出用画像を生成する。
本実施形態によれば、超音波により生体組織の断面が観察された結果から、検出対象物の状態を観察可能な画像を生成することができる。
本実施形態では、制御部41は、イメージングコアの回転及び移動を行っている期間に得られたデータに基づき、回転角度ごとの回転中心から半径方向に並ぶ複数の輝度値で構成されるラインデータを導出する。プローブ20の回転角度θ、イメージングコアの移動位置zにおけるラインデータをL[z,θ]と定義したとき、制御部41は、ラインデータL[z,θ]のパターンを分類し、分類結果から画素P[z,θ]を算出することで、z及びθを2軸とする2次元画像データを算出する。制御部41は、算出した2次元画像データを表示する。
本実施形態によれば、全てのラインについて、血管の組成又はステントを識別するためのベクトルと、ラインのデータからなるベクトルとの類似度を求め、その類似度を示す数値を輝度などの画素値として表示することにより、血管内の組成パターンを可視化できる。
本実施形態の一変形例として、特徴ベクトルpは、強度値分布A[z,θ]から求められる、超音波の送信方向θにおける反射波の強度の頻度分布F[z,θ]を表すベクトルでもよい。
この変形例のステップS6では、診断支援装置11の制御部41は、図10に示すように、各ラインの輝度の頻度分布54と、輝度に対する頻度のパターンである分類パターン55との類似度を計算する。
例えば、制御部41は、ラインデータL[1,1]で示される強度値分布A[1,1]に相当する輝度分布52を輝度の頻度分布54に変換し、その頻度分布54と、予め定義された、ステントの分類パターン55との類似度の計算を行う。また、制御部41は、ラインデータL[1,2]で示される強度値分布A[1,2]に相当する輝度分布52を輝度の頻度分布54に変換し、その頻度分布54と、ステントの分類パターン55との類似度の計算を行う。同様に、制御部41は、他のラインデータL[z,θ]で示される強度値分布A[z,θ]に相当する輝度分布52を輝度の頻度分布54に変換し、その頻度分布54と、ステントの分類パターン55との類似度の計算を行う。
本実施形態の一変形例として、特徴ベクトルpは、超音波振動子25の移動位置zの違いによる強度値分布A[z,θ]の変化を表すベクトルでもよい。
この変形例のステップS6では、診断支援装置11の制御部41は、断面画像50間での各ラインの輝度の変化量分布と、深度に対する輝度の変化量のパターンである分類パターンとの類似度を計算する。
例えば、制御部41は、ラインデータL[1,1]で示される強度値分布A[1,1]に相当する輝度分布52と、ラインデータL[2,1]で示される強度値分布A[2,1]に相当する輝度分布52との差を取って輝度の変化量分布を算出し、その変化量分布と、予め定義された、ステントの分類パターンとの類似度の計算を行う。また、制御部41は、ラインデータL[2,1]で示される強度値分布A[2,1]に相当する輝度分布52と、ラインデータL[3,1]で示される強度値分布A[3,1]に相当する輝度分布52との差を取って輝度の変化量分布を算出し、その変化量分布と、予め定義された、ステントの分類パターンとの類似度の計算を行う。同様に、制御部41は、他のラインデータL[z,θ]で示される強度値分布A[z,θ]間の差を時間方向で取って輝度の変化量分布を算出し、その変化量分布と、ステントの分類パターンとの類似度の計算を行う。
この変形例における、超音波振動子25の移動位置zの違いによる強度値分布A[z,θ]の変化を表すベクトルは、超音波振動子25の移動位置zの違いによる強度値分布A[z,θ]の変化を用いて算出されるベクトルの一例である。そのようなベクトルの別の例として、特徴ベクトルpは、超音波振動子25の移動位置zの違いによる強度値分布A[z,θ]の変化をそのまま用いる代わりに、前処理として、超音波振動子25の移動位置zの違いによる強度値分布A[z,θ]の変化が小さくなるようフィルタ処理を行ってノイズを除去したデータであってもよい。
本実施形態の一変形例として、特徴ベクトルpは、超音波の送信方向θの違いによる強度値分布A[z,θ]の変化を表すベクトルでもよい。
この変形例のステップS6では、診断支援装置11の制御部41は、各ライン及び隣接するライン間での各ラインの輝度の変化量分布と、深度に対する輝度の変化量のパターンである分類パターンとの類似度を計算する。
例えば、制御部41は、ラインデータL[1,1]で示される強度値分布A[1,1]に相当する輝度分布52と、ラインデータL[1,2]で示される強度値分布A[1,2]に相当する輝度分布52との差を取って輝度の変化量分布を算出し、その変化量分布と、予め定義された、ステントの分類パターンとの類似度の計算を行う。また、制御部41は、ラインデータL[1,2]で示される強度値分布A[1,2]に相当する輝度分布52と、ラインデータL[1,3]で示される強度値分布A[1,3]に相当する輝度分布52との差を取って輝度の変化量分布を算出し、その変化量分布と、予め定義された、ステントの分類パターンとの類似度の計算を行う。同様に、制御部41は、他のラインデータL[z,θ]で示される強度値分布A[z,θ]間の差を空間方向で取って輝度の変化量分布を算出し、その変化量分布と、ステントの分類パターンとの類似度の計算を行う。
この変形例における、超音波振動子25の送信方向θの違いによる強度値分布A[z,θ]の変化を表すベクトルは、超音波振動子25の送信方向θの違いによる強度値分布A[z,θ]の変化を用いて算出されるベクトルの一例である。そのようなベクトルの別の例として、特徴ベクトルpは、超音波振動子25の送信方向θの違いによる強度値分布A[z,θ]の変化をそのまま用いる代わりに、前処理として、超音波振動子25の送信方向θの違いによる強度値分布A[z,θ]の変化が小さくなるようフィルタ処理を行ってノイズを除去したデータであってもよい。
上述のように、本実施形態及び各変形例に共通する原理として、制御部41は、データ間の距離に基づく異常検出を行うことで、他のデータとは振る舞いが異なるデータ、すなわち、他のデータとは似ていないデータを異常値として検出し、データ間の距離の違いを色で表現する。
第1ステップとして、制御部41は、ラインデータL[z,θ]から識別対象に関連する特徴を抽出し、特徴ベクトルpを生成する。
ラインデータL[z,θ]からの特徴抽出方法としては、例えば以下の方法がある。
(1)深度に対する強度値の分布、具体的には、各ラインの輝度分布52を算出する方法
(2)頻度に対する強度値の分布、具体的には、各ラインの輝度の頻度分布54を算出する方法
(3)時間方向の隣接情報との変化量から求めた(1)又は(2)の分布、具体的には、断面画像50間での各ラインの輝度の変化量分布を算出する方法
(4)空間方向の隣接情報との変化量から求めた(1)又は(2)の分布、具体的には、各ライン及び隣接するライン間での各ラインの輝度の変化量分布を算出する方法
(5)血球ノイズを除去した(1)、(2)、(3)、又は(4)の分布を算出する方法
(6)より識別対象の視認性を向上させるよう画質調整を行った(1)、(2)、(3)、(4)、又は(5)の分布を算出する方法
(1)深度に対する強度値の分布、具体的には、各ラインの輝度分布52を算出する方法
(2)頻度に対する強度値の分布、具体的には、各ラインの輝度の頻度分布54を算出する方法
(3)時間方向の隣接情報との変化量から求めた(1)又は(2)の分布、具体的には、断面画像50間での各ラインの輝度の変化量分布を算出する方法
(4)空間方向の隣接情報との変化量から求めた(1)又は(2)の分布、具体的には、各ライン及び隣接するライン間での各ラインの輝度の変化量分布を算出する方法
(5)血球ノイズを除去した(1)、(2)、(3)、又は(4)の分布を算出する方法
(6)より識別対象の視認性を向上させるよう画質調整を行った(1)、(2)、(3)、(4)、又は(5)の分布を算出する方法
第2ステップとして、制御部41は、識別ベクトルqを用いて、識別対象に対する特徴ベクトルpの異常度を計算する。
識別ベクトルqの生成方法としては、例えば以下の方法がある。
・識別対象ごとの固定パターンとして識別ベクトルqを保持する方法
・ユーザが選択した「深度」又は「強度値」を使用して識別ベクトルqを生成する方法
・識別対象ごとの固定パターンとして識別ベクトルqを保持する方法
・ユーザが選択した「深度」又は「強度値」を使用して識別ベクトルqを生成する方法
特徴ベクトルpがステントの識別ベクトルqと似ている場合、「正常」、すなわち、識別対象を示す異常度が算出される。特徴ベクトルpがステントの識別ベクトルqと似ていない場合、「異常」、すなわち、識別対象外を示す異常度が算出される。
第3ステップとして、制御部41は、ラインデータL[z,θ]の異常度をカラーマップの各画素に割り当てる。
図9に示したように、「正常」、すなわち、識別対象を示す異常度が算出された場合、画素強度が大きく設定され、表示が強調される。「異常」、すなわち、識別対象外を示す異常度が算出された場合、画素強度が小さく設定され、表示が抑制される。
識別対象は、ステントに限らず、ガイドワイヤ、血管壁、石灰化病変、又はプラークなどの他のクラスタでもよい。複数のクラスタに対する異常度が併用されてもよい。
画像の輝度特徴が併用されてもよい。例えば、ステントが含まれるラインは高輝度の成分が多くなるため、ライン全体に対する高輝度領域の比率を使ってもよい。各ラインの輝度の頻度分布について、閾値以上の輝度値が占める割合を使用してもよい。この閾値は、固定値でもよいし、ユーザ入力値でもよいし、又はラインデータL[z,θ]の最頻値、平均値、若しくは分散などの統計値でもよい。
画像の統計量が併用されてもよい。例えば、ステント及びガイドワイヤは輝度ピークからの減衰に違いがあるため、ラインの高輝度領域の分散、又はラインの輝度分布52の近似曲線の傾きを使ってもよい。図11に示すように、輝度の頻度分布について、閾値以上の注目領域における輝度分散を使用してもよい。この閾値は、固定値でもよいし、ユーザ入力値でもよいし、又はラインデータL[z,θ]の最頻値、平均値、若しくは分散などの統計的特徴から計算された値でもよい。図12に示すように、輝度分布について近似曲線を求め、最大ピークを通る曲線の傾きを使用してもよい。
本実施形態の一変形例として、検出用画像の各画素のR値を高輝度領域の分散、G値をステントに対する異常度、B値を高輝度領域の比率に応じて設定してもよい。
本実施形態の一変形例として、検出用画像の各画素のR値、G値、及びB値のうち少なくとも2つをステントに対する異常度に応じて設定しつつ、それぞれに上述した(1)及び(2)などの異なる特徴抽出方法を適用してもよい。
本開示は上述の実施形態に限定されるものではない。例えば、ブロック図に記載の複数のブロックを統合してもよいし、又は1つのブロックを分割してもよい。フローチャートに記載の複数のステップを記述に従って時系列に実行する代わりに、各ステップを実行する装置の処理能力に応じて、又は必要に応じて、並列的に又は異なる順序で実行してもよい。その他、本開示の趣旨を逸脱しない範囲での変更が可能である。
10 診断支援システム
11 診断支援装置
12 ケーブル
13 駆動ユニット
14 キーボード
15 マウス
16 ディスプレイ
17 接続端子
18 カートユニット
20 プローブ
21 駆動シャフト
22 ハブ
23 シース
24 外管
25 超音波振動子
26 中継コネクタ
31 スキャナユニット
32 スライドユニット
33 ボトムカバー
34 プローブ接続部
35 スキャナモータ
36 差込口
37 プローブクランプ部
38 スライドモータ
39 スイッチ群
41 制御部
42 記憶部
43 通信部
44 入力部
45 出力部
50 断面画像
51 極座標空間
52 輝度分布
53 分類パターン
54 頻度分布
55 分類パターン
60 検出用画像
11 診断支援装置
12 ケーブル
13 駆動ユニット
14 キーボード
15 マウス
16 ディスプレイ
17 接続端子
18 カートユニット
20 プローブ
21 駆動シャフト
22 ハブ
23 シース
24 外管
25 超音波振動子
26 中継コネクタ
31 スキャナユニット
32 スライドユニット
33 ボトムカバー
34 プローブ接続部
35 スキャナモータ
36 差込口
37 プローブクランプ部
38 スライドモータ
39 スイッチ群
41 制御部
42 記憶部
43 通信部
44 入力部
45 出力部
50 断面画像
51 極座標空間
52 輝度分布
53 分類パターン
54 頻度分布
55 分類パターン
60 検出用画像
Claims (18)
- 生体組織の内部を移動しながら放射線状に超音波を送信する超音波振動子により前記生体組織の断面が観察された結果を参照して、前記超音波の送信方向に存在する反射物からの反射波の強度値を示すラインデータを、前記超音波振動子の移動位置と前記超音波の送信方向との組み合わせごとに生成し、生成したラインデータに対応する画素を含み、同じ移動位置のラインデータに対応する画素を一方向に配列し、同じ送信方向のラインデータに対応する画素を当該一方向の垂直方向に配列し、生成したラインデータの異常度に応じて各画素値を設定した検出用画像を生成する制御部を備える診断支援装置。
- 前記制御部は、前記ラインデータの異常度として、前記ラインデータの特徴を表す特徴ベクトルの異常度を算出する請求項1に記載の診断支援装置。
- 前記制御部は、前記ラインデータとして、前記超音波の送信方向における前記反射波の強度値分布を示すデータを生成する請求項2に記載の診断支援装置。
- 前記制御部は、前記生体組織の断面が観察された結果として、前記強度値分布に相当する輝度値分布を持つ断面画像を参照する請求項3に記載の診断支援装置。
- 前記制御部は、前記強度値分布を、前記超音波振動子により観察された断面の重心からの分布に変換し、前記ラインデータとして、変換後の分布を示すデータを生成する請求項3又は請求項4に記載の診断支援装置。
- 前記特徴ベクトルは、前記強度値分布を表すベクトルである請求項3から請求項5のいずれか1項に記載の診断支援装置。
- 前記特徴ベクトルは、前記強度値分布から求められる、前記超音波の送信方向における前記反射波の強度の頻度分布を表すベクトルである請求項3から請求項5のいずれか1項に記載の診断支援装置。
- 前記特徴ベクトルは、前記超音波振動子の移動位置の違いによる前記強度値分布の変化を用いて算出されるベクトルである請求項3から請求項5のいずれか1項に記載の診断支援装置。
- 前記特徴ベクトルは、前記超音波の送信方向の違いによる前記強度値分布の変化を用いて算出されるベクトルである請求項3から請求項5のいずれか1項に記載の診断支援装置。
- 前記制御部は、前記特徴ベクトルと、検出対象物を識別するための識別ベクトルとの比較を行い、前記比較の結果として、前記特徴ベクトルの異常度を算出する請求項2から請求項9のいずれか1項に記載の診断支援装置。
- 前記制御部は、前記識別ベクトルとして、少なくとも2つの異なるベクトルを用いて前記特徴ベクトルの異常度を算出し、前記検出用画像の各画素値として、各画素のRGB値を設定する際に、R値、G値、及びB値のうち少なくとも2つを、互いに異なるベクトルを用いて算出した異常度に応じて設定する請求項10に記載の診断支援装置。
- 前記制御部は、前記検出用画像の各画素値として、各画素のRGB値を設定する際に、R値、G値、及びB値のうちいずれか1つ又は2つを、前記ラインデータの統計量に応じて設定し、R値、G値、及びB値のうち残りの少なくとも1つを、前記特徴ベクトルの異常度に応じて設定する請求項10又は請求項11に記載の診断支援装置。
- 前記制御部は、前記識別ベクトルとして、前記検出対象物の種類ごとに異なるベクトルを用いて前記特徴ベクトルの異常度を算出する請求項10から請求項12のいずれか1項に記載の診断支援装置。
- 前記検出対象物には、ステント、ガイドワイヤ、血管壁、石灰化病変、及びプラークのうち少なくとも1種類が含まれる請求項10から請求項13のいずれか1項に記載の診断支援装置。
- 前記制御部は、前記ラインデータを分析して、前記超音波の送信方向に存在する血球領域の位置を検出し、前記特徴ベクトルの異常度として、検出した位置に対応する要素を除外したベクトルの異常度を算出する請求項2から請求項14のいずれか1項に記載の診断支援装置。
- 前記制御部は、前記検出用画像として、前記生体組織を前記超音波振動子の移動方向に沿って切り開いた展開画像を生成する請求項1から請求項15のいずれか1項に記載の診断支援装置。
- 請求項1から請求項16のいずれか1項に記載の診断支援装置と、
前記超音波振動子を備えるプローブと
を備える診断支援システム。 - 超音波振動子が、生体組織の内部を移動しながら放射線状に超音波を送信し、
診断支援装置が、前記超音波振動子により前記生体組織の断面が観察された結果を参照して、前記超音波の送信方向に存在する反射物からの反射波の強度値を示すラインデータを、前記超音波振動子の移動位置と前記超音波の送信方向との組み合わせごとに生成し、
前記診断支援装置が、生成したラインデータに対応する画素を含み、同じ移動位置のラインデータに対応する画素を一方向に配列し、同じ送信方向のラインデータに対応する画素を当該一方向の垂直方向に配列し、生成したラインデータの異常度に応じて各画素値を設定した検出用画像を生成する診断支援方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202080063822.8A CN114650778A (zh) | 2019-09-12 | 2020-10-16 | 诊断支援装置、诊断支援系统以及诊断支援方法 |
EP20863574.8A EP4014885A4 (en) | 2019-09-12 | 2020-10-16 | DIAGNOSTIC AID DEVICE, DIAGNOSTIC AID SYSTEM AND DIAGNOSTIC AID METHOD |
US17/692,898 US11957509B2 (en) | 2019-09-12 | 2022-03-11 | Diagnosis assistance device, diagnosis assistance system, and diagnosis assistance method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-166485 | 2019-09-12 | ||
JP2019166485A JP7300352B2 (ja) | 2019-09-12 | 2019-09-12 | 診断支援装置、診断支援システム、及び診断支援方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US17/692,898 Continuation US11957509B2 (en) | 2019-09-12 | 2022-03-11 | Diagnosis assistance device, diagnosis assistance system, and diagnosis assistance method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2021048834A1 true WO2021048834A1 (ja) | 2021-03-18 |
Family
ID=74861557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/IB2020/059739 WO2021048834A1 (ja) | 2019-09-12 | 2020-10-16 | 診断支援装置、診断支援システム、及び診断支援方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11957509B2 (ja) |
EP (1) | EP4014885A4 (ja) |
JP (1) | JP7300352B2 (ja) |
CN (1) | CN114650778A (ja) |
WO (1) | WO2021048834A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113440167A (zh) * | 2021-06-28 | 2021-09-28 | 南京大学 | 一种基于rf信号的肺部超声信号特征的识别方法 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2022202302A1 (ja) * | 2021-03-24 | 2022-09-29 | ||
JPWO2022202303A1 (ja) * | 2021-03-25 | 2022-09-29 | ||
WO2023189262A1 (ja) * | 2022-03-31 | 2023-10-05 | テルモ株式会社 | プログラム、情報処理方法および情報処理装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009028096A (ja) * | 2007-07-24 | 2009-02-12 | Yamaguchi Univ | 分離測度を用いた重み付け最小二乗法による境界抽出 |
JP2010075616A (ja) * | 2008-09-29 | 2010-04-08 | Yamaguchi Univ | スパースコーディングを用いた組織性状判別 |
WO2011099102A1 (ja) * | 2010-02-10 | 2011-08-18 | パナソニック株式会社 | 超音波診断装置および内中膜の厚さを計測する方法 |
WO2014115182A1 (ja) | 2013-01-23 | 2014-07-31 | テルモ株式会社 | 画像診断装置及び情報処理装置及びそれらの制御方法、プログラム及びコンピュータ可読記憶媒体 |
WO2014136137A1 (ja) * | 2013-03-04 | 2014-09-12 | テルモ株式会社 | 画像診断装置及び情報処理装置及びそれらの制御方法、プログラム及びコンピュータ可読記憶媒体 |
WO2015045368A1 (ja) * | 2013-09-26 | 2015-04-02 | テルモ株式会社 | 画像処理装置、画像表示システム、撮影システム、画像処理方法及びプログラム |
WO2016140116A1 (ja) * | 2015-03-02 | 2016-09-09 | テルモ株式会社 | 画像診断装置および画像構築方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130046168A1 (en) * | 2011-08-17 | 2013-02-21 | Lei Sui | Method and system of characterization of carotid plaque |
US10568586B2 (en) * | 2012-10-05 | 2020-02-25 | Volcano Corporation | Systems for indicating parameters in an imaging data set and methods of use |
US9307926B2 (en) * | 2012-10-05 | 2016-04-12 | Volcano Corporation | Automatic stent detection |
-
2019
- 2019-09-12 JP JP2019166485A patent/JP7300352B2/ja active Active
-
2020
- 2020-10-16 WO PCT/IB2020/059739 patent/WO2021048834A1/ja unknown
- 2020-10-16 CN CN202080063822.8A patent/CN114650778A/zh active Pending
- 2020-10-16 EP EP20863574.8A patent/EP4014885A4/en active Pending
-
2022
- 2022-03-11 US US17/692,898 patent/US11957509B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009028096A (ja) * | 2007-07-24 | 2009-02-12 | Yamaguchi Univ | 分離測度を用いた重み付け最小二乗法による境界抽出 |
JP2010075616A (ja) * | 2008-09-29 | 2010-04-08 | Yamaguchi Univ | スパースコーディングを用いた組織性状判別 |
WO2011099102A1 (ja) * | 2010-02-10 | 2011-08-18 | パナソニック株式会社 | 超音波診断装置および内中膜の厚さを計測する方法 |
WO2014115182A1 (ja) | 2013-01-23 | 2014-07-31 | テルモ株式会社 | 画像診断装置及び情報処理装置及びそれらの制御方法、プログラム及びコンピュータ可読記憶媒体 |
WO2014136137A1 (ja) * | 2013-03-04 | 2014-09-12 | テルモ株式会社 | 画像診断装置及び情報処理装置及びそれらの制御方法、プログラム及びコンピュータ可読記憶媒体 |
WO2015045368A1 (ja) * | 2013-09-26 | 2015-04-02 | テルモ株式会社 | 画像処理装置、画像表示システム、撮影システム、画像処理方法及びプログラム |
WO2016140116A1 (ja) * | 2015-03-02 | 2016-09-09 | テルモ株式会社 | 画像診断装置および画像構築方法 |
Non-Patent Citations (1)
Title |
---|
See also references of EP4014885A4 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113440167A (zh) * | 2021-06-28 | 2021-09-28 | 南京大学 | 一种基于rf信号的肺部超声信号特征的识别方法 |
CN113440167B (zh) * | 2021-06-28 | 2022-06-10 | 南京大学 | 一种基于rf信号的肺部超声信号特征的识别方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2021041029A (ja) | 2021-03-18 |
JP7300352B2 (ja) | 2023-06-29 |
CN114650778A (zh) | 2022-06-21 |
US20220192631A1 (en) | 2022-06-23 |
EP4014885A1 (en) | 2022-06-22 |
EP4014885A4 (en) | 2022-10-05 |
US11957509B2 (en) | 2024-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021048834A1 (ja) | 診断支援装置、診断支援システム、及び診断支援方法 | |
JP5944917B2 (ja) | 身体内腔分岐を検出及び表示するためのコンピュータ可読媒体及び同コンピュータ可読媒体を含むシステム | |
JP2007526083A (ja) | 血管の境界検出システムおよび方法 | |
US20230222760A1 (en) | Information processing device, information processing system, information processing method, and computer program | |
EP4129197A1 (en) | Computer program, information processing method, information processing device, and method for generating model | |
US20240013386A1 (en) | Medical system, method for processing medical image, and medical image processing apparatus | |
US20220218309A1 (en) | Diagnostic assistance device, diagnostic assistance system, and diagnostic assistance method | |
US20220039778A1 (en) | Diagnostic assistance device and diagnostic assistance method | |
WO2023056384A1 (en) | Devices, systems, and methods for detecting external elastic lamina (eel) from intravascular oct images | |
WO2024071054A1 (ja) | 画像処理装置、画像表示システム、画像表示方法、及び画像処理プログラム | |
WO2023013601A1 (ja) | 画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラム | |
WO2021200294A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
WO2022071250A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
WO2022071251A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
WO2022085373A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
JP7421548B2 (ja) | 診断支援装置及び診断支援システム | |
JP2023024072A (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
CN114502079B (zh) | 诊断支援装置、诊断支援系统及诊断支援方法 | |
WO2023054001A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
WO2022209652A1 (ja) | コンピュータプログラム、情報処理方法及び情報処理装置 | |
WO2022202203A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
WO2021065746A1 (ja) | 診断支援装置、診断支援システム、及び診断支援方法 | |
WO2023176741A1 (ja) | 画像処理装置、画像処理システム、画像表示方法、及び画像処理プログラム | |
US20240108313A1 (en) | Image processing device, image display system, image processing method, and image processing program | |
JP2024139509A (ja) | プログラム、画像処理方法、画像処理装置及びモデル生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20863574 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2020863574 Country of ref document: EP Effective date: 20220318 |