WO2019082741A1 - 医療画像処理装置 - Google Patents

医療画像処理装置

Info

Publication number
WO2019082741A1
WO2019082741A1 PCT/JP2018/038511 JP2018038511W WO2019082741A1 WO 2019082741 A1 WO2019082741 A1 WO 2019082741A1 JP 2018038511 W JP2018038511 W JP 2018038511W WO 2019082741 A1 WO2019082741 A1 WO 2019082741A1
Authority
WO
WIPO (PCT)
Prior art keywords
medical image
medical
display
unit
abnormal area
Prior art date
Application number
PCT/JP2018/038511
Other languages
English (en)
French (fr)
Inventor
麻依子 遠藤
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2019551032A priority Critical patent/JP6827557B2/ja
Priority to CN201880069571.7A priority patent/CN111278349B/zh
Priority to EP18871467.9A priority patent/EP3701852B1/en
Publication of WO2019082741A1 publication Critical patent/WO2019082741A1/ja
Priority to US16/857,163 priority patent/US11132795B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/02042—Determining blood loss or bleeding, e.g. during a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence

Definitions

  • the present invention relates to a medical image processing apparatus that displays a plurality of medical images.
  • medical devices those that acquire images (hereinafter referred to as medical images) including a subject image present the acquired medical images to the doctor. Then, the doctor uses the medical image obtained from the medical device as one of the determination materials to make a diagnosis and the like.
  • the medical device or a device for displaying a medical image acquired by the medical device or the like arranges the plurality of acquired medical images and displays them in a list to facilitate selection of images used for diagnosis and the like.
  • the medical device that displays a list of a plurality of medical images not only displays a plurality of medical images in a list, but also has a device for facilitating the discovery or selection of medical images necessary for a doctor etc. May.
  • a capsule endoscope is a medical device that acquires and lists a large number of medical images.
  • the image display device for a capsule endoscope described in Patent Document 1 determines priorities of a plurality of medical images when arranging endoscopic images which are a plurality of medical images, and arranges the images in order of priority. And to disclose a list.
  • the image display device described in Patent Document 1 determines the priority for list display based on the degree of redness (redness), the density of redness, the area of redness, or a combination thereof. This is to distinguish between the presence and the degree of bleeding.
  • redness degree of redness
  • the presence or absence and degree of hemorrhage is one of useful diagnostic materials
  • determining the priority when displaying a list based on the presence or absence and degree of hemorrhage alone may, for example, overlook a lesion without hemorrhage.
  • a medical image having a different color arrangement such as a so-called special light image
  • An object of the present invention is to provide a medical image processing apparatus capable of selecting medical images necessary for diagnosis and the like more quickly and accurately than ever when displaying a list of a plurality of medical images.
  • a medical image processing apparatus includes a medical image acquisition unit that acquires a medical image including a subject image, a display unit that displays a plurality of medical images, and an abnormal area determination unit that determines an abnormal area using a medical image. And when displaying a plurality of medical images on the display unit, a malignancy discrimination unit that distinguishes the malignancy of the abnormality included in the abnormal region, and at least a part of the medical images of the plurality of medical images using the malignancy And a display control unit that emphasizes or suppresses display.
  • the grade discrimination unit preferably distinguishes the type or degree of progression of the abnormality included in the abnormal area, and determines the grade using the type or degree of progression of the abnormality.
  • the storage unit stores a correspondence that associates the type of abnormality or the degree of progression of the abnormality with the degree of malignancy, and the grade discrimination unit uses the correspondence stored by the storage unit to advance the type or abnormality of the abnormality. It is preferable to determine the grade from the degree.
  • the correspondence can be set for each patient or for each doctor.
  • the storage unit When there is a change in the correspondence, the storage unit preferably stores the changed correspondence.
  • the display control unit preferably arranges a plurality of medical images in order of malignancy.
  • the display control unit attaches an emphasis flag to the medical image, attaches characters to the medical image, adjusts the display color of the medical image, or adjusts the display size of the medical image, thereby selecting the plurality of medical images. It is preferred to emphasize or suppress the display of at least some medical images.
  • a display control unit provided with an identical abnormal area determination unit that determines whether a plurality of medical images have an abnormal area including the same abnormality, and when there are two or more medical images having an abnormal area including the same abnormality
  • the degree of malignancy and the imaging distance of the medical image are used to emphasize or suppress the display of at least a part of the two or more medical images having an abnormal area including the same abnormality.
  • the display control unit preferably emphasizes or suppresses the display of a medical image having a relatively short imaging distance among two or more medical images having an abnormal area including the same abnormality.
  • the display control unit preferably emphasizes or suppresses display of a medical image having a relatively long imaging distance among two or more medical images having an abnormal area including the same abnormality.
  • the display control unit emphasizes or compares a medical image whose imaging distance is close to a predetermined imaging distance determined for each imaging region with other medical images or It is preferable to suppress.
  • the display control unit preferentially emphasizes the display of one or more medical images relatively close to the reference imaging distance which differs among the plurality of medical images depending on the procedure, or the imaging distance is the reference imaging It is preferable to suppress the display of one or more medical images relatively far from the distance.
  • the medical image processing apparatus can display a list of medical images necessary for diagnosis and the like which can be selected more quickly and accurately than in the prior art when displaying a list of a plurality of medical images.
  • the medical image processing apparatus 10 includes a medical image acquisition unit 11, a medical image analysis processing unit 12, a display unit 13, a display control unit 15, an input reception unit 16, an overall control unit 17, and a storage unit. It has eighteen.
  • the medical image acquisition unit 11 is a medical image including a subject image directly from the endoscope apparatus 21 or the like which is a medical apparatus, or via a management system such as a PACS (Picture Archiving and Communication System) 22 or other information system.
  • the medical image is a still image or a moving image (so-called test moving image).
  • the medical image acquiring unit 11 can acquire a frame image constituting the moving image as a still image after the examination.
  • displaying the medical image includes reproducing the moving image one or more times in addition to displaying a still image of one representative frame constituting the moving image.
  • the medical device such as the endoscope device 21 or the like receives the imaging instruction of the doctor in addition to the image photographed by the doctor using the medical device such as the endoscope device 21 or the like. Includes images taken automatically regardless of
  • the medical image acquisition unit 11 can acquire a plurality of medical images, it can selectively acquire one or more medical images among these medical images. Further, the medical image acquisition unit 11 can acquire a plurality of medical images acquired in a plurality of different examinations. For example, one or both of a medical image acquired by an examination performed in the past and a medical image acquired by the latest examination can be acquired. That is, the medical image acquisition unit 11 can arbitrarily acquire a medical image.
  • the medical image processing apparatus 10 is connected to the endoscope apparatus 21 and acquires a medical image from the endoscope apparatus 21. That is, in the present embodiment, the medical image is an endoscopic image.
  • the medical image acquisition unit 11 can acquire endoscopic images (medical images) in which one or a plurality of imaging conditions are different.
  • the imaging condition is a condition relating to imaging of a medical image, and is, for example, the spectrum of illumination light or the presence or absence or intensity of image processing at the time of generating a medical image.
  • the spectrum of illumination light is an intensity distribution for each wavelength, and includes the concepts of wavelength band and central wavelength.
  • the image processing at the time of generating a medical image is, for example, processing relating to adjustment of a specific tissue, a structure, or a color that emphasizes a lesion.
  • the medical image acquisition unit 11 can acquire one or more endoscopic images not used for display on the display unit 13.
  • An endoscopic image not used for display is used, for example, in analysis processing of an endoscopic image (medical image) such as detection of an abnormal area.
  • the endoscope apparatus 21 to which the medical image processing apparatus 10 is connected shoots a subject by irradiating at least one of light of a white wavelength band or light of a specific wavelength band.
  • the endoscope 31 includes an image sensor 41 for imaging a subject using illumination light in which the subject is reflected or scattered, or fluorescence from which the subject or a drug or the like administered to the subject emits light.
  • the image sensor 41 is, for example, a complementary metal oxide semiconductor (CMOS) color sensor (a sensor having a color filter).
  • CMOS complementary metal oxide semiconductor
  • the light source device 32 includes a light source unit 42 and a light source control unit 47.
  • the light source unit 42 can emit plural types of illumination light having different spectra.
  • the light source unit 42 includes, for example, a light emitting device such as a light emitting diode (LED), a laser diode (LD), or a xenon lamp.
  • the light source unit 42 is provided with a prism, a mirror, an optical fiber, an optical filter for adjusting a wavelength band, a light amount, and the like as needed.
  • the light source unit 42 includes a V-LED 43 that emits violet light with a center wavelength of about 405 nm, a B-LED 44 that emits blue light with a center wavelength of about 450 nm, and a green light with a center wavelength of about 540 nm. It comprises a G-LED 45 emitting light and an R-LED 46 with a center wavelength of about 630 nm.
  • the light source control unit 47 controls the light emission source included in the light source unit 42, and generates illumination light used by the endoscope 31 for photographing an object. Further, when the light source unit 42 includes a plurality of light emitting devices, the light source control unit 47 can control the light emission timing and the light emission amount of each light emitting device. Therefore, the light source device 32 can supply the endoscope 31 with a plurality of types of illumination light having different spectra, at any timing and at any intensity. For example, in the present embodiment, the light source device 32 controls two or more of purple light, blue light, green light, red light, or light of each of these colors in addition to white light under the control of the light source control unit 47.
  • Light mixed at an arbitrary intensity ratio can be emitted as illumination light at an arbitrary timing and an arbitrary intensity.
  • the light source device 32 can emit light having a specific narrow wavelength band (so-called narrow band light) as illumination light according to the characteristics of the light emitting device or the use of an optical filter. For example, it is possible to emit light in a wavelength band shorter than the green wavelength band, in particular, light in the blue band or purple band in the visible range.
  • the processor device 33 acquires an endoscopic image from the image sensor 41, or generates an endoscopic image by performing image processing on the endoscopic image acquired from the image sensor 41.
  • the image sensor 41 and the endoscope image generation unit 48 constitute an “endoscope image acquisition unit” in the endoscope apparatus 21.
  • the endoscopic image acquisition unit acquires an endoscopic image including an object image by photographing the object using the illumination light.
  • the medical image processing apparatus 10 is connected to the processor 33. Then, the medical image acquisition unit 11 acquires an endoscope image directly from the endoscope image generation unit 48 of the endoscope apparatus 21.
  • the medical image analysis processing unit 12 performs analysis processing using an endoscopic image (hereinafter, simply referred to as an endoscopic image) which is a medical image acquired by the medical image acquisition unit 11. Specifically, as shown in FIG. 3, it includes an abnormal area determination unit 51, a grade determination unit 52, and a storage unit 53.
  • the abnormal area determination unit 51 determines an abnormal area using the medical image acquired by the medical image acquisition unit 11 (hereinafter referred to as an abnormal area determination process).
  • An abnormal area refers to an area to be noted (so-called attention area, interest area, or abnormal area, etc.) including one or more parts where abnormality such as a lesion is observed (lesion part or part having a possibility of a lesion) (Hereinafter referred to as an abnormal area).
  • the abnormal area determination unit 51 calculates one or a plurality of predetermined feature quantities, and determines an abnormal area using the calculated feature quantities. Further, the abnormal area determination unit 51 can determine an abnormal area by pattern analysis using texture analysis or a regular shape, instead of using the feature amount.
  • the abnormal area refers to an area having characteristics of color or shape different from one or more lesions, surrounding tissues, etc., an area where a drug is dispersed, or the like.
  • Areas subject to treatment biopsy, endoscopic mucosal resection (EMR), or endoscopic submucosal dissection (ESD), etc. Is an area containing
  • the lesion or the like is, for example, a polyp (a raised lesion), more specifically, a hyperplastic polyp (HP), an SSA / P (sessile serrated adenoma) / polyp), adenomas, cancer, etc.
  • the area having characteristics of color or shape different from the surrounding tissue or the like is, for example, the subject's redness, atrophy, diverticulum, or a treatment scar.
  • the abnormal area determination process at least the presence or absence of an abnormal area is determined.
  • the position, size, area, color or the like of the abnormal area can be determined.
  • the abnormal area determination unit 51 can include the “probability” indicating the certainty of each determination in the result of the abnormal area determination process.
  • the abnormal area discrimination unit 51 performs the abnormal area discrimination processing for each pixel, for each small area when dividing the endoscopic image into small areas, or for the entire endoscopic image. be able to.
  • the abnormal area determination unit 51 can use one or more medical images in the abnormal area determination process.
  • the abnormal area determination unit 51 may use a medical image not used for display in the abnormal area determination process.
  • a medical image captured using special light having a spectrum different from white light may be used.
  • the grade discrimination unit 52 distinguishes the grade of abnormality (hereinafter referred to as a lesion etc.) included in the abnormal area. More specifically, the grade discrimination unit 52 distinguishes the type of lesion or the like or the degree of progression of the lesion or the like, and determines the grade of the grade using the type or progression of the classified lesion or the like. Degree of malignancy is an evaluation indicating the importance in diagnosis of a lesion etc., and reflects at least the type of the lesion etc. or the progress degree of the lesion etc (the progress status when "lesion etc.” is a treatment mark etc.) It is an evaluation.
  • the grade discrimination unit 52 discriminates, as a type of lesion or the like, either a hyperplastic polyp, SSA / P, adenoma, or cancer.
  • the degree of progress of the lesion or the like is discriminated by the endoscopic findings classification.
  • the endoscopic findings classification includes the NICE (The Narrow-band imaging International Colorectal Endoscopic) classification, the JNET (The Japan NBI (Narrow Band Imaging) Expert Team) classification, and the like.
  • the endoscopic findings classification includes, for example, Mayo classification or Matts classification.
  • the grade discrimination unit 52 calculates one or a plurality of predetermined feature amounts, and uses the calculated feature amounts to distinguish the type or progression degree of a lesion or the like. In addition, the grade discrimination unit 52 can distinguish the type or the degree of progression of a lesion or the like by pattern analysis using texture analysis or regular shape, instead of using the feature amount.
  • the grade discrimination unit 52 uses the correspondence relationship 54 stored in the storage unit 53 to determine the grade from the type of the lesion or the like or the progression degree of the lesion or the like.
  • the storage unit 53 stores a correspondence 54 that associates the type of lesion or the degree of progression of the lesion with the grade.
  • the correspondence relationship 54 is, for example, a conversion table for converting the type of lesion or the degree of progression of a lesion to malignancy, or a parameter of a function for determining the degree of malignancy from the type of lesion or the degree of progression of lesion or the like It is.
  • the malignancy is, for example, a numerical value.
  • the malignancy of normal (without polyp) is “0”, and the malignancy of cancer is “100 to 200” depending on the stage, etc. Can be asked.
  • the grade is determined relatively and stepwise depending on the type or degree of progression of the lesion. Therefore, the grade of malignancy varies depending on the type or the degree of progression of the lesion or the like.
  • the display unit 13 is a display that displays the medical image acquired by the medical image acquisition unit 11, the determination result of the abnormal area, and the like. Further, when the medical image acquisition unit 11 acquires a plurality of medical images, the display unit 13 can display a list of the plurality of medical images. A monitor or display included in a device or the like connected to the medical image processing apparatus 10 can be shared and used as the display unit 13 of the medical image processing apparatus 10.
  • the display control unit 15 controls the display mode of the medical image and the analysis result on the display unit 13. Specifically, when displaying a plurality of medical images on the display unit 13, the display control unit 15 emphasizes or suppresses the display of at least a part of the plurality of medical images using the malignancy. As a result, the display control unit 15 emphasizes the display of a medical image to be preferentially diagnosed etc., such as a medical image having a high necessity for diagnosis or a medical image having a high degree of importance in diagnosis.
  • a medical image having an earlier display order is relatively emphasized compared to other medical images, or display order Suppresses relatively slow medical images compared to other medical images.
  • display order depends on the specific form or setting of the display unit 13, for example, displaying on the display unit 13 above other medical images, or more than other medical images Also, to display on the left side.
  • “Slow order of display” means, for example, displaying on the display unit 13 below the other medical image or displaying on the right side of the other medical image.
  • the display control unit 15 attaches an emphasis flag to the medical image, attaches characters to the medical image, adjusts the display color of the medical image, or adjusts the display size of the medical image to perform a plurality of medical treatments.
  • the display of at least part of the medical image of the image can be emphasized or suppressed.
  • the emphasis flag is a code (sign), a symbol, an emblem or the like having identifiability to another medical image, and is, for example, the emphasis frame 57 (see FIG. 8) or the emphasis mark 58 (see FIG. 9).
  • the medical image without the emphasis flag is relatively inconspicuous with respect to the medical image with the emphasis flag, and as a result, the display of the medical image without the emphasis flag is suppressed.
  • the “character” attached to the medical image is, for example, a message directly prompting a diagnosis or the like, or a character string indirectly prompting a diagnosis or the like by representing the type or progress of abnormality included in the medical image. is there.
  • the “character” attached to the medical image includes, for example, a negative message indicating that the need for diagnosis and the like is low. These messages etc. result in highlighting or suppressing the display of some medical images.
  • Adjustment of display color means changing the color of part or all of the medical image from the color of the original medical image, and temporarily adjusting the brightness (brightness or luminance etc.) of part or all of the medical image Change on a regular or continual basis.
  • the prominent display color emphasizes the display of the medical image, and the inconspicuous display color suppresses the display of the medical image.
  • Adjustment of the display size refers to enlargement or reduction relative to other medical images. The enlargement of the display size emphasizes the display of the medical image, and the reduction of the display size suppresses the display of the medical image.
  • the input reception unit 16 receives input from a mouse, a keyboard, and other operation devices connected to the medical image processing apparatus 10. The operation of each part of the medical image processing apparatus 10 can be controlled using these operation devices.
  • the integrated control unit 17 integrally controls the operation of each unit of the medical image processing apparatus 10.
  • the overall control unit 17 controls each unit of the medical image processing apparatus 10 according to the operation input.
  • the storage unit 18 is abnormal according to need to a storage device (not shown) such as a memory included in the medical image processing apparatus 10, or a storage device (not shown) included in a medical device such as the endoscope apparatus 21 or the PACS 22.
  • a storage device such as a memory included in the medical image processing apparatus 10, or a storage device (not shown) included in a medical device such as the endoscope apparatus 21 or the PACS 22.
  • the discrimination result of the area, the discrimination result of the type or the progress degree of the abnormality included in the abnormal area, or the malignancy degree or the like is stored.
  • the medical image acquisition unit 11 acquires a plurality of endoscopic images automatically or by manual selection (step S110).
  • endoscopic images 61, 62, 63, 64, 65, 66, 67, 68, 69 shown in FIG. 5 and endoscopic images 74, 81, 88, 91 shown in FIG.
  • the abnormal area determination unit 51 determines an abnormal area of each medical image (step S111).
  • Yes see FIG. 6
  • an abnormal area X5 in the endoscopic image 81 see FIG. 6
  • There are no abnormal regions in other medical images such as the endoscopic image 61.
  • the grade discrimination unit 52 discriminates the abnormalities included in the respective abnormal areas X1 to X5, that is, the grade of the respective lesions or the like (step S112).
  • the malignancy of the abnormal area X1 is the highest, followed by the abnormal area X2, the abnormal area X3, and the abnormal area X4 in the order of malignancy, and the malignancy of the abnormal area X5 is the abnormal areas X1 to X5. It is the lowest of all.
  • the display control unit 15 displays a list of some or all of the medical images acquired by the medical image acquisition unit 11 on the display screen of the display unit 13 and this list At the time of display, the medical image is highlighted using malignancy (step S113).
  • the display order of the endoscopic images 61 and so forth whose imaging time is earlier becomes faster. Therefore, among the endoscopic images 61 and the like acquired by the medical image acquiring unit 11, a part or all of the endoscopic image having an abnormal area such as the endoscopic image 66 (other than the endoscopic image 66 in FIG. 6) An endoscope image 91 or the like in which there is an abnormal area of the image can not be found unless the display screen is transitioned using the scroll bar 56, for example. Further, even when the display screen is transitioned using the scroll bar 56 to search for an endoscopic image 91 etc. having an abnormal area, the presence / absence of the abnormal area including the endoscopic image 61 etc. not including the abnormal area As it must be confirmed, it will be a burden for doctors and others.
  • the display control unit 15 arranges and displays endoscope images 91 etc. in descending order of malignancy. That is, regardless of the imaging time, the display control unit 15 emphasizes the endoscopic image 91 or the like having the abnormal region by displaying it in priority to the endoscopic image 61 or the like not including the abnormal region. As a result, a doctor or the like can more easily find an endoscopic image 91 or the like having an abnormal area than an endoscopic image 61 not including the abnormal area.
  • the display control unit 15 since the display control unit 15 preferentially displays higher grade malignancy even in the endoscopic image 91 or the like where there is an abnormal area, the display control unit 15 displays the endoscope in the order of the list display By observing the mirror image 91 or the like, diagnosis and the like can be easily performed.
  • the medical image processing apparatus 10 displays a list of a plurality of medical images using malignancy levels such as lesions, medical images necessary for diagnosis and the like are compared with conventional medical image processing apparatuses and the like. It can be selected more quickly and accurately than before. Instead of sorting the display order of medical images according to one judgment material in the diagnosis of redness etc. of the subject, the malignancy degree is high according to the "grade of malignancy" which is a comprehensive judgment criterion more in line with the actual situation of diagnosis. Since the medical image is easy to find, oversight can be prevented more reliably.
  • the display control unit 15 sorts and displays the medical images displayed on the display unit 13 in the order of malignancy, but the display control unit 15 displays the medical images on the display unit 13.
  • a high-grade medical image is highlighted be able to.
  • the display control unit 15 compares a lesion or the like having a high degree of malignancy as compared with the endoscopic image 61 not including the abnormal area.
  • the endoscopic image 66 can be highlighted by relatively enlarging the endoscopic image 66 included.
  • the endoscopic image 66 with the abnormal area X4 is enlarged, and the endoscopic image 61 etc. not including the abnormal area is reduced.
  • the endoscopic image 66 is relatively highlighted. be able to.
  • the medical image including the abnormal area is displayed larger than at least the medical image not including the abnormal area.
  • the display control unit 15 can set the enlargement ratio or reduction ratio of the medical image using the degree of malignancy. For example, if the degree of malignancy is high and the degree of enlargement is large, and the degree of malignancy is low, the reduction rate is relatively high, and medical images including lesions with high malignancy become relatively more visible. The necessary medical image can be selected more quickly and accurately.
  • the display control unit 15 sorts and displays the medical images displayed on the display unit 13 in the order of malignancy, but the display control unit 15 adds an emphasis flag.
  • the endoscope image 66 or the like having the abnormal area can be highlighted.
  • the emphasis frame 57 is added to the endoscopic image 66 including a lesion with high malignancy and the like, thereby emphasizing relative to the endoscopic image 61 etc. not including the abnormal region. be able to.
  • FIG. 9 by emphasizing the emphasis mark 58 on the endoscopic image 66 including a lesion with high malignancy and the like, it is emphasized relative to the endoscopic image 61 etc. not including the abnormal region. be able to.
  • an endoscopic image 66 to be noted in diagnosis and the like can be easily found among the endoscopic images 61 and the like displayed in a list on the display screen.
  • the highlighting with the emphasis flag can be performed in place of or in combination with sorting using malignancy or relative enlargement using malignancy.
  • the shape, color, thickness or size of the highlighting frame 57 or the highlighting mark 58 can be set using the grade of malignancy. For example, if the color of the emphasis frame 57 or the emphasis mark 58 is changed depending on the grade of malignancy, the degree of malignancy can be easily discriminated based on the color of the emphasis frame 57 or the emphasis mark 58. And you can choose exactly.
  • the display control unit 15 sorts and displays the medical images displayed on the display unit 13 in the order of malignancy, but the display control unit 15 adjusts the display color.
  • the endoscope image 66 or the like having the abnormal area can be highlighted. As shown in FIG. 10, for example, by graying out the endoscopic image 61 not including the abnormal area, it is possible to relatively emphasize the endoscopic image 66 including a lesion with high malignancy and the like.
  • highlighting by adjusting the display color may be performed in place of or in combination with sorting using grade, relative enlargement using grade, or highlighting with a highlighting flag. it can.
  • the endoscopic image 61 and the like not including the abnormal area is colored, but emphasizing by coloring and highlighting the endoscopic image 66 and the like including a lesion with high malignancy and the like.
  • the display color of the medical image can be set using the grade of malignancy. If the display color of the medical image is set using the malignancy, the malignancy can be easily discriminated by the display color of the medical image, so that a doctor or the like can more quickly and accurately select a medical image necessary for diagnosis.
  • an abnormality such as a lesion may be photographed a plurality of times, for example, under different imaging conditions, and a plurality of medical images including the same abnormality may be acquired. is there. Since these are imaging the same abnormality, basically, the malignancy that the malignancy discrimination unit 52 distinguishes is almost the same (although different values are similar). However, depending on the imaging conditions, the ease of use in diagnosis (e.g., the ease of observation of a lesion etc.) differs, so a medical image that is easier to use for diagnosis is preferentially highlighted rather than being highlighted equally. It is desirable to do.
  • the medical image analysis processing unit 12 includes the same abnormal area in addition to the abnormal area determination unit 51, the grade discrimination unit 52, and the storage unit 53.
  • a determination unit 201 is provided.
  • the other configuration is the same as that of the first embodiment.
  • the same abnormal area determination unit 201 determines whether or not a plurality of medical images acquired by the medical image acquisition unit 11 have an abnormal area including the same abnormality.
  • the "same abnormality" means that the objects to be judged as abnormal are the same object.
  • an endoscopic image 66 includes an abnormal area X4, but an endoscopic image obtained by capturing a lesion or the like included in the abnormal area X4 at a distance, angle, brightness, or the like different from that of the endoscopic image 66 is endoscopic The same anomaly as the mirror image 66 is included.
  • the cancer in the abnormal area X4 of the endoscopic image 66 is a cancer and the lesion or the like included in the abnormal area X1 of the endoscopic image 91 is a cancer, the cancer in the abnormal area X4 If the cancer in the abnormal area X1 and the abnormal area X1 are separate cancers in different positions in the intestine, the endoscopic image 66 and the endoscopic image 91 do not contain the same abnormality because they are not taken of the same subject. .
  • the same abnormal area discrimination unit 201 may also calculate a feature (such as color information or luminance value) calculated using a medical image, a degree of similarity, a motion vector representing the direction and magnitude of movement, or capturing a medical image to be compared.
  • a feature such as color information or luminance value
  • the same abnormal area discrimination processing is performed by combining one or more of the closeness of time and the like.
  • the display control unit 15 uses two or more having the abnormal area including the same abnormality using the malignancy and the imaging distance of the medical image. Emphasize or suppress display of at least a part of medical images of the medical images. For example, the display control unit 15 emphasizes or suppresses the display of a medical image having a relatively short imaging distance among two or more medical images having an abnormal area including the same abnormality, or an abnormality including the same abnormality. Of two or more medical images having a region, the display of a medical image having a relatively long imaging distance is emphasized or suppressed.
  • the display control unit 15 selects a medical image having a relatively short imaging distance among two or more medical images having an abnormal area including the same abnormality. Emphasize the display or suppress the display of medical images that have a relatively long imaging distance.
  • the display control unit 15 may set the imaging distance (esophagus, stomach, large intestine, etc.) of two or more medical images having an abnormal area including the same abnormality.
  • the photographing distance is the distance between the endoscope 31 and the subject in the case of the endoscope apparatus 21 and, in the case where the endoscope 31 has a zoom function, the endoscope including the photographing magnification. 31 is a substantial distance between the subject and the subject.
  • the display control unit 15 acquires the imaging distance of the medical image from the medical device that has captured the medical image, such as the header of the medical image, the PACS 22, or the endoscope apparatus 21 or the like.
  • the medical image acquisition unit 11 acquires a plurality of endoscopic images automatically or manually (step S210).
  • the medical image acquisition unit 11 acquires a plurality of endoscopic images including at least the endoscopic image 211, the endoscopic image 212, and the endoscopic image 213 shown in FIG. .
  • the endoscope image 211, the endoscope image 212, and the endoscope image 213 are all endoscope images obtained by imaging the abnormal region X20.
  • the endoscopic image 211, the endoscopic image 212, and the endoscopic image 213 have different imaging distances.
  • the endoscope image 211 is an endoscope image having the shortest imaging distance among the endoscope image 212 and the endoscope image 213.
  • the endoscopic image 212 is an endoscopic image having the second closest imaging distance
  • the endoscopic image 213 is an endoscopic image 211, an endoscopic image 212, and an endoscopic image 213.
  • the endoscopic image is the longest imaging distance among them.
  • the abnormal area determination unit 51 determines an abnormal area of each medical image (step S211), and the grade discrimination unit 52 discriminates the grade (step S212). Thereafter, the same abnormal area determination unit 201 determines whether or not each medical image has an abnormal area including the same abnormality (step S213).
  • the endoscopic image 211, the endoscopic image 212, and the endoscopic image 213 include the same abnormal area X20.
  • the display control unit 15 lists and displays a plurality of endoscopic images on the display unit 13 using the degree of malignancy and the imaging distance (step S214). For example, as shown in FIG. 13, the display control unit 15 sorts and displays a plurality of endoscopic images in the order of malignancy, for example, as in the first embodiment. And about the arrangement
  • the endoscopic image 211, the endoscopic image 212, and the endoscopic image 213 having the same abnormal area X20 are arranged in the order of the imaging distance, a lesion, etc.
  • the endoscopic image 211 that is easier to use in diagnosis can be relatively emphasized, even if the grade is approximately the same grade. As a result, it is possible to select an endoscopic image necessary for diagnosis etc. particularly quickly and accurately.
  • the display control unit 15 sorts and displays a plurality of endoscopic images displayed on the display unit 13 in the order of malignancy level and imaging distance, as shown in FIG.
  • the control unit 15 can relatively enlarge and emphasize the endoscopic image 211 in the order of the grade of malignancy and the imaging distance.
  • the malignancy and the photographing distance can be used similarly in the case of emphasizing by adjusting the display color.
  • the display control unit 15 gives priority to the display of one or more medical images relatively close to the reference photographing distance different among the plurality of medical images depending on the procedure. It is possible to emphasize or to suppress the display of one or more medical images whose imaging distance is relatively far from the reference imaging distance.
  • the procedure is screening, diagnosis, treatment or the like.
  • the reference imaging distance is an imaging distance used as a reference for emphasizing or suppressing display. The reason for setting the reference imaging distance according to the procedure as described above is, for example, because the purpose of imaging is different between screening and diagnosis and treatment, and therefore the appropriate imaging distance is different. It is.
  • the medical device such as the endoscope apparatus 21 or the PACS 22 records information on the imaging purpose of each medical image in the header of the medical image or the like, and performs display control
  • the unit 15 obtains information on the purpose of imaging the medical image from the header of the medical image or the like.
  • the display control unit 15 emphasizes a medical image taken at an appropriate imaging distance in comparison with other medical images. In this way, it is possible to emphasize the display of an appropriate medical image that matches the purpose of imaging.
  • the correspondence relationship 54 is determined in advance, but the correspondence relationship 54 is determined for each patient or every doctor It can be set to It is because the lesion etc. which are made the object of a diagnosis differ for every patient or every doctor.
  • the storage unit 53 stores the correspondence relationship 54 after the change automatically or according to a manual save operation of the setting change by manual operation. Do. Therefore, for example, it is not necessary to redo the setting of the correspondence 54 for each patient or doctor for each examination, and the grade discrimination unit 52 automatically uses the correspondence 54 after the setting change.
  • Each part which comprises the medical image analysis process part 12 in the said embodiment etc. can be comprised using what is called AI (Artificial Intelligence) program learned by machine learning or deep learning.
  • AI Artificial Intelligence
  • the endoscope apparatus 21 can include the medical image processing apparatus 10.
  • each unit 520 constituting the medical image processing apparatus 10 is provided in the processor apparatus 33.
  • the display unit 13 can share the monitor 34 of the endoscope apparatus 21.
  • the medical image acquisition part 11 is corresponded to the "endoscope image acquisition part" which the image sensor 41 and the endoscope image generation part 48 form.
  • the processor 33 it is sufficient to provide the processor 33 with components other than the medical image acquisition unit 11 and the display unit 13.
  • the configuration of the other components is the same as that of the first embodiment.
  • a new endoscope apparatus can be configured as a whole of the medical image processing apparatus 10 of each of the above-described embodiments and the other modifications and the endoscope apparatus 21 of FIG. 2.
  • the diagnosis support device 610 used in combination with the endoscope device 21 and other modality can include the medical image processing device 10 of the above-described embodiment and other modifications.
  • various inspection devices such as the first inspection device 621, the second inspection device 622,..., The N-th inspection device 623 and the like, including the endoscope device 21, for example, via an arbitrary network 626
  • the medical service support device 630 to be connected can include the medical image processing device 10 of the above-described embodiment and other modified examples.
  • the medical image processing apparatus 10 various apparatuses including the medical image processing apparatus 10, and various apparatuses or systems including the functions of the medical image processing apparatus 10 can be used with various modifications described below. .
  • a normal light image obtained by irradiating light of a plurality of wavelength bands as light of a white band or light of a white band can be used.
  • a specific wavelength band can use a band narrower than the white wavelength band.
  • the specific wavelength band is, for example, a blue band or a green band in the visible range.
  • the specific wavelength band is a blue band or a green band in the visible range
  • the specific wavelength band includes a wavelength band of 390 nm to 450 nm or 530 nm to 550 nm, and light of the specific wavelength band is 390 nm or more It is preferable to have a peak wavelength within a wavelength band of 450 nm or less or 530 nm or more and 550 nm or less.
  • the specific wavelength band is, for example, a red band in the visible range.
  • the specific wavelength band is a red band in the visible range
  • the specific wavelength band includes a wavelength band of 585 nm to 615 nm or 610 nm to 730 nm, and light of the specific wavelength band is 585 nm to 615 nm or 610 nm It is preferable to have a peak wavelength within the wavelength band of not less than 730 nm.
  • the specific wavelength band includes, for example, wavelength bands in which the absorption coefficient is different between oxygenated hemoglobin and reduced hemoglobin, and light of a specific wavelength band is a peak wavelength in the wavelength band where absorption coefficients are different between oxygenated hemoglobin and reduced hemoglobin You can have
  • a specific wavelength band includes wavelength bands whose absorption coefficients are different between oxyhemoglobin and reduced hemoglobin, and light of a specific wavelength band has peak wavelengths in wavelength bands whose absorption coefficients are different between oxyhemoglobin and reduced hemoglobin
  • the specific wavelength band includes the wavelength bands of 400 ⁇ 10 nm, 440 ⁇ 10 nm, 470 ⁇ 10 nm, or 600 nm to 750 nm, and the light of the specific wavelength band is 400 ⁇ 10 nm, 440 ⁇ 10 nm, It is preferable to have a peak wavelength in a wavelength band of 470 ⁇ 10 nm, or 600 nm or more and 750 nm or less.
  • this in-vivo image can have information of fluorescence emitted from a fluorescent substance in the living body.
  • fluorescence fluorescence obtained by irradiating excitation light having a peak wavelength of 390 nm or more and 470 nm or less into a living body can be used.
  • the above-mentioned specific wavelength band can utilize the wavelength band of infrared light.
  • the specific wavelength band is a wavelength band of 790 nm to 820 nm or 905 nm to 970 nm
  • light of a specific wavelength band preferably has a peak wavelength in a wavelength band of 790 nm or more and 820 nm or less or 905 nm or more and 970 nm or less.
  • the medical image acquisition unit 11 acquires a special light image having a signal of a specific wavelength band based on a normal light image obtained by irradiating light of a plurality of wavelength bands as light of the white band or light of the white band. It can have a special light image acquisition unit. In this case, a special light image can be used as a medical image.
  • a signal of a specific wavelength band can be obtained by an operation based on RGB or CMY color information included in a normal light image.
  • a feature amount image generation unit that generates a feature amount image can be provided.
  • the feature amount image can be used as a medical image.
  • a capsule endoscope can be used as the endoscope 31.
  • the light source device 32 and part of the processor device 33 can be mounted on the capsule endoscope.
  • the medical image acquisition unit 11, the medical image analysis processing unit 12 (each unit constituting the medical image analysis processing unit 12), the display control unit 15, the input reception unit 16, the general control unit 17, and
  • the hardware-like structure of a processing unit (processing unit) that executes various processes is various processors as described below.
  • a processing unit that executes various processes
  • change the circuit configuration after manufacturing CPU Central Processing Unit
  • CPU Central Processing Unit
  • FPGA Field Programmable Gate Array
  • a programmable logic device Programmable Logic Device: PLD
  • PLD programmable Logic Device
  • a dedicated electric circuit which is a processor having a circuit configuration specially designed to execute various processes, are included.
  • One processing unit may be configured of one of these various processors, or configured of a combination of two or more processors of the same type or different types (for example, a plurality of FPGAs or a combination of a CPU and an FPGA) It may be done.
  • a plurality of processing units may be configured by one processor.
  • one processor is configured by a combination of one or more CPUs and software as represented by computers such as clients and servers; There is a form in which this processor functions as a plurality of processing units.
  • SoC system on chip
  • IC integrated circuit
  • circuitry in the form in which circuit elements such as semiconductor elements are combined.
  • Reference Signs List 10 medical image processing apparatus 11 medical image acquisition unit 12 medical image analysis processing unit 13 display unit 15 display control unit 16 input reception unit 17 general control unit 18 storage unit 21, 510 endoscope apparatus 22 PACS Reference Signs List 31 endoscope 32 light source device 33 processor device 34 monitor 41 image sensor 42 light source unit 47 light source control unit 48 endoscope image generation unit 51 abnormal area discrimination unit 52 grade discrimination unit 53 storage unit 54 correspondence relationship 56 scroll bar 57 emphasis Frame 58 Highlighted mark 61 to 69, 74, 81, 88, 91, 211 to 213 Endoscope image 201 Same abnormal area discrimination unit 520 Parts constituting the medical image processing apparatus 610 Diagnosis support device 621 First examination device 622 Second Inspection device 623 Nth inspection device 626 Network 630 medical service support device X1 to X5, X20 abnormal area S110 to S113, S210 to S214 Operation steps

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Endoscopes (AREA)

Abstract

複数の医療画像を一覧表示する際に、診断等に必要な医療画像を、従来よりも迅速かつ正確に選択可能な医療画像処理装置を提供する。　医療画像処理装置（１０）は、被写体像を含む医療画像を取得する医療画像取得部（１１）と、複数の医療画像を表示する表示部（１３）と、医療画像を用いて、異常領域を判別する異常領域判別部（５１）と、異常領域が含む異常の悪性度を鑑別する悪性度鑑別部（５２）と、表示部に複数の医療画像を表示する際に、悪性度を用いて複数の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制する表示制御部（１５）と、を備える。

Description

医療画像処理装置
　本発明は、複数の医療画像を表示する医療画像処理装置に関する。
　従来、医療に係る装置（以下、医療装置という）のうち、被写体像を含む画像（以下、医療画像という）を取得するものは、取得した医療画像を医師に提示する。そして、医師は、医療装置から得る医療画像を判断材料の１つとして使用して診断等をする。
　具体的な検査内容等にもよるが、医療装置の多くは、１回の検査において複数の医療画像を取得する。このため、医療装置または医療装置が取得した医療画像を表示等するための装置等は、取得した複数の医療画像を配列して一覧表示することで、診断等に使用する画像を選択しやすくする。また、取得及び表示する医療画像の数が特に多い場合等においては、一覧表示をしても、診断等に使用する医療画像を迅速かつ適切に選択することが難しい場合がある。このため、複数の医療画像を一覧表示する医療装置は、複数の医療画像を単に一覧に表示するだけでなく、医師等が診断等に必要な医療画像の発見または選択等を容易にする工夫をする場合がある。
　例えば、カプセル内視鏡は多数の医療画像を取得及び一覧表示する医療装置である。特許文献１に記載のカプセル内視鏡用の画像表示装置は、複数の医療画像である内視鏡画像を一覧表示する際に、これら複数の医療画像に優先度を定め、優先度の順に配列して一覧表示することを開示している。
特開２０１３－０８５５９３号公報
　特許文献１に記載の画像表示装置は、一覧表示のための優先度を、赤色具合（赤み）、赤色の濃度、赤色の面積、または、これらの組み合わせで決定する。これは、出血の有無及び程度を鑑別するためである。しかし、出血の有無及び程度は有用な診断材料の１つであるが、出血の有無及び程度だけで一覧表示する際の優先度を決定すると、例えば出血がない病変を見落としてしまう場合がある。また、例えば、いわゆる特殊光画像等の通常とは配色が異なる医療画像を取得する場合、こうした医療画像の優先度が低く評価されると、結果として、重大な病変が含まれていても見落とされてしまう場合がある。こうしたことから、複数の医療画像を一覧表示する医療装置等においては、医師等がより迅速かつ正確に診断等に必要な医療画像を選択できる一覧表示が求められている。
　本発明は、複数の医療画像を一覧表示する際に、診断等に必要な医療画像を、従来よりも迅速かつ正確に選択可能な医療画像処理装置を提供することを目的とする。
　本発明の医療画像処理装置は、被写体像を含む医療画像を取得する医療画像取得部と、複数の医療画像を表示する表示部と、医療画像を用いて、異常領域を判別する異常領域判別部と、異常領域が含む異常の悪性度を鑑別する悪性度鑑別部と、表示部に複数の医療画像を表示する際に、悪性度を用いて複数の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制する表示制御部と、を備える。
　悪性度鑑別部は、異常領域が含む異常の種類または異常の進行度を鑑別し、かつ、異常の種類または異常の進行度を用いて悪性度を定めることが好ましい。
　異常の種類または異常の進行度と、悪性度と、を対応付ける対応関係を記憶する記憶部を備え、悪性度鑑別部は、記憶部が記憶する対応関係を用いて、異常の種類または異常の進行度から悪性度を求めることが好ましい。
　対応関係は、患者ごとに、または、医師ごとに設定可能であることが好ましい。
　対応関係に変更があった場合、記憶部は、変更後の対応関係を記憶することが好ましい。
　表示制御部は、複数の医療画像を悪性度の順に配列することが好ましい。
　表示制御部は、医療画像に強調フラグを付し、医療画像に文字を付し、医療画像の表示色を調節し、または、医療画像の表示サイズを調節することにより、複数の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制することが好ましい。
　複数の医療画像が同一の異常を含む異常領域を有するか否かを判別する同一異常領域判別部を備え、同一の異常を含む異常領域を有する２以上の医療画像がある場合に、表示制御部は、悪性度と、医療画像の撮影距離と、を用いて、同一の異常を含む異常領域を有する２以上の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制することが好ましい。
　表示制御部は、同一の異常を含む異常領域を有する２以上の医療画像のうち、相対的に撮影距離が近い医療画像の表示を強調または抑制することが好ましい。
　表示制御部は、同一の異常を含む異常領域を有する２以上の医療画像のうち、相対的に撮影距離が遠い医療画像の表示を強調または抑制することが好ましい。
　表示制御部は、同一の異常を含む異常領域を有する２以上の医療画像のうち、撮影距離が、撮影部位ごとに定める所定の撮影距離に近い医療画像を他の医療画像と比較して強調または抑制することが好ましい。
　表示制御部は、複数の医療画像のうち、撮影距離が手技に応じて異なる基準撮影距離に相対的に近い１または複数の医療画像の表示を優先的に強調し、または、撮影距離が基準撮影距離から相対的に遠い１または複数の医療画像の表示を抑制することが好ましい。
　本発明の医療画像処理装置は、複数の医療画像を一覧表示する際に、診断等に必要な医療画像を、従来よりも迅速かつ正確に選択可能な一覧表示をすることができる。
医療画像処理装置のブロック図である。 内視鏡装置のブロック図である。 医療画像解析処理部のブロック図である。 医療画像処理装置の作用を示すフローチャートである。 撮影の時系列順に配列する一覧表示の例である。 悪性度の順に配列する一覧表示の例である。 一部の内視鏡画像を拡大または縮小する一覧表示の例である。 一部の内視鏡画像に強調枠を付す一覧表示の例である。 一部の内視鏡画像に強調マークを付す一覧表示の例である。 一部の内視鏡画像の表示色を調節する一覧表示の例である。 第２実施形態における医療画像解析処理部のブロック図である。 第２実施形態の医療画像処理装置の作用を示すフローチャートである。 撮影距離順に配列する一覧表示の例である。 撮影距離順に一部の内視鏡画像を拡大または縮小する一覧表示の例である。 医療画像処理装置を含む内視鏡装置のブロック図である。 医療画像処理装置を含む診断支援装置の説明図である。 医療画像処理装置を含む医療業務支援装置の説明図である。
　［第１実施形態］
　図１に示すように、医療画像処理装置１０は、医療画像取得部１１、医療画像解析処理部１２、表示部１３、表示制御部１５、入力受信部１６、統括制御部１７、及び、保存部１８を備える。
　医療画像取得部１１は、医療装置である内視鏡装置２１等から直接に、または、ＰＡＣＳ（Picture Archiving and Communication System）２２等の管理システムもしくはその他情報システムを介して、被写体像を含む医療画像を取得する。医療画像は、静止画像または動画（いわゆる検査動画）である。医療画像が動画である場合、医療画像取得部１１は、検査後に、動画を構成するフレーム画像を静止画像として取得することができる。また、医療画像が動画である場合、医療画像の表示には、動画を構成する１つの代表フレームの静止画像を表示することのほか、動画を１または複数回、再生することを含む。また、医療画像取得部１１が取得する医療画像には、内視鏡装置２１等の医療装置を用いて医師が撮影した画像の他、内視鏡装置２１等の医療装置が医師の撮影指示に依らず自動的に撮影した画像を含む。
　医療画像取得部１１は、複数の医療画像を取得し得る場合、これらの医療画像のうち１または複数の医療画像を選択的に取得できる。また、医療画像取得部１１は、複数の互いに異なる検査において取得した複数の医療画像を取得できる。例えば、過去に行った検査で取得した医療画像と、最新の検査で取得した医療画像と、の一方または両方を取得できる。すなわち、医療画像取得部１１は、任意に医療画像を取得できる。
　本実施形態においては、医療画像処理装置１０は、内視鏡装置２１と接続し、内視鏡装置２１から医療画像を取得する。すなわち、本実施形態において医療画像は、内視鏡画像である。
　また、医療画像取得部１１は、１または複数の撮影条件が異なる内視鏡画像（医療画像）を取得することができる。撮影条件とは、医療画像の撮影に係る条件であって、例えば、照明光のスペクトル、または、医療画像を生成する際の画像処理の有無もしくは強度、等である。照明光のスペクトルとは、波長ごとの強度分布であり、波長帯域及び中心波長の概念を含む。医療画像を生成する際の画像処理とは、例えば、特定の組織、構造、または病変を強調する色彩等の調節に係る処理等である。この他、医療画像取得部１１は、表示部１３への表示に使用しない内視鏡画像を１または複数取得することができる。表示に使用しない内視鏡画像は、例えば、異常領域の検出等、内視鏡画像（医療画像）の解析処理に使用する。
　図２に示すように、本実施形態において医療画像処理装置１０が接続する内視鏡装置２１は、白色の波長帯域の光もしくは特定の波長帯域の光の少なくともいずれかを照射して被写体を撮影する内視鏡３１、内視鏡３１を介して被写体内に照明光を照射する光源装置３２、プロセッサ装置３３、及び、内視鏡３１を用いて撮影した内視鏡画像等を表示するモニタ３４を有する。
　内視鏡３１は、被写体が反射または散乱した照明光、または、被写体もしくは被写体に投与した薬剤等が発光する蛍光、等を用いて被写体を撮影するイメージセンサ４１を備える。イメージセンサ４１は、例えば、ＣＭＯＳ（Complementary Metal？Oxide？Semiconductor）のカラーセンサ（カラーフィルタを有するセンサ）である。
　光源装置３２は、光源部４２と、光源制御部４７と、を含む。光源部４２は、スペクトルが異なる複数種類の照明光を発光できる。光源部４２は、例えば、ＬＥＤ（Light Emitting Diode）、ＬＤ（Laser Diode）、またはキセノンランプ等の発光デバイスを備える。また、光源部４２は、プリズム、ミラー、光ファイバ、または、波長帯域もしくは光量等を調節する光学フィルタ等、を必要に応じて備える。本実施形態においては、光源部４２は、中心波長が約４０５ｎｍの紫色光を発光するＶ－ＬＥＤ４３と、中心波長が約４５０ｎｍの青色光を発光するＢ－ＬＥＤ４４と、中心波長が約５４０ｎｍの緑色光を発光するＧ－ＬＥＤ４５と、中心波長が約６３０ｎｍのＲ－ＬＥＤ４６と、を備える。
　光源制御部４７は、光源部４２が含む発光源を制御し、内視鏡３１が被写体の撮影に使用する照明光を発生する。また、光源制御部４７は、光源部４２が複数の発光デバイスを含む場合、各発光デバイスの発光のタイミング及び発光量をそれぞれに制御することができる。したがって、光源装置３２は、スペクトルが異なる複数種類の照明光を、任意のタイミング及び任意の強度で内視鏡３１に供給できる。例えば、本実施形態においては、光源装置３２は、光源制御部４７が行う制御により、白色光の他、紫色光、青色光、緑色光、赤色光、または、これら各色の光のうち２以上を任意の強度比で混合した光等を、任意のタイミング及び任意の強度で照明光として発光できる。この他、光源装置３２は、発光デバイスの特性により、または、光学フィルタの使用により、特定の狭い波長帯域を有する光（いわゆる狭帯域光）を照明光として発光できる。例えば、緑色波長帯域よりも短波長帯域の光、特に可視域の青色帯域または紫色帯域の光を発光できる。
　プロセッサ装置３３は、イメージセンサ４１から内視鏡画像を取得し、または、イメージセンサ４１から取得した内視鏡画像に画像処理を施した内視鏡画像を生成する内視鏡画像生成部４８を備える。イメージセンサ４１及び内視鏡画像生成部４８は、内視鏡装置２１において「内視鏡画像取得部」を構成する。内視鏡画像取得部は、照明光を使用して被写体を撮影することにより、被写体像を含む内視鏡画像を取得する。医療画像処理装置１０は上記プロセッサ装置３３と接続する。そして、医療画像取得部１１は、内視鏡装置２１の内視鏡画像生成部４８から直接に内視鏡画像を取得する。
　医療画像解析処理部１２は、医療画像取得部１１が取得した医療画像である内視鏡画像（以下、単に内視鏡画像という）を用いて解析処理をする。具体的には、図３に示すように、異常領域判別部５１と、悪性度鑑別部５２と、記憶部５３と、を含む。
　異常領域判別部５１は、医療画像取得部１１が取得した医療画像を用いて、異常領域を判別する（以下、異常領域判別処理という）。異常領域とは、病変等の異常が認められる部分（病変部分または病変の可能性がある部分）を１または複数含む、注目すべき領域（いわゆる注目領域、関心領域、または、異常領域等と称する領域である。以下、異常領域という。）である。異常領域判別部５１は、１または複数の所定の特徴量を算出し、算出した特徴量を用いて異常領域を判別する。また、異常領域判別部５１は、特徴量を使用する代わりに、テクスチャ解析または規則形状を用いたパターンマッチングによって異常領域を判別することができる。
　医療画像取得部１１が内視鏡画像を取得する場合、異常領域とは、１または複数の病変、周辺の組織等と相違する色もしくは形状の特徴を有する領域、薬剤を散布等した領域、または、処置（生検、内視鏡的粘膜切除術（ＥＭＲ（Endoscopic Mucosal Resection））、または、内視鏡的粘膜下層剥離術（ＥＳＤ（Endoscopic Submucosal Dissection））等）を実施した領域、等の対象を含む領域である。医療画像が内視鏡画像である場合、病変等とは、例えば、ポリープ（隆起性病変）であり、より具体的には、過形成ポリープ（ＨＰ：hyperplastic polyp）、ＳＳＡ／Ｐ（sessile serrated adenoma/polyp）、腺腫、癌、等である。また、周辺の組織等と相違する色もしくは形状の特徴を有する領域とは、被写体の発赤、萎縮、憩室、または、治療痕、等である。
　異常領域判別処理においては、少なくとも異常領域の有無を判別する。異常領域判別処理においては、上記のほかに、異常領域の位置、大きさ、面積、または、色等を判別することができる。また、異常領域判別部５１は、異常領域判別処理の結果に、各判別の確からしさを表す「確度」を含めることができる。
　異常領域判別処理においては、医療画像の一部または全部について、異常領域であるか否かを判別する。すなわち、異常領域判別部５１は、異常領域判別処理を、画素ごとに、内視鏡画像を小領域に分ける場合にはその小領域ごとに、または、内視鏡画像の全体に対して、行うことができる。
　異常領域判別処理においては、各医療画像の１箇所または複数箇所を異常領域と判別する場合がある。異常領域判別部５１は、異常領域判別処理に、１または複数の医療画像を使用することができる。異常領域判別部５１は、異常領域判別処理に、表示に使用しない医療画像を使用する場合がある。異常領域判別処理においては、白色光とは異なるスペクトルを有する特殊光を使用して撮影した医療画像を用いる場合がある。
　悪性度鑑別部５２は、異常領域が含む異常（以下、病変等という）の悪性度を鑑別する。より具体的には、悪性度鑑別部５２は、病変等の種類または病変等の進行度を鑑別し、かつ、鑑別した病変等の種類または進行度を用いて悪性度を定める。悪性度とは、病変等の診断における重要性を示す評価であって、少なくとも病変等の種類または病変等の進行度（「病変等」が治療痕等である場合には経過状況）を反映する評価である。
　例えば、病変等がポリープである場合、悪性度鑑別部５２は、病変等の種類として、過形成ポリープ、ＳＳＡ／Ｐ、腺腫、または、癌のいずれかに鑑別する。また、病変等が癌である場合、病変等の進行度を内視鏡所見分類により鑑別する。たとえば、大腸腫瘍の場合は、内視鏡所見分類として、ＮＩＣＥ（The Narrow-band imaging International Colorectal Endoscopic）分類、または、ＪＮＥＴ（The Japan NBI(Narrow Band Imaging) Expert Team）分類等がある。また、病変等が炎症性腸疾患である場合においても、病変等の進行度を内視鏡所見分類により鑑別する。例えば、炎症性腸疾患の１つである潰瘍性大腸炎においては、内視鏡所見分類は、例えば、Ｍａｙｏ分類、または、Ｍａｔｔｓ分類等がある。
　悪性度鑑別部５２は、１または複数の所定の特徴量を算出し、算出した特徴量を用いて、病変等の種類または進行度を鑑別する。また、悪性度鑑別部５２は、特徴量を使用する代わりに、テクスチャ解析または規則形状を用いたパターンマッチングによって病変等の種類または進行度を鑑別できる。
　悪性度鑑別部５２は、記憶部５３が記憶する対応関係５４を用いて、鑑別した病変等の種類または病変等の進行度から悪性度を求める。記憶部５３は、病変等の種類または病変等の進行度と、悪性度と、を対応付ける対応関係５４を記憶する。対応関係５４は、例えば、病変等の種類または病変等の進行度を悪性度に変換するための変換テーブル、または、病変等の種類または病変等の進行度から悪性度を求める関数のパラメータ、等である。悪性度は例えば数値であり、例えば、ポリープを判別対象とする場合、正常（ポリープがない場合）の悪性度は「０」、及び、癌の悪性度はステージに応じて「１００～２００」等と求めることができる。悪性度は、病変等の種類または進行度に応じて、相対的かつ段階的に定める。このため、病変等の種類または進行度が異なれば、悪性度は異なる。
　表示部１３は、医療画像取得部１１が取得した医療画像、及び、異常領域の判別結果等を表示するディスプレイである。また、表示部１３は、医療画像取得部１１が複数の医療画像を取得した場合、これら複数の医療画像を一覧表示できる。医療画像処理装置１０が接続するデバイス等が含むモニタまたはディスプレイを共用し、医療画像処理装置１０の表示部１３として使用できる。
　表示制御部１５は、表示部１３における医療画像及び解析結果の表示態様を制御する。具体的には、表示制御部１５は、表示部１３に複数の医療画像を表示する際に、悪性度を用いて複数の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制する。その結果、表示制御部１５は、診断等の必要性が高い医療画像、または、診断等において重要度が高い医療画像等、優先的に診断等すべき医療画像の表示を強調する。例えば、複数の医療画像を一覧表示する場合、複数の医療画像を悪性度の順に配列することにより、表示順が早い医療画像を他の医療画像に比べて相対的に強調し、または、表示順が遅い医療画像を他の医療画像に比べて相対的に抑制する。「表示順が早い」とは、表示部１３の具体的形態または設定等にも依るが、例えば、表示部１３において、他の医療画像よりも上部に表示すること、または、他の医療画像よりも左側に表示すること、をいう。「表示順が遅い」とは、例えば、表示部１３において、他の医療画像よりも下部に表示すること、または、他の医療画像よりも右側に表示すること、をいう。
　また、表示制御部１５は、医療画像に強調フラグを付し、医療画像に文字を付し、医療画像の表示色を調節し、または、医療画像の表示サイズを調節することにより、複数の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制できる。強調フラグとは、他の医療画像に対する識別性を有する符号（サイン）、シンボル、またはエンブレム等であり、例えば、強調枠５７（図８参照）または強調マーク５８（図９参照）等である。
強調フラグを付すことにより、強調フラグを付した医療画像を他の医療画像に対して相対的に強調できる。また、強調フラグを付さない医療画像は、強調フラグを付した医療画像に対して相対的に目立たなくなり、結果として、強調フラグを付さない医療画像の表示が抑制される。医療画像に付す「文字」は、例えば、診断等を直接的に促すメッセージ、または、その医療画像が含む異常の種類もしくは進行度等を表すことにより、間接的に診断等を促す文字列等である。また、医療画像に付す「文字」には、例えば、診断等の必要性が低いことを表すネガティブなメッセージを含む。これらのメッセージ等は、結果として、一部の医療画像の表示を強調または抑制する。表示色の調節とは、医療画像の一部または全部の色を、もとの医療画像の色から変更することをいい、医療画像の一部または全部の明るさ（明度もしくは輝度等）を一時的または継続的に変更することを含む。目立つ表示色は医療画像の表示を強調し、かつ、目立ちにくい表示色は医療画像の表示を抑制する。表示サイズの調節とは、他の医療画像に対して相対的に拡大または縮小することをいう。表示サイズの拡大は医療画像の表示を強調し、かつ、表示サイズの縮小は医療画像の表示を抑制する。
　入力受信部１６は、医療画像処理装置１０に接続するマウス、キーボード、その他操作デバイスからの入力を受け付ける。医療画像処理装置１０の各部の動作はこれらの操作デバイスを用いて制御できる。
　統括制御部１７は、医療画像処理装置１０の各部の動作を統括的に制御する。入力受信部１６が操作デバイスを用いた操作入力を受信した場合には、統括制御部１７は、その操作入力にしたがって医療画像処理装置１０の各部を制御する。
　保存部１８は、医療画像処理装置１０が含むメモリ等の記憶デバイス（図示しない）、または、内視鏡装置２１等の医療装置もしくはＰＡＣＳ２２が含む記憶デバイス（図示しない）に、必要に応じて異常領域の判別結果、異常領域が含む異常の種類もしくは進行度の鑑別結果、または、悪性度等を保存する。
　以下、医療画像処理装置１０の動作の流れを説明する。図４に示すように、医療画像取得部１１は、自動的に、または、手動選択により、複数の内視鏡画像を取得する（ステップＳ１１０）。本実施形態においては、図５に示す内視鏡画像６１，６２，６３，６４，６５，６６，６７，６８，６９、及び、図６に示す内視鏡画像７４，８１，８８，９１等を取得する。
　医療画像取得部１１が医療画像を取得すると、異常領域判別部５１は、各医療画像の異常領域を判別する（ステップＳ１１１）。本実施形態においては、内視鏡画像９１に異常領域Ｘ１があり（図６参照）、内視鏡画像７４に異常領域Ｘ２があり（図６参照）、内視鏡画像８８に異常領域Ｘ３があり（図６参照）、内視鏡画像６６に異常領域Ｘ４があり（図５参照）、かつ、内視鏡画像８１に異常領域Ｘ５（図６参照）がある。内視鏡画像６１等、その他の医療画像においては異常領域はない。
　異常領域判別部５１が異常領域を判別すると、少なくとも、悪性度鑑別部５２が各異常領域Ｘ１～Ｘ５が含む異常、すなわち、各々の病変等の悪性度を鑑別する（ステップＳ１１２）。本実施形態においては、異常領域Ｘ１の悪性度が最も高く、次いで、異常領域Ｘ２、異常領域Ｘ３、異常領域Ｘ４の順に悪性度が高く、かつ、異常領域Ｘ５の悪性度は異常領域Ｘ１～Ｘ５のなかで最も低い。
　悪性度鑑別部５２が悪性度を鑑別すると、表示制御部１５は、医療画像取得部１１が取得した医療画像のうち一部または全部を表示部１３の表示画面に一覧表示し、かつ、この一覧表示の際に、悪性度を用いて医療画像を強調表示する（ステップＳ１１３）。
　例えば、図５に示すように、内視鏡画像６１等を撮影時刻順に一覧表示すると、撮影時刻が早い内視鏡画像６１等の表示順が早くなる。したがって、医療画像取得部１１が取得した内視鏡画像６１等のうち、内視鏡画像６６等の異常領域がある内視鏡画像の一部または全部（図６においては内視鏡画像６６以外の異常領域がある内視鏡画像９１等）は、例えば、スクロールバー５６を用いて表示画面を遷移しなければ見つけることができない。また、スクロールバー５６を用いて表示画面を遷移して、異常領域がある内視鏡画像９１等を探す場合においても、異常領域を含まない内視鏡画像６１等を含めて異常領域の有無を確認しなければならないので、医師等の負担になる。
　一方、医療画像処理装置１０においては、表示制御部１５が、例えば、図６に示すように、悪性度が高い順に内視鏡画像９１等を配列して一覧表示する。すなわち、表示制御部１５は、撮影時刻に関わらず、異常領域がある内視鏡画像９１等を異常領域を含まない内視鏡画像６１等よりも優先して表示することによって強調する。これにより、医師等は、異常領域がある内視鏡画像９１等を、異常領域を含まない内視鏡画像６１よりも容易に見つけることができる。また、異常領域がある内視鏡画像９１等の中で見ても、表示制御部１５は、悪性度がより高いものを優先的に表示するので、表示制御部１５が一覧表示する順に内視鏡画像９１等を観察すれば、容易に診断等を行うことができる。
　上記のように、医療画像処理装置１０は、病変等の悪性度を用いて複数の医療画像を一覧表示するので、従来の医療画像処理装置等と比較して、診断等に必要な医療画像を、従来よりも迅速かつ正確に選択可能である。被写体の赤み等の診断における１つの判断材料にしたがって医療画像の表示順をソートするのではなく、より診断の実情に即した総合的な判断基準である「悪性度」にしたがって、悪性度が高い医療画像を見つけやすくするので、見落とし等もより確実に防止できる。
　上記第１実施形態においては、表示制御部１５は、表示部１３に表示する医療画像を、悪性度の順にソートして一覧表示しているが、表示制御部１５は、表示部１３に表示する医療画像を悪性度の順にソートする代わりに、または、医療画像を悪性度の順にソートした上でさらに、医療画像を相対的に拡大または縮小することで、悪性度が高い医療画像を強調表示することができる。例えば、図７に示すように、内視鏡画像６１を撮影時刻順に表示する場合に、表示制御部１５は、異常領域を含まない内視鏡画像６１と比べて、悪性度が高い病変等を含む内視鏡画像６６を相対的に拡大することで、内視鏡画像６６を強調表示することができる。こうすると、表示画面に一覧表示している内視鏡画像６１等のなかでも、診断等において注目すべき内視鏡画像６６を容易に見つけることができる。図７においては、図５の表示態様と比較して、異常領域Ｘ４がある内視鏡画像６６を拡大し、かつ、異常領域を含まない内視鏡画像６１等を縮小しているが、異常領域Ｘ４がある内視鏡画像６６の拡大、または、異常領域を含まない内視鏡画像６１等の縮小のうち、少なくともいずれか一方を行えば、内視鏡画像６６を相対的に強調表示することができる。但し、異常領域を含む医療画像は、少なくとも異常領域を含まない医療画像よりは大きく表示する。
　なお、表示制御部１５は、医療画像の拡大率または縮小率を、悪性度を用いて設定することができる。例えば、悪性度が高いほど拡大率を大きく、悪性度が低いほど縮小率を大きくすれば、悪性度が高い病変等を含む医療画像ほど相対的に目立つようになるので、医師等は診断等において必要な医療画像をさらに迅速かつ正確に選択できる。
　上記第１実施形態においては、表示制御部１５は、表示部１３に表示する医療画像を、悪性度の順にソートして一覧表示しているが、表示制御部１５は、強調フラグを付して、異常領域がある内視鏡画像６６等を強調表示することができる。例えば、図８に示すように、悪性度が高い病変等を含む内視鏡画像６６に強調枠５７を付すことで、異常領域を含まない内視鏡画像６１等に対して相対的に強調することができる。また、図９に示すように、悪性度が高い病変等を含む内視鏡画像６６に強調マーク５８を付すことで、異常領域を含まない内視鏡画像６１等に対して相対的に強調することができる。これらのように、強調フラグを付せば、表示画面に一覧表示している内視鏡画像６１等のなかでも、診断等において注目すべき内視鏡画像６６を容易に見つけることができる。
　なお、上記強調フラグを付す強調表示は、悪性度を用いたソートもしくは悪性度を用いた相対的な拡大の代わりに、または、これらと組み合わせて行うことができる。強調枠５７または強調マーク５８の形状、色、太さ、または大きさ等は、悪性度を用いて設定することができる。例えば、悪性度によって強調枠５７または強調マーク５８の色を変えれば、強調枠５７または強調マーク５８の色によって悪性度を容易に判別できるので、医師等は診断等において必要な医療画像をさらに迅速かつ正確に選択できる。
　上記第１実施形態においては、表示制御部１５は、表示部１３に表示する医療画像を、悪性度の順にソートして一覧表示しているが、表示制御部１５は、表示色を調節して、異常領域がある内視鏡画像６６等を強調表示することができる。図１０に示すように、例えば、異常領域を含まない内視鏡画像６１をグレーアウトすることで、悪性度が高い病変等を含む内視鏡画像６６を相対的に強調することができる。
　なお、上記表示色の調節による強調表示は、悪性度を用いたソート、悪性度を用いた相対的な拡大、もしくは、強調フラグを付す強調表示の代わりに、または、これらと組み合わせて行うことができる。また、上記変形例では、異常領域を含まない内視鏡画像６１等を着色しているが、悪性度が高い病変等を含む内視鏡画像６６等を着色して目立たせることによって強調することができる。もちろん、異常領域を含まない内視鏡画像６１等と異常領域を含む内視鏡画像６６等をそれぞれ異なる色で着色することで、悪性度が高い病変等を含む内視鏡画像６６等を強調することができる。表示色の調節による強調表示をする場合、医療画像の表示色は、悪性度を用いて設定することができる。医療画像の表示色を悪性度を用いて設定すれば、医療画像の表示色によって悪性度を容易に判別できるので、医師等は診断等において必要な医療画像をさらに迅速かつ正確に選択できる。
　［第２実施形態］
　内視鏡装置２１等の医療装置を用いて検査を行う際には、病変等の異常を、例えば撮影条件を変えて複数回撮影し、同一の異常を含む複数の医療画像を取得する場合がある。これらは同一の異常を撮影しているため、基本的に、悪性度鑑別部５２が鑑別する悪性度はほぼ同一（異なっていても近い値）である。しかし、撮影条件によっては、診断における使いやすさ（病変等の観察しやすさ等）が異なるので、これらを平等に強調表示するよりも、より診断に使用しやすい医療画像を優先的に強調表示することが望ましい。
　このため、本第２実施形態においては、図１１に示すように、医療画像解析処理部１２に、異常領域判別部５１、悪性度鑑別部５２、及び、記憶部５３に加えて、同一異常領域判別部２０１を設ける。この他の構成は、第１実施形態と同様である。
　同一異常領域判別部２０１は、医療画像取得部１１が取得した複数の医療画像が同一の異常を含む異常領域を有するか否かを判別する。「同一の異常」とは、異常と判別する対象が同じ対象であることをいう。例えば、内視鏡画像６６は異常領域Ｘ４を含むが、異常領域Ｘ４が含む病変等を内視鏡画像６６とは異なる距離、角度、または明るさ等において撮影した内視鏡画像は、内視鏡画像６６と同一の異常を含む。一方、内視鏡画像６６の異常領域Ｘ４が含む病変等が癌であり、かつ、内視鏡画像９１の異常領域Ｘ１が含む病変等が癌である場合であっても、異常領域Ｘ４の癌と異常領域Ｘ１の癌が腸管の異なる位置にある別個の癌である場合、これらは同じ対象を撮影したものではないから、内視鏡画像６６と内視鏡画像９１は同一の異常を含まない。また、同一異常領域判別部２０１は、医療画像を用いて算出する特徴量（色情報もしくは輝度値等）、類似度、動きの向き及び大きさを表す動きベクトル、または、比較する医療画像の撮影時刻の近さ等のうち１または複数を組み合わせて、上記同一異常領域判別処理をする。
　同一の異常を含む異常領域を有する２以上の医療画像がある場合、表示制御部１５は、悪性度と、医療画像の撮影距離と、を用いて、同一の異常を含む異常領域を有する２以上の医療画像のうち少なくとも一部の医療画像の表示を強調または抑制する。例えば、表示制御部１５は、同一の異常を含む異常領域を有する２以上の医療画像のうち、相対的に撮影距離が近い医療画像の表示を強調または抑制し、または、同一の異常を含む異常領域を有する２以上の医療画像のうち、相対的に撮影距離が遠い医療画像の表示を強調または抑制する。より具体的には、例えば、病変等の種類または進行度によっては、表示制御部１５は、同一の異常を含む異常領域を有する２以上の医療画像のうち、相対的に撮影距離が近い医療画像の表示を強調し、または、相対的に撮影距離が遠い医療画像の表示を抑制する。また、病変等の種類または進行度によっては、表示制御部１５は、同一の異常を含む異常領域を有する２以上の医療画像のうち、撮影距離が、撮影部位（食道、胃、または大腸等）ごとに定める所定の撮影距離（適正な撮影距離）に近い医療画像の表示を他の医療画像の表示と比較して強調し、または、撮影距離が撮影部位ごとに定める所定の撮影距離から遠い医療画像の表示を他の医療画像の表示と比較して抑制する。
　なお、撮影距離とは、内視鏡装置２１の場合、内視鏡３１と被写体との距離であり、かつ、内視鏡３１がズーム機能を有する場合には、撮影倍率を含めた内視鏡３１と被写体との実質的な距離である。表示制御部１５は、医療画像の撮影距離を、医療画像のヘッダ等、ＰＡＣＳ２２、まは、内視鏡装置２１等の医療画像を撮影した医療装置から取得する。
　以下、同一異常領域判別部２０１を含む、医療画像処理装置１０の動作の流れを説明する。図１２に示すように、医療画像取得部１１は、自動的に、または、手動選択により、複数の内視鏡画像を取得する（ステップＳ２１０）。本実施形態においては、医療画像取得部１１は、少なくとも、図１３に示す内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３を含む、複数の内視鏡画像を取得する。内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３は、いずれも異常領域Ｘ２０を撮影した内視鏡画像である。但し、内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３はそれぞれ撮影距離が異なる。内視鏡画像２１１は、内視鏡画像２１２、及び、内視鏡画像２１３のうち、最も撮影距離が近い内視鏡画像である。内視鏡画像２１２は、２番目に撮影距離が近い内視鏡画像であり、かつ、内視鏡画像２１３は、内視鏡画像２１１は、内視鏡画像２１２、及び、内視鏡画像２１３のうちで最も撮影距離が遠い内視鏡画像である。
　医療画像取得部１１が医療画像を取得すると、異常領域判別部５１は各医療画像の異常領域を判別し（ステップＳ２１１）、悪性度鑑別部５２が悪性度を鑑別する（ステップＳ２１２）。その後、同一異常領域判別部２０１は、各医療画像が同一の異常を含む異常領域を有するか否かを判別する（ステップＳ２１３）。本実施形態においては、内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３は、同一の異常領域Ｘ２０を含む。
　表示制御部１５は、悪性度と、撮影距離と、を用いて、複数の内視鏡画像を表示部１３に一覧表示する（ステップＳ２１４）。例えば、図１３に示すように、表示制御部１５は、例えば、第１実施形態と同様に複数の内視鏡画像を悪性度の順にソートして表示する。そして、同一の異常領域Ｘ２０を含む内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３の並び順については、同一の異常領域Ｘ２０を含むために悪性度はほぼ同じであるから、これらは撮影距離が近い順に配列する。
　上記のように、同一の異常領域Ｘ２０を判別し、同一の異常領域Ｘ２０を有する内視鏡画像２１１、内視鏡画像２１２、及び、内視鏡画像２１３を撮影距離の順に配列すると、病変等がほぼ同じ悪性度である場合でも、診断においてより使いやすい内視鏡画像２１１を相対的に強調することができる。この結果、診断等に必要な内視鏡画像を特に迅速かつ正確に選択できる。
　上記第２実施形態においては、表示制御部１５は、表示部１３に表示する複数の内視鏡画像を悪性度及び撮影距離の順にソートして一覧表示するが、図１４に示すように、表示制御部１５は、悪性度及び撮影距離の順に内視鏡画像２１１を相対的に拡大して強調することができる。強調フラグを付して強調する場合、表示色の調節をして強調する場合も同様に、悪性度及び撮影距離を用いることができる。
　なお、第２実施形態においては、表示制御部１５は、複数の医療画像のうち、撮影距離が手技に応じて異なる基準撮影距離に相対的に近い１または複数の医療画像の表示を優先的に強調し、または、撮影距離が基準撮影距離から相対的に遠い１または複数の医療画像の表示を抑制することができる。手技とは、スクリーニング、診断、または、処置等である。基準撮影距離とは、表示を強調または抑制する基準とする撮影距離である。上記のように手技に応じて基準撮影距離を設定するのは、例えば、スクリーニングする際と、診断する際と、処置をする際とでは、撮影の目的が異なるので、適正な撮影距離が異なるからである。上記のように手技に応じて基準撮影距離を設定する場合、例えば、内視鏡装置２１等の医療装置またはＰＡＣＳ２２は医療画像のヘッダ等に各医療画像の撮影目的に関する情報を記録し、表示制御部１５は、医療画像のヘッダ等から、その医療画像の撮影目的に関する情報を得る。そして、表示制御部１５は、適正な撮影距離で撮影した医療画像を、他の医療画像と比較して強調する。こうすると、撮影目的に合致した適切な医療画像の表示を強調することができる。
　上記第１実施形態、第２実施形態、及び、変形例（以下、上記実施形態等という）においては、対応関係５４を予め定めているが、対応関係５４は、患者ごとに、または、医師ごとに設定可能である。患者ごと、または、医師ごとに、診断の対象とする病変等が異なるからである。また、入力受信部１６等を用いて、対応関係５４に変更があった場合、記憶部５３は、変更後の対応関係５４を自動的に、または、手動による設定変更の保存操作に応じて記憶する。このため、例えば、患者ごと、または、医師ごとの対応関係５４の設定を検査ごとにやり直す必要はなく、悪性度鑑別部５２は、設定変更後の対応関係５４を自動的に使用する。
　上記実施形態等における医療画像解析処理部１２を構成する各部は、機械学習またはディープラーニング等により学習した、いわゆるＡＩ（Artificial Intelligence）プログラムを用いて構成することができる。
　上記実施形態等においては、医療画像処理装置１０と内視鏡装置２１は別個の装置であるが、内視鏡装置２１は、医療画像処理装置１０を含むことができる。この場合、図１５に示す内視鏡装置５１０のように、医療画像処理装置１０を構成する各部５２０は、プロセッサ装置３３に設ける。但し、表示部１３は、内視鏡装置２１のモニタ３４を共用できる。また、医療画像取得部１１は、イメージセンサ４１及び内視鏡画像生成部４８が形成する「内視鏡画像取得部」に相当する。このため、プロセッサ装置３３には医療画像取得部１１及び表示部１３以外の各部を設ければ足りる。その他の各部の構成は、第１実施形態と同様である。また、上記各実施形態及びその他変形例の医療画像処理装置１０と、図２の内視鏡装置２１と、の全体で新たな内視鏡装置を構成できる。
　また、図１６に示すように、内視鏡装置２１その他モダリティと組み合わせて使用する診断支援装置６１０は、上記実施形態及びその他変形例の医療画像処理装置１０を含むことができる。また、図１７に示すように、例えば内視鏡装置２１を含む、第１検査装置６２１、第２検査装置６２２、…、第Ｎ検査装置６２３等の各種検査装置と任意のネットワーク６２６を介して接続する医療業務支援装置６３０は、上記実施形態及びその他変形例の医療画像処理装置１０を含むことができる。
　この他、医療画像処理装置１０、及び、医療画像処理装置１０を含む各種装置、及び、医療画像処理装置１０の機能を内包する各種装置またはシステムは、以下の種々の変更等をして使用できる。
　医療画像としては、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像を用いることができる。
　医療画像としては、特定の波長帯域の光を照射して得た画像を使用する場合、特定の波長帯域は、白色の波長帯域よりも狭い帯域を用いることができる。
　特定の波長帯域は、例えば、可視域の青色帯域または緑色帯域である。
　特定の波長帯域が可視域の青色帯域または緑色帯域である場合、特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。
　特定の波長帯域は、例えば、可視域の赤色帯域である。
　特定の波長帯域が可視域の赤色帯域である場合、特定の波長帯域は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。
　特定の波長帯域は、例えば、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有することができる。
　特定の波長帯域が、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する場合、特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有することが好ましい。
　医療画像が生体内を写した生体内画像である場合、この生体内画像は、生体内の蛍光物質が発する蛍光の情報を有することができる。
　また、蛍光は、ピーク波長が３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る蛍光を利用できる。
　医療画像が生体内を写した生体内画像である場合、前述の特定の波長帯域は、赤外光の波長帯域を利用することができる。
　医療画像が生体内を写した生体内画像であり、前述の特定の波長帯域として、赤外光の波長帯域を利用する場合、特定の波長帯域は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有することが好ましい。
　医療画像取得部１１は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有することができる。この場合、医療画像として特殊光画像を利用できる。
　特定の波長帯域の信号は、通常光画像に含むＲＧＢまたはＣＭＹの色情報に基づく演算により得ることができる。
　白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備えることができる。この場合、医療画像として特徴量画像を利用できる。
　内視鏡装置２１については、内視鏡３１としてカプセル内視鏡を使用できる。この場合、光源装置３２と、プロセッサ装置３３の一部と、はカプセル内視鏡に搭載できる。
　上記実施形態等において、医療画像取得部１１、医療画像解析処理部１２（医療画像解析処理部１２を構成する各部）、表示制御部１５、入力受信部１６、統括制御部１７、並びに、内視鏡装置２１の内視鏡画像生成部４８等といった各種の処理を実行する処理部（processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit)、ＦＰＧＡ (Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
　１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡや、ＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。
　さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路（circuitry）である。
　１０　医療画像処理装置
　１１　医療画像取得部
　１２　医療画像解析処理部
　１３　表示部
　１５　表示制御部
　１６　入力受信部
　１７　統括制御部
　１８　保存部
　２１，５１０　内視鏡装置
　２２　ＰＡＣＳ
　３１　内視鏡
　３２　光源装置
　３３　プロセッサ装置
　３４　モニタ
　４１　イメージセンサ
　４２　光源部
　４７　光源制御部
　４８　内視鏡画像生成部
　５１　異常領域判別部
　５２　悪性度鑑別部
　５３　記憶部
　５４　対応関係
　５６　スクロールバー
　５７　強調枠
　５８　強調マーク
　６１～６９，７４，８１，８８，９１，２１１～２１３　内視鏡画像
　２０１　同一異常領域判別部
　５２０　医療画像処理装置を構成する各部
　６１０　診断支援装置
　６２１　第１検査装置
　６２２　第２検査装置
　６２３　第Ｎ検査装置
　６２６　ネットワーク
　６３０　医療業務支援装置
　Ｘ１～Ｘ５，Ｘ２０　異常領域
　Ｓ１１０～Ｓ１１３、Ｓ２１０～Ｓ２１４　動作のステップ

Claims (12)

  1. 　被写体像を含む医療画像を取得する医療画像取得部と、
    　複数の前記医療画像を表示する表示部と、
    　前記医療画像を用いて、異常領域を判別する異常領域判別部と、
    　前記異常領域が含む異常の悪性度を鑑別する悪性度鑑別部と、
    　前記表示部に複数の前記医療画像を表示する際に、前記悪性度を用いて複数の前記医療画像のうち少なくとも一部の前記医療画像の表示を強調または抑制する表示制御部と、
    　を備える医療画像処理装置。
  2. 　前記悪性度鑑別部は、前記異常領域が含む異常の種類または異常の進行度を鑑別し、かつ、前記異常の種類または前記異常の進行度を用いて前記悪性度を定める請求項１に記載の医療画像処理装置。
  3. 　前記異常の種類または前記異常の進行度と、前記悪性度と、を対応付ける対応関係を記憶する記憶部を備え、
    　前記悪性度鑑別部は、前記記憶部が記憶する前記対応関係を用いて、前記異常の種類または前記異常の進行度から前記悪性度を求める請求項２に記載の医療画像処理装置。
  4. 　前記対応関係は、患者ごとに、または、医師ごとに設定可能である請求項３に記載の医療画像処理装置。
  5. 　前記対応関係に変更があった場合、前記記憶部は、変更後の前記対応関係を記憶する請求項３または４に記載の医療画像処理装置。
  6. 　前記表示制御部は、複数の前記医療画像を前記悪性度の順に配列する請求項１～５のいずれか１項に記載の医療画像処理装置。
  7. 　前記表示制御部は、前記医療画像に強調フラグを付し、前記医療画像に文字を付し、前記医療画像の表示色を調節し、または、前記医療画像の表示サイズを調節することにより、複数の前記医療画像のうち少なくとも一部の前記医療画像の表示を強調または抑制する請求項１～６のいずれか１項に記載の医療画像処理装置。
  8. 　複数の前記医療画像が同一の異常を含む前記異常領域を有するか否かを判別する同一異常領域判別部を備え、
    　同一の異常を含む前記異常領域を有する２以上の前記医療画像がある場合に、前記表示制御部は、前記悪性度と、前記医療画像の撮影距離と、を用いて、同一の異常を含む前記異常領域を有する２以上の前記医療画像のうち少なくとも一部の前記医療画像の表示を強調または抑制する請求項１～７のいずれか１項に記載の医療画像処理装置。
  9. 　前記表示制御部は、同一の異常を含む前記異常領域を有する２以上の前記医療画像のうち、相対的に撮影距離が近い前記医療画像の表示を強調または抑制する請求項８に記載の医療画像処理装置。
  10. 　前記表示制御部は、同一の異常を含む前記異常領域を有する２以上の前記医療画像のうち、相対的に撮影距離が遠い前記医療画像の表示を強調または抑制する請求項８に記載の医療画像処理装置。
  11. 　前記表示制御部は、同一の異常を含む前記異常領域を有する２以上の前記医療画像のうち、前記撮影距離が、撮影部位ごとに定める所定の撮影距離に近い前記医療画像を他の前記医療画像と比較して強調または抑制する請求項８に記載の医療画像処理装置。
  12. 　前記表示制御部は、複数の前記医療画像のうち、前記撮影距離が手技に応じて異なる基準撮影距離に相対的に近い１または複数の前記医療画像の表示を優先的に強調し、または、前記撮影距離が前記基準撮影距離から相対的に遠い１または複数の前記医療画像の表示を抑制する請求項８に記載の医療画像処理装置。
PCT/JP2018/038511 2017-10-26 2018-10-16 医療画像処理装置 WO2019082741A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019551032A JP6827557B2 (ja) 2017-10-26 2018-10-16 医療画像処理装置
CN201880069571.7A CN111278349B (zh) 2017-10-26 2018-10-16 医疗图像处理装置
EP18871467.9A EP3701852B1 (en) 2017-10-26 2018-10-16 Medical image processing device
US16/857,163 US11132795B2 (en) 2017-10-26 2020-04-23 Medical image processing apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017207132 2017-10-26
JP2017-207132 2017-10-26

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/857,163 Continuation US11132795B2 (en) 2017-10-26 2020-04-23 Medical image processing apparatus

Publications (1)

Publication Number Publication Date
WO2019082741A1 true WO2019082741A1 (ja) 2019-05-02

Family

ID=66247810

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/038511 WO2019082741A1 (ja) 2017-10-26 2018-10-16 医療画像処理装置

Country Status (5)

Country Link
US (1) US11132795B2 (ja)
EP (1) EP3701852B1 (ja)
JP (1) JP6827557B2 (ja)
CN (1) CN111278349B (ja)
WO (1) WO2019082741A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022059668A1 (ja) * 2020-09-15 2022-03-24 富士フイルム株式会社 医用画像処理装置及び医用画像処理装置の作動方法並びに医用画像処理装置用プログラム
WO2022230607A1 (ja) * 2021-04-26 2022-11-03 富士フイルム株式会社 医療画像処理装置、内視鏡システム、及び医療画像処理装置の作動方法
WO2023153069A1 (ja) * 2022-02-09 2023-08-17 富士フイルム株式会社 医療画像装置、内視鏡システム、及び、診断書作成システム

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101898580B1 (ko) * 2018-01-22 2018-09-13 주식회사 뷰노 영상의 열람을 지원하는 방법 및 이를 이용한 장치
US11100633B2 (en) 2018-06-13 2021-08-24 Cosmo Artificial Intelligence—Al Limited Systems and methods for processing real-time video from a medical image device and detecting objects in the video
JP7084994B2 (ja) * 2018-07-06 2022-06-15 オリンパス株式会社 内視鏡用画像処理装置、及び、内視鏡用画像処理装置の作動方法、並びに、内視鏡用画像処理プログラム
EP3821790B1 (en) * 2018-07-09 2024-07-24 FUJIFILM Corporation Medical image processing device, medical image processing system, medical image processing method, and program
US11944262B2 (en) * 2019-03-27 2024-04-02 Hoya Corporation Endoscope processor, information processing device, and endoscope system
WO2022209390A1 (ja) * 2021-03-31 2022-10-06 富士フイルム株式会社 内視鏡システム及びその作動方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012132840A1 (ja) * 2011-03-30 2012-10-04 オリンパスメディカルシステムズ株式会社 画像管理装置、方法、及びプログラム、並びにカプセル型内視鏡システム
JP2013085593A (ja) 2011-10-14 2013-05-13 Toshiba Corp 医用画像表示装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3263111B2 (ja) * 1992-01-29 2002-03-04 株式会社東芝 画像保管通信システム及びその端末装置
JP3634634B2 (ja) * 1998-07-27 2005-03-30 三洋電機株式会社 歯科診療支援装置
JP2002099896A (ja) * 2000-09-22 2002-04-05 Fuji Photo Film Co Ltd 異常陰影候補検出方法および装置
JP2004135868A (ja) * 2002-10-17 2004-05-13 Fuji Photo Film Co Ltd 異常陰影候補検出処理システム
US7871788B2 (en) * 2004-07-30 2011-01-18 Nagoya Industrial Science Research Institute Method of judging grade of malignancy of carcinoma cell using ATBF-1
US7738683B2 (en) * 2005-07-22 2010-06-15 Carestream Health, Inc. Abnormality detection in medical images
GB0521521D0 (en) * 2005-10-21 2005-11-30 Medical Res Council Diagnostic methods and kits
JP2010068865A (ja) * 2008-09-16 2010-04-02 Fujifilm Corp 画像診断装置
EP2316327B1 (en) * 2008-10-14 2013-05-15 Olympus Medical Systems Corp. Image display device, image display method, and image display program
JP5460506B2 (ja) * 2009-09-24 2014-04-02 富士フイルム株式会社 内視鏡装置の作動方法及び内視鏡装置
JP5421756B2 (ja) * 2009-12-11 2014-02-19 富士フイルム株式会社 画像表示装置および方法並びにプログラム
JP5698483B2 (ja) * 2010-09-22 2015-04-08 オリンパス株式会社 蛍光観察装置
CN104135908B (zh) * 2012-03-28 2016-07-06 富士胶片株式会社 摄像装置以及具备其的内窥镜装置
JP6027803B2 (ja) * 2012-07-17 2016-11-16 Hoya株式会社 画像処理装置及び内視鏡装置
KR102043133B1 (ko) * 2012-11-16 2019-11-12 삼성전자주식회사 컴퓨터 보조 진단 지원 장치 및 방법
JP6422198B2 (ja) * 2012-11-29 2018-11-14 オリンパス株式会社 画像処理装置、画像処理方法、及び画像処理プログラム
TWI522367B (zh) * 2013-04-12 2016-02-21 Univ Chang Gung Urine biomarkers are used to predict bladder and kidney cancer
WO2015076004A1 (ja) * 2013-11-21 2015-05-28 オリンパスメディカルシステムズ株式会社 画像表示装置
CN103654691B (zh) * 2013-12-27 2015-10-28 上海交通大学 胃肠道癌前病变无创诊查装置
RU2589652C1 (ru) * 2015-04-17 2016-07-10 Общество С Ограниченной Ответственностью "Сибнейро" (Ооо "Сибнейро") Способ предоперационного определения степени злокачественности и гистологического подтипа опухолей оболочек головного мозга
JP6461739B2 (ja) * 2015-07-28 2019-01-30 富士フイルム株式会社 画像処理装置及び内視鏡システム並びに画像処理装置の作動方法
JP6633641B2 (ja) * 2015-09-29 2020-01-22 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012132840A1 (ja) * 2011-03-30 2012-10-04 オリンパスメディカルシステムズ株式会社 画像管理装置、方法、及びプログラム、並びにカプセル型内視鏡システム
JP2013085593A (ja) 2011-10-14 2013-05-13 Toshiba Corp 医用画像表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3701852A4

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022059668A1 (ja) * 2020-09-15 2022-03-24 富士フイルム株式会社 医用画像処理装置及び医用画像処理装置の作動方法並びに医用画像処理装置用プログラム
JP7495511B2 (ja) 2020-09-15 2024-06-04 富士フイルム株式会社 医用画像処理装置及び医用画像処理装置の作動方法並びに医用画像処理装置用プログラム
WO2022230607A1 (ja) * 2021-04-26 2022-11-03 富士フイルム株式会社 医療画像処理装置、内視鏡システム、及び医療画像処理装置の作動方法
WO2023153069A1 (ja) * 2022-02-09 2023-08-17 富士フイルム株式会社 医療画像装置、内視鏡システム、及び、診断書作成システム

Also Published As

Publication number Publication date
EP3701852B1 (en) 2023-05-10
CN111278349A (zh) 2020-06-12
US20200258224A1 (en) 2020-08-13
EP3701852A1 (en) 2020-09-02
JPWO2019082741A1 (ja) 2020-10-22
US11132795B2 (en) 2021-09-28
EP3701852A4 (en) 2020-12-02
JP6827557B2 (ja) 2021-02-10
CN111278349B (zh) 2023-03-24

Similar Documents

Publication Publication Date Title
JP6827557B2 (ja) 医療画像処理装置
JP6785948B2 (ja) 医療用画像処理装置及び内視鏡システム並びに医療用画像処理装置の作動方法
JP7296498B2 (ja) 医療画像処理装置、及び、内視鏡装置
US11449988B2 (en) Medical image processing apparatus
JP7146925B2 (ja) 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法
US11605363B2 (en) Medical image processing apparatus for reducing examination load
JP6785990B2 (ja) 医療画像処理装置、及び、内視鏡装置
JP6834019B2 (ja) 医療画像処理装置、及び、内視鏡装置
US20230237659A1 (en) Image processing apparatus, endoscope system, operation method of image processing apparatus, and non-transitory computer readable medium
JP6866497B2 (ja) 医療画像処理装置、及び、内視鏡装置
JP7556961B2 (ja) 内視鏡システム、内視鏡システムの作動方法、及び内視鏡システム用プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18871467

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019551032

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018871467

Country of ref document: EP

Effective date: 20200526