WO2022172574A1 - 内視鏡システム、及び内視鏡システムの作動方法 - Google Patents

内視鏡システム、及び内視鏡システムの作動方法 Download PDF

Info

Publication number
WO2022172574A1
WO2022172574A1 PCT/JP2021/045673 JP2021045673W WO2022172574A1 WO 2022172574 A1 WO2022172574 A1 WO 2022172574A1 JP 2021045673 W JP2021045673 W JP 2021045673W WO 2022172574 A1 WO2022172574 A1 WO 2022172574A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
temporarily stored
images
selection condition
temporary storage
Prior art date
Application number
PCT/JP2021/045673
Other languages
English (en)
French (fr)
Inventor
弘亮 岩根
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2022581207A priority Critical patent/JPWO2022172574A1/ja
Priority to CN202180093512.5A priority patent/CN116829046A/zh
Publication of WO2022172574A1 publication Critical patent/WO2022172574A1/ja
Priority to US18/448,396 priority patent/US20230380660A1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/0002—Operational features of endoscopes provided with data storages
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00055—Operational features of endoscopes provided with output arrangements for alerting the user

Definitions

  • the present invention relates to an endoscope system that saves still images and a method of operating the endoscope system.
  • an image (hereinafter referred to as an endoscopic image) obtained by photographing an observation object, which is a subject, with an endoscope can be saved as a still image.
  • a still image is used for display on a display, attachment to a medical report, or the like, and is useful for diagnosis.
  • endoscopes do not have an autofocus function.
  • the user himself/herself operates the endoscope and adjusts the distance to the subject, thereby obtaining an optimally focused still image.
  • the user since the subject of the endoscope is an internal organ, the user appropriately adjusts the distance between the distal end of the endoscope 12 and the subject 91 to be the distance db, and focuses on the internal organs.
  • the object 91 may move, for example, by a distance dm due to pulsation, peristalsis, or the like.
  • the distance between the endoscope 12 and the subject 91 becomes the distance db+c, away from the in-focus distance db, and the resulting image is out of focus.
  • the photographing conditions such as the distance to the object unexpectedly change, making it difficult to obtain an optimally focused still image.
  • An object of the present invention is to provide an endoscope system and an operation method of the endoscope system that can easily acquire an optimal still image according to changes in imaging conditions.
  • the present invention is an endoscope system comprising an endoscope for photographing a subject and a processor, the endoscope having a pointing section, and the processor for obtaining an endoscope by photographing the subject with the endoscope.
  • a mirror image is acquired for each frame, and an endoscopic image selected based on the first selection condition or the second selection condition is temporarily stored in a temporary storage area, and each of the temporarily stored images temporarily stored in the temporary storage area is stored.
  • an image evaluation value is given by performing image evaluation, switching between the first selection condition and the second selection condition based on the selection condition switching instruction, and based on the still image storage instruction, the image evaluation value is obtained from the temporarily stored image
  • the selected optimum still image is stored, and the instruction unit instructs switching of selection conditions and still image storage.
  • the processor preferably temporarily saves the endoscopic image selected based on the first selection condition when starting to acquire the endoscopic image.
  • the instruction unit performs the first action and the second action, and instructs to save the still image by the second action.
  • the instruction unit includes a momentary switch, the first action is pressing the momentary switch, and the second action is releasing the pressed momentary switch.
  • the instruction unit includes an alternate switch, the first action is pressing and releasing the alternate switch for the first time, and the second action is pressing and releasing the alternate switch for the second time.
  • the processor measures a period from the first action to the second action, and if the period is equal to or longer than a preset determination period, the instruction unit issues a selection condition switching instruction when the determination period has elapsed from the first action. is preferred.
  • the instruction unit preferably issues a selection condition switching instruction when the processor temporarily stores the endoscopic image based on the second selection condition when the still image storage instruction is issued.
  • the processor temporarily stores the selected endoscopic images in the temporary storage area in a number equal to or less than a preset maximum number of temporarily stored images, and the first selection condition is that the number of temporarily stored images is less than the maximum number in the temporary storage area. If they have been saved, the first A selection condition is to temporarily save the endoscopic images as temporarily saved images in the temporary save area until the maximum number of images is reached in the order of the latest photographing time, and the maximum number of temporarily saved images are temporarily saved in the temporary save area.
  • the 1B selection condition is to delete the temporarily stored image with the oldest shooting time among the temporarily stored images temporarily stored in the temporary storage area from the temporary storage area, and then delete the image with the shooting time It is preferable to temporarily store the endoscopic images in the temporary storage area in the order of newest as the temporarily stored images.
  • the processor temporarily stores the selected endoscopic images in the temporary storage area in a number equal to or less than a preset maximum number of temporarily stored images, and the second selection condition is that the number of temporarily stored images is less than the maximum number in the temporary storage area. If they are saved, the 2A selection condition is to temporarily save endoscopic images as temporarily saved images in the temporary save area until the maximum number of images is reached in the order of the latest photographing time, and temporarily save the maximum number of temporarily saved images. If it is temporarily stored in the area, as the second B selection condition, only the appropriate still image selected by the image evaluation value from the temporarily stored image is left in the temporary storage area as the temporary storage image, and the image other than the appropriate image is stored in the temporary storage area. is deleted, and performing the 2nd A selection condition is preferably included.
  • the processor temporarily stores the selected endoscopic images in the temporary storage area in a number equal to or less than a preset maximum number of temporarily stored images, and the second selection condition is that the number of temporarily stored images is less than the maximum number in the temporary storage area. If they are saved, the 2A selection condition is to temporarily save endoscopic images as temporarily saved images in the temporary save area until the maximum number of images is reached in the order of the latest photographing time, and temporarily save the maximum number of temporarily saved images.
  • a display for displaying the optimum still image and/or the appropriate still image and if the display displays the optimum still image and/or the appropriate still image, the display is updated to display the latest optimum still image and/or the appropriate still image. It is preferable to display a picture.
  • the display has a main screen and a sub-screen, and the optimum still image is displayed on the main screen for a preset display period, and displayed on the sub-screen after the display period.
  • the display updates and displays the optimum still image and/or the appropriate still image
  • the notification unit notifies the user of the switching.
  • the notification unit preferably does not notify the user when the notification to the user is performed again within the preset minimum notification period.
  • the processor evaluates the contrast and/or brightness of the temporarily stored image, and the image evaluation value is a value related to the contrast and/or brightness of the temporarily stored image.
  • the processor performs image evaluation on the degree of certainty and/or the degree of malignancy regarding a specific lesion that the subject captured in the temporarily stored image has, and the image evaluation value is the degree of certainty and/or the degree of malignancy.
  • the processor sets a threshold for image evaluation values, and if an image evaluation value equal to or greater than the threshold is assigned to a temporarily stored image, it is assumed that a still image storage instruction has been issued, and the temporarily stored image to which an image evaluation value equal to or greater than the threshold is assigned is deemed to have been issued. It is preferable to save it as an optimal still image.
  • the instruction section preferably includes a freeze operation section.
  • the present invention is a method of operating an endoscope system comprising an endoscope having a pointing section for photographing a subject and a processor, wherein the processor captures an endoscopic image obtained by photographing the subject with the endoscope. is acquired for each frame, and the endoscopic image selected based on the first selection condition or the second selection condition is temporarily stored in the temporary storage area as a temporary storage image, and the temporary storage image temporarily stored in the temporary storage area An image evaluation value is assigned to each image by performing image evaluation, switching between the first selection condition and the second selection condition based on the selection condition switching instruction, and image evaluation from the temporarily stored image based on the still image storage instruction. The optimal still image selected by the value is saved, and the instruction unit instructs switching of the selection condition and still image saving instruction.
  • FIG. 1 is an external view of an endoscope system;
  • FIG. 1 is a block diagram showing functions of an endoscope system;
  • FIG. It is an explanatory view explaining four colors of LED which a light source part includes.
  • 4 is a graph showing spectra of violet light V, blue light B, green light G, and red light R;
  • 4 is a block diagram showing functions of an image storage unit;
  • FIG. 4 is a flow chart showing a series of flows for saving an optimum still image. It is an explanatory view explaining the 1A selection conditions. It is an explanatory view explaining 1B selection conditions.
  • FIG. 11 is an explanatory diagram for explaining the first half of the 2B selection condition and the 2C selection condition;
  • FIG. 11 is an explanatory diagram for explaining the second half of the 2B selection condition;
  • FIG. 11 is an explanatory diagram for explaining the second half of the 2C selection condition;
  • FIG. 11 is an explanatory diagram for explaining a still image save instruction performed under the 2B selection condition;
  • FIG. 11 is an explanatory diagram for explaining a still image saving instruction performed under the 2C selection condition;
  • FIG. 11 is an explanatory diagram illustrating acquisition of an optimum still image by single-pressing a freeze switch;
  • FIG. 11 is an explanatory diagram illustrating acquisition of an optimum still image by long-pressing a freeze switch;
  • FIG. 10 is an explanatory diagram of temporarily stored images acquired every other frame;
  • FIG. 11 is an explanatory diagram for explaining a case where a threshold value of an image evaluation value is used;
  • FIG. 4 is an explanatory diagram illustrating an example of displaying an optimum still image on a display
  • FIG. 11 is an explanatory diagram illustrating a case where an update of an optimum still image is displayed on a display and notified
  • FIG. 4 is an explanatory diagram illustrating a case where the focus of an endoscopic image changes
  • the endoscope system 10 has an endoscope 12, a light source device 14, a processor device 16, a display 18, and a keyboard 19.
  • the endoscope 12 is optically connected to the light source device 14 and electrically connected to the processor device 16 .
  • the endoscope 12 includes an insertion section 12a inserted into the body of a subject having an observation target as a subject, an operation section 12b provided at the proximal end portion of the insertion section 12a, and an operation section 12b provided at the proximal end portion of the insertion section 12a. It has a curved portion 12c and a tip portion 12d provided.
  • the bending portion 12c is bent by operating the angle knob 12e of the operation portion 12b.
  • the distal end portion 12d is directed in a desired direction by the bending motion of the bending portion 12c.
  • the operation unit 12b has a freeze operation unit 12f for issuing a selection condition switching instruction, a still image saving instruction, etc., which will be described later, and a zoom operation unit 12g for changing the imaging magnification.
  • still image storage instructions or zoom operations are performed using the scope switches of the freeze operation section 12f or the zoom operation section 12g, switches of the processor device 16, the keyboard 19, foot switches (not shown), or the like. It may be an operation or an instruction.
  • the processor device 16 is electrically connected to the display 18 and keyboard 19 .
  • the display 18 outputs and displays moving or still endoscopic images and/or information incidental to these images.
  • the keyboard 19 functions as a user interface that receives input operations such as function settings.
  • the processor device 16 may be connected to an external recording unit (not shown) for recording images, image information, and the like.
  • the light source device 14 emits illumination light to irradiate an observation target, and includes a light source unit 20 and a light source processor 21 that controls the light source unit 20 .
  • the light source unit 20 is composed of, for example, a semiconductor light source such as a multicolor LED (Light Emitting Diode), a combination of a laser diode and a phosphor, or a xenon lamp or halogen light source.
  • the light source unit 20 also includes an optical filter and the like for adjusting the wavelength band of light emitted by the LED or the like.
  • the light source processor 21 controls the amount of illumination light by turning on/off each LED or the like and adjusting the driving current or driving voltage of each LED or the like.
  • the light source processor 21 also controls the wavelength band of the illumination light by changing the optical filter or the like.
  • the light source unit 20 includes a V-LED (Violet Light Emitting Diode) 20a, a B-LED (Blue Light Emitting Diode) 20b, a G-LED (Green Light Emitting Diode) 20c, and R-LED (Red Light Emitting Diode) 20d.
  • V-LED Volt Light Emitting Diode
  • B-LED Blue Light Emitting Diode
  • G-LED Green Light Emitting Diode
  • R-LED Red Light Emitting Diode
  • the V-LED 20a generates violet light V with a central wavelength of 410 ⁇ 10 nm and a wavelength range of 380-420 nm.
  • the B-LED 20b generates blue light B with a central wavelength of 450 ⁇ 10 nm and a wavelength range of 420-500 nm.
  • the G-LED 20c generates green light G with a wavelength range of 480-600 nm.
  • the R-LED 20d emits red light R with a central wavelength of 620-630 nm and a wavelength range of 600-650 nm.
  • the light source processor 21 controls the V-LED 20a, B-LED 20b, G-LED 20c, and R-LED 20d.
  • the light source processor 21 emits illumination light having different combinations of light intensity ratios among violet light V, blue light B, green light G, and red light R according to a plurality of observation modes. It controls the LEDs 20a-20d.
  • the light emitted by each of the LEDs 20a to 20e is incident on the light guide 41 via an optical path coupling section (not shown) composed of mirrors, lenses, and the like.
  • the light guide 41 is built in the endoscope 12 and the universal cord (the cord connecting the endoscope 12, the light source device 14 and the processor device 16).
  • the light guide 41 propagates the light from the optical path coupling portion to the distal end portion 12 d of the endoscope 12 .
  • the distal end portion 12d of the endoscope 12 is provided with an illumination optical system 30a and an imaging optical system 30b.
  • the illumination optical system 30 a has an illumination lens 42 , and the illumination light propagated by the light guide 41 is applied to the observation target via the illumination lens 42 .
  • the imaging optical system 30 b has an objective lens 43 , a zoom lens 44 and an imaging sensor 45 .
  • Various kinds of light such as reflected light, scattered light, and fluorescent light from the observation target enter the imaging sensor 45 via the objective lens 43 and the zoom lens 44 .
  • an image of the observation target is formed on the imaging sensor 45 .
  • the zoom lens 44 can be freely moved between the telephoto end and the wide end by operating the zoom operation section 12g to enlarge or reduce the observation target imaged on the imaging sensor 45 .
  • the imaging sensor 45 is a color imaging sensor in which any one of R (red), G (green), or B (blue) color filters is provided for each pixel. to output As the imaging sensor 45, a CCD (Charge Coupled Device) imaging sensor or a CMOS (Complementary Metal-Oxide Semiconductor) imaging sensor can be used. Further, instead of the imaging sensor 45 provided with primary color filters, a complementary color imaging sensor provided with complementary color filters of C (cyan), M (magenta), Y (yellow) and G (green) may be used. . When a complementary color imaging sensor is used, CMYG four-color image signals are output.
  • CCD Charge Coupled Device
  • CMOS Complementary Metal-Oxide Semiconductor
  • CMYG four-color image signal into the RGB three-color image signal by complementary color-primary color conversion
  • RGB image signal similar to that of the image sensor 45 can be obtained.
  • a monochrome sensor without a color filter may be used instead of the imaging sensor 45.
  • a CDS/AGC (Correlated Double Sampling/Automatic Gain Control) circuit 46 performs correlated double sampling (CDS) and automatic gain control (AGC) on analog image signals obtained from the imaging sensor 45 .
  • the image signal that has passed through the CDS/AGC circuit 46 is converted into a digital image signal by an A/D (Analog/Digital) converter 47 .
  • the digital image signal after A/D conversion is input to the processor device 16 .
  • a central control unit 59 configured by a processor operates a program in a program memory to perform an image acquisition unit 51, a noise reduction unit 53, a signal processing unit 55, and an image storage unit. 56, a display control unit 57, a video signal generation unit 58, a central control unit 59, and the like are realized.
  • the central control unit 59 receives information from the endoscope 12 such as the freeze operation unit 12f, and controls each unit of the processor device 16 such as the image storage unit 56 based on the received information. It controls the mirror 12 or the light source device 14 . It also receives information such as instructions from the keyboard 19 .
  • the image acquisition unit 51 acquires, for each frame, a digital image signal of an endoscopic image obtained by photographing a subject, which is an observation target illuminated by illumination light, with the endoscope 12 .
  • a "frame” is a unit for controlling the imaging sensor 45 (see FIG. 2) that captures an image of an object.
  • the acquired image signal is sent to the DSP 52.
  • the DSP 52 performs digital signal processing such as color correction processing on the received image signal.
  • the noise reduction unit 53 performs noise reduction processing using, for example, a moving average method, a median filter method, or the like on the image signal that has been subjected to color correction processing or the like by the DSP 52 .
  • the noise-reduced image signal is stored in the memory 54 .
  • the signal processing unit 55 acquires the image signal after noise reduction from the memory 54 . Then, the acquired image signal is subjected to signal processing such as color conversion processing, color enhancement processing, and structure enhancement processing as necessary to generate a color endoscopic image showing the observation target.
  • the image storage unit 56 performs image storage processing for storing images.
  • the display control unit 57 controls display of images or information on the display 18, which is display means. For example, it performs control to display an endoscopic image on the display 18 in real time, or control to display a saved still image in a set area such as a sub-screen of the display 18 .
  • the video signal generation unit 58 converts various endoscopic images output from the display control unit 57 into video signals that can be displayed in full color on the display 18 .
  • the converted video signal is input to display 18 .
  • the display 18 displays an endoscopic image or various information in the form of text or the like.
  • the image storage unit 56 includes a temporary storage unit 61, an image evaluation unit 62, and an optimal still image storage unit 63.
  • the temporary storage unit 61 includes a selection condition switching instruction reception unit 71 , a selection condition switching unit 72 and a temporary storage area 73 .
  • the temporary storage unit 61 temporarily stores the endoscopic image selected based on the selection condition in the temporary storage area 73 as a temporarily stored image.
  • the selection condition is a condition for selecting an endoscopic image to be temporarily stored in the temporary storage area 73 from among the endoscopic images acquired by the image acquisition unit 51 for each frame.
  • the selection conditions include two types of first selection conditions and second selection conditions.
  • the selection condition is switched by the selection condition switching unit 72 based on the selection condition switching instruction accepted by the selection condition switching instruction accepting unit 71 .
  • the temporary storage area 73 has a memory function for temporarily storing endoscopic images and has a certain capacity.
  • the selection condition switching instruction receiving unit 71 receives a selection condition switching instruction.
  • the selection condition switching instruction is an instruction to switch the selection condition from the first selection condition to the second selection condition, or from the second selection condition to the first selection condition. This is an instruction to switch the selection condition when temporarily saving the temporarily saved image in the temporary saving area 73 .
  • the selection condition switching instruction receiving portion 71 receives the selection condition switching instruction, the selection condition switching portion 72 switches the selection condition. If there is no selection condition switching instruction, the selection conditions are not switched, and the selection conditions up to that point are continued.
  • An instruction unit issues a selection condition switching instruction and a still image saving instruction, which will be described later. The selection condition switching instruction and the still image storage instruction performed by the instruction unit will be described later.
  • the image evaluation unit 62 assigns an image evaluation value to each of the temporarily stored images by performing image evaluation on each of the temporarily stored images temporarily stored in the temporary storage area 73 .
  • the image evaluation unit 62 includes a contrast evaluation unit 74 , a brightness evaluation unit 75 , a certainty evaluation unit 76 and a malignancy evaluation unit 77 .
  • the temporarily stored image to which the image evaluation value is assigned is stored in the temporary storage area 73 .
  • Image evaluation is an evaluation performed based on temporarily stored images, and is performed by calculating an image evaluation value through image analysis of the feature values of temporarily stored images, or by using a trained machine learning model.
  • a method of assigning various values to the saved image as image evaluation values can be used.
  • the image evaluation unit 62 evaluates the contrast and/or brightness of the temporarily stored image, and the image evaluation value can be a value related to the contrast and/or brightness of the temporarily stored image.
  • the contrast evaluation unit 74 evaluates the contrast of each temporarily stored image and assigns a contrast evaluation value to the corresponding temporarily stored image.
  • the brightness evaluation unit 75 performs image evaluation on the brightness of each temporarily stored image, and assigns a brightness evaluation value to the corresponding temporarily stored image.
  • the image evaluation unit 62 performs image evaluation on the degree of certainty and/or the degree of malignancy related to a specific disease, etc., for the lesions of the subject captured in the temporarily stored image. , or values for these.
  • the certainty evaluation unit 76 performs image evaluation on the certainty of a specific disease for each of the temporarily stored images, and assigns a certainty evaluation value to the corresponding temporarily stored image.
  • the malignancy evaluation unit 77 performs image evaluation on the degree of malignancy related to a specific disease for each temporarily stored image, and assigns a malignancy evaluation value to the corresponding temporarily stored image.
  • the contrast evaluation unit 74, the brightness evaluation unit 75, the certainty evaluation unit 76, the malignancy evaluation unit 77, and the like included in the image evaluation unit 62 can perform image evaluation by using known methods.
  • the contrast evaluation value given to the temporarily stored image by the contrast evaluation unit 74 indicates that the higher the value, the more focused or focused the image, and the lower the value, the greater the blur or blur, or the image that is out of focus or out of focus. It can be said that Therefore, it is possible to select the endoscopic image with the best degree of focus from among the temporarily stored images based on the contrast evaluation value.
  • the higher the certainty evaluation value by the certainty evaluation unit 76 the higher the degree of certainty that the characteristic portion of the subject includes a specific disease or the like in the endoscopic image. It can be said that the higher the malignancy evaluation value by the unit 77 is, the higher the malignancy of a specific lesion or the like is in the characteristic part included in the object.
  • the image evaluation value is not limited to these examples.
  • two or more of contrast, brightness, certainty, and malignancy may be evaluated together. It is not necessary to assign the image evaluation values of the above as individually calculated image evaluation values.
  • the optimal still image storage unit 63 includes a still image storage instruction reception unit 78 and an optimal still image storage area 79 . Based on the still image storage instruction received by the still image storage instruction receiving unit 78, the optimal still image storage unit 63 stores the optimal still image selected from the temporarily stored images based on the image evaluation value in the optimal still image storage area 79.
  • An optimal still image is a still image that is suitable as a still image to be saved, for example, a still image that has an appropriate focus or brightness, or that includes a characteristic area such as a lesion.
  • the optimum still image is a still image selected from the temporarily stored images temporarily stored in the temporary storage area 73 based on the image evaluation value as the still image having the optimum focus and the like.
  • the still image storage instruction reception unit 78 receives a still image storage instruction.
  • a still image storage instruction is issued by the instruction unit.
  • the instruction unit issues a selection condition switching instruction and a still image saving instruction. Therefore, it is preferable that the instruction unit performs the first action and the second action.
  • the first action and the second action are different actions by the instruction section. With the first operation and the second operation, even if the instruction unit is, for example, a single switch, different instructions can be issued between the selection condition switching instruction and the still image saving instruction.
  • the instruction unit is an operation unit that performs instruction operations. Instructions by operating the operation unit are controlled by the control unit.
  • the operation unit for performing the instruction operation can be the freeze operation unit 12f provided in the operation unit 12b of the endoscope 12.
  • FIG. A central control unit 59 can be used as a control unit that controls instructions by operation.
  • the freeze operation unit 12f is a freeze switch among various scope switches of the endoscope 12, which is also called a scope.
  • a selection condition switching instruction and a still image saving instruction are performed by the user operating the freeze operation unit 12f.
  • the instruction unit can also be other than the freeze operation unit 12f, for example, a foot switch (not shown) connected to the processor device 16, a remote switch (not shown), or various switches provided in the processor device 16 good too.
  • the freeze operation unit 12f may perform the first action and the second action by using a momentary type switch or an alternate type switch.
  • the first action may be pressing the momentary switch
  • the second action may be releasing the pressed momentary switch.
  • the freeze operation unit 12f is a momentary type freeze switch
  • the user continues the first action of pressing the freeze switch, and when it is determined that the user has pressed the freeze switch for a long time, the selection condition switching instruction is given. is done. Further, the action of the user stopping pressing the freeze switch to release the switch may be the second action, and the still image saving instruction may be issued when the freeze switch is released from being pressed.
  • the freeze operation unit 12f is an alternate switch
  • the same is true for the momentary switch. It can be defined as pressing and releasing the second time.
  • the freeze operation unit 12f is a freeze switch of an alternate type switch
  • the user presses the freeze switch once to turn the switch on, and it is determined that the switch is held on for a long time.
  • the first operation is the case where the button is pressed, and the selection condition switching instruction is performed when the long press is performed, which is the first operation.
  • the operation of turning off the switch by pressing the freeze switch for the second time by the user is defined as the second operation, and when the freeze switch is pressed for the second time, a still image saving instruction can be performed.
  • the determination of long press can be as follows.
  • the operation of the freeze operation section 12f is transmitted to the central control section 59 of the processor device 16.
  • FIG. The central control unit 59 receives and determines the operation of the freeze operation unit 12f.
  • the freeze operation unit 12f cooperates with the central control unit 59, and when the freeze operation unit 12f is a momentary switch, measures the period from the first operation to the second operation, and when the period is equal to or longer than the preset determination period , the selection condition switching instruction is issued to the selection condition switching instruction reception unit 71 when the determination period has elapsed from the first operation.
  • the freeze operation unit 12f is an alternate type switch
  • the time from the first depression and release, which is the first action is measured, and if this time is equal to or longer than a predetermined judgment period, the judgment period from the first action is When the period has elapsed, a selection condition switching instruction is issued to the selection condition switching instruction receiving portion 71 .
  • the instruction section is other than the freeze operation section 12f, by using a momentary type switch or an alternate type switch as the instruction section, two types of instructions, a selection condition switching instruction and a still image saving instruction, can be performed. can be preferably performed.
  • the user obtains an endoscopic image by photographing an observation target, which is a subject, with the endoscope 12 .
  • the image acquisition unit 51 acquires an endoscopic image for each frame (step ST100). Note that the image acquiring unit 51 acquires endoscopic images in order of photographing time. Then, an image evaluation value is assigned to the temporarily stored image selected according to the first selection condition, and this is repeated (step ST110).
  • the temporary storage unit 61 preferably temporarily stores the endoscopic image selected based on the first selection condition when the image acquiring unit 51 starts acquiring endoscopic images.
  • the endoscopic images may be temporarily stored in the temporary storage area 73 in order of imaging time in a first-in-first-out (FIFO) manner. It is preferable that the selected endoscopic images are temporarily stored in the temporary storage area 73 in a number equal to or less than the preset maximum number of images as temporarily stored images.
  • the first selection condition can comprise a first A selection condition and a first B selection condition. If the number of temporarily stored images is less than the maximum number and the temporarily stored images are temporarily stored in the temporary storage area 73, the first A selection condition is used. Under the 1A selection condition, the endoscopic images are temporarily stored in the temporary storage area 73 as images to be temporarily stored until the maximum number of endoscopic images is reached in the order of the latest photographing time. When the maximum number of temporarily stored images are temporarily stored in the temporary storage area 73, the 1B selection condition is used. In the 1B selection condition, the temporarily stored image with the oldest shooting time among the temporarily stored images temporarily stored in the temporary storage area 73 is deleted from the temporary storage area, and then the endoscopic images are temporarily stored in the order of the newest shooting time.
  • the image is temporarily stored in the temporary storage area 73, and these operations are repeated.
  • the first-in first-out method in the 1B selection condition it is possible to prevent the number of temporarily stored images temporarily stored in the temporary storage area 73 from exceeding the preset maximum number.
  • the 1A selection condition is used.
  • the endoscopic images are temporarily stored in the order of the latest imaging time until the number of temporarily stored images reaches the maximum number of 5.
  • Temporarily save in the save area 73 when the endoscopic image is started at time t1, at time t3, the temporary storage area 73 contains the endoscopic image captured at time t1 to the endoscopic image captured at time t3. Temporarily saved. Subsequently, temporarily stored images are temporarily stored in the temporary storage area 73 in the order in which the endoscopic images are acquired until the number of temporarily stored images reaches the maximum number of five images.
  • the 1B selection condition is used.
  • the maximum number of temporarily stored images are temporarily stored in the temporary storage area 73, so the number of temporarily stored images that does not exceed the maximum number of images is always temporarily stored in the temporary storage area 73 by the first-in, first-out method. be saved. Therefore, when an endoscopic image is acquired at time t6, the endoscopic image captured at time t1 is deleted from the temporary storage area 73, and then the latest endoscopic image captured at time t6 is stored in the temporary storage area. Temporarily save to 73. In FIG. 8, the images to be deleted are shaded. In this way, the number of temporarily stored images stored in the temporary storage area 73 does not exceed the preset maximum number, so an increase in memory capacity can be prevented.
  • An image evaluation value is assigned by the image evaluation unit 62 to each of the temporarily stored images temporarily stored in the temporary storage area 73 .
  • the contrast evaluation unit 74 evaluates the contrast of each temporarily stored image and assigns a contrast evaluation value to the corresponding temporarily stored image. It can be said that the higher the contrast evaluation value, the more in-focus the endoscopic image, and the lower the contrast evaluation value, the more out-of-focus the endoscopic image is.
  • the selection condition is switched to the second selection condition (step ST140).
  • the selection condition switching instruction is issued by the instruction unit as described above.
  • the instruction unit includes the freeze operation unit 12f of the endoscope 12, and when the freeze operation unit 12f is long pressed, a selection condition switching instruction is issued. The case where there is no selection condition switching instruction (NO in step ST120) will be described later.
  • an image evaluation value is assigned to the temporarily stored image selected according to the second selection condition, and this is repeated (step ST150).
  • the second selection condition can comprise a second A selection condition and a second B selection condition.
  • the second A selection condition is the same as the first A selection condition. If the number of temporarily stored images is less than the maximum number and the temporarily stored images are temporarily stored in the temporary storage area 73, the second A selection condition is used. Under the 2A selection condition, endoscopic images are temporarily stored in the temporary storage area 73 as temporarily stored images until the maximum number of endoscopic images is reached in the order of the latest imaging time. When the maximum number of temporarily stored images are temporarily stored in the temporary storage area 73, the second B selection condition is used.
  • the 2B selection condition only the appropriate still image selected by the contrast evaluation value from the temporary storage image is left in the temporary storage area as the temporary storage image, and after deleting the image other than the appropriate image from the temporary storage area, the 2A Perform selection conditions.
  • a suitable still image is a still image selected as a candidate for selecting the optimum still image. In this way, under the 2B selection condition, among the maximum number of temporarily stored images, for example, one appropriate still image is left based on the contrast evaluation value, the other temporarily stored images are deleted, and the temporarily stored images are again taken in order of shooting time.
  • the temporarily stored image to be temporarily stored in the temporary storage area 73 is stored in advance by repeating the flow of leaving one appropriate still image based on the contrast evaluation value again. It is possible to prevent exceeding the set maximum number of sheets.
  • a selection condition switching instruction is issued at time tn, and the selection condition switching unit 72 switches the selection condition from the first selection condition to the second selection condition.
  • the second selection condition if the maximum number of temporarily stored images of five is temporarily stored in the temporary storage area 73, the second B selection condition is used. Whether to use the second A selection condition or the second B selection condition when it is determined to be a long press depends on how many temporarily stored images are stored in the temporary storage area 73 when it is determined to be a long press.
  • the temporarily stored image having the highest contrast evaluation value is the endoscopic image.
  • One mirror image Ptn+3 is selected as an appropriate still image.
  • the endoscopic image Ptn+3 selected from the temporarily stored images, which are appropriate still images is shaded.
  • the temporarily stored images other than the appropriate still images are deleted from the temporary storage area 73 .
  • an endoscopic image Ptn+3, which is an appropriate still image captured at time tn+3, is temporarily stored in the temporary storage area 73 as the temporarily stored image.
  • the endoscopic images captured from time tn+5 to time tn+8, which is the next imaging timing are temporarily stored in the temporary storage area 73 as temporarily stored images.
  • the second B selection condition is performed. That is, the appropriate still image is selected based on the contrast evaluation value from the five temporarily stored images, which is the maximum number of images temporarily stored in the temporary storage area 73. In the case of FIG.
  • One of the captured endoscopic images Ptn+7 is selected.
  • the endoscopic image Ptn+3, which was the proper still image, and the endoscopic image Ptn+7, which was the new proper still image are shown with different shades.
  • the update of the appropriate still image is continued while the freeze operation section 12f is pressed for a long time. In this manner, the appropriate still image is temporarily stored while being updated, so that a more appropriate still image can be acquired.
  • the number of temporarily stored images stored in the temporary storage area 73 does not exceed the preset maximum number, it is possible to prevent an increase in memory capacity.
  • the second selection condition can comprise a second A selection condition and a second C selection condition.
  • the second A selection condition is used.
  • the 2C selection condition when the maximum number of temporarily stored images are temporarily stored in the temporary storage area, only the appropriate still images selected by the contrast evaluation value from the temporarily stored images are temporarily stored in the temporary storage area as the temporarily stored images. After that, select the endoscopic image with the latest shooting time and temporarily save it in the temporary storage area as a temporary storage image. Temporarily save only the image as a temporary save image in the temporary save area.
  • the 2C selection condition is repeated.
  • the 2C selection condition among the maximum number of temporarily stored images, for example, one appropriate still image is left in the temporary storage area based on the contrast evaluation value, and another temporarily stored image is added again in order of shooting time.
  • one appropriate still image is left, and one temporarily stored image is added again in order of shooting time. It is possible to prevent the number of temporarily stored images temporarily stored in 73 from exceeding a preset maximum number.
  • the second C selection condition if the maximum number of temporarily stored images of 5 is temporarily stored in the temporary storage area 73, the second C selection condition may be used.
  • the second C selection condition in the first half, as shown in FIG. 9, when the maximum number of 5 endoscopic images taken from time tn to time tn+4 are temporarily stored images, from these temporarily stored images A temporarily stored image with the best contrast evaluation value is selected as an appropriate still image. Of these temporarily stored images, the temporarily stored images other than the endoscopic image Ptn+3, which is an appropriate still image, are deleted from the temporary storage area 73 .
  • the endoscopic image Ptn+3, which was the proper still image, and the endoscopic image Ptn+5, which was the new proper still image are shown with different shades.
  • the appropriate still image captured at time tn+5 is temporarily stored in the temporary storage area
  • the endoscopic image captured at time tn+6 (not shown), which is the next imaging timing, is temporarily stored as a temporarily stored image.
  • the two images are temporarily saved. The flow of comparing the contrast evaluation values of the images is repeated. In this manner, the appropriate still image is temporarily stored while being updated, so that a more appropriate still image can be acquired.
  • the number of temporarily stored images stored in the temporary storage area 73 does not exceed the preset maximum number, it is possible to prevent an increase in memory capacity.
  • the optimum still image is selected from the temporarily stored images based on the image evaluation value (step ST170).
  • An optimal still image is a still image that is suitable as a still image to save.
  • a still image storage instruction is issued by the instruction unit as described above.
  • the instruction unit includes the freeze operation unit 12f of the endoscope 12, so that a still image save instruction is issued when the pressing of the freeze operation unit 12f, which is the second operation, is released.
  • the instruction to save the still image is performed by the second operation of the freeze operation section 12f, as described above.
  • the operation of releasing the freeze switch that is the freeze operation unit 12f by the user is the second operation, and when the freeze switch is released, the still image saving instruction can be performed. .
  • the freeze operation unit 12f is released by the still image saving instruction, and the still image saving instruction is issued. Since there are five temporarily stored images temporarily stored in the temporary storage area 73, one optimal still image is selected from the five temporarily stored images based on the contrast evaluation value.
  • the five temporarily stored images include an endoscopic image Ptn+3 captured at time tn+3 and an endoscopic image Ptn+7 captured at time tn+7.
  • the endoscopic image captured at time tn+3 is an endoscopic image with the highest contrast evaluation value among the five endoscopic images captured from time tn to time tn+4, and is a past appropriate still image. be.
  • the endoscopic image Ptn+3, which was the proper still image, and the endoscopic image Ptn+7, which was the new proper still image, are shown with different shades.
  • the 10 endoscopic images photographed from the time tn to the time tn+9 are obtained.
  • the endoscopic image Ptn+7, which is the most focused endoscopic image, is selected as the optimum still image.
  • the freeze operation unit 12f is released and the still image is temporarily stored when the still image storage instruction is issued. Since there are five temporarily stored images temporarily stored in the area 73, one optimal still image is selected from the five temporarily stored images based on the contrast evaluation value.
  • the five temporarily stored images are endoscopic images captured from time tn to time tn+4, including an endoscopic image Ptn+3 captured at time tn+3.
  • the endoscopic image Ptn+3 is a past appropriate still image that is the endoscopic image with the highest contrast evaluation value among the five endoscopic images captured from time tn to time tn+4.
  • the endoscopic image Ptn+5 By comparing the contrast evaluation value between the endoscopic image Ptn+3 and the endoscopic image Ptn+5 acquired by the image acquiring unit 51 after instructing to save the still image, when the endoscopic image PTn+5 is selected, the time from time tn to time tn+5 is determined.
  • the endoscopic image Ptn+3, which was an appropriate still image, and the endoscopic image Ptn+5 acquired after the instruction to save the still image are indicated by different shades.
  • the optimum still image selected as described above is saved in the optimum still image saving area 79 (step ST180).
  • the optimum still images saved in the optimum still image saving area 79 are still images with excellent image evaluation values.
  • the optimum still image is an endoscopic image with excellent focusing. Therefore, the optimal still image is suitable for display on display 18 and for use in medical reports.
  • the selection condition is switched from the second selection condition to the first selection condition (step ST190).
  • the central control unit 59 instructs the selection condition switching instruction reception unit 71 to switch the selection condition if the temporary storage unit has temporarily stored the endoscopic image based on the second selection condition. instruct to do If acquisition of the endoscopic image is finished (YES in step ST200), observation by the endoscope is finished. If acquisition of the endoscopic image is not finished (NO in step ST200), the process returns to step ST100 and repeats from temporarily storing the endoscopic image according to the first selection condition.
  • step ST120 If there is no selection condition switching instruction in step ST120 (NO in step ST120), the pressing by the freeze operation unit 12f is not determined to be a long press, and the period during which the freeze operation unit 12f continues to press is a long press. This is the case where it is determined that the single press is less than the determination time. In this case, since the freeze operation section 12f is released, a still image storage instruction is issued (step ST130), and the process proceeds to step ST170 for selecting the optimum still image. In step ST170 when the freeze operation unit 12f is single-pressed, the optimum still image is selected from the temporarily stored images selected according to the first selection condition.
  • the endoscope system 10 can more reliably acquire the optimum still image at the timing intended by the user, for example, by the user's easy operation such as single-pressing or long-pressing the freeze switch. Even if the shooting environment changes such as a change in the distance between the distal end 12d of the endoscope and the object to be observed, the optimal still image can not be obtained immediately after pressing the freeze switch. To obtain an optimum still image by a simple operation of continuing to press and hold the freeze switch until a suitable still image is obtained, and releasing the freeze switch when the optimum still image is obtained. can be done.
  • the endoscope system 10 switches the selection condition between the first selection condition and the second selection condition. Even if the mirror image is not obtained, the freeze operation unit 12f is kept pressed until the endoscope image with the best focus is obtained. can be obtained more easily and reliably.
  • the vertical axis is the shooting distance and the horizontal axis is the time t.
  • the photographing distance is the distance between the distal end portion 12d of the endoscope and the subject, and the distance db is used as a reference in the graph.
  • the distance db is the distance at which the best focused image is obtained (see FIG. 20).
  • the subject is the object to be observed by the endoscope 12 and is located in the lumen of the subject, for example, even if the position of the distal end portion 12d of the endoscope 12 is fixed, the pulsation, peristalsis, or the like causes time-lapse.
  • the shooting distance may vary regularly with t.
  • the temporarily stored image is temporarily stored according to the first selection condition.
  • the temporarily stored images are temporarily stored in the temporary storage area 73 with a maximum number of 5 images. Since the first selection condition was the first-in, first-out method, five images are temporarily saved from time t6 when the freeze operation unit 12f was released.
  • the acquired saved still image Pt2 is acquired as the optimum still image.
  • the endoscopic image acquired at time t1 which is deleted when the endoscopic image acquired at time t6 becomes the temporarily stored image, and the endoscopic image acquired at time t2 are shown. , indicated by different shading.
  • endoscopic images with excellent focusing are obtained during the period when the maximum number of images is obtained.
  • excellent endoscopic images may not be obtained during the period when the maximum number of images is obtained. That is, the timing at which an endoscopic image with a photographing distance of distance db may not be included in the point in time before the point in time when the freeze operation unit 12f is single-pressed.
  • the endoscope system 10 as shown in FIG. 15, for example, if the user thinks that excellent endoscopic images cannot be obtained during the period in which the maximum number of images is obtained by a single press, the user presses the freeze operation unit 12f. should be continued.
  • the period until the freeze operation unit 12f is pressed and released is longer than the long press determination period, it is determined to be a long press, and after the first selection condition is changed to the second selection condition, the temporarily saved image is saved. be.
  • the endoscope system 10 by displaying the optimum still image on the display 18, it is possible to confirm whether or not a suitable still image has been obtained by single-pressing the freeze operation section 12f. Display of the optimum still image will be described later.
  • a long press determination is made at time tn+4, and after the long press determination, the endoscopic image is temporarily stored in the temporary storage area 73 according to the second selection condition.
  • the maximum number of temporarily stored images is five and the temporarily stored images are temporarily stored in the temporary storage area 73 .
  • Only the endoscopic image Ptn which is the temporarily stored image acquired at time tn with the highest contrast evaluation value according to the first selection condition before the long-press determination, is temporarily stored in the temporary storage area 73, and from time tn+5 to time tn.
  • Four endoscopic images up to tn+8 are temporarily stored as temporarily stored images.
  • the five temporarily stored images temporarily stored in the temporary storage area 73 were subjected to contrast evaluation based on the contrast evaluation value, and the contrast evaluation value was the highest.
  • the endoscopic image Ptn+6 is saved as the optimum still image.
  • the endoscopic image Ptn acquired at time tn, which was an appropriate still image, and the endoscopic image Ptn+6 acquired at time t6 are shown with different shading. In this way, the endoscopic image Ptn is updated, and the endoscopic image Ptn+6 with better focusing can be saved as the optimum still image.
  • the user continues to press the freeze operation unit 12f until, for example, the timing at which the shooting distance is optimal is included.
  • the freeze operation unit 12f By canceling , it is possible to acquire a still image with the most appropriate shooting distance even when the subject moves.
  • the maximum number of temporarily stored images temporarily stored in the temporary storage area 73 is five, but the maximum number of images may be set arbitrarily according to the purpose of shooting or the shooting environment. can. For example, if the number of frames is 60 per second, the maximum number of frames can be 15. A maximum of 15 frames corresponds to a shooting period of 0.25 seconds when the number of frames is 60 frames/second.
  • the maximum number of images temporarily stored in the temporary storage area 73 does not have to be consecutive frames of endoscopic images.
  • the imaging period corresponding to the maximum number of images may be set arbitrarily, and endoscopic images of discontinuous frames may be temporarily stored as temporarily stored images. For example, if the number of frames is 60 frames per second, acquiring the maximum number of 15 images from consecutive frames will result in a shooting period of 0.25 seconds. , the imaging period is 0.5 seconds.
  • the shooting period corresponding to the maximum number of images can be called a blurring reduction period.
  • the blurring reduction period is a period during which at least one appropriate still image that is optimal for the image evaluation value can be obtained even if the image evaluation value fluctuates during this period. Therefore, depending on the type of subject or the shooting environment, for example, if the subject moves quickly, the blurring reduction period is set short, and if the subject moves slowly, the blurring reduction period is set long. can be adjusted to
  • the maximum number of images temporarily stored in the temporary storage area 73 or the shooting period may be adjusted by the first operation and the second operation of the instruction unit. Specifically, when the long-pressing period of the freeze operation unit 12f is equal to or less than the predetermined determination period, the shooting period corresponding to the maximum number of frames is set to 0.25 seconds when the number of frames is 60 frames/second, If the long press period is longer than the determination period, the maximum number of 15 images can be acquired every other frame, and the shooting period can be 0.5 seconds.
  • the determination period for determining the shooting period based on the long-pressing period may be set to three or more stages instead of the two stages as described above.
  • the temporary storage unit 61 stores the temporarily stored image not for each frame of the endoscopic image, but for one image. Select and save temporarily. Also, this selection condition may be included in the second selection condition. In the case of FIG. 16, the maximum number is 15 sheets. Therefore, when the number of temporarily stored images reaches 15 including the endoscopic image Ptn+3 taken at time tn+3, the optimum still image is selected from the 15 temporarily stored images based on the contrast evaluation value, Saved.
  • the period for acquiring the maximum number of images is set long, and the optimum still image update timing can also be lengthened. In this way, it is possible to adjust the period for obtaining the maximum number of sheets by the instruction section.
  • the image evaluation unit 62 sets a threshold value for the image evaluation value, and when the image evaluation value equal to or higher than the threshold value is assigned to the temporarily stored image, the optimum still image storage unit 63 considers that there is a still image storage instruction, A temporarily saved image to which an image evaluation value equal to or higher than a threshold value is assigned may be saved as an optimum still image. That is, a threshold is set for the image evaluation value in advance, and when a temporarily stored image having an image evaluation value equal to or higher than the threshold is obtained regardless of whether or not there is an instruction to save the still image, this temporarily stored image is stored as the optimum still image. may As a result, when the optimal still image is displayed on the display, the user can release the long press after recognizing from the display 18 or the like that the optimal still image has been saved while continuing the long press. can do.
  • the contrast evaluation value threshold is set to 95.
  • the contrast evaluation value can be a relative value with 100 as the contrast evaluation value of an in-focus image with little blurring.
  • the temporary storage unit 61 stores the temporarily stored image Ptn+6 as the optimum still image. It should be noted that when temporarily stored images equal to or greater than the threshold are acquired after time Ptn+6, the new temporarily stored image may be stored as the optimum still image, or may not be stored. The user is notified by the notification unit that the optimum still image has been acquired.
  • the user can know that the optimum still image has been acquired by notifying that the optimum still image is displayed on the display 18 or that an alert or the like is displayed on the display 18. can.
  • the user can confirm on the display 18 or the like whether or not the target still image has been acquired, and can end the long press when it has been acquired.
  • the notification unit will be described later.
  • the display 18 may display the stored optimal still image and/or appropriate still image. If the display 18 is displaying the optimum still image and/or the appropriate still image, it can be updated to display the latest optimum still image and/or the appropriate still image, respectively. Also, the display 18 may comprise a main screen and a sub-screen. Then, the optimum still image may be displayed on the main screen for a certain period of time, and then displayed on the sub-screen after the certain period of time. Also, the optimum still image may be displayed on the main screen, and the appropriate still image may be displayed on the sub-screen, each being updated to the latest one.
  • the endoscopic image Ptn-5 which is the most recent optimum still image saved up to that time, is displayed on the main screen, and a new optimum still image Ptn+6 is obtained
  • the endoscopic image Ptn-5 which was the optimum still image, may be updated to display the optimum still image Ptn+6 on the main screen.
  • the optimum still image Ptn+6, which is the optimum still image after updating is displayed on the main screen
  • the endoscopic image Ptn-5 which was the optimum still image, is displayed on the sub screen.
  • the endoscopic image Ptn-5 when the endoscopic image Ptn-5 is displayed on the main screen, the endoscopic image Ptn-7, which is the optimum still image before the endoscopic image Ptn-5 is obtained, is displayed on the sub screen. it's shown. After that, when an endoscopic image, which is an optimum still image with a contrast evaluation value superior to that of the endoscopic image Ptn+6, is obtained, the endoscopic image Ptn-5 on the sub screen is updated, and the endoscopic image is displayed on the sub screen. Display the image Ptn+6.
  • the period during which the optimum still image is displayed on the main screen may be set as a display period set in advance, and after this period, the optimum still image may be displayed on the sub-screen. During the period in which the optimum still image is not displayed on the main screen, it is preferable to display the endoscopic image obtained in real time as a moving image.
  • the main screen may be displayed on the display 18 and only the optimum still image may be updated and displayed, or two or more sub-screens may be arranged to display a plurality of past appropriate images.
  • a plurality of images selected from the latest suitable images in the past may be arranged in chronological order and displayed.
  • the endoscope system 10 may also include a notification unit that notifies the user of the update when the display 18 updates and displays the optimum still image and/or the appropriate still image.
  • the notification unit may be displayed on the display 18 of the endoscope system 10, or may be other means such as sound that allows the user to recognize the notification.
  • the color, thickness, or display form of the display frame of each still image on the display 18 for a certain period after the optimum still image and/or the appropriate still image are updated. is preferably changed so that the user can recognize the display or update at a glance.
  • the display 18 includes a moving image display screen 81, a still image display main screen 82, and a still image display sub-screen 83.
  • the moving image display screen 81 displays endoscope images in real time.
  • the optimum still image is displayed on the still image display main screen 82 .
  • the optimum still image is displayed surrounded by a still image display notification frame 84, which is a thick colored line.
  • the still image display notification frame 84 may blink.
  • the still image display sub-screen 83 displays a plurality of past optimal still images in chronological order.
  • the update is notified to the user, so that the user can pay attention to the display 18, and the updated appropriate still image is displayed as desired by the user.
  • the appropriate still image updated and displayed on the display 18 can be saved as the optimal still image in good timing by releasing the freeze operation section 12f at that time.
  • the notification unit may notify the user of the switching. Also in this case, as described above, for example, the notification can be made by displaying the still image display notification frame 84 in the appropriate still image on the display 18 .
  • the notification unit preferably does not notify the user when the notification to the user is performed again within the preset minimum notification period. By setting the minimum notification period, it is possible to avoid complication due to frequent notification.
  • the present invention is applied to an endoscopic system that processes endoscopic images.
  • the present invention can be applied when saving a still image.
  • an autofluorescence image obtained by capturing an autofluorescence image emitted from a subject by irradiation of excitation light is used as an endoscopic image
  • the present invention can be used when saving a still image. can be applied.
  • various components such as the central control unit 59, the image acquisition unit 51, the noise reduction unit 53, the signal processing unit 55, the image storage unit 56, the display control unit 57, and the video signal generation unit 58 included in the processor device 16
  • the hardware structure of a processing unit that executes processing is various processors as shown below.
  • the circuit configuration is changed after manufacturing, such as CPU (Central Processing Unit), FPGA (Field Programmable Gate Array), which is a general-purpose processor that executes software (program) and functions as various processing units.
  • Programmable Logic Devices which are processors, dedicated electric circuits, which are processors with circuit configurations specially designed to perform various processes, and the like.
  • One processing unit may be composed of one of these various processors, or composed of a combination of two or more processors of the same type or different types (for example, a plurality of FPGAs or a combination of a CPU and an FPGA).
  • a plurality of processing units may be configured by one processor.
  • a plurality of processing units may be configured by one processor.
  • this processor functions as a plurality of processing units.
  • SoC System On Chip
  • SoC System On Chip
  • the various processing units are configured using one or more of the above various processors as a hardware structure.
  • the hardware structure of these various processors is, more specifically, an electric circuit in the form of a combination of circuit elements such as semiconductor elements.
  • endoscope system 12 endoscope 12a insertion portion 12b operation portion 12c bending portion 12d tip portion 12e angle knob 12f freeze operation portion 12g zoom operation portion 14 light source device 16 processor device 18 display 19 keyboard 20 light source portion 20a V-LED 20b B-LED 20c G-LED 20d R-LED 21 Light source processor 30a Illumination optical system 30b Imaging optical system 41 Light guide 42 Illumination lens 43 Objective lens 44 Zoom lens 45 Image sensor 46 CDS/AGC circuit 47 A/D converter 51 Image acquisition unit 52 DSP 53 noise reduction unit 54 memory 55 signal processing unit 56 image storage unit 57 display control unit 58 video signal generation unit 59 central control unit 61 temporary storage unit 62 image evaluation unit 63 optimum still image storage unit 71 selection condition switching instruction reception unit 72 selection Condition switching unit 73 Temporary storage area 74 Contrast evaluation unit 75 Brightness evaluation unit 76 Confidence evaluation unit 77 Malignancy evaluation unit 78 Still image storage instruction reception unit 79 Optimal still image storage area 81 Moving image display screen 82 Still image display main screen 83 Still

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Optics & Photonics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Signal Processing (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

撮影状況の変化に応じて最適な静止画を容易に取得することができる内視鏡システム、及び内視鏡システムの作動方法を提供する。　内視鏡システム（１０）は、選択条件切替指示及び静止画保存指示を行う指示部を備え被写体を撮影する内視鏡と、プロセッサとを備える。プロセッサは、内視鏡画像をフレーム毎に取得し、第１選択条件又は第２選択条件に基づいて選択した内視鏡画像を一時保存領域（７３）に一時保存し、一時保存画像のそれぞれに対し画像評価を行うことにより画像評価値を付与し、静止画保存指示に基づき、画像評価値により選択した最適静止画を保存する。

Description

内視鏡システム、及び内視鏡システムの作動方法
　本発明は、静止画を保存する内視鏡システム、及び内視鏡システムの作動方法に関する。
　医療分野において、内視鏡、及びプロセッサ装置を備える内視鏡システムを用いた診断が広く行われている。内視鏡システムを用いることにより、被写体である観察対象を内視鏡で撮影して得た画像（以下、内視鏡画像という）を静止画として保存することができる。静止画は、ディスプレイへの表示、又は医療レポートへの添付等に用いられ、診断に役立てられる。
　内視鏡は大きさに制約があること、又は被写体との距離が近いこと等により、例えば一般的なビデオカメラ、又はデジタルカメラが備える手ブレ補正機能等を用いることができない場合が多い。そこで、内視鏡システムとして、輝度及びブレに関して評価した撮像画像を保存することにより、適正な明るさであり、かつ、ブレのない静止画を表示することができるものが知られている（特許文献１）。
特開２０２０－１６８１６４号公報
　内視鏡は、オートフォーカス機能を持たない場合も多い。この場合、焦点が合った静止画を取得するために、ユーザ自身が内視鏡を操作し被写体との距離を調整することにより、最適な焦点の静止画を得ていた。しかしながら、図２０に示すように、内視鏡の被写体は臓器であるため、ユーザが内視鏡１２の先端部と被写体９１との距離を適切に調整して距離ｄｂとし、焦点を合わせて内視鏡を固定したタイミングで、被写体９１が、拍動、又は蠕動等により、例えば距離ｄｍで動くことがある。これにより、内視鏡１２と被写体９１との距離は、距離ｄｂ＋ｃとなり、焦点が合った距離ｄｂから離れてしまい、得られる画像は焦点が合わないものとなる。このように、被写体との距離等の撮影状況が予期せず変化し、最適な焦点の静止画を得ることが難しい場合があった。
　これに対し、複数のタイミングで多数の静止画を自動的に取得し、多数の静止画の中から焦点が合った静止画を選択することも考えられる。しかしながら、この方法では、意図しないタイミングの静止画が大量に保存されること等により、焦点等が適正な静止画を選択することが困難となり、また、静止画を保存するメモリ容量が増大するおそれがあった。
　本発明は、撮影状況の変化に応じて最適な静止画を容易に取得することができる内視鏡システム、及び内視鏡システムの作動方法を提供することを目的とする。
　本発明は、内視鏡システムであって、被写体を撮影する内視鏡とプロセッサとを備え、内視鏡は、指示部を備え、プロセッサは、内視鏡により被写体を撮影して得る内視鏡画像をフレーム毎に取得し、第１選択条件又は第２選択条件に基づいて選択した内視鏡画像を、一時保存領域に一時保存し、一時保存領域が一時保存する一時保存画像のそれぞれに対し、画像評価を行うことにより画像評価値を付与し、選択条件切替指示に基づき、第１選択条件と第２選択条件とを切り替え、静止画保存指示に基づき、一時保存画像から画像評価値により選択した最適静止画を保存し、指示部は、選択条件切替指示と静止画保存指示とを行う。
　プロセッサは、内視鏡画像を取得し始めた際に、第１選択条件に基づいて選択した内視鏡画像の一時保存を行うことが好ましい。
　指示部は、第１動作と第２動作とを行い、第２動作により静止画保存指示を行うことが好ましい。
　指示部は、モーメンタリ型スイッチを含み、第１動作はモーメンタリ型スイッチの押下であり、第２動作は押下したモーメンタリ型スイッチの解除であることが好ましい。
　指示部は、オルタネート型スイッチを含み、第１動作はオルタネート型スイッチの一度目の押下と解除とであり、第２動作はオルタネート型スイッチの二度目の押下と解除とであることが好ましい。
　プロセッサは、第１動作から第２動作までの期間を計測し、指示部は、期間が予め設定した判定期間以上の場合、第１動作から判定期間が経過した際に、選択条件切替指示を行うことが好ましい。
　指示部は、静止画保存指示を行った際に、プロセッサが第２選択条件に基づいて内視鏡画像を一時保存していた場合、選択条件切替指示を行うことが好ましい。
　プロセッサは、選択した内視鏡画像を、一時保存画像として予め設定した最大枚数以下で一時保存領域に一時保存し、第１選択条件は、一時保存画像が、最大枚数未満で一時保存領域に一時保存されている場合は、第１Ａ選択条件として、撮影時刻が最も新しい順に最大枚数となるまで前記内視鏡画像を一時保存画像として一時保存領域に一時保存し、最大枚数の一時保存画像が一時保存領域に一時保存されている場合は、第１Ｂ選択条件として、一時保存領域が一時保存する一時保存画像のうち撮影時刻が最も古い一時保存画像を一時保存領域から削除した上で、撮影時刻が最も新しい順に内視鏡画像を一時保存画像として一時保存領域に一時保存することを含むことが好ましい。
　プロセッサは、選択した内視鏡画像を、一時保存画像として予め設定した最大枚数以下で一時保存領域に一時保存し、第２選択条件は、一時保存画像が、最大枚数未満で一時保存領域に一時保存されている場合は、第２Ａ選択条件として、撮影時刻が最も新しい順に最大枚数となるまで内視鏡画像を一時保存画像として一時保存領域に一時保存し、最大枚数の一時保存画像が一時保存領域に一時保存されている場合は、第２Ｂ選択条件として、一時保存画像から画像評価値により選択した適正静止画のみを一時保存画像として一時保存領域に残し、かつ、一時保存領域から適正画像以外を削除した上で、第２Ａ選択条件を行うことを含むことが好ましい。
　プロセッサは、選択した内視鏡画像を、一時保存画像として予め設定した最大枚数以下で一時保存領域に一時保存し、第２選択条件は、一時保存画像が、最大枚数未満で一時保存領域に一時保存されている場合は、第２Ａ選択条件として、撮影時刻が最も新しい順に最大枚数となるまで内視鏡画像を一時保存画像として一時保存領域に一時保存し、最大枚数の一時保存画像が一時保存領域に一時保存されている場合は、第２Ｃ選択条件として、第２Ｂ選択条件として、一時保存画像から画像評価値により選択した適正静止画のみを一時保存画像として一時保存領域に残し、かつ、一時保存領域から適正画像以外を削除した上で、撮影時刻が最も新しい内視鏡画像を選択して、一時保存画像として一時保存領域に一時保存した後、一時保存領域に一時保存した一時保存画像から画像評価値により選択した適正静止画のみを一時保存画像として一時保存領域に一時保存することを含むことが好ましい。
　最適静止画及び／又は適正静止画を表示するディスプレイを備え、ディスプレイは、最適静止画及び／又は適正静止画を表示していた場合は、それぞれ更新して最新の最適静止画及び／又は適正静止画を表示することが好ましい。
　ディスプレイは、メイン画面とサブ画面とを備え、最適静止画は、予め設定した表示期間でメイン画面に表示し、表示期間後はサブ画面に表示することが好ましい。
　ディスプレイが最適静止画及び／又は適正静止画を更新して表示した場合、更新に関してユーザに報知する報知部を備えることが好ましい。
　報知部は、プロセッサが、第１選択条件と第２選択条件とを切り替えた場合、切替に関してユーザに報知することが好ましい。
　報知部は、ユーザへの報知が予め設定した最低報知期間以内に再度行われる場合は、報知を行わないことが好ましい。
　プロセッサは、一時保存画像が有するコントラスト及び／又は明るさについて画像評価を行い、画像評価値は、一時保存画像のコントラスト及び／又は明るさに関する値であることが好ましい。
　プロセッサは、一時保存画像に写る被写体が有する特定の病変に関する確信度及び／又は悪性度について画像評価を行い、画像評価値は確信度及び／又は悪性度であることが好ましい。
　プロセッサは、画像評価値に閾値を設け、閾値以上の画像評価値を一時保存画像に付与した場合、静止画保存指示があったものとみなし、閾値以上の画像評価値を付与した一時保存画像を最適静止画として保存することが好ましい。
　指示部は、フリーズ操作部を含むことが好ましい。
　また、本発明は、指示部を備え被写体を撮影する内視鏡とプロセッサとを備える内視鏡システムの作動方法であって、プロセッサは、内視鏡により被写体を撮影して得る内視鏡画像をフレーム毎に取得し、第１選択条件又は第２選択条件に基づいて選択した内視鏡画像を、一時保存画像として一時保存領域に一時保存し、一時保存領域が一時保存する一時保存画像のそれぞれに対し、画像評価を行うことにより画像評価値を付与し、選択条件切替指示に基づき、第１選択条件と第２選択条件とを切り替え、静止画保存指示に基づき、一時保存画像から画像評価値により選択した最適静止画を保存し、指示部は、選択条件切替指示と静止画保存指示とを行う。
　本発明によれば、撮影状況の変化に応じて最適な静止画を容易に取得することができる。
内視鏡システムの外観図である。 内視鏡システムの機能を示すブロック図である。 光源部が含む４色のＬＥＤを説明する説明図である。 紫色光Ｖ、青色光Ｂ、緑色光Ｇ、及び赤色光Ｒのスペクトルを示すグラフである。 画像保存部の機能を示すブロック図である。 最適静止画の保存の一連の流れを示すフローチャートである。 第１Ａ選択条件を説明する説明図である。 第１Ｂ選択条件を説明する説明図である。 第２Ｂ選択条件及び第２Ｃ選択条件の前半の部分を説明する説明図である。 第２Ｂ選択条件の後半の部分を説明する説明図である。 第２Ｃ選択条件の後半の部分を説明する説明図である。 第２Ｂ選択条件において行われる静止画保存指示を説明する説明図である。 第２Ｃ選択条件において行われる静止画保存指示を説明する説明図である。 フリーズスイッチの単押しにより最適静止画を取得することを説明する説明図である。 フリーズスイッチの長押しにより最適静止画を取得することを説明する説明図である。 １フレームおきに取得する一時保存画像についての説明図である。 画像評価値の閾値を用いた場合を説明する説明図である。 最適静止画をディスプレイに表示する例を説明する説明図である。 最適静止画の更新をディスプレイに表示して報知する場合を説明する説明図である。 内視鏡画像の焦点が変動する場合を説明する説明図でる。
　図１において、内視鏡システム１０は、内視鏡１２と、光源装置１４と、プロセッサ装置１６と、ディスプレイ１８と、キーボード１９とを有する。内視鏡１２は、光源装置１４と光学的に接続され、且つ、プロセッサ装置１６と電気的に接続される。内視鏡１２は、被写体である観察対象を有する被検者の体内に挿入される挿入部１２ａと、挿入部１２ａの基端部分に設けられた操作部１２ｂと、挿入部１２ａの先端側に設けられた湾曲部１２ｃ及び先端部１２ｄとを有している。湾曲部１２ｃは、操作部１２ｂのアングルノブ１２ｅを操作することにより湾曲動作する。先端部１２ｄは、湾曲部１２ｃの湾曲動作によって所望の方向に向けられる。
　操作部１２ｂは、アングルノブ１２ｅの他、後に説明する選択条件切替指示、又は静止画保存指示等を行うフリーズ操作部１２ｆと、撮像倍率を変更するためのズーム操作部１２ｇとを有する。なお、静止画保存指示、又はズーム操作は、それぞれ、フリーズ操作部１２ｆ、又はズーム操作部１２ｇのスコープスイッチの他、プロセッサ装置１６のスイッチ、キーボード１９、又はフットスイッチ（図示しない）等を用いた操作又は指示としてもよい。
　プロセッサ装置１６は、ディスプレイ１８及びキーボード１９と電気的に接続される。ディスプレイ１８は、動画もしくは静止画の内視鏡画像、及び／又はこれらの画像に付帯する情報などを出力表示する。キーボード１９は、機能設定などの入力操作を受け付けるユーザインタフェースとして機能する。なお、プロセッサ装置１６には、画像や画像情報などを記録する外付けの記録部（図示省略）を接続してもよい。
　図２において、光源装置１４は、観察対象に照射する照明光を発し、光源部２０と、光源部２０を制御する光源用プロセッサ２１とを備える。光源部２０は、例えば、複数色のＬＥＤ（Light Emitting Diode）等の半導体光源、レーザダイオードと蛍光体との組み合わせ、又はキセノンランプやハロゲン光源で構成する。また、光源部２０には、ＬＥＤ等が発光した光の波長帯域を調整するための光学フィルタ等が含まれる。光源用プロセッサ２１は、各ＬＥＤ等のオン／オフや、各ＬＥＤ等の駆動電流や駆動電圧の調整によって、照明光の光量を制御する。また、光源用プロセッサ２１は、光学フィルタの変更等によって、照明光の波長帯域を制御する。
　図３に示すように、本実施形態では、光源部２０は、Ｖ－ＬＥＤ（Violet Light Emitting Diode）２０ａ、Ｂ－ＬＥＤ（Blue Light Emitting Diode）２０ｂ、Ｇ－ＬＥＤ（Green Light Emitting Diode）２０ｃ、及びＲ－ＬＥＤ（Red Light Emitting Diode）２０ｄの４色のＬＥＤを有する。
　図４に示すように、Ｖ－ＬＥＤ２０ａは、中心波長４１０±１０ｎｍ、波長範囲３８０～４２０ｎｍの紫色光Ｖを発生する。Ｂ－ＬＥＤ２０ｂは、中心波長４５０±１０ｎｍ、波長範囲４２０～５００ｎｍの青色光Ｂを発生する。Ｇ－ＬＥＤ２０ｃは、波長範囲が４８０～６００ｎｍに及ぶ緑色光Ｇを発生する。Ｒ－ＬＥＤ２０ｄは、中心波長６２０～６３０ｎｍで、波長範囲が６００～６５０ｎｍに及ぶ赤色光Ｒを発生する。
　光源用プロセッサ２１は、Ｖ－ＬＥＤ２０ａ、Ｂ－ＬＥＤ２０ｂ、Ｇ－ＬＥＤ２０ｃ、及びＲ－ＬＥＤ２０ｄを制御する。光源用プロセッサ２１は、例えば、複数の観察モードに応じて、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、及び赤色光Ｒ間の光強度比の組み合わせが異なる照明光を発光するように、各ＬＥＤ２０ａ～２０ｄを制御する。
　各ＬＥＤ２０ａ～２０ｅが発する光は、ミラーやレンズなどで構成される光路結合部（図示せず）を介して、ライトガイド４１に入射される。ライトガイド４１は、内視鏡１２及びユニバーサルコード（内視鏡１２と、光源装置１４及びプロセッサ装置１６を接続するコード）に内蔵されている。ライトガイド４１は、光路結合部からの光を、内視鏡１２の先端部１２ｄまで伝搬する。
　内視鏡１２の先端部１２ｄには、照明光学系３０ａと撮像光学系３０ｂが設けられる。照明光学系３０ａは照明レンズ４２を有しており、ライトガイド４１によって伝搬した照明光は照明レンズ４２を介して観察対象に照射される。撮像光学系３０ｂは、対物レンズ４３、ズームレンズ４４、及び撮像センサ４５を有している。観察対象からの反射光、散乱光、及び蛍光等の各種の光は、対物レンズ４３及びズームレンズ４４を介して撮像センサ４５に入射する。これにより、撮像センサ４５に観察対象の像が結像する。ズームレンズ４４は、ズーム操作部１２ｇを操作することでテレ端とワイド端との間で自在に移動し、撮像センサ４５に結像する観察対象を拡大又は縮小する。
　撮像センサ４５は、画素毎にＲ（赤色）、Ｇ（緑色）、又はＢ（青色）のカラーフィルタのいずれかが設けられたカラー撮像センサであり、観察対象を撮像してＲＧＢ各色の画像信号を出力する。撮像センサ４５としては、ＣＣＤ（Charge Coupled Device）撮像センサやＣＭＯＳ（Complementary Metal-Oxide Semiconductor）撮像センサを利用可能である。また、原色のカラーフィルタが設けられた撮像センサ４５の代わりに、Ｃ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）及びＧ（緑）の補色フィルタを備えた補色撮像センサを用いても良い。補色撮像センサを用いる場合には、ＣＭＹＧの４色の画像信号が出力される。このため、補色－原色色変換によって、ＣＭＹＧの４色の画像信号をＲＧＢの３色の画像信号に変換することにより、撮像センサ４５と同様のＲＧＢ画像信号を得ることができる。また、撮像センサ４５の代わりに、カラーフィルタを設けていないモノクロセンサを用いても良い。
　ＣＤＳ／ＡＧＣ（Correlated Double Sampling／Automatic Gain Control）回路４６は、撮像センサ４５から得られるアナログの画像信号に相関二重サンプリング（ＣＤＳ）や自動利得制御（ＡＧＣ）を行う。ＣＤＳ／ＡＧＣ回路４６を経た画像信号は、Ａ／Ｄ（Analog／Digital）コンバータ４７により、デジタルの画像信号に変換される。Ａ／Ｄ変換後のデジタル画像信号は、プロセッサ装置１６に入力される。
　プロセッサ装置１６には、画像保存処理などの処理に関するプログラムがプログラム用メモリ（図示しない）に格納されている。プロセッサ装置１６においては、プロセッサによって構成される中央制御部５９により、プログラム用メモリ内のプログラムが動作することによって、画像取得部５１と、ノイズ低減部５３と、信号処理部５５と、画像保存部５６と、表示制御部５７と、映像信号生成部５８と、中央制御部５９等の機能が実現される。また、中央制御部５９は、フリーズ操作部１２ｆ等の内視鏡１２からの情報を受信し、受信した情報に基いて、画像保存部５６等のプロセッサ装置１６の各部の制御の他、内視鏡１２又は光源装置１４の制御を行う。また、キーボード１９からの指示などの情報も受信する。
　画像取得部５１は、照明光により照明された観察対象である被写体を内視鏡１２により撮影して得る内視鏡画像のデジタル画像信号をフレーム毎に取得する。なお、「フレーム」とは、被写体を撮影する撮像センサ４５（図２参照）を制御するための単位をいい、例えば、「１フレーム」とは、照明光により照明された観察対象からの光で撮像センサ４５を露光する露光期間と画像信号を読み出す読出期間とを少なくとも含む期間をいう。
　取得した画像信号はＤＳＰ５２に送信される。ＤＳＰ５２は、受信した画像信号に対して色補正処理等のデジタル信号処理を行う。ノイズ低減部５３は、ＤＳＰ５２で色補正処理等が施された画像信号に対して、例えば移動平均法やメディアンフィルタ法等によるノイズ低減処理を施す。ノイズを低減した画像信号は、メモリ５４に記憶する。
　信号処理部５５は、メモリ５４からノイズ低減後の画像信号を取得する。そして、取得した画像信号に対して、必要に応じて、色変換処理、色彩強調処理、及び構造強調処理等の信号処理を施し、観察対象が写ったカラーの内視鏡画像を生成する。
　画像保存部５６は、画像を保存する画像保存処理を行う。表示制御部５７は、表示手段であるディスプレイ１８への画像又は情報の表示を制御する。例えば、内視鏡画像をリアルタイムでディスプレイ１８に表示する制御、又は保存した静止画をディスプレイ１８のサブ画面等の設定された領域に表示する制御等を行う。
　映像信号生成部５８は、表示制御部５７から出力される各種の内視鏡画像を、ディスプレイ１８においてフルカラーで表示可能にする映像信号に変換する。変換済みの映像信号はディスプレイ１８に入力される。これにより、ディスプレイ１８には内視鏡画像又は各種の情報がテキスト等で表示される。
　画像保存部５６は、一時保存部６１、画像評価部６２、及び最適静止画保存部６３とを備える。図５に示すように、一時保存部６１は、選択条件切替指示受付部７１と、選択条件切替部７２と、一時保存領域７３とを備える。一時保存部６１は、選択条件に基づいて選択した内視鏡画像を、一時保存画像として一時保存領域７３に一時保存する。選択条件は、画像取得部５１がフレーム毎に取得した内視鏡画像を対象として、一時保存領域７３に一時保存する内視鏡画像を選択する条件である。選択条件は、第１選択条件又は第２選択条件の２種類を含む。選択条件は、選択条件切替指示受付部７１が受け付けた選択条件切替指示に基づいて、選択条件切替部７２により切り替えられる。一時保存領域７３は、内視鏡画像を一時保存するメモリの機能を備え、一定の容量を持つ。
　選択条件切替指示受付部７１は、選択条件切替指示を受け付ける。選択条件切替指示は、選択条件を切り替える指示であり、第１選択条件から第２選択条件へ、又は、第２選択条件から第１選択条件へ、一時保存領域７３が内視鏡画像から選択した一時保存画像を一時保存領域７３に一時保存する際の選択条件を切り替える指示である。選択条件切替指示受付部７１が選択条件切替指示を受け付けた場合、選択条件切替部７２が、選択条件を切り替える。選択条件切替指示がない場合は、選択条件は切り替えられず、それまでの選択条件が継続される。選択条件切替指示と後述する静止画保存指示は、指示部が行う。指示部が行う選択条件切替指示及び静止画保存指示については、後述する。
　画像評価部６２は、一時保存領域７３が一時保存する一時保存画像のそれぞれに対し画像評価を行うことにより、一時保存画像のそれぞれに画像評価値を付与する。画像評価部６２は、コントラスト評価部７４と、明るさ評価部７５と、確信度評価部７６と、悪性度評価部７７とを備える。画像評価値が付与された一時保存画像は、一時保存領域７３に保存する。
　画像評価は、一時保存画像に基づいて行う評価であり、一時保存画像が有する特徴量に関して画像解析により画像評価値を算出して行う方法、又は、学習済みの機械学習モデルを用いて導いた一時保存画像に対する各種の値を画像評価値として付与すること等により行う方法等が挙げられる。
　画像評価部６２は、一時保存画像が有するコントラスト及び／又は明るさについて画像評価を行い、画像評価値は、一時保存画像のコントラス及び／又は明るさに関する値とすることができる。具体的には、コントラスト評価部７４は、一時保存画像のそれぞれについてコントラストについて画像評価を行い、対応する一時保存画像にコントラスト評価値を付与する。また、明るさ評価部７５は、一時保存画像のそれぞれについて明るさについて画像評価を行い、対応する一時保存画像に明るさ評価値を付与する。
　また、画像評価部６２は、一時保存画像に写る被写体が有する病変について、特定の疾患等に関する確信度及び／又は悪性度について画像評価を行い、画像評価値は疾患の確信度及び／又は悪性度、又はこれらに関する値とすることができる。具体的には、確信度評価部７６は、一時保存画像のそれぞれについて、特定の疾患に関する確信度について画像評価を行い、対応する一時保存画像に確信度評価値を付与する。また、悪性度評価部７７は、一時保存画像のそれぞれについて、特定の疾患に関する悪性度について画像評価を行い、対応する一時保存画像に悪性度評価値を付与する。
　画像評価部６２が備えるコントラスト評価部７４、明るさ評価部７５、確信度評価部７６、及び悪性度評価部７７等は、それぞれ公知の方法を用いることにより、画像評価をおこなうことができる。コントラスト評価部７４により一時保存画像に付与されるコントラスト評価値は、値が高いほど焦点又はピントが合った画像であり、値が低いほどボケ又はブレ等が大きい、又は焦点又はピントがずれた画像であるということができる。したがって、コントラスト評価値により、一時保存画像のなかで最も焦点の合焦度が優れている内視鏡画像を選択することができる。明るさ評価部７５、確信度評価部７６、及び悪性度評価部７７においても同様であり、例えば、明るさ評価部７５による明るさ評価値が高いほど明るく、低いほど暗い内視鏡画像であるといえる。したがって、一時保存画像から最適静止画を選択する場合には、明るさ評価値がある一定の範囲内である一時保存画像を選択することができる。
　同様に、確信度評価部７６による確信度評価値が高いほど、被写体が含む特徴部分において、特定の疾病等である確信度が高い内視鏡画像であるということができ、また、悪性度評価部７７による悪性度評価値が高いほど、被写体が含む特徴部分において、特定の病変等の悪性度が高いとすることができる。
　画像評価値は、これらの例に限られない。また、特に、学習済みの機械学習モデルを用いて画像評価を行う場合は、例えば、コントラスト、明るさ、確信度、及び悪性度等のうちの２つ以上を合わせて評価してもよく、それぞれの画像評価値を個々に算出した画像評価値として付与しなくてもよい。
　最適静止画保存部６３は、静止画保存指示受付部７８と、最適静止画保存領域７９とを備える。最適静止画保存部６３は、静止画保存指示受付部７８が受け付けた静止画保存指示に基づき、一時保存画像から画像評価値により選択した最適静止画を、最適静止画保存領域７９に保存する。
　最適静止画とは、保存する静止画として適切である静止画であり、例えば、焦点、もしくは明るさ等が適切である、又は病変等の特徴領域を含む静止画等である。最適静止画は、一時保存領域７３が一時保存する一時保存画像の中から、画像評価値に基づいて、焦点等が最適である静止画として選択された静止画である。
　静止画保存指示受付部７８は、静止画保存指示を受け付ける。静止画保存指示は、指示部が行う。
　指示部は、選択条件切替指示と静止画保存指示とを行う。したがって、指示部は、第１動作と第２動作とを行うことが好ましい。第１動作と第２動作とは指示部による異なる動作である。第１動作と第２動作とにより、指示部が例えば一つのスイッチであっても、選択条件切替指示と静止画保存指示との異なる指示を行うことができる。
　指示部は、指示操作を行う操作部である。操作部の操作による指示は、制御部が制御する。具体的には、指示操作を行う操作部は、内視鏡１２の操作部１２ｂが備えるフリーズ操作部１２ｆとすることができる。操作による指示を制御する制御部は、中央制御部５９とすることができる。
　フリーズ操作部１２ｆは、スコープとも称される内視鏡１２の各種のスコープスイッチのうちのフリーズスイッチである。ユーザがフリーズ操作部１２ｆを操作することにより、選択条件切替指示と静止画保存指示とが行われる。指示部は、フリーズ操作部１２ｆ以外とすることもでき、例えば、プロセッサ装置１６に接続されたフットスイッチ（図示せず）、リモートスイッチ（図示せず）、又は、プロセッサ装置１６が備える各種スイッチとしてもよい。
　フリーズ操作部１２ｆは、モーメンタリ型スイッチ、又はオルタネート型スイッチとすることにより、第１動作と第２動作とを行ってもよい。フリーズ操作部１２ｆがモーメンタリ型スイッチである場合、第１動作は、モーメンタリ型スイッチの押下であり、第２動作は、押下したモーメンタリ型スイッチの解除とすることができる。具体的には、フリーズ操作部１２ｆがモーメンタリ型スイッチのフリーズスイッチである場合、ユーザがフリーズスイッチの押下である第１動作を継続して、長押しであると判定された場合に選択条件切替指示が行われる。また、ユーザがフリーズスイッチの押下をやめてスイッチを解除する動作を第２動作とし、フリーズスイッチの押下が解除された場合に静止画保存指示が行われるようにすることができる。
　フリーズ操作部１２ｆがオルタネート型スイッチである場合もモーメンタリ型スイッチの場合と同様であり、第１動作は、オルタネート型スイッチの一度目の押下と解除とであり、第２動作はオルタネート型スイッチの二度目の押下と解除とであるとすることができる。具体的には、フリーズ操作部１２ｆがオルタネート型スイッチのフリーズスイッチである場合、ユーザがフリーズスイッチを１回押してスイッチをオンの状態とし、オンの状態を継続して、長押しであると判定される場合を第１動作とし、第１動作である長押しがされた場合に選択条件切替指示が行われる。また、ユーザがフリーズスイッチを二度目に押してスイッチをオフの状態とする動作を第２動作とし、フリーズスイッチを２回目に押した場合に静止画保存指示が行われるようにすることができる。
　長押しの判定については、次のとおりとすることができる。フリーズ操作部１２ｆの操作はプロセッサ装置１６の中央制御部５９に伝えられる。中央制御部５９は、フリーズ操作部１２ｆの操作の受信及び判定を行う。フリーズ操作部１２ｆは、中央制御部５９と協働し、フリーズ操作部１２ｆがモーメンタリ型スイッチの場合、第１動作から第２動作までの期間を計測し、期間が予め設定した判定期間以上の場合、第１動作から判定期間が経過した際に、選択条件切替指示受付部７１に対して選択条件切替指示を行なう。また、フリーズ操作部１２ｆがオルタネート型スイッチの場合、第１動作である一度目の押下と解除からの時間を計測し、この時間が予め設定した判定期間以上の場合、第１動作から判定期間が経過した際に、選択条件切替指示受付部７１に対して選択条件切替指示を行なう。
　指示部がフリーズ操作部１２ｆ以外の場合であっても、指示部をモーメンタリ型のスイッチ、又は、オルタネート型のスイッチ等にすることにより、選択条件切替指示と静止画保存指示との２種類の指示を好ましく行うことができる。
　次に、内視鏡システム１０の動作等についてより具体的に説明する。図６に示すように、ユーザは、内視鏡システム１０を用いた観察において、内視鏡１２により被写体である観察対象を撮影して内視鏡画像を得る。画像取得部５１は、内視鏡画像をフレーム毎に取得する（ステップＳＴ１００）。なお、画像取得部５１は、撮影の時刻の順に、内視鏡画像を取得する。そして、第１選択条件により選択した一時保存画像に画像評価値を付与し、これを繰り返す（ステップＳＴ１１０）。
　一時保存部６１は、画像取得部５１が内視鏡画像を取得し始めた際に、第１選択条件に基づいて選択した内視鏡画像の一時保存を行うことが好ましい。第１選択条件では、撮影時刻順に、先入先出（ＦＩＦＯ、Ｆｉｒｓｔ　Ｉｎ　Ｆｉｒｓｔ　Ｏｕｔ）方式にて、一時保存領域７３に、内視鏡画像を一時保存領域７３に一時保存してもよい。なお、選択した内視鏡画像は、一時保存画像として予め設定した最大枚数以下で一時保存領域７３に一時保存することが好ましい。
　第１選択条件は、第１Ａ選択条件と第１Ｂ選択条件とを備えることができる。最大枚数未満で一時保存画像が一時保存領域７３に一時保存されている場合は、第１Ａ選択条件を用いる。第１Ａ選択条件では、内視鏡画像を撮影時刻が最も新しい順に最大枚数となるまで一時保存画像として一時保存領域７３に一時保存する。最大枚数の一時保存画像が一時保存領域７３に一時保存されている場合は、第１Ｂ選択条件を用いる。第１Ｂ選択条件では、一時保存領域７３が一時保存する一時保存画像のうち撮影時刻が最も古い一時保存画像を一時保存領域から削除した上で、内視鏡画像を撮影時刻が最も新しい順に一時保存画像として一時保存領域７３に一時保存し、これらを繰り返し行う。このように、第１Ｂ選択条件では、先入先出方式を採用することにより、一時保存領域７３に一時保存する一時保存画像を、予め設定した最大枚数を超えないようにすることができる。
　図７に示すように、例えば、最大枚数を５枚と設定し、一時保存画像が５枚未満で一時保存領域７３に一時保存されている場合は、第１Ａ選択条件を用いる。第１Ａ選択条件では、一時保存画像が５枚未満で一時保存領域７３に一時保存されているため、内視鏡画像を撮影時刻が最も新しい順に一時保存画像が最大枚数の５枚となるまで一時保存領域７３に一時保存する。したがって、時刻ｔ１で内視鏡画像を撮影し始めた場合、時刻ｔ３の時点では、一時保存領域７３には、時刻ｔ１で撮影した内視鏡画像から時刻ｔ３で撮影した内視鏡画像までが一時保存されている。引き続き、一時保存画像が最大枚数の５枚になるまで、内視鏡画像を取得した順に一時保存画像を一時保存領域７３に一時保存する。
　図８に示すように、一時保存画像が最大枚数の５枚で一時保存領域７３に一時保存されている場合は、第１Ｂ選択条件を用いる。第１Ｂ選択条件では、最大枚数の一時保存画像が一時保存領域７３に一時保存されているため、先入先出方式にて、常に最大枚数を超えない枚数の一時保存画像が一時保存領域７３に一時保存されるようにする。したがって、時刻ｔ６で内視鏡画像を取得した場合は、時刻ｔ１で撮影した内視鏡画像を一時保存領域７３から削除した上で、最新の時刻ｔ６で撮影した内視鏡画像を一時保存領域７３に一時保存する。図８において、削除する画像を網掛けで示す。このようにして、一時保存領域７３に保存される一時保存画像は、予め設定した最大枚数よりも多くなることがないため、メモリ容量の増大を防ぐことができる。
　なお、一時保存領域７３が一時保存する一時保存画像のそれぞれに対しては、画像評価部６２により画像評価値が付与される。本実施形態では、コントラスト評価部７４が、一時保存画像のそれぞれに対してコントラストに関する評価を行い、対応する一時保存画像にコントラスト評価値を付与する。コントラスト評価値が高いほど、焦点が合った内視鏡画像であり、コントラスト評価値が低いほど、ボケ、またはブレ等があり、焦点がずれた内視鏡画像であるとすることができる。
　次に、選択条件切替指示があった場合は（ステップＳＴ１２０でＹＥＳ）、選択条件を第２選択条件に切り替える（ステップＳＴ１４０）。選択条件切替指示は、上記したように、指示部により行なわれる。本実施形態では、指示部は内視鏡１２のフリーズ操作部１２ｆを含み、フリーズ操作部１２ｆの長押しがあった場合に選択条件切替指示が行われる。選択条件切替指示がない場合（ステップＳＴ１２０でＮＯ）については後述する。選択条件を第２選択条件に切り替えた後、第２選択条件により選択した一時保存画像に画像評価値を付与し、これを繰り返す（ステップＳＴ１５０）。
　第２選択条件は、第２Ａ選択条件と第２Ｂ選択条件とを備えることができる。第２Ａ選択条件は、第１Ａ選択条件と同じである。最大枚数未満で一時保存画像が一時保存領域７３に一時保存されている場合は、第２Ａ選択条件を用いる。第２Ａ選択条件では、内視鏡画像を撮影時刻が最も新しい順に最大枚数となるまで一時保存画像として一時保存領域７３に一時保存する。最大枚数の一時保存画像が一時保存領域７３に一時保存されている場合は、第２Ｂ選択条件を用いる。第２Ｂ選択条件では、一時保存画像からコントラスト評価値により選択した適正静止画のみを一時保存画像として一時保存領域に残し、かつ、一時保存領域から適正画像以外を削除した上で、再び、第２Ａ選択条件を行う。適正静止画は、最適静止画を選択するための候補として選択する静止画である。このように、第２Ｂ選択条件では、最大枚数の一時保存画像のうち、コントラスト評価値に基づき適正静止画を例えば１枚残して、他の一時保存画像を削除し、再び撮影時刻順に一時保存画像を追加し、一時保存画像が最大枚数となった場合に、再びコントラスト評価値に基づき適正静止画を１枚残すという流れを繰り返す方法により、一時保存領域７３に一時保存する一時保存画像を、予め設定した最大枚数を超えないようにすることができる。
　図９に示すように、フリーズ操作部１２ｆの押下の期間が時刻ｔｎにおいて長押し判定期間を超えることにより長押しと判定された場合、時刻ｔｎにおいて選択条件切替指示が行われ、選択条件切替部７２は、第１選択条件から第２選択条件に選択条件を切り替える。第２選択条件において、一時保存画像が最大枚数の５枚で一時保存領域７３に一時保存されている場合は、第２Ｂ選択条件を用いる。長押しと判定された際に、第２Ａ選択条件を用いるか、第２Ｂ選択条件を用いるかは、長押しと判定された際に一時保存領域７３に何枚の一時保存画像が保存されているかにより決定される。第２Ｂ選択条件では、前半では、時刻ｔｎから時刻ｔｎ＋４までに撮影された内視鏡画像を一時保存画像とした場合、これらの一時保存画像からコントラスト評価値が最も高い一時保存画像である内視鏡画像Ｐｔｎ＋３を適正静止画として一枚選択する。図９において、適正静止画である一時保存画像から選択した内視鏡画像Ｐｔｎ＋３は網掛けで示す。一時保存画像のうち、適正静止画以外の一時保存画像は、一時保存領域７３から削除する。
　次に、図１０に示すように、第２Ｂ選択条件の後半では、一時保存画像に、時刻ｔｎ＋３で撮影された適正静止画である内視鏡画像Ｐｔｎ＋３を一時保存領域７３に一時保存している状態で、次の撮影タイミングである時刻ｔｎ＋５から時刻ｔｎ＋８までに撮影された内視鏡画像を一時保存画像として一時保存領域７３に一時保存する。一時保存領域７３に最大枚数である５枚の一時保存画像が一時保存された時点で、第２Ｂ選択条件を行う。すなわち、一時保存領域７３に一時保存される最大枚数である５枚の一時保存画像から、コントラスト評価値に基づいて適正静止画を選択し、図１０の場合は、適正静止画として、時刻ｔｎ＋７において撮影された内視鏡画像Ｐｔｎ＋７を一枚選択する。図１０において、適正静止画であった内視鏡画像Ｐｔｎ＋３と新しく適正静止画となった内視鏡画像Ｐｔｎ＋７とを互いに異なる網掛けで示す。適正静止画の更新は、フリーズ操作部１２ｆを長押ししている間継続される。このようにして、適正静止画が更新しながら一時保存されるため、より適切な静止画を取得することができる。また、一時保存領域７３に保存される一時保存画像は、予め設定した最大枚数よりも多くなることがないため、メモリ容量の増大を防ぐことができる。
　第２選択条件は、第２Ａ選択条件と第２Ｃ選択条件とを備えることができる。まず、最大枚数未満で一時保存画像が一時保存領域７３に一時保存されている場合は、第２Ａ選択条件を用いる。最大枚数の一時保存画像が一時保存領域７３に一時保存されている場合は、第２Ｃ選択条件を用いる。第２Ｃ選択条件では、最大枚数の一時保存画像が一時保存領域に一時保存されている場合は、一時保存画像からコントラスト評価値により選択した適正静止画のみを一時保存画像として一時保存領域に一時保存した上で、撮影時刻が最も新しい内視鏡画像を選択して、一時保存画像として一時保存領域に一時保存した後、一時保存領域に一時保存した一時保存画像からコントラスト評価値により選択した適正静止画のみを一時保存画像として一時保存領域に一時保存する。その後、第２Ｃ選択条件を繰り返す。このように、第２Ｃ選択条件では、最大枚数の一時保存画像のうち、コントラスト評価値に基づき適正静止画を一時保存領域に例えば１枚残して、再び撮影時刻順に一時保存画像を１枚追加し、その後、この２枚の一時保存画像のコントラスト評価値を比較することにより、適正静止画を１枚残し、再び撮影時刻順に一時保存画像を１枚追加するという流れを繰り返す方法により、一時保存領域７３に一時保存する一時保存画像を、予め設定した最大枚数を超えないようにすることができる。
　第２選択条件において、一時保存画像が最大枚数の５枚で一時保存領域７３に一時保存されている場合は、第２Ｃ選択条件を用いてもよい。第２Ｃ選択条件では、前半では、図９に示すように、時刻ｔｎから時刻ｔｎ＋４までに撮影された最大枚数の５枚の内視鏡画像を一時保存画像とした場合、これらの一時保存画像からコントラスト評価値が最も良好である一時保存画像を適正静止画として一枚選択する。これらの一時保存画像のうち、適正静止画である内視鏡画像Ｐｔｎ＋３以外の一時保存画像は、一時保存領域７３から削除する。
　次に、図１１に示すように、第２Ｃ選択条件の後半では、時刻ｔｎ＋４の後、一時保存画像に、時刻ｔｎ＋３で撮影された適正静止画が一時保存領域に一時保存している状態で、次の撮影タイミングである時刻ｔｎ＋５に撮影された内視鏡画像を一時保存画像として一時保存領域７３に一時保存する。一時保存領域に時刻ｔｎ＋３に撮影された適正静止画である内視鏡画像Ｐｔｎ＋３と、時刻ｔｎ＋５に撮影された内視鏡画像Ｐｔｎ＋５の２枚の一時保存画像が一時保存された後、２枚の一時保存画像のコントラスト評価値を比較することにより、コントラスト評価値が高い方の時刻ｔｎ＋５に撮影した内視鏡画像Ｐｔｎ＋５を新たな適正静止画として１枚残す。図１２において、適正静止画であった内視鏡画像Ｐｔｎ＋３と新しく適正静止画となった内視鏡画像Ｐｔｎ＋５とを互いに異なる網掛けで示す。時刻ｔｎ＋５で撮影された適正静止画が一時保存領域に一時保存している状態で、次の撮影タイミングである時刻ｔｎ＋６（図示せず）に撮影された内視鏡画像を一時保存画像として一時保存領域７３に一時保存して、一時保存領域に時刻ｔｎ＋５に撮影された適正静止画と、時刻ｔｎ＋５と時刻ｔｎ＋６に撮影された２枚の一時保存画像が一時保存された後、２枚の一時保存画像のコントラスト評価値を比較するという流れを繰り返す。このようにして、適正静止画が更新しながら一時保存されるため、より適切な静止画を取得することができる。また、一時保存領域７３に保存される一時保存画像は、予め設定した最大枚数よりも多くなることがないため、メモリ容量の増大を防ぐことができる。
　次に、静止画保存指示があった場合は（ステップＳＴ１６０でＹＥＳ）、一時保存画像から画像評価値に基づいて最適静止画を選択する（ステップＳＴ１７０）。最適静止画は、保存する静止画として適切である静止画である。静止画保存指示は、上記したように、指示部により行なう。本実施形態では、指示部は内視鏡１２のフリーズ操作部１２ｆを含むため、第２動作であるフリーズ操作部１２ｆの押下の解除があった場合に静止画保存指示が行われる。
　静止画保存指示は、上記したように、フリーズ操作部１２ｆの第２動作により行われる。本実施形態では、ユーザがフリーズ操作部１２ｆであるフリーズスイッチの押下を解除する動作を第２動作とし、フリーズスイッチの押下が解除された場合に静止画保存指示が行われるようにすることができる。
　図１２に示すように、第２Ｂ選択条件により内視鏡画像の一時保存を行っていた場合、静止画保存指示により、フリーズ操作部１２ｆの押下が解除され、静止画保存指示が行われた際に、一時保存領域７３に一時保存している一時保存画像が５枚あったため、５枚の一時保存画像の中から、コントラスト評価値に基づいて最適静止画を１枚選択する。なお、５枚の一時保存画像は、時刻ｔｎ＋３に撮影された内視鏡画像Ｐｔｎ＋３と、時刻ｔｎ＋７に撮影された内視鏡画像Ｐｔｎ＋７とを含む。時刻ｔｎ＋３に撮影された内視鏡画像は、時刻ｔｎから時刻ｔｎ＋４に撮影された５枚の内視鏡画像のうち、コントラスト評価値が最も高い内視鏡画像である、過去の適正静止画である。図１２において、適正静止画であった内視鏡画像Ｐｔｎ＋３と新しく適正静止画となった内視鏡画像Ｐｔｎ＋７とを互いに異なる網掛けで示す。内視鏡画像Ｐｔｎ＋３と内視鏡画像Ｐｔｎ＋７とをコントラスト評価値により比較することにより、内視鏡画像Ｐｔｎ＋７を選択した場合、時刻ｔｎから時刻ｔｎ＋９までに撮影された１０枚の内視鏡画像のうちで最も焦点が合った内視鏡画像である内視鏡画像Ｐｔｎ＋７が、最適静止画として選択されることとなる。
　同様に、図１３に示すように、第２Ｃ選択条件により内視鏡画像の一時保存を行っていた場合、フリーズ操作部１２ｆの押下が解除され、静止画保存指示が行われた際に一時保存領域７３に一時保存している一時保存画像が５枚あったため、５枚の一時保存画像の中から、コントラスト評価値に基づいて最適静止画を１枚選択する。なお、５枚の一時保存画像は時刻ｔｎから時刻ｔｎ＋４までに撮影された内視鏡画像であり、時刻ｔｎ＋３に撮影された内視鏡画像Ｐｔｎ＋３を含む。内視鏡画像Ｐｔｎ＋３は、時刻ｔｎから時刻ｔｎ＋４に撮影された５枚の内視鏡画像のうち、コントラスト評価値が最も高い内視鏡画像である、過去の適正静止画である。内視鏡画像Ｐｔｎ＋３と、静止画保存指示後に画像取得部５１が取得した内視鏡画像Ｐｔｎ＋５とをコントラスト評価値により比較することにより、内視鏡画像ＰＴｎ＋５を選択した場合、時刻ｔｎから時刻ｔｎ＋５までに撮影された６枚の内視鏡画像のうちで最も焦点が合った内視鏡画像である内視鏡画像Ｐｔｎ＋５が、最適静止画として選択されることとなる。図１３において、適正静止画であった内視鏡画像Ｐｔｎ＋３と静止画保存指示後に取得された内視鏡画像Ｐｔｎ＋５とを互いに異なる網掛けで示す。
　以上のようにして選択された最適静止画は、最適静止画保存領域７９に保存される（ステップＳＴ１８０）。最適静止画保存領域７９に保存される最適静止画は、画像評価値が優れた静止画である。本実施形態では、画像評価値としてコントラスト評価値を用いたため、最適静止画は、合焦に優れた内視鏡画像である。したがって、最適静止画は、ディスプレイ１８に表示したり、医療レポートに用いたりするのに好適である。
　次に、選択条件を第２選択条件から第１選択条件に切り替える（ステップＳＴ１９０）。最適静止画を保存した後に、中央制御部５９は、一時保存部が第２選択条件に基づいて内視鏡画像を一時保存していた場合、選択条件切替指示受付部７１に対し選択条件切替指示をするよう指示を行う。内視鏡画像の取得を終了する場合は（ステップＳＴ２００でＹＥＳ）、内視鏡による観察が終了する。内視鏡画像の取得を終了しない場合は（ステップＳＴ２００でＮＯ）、ステップＳＴ１００に戻り、第１選択条件により内視鏡画像を一時保存するところから繰り返す。
　なお、ステップＳＴ１２０で選択条件切替指示がない場合は（ステップＳＴ１２０でＮＯ）、フリーズ操作部１２ｆによる押下が長押しと判定されない場合であって、フリーズ操作部１２ｆが押下を継続する期間が長押し判定時間未満である単押しと判定された場合である。この場合はフリーズ操作部１２ｆの押下が解除されているため、静止画保存指示が行われ（ステップＳＴ１３０）、最適静止画を選択するステップＳＴ１７０にすすむ。フリーズ操作部１２ｆを単押しした場合のステップＳＴ１７０では、第１選択条件により選択した一時保存画像を対象として、最適静止画が選択される。
　以上のとおり、内視鏡システム１０は、例えば、フリーズスイッチの単押し又は長押しといったユーザの容易な操作により、ユーザの意図するタイミングで、最適な静止画をより確実に取得することができる。内視鏡の先端部１２ｄと被写体である観察対象との距離が変動する等の撮影環境の変化があり、フリーズスイッチを押下してすぐに最適な静止画が得られないと考える場合でも、最適な静止画が得られるまでフリーズスイッチの押下を継続して長押しを続け、最適な静止画が得られたと考えた際にフリーズスイッチを解除するとの容易な操作により、最適な静止画を得ることができる。また、内視鏡先端部１２ｄと観察対象との距離を最も近づけておき、フリーズスイッチを押下しながら徐々に距離を離していくだけで、例えば焦点が合った最適な静止画を得ることができる。逆に、内視鏡先端部１２ｄと観察対象との距離が遠い時点からフリーズスイッチを押下しながら徐々に距離を近づけていくだけで、例えば焦点が合った最適な静止画を得ることができる。また、この際に、予め設定した枚数で一時保存画像を一時保存するため、一時保存画像のためにメモリの容量の増大を抑えることができる。
　図１４及び図１５に示すように、内視鏡システム１０は、選択条件を第１選択条件と第２選択条件とを切り替えるため、フリーズ操作部１２ｆを押下した際に焦点が最も合った内視鏡画像が得られない場合でも、焦点が最も合った内視鏡画像が得られたと考える時点までフリーズ操作部１２ｆの押下を継続する長押しを行うことにより、合焦に最も優れた最適静止画を容易により確実に得ることができる。図１４及び図１５の上部に示すグラフにおいて、縦軸は撮影距離、横軸は時間ｔである。また、撮影距離とは、内視鏡の先端部１２ｄと被写体との距離であり、グラフでは、距離ｄｂを基準としている。距離ｄｂは、最も合焦に優れた画像が得られる距離である（図２０参照）。被写体は内視鏡１２の観察対象であり、被検体の管腔内であるため、例えば、内視鏡１２の先端部１２ｄの位置を固定していたとしても、拍動又は蠕動等により、時間ｔとともに撮影距離が規則的に変動する場合がある。
　ユーザが静止画を取得しようとする場合、フリーズ操作部１２ｆを押下し解除するまでの期間が長押し判定期間より短い場合は、第１選択条件により一時保存画像が一時保存される。図１４の場合、最大枚数５枚で、一時保存画像が一時保存領域７３に一時保存される。第１選択条件が先入先出方式であったため、フリーズ操作部１２ｆが解除となった時刻ｔ６からさかのぼって５枚が一時保存画像となっており、このなかからコントラスト評価値が最も高い時刻ｔ２に取得された保存静止画Ｐｔ２が最適静止画として取得される。図１４において、時刻ｔ６に取得された内視鏡画像が一時保存画像となった際に削除される時刻ｔ１に取得された内視鏡画像と、時刻ｔ２に取得された内視鏡画像とを、異なる網掛けで示す。
　図１４の場合は、最大枚数が取得される期間に、合焦に優れた内視鏡画像が得られていた場合である。しかしながら、フリーズ操作部１２ｆの単押しのタイミングによっては、最大枚数が取得される期間に優れた内視鏡画像が得られない場合がありうる。すなわち、フリーズ操作部１２ｆを単押しする時点から一定の期間さかのぼった時点の中で、撮影距離が距離ｄｂである内視鏡画像が得られるタイミングが含まれない場合がありうる。内視鏡システム１０では、図１５に示すように、例えば、単押しにより最大枚数が取得される期間に優れた内視鏡画像が得られないと考える場合、ユーザは、フリーズ操作部１２ｆの押下を継続すればよい。フリーズ操作部１２ｆを押下し解除するまでの期間が、長押し判定期間より長い場合は長押しと判定され、第１選択条件から第２選択条件に変更された上で、一時保存画像が保存される。なお、内視鏡システム１０では、最適静止画をディスプレイ１８に表示することにより、フリーズ操作部１２ｆの単押しにより適切な静止画が得られたか否かを確認することができる。最適静止画の表示については後述する。
　図１５の場合、時刻ｔｎ＋４で長押し判定がなされ、長押し判定後は第２選択条件により内視鏡画像が一時保存領域７３に一時保存される。第２選択条件では、最大枚数５枚で、一時保存画像が一時保存領域７３に一時保存される。長押し判定前に第１選択条件によりコントラスト評価値が最も高い時刻ｔｎに取得された一時保存画像である内視鏡画像Ｐｔｎのみが一時保存領域７３に一時保存された状態で、時刻ｔｎ＋５から時刻ｔｎ＋８までの４枚の内視鏡画像が一時保存画像として一時保存される。一時保存領域７３に５枚の一時保存画像が一時保存された時刻ｔｎ＋８において、一時保存領域７３に一時保存された一時保存画像５枚においてコントラスト評価値によりコントラスト評価がなされ、コントラスト評価値が最も高い内視鏡画像Ｐｔｎ＋６が最適静止画として保存される。図１５において、適正静止画であった時刻ｔｎに取得された内視鏡画像Ｐｔｎと、時刻ｔ６に取得された内視鏡画像Ｐｔｎ＋６とを、異なる網掛けで示す。このようにして、内視鏡画像Ｐｔｎが更新されて、より合焦に優れた内視鏡画像Ｐｔｎ＋６を最適静止画として保存することができる。
　このように、ユーザがフリーズ操作部１２ｆの押下を、例えば、撮影距離が最適になるタイミングが含まれると考えるまで継続し、撮影距離が最適なタイミングが含まれたと考えた場合にフリーズ操作部１２ｆを解除することにより、被写体が動いた場合であっても、撮影距離が最も適切な静止画を取得することができる。
　なお、本実施形態では、一時保存領域７３が一時保存画像を一時保存する最大枚数が５枚の場合について説明したが、最大枚数は、撮影目的又は撮影環境等に応じて任意に設定することができる。例えば、フレーム数が一秒間に６０枚である場合、最大枚数を１５枚とすることができる。最大枚数１５枚は、フレーム数が６０枚／秒である場合、０．２５秒の撮影期間に相当する。
　また、一時保存領域７３が一時保存画像を一時保存する最大枚数は、連続したフレームの内視鏡画像でなくてもよい。最大枚数に相当する撮影期間は任意に設定してもよく、連続しないフレームの内視鏡画像を一時保存画像として一時保存してもよい。例えば、フレーム数が６０枚／秒である場合、最大枚数１５枚を、連続したフレームから取得すると、０．２５秒の撮影期間となるが、最大枚数１５枚を、フレーム１つおきに取得すると、０．５秒の撮影期間となる。最大枚数が相当する撮影期間は、例えば、画像評価値をコントラスト評価値とした場合には、ブレ軽減期間ということができる。ブレ軽減期間は、この期間の間に画像評価値が変動しても、画像評価値に関して最適な適正静止画を少なくとも１枚取得できる期間である。したがって、被写体の種類、又は撮影の環境等に応じて、例えば、すばやく動く被写体の場合は、ブレ軽減期間を短く設定し、ゆっくりと動く被写体の場合は、ブレ軽減期間を長く設定する等、任意に調整することができる。
　また、一時保存領域７３が一時保存画像を一時保存する最大枚数又は撮影期間の調整は、指示部の第１動作と第２動作とにより行ってもよい。具体的には、フリーズ操作部１２ｆの長押し期間が予め設定した判定期間以下である場合は、フレーム数が６０枚／秒である場合、最大枚数に相当する撮影期間を０．２５秒とし、長押し期間が判定期間より長い場合は、最大枚数１５枚をフレーム１つおきに取得し、０．５秒の撮影期間とすることができる。長押し期間による撮影期間判定の判定期間は、上記のような２段階のみではなく、３段階以上に設定してもよい。
　図１６に示すように、長押し期間による撮影期間判定において、時刻ｔｎ＋３において、判定期間が経過した場合、一時保存部６１は、一時保存画像を、内視鏡画像のフレーム毎ではなく、一つおきに選択して一時保存する。また、この選択条件を第２選択条件に含めてもよい。図１６の場合は、最大枚数１５枚としている。したがって、時刻ｔｎ＋３に撮影された内視鏡画像Ｐｔｎ＋３を含め一時保存画像が１５枚になった時点で、コントラスト評価値に基づいて、一時保存画像１５枚の中から、最適静止画が選択され、保存される。したがって、長押し期間が比較的長くなり、ユーザが観察対象をじっくり観察している場合は、最大枚数を取得する期間が長く設定され、最適静止画の更新のタイミングも長くすることができる。このように、指示部により、最大枚数を取得する期間を調整することができる。
　また、画像評価部６２は、画像評価値に閾値を設け、閾値以上の画像評価値を一時保存画像に付与した場合、最適静止画保存部６３は、静止画保存指示があったものとみなし、閾値以上の画像評価値を付与した一時保存画像を最適静止画として保存してもよい。すなわち、予め画像評価値に閾値を設定し、静止画保存指示の有無にかかわらず、閾値以上の画像評価値を有する一時保存画像が取得された場合、この一時保存画像を最適静止画として保存してもよい。これにより、最適静止画をディスプレイに表示するようにしていた場合に、ユーザは、長押しを継続中に、最適静止画が保存されたことをディスプレイ１８等により認識してから、長押しを解除することができる。
　図１７に示すように、コントラスト評価値の閾値を９５と設定する。コントラスト評価値は、ブレがほとんどなく焦点が合っている画像のコントラスト評価値を１００とした相対値とすることができる。長押し中の一時保存画像において、コントラスト評価値が９８の一時保存画像Ｐｔｎ＋６が一時保存された場合、一時保存部６１は、一時保存画像Ｐｔｎ＋６を最適静止画として保存する。なお、時刻Ｐｔｎ＋６以降に、閾値以上の一時保存画像が取得された場合、新しい一時保存画像を最適静止画として保存してもよいし、保存をしなくてもよい。ユーザは、最適静止画が取得できたことを報知部からの報知により知る。具体的には、例えば、ディスプレイ１８に最適静止画が表示されること、又は、ディスプレイ１８にアラート等が表示されること等の報知により、ユーザは最適静止画が取得された旨を知ることができる。ユーザは、目的の静止画が取得されたか否かをディスプレイ１８等で確認し、取得できた場合は長押しを終了することができる。報知部については後述する。
　ディスプレイ１８は、保存した最適静止画及び／又は適正静止画を表示してもよい。ディスプレイ１８は、最適静止画及び／又は適正静止画を表示していた場合は、それぞれ更新して最新の最適静止画及び／又は適正静止画を表示することができる。また、ディスプレイ１８は、メイン画面とサブ画面とを備えてもよい。そして、最適静止画は、メイン画面に一定期間表示し、一定期間後はサブ画面に表示してもよい。また、最適静止画はメイン画面に、適正静止画はサブ画面に、それぞれ最新のものを更新して表示してもよい。
　図１８に示すように、メイン画面に、それまでで保存した時刻が最新の最適静止画である内視鏡画像Ｐｔｎ－５を表示しておき、新しく最適静止画Ｐｔｎ＋６が得られた場合は、最適静止画であった内視鏡画像Ｐｔｎ－５を更新して最適静止画Ｐｔｎ＋６をメイン画面に表示してもよい。また、更新後の最適静止画像である最適静止画Ｐｔｎ＋６をメイン画面に表示した場合は、サブ画面に最適静止画であった内視鏡画像Ｐｔｎ－５を表示する。したがって、内視鏡画像Ｐｔｎ－５をメイン画面に表示している場合は、サブ画面に、内視鏡画像Ｐｔｎ－５が得られる前の最適静止画である、内視鏡画像Ｐｔｎ－７を表示している。その後、内視鏡画像Ｐｔｎ＋６よりもコントラスト評価値が優れる最適静止画である内視鏡画像が得られた場合、サブ画面の内視鏡画像Ｐｔｎ－５を更新して、サブ画面に内視鏡画像Ｐｔｎ＋６を表示する。また、メイン画面に最適静止画を表示する期間を、予め設定した表示期間としておいて、この期間後は、サブ画面に表示してもよい。メイン画面に最適静止画を表示しない期間は、リアルタイムで得られた内視鏡画像を動画で表示することが好ましい。
　なお、ディスプレイ１８にメイン画面のみを表示させ、最適静止画のみを更新して表示してもよいし、サブ画面を２つ以上配置し、過去の適正画像を複数表示する等としてもよい。この場合、過去の適正画像のうち、最新のものから選択した複数を時系列で並べて表示してもよい。ディスプレイ１８に最適静止画及び／又は適正静止画を表示することにより、ユーザは、過去の適正静止画から、内視鏡先端部と被写体との距離をどのように操作すれば望む静止画が取得できそうであるか等を把握することができる。また、すでに望む静止画が取得できているか否か等も、ひと目で把握できるため好ましい。
　また、内視鏡システム１０は、ディスプレイ１８が最適静止画及び／又は適正静止画を更新して表示した場合、更新に関してユーザに報知する報知部を備えてもよい。報知部は、内視鏡システム１０のディスプレイ１８への表示でもよいし、音等のその他のユーザが報知を認識できる手段でもよい。ディスプレイ１８に表示することにより報知する場合は、最適静止画及び／又は適正静止画が更新されてから一定の期間、ディスプレイ１８上の各静止画の表示の枠の色、太さ、又は表示形態を変化させることにより、ユーザが表示又は更新をひと目で認識できる方法により報知することが好ましい。
　図１９に示すように、例えば、ディスプレイ１８は、動画表示画面８１、静止画表示メイン画面８２、及び静止画表示サブ画面８３を備える。動画表示画面８１には、内視鏡画像をリアルタイムで表示する。静止画表示メイン画面８２には、最適静止画を表示する。最適静止画が更新された場合は、最適静止画を、太い色の線である静止画表示報知枠８４で囲んで表示する。また、静止画表示報知枠８４を点滅させてもよい。静止画表示サブ画面８３には、上記したように、複数の過去の最適静止画を時系列で表示する。
　このように、例えば、適正静止画を更新して表示した場合、更新に関してユーザに報知することにより、ユーザがディスプレイ１８に注目することができ、更新された適正静止画が、ユーザが希望とする静止画であった場合、その時点でフリーズ操作部１２ｆの押下を解除することにより、ディスプレイ１８に更新して表示された適正静止画を、タイミング良く、最適静止画として保存することができる。
　また、報知部は、選択条件切替部７２が、第１選択条件と第２選択条件とを切り替えた場合、切替に関してユーザに報知してもよい。この場合も、上記したように、例えば、ディスプレイ１８において、適正静止画における静止画表示報知枠８４による表示により、報知を行うことができる。
　なお、報知部は、ユーザへの報知が予め設定した最低報知期間以内に再度行われる場合は、報知を行わないことが好ましい。最低報知期間を設定することにより、報知が頻繁に行われて、煩雑になることを避けることができる。
　なお、上記実施形態では、内視鏡画像の処理を行う内視鏡システムに対して、本発明の適用を行っているが、内視鏡画像以外の医療画像を処理する医療画像処理システムに対しても、静止画を保存する際に本発明の適用は可能である。また、内視鏡画像として、励起光の照射によって被写体から発せられた自家蛍光像を撮像して得る自家蛍光画像を内視鏡画像とする場合等にも、静止画を保存する際に本発明の適用は可能である。
　上記実施形態において、プロセッサ装置１６に含まれる中央制御部５９、画像取得部５１、ノイズ低減部５３、信号処理部５５、画像保存部５６、表示制御部５７、及び映像信号生成部５８といった各種の処理を実行する処理部（processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit)、ＦＰＧＡ(Field Programmable Gate Array) などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
　１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡや、ＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。
　さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路（circuitry）である。
１０　内視鏡システム
１２　内視鏡
１２ａ　挿入部
１２ｂ　操作部
１２ｃ　湾曲部
１２ｄ　先端部
１２ｅ　アングルノブ
１２ｆ　フリーズ操作部
１２ｇ　ズーム操作部
１４　光源装置
１６　プロセッサ装置
１８　ディスプレイ
１９　キーボード
２０　光源部
２０ａ　Ｖ－ＬＥＤ
２０ｂ　Ｂ－ＬＥＤ
２０ｃ　Ｇ－ＬＥＤ
２０ｄ　Ｒ－ＬＥＤ
２１　光源用プロセッサ
３０ａ　照明光学系
３０ｂ　撮像光学系
４１　ライトガイド
４２　照明レンズ
４３　対物レンズ
４４　ズームレンズ
４５　撮像センサ
４６　ＣＤＳ／ＡＧＣ回路
４７　Ａ／Ｄコンバータ
５１　画像取得部
５２　ＤＳＰ
５３　ノイズ低減部
５４　メモリ
５５　信号処理部
５６　画像保存部
５７　表示制御部
５８　映像信号生成部
５９　中央制御部
６１　一時保存部
６２　画像評価部
６３　最適静止画保存部
７１　選択条件切替指示受付部
７２　選択条件切替部
７３　一時保存領域
７４　コントラスト評価部
７５　明るさ評価部
７６　確信度評価部
７７　悪性度評価部
７８　静止画保存指示受付部
７９　最適静止画保存領域
８１　動画表示画面
８２　静止画表示メイン画面
８３　静止画表示サブ画面
８４　静止画表示報知枠
９１　被写体
ｄｂ、ｄｂ＋ｃ、ｄｍ　距離
ｔ、ｔ１～ｔ６、ｔｎ～ｔｎ＋８　時刻
Ｐｔ２、Ｐｔｎ、Ｐｔｎ－７～Ｐｔｎ＋７　内視鏡画像
ＳＴ１００～ＳＴ２００　ステップ
 
 

Claims (20)

  1. 　被写体を撮影する内視鏡とプロセッサとを備え、
    　前記内視鏡は、指示部を備え、
    　前記プロセッサは、
    　前記内視鏡により前記被写体を撮影して得る内視鏡画像をフレーム毎に取得し、
    　第１選択条件又は第２選択条件に基づいて選択した前記内視鏡画像を、一時保存画像として一時保存領域に一時保存し、
    　前記一時保存領域が一時保存する前記一時保存画像のそれぞれに対し、画像評価を行うことにより画像評価値を付与し、
    　選択条件切替指示に基づき、前記第１選択条件と前記第２選択条件とを切り替え、
    　静止画保存指示に基づき、前記一時保存画像から前記画像評価値により選択した最適静止画を保存し、
    　前記指示部は、前記選択条件切替指示と前記静止画保存指示とを行う内視鏡システム。
  2. 　前記プロセッサは、前記内視鏡画像を取得し始めた際に、前記第１選択条件に基づいて選択した前記内視鏡画像の一時保存を行う請求項１に記載の内視鏡システム。
  3. 　前記指示部は、第１動作と第２動作とを行い、前記第２動作により前記静止画保存指示を行う請求項１又は２に記載の内視鏡システム。
  4. 　前記指示部は、モーメンタリ型スイッチを含み、
    　前記第１動作は前記モーメンタリ型スイッチの押下であり、前記第２動作は押下した前記モーメンタリ型スイッチの解除である請求項３に記載の内視鏡システム。
  5. 　前記指示部は、オルタネート型スイッチを含み、
    　前記第１動作は前記オルタネート型スイッチの一度目の押下と解除とであり、前記第２動作は前記オルタネート型スイッチの二度目の押下と解除とである請求項３に記載の内視鏡システム。
  6. 　前記プロセッサは、前記第１動作から前記第２動作までの期間を計測し、
    　前記指示部は、前記期間が予め設定した判定期間以上の場合、前記第１動作から前記判定期間が経過した際に、前記選択条件切替指示を行う請求項３ないし５のいずれか１項に記載の内視鏡システム。
  7. 　前記指示部は、前記静止画保存指示を行った際に、前記プロセッサが前記第２選択条件に基づいて前記内視鏡画像を一時保存していた場合、前記選択条件切替指示を行う請求項１ないし６のいずれか１項に記載の内視鏡システム。
  8. 　前記プロセッサは、選択した前記内視鏡画像を、前記一時保存画像として予め設定した最大枚数以下で前記一時保存領域に一時保存し、
    　前記第１選択条件は、前記一時保存画像が、前記最大枚数未満で前記一時保存領域に一時保存されている場合は、第１Ａ選択条件として、撮影時刻が最も新しい順に前記最大枚数となるまで前記内視鏡画像を前記一時保存画像として前記一時保存領域に一時保存し、前記最大枚数の前記一時保存画像が前記一時保存領域に一時保存されている場合は、第１Ｂ選択条件として、前記一時保存領域が一時保存する前記一時保存画像のうち撮影時刻が最も古い前記一時保存画像を前記一時保存領域から削除した上で、撮影時刻が最も新しい順に前記内視鏡画像を前記一時保存画像として前記一時保存領域に一時保存することを含む請求項１ないし７のいずれか１項に記載の内視鏡システム。
  9. 　前記プロセッサは、選択した前記内視鏡画像を、前記一時保存画像として予め設定した最大枚数以下で前記一時保存領域に一時保存し、
    　前記第２選択条件は、前記一時保存画像が、前記最大枚数未満で前記一時保存領域に一時保存されている場合は、第２Ａ選択条件として、撮影時刻が最も新しい順に前記最大枚数となるまで前記内視鏡画像を前記一時保存画像として前記一時保存領域に一時保存し、前記最大枚数の前記一時保存画像が前記一時保存領域に一時保存されている場合は、第２Ｂ選択条件として、前記一時保存画像から前記画像評価値により選択した適正静止画のみを前記一時保存画像として前記一時保存領域に残し、かつ、前記一時保存領域から前記適正画像以外を削除した上で、前記第２Ａ選択条件を行うことを含む請求項１ないし８のいずれか１項に記載の内視鏡システム。
  10. 　前記プロセッサは、選択した前記内視鏡画像を、前記一時保存画像として予め設定した最大枚数以下で前記一時保存領域に一時保存し、
    　前記第２選択条件は、前記一時保存画像が、前記最大枚数未満で前記一時保存領域に一時保存されている場合は、第２Ａ選択条件として、撮影時刻が最も新しい順に前記最大枚数となるまで前記内視鏡画像を前記一時保存画像として前記一時保存領域に一時保存し、前記最大枚数の前記一時保存画像が前記一時保存領域に一時保存されている場合は、第２Ｃ選択条件として、前記一時保存画像から前記画像評価値により選択した適正静止画のみを前記一時保存画像として前記一時保存領域に残し、かつ、前記一時保存領域から前記適正画像以外を削除した上で、撮影時刻が最も新しい前記内視鏡画像を選択して、前記一時保存画像として前記一時保存領域に一時保存した後、前記一時保存領域に一時保存した前記一時保存画像から前記画像評価値により選択した適正静止画のみを前記一時保存画像として前記一時保存領域に一時保存することを含む請求項１ないし８のいずれか１項に記載の内視鏡システム。
  11. 　前記最適静止画及び／又は前記適正静止画を表示するディスプレイを備え、
    　前記ディスプレイは、前記最適静止画及び／又は前記適正静止画を表示していた場合は、それぞれ更新して最新の前記最適静止画及び／又は前記適正静止画を表示する請求項９又は１０に記載の内視鏡システム。
  12. 　前記ディスプレイは、メイン画面とサブ画面とを備え、
    　前記最適静止画は、予め設定した表示期間で前記メイン画面に表示し、前記表示期間後は前記サブ画面に表示する請求項１１に記載の内視鏡システム。
  13. 　前記ディスプレイが前記最適静止画及び／又は前記適正静止画を更新して表示した場合、前記更新に関してユーザに報知する報知部を備える請求項１１又は１２に記載の内視鏡システム。
  14. 　前記報知部は、前記プロセッサが、前記第１選択条件と前記第２選択条件とを切り替えた場合、前記切替に関してユーザに報知する請求項１３に記載の内視鏡システム。
  15. 　前記報知部は、ユーザへの前記報知が予め設定した最低報知期間以内に再度行われる場合は、前記報知を行わない請求項１３又は１４に記載の内視鏡システム。
  16. 　前記プロセッサは、前記一時保存画像が有するコントラスト及び／又は明るさについて前記画像評価を行い、前記画像評価値は、前記一時保存画像の前記コントラスト及び／又は前記明るさに関する値である請求項１ないし１５のいずれか１項に記載の内視鏡システム。
  17. 　前記プロセッサは、前記一時保存画像に写る前記被写体が有する特定の病変に関する確信度及び／又は悪性度について前記画像評価を行い、前記画像評価値は前記確信度及び／又は前記悪性度である請求項１ないし１５のいずれか１項に記載の内視鏡システム。
  18. 　前記プロセッサは、前記画像評価値に閾値を設け、前記閾値以上の前記画像評価値を前記一時保存画像に付与した場合、前記静止画保存指示があったものとみなし、前記閾値以上の前記画像評価値を付与した前記一時保存画像を前記最適静止画として保存する請求項
    １ないし１７のいずれか１項に記載の内視鏡システム。
  19. 　前記指示部は、フリーズ操作部を含む請求項１ないし１８のいずれか１項に記載の内視鏡システム。
  20. 　指示部を備え被写体を撮影する内視鏡とプロセッサとを備える内視鏡システムの作動方法であって、
    　前記プロセッサは、
    　前記内視鏡により前記被写体を撮影して得る内視鏡画像をフレーム毎に取得し、
    　第１選択条件又は第２選択条件に基づいて選択した前記内視鏡画像を、一時保存画像として一時保存領域に一時保存し、
    　前記一時保存領域が一時保存する前記一時保存画像のそれぞれに対し、画像評価を行うことにより画像評価値を付与し、
    　選択条件切替指示に基づき、前記第１選択条件と前記第２選択条件とを切り替え、
    　静止画保存指示に基づき、前記一時保存画像から前記画像評価値により選択した最適静止画を保存し、
    　前記指示部は、前記選択条件切替指示と前記静止画保存指示とを行う内視鏡システムの作動方法。
PCT/JP2021/045673 2021-02-12 2021-12-10 内視鏡システム、及び内視鏡システムの作動方法 WO2022172574A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022581207A JPWO2022172574A1 (ja) 2021-02-12 2021-12-10
CN202180093512.5A CN116829046A (zh) 2021-02-12 2021-12-10 内窥镜系统及内窥镜系统的工作方法
US18/448,396 US20230380660A1 (en) 2021-02-12 2023-08-11 Endoscope system and operation method for endoscope system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-021030 2021-02-12
JP2021021030 2021-02-12

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/448,396 Continuation US20230380660A1 (en) 2021-02-12 2023-08-11 Endoscope system and operation method for endoscope system

Publications (1)

Publication Number Publication Date
WO2022172574A1 true WO2022172574A1 (ja) 2022-08-18

Family

ID=82838641

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/045673 WO2022172574A1 (ja) 2021-02-12 2021-12-10 内視鏡システム、及び内視鏡システムの作動方法

Country Status (4)

Country Link
US (1) US20230380660A1 (ja)
JP (1) JPWO2022172574A1 (ja)
CN (1) CN116829046A (ja)
WO (1) WO2022172574A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10323326A (ja) * 1997-05-23 1998-12-08 Olympus Optical Co Ltd 内視鏡装置
JP2011218090A (ja) * 2010-04-14 2011-11-04 Olympus Corp 画像処理装置、内視鏡システム及びプログラム
JP2013230319A (ja) * 2012-05-02 2013-11-14 Olympus Corp 内視鏡装置及び内視鏡装置の制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10323326A (ja) * 1997-05-23 1998-12-08 Olympus Optical Co Ltd 内視鏡装置
JP2011218090A (ja) * 2010-04-14 2011-11-04 Olympus Corp 画像処理装置、内視鏡システム及びプログラム
JP2013230319A (ja) * 2012-05-02 2013-11-14 Olympus Corp 内視鏡装置及び内視鏡装置の制御方法

Also Published As

Publication number Publication date
JPWO2022172574A1 (ja) 2022-08-18
US20230380660A1 (en) 2023-11-30
CN116829046A (zh) 2023-09-29

Similar Documents

Publication Publication Date Title
US10335014B2 (en) Endoscope system, processor device, and method for operating endoscope system
WO2012033200A1 (ja) 撮像装置
US20160128545A1 (en) Endoscope apparatus and method for controlling endoscope apparatus
US10397489B2 (en) Light source control device, method of controlling light source, and image capture system
JP6389140B2 (ja) 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
JP6533180B2 (ja) 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
US10958852B2 (en) Imaging apparatus and control method having a plurality of synchronized light source devices
JP5850630B2 (ja) 内視鏡システム及びその駆動方法
JP5467971B2 (ja) 電子内視鏡システム、電子内視鏡システムのプロセッサ装置及び電子内視鏡システムの作動方法
JP5996218B2 (ja) 内視鏡装置及び内視鏡装置の作動方法
US11344191B2 (en) Endoscope system including processor for determining type of endoscope
US10548465B2 (en) Medical imaging apparatus and medical observation system
JP6430880B2 (ja) 内視鏡システム、及び、内視鏡システムの作動方法
JP5509233B2 (ja) 電子内視鏡装置及びその作動方法
JP2013183911A (ja) 電子内視鏡システム
WO2022172574A1 (ja) 内視鏡システム、及び内視鏡システムの作動方法
US20180249139A1 (en) Medical signal processing device and medical observation system
US10638077B2 (en) Imaging device and control method
WO2022185821A1 (ja) 内視鏡システム及びその作動方法
JP2017123997A (ja) 撮像システムおよび処理装置
JP7112970B2 (ja) 内視鏡システム
JP7386266B2 (ja) 内視鏡システム及びその作動方法
JP7411515B2 (ja) 内視鏡システム及びその作動方法
US20230132998A1 (en) Endoscope system and operation method therefor
JP5467972B2 (ja) 電子内視鏡システム、電子内視鏡システムのプロセッサ装置及び電子内視鏡システムの作動方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21925817

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022581207

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 202180093512.5

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21925817

Country of ref document: EP

Kind code of ref document: A1