WO2017122397A1 - ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置 - Google Patents

ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置 Download PDF

Info

Publication number
WO2017122397A1
WO2017122397A1 PCT/JP2016/079792 JP2016079792W WO2017122397A1 WO 2017122397 A1 WO2017122397 A1 WO 2017122397A1 JP 2016079792 W JP2016079792 W JP 2016079792W WO 2017122397 A1 WO2017122397 A1 WO 2017122397A1
Authority
WO
WIPO (PCT)
Prior art keywords
gain
analog
adjustment
endoscope
output
Prior art date
Application number
PCT/JP2016/079792
Other languages
English (en)
French (fr)
Inventor
泰憲 松井
山下　真司
譲 田辺
悠大 松野
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to CN201680011094.XA priority Critical patent/CN107249429B/zh
Priority to EP16885000.6A priority patent/EP3245936A4/en
Priority to JP2017516803A priority patent/JP6150969B1/ja
Publication of WO2017122397A1 publication Critical patent/WO2017122397A1/ja
Priority to US15/678,259 priority patent/US10484626B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array

Definitions

  • the present invention relates to a gain adjustment device, a gain adjustment program, an endoscope, and an endoscope device that can improve image quality by adjusting variations in analog gain.
  • an electronic endoscope apparatus using an imaging element may be employed as an endoscope apparatus used for diagnosis or treatment using a treatment tool.
  • the electronic endoscope has an elongated insertion portion on the distal end side, and an imaging element is provided at the distal end of the insertion portion.
  • a connector for connecting to a video processor is provided on the proximal end side of the endoscope.
  • An imaging signal obtained by the endoscope is supplied to a video processor via a connector, and an endoscopic image is generated in the video processor.
  • Japanese Patent Application Laid-Open No. 2008-93174 discloses an endoscope apparatus that adjusts the gain of an AGC circuit so that the brightness of an image becomes an appropriate brightness.
  • an output signal of an image sensor provided at the distal end of an insertion portion is electrically transmitted by a cable to an electric board (hereinafter referred to as a connector portion inner board) built in a connector portion on the proximal end side of the insertion portion.
  • a connector portion inner board an electric board built in a connector portion on the proximal end side of the insertion portion.
  • a gain adjusting apparatus includes an analog-to-digital conversion circuit that converts an output of an analog processing unit that transmits and amplifies an imaging signal from an imaging element provided in an insertion unit of an endoscope into a digital signal.
  • An analog total gain calculation unit that calculates a sum of analog gains from the photoelectric conversion output of the image sensor to the input of the analog-digital conversion circuit using the captured image; and the analog-digital from the photoelectric conversion output of the image sensor Adjustment for obtaining the difference between the target value of the sum of gains up to the input of the conversion circuit and the sum of the analog gains as an adjustment gain, and outputting information on the adjustment gain for adjusting the analog gain of the endoscope A gain calculation unit.
  • An endoscope includes a recording unit that records information on the adjustment gain from the gain adjustment device, and an output of the analog-to-digital conversion circuit based on the information on the adjustment gain. And a digital amplifier for adding.
  • An endoscope includes a recording unit that records information on the adjustment gain from the gain adjustment device, and the adjustment gain is added to the sum of the analog gains based on the information on the adjustment gain. And an analog gain control unit for controlling the gain of the analog processing unit.
  • An endoscope apparatus includes the endoscope, and a video processor that performs predetermined image processing when an output of the endoscope is given, and the video processor includes the gain. It has an adjusting device.
  • the gain adjustment program is an analog that converts an output of an analog processing unit that transmits and amplifies an imaging signal from an imaging element provided in an insertion unit of an endoscope to a computer into a digital signal.
  • the captured images from the digital conversion circuit from the photoelectric conversion output of the image sensor using the captured image based on the output of the image sensor at the time of bright and the captured image based on the output of the image sensor at the time of dark
  • the adjustment gain information is output for adjusting the analog gain of the endoscope. To execute the order.
  • FIG. 3 is a graph showing variations in analog gains in FIG. 2 with each stage of the gain generation source on the horizontal axis and the gain on the vertical axis.
  • 6 is a flowchart for explaining black float correction and gain adjustment by the correction value calculation unit 40; The graph for demonstrating the gain adjustment by the gain correction
  • FIG. 1 is a block diagram showing an endoscope apparatus including an endoscope incorporating a gain adjusting apparatus according to a first embodiment of the present invention.
  • FIG. 2 is an explanatory diagram showing an analog gain generation source existing from the image sensor to the A / D converter
  • FIG. 3 is a graph in which each horizontal axis represents the gain generation source and the vertical axis represents the gain. 2 is a graph showing variation in each analog gain of 2.
  • an imaging device is disposed at the distal end of the insertion portion at the distal end of the endoscope, and an imaging device output signal (imaging signal) is transmitted to the proximal end side of the endoscope through a cable.
  • an imaging device output signal (imaging signal) is transmitted to the proximal end side of the endoscope through a cable.
  • an A / D that converts an analog imaging signal transmitted by a cable into a digital signal in a connector of a universal cable connected to the endoscope proximal end or in a video processor connected to the endoscope by the connector.
  • a transducer is provided.
  • FIG. 2 shows an example in which the source of analog gain is assumed to be the floating diffusion unit 1, the imager built-in amplifier 2, the cable 3 preamplifier 4 and the variable amplifier 5 (hereinafter also simply referred to as analog amplifiers). ing.
  • the image sensor has a photodiode PD.
  • the photodiode PD generates electrons by photoelectric conversion. The electrons are converted into a voltage signal in the floating diffusion unit 1.
  • the gain in the floating diffusion unit 1 is referred to as a conversion gain Gc.
  • some image sensors include an imager built-in amplifier 2.
  • the gain by the imager built-in amplifier 2 is referred to as an imager internal gain Gn.
  • the imaging signal is transmitted by the cable 3.
  • the gain (attenuation) due to the resistance (cable resistance), termination resistance, and matching resistance of the cable 3 is referred to as a cable gain Gk.
  • the imaging signal transmitted by the cable 3 is amplified by the preamplifier 4 and the variable amplifier 5 in the board before being supplied to the A / D converter 6 arranged in the board, for example.
  • the preamplifier 4 gives a pre-gain Gp for supplying a signal having a good S / N level necessary for the circuit in the substrate to the imaging signal, and the variable amplifier 5 converts the imaging signal into the input range of the A / D converter.
  • a variable gain Gv is applied to set the level in accordance with.
  • the conversion gain Gc and the imager internal gain Gn (hereinafter collectively referred to as the imager gain Gi) vary depending on the image sensor depending on the process, for example, even in the same standard image sensor. Further, even if the cable gain Gk is a cable having the same diameter and the same line length, the cable gain Gk varies for each cable due to, for example, impedance variations. Further, the pre-gain Gp and the variable gain Gv also vary from amplifier to amplifier even if they are amplifiers of the same standard when these amplifiers in the substrate are configured by analog.
  • Fig. 3 shows these gain variations.
  • the solid line in FIG. 3 indicates the design value of each gain.
  • the imager gain Gi and the cable gain Gk are negative values, and the photoelectric conversion output is attenuated before being supplied to the preamplifier 4.
  • the imaging signal is amplified by the preamplifier 4 and the variable amplifier 5 and input to the A / D converter 6.
  • the gain (target value) at the input time point of the A / D converter 6 becomes a positive value GD.
  • This value GD is a design value, and actually the gain value varies.
  • the broken line in FIG. 3 indicates the change in gain when the gain in each analog amplifier varies in the positive direction
  • the alternate long and short dash line in FIG. 3 indicates the change in gain when the gain in each analog amplifier varies in the negative direction. ing.
  • the variation is added for each stage, and the maximum value assumed as the gain variation at the time of input of the A / D converter 6 is GH, and the minimum value is GL.
  • analog total gain the sum of the gains in FIG. 3, that is, the gain of the image sensor, and the sum of analog gains (hereinafter referred to as analog total gain) given until the photoelectric conversion output is A / D converted.
  • the image sensor needs to be used in a range (linear region) where the output changes linearly with respect to the exposure amount.
  • the imaging signal is the maximum value in the linear region
  • the gain is set so that the amplified imaging signal fills the input range of the A / D converter
  • the imaging device output can be used effectively.
  • the gain of the analog amplifier is set assuming that the total analog gain varies to the maximum value GH side, a region exceeding the linear region does not appear in the video, but the range assigned to the linear region is small. The image quality deteriorates.
  • the gain of the analog amplifier is set assuming that the total analog gain varies toward the minimum value GL, the predetermined area on the maximum value side of the linear area exceeds the input range of the A / D converter. Therefore, a rough fixed pattern noise (saturated roughness) in which a region in which an imaging signal with respect to the amount of light is obtained non-linearly for each pixel appears in the video occurs, and the image deteriorates.
  • the analog total gain varies toward the minimum value GL, the image becomes dark, and if the gain is set assuming that, the image quality is also deteriorated. Conversely, when the gain varies to the maximum value GH side, the S / N deteriorates, and when the gain is set assuming that, the dynamic range becomes small and the image quality deteriorates.
  • the analog total gain varies from the design value, thereby causing problems such as deterioration in image quality.
  • the gain required as the analog total gain may be relatively small, and the variation is small accordingly. It is not noticeable and the problem is relatively small.
  • the analog total gain by each analog amplifier from the photoelectric conversion output of the imaging device to the digital conversion of the imaging signal is calculated, and the gain that varies due to individual differences is calculated based on the calculation result. Adjust the gain so that it returns to. That is, by making the gain (hereinafter referred to as the total gain) of the sum of the analog total gain and the gain obtained by gain adjustment (hereinafter referred to as the adjustment gain) coincide with the design value GD, regardless of downsizing, diameter reduction, etc. The image quality is improved.
  • the adjustment gain may be added to the analog signal before A / D conversion or may be added to the digital signal after A / D conversion.
  • the endoscope apparatus 1 includes an endoscope 10 and a video processor 50.
  • the endoscope 10 is provided with, for example, an imaging element 11 constituted by, for example, a CCD at the distal end of the endoscope insertion portion.
  • the imaging device 11 is configured so that subject reflected light of illumination light emitted from a light source (not shown) is incident through an optical system (not shown) provided at the distal end of the insertion portion.
  • An optical image from the subject is formed on the imaging surface of the image sensor 11 by the optical system.
  • the image sensor 11 photoelectrically converts light incident on each pixel.
  • An electric signal obtained by photoelectric conversion is output as an imaging signal via the floating diffusion 1 and the imager built-in amplifier 2 of FIG.
  • the imaging signal from the imaging device 11 is transmitted to the proximal end side of the endoscope through the cable 3.
  • the cable 3 is inserted into the endoscope 10 and a universal cable (not shown), and the imaging signal is transmitted to a substrate 13 provided in a connector of the universal cable, for example.
  • the connector By connecting the connector to the video processor 50, the circuit mounted on the board 13 and the video processor 40 are electrically connected.
  • a preamplifier 4 In the substrate 13, a preamplifier 4, an AFE (analog front end) 15, and an FPGA (Field Programmable Gate Array) 16 are configured.
  • the preamplifier 4 amplifies the imaging signal by the pregain Gp, and then outputs it to the AFE 15.
  • the imaging signal from the preamplifier 4 is given to a CDS (Correlation Double Sampling) amplifier 21 in the AFE 15.
  • the CDS amplifier 21 performs correlated double sampling processing on the input analog signal, adds a predetermined gain, and outputs it to the AGC circuit 22.
  • the AGC circuit 22 adds a predetermined gain to the output of the CDS amplifier 21 and outputs the result to the A / D converter 6.
  • the CDS amplifier 21 and the AGC circuit 22 constitute the variable amplifier 5 shown in FIG.
  • the gains of the CDS amplifier 21 and the AGC circuit 22 are set by the setting unit 24.
  • the gains by the CDS amplifier 21 and the AGC circuit 22 are variable, and the sum of the gains by these circuits corresponds to the variable gain Gv in FIG.
  • This variable gain Gv is set to a value for setting the output signal of the AGC circuit 22 to a level corresponding to the input range of the A / D converter 6.
  • the A / D converter 6 converts the input imaging signal into a digital signal and outputs it.
  • a digital image signal (captured image) from the A / D converter 6 is supplied to the FPGA 16.
  • the FPGA 16 includes a video processing unit 30, a timing generator (TG) 48, and a drive signal generation unit 49.
  • the TG 30 generates various signals including a clock necessary for driving each unit of the FPGA 16 and outputs the various signals to the video processing unit 30 and the drive signal generation unit 49.
  • the drive signal generation unit 49 is supplied with an output signal of the TG 30, generates a clock and various drive signals necessary for operating the image sensor 11, and supplies the clock to the image sensor 11.
  • the black float correction unit 35 receives a black float correction value from a black float correction value calculation unit 41, which will be described later, corrects the black level of the imaging signal using the black float correction value, and removes the offset component of the video.
  • the output signal of the black float correction unit 35 is supplied to the gain correction unit 36.
  • the gain correction unit 36 is configured by a digital amplifier, and receives an adjustment gain GB from a gain correction value recording unit 45 described later, and adds the adjustment gain GB to the input image pickup signal. It is like that. That is, the gain correction unit 36 performs gain adjustment for making the total gain of the imaging signal coincide with the design value (target value) GD.
  • the output of the gain correction unit 36 is supplied to the digital gain unit 37.
  • the digital gain unit 37 adds a predetermined gain to the input imaging signal and outputs it to the video output unit 38.
  • the video output unit 38 generates a video signal by performing predetermined video processing on the input imaging signal and outputs the video signal to the video processor 50.
  • the adjustment gain GB is calculated by the correction value calculation unit 40.
  • the correction value calculation unit 40 includes a black float correction value calculation unit 41, a memory unit 42, and an adjustment gain calculation unit 43.
  • the memory unit 42 as a storage unit is configured to sequentially receive and store imaging signals (captured images) from the A / D converter 6.
  • the black float correction value calculation unit 41 receives a captured image from the A / D converter 6 and the memory unit 42, calculates a video offset component used for black float correction by a method described later, and uses black as a black float correction value. This is given to the floating correction unit 35.
  • the adjustment gain calculation unit 43 receives the output signals of the black float correction value calculation unit 41 and the memory unit 42, calculates the adjustment gain GB by a method described later, and outputs the calculation result to the gain correction value recording unit 45.
  • the gain correction value recording unit 45 may be constituted by, for example, a non-volatile memory such as a flash memory, and records the supplied adjustment gain GB and outputs it to the gain correction unit 36.
  • the video processing unit 30 is provided with a parameter recording unit 32.
  • the parameter recording unit 32 records parameters for determining the variable gain Gv by the CDS amplifier 21 and the AGC circuit 22.
  • the parameter setting unit 31 reads the parameters recorded in the parameter recording unit 32, obtains the variable gain Gv, and outputs a set value for setting the variable gain Gv to the setting unit 24 of the AFE 15. .
  • the setting unit 24 is given a setting value for setting the variable gain Gv, and sets the gains of the CDS amplifier 21 and the AGC circuit 22 based on the setting value.
  • the average number of electrons of a signal generated by photoelectric conversion in the image sensor 11 is Nsig.
  • the average value ⁇ of the number of electrons in the signal is obtained as a value obtained by multiplying the average number of electrons Nsig by the gain value G, as shown in (1) below.
  • Nsig is mixed with dark noise and light shot noise.
  • Dark noise is a relatively constant level of noise that occurs regardless of the amount of incident light on the image sensor
  • light shot noise is noise that varies in level according to the amount of incident light on the image sensor. That is, the signal output standard deviation ⁇ due to light shot noise follows the Poisson distribution and the relationship of the following equation (2) is established.
  • ⁇ 2 ⁇ light 2 - ⁇ dark 2 (4)
  • an imaging signal for at least two frames is required for each of the bright time and the dark time.
  • fixed pattern noise is generated due to an offset component generated in the column component.
  • subtraction may be performed between two frames. From the above, in this embodiment, the analog total gain is calculated using the captured images of a total of four frames, that is, two frames at the time of light and two frames at the time of darkness.
  • the correction value calculation unit 40 is configured to store the imaging signals for a total of four frames in the memory unit 42, ie, two frames at light time and two frames at dark time.
  • the black float correction value calculation unit 41 obtains an image offset amount from the average value of the difference between the two frames in the dark, and outputs it to the black float correction unit 35 and the adjustment gain calculation unit 43 as a black float correction value.
  • the adjustment gain calculation unit 43 obtains the average value of the light shot noise and the signal component in the bright time using the image signals of the total of four frames in the bright time and the dark time, and calculates the analog total gain from the above equation (3). To do.
  • the adjustment gain calculation unit 43 calculates the difference between the calculated analog total gain and the target total gain (design value) GD as the adjustment gain GB.
  • FIG. 4 is a flowchart for explaining black float correction and gain adjustment by the correction value calculation unit 40.
  • the calculation of the adjustment gain by the gain adjustment device may be performed, for example, when the endoscope 10 is shipped from the factory.
  • captured images of two frames in the light and two frames in the dark are used for calculating the adjustment gain.
  • a bright object is set in step S1 of FIG.
  • a white cap for white balance adjustment attached to the distal end of the endoscope insertion portion may be used.
  • a plurality of frames of captured images are acquired. For example, two frames of captured images are acquired by continuously capturing two frames of captured images.
  • the captured images of the two frames at the time of light may be acquired a plurality of times.
  • the imaging signals of a plurality of frames acquired by the imaging element 11 are supplied to the preamplifier 4 of the substrate 10 via the cable 3.
  • the imaging signal is amplified by the preamplifier 4 and given to the AFE 15.
  • the CDS amplifier 21 and the AGC circuit 22 of the AFE 15 amplify the imaging signal input according to the setting value of the setting unit 24 and output the amplified image signal to the A / D converter 6.
  • the photoelectric conversion output at the time of the image pickup device 11 is supplied to the A / D converter 6 after the imager gain Gi, the cable gain Gk, the pre-gain Gp, and the variable gain Gv are given.
  • the A / D converter 6 converts the input imaging signal into a digital signal and outputs the digital signal to the video processing unit 30 in the FPGA 16.
  • the digital imaging signal is supplied to the black float correction unit 35 and the black float correction value calculation unit 41 and the memory unit 42 of the correction value calculation unit 40.
  • the adjustment gain calculation unit 43 obtains, for example, a difference between two consecutive frames (step S3). By this difference calculation, the fixed pattern noise included in the captured image at the time of light is removed.
  • the adjustment gain calculation unit 43 calculates the variance value ⁇ 2 1 of the difference result image (difference image) (step S5). Fixed pattern noise is removed from the difference image, but random noise including dark current noise and light shot noise remains included.
  • the dispersion value ⁇ 2 1 is a dispersion value of the light shot noise affected by the dark current noise.
  • the adjustment gain calculation unit 43 calculates the average value of the images of a plurality of frames captured at the time of bright in step S4. By this averaging, random noise including dark current noise and light shot noise is removed. Thus, the signal level ⁇ 1 of the bright image is obtained by the averaging process in step S4.
  • a dark subject is set (step S6). For example, imaging is performed by shielding the incident surface of the imaging element 11 at the distal end of the endoscope.
  • an image of a plurality of frames is acquired. For example, two frames of images in the dark are acquired by continuously photographing two frames of images. Further, in the case where the calculation accuracy is improved by averaging the calculated adjustment gains, the image of two frames in the dark may be acquired a plurality of times.
  • the imaging signals of a plurality of frames acquired by the imaging device 11 are supplied to the A / D converter 6 via the cable 3, the preamplifier 4, the CDS amplifier 21, and the AGC circuit 22.
  • the photoelectric conversion output in the dark of the image sensor 11 is supplied to the A / D converter 6 after the imager gain Gi, the cable gain Gk, the pre-gain Gp, and the variable gain Gv are given.
  • the A / D converter 6 converts the input imaging signal into a digital signal.
  • This digital imaging signal is supplied to the black float correction unit 35 and the black float correction value calculation unit 41 and the memory unit 42 of the correction value calculation unit 40.
  • the adjustment gain calculation unit 43 obtains a difference between the images of two consecutive frames (step S8).
  • the difference result is a dark image from which fixed pattern noise has been removed.
  • the adjustment gain calculation unit 43 calculates the variance value ⁇ 2 2 of the difference result image (difference image).
  • the dispersion value ⁇ 2 2 is a dispersion value of dark current noise having a light shot noise level of 0.
  • the black float correction value calculation unit 41 and the adjustment gain calculation unit 43 calculate the average value of the images of a plurality of frames captured in the dark at step S9. This averaging removes dark current noise. In this way, the signal level ⁇ 2 of the dark image is obtained by the averaging process in step S9.
  • the signal level ⁇ 2 is used by both the black float correction value calculation unit 41 and the adjustment gain calculation unit 43, and may be obtained by one of the calculation units and given to the other.
  • the averaging process in step S9 is to obtain the signal level of the image in the dark, that is, the amount of video offset.
  • the black float correction value calculation unit 41 obtains the black float level from the signal level ⁇ 2 obtained by the dark image averaging process.
  • the black float correction value calculation unit 41 may use the signal level ⁇ 2 as it is as an offset.
  • the black float correction value calculating unit 41 may obtain the black float level a plurality of times from the image of two frames and average the obtained black float level (step S22). ). The black float correction value calculation unit 41 calculates a black float correction value for correcting the obtained black float level, and outputs it to the black float correction unit 35 (step S23). During actual imaging, the black float correction unit 35 corrects and outputs the black float level of the input image using the black float level correction value.
  • the adjustment gain calculation unit 43 calculates an analog total gain in step S11. That is, the adjustment gain calculation unit 43 removes the influence of dark current noise by subtracting the dark dispersion value ⁇ 2 2 obtained in step S10 from the light dispersion value ⁇ 2 1 obtained in step S5. A dispersion value ⁇ 2 of the light shot noise is obtained. Further, the adjustment gain calculation unit 43 subtracts the dark image average value ⁇ 2 obtained in step S9 from the light image average value ⁇ 1 obtained in step S4, thereby obtaining the light image average value ⁇ . . The adjustment gain calculation unit 43 calculates an analog total gain from the calculated dispersion value ⁇ 2 and average value ⁇ based on the above equation (3).
  • the adjustment gain calculation unit 43 may obtain the analog total gain a plurality of times from the image of four frames and average the obtained analog total gain in order to improve the correction accuracy of the gain variation (step S12). .
  • the adjustment gain calculation unit 43 calculates the difference between the obtained analog total gain and the target total gain (design value) GD as the adjustment gain GB (step S13).
  • the adjustment gain calculation unit 43 gives the obtained adjustment gain GB to the gain correction value recording unit 45 for recording.
  • the adjustment gain GB for correcting variations in the gains of the imaging device 11, the cable 3, the preamplifier 4, the CDS amplifier 21, and the AGC circuit 22 is stored in the correction value recording unit 45.
  • the gain correction value recording unit 45 does not need to record a plurality of adjustment gains GB corresponding to a plurality of combinations of the image sensor 11, the cable, and the board 13, and only records the adjustment gains GB obtained at the time of factory shipment. Good.
  • the output of the black float correction unit 35 is supplied to the digital gain unit 37 via the gain correction unit 36.
  • the gain correction unit 36 is set with the adjustment gain GB by the gain correction value recording unit 45, adds the adjustment gain GB to the output of the black float correction unit 35, and outputs it.
  • the gain correction unit 36 is configured by a digital amplifier and can perform accurate gain adjustment.
  • FIG. 5 is a graph for explaining the gain adjustment by the gain correction unit 36.
  • FIG. 5 shows the result of gain adjustment in the same notation method as in FIG. 3, with each stage of the amplifier being amplified on the horizontal axis and gain on the vertical axis.
  • the solid line represents a change in the analog total gain according to the gain design value
  • the broken line represents a change when the maximum analog total gain GH is obtained
  • the alternate long and short dash line represents a change when the minimum analog total gain GL is obtained.
  • a two-dot chain line (thick line) indicates the actual gain variation and the change in the total gain due to the adjustment result.
  • the adjustment gain calculation unit 43 calculates the analog total gain value GA.
  • the adjustment gain calculation unit 43 calculates an adjustment gain GB by subtracting GA from the target gain GD.
  • the adjustment gain GB is recorded in the gain correction value recording unit 45.
  • the gain correction unit 36 adds the adjustment gain GB set by the gain correction value recording unit 45 to the input imaging signal and outputs it. In this way, the adjustment gain GB is added after the A / D conversion to the analog total gain GA given to the photoelectric conversion output before the A / D conversion, and the total gain becomes the target value GD.
  • the analog total gain added from the photoelectric conversion output to the A / D conversion is calculated based on the light shot noise and the average value of the signal at the time of light, and based on the calculation result. Gain adjustment is performed so that the total gain matches the design value.
  • the variation in the analog gain can be corrected and the total gain can be matched with the target design value, an image with sufficient brightness with a good S / N can be obtained.
  • Gain design is possible, and an image with sufficient brightness with little deterioration in image quality can be obtained.
  • the image pickup signal level is reduced by downsizing, and even when the negative gain at the time of transmission is increased by reducing the diameter of the cable, the gain variation can be offset and the image quality can be improved. it can.
  • the total gain is controlled to be equal to the target value by adding the adjustment gain to the analog total gain, but by adjusting the gain of the gain generation source that gives the analog total gain.
  • the gain adjusting device in the above-described embodiment includes the correction value calculation unit 40, the gain correction value recording unit 45, and the gain correction unit 36.
  • the example in which the gain adjusting device is built in the endoscope 10 has been described.
  • the correction value calculation unit 40 does not need to be built in the endoscope. That is, only the gain correction value recording unit 45 and the gain correction unit 36 need be built in the endoscope.
  • the gain correction unit 36 can be omitted.
  • the parameter setting unit 31 may obtain information to be given to the setting unit 24 based on information of the parameter recording unit 32 and the gain correction value recording unit 45.
  • the gain adjusting device does not need to be built in the endoscope.
  • the gain adjusting device may be provided inside the video processor or outside the endoscope device. Good.
  • the memory part 42 memorize
  • an element having a sufficiently small fixed pattern noise is used as an image sensor, or when an analog total gain value to be calculated is obtained as an approximate value, the correlation between the average values of the images is high.
  • the variance and the standard deviation may be obtained.
  • a memory for storing such statistical values may be provided.
  • the adjustment gain calculation processing by the gain adjustment device can be obtained by software processing by causing a computer to execute a program describing the adjustment gain calculation processing.
  • the present invention is not limited to the above-described embodiments as they are, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage.
  • various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components of all the components shown in the embodiment may be deleted.
  • This application is filed on the basis of priority claim of Japanese Patent Application No. 2016-003899 filed in Japan on January 12, 2016, and the above disclosure is included in the specification and claims of this application. Shall be quoted.

Abstract

ゲイン調整装置は、内視鏡の挿入部に設けられた撮像素子からの撮像信号を伝送すると共に増幅するアナログ処理部の出力をデジタル信号に変換するアナログデジタル変換回路からの撮像画像を用いて、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のアナログゲインの総和を算出するアナログ総ゲイン算出部と、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のゲインの総和の目標値と前記アナログゲインの総和との差分を調整ゲインとして求めて前記内視鏡のアナログゲインの調整のために前記調整ゲインの情報を出力する調整ゲイン算出部とを具備する。

Description

ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置
　本発明は、アナログゲインのばらつきを調整して高画質化を図ることができるゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置に関する。
　近年、ＣＣＤやＣＭＯＳセンサ等の撮像素子を用いた撮像装置が様々な分野で利用されている。例えば、医療分野においては、診断や処置具を用いた治療等に用いる内視鏡装置として、撮像素子を用いた電子内視鏡装置が採用されることがある。電子内視鏡は、先端側に細長の挿入部を有しており、挿入部の先端に撮像素子が設けられる。また、内視鏡の基端側にはビデオプロセッサに接続するためのコネクタが設けられている。内視鏡で得られた撮像信号は、コネクタを介してビデオプロセッサに供給されて、ビデオプロセッサにおいて内視鏡画像が生成されるようになっている。
　近年、ビデオプロセッサの画像処理は、デジタル化されるようになってきており、撮像素子の出力はデジタル信号に変換されて画像処理に用いられる。この場合、撮像素子による光電変換出力の出力レベルは比較的小さいことから、アナログの撮像素子出力信号は十分に増幅された後、アナログ/デジタル変換器に与えられてデジタル信号に変換されるようになっている。これにより、ビデオプロセッサにおいて、十分な明るさの内視鏡画像を生成して見やすい内視鏡画像を表示することができるようになっている。
　日本国特開２００８－９３１７４号公報においては、画像の明るさが適切な明るさとなるように、ＡＧＣ回路のゲインを調整する内視鏡装置が開示されている。
　ところで、内視鏡においては、挿入部先端に設けられた撮像素子の出力信号は、挿入部基端側のコネクタ部に内蔵された電気基板（以下、コネクタ部内基板）にケーブルによって電気伝送される。撮像素子出力信号を電気伝送するケーブルの長さは比較的長く、撮像素子出力信号は比較的大きく減衰する。このため、撮像素子の出力信号がコネクタ部内基板に実装されたアナログ／デジタル変換器に供給されるまでの間において、比較的大きなゲインで撮像素子出力信号を増幅する必要がある。
　しかしながら、大きなゲインで撮像素子出力信号を増幅する必要があることから、撮像素子の出力信号レベルの個体差ばらつき、ケーブルの減衰量の個体差ばらつき、増幅器の増幅率の個体差ばらつき等の影響により、画質が劣化しやすいという問題があった。特に、近年、撮像素子の小型化に伴って撮像素子出力信号レベルが小さくなると共に、ケーブルの細径化によってケーブル伝送時の減衰率が大きくなっており、アナログアンプの負荷が大きくなりゲインのばらつきの影響によって画質の劣化が顕在化してしまう。
　本発明は、アナログゲインのばらつきを無くして、画質を向上させることができるゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置を提供することを目的とする。
　本発明の一態様によるゲイン調整装置は、内視鏡の挿入部に設けられた撮像素子からの撮像信号を伝送すると共に増幅するアナログ処理部の出力をデジタル信号に変換するアナログデジタル変換回路からの撮像画像を用いて、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のアナログゲインの総和を算出するアナログ総ゲイン算出部と、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のゲインの総和の目標値と前記アナログゲインの総和との差分を調整ゲインとして求めて前記内視鏡のアナログゲインの調整のために前記調整ゲインの情報を出力する調整ゲイン算出部とを具備する。
　また、本発明の一態様による内視鏡は、前記ゲイン調整装置からの前記調整ゲインの情報を記録する記録部と、前記調整ゲインの情報に基づいて前記アナログデジタル変換回路の出力に前記調整ゲインを付加するデジタルアンプとを具備する。
　また、本発明の他の一態様による内視鏡は、前記ゲイン調整装置からの前記調整ゲインの情報を記録する記録部と、前記調整ゲインの情報に基づいて前記アナログゲインの総和に前記調整ゲインを付加するように前記アナログ処理部のゲインを制御するアナログゲイン制御部とを具備する。
　また、本発明の一態様による内視鏡装置は、前記内視鏡と、前記内視鏡の出力が与えられて所定の画像処理を施すビデオプロセッサとを具備し、前記ビデオプロセッサは、前記ゲイン調整装置を有する。
　また、本発明の一態様によるゲイン調整プログラムは、コンピュータに、内視鏡の挿入部に設けられた撮像素子からの撮像信号を伝送すると共に増幅するアナログ処理部の出力をデジタル信号に変換するアナログデジタル変換回路からの撮像画像のうち、明時の前記撮像素子の出力に基づく前記撮像画像と暗時の前記撮像素子の出力に基づく前記撮像画像とを用いて、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のアナログゲインの総和を算出する手順と、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のゲインの総和の目標値と前記アナログゲインの総和との差分を調整ゲインとして求めて前記内視鏡のアナログゲインの調整のために前記調整ゲインの情報を出力する手順とを実行させる。
本発明の第１の実施の形態に係るゲイン調整装置を内蔵する内視鏡を含む内視鏡装置を示すブロック図。 撮像素子からＡ／Ｄ変換器までに存在するアナログゲインの発生源を示す説明図。 横軸にゲイン発生源の各段をとり縦軸にゲインをとって、図２の各アナログゲインのばらつきを示すグラフ。 補正値算出部４０による黒浮き補正及びゲイン調整を説明するためのフローチャート。 ゲイン補正部３６によるゲイン調整を説明するためのグラフ。
　以下、図面を参照して本発明の実施の形態について詳細に説明する。
（第１の実施の形態）
　図１は本発明の第１の実施の形態に係るゲイン調整装置を内蔵する内視鏡を含む内視鏡装置を示すブロック図である。
　先ず、図２及び図３を参照して、撮像素子の光電変換出力がアナログ／デジタル変換器（Ａ／Ｄ変換器）に与えられるまでの間にアナログ的に生じるゲイン（アナログゲイン）のばらつきについて説明する。図２は撮像素子からＡ／Ｄ変換器までに存在するアナログゲインの発生源を示す説明図であり、図３は横軸にゲイン発生源の各段をとり縦軸にゲインをとって、図２の各アナログゲインのばらつきを示すグラフである。
　内視鏡は、内視鏡先端の挿入部先端に撮像素子が配置され、撮像素子出力信号（撮像信号）は、内視鏡基端側にケーブルによって伝送される。例えば、内視鏡基端側に接続されたユニバーサルケーブルのコネクタ内、あるいはコネクタによって内視鏡に接続されるビデオプロセッサ内に、ケーブルによって伝送されたアナログ撮像信号をデジタル信号に変換するＡ／Ｄ変換器が設けられる。
　図２は、アナログゲインの発生源がフローティングデュフュージョン部１、イメージャ内蔵アンプ２、ケーブル３プリアンプ４及び可変アンプ５（以下、これらを単にアナログアンプともいう）であるものとした場合の例を示している。
　図２において、撮像素子はフォトダイオードＰＤを有している。フォトダイオードＰＤは、光電変換により電子を発生する。この電子は、フローティングデュフュージョン部１において、電圧信号に変換される。このフローティングデュフュージョン部１におけるゲインをコンバージョンゲインＧｃというものとする。また、撮像素子は、イメージャ内蔵アンプ２を内蔵したものもある。このイメージャ内蔵アンプ２によるゲインをイメージャ内部ゲインＧｎというものとする。撮像信号は、ケーブル３によって伝送される。このケーブル３の抵抗（ケーブル抵抗）、終端抵抗及びマッチング抵抗によるゲイン（減衰）をケーブルゲインＧｋというものとする。一般的に、ケーブル３で伝送される撮像信号を、例えば基板内に配置されたＡ／Ｄ変換器６に供給する前に、基板内のプリアンプ４及び可変アンプ５によって増幅する。撮像信号に対して、プリアンプ４は基板内の回路に必要なレベルのＳ／Ｎの良い信号を供給するためのプリゲインＧｐを付与し、可変アンプ５は撮像信号をＡ／Ｄ変換器の入力レンジに応じたレベルに設定するために可変ゲインＧｖを付与する。
　コンバージョンゲインＧｃ及びイメージャ内部ゲインＧｎ（以下、両者を合わせてイメージャゲインＧｉという）は、同一規格の撮像素子であっても、例えばプロセスに応じて撮像素子毎にばらつきを有する。また、ケーブルゲインＧｋも、同一径、同一線長の同一構成のケーブルであっても、例えばインピーダンスのばらつき等によりケーブル毎にばらつきを有する。更に、プリゲインＧｐ及び可変ゲインＧｖについても、基板内のこれらのアンプをアナログによって構成した場合には、同一規格のアンプであってもアンプ毎にばらつきを有する。
　図３はこれらのゲインのばらつきを示している。図３の実線は、各ゲインの設計値を示している。フローティングデュフュージョン部１の入力時点におけるゲインを基準とすると、イメージャゲインＧｉ及びケーブルゲインＧｋは負の値であり、光電変換出力は、プリアンプ４に供給されるまでの間に減衰する。撮像信号は、プリアンプ４及び可変アンプ５によって増幅されてＡ／Ｄ変換器６に入力される。Ａ／Ｄ変換器６の入力時点におけるゲイン（目標値）は、正の値ＧＤとなる。この値ＧＤは設計値であり、実際にはゲインの値にはばらつきが生じる。
　図３の破線は各アナログアンプにおけるゲインが正の方向にばらついた場合のゲインの変化を示し、図３の一点鎖線は各アナログアンプにおけるゲインが負の方向にばらついた場合のゲインの変化を示している。図３に示すように、ばらつきは各段毎に加算され、Ａ／Ｄ変換器６の入力時点においてゲインのばらつきとして想定される最大値はＧＨとなり、最小値はＧＬとなる。
　設計上は、図３の各ゲインの総和、即ち、撮像素子のゲインを含み、光電変換出力がＡ／Ｄ変換されるまでの間に与えられるアナログゲインの総和（以下、アナログ総ゲインという）はＧＤである。この設定値（目標値）ＧＤに従って後段の回路を設計している場合、アナログ総ゲインが最小値ＧＬ側にばらつくと、得られる画像は暗くなる。逆に、アナログ総ゲインが最大値ＧＨ側にばらつくと、得られる画像は明るくなる反面Ｓ／Ｎが劣化してしまう。
　また、撮像素子は、露光量に対して出力がリニアに変化する範囲（線形領域）で使用する必要がある。そして、撮像信号が線形領域の最大値である場合において、増幅した撮像信号がＡ／Ｄ変換器の入力レンジ一杯となるようにゲインを設定すれば、撮像素子出力を有効に使えることになる。この場合において、アナログ総ゲインが最大値ＧＨ側にばらつくことを想定してアナログアンプのゲインを設定すると、線形領域を超えた領域が映像に現れることはない反面、線形領域に割当てられるレンジが小さくなって画質が劣化する。逆に、アナログ総ゲインが最小値ＧＬ側にばらつくことを想定してアナログアンプのゲインを設定すると、出力レベルが線形領域の最大値側の所定領域はＡ／Ｄ変換器の入力レンジを超えてしまい、光量に対する撮像信号が画素毎に非線形で得られる領域が映像に現れる、ざらついたような固定パターンノイズ（飽和ざら）が発生し画像が劣化する。
　つまり、アナログ総ゲインが最小値ＧＬ側にばらつく場合、画像は暗くなり、またそれを想定してゲイン設定を行うと画質も劣化する。逆に、ゲインが最大値ＧＨ側にばらつく場合、Ｓ／Ｎが劣化し、またそれを想定してゲイン設定を行うと、ダイナミックレンジが小さくなって画質が劣化する。
　このように、アナログ総ゲインが設計値からばらつくことによって、画質が劣化する等の問題が生じる。この場合でも、撮像素子のサイズが比較的大きく、撮像信号レベルが比較的大きい場合には、アナログ総ゲインとして必要なゲインも比較的小さくてよく、その分ばらつきも小さいことから、画質の劣化は顕著ではなく、比較的問題は小さい。
　しかしながら、小型化によって撮像素子のサイズが小さくなって撮像信号レベルが小さくなり、また、ケーブルの細径化によって伝送時の負のゲインが増加すると、アナログ総ゲインとして必要なゲインが大きくなり、その分ばらつきも大きくなってしまう。このため、上述の問題が顕在化してしまう。
　そこで、本実施の形態においては、撮像素子の光電変換出力から撮像信号のデジタル変換までの各アナログアンプによるアナログ総ゲインを算出し、算出結果を元に、個体差によりばらついたゲインを設計値ＧＤに戻すようにゲイン調整を行う。即ち、アナログ総ゲインとゲイン調整によるゲイン（以下、調整ゲインという）との和のゲイン（以下、総ゲインという）を設計値ＧＤに一致させることで、小型化、細径化等に拘わらず、画質を向上させるようになっている。なお、調整ゲインは、Ａ／Ｄ変換前のアナログ信号に対して付加してもよく、Ａ／Ｄ変換後のデジタル信号に対して付加してもよい。
　図１において、内視鏡装置１は内視鏡１０及びビデオプロセッサ５０によって構成されている。内視鏡１０には例えばＣＣＤ等によって構成された撮像素子１１が例えば内視鏡挿入部先端に設けられている。撮像素子１１は、図示しない光源から照射された照明光の被写体反射光が、挿入部先端に設けられた図示しない光学系を介して入射されるようになっている。光学系によって被写体からの光学像が撮像素子１１の撮像面に結像される。撮像素子１１は各画素に入射した光を光電変換する。光電変換によって得られた電気信号は、図２のフローティングデュフュージョン１及びイメージャ内蔵アンプ２を介して撮像信号として出力されるようになっている。
　撮像素子１１からの撮像信号はケーブル３によって内視鏡基端側に伝送される。ケーブル３は、内視鏡１０内及び図示しないユニバーサルケーブル内に挿通されており、撮像信号は、例えばユニバーサルケーブルのコネクタ内に設けられた基板１３に伝送される。コネクタがビデオプロセッサ５０に接続されることで、基板１３に搭載された回路とビデオプロセッサ４０とは電気的に接続されるようになっている。
　基板１３内には、プリアンプ４、ＡＦＥ（アナログフロントエンド）１５及びＦＰＧＡ（Field Programmable Gate Array）１６が構成されている。プリアンプ４は、撮像信号をプリゲインＧｐによって増幅した後、ＡＦＥ１５に出力する。
　プリアンプ４からの撮像信号は、ＡＦＥ１５内のＣＤＳ（Correlation Double Sampling）アンプ２１に与えられる。ＣＤＳアンプ２１は入力されたアナログ信号を相関二重サンプリング処理して、所定のゲインを付加してＡＧＣ回路２２に出力する。ＡＧＣ回路２２は、ＣＤＳアンプ２１の出力に所定のゲインを付加してＡ／Ｄ変換器６に出力する。これらのＣＤＳアンプ２１及びＡＧＣ回路２２によって、図２の可変アンプ５が構成される。
　ＣＤＳアンプ２１及びＡＧＣ回路２２のゲインは、設定部２４によって設定されるようになっている。ＣＤＳアンプ２１及びＡＧＣ回路２２によるゲインは可変であり、これらの回路によるゲインの和が図２の可変ゲインＧｖに相当する。この可変ゲインＧｖは、ＡＧＣ回路２２の出力信号をＡ／Ｄ変換器６の入力レンジに応じたレベルに設定するための値に設定される。
　Ａ／Ｄ変換器６は入力された撮像信号をデジタル信号に変換して出力する。Ａ／Ｄ変換器６からのデジタル撮像信号（撮像画像）はＦＰＧＡ１６に供給される。ＦＰＧＡ１６には、映像処理部３０、タイミングジェネレータ（ＴＧ）４８及び駆動信号生成部４９が構成されている。ＴＧ３０は、ＦＰＧＡ１６の各部を駆動するために必要なクロック等を含む各種信号を生成して映像処理部３０及び駆動信号生成部４９に出力する。駆動信号生成部４９は、ＴＧ３０の出力信号が与えられて、撮像素子１１を動作させるのに必要なクロック及び各種駆動信号を生成して撮像素子１１に供給するようになっている。
　ＦＰＧＡ１６の黒浮き補正部３５にはＡ／Ｄ変換器６からの撮像信号が与えられる。黒浮き補正部３５は、後述する黒浮き補正値算出部４１から黒浮き補正値が与えられ、黒浮き補正値を用いて撮像信号の黒レベルを補正して映像のオフセット成分を除去する。黒浮き補正部３５の出力信号はゲイン補正部３６に与えられるようになっている。
　本実施の形態においては、ゲイン補正部３６は、デジタルアンプによって構成されており、後述するゲイン補正値記録部４５から調整ゲインＧＢが与えられて、入力された撮像信号に調整ゲインＧＢを付加するようになっている。即ち、ゲイン補正部３６は、撮像信号の総ゲインを設計値（目標値）ＧＤに一致させるためのゲイン調整を行う。ゲイン補正部３６の出力はデジタルゲイン部３７に供給される。デジタルゲイン部３７は、入力された撮像信号に所定のゲインを付加して映像出力部３８に出力する。映像出力部３８は、入力された撮像信号に所定の映像処理を施すことによって映像信号を生成してビデオプロセッサ５０に出力するようになっている。
　本実施の形態においては、調整ゲインＧＢは、補正値算出部４０によって算出されるようになっている。補正値算出部４０は、黒浮き補正値算出部４１、メモリ部４２及び調整ゲイン算出部４３によって構成される。記憶部としてのメモリ部４２は、Ａ／Ｄ変換器６からの撮像信号（撮像画像）が順次与えられて記憶するようになっている。黒浮き補正値算出部４１は、Ａ／Ｄ変換器６及びメモリ部４２から撮像画像が与えられて、後述の手法により黒浮き補正に用いる映像のオフセット成分を算出して黒浮き補正値として黒浮き補正部３５に与えるようなっている。
　調整ゲイン算出部４３は、黒浮き補正値算出部４１及びメモリ部４２の出力信号が与えられて、後述の手法により調整ゲインＧＢを算出し、算出結果をゲイン補正値記録部４５に出力する。ゲイン補正値記録部４５は、例えば、フラッシュメモリ等の不揮発性メモリによって構成してもよく、与えられた調整ゲインＧＢを記録すると共に、ゲイン補正部３６に出力する。
　なお、映像処理部３０には、パラメータ記録部３２が設けられている。パラメータ記録部３２は、ＣＤＳアンプ２１及びＡＧＣ回路２２による可変ゲインＧｖを決定するためのパラメータを記録している。パラメータ設定部３１は、パラメータ記録部３２に記録されているパラメータを読出して、可変ゲインＧｖを求め、可変ゲインＧｖを設定するための設定値をＡＦＥ１５の設定部２４に出力するようになっている。設定部２４は、可変ゲインＧｖを設定するための設定値が与えられ、この設定値に基づいてＣＤＳアンプ２１及びＡＧＣ回路２２のゲインをそれぞれ設定するようになっている。
　（アナログ総ゲインの算出方法）
　いま、撮像素子１１において光電変換によって発生する信号の平均電子数をＮｓｉｇとする。信号の電子数の平均値μは、下記（１）に示すように、平均電子数Ｎｓｉｇにゲイン値Ｇを掛けた値として得られる。
　Ｎｓｉｇ×Ｇ＝μ　　　…（１）
　Ｎｓｉｇには暗時ノイズと光ショットノイズとが混入する。暗時ノイズは撮像素子への入射光量の有無に拘わらず発生する比較的一定のレベルのノイズであり、光ショットノイズは撮像素子への入射光量に従ってレベルが変動するノイズである。即ち、光ショットノイズによる信号出力標準偏差σは、ポアソン分布に従い、下記（２）式の関係が成り立つ。
Ｎｓｉｇ1/2×Ｇ＝σ
Ｎｓｉｇ×Ｇ2＝σ2　　　…（２）
　上記（２）式から下記（３）式が成立する。
　μ×Ｇ＝σ2
Ｇ＝σ2／μ　　　　　…（３）
　撮像素子出力に順次ゲインが付加されたとしても、上記（３）式の関係は変化しない。従って、アナログ総ゲインは、上記（３）式によって求められる。しかし、上記（３）式が成立するのは光ショットノイズのみであり、暗時ノイズ成分を考慮する必要がある。そこで上記（３）式における標準偏差σを算出する上で光ショットノイズは、暗時には含まれないことから、光ショットノイズが含まれる明時の標準偏差σlightから暗時の標準偏差σdarkを減算することで暗時ノイズ成分を除去した後、上記（３）式の演算を行う。
σ2＝σlight2-σdark2　　　…（４）
　このように、暗時ノイズ成分を除去するためには、明時と暗時に対してそれぞれ少なくとも２フレーム分の撮像信号が必要である。例えば、カラム成分に発生するオフセット成分等に起因して固定パターンノイズが発生する。この固定パターンノイズを除去するためには、２フレーム間で減算を行えばよい。以上から、本実施の形態においては、明時の２フレームと暗時の２フレームの計４フレームの撮像画像を用いて、アナログ総ゲインを算出するようになっている。
　補正値算出部４０は、メモリ部４２に明時２フレーム、暗時２フレームの計４フレーム分の撮像信号を記憶させるようになっている。黒浮き補正値算出部４１は、暗時における２フレームの差分の平均値から映像のオフセット分を求めて、黒浮き補正値として黒浮き補正部３５及び調整ゲイン算出部４３に出力する。調整ゲイン算出部４３は、明時及び暗時の計４フレームの撮像信号を用いて、明時における光ショットノイズと信号成分の平均値を求めて、上記（３）式からアナログ総ゲインを算出する。調整ゲイン算出部４３は、算出したアナログ総ゲインと目標とする総ゲイン（設計値）ＧＤとの差分を調整ゲインＧＢとして算出する。
　次に、このように構成された実施の形態の動作について図４及び図５を参照して説明する。図４は補正値算出部４０による黒浮き補正及びゲイン調整を説明するためのフローチャートである。
　本実施の形態においては、ゲイン調整装置による調整ゲインの算出は、例えば、内視鏡１０の工場出荷時に実施すればよい。上述したように、調整ゲインの算出のために明時の２フレーム及び暗時の２フレームの撮像画像を用いる。明時の２フレームの撮像画像を取得するために、図４のステップＳ１において、明時被写体をセットする。明時被写体としては、例えば、内視鏡挿入部の先端に取り付けるホワイトバランス調整用のホワイトキャップを用いてもよい。次のステップＳ２において、複数フレームの撮像画像を取得する。例えば、２フレームの撮像画像を連続的に撮影することにより、明時の２フレームの撮像画像を取得する。また、算出した調整ゲインを平均化することで算出精度を向上させる場合には、明時の２フレームの撮像画像を複数回取得してもよい。
　撮像素子１１によって取得された複数フレームの撮像信号は、ケーブル３を介して基板１０のプリアンプ４に供給される。撮像信号はプリアンプ４によって増幅されてＡＦＥ１５に与えられる。ＡＦＥ１５のＣＤＳアンプ２１及びＡＧＣ回路２２は、設定部２４の設定値に従って入力された撮像信号を増幅してＡ／Ｄ変換器６に出力する。撮像素子１１の明時の光電変換出力は、イメージャゲインＧｉ、ケーブルゲインＧｋ、プリゲインＧｐ及び可変ゲインＧｖが付与された後、Ａ／Ｄ変換器６に供給されることになる。
　Ａ／Ｄ変換器６は、入力された撮像信号をデジタル信号に変換して、ＦＰＧＡ１６内の映像処理部３０に出力する。デジタル撮像信号は、黒浮き補正部３５並びに補正値算出部４０の黒浮き補正値算出部４１及びメモリ部４２に与えられる。
　調整ゲイン算出部４３は、例えば、連続した２フレームの画像同士の差分を求める（ステップＳ３）。この差分演算によって、撮像された明時の画像に含まれる固定パターンノイズは除去される。調整ゲイン算出部４３は、差分結果の画像（差画像）の分散値σ2１を算出する（ステップＳ５）。差画像からは固定パターンノイズは除去されているが、暗電流ノイズ及び光ショットノイズを含むランダムノイズは含まれたままである。分散値σ2１は、暗電流ノイズの影響を受けた光ショットノイズの分散値である。
　また、調整ゲイン算出部４３は、ステップＳ４において、明時に撮像された複数フレームの画像の平均値を算出する。この平均化によって、暗電流ノイズ及び光ショットノイズを含むランダムノイズは除去される。こうして、ステップＳ４の平均化処理によって、明時画像の信号レベルμ１が求められる。
　次に、暗時の２フレームの画像を取得するために、暗時被写体をセットする（ステップＳ６）。例えば、内視鏡先端の撮像素子１１の入射面を遮光して撮像を行う。次のステップＳ７において、複数フレームの画像を取得する。例えば、２フレームの画像を連続的に撮影することにより、暗時の２フレームの画像を取得する。また、算出した調整ゲインを平均化することで算出精度を向上させる場合には、暗時の２フレームの画像を複数回取得してもよい。
　撮像素子１１によって取得された複数フレームの撮像信号は、ケーブル３、プリアンプ４、ＣＤＳアンプ２１及びＡＧＣ回路２２を介してＡ／Ｄ変換器６に供給される。こうして、撮像素子１１の暗時における光電変換出力は、イメージャゲインＧｉ、ケーブルゲインＧｋ、プリゲインＧｐ及び可変ゲインＧｖが付与された後、Ａ／Ｄ変換器６に供給されることになる。
　Ａ／Ｄ変換器６は、入力された撮像信号をデジタル信号に変換する。このデジタル撮像信号は、黒浮き補正部３５並びに補正値算出部４０の黒浮き補正値算出部４１及びメモリ部４２に与えられる。調整ゲイン算出部４３は、例えば、連続した２フレームの画像同士の差分を求める（ステップＳ８）。この差分結果は、固定パターンノイズが除去された暗時の画像である。調整ゲイン算出部４３は、ステップＳ１０において、差分結果の画像（差画像）の分散値σ2２を算出する。分散値σ2２は、光ショットノイズのレベルが０の暗電流ノイズの分散値である。なお、アナログ総ゲインの算出に分散値でなく標準偏差を用いてもよい。
　また、黒浮き補正値算出部４１及び調整ゲイン算出部４３は、ステップＳ９において、暗時に撮像された複数フレームの画像の平均値を算出する。この平均化によって、暗電流ノイズは除去される。こうして、ステップＳ９の平均化処理によって、暗時画像の信号レベルμ２が求められる。この信号レベルμ２は、以後黒浮き補正値算出部４１及び調整ゲイン算出部４３の両方で用いるようになっており、いずれか一方の算出部で求めて他方に与えるようにしてもよい。
　なお、ステップＳ９の平均化処理は、暗時における画像の信号レベル、即ち、映像のオフセット分を得るものである。黒浮き補正値算出部４１は、暗時画像の平均化処理によって求めた信号レベルμ２から黒浮きレベルを求める。例えば、黒浮き補正値算出部４１は、信号レベルμ２をそのままオフセット分として用いてもよい。
　黒浮き補正値算出部４１は、黒浮き補正精度を向上させるために、２フレームの画像から複数回黒浮きレベルを求めて、求めた黒浮きレベルを平均化するようにしてもよい（ステップＳ２２）。黒浮き補正値算出部４１は、求めた黒浮きレベルを補正するための黒浮きレベル補正値を算出して、黒浮き補正部３５に出力する（ステップＳ２３）。実際の撮像時において、黒浮き補正部３５は、黒浮きレベル補正値を用いて、入力された画像の黒浮きレベルを補正して出力する。
　一方、調整ゲイン算出部４３は、ステップＳ１１においてアナログ総ゲインを算出する。即ち、調整ゲイン算出部４３は、ステップＳ５において求めた明時の分散値σ2１からステップＳ１０において求めた暗時の分散値σ2２を減算することによって、暗電流ノイズの影響を除去した光ショットノイズの分散値σ2を得る。また、調整ゲイン算出部４３は、ステップＳ４において求めた明時の画像平均値μ１からステップＳ９において求めた暗時の画像平均値μ２を減算することによって、明時における画像の平均値μを得る。調整ゲイン算出部４３は、求めた分散値σ2と平均値μとから上記（３）式に基づいてアナログ総ゲインを求める。
　調整ゲイン算出部４３は、ゲインばらつきの補正精度を向上させるために、４フレームの画像から複数回アナログ総ゲインを求めて、求めたアナログ総ゲインを平均化するようにしてもよい（ステップＳ１２）。調整ゲイン算出部４３は、求めたアナログ総ゲインと目標とする総ゲイン（設計値）ＧＤとの差分を調整ゲインＧＢとして算出する（ステップＳ１３）。調整ゲイン算出部４３は、求めた調整ゲインＧＢをゲイン補正値記録部４５に与えて記録させる。
　こうして、工場出荷時において、撮像素子１１、ケーブル３、プリアンプ４、ＣＤＳアンプ２１及びＡＧＣ回路２２の各ゲインのばらつきを補正する調整ゲインＧＢが補正値記録部４５に格納される。なお、撮像素子１１、ケーブル３及び基板１３の組み合わせは多種あるが、一般的には、ユーザが内視鏡１０から撮像素子１１、ケーブル３を交換することはなく、これらの交換は工場において行われる。従って、ゲイン補正値記録部４５は、撮像素子１１、ケーブル、基板１３の複数の組み合わせに対応した複数の調整ゲインＧＢを記録する必要はなく、工場出荷時に求めた調整ゲインＧＢのみを記録すればよい。
　実使用時において、黒浮き補正部３５の出力はゲイン補正部３６を介してデジタルゲイン部３７に供給される。ゲイン補正部３６は、ゲイン補正値記録部４５によって調整ゲインＧＢが設定されて、黒浮き補正部３５の出力に調整ゲインＧＢを付与して出力する。ゲイン補正部３６は、デジタルアンプによって構成されており、正確なゲイン調整が可能である。
　図５はゲイン補正部３６によるゲイン調整を説明するためのグラフである。図５は横軸に増幅するアンプの各段をとり縦軸にゲインをとって、図３と同様の表記方法によって、ゲイン調整の結果を示している。図５において、実線はゲインの設計値に従ったアナログ総ゲインの変化、破線は最大のアナログ総ゲインＧＨが得られる場合の変化、一点鎖線は最小のアナログ総ゲインＧＬが得られる場合の変化、２点鎖線（太線）は実際のゲインのばらつき及び調整の結果による総ゲインの変化を示している。
　図５の例では、調整ゲイン算出部４３は、アナログ総ゲインの値ＧＡを算出する。調整ゲイン算出部４３は、目標とするゲインＧＤからＧＡを減算して、調整ゲインＧＢを算出する。この調整ゲインＧＢはゲイン補正値記録部４５に記録される。ゲイン補正部３６は、入力された撮像信号に対して、ゲイン補正値記録部４５により設定された調整ゲインＧＢを付加して出力する。こうして、光電変換出力に対してＡ／Ｄ変換前までに付与されたアナログ総ゲインＧＡに、Ａ／Ｄ変換後において調整ゲインＧＢが付加されて、総ゲインは目標値ＧＤとなる。
　このように本実施の形態においては、明時における光ショットノイズ及び信号の平均値に基づいて、光電変換出力からＡ／Ｄ変換までに付加されるアナログ総ゲインを算出し、算出結果に基づいて総ゲインが設計値に一致するようにゲイン調整を行うようになっている。このように、アナログゲインのばらつきを補正して、総ゲインを目標とする設計値に一致させることができることから、Ｓ／Ｎが良好な十分な明るさの画像を得ることができる。また、アナログゲインのばらつきを考慮することなく、撮像信号の線形領域をＡ／Ｄ変換器の入力レベルに一致させるゲイン設計が可能であることから、Ａ／Ｄ変換器のダイナミックレンジを有効に使ったゲイン設計が可能であり、画質の劣化の少ない十分な明るさの画像を得ることができる。これにより、小型化によって撮像信号レベルが小さくなり、また、ケーブルの細径化によって伝送時の負のゲインが増加した場合でも、ゲインのばらつきを相殺することができ、高画質化を図ることができる。
　なお、上記実施の形態においては、Ａ／Ｄ変換前のアナログ総ゲインを算出し、Ａ／Ｄ変換後にデジタルアンプによって算出したアナログ総ゲインに基づいてゲイン調整する例について説明したが、Ａ／Ｄ変換前にアナログアンプを用いてゲイン調整を行ってもよい。この場合には、アナログアンプに調整ゲインを設定したとしても、アナログアンプのばらつきによって調整ゲインもばらついてしまうので、フィードバック補正を行って、総ゲインを目標値に一致させる必要がある。
　また、上記実施の形態においては、アナログ総ゲインに調整ゲインを追加することで、総ゲインが目標値に一致するように制御したが、アナログ総ゲインを与えるゲイン発生源のゲインを調整することで、総ゲイン＝アナログ総ゲインを目標値に一致させるようにしてもよい。例えば、ＡＦＥ回路内のＡＧＣ回路のゲインを調整するようにしてもよい。この場合には、（アナログ総ゲイン－ゲイン調整前のＡＧＣ回路によるゲイン＋ゲイン調整後のＡＧＣ回路のゲイン）＝総ゲインが目標値に一致するようにすればよい。
　ところで、上記実施の形態におけるゲイン調整装置は、補正値算出部４０、ゲイン補正値記録部４５及びゲイン補正部３６によって構成される。本実施の形態においては、ゲイン調整装置が内視鏡１０に内蔵されている例を説明した。しかし、例えば、内視鏡の工場出荷時においてゲイン補正値記録部４５に調整ゲインの情報を格納しておけばよく、補正値算出部４０を内視鏡に内蔵しておく必要はない。即ち、内視鏡内には、ゲイン補正値記録部４５及びゲイン補正部３６のみを内蔵すればよい。
　更に、上述したように、アナログアンプによって調整ゲインを付加する構成にした場合には、ゲイン補正部３６も省略可能である。この場合には、例えば、パラメータ設定部３１がパラメータ記録部３２及びゲイン補正値記録部４５の情報を元に、設定部２４に与える情報を求めるようにしてもよい。
　従って、ゲイン調整装置は、内視鏡内に内蔵する必要はなく、例えば撮像信号を内視鏡から出力することができれば、ゲイン調整装置をビデオプロセッサ内や内視鏡装置の外部に設けてもよい。
　更に、上記実施の形態においては、メモリ部４２に明時及び暗時の撮像画像を記憶させて、上述した分散等の統計値を求める例を説明した。しかし、撮像素子として固定パターンノイズが十分に小さい素子を用いた場合、または算出するアナログ総ゲインの値をおおよその近似値として求めるような場合には、画像の平均値の相関は高いことから、１フレーム前の画像の平均値を用いることで、分散や標準偏差は求められる可能性がある。このため、メモリ部４２を省略した場合でも、撮像画像から得られる分散や標準偏差等の統計値を取り込むことで、調整ゲイン算出部４３においてアナログ総ゲインを算出することが可能である。また、このような統計値を記憶するメモリを設けてもよい。
　また、ゲイン調整装置による調整ゲインの算出処理は、調整ゲインの算出処理を記述したプログラムをコンピュータに実行させることによってソフトウェア処理によって得ることも可能である。
　本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい

　本出願は、２０１６年１月１２日に日本国に出願された特願２０１６－００３８９９号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲に引用されるものとする。

Claims (10)

  1. 　内視鏡の挿入部に設けられた撮像素子からの撮像信号を伝送すると共に増幅するアナログ処理部の出力をデジタル信号に変換するアナログデジタル変換回路からの撮像画像を用いて、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のアナログゲインの総和を算出するアナログ総ゲイン算出部と、
    　前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のゲインの総和の目標値と前記アナログゲインの総和との差分を調整ゲインとして求めて前記内視鏡のアナログゲインの調整のために前記調整ゲインの情報を出力する調整ゲイン算出部と
    　を具備したことを特徴とするゲイン調整装置。
  2. 　前記アナログデジタル変換回路からの撮像画像を取込む記憶部を具備し、
    　前記アナログ総ゲイン算出部は、前記記憶部に記憶された撮像画像のうち、明時の前記撮像素子の出力に基づく前記撮像画像と暗時の前記撮像素子の出力に基づく前記撮像画像とを用いて、前記アナログゲインの総和を算出する
    　ことを特徴とする請求項１に記載のゲイン調整装置。
  3. 　前記アナログ総ゲイン算出部は、前記明時の撮像画像の統計値と前記暗時の撮像画像の統計値とに基づいて前記撮像素子の光ショットノイズを求め、前記明時の撮像画像の平均値と前記暗時の撮像画像の平均値とに基づいて明時における前記撮像画像のレベルを求め、求めた光ショットノイズ及び撮像画像のレベルに基づいて前記アナログ総ゲインを算出する
    　ことを特徴とする請求項１又は２に記載のゲイン調整装置。
  4. 　前記統計値は、標準偏差又は分散である
    　ことを特徴とする請求項３に記載のゲイン調整装置。
  5. 　前記記憶部は、前記明時の２フレーム以上の撮像画像と前記暗時の２フレーム以上の撮像画像とを記憶し、
    　前記アナログ総ゲイン算出部は、前記明時の２フレーム以上の撮像画像同士の差分によって固定パターンノイズを除去し、前記暗時の２フレーム以上の撮像画像同士の差によって固定パターンノイズを除去する
    　ことを特徴とする請求項２乃至４のいずれか１つに記載のゲイン調整装置。
  6. 　請求項１乃至５のいずれか１つに記載のゲイン調整装置からの前記調整ゲインの情報を記録する記録部と、
    　前記調整ゲインの情報に基づいて前記アナログデジタル変換回路の出力に前記調整ゲインを付加するデジタルアンプと
    　を具備したことを特徴とする内視鏡。
  7. 　請求項１乃至５のいずれか１つに記載のゲイン調整装置からの前記調整ゲインの情報を記録する記録部と、
    　前記調整ゲインの情報に基づいて前記アナログゲインの総和に前記調整ゲインを付加するように前記アナログ処理部のゲインを制御するアナログゲイン制御部と
    　を具備したことを特徴とする内視鏡。
  8. 　請求項１乃至５のいずれか１つに記載のゲイン調整装置を内蔵した
    　ことを特徴とする請求項６又は７に記載の内視鏡。
  9. 　請求項６又は７に記載の内視鏡と、
    　前記内視鏡の出力が与えられて所定の画像処理を施すビデオプロセッサとを具備し、
    　前記ビデオプロセッサは、請求項１乃至５のいずれか１つに記載のゲイン調整装置を有する
    　ことを特徴とする内視鏡装置。
  10. 　コンピュータに、
    　内視鏡の挿入部に設けられた撮像素子からの撮像信号を伝送すると共に増幅するアナログ処理部の出力をデジタル信号に変換するアナログデジタル変換回路からの撮像画像のうち、明時の前記撮像素子の出力に基づく前記撮像画像と暗時の前記撮像素子の出力に基づく前記撮像画像とを用いて、前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のアナログゲインの総和を算出する手順と、
    　前記撮像素子の光電変換出力から前記アナログデジタル変換回路の入力までの間のゲインの総和の目標値と前記アナログゲインの総和との差分を調整ゲインとして求めて前記内視鏡のアナログゲインの調整のために前記調整ゲインの情報を出力する手順と
    　を実行させるためのゲイン調整プログラム。
PCT/JP2016/079792 2016-01-12 2016-10-06 ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置 WO2017122397A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201680011094.XA CN107249429B (zh) 2016-01-12 2016-10-06 增益调整装置、记录介质、内窥镜以及内窥镜装置
EP16885000.6A EP3245936A4 (en) 2016-01-12 2016-10-06 Gain adjustment device, gain adjustment program, endoscope, and endoscope device
JP2017516803A JP6150969B1 (ja) 2016-01-12 2016-10-06 ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置
US15/678,259 US10484626B2 (en) 2016-01-12 2017-08-16 Gain adjustment unit, recording medium holding gain adjustment program, endoscope and endoscope apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-003899 2016-01-12
JP2016003899 2016-01-12

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/678,259 Continuation US10484626B2 (en) 2016-01-12 2017-08-16 Gain adjustment unit, recording medium holding gain adjustment program, endoscope and endoscope apparatus

Publications (1)

Publication Number Publication Date
WO2017122397A1 true WO2017122397A1 (ja) 2017-07-20

Family

ID=59311146

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/079792 WO2017122397A1 (ja) 2016-01-12 2016-10-06 ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置

Country Status (4)

Country Link
US (1) US10484626B2 (ja)
EP (1) EP3245936A4 (ja)
CN (1) CN107249429B (ja)
WO (1) WO2017122397A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109064432B (zh) * 2018-08-24 2020-09-11 烟台艾睿光电科技有限公司 一种非制冷红外机芯组件最大对比度的控制方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003319905A (ja) * 2002-02-27 2003-11-11 Pentax Corp 電子内視鏡装置のプロセッサ
JP2008093174A (ja) 2006-10-11 2008-04-24 Olympus Medical Systems Corp 内視鏡装置
JP2009106442A (ja) * 2007-10-29 2009-05-21 Olympus Medical Systems Corp 撮像システム
JP2014204892A (ja) * 2013-04-15 2014-10-30 富士フイルム株式会社 内視鏡システム
JP2016003899A (ja) 2014-06-16 2016-01-12 株式会社ニコン 電子機器、および制御プログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4673274A (en) * 1984-09-18 1987-06-16 Matsushita Electric Industrial Co., Ltd. Automatic focusing apparatus for camera
US20030160865A1 (en) 2002-02-27 2003-08-28 Pentax Corporation Electronic endoscope apparatus including video-processor
JP2006050350A (ja) * 2004-08-05 2006-02-16 Sanyo Electric Co Ltd 撮像装置及び撮像素子の制御回路
JP4353223B2 (ja) * 2006-09-07 2009-10-28 ソニー株式会社 画像データ処理装置、画像データ処理方法および撮像システム
US7911506B2 (en) * 2007-07-23 2011-03-22 Canon Kabushiki Kaisha Image sensing apparatus and method of controlling the same
CN102970914A (zh) * 2010-08-02 2013-03-13 奥林巴斯医疗株式会社 内窥镜系统
CN102695009B (zh) * 2012-05-29 2014-10-22 昆山锐芯微电子有限公司 图像传感器的增益转换映射方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003319905A (ja) * 2002-02-27 2003-11-11 Pentax Corp 電子内視鏡装置のプロセッサ
JP2008093174A (ja) 2006-10-11 2008-04-24 Olympus Medical Systems Corp 内視鏡装置
JP2009106442A (ja) * 2007-10-29 2009-05-21 Olympus Medical Systems Corp 撮像システム
JP2014204892A (ja) * 2013-04-15 2014-10-30 富士フイルム株式会社 内視鏡システム
JP2016003899A (ja) 2014-06-16 2016-01-12 株式会社ニコン 電子機器、および制御プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3245936A4

Also Published As

Publication number Publication date
EP3245936A4 (en) 2018-11-07
CN107249429B (zh) 2019-03-08
CN107249429A (zh) 2017-10-13
US20170374301A1 (en) 2017-12-28
EP3245936A1 (en) 2017-11-22
US10484626B2 (en) 2019-11-19

Similar Documents

Publication Publication Date Title
JP2008219293A (ja) 撮像装置及び撮像システム
JP7353783B2 (ja) 撮像装置とその制御方法及び撮像素子とその制御方法
JP5458223B1 (ja) 撮像装置
JPWO2012017735A1 (ja) 内視鏡システム
JP2008172493A (ja) フロントエンド信号処理方法およびフロントエンド信号処理装置
JP5244164B2 (ja) 内視鏡装置
US11165978B2 (en) Imaging device, control method thereof, and imaging apparatus
JP2013244250A (ja) 電子内視鏡装置及びその撮像画像補正方法
JP4994751B2 (ja) 撮像装置
JP5489739B2 (ja) 信号処理装置、撮像装置、及び信号処理方法
JP5404346B2 (ja) 撮像装置、電子スコープ、及び電子内視鏡システム
WO2017122397A1 (ja) ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置
JP6150969B1 (ja) ゲイン調整装置、ゲイン調整プログラム、内視鏡及び内視鏡装置
JP6568368B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP5411322B2 (ja) 撮像装置および撮像方法
JP2012130578A (ja) 内視鏡装置
JP6076578B1 (ja) 撮像装置
EP2137959B1 (en) Long exposure digital image sensor system
JP5911306B2 (ja) 色調調整装置および電子内視鏡装置
JP2023506884A (ja) ライブ較正
JP2016158940A (ja) 撮像装置及びその作動方法
JP2011009834A (ja) 撮像装置及び撮像方法
JPH0763447B2 (ja) 電子内視鏡装置
JP4735006B2 (ja) 黒バランス調整装置
JP3917982B2 (ja) 内視鏡装置

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2017516803

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2016885000

Country of ref document: EP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16885000

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE