WO2013061819A1 - 内視鏡システム - Google Patents

内視鏡システム Download PDF

Info

Publication number
WO2013061819A1
WO2013061819A1 PCT/JP2012/076658 JP2012076658W WO2013061819A1 WO 2013061819 A1 WO2013061819 A1 WO 2013061819A1 JP 2012076658 W JP2012076658 W JP 2012076658W WO 2013061819 A1 WO2013061819 A1 WO 2013061819A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
endoscope
observation
images
depth
Prior art date
Application number
PCT/JP2012/076658
Other languages
English (en)
French (fr)
Inventor
浩 露木
Original Assignee
オリンパスメディカルシステムズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパスメディカルシステムズ株式会社 filed Critical オリンパスメディカルシステムズ株式会社
Priority to CN201280011886.9A priority Critical patent/CN103415240B/zh
Priority to JP2013514488A priority patent/JP5315482B1/ja
Priority to EP12844466.8A priority patent/EP2668891B1/en
Priority to US13/856,111 priority patent/US8878919B2/en
Publication of WO2013061819A1 publication Critical patent/WO2013061819A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064—Constructional details of the endoscope body
    • A61B1/00071—Insertion part of the endoscope body
    • A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00096—Optical elements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163—Optical arrangements
    • A61B1/00188—Optical arrangements with focusing or zooming features
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • A61B1/051—Details of CCD assembly
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2407—Optical details
    • G02B23/2423—Optical details of the distal end
    • G02B23/243—Objectives for endoscopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Definitions

  • the present invention relates to an endoscope system that forms an image on two imaging elements of an objective optical system provided in the endoscope.
  • At least one image sensor that is shifted from the in-focus position within a range having a common part with a range of depth of field, and extracting a high-frequency signal component from an output signal of the at least one image sensor;
  • An image pickup apparatus that performs signal processing to be added to an output signal of an image pickup element arranged at a focus position is disclosed.
  • an optical path of light that has passed through an imaging lens that captures images of subjects with different distances is divided into a plurality of optical paths by an optical path dividing unit,
  • An image sensor driving device that arranges image sensors with different focus positions on each of the divided optical paths and moves each image sensor along the optical axis direction, and each image sensor according to the input lens parameters of the image lens
  • An image pickup apparatus includes an arithmetic processing unit that determines a position on the optical axis of an image and an image composition device that synthesizes a video signal output from each image sensor.
  • 2007-313166 as a third conventional example, a focus adjustment mechanism and 2 / pixel pitches shifted in the horizontal and vertical directions are arranged in order to obtain a high-quality image.
  • An endoscope that includes a plate imaging unit and in which a vertical pixel pitch of an imaging element and an F number of an objective optical system are set to satisfy predetermined conditions is disclosed.
  • the imaging device of the first conventional example when applied to an endoscope, it is premised on that the aperture is sufficiently opened to secure the depth of field, so that a wider field of view from near-field observation to far-field observation is obtained.
  • the image pickup apparatus of the second conventional example when applied to an endoscope that requires depth, it is difficult to satisfy the depth of field required for both observation cases.
  • the image pickup apparatus of the second conventional example when the image pickup apparatus of the second conventional example is to be mounted on the distal end portion of the endoscope, each image pickup element arranged after the optical path dividing unit is driven in each optical path direction by the image pickup drive apparatus. For this reason, the outer diameter of the distal end portion of the endoscope becomes large, and good insertability required for the endoscope cannot be ensured.
  • the third conventional example improves the resolution, and it is difficult to set the depth of field that is required for the close-up observation and the far-view observation.
  • the present invention has been made in view of the above-described points, and can be applied to an endoscope that performs close-up observation and distant observation so as to satisfy the required depth of field in the case of close-up observation and remote observation.
  • An object of the present invention is to provide an endoscope system that can be used.
  • An endoscope system receives an endoscope objective optical system that obtains two optical images with different focus positions with respect to the same subject, and the two optical images with different focus positions.
  • Two image sensors for photoelectric conversion an image composition processing unit for synthesizing two images corresponding to the two optical images into one image by the two image sensors, and the endoscope objective optical system.
  • a focus switching mechanism that moves the position of the focus switching lens and selectively switches the focus of the endoscope objective optical system to one of the two observation regions of the near observation and the far observation, and the image composition processing unit Synthesizes the two images in each of the observation regions of the close-up observation and the distant observation.
  • FIG. 1 is a diagram showing an overall configuration of an endoscope system according to a first embodiment of the present invention.
  • FIG. 2A is a diagram showing a configuration of an objective optical system and an image sensor in the first embodiment.
  • FIG. 2B is a diagram illustrating a complementary color separation filter attached to the imaging surface of the imaging element.
  • FIG. 3 is an explanatory diagram of the depth of field.
  • FIG. 4A is a diagram showing a configuration of an image composition processing unit.
  • FIG. 4B is a flowchart showing the operation content of the first embodiment.
  • FIG. 5 is an explanatory diagram of the action of expanding the depth of field by the focus switching of the objective optical system using the focus lens.
  • FIG. 6 is a diagram showing numerical data such as depth of field in the first embodiment in a tabular format.
  • FIG. 7 is a diagram illustrating a configuration of an imaging unit in a modification of the first embodiment.
  • FIG. 8 is a diagram showing a configuration of a light source device according to the second embodiment of the present invention.
  • FIG. 9 shows that two image pickup devices having different focus positions in far-field observation and near-field observation are set so that the depth of field overlaps within the depth range of depth of field having an MTF of 10% or more.
  • an endoscope system 1 As shown in FIG. 1, an endoscope system 1 according to a first embodiment of the present invention includes an endoscope 2 that is inserted into a subject, and a light source device 3 that supplies illumination light to the endoscope 2. And a processor device 4 as an image processing device that performs image processing on an imaging unit provided in the endoscope 2 and an image display device 5 that displays an image signal generated by the processor device 4 as an endoscopic image. .
  • the endoscope 2 includes an elongated insertion portion 6 to be inserted into a subject and an operation portion 7 provided at the rear end of the insertion portion 6, and illumination light extended from the operation portion 7 is received.
  • the light guide connector 9 a at the end of the first cable 9 through which the light guide 8 to be transmitted is inserted is detachably connected to the light source device 3.
  • the light source device 3 incorporates a lamp 11 such as a xenon lamp as a light source.
  • the light source is not limited to the lamp 11 such as a xenon lamp, and a light emitting diode (abbreviated as LED) may be used.
  • the white light generated by the lamp 11 is condensed by the condenser lens 13 after the amount of light passing through the diaphragm 12 is adjusted, and is incident (supplied) on the incident end face of the light guide 8.
  • the aperture of the diaphragm 12 is varied by the diaphragm drive unit 14.
  • the light guide 8 transmits the illumination light incident on the incident end surface and emits the illumination light from the distal end surface disposed inside the illumination window of the distal end portion 6 a of the insertion portion 6.
  • An illumination lens 15 is disposed so as to face the distal end surface, and the illumination lens 15 expands and emits the light emitted from the distal end surface of the light guide 8 from the illumination window, thereby observing the observation target portion inside the subject. Illuminate.
  • the illuminated observation target region is divided into two parts arranged on the rear side thereof by an endoscope objective optical system (hereinafter simply referred to as an objective optical system) 16 attached to an observation window provided adjacent to the illumination window.
  • An optical image is formed on the image sensors 17a and 17b.
  • the objective optical system 16 in the present embodiment includes a plurality of optical elements 16a to 16h arranged along the optical axis O as shown in FIG. 2A, and on the rear side of the optical element 16g and two imaging elements.
  • a prism 18 is provided as an optical element that separates two optical images and is arranged on the optical axis O between the two on the front side of 17a and 17b.
  • An aperture stop 16h is disposed between the optical elements 16c and 16d.
  • the prism 18 is formed, for example, by contacting both inclined surfaces of right-angled triangular prism elements 18a and 18b, and one imaging element 17a is attached near the end face of the prism element 18a (so as to face the end face).
  • the other image sensor 17b is attached in the vicinity of the end face of the element 18b (so as to face the end face). Note that the image pickup element 17a and the image pickup element 17b have the same characteristics, and it is preferable to use one having both characteristics.
  • the prism 18 separates the light incident through the optical elements 16a to 16h into, for example, an equal amount of reflected light and transmitted light, so that an optical image on the transmitted light side and an optical image on the reflected light side are separated. Separate into optical images.
  • the image sensor 17a receives and photoelectrically converts the optical image on the transmitted light side
  • the image sensor 17b receives and photoelectrically converts the optical image on the reflected light side.
  • the image sensors 17a and 17b are attached near the end faces of the prism elements 18a and 18b, respectively, so that the focus positions are different.
  • the optical path length db on the reflected light side is set to be shorter (smaller) than the optical path length (glass path length) da on the transmitted light side to the imaging element 17a in the prism 18.
  • the focus position of the image pickup device 17a is relatively shifted (displaced) with respect to the image pickup device 17b
  • the image pickup device 17b is shifted with respect to the image pickup device 17a.
  • the focus position is relatively shifted to the far point side.
  • the optical path lengths to the image sensors 17a and 17b may be changed by making the refractive indexes of the prism elements 18a and 18b different from each other, and the focus positions of the image sensors 17a and 17b may be relatively shifted.
  • a complementary color separation filter 20 is attached to each imaging surface of both the imaging elements 17a and 17b.
  • magenta Mg, green G, cyan Cy, yellow (yellow) Cy immediately before each pixel arranged at a predetermined pixel pitch (also referred to as pixel size) Pix in the horizontal and vertical directions on the imaging surface.
  • the color separation filters 20 composed of the four color filter elements are regularly arranged in the horizontal and vertical directions.
  • Mg and G are alternately arranged in the horizontal direction, and are arranged in a cycle of two pixels in the vertical direction.
  • Cy and Ye are alternately arranged in the horizontal direction as in the case of Mg and G.
  • Cy and Ye are arranged so as to be replaced at a pixel position of two pixels in the vertical direction.
  • the primary color filters are represented by R, G, and B
  • the objective optical system 16 and the two imaging elements 17a and 17b form an imaging unit 19 that obtains two optical images and acquires two images obtained by photoelectric conversion of the two optical images.
  • a focus switching mechanism is provided so that the objective optical system 16 can selectively focus or focus on two observation regions of far-field observation and near-field observation.
  • the objective optical system 16 includes a focus lens 21 that can move to two positions Pa and Pb (see FIG. 2A) in the direction of the optical axis O.
  • the focus lens 21 includes a focus switching mechanism.
  • the actuator 22 is driven so as to move from one position to the other position and from the other position to one position between the two positions Pa and Pb.
  • the focus lens 21 is configured by, for example, a cemented lens having a positive power by cementing a concave lens and a convex lens, and the focus lens 21 has a reference numeral 16d on the front side (object side). Is arranged between the aperture stop and the cemented lens 16f, and is selectively selected between two positions Pa and Pb between the position Pa immediately after the aperture stop 16d and the position Pb immediately before the cemented lens 16f. Set to As will be described later with reference to FIG. 5, in the state where the focus lens 21 is set at the front side (object side) position Pa, the subject in the observation area when the image sensor 17a, 17b is used for far-distance observation is focused. Is set to
  • the focus is set so that the subject in the observation area when the image pickup devices 17a and 17b perform close observation is focused.
  • the focus positions of the image pickup devices 17a and 17b are shifted from each other, and the focus positions are set so as to overlap each other within the range of the depth of field where the MTF (Modulation Transfer Function) is a predetermined value or more as will be described later. Since it is in a state, a synthesized image having a wide depth of field is obtained by synthesizing two images acquired by both the imaging elements 17a and 17b. As shown in FIG.
  • the actuator 22 is connected to a signal line 23 inserted through the insertion portion 6, and the signal line 23 is further inserted through the second cable 24 extended from the operation portion 7.
  • the signal connector 24 a at the end of the second cable 24 is detachably connected to the processor device 4, and the signal line 23 is connected to an actuator control unit 25 provided in the processor device 4.
  • the actuator control unit 25 also receives a switching operation signal from, for example, a switching operation switch 26 provided in the operation unit 7 of the endoscope 2.
  • the actuator controller 25 moves the focus lens 21 by applying a drive signal for electrically driving the actuator 22 according to the operation of the switching operation switch 26.
  • the switching operation means for generating the switching operation signal is not limited to the switching operation switch 26 but may be a switching operation lever or the like.
  • the focus lens 21, the actuator 22, and the actuator control unit 25 form a focus switching mechanism.
  • the image pickup devices 17a and 17b are connected to the insertion portion 6, the operation portion 7, and the signal lines 27a and 27b inserted through the second cable 24, and the signal connector 24a is connected to the processor device 4, whereby the processor device. 4 is connected to an image processor 30 serving as an image processing unit provided in 4.
  • the image processor 30 includes an image reading unit 31 that reads out image signals (simply abbreviated as “images”) of images picked up by two image pickup devices 17 a and 17 b having different focus positions and photoelectrically converted, and the image reading unit 31.
  • An image correction processing unit 32 that performs image correction on the two read images and an image composition processing unit 33 that performs image composition processing for combining the two corrected images.
  • the image correction processing unit 32 includes a relative magnification difference, a position difference, a rotation difference, and a brightness difference in each of the images formed on the imaging surfaces of the two imaging elements 17a and 17b. Are performed by image processing on the two images photoelectrically converted by the imaging elements 17a and 17b so as to match each other.
  • the image correction processing unit 32 corrects the above-described geometric difference and brightness difference.
  • the image or image having the lower luminance of the two images or images, or the lower luminance of the two images or images at the relatively same position is used as a reference. Make corrections. There may be a difference in brightness (luminance value) when the same subject is imaged due to a sensitivity difference between the imaging chips of the two imaging elements 17a and 17b, a manufacturing error of an on-chip lens, or the like.
  • the brightness correction is performed so as to match with a relatively brighter one, that is, a luminance signal (for example, G signal) having a lower intensity (signal level).
  • a luminance signal for example, G signal
  • the brightness correction is performed so that the gain is decreased (or attenuated) so that the lower brightness is used as a reference and the higher brightness is matched with the lower brightness as the reference. The deterioration of the image quality of the composite image due to the deterioration of N can be prevented.
  • the image composition processing unit 33 compares the contrast in each of the spatially identical pixel regions in the two images, and selects the pixel region having a relatively high contrast, thereby synthesizing the two images. A composite image as one image is generated. When the contrast difference between the two images is small, a composite image is generated by composite image processing that adds each image with a predetermined weight.
  • FIG. 4A shows a configuration example of the image composition processing unit 33 that performs such image composition processing.
  • the objective optical system 16 forms two optical images on the imaging surfaces of the two CCDs 17a and 17b having different focus positions.
  • the first and second image data photoelectrically converted by the CCDs 17a and 17b and passed through the image correction processing unit 32 and the like (based on the imaging of the CCDs 17a and 17b, respectively) are two frame memories 62a and 62b in the image composition processing unit 33. Are stored in pixel units.
  • the first image data and the second image data corresponding to the same part are stored in the memory cell having the same address. Is done.
  • a known luminance signal may be generated from the R, G, and B color components, and the same processing may be performed according to the comparison result of the contrast of the two luminance signals.
  • the signals si1 and si2 of the first image and the second image simultaneously read from the two frame memories 62a and 62b by designating the same address are input to the difference calculation circuit 63 configured by a differential amplifier or the like. Then, the difference calculation circuit 63 calculates the difference amount between the signals si1 and si2, for example, by subtracting the luminance value of the second image from the luminance value of the first image. Further, the difference calculation circuit 63 determines that the luminance level of any image is higher (larger) than the other based on the positive or negative polarity of the difference amount, and outputs a binary signal sp. For example, if the polarity is positive, si1> si2, and if it is negative, si1 ⁇ si2.
  • of the difference amount calculated by the difference calculation circuit 63 is input to the comparison circuit 64, and the comparison circuit determines whether or not the absolute value
  • the comparison circuit 64 is H level when the absolute value
  • the binary signal of the comparison circuit 64 and the binary signal sp corresponding to the polarity by the difference calculation circuit 63 are input to the decoder 65, and the decoder 65 is configured to switch the two switching circuits constituting the selection circuit 66 from the two binary signals. The switching of the circuits 66a and 66b is controlled.
  • Signals si1 and si2 are respectively input to the contacts a and b of the switching circuit 66a, and a signal from the common contact c of the switching circuit 66a and a signal from the adder 67 are input to the contacts a and b of the switching circuit 66b.
  • the composite signal sc that has been subjected to image composition processing is output from the common contact c of the switching circuit 66b.
  • the adder 67 adds the signals si1 and si2 and outputs them to the contact b of the switching circuit 66b.
  • the decoder 65 selects the contact a of the switching circuit 66b, and the absolute value
  • the decoder 65 selects the contact point a or b of the switching circuit 66a according to the binary signal sp of polarity. Specifically, when the binary signal sp is at the H level, the signal si1 is selected (selected state indicated by a solid line in FIG.
  • the switching circuit 66a selects an image portion having a higher contrast when the contrast difference is greater than or equal to a predetermined value.
  • the two signals si1 and si2 are added and output as a composite signal.
  • the difference calculation circuit 62 calculates the difference amount between the two signals si1 and si2. If the absolute value
  • the switching circuit 66b selects the signal added by the adder 67 and outputs this signal as the combined signal sc.
  • the combined signal sc is generated by weighting as follows. You may make it do. As shown by dotted lines in FIG. 4A, multipliers 68a and 68b are arranged on the two input sides of the adder 67. The multipliers 68a and 68b are weighted coefficients c1 and c2 output from the signals si1 and si2 and the ROM 69, respectively. And are output to the adder 67.
  • the ROM 69 stores weighting coefficients c1 and c2 that are set in advance according to the difference amount.
  • the ROM 69 uses the absolute value
  • the weighting coefficients c1 and c2 to be multiplied by si2 are output.
  • the weighting coefficients c1 and c2 stored in the ROM 69 are such that as the absolute value
  • the adder 67 adds the signals si1 and si2 multiplied by the weighting coefficients c1 and c2, respectively, and outputs the result as a combined signal sc.
  • the image processor 30 outputs a post-stage image processed image and a post-stage image processing section 34 that performs post-stage image processing such as contour enhancement and gamma correction on one image synthesized by the image synthesis processing section 33.
  • An image output unit 35 is provided, and an image output from the image output unit 35 is output to the image display device 5.
  • the image processor 30 includes a dimming unit 36 that generates a dimming signal for dimming to a reference brightness from the image read by the image reading unit 31, and the dimming unit 36 generates the dimming signal.
  • the dimming signal is output to the aperture driving unit 14 of the light source device 3.
  • the aperture drive unit 14 adjusts the aperture amount of the aperture 12 so as to maintain the reference brightness according to the dimming signal.
  • the image correction processing unit 32 is provided with a correction parameter storage unit 37 that stores correction parameters (information) used when correcting an image.
  • Each endoscope 2 has an ID memory 38 in which endoscope identification information (endoscope ID) unique to the endoscope 2 is stored, and a unique correction parameter to be corrected in the endoscope 2.
  • a correction parameter storage unit 37 that stores correction parameters corresponding to the endoscope 2 is provided.
  • a correction parameter storage unit 37 that stores correction parameters is provided in, for example, the ID memory 38 in the endoscope 2.
  • the correction parameter storage unit 37 is not limited to the case where the correction parameter storage unit 37 is provided in the ID memory 38, and may be provided in a memory different from the ID memory 38.
  • the control unit 39 of the processor 30 identifies the presence / absence of correction by the endoscope ID provided on the endoscope 2 side.
  • the correction parameter is read from the correction parameter storage unit 37 and the correction parameter is sent to the image correction processing unit 32.
  • the image correction processing unit 32 performs image correction corresponding to the imaging unit 19 mounted on each endoscope 2 based on the correction parameter transferred from the control unit 39. Further, the image correction processing unit 32 performs image correction using the correction parameter, such as correction of the above-described magnification difference and position difference, using one of the two images or one of the images as a reference image or reference image. .
  • magnification shift occurs between two images
  • the specification of the objective optical system 16 is used.
  • the telecentricity is lost and a design is made such that light rays are incident on the imaging elements 17a and 17b obliquely. For example, if the angle formed with the optical axis is the incident angle, the clockwise angle is positive and the counterclockwise direction is negative, the design is such that the negative incident angle is obtained. If the focus position is shifted in the objective optical system in which such telecentricity is lost, a magnification shift occurs between the two images.
  • the deviation amount is stored in the correction parameter storage unit 37 in advance, and when the target endoscope 2 is connected to the processor device 4, the endoscope 2 is It recognizes and calls the corresponding parameter from the correction parameter storage unit 37 to perform correction.
  • the imaging unit 19 when the imaging unit 19 is assembled, the relative pixel positions of the two images may be slightly shifted.
  • the amount of deviation at the time of manufacture is stored in the correction parameter storage unit 37, and the deviation correction is performed by the image correction processing unit 32.
  • the positional deviation correction is performed, for example, by correcting the reading position of the two images so that the relative positions of the image captured by the imaging element 17a and the image captured by the imaging element 17b match. After the positional deviation is corrected, it is output to the image composition processing unit 33.
  • correction may be performed using an adjustment reference chart prepared separately when using the endoscope.
  • the reference chart may be arranged at a desired position on the distal end portion 6a of the endoscope 2, and the image correction processing unit 32 may read the deviation between the two images with respect to the reference chart and correct the deviation.
  • the control unit 39 should drive the actuator control unit 25 even when the focus lens 21 constituting the objective optical system 16 mounted on each endoscope 2 is driven at a different position. Position information is sent, and the actuator control unit 25 performs control to appropriately drive the actuator 22 even when the type of the endoscope 2 is different.
  • FIG. 3 is an explanatory diagram of the depth of field determined geometrically.
  • an imaging device having a pixel pitch Pix shown in FIG. 3 is arranged at an image plane position X ′ using an objective optical system (focal length Fl) when the best distance is X. think of. If the object is brought close to (from X) to Xn under the condition where the image pickup device is fixed, the image plane position Xn ′ at the time of proximity will deviate from the image pickup surface position of the image pickup device.
  • the best distance is X
  • the distance to the depth of field near point is Xn
  • the distance to the depth of field far point is Xf
  • the allowable circle of confusion is ⁇
  • the focal length of the objective optical system is Fl.
  • the effective F number of the objective optical system is Fno.
  • the depth of field can be expanded by the composite image compared to the case of the depth of field determined geometrically, but even if the influence of diffraction cannot be ignored, the field of view is determined by the composite image.
  • the depth can be expanded. It is generally known that when the imaging device is further miniaturized and the number of pixels is increased, the influence of wave optics cannot be ignored when defining the depth of field. This is because, at the focal position, the spot size is broadened due to the influence of diffraction from the spot size defined geometrically, so that a deviation occurs from the geometric optical depth of field calculation.
  • the diffraction has an effect that cannot be ignored.
  • the image pickup devices 17a and 17b of the present embodiment are also regularly arranged with the same pixel pitch Pix in the horizontal direction and the vertical direction as in the case of the image pickup device shown in FIG.
  • the imaging unit 19 using the imaging elements 17a and 17b described above is set so as to obtain the characteristics shown in the table of FIG.
  • Composite far depth depth of field of the composite image at the time of far-field observation
  • near1 depth depth of field by the image pickup device 17a at the time of close-up observation
  • near2 depth depth of field by the image pickup device 17b at the time of close-up observation
  • Synthesized near depth depth of field (range) of synthesized image during close-up observation
  • Near depth width depth width from near end of synthesized near depth to far end of synthesized near depth
  • imaging method total pixels Numerical data of the number (total number of pixels of the image sensor) is shown.
  • BST indicates the best distance as the object distance when the MTF is maximum.
  • the following shows the outline.
  • the image pickup devices 17a and 17b complementary color solid-state image pickup devices having 1 million pixels (103580 pixels) and a pixel (pixel) size of 1.7 ⁇ m are employed.
  • two image sensors 17a The vertical pixel size of 17b is set such that Pix is 1.70 ⁇ m, the resolution coefficient k1 as a correction parameter is 3.00, the F value margin k2 is 1.00, and the effective F number Fno of the objective optical system 16 is 7.65. ing.
  • the imaging unit 19 has the following condition 2.4 ⁇ Fno / Pix ⁇ 4.5 (5) It is set to satisfy.
  • the condition of the formula (5) is as follows.
  • k1 ⁇ Pix 1.22 ⁇ ⁇ ⁇ Fno (9) It becomes.
  • the effective F number Fno set in the objective optical system 16 needs to have a certain margin so that the optical performance can be sufficiently exhibited in consideration of manufacturing variations and the like.
  • the coefficient k2 is within a reasonable range of about 0.7 ⁇ k2 ⁇ 1.
  • the expression (11) can be expressed by the following expression (12) when expressed as a relationship between the effective F number Fno and the pixel size Pix.
  • the effective F number Fno of the objective optical system 16 becomes too small to obtain a desired depth of field.
  • the depth of field is sufficient, but the imager's Pix size is large and the resolution is low.
  • the resolution is improved by increasing the number of pixels, but the imager size increases. Therefore, when the objective optical system 16 is enlarged and mounted on the distal end portion 6a of the endoscope 2, the outer diameter does not increase (insertability). Is not preferable).
  • the value exceeds the upper limit of the range of the expression (5) the effective F number Fno of the objective optical system becomes too large to obtain a desired brightness.
  • the imaging unit 19 is a complementary color system and is a simultaneous type.
  • the coefficient k1 is generally set to about 3.
  • the endoscope system 1 having such a configuration is different from the objective optical system 16 as an endoscope objective optical system for obtaining two optical images having different focus positions with respect to the same subject, and the focus positions are different from each other.
  • Two image sensors 17a and 17b that receive and optically convert two optical images, and an image composition process for synthesizing two images corresponding to the two optical images into one image by the two image sensors 17a and 17b.
  • the position of the focus lens 21 as a focus switching lens provided in the endoscope objective optical system is moved to one of the two observation areas of the near observation and the far observation, and the endoscope objective optical system And an actuator 22 that constitutes a focus switching mechanism that selectively switches the focus, and the image composition processing unit 33 performs the 2 in each of the observation areas of the near observation and the far observation. Wherein the synthesizing of the images.
  • the operation of the present embodiment in the case where an operator as a user performs endoscopic examination of a body cavity using the endoscope 2 will be described.
  • the endoscope 2 is connected to the light source device 3 and the processor device 4, and the operator turns on the power.
  • the control unit 39 performs control to set the far side to the setting state with the observation region.
  • the control unit 39 regards the switching operation switch 26 in this initial setting state as a setting state in which a signal for setting the far side as the observation region is output to the control unit 39.
  • step S2 the control unit 39 drives the focus lens 21 via the actuator control unit 25 and the actuator 22, so that the objective optical system 16 uses the far side as the observation region.
  • the image correction processing unit 32 corrects two images by the two image pickup devices 17a and 17b using correction parameters.
  • the image composition processing unit 33 generates a synthesized image for the two images corrected by the image correction processing unit 32, and outputs the synthesized image to the image display device 5 side.
  • the image display device 5 displays a composite image.
  • FIG. 5A shows the imaging state of the imaging unit 19 corresponding to step S2.
  • FIG. 5A shows how the objective optical system 16 forms an image on the imaging elements 17a and 17b in a state in which the focus lens 21 is set so that the objective optical system 16 is focused on a distant observation region.
  • FIG. 5A shows the objective optical system 16 corresponding to the state in which the focus lens 21 is set (switched) to the front position Pa, and a prism 18 for separating the optical image into two optical images is arranged on the imaging side.
  • the two optical images are received by the image pickup devices 17a and 17b attached to the respective end faces, and photoelectrically converted signals are output.
  • the depth of field is expanded as follows by the composite image obtained by the two image sensors 17a and 17b.
  • the glass path lengths to the imaging devices 17a and 17b in the prism 18 are different, and images of images having relatively different focus positions are acquired by the imaging devices 17a and 17b.
  • images of images having relatively different focus positions are acquired by the imaging devices 17a and 17b.
  • an image focused on the (far) far point side is formed on the image sensor 17b
  • an image focused on the closer side relative to the image sensor 17b is formed on the image sensor 17a. Imaged.
  • the imaging unit 19 (the objective optical system 16 and the imaging devices 17a and 17b) is set so that the depth end on the far point side of the field depth Xaf overlaps.
  • the depth of field for images formed on the image sensors 17a and 17b is Xaf and Xbf.
  • the image is synthesized by the image synthesis processing unit 33
  • the depth of field corresponding to the synthesized image in the state of focusing on the distant observation is set as the synthesized depth of field.
  • Xaf + Xbf can be obtained as the combined depth of field.
  • one composite depth of field is obtained by composite image processing in which each image is added with a predetermined weight. That is, the combined depth of field is obtained as Xaf + Xbf (6.54 mm to 128.59 mm).
  • endoscopic examination can be performed smoothly if such a wide combined depth of field Xaf + Xbf is obtained.
  • Xaf + Xbf a wide combined depth of field
  • only a narrow depth of field can be obtained, for example, the near point side portion in the image obtained during screening may become blurred, and endoscopy is performed smoothly. It becomes difficult.
  • step S5 of FIG. 4B the control unit 39 monitors whether or not the switching operation switch 26 has been operated by the operator, and if not, returns to the process of step S5.
  • the operator operates the switching operation switch 26 when the screening is finished and the diagnosis is to be performed closer.
  • the control unit 39 proceeds to the process of step S6.
  • step S6 the control unit 39 performs control to set the observation region on the near side.
  • the control unit 39 drives the focus lens 21 via the actuator control unit 25 and the actuator 22 to bring the objective optical system 16 into a setting state in which the near point side is in focus so that the close side is the observation region.
  • step S7 the image correction processing unit 32 corrects the two images by the two imaging elements 17a and 17b using the correction parameter. However, if there is no large difference in the correction amount in step S6 with respect to step S2, it is not necessary to newly perform correction as the same parameter.
  • step S8 the image composition processing unit 33 generates a synthesized image for the two images corrected by the image correction processing unit 32, and outputs the synthesized image to the image display device 5 side.
  • the image display device 5 displays a composite image.
  • FIG. 5B shows an imaging state of the imaging unit 19 corresponding to step S6.
  • FIG. 5B is an explanatory diagram corresponding to a state in which the focus lens 21 is set (switched) to the position Pb on the rear side in FIG. .
  • the depth of field can be expanded by the composite image obtained by the two image pickup devices 17a and 17b as follows as in the case of FIG. Assuming that the depth of field at the image sensor 17a is Xan and the depth of field at the image sensor 17b is Xbn, the depth end on the near point side of the depth of field Xbn and the far side of the depth of field Xan.
  • the image pickup unit 19 (the objective optical system 16 and the image pickup devices 17a and 17b) is set so as to overlap the depth end.
  • the depth of field corresponding to the synthesized image in the state of focusing on the observation area of the close-up observation is set as the synthesized depth of field. In this case, Xan + Xbn can be obtained as the combined depth of field.
  • the state of close-up observation in which close observation is performed is set.
  • a wide synthetic depth of field Xan + Xbn can be obtained while maintaining a high resolving power, so that the details of the lesion can be clearly observed and diagnosis can be performed smoothly.
  • the combined depth of field Xaf + Xbf (range) in the case of far-field observation and the combined depth of field in the case of close-up observation Xan + Xbn (range) is set to overlap. For this reason, in the present embodiment, when the remote observation state and the close-up observation state are switched, it is possible to observe without generating an unclear (blurred) observation region between the two observation states. The surgeon can smoothly perform endoscopy.
  • step S9 the control unit 39 determines whether or not an instruction operation for ending the endoscopic examination has been performed. When the inspection is finished and the end instruction operation is not performed, it is determined whether or not the switching operation switch 26 is operated in the next step S10.
  • step S10 the process of step S10 is continued. If the switching operation switch 26 is operated, the process returns to step S2, the observation area is set to the far side, and the above-described operation. repeat.
  • the depth of field can be expanded when the observation area is set on either the far side or the near side.
  • the present embodiment can be applied to an endoscope that performs close-up observation and far-distance observation (that is, can be mounted on the distal end portion 6a of the insertion portion 6 of the endoscope 2).
  • An endoscope system that can satisfy the required depth of field can be provided.
  • a desired depth of field can be obtained, and the size can be reduced to a size that can be mounted on the distal end portion 6a of the endoscope 2, and a desired size can be obtained. Brightness can be secured and degradation of resolution can be prevented.
  • the objective optical system 16 that obtains two optical images with different focus positions may be telecentric in which the principal ray is parallel to the optical axis (or a diaphragm is disposed at the position of the rear focal point of the objective optical system 16). . If the objective optical system 16 is telecentric, a magnification shift due to the focus position does not occur, so that correction by image processing is unnecessary and an image processing algorithm for generating a composite image can be simplified, which is preferable. When the objective optical system 16 mounted on the distal end portion 6a of the insertion portion 6 of the endoscope 2 is aimed at miniaturization, the telecentricity of the objective optical system 16 may be destroyed.
  • the objective optical system 16 that obtains two optical images with different focus positions to set the incident angle of light that forms an image on the imaging surfaces of the imaging elements 17a and 17b to be less than 10 degrees.
  • the prism 18 using the prism elements 18a and 18b having the right triangular prism shape is used as the optical element for separating the two images, but as shown in FIG. It may be configured.
  • the prism 54 constituting the objective optical system 51 in FIG. 7 includes a first prism 54a to which an image sensor 17a that receives transmitted light is attached, and a second prism 54b to which an image sensor 17b that receives reflected light is attached. Become.
  • An imaging unit 53 is formed by the objective optical system 51 and the imaging elements 17a and 17b.
  • the objective optical system 51 excluding the prism 54 includes optical elements 52a to 52f, and the optical element 52c forms the focus lens 21. Note that an aperture stop 52f is disposed between the optical elements 52c and 52d.
  • a dielectric film that functions as a half mirror is (mirror) coated on the joint surface M1 of the second prism 54b formed of a pentaprism with the first prism 54a. . Then, about half (50%) of the light incident along the optical axis O of the objective optical system 51 is transmitted through this connection surface, and an optical image is formed on the imaging surface of the image sensor 17a.
  • a reflection surface coated with a dielectric film is formed on the reflected light side end face M2 so as to be almost totally reflected, and after the second reflection on this reflection surface
  • the image sensor 17b attached to the end face facing the reflected light receives the light.
  • the coating of the end face M2 may be a metal coating such as Al-SiO2 or Ag-SiO2.
  • an optical image is formed on the image sensor 17b after one reflection, that is, an odd number of reflections, so that it becomes a mirror image and image processing for inverting the mirror image in the processor device 4 is performed.
  • the correction of the mirror image by the optical even number of reflections may increase the size of the objective optical system and the cost of the prism, the correction of the mirror image by the odd number of reflections as shown in FIG. At 32, mirror image inversion is performed.
  • it may be configured to reflect optically even times as shown in FIG.
  • second to sixth embodiments using image sensors and the like different from the above-described embodiments will be sequentially described.
  • the endoscope system according to the second embodiment is a frame sequential type endoscope system, and brightness is prioritized as can be understood from the following numerical data, and a bright image can be acquired.
  • This endoscope system employs a light source device 3B in the endoscope system 1 of FIG. 1 in which the light source device generates frame-sequential illumination light as shown in FIG.
  • the rotary filter 55 is arranged in the illumination optical path between the lamp 11 and the diaphragm 12 in the light source device 3 of FIG. 1, and the rotary filter 55 is rotated by the motor 56.
  • the rotary filter 55 is provided with fan-shaped R, G, and B filters that selectively transmit red (R), green (G), and blue (B) light, respectively. In the configuration of FIG. By passing the rotary filter 55, it is possible to supply the light guide 8 with R, G, B plane sequential illumination light.
  • the image reading unit 31 in the processor device 4 of FIG. 1 temporarily stores the images read in the frame sequential order, and simultaneously reads out the frame memory for generating the synchronized color image.
  • the simultaneous type that is, the image pickup device including the color separation filter is used, but the image pickup unit mounted on the distal end portion 6a of the insertion portion 6 of the endoscope 2 in this embodiment is configured.
  • the imaging device two monochrome imaging devices 61a and 61b are employed.
  • the vertical pixel size of the two imaging elements 61a and 61b is 1.45 ⁇ m
  • the resolving power coefficient k1 is a correction parameter. 2.00
  • the F value margin k2 is set to 0.80
  • the effective F number Fno of the objective optical system is set to 3.48.
  • it is a field sequential method using a monochrome imaging element of 860,000 pixels and 1.45 ⁇ m pixels, and it takes a large margin for the diffraction limit Fno and is set with more emphasis on brightness. .
  • Fno / Pix 2.40. More detailed numerical data is shown in the table of FIG.
  • FIG. 6A data including the case of the embodiment in which priority is given to the brightness satisfying the condition of the above-described formula (5), 2.4 ⁇ Fno / Pix ⁇ 4.5 is shown.
  • FIG. 6B an embodiment emphasizing depth expansion that satisfies the condition of formula (5) ′ described later, 2.7 ⁇ Fno / Pix ⁇ 4.5 (implementation of the second ′) Data in the case of (form).
  • FIG. 6A data including the case of the embodiment in which priority is given to the brightness satisfying the condition of the above-described formula (5), 2.4 ⁇ Fno / Pix ⁇ 4.5 is shown.
  • FIG. 6B an embodiment emphasizing depth expansion that satisfies the condition of formula (5) ′ described later, 2.7 ⁇ Fno / Pix ⁇ 4.5 (implementation of the second ′) Data in the case of (form).
  • This embodiment can be similarly applied to the case of the frame sequential method, and has the same effect as that of the first embodiment.
  • the depth of field can be expanded when the observation area is set on either the far side or the near side.
  • the present embodiment can be applied to an endoscope that performs close-up observation and far-distance observation (that is, can be mounted on the distal end portion 6a of the insertion portion 6 of the endoscope 2).
  • An endoscope system that can satisfy the required depth of field can be provided.
  • the third to sixth embodiments described below have substantially the same effects as the first embodiment.
  • the endoscope system of the present embodiment is a simultaneous endoscope system as in the first embodiment.
  • complementary color separation filters are employed as the two imaging elements 17a and 17b of the imaging unit 19, but in this embodiment, primary color separation filters are employed.
  • a simultaneous imaging device with a primary color Bayer array of 1.5 million pixels and 1.1 ⁇ m pixels is used, and a relatively small diameter (the imaging size is small because it is a minute pixel) and an ultra-high pixel endoscope is implemented. It has a form.
  • the absolute depth range is narrower than the first embodiment and the second embodiment, an endoscopic image with a smaller diameter and higher image quality can be provided while maintaining a practical depth of field.
  • the vertical pixel size of the two imaging elements is Pix of 1.1 ⁇ m, and the resolution coefficient k1 as a correction parameter is 2.80.
  • the F value margin k2 is set to 1.0, and the effective F number Fno of the objective optical system is set to 4.62.
  • Fno / Pix 4.20. More detailed numerical data is shown in the table of FIG.
  • This embodiment has the same effect as that of the first embodiment.
  • the endoscope system according to the present embodiment corresponds to a modification of the third embodiment.
  • the endoscope system of the present embodiment has 1.5 million pixels as in the third embodiment, but the image sensor has a pixel size of 1.45 ⁇ m and a large opening, which has a relatively large margin for noise and brightness. The setting is considered.
  • a deep depth of field can be obtained as a composite image while preventing the resolution from being lowered with respect to the third embodiment.
  • the vertical pixel size of the two imaging elements is Pix of 1.45 ⁇ m, and the resolution coefficient k1 as a correction parameter is 2.80.
  • the F value margin k2 is set to 1.0, and the effective F number Fno of the objective optical system is set to 6.09.
  • Fno / Pix 4.20. More detailed numerical data is shown in the table of FIG.
  • This embodiment has the same effect as that of the first embodiment.
  • the endoscope system according to the present embodiment corresponds to a modification of the third embodiment.
  • the endoscope system of the present embodiment uses a primary imager with a primary color Bayer arrangement of 1.2 million pixels and 1.1 ⁇ m pixels, and is aimed at a relatively high pixel and a smaller diameter than the third embodiment.
  • priority is given to depth rather than resolving power, and observation is performed so that close-up observation side can perform close-up observation while maintaining the practical level, although the resolving power slightly deteriorates beyond the diffraction limit Fno.
  • the distance is set to a depth of field that can approach 3mm.
  • it gives priority to close-up observation but has a combined depth of field that ensures a depth of 3 mm so that there is no hindrance to endoscopy.
  • the vertical pixel size of the two imaging elements is Pix of 1.10 ⁇ m, and the resolution coefficient k1 as a correction parameter is 2.80.
  • the F value margin k2 is set to 1.0
  • the effective F number Fno of the objective optical system is set to 4.62.
  • Fno / Pix 4.20. More detailed numerical data is shown in the table of FIG. This embodiment has the same effect as that of the first embodiment.
  • the endoscope system according to the present embodiment corresponds to a modification of the third embodiment.
  • the endoscope system according to the present embodiment uses a simultaneous image pickup device having a primary color Bayer array of 1 million pixels and 1.7 ⁇ m pixels, gives priority to the brightness at the time of observation over the depth of field, and has a wide coverage as a composite image. The depth of field is obtained.
  • the vertical pixel size of the two imaging elements is Pix of 1.70 ⁇ m, and the resolution coefficient k1 as a correction parameter is 2.80.
  • the F value margin k2 is set to 1.0
  • the effective F number Fno of the objective optical system is set to 7.14.
  • Fno / Pix 4.20. More detailed numerical data is shown in the table of FIG. This embodiment has the same effect as that of the first embodiment.
  • k2 is made small so that there is a margin in brightness. Things tend to be difficult.
  • the possible range of k2 is considered to be realistic from 0.9 to 1.0 on the assumption that the diffraction limit Fno is not exceeded.
  • Fno diffraction limit
  • CMOS sensor is used as an imaging device for an endoscope because of requirements such as a large number of pixels due to pixel miniaturization, low power consumption and low cost. May increase in the future.
  • pixel miniaturization may cause degradation of S / N, etc.
  • endoscopes where thinning is preferable it may be possible to select a fine cell size CMOS for smaller diameter and smaller size. It is done.
  • the CMOS sensor of the primary color Bayer array is assumed in the embodiment of the present application.
  • the third to sixth embodiments are the targets, and the expression (5) ′ is further 2.97 ⁇ Fno / Pix ⁇ 4.2 (5) ′′ It becomes. Therefore, when emphasizing the depth of field and adopting a primary color Bayer-type CMOS sensor as the image sensor, a sufficient depth of field can be obtained even if (5) ′′ (see the table in FIG. 6C). (Refer to (5) ′′ lower limit data according to the fourth embodiment and (5) ′′ upper limit data according to the third embodiment).
  • each depth end has an MTF of 10% or more and overlaps.
  • Fi 1 / k1 / Pix (5) It is. If the MTF of defocus in this Fi is about 10%, it is possible to judge that the image is not visible in the subjective evaluation based on experience, and can be seen. In other words, if the MTF is about 10% or more, it can be considered within the depth of field.
  • the condition for maximizing the depth range is that the MTF is maintained at about 10% at each depth end. This is shown in FIG. In the case where the MTF characteristics are set so as to have the focus position shifted from the near point side to the far point side as indicated by ⁇ and ⁇ from the reference MTF characteristic indicated by the solid line in FIG. In the embodiment (both in the combined depth of field on the far-viewing side at the time of two-focus switching and the combined depth of field on the close-up viewing side), the overlapping occurs at the depth edge of the hem where the MTF is 10% or more. Yes.
  • a composite image synthesized with overlapping at the depth end of the bottom where the MTF is 10% or more has a desirable composite depth of field without generating a depth gap.
  • the first to sixth embodiments described above satisfy this condition.
  • a depth gap portion where the MTF is less than 10% is included within the combined depth of field, and an image is displayed at the depth gap portion. This results in a blurred observation area where the image becomes blurred.
  • an endoscope system having a wide depth of field that can be clearly observed over a wide range without generating an unclear observation region even when two focal points are switched.
  • the setting is made so that the combined depth of field on the far-viewing side at the time of two-focus switching and the combined depth of field on the near-viewing side overlap (first to third and sixth embodiments).
  • a setting may be made such that a depth gap is generated without the continuous observation side combined depth of field and the close observation side combined depth of field being continuously connected (N ⁇ ). F gap).
  • the reference image sensor may be set to an image sensor that is focused on the far point side. If it does in this way, it has an effect which adjustment on a manufacture side is easy to perform.
  • a) remote focus adjustment (out of focus) is such that the image position is closer to the object side than the imaging surface (the direction in which the imaging device is extended).
  • b) near point focus adjustment is such that the image position is closer to the hand side than the imaging surface (the direction in which the imaging element is pulled).
  • the order of performing b) after a) is good. If the focus adjustment is performed in the order in which a) is performed after b), the lens may collide during the focus adjustment of the image sensor on the far point side after b). In this case, the focus adjustment b) must be performed again. That is, the focus adjustment of the near-point image sensor can be performed more smoothly with reference to the far-point image sensor that can fix the focus adjustment condition by focus adjustment first. In this case, in addition to focus adjustment, image correction such as geometric correction (position and rotation) excluding magnification and brightness can be performed more smoothly.
  • the objective optical system 16 and the like are switched between two focal points between the far-field observation state and the near-field observation state.
  • the present invention is not limited to the two-point focus switching, and may be configured to switch the focus (position) of multiple points such as three points and four points. Further, embodiments configured by partially combining the above-described embodiments and the like also belong to the present invention.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Endoscopes (AREA)

Abstract

　内視鏡システムは、ピント位置が異なる２つの光学像を得る内視鏡対物光学系と、２つの光学像を受光し、光電変換する２つの撮像素子と、２つの撮像素子による２つの光学像に対応する２つの画像を１つの画像に合成する画像合成処理部と、内視鏡対物光学系に設けた焦点切替用レンズの位置を移動し、近接観察と遠方観察の２つの観察領域の一方に内視鏡対物光学系の焦点を選択的に切り替える焦点切替機構と、を備え、画像合成処理部は、近接観察と遠方観察の各観察領域の夫々において、２つの画像を合成する。

Description

内視鏡システム
　本発明は内視鏡に設けた対物光学系を２つの撮像素子に結像する内視鏡システムに関する。
　近年、撮像素子を搭載した内視鏡を用いた内視鏡システムは医療用分野及び工業用分野において広く用いられるようになっている。　
　また、撮像素子の高画素化に伴い、被写界深度は一般的に狭くなるため、これに対応する種々の提案がある。　
　第１の従来例としての日本国特開平９－１１６８０７号公報には、合焦位置に配置した撮像素子に対して、被写界深度の範囲が該合焦位置に配置した撮像素子の被写界深度の範囲と共通部分を有する範囲内で合焦位置からずらして配置した少なくとも１つの撮像素子を配置して、該少なくとも１つの撮像素子の出力信号から高域信号成分を抽出して、前記合焦位置に配置した撮像素子の出力信号に加算する信号処理を行う撮像装置が開示されている。
　また、第２の従来例としての日本国特開２００３－７８８０２号公報には、距離が異なる被写体の像を撮像する撮像レンズを通過した光の光路を光路分割手段により複数の光路に分割し、分割された各光路にそれぞれピント位置が異なる撮像素子を配置し、各撮像素子をその光軸方向に沿って移動させる撮像素子駆動装置と、入力された撮像レンズのレンズパラメータに応じて各撮像素子の光軸上の位置を決定する演算処理装置と、各撮像素子から出力された映像信号を合成する画像合成装置とを具える撮像装置が開示されている。　
　なお、第３の従来例としての日本国特開２００７－３１３１６６号公報には、高画質の画像をえるためにフォーカス調整機構と、水平・垂直方向に約１／２ピッチ画素ずらして配置した２板撮像ユニットを備え、撮像素子の垂直方向画素ピッチと対物光学系のＦナンバーとを所定の条件を満たすように設定した内視鏡が開示されている。
　しかしながら第１の従来例の撮像装置を内視鏡に適応する場合、十分に絞りを開いて被写界深度を確保する事を前提にしているため、近接観察から遠方観察までより広い被写界深度が求められる内視鏡に適用した場合、両方の観察の場合に対して必要とされる被写界深度を満足させることは困難になる。　
　また、第２の従来例の撮像装置を、内視鏡の先端部に搭載しようとした場合、光路分割手段後に配置される各撮像素子を撮像駆動装置によって、各光路方向に駆動する構成となるため、内視鏡先端部の外径が大きくなり、内視鏡に求められる良好な挿入性を確保できない。
　また、第３の従来例は、解像度を向上するものであり、近接観察の場合と遠方観察の場合とで必要とされる被写界深度を満たすように設定することが困難になる。　
　本発明は上述した点に鑑みてなされたもので、近接観察及び遠方観察を行う内視鏡に適用でき、近接観察の場合及び遠方観察の場合にそれぞれ必要とされる被写界深度を満たすようにできる内視鏡システムを提供することを目的とする。
　本発明の一態様に係る内視鏡システムは、同一の被写体に対してピント位置が異なる２つの光学像を得る内視鏡対物光学系と、前記ピント位置が異なる前記２つの光学像を受光し、光電変換する２つの撮像素子と、前記２つの撮像素子により前記２つの光学像に対応する２つの画像を１つの画像に合成する画像合成処理部と、前記内視鏡対物光学系に設けた焦点切替用レンズの位置を移動し、近接観察と遠方観察の２つの観察領域の一方に前記内視鏡対物光学系の焦点を選択的に切り替える焦点切替機構と、を備え、前記画像合成処理部は、前記近接観察と前記遠方観察の各観察領域の夫々において、前記２つの画像を合成する。
図１は本発明の第１の実施形態の内視鏡システムの全体構成を示す図。 図２Ａは第１の実施形態における対物光学系及び撮像素子の構成を示す図。 図２Ｂは撮像素子の撮像面に取り付けられた補色系の色分離フィルタを示す図。 図３は被写界深度の説明図。 図４Ａは画像合成処理部の構成を示す図。 図４Ｂは第１の実施形態の動作内容を示すフローチャート。 図５はフォーカスレンズを用いた対物光学系の焦点切替による被写界深度を拡大する作用の説明図。 図６は第１の実施形態等における被写界深度等の数値データを表形式で示す図。 図７は第１の実施形態の変形例における撮像ユニットの構成を示す図。 図８は本発明の第２の実施形態における光源装置の構成を示す図。 図９は遠方観察及び近接観察におけるピント位置が異なる２つの撮像素子が１０％以上のＭＴＦを有する被写界深度の深度幅以内で、それぞれの被写界深度が重なるように設定してあることを示す図。
　以下、図面を参照して本発明の実施形態を説明する。　
（第１の実施形態）
　図１に示すように本発明の第１の実施形態の内視鏡システム１は、被検体内に挿入される内視鏡２と、この内視鏡２に照明光を供給する光源装置３と、内視鏡２に設けられた撮像手段に対する画像処理を行う画像処理装置としてのプロセッサ装置４と、プロセッサ装置４により生成された画像信号を内視鏡画像として表示する画像表示装置５とを有する。　
　内視鏡２は、被検体内に挿入される細長の挿入部６と、この挿入部６の後端に設けられた操作部７とを有し、操作部７から延出された照明光を伝送するライトガイド８が挿通された第１のケーブル９の端部のライトガイドコネクタ９ａは、光源装置３に着脱自在に接続される。
　光源装置３は、光源として例えばキセノンランプ等のランプ１１を内蔵する。なお、光源として、キセノンランプ等のランプ１１に限定されるものでなく、発光ダイオード（ＬＥＤと略記）を用いても良い。ランプ１１により発生した白色光は絞り１２により通過光量が調整された後、コンデンサレンズ１３により集光されてライトガイド８の入射端面に入射（供給）される。なお、絞り１２は、絞り駆動部１４により、絞り１２の開口量が可変される。　
　上記ライトガイド８は、入射端面に入射された照明光を伝送して、挿入部６の先端部６ａの照明窓の内側に配置された先端面から出射する。この先端面に対向して照明レンズ１５が配置されており、照明レンズ１５はライトガイド８の先端面から出射された光を照明窓から拡開して出射し、被検体内部の観察対象部位を照明する。
　照明された観察対象部位は、照明窓に隣接して設けられた観察窓に取り付けられた内視鏡対物光学系（以下、単に対物光学系と略記）１６により、その後方側に配置した２つの撮像素子１７ａ，１７ｂに光学像を結ぶようにしている。　
　本実施形態における対物光学系１６は、図２Ａに示すようにその光軸Ｏ上に沿って配置した複数の光学素子１６ａ～１６ｈを有すると共に、光学素子１６ｇの後方側で、かつ２つの撮像素子１７ａ，１７ｂの前方側となる両者の間の光軸Ｏ上に配置された、２つの光学像に分離する光学素子としてのプリズム１８を備える。なお、光学素子１６ｃと１６ｄとの間に明るさ絞り１６ｈが配置されている。
　このプリズム１８は、例えば直角三角形のプリズム素子１８ａ、１８ｂの両斜面を当接して形成され、プリズム素子１８ａの端面付近に（該端面に対向するように）一方の撮像素子１７ａが取り付けられ、プリズム素子１８ｂの端面付近に（該端面に対向するように）他方の撮像素子１７ｂが取り付けられている。なお、撮像素子１７ａと撮像素子１７ｂとは同じ特性であり、両特性が揃ったものを用いることが好ましい。　
　プリズム１８は、光学素子１６ａ～１６ｈを経て入射される光を、例えば等量の反射光と透過光とに分離することにより、透過光側の光学像と反射光側の光学像との２つの光学像に分離する。撮像素子１７ａは透過光側の光学像を受光して光電変換し、撮像素子１７ｂは反射光側の光学像を受光して光電変換する。
　本実施形態においては、撮像素子１７ａ、１７ｂは、ピント位置が異なるように、それぞれプリズム素子１８ａ、１８ｂの端面付近に取り付けられている。例えば、プリズム１８における撮像素子１７ａに至る透過光側の光路長（硝路長）ｄａに対して反射光側の光路長ｄｂが短く（小さく）なるように設定している。そして、両撮像素子１７ａ、１７ｂにおいて、撮像素子１７ａは撮像素子１７ｂに対してそのピント位置が相対的に近点側にシフトしており（ずれており）、撮像素子１７ｂは撮像素子１７ａに対してそのピント位置が相対的に遠点側にシフトしている。　
　なお、プリズム素子１８ａと１８ｂにおける両者の屈折率を異ならせることにより、撮像素子１７ａ、１７ｂに至る光路長を変え、両撮像素子１７ａ，１７ｂによるピント位置を相対的にずらすようにしても良い。
　また、両撮像素子１７ａ，１７ｂの各撮像面には、図２Ｂに示すように補色系の色分離フィルタ２０が取り付けられている。具体的には撮像面における水平方向及び垂直方向に所定の画素ピッチ（ピクセルサイズとも言う）Ｐixで配置された各画素の直前にマゼンタＭｇ、緑（グリーン）Ｇ，シアンＣｙ、黄色（イエロー）Ｃｙの４つの色フィルタ素子からなる色分離フィルタ２０が水平方向及び垂直方向に規則的に配列されている。　
　Ｍｇ，Ｇは、水平方向に交互に配置され、また垂直方向には２画素分の周期で配置されている。一方、Ｃｙ，Ｙｅは、水平方向には、Ｍｇ，Ｇの場合と同様に交互に配置されているが、垂直方向には２画素おいた画素位置において置換するようにした配置となっている。　
　なお、原色フィルタをＲ，Ｇ，Ｂで表すと、色透過特性の機能として、Ｍｇ＝Ｒ＋Ｂ、Ｃｙ＝Ｇ＋Ｂ、Ｙｅ＝Ｒ＋Ｇのような関係となる。
　上記対物光学系１６と、２つの撮像素子１７ａ，１７ｂとにより、２つの光学像を得て、２つの光学像を光電変換した２つの画像を取得する撮像ユニット１９が形成される。　
　また、本実施形態においては、対物光学系１６により、遠方観察と近接観察の２つの観察領域にピント又は焦点を選択的に合わせられるように焦点切替機構を設けている。　具体的には、対物光学系１６は、その光軸Ｏの方向における２つの位置Ｐａ，Ｐｂ（図２Ａ参照）に移動可能なフォーカスレンズ２１を有し、このフォーカスレンズ２１は、焦点切替機構を構成するアクチュエータ２２により、２つの位置Ｐａ，Ｐｂ間で一方の位置から他方の位置、他方の位置から一方の位置に移動するように駆動される。
　図２Ａの構成例の場合においては、フォーカスレンズ２１は、凹レンズと凸レンズとを接合した例えば正のパワーを持つ接合レンズにより構成され、このフォーカスレンズ２１は、その前方側（物体側）の符号１６ｄで示す明るさ絞りと接合レンズ１６ｆとの間に配置され、これらの間における明るさ絞り１６ｄの直後の位置Ｐａと、接合レンズ１６ｆの直前の位置Ｐｂとの２つの位置Ｐａ，Ｐｂに選択的に設定される。　
　なお、図５にて後述するように、フォーカスレンズ２１を前方側（物体側）の位置Ｐａに設定した状態においては撮像素子１７ａ、１７ｂにより遠方観察する場合の観察領域の被写体にピントが合うように設定されている。
　また、フォーカスレンズ２１を後方側の位置Ｐｂに設定した状態においては撮像素子１７ａ、１７ｂが近接観察する場合の観察領域の被写体にピントが合うように設定されている。　
　そして、両撮像素子１７ａ、１７ｂでのピント位置が互いにずらしてあり、各ピント位置は後述するようにＭＴＦ（Modulation Transfer Function）が所定の値以上となる各被写界深度の範囲内で重なる設定状態であるので、両撮像素子１７ａ、１７ｂで取得した２つの画像を合成することにより、広い被写界深度を有する合成画像が得られるようにしている。　
　図１に示すようにアクチュエータ２２は、挿入部６内を挿通された信号線２３と接続され、この信号線２３はさらに操作部７から延出された第２のケーブル２４内を挿通される。この第２のケーブル２４の端部の信号コネクタ２４ａは、プロセッサ装置４に着脱自在に接続され、上記信号線２３は、プロセッサ装置４内に設けたアクチュエータ制御部２５に接続される。
　このアクチュエータ制御部２５は、例えば内視鏡２の操作部７に設けた切替操作スイッチ２６からの切替操作信号も入力される。アクチュエータ制御部２５は、切替操作スイッチ２６の操作に応じてアクチュエータ２２を電気的に駆動する駆動信号を印加して、フォーカスレンズ２１を移動する。　
　なお、切替操作信号を発生する切替操作手段は、切替操作スイッチ２６に限らず、切替操作レバー等でも良い。上記フォーカスレンズ２１と、アクチュエータ２２と、アクチュエータ制御部２５とにより、焦点切替機構が形成される。　
　上記撮像素子１７ａ，１７ｂは挿入部６、操作部７、第２のケーブル２４内を挿通された信号線２７ａ，２７ｂと接続され、信号コネクタ２４ａがプロセッサ装置４に接続されることにより、プロセッサ装置４内に設けた画像処理部としての画像プロセッサ３０と接続される。
　この画像プロセッサ３０は、ピント位置が異なる２つの撮像素子１７ａ、１７ｂにより撮像され、光電変換された画像の画像信号（単に画像と略記）をそれぞれ読み出す画像読出部３１と、この画像読出部３１により読み出された２つの画像に対する画像補正を行う画像補正処理部３２と、補正された２つの画像を合成する画像合成処理を行う画像合成処理部３３とを有する。
　画像補正処理部３２は、２つの撮像素子１７ａ，１７ｂの撮像面にそれぞれ結像される夫々の像における相対的な倍率の差異と、位置の差異と、回転の差異と、明るさの差異とを、それぞれ合致させるように、撮像素子１７ａ，１７ｂにより光電変換された２つの画像に対して画像処理により行う。
　像を2つに分離し異なる撮像素子に夫々結像させる場合、以下の幾何的な差異が生じる場合がある。　
　２つの撮像素子１７ａ，１７ｂの撮像面にそれぞれ結像される夫々の像は、相対的に倍率ズレ、位置ズレ、回転方向のズレが発生したり、２つの撮像素子１７ａ，１７ｂの感度差などから明るさの差異が生じる場合がある。これらの差異を製造時などにおいて、完全に解消する事は難しい。しかし、それらのズレ量が大きくなると、合成画像が２重画像となったり、不自然な明るさムラ等が生じてしまう。このため、本実施形態では、画像補正処理部３２にて上述した幾何的な差異、明るさ差異を補正する。
　前記相対的な明るさの差異を補正する場合、２つの像または画像のうち輝度の低い方の像または画像、もしくは２つの像または画像の相対的に同一位置における輝度の低い方を基準にして補正を行う。　
　２つの撮像素子１７ａ，１７ｂの各撮像チップにおける感度差やオンチップレンズの製造誤差等で同じ被写体を撮像した場合の明るさ（輝度値）に差異が生じる場合がある。
　このような場合、相対的に明るい方、つまり輝度信号(例えばG信号)の強度（信号レベル）が低い方に合わせる様に明るさ補正を行なう。この補正と逆に明るい方に合わせると、画像に含まれるノイズ成分まで増幅することが必要になり、Ｓ／Ｎが劣化した合成画像になってしまう。　
　上記のように輝度の低い方を基準にし、輝度の高い方を基準となる輝度の低い方の輝度に合わせるようにゲインを低下（または減衰）させるような明るさ補正を行うことにより、Ｓ／Ｎの劣化による合成画像の画質の低下を防止できるようにしている。
　上記画像合成処理部３３は、２つの画像における空間的に同一の画素領域それぞれにおけるコントラストを比較し、相対的にコントラストが高い方の画素領域を選択することにより、２つの画像から合成された１つの画像としての合成画像を生成する。なお、２つの画像のコントラスト差が小さい場合は各画像に所定の重み付けして加算する合成画像処理により、合成画像を生成する。　
　図４Ａはこのような画像合成処理を行う画像合成処理部３３の構成例を示す。同一の被写体６１に対して、対物光学系１６は、ピント位置が異なる２つのＣＣＤ１７ａ，１７ｂの撮像面に２つの光学像を結像する。ＣＣＤ１７ａ，１７ｂにより光電変換され、画像補正処理部３２等を経た（ＣＣＤ１７ａ、１７ｂの撮像にそれぞれ基づく）第１及び第２の画像データは、画像合成処理部３３内の２つのフレームメモリ６２ａ，６２ｂに画素単位で格納される。
　なお、２つのフレームメモリ６２ａ，６２ｂに同一部位に対応する画像データを１フレーム分格納する場合、同一部位に対応する第１の画像データと第２の画像データとは同じアドレスのメモリセルに格納される。
　また、以下の説明においては、１つの色信号成分の場合のコントラスト値に対応する輝度値又は輝度レベルの信号で説明し、他の色信号成分に対しても同様の処理を行うとして説明する。なお、Ｒ，Ｇ，Ｂの色成分から公知の輝度信号を生成し、２つの輝度信号のコントタストの比較結果により同様の処理を行うようにしても良い。
　同一のアドレスの指定により２つのフレームメモリ６２ａ，６２ｂから同時に読み出された第１の画像及び第２の画像の各信号ｓｉ１，ｓｉ２は、差動アンプなどにより構成される差分算出回路６３に入力され、差分算出回路６３は例えば第１の画像の輝度値から第２の画像の輝度値を減算する等して両信号ｓｉ１，ｓｉ２の差分量を算出する。また、差分算出回路６３は、差分量の正又は負の極性により、いずれの画像の輝度レベルが他方よりも高い（大きい）ことも判定して、２値信号ｓｐを出力する。例えば、極性が正であると、ｓｉ１＞ｓｉ２となり、負であると、ｓｉ１＜ｓｉ２となる。
　この差分算出回路６３により算出された差分量の絶対値｜ｓｉ１－ｓｉ２｜は、比較回路６４に入力され、比較回路は差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ以上であるか否かを判定する。比較回路６４は、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ以上である場合にはＨレベル、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ未満である場合にはＬレベルの２値信号を出力する。、比較回路６４の２値信号と、差分算出回路６３による極性に対応する２値信号ｓｐは、デコーダ６５に入力され、デコーダ６５は、２つの２値信号から選択回路６６を構成する２つの切替回路６６ａ，６６ｂの切替を制御する。
　切替回路６６ａの接点ａ，ｂには、それぞれ信号ｓｉ１，ｓｉ２が入力され、切替回路６６ｂの接点ａ，ｂには、切替回路６６ａの共通接点ｃを経た信号と加算器６７からの信号とが入力され、切替回路６６ｂの共通接点ｃから画像合成処理した合成信号ｓｃを出力する。
　加算器６７は、信号ｓｉ１，ｓｉ２を加算して切替回路６６ｂの接点ｂに出力する。
　デコーダ６５は、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ以上である場合には切替回路６６ｂの接点ａを選択し、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ未満である場合には切替回路６６ｂの接点ｂを選択する。また、デコーダ６５は、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ以上である場合においては、極性の２値信号ｓｐに応じて、切替回路６６ａの接点ａ又はｂを選択する。具体的には、２値信号ｓｐがＨレベルであると信号ｓｉ１を選択（図４Ａの実線で示す選択状態）し、２値信号がＬレベルであると信号ｓｉ２を選択する。つまり、切替回路６６ａはコントラスト差が所定値以上のコントラスト差がある場合にはコントラストが高い方の画像部分を選択する。一方、コントラスト差が小さい場合には、２つの信号ｓｉ１，ｓｉ２を加算等して合成信号として出力する。
　この場合の動作は以下のようになる。差分算出回路６２は、２つの信号ｓｉ１，ｓｉ２に対して、その差分量を算出する。差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ以上である場合には、切替回路６６ａは輝度レベルが高い方の信号を選択し、さらに切替回路６６ｂを経て合成信号ｓｃとして出力する。
　一方、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ未満である場合には、切替回路６６ｂは加算器６７の加算された信号を選択し、この信号を合成信号ｓｃとして出力する。
　なお、差分量の絶対値｜ｓｉ１－ｓｉ２｜が閾値Ｖｔ未満である場合において、信号ｓｉ１，ｓｉ２を加算して合成信号ｓｃを生成する代わりに、以下のように重み付けして合成信号ｓｃを生成するようにしても良い。図４Ａにおいて点線で示すように、加算器６７の２つの入力側に乗算器６８ａ，６８ｂを配置し、乗算器６８ａ，６８ｂはそれぞれ信号ｓｉ１，ｓｉ２と、ＲＯＭ６９から出力される重み付け係数ｃ１，ｃ２とを乗算して加算器６７に出力する。
　なお、ＲＯＭ６９には、差分量に応じて予め設定された重み付け係数ｃ１，ｃ２が格納されており、ＲＯＭ６９は、差分量の絶対値｜ｓｉ１－ｓｉ２｜と、２値信号ｓｐにより、信号ｓｉ１，ｓｉ２にそれぞれ乗算する重み付け係数ｃ１，ｃ２を出力する。
ＲＯＭ６９に格納される重み付け係数ｃ１，ｃ２は、差分量が０であるとｃ１＝ｃ２＝１となる。また、ＲＯＭ６９に格納される重み付け係数ｃ１，ｃ２は、差分量の絶対値｜ｓｉ１－ｓｉ２｜が大きい程、輝度レベルが高い方の信号に対する重み付け係数が１より大きく、他方の信号に対する重み付け係数が１より小さくなるように設定されている。そして、加算器６７は重み付け係数ｃ１，ｃ２がそれぞれ乗算された信号ｓｉ１，ｓｉ２を加算して合成信号ｓｃとして出力することになる。
　上記画像プロセッサ３０は、画像合成処理部３３により合成された１つの画像に対して、輪郭強調、ガンマ補正等の後段画像処理を行う後段画像処理部３４と、後段画像処理された画像を出力する画像出力部３５とを有し、画像出力部３５から出力される画像は画像表示装置５に出力される。
　また、この画像プロセッサ３０は、画像読出部３１により読み出された画像から基準の明るさに調光するための調光信号を生成する調光部３６を有し、調光部３６により生成した調光信号を光源装置３の絞り駆動部１４に出力する。絞り駆動部１４は、調光信号に従って、基準の明るさを維持するように絞り１２の開口量を調整する。　
　また、本実施形態においては、画像補正処理部３２において、画像を補正する場合に使用する補正パラメータ（の情報）を格納した補正パラメータ格納部３７を設けている。
　各内視鏡２にはその内視鏡２に固有の内視鏡識別情報（内視鏡ＩＤ）を格納したＩＤメモリ３８を有すると共に、その内視鏡２において補正すべき固有の補正パラメータがある場合には、その内視鏡２に対応した補正パラメータを格納した補正パラメータ格納部３７が設けてある。　
　図１に示す構成例では、内視鏡２における例えばＩＤメモリ３８内に、補正パラメータを格納した補正パラメータ格納部３７を設けている。　
　なお、補正すべき固有の補正パラメータがない場合には、補正パラメータ格納部３７を設けることが不必要になる。また、補正パラメータ格納部３７をＩＤメモリ３８の内部に設ける場合に限定されるものでなく、ＩＤメモリ３８と別のメモリに設けるようにしても良い。　
　そして、プロセッサ３０の制御部３９は補正の有無を内視鏡２側に設けた内視鏡ＩＤで識別して、補正有りの場合には内視鏡２側に格納されているＩＤメモリ３８内の補正パラメータ格納部３７から補正パラメータを読み取り、この補正パラメータを画像補正処理部３２に送る。　
　画像補正処理部３２は、制御部３９から転送された上記補正パラメータに基いて各内視鏡２に搭載された撮像ユニット１９に対応した画像補正を行う。　
　また、画像補正処理部３２は、補正パラメータを用いて、２つの像または画像における１つを基準像または基準画像として上述した倍率の差異の補正、位置の差異の補正等、画像の補正を行う。
　例えば、２つの画像で倍率ズレが生じる場合は、対物光学系１６の仕様による場合がある。　
　対物光学系１６のサイズを比較的小さくしようとした場合、テレセントリック性を崩して撮像素子１７ａ，１７ｂへの光線が斜めに入射するような設計が行なわれる場合がある。例えば、光軸とのなす角を入射角として、時計回りをプラス、反時計回りをマイナスとすると、マイナスの入射角となるような設計が行なわれる。　
　この様なテレセントリック性が崩れた対物光学系でピント位置をズラすと２つの画像間で倍率ズレが生じる事になる。
　この様な設計上の仕様であれば、予めそのズレ量を前記補正パラメータ格納部３７に格納しておき、対象の内視鏡２がプロセッサ装置４に接続された場合、その内視鏡２を認識して前記補正パラメータ格納部３７から対応するパラメータを呼び出して補正を行なうようにする。　
　また、撮像ユニット１９の組立て時に２つの画像の相対的な画素の位置が微小にズレる場合がある。この場合、製造時のズレ量を補正パラメータ格納部３７に格納しておき、画像補正処理部３２にてそのズレ補正を行なう様にする。　
　位置のズレ補正は例えば撮像素１７ａで撮像された画像と撮像素子１７ｂで撮像された画像との相対的な位置が合致するように２つの画像の読出し位置を修正する様な処理が行なわれ、位置ズレが補正された後、画像合成処理部３３に出力される。
　なお、本実施形態における予め設定された補正パラメータによる補正を行う代わりに、内視鏡使用時に、別途用意されるアジャスト用基準チャートによって　補正を行なっても良い。例えば基準チャートを内視鏡２の先端部６ａに所望の位置に配置するようにし、基準チャートに対する２つの画像のズレを画像補正処理部３２にて読み取り、そのズレ補正するようにしても良い。　
　また、制御部３９は、アクチュエータ制御部２５に対して、各内視鏡２に搭載された対物光学系１６を構成するフォーカスレンズ２１の駆動すべき位置が異なるような場合においても、駆動すべき位置の情報を送り、アクチュエータ制御部２５は内視鏡２の種類が異なるような場合にもアクチュエータ２２を適切に駆動する制御を行う。
　なお、アクチュエータ制御部２５が制御部３９を介することなく、ＩＤを取得して、内視鏡２の種類が異なる場合にもアクチュエータ２２を適切に駆動する制御を行うようにしても良い。　
　また、本明細書における被写界深度の定義を、図３等を参照して以下に説明する。　
図３は幾何光学的に決まる被写界深度の説明図を示す。　
　一般的な内視鏡において、ベスト距離をＸとした場合の対物光学系（その焦点距離Ｆｌ）を用いて像面位置Ｘ'に、図３中に示す画素ピッチＰixの撮像素子を配置した場合を考える。撮像素子を固定した条件において、物体を（Ｘから）Ｘｎまで近接すると、近接時の像面位置Ｘｎ'は、撮像素子の撮像面位置からずれることになる。
　このとき、ピントが合っていると見なすことができる最大の錯乱円を、許容錯乱円として、その円径をδとすると、撮像素子の撮像面における錯乱円径がδよりも小さいと認識できる場合、ＸからＸｎまでの物体像はピントが合っていると見なすことができる。　
　即ち、錯乱円径がδと一致するまでの範囲を近点側の被写界深度と定義することができる。
　このとき、ニュートンの結像式から、以下の式が成立する。　
　　　　１／Ｘｎ　－　１／Ｘ　＝　δＦno／Ｆｌ２…（１）
　物体を（Ｘから）遠点側にＸｆまで移動した場合を考えることにより、同様に被写界深度の遠点側での式も以下のように定義される。　
　　　　１／Ｘ　－　１／Ｘｆ　＝　δＦno／Ｆｌ２…　（２）
　（１）式と（２）式を合わせると、
　　　　１／Ｘｎ　－　１／Ｘｆ　＝　２δＦno／Ｆｌ２…　（３）
となる。そして、焦点深度ｄに対応した被写界深度がＸｎ－Ｘｆとなる。　
　ただし、上記のようにベスト距離をＸ、被写界深度近点までの距離をＸｎ、被写界深度遠点までの距離をＸｆ、許容錯乱円径をδ、対物光学系の焦点距離をＦｌ、対物光学系の有効ＦナンバーをＦnoとしている。　
　以上は幾何光学的に決まる一般的な被写界深度の定義である。
　本実施形態は、幾何光学的に決まる被写界深度の場合に対して、合成画像により被写界深度を拡大することができるが、回折の影響を無視できない場合においても合成画像により被写界深度を拡大することができるようにしている。　
　撮像素子をより微細化し、高画素化していくと被写界深度を定義する際には、波動光学的な影響が無視できない事が一般的に知られている。これは焦点位置において、幾何光学的に定義したスポットサイズから、回折の影響からスポットサイズが広がるため幾何光学的な被写界深度の計算からズレが生じるためである。従って、本実施形態のような回折限界に近い有効ＦナンバーＦnoまで絞られるケースが多い多画素の撮像素子を搭載した内視鏡２では、回折が無視できない影響となる。なお、本実施形態の撮像素子１７ａ，１７ｂも図３に示した撮像素子の場合と同様に水平方向及び垂直方向に同じ画素ピッチＰｉｘで規則的に画素が配置されている。
　この場合には、像面上の評価空間周波数をＦiとすると、
　Ｆi＝1/k1・Ｐix　…（４）
　となる。　
　このＦiにおけるデフオーカスのＭＴＦ（Modulation Transfer Function）が約10％あれば、主観評価では像のボケは認識できず「見えている」と判断できる。　
　言い換えると、ＭＴＦは約IO％となるデフオーカス位置が深度端と見なす事ができる。　
　本明細書では波動光学的な被写界深度端をＦi=1/k1・Ｐixとした際の評価空間周波数にて評価したＭＴＦの10％を深度端として定義している。　
　また、本実施形態においては、上述した撮像素子１７ａ，１７ｂを用いた撮像ユニット１９として図６の表に示すような特性が得られるように設定している。
　図６においては、Ｆno／Ｐix、Ｐix、Ｆno、ｋ１、ｋ２、far1深度（遠方観察時における撮像素子１７ａによる被写界深度）、far2深度（遠方観察時における撮像素子１７ｂによる被写界深度）、合成far深度（遠方観察時における合成画像の被写界深度）、near1深度（近接観察時における撮像素子１７ａによる被写界深度）、near2深度（近接観察時における撮像素子１７ｂによる被写界深度）、合成near深度（近接観察時における合成画像の被写界深度（範囲））、Near深度幅（合成near深度近点端から合成near深度遠点端までの深度幅）、撮像方式、総画素数（撮像素子の総画素数）の数値データを示している。また、ＢＳＴは、ＭＴＦが最大となる場合の物体距離としてのベスト距離を示している。
　以下は、その概略を示す。撮像素子１７ａ、１７ｂとして、１００万画素（１０３０５８０画素）で、１．７μｍの画素（ピクセル）サイズを有する補色系の固体撮像素子を採用している。　
　また、本実施形態においては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子１７ａ．１７ｂの垂直方向ピクセルサイズをＰixが１．７０μｍ、補正パラメータとしての解像力係数ｋ１を３．００，Ｆ値マージンｋ２を１．００，対物光学系１６の有効ＦナンバーＦnoを７．６５に設定している。
　つまり、
λ　　 0.5461
Pix　　1.70　
KI　　 3.00
ｋ２　 1.00　　
Ｆno　 7.65　　
　そして、本実施形態の撮像ユニット１９は、以下の条件
２．４≦Ｆno/Ｐix≦４．５　…（５）
　を満たすように設定している。（５）式の条件は、以下のような理由による。
　対物光学系１６を構成するレンズは、結像する際、光が回折の影響を受けることが知られている。 対物光学系１６の有効ＦナンバーＦnoが大きくなるほど、点像は回折の影響により大きくなり、この点像の大きさがある限界を越えるといくらピントを合わせても、被写体の細部がぼけたように見えてしまう。　
　この限界は、Ｒayleighにより、2つの点像が接近した時、別々の像として識別できる限界の距離として規定されており、λを光の波長、有効ＦナンバーをＦnoとすると、1.22・λ・Ｆnoで表される。2つの点像の分離限界の距離、つまり分解能Ｒは、
　Ｒ=1.22・λ・Ｆno　…（６）
　となる。
　一方、撮像素子として、電荷結合素子（ＣＣＤと略記）やＣＭＯＳセンサで撮像する場合、サンプリング理論により限界の分解能は決定される。撮像素子の垂直方向のピクセルサイズをＰixとすると、
　Ｒ＝2・Ｐix　…（７）
　現実的には、採用する撮像方式における補間方法や電気系の特性に影響されるため、分解能Ｒは、任意の係数ｋ１を用いて以下のように表される。　
　Ｒ＝ｋ１・Ｐix　　…（８）
係数ｋ１は、撮像素子の性能を十分に引き出す必要があるため一般的には２≦ｋ１≦３程度となる。
（６）、（８）より
　　　ｋ１ ・Ｐix＝1.22・λ・Ｆno　…（９）
となる。また、対物光学系１６に設定される有効ＦナンバーＦnoは、製造バラツキなどを考慮して光学性能を十分に発揮できるようにある程度余裕を持たせる必要がある。　
従って、Ｒayleigh限界式で規定される有効ＦナンバーＦnoは、実際には任意の係数ｋ２を考慮して設定される。つまり、
　kl・Ｐix＝1.22・λ・Ｆno・ｋ２　…（１０）
　のように設定される。尚、係数ｋ２は、対物光学系１６のサイズや被写界深度とのバランスを考慮すると、０．７≦ｋ２≦１程度が妥当な範囲となる。　
　ただし、撮像素子の性能が活かされる前提で、多少の解像力劣化を許容して被写界深度の拡大を優先する場合は、０．７≦k２≦１．２程度に設定しても構わない。
(９)式、(１０)式より設定すべき対物光学系１６の有効ＦナンバーＦnoは、
Ｆno=Ｆno*ｋ２＝(1/1.22・λ)・Ｐix・ｋ１　…（１１）
となる。　
　ここで(１１)式を有効ＦナンバーＦnoと、ピクセルサイズＰixの関係で示すと以下の(１２)式で示せる。　
　　　　Ｆno/Ｐix＝(1/1.22・λ)・ｋ１・ｋ２　…（１２）
高画素の撮像素子を用いた内視鏡システムにおいては、上述した
　　　　2.4≦Ｆno/Ｐix≦4.5　…（５）
である事が望ましい。
　仮に（５）式の範囲の下限の２．４を逸脱してより小さくなると、対物光学系１６の有効ＦナンバーＦnoが小さくなりすぎて所望の被写界深度を得られない。もしくは、被写界深度は十分であるが、イメージャのPixサイズが大きく解像力が低くなる。または、多画素化して解像力は向上するがイメージャサイズが大きくなるため、対物光学系１６が大型化して、内視鏡２の先端部６ａに搭載した場合、外径が大きくなってしない（挿入性が低下するため）好ましくない。　
　また、反対に（５）式の範囲の上限を超えて大きくなると、対物光学系の有効ＦナンバーＦnoが大きくなりすぎて所望の明るさが得られない。　
　同時に回折限界を大き<越えてしまう、もしくは妥当な補間方式でないために解像力の劣化が生じてしまう。　
　本実施形態における上述した図６の表に示す設定においては、撮像ユニット１９は補色系で同時式であり、この場合には係数ｋ１を３程度にすることが一般的である。また、ピクセルサイズが１．７μｍで画素の補色系の同時式撮像素子を用い、対物光学系１６の回折限界Ｆナンバーからのマージン係数ｋ２をｋ２＝１として（１２）式より
Ｆno／Pix＝4.5　…（１３）
となる。
　このような構成の内視鏡システム１は、同一の被写体に対してピント位置が異なる２つの光学像を得るための内視鏡対物光学系としての対物光学系１６と、前記ピント位置が異なる前記２つの光学像を受光し、光電変換する２つの撮像素子１７ａ，１７ｂと、前記２つの撮像素子１７ａ，１７ｂにより前記２つの光学像に対応する２つの画像を１つの画像に合成する画像合成処理部３３と、前記内視鏡対物光学系に設けた焦点切替用レンズとしてのフォーカスレンズ２１の位置を移動し、近接観察と遠方観察の２つの観察領域の一方に前記内視鏡対物光学系の焦点を選択的に切り替える焦点切替機構を構成するアクチュエータ２２と、を備え、前記画像合成処理部３３は、前記近接観察と前記遠方観察の各観察領域の夫々において、前記２つの画像を合成することを特徴とする。
　次に本実施形態の動作を説明する。以下においては、内視鏡２を用いてユーザとしての術者が体腔内を内視鏡検査する場合における本実施形態の動作を説明する。　
　図１に示すように内視鏡２を光源装置３と、プロセッサ装置４に接続して、術者は電源をＯＮする。　
　図４Ｂにおける最初のステップＳ１の初期設定として、制御部３９は、遠方側を観察領域とする設定状態にする制御を行う。そして、制御部３９は、この初期設定の状態における切替操作スイッチ２６が遠方側を観察領域とする信号を制御部３９に出力する設定状態であると見なす。
　この初期設定に対応して、ステップＳ２に示すように制御部３９は、アクチュエータ制御部２５、アクチュエータ２２を介してフォーカスレンズ２１を駆動し、対物光学系１６が遠方側を観察領域とするように遠点側にピントがあった設定状態にする。　
　また、この場合、ステップＳ３に示すように画像補正処理部３２は、２つの撮像素子１７ａ、１７ｂによる２つの画像を、補正パラメータを用いて補正する。　
　また、ステップＳ４に示すように、この画像補正処理部３２により補正された２つの画像に対して、画像合成処理部３３は、合成した合成画像を生成し、画像表示装置５側に出力し、画像表示装置５は、合成画像を表示する。
　図５（Ａ）は、ステップＳ２に対応する撮像ユニット１９の撮像状態を示す。
　図５（Ａ）は、対物光学系１６を遠方の観察領域にフォーカスするようにフォーカスレンズ２１を設定した状態における対物光学系１６による撮像素子１７ａ，１７ｂへの結像する様子を示す。　
　図５（Ａ）は、フォーカスレンズ２１を前方側の位置Ｐａに設定（切替）した状態に対応した対物光学系１６を示し、その結像側に２つの光学像に分離するプリズム１８が配置され、各端面に取り付けた撮像素子１７ａ，１７ｂにより２つの光学像を受光し、それぞれ光電変換した信号を出力する。　
　この遠方観察の状態において、２つの撮像素子１７ａ，１７ｂにより得られる合成画像により、以下のように被写界深度を拡大する。
　上述したようにプリズム１８における撮像素子１７ａ，１７ｂに至る硝路長が異なっており、撮像素子１７ａ，１７ｂによりピント位置が相対的に異なった像の画像を取得する。　
　例えば、撮像素子１７ｂには、（遠方）遠点側にピントが合った像が結像され、撮像素子１７ａには、撮像素子１７ｂに対して相対的により近接側にピントが合った像が結像される。　
　この遠方の観察領域の場合における撮像素子１７ａでの被写界深度をＸａｆ、撮像素子１７ｂでの被写界深度をＸｂｆとすると、被写界深度Ｘｂｆの近点側の深度端と、被写界深度Ｘａｆの遠点側の深度端とが重なるように撮像ユニット１９（の対物光学系１６と撮像素子１７ａ，１７ｂ）が設定されている。
　図３において説明した被写界深度を適用すると、図５（Ａ）に示すように撮像素子１７ａ、１７ｂに結像する像に対する被写界深度はＸａｆとＸｂｆとなる。　
　また、図１、図４Ａの画像合成処理部３３による画像合成処理により合成した場合には遠方観察にピントを合わせた状態での合成画像の場合に対応する被写界深度を合成被写界深度とした場合、その合成被写界深度としてＸａｆ＋Ｘｂｆを得ることができる。但し、重なり部分においては（コントラスト差が小さい領域）、各画像に所定の重み付けして加算する合成画像処理により一つの合成被写界深度を得る。つまり、合成被写界深度は、Ｘａｆ＋Ｘｂｆ（６．５４ｍｍ～１２８．５９ｍｍ）を得る。
　特に内視鏡検査において上述したように広い範囲を俯瞰してスクリーニングする際に、このように広い合成被写界深度Ｘａｆ＋Ｘｂｆが得られると、内視鏡検査を円滑に行うことができる。　
　これに対して、狭い被写界深度しか得られない場合には、スクリーニング中に得られる画像における例えば近点側部分が不鮮明となる可能性が発生してしまい、内視鏡検査を円滑に行い難くなる。
　図４ＢのステップＳ５に示すように制御部３９は、術者により切替操作スイッチ２６が操作されたか否かをモニタし、操作されない場合には、ステップＳ５の処理に戻る。　
　術者は、スクリーニングを終了して、より近接して診断を行おうとする場合には、切替操作スイッチ２６を操作する。　
　切替操作スイッチ２６が操作された場合には制御部３９は、ステップＳ６の処理に進む。ステップＳ６において、制御部３９は、観察領域を近接側に設定する制御を行う。制御部３９は、アクチュエータ制御部２５、アクチュエータ２２を介してフォーカスレンズ２１を駆動し、対物光学系１６が近接側を観察領域とするように近点側にピントがあった設定状態にする。
　また、この場合、ステップＳ７に示すように画像補正処理部３２は、２つの撮像素子１７ａ、１７ｂによる２つの画像を、補正パラメータを用いて補正する。ただし、ステップＳ２に対してステップＳ６の補正量に大きな差異がなければ同一パラメータとして新たに補正を行なわなくても良い。次に、ステップＳ８に示すように、この画像補正処理部３２により補正された２つの画像に対して、画像合成処理部３３は、合成した合成画像を生成し、画像表示装置５側に出力し、画像表示装置５は、合成画像を表示する。　
　図５（Ｂ）は、ステップＳ６に対応する撮像ユニット１９の撮像状態を示す。　
　図５（Ｂ）は、図５（Ａ）においてフォーカスレンズ２１を後方側の位置Ｐｂに設定（切替）して近接観察する観察領域にピント（焦点）を合わせた状態に対応した説明図である。
　この近接観察の状態においても、２つの撮像素子１７ａ，１７ｂにより得られる合成画像により、図５（Ａ）の場合と同様に以下のように被写界深度を拡大することができる。　
　撮像素子１７ａでの被写界深度をＸａｎ、撮像素子１７ｂでの被写界深度をＸｂｎとすると、被写界深度Ｘｂｎの近点側の深度端と、被写界深度Ｘａｎの遠点側の深度端とが重なるように撮像ユニット１９（の対物光学系１６と撮像素子１７ａ，１７ｂ）が設定されている。　
　また、図１の画像合成処理部３３による画像合成処理により合成した場合には近接観察の観察領域にピントを合わせた状態での合成画像の場合に対応する被写界深度を合成被写界深度とした場合、その合成被写界深度としてＸａｎ＋Ｘｂｎを得ることができる。
　特に内視鏡検査において、病変の詳細を観察したり、診断する際はこのように近接して観察する近接観察の状態に設定される。　
　本実施形態においては高い解像力を保ちつつ広い合成被写界深度Ｘａｎ＋Ｘｂｎを得ることができるので、病変の詳細を鮮明に観察でき、診断を円滑に行うことができる。　
　また、本実施形態においては、図５（Ａ）及び図５（Ｂ）に示すように遠方観察の場合の合成被写界深度Ｘａｆ＋Ｘｂｆ（の範囲）と、近接観察の場合の合成被写界深度Ｘａｎ＋Ｘｂｎ（の範囲）とが重なるように設定されている。このため、本実施形態においては、遠方観察の状態と近接観察の状態とを切り替えた場合において、両観察状態における中間に不鮮明となる（ぼける）観察領域が発生することなく観察することができるため、術者は内視鏡検査を円滑に行うことができる。
　本実施形態は、上記の構成及び図４Ｂ、図５にて説明したように、多画素化した撮像素子を使用した場合にも解像力を落とすことな<被写界深度を拡大する事が可能となる。更に焦点切替機構又はフォーカシング機構を設けているので、観察範囲を切り替えて高画質の内視鏡画像により、内視鏡検査に対する観察、診断を円滑に行なうことができる。　
　図４Ｂにおいて、ステップＳ８の次のステップＳ９において制御部３９は、内視鏡検査を終了の指示操作が行われたか否かを判定し、終了の指示操作が行われた場合には内視鏡検査を終了し、終了の指示操作がされていない場合には次のステップＳ１０において切替操作スイッチ２６が操作されたか否かを判定する。
　切替操作スイッチ２６が操作されていない場合には、ステップＳ１０の処理を続行し、切替操作スイッチ２６が操作された場合にはステップＳ２に戻り、観察領域を遠方側に設定して、上述した動作を繰り返す。　
　このような動作を行う本実施形態によれば、遠方側及び近接側のいずれの観察領域に設定した場合にも、被写界深度を拡大できる。　
　また、本実施形態は、近接観察及び遠方観察を行う内視鏡に適用でき（つまり、内視鏡２の挿入部６の先端部６ａに搭載でき）、近接観察の場合及び遠方観察の場合にそれぞれ必要とされる被写界深度を満たすようにできる内視鏡システムを提供できる。　
　また、上述した（５）式を満たすように設定することにより、所望とする被写界深度を得られ、かつ内視鏡２の先端部６ａに搭載可能な小型のサイズにでき、また所望の明るさを確保できると共に、解像力の劣化を防止できる。
　なお、ピント位置が異なる２つの光学像を得る対物光学系１６は、主光線が光軸と平行となる（または対物光学系１６の後側焦点の位置に絞りを配置した）テレセントリックにしても良い。　
　対物光学系１６がテレセントリックであれば、ピント位置による倍率ズレは生じないため、画像処理による補正が不必要になり合成画像を生成する画像処理アルゴリズムの簡略化ができ、好ましい。　
　内視鏡２の挿入部６の先端部６ａに搭載する対物光学系１６として、その小型化を狙う場合には、対物光学系１６のテレセントリック性を崩してもよい。しかしながら、撮像素子１７ａ、１７ｂの撮像面への入射角をあまり大きくする、ピント位置による倍率差が大きくなり、上述の画像補正処理による補正量が大きくなり、画質の劣化が生じ易くなり、好ましくない。
　このため、ピント位置が異なる２つの光学像を得る対物光学系１６は、撮像素子１７ａ，１７ｂの撮像面に結像する光の入射角が、10度未満に設定することが望ましい。　なお、上述した図２等に示す実施形態においては、２つの像に分離する光学素子として直角３角柱形状のプリズム素子１８ａ，１８ｂを用いたプリズム１８を用いていたが、図７に示すような構成でも良い。　
　図７における対物光学系５１を構成するプリズム５４は、透過光を受光する撮像素子１７ａが取り付けられた第１プリズム５４ａと、反射光を受光する撮像素子１７ｂが取り付けられた第２プリズム５４ｂとからなる。この対物光学系５１と撮像素子１７ａ、１７ｂとにより撮像ユニット５３が形成される。
　また、この場合のプリズム５４を除く対物光学系５１は、光学素子５２ａ～５２ｆを備え、光学素子５２ｃがフォーカスレンズ２１を形成している。なお、光学素子５２ｃと５２ｄとの間に明るさ絞り５２ｆが配置されている。　
　図７に示す対物光学系５１においては、ペンタプリズムにより構成される第２プリズム５４ｂにおける、第１プリズム５４ａとの接合面Ｍ１は、ハーフミラーとして機能する誘電体膜が（ミラー）コーティングされている。　
　そして、対物光学系５１の光軸Ｏに沿って入射した光は、この接続面において約半分（５０％）が透過して撮像素子１７ａの撮像面に光学像を結び、残りの約半分が１回目の反射がされた後、反射光側の端面Ｍ２には、ほぼ全反射するように誘電体膜が（ミラー）コーティングされた反射面が形成され、この反射面で２回目の反射された後、この反射光に対向する端面に取り付けられた撮像素子１７ｂにより受光される。尚、端面Ｍ２のコーティングはAl‐SiO2やAg－SiO2等の金属コーティングとしても良い。
　この場合には、対物光学系５１を経て撮像素子１７ｂに光学像が結像されるまでに２回、つまり偶数回反射されるので、結像された像は鏡像にならないためプロセッサ装置４において鏡像を反転させる画像処理が不要になる。
　このため、この鏡像を反転させる画像処理が不要となるため、処理がより簡単になると共に、反転させる画像処理による画質の劣化も発生しない。但し、アナログの画像をデジタルの画像に変換してメモリに一時的に格納した画像の場合には、メモリから読み出す場合のアドレスを変更することにより、反転した画像を容易に生成できるため、このような場合には、画質の劣化は殆ど発生しない。
　なお、上述した図２のプリズム１８の場合には、１回、つまり奇数回の反射後に撮像素子１７ｂに光学像が結像されるため、鏡像となり、プロセッサ装置４において鏡像を反転させる画像処理が施される。　
　光学的な偶数回の反射による鏡像の補正は対物光学系の大型化やプリズムのコスト高となる可能性があるので、図２のような奇数回の反射による鏡像の補正は、画像補正処理部３２にて鏡像反転により行なう。　
　当然、対物光学系１６の大型化やコスト面に問題がなければ、図７に示すように光学的に偶数回反射させる構成にしても良い。　
　次に上述した実施形態と異なる撮像素子等を用いた第２～第６実施形態を順次説明する。
（第２の実施形態）
　第２の実施形態の内視鏡システムは、面順次方式の内視鏡システムであり、以下の数値データからも分かるように明るさを優先させており、明るい画像を取得できる構成にしている。　
　本内視鏡システムは、図１の内視鏡システム１において、光源装置が図８に示すように面順次の照明光を生成する光源装置３Ｂを採用する。図８の光源装置３Ｂは、図１の光源装置３において、ランプ１１と絞り１２との間の照明光路中に回転フィルタ５５が配置され、この回転フィルタ５５はモータ５６により回転される。　
　回転フィルタ５５には、赤（Ｒ），緑（Ｇ），青（Ｂ）の光を選択的にそれぞれ透過するＲ，Ｇ，Ｂフィルタが扇形状に設けてあり、図１の構成において、さらに回転フィルタ５５を通すことにより、ライトガイド８にＲ，Ｇ，Ｂの面順次の照明光を供給することができおる。
　また、この場合には、図１のプロセッサ装置４における例えば画像読出部３１は、面順次で読み出した画像を一時格納し、同時に読み出すことにより、同時化されたカラーの画像を生成するフレームメモリを備える。　
　また、第１の実施形態では同時式、つまり色分離フィルタを備えた撮像素子を用いていたが、本実施形態における内視鏡２の挿入部６の先端部６ａに搭載される撮像ユニットを構成する撮像素子は、モノクロの２つの撮像素子６１ａ，６１ｂを採用する。　
　この場合における撮像ユニットの数値データとしては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子６１ａ，６１ｂの垂直方向ピクセルサイズをＰixが１．４５μｍ、補正パラメータとしての解像力係数ｋ１を２．００，Ｆ値マージンｋ２を０．８０，対物光学系の有効ＦナンバーＦnoを３．４８に設定している。この実施形態の特徴としては、86万画素1.45μmピクセルのモノクロ撮像素子を使った面順次方式であり、回折限界Fnoに対して余裕マージンを多く取り、より明るさを重視した設定となっている。
　そして、本実施形態の撮像ユニットは、Ｆno/Ｐix＝２．４０となる。　
　より詳細な数値データは、図６の表において示している。なお、図６（Ａ）の表においては、上述の（５）式の条件、２．４≦Ｆno/Ｐix≦４．５　を満たす明るさを優先した実施形態の場合も含めたデータを示す。また、図６（Ｂ）の表においては、後述する（５）′式の条件、２．７≦Ｆno/Ｐix≦４．５　を満たす深度拡大に重点を置いた実施形態（第２′の実施形態）の場合のデータを示す。また、図６（Ｃ）の表においては、後述する（５）″式の条件、３≦Ｆno/Ｐix≦４．２（より厳密には２．９７≦Ｆno/Ｐix≦４．２）を満たす原色ベイヤの同時式に限定し、深度拡大に絞った下限範囲の実施形態の場合のデータを示す。
　本実施形態は、面順次方式の場合においても、同様に適用でき、第１の実施形態の場合と同様の効果を有する。
　つまり、本実施形態によれば、遠方側及び近接側のいずれの観察領域に設定した場合にも、被写界深度を拡大できる。　
　また、本実施形態は、近接観察及び遠方観察を行う内視鏡に適用でき（つまり、内視鏡２の挿入部６の先端部６ａに搭載でき）、近接観察の場合及び遠方観察の場合にそれぞれ必要とされる被写界深度を満たすようにできる内視鏡システムを提供できる。　
　以下に説明する第３の実施形態－第６の実施形態も第１の実施形態とほぼ同様の効果を有する。
　（第３の実施形態）
　本実施形態の内視鏡システムは、第１の実施形態と同様に、同時式の内視鏡システムである。第１の実施形態においては、撮像ユニット１９の２つの撮像素子１７ａ，１７ｂとして、補色系の色分離フィルタを採用していたが、本実施形態においては原色の色分離フィルタを採用している。この実施形態の特徴としては、150万画素1.1μmピクセルの原色ベイヤ配列の同時式撮像素子を使い、比較的、細径（微小ピクセルなので撮像サイズが小さい）で且つ超高画素内視鏡の実施形態となっている。第１の実施形態，第２の実施形態に対して絶対値的な深度幅は狭いが、実用上の被写界深度を保ちつつ、より細径で高画質な内視鏡画像を提供できる。　
　この場合における撮像ユニットの数値データとしては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子の垂直方向ピクセルサイズをＰixが１．１μｍ、補正パラメータとしての解像力係数ｋ１を２．８０，Ｆ値マージンｋ２を１．０，対物光学系の有効ＦナンバーＦnoを４．６２に設定している。
　そして、本実施形態の撮像ユニットは、Ｆno/Ｐix＝４．２０となる。　
　より詳細な数値データは、図６の表において示している。
　本実施形態は、第１の実施形態の場合と同様の効果を有する。
　（第４の実施形態）
　本実施形態の内視鏡システムは、第３の実施形態の変形例に相当する。本実施形態の内視鏡システムは、第3の実施形態と同様の150万画素であるが、撮像素子のピクセルサイズを1.45μmとして開口を大きく取り、ノイズや明るさに対して比較的余裕を考慮した設定になっている。この際、原色ベイヤ配列における補間方法をより最適化する事で、第３の実施形に対して解像力が低下しない様にしつつ、合成画像としては深い被写界深度を得られるようにしている。　
　この場合における撮像ユニットの数値データとしては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子の垂直方向ピクセルサイズをＰixが１．４５μｍ、補正パラメータとしての解像力係数ｋ１を２．８０，Ｆ値マージンｋ２を１．０，対物光学系の有効ＦナンバーＦnoを６．０９に設定している。
　そして、本実施形態の撮像ユニットは、Ｆno/Ｐix＝４．２０となる。　
　より詳細な数値データは、図６の表において示している。
　本実施形態は、第１の実施形態の場合と同様の効果を有する。
　（第５の実施形態）
　本実施形態の内視鏡システムは、第３の実施形態の変形例に相当する。本実施形態の内視鏡システムは、120万画素1.1μmピクセルの原色ベイヤ配列の同時式撮像素子を使い、比較的高画素で且つ第３の実施形態より細径を狙っている。また、より絞って解像力よりも深度優先した実施形態であり、解像力は回折限界Fnoを越えて多少劣化するものの実用レベルを保ちつつ、近接観察側はより近接して拡大観察が出来るように、観察距離は3mmまで近接できる様な被写界深度の設定になっている。また、拡大観察を優先して近接するが深度幅は3mmを確保するような合成被写界深度を得ているので内視鏡検査に支障がない様にしている。
　この場合における撮像ユニットの数値データとしては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子の垂直方向ピクセルサイズをＰixが１．１０μｍ、補正パラメータとしての解像力係数ｋ１を２．８０，Ｆ値マージンｋ２を１．０，対物光学系の有効ＦナンバーＦnoを４．６２に設定している。　
　そして、本実施形態の撮像ユニットは、Ｆno/Ｐix＝４．２０となる。　
　より詳細な数値データは、図６の表において示している。　
　本実施形態は、第１の実施形態の場合と同様の効果を有する。
　（第６の実施形態）
　本実施形態の内視鏡システムは、第３の実施形態の変形例に相当する。本実施形態の内視鏡システムは、100万画素1.7μmピクセルの原色ベイヤ配列の同時式撮像素子を使い、被写界深度よりも観察時の明るさを優先させつつ、合成画像としては広い被写界深度を得られるようにしている。
　この場合における撮像ユニットの数値データとしては、波長λ＝０．５４６１μｍの光に対して、２つの撮像素子の垂直方向ピクセルサイズをＰixが１．７０μｍ、補正パラメータとしての解像力係数ｋ１を２．８０，Ｆ値マージンｋ２を１．０，対物光学系の有効ＦナンバーＦnoを７．１４に設定している。　
　そして、本実施形態の撮像ユニットは、Ｆno/Ｐix＝４．２０となる。　
　より詳細な数値データは、図６の表において示している。　
　本実施形態は、第１の実施形態の場合と同様の効果を有する。
　ところで、一般的に撮像素子のピクセルサイズが小さくなっていくと被写界深度の確保は難しくなる事から、前述した第２の実施形態の様にｋ２を小さく取って明るさに余裕を持たせる事は難しくなる傾向がある。　
　この場合は、ｋ２の取り得る範囲は、回折限界Fnoを超えない前提においては０．９～１．０までが現実的と考えられる。例えば、観察系の明るさにある程度余裕を持った設定とした第２の実施形態で考えると、ｋ２＝０．９とするとＦno/Ｐix＝２．７となる。尚、本願の実施形態で考えると、上限値は第１の実施形態となる。従って、高画素化を狙い観察系の明るさよりも被写界深度の確保を重視する場合は、
　　２．７≦Ｆno/Ｐix≦４．５　・・・（５）′
としても良い（図６（Ｂ）の表の第２′の実施形態による（５）′の下限データ、第１の実施形態による（５）′の上限データ参照）。この場合、十分な合成被写界深度を得られるものの、明るさが不足する分は撮像素子に裏面照射型CMOSセンサを採用したり、プロセッサ装置４の図示しないノイズリダクション機能の最適化により、より大きなゲインを掛けるような工夫が考えられる。また、内視鏡先端径に余裕があればライトガイドを増やして総合的な明るさを補っても構わない。
　更に、前記裏面照射型CMOSセンサに代表される様に、ピクセルの微細化による多画素化、低消費電力や低コスト化などの要件から、内視鏡の撮像素子にCMOSセンサをに採用するケースは今後増加する事も考えられる。原色ベイヤ配列の一般的なCMOSセンサであれば前述した通り、補間方式の最適化により面順次方式に近しい解像力が期待できる（ｋ１＝２．２程度）。　
　一方で、ピクセルの微細化はS/Nの劣化なども想定されるものの細径化が好ましい内視鏡においては、より細径、小型化のために微細セルサイズのCMOSを選択する場合も考えられる。この際、補間方法の最適化をしても結果として解像力の低下はある程度想定され、任意の係数ｋ１は補色方式よりは小さくできるもののｋ１＝２．８程度となる可能性もある。つまり、原色ベイヤ配列のCMOSセンサにおいては現実的には２.２≦ｋ１≦２．８程度になると考えられる。
　前述した通り被写界深度を重視してｋ２＝０．９～１．０を取り、且つｋ１＝２．２～２．８となる場合、本願の実施形態では原色ベイヤ配列のCMOSセンサを前提とした第３～第６の実施形態が対象となり、（５）′式は更に、
　　２．９７≦Ｆno/Ｐix≦４．２　・・・（５）″
となる。従って、被写界深度を重視し且つ撮像素子に原色ベイヤ配列のCMOSセンサを採用する際は（５）″としても十分な被写界深度を得る事ができる（図６（Ｃ）の表の第４の実施形態による（５）″の下限データ、第３′の実施形態による（５）″の上限データ参照）。
　上述したようにピント位置が異なる2つ像の合成被写界深度を得る場合、夫々の深度端はＭＴＦが１０％以上であって、かつ重なっていることが望ましい。上述した通り、像面上の評価空間周波数をFiとすると、
　Fi=1/k1・Pix　…（５）
　である。このFiにおけるデフォーカスのＭＴＦが約10％あれば、経験上の主観評価では像のボケは認識できず「見えている」と判断できる。言い換えると、ＭＴＦは約１０％以上あれば被写界深度内と見なせる。
　つまり、２つのピント状態の合成被写界深度を得る場合、深度範囲が最大となる条件は夫々の深度端でＭＴＦを約10％を保ったまま合成される事となる。この様子を図９に示す。　
　図９において実線で示す基準のＭＴＦ特性のものから△と○とで示すように近点側と遠点側とにピント位置がずれた状態のＭＴＦ特性を有するように設定した場合、上述した各実施形態において（２焦点切替時の遠方観察側の合成被写界深度と、近接観察側の合成被写界深度とのいずれにおいても）、ＭＴＦが１０％以上となる裾の深度端で重なっている。
　このようにＭＴＦが１０％以上となる裾の深度端で重なる状態で合成した合成画像は深度ギャップが発生することなく、望ましい合成被写界深度を有することになる。なお、上述した第１－第６の実施形態は、この条件を満たす。　
　これに対して、仮にＭＴＦがIO％未満となる深度端の状態で合成すると、その合成被写界深度範囲内において、ＭＴＦが１０％未満となる深度ギャップ部分を含み、その深度ギャップ部分で画像が不鮮明となるボケる（ボケて見える）観察領域が生じてしまうことになる。
　従って、上述した実施形態においては、２焦点切り替えしても不鮮明となる観察領域が発生しないで、広い範囲に渡って鮮明に観察できる広い被写界深度を有する内視鏡システムを提供できる。　
　なお、２焦点切替時の遠方観察側の合成被写界深度と、近接観察側の合成被写界深度の深度端は重なるような設定にする（第１－第３，第６の実施形態）と、遠方観察から近接観察に切り替えた場合、両者の間で不鮮明となる領域が発生しないで鮮明に観察できるため、スクリーニングや詳細観察を円滑に行い易い。　
　一方、第４，第５の実施形態のように、遠方観察側合成被写界深度と近接観察側合成被写界深度が連続的に繋がらずに、深度ギャップを生じさせる設定でも良い（Ｎ－Ｆギャップ有り）。　
　このような設定にすることでより近接した拡大観察が可能となるため、拡大内視鏡を主としたユーザーにはより目的に適した内視鏡を提供できる。　
　但し、２焦点切替時の視野角変動が殆ど生じないフォーカシングであり、内視鏡の操作性を考慮して深度幅は3mm前後を確保している事が望ましい。
　２焦点切替時に視野角が変わる場合は、近接するにつれて観察倍率が大きくなる変倍光学系としても良い。　
　ところで、上述した実施形態において、基準とする撮像素子は遠点側にピントを合わせた撮像素子に設定しても良い。このようにすると、製造面での調整が行い易い効果を有する。　
　具体的には、ａ）遠方のピント調整（ピント出し）は、像位置が撮像面より物体側に来る(撮像素子を繰り出す方向)となる。
　これに対して、ｂ）近点のピント調整は、像位置が撮像面より手元側に来る(撮像素子を引く方向)となる。ピント調整はａ）の次にｂ）を行う順番が良い。　
　ｂ）の次にａ）を行う順番でピント調整を行うと、ｂ）後における遠点側の撮像素子のピント調整時に、レンズがぶつかってしまう可能性がある。この場合には、再度ｂ）のピント調整を行わなければならなくなる。　
　つまり、最初にピント調整によりそのピント調整の条件を固定できる遠点側の撮像素子を基準にして、近点側の撮像素子のピント調整する方が、円滑に行うことができる。　また、このようにした場合、ピント調整の他に、倍率、明るさを除く幾何補正(位置、回転)等の像補正もより円滑に行うことができる。
　なお、上述した実施形態においては、フオーカスレンズ２１を光軸方向の２つの位置に切替設定することにより対物光学系１６等を、遠方観察状態と近接観察状態との２焦点切替を行う場合で説明したが、２点の焦点切替に限定されるものでなく、３点、４点のように多数点の焦点（位置）切替にする構成にしても良い。　
　また、上述した実施形態等を部分的に組み合わせる等して構成される実施形態も本発明に属する。
本出願は、２０１１年１０月２７日に日本国に出願された特願２０１１－２３６３８７号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。

Claims (15)

  1. 　同一の被写体に対してピント位置が異なる２つの光学像を得る内視鏡対物光学系と、
    　前記ピント位置が異なる前記２つの光学像を受光し、光電変換する２つの撮像素子と、
    　前記２つの撮像素子により前記２つの光学像に対応する２つの画像を１つの画像に合成する画像合成処理部と、
    　前記内視鏡対物光学系に設けた焦点切替用レンズの位置を移動し、近接観察と遠方観察の２つの観察領域の一方に前記内視鏡対物光学系の焦点を選択的に切り替える焦点切替機構と、を備え、
    　前記画像合成処理部は、前記近接観察と前記遠方観察の各観察領域の夫々において、前記２つの画像を合成することを特徴とする内視鏡システム。
  2. 　前記内視鏡対物光学系と前記２つの撮像素子は、内視鏡対物光学系の有効ＦナンバーをＦno、前記２つの撮像素子の撮像面に２次元的に配置されたピクセルのピクセルピッチをＰixと表した場合、
    　以下の条件
    　２．４≦Ｆno／Ｐix≦４．５
    　を満たすことを特徴とする請求項１に記載の内視鏡システム。
  3. 　前記ピント位置が異なる２つの光学像を得る内視鏡対物光学系は、
    　前記ピント位置が異なる２つの光学像を受光する２つの撮像素子との間に、像を２つに分離する光学素子が配置され、
    　前記像を２つに分離する前記光学素子は少なくとも一方の光学像を1回以上反射させる反射面を含み、
    　前記反射面で反射された像を前記撮像素子の１つに結像させることを特徴とする前記請求項１の内視鏡システム。
  4. 　前記２つの撮像素子からの夫々の像における相対的な倍率の差異と、位置の差異と、回転の差異と、明るさの差異とを、合致させる画像処理を行う画像補正処理部を備え、
    　前記画像合成処理部は、前記画像補正処理部で補正された夫々の画像を１つに合成することを特徴とする前記請求項１の内視鏡システム。
  5. 　前記画像補正処理部は、予め定められた補正パラメータを補正パラメータ格納部から読み出して画像補正を行い、
    　前記ピント位置が異なる２つの光学像のうちの１つを基準画像とした相対的な差異を、前記補正パラメータに設定することを特徴とした請求項４の内視鏡システム。
  6. 　前記画像補正処理部で補正される前記相対的な明るさの差異は、前記２つの像のうち輝度の低い方の像、もしくは前記２つの像の相対的に同一位置における輝度の低い方を基準として、補正を行なうことを特長とする請求項４の内視鏡システム。
  7. 　前記像を２つに分離する前記光学素子の前記反射面による反射が奇数回反射されて前記撮像素子の１つに結像させる場合、
    　当該１つの撮像素子から得られる画像を、鏡像反転させる機能を有することを特徴とした請求項４の内視鏡システム。
  8. 　前記内視鏡対物光学系は、前記近接観察と前記遠方観察の各観察領域の夫々において、前記２つの撮像素子における一方の撮像素子に対する被写界深度の深度範囲が、他方の撮像素子に対する被写界深度の深度範囲と重なるように設定されていることを特徴とした請求項４の内視鏡システム。
  9. 　前記内視鏡システムは、前記内視鏡対物光学系と、前記２つの撮像素子を備えた内視鏡と、前記内視鏡が着脱自在に接続され、前記画像合成処理部を備えた画像処理装置とを備え、
    　前記内視鏡は、前記補正パラメータ格納部を備えることを特徴とした請求項５の内視鏡システム。
  10. 　前記撮像素子は、原色又は補色のカラーフィルタを有することを特徴とした請求項２の内視鏡システム。
  11. 　前記撮像素子は、面順次照明光の下で撮像を行うカラーフィルタを有しないモノクロの撮像素子であることを特徴とした請求項２の内視鏡システム。
  12. 　前記内視鏡対物光学系と前記２つの撮像素子は、内視鏡対物光学系の有効ＦナンバーをＦno、前記２つの撮像素子の撮像面に２次元的に配置されたピクセルのピクセルピッチをＰixと表した場合、
    　以下の条件
    　２．７≦Ｆno／Ｐix≦４．５
    　を満たすことを特徴とする請求項１に記載の内視鏡システム。
  13. 　前記内視鏡対物光学系と前記２つの撮像素子は、内視鏡対物光学系の有効ＦナンバーをＦno、前記２つの撮像素子の撮像面に２次元的に配置されたピクセルのピクセルピッチをＰixと表した場合、
    　以下の条件
    　３≦Ｆno／Ｐix≦４．２
    　を満たすことを特徴とする請求項１に記載の内視鏡システム。
  14. 　前記画像合成処理部は、前記２つの撮像素子に基づいて生成された第１及び第２の画像データにおける同一の被写体位置にそれぞれ対応する第１及び第２の輝度レベルの差分量を各フレームにおいて算出する差分算出回路と、前記差分量の絶対値が閾値以上であるか否かを比較する比較回路と、前記差分量の絶対値が閾値以上である場合には輝度レベルが高い方の画像を選択し、前記差分量の絶対値が閾値未満である場合には２つの画像の輝度レベルを加算して出力する選択回路と、を有することを特徴とする請求項２に記載の内視鏡システム。
  15. 　前記画像合成処理部は、前記２つの撮像素子に基づいて生成された第１及び第２の画像データにおける同一の被写体位置にそれぞれ対応する第１及び第２の輝度レベルの差分量を各フレームにおいて算出する差分算出回路と、前記差分量の絶対値が閾値以上であるか否かを比較する比較回路と、前記差分量の絶対値が閾値以上である場合には輝度レベルが高い方の画像を選択し、前記差分量の絶対値が閾値未満である場合には２つの画像の輝度レベルにそれぞれ重み付けした後に合成して出力する選択回路と、を有することを特徴とする請求項８に記載の内視鏡システム。
    　
    　
PCT/JP2012/076658 2011-10-27 2012-10-16 内視鏡システム WO2013061819A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201280011886.9A CN103415240B (zh) 2011-10-27 2012-10-16 内窥镜系统
JP2013514488A JP5315482B1 (ja) 2011-10-27 2012-10-16 内視鏡システム
EP12844466.8A EP2668891B1 (en) 2011-10-27 2012-10-16 Endoscope system
US13/856,111 US8878919B2 (en) 2011-10-27 2013-04-03 Endoscope system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011236387 2011-10-27
JP2011-236387 2011-10-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/856,111 Continuation US8878919B2 (en) 2011-10-27 2013-04-03 Endoscope system

Publications (1)

Publication Number Publication Date
WO2013061819A1 true WO2013061819A1 (ja) 2013-05-02

Family

ID=48167652

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/076658 WO2013061819A1 (ja) 2011-10-27 2012-10-16 内視鏡システム

Country Status (5)

Country Link
US (1) US8878919B2 (ja)
EP (1) EP2668891B1 (ja)
JP (1) JP5315482B1 (ja)
CN (1) CN103415240B (ja)
WO (1) WO2013061819A1 (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014034339A1 (ja) * 2012-08-30 2014-03-06 オリンパスメディカルシステムズ株式会社 内視鏡
WO2014171284A1 (ja) * 2013-04-19 2014-10-23 オリンパスメディカルシステムズ株式会社 内視鏡装置
WO2016043107A1 (ja) * 2014-09-18 2016-03-24 オリンパス株式会社 内視鏡システム
WO2016132639A1 (ja) * 2015-02-17 2016-08-25 オリンパス株式会社 内視鏡システム
JP2017181591A (ja) * 2016-03-28 2017-10-05 富士ゼロックス株式会社 デジタルホログラフィ装置
JP2017181580A (ja) * 2016-03-28 2017-10-05 富士ゼロックス株式会社 デジタルホログラフィ装置
WO2018096771A1 (ja) * 2016-11-25 2018-05-31 オリンパス株式会社 撮像システム及び撮像装置
WO2019244246A1 (ja) * 2018-06-19 2019-12-26 オリンパス株式会社 撮像装置、内視鏡装置及び撮像装置の作動方法
JP2020501204A (ja) * 2016-12-09 2020-01-16 クエスト・フォトニック・デバイシーズ・ビー．ブイ．Ｑｕｅｓｔ Ｐｈｏｔｏｎｉｃ Ｄｅｖｉｃｅｓ Ｂ．Ｖ． ４つまたは５つのチャンネルをもつダイクロイックプリズムアセンブリ
WO2021210089A1 (ja) * 2020-04-15 2021-10-21 オリンパス株式会社 撮像装置、内視鏡、内視鏡先端部
WO2022044898A1 (ja) * 2020-08-31 2022-03-03 ソニーグループ株式会社 医療撮像システム、医療撮像装置、および動作方法
US11653824B2 (en) 2017-05-30 2023-05-23 Sony Corporation Medical observation system and medical observation device

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3103378A1 (en) * 2014-04-08 2016-12-14 Olympus Corporation Endoscope system
WO2016080118A1 (ja) * 2014-11-18 2016-05-26 オリンパス株式会社 内視鏡システム
US10324300B2 (en) 2016-06-07 2019-06-18 Karl Storz Se & Co. Kg Endoscope and imaging arrangement providing depth of field
US11307430B2 (en) 2016-06-07 2022-04-19 Karl Storz Se & Co. Kg Optical device and method for providing improved depth of field and resolution modes
US11163169B2 (en) 2016-06-07 2021-11-02 Karl Storz Se & Co. Kg Endoscope and imaging arrangement providing improved depth of field and resolution
CN110418596B (zh) * 2017-03-28 2021-12-24 富士胶片株式会社 测量辅助装置、内窥镜系统及处理器
US11160443B2 (en) * 2017-03-30 2021-11-02 Hoya Corporation Electronic endoscope device for changing observation image brightness
DE102018218997A1 (de) * 2017-11-10 2019-05-16 Denso Corporation Kameramodul
CN114785948B (zh) * 2022-04-14 2023-12-26 常州联影智融医疗科技有限公司 内窥镜调焦方法、装置、内镜图像处理器及可读存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116807A (ja) 1995-10-24 1997-05-02 Nippon Hoso Kyokai <Nhk> 撮像装置
JPH11197098A (ja) * 1998-01-19 1999-07-27 Fuji Photo Optical Co Ltd 遠近画像を形成する電子内視鏡装置
JPH11197097A (ja) * 1998-01-14 1999-07-27 Fuji Photo Optical Co Ltd 遠近画像を形成する電子内視鏡装置
JP2002010126A (ja) * 2000-06-19 2002-01-11 Olympus Optical Co Ltd 撮像装置
JP2002209831A (ja) * 2001-01-18 2002-07-30 Olympus Optical Co Ltd 内視鏡
JP2003078802A (ja) 2001-09-04 2003-03-14 Nippon Hoso Kyokai <Nhk> 撮像装置
JP2003259186A (ja) * 2002-02-27 2003-09-12 Aichi Gakuin 画像処理装置
JP2003290134A (ja) * 2002-04-02 2003-10-14 Olympus Optical Co Ltd 内視鏡装置
JP2004350070A (ja) * 2003-05-23 2004-12-09 Teiichi Okochi 画像処理装置
JP2005176940A (ja) * 2003-12-16 2005-07-07 Olympus Corp 電子内視鏡
JP2007313166A (ja) 2006-05-29 2007-12-06 Olympus Medical Systems Corp 内視鏡
JP2011062378A (ja) * 2009-09-18 2011-03-31 Fujifilm Corp 内視鏡システム
JP2011236387A (ja) 2010-05-13 2011-11-24 Ube Industries Ltd 固相重合によるポリオキサミド樹脂の製造方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0324512A (ja) * 1989-06-22 1991-02-01 Toshiba Corp 電子内視鏡装置
CA2567737A1 (en) * 2004-05-14 2005-11-24 Olympus Medical Systems Corp. Electronic endoscope
JP5856733B2 (ja) * 2010-11-02 2016-02-10 オリンパス株式会社 撮像装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116807A (ja) 1995-10-24 1997-05-02 Nippon Hoso Kyokai <Nhk> 撮像装置
JPH11197097A (ja) * 1998-01-14 1999-07-27 Fuji Photo Optical Co Ltd 遠近画像を形成する電子内視鏡装置
JPH11197098A (ja) * 1998-01-19 1999-07-27 Fuji Photo Optical Co Ltd 遠近画像を形成する電子内視鏡装置
JP2002010126A (ja) * 2000-06-19 2002-01-11 Olympus Optical Co Ltd 撮像装置
JP2002209831A (ja) * 2001-01-18 2002-07-30 Olympus Optical Co Ltd 内視鏡
JP2003078802A (ja) 2001-09-04 2003-03-14 Nippon Hoso Kyokai <Nhk> 撮像装置
JP2003259186A (ja) * 2002-02-27 2003-09-12 Aichi Gakuin 画像処理装置
JP2003290134A (ja) * 2002-04-02 2003-10-14 Olympus Optical Co Ltd 内視鏡装置
JP2004350070A (ja) * 2003-05-23 2004-12-09 Teiichi Okochi 画像処理装置
JP2005176940A (ja) * 2003-12-16 2005-07-07 Olympus Corp 電子内視鏡
JP2007313166A (ja) 2006-05-29 2007-12-06 Olympus Medical Systems Corp 内視鏡
JP2011062378A (ja) * 2009-09-18 2011-03-31 Fujifilm Corp 内視鏡システム
JP2011236387A (ja) 2010-05-13 2011-11-24 Ube Industries Ltd 固相重合によるポリオキサミド樹脂の製造方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2668891A4

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5509400B1 (ja) * 2012-08-30 2014-06-04 オリンパスメディカルシステムズ株式会社 内視鏡
US8994802B2 (en) 2012-08-30 2015-03-31 Olympus Medical Systems Corp. Endoscope
WO2014034339A1 (ja) * 2012-08-30 2014-03-06 オリンパスメディカルシステムズ株式会社 内視鏡
WO2014171284A1 (ja) * 2013-04-19 2014-10-23 オリンパスメディカルシステムズ株式会社 内視鏡装置
US9618726B2 (en) 2013-04-19 2017-04-11 Olympus Corporation Endoscope apparatus
WO2016043107A1 (ja) * 2014-09-18 2016-03-24 オリンパス株式会社 内視鏡システム
JP6023919B2 (ja) * 2014-09-18 2016-11-09 オリンパス株式会社 内視鏡システム
US10205888B2 (en) 2014-09-18 2019-02-12 Olympus Corporation Endoscope system
US9949622B2 (en) 2015-02-17 2018-04-24 Olympus Corporation Endoscope system for generating a composite image from optical images of different focus
WO2016132639A1 (ja) * 2015-02-17 2016-08-25 オリンパス株式会社 内視鏡システム
JP6006464B1 (ja) * 2015-02-17 2016-10-12 オリンパス株式会社 内視鏡システム
JP2017181580A (ja) * 2016-03-28 2017-10-05 富士ゼロックス株式会社 デジタルホログラフィ装置
JP2017181591A (ja) * 2016-03-28 2017-10-05 富士ゼロックス株式会社 デジタルホログラフィ装置
WO2018096771A1 (ja) * 2016-11-25 2018-05-31 オリンパス株式会社 撮像システム及び撮像装置
US10694080B2 (en) 2016-11-25 2020-06-23 Olympus Corporation Endoscope system
JP2020501204A (ja) * 2016-12-09 2020-01-16 クエスト・フォトニック・デバイシーズ・ビー．ブイ．Ｑｕｅｓｔ Ｐｈｏｔｏｎｉｃ Ｄｅｖｉｃｅｓ Ｂ．Ｖ． ４つまたは５つのチャンネルをもつダイクロイックプリズムアセンブリ
JP2021099522A (ja) * 2016-12-09 2021-07-01 クエスト・フォトニック・デバイシーズ・ビー．ブイ．Ｑｕｅｓｔ Ｐｈｏｔｏｎｉｃ Ｄｅｖｉｃｅｓ Ｂ．Ｖ． 少なくとも４つのチャンネルをもつダイクロイックプリズムアセンブリを備える内視鏡
JP7192007B2 (ja) 2016-12-09 2022-12-19 クエスト・フォトニック・デバイシーズ・ビー．ブイ． 少なくとも４つのチャンネルをもつダイクロイックプリズムアセンブリを備える内視鏡
US11653824B2 (en) 2017-05-30 2023-05-23 Sony Corporation Medical observation system and medical observation device
WO2019244246A1 (ja) * 2018-06-19 2019-12-26 オリンパス株式会社 撮像装置、内視鏡装置及び撮像装置の作動方法
WO2021210089A1 (ja) * 2020-04-15 2021-10-21 オリンパス株式会社 撮像装置、内視鏡、内視鏡先端部
WO2022044898A1 (ja) * 2020-08-31 2022-03-03 ソニーグループ株式会社 医療撮像システム、医療撮像装置、および動作方法

Also Published As

Publication number Publication date
JPWO2013061819A1 (ja) 2015-04-02
CN103415240B (zh) 2016-02-17
EP2668891A1 (en) 2013-12-04
US8878919B2 (en) 2014-11-04
US20130271587A1 (en) 2013-10-17
EP2668891A4 (en) 2015-05-06
JP5315482B1 (ja) 2013-10-16
CN103415240A (zh) 2013-11-27
EP2668891B1 (en) 2019-02-06

Similar Documents

Publication Publication Date Title
JP5315482B1 (ja) 内視鏡システム
JP5593004B2 (ja) 内視鏡システム
JP5415973B2 (ja) 撮像装置、内視鏡システム及び撮像装置の作動方法
US8723937B2 (en) Endoscope system, imaging apparatus, and control method
US9498153B2 (en) Endoscope apparatus and shake correction processing method
US20110292258A1 (en) Two sensor imaging systems
WO2016080130A1 (ja) 観察装置
JP2008036035A (ja) 内視鏡装置
WO2015044996A1 (ja) 内視鏡装置及び内視鏡装置の制御方法
US20190246875A1 (en) Endoscope system and endoscope
US20190387964A1 (en) Endoscope apparatus
WO2016084257A1 (ja) 内視鏡装置
JP7012549B2 (ja) 内視鏡装置、内視鏡装置の制御方法、内視鏡装置の制御プログラム、および記録媒体
JP6121058B2 (ja) 内視鏡システム、内視鏡システムの作動方法
JP2010227200A (ja) 内視鏡
WO2016067425A1 (ja) 画像処理装置、内視鏡装置及び画像処理方法
JP2000197604A (ja) 内視鏡装置
JP5856943B2 (ja) 撮像システム
US20220038610A1 (en) 3 mos camera
JP7181294B2 (ja) 撮像ユニット、内視鏡および内視鏡システム
JP7477158B2 (ja) ３板式カメラ
WO2020230332A1 (ja) 内視鏡、画像処理装置、内視鏡システム、画像処理方法およびプログラム
JP2018192043A (ja) 内視鏡及び内視鏡システム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280011886.9

Country of ref document: CN

ENP Entry into the national phase

Ref document number: 2013514488

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12844466

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012844466

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE