WO2006106736A1 - 撮像装置、撮像システム、および撮像方法 - Google Patents

撮像装置、撮像システム、および撮像方法 Download PDF

Info

Publication number
WO2006106736A1
WO2006106736A1 PCT/JP2006/306477 JP2006306477W WO2006106736A1 WO 2006106736 A1 WO2006106736 A1 WO 2006106736A1 JP 2006306477 W JP2006306477 W JP 2006306477W WO 2006106736 A1 WO2006106736 A1 WO 2006106736A1
Authority
WO
WIPO (PCT)
Prior art keywords
coefficient
specifying information
imaging
unit
convolution
Prior art date
Application number
PCT/JP2006/306477
Other languages
English (en)
French (fr)
Inventor
Seiji Yoshikawa
Original Assignee
Kyocera Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corporation filed Critical Kyocera Corporation
Priority to US11/909,789 priority Critical patent/US7978252B2/en
Publication of WO2006106736A1 publication Critical patent/WO2006106736A1/ja

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof

Definitions

  • Imaging apparatus imaging system, and imaging method
  • the present invention relates to an imaging apparatus, an imaging system, and an imaging method that can be applied to a digital still camera equipped with a zoom optical system using an imaging element, a camera mounted on a mobile phone, a camera mounted on a portable information terminal, and the like. is there.
  • the imaging surface is changed to film, which is a solid-state imaging device such as CCD (Charge Coupled Device), CMOS (Complementary Metal).
  • CCD Charge Coupled Device
  • CMOS Complementary Metal
  • Oxide Semiconductor sensors are mostly used.
  • an imaging lens device using a CCD or CMOS sensor as an image pickup device takes an image of a subject optically by an optical system and extracts it as an electric signal by the image pickup device.
  • FIG. 1 is a diagram schematically showing a configuration and a light flux state of a general imaging lens device.
  • This imaging lens device 1 has an optical system 2 and an imaging element 3 such as a CCD or a CMOS sensor. .
  • the object side lenses 21 and 22, the diaphragm 23, and the imaging lens 24 are arranged in order by directing the object side (OBJS) force on the image sensor 3 side.
  • OBJS object side
  • the best focus surface is matched with the imaging element surface.
  • FIG. 2A to 2C show spot images on the light receiving surface of the image sensor 3 of the imaging lens device 1.
  • FIG. [0006] Further, an imaging apparatus has been proposed in which a light beam is regularly dispersed by a phase plate (Wavefront Coding optical element) and restored by digital processing to enable depth of field and image shooting. (For example, see Non-Patent Documents 1 and 2 and Patent Documents 1 to 5).
  • Non-Patent Document 2 “Wavefront Coding; A modern method of achieving high performance and / or low cost imaging systems”, Edward R. Dows iJr., Gregory E.Johnson.
  • Patent Document 1 USP6, 021, 005
  • Patent Document 2 USP6, 642, 504
  • Patent Document 3 USP6, 525, 302
  • Patent Document 4 USP6, 069, 738
  • Patent Document 5 Japanese Patent Laid-Open No. 2003-235794
  • zoom lenses which are difficult to achieve with a single-focus lens, have great problems in adopting due to the high accuracy of optical design and the associated cost increase.
  • An object of the present invention is to obtain a high-definition image quality.
  • the optical system can be simplified, the cost can be reduced, and the lens does not care about the zoom position or the zoom amount.
  • an image pickup apparatus, an image pickup system, and an image pickup method capable of performing image design and capable of image restoration by high-accuracy calculation and capable of performing image restoration of a plurality of optical systems with one apparatus. is there.
  • An imaging system includes an imaging device and a processing device, and the imaging device can capture a subject aberration image that has passed through an optical system and a light wavefront modulation element.
  • Imaging device a convolution coefficient specifying information providing unit for providing coefficient specifying information for specifying a convolution coefficient, subject aberration image data obtained from the imaging device, and the above-mentioned convolution coefficient information providing unit Transmitting the coefficient specifying information provided by the processing unit, wherein the processing device receives the subject aberration image data and the coefficient specifying information transmitted by the transmitting unit of the imaging device.
  • a receiving unit a processing unit side storage unit that stores a plurality of convolution coefficients, and a single convolution from the processing unit side storage unit based on the coefficient specifying information received by the receiving unit.
  • a coefficient selection unit for selecting a gain coefficient, and subject image data without a difference by converting the subject aberration image data received by the reception unit with the one convolution coefficient selected by the coefficient selection unit.
  • An imaging apparatus provides an imaging device capable of imaging a subject aberration image that has passed through an optical system and a light wavefront modulation device, and coefficient specifying information for specifying a convolution coefficient.
  • a convolution coefficient specifying information providing unit that transmits the subject aberration image data obtained from the image sensor and the coefficient specifying information provided by the convolution coefficient specifying information providing unit. .
  • the convolution coefficient specifying information providing unit includes an imaging device side storage unit that stores coefficient specifying information for specifying a convolution coefficient
  • the transmitting unit includes The subject aberration image data obtained from the imaging element and the coefficient specifying information stored in the storage unit are transmitted.
  • the optical system can selectively mount a plurality of lenses
  • the convolution coefficient specifying information providing unit is a coefficient that specifies a convolution coefficient corresponding to the mounted lens.
  • a coefficient specifying information acquisition unit for acquiring specific information wherein the imaging element is capable of capturing a subject aberration image that has passed through at least one of the plurality of lenses and the light wavefront modulation element, and the transmission unit includes: The subject aberration image data obtained from the image sensor and the coefficient specifying information acquired by the coefficient characteristic information acquisition unit are transmitted.
  • the optical system includes a zoom optical system
  • the convolution coefficient specifying information providing unit specifies a plurality of coefficients that can specify a convolution coefficient according to a zoom amount of the zoom optical system.
  • the image pickup device side storage unit stores information.
  • a coefficient specifying information acquiring unit that acquires the coefficient specifying information of the image sensor, wherein the imaging element is capable of capturing a subject aberration image that has passed through a zoom optical system and a light wavefront modulation element, and the transmitting unit is configured to capture the imaging element.
  • the subject aberration image data obtained from the above and the coefficient specifying information acquired by the coefficient specifying information acquiring unit are transmitted.
  • the convolution coefficient specifying information providing unit can specify a subject distance information acquiring unit that acquires information corresponding to a distance to the subject, and a convolution coefficient corresponding to the distance to the subject.
  • One coefficient specifying information from the imaging device side storage unit based on the information corresponding to the distance to the subject acquired by the subject distance information acquisition unit and the imaging device side storage unit that stores a plurality of coefficient specifying information
  • the transmitting unit transmits the subject aberration image data obtained from the image sensor and the coefficient specifying information acquired by the coefficient specifying information acquiring unit.
  • An imaging method includes a step of imaging a subject aberration image that has passed through an optical system and a light wavefront modulation device, a subject aberration image data, and a convergence coefficient. Transmitting the coefficient specifying information, and before transmitting Receiving the subject aberration image data and the coefficient specifying information, a coefficient selecting step of selecting a plurality of convolution coefficient forces based on the received coefficient specifying information, and the receiving Transforming the subject aberration image data with the one convolution coefficient selected in the coefficient selection step to generate subject image data without aberration.
  • FIG. 1 is a diagram schematically showing a configuration of an ordinary imaging lens device and a light beam state.
  • FIGS. 2A to 2C are diagrams showing spot images on the light receiving surface of the image sensor of the imaging lens apparatus of FIG. 1.
  • FIG. 3 is a configuration diagram of an imaging system according to the present embodiment.
  • FIG. 4 is a block diagram illustrating a specific configuration example of the imaging apparatus according to the present embodiment.
  • FIG. 5 is a diagram schematically showing a configuration example of a zoom optical system of the imaging lens device according to the present embodiment.
  • FIG. 6 is a diagram showing a spot image when the zoom optical system not including a phase plate is wide.
  • FIG. 7 is a diagram showing a spot image at the time of tele of a zoom optical system not including a phase plate.
  • FIG. 8 is a diagram showing an infinite spot image of a zoom optical system including a phase plate.
  • FIG. 9 is a diagram showing a spot image on the close side of a zoom optical system including a phase plate.
  • FIG. 10 is a flowchart showing an outline of processing of the processing apparatus of this embodiment.
  • FIG. 11 is a diagram for explaining the principle of WFCO.
  • FIG. 12A to FIG. 12C are light receiving surfaces of the image sensor of the imaging lens device according to the present embodiment.
  • 12A is a diagram showing a spot image
  • FIG. 12B shows a case where it is in focus (Best focus)
  • FIG. It is a figure which shows each spot image when it has shifted
  • deviated 2mm (Defocus -0.2mm).
  • FIG. 13A and FIG. 13B are diagrams for explaining the MTF of the primary image formed by the imaging lens device according to the present embodiment.
  • FIG. 13A shows the light reception of the imaging element of the imaging lens device.
  • Fig. 13B shows the MTF characteristics with respect to spatial frequency.
  • FIG. 14 is a diagram for explaining an MTF correction process in the processing apparatus according to the present embodiment.
  • FIG. 15 is a diagram for specifically explaining the MTF correction processing in the processing apparatus according to the present embodiment.
  • FIG. 16 is a block diagram showing another example of the imaging apparatus according to the present embodiment.
  • FIG. 17 is a diagram showing a configuration example of the operation switch of FIG.
  • FIG. 18 is a configuration diagram illustrating another example of an imaging system.
  • FIG. 3 is a configuration diagram of the imaging system according to the present embodiment.
  • the imaging system 10 includes a plurality of (three in this embodiment) optical systems OPS—A to OPS—C, which are imaging devices 100A, 100B, 100C, and a processing device 200.
  • the imaging system 10 includes the captured image data of each of the imaging devices 100A, 100B, and 100C, the type of optical system, the zoom amount and approximate subject distance information at the time of image capture,
  • the coefficient specifying information that characterizes the use coefficient can be transmitted wirelessly or by wire over 200 processing units.
  • each of the imaging devices 100A, 100B, and 100C basically includes, for example, an optical system 110 (A, B, C), a phase plate 120 (A, B, C), an optical element 110 (A, B, C) and an image sensor 130 (A, B, C) capable of capturing an object aberration image that has passed through the phase plate 120 (A, B, C), and a combo
  • the imaging device side storage unit 140 (A, B, C) that stores coefficient specifying information for specifying the resolution coefficient, and the subject aberration image data obtained from the imaging device 130 (A, B, C) and the storage unit 140 ( A transmitter 150 (A, B, C) that transmits the coefficient specifying information stored in A, B, C) is included as a main component.
  • the imaging device side storage unit 130 (A, B, C) functions as a convolution coefficient specifying information providing unit.
  • FIG. 4 is a block diagram showing a more specific configuration of the imaging apparatus according to the present embodiment.
  • the imaging apparatus 100 in FIG. 4 is further provided with a zoom information detection device (ZIDT) 160 as a zoom amount detection unit in addition to the configuration of each imaging apparatus in FIG.
  • ZIDT zoom information detection device
  • a zoom optical system (ZOP) 110 optically captures an image of an imaging target object (subject) OBJ.
  • the imaging device 130 is also formed with an image captured by the zoom optical system 110 including the phase plate 120, and the CCD and CMOS sensor power that outputs the primary image information of the image formation as the primary image signal FIM of the electrical signal to the transmitter 150 Become.
  • the image sensor 130 is described as a CCD as an example.
  • the transmission device (TRSMT) 150 functions as a part of a coefficient specification information acquisition unit that acquires one coefficient specification information from the storage unit (STRG) 140 based on the zoom amount detected by the zoom information detection device 160,
  • the subject aberration image data obtained from the image sensor 130 and the acquired coefficient specifying information are transmitted to the processing device 200 wirelessly or by wire.
  • the storage unit 140, the zoom information detection device 160, and the transmission device 150 as a coefficient specifying information acquisition unit function as a convolution coefficient specifying information providing unit.
  • FIG. 5 is a diagram schematically showing a configuration example of the optical system of the zoom optical system 110 according to the present embodiment.
  • the zoom optical system 110 in FIG. 5 includes an object side lens 111 disposed on the object side OBJS, an image forming lens 112 for forming an image on the image sensor 130, and an object side lens 111 and an image forming lens 112.
  • An optical wavefront modulation element (for example, a wavefront forming optical element) composed of a phase plate (Cubic Phase Plate) having a three-dimensional curved surface, for example, which deforms the wavefront of the image formed on the light receiving surface of the image sensor 130 by the imaging lens 112.
  • Element Wavefront Coding Optical Element
  • An aperture (not shown) is disposed between the object side lens 111 and the imaging lens 112.
  • any optical wavefront modulation element according to the present invention may be used as long as it deforms the wavefront.
  • an optical element whose refractive index changes e.g., a gradient index wavefront modulation lens
  • an optical element whose thickness changes due to coding on the lens surface e.g., wavefront
  • a light wavefront modulation element such as a modulation hybrid lens
  • a liquid crystal element capable of modulating the phase distribution of light for example, a liquid crystal spatial phase modulation element
  • a zoom optical system 110 in FIG. 5 is an example in which an optical phase plate 120 is inserted into a 3 ⁇ zoom system used in a digital camera.
  • the phase plate 120 shown in the figure is an optical lens that regularly disperses the light beam converged by the optical system. By inserting this phase plate, an image that fits anywhere in focus on the image sensor 130 is realized.
  • the phase plate 120 forms a deep light beam (which plays a central role in image formation) and a flare (blurred portion).
  • a system that restores this regularly dispersed image into a focused image by digital processing is called a wavefront aberration control optical system (WFCO), and this processing is the processing device 200 side that is the transmission destination. To do.
  • WFCO wavefront aberration control optical system
  • FIG. 6 is a diagram showing a spot image when the zoom optical system 110 does not include a phase plate when the zoom optical system 110 is wide.
  • FIG. 7 is a diagram showing a spot image when the zoom optical system 110 does not include a phase plate.
  • FIG. 8 is a diagram showing a spot image on the infinite side of the zoom optical system 110 including the phase plate.
  • Fig. 9 shows a spot image on the near side of the zoom optical system 110 including the phase plate. It is.
  • spot images of light passing through an optical lens system that does not include a phase plate have different spot images when the zoom optical system is wide and tele. Indicates.
  • the spot image passing through the phase plate affected by this spot image also becomes a different spot image on the infinite side and the closest side.
  • a general apparatus cannot perform an appropriate convolution calculation, and an optical design that eliminates astigmatism, coma aberration, zoom chromatic aberration, and other aberrations that cause this spot image shift is required. .
  • Optical design that eliminates these aberrations increases the difficulty of optical design, causing problems such as increased design man-hours, increased costs, and larger lenses.
  • the zoom position or zoom amount is read from the zoom information detection device 160 and is transmitted from the transmission device 150.
  • Coefficient specifying information for specifying the type of optical system, the zoom amount at the time of image capture, and the convolution coefficient is transmitted to the processing device 200 wirelessly or by wire.
  • the processing device 200 acquires one coefficient from a plurality of convolution coefficients that are preliminarily stored based on the specific information in accordance with the transmitted zoom position or zoom amount.
  • the subject image data having no dispersion is generated from the dispersed image signal.
  • dispersion refers to the formation of an image that does not fit anywhere on the image sensor 130 by inserting the phase plate 120, and the depth by the phase plate 120.
  • the phenomenon of forming light flux (which plays a central role in image formation) and flare (blurred portion), and the behavior of forming a blurred portion by dispersing the image has the same meaning as aberration. included. Therefore, in this embodiment, it may be described as aberration.
  • the processing device 200 includes a receiving unit 210, a received information control unit (RICT L) 220, a convolution device (CONVO) 230, a kernel. And an image processing arithmetic processor (IPRC) 250.
  • a receiving unit 210 receives a received information control unit (RICT L) 220, a convolution device (CONVO) 230, a kernel.
  • a convolution device CONVO
  • IPRC image processing arithmetic processor
  • FIG. 10 is a chart showing an outline of processing of the processing device 200 on the receiving side.
  • the image processing arithmetic processor 250 sequentially drives the imaging apparatuses 100A to L00C, which are the plurality of optical systems.
  • the reception unit 210 controls the reception timing of transmission information of each imaging device 100A to: L00C so that the image transfer captured by the imaging devices 100A to 100C does not overlap in the reception unit 210.
  • a single optical system instructed to capture an image for example, the imaging device 100A captures image information and transmits the image information to the transmission device 150.
  • the transmitter 150 to which the image information has been transmitted is synchronized with the receiver 210, while the image information, the type of optical system (AorBorC), the zoom information at the time of image capture, the approximate subject distance information at the time of image capture, etc.
  • Information coefficient specifying information that causes the optimum value of the kernel and numerical operation storage register 240 to be determined is added, and data is transmitted to the receiving unit 210 wirelessly or by wire.
  • the receiving unit 210 that has received the information transfers the information that determines the optimum value to the received information control unit 220 (ST1 to ST3).
  • the reception information control unit 220 sets the optimum value in the convolution device 230 from the kernel and numerical operation storage register 240 (ST4).
  • the convolution device 230 performs optimum restoration of the image using the captured image information and the power and numerical value that are the optimum values set (ST5).
  • * represents convolution
  • Hn Hn—1,.
  • the zoom information detection device 160 is provided, configured to perform an appropriate convolution calculation according to the zoom position, and obtain an appropriate focused image regardless of the zoom position. .
  • a proper convolution calculation in the processing device 200 can be configured to store the calculation coefficient of the convolution in the register 240.
  • register 240 has a kernel size and convolution.
  • the calculation coefficient itself is stored in advance, the convolution calculation is performed using the stored kernel size and calculation coefficient, and the calculation coefficient corresponding to the zoom position is stored in advance in the register 240 as a function.
  • WFCO is employed and high-definition image quality can be obtained, and the optical system can be simplified and cost can be reduced.
  • FIG. 12A to 12C show spot images on the light receiving surface of the imaging device 130 of the imaging apparatus 100.
  • FIG. 12A to 12C show spot images on the light receiving surface of the imaging device 130 of the imaging apparatus 100.
  • Fig. 12B shows a case where the focal point is defocused (Best focus)
  • the wavefront forming optical element group 113 including the phase plate 120 reduces the depth and light flux (the central role of image formation). And flare (blurred part).
  • the primary image FIM formed in the imaging apparatus 100 of the present embodiment has a very deep depth and a luminous flux condition.
  • FIG. 13A and FIG. 13B are diagrams for explaining a modulation transfer function (MTF) of a primary image formed by the imaging lens device according to the present embodiment, and FIG. FIG. 13B shows a spot image on the light receiving surface of the imaging element of the imaging lens device, and FIG. 13B shows the MTF characteristics with respect to the spatial frequency Sfreq.
  • MTF modulation transfer function
  • the high-definition final image is left to the correction processing of the image processing apparatus 300 including a digital signal processor, for example, as shown in FIG. 13A and FIG. 13B.
  • the MTF is essentially low.
  • the processing device 200 is configured by a DSP, for example, and receives a primary image FIM from the imaging device 100 as described above, and performs a predetermined correction that raises the MTF at the spatial frequency Sfreq of the primary image. Processed etc. to form a high-definition final image FNLIM.
  • the MTF correction processing of the processing device 200 is performed by, for example, as shown by a curve A in Fig. 14, the MTF of the primary image that is essentially a low value, edge enhancement, and chroma enhancement using the spatial frequency Sfreq as a parameter. In post-processing, etc., correction is performed so as to approach (reached) the characteristics shown by curve B in Fig. 14.
  • the characteristic indicated by the curve B in FIG. 14 is a characteristic obtained when the wavefront is not deformed without using the wavefront forming optical element as in the present embodiment, for example.
  • the MTF characteristic curve A with respect to the spatial frequency Sfreq obtained optically is finally realized! /
  • the strength of the edge enhancement is applied to each spatial frequency, and the original image (
  • the desired MTF characteristic curve B is obtained by performing correction by weakening edge enhancement on the low frequency side and high frequency side within the predetermined band of the spatial frequency Sfreq and strengthening edge enhancement in the intermediate frequency region. Realize virtually.
  • the imaging system 10 includes a plurality of imaging devices 100 including the optical system 110 that forms a primary image, and a processing device 20 that forms the primary image into a high-definition final image.
  • the ability to newly install an optical element for wavefront shaping or the one where the surface of an optical element such as glass or plastic is molded for wavefront shaping is provided in the optical system.
  • the wavefront of the imaging is deformed, and such a wavefront is imaged on the imaging surface (light-receiving surface) of the image sensor 130 that is a CCD or CMOS sensor, and the primary image is high-definition through the processing device 200.
  • the primary image obtained by the imaging apparatus 100 has a light beam condition with a very deep depth. For this reason, the MTF of the primary image is essentially a low value, and the processor 200 corrects the MTF.
  • the imaging process in the imaging apparatus 100 in the present embodiment will be considered in terms of wave optics.
  • One-point force of an object point The diverged spherical wave becomes a convergent wave after passing through the imaging optical system. then
  • the wavefront is not a spherical surface but a complicated shape. Wavefront optics lies between geometric optics and wave optics, which is convenient when dealing with wavefront phenomena.
  • the wavefront information at the exit pupil position of the imaging optical system is important.
  • the calculation of MTF is obtained by Fourier transform of the wave optical intensity distribution at the imaging point.
  • the wave optical intensity distribution is obtained by squaring the wave optical amplitude distribution, and the wave optical amplitude distribution is obtained from the Fourier transform of the pupil function in the exit pupil.
  • the pupil function is exactly from the wavefront information (wavefront aberration) at the exit pupil position, if the wavefront aberration can be strictly numerically calculated through the optical system 110, the MTF can be calculated.
  • the MTF value on the imaging plane can be arbitrarily changed.
  • the wavefront shape is mainly changed by the wavefront forming optical element, but the target wavefront is formed by increasing or decreasing the phase (phase, optical path length along the light beam). .
  • the exit light flux from the exit pupil is formed from a dense portion and a sparse portion of the light beam so as to exert the geometrical optical spot image force shown in FIGS. 12A to 12C.
  • the MTF in this luminous flux state has a low spatial frequency, a low value in the region, and a high spatial frequency.
  • this low MTF value (or such a spot image state in terms of geometrical optics) will not cause aliasing.
  • the imaging element capable of capturing the subject aberration image that has passed through the optical system 110, the phase plate 120 as the light wavefront modulation element, and the optical system 110 and the phase plate 120.
  • the imaging device side storage unit 140 that stores the coefficient specifying information for specifying the convolution coefficient, the subject aberration image data obtained from the imaging element 130, and the coefficient specifying information stored in the storage unit 140 are transmitted.
  • the imaging devices 100A to 100C select appropriate coefficient characteristic information from the storage unit 140 according to each zoom position or zoom amount, and perform transmission.
  • any zoom lens has an advantage that it is possible to provide an in-focus image without driving a lens that does not require an expensive and large-sized optical lens with high difficulty. .
  • the imaging apparatus 100 can be used for a WFCO of a zoom lens considering the small size, light weight, and cost of a consumer device such as a digital camera or a camcorder.
  • the imaging devices 100A to L00C select the coefficient specifying information corresponding to the phase plate from the storage unit 140 and transmit it to the processing device 200, and the zoom position of each imaging device corresponds to the zoom amount.
  • the zoom information may be transmitted to the processing device 200 using the transmission device 150.
  • the processing device 200 acquires the received coefficient specifying information, the convolution coefficient having the same zoom information and power, and restores the image.
  • the imaging device 100 having the wavefront forming optical element that deforms the wavefront of the imaging on the light receiving surface of the imaging device 130 by the imaging lens 112, and the primary by the imaging device 100
  • a processing device that receives an image FIM and performs a predetermined correction process that raises the MTF at the spatial frequency of the primary image to form a high-definition final image FNLIM.
  • the apparatus 200 has an advantage that high-definition image quality can be obtained.
  • the configuration of the optical system 110 of the imaging apparatus 100 can be simplified, manufacturing becomes easy, and cost reduction can be achieved.
  • the imaging lens device uses a low-pass filter made of a uniaxial crystal system to avoid the phenomenon of aliasing.
  • Using a low-pass filter in this way is correct in principle, but it is expensive and difficult to manage because the low-pass filter itself is made of crystal.
  • use in an optical system is disadvantageous if the optical system is made more complicated.
  • the conventional imaging lens apparatus has a complicated optical system. Must. If it is complicated, it becomes difficult to manufacture, and if an expensive low-pass filter is used, the cost increases.
  • the occurrence of aliasing can be avoided without using a low-pass filter, and high-definition image quality can be obtained.
  • the lens constituting the optical system 110 is not limited to the example of FIG.
  • An imaging mode setting unit (MOD) 170 including a detection device (DSIDT) 171 and an operation switch (OSW) 172 may be provided so that specific information is selected based on distance information.
  • the photographing mode setting unit 170 can be selected and input by the operation switch 172.
  • the operation switch 172 includes switching switches 301a, 301b, and 301c provided on the lower side of the liquid crystal screen 303 on the back side of the camera (imaging device).
  • Switching switch 301a is a switch for selecting and inputting a far-field shooting mode (infinity)
  • switching switch 301b is a switch for selecting and inputting a normal shooting mode (portrait)
  • switching switch 301c is a macro This switch is used to select and input the shooting mode (nearest).
  • the mode switching method may be a touch panel type in addition to the switch method as shown in FIG. 17, or the mode for switching the object distance may be selected from the menu screen.
  • the object approximate distance information detection device 171 as the subject distance information generation unit generates information corresponding to the distance to the subject based on the input information of the operation switch 172, and supplies the information to the transmission device 140.
  • the processing device 200 Based on the transmission information of the transmission device 150, the processing device 200 converts the dispersed image signal from the imaging element 130 of the imaging device 100 into an image signal having no dispersion. At this time, the object approximate distance information detection device 171 The coefficient specifying information selected according to the detection result is received, and different conversion processing is performed according to the set shooting mode.
  • the processing device 200 includes a normal conversion process in the normal shooting mode, a macro conversion process corresponding to the macro shooting mode in which aberration is reduced on the near side compared to the normal conversion process, and a far side compared to the normal conversion process.
  • the far-field conversion process corresponding to the far-field shooting mode that reduces aberrations is selectively executed according to the shooting mode.
  • the imaging device 100A-: LOOC transmits coefficient specifying information corresponding to the phase plate, and also transmits information corresponding to the distance to the subject, and the processing device 200 has both of these two types of information power. You may restore the image by obtaining the convolution coefficient.
  • the zoom amount detection device and the object approximate distance information detection device are described as examples. However, the embodiment may not include these.
  • the coefficient of the convolution coefficient power stored in advance in the processing apparatus 200 is acquired to obtain a subject image without dispersion. Generate data. In this case, the same effect as described above can be obtained.
  • a plurality of optical systems are provided, and the captured image information is transmitted to the processing apparatus 200 side together with the coefficient specifying information.
  • a plurality of optical systems 110-1 and 110-2 may be provided, a desired optical system may be selected in order, and a subject image that has passed through each optical system may be input to a single image sensor 130. Is possible.
  • the image pickup apparatus, image pickup system, and image pickup method of the present invention can restore an image by a plurality of optical systems with a single device. Therefore, a digital still camera equipped with a zoom optical system, a mobile phone camera, It can be applied to cameras equipped with information terminals.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Lens Barrels (AREA)
  • Blocking Light For Cameras (AREA)
  • Structure And Mechanism Of Cameras (AREA)
  • Lenses (AREA)

Abstract

　複数の光学システムによる画像の復元を一つの装置で復元できる撮像装置、撮像システム、および撮像方法であって、光学系１１０、位相板（光波面変調素子）１２０、光学系１１０と位相板１２０とを通過した被写体収差画像を撮像可能な撮像素子１３０と、コンボリューション係数を特定する係数特定情報を記憶する撮像装置側記憶部１４０と、撮像素子１３０から得られた被写体収差画像データと記憶部１４０に記憶された係数特定情報とを送信する送信装置１５０と、を有する複数の撮像装置１００Ａ～１００Ｃと、撮像装置１００から送信されてきたズーム位置またはズーム量に応じて係数特定情報に基づき、あらかじめ記憶した複数のコンボリューション係数から一の係数を取得して、撮像素子１３０からの分散画像信号より分散のない被写体画像データを生成する処理装置２００とを有する。

Description

明 細 書
撮像装置、撮像システム、および撮像方法
技術分野
[0001] 本発明は、撮像素子を用い、ズーム光学系を備えたデジタルスチルカメラゃ携帯電 話搭載カメラ、携帯情報端末搭載カメラ等に適用可能な撮像装置、撮像システム、 および撮像方法に関するものである。
背景技術
[0002] 近年急峻に発展を遂げて 、る情報のデジタルィ匕に相俟って映像分野にぉ 、てもそ の対応が著しい。
特に、デジタルカメラに象徴されるように撮像面はフィルムに変わって固体撮像素 子である CCD (Charge Coupled Device) , CMOS (Complementary Metal
Oxide Semiconductor)センサが使用されているのが大半である。
[0003] このように、撮像素子に CCDや CMOSセンサを使った撮像レンズ装置は、被写体 の映像を光学系により光学的に取り込んで、撮像素子により電気信号として抽出する ものであり、デジタルスチルカメラの他、ビデオカメラ、デジタルビデオユニット、パー ソナルコンピュータ、携帯電話機、携帯情報端末 (PDA: Personal DigitalAssista nt)等に用いられている。
[0004] 図 1は、一般的な撮像レンズ装置の構成および光束状態を模式的に示す図である この撮像レンズ装置 1は、光学系 2と CCDや CMOSセンサ等の撮像素子 3とを有 する。
光学系は、物体側レンズ 21, 22、絞り 23、および結像レンズ 24を物体側（OBJS) 力 撮像素子 3側に向力つて順に配置されている。
[0005] 撮像レンズ装置 1においては、図 1に示すように、ベストフォーカス面を撮像素子面 上に合致させている。
図 2A〜図 2Cは、撮像レンズ装置 1の撮像素子 3の受光面でのスポット像を示して いる。 [0006] また、位相板 (Wavefront Coding optical element)により光束を規則的に分 散し、デジタル処理により復元させ被写界深度の深 、画像撮影を可能にする等の撮 像装置が提案されている (たとえば非特許文献 1, 2、特許文献 1〜5参照)。
特干文献 1： avefrontし oding;jointly optimized optical and digital imaging syste ms , Edward R.DowskiJr., Robert H.Cormack, Scott D.Sarama.
非特許文献 2： "Wavefront Coding;A modern method of achieving high performance a nd/or low cost imaging systems " , Edward R.Dows iJr., Gregory E.Johnson.
特許文献 1 : USP6, 021, 005
特許文献 2 : USP6, 642, 504
特許文献 3 : USP6, 525, 302
特許文献 4 : USP6, 069, 738
特許文献 5：特開 2003 - 235794号公報
発明の開示
発明が解決しょうとする課題
[0007] 上述した各文献にて提案された撮像装置にお!、ては、その全ては通常光学系に 上述の位相板を挿入した場合の PSF (Point— Spread— Function)が一定になつ ていることが前提であり、 PSFが変化した場合は、その後のカーネルを用いたコンボ リューシヨンにより、被写界深度の深い画像を実現することは極めて難しい。
したがって、単焦点でのレンズではともかぐズーム系のレンズでは、その光学設計 の精度の高さやそれに伴うコストアップが原因となり採用するには大きな問題を抱え ている。
換言すれば、一般的な撮像装置においては、適正なコンボリューシヨン演算を行う ことができず、ワイド (Wide)時ゃテレ（Tele)時のスポット（SPOT)像のズレを引き起 こす非点収差、コマ収差、ズーム色収差等の各収差を無くす光学設計が要求される しかしながら、これらの収差を無くす光学設計は光学設計の難易度を増し、設計ェ 数の増大、コスト増大、レンズの大型化の問題を引き起こす。
その結果、一つの光学系に対し、一つの位相板、一つの画像復元が要求されてお り、一つの画像復元により、複数の光学系を制御することは、不可能とされており、シ ステム的に複数の光学系を必要とする装置に関し、コストアップやシステムの増大が 原因となり採用するには大きな問題を抱えている。
[0008] 本発明の目的は、高精細な画質を得ることが可能で、し力も、光学系を簡単化でき 、コスト低減を図ることができ、ズーム位置またはズーム量を気にすることなぐレンズ 設計を行うことができ、かつ精度の高い演算による画像復元が可能で、しかも複数の 光学システムの画像復元を一つの装置で行うことができる撮像装置、撮像システム、 および撮像方法を提供することにある。
課題を解決するための手段
[0009] 本発明の第 1の観点の撮像システムは、撮像装置と、処理装置と、を有し、前記撮 像装置は、光学系と光波面変調素子とを通過した被写体収差画像を撮像可能な撮 像素子と、コンボリューシヨン係数を特定する係数特定情報を提供するコンボリューシ ヨン係数特定情報提供部と、前記撮像素子から得られた被写体収差画像データと前 記コンボリューシヨン係数情報提供部により提供される前記係数特定情報とを送信す る送信部と、を含み、前記処理装置は、前記撮像装置の送信部により送信された前 記被写体収差画像データと前記係数特定情報とを受信する受信部と、複数のコンボ リューシヨン係数を記憶する処理装置側記憶部と、前記受信部により受信した前記係 数特定情報に基づき前記処理装置側記憶部から一のコンボリューシヨン係数を選択 する係数選択部と、前記受信部により受信した前記被写体収差画像データを前記係 数選択部で選択した前記一のコンボリューシヨン係数によって変換することにより収 差のない被写体画像データを生成する変換部と、を含む。
[0010] 本発明の第 2の観点の撮像装置は、光学系と光波面変調素子とを通過した被写体 収差画像を撮像可能な撮像素子と、コンボリューシヨン係数を特定する係数特定情 報を提供するコンボリューシヨン係数特定情報提供部と、前記撮像素子から得られた 被写体収差画像データと前記コンボリューシヨン係数特定情報提供部により提供され る前記係数特定情報とを送信する送信部と、を含む。
[0011] 好適には、前記コンボリューシヨン係数特定情報提供部は、コンボリューシヨン係数 を特定する係数特定情報を記憶する撮像装置側記憶部を含み、前記送信部は、前 記撮像素子から得られた被写体収差画像データと前記記憶部に記憶された前記係 数特定情報とを送信する。
[0012] 好適には、前記光学系は複数のレンズを選択的に装着可能で、前記コンボリュー シヨン係数特定情報提供部は、前記装着されたレンズに応じたコンボリューシヨン係 数を特定する係数特定情報を取得する係数特定情報取得部を含み、前記撮像素子 は、前記複数のレンズの内少なくとも一のレンズおよび光波面変調素子を通過した 被写体収差画像を撮像可能で、前記送信部は、前記撮像素子から得られた被写体 収差画像データと前記係数特性情報取得部により取得された前記係数特定情報と を送信する。
[0013] 好適には、前記光学系がズーム光学系を含み、前記コンボリューシヨン係数特定情 報提供部は、ズーム光学系のズーム量に応じたコンボリューシヨン係数を特定可能な 複数の係数特定情報を記憶する撮像装置側記憶部と、ズーム光学系のズーム量を 検知するズーム量検知部と、前記ズーム量検知部により検知されたズーム量に基づ き、前記撮像装置側記憶部から一の係数特定情報を取得する係数特定情報取得部 と、を含み、前記撮像素子は、ズーム光学系と光波面変調素子とを通過した被写体 収差画像を撮像可能で、前記送信部は、前記撮像素子から得られた被写体収差画 像データと前記係数特定情報取得部により取得された前記係数特定情報とを送信 する。
[0014] 好適には、前記コンボリューシヨン係数特定情報提供部は、被写体までの距離に相 当する情報を取得する被写体距離情報取得部と、被写体までの距離に応じたコンボ リューシヨン係数を特定可能な複数の係数特定情報を記憶する撮像装置側記憶部と 、前記被写体距離情報取得部により取得された被写体までの距離に相当する情報 に基づき、前記撮像装置側記憶部から一の係数特定情報を取得する係数特定情報 取得部と、を含み、前記送信部は、前記撮像素子から得られた被写体収差画像デー タと前記係数特定情報取得部により取得された前記係数特定情報とを送信する。
[0015] 本発明の第 3の観点の撮像方法は、撮像素子により光学系と光波面変調素子とを 通過した被写体収差画像を撮像するステップと、被写体収差画像データと、コンボリ ユーシヨン係数を特定する係数特定情報とを送信するステップと、前記送信された前 記被写体収差画像データと前記係数特定情報とを受信するステップと、前記受信し た前記係数特定情報に基づき複数のコンボリューシヨン係数力 一のコンボリューシ ヨン係数を選択する係数選択ステップと、前記受信した前記被写体収差画像データ を前記係数選択ステップで選択した前記一のコンボリューシヨン係数によって変換す ることにより収差のな 、被写体画像データを生成するステップと、を含む。
発明の効果
[0016] 本発明によれば、高精細な画質を得ることが可能で、し力も複数の光学システムの 復元を一つの装置で復元できる。
図面の簡単な説明
[0017] [図 1]図 1は、一般的な撮像レンズ装置の構成および光束状態を模式的に示す図で ある。
[図 2]図 2A〜図 2Cは、図 1の撮像レンズ装置の撮像素子の受光面でのスポット像を 示す図であって、図 2Aは焦点が 0. 2mmずれた場合（Defocus = 0. 2mm)、図 2B は合焦点の場合（Best focus)、図 2Cは焦点が 0. 2mmずれた場合（Defocus
= 0. 2mm)の各スポット像を示す図である。
[図 3]図 3は、本実施形態に係る撮像システムの構成図である。
[図 4]図 4は、本実施形態に係る撮像装置の具体的な構成例を示すブロックである。
[図 5]図 5は、本実施形態に係る撮像レンズ装置のズーム光学系の構成例を模式的 に示す図である。
[図 6]図 6は、位相板を含まないズーム光学系のワイド (Wide)時のスポット像を示す 図である。
[図 7]図 7は、位相板を含まないズーム光学系のテレ (Tele)時のスポット像を示す図 である。
[図 8]図 8は、位相板を含むズーム光学系の無限側のスポット像を示す図である。
[図 9]図 9は、位相板を含むズーム光学系の至近側のスポット像を示す図である。
[図 10]図 10は、本実施形態の処理装置の処理概要を示すフローチャートである。
[図 11]図 11は、 WFCOの原理を説明するための図である。
[図 12]図 12A〜図 12Cは、本実施形態に係る撮像レンズ装置の撮像素子の受光面 でのスポット像を示す図であって、図 12Aは焦点が 0. 2mmずれた場合（Defocus =0. 2mm)、図 12Bは合焦点の場合（Best focus)、図 12Cは焦点が— 0. 2mm ずれた場合（Defocus=— 0. 2mm)の各スポット像を示す図である。
[図 13]図 13Aおよび図 13Bは、本実施形態に係る撮像レンズ装置により形成される 1 次画像の MTFについて説明するための図であって、図 13Aは撮像レンズ装置の撮 像素子の受光面でのスポット像を示す図で、図 13Bが空間周波数に対する MTF特 性を示している。
[図 14]図 14は、本実施形態に係る処理装置における MTF補正処理を説明するため の図である。
[図 15]図 15は、本実施形態に係る処理装置における MTF補正処理を具体的に説 明するための図である。
[図 16]図 16は、本実施形態に係る撮像装置の他の例を示すブロック図である。
[図 17]図 17は、図 16の操作スィッチの構成例を示す図である。
[図 18]図 18は、撮像システムの他の例を示す構成図である。
符号の説明
[0018] 100…撮像装置、 110…ズーム光学系、 111…物体側レンズ、 112…結像レンズ、 113…波面形成用光学素子、 120…位相板 (光波面変調素子)、 130· ··撮像素子、 140…記憶部、 150· ··送信装置、 160…ズーム情報検出装置、 200…処理装置、 2 10· ··受信部、 220· ··受信情報コントロール部、 230· ··コンボリューシヨン装置、 240 …カーネル、数値演算係数格納レジスタ、 250…画像処理演算プロセッサ。
発明を実施するための最良の形態
[0019] 以下、本発明の実施形態を添付図面に関連付けて説明する。
[0020] 図 3は、本実施形態に係る撮像システムの構成図である。
[0021] 本撮像システム 10は、図 3に示すように、複数 (本実施形態においては 3つ）の光学 システム OPS— A〜OPS— Cである撮像装置 100A, 100B, 100Cと処理装置 200 とを有する。
そして、撮像システム 10は、各撮像装置 100A, 100B, 100Cの撮像画像データ、 光学システムの種類、画像取り込み時のズーム量や概略被写体距離情報、コンボリ ユーシヨン係数を特性する係数特定情報を、無線あるいは有線にて処理装置 200〖こ 送信可能に構成されている。
[0022] 各撮像装置 100A, 100B, 100Cは、基本的には、図 3に示すように、たとえば光 学系 110 (A, B, C)、光波面変調素子としての位相板 120 (A, B, C)、光学系 110 (A, B, C)と位相板 120 (A, B, C)とを通過した被写体収差画像を撮像可能な撮像 素子 130 (A, B, C)と、コンボリューシヨン係数を特定する係数特定情報を記憶する 撮像装置側記憶部 140 (A, B, C)と、撮像素子 130 (A, B, C)から得られた被写体 収差画像データと記憶部 140 (A, B, C)に記憶された係数特定情報とを送信する送 信装置 150 (A, B, C)と、を主構成要素として有している。
ここでは、撮像装置側記憶部 130 (A, B, C)がコンボリューシヨン係数特定情報提 供部として機能する。
[0023] 図 4は、本実施形態に係る撮像装置のより具体的な構成を示すブロックである。図 4 の撮像装置 100は、図 3の各撮像装置の構成に加えて、さらにズーム量検知部とし てのズーム情報検出装置（ZIDT) 160が設けられて!/、る。
[0024] ズーム光学系（ZOP) 110は、撮像対象物体 (被写体) OBJの映像を光学的に取り 込む。
撮像素子 130は、位相板 120を含むズーム光学系 110で取り込んだ像が結像され 、結像 1次画像情報を電気信号の 1次画像信号 FIMとして送信装置 150に出力する CCDや CMOSセンサ力もなる。図 4においては、撮像素子 130を一例として CCDと して記載している。
送信装置 (TRSMT) 150は、ズーム情報検出装置 160により検知されたズーム量 に基づき、記憶部 (STRG) 140から一の係数特定情報を取得する係数特定情報取 得部の一部として機能し、撮像素子 130から得られた被写体収差画像データと取得 した係数特定情報とを処理装置 200に無線あるいは有線で送信する。
ここでは、記憶部 140、ズーム情報検出装置 160、係数特定情報取得部としての送 信装置 150は、コンボリューシヨン係数特定情報提供部として機能する。
[0025] 図 5は、本実施形態に係るズーム光学系 110の光学系の構成例を模式的に示す 図である。 [0026] 図 5のズーム光学系 110は、物体側 OBJSに配置された物体側レンズ 111と、撮像 素子 130に結像させるための結像レンズ 112と、物体側レンズ 111と結像レンズ 112 間に配置され、結像レンズ 112による撮像素子 130の受光面への結像の波面を変形 させる、たとえば 3次元的曲面を有する位相板 (Cubic Phase Plate)からなる光波 面変調素子（波面形成用光学素子： Wavefront Coding Optical Element)群 1 13を有する。また、物体側レンズ 111と結像レンズ 112間には図示しない絞りが配置 される。
なお、本実施形態においては、位相板を用いた場合について説明したが、本発明 の光波面変調素子としては、波面を変形させるものであればどのようなものでもよぐ 厚みが変化する光学素子 (たとえば、上述の 3次の位相板)、屈折率が変化する光学 素子 (たとえば屈折率分布型波面変調レンズ)、レンズ表面へのコーディングにより厚 み、屈折率が変化する光学素子 (たとえば、波面変調ハイブリッドレンズ)、光の位相 分布を変調可能な液晶素子 (たとえば、液晶空間位相変調素子)等の光波面変調素 子であればよい。
[0027] 図 5のズーム光学系 110は、デジタルカメラに用いられる 3倍ズーム系に光学位相 板 120を挿入した例である。
図で示された位相板 120は、光学系により収束される光束を規則正しく分散する光 学レンズである。この位相板を挿入することにより、撮像素子 130上ではピントのどこ にも合わな ヽ画像を実現する。
換言すれば、位相板 120によって深度の深い光束 (像形成の中心的役割を成す） とフレアー（ボケ部分)を形成して 、る。
この規則的に分光した画像をデジタル処理により、ピントの合った画像に復元する システムを波面収差制御光学系システム（WFCO : Wavefront Coding Optical system)といい、この処理を送信先である処理装置 200側において行う。
[0028] 図 6は、位相板を含まな 、ズーム光学系 110のワイド (Wide)時のスポット像を示す 図である。図 7は、位相板を含まな 、ズーム光学系 110のテレ（Tele)時のスポット像 を示す図である。図 8は、位相板を含むズーム光学系 110の無限側のスポット像を示 す図である。図 9は、位相板を含むズーム光学系 110の至近側のスポット像を示す図 である。
[0029] 基本的に、位相板を含まない光学レンズ系を通った光のスポット像は図 6および図 7に示されるように、そのズーム光学系がワイド時とテレ時では、異なったスポット像を 示す。
当然、図 8および図 9に示すように、このスポット像に影響される位相板を通したスポ ット像も無限側と至近側では異なったスポット像となる。
このような、ズーム位置で異なるスポット像を持つ光学系においては、後で説明する H関数が異なる。
[0030] 一般的な装置では適正なコンボリューシヨン演算を行うことができず、このスポット像 のズレを引き起こす非点収差、コマ収差、ズーム色収差等の各収差を無くす光学設 計が要求される。これらの収差を無くす光学設計は光学設計の難易度を増し、設計 工数の増大、コスト増大、レンズの大型化の問題を引き起こす。
そこで、本実施形態においては、図 4に示すように、撮像装置 (カメラ） 100が撮影 状態に入つた時点で、そのズーム位置またはズーム量をズーム情報検出装置 160か ら読み出し、送信装置 150から光学システムの種類、画像取り込み時のズーム量、コ ンボリューシヨン係数を特定する係数特定情報を、無線あるいは有線にて処理装置 2 00に送信する。
[0031] 処理装置 200は、送信されてきたズーム位置またはズーム量に応じて特定情報に 基づき、あら力じめ記憶した複数のコンボリューシヨン係数から一の係数を取得して、 撮像素子 130からの分散画像信号より分散のない被写体画像データを生成する。
[0032] なお、本実施形態において、分散とは、上述したように、位相板 120を挿入すること により、撮像素子 130上ではピントのどこにも合わない画像を形成し、位相板 120に よって深度の深 、光束 (像形成の中心的役割を成す)とフレアー (ボケ部分)を形成 する現象を!、 、、像が分散してボケ部分を形成する振る舞 、から収差と同様の意味 合いが含まれる。したがって、本実施形態においては、収差として説明する場合もあ る。
[0033] 処理装置 200は、図 3に示すように、受信部 210、受信情報コントロール部 (RICT L) 220、コンボリューシヨン装置（CONVO) 230、カーネル.数値演算係数格納レジ スタ（REG) 240、および画像処理演算プロセッサ（IPRC) 250を有する。
[0034] 図 10は、受信側である処理装置 200の処理概要を示すフォーチャートである。
[0035] この処理装置 200においては、画像処理演算プロセッサ 250により、この複数の光 学システムである撮像装置 100A〜： L00Cを順次に駆動させる。その際、各撮像装置 100A〜100Cの取り込んだ画像転送が受信部 210において、重複しないよう受信 部 210より各撮像装置 100A〜： L00C力もの送信情報の受信タイミングを制御する。 次に、画像取り込みを指示された単一の光学システム、たとえば撮像装置 100Aは 、画像情報を取り込み、その画像情報を送信装置 150に伝達する。
画像情報を伝達された送信装置 150は、受信部 210との同期を取りながら、画像情 報、光学システムの種類 (AorBorC)、画像取り込み時のズーム情報、画像取り込み 時の概略被写体距離情報等、カーネル、数値演算格納レジスタ 240の最適値決定 の要因となる情報 (係数特定情報)を付加して、受信部 210にデータを無線、あるい は有線で送信する。
情報を受信した受信部 210は、その最適値決定の要因となる情報を受信情報コン トローノレ部 220に転送する（ST1〜ST3)。
この受信情報コントロール部 220は、カーネル、数値演算格納レジスタ 240より、そ の最適値をコンボリューシヨン装置 230にセットする（ST4)。
コンボリューシヨン装置 230は、取り込まれた画像情報とセットされた最適値である力 一ネル、数値演算値を用い画像の最適復元を行う（ST5)。
[0036] ここで、 WFCOの基本原理について説明する。
図 11に示すように、被写体の画像 fが WFCO光学系 Hに入ることにより、 g画像が 生成される。
これは、次のような式で表すことができる。
[0037] (数 1)
g=H水 f
ここで、 *はコンボリューシヨンを表す。
[0038] 生成された、画像から被写体を求めるためには、次の処理を要する。
[0039] (数 2) f = H 水 g
[0040] ここで、関数 Hに関するカーネルサイズと演算係数について説明する。
個々のズームポジション（ズーム位置）を Zpn、 Zpn— 1 · · ·とする。
その H関数を Hn、 Hn— 1、 · · · ·とする。
各々のスポットが異なるため、各々の H関数は、次のようになる。
[0041] [数 3]
Figure imgf000013_0001
[0042] この行列の行数および Zまたは列数の違 、をカーネルサイズ、各々の数字を演算 係数とする。
[0043] 上述したように、光波面変調素子としての位相板をズーム光学系に備えた撮像装 置に適用する場合、ズーム光学系のズーム位置によって生成されるスポット像が異な る。このため、位相板より得られる焦点ズレ画像 (スポット画像)を後段の DSP等でコ ンポリューション演算する際、適性な焦点合わせ画像を得るためには、ズーム位置に 応じて異なるコンボリューシヨン演算が必要となる。
そこで、本実施形態においては、ズーム情報検出装置 160を設け、ズーム位置に 応じて適正なコンボリューシヨン演算を行 、、ズーム位置によらず適性な焦点合わせ 画像を得るように構成されて 、る。
[0044] 以上のように、処理装置 200における適正なコンボリーシヨン演算には、コンボリュ ーシヨンの演算係数をレジスタ 240に記憶しておく構成をとることができる。
この構成の他にも、以下の構成を採用することが可能である。
[0045] 各ズーム位置に応じて、レジスタ 240に補正係数を予め記憶しておき、この補正係 数を用いて演算係数を補正し、補正した演算係数で適性なコンボリューシヨン演算を 行う構成、各ズーム位置に応じて、レジスタ 240にカーネルサイズやコンボリューショ ンの演算係数自体を予め記憶しておき、これら記憶したカーネルサイズや演算係数 でコンボリューシヨン演算行う構成、ズーム位置に応じた演算係数を関数としてレジス タ 240に予め記憶しておき、ズーム位置によりこの関数より演算係数を求め、計算し た演算係数でコンボリューシヨン演算を行う構成等を採用することが可能である。
[0046] 本実施形態においては、 WFCOを採用し、かつ、高精細な画質を得ることが可能 で、し力も、光学系を簡単化でき、コスト低減を図ることが可能となっている。
以下、この特徴について説明する。
[0047] 図 12A〜図 12Cは、撮像装置 100の撮像素子 130の受光面でのスポット像を示し ている。
図 12Aは焦点が 0. 2mmずれた場合（Defocus = 0. 2mm)、図 12Bは合焦点の 場合（Best focus)、図 12Cは焦点が—0. 2mmずれた場合（Defocus=—0. 2m m)の各スポット像を示して!/、る。
図 12A〜図 12C力ももわ力るように、本実施形態に係る撮像装置 100においては、 位相板 120を含む波面形成用光学素子群 113によって深度の深 、光束 (像形成の 中心的役割を成す)とフレアー (ボケ部分)が形成される。
[0048] このように、本実施形態の撮像装置 100にお ヽて形成された 1次画像 FIMは、深度 が非常に深 、光束条件にして 、る。
[0049] 図 13Aおよび図 13Bは、本実施形態に係る撮像レンズ装置により形成される 1次画 像の変調伝達関数（MTF: Modulation Transfer Function)について説明する ための図であって、図 13Aは撮像レンズ装置の撮像素子の受光面でのスポット像を 示す図で、図 13Bが空間周波数 Sfreqに対する MTF特性を示している。
本実施形態においては、高精細な最終画像は後段の、たとえばデジタルシグナル プロセッサ（Digital Signal Processor)からなる画像処理装置 300の補正処理に 任せるため、図 13Aおよび図 13Bに示すように、 1次画像の MTFは本質的に低い値 になっている。
[0050] 処理装置 200は、たとえば DSPにより構成され、上述したように、撮像装置 100によ る 1次画像 FIMを受けて、 1次画像の空間周波数 Sfreqにおける MTFをいわゆる持 ち上げる所定の補正処理等を施して高精細な最終画像 FNLIMを形成する。 [0051] 処理装置 200の MTF補正処理は、たとえば図 14の曲線 Aで示すように、本質的に 低い値になっている 1次画像の MTFを、空間周波数 Sfreqをパラメータとしてエッジ 強調、クロマ強調等の後処理にて、図 14中曲線 Bで示す特性に近づく（達する）よう な補正を行う。
図 14中曲線 Bで示す特性は、たとえば本実施形態のように、波面形成用光学素子 を用いずに波面を変形させな 、場合に得られる特性である。
なお、本実施形態における全ての補正は、空間周波数 Sfreqのパラメータによる。
[0052] 本実施形態においては、図 14に示すように、光学的に得られる空間周波数 Sfreq に対する MTF特性曲線 Aに対して、最終的に実現した！/、MTF特性曲線 Bを達成す るためには、それぞれの空間周波数に対し、エッジ強調等の強弱を付け、元の画像（
1次画像）に対して補正をかける。
たとえば、図 14の MTF特性の場合、空間周波数 Sfreqに対するエッジ強調度の曲 線は、図 15に示すようになる。
[0053] すなわち、空間周波数 Sfreqの所定帯域内における低周波数側および高周波数側 でエッジ強調を弱くし、中間周波数領域においてエッジ強調を強くして補正を行うこと により、所望の MTF特性曲線 Bを仮想的に実現する。
[0054] このように、実施形態に係る撮像システム 10は、 1次画像を形成する光学系 110を 含む複数の撮像装置 100と、 1次画像を高精細な最終画像に形成する処理装置 20
0とを有し、光学系システムの中に、波面成形用の光学素子を新たに設ける力 また はガラス、プラスチックなどのような光学素子の面を波面成形用に成形したものを設 けることにより、結像の波面を変形し、そのような波面を CCDや CMOSセンサ力 な る撮像素子 130の撮像面 (受光面）に結像させ、その結像 1次画像を、処理装置 200 を通して高精細画像を得る画像形成システムである。
本実施形態では、撮像装置 100による 1次画像は深度が非常に深い光束条件にし ている。そのために、 1次画像の MTFは本質的に低い値になっており、その MTFの 補正を処理装置 200で行う。
[0055] ここで、本実施形態における撮像装置 100における結像のプロセスを、波動光学的 に考察する。 物点の 1点力 発散された球面波は結像光学系を通過後、収斂波となる。そのとき
、結像光学系が理想光学系でなければ収差が発生する。波面は球面でなく複雑な 形状となる。幾何光学と波動光学の間を取り持つのが波面光学であり、波面の現象 を取り扱う場合に便利である。
結像面における波動光学的 MTFを扱うとき、結像光学系の射出瞳位置における波 面情報が重要となる。
MTFの計算は結像点における波動光学的強度分布のフーリエ変換で求まる。そ の波動光学的強度分布は波動光学的振幅分布を 2乗して得られるが、その波動光 学的振幅分布は射出瞳における瞳関数のフーリエ変換から求まる。
さらにその瞳関数はまさに射出瞳位置における波面情報 (波面収差)そのものから であることから、その光学系 110を通して波面収差が厳密に数値計算できれば MTF が計算できることになる。
したがって、所定の手法によって射出瞳位置での波面情報に種々の加工を施せば 、任意に結像面における MTF値は変更可能である。
本実施形態においても、波面の形状変化を波面形成用光学素子で行うのが主で あるが、まさに phase (位相、光線に沿った光路長）に増減を設けて目的の波面形成 を行っている。
そして、目的の波面形成を行えば、射出瞳からの射出光束は、図 12A〜図 12Cに 示す幾何光学的なスポット像力 わ力るように、光線の密な部分と疎の部分から形成 される。
この光束状態の MTFは空間周波数の低 、ところでは低 、値を示し、空間周波数 の高 、ところまでは何とか解像力は維持して 、る特徴を示して 、る。
すなわち、この低い MTF値 (または、幾何光学的にはこのようなスポット像の状態） であれば、エリアジングの現象を発生させな ヽこと〖こなる。
つまり、ローパスフィルタが必要ないのである。
そして、後段の DSP等力もなる画像処理装置 200で MTF値を低くして 、る原因の フレアー的画像を除去すれば良いのである。それによつて MTF値は著しく向上する [0057] 以上説明したように、本実施形態によれば、光学系 110、光波面変調素子としての 位相板 120、光学系 110と位相板 120とを通過した被写体収差画像を撮像可能な撮 像素子 130と、コンボリューシヨン係数を特定する係数特定情報を記憶する撮像装置 側記憶部 140と、撮像素子 130から得られた被写体収差画像データと記憶部 140に 記憶された係数特定情報とを送信する送信装置 150と、を主構成要素として有する 複数の撮像装置 100A〜： L00Cと、撮像装置 100から送信されてきたズーム位置ま たはズーム量に応じた係数特定情報に基づき、あら力じめ記憶した複数のコンボリュ ーシヨン係数力も一の係数を取得して、撮像素子 130からの分散画像信号より分散 のな!ヽ被写体画像データを生成する処理装置 200とを有することから、複数の光学 システムの画像復元を一つの装置で行うことができる。
ここで、撮像装置 100A〜100Cはそれぞれのズーム位置またはズーム量に応じて 適切な係数特性情報を記憶部 140から選択して送信を行う。
また、ズーム位置を気にすることなくレンズ設計ができ、かつ精度の良いコンボリュ ーシヨンによる画像復元が可能となる。したがって、どのようなズームレンズであっても 、難度が高ぐ高価でかつ大型化した光学レンズを必要としないレンズを駆動させる こと無くピントの合った画像を提供することが可能となる利点がある。
そして、本実施形態に係る撮像装置 100は、デジタルカメラやカムコーダ一等の民 生機器の小型、軽量、コストを考慮されたズームレンズの WFCOに使用することが可 能である。
ここで、撮像装置 100A〜： L00Cは、位相板に応じた係数特定情報を記憶部 140 カゝら選択し、処理装置 200に送信するとともに、撮像装置各個のズーム位置ゃズー ム量に応じたズーム情報を同じく送信装置 150を用いて処理装置 200へ送信するよ うにしてもよい。この場合処理装置 200は、受信した係数特定情報と、ズーム情報と 力も一のコンボリュ一シヨン係数を取得して、画像復元を行う。
[0058] また、本実施形態においては、結像レンズ 112による撮像素子 130の受光面への 結像の波面を変形させる波面形成用光学素子を有する撮像装置 100と、撮像装置 1 00による 1次画像 FIMを受けて、 1次画像の空間周波数における MTFをいわゆる持 ち上げる所定の補正処理等を施して高精細な最終画像 FNLIMを形成する処理装 置 200とを有することから、高精細な画質を得ることが可能となるという利点がある。 また、撮像装置 100の光学系 110の構成を簡単ィ匕でき、製造が容易となり、コスト 低減を図ることができる。
[0059] ところで、 CCDや CMOSセンサを撮像素子として用いた場合、画素ピッチから決ま る解像力限界が存在し、光学系の解像力がその限界解像力以上であるとエリアジン グのような現象が発生し、最終画像に悪影響を及ぼすことは周知の事実である。 画質向上のため、可能な限りコントラストを上げることが望ましいが、そのことは高性 能なレンズ系を必要とする。
[0060] しかし、上述したように、 CCDや CMOSセンサを撮像素子として用いた場合、エリ アジングが発生する。
現在、エリアジングの発生を避けるため、撮像レンズ装置では、一軸結晶系からな るローパスフィルタを併用し、エリアジングの現象の発生を避けている。
このようにローパスフィルタを併用することは、原理的に正しいが、ローパスフィルタ そのものが結晶でできているため、高価であり、管理が大変である。また、光学系に 使用することは光学系をより複雑にして 、ると 、う不利益がある。
[0061] 以上のように、時代の趨勢でますます高精細の画質が求められているにもかかわら ず、高精細な画像を形成するためには、従来の撮像レンズ装置では光学系を複雑に しなければならない。複雑にすれば、製造が困難になったりし、また高価なローパス フィルタを利用したりするとコストアップにつながる。
しかし、本実施形態によれば、ローパスフィルタを用いなくとも、エリアジングの現象 の発生を避けることができ、高精細な画質を得ることが可能となる。
[0062] なお、本実施形態において、光学系 110の波面形成用光学素子を絞りより物体側 レンズよりに配置した例を示した力 絞りと同一あるいは絞りより結像レンズ側に配置 しても上記と同様の作用効果を得ることができる。
[0063] また、光学系 110を構成するレンズは、図 5の例に限定されることはなぐ本発明は
、種々の態様が可能である。
[0064] なお、上記の実施形態においては撮像装置 100に図 4を例としてズーム量検出装 置を設ける場合を例に説明したが、たとえば図 17に示すように、物体概略距離情報 検出装置 (DSIDT)171および操作スィッチ（OSW) 172を含む撮影モード設定部（ MOD) 170を設けて、距離情報に基づいて特定情報を選択するように構成すること も可能である。
[0065] この場合、複数の撮影モード、たとえば通常撮影モード (ポートレイト）の他、マクロ 撮影モード (至近)および遠景撮影モード (無限遠)を有しており、これら各種撮影モ ードは、撮影モード設定部 170の操作スィッチ 172により選択して入力することが可 能に構成されている。
操作スィッチ 172は、たとえば図 17に示すように、カメラ (撮像装置）の背面側の液 晶画面 303の下部側に備えられた切替スィッチ 301a, 301b, 301cにより構成され る。
切替スィッチ 301aが遠景撮影モード (無限遠)を選択し入力するためのスィッチで あり、切替スィッチ 301bが通常撮影モード (ポートレイト）を選択し入力するためのス イッチであり、切替スィッチ 301cがマクロ撮影モード (至近)を選択し入力するための スィッチである。
なお、モードの切り替え方法は、図 17のようなスィッチによる方法の他、タツチパネ ル式でも構わな ヽし、メニュー画面から物体距離を切り替えるモードを選択しても構 わない。
[0066] 被写体距離情報生成部としての物体概略距離情報検出装置 171は、操作スィッチ 172の入力情報により被写体までの距離に相当する情報を生成し、送信装置 140に 供給する。
処理装置 200は、送信装置 150の送信情報に基づき、撮像装置 100の撮像素子 1 30からの分散画像信号より分散のない画像信号に変換処理するが、このとき物体概 略距離情報検出装置 171の検出結果に応じて選択された係数特定情報を受けて、 設定された撮影モードに応じて異なる変換処理を行う。
たとえば、処理装置 200は、通常撮影モードにおける通常変換処理と、この通常変 換処理に比べて近接側に収差を少なくするマクロ撮影モードに対応したマクロ変換 処理と、通常変換処理に比べて遠方側に収差を少なくする遠景撮影モードに対応し た遠景変換処理と、を撮影モードに応じて選択的に実行する。 ここで、撮像装置 100A〜： LOOCは、その位相板に応じた係数特定情報を送信する とともに、被写体までの距離に相当する情報を送信し、処理装置 200がこれらの 2種 類の情報力も一のコンボリュ—シヨン係数を取得して、画像を復元するようにしてもよ い。
[0067] この場合も、上記した効果と同様の効果を得ることができる。
また、上記の実施形態においては、ズーム量検出装置や物体概略距離情報検出 装置を設けたものを例に説明したが、これらを具備しない形態であってもよい。この場 合は、図 3において、撮像装置 100から送信されてきた係数特定情報のみに基づき 、処理装置 200に予め記憶してあるコンボリュ—シヨン係数力 一の係数を取得して 分散のない被写体画像データを生成する。この場合も、上記した効果と同様の効果 を得ることができる。
[0068] また、本実施形態にぉ ヽては、光学システムを複数設けて、その撮像した画像情報 を係数特定情報と共に処理装置 200側に送信するようにしたが、たとえば図 18に示 すように、光学系 110— 1, 110— 2を複数設け、所望の光学系を順番に選択して、 各光学系を通過した被写体像を単一の撮像素子 130に入力するように構成すること も可能である。
この場合も、上記した効果と同様の効果を得ることができる。
産業上の利用可能性
[0069] 本発明の撮像装置、撮像システム、および撮像方法は、複数の光学システムによる 画像の復元を一つの装置で復元できることから、ズーム光学系を備えたデジタルスチ ルカメラや携帯電話搭載カメラ、携帯情報端末搭載カメラ等に適用可能である。

Claims

請求の範囲
[1] 撮像装置と、
処理装置と、を有し、
前記撮像装置は、
光学系と光波面変調素子とを通過した被写体収差画像を撮像可能な撮像素子と コンボリューシヨン係数を特定する係数特定情報を提供するコンボリューシヨン係数 特定情報提供部と、
前記撮像素子力 得られた被写体収差画像データと前記コンボリューシヨン係数 特定
情報提供部により提供される前記係数特定情報とを送信する送信部と、を含み、 前記処理装置は、
前記撮像装置の送信部により送信された前記被写体収差画像データと前記係数 特定情報とを受信する受信部と、
複数のコンボリューシヨン係数を記憶する処理装置側記憶部と、
前記受信部により受信した前記係数特定情報に基づき前記処理装置側記憶部 力 一のコンボリューシヨン係数を選択する係数選択部と、
前記受信部により受信した前記被写体収差画像データを前記係数選択部で選 択した前記一のコンボリューシヨン係数によって変換することにより収差のない被写体 画像データを生成する変換部と、を含む
撮像システム。
[2] 前記コンボリューシヨン係数特定情報提供部は、コンボリューシヨン係数を特定する 係数特定情報を記憶する撮像装置側記憶部を含み、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記記憶部 に記憶された前記係数特定情報とを送信する
請求項 1記載の撮像システム。
[3] 前記撮像装置は、
前記光学系は複数のレンズを選択的に装着可能で、 前記コンボリューシヨン係数特定情報提供部は、前記装着されたレンズに応じた コンボリューシヨン係数を特定する係数特定情報を取得する係数特定情報取得部を 含み、
前記撮像素子は、前記複数のレンズの内少なくとも一のレンズおよび光波面変調 素子を通過した被写体収差画像を撮像可能で、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 性情報取得部により取得された前記係数特定情報とを送信する
請求項 1記載の撮像システム。
[4] 前記撮像装置は、
前記光学系がズーム光学系を含み、
前記コンボリューシヨン係数特定情報提供部は、
ズーム光学系のズーム量に応じたコンボリューシヨン係数を特定可能な複数の 係数特定情報を記憶する撮像装置側記憶部と、
ズーム光学系のズーム量を検知するズーム量検知部と、
前記ズーム量検知部により検知されたズーム量に基づき、前記撮像装置側記憶 部から一の係数特定情報を取得する係数特定情報取得部と、を含み、
前記撮像素子は、ズーム光学系と光波面変調素子とを通過した被写体収差画像 を撮像可能で、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 定情報取得部により取得された前記係数特定情報とを送信する
請求項 1記載の撮像システム。
[5] 前記コンボリューシヨン係数特定情報提供部は、
被写体までの距離に相当する情報を取得する被写体距離情報取得部と、 被写体までの距離に応じたコンボリューシヨン係数を特定可能な複数の係数特定 情報を記憶する撮像装置側記憶部と、
前記被写体距離情報取得部により取得された被写体までの距離に相当する情報 に基づき、前記撮像装置側記憶部から一の係数特定情報を取得する係数特定情報 取得部と、を含み、 前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 定情報取得部により取得された前記係数特定情報とを送信する
請求項 1記載の撮像システム。
[6] 光学系と光波面変調素子とを通過した被写体収差画像を撮像可能な撮像素子と、 コンボリューシヨン係数を特定する係数特定情報を提供するコンボリューシヨン係数 特定情報提供部と、
前記撮像素子から得られた被写体収差画像データと前記コンボリューシヨン係数特 定情報提供部により提供される前記係数特定情報とを送信する送信部と、
を含む撮像装置。
[7] 前記コンボリューシヨン係数特定情報提供部は、コンボリューシヨン係数を特定する 係数特定情報を記憶する撮像装置側記憶部を含み、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記記憶部 に記憶された前記係数特定情報とを送信する
請求項 6記載の撮像装置。
[8] 前記光学系は複数のレンズを選択的に装着可能で、
前記コンボリューシヨン係数特定情報提供部は、前記装着されたレンズに応じたコ ンポリューション係数を特定する係数特定情報を取得する係数特定情報取得部を含 み、
前記撮像素子は、前記複数のレンズの内少なくとも一のレンズおよび光波面変調 素子を通過した被写体収差画像を撮像可能で、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 性情報取得部により取得された前記係数特定情報とを送信する
請求項 6記載の撮像装置。
[9] 前記光学系がズーム光学系を含み、
前記コンボリューシヨン係数特定情報提供部は、
ズーム光学系のズーム量に応じたコンボリューシヨン係数を特定可能な複数の係 数特定情報を記憶する撮像装置側記憶部と、
ズーム光学系のズーム量を検知するズーム量検知部と、 前記ズーム量検知部により検知されたズーム量に基づき、前記撮像装置側記憶 部から一の係数特定情報を取得する係数特定情報取得部と、を含み、
前記撮像素子は、ズーム光学系と光波面変調素子とを通過した被写体収差画像を 撮像可能で、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 定情報取得部により取得された前記係数特定情報とを送信する
請求項 6記載の撮像装置。
[10] 前記コンボリューシヨン係数特定情報提供部は、
被写体までの距離に相当する情報を取得する被写体距離情報取得部と、 被写体までの距離に応じたコンボリューシヨン係数を特定可能な複数の係数特定 情報を記憶する撮像装置側記憶部と、
前記被写体距離情報取得部により取得された被写体までの距離に相当する情報 に基づき、前記撮像装置側記憶部から一の係数特定情報を取得する係数特定情報 取得部と、を含み、
前記送信部は、前記撮像素子から得られた被写体収差画像データと前記係数特 定情報取得部により取得された前記係数特定情報とを送信する
請求項 6記載の撮像装置。
[11] 撮像素子により光学系と光波面変調素子とを通過した被写体収差画像を撮像する ステップと、
被写体収差画像データと、コンボリューシヨン係数を特定する係数特定情報とを送 信するステップと、
前記送信された前記被写体収差画像データと前記係数特定情報とを受信するステ ップと、
前記受信した前記係数特定情報に基づき複数のコンボリューシヨン係数力 一のコ ンポリューション係数を選択する係数選択ステップと、
前記受信した前記被写体収差画像データを前記係数選択ステップで選択した前 記一のコンボリューシヨン係数によって変換することにより収差のない被写体画像デ ータを生成するステップと、 を含む撮像方法。
PCT/JP2006/306477 2005-03-30 2006-03-29 撮像装置、撮像システム、および撮像方法 WO2006106736A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US11/909,789 US7978252B2 (en) 2005-03-30 2006-03-29 Imaging apparatus, imaging system, and imaging method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2005100129 2005-03-30
JP2005-100129 2005-03-30
JP2005217803A JP2006311472A (ja) 2005-03-30 2005-07-27 撮像装置、撮像システム、および撮像方法
JP2005-217803 2005-07-27

Publications (1)

Publication Number Publication Date
WO2006106736A1 true WO2006106736A1 (ja) 2006-10-12

Family

ID=37073299

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/306477 WO2006106736A1 (ja) 2005-03-30 2006-03-29 撮像装置、撮像システム、および撮像方法

Country Status (2)

Country Link
JP (1) JP2006311472A (ja)
WO (1) WO2006106736A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108605095B (zh) * 2016-02-26 2021-04-09 富士胶片株式会社 图像处理装置、摄像装置以及图像处理方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000005127A (ja) * 1998-01-23 2000-01-11 Olympus Optical Co Ltd 内視鏡システム
JP2003219357A (ja) * 2002-01-25 2003-07-31 Fuji Photo Film Co Ltd デジタル撮像装置及び画像形成システム
JP2003235794A (ja) * 2002-02-21 2003-08-26 Olympus Optical Co Ltd 電子内視鏡システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000005127A (ja) * 1998-01-23 2000-01-11 Olympus Optical Co Ltd 内視鏡システム
JP2003219357A (ja) * 2002-01-25 2003-07-31 Fuji Photo Film Co Ltd デジタル撮像装置及び画像形成システム
JP2003235794A (ja) * 2002-02-21 2003-08-26 Olympus Optical Co Ltd 電子内視鏡システム

Also Published As

Publication number Publication date
JP2006311472A (ja) 2006-11-09

Similar Documents

Publication Publication Date Title
JP4712631B2 (ja) 撮像装置
JP4663737B2 (ja) 撮像装置およびその画像処理方法
JP4749959B2 (ja) 撮像装置、並びにその製造装置および製造方法
JP4749984B2 (ja) 撮像装置、並びにその製造装置および製造方法
WO2006022373A1 (ja) 撮像装置および撮像方法
JP4818957B2 (ja) 撮像装置およびその方法
JP2007322560A (ja) 撮像装置、並びにその製造装置および製造方法
US8462213B2 (en) Optical system, image pickup apparatus and information code reading device
JP2008048293A (ja) 撮像装置、およびその製造方法
JP2008268937A (ja) 撮像装置および撮像方法
JP2007300208A (ja) 撮像装置
WO2006106737A1 (ja) 撮像装置および撮像方法
JP4364847B2 (ja) 撮像装置および画像変換方法
JP2008245266A (ja) 撮像装置および撮像方法
JP2009086017A (ja) 撮像装置および撮像方法
JP2006094468A (ja) 撮像装置および撮像方法
JP4818956B2 (ja) 撮像装置およびその方法
JP2006094470A (ja) 撮像装置および撮像方法
JP2006094469A (ja) 撮像装置および撮像方法
JP2008011491A (ja) カメラシステム、監視カメラ、および撮像方法
JP2009033607A (ja) 撮像装置および画像処理方法
WO2006106736A1 (ja) 撮像装置、撮像システム、および撮像方法
JP5197784B2 (ja) 撮像装置
JP4722748B2 (ja) 撮像装置およびその画像生成方法
JP2009134023A (ja) 撮像装置および情報コード読取装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 11909789

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

NENP Non-entry into the national phase

Ref country code: RU

122 Ep: pct application non-entry in european phase

Ref document number: 06730425

Country of ref document: EP

Kind code of ref document: A1