WO2012114994A1 - カラー撮像素子 - Google Patents

カラー撮像素子 Download PDF

Info

Publication number
WO2012114994A1
WO2012114994A1 PCT/JP2012/053777 JP2012053777W WO2012114994A1 WO 2012114994 A1 WO2012114994 A1 WO 2012114994A1 JP 2012053777 W JP2012053777 W JP 2012053777W WO 2012114994 A1 WO2012114994 A1 WO 2012114994A1
Authority
WO
WIPO (PCT)
Prior art keywords
array
color
filter
pixels
pattern
Prior art date
Application number
PCT/JP2012/053777
Other languages
English (en)
French (fr)
Inventor
智行 河合
林 健吉
田中 誠二
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to CN201280009849.4A priority Critical patent/CN103380623B/zh
Priority to JP2013500998A priority patent/JP5411390B2/ja
Priority to EP12749196.7A priority patent/EP2680590B1/en
Publication of WO2012114994A1 publication Critical patent/WO2012114994A1/ja
Priority to US13/971,563 priority patent/US8711257B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Definitions

  • the present invention relates to a color image sensor, and more particularly to a color image sensor capable of reducing the occurrence of color moire and increasing the resolution.
  • a single color filter is provided on each pixel, so each pixel has only single color information.
  • the output image of the single-chip color imaging device is a RAW image (mosaic image)
  • a multi-channel image is obtained by a process of interpolating the missing color pixels from the surrounding pixels (synchronization process).
  • the problem is the reproduction characteristics of high-frequency image signals.
  • a color image sensor is more likely to cause aliasing in a captured image than a monochrome image sensor. For this reason, it is an important issue to widen the reproduction band and increase the resolution while suppressing the occurrence of color moire (false color).
  • the primary color Bayer array which is the color array of the color filter most widely used in a single-plate color image sensor, has green (G) pixels arranged in a checkered pattern, and red (R) and blue (B) are arranged in line sequence. Is. For this reason, there is a problem in reproduction accuracy when a high-frequency signal is generated in the oblique direction for the G signal and in the horizontal and vertical directions for the R and B signals.
  • FIG. 22A When a black and white vertical stripe pattern (high-frequency image) as shown in FIG. 22A is incident on a color imaging device having a Bayer array color filter shown in FIG.
  • R When divided and compared for each color, as shown in FIGS. 22C to 22E, R is a light flat, B is a dark flat, and G is a light and shade mosaic image.
  • a density difference level difference
  • a color is added depending on the color arrangement and the input frequency.
  • an optical low-pass filter made of a birefringent material such as crystal is disposed in front of the color image pickup device, and this is avoided by optically dropping high frequencies.
  • coloring due to folding of the high-frequency signal can be reduced, but there is a problem that the resolution is lowered due to its adverse effect.
  • the color filter array of the color image sensor is configured such that an arbitrary pixel of interest satisfies an arrangement restriction condition in which any of the three colors including the color of the pixel of interest and the four sides of the pixel of interest are adjacent.
  • Patent Document 1 A color imaging device having a random color arrangement has been proposed (Patent Document 1).
  • Patent Document 2 an image sensor having a color filter array alternately arranged at the second predetermined period in the other diagonal direction has been proposed (Patent Document 2).
  • R and B of the three primary colors of RGB are arranged every three pixels in the horizontal and vertical directions, and G is arranged between these R and B (patent). Reference 4).
  • Patent Document 5 in a color solid-state imaging device of three primary colors of RGB, the color filter array is divided into four regions by the X-axis and Y-axis passing through the center, and R, G, and B are Bayer in each region.
  • R, G, and B are Bayer in each region.
  • R, G, and B in each region have an X-axis mirror symmetry pattern and a Y-axis mirror symmetry pattern while being arranged in an array.
  • at least one G is arranged in each of the horizontal (X axis), vertical (Y axis), and diagonal lines of the color filter array.
  • the filter arrangement is random. For this reason, when performing a synchronization (interpolation) process (or demosaic process, hereinafter the same) at a later stage, it is necessary to optimize for each random pattern, and there is a problem that the synchronization process becomes complicated.
  • the random arrangement is effective for low-frequency color moire, but is not effective for false colors in the high-frequency part.
  • the ratio of the number of G pixels to the number of R and B pixels is higher than that of the Bayer array, and there are lines of only G pixels in the horizontal or vertical direction. For this reason, it is not effective for the false color of the high-frequency part in the horizontal or vertical direction.
  • one or more G is arranged in each horizontal (vertical) and diagonal (especially diagonal) line of the color filter array.
  • either one of R and B is not arranged on the horizontal and vertical lines, the occurrence of color moire (false color) cannot be suppressed.
  • the present invention has been made in view of such circumstances, and can suppress the generation of false colors and increase the resolution, and can simplify the subsequent processing as compared with the conventional random arrangement.
  • An object is to provide an imaging device.
  • a color imaging device provides a color image of a predetermined color filter array on a plurality of pixels formed by photoelectric conversion devices arranged in a horizontal direction and a vertical direction.
  • a filter is provided, and the color filter array includes a sub-array in which the color filters are arranged in an array pattern corresponding to M ⁇ N (M is an even number of 2 or more, N is an even number of 4 or more) pixels,
  • the sub-array is repeatedly arranged in the horizontal direction and the vertical direction, and the color filter includes a first filter corresponding to the first color that contributes most to obtain a luminance signal, and 2 other than the first color.
  • the first filter has a checkered pattern in the sub-array and the arrangement of the first filter in one of the sub-arrays adjacent to each other in the horizontal or vertical direction and the first filter in the other
  • the second filter corresponding to each color of the second color is arranged in the basic arrangement pattern repeatedly arranged in the horizontal direction and the vertical direction in the color filter arrangement.
  • the basic array pattern including K sub-array sets (K is a natural number of 1 or more) that are adjacent to each other and in which the arrangement of the first filters is a mirror image, the horizontal and vertical directions of the color filter array One or more are arranged in each line.
  • the first filter that contributes most to obtain a luminance signal is a checkerboard pattern in a sub-array and a first filter between sub-arrays adjacent to each other in the horizontal or vertical direction.
  • the filters were arranged so that the arrangement of the filters had a mirror image relationship. For this reason, one or more first filters can be arranged in each of the horizontal, vertical, diagonally upper right and diagonally lower right lines of the color filter array, thereby improving the reproduction accuracy of the synchronization processing in the high frequency region. Can do.
  • one or more second filters corresponding to each of the second or more second colors other than the first color are included in each horizontal and vertical line of the color filter array in the basic array pattern. It was arranged. For this reason, the generation of color moire (false color) can be suppressed and high resolution can be achieved.
  • the color filter array has a predetermined basic array pattern repeatedly arranged in the horizontal direction and the vertical direction. For this reason, according to said aspect, when performing the synchronization (interpolation) process in a back
  • the ratio between the number of pixels of the first color corresponding to the first filter and the number of pixels of each second color of two or more colors corresponding to the second filter is made different.
  • the ratio of the number of pixels of the first color that contributes most to obtain the luminance signal is made larger than the ratio of the number of pixels of each color of the second color corresponding to the second filter. For this reason, aliasing can be suppressed and high frequency reproducibility is also good.
  • the basic array pattern is composed of an array pattern corresponding to ⁇ M ⁇ ⁇ N ( ⁇ and ⁇ are both natural numbers of 1 or more) pixels. For this reason, for example, when the color image sensor is a CMOS (Complementary Metal Oxide Semiconductor) image sensor, an even number (for example, four) of pixels can share one amplifier circuit.
  • CMOS Complementary Metal Oxide Semiconductor
  • the basic array pattern is composed of one set. This is because, when the basic array pattern is enlarged, signal processing such as synchronization is complicated, but a special effect cannot be obtained by increasing the size of the basic array pattern.
  • the basic array pattern is an array pattern corresponding to 4 ⁇ 4 pixels. If the basic array pattern is an array pattern corresponding to 2 ⁇ 8 pixels, one or more second filters of each color may be arranged in each horizontal and vertical line of the color filter array in the basic array pattern. Because it becomes impossible.
  • the basic array pattern is four sub-arrays that are adjacent to each other in the horizontal direction and the vertical direction and that are adjacent to each other.
  • the arrangement of the first filters is composed of four sub-arrays that have a mirror image relationship.
  • the color filter array includes a square array corresponding to 2 ⁇ 2 pixels formed of the first filter.
  • M and N are even numbers of 10 or less.
  • M and N exceed 10 (M, N> 10)
  • signal processing such as synchronization is complicated, but a special effect cannot be obtained by increasing the size of the basic array pattern. It is.
  • the first color is green (G) and the second color is red (R) and blue (B).
  • At least one first filter corresponding to the first color that contributes most to obtain a luminance signal is included in each of the horizontal, vertical, diagonal upper right, and diagonal lower right lines of the color filter array.
  • the ratio of the number of pixels of the first color corresponding to the first filter is set to the ratio of the number of pixels of each color of the second color corresponding to the second filter of two or more colors other than the first color. I tried to make it bigger. For this reason, it is possible to improve the reproduction accuracy of the synchronization (interpolation) processing in the high frequency region and to suppress aliasing.
  • one or more second filters corresponding to each of the second or more second colors other than the first color are arranged in the horizontal and vertical lines of the color filter array in the basic array pattern. I tried to do it. For this reason, the generation of color moire (false color) can be suppressed and high resolution can be achieved.
  • a predetermined basic array pattern is repeated in the horizontal direction and the vertical direction. For this reason, when performing the synchronization (interpolation) process in the subsequent stage, the process can be performed in accordance with the repetitive pattern, and the subsequent process can be simplified as compared with the conventional random array.
  • FIG. 1 is a block diagram showing a digital camera equipped with a single-plate color image sensor according to the present invention.
  • FIG. 2 is a diagram showing pixels of a single-plate color image sensor according to the present invention.
  • FIG. 3 is a diagram showing a first embodiment of a single-plate color image sensor according to the present invention.
  • FIG. 4 is a diagram showing a basic array pattern included in the color filter array of the color image sensor of the first embodiment.
  • FIG. 5 is a diagram showing a state in which the basic array pattern of 6 ⁇ 6 pixels included in the color filter array of the color image sensor of the first embodiment is divided into an A array and a B array of 3 ⁇ 3 pixels, and these are arranged. It is.
  • FIG. 1 is a block diagram showing a digital camera equipped with a single-plate color image sensor according to the present invention.
  • FIG. 2 is a diagram showing pixels of a single-plate color image sensor according to the present invention.
  • FIG. 3 is a diagram showing a first embodiment of
  • FIG. 6 is a diagram for explaining a method of determining the correlation direction from the pixel values of 2 ⁇ 2 G pixels included in the color filter array of the color image sensor of the first embodiment.
  • FIG. 7 is a diagram for explaining the concept of the basic array pattern included in the color filter array of the color image sensor.
  • FIG. 8 is a diagram showing a second embodiment of the single-plate color image sensor according to the present invention.
  • FIG. 9 is a diagram showing a basic array pattern included in the color filter array of the color image sensor of the second embodiment.
  • FIG. 10 is a diagram showing a color filter array of a comparative example having a square array pattern.
  • FIG. 11 illustrates that in the color filter array of the color imaging device of the second embodiment, there is no diagonal upper right and diagonal lower right direction [diagonal (NE, NW) direction] line where no G filter is arranged.
  • FIG. FIG. 12 is a diagram showing a third embodiment of a single-plate color image sensor according to the present invention.
  • FIG. 13 is a diagram showing a basic array pattern included in the color filter array of the color imaging device of the third embodiment.
  • FIG. 14 is a diagram showing a fourth embodiment of a single-plate color image sensor according to the present invention.
  • FIG. 15 is a diagram showing a basic array pattern included in the color filter array of the color image sensor of the fourth embodiment.
  • FIG. 16 is a diagram showing a fifth embodiment of a single-plate color image sensor according to the present invention.
  • FIG. 17 is a diagram showing a basic array pattern included in the color filter array of the color image sensor of the fifth embodiment.
  • FIG. 18 is a diagram for explaining a comparative example of basic arrangement patterns in which one or more R and B filters are not arranged on the horizontal and vertical lines of the color filter arrangement.
  • FIG. 19 is a diagram showing a color image sensor of another embodiment in which the number of sub-arrays constituting the basic array pattern is increased from that of the fifth embodiment.
  • FIG. 20 is a diagram showing a sixth embodiment of a single-plate color image sensor according to the present invention.
  • FIG. 21 is a diagram showing a color image sensor of another embodiment in which the arrangement of sub-arrays constituting the basic array pattern is different from that of the sixth embodiment.
  • FIG. 22 is a diagram for explaining a problem of a color imaging device having a color filter with a conventional Bayer array.
  • FIG. 23 is another diagram for explaining a problem of a color image sensor having a color filter with a conventional Bayer array.
  • FIG. 1 is a block diagram of a digital camera 9 having a color image sensor according to the present invention.
  • the digital camera 9 includes a photographing optical system 10, a color imaging device 12, a photographing processing unit 14, an image processing unit 16, a driving unit 18, and a control unit 20.
  • the subject is imaged by the photographing optical system 10, and a light image indicating the subject image is formed on the light receiving surface of the color image sensor 12 (the color image sensor of the first embodiment).
  • the color image sensor 12 is arranged above the light receiving surface of a plurality of pixels composed of photoelectric conversion elements arrayed in the horizontal and vertical directions (two-dimensional array) in the drawing on the imaging surface.
  • This is a so-called single-plate type color image pickup device including a color filter having a predetermined color filter array.
  • upward refers to the direction in which the subject light is incident on the imaging surface of the color imaging element 12.
  • the subject image formed on the color image sensor 12 is converted into a signal charge corresponding to the amount of incident light by the photoelectric conversion element of each pixel.
  • the signal charge accumulated in each photoelectric conversion element is sequentially read out from the color imaging element 12 as a voltage signal (image signal) corresponding to the signal charge based on a drive pulse given from the drive unit 18 according to a command from the control unit 20.
  • the image signals read from the color image sensor 12 are R, G, and B signals that indicate red (R), green (G), and blue (B) mosaic images corresponding to the color filter array of the color image sensor 12.
  • the image signal read from the color image sensor 12 is input to the imaging processing unit 14.
  • the imaging processing unit 14 is a correlated double sampling circuit (CDS, Correlated Double Sampling) for removing reset noise included in the image signal, AGC (Automatic) for amplifying the image signal and controlling it to a certain level. Gain Control) circuit and A / D converter.
  • CDS Correlated Double Sampling
  • AGC Automatic
  • Gain Control Automatic
  • the imaging processing unit 14 amplifies the input image signal by performing correlated double sampling processing, and then outputs RAW data converted to a digital image signal to the image processing unit 16.
  • the image processing unit 16 calculates a white balance correction circuit, a gamma correction circuit, and a synchronization processing circuit (all RGB color information for each pixel from an RGB mosaic image associated with the color filter array of the single-plate color image sensor 12 ( (Processing circuit for simultaneous conversion), luminance / color difference signal generation circuit, contour correction circuit, and color correction circuit.
  • the image processing unit 16 performs necessary signal processing on the RAW data of the mosaic image input from the imaging processing unit 14 in accordance with a command from the control unit 20 to obtain luminance data (Y data) and color difference data (Cr, Cb data).
  • Image data (YUV data) consisting of:
  • the image data generated by the image processing unit 16 is subjected to compression processing in accordance with JPEG (Joint Photographic Experts Group) standard for still images by a compression / decompression processing circuit, and MPEG2 (Moving) for moving images.
  • JPEG Joint Photographic Experts Group
  • MPEG2 Motion Picture Experts Group
  • the image data is output and displayed on display means (not shown) such as a liquid crystal monitor.
  • FIG. 2 and 3 are views showing a first embodiment of a single-plate color image sensor according to the present invention.
  • 2 shows the pixel arrangement of the pixels provided in the color image sensor 12
  • FIG. 3 shows the color filter arrangement of the color filter.
  • the color imaging device 12 is a diagram in which a plurality of pixels including photoelectric conversion elements 22 arranged in a horizontal direction and a vertical direction (two-dimensional arrangement) and a light receiving surface of each pixel are arranged. 3 of the color filter array shown in FIG.
  • any one of RGB primary color filters hereinafter referred to as R filter, G filter, and B filter
  • R filter, G filter, and B filter any one of RGB primary color filters
  • G filter, and B filter any one of RGB primary color filters
  • the color image sensor 12 is not limited to a CCD (Charge Coupled Device) color image sensor, but may be other types of image sensors such as a CMOS (Complementary Metal Oxide Semiconductor) image sensor.
  • CCD Charge Coupled Device
  • CMOS Complementary Metal Oxide Semiconductor
  • the color filter array of the color image sensor 12 of the first embodiment has the following features (1), (2), (3), (4), (5), and (6).
  • the color filter array shown in FIG. 3 includes a basic array pattern P (pattern indicated by a thick frame in the figure) composed of a square array pattern corresponding to 6 ⁇ 6 pixels, and the basic array pattern P is in the horizontal and vertical directions. It is arranged repeatedly. That is, in this color filter array, R filters 23R, G filters 23G, and B filters 23B of R, G, and B colors are arrayed with a predetermined periodicity.
  • the R filter 23R, the G filter 23G, and the B filter 23B are arranged with a predetermined periodicity, a synchronization (interpolation) process of R, G, and B signals read from the color image sensor 12 is performed.
  • the processing can be performed according to a repeating pattern.
  • the color filter array after the thinning process can be the same as the color filter array before the thinning process, and a common processing circuit is used. be able to.
  • the G filter 23G corresponding to the color that contributes most to obtain the luminance signal has horizontal, vertical, and diagonal (NE, NE, NW) in each line.
  • NE means a diagonal upper right direction
  • NW means a diagonal lower right direction.
  • the diagonally upper right and diagonally lower right directions are directions of 45 ° with respect to the horizontal direction.
  • the angle can be changed according to the length of the long side and the short side.
  • One or more G filters 23G corresponding to luminance system pixels are arranged in each line in the horizontal, vertical, and diagonal (NE, NW) directions of the color filter array. For this reason, it is possible to improve the reproduction accuracy of the synchronization processing in the high frequency region regardless of the direction of high frequency.
  • the basic array pattern P of the color filter array shown in FIG. 3 has 8 pixels, 20 pixels, and R pixels corresponding to the RGB filters 23R, 23G, and 23B in the basic array pattern, respectively. There are 8 pixels. That is, the ratio of the number of pixels of RGB pixels is 2: 5: 2, and the ratio of the number of G pixels that contributes most to obtain a luminance signal is the ratio of R pixels and B pixels of other colors. It is larger than the ratio of the number of pixels.
  • the ratio between the number of G pixels and the number of R and B pixels is different, and in particular, the ratio of the number of G pixels that contributes most to obtain a luminance signal is equal to the number of R and B pixels. It was made larger than the ratio. For this reason, it is possible to suppress aliasing during the synchronization process and to improve high-frequency reproducibility.
  • the R filter 23R and the B filter 23B corresponding to two or more other colors (in this embodiment, R and B colors) other than the G color are respectively provided in the basic array pattern.
  • R and B colors in this embodiment, R and B colors
  • P one or more are arranged in each line in the horizontal and vertical directions of the color filter array.
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array, respectively, occurrence of color moire (false color) can be suppressed. Thereby, it is possible to prevent an optical low-pass filter for suppressing the occurrence of false colors from being arranged in the optical path from the incident surface of the optical system to the imaging surface. In addition, even when an optical low-pass filter is applied, it is possible to apply a filter having a weak function of cutting a high-frequency component for preventing generation of false colors. Thereby, it is possible to prevent the resolution from being impaired by the optical low-pass filter.
  • FIG. 4 shows a state where the basic array pattern P shown in FIG. 3 is divided into 4 ⁇ 3 ⁇ 3 pixels.
  • the basic array pattern P includes a 3 ⁇ 3 pixel A array 24a surrounded by a solid line frame in the figure and a 3 ⁇ 3 pixel B array 24b surrounded by a broken line frame in the figure. It can also be understood that the arrangement is alternately arranged in the horizontal and vertical directions.
  • the G filters 23G which are luminance system pixels, are arranged at the four corners and the center, and are arranged on both diagonal lines.
  • the R filter 23R is arranged in the horizontal direction and the B filter 23B is arranged in the vertical direction with the central G filter 23G interposed therebetween.
  • the B filter 23B is arranged in the horizontal direction and the R filter 23R is arranged in the vertical direction with the central G filter 23G interposed therebetween. That is, in the A array 24a and the B array 24b, the positional relationship between the R filter 23R and the B filter 23B is reversed, but the other arrangements are the same.
  • the G filter 23G at the four corners of the A array 24a and the B array 24b corresponds to 2 ⁇ 2 pixels by alternately arranging the A array and the B array in the horizontal and vertical directions as shown in FIG.
  • the G filter 23G has a square arrangement.
  • the G filter 23G which is a luminance system pixel, is arranged at the four corners and the center in 3 ⁇ 3 pixels in the A array 24a or B array 24b, and these 3 ⁇ 3 pixels are alternately arranged in the horizontal direction and the vertical direction. This is because a square array G filter 23G corresponding to 2 ⁇ 2 pixels is formed.
  • sequence by setting it as such an arrangement
  • the color filter array shown in FIG. 3 includes a square array 25 (hereinafter simply referred to as the G square array 25, see FIG. 6) corresponding to 2 ⁇ 2 pixels provided with the G filter 23G.
  • this color filter array it is possible to determine a direction having a high correlation among the horizontal direction, the vertical direction, and the diagonal direction by using the information of the G pixel having the minimum pixel interval.
  • This direction discrimination result can be used for a process of interpolating from surrounding pixels (synchronization process). Thereby, the synchronization processing by the image processing unit 16 can be executed.
  • a pixel of the 3 ⁇ 3 pixel A array 24a or B array 24b is set as a target pixel of the synchronization processing, and 5 ⁇ 5 pixels (a mosaic image local area) centering on the A array 24a or B array 24b.
  • the (region) is extracted, there are 2 ⁇ 2 G pixels at four corners of 5 ⁇ 5 pixels.
  • the basic array pattern P of the color filter array shown in FIG. 3 is point-symmetric with respect to the center (the center of the four G filters 23G). As shown in FIG. 4, the A array and the B array in the basic array pattern P are also point-symmetric with respect to the central G filter 23G.
  • the color filter array of the first and third lines of the first to sixth lines in the horizontal direction is GBGGRG
  • the second The color filter array of the line is RGRGBB
  • the color filter array of the fourth and sixth lines is GRGGGB
  • the color filter array of the fifth line is BGBGR.
  • the basic array pattern P in which the basic array pattern is point-symmetric is referred to as a basic array pattern for convenience.
  • FIG. 8 is a diagram showing a second embodiment of a single-plate color image sensor according to the present invention, and particularly shows a color filter array of the color image sensor.
  • the color image sensor of the second embodiment has basically the same configuration as the first embodiment except that the color filter array is different. For this reason, the same functions and configurations as those of the first embodiment are denoted by the same reference numerals and description thereof is omitted.
  • the color filter array (hereinafter simply referred to as color filter array) of the color image sensor 26 of the second embodiment is a basic array pattern in which the RGB filters 23R, 23G, and 23B are arrayed in an array pattern corresponding to 8 ⁇ 12 pixels.
  • This basic array pattern P1 including P1 is repeatedly arranged in the horizontal direction and the vertical direction. For this reason, the color filter array has the above-mentioned feature (1).
  • the basic array pattern P1 is composed of four types of sub-arrays having an array pattern corresponding to 4 ⁇ 6 pixels. These four types of subarrays are an A array 27a, a B array 27b, a C array 27c, and a D array 27d.
  • the arrays 27a to 27d are arranged in a matrix so as to be adjacent to each other in the horizontal and vertical directions.
  • the A array 27a and the B array 27b, and the C array 27c and the D array 27d are adjacent to each other in the vertical direction. Further, the A array 27a and the C array 27c, and the B array 27b and the D array 27d are adjacent to each other in the horizontal direction.
  • symbol L1 in a figure is a boundary line of A arrangement
  • Reference sign L2 is a boundary line between the A array 27a and the B array 27b and the C array 27c and the D array 27d.
  • G filters 23G are arranged in a checkered pattern (also referred to as a checker pattern).
  • the G filter 23G is arranged so that the arrangement of the G filter 23G has a mirror image relationship between the arrays 27a to 27d adjacent to each other.
  • the arrangement of the G filter 23G in the A array 27a and the arrangement of the G filter 23G in the B array 27b are mirror images of the boundary line L1.
  • the arrangement of the G filter 23G in the C array 27c and the arrangement of the G filter 23G in the D array 27d are also mirror images of the boundary line L1.
  • the arrangement of the G filter 23G in the A array 27a and the arrangement of the G filter 23G in the C array 27c are mirror images of the boundary line L2.
  • the arrangement of the G filter 23G in the B array 27b and the arrangement of the G filter 23G in the D array 27d are also mirror images of the boundary line L2.
  • the basic array pattern P1 includes two sub-array pairs [(A array 27a and B array 27b, C array 27c and D array 27d)] or ( A array 27a and C array 27c, B array 27b and D array 27d)].
  • each of the arrays 27a to 27d has an array pattern corresponding to M ⁇ N (M ⁇ N and both are even) pixels (condition 1), and the G filter 23G is a checkered pattern in each of the arrays 27a to 27d. If the arrangement of the G filters 23G in the arrays 27a to 27d adjacent to each other in the horizontal and vertical directions is in a mirror image relationship (condition 3), the G filter 23G It is arranged in each line in the horizontal, vertical and diagonal (NE, NW) directions of the array.
  • an oblique (NE, NW) line in which the G filter 23G is not arranged is generated.
  • one of the diagonal lines of each of the arrays 27a to 27d is a G blank diagonal line L3 passing through a pixel (hereinafter referred to as a G blank pixel) where the G filter 23G is not disposed, and this G blank diagonal line L3 is further connected to the boundary line L1.
  • the G blank diagonal line L3 of each of the arrays 27a to 27d is positioned on the same straight line by passing through the intersection with the boundary line L2.
  • the G blank passing through the G blank pixels arranged in the oblique (NE, NW) direction in each of the arrays 27a to 27d by satisfying the above-described conditions 1 to 3, as shown in FIG. 11, the G blank passing through the G blank pixels arranged in the oblique (NE, NW) direction in each of the arrays 27a to 27d.
  • the line L4 does not pass through both of the two corners (intersections between the boundary line L1 and the boundary line L2) at the diagonal positions of the arrays 27a to 27d.
  • the G blank lines L4 of the arrays 27a to 27d are not positioned on the same straight line, and the diagonal (NE, NW) lines where the G filter 23G is not arranged. Does not occur.
  • the arrangement of the G filters 23G in each of the arrays 27a to 27d is random, so that the G filter 23G is horizontal, vertical, and diagonal (NE, NW) of the color filter array. It cannot be said that it is arranged in each line of direction. Furthermore, when the condition 3 is not satisfied, the G filter 23G is a color filter array that is uniformly arranged in a checkered pattern, so that an oblique (NE, NW) line in which the G filter 23G is not disposed is generated.
  • the G filter 23G is arranged so as to satisfy the above-mentioned conditions 1 to 3, so that the G filter 23G is in the horizontal, vertical, and diagonal (NE, NW) directions of the color filter arrangement. Placed in each line.
  • the color filter array has the above-mentioned feature (2). Note that another embodiment in which the color filter array has the characteristic (2) even when the condition 3 or the conditions 1 and 3 are changed will be described later.
  • the arrangement of the G filter 23G in the A array 27a and the arrangement of the G filter 23G in the D array 27d are point-symmetric with respect to the center of the basic array pattern P1.
  • the arrangement of the G filters 23G in the B array 27b and the arrangement of the G filters 23G in the C array 27c are also point-symmetric with respect to the center of the basic array pattern P1.
  • the color filter array includes the G square array 25.
  • the color filter array has the above-mentioned feature (5).
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array in the basic array pattern P1 as in the first embodiment. .
  • the color filter array has the above-mentioned feature (4).
  • the A array 27a and the D array 27d are point-symmetric with respect to the center of the basic array pattern P1, and the B array 27b and the C array 27c are about the center of the basic array pattern P1.
  • the R and B filters 23R and 23B are also arranged so as to be point symmetric.
  • the color filter array has the above-mentioned feature (6).
  • the number of R pixels, G pixels, and B pixels corresponding to the RGB filters 23R, 23B, and 23R in the basic array pattern P1 (hereinafter abbreviated as the number of RGB pixels as appropriate) is set. 24 pixels, 48 pixels, and 24 pixels. For this reason, since the ratio of the number of RGB pixels is 1: 2: 1, the color filter array has the above-described feature (3).
  • the color filter array of the second embodiment has the same characteristics as the characteristics (1) to (6) of the color filter array of the first embodiment.
  • the basic array pattern P1 is composed of an array pattern corresponding to “even ⁇ even” pixels. For this reason, when the color image sensor 26 is a CMOS image sensor, for example, one pixel can be shared by four pixels arranged in a square matrix (the same applies to other embodiments).
  • FIG. 12 is a diagram showing a third embodiment of a single-plate color image sensor according to the present invention, and particularly shows a color filter array of the color image sensor.
  • the basic array pattern P1 of the second embodiment is composed of a total of four types of sub-arrays of A, B, C, and D arrays 27a to 27d.
  • the basic array pattern P1 is basically the same.
  • the array pattern is composed of a set of two types of sub arrays.
  • the third embodiment is basically the same in configuration as the first and second embodiments except that the color filter arrangement is different. Therefore, the third embodiment has the same function and configuration. About the thing, the same code
  • the color filter array (hereinafter simply referred to as color filter array) of the color image pickup device 30 includes a basic array pattern P2 in which RGB filters 23R, 23G, and 23B are arrayed in an array pattern corresponding to 8 ⁇ 6 pixels.
  • the array pattern P2 is repeatedly arranged in the horizontal direction and the vertical direction. For this reason, the color filter array has the above-mentioned feature (1).
  • the basic array pattern P2 is composed of a set of an A array 27a and a B array 27b that are adjacent to each other in the vertical direction and in which the arrangement of the G filter 23G is a mirror image with respect to the boundary line L1. .
  • the color filter array has the above-mentioned feature (2).
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array in the basic array pattern P2 as in the first and second embodiments. . Furthermore, since the number of RGB pixels in the basic array pattern P2 is 12, 24, and 12 pixels, respectively, the ratio of the number of pixels is 1: 2: 1. Thereby, the color filter array has the above-mentioned feature (4) and feature (3).
  • the A array 27a and the B array 27b are not point-symmetric with respect to the center of the basic array pattern P2, and the G square array 25 is not included in the color filter array.
  • the color filter array of the third embodiment has the same features as the features (1), (2), (3), and (4) of the first embodiment.
  • FIG. 14 is a diagram showing a fourth embodiment of a single-plate color image sensor according to the present invention, and particularly shows a color filter array of the color image sensor.
  • the basic array pattern P2 of the third embodiment is composed of a set of an A array 27a and a B array 27b that are adjacent to each other in the vertical direction.
  • a basic array pattern is configured by a set of two types of sub arrays adjacent to each other in the horizontal direction.
  • the color filter array (hereinafter simply referred to as color filter array) of the color imaging device 32 includes a basic array pattern P3 in which the RGB filters 23R, 23G, and 23B are arrayed in an array pattern corresponding to 4 ⁇ 12 pixels.
  • the array pattern P3 is repeatedly arranged in the horizontal direction and the vertical direction. For this reason, the color filter array has the above-mentioned feature (1).
  • each basic array pattern P3 is composed of a set of an A array 27a and a C array 27c that are adjacent to each other in the horizontal direction and in which the arrangement of the G filter 23G is a mirror image with respect to the boundary line L2. Yes.
  • the basic array pattern P3 satisfies the above conditions 1 and 2 and the condition 3B in which the arrangement of the G filters 23G in the sub arrays (both arrays 27a and 27c) adjacent to each other in the horizontal direction has a mirror image relationship
  • the G filter 23G is arranged in each line in the horizontal, vertical, and diagonal (NE, NW) directions of the color filter array.
  • the color filter array has the above-mentioned feature (2).
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array in the basic array pattern P3, as in the third embodiment. Further, the ratio of the number of RGB pixels is the same as in the third embodiment. Thereby, the color filter array has the above-mentioned feature (4) and feature (3).
  • a array 27a and the C array 27c are not point-symmetric with respect to the center of the basic array pattern P3, and the G square array 25 is not included in the color filter array.
  • the color filter array of the fourth embodiment has the same features as the features (1), (2), (3), and (4) of the first embodiment.
  • FIG. 16 is a diagram showing a fifth embodiment of a single-plate color image sensor according to the present invention, and particularly shows a color filter array of the color image sensor.
  • each of the sub arrays (A, B, C, D arrays 27a to 27d) constituting the basic array pattern has an array pattern corresponding to 4 ⁇ 6 pixels.
  • each sub-array has an array pattern corresponding to 4 ⁇ 2 pixels.
  • the color filter array (hereinafter simply referred to as color filter array) of the color image pickup device 34 includes a basic array pattern P4 in which the RGB filters 23R, 23G, and 23B are arrayed in an array pattern corresponding to 4 ⁇ 4 pixels.
  • This basic array pattern P4 is repeatedly arranged in the horizontal direction and the vertical direction. For this reason, the color filter array has the above-mentioned feature (1).
  • the basic array pattern P4 has an array pattern corresponding to 4 ⁇ 2 pixels, and is composed of a set of an A array 35a and a B array 35b adjacent to each other in the horizontal direction.
  • G filters 23G are arranged in a checkered pattern.
  • the arrangement of the G filter 23G in the A array 35a and the arrangement of the G filter 23G in the B array 35b are mirror images of the boundary line L2.
  • the basic array pattern P4 satisfies the above condition 1, condition 2, and condition 3B, so that the G filter 23G is horizontal, vertical, and diagonal (NE, NW) of the color filter array as in the fourth embodiment. ) Placed in each line of direction.
  • the color filter array has the above-mentioned feature (2).
  • the R filter 23R and the B filter 23B are arranged in the horizontal, vertical, and diagonal (NE, NW) direction lines of the color filter array in the basic array pattern P4 as in the above embodiments. For this reason, the color filter array has the above-mentioned feature (4).
  • a basic array pattern P4 NG composed of a set of A array 35a and B array 35b adjacent to each other in the vertical direction has 8 RGB filters 23R, 23G, and 23B. These are arranged in an arrangement pattern corresponding to ⁇ 2 pixels.
  • the R filter 23R and the B filter 23B cannot be arranged in the horizontal, vertical, and diagonal (NE, NW) direction lines of the color filter array in the basic array pattern P4 NG .
  • the sub-array A array 35a, B array 35b
  • the basic array pattern corresponds to 4 ⁇ 4 pixels. It is necessary to make it an arrangement pattern.
  • the number of RGB pixels in the basic array pattern P4 is 4 pixels, 8 pixels, and 4 pixels, respectively, and the ratio of the number of pixels is 1: 2: 1. (3).
  • the A array 35a and the B array 35b are not point-symmetric with respect to the center of the basic array pattern P4, and the G square array 25 is not included in the color filter array. Not in.
  • the color filter array of the fifth embodiment has the same features as the features (1), (2), (3), and (4) of the first embodiment.
  • the basic array pattern P4 is composed of the A array 35a and the B array 35b.
  • the basic array pattern P4a is horizontal to each other as in the color image sensor 36 shown in FIG. 19, for example.
  • You may be comprised by four types of A, B, C, D arrangement
  • the arrays 35a to 35d are basically the same as the arrays 27a to 27d of the second embodiment except that the arrays 35a to 35d are array patterns corresponding to 4 ⁇ 2 pixels.
  • the color filter array includes a G square array 25. For this reason, the color filter array configured by the basic array pattern P4a has the features (1), (2), (3), (4), and (5) of the first embodiment.
  • FIG. 20 is a diagram showing a sixth embodiment of a single-plate color image sensor according to the present invention, and particularly shows a color filter array of the color image sensor.
  • Each sub-array constituting the basic array pattern of the second to fifth embodiments has an array pattern corresponding to M ⁇ N (M ⁇ N and both are even) pixels.
  • the color filter array (hereinafter simply referred to as color filter array) of the color image pickup device 36 includes a basic array pattern P5 in which the RGB filters 23R, 23G, and 23B are arrayed in an array pattern corresponding to 8 ⁇ 4 pixels.
  • This basic array pattern P5 is repeatedly arranged in the horizontal direction and the vertical direction. For this reason, the color filter array has the above-mentioned feature (1).
  • the basic array pattern P5 includes a set of an A array 39a and a B array 39b that are adjacent to each other in the vertical direction. Both arrays 39a and 39b have an array pattern corresponding to 4 ⁇ 4 pixels.
  • G filters 23G are arranged in a checkered pattern.
  • the arrangement of the G filter 23G in the A array 39a and the arrangement of the G filter 23G in the B array 39b are mirror images of the boundary line L1.
  • both the arrays 39a and 39b have a square array pattern (Condition 1A). Further, even when the above condition 2 and condition 3A are satisfied, the G filter 23G is arranged in each line in the horizontal, vertical, and diagonal (NE, NW) directions of the color filter array. Thereby, the color filter array has the above-mentioned feature (2).
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array in the basic array pattern P5 as in the above embodiments. Further, since the number of RGB pixels in the basic array pattern P5 is 8, 16, and 8 pixels, the ratio of the number of pixels is 1: 2: 1. Thereby, the color filter array has the above-mentioned feature (4) and feature (3).
  • the A array 38a and the B array 38b are not point-symmetric with respect to the center of the basic array pattern P5, and the G square array 25 is not included in the color filter array. Not in.
  • the color filter array of the sixth embodiment has the same features as the features (1), (2), (3), and (4) of the first embodiment.
  • the basic array pattern P5 includes the A array 39a and the B array 39b that are adjacent to each other in the vertical direction.
  • the basic array pattern P5a may be composed of a set of an A array 39a and a C array 39c that are adjacent to each other in the horizontal direction.
  • G filters 23G are arranged in a checkered pattern. Further, the arrangement of the G filter 23G in the C array 39c is arranged so as to have a mirror image relation with the arrangement of the G filter 23G in the A array 39a and the boundary line L2. As described above, even when the basic array pattern P5a satisfies the above-described condition 1A, condition 2, and condition 3B, the G filter 23G is included in each line in the horizontal, vertical, and diagonal (NE, NW) directions of the color filter array. Placed in. Thereby, the color filter array has the above-mentioned feature (2).
  • the R filter 23R and the B filter 23B are arranged in the horizontal and vertical lines of the color filter array, so that the color filter array is the same as in the sixth embodiment. (3) and (4).
  • the C array 39c shown in FIG. 21 has the same configuration as the B array 39b of the sixth embodiment, but the R filter 23R and the B filter are within the range satisfying the above feature (4).
  • the arrangement of 23B may be changed.
  • the color filter array configured by the basic array pattern P5a as described above also has the same characteristics as the characteristics (1), (2), (3), and (4) of the first embodiment.
  • the basic array pattern is configured by sub-arrays having an array pattern corresponding to 4 ⁇ 6 pixels.
  • M ⁇ N (M ⁇ N and both are even numbers) ) It may be configured by a sub array having an array pattern corresponding to a pixel.
  • N (M is the same) is preferably 10 or less. This is because when N (M is the same) exceeds 10 (N, M> 10), signal processing such as synchronization becomes complicated, but a special effect by increasing the size of the basic array pattern It is because it cannot be obtained.
  • one or two subarray sets that are adjacent to each other and in which the arrangement of the G filter 23G has a mirror image relationship are used.
  • the basic arrangement pattern including the above has been described as an example, the basic arrangement pattern may be configured by a set of three or more sub-arrays (six or more sub-arrays).
  • the arrangement of the R filter 23R and the B filter 23B in each of the above embodiments is not limited to the arrangement shown in FIGS. 3 to 21, and may be appropriately changed within a range that satisfies at least the above-described feature (4).
  • the color filter array of the three primary colors of RGB has been described.
  • the color filter array of four color filters of three primary colors of RGB + other colors for example, emerald (E)). There may be.
  • the present invention also provides a color filter array of C (cyan), M (magenta), and Y (yellow) color filters, which are complementary colors of the primary colors RGB, or a four-color complementary color filter with G added thereto. It can also be applied to color filter arrays.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

 カラー撮像素子26のカラーフィルタ配列は、RGBフィルタ23R,23G,23Bが8×12画素の配列パターンで配列された基本配列パターンP1を水平及び垂直方向に繰り返し配置することにより構成される。基本配列パターンP1は、水平及び/又は垂直方向に行列状に配置されており、4×4画素の配列パターンを有するA配列27a~D配列27dを含んでいる。各配列27a~27dには、Gフィルタ23Gが市松模様状に、かつ互いに隣接する各配列27a~27d間でGフィルタ23Gの配置が鏡像関係となるように配置される。

Description

カラー撮像素子
 本発明はカラー撮像素子に係り、特に色モワレの発生の低減及び高解像度化が可能なカラー撮像素子に関する。
 単板式のカラー撮像素子では、各画素上にそれぞれ単色のカラーフィルタが設けられるので各画素が単色の色情報しか持たない。このため、単板カラー撮像素子の出力画像はRAW画像(モザイク画像)となるので、欠落している色の画素を、周囲の画素から補間する処理(同時化処理)により多チャネル画像を得ている。この場合に問題となるのが、高周波の画像信号の再現特性である。カラー撮像素子は白黒用の撮像素子と比較して、撮像した画像にエリアシングが発生し易い。このため、色モワレ(偽色)の発生を抑圧しつつ再現帯域を広げて高解像化するということが重要な課題である。
 単板カラー撮像素子で最も広く用いられているカラーフィルタの色配列である原色系ベイヤー配列は、緑(G)画素を市松状に、赤(R)、青(B)を線順次に配置したものである。このため、G信号は斜め方向で、R、B信号は水平、垂直方向の高周波信号を生成する際の再現精度が問題である。
 図22の(A)に示すような白黒の縦縞模様(高周波画像)が、図22の(B)に示すベイヤー配列のカラーフィルタを有するカラー撮像素子に入射した場合、これをベイヤーの色配列に振り分けて色毎に比較すると、図22の(C)から(E)に示すようにRは薄い平坦、Bは濃い平坦、Gは濃淡のモザイク状の色画像となる。白黒画像については、本来、RGB間に濃度差(レベル差)は生じないが、色配列と入力周波数によっては色が付いた状態となってしまう。
 同様に、図23の(A)に示すような斜めの白黒の高周波画像が、図23の(B)に示すベイヤー配列のカラーフィルタを有する撮像素子に入射した場合、これをベイヤーの色配列に振り分けて色毎に比較すると、図23の(C)から(E)に示すようにRとBは薄い平坦、Gは濃い平坦の色画像となる。仮に黒の値を0、白の値を255とすると、斜めの白黒の高周波画像は、Gのみ255となるため、緑色になってしまう。このようにベイヤー配列では、斜めの高周波画像を正しく再現することができない。
 一般に単板式のカラー撮像素子を使用する撮像装置では、水晶などの複屈折物質からなる光学ローパスフィルタをカラー撮像素子の前面に配置し、高周波を光学的に落とすことで回避していた。しかし、この方法では、高周波信号の折り返りによる色付は軽減できるが、その弊害で解像度が落ちてしまうという問題がある。
 このような問題を解決するために、カラー撮像素子のカラーフィルタ配列を、任意の着目画素が着目画素の色を含む3色と着目画素の4辺のいずれかにおいて隣接する配列制限条件を満たす3色ランダム配列としたカラー撮像素子が提案されている(特許文献1)。
 また、分光感度が異なる複数のフィルタを有し、そのうち第1のフィルタと第2のフィルタが、画像センサの画素格子の一方の対角方向に第1の所定の周期で交互に配置されているとともに、他方の対角方向に第2の所定の周期で交互に配置されているカラーフィルタ配列の画像センサが提案されている(特許文献2)。
 さらに、RGBの3原色のカラー固体撮像素子において、R、G、Bを水平に配置した3画素のセットを垂直方向にジグザグにずらしながら配置することによって、RGBそれぞれの出現確率を均等にし、かつ撮像面上の任意の直線(水平、垂直、斜めの直線)が全ての色を通過するようにした色配列が提案されている(特許文献3)。
 さらにまた、RGBの3原色のうちのR,Bを水平方向及び垂直方向にそれぞれ3画素置きに配置し、これらのR,Bの間にGを配置したカラー撮像素子が提案されている(特許文献4)。
 さらに、特許文献5には、RGBの3原色のカラー固体撮像素子において、カラーフィルタ配列がその中心を通るX軸、Y軸により4つの領域に分割され、各領域にR、G、Bがベイヤー配列で配置されるとともに、各領域のR,G,BがX軸鏡面対称パターン、Y軸鏡面対称パターンを有する色配列が提案されている。この特許文献5に記載のカラーフィルタ配列では、Gがカラーフィルタ配列の水平(X軸)、垂直(Y軸)、及び斜め方向の各ラインに1以上配置される。
特開2000-308080号公報 特開2005-136766号公報 特開平11-285012号公報 特開平8-23543号公報 特開2009-27684号公報
 特許文献1に記載のカラー撮像素子では、フィルタ配列がランダムとなる。このため、後段での同時化(補間)処理(またはデモザイク処理という、以下同じ)を行う際に、ランダムパターン毎に最適化する必要があり、同時化処理が煩雑になるという問題がある。また、ランダム配列では、低周波の色モアレには有効であるが、高周波部の偽色に対しては有効でない。
 また、特許文献2に記載の画像センサでは、G画素(輝度画素)が市松状に配置されている。このため、限界解像度領域(特に斜め方向)での画素再現精度が良くないという問題がある。
 特許文献3に記載のカラー固体撮像素子では、任意の直線上に全ての色のフィルタが存在する。このため、偽色の発生を抑えることができる利点がある。一方、RGBの画素数の比率が等しいため、高周波再現性がベイヤー配列に比べて低下するという問題がある。なお、ベイヤー配列の場合、輝度信号を得るために最も寄与するGの画素数の比率が、R、Bそれぞれの画素数の2倍になっている。
 一方、特許文献4に記載のカラー撮像素子では、R、Bそれぞれの画素数に対するGの画素数の比率がベイヤー配列よりも高く、水平または垂直方向にG画素のみのラインが存在する。このため、水平または垂直方向に高周波部の偽色に対しては有効でない。
 特許文献5に記載のカラー撮像素子では、Gがカラーフィルタ配列の水平、垂直、及び斜め方向の各ライン(特に斜め方向)に1以上配置される。その結果、特許文献2に記載のカラー撮像素子とは異なり、限界解像度領域(特に斜め方向)での画素再現精度には問題がない。しかしながら、水平及び垂直方向のラインにはRまたはBのいずれか一方が配置されないため、色モワレ(偽色)の発生を抑えることができない。
 本発明はこのような事情に鑑みてなされたもので、偽色の発生の抑圧及び高解像度化を図ることができるとともに、従来のランダム配列に比べて後段の処理を簡略化することができるカラー撮像素子を提供することを目的とする。
 上記目的を達成するために、本発明の一の態様に係るカラー撮像素子は、水平方向及び垂直方向に配列された光電変換素子で構成される複数の画素上に、所定のカラーフィルタ配列のカラーフィルタが配設されており、カラーフィルタ配列は、カラーフィルタがM×N(Mは2以上の偶数、Nは4以上の偶数)画素に対応する配列パターンで配列されてなるサブ配列を含み、かつサブ配列が水平方向及び垂直方向に繰り返して配置されており、カラーフィルタは、輝度信号を得るために最も寄与する第1の色に対応する第1のフィルタと、第1の色以外の2色以上の第2の色に対応する第2のフィルタとを含み、さらに第1のフィルタに対応する第1の色の画素数の比率が、第2のフィルタに対応する第2の色の各色の画素数の比率よりも大きくなり、第1のフィルタは、サブ配列内に市松模様状で、かつ水平方向または垂直方向に互いに隣接するサブ配列の一方内での第1のフィルタの配置と他方内での第1のフィルタの配置とが鏡像関係になるように配置されており、第2の色の各色に対応する第2のフィルタは、カラーフィルタ配列内で水平方向及び垂直方向に繰り返し配置されている基本配列パターン内であって、互いに隣接しかつ第1のフィルタの配置が鏡像関係となるサブ配列の組をK個(Kは1以上の自然数)含む基本配列パターン内に、カラーフィルタ配列の水平、垂直方向の各ライン内に1以上配置されている。
 本発明の一の態様によれば、輝度信号を得るために最も寄与する第1のフィルタを、サブ配列内に市松模様状で、かつ水平方向または垂直方向に互いに隣接するサブ配列間で第1のフィルタの配置が鏡像関係となるように配置した。このため、第1のフィルタをカラーフィルタ配列の水平、垂直、斜め右上及び斜め右下方向の各ライン内に1以上配置することができ、高周波領域での同時化処理の再現精度を向上させることができる。
 また、第1の色以外の2色以上の第2の色の各色に対応する第2のフィルタについても、基本配列パターン内においてカラーフィルタ配列の水平、及び垂直方向の各ライン内に1つ以上配置するようにした。このため、色モワレ(偽色)の発生を抑圧して高解像度化を図ることができる。
 また、カラーフィルタ配列は、所定の基本配列パターンが水平方向及び垂直方向に繰り返して配置されている。このため、上記の態様によれば、後段での同時化(補間)処理を行う際に、繰り返しパターに従って処理を行うことができる。さらに、上記の態様によれば、従来のランダム配列に比べて後段の処理を簡略化することができる。
 また、上記の態様では、第1のフィルタに対応する第1の色の画素数と第2のフィルタに対応する2色以上の第2の色の各色の画素数との比率を異ならせ、特に輝度信号を得るために最も寄与する第1の色の画素数の比率を、第2のフィルタに対応する第2の色の各色の画素数の比率よりも大きくするようにした。このため、エリアシングを抑制することができ、高周波再現性もよい。
 さらに、上記の態様では、基本配列パターンがαM×βN(α、βはともに1以上の自然数)画素に対応する配列パターンで構成される。このため、例えばカラー撮像素子がCMOS(Complementary Metal Oxide Semiconductor)撮像素子である場合に、偶数個(例えば4個)の画素で1個のアンプ回路を共有させることもできる。
 本発明の他の態様に係るカラー撮像素子において、基本配列パターンは、1個の組で構成されている。基本配列パターンが大型化すると同時化等の信号処理が複雑化するのに対し、基本配列パターンのサイズを大きくすることによる格別な効果が得られないからである。
 本発明のさらに他の態様に係るカラー撮像素子において、M×Nが2×4である場合に、基本配列パターンは、4×4画素に対応する配列パターンとなる。基本配列パターンが2×8画素に対応する配列パターンであると、各色の第2のフィルタを基本配列パターン内においてカラーフィルタ配列の水平、及び垂直方向の各ライン内に1つ以上配置することができなくなるからである。
 本発明のさらに他の態様に係るカラー撮像素子において、MとNとが異なる場合に、基本配列パターンは、水平方向及び垂直方向に互いに隣接する4つのサブ配列であって、かつ互いに隣接するもの同士の第1のフィルタの配置が鏡像関係となる4つのサブ配列で構成されている。これにより、カラーフィルタ配列に、第1のフィルタからなる2×2画素に対応する正方配列が含まれる。この2×2画素の画素値を使用して、水平、垂直、及び斜め右上及び斜め右下方向のうちの相関の高い方向を判別することができる。
 本発明のさらに他の態様に係るカラー撮像素子において、M及びNが10以下の偶数であることが好ましい。M及びNが10を超える場合(M,N>10)には、同時化等の信号処理が複雑化するのに対し、基本配列パターンのサイズを大きくすることによる格別な効果が得られないからである。
 本発明のさらに他の態様に係るカラー撮像素子において、第1の色は緑色(G)であり、第2の色は赤色(R)及び青色(B)であることが好ましい。
 本発明によれば、輝度信号を得るために最も寄与する第1の色に対応する第1のフィルタを、カラーフィルタ配列の水平、垂直、斜め右上及び斜め右下方向の各ライン内に1以上配置するとともに、第1のフィルタに対応する第1の色の画素数の比率を、第1の色以外の2色以上の第2のフィルタに対応する第2の色の各色の画素数の比率よりも大きくするようにした。このため、高周波領域での同時化(補間)処理の再現精度を向上させ、かつエリアシングを抑制することができる。
 また、第1の色以外の2色以上の第2の色の各色に対応する第2のフィルタを、基本配列パターン内においてカラーフィルタ配列の水平、及び垂直方向の各ライン内に1つ以上配置するようにした。このため、色モワレ(偽色)の発生を抑圧して高解像度化を図ることができる。
 さらに、本発明に係るカラーフィルタ配列では、所定の基本配列パターンが水平方向及び垂直方向に繰り返されている。このため、後段での同時化(補間)処理を行う際に、繰り返しパターンに従って処理を行うことができ、従来のランダム配列に比べて後段の処理を簡略化することができる。
図1は本発明に係る単板式のカラー撮像素子を備えるデジタルカメラを示すブロック図である。 図2は本発明に係る単板式のカラー撮像素子の画素を示す図である。 図3は本発明に係る単板式のカラー撮像素子の第1の実施形態を示す図である。 図4は第1の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンを示す図である。 図5は第1の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる6×6画素の基本配列パターンを3×3画素のA配列とB配列に分割し、これらを配置した様子を示す図である。 図6は第1の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる2×2画素のG画素の画素値から相関方向を判別する方法を説明するための図である。 図7はカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンの概念を説明するための図である。 図8は本発明に係る単板式のカラー撮像素子の第2の実施形態を示す図である。 図9は第2の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンを示す図である。 図10は正方配列パターンを有する比較例のカラーフィルタ配列を示す図である。 図11は第2の実施形態のカラー撮像素子のカラーフィルタ配列ではGフィルタが配置されていない斜め右上及び斜め右下方向[斜め(NE,NW)方向]のラインは生じないことを説明するための図である。 図12は本発明に係る単板式のカラー撮像素子の第3の実施形態を示す図である。 図13は第3の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンを示す図である。 図14は本発明に係る単板式のカラー撮像素子の第4の実施形態を示す図である。 図15は第4の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンを示す図である。 図16は本発明に係る単板式のカラー撮像素子の第5の実施形態を示す図である。 図17は第5の実施形態のカラー撮像素子のカラーフィルタ配列に含まれる基本配列パターンを示す図である。 図18はR、Bフィルタがカラーフィルタ配列の水平・垂直方向のラインに1以上配置されていない基本配列パターンの比較例を説明するための図である。 図19は基本配列パターンを構成するサブ配列の数を第5の実施形態よりも増加させた他実施形態のカラー撮像素子を示す図である。 図20は本発明に係る単板式のカラー撮像素子の第6の実施形態を示す図である。 図21は基本配列パターンを構成するサブ配列の配置を第6の実施形態とは異ならせている他実施形態のカラー撮像素子を示す図である。 図22は従来のベイヤー配列のカラーフィルタを有するカラー撮像素子の課題を説明するための図である。 図23は従来のベイヤー配列のカラーフィルタを有するカラー撮像素子の課題を説明するための他の図である。
 以下、添付図面に従って本発明の好ましい実施の形態について詳説する。
 [カラー撮像装置の全体構成]
 図1は本発明に係るカラー撮像素子を備えるデジタルカメラ9のブロック図である。デジタルカメラ9は、撮影光学系10、カラー撮像素子12、撮影処理部14、画像処理部16、駆動部18、制御部20を備えている。
 撮影光学系10により被写体が撮像され、被写体像を示す光像がカラー撮像素子12(第1の実施形態のカラー撮像素子)の受光面上に結像される。
 カラー撮像素子12は、その撮像面上に図中水平方向及び垂直方向に配列(二次元配列)された光電変換素子で構成される複数の画素と、各画素の受光面の上方に配置された所定のカラーフィルタ配列のカラーフィルタとを備えた、いわゆる単板式のカラー撮像素子である。ここで、「上方」とは、カラー撮像素子12の撮像面に対して被写体光が入射してくる側の方向を指す。
 カラー撮像素子12に結像された被写体像は、各画素の光電変換素子によって入射光量に応じた信号電荷に変換される。各光電変換素子に蓄積された信号電荷は、制御部20の指令に従って駆動部18から与えられる駆動パルスに基づいて信号電荷に応じた電圧信号(画像信号)としてカラー撮像素子12から順次読み出される。カラー撮像素子12から読み出される画像信号は、カラー撮像素子12のカラーフィルタ配列に対応した赤(R)、緑(G)、青(B)のモザイク画像を示すR、G、B信号である。
 カラー撮像素子12から読み出された画像信号は、撮影処理部14に入力する。撮影処理部14は、画像信号に含まれるリセットノイズを除去するための相関二重サンプリング回路(CDS,Correlated Double Sampling)、画像信号を増幅し、一定レベルの大きさにコントロールするためのAGC(Automatic Gain Control)回路、及びA/D変換器を有している。この撮影処理部14は、入力する画像信号を相関二重サンプリング処理して増幅した後、デジタルの画像信号に変換してなるRAWデータを画像処理部16に出力する。
 画像処理部16は、ホワイトバランス補正回路、ガンマ補正回路、同時化処理回路(単板式のカラー撮像素子12のカラーフィルタ配列に伴うRGBのモザイク画像から画素毎にRGBの全ての色情報を算出(同時式に変換)する処理回路)、輝度・色差信号生成回路、輪郭補正回路、色補正回路を備えている。画像処理部16は、制御部20からの指令に従い、撮影処理部14から入力したモザイク画像のRAWデータに所要の信号処理を施して、輝度データ(Yデータ)と色差データ(Cr,Cbデータ)とからなる画像データ(YUVデータ)を生成する。
 画像処理部16で生成された画像データは、圧縮/伸張処理回路により静止画に対しては、JPEG(Joint Photographic Experts Group)規格に準拠した圧縮処理が施され、動画に対してはMPEG2(Moving Picture Experts Group)規格に準拠した圧縮処理が施された後、図示しない記録メディア(例えばメモリカード)に記録される。また、上記の画像データは、液晶モニタ等の表示手段(図示せず)に出力されて表示される。
 [カラー撮像素子の第1の実施形態]
 図2及び図3は本発明に係る単板式のカラー撮像素子の第1の実施形態を示す図である。図2はカラー撮像素子12に設けられている画素の画素配列に関して示し、図3はカラーフィルタのカラーフィルタ配列に関して示している。
 図2に示すように、カラー撮像素子12は、水平方向及び垂直方向に配列(二次元配列)された光電変換素子22からなる複数の画素と、各画素の受光面上に配置された、図3に示すカラーフィルタ配列のカラーフィルタとを含んでいる。各画素上には、RGBの3原色のカラーフィルタ(以下、それぞれRフィルタ、Gフィルタ、Bフィルタという)23R,23G,23Bのうちのいずれかが配置される。以下、Rフィルタ23Rが配置された画素を「R画素」、Gフィルタ23Gが配置された画素を「G画素」、Bフィルタ23Bが配置された画素を「B画素」という。
 なお、カラー撮像素子12は、CCD(Charge Coupled Device)カラー撮像素子に限らず、CMOS(Complementary Metal Oxide Semiconductor)撮像素子などの他の種類の撮像素子であってもよい。
 <カラーフィルタ配列の特徴>
 第1の実施形態のカラー撮像素子12のカラーフィルタ配列は、下記の特徴(1)、(2)、(3)、(4)、(5)及び(6)を有している。
 〔特徴(1)〕
 図3に示すカラーフィルタ配列は、6×6画素に対応する正方配列パターンからなる基本配列パターンP(図中の太枠で示したパターン)を含み、この基本配列パターンPが水平方向及び垂直方向に繰り返し配置されている。即ち、このカラーフィルタ配列は、R、G、Bの各色のRフィルタ23R、Gフィルタ23G、Bフィルタ23Bが所定の周期性をもって配列されている。
 このように、Rフィルタ23R、Gフィルタ23G、Bフィルタ23Bが所定の周期性をもって配列されているため、カラー撮像素子12から読み出されるR、G、B信号の同時化(補間)処理等を行う際に、繰り返しパターンに従って処理を行うことができる。
 また、基本配列パターンPの単位で間引き処理して画像を縮小する場合、間引き処理後のカラーフィルタ配列は、間引き処理前のカラーフィルタ配列と同じにすることができ、共通の処理回路を使用することができる。
 〔特徴(2)〕
 図3に示すカラーフィルタ配列は、輝度信号を得るために最も寄与する色(この実施形態では、Gの色)に対応するGフィルタ23Gが、カラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置されている。ここで、NEは斜め右上方向を意味し、NWは斜め右下方向を意味する。例えば、正方形の画素の配列の場合は、斜め右上及び斜め右下方向とは水平方向に対しそれぞれ45°の方向となる。一方、長方形の画素の配列であれば、長方形の対角線の方向であり、長辺・短辺の長さに応じてその角度は変わりうる。
 輝度系画素に対応するGフィルタ23Gが、カラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に1つ以上配置される。このため、高周波となる方向によらず高周波領域での同時化処理の再現精度を向上させることができる。
 〔特徴(3)〕
 図3に示すカラーフィルタ配列の基本配列パターンPは、その基本配列パターン内におけるRGBフィルタ23R,23G,23Bに対応するR画素、G画素、B画素の画素数が、それぞれ8画素、20画素、8画素になっている。即ち、RGB画素の各画素数の比率は、2:5:2になっており、輝度信号を得るために最も寄与するG画素の画素数の比率は、他の色のR画素、B画素のそれぞれの画素数の比率よりも大きくなっている。
 上記のようにG画素の画素数とR,B画素の画素数との比率が異なり、特に輝度信号を得るために最も寄与するG画素の画素数の比率を、R,B画素の画素数の比率よりも大きくするようにした。このため、同時化処理時におけるエリアシングを抑制することができるとともに、高周波再現性もよくすることができる。
 〔特徴(4)〕
 図3に示すカラーフィルタ配列では、上記Gの色以外の2色以上の他の色(この実施形態では、R,Bの色)に対応するRフィルタ23R、Bフィルタ23Bが、それぞれ基本配列パターンP内においてカラーフィルタ配列の水平、及び垂直方向の各ライン内に1つ以上配置されている。
 Rフィルタ23R及びBフィルタ23Bがそれぞれカラーフィルタ配列の水平、及び垂直方向の各ライン内に配置されるため、色モワレ(偽色)の発生を抑制することができる。これにより、偽色の発生を抑制するための光学ローパスフィルタを光学系の入射面から撮像面までの光路に配置しないようにすることができる。また、光学ローパスフィルタを適用する場合でも偽色の発生を防止するための高周波数成分をカットする働きの弱いものを適用することができる。これにより、光学ローパスフィルタによって解像度を損なわないようにすることができる。
 図4は、図3に示した基本配列パターンPを、3×3画素に4分割した状態に関して示している。
 図4に示すように基本配列パターンPは、図中の実線の枠で囲んだ3×3画素のA配列24aと、図中の破線の枠で囲んだ3×3画素のB配列24bとが、水平、垂直方向に交互に並べられた配列となっていると捉えることもできる。
 A配列24a及びB配列24bでは、それぞれ輝度系画素であるGフィルタ23Gが4隅と中央に配置され、両対角線上に配置されている。また、A配列24aでは、中央のGフィルタ23Gを挟んでRフィルタ23Rが水平方向に配列され、Bフィルタ23Bが垂直方向に配列されている。一方、B配列24bでは、中央のGフィルタ23Gを挟んでBフィルタ23Bが水平方向に配列され、Rフィルタ23Rが垂直方向に配列されている。即ち、A配列24aとB配列24bとは、Rフィルタ23RとBフィルタ23Bとの位置関係が逆転しているが、その他の配置は同様になっている。
 また、A配列24aとB配列24bの4隅のGフィルタ23Gは、図5に示すようにA配列とB配列とが水平、垂直方向に交互に配置されることにより、2×2画素に対応する正方配列のGフィルタ23Gとなる。
 これは、輝度系画素であるGフィルタ23Gが、A配列24aまたはB配列24bにおける3×3画素において4隅と中央に配置され、この3×3画素が水平方向、垂直方向に交互に配置されることで2×2画素に対応する正方配列のGフィルタ23Gが形成されるためである。なお、このような配列とすることで、前述の特徴(1)、(2)、(3)、及び後述の特徴(5)が満たされる。
 〔特徴(5)〕
 図3に示すカラーフィルタ配列は、Gフィルタ23Gが設けられた2×2画素に対応する正方配列25(以下、単にG正方配列25という、図6参照)を含んでいる。
 図6に示すように、G正方配列25を構成する2×2画素を取り出し、水平方向のG画素の画素値の差分絶対値、垂直方向のG画素の画素値の差分絶対値、斜め方向(右上斜め、左上斜め)のG画素の画素値の差分絶対値を求める。これにより、水平方向、垂直方向、及び斜め方向のうち、差分絶対値の小さい方向に相関があると判断することができる。
 即ち、このカラーフィルタ配列によれば、最小画素間隔のG画素の情報を使用して、水平方向、垂直方向、及び斜め方向のうちの相関の高い方向判別ができる。この方向判別結果は、周囲の画素から補間する処理(同時化処理)に使用することができる。これにより、画像処理部16による同時化処理が実行可能となる。
 また、図5に示すように3×3画素のA配列24aまたはB配列24bの画素を同時化処理の対象画素とし、A配列24aまたはB配列24bを中心に5×5画素(モザイク画像の局所領域)を抽出した場合、5×5画素の4隅に2×2画素のG画素が存在することになる。これらの2×2画素のG画素の画素値を使用することにより、4方向の相関方向の判別を最小画素間隔のG画素の情報を使用して精度よく行うことができる。
 〔特徴(6)〕
 図3に示すカラーフィルタ配列の基本配列パターンPは、その中心(4つのGフィルタ23Gの中心)に対して点対称になっている。また、図4に示したように、基本配列パターンP内のA配列及びB配列も、それぞれ中心のGフィルタ23Gに対して点対称になっている。
 このような対称性により、後段の処理回路の回路規模を小さくしたり、簡略化することが可能になる。
 図7に示すように太枠で示した基本配列パターンPにおいて、水平方向の第1から第6のラインのうちの第1及び第3のラインのカラーフィルタ配列は、GBGGRGであり、第2のラインのカラーフィルタ配列は、RGRBGBであり、第4及び第6のラインのカラーフィルタ配列は、GRGGBGであり、第5のラインのカラーフィルタ配列は、BGBRGRとなっている。
 いま、図7において、基本配列パターンPを水平方向、及び垂直方向にそれぞれ1画素ずつシフトした基本配列パターンをP’、それぞれ2画素ずつシフトした基本配列パターンをP”とすると、これらの基本配列パターンP’、P”を水平方向及び垂直方向に繰り返し配置しても、同じカラーフィルタ配列になる。
 即ち、基本配列パターンを水平方向及び垂直方向に繰り返し配置することで、図7に示すカラーフィルタ配列を構成することができる基本配列パターンは複数存在する。第1の実施形態では、基本配列パターンが点対称になっている基本配列パターンPを、便宜上、基本配列パターンという。
 なお、後述する他の実施形態のカラーフィルタ配列においても、各カラーフィルタ配列に対して複数の基本配列パターンが存在するが、その代表的なものをそのカラーフィルタ配列の基本配列パターンという。
 [カラー撮像素子の第2の実施形態]
 図8は本発明に係る単板式のカラー撮像素子の第2の実施形態を示す図であり、特にカラー撮像素子のカラーフィルタ配列に関して示している。なお、第2の実施形態のカラー撮像素子は、カラーフィルタ配列が異なる点を除けば、上記第1の実施形態と基本的には同じ構成である。このため、上記第1の実施形態と機能・構成上同一のものについては、同一符号を付してその説明は省略する。
 第2の実施形態のカラー撮像素子26のカラーフィルタ配列(以下、単にカラーフィルタ配列という)は、RGBフィルタ23R,23G,23Bが8×12画素に対応する配列パターンで配列されてなる基本配列パターンP1を含み、この基本配列パターンP1が水平方向及び垂直方向に繰り返し配置されている。このため、カラーフィルタ配列は前述の特徴(1)を有する。
 図9に示すように、基本配列パターンP1は、4×6画素に対応する配列パターンを有する4種類のサブ配列で構成されている。これら4種類のサブ配列は、A配列27a、B配列27b、C配列27c、D配列27dである。各配列27a~27dは互いに水平・垂直方向に隣接するように行列状に配置されている。
 具体的には、A配列27aとB配列27b、C配列27cとD配列27dがそれぞれ垂直方向に隣接している。また、A配列27aとC配列27c、B配列27bとD配列27dがそれぞれ水平方向に隣接している。なお、図中の符号L1は、A配列27a及びC配列27cと、B配列27b及びD配列27dとの境界線である。また、符号L2は、A配列27a及びB配列27bと、C配列27c及びD配列27dとの境界線である。
 各配列27a~27dには、それぞれGフィルタ23Gが市松模様状(チェッカーパターンともいう)に配置されている。この際に、互いに隣接する各配列27a~27d間でGフィルタ23Gの配置が鏡像関係となるように、Gフィルタ23Gが配置されている。具体的には、A配列27a内のGフィルタ23Gの配置と、B配列27b内のGフィルタ23Gの配置とが境界線L1に対して鏡像関係になる。また、C配列27c内のGフィルタ23Gの配置と、D配列27d内のGフィルタ23Gの配置も境界線L1に対して鏡像関係になる。
 さらに、A配列27a内のGフィルタ23Gの配置と、C配列27c内のGフィルタ23Gの配置とが境界線L2に対して鏡像関係になる。また、B配列27b内のGフィルタ23Gの配置と、D配列27d内のGフィルタ23Gの配置も境界線L2に対して鏡像関係になる。このため、基本配列パターンP1は、互いに隣接しかつGフィルタ23Gの配置が鏡像関係となるサブ配列の組を2個[(A配列27aとB配列27b、C配列27cとD配列27d)または(A配列27aとC配列27c、B配列27bとD配列27d)]含んでいる。
 このように、各配列27a~27dがM×N(M<N、かつ、ともに偶数)画素に対応する配列パターンを有し(条件1)、各配列27a~27d内にGフィルタ23Gが市松模様状に配置され(条件2)、さらに水平・垂直方向に互いに隣接する各配列27a~27d内のGフィルタ23Gの配置が鏡像関係(条件3)となる場合には、Gフィルタ23Gが、カラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。
 一方、例えば図10に示す比較例のように、条件2及び条件3は満たされるが条件1を満たさない場合、具体的には各配列27a~27dがN×M(N=M)画素に対応する正方配列パターンである場合は、Gフィルタ23Gが配置されていない斜め(NE,NW)ラインが生じる。この原因は、各配列27a~27dの対角線の一方がGフィルタ23Gの配置されていない画素(以下、G空白画素という)を通るG空白対角線L3となり、さらにこのG空白対角線L3が境界線L1と境界線L2との交点を通ることで、各配列27a~27dのG空白対角線L3が同一直線上に位置するからである。
 これに対して、本実施形態では前述の条件1~3を満たすことにより、図11に示すように、各配列27a~27d内で斜め(NE,NW)方向に並ぶG空白画素を通るG空白ラインL4が、各配列27a~27dの対角の位置にある2つのコーナ(境界線L1と境界線L2との交点)の両方を通らなくなる。その結果、図10に示した比較例のように、各配列27a~27dのG空白ラインL4が同一直線上に位置することはなく、Gフィルタ23Gが配置されていない斜め(NE,NW)ラインは生じない。
 また、条件2が満たされていない場合には、各配列27a~27dでのGフィルタ23Gの配列がランダムとなるため、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置されるとはいえない。さらに、条件3が満たされない場合には、Gフィルタ23Gが一様に市松模様状に配置されたカラーフィルタ配列となるので、Gフィルタ23Gが配置されていない斜め(NE,NW)ラインが生じる。
 以上の理由により第2の実施形態では、前述の条件1~3を満たすようにGフィルタ23Gを配列することで、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。これにより、カラーフィルタ配列は前述の特徴(2)を有する。なお、条件3、または条件1及び条件3を変えた場合でもカラーフィルタ配列が特徴(2)を有する別実施形態については後述する。
 また、前述の条件1~3を満たす場合には、A配列27a内のGフィルタ23Gの配置とD配列27d内のGフィルタ23Gの配置とが基本配列パターンP1の中心に対して点対称になる。同様に、B配列27b内のGフィルタ23Gの配置とC配列27c内のGフィルタ23Gの配置も、基本配列パターンP1の中心に対して点対称になる。
 さらに、前述の条件1~3を満たす場合には、カラーフィルタ配列にはG正方配列25が含まれる。これにより、カラーフィルタ配列は前述の特徴(5)を有する。
 図8及び図9に戻って、Rフィルタ23R及びBフィルタ23Bは、第1の実施形態と同様に、基本配列パターンP1内においてカラーフィルタ配列の水平、垂直方向の各ライン内に配置されている。このため、カラーフィルタ配列は前述の特徴(4)を有する。
 また、第2の実施形態では、A配列27aとD配列27dとが基本配列パターンP1の中心に対して点対称になり、かつB配列27bとC配列27cとが基本配列パターンP1の中心に対して点対称になるように、R、Bフィルタ23R,23Bも配列されている。これにより、カラーフィルタ配列は前述の特徴(6)を有する。
 さらに、第2の実施形態では、基本配列パターンP1内におけるRGBフィルタ23R,23B,23Rに対応するR画素、G画素、B画素の画素数(以下、適宜RGB画素の各画素数と略す)が、24画素、48画素、24画素となる。このため、RGB画素の各画素数の比率は1:2:1となるので、カラーフィルタ配列は前述の特徴(3)を有する。
 上記のように第2の実施形態のカラーフィルタ配列は、第1の実施形態のカラーフィルタ配列の特徴(1)~特徴(6)と同じ特徴を有している。
 また、基本配列パターンP1が「偶数×偶数」画素に対応する配列パターンで構成される。このため、カラー撮像素子26がCMOS撮像素子である場合に、例えば正方行列状に配置された4個の画素で1個のアンプ回路を共有させることもできる(他の実施形態も同様)。
 [カラー撮像素子の第3の実施形態]
 図12は本発明に係る単板式のカラー撮像素子の第3の実施形態を示す図であり、特にカラー撮像素子のカラーフィルタ配列に関して示している。上記第2の実施形態の基本配列パターンP1は、A、B、C、D配列27a~27dの計4種類のサブ配列で構成されているが、第3の実施形態のカラー撮像素子30では基本配列パターンが2種類のサブ配列の組で構成されている。
 なお、第3の実施形態は、カラーフィルタ配列が異なる点を除けば、上記第1及び第2の実施形態と基本的には同じ構成であるので、これら各実施形態と機能・構成上同一のものについては、同一符号を付してその説明は省略する(第4の実施形態以降の各実施形態についても同様)。
 カラー撮像素子30のカラーフィルタ配列(以下、単にカラーフィルタ配列という)は、RGBフィルタ23R,23G,23Bが8×6画素に対応する配列パターンで配列されてなる基本配列パターンP2を含み、この基本配列パターンP2が水平方向及び垂直方向に繰り返し配置されている。このため、カラーフィルタ配列は前述の特徴(1)を有する。
 図13に示すように、基本配列パターンP2は、互いに垂直方向に隣接しかつGフィルタ23Gの配置が境界線L1に対して鏡像関係となるA配列27a及びB配列27bの組で構成されている。
 このように基本配列パターンP2が、上記条件1及び条件2と、垂直方向に隣接するサブ配列(両配列27a,27b)内のGフィルタ23Gの配置が鏡像関係となる条件3Aとを満たす場合には、図12に示したように、両配列27a,27bの対角の位置にある2つのコーナ(境界線L1と境界線L2との交点)の両方をG空白ラインL4が通ることはない。その結果、カラーフィルタ配列ではGフィルタ23Gが配置されていない斜め(NE,NW)ラインは生じない。また、条件2が満たされているので、Gフィルタ23Gが配置されていない水平、垂直ラインも生じない。これにより、カラーフィルタ配列は前述の特徴(2)を有する。
 図12に戻って、Rフィルタ23R及びBフィルタ23Bは、第1及び第2の実施形態と同様に、基本配列パターンP2内においてカラーフィルタ配列の水平、垂直方向の各ライン内に配置されている。さらに、基本配列パターンP2内におけるRGB画素の各画素数が、それぞれ12画素、24画素、12画素となるので、各画素数の比率は1:2:1となる。これにより、カラーフィルタ配列は、前述の特徴(4)及び特徴(3)を有する。
 なお、基本配列パターンP2の中心に対してA配列27aとB配列27bが点対称になっておらず、また、カラーフィルタ配列にはG正方配列25が含まれてはいない。
 上記のように第3の実施形態のカラーフィルタ配列は、第1の実施形態の特徴(1)、(2)、(3)及び(4)と同じ特徴を有している。
 [カラー撮像素子の第4の実施形態]
 図14は本発明に係る単板式のカラー撮像素子の第4の実施形態を示す図であり、特にカラー撮像素子のカラーフィルタ配列に関して示している。上記第3の実施形態の基本配列パターンP2は、互いに垂直方向に隣接するA配列27a及びB配列27bの組で構成されている。これに対して、第4の実施形態のカラー撮像素子32では、互いに水平方向に隣接する2種類のサブ配列の組で基本配列パターンが構成されている。
 カラー撮像素子32のカラーフィルタ配列(以下、単にカラーフィルタ配列という)は、RGBフィルタ23R,23G,23Bが4×12画素に対応する配列パターンで配列されてなる基本配列パターンP3を含み、この基本配列パターンP3が水平方向及び垂直方向に繰り返し配置されている。このため、カラーフィルタ配列は前述の特徴(1)を有する。
 図15に示すように、各基本配列パターンP3は、互いに水平方向に隣接しかつGフィルタ23Gの配置が境界線L2に対して鏡像関係となるA配列27a及びC配列27cの組で構成されている。このように基本配列パターンP3が、上記条件1及び条件2と、互いに水平方向に隣接するサブ配列(両配列27a,27c)内のGフィルタ23Gの配置が鏡像関係となる条件3Bとを満たす場合でも、第3の実施形態と同様の理由により、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。これにより、カラーフィルタ配列は前述の特徴(2)を有する。
 また、Rフィルタ23R及びBフィルタ23Bは、第3の実施形態と同様に、基本配列パターンP3内においてカラーフィルタ配列の水平、垂直方向の各ライン内に配置されている。さらに、RGB画素の各画素数の比率は第3の実施形態と同じである。これにより、カラーフィルタ配列は、前述の特徴(4)及び特徴(3)を有する。
 なお、基本配列パターンP3の中心に対してA配列27aとC配列27cが点対称になっておらず、また、カラーフィルタ配列にはG正方配列25が含まれてはいない。
 上記のように第4の実施形態のカラーフィルタ配列は、第1の実施形態の特徴(1)、(2)、(3)及び(4)と同じ特徴を有している。
 [カラー撮像素子の第5の実施形態]
 図16は本発明に係る単板式のカラー撮像素子の第5の実施形態を示す図であり、特にカラー撮像素子のカラーフィルタ配列に関して示している。上記第1の実施形態から第4の実施形態では、基本配列パターンを構成する各サブ配列(A、B、C、D配列27a~27d)が4×6画素に対応する配列パターンを有するが、第5の実施形態のカラー撮像素子34では各サブ配列が4×2画素に対応する配列パターンを有している。
 カラー撮像素子34のカラーフィルタ配列(以下、単にカラーフィルタ配列という)は、RGBフィルタ23R,23G,23Bが4×4画素に対応する配列パターンで配列されてなる基本配列パターンP4を含んでいる。この基本配列パターンP4が水平方向及び垂直方向に繰り返し配置されている。このため、カラーフィルタ配列は前述の特徴(1)を有する。
 図17に示すように、基本配列パターンP4は、4×2画素に対応する配列パターンを有し、かつ水平方向に互いに隣接するA配列35a及びB配列35bの組で構成されている。両配列35a,35bには、それぞれGフィルタ23Gが市松模様状に配置されている。さらに、A配列35a内のGフィルタ23Gの配置と、B配列35b内のGフィルタ23Gの配置とが境界線L2に対して鏡像関係となる。
 このように基本配列パターンP4は、上記条件1、条件2、及び条件3Bを満たすので、第4の実施形態と同様に、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。これにより、カラーフィルタ配列は前述の特徴(2)を有する。
 Rフィルタ23R及びBフィルタ23Bは、上記各実施形態と同様に、基本配列パターンP4内においてカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置されている。このため、カラーフィルタ配列は前述の特徴(4)を有する。
 この際に、例えば図18に示す比較例のように、互いに垂直方向に隣接するA配列35a及びB配列35bの組で構成される基本配列パターンP4NGは、RGBフィルタ23R,23G,23Bが8×2画素に対応する配列パターンで配列されたものとなる。この場合には、Rフィルタ23R及びBフィルタ23Bを、基本配列パターンP4NG内においてカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置することはできない。このため、サブ配列(A配列35a、B配列35b)が4×2画素(2×4画素の場合も同様)に対応する配列パターンである場合には、基本配列パターンを4×4画素に対応する配列パターンとする必要がある。
 図16に戻って、基本配列パターンP4内におけるRGB画素の各画素数はそれぞれ4画素、8画素、4画素となり、各画素数の比率は1:2:1となるので、カラーフィルタ配列は前述の特徴(3)を有する。一方、第5の実施形態では、基本配列パターンP4の中心に対してA配列35aとB配列35bが点対称になっておらず、また、カラーフィルタ配列にはG正方配列25が含まれてはいない。
 上記のように第5の実施形態のカラーフィルタ配列は、第1の実施形態の特徴(1)、(2)、(3)及び(4)と同じ特徴を有している。
 なお、上記第5の実施形態では、基本配列パターンP4がA配列35aとB配列35bとにより構成されているが、例えば図19に示すカラー撮像素子36のように、基本配列パターンP4aが互いに水平・垂直方向に隣接するように行列状に配置された4種類のA、B、C、D配列35a,35b,35c,35dで構成されていてもよい。
 各配列35a~35dは、4×2画素に対応する配列パターンである点を除けば、第2の実施形態の各配列27a~27dと基本的には同じである。また、カラーフィルタ配列にはG正方配列25が含まれる。このため、基本配列パターンP4aにより構成されているカラーフィルタ配列は、第1の実施形態の特徴(1)、(2)、(3)、(4)、及び(5)を有する。
 [カラー撮像素子の第6の実施形態]
 図20は本発明に係る単板式のカラー撮像素子の第6の実施形態を示す図であり、特にカラー撮像素子のカラーフィルタ配列に関して示している。上記第2の実施形態から第5の実施形態の基本配列パターンを構成する各サブ配列は、M×N(M<N、かつ、ともに偶数)画素に対応する配列パターンを有しているが、第6の実施形態のカラー撮像素子36では、各サブ配列がM×N(M=N、かつ、ともに4以上の偶数)画素に対応する正方配列パターンを有している。
 カラー撮像素子36のカラーフィルタ配列(以下、単にカラーフィルタ配列という)は、RGBフィルタ23R,23G,23Bが8×4画素に対応する配列パターンで配列されてなる基本配列パターンP5を含んでいる。この基本配列パターンP5が水平方向及び垂直方向に繰り返し配置されている。このため、カラーフィルタ配列は前述の特徴(1)を有する。
 基本配列パターンP5は、互いに垂直方向に隣接するA配列39a及びB配列39bの組で構成されている。両配列39a,39bは、それぞれ4×4画素に対応する配列パターンを有している。
 両配列39a,39bには、それぞれGフィルタ23Gが市松模様状に配置されている。また、A配列39a内のGフィルタ23Gの配置と、B配列39b内のGフィルタ23Gの配置とが境界線L1に対して鏡像関係になる。
 このように、両配列39a,39bが正方配列パターンを有している(条件1A)。さらに、前述の条件2及び条件3Aを満たす場合にも、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。これにより、カラーフィルタ配列は前述の特徴(2)を有する。
 Rフィルタ23R及びBフィルタ23Bは、上記各実施形態と同様に、基本配列パターンP5内においてカラーフィルタ配列の水平、垂直方向の各ライン内に配置されている。さらに、基本配列パターンP5内におけるRGB画素の各画素数が8画素、16画素、8画素となるので、各画素数の比率は1:2:1となる。これにより、カラーフィルタ配列は、前述の特徴(4)及び特徴(3)を有する。
 一方、第6の実施形態では、基本配列パターンP5の中心に対してA配列38aとB配列38bが点対称になっておらず、また、カラーフィルタ配列にはG正方配列25が含まれてはいない。
 上記のように第6の実施形態のカラーフィルタ配列は、第1の実施形態の特徴(1)、(2)、(3)及び(4)と同じ特徴を有している。
 なお、上記第6の実施形態では、基本配列パターンP5が互いに垂直方向に隣接するA配列39aとB配列39bとにより構成されているが、例えば、図21に示すカラー撮像素子41のように、基本配列パターンP5aが互いに水平方向に隣接するA配列39a及びC配列39cの組で構成されていてもよい。
 C配列39cには、Gフィルタ23Gが市松模様状に配置されている。また、C配列39c内のGフィルタ23Gの配置は、A配列39a内のGフィルタ23Gの配置と境界線L2に対して鏡像関係になるように配置されている。このように基本配列パターンP5aが、前述の条件1A、条件2、及び条件3Bを満たす場合にも、Gフィルタ23Gがカラーフィルタ配列の水平、垂直、及び斜め(NE,NW)方向の各ライン内に配置される。これにより、カラーフィルタ配列は前述の特徴(2)を有する。
 また、基本配列パターンP5a内において、Rフィルタ23R及びBフィルタ23Bをカラーフィルタ配列の水平、垂直方向の各ライン内に配置することで、上記第6の実施形態と同様に、カラーフィルタ配列は前述の特徴(3)及び(4)を有する。この際に、図21に示したC配列39cは、上記第6の実施形態のB配列39bと同じ構成になっているが、前述の特徴(4)を満たす範囲内でRフィルタ23R及びBフィルタ23Bの配列を変えてもよい。
 上記のように基本配列パターンP5aにより構成されるカラーフィルタ配列も、第1の実施形態の特徴(1)、(2)、(3)及び(4)と同じ特徴を有している。
 [その他]
 上記第2の実施形態から第4の実施形態では、基本配列パターンが4×6画素に対応する配列パターンを有するサブ配列により構成されているが、M×N(M<N、かつ、ともに偶数)画素に対応する配列パターン有するサブ配列により構成されていてもよい。また、上記第6の実施形態では、基本配列パターンが4×4画素に対応する配列パターンを有するサブ配列により構成されているが、M×N(M=N、かつ、ともに偶数)画素に対応する配列パターン有するサブ配列により構成されていてもよい。なお、これら各実施形態において、N(Mも同様)は10以下であることが好ましい。これはN(Mも同様)が10を超える場合(N,M>10)には、同時化等の信号処理が複雑化するのに対し、基本配列パターンのサイズを大きくすることによる格別な効果が得られないからである。
 上記第2の実施形態から第6の実施形態では、互いに隣接しかつGフィルタ23Gの配置が鏡像関係となるサブ配列の組を1個または2個(具体的には2または4つのサブ配列)含む基本配列パターンを例に挙げて説明したが、基本配列パターンが3個以上のサブ配列の組(6つ以上のサブ配列)で構成されていてもよい。
 上記各実施形態のRフィルタ23R及びBフィルタ23Bの配置は、図3~図21に示した配置に限定されず、少なくとも前述の特徴(4)を満たす範囲内で適宜変更してもよい。
 上記各実施形態では、RGBの3原色のカラーフィルタのカラーフィルタ配列について説明したが、例えばRGBの3原色+他の色(例えば、エメラルド(E))の4色のカラーフィルタのカラーフィルタ配列であっても良い。
 また、本発明は、原色RGBの補色であるC(シアン)、M(マゼンタ)、Y(イエロー)のカラーフィルタのカラーフィルタ配列、またはこれにGを加えた4色の補色系のカラーフィルタのカラーフィルタ配列にも適用できる。
 さらにまた、本発明は上述した実施形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。
 9…デジタルカメラ、12,26,30,32,34,36,38,41…カラー撮像素子、23R…Rフィルタ、23G…Gフィルタ、23B…Bフィルタ、24a,27a,35a,39a…A配列、24b,27b,35b,39b…B配列、27c,35c,39c…C配列、27d,35d…D配列、P,P1,P2,P3,P4,P4a,P5,P5a…基本配列パターン

Claims (6)

  1.  水平方向及び垂直方向に配列された光電変換素子で構成される複数の画素上に、所定のカラーフィルタ配列のカラーフィルタが配設されてなる単板式のカラー撮像素子であって、
     前記カラーフィルタ配列は、前記カラーフィルタがM×N(Mは2以上の偶数、Nは4以上の偶数)画素に対応する配列パターンで配列されてなるサブ配列を含み、かつ当該サブ配列が前記水平方向及び垂直方向に繰り返して配置され、
     前記カラーフィルタは、輝度信号を得るために最も寄与する第1の色に対応する第1のフィルタと、前記第1の色以外の2色以上の第2の色に対応する第2のフィルタとを含み、さらに前記第1のフィルタに対応する第1の色の画素数の比率が、前記第2のフィルタに対応する第2の色の各色の画素数の比率よりも大きくなり、
     前記第1のフィルタは、前記サブ配列内に市松模様状で、かつ前記水平方向または前記垂直方向に互いに隣接する前記サブ配列の一方内での前記第1のフィルタの配置と他方内での前記第1のフィルタの配置とが鏡像関係になるように配置され、
     前記第2の色の各色に対応する前記第2のフィルタは、前記カラーフィルタ配列内で前記水平方向及び垂直方向に繰り返し配置されている基本配列パターン内であって、互いに隣接しかつ前記第1のフィルタの配置が鏡像関係となる前記サブ配列の組をK個(Kは1以上の自然数)含む基本配列パターン内に、前記カラーフィルタ配列の水平、垂直方向の各ライン内に1以上配置されているカラー撮像素子。
  2.  前記基本配列パターンは、1個の前記組で構成されている請求項1記載のカラー撮像素子。
  3.  前記M×Nが2×4である場合に、前記基本配列パターンは、4×4画素に対応する配列パターンとなる請求項2記載のカラー撮像素子。
  4.  前記Mと前記Nとが異なる場合に、前記基本配列パターンは、前記水平方向及び前記垂直方向に互いに隣接する4つの前記サブ配列であって、かつ互いに隣接するもの同士の前記第1のフィルタの配置が鏡像関係となる4つの前記サブ配列で構成されている請求項1記載のカラー撮像素子。
  5.  前記M及びNが10以下の偶数である請求項1から4のいずれか1項に記載のカラー撮像素子。
  6.  前記第1の色は緑色(G)であり、前記第2の色は赤色(R)及び青色(B)である請求項1から5のいずれか1項に記載のカラー撮像素子。
PCT/JP2012/053777 2011-02-21 2012-02-17 カラー撮像素子 WO2012114994A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201280009849.4A CN103380623B (zh) 2011-02-21 2012-02-17 彩色图像拾取元件
JP2013500998A JP5411390B2 (ja) 2011-02-21 2012-02-17 カラー撮像素子
EP12749196.7A EP2680590B1 (en) 2011-02-21 2012-02-17 Color image pick-up element
US13/971,563 US8711257B2 (en) 2011-02-21 2013-08-20 Color imaging device

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2011-034627 2011-02-21
JP2011034627 2011-02-21
JP2011162415 2011-07-25
JP2011-162415 2011-07-25
JP2011-286009 2011-12-27
JP2011286009 2011-12-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/971,563 Continuation US8711257B2 (en) 2011-02-21 2013-08-20 Color imaging device

Publications (1)

Publication Number Publication Date
WO2012114994A1 true WO2012114994A1 (ja) 2012-08-30

Family

ID=46720775

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/053777 WO2012114994A1 (ja) 2011-02-21 2012-02-17 カラー撮像素子

Country Status (5)

Country Link
US (1) US8711257B2 (ja)
EP (1) EP2680590B1 (ja)
JP (1) JP5411390B2 (ja)
CN (1) CN103380623B (ja)
WO (1) WO2012114994A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150138412A1 (en) * 2013-11-21 2015-05-21 Samsung Electronics Co., Ltd. Image sensors and systems with an improved resolution
CN110320218B (zh) * 2019-06-17 2021-06-22 苏州市职业大学 一种真丝织物同步印花工艺同步率的检测方法
CN113877827B (zh) * 2021-09-14 2023-06-16 深圳玩智商科技有限公司 物流件抓取方法、抓取设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0823543A (ja) 1994-07-07 1996-01-23 Canon Inc 撮像装置
JPH11285012A (ja) 1998-01-20 1999-10-15 Hewlett Packard Co <Hp> デジタル・カメラ用画像センサ
JP2000308080A (ja) 1999-04-15 2000-11-02 Olympus Optical Co Ltd カラー撮像素子及びカラー撮像装置
JP2005136766A (ja) 2003-10-31 2005-05-26 Sony Corp 画像処理装置および画像処理方法
JP2007306490A (ja) * 2006-05-15 2007-11-22 Fujifilm Corp 二次元カラー固体撮像素子
JP2009027684A (ja) 2007-07-23 2009-02-05 Visera Technologies Co Ltd カラーフィルタアレイとそれを用いたイメージセンサ
JP2010512048A (ja) * 2006-11-30 2010-04-15 イーストマン コダック カンパニー 低解像度画像の生成

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2739586B2 (ja) * 1989-02-10 1998-04-15 富士写真フイルム株式会社 カラー固体撮像デバイス
JP4487351B2 (ja) * 1999-07-15 2010-06-23 ソニー株式会社 固体撮像素子およびその駆動方法並びにカメラシステム
JP4139088B2 (ja) * 2001-03-08 2008-08-27 富士フイルム株式会社 固体撮像装置及びその制御方法
US7196829B2 (en) * 2002-01-10 2007-03-27 Micron Technology Inc. Digital image system and method for combining sensing and image processing on sensor with two-color photo-detector
US7570290B2 (en) * 2004-12-27 2009-08-04 Sony Corporation Drive method for solid-state imaging device, solid-state imaging device, and imaging apparatus
KR100699834B1 (ko) * 2005-02-07 2007-03-27 삼성전자주식회사 베이어 패턴의 디지털 컬러 영상 신호를 처리하는 방법 및장치
US8139130B2 (en) * 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US7688368B2 (en) * 2006-01-27 2010-03-30 Eastman Kodak Company Image sensor with improved light sensitivity
US7633538B2 (en) * 2006-09-11 2009-12-15 Aptina Imaging Corporation Color filter device and method for eliminating or reducing non-uniform color error caused by asymmetric color cross-talk in image sensor devices
JP5471117B2 (ja) * 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
JP2011239252A (ja) * 2010-05-12 2011-11-24 Panasonic Corp 撮像装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0823543A (ja) 1994-07-07 1996-01-23 Canon Inc 撮像装置
JPH11285012A (ja) 1998-01-20 1999-10-15 Hewlett Packard Co <Hp> デジタル・カメラ用画像センサ
JP2000308080A (ja) 1999-04-15 2000-11-02 Olympus Optical Co Ltd カラー撮像素子及びカラー撮像装置
JP2005136766A (ja) 2003-10-31 2005-05-26 Sony Corp 画像処理装置および画像処理方法
JP2007306490A (ja) * 2006-05-15 2007-11-22 Fujifilm Corp 二次元カラー固体撮像素子
JP2010512048A (ja) * 2006-11-30 2010-04-15 イーストマン コダック カンパニー 低解像度画像の生成
JP2009027684A (ja) 2007-07-23 2009-02-05 Visera Technologies Co Ltd カラーフィルタアレイとそれを用いたイメージセンサ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2680590A4

Also Published As

Publication number Publication date
EP2680590B1 (en) 2016-07-27
US8711257B2 (en) 2014-04-29
EP2680590A1 (en) 2014-01-01
CN103380623B (zh) 2016-09-14
EP2680590A4 (en) 2015-01-21
CN103380623A (zh) 2013-10-30
JPWO2012114994A1 (ja) 2014-07-07
US20130335603A1 (en) 2013-12-19
JP5411390B2 (ja) 2014-02-12

Similar Documents

Publication Publication Date Title
JP5054856B1 (ja) カラー撮像素子
JP5702893B2 (ja) カラー撮像素子および撮像装置
JP5702894B2 (ja) カラー撮像素子および撮像装置
JP5702896B2 (ja) カラー撮像素子及び撮像装置
JP5345258B2 (ja) カラー撮像素子
US9324749B2 (en) Color imaging element and imaging device
JP5380629B2 (ja) カラー撮像素子
JP5621057B2 (ja) カラー撮像素子
JP5702895B2 (ja) カラー撮像素子および撮像装置
US8976275B2 (en) Color imaging element
JP5411390B2 (ja) カラー撮像素子
JP5607267B2 (ja) 撮像装置、撮像装置の制御方法、及び制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12749196

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013500998

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

REEP Request for entry into the european phase

Ref document number: 2012749196

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2012749196

Country of ref document: EP