WO2012026051A1 - 固体撮像素子および撮像装置 - Google Patents

固体撮像素子および撮像装置 Download PDF

Info

Publication number
WO2012026051A1
WO2012026051A1 PCT/JP2011/002382 JP2011002382W WO2012026051A1 WO 2012026051 A1 WO2012026051 A1 WO 2012026051A1 JP 2011002382 W JP2011002382 W JP 2011002382W WO 2012026051 A1 WO2012026051 A1 WO 2012026051A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
row
column
color component
photosensitive cell
Prior art date
Application number
PCT/JP2011/002382
Other languages
English (en)
French (fr)
Inventor
平本 政夫
藤井 俊哉
鈴木 正明
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to CN201180004302.0A priority Critical patent/CN102577395B/zh
Priority to US13/502,417 priority patent/US8514319B2/en
Publication of WO2012026051A1 publication Critical patent/WO2012026051A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/1462Coatings
    • H01L27/14621Colour filter arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14625Optical elements or arrangements associated with the device
    • H01L27/14629Reflectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith

Definitions

  • the present invention relates to a colorization technique for a solid-state imaging device.
  • image sensors In recent years, there has been a remarkable increase in functionality and performance of digital cameras and digital movies using solid-state image sensors such as CCDs and CMOSs (hereinafter sometimes referred to as “image sensors”). Due to rapid progress in semiconductor manufacturing technology, the pixel structure in a solid-state imaging device is being miniaturized. As a result, higher integration of pixels and drive circuits of solid-state image sensors has been attempted. For this reason, in a few years, the number of pixels of the image sensor has increased significantly from about 1 million pixels to over 10 million pixels. On the other hand, with the increase in the number of pixels of the image sensor, the amount of light (amount of light) received by one pixel is reduced, which causes a problem that the camera sensitivity is also reduced.
  • image sensors such as CCDs and CMOSs
  • the light utilization rate is considerably low.
  • the R filter transmits R light and absorbs G light and B light.
  • the G filter transmits G light and absorbs R light and B light.
  • the B filter transmits B light and absorbs R light and G light. That is, the light transmitted through each color filter is one of the three RGB colors, and the other two colors are absorbed by the color filter, so that the light used is about 1/3 of the visible light incident on the color filter. is there.
  • the signal reading method from the image sensor includes a non-interlace method (also known as a progressive method) for reading out pixel signals for each row and an interlace method for reading out pixel signals by interlaced scanning every other row.
  • a non-interlace method also known as a progressive method
  • an interlace method for reading out pixel signals by interlaced scanning every other row.
  • a Bayer type color filter array is generally used.
  • the interlace method a plurality of colorization methods having higher sensitivity than the Bayer type have been reported in the field accumulation mode in which signals of two pixels adjacent in the vertical direction are mixed.
  • Patent Document 1 discloses a technique for improving sensitivity and resolution by using white (W), green, cyan (Cy), and yellow (Ye) color filters.
  • Patent Document 2 discloses a technique for reducing the color false signal in the vertical direction using color filters of white, cyan, yellow, and other colors.
  • Patent Document 3 discloses a technique for improving color reproducibility using red, green, cyan, and yellow color filters.
  • Patent Document 4 discloses a technique that can obtain good characteristics of sensitivity and color reproducibility using magenta (Mg), green, cyan, and yellow color filters. The technique disclosed in Patent Document 4 is currently the mainstream technique in the field accumulation mode.
  • Mg magenta
  • FIG. 10 is a diagram showing a basic color arrangement of color filters in the image sensor disclosed in Patent Document 4.
  • a color filter array is arranged to face a photosensitive cell array having eight photosensitive cells (pixels) arranged in four rows and two columns as a unit block.
  • the color filter array includes four types of color filters of magenta (Mg), green (G), cyan (Cy), and yellow (Ye).
  • Mg magenta
  • G green
  • Cy cyan
  • Ye yellow
  • pixel signal readout pixel signals are read out line by line in accordance with, for example, the NTSC system of television.
  • the combination of pixel signals read out in the first field and the second field is shifted by one line.
  • the pixel signals for two lines are added only in the vertical direction and processed as pixel signals for one line in each field.
  • Ms, Gs, Cs, and Ys represent photoelectric conversion signal amounts of light passing through the magenta, green, cyan, and yellow color filters, respectively, and red and blue components included therein are represented as Rs and Bs, respectively. I will represent it.
  • Ms Rs + Bs
  • Cs Gs + Bs
  • Ys Rs + Gs
  • the n-line signal in the first field is a repetition of signals Sn, 1 and Sn, 2 expressed by the following equations 1 and 2 .
  • the signal of the n + 1 line in the first field is a repetition of the signals S n + 1,1 and S n + 1,2 expressed by the following equations 3 and 4.
  • the method for reading these signals is exactly the same in the second field. That is, the signal of the n ′ line and the signal of the (n + 1) ′ line in the second field are also expressed by the repetition of Expressions 1 and 2 and the repetition of Expressions 3 and 4, respectively.
  • a luminance signal YL is generated by adding signals corresponding to two pixels adjacent in the horizontal direction.
  • the color difference signal BY is generated by the difference between the signals Sn , 1 and Sn, 2 in the n line , and the difference between the signals Sn + 1,1 and Sn + 1,2 in the n + 1 line.
  • a color difference signal RY is generated.
  • YL, BY, and RY are represented by the following formulas 5 to 7.
  • the color can be satisfactorily reproduced according to the colorization method disclosed in Patent Document 4.
  • the sensitivity of the image pickup device of Patent Document 4 is better than that of the Bayer method because the complementary color magenta, cyan, and yellow color filters are used.
  • Patent Documents 1 to 4 since a complementary color filter is used, the light utilization rate can be increased as compared with a system using a primary color filter.
  • the methods disclosed in Patent Documents 1 to 4 also have a problem that a part of the light is absorbed and light loss occurs because the color filter used is a subtractive color filter.
  • An object of the present invention is to provide a colorization technique capable of significantly reducing light loss in a method of performing interlace scanning and reading out a pixel signal in a field accumulation mode.
  • a solid-state imaging device includes a photosensitive cell array in which a plurality of unit blocks each including eight photosensitive cells arranged in four rows and two columns are arranged in a matrix, and facing the photosensitive cell array.
  • a spectral element array that is arranged, the first spectral element that is arranged to face the photosensitive cell in the first row and the second column, and the second that is arranged to face the photosensitive cell in the second row and the first column.
  • the third spectral element disposed opposite to the photosensitive cell in the third row and first column, and the fourth spectral element disposed opposite to the photosensitive cell in the fourth row and first column.
  • a spectral element array is arranged, the first spectral element that is arranged to face the photosensitive cell in the first row and the second column, and the second that is arranged to face the photosensitive cell in the second row and the first column.
  • the third spectral element disposed opposite to the photosensitive cell in the third row and first column, and the fourth spectral element disposed opposite to
  • the first light-splitting element causes light of a first color component to be incident on the photosensitive cell in the first row and first column, and light other than the first color component is incident on the photosensitive cell in the first row and second column.
  • the second light-splitting element causes the light of the second color component to enter the photosensitive cell in the second row and the second column, and allows light other than the second color component to enter the photosensitive cell in the second row and the first column.
  • the third spectroscopic element causes the light of the first color component to enter the photosensitive cell in the third row and the second column, and allows light other than the first color component to enter the photosensitive cell in the third row and the first column. Make it incident.
  • the fourth light splitting element causes the light of the second color component to enter the photosensitive cell in the fourth row and the second column, and allows light other than the second color component to enter the photosensitive cell in the fourth row and the first column. Make it incident.
  • the first light-splitting element causes half of the light of the first color component to enter the photosensitive cell in the first row and the first column, and the first row and the first column included in the first adjacent unit block.
  • the second half of the light of the first color component is incident on the photosensitive cell of the eye
  • the second spectral element is half of the light of the second color component on the second row and second column of the photosensitive cell.
  • the other half of the light of the second color component is incident on the photosensitive cell in the second row and second column included in the second adjacent unit block
  • the third spectral element has three rows and two.
  • Half of the light of the first color component is incident on the photosensitive cell in the column, and the light of the first color component is input to the photosensitive cell in the third row and the second column included in the second adjacent unit block.
  • the other half is incident, and the fourth light-splitting element causes half of the light of the second color component to enter the photosensitive cell in the fourth row and the second column, Serial second remaining half of the light of the second color component on the photosensitive cells of the fourth row second column contained in the adjacent unit block may be caused to enter.
  • the photosensitive cell in the first row and the first column and the photosensitive cell in the third row and the second column receive the light of the first color component, the second color, which is incident without passing through any spectral element.
  • the photosensitive cell in the second column is adjacent to the light of the first color component, the light of the second color component, and the light of the third color component that enter without passing through any spectral element.
  • the photosensitive cell in the first row and second column and the photosensitive cell in the third row and first column are incident from the opposing spectral element.
  • Receiving light other than the first color component, the photosensitive cell in the second row and first column and the photosensitive cell in the fourth row and first column are: Each component may be configured to receive light other than the second color component incident from the spectral elements direction.
  • Another solid-state imaging device of the present invention includes a photosensitive cell array in which a plurality of unit blocks each including eight photosensitive cells arranged in four rows and two columns are arranged in a matrix, and opposed to the photosensitive cell array.
  • the first spectral element disposed opposite to the photosensitive cell in the first row and the second column and disposed opposite to the photosensitive cell in the second row and the first column.
  • the second spectral element, the third spectral element arranged to face the photosensitive cell in the third row and the second column, and the fourth spectral element arranged to face the photosensitive cell in the fourth row and the second column And a spectroscopic element array.
  • the first light-splitting element causes light of the first color component to enter the photosensitive cell in the first row and first column, and allows light other than the first color component to enter the photosensitive cell in the first row and second column. Make it incident.
  • the second light-splitting element causes the light of the second color component to enter the photosensitive cell in the second row and the second column, and allows light other than the second color component to enter the photosensitive cell in the second row and the first column.
  • the third spectroscopic element causes the light of the first color component to enter the photosensitive cell in the third row and the first column, and allows light other than the first color component to enter the photosensitive cell in the third row and the second column. Make it incident.
  • the fourth light splitting element causes the light of the second color component to enter the photosensitive cell in the fourth row and the first column, and allows light other than the second color component to enter the photosensitive cell in the fourth row and the second column. Make it incident.
  • the first light-splitting element causes half of the light of the first color component to enter the photosensitive cell in the first row and the first column, and the first row and the first column included in the first adjacent unit block.
  • the second half of the light of the first color component is incident on the photosensitive cell of the eye, and the second spectral element is half of the light of the second color component on the second row and second column of the photosensitive cell.
  • the other half of the light of the second color component is incident on the photosensitive cell in the second row and the second column included in the second adjacent unit block.
  • Half of the light of the first color component is incident on the photosensitive cell in the column, and the light of the first color component is input to the photosensitive cell in the third row and first column included in the second adjacent unit block.
  • the other half is made incident, and the fourth light-splitting element makes half of the light of the second color component incident on the photosensitive cell in the fourth row and the first column, Serial second remaining half of the light of the second color component on the photosensitive cells of the fourth row first column contained in the adjacent unit block may be caused to enter.
  • the photosensitive cell in the first row and the first column and the photosensitive cell in the third row and the first column enter the light of the first color component and the second color that are incident without passing through any spectral element.
  • the photosensitive cell in the first column of the column is adjacent to the light of the first color component, the light of the second color component, and the light of the third color component that enter without passing through any spectral element.
  • the photosensitive cell in the first row and second column and the photosensitive cell in the third row and second column are incident from the opposing spectral element.
  • Receiving light other than the first color component, the photosensitive cell in the second row and first column and the photosensitive cell in the fourth row and second column are:
  • Each component may be configured to receive light other than the second color component incident from the spectral elements direction.
  • the first color component is one of red and blue
  • the second color component is the other of red and blue
  • An imaging apparatus includes a solid-state imaging device according to the present invention, an optical system that forms an image on an imaging surface of the solid-state imaging device, and a signal that generates color information by processing a signal output from the solid-state imaging device. And a processing unit.
  • color information is generated using a spectral element that separates light according to a wavelength region, not a subtractive color filter. For this reason, the optical loss can be reduced as compared with the prior art, and a good luminance signal and color signal can be generated in the field accumulation mode.
  • FIG. 1 is an overall configuration diagram of an imaging apparatus according to a first embodiment of the present invention. It is a figure which shows the lens and imaging device in the 1st Embodiment of this invention. It is a figure which shows typically the pixel arrangement
  • A) is a top view which shows the basic structure of the image pick-up element in the 1st Embodiment of this invention,
  • (b) is the sectional view on the AA 'line in (a),
  • (c) is BB in (a). It is' 'sectional drawing,
  • (d) is CC' sectional view taken on the line in (a).
  • FIG. 11 is a basic color arrangement diagram used for colorization by a field accumulation mode in Patent Document 4.
  • FIG. 1 is a block diagram illustrating the overall configuration of the imaging apparatus according to the present embodiment.
  • the imaging apparatus according to the present embodiment is a digital electronic camera, and includes an imaging unit 100 and a signal processing unit 200 that generates a signal (image signal) indicating an image based on a signal transmitted from the imaging unit 100. ing.
  • the imaging unit 100 includes an optical lens 12 for imaging a subject, an optical filter 11, and a solid-state imaging device 10 that converts optical information imaged through the optical lens 12 and the optical filter 11 into an electrical signal by photoelectric conversion. It has.
  • the imaging unit 100 further generates a basic signal for driving the imaging device 10, receives an output signal from the imaging device 10, and sends it to the signal processing unit 200, and signal generation / reception.
  • an element driving unit 14 that drives the image sensor 10 based on the basic signal generated by the unit 13.
  • the optical lens 12 is a known lens and may be a lens unit having a plurality of lenses.
  • the optical filter 11 is a combination of a quartz low-pass filter for reducing moire patterns generated due to pixel arrangement and an infrared cut filter for removing infrared rays.
  • the image sensor 10 is typically a CCD or CMOS sensor, and is manufactured by a known semiconductor manufacturing technique.
  • the signal generation / reception unit 13 and the element driving unit 14 are configured by an LSI such as a CCD driver, for example.
  • the signal processing unit 200 generates an image signal by processing a signal sent from the imaging unit 100, a memory 17 for storing various data generated in the process of generating the image signal, and a generated signal. And an image signal output unit 16 for sending the image signal to the outside.
  • the image signal generation unit 15 can be suitably realized by a combination of hardware such as a known digital signal processor (DSP) and software that executes image processing including image signal generation processing.
  • the memory 17 is configured by a DRAM or the like. The memory 17 records the signal transmitted from the imaging unit 100 and temporarily records the image data generated by the image signal generation unit 15 and the compressed image data. These image data are sent to a recording medium (not shown) or a display unit via the image signal output unit 16.
  • the imaging apparatus of the present embodiment may include known components such as an electronic shutter, a viewfinder, a power source (battery), and a flashlight, but a description thereof is omitted because it is not particularly necessary for understanding the present invention.
  • known components such as an electronic shutter, a viewfinder, a power source (battery), and a flashlight, but a description thereof is omitted because it is not particularly necessary for understanding the present invention.
  • the above configuration is merely an example, and in the present invention, known components can be used in appropriate combination with the components other than the image sensor 10.
  • FIG. 2 is a diagram schematically illustrating a state in which light transmitted through the lens 12 is incident on the image sensor 10 during exposure.
  • the lens 12 can be generally composed of a plurality of lenses arranged in the optical axis direction, but is drawn as a single lens for simplicity.
  • a photosensitive cell array including a plurality of photosensitive cells (pixels) arranged two-dimensionally is disposed on the imaging surface 10a of the imaging element 10. Each photosensitive cell is typically a photodiode, and outputs a photoelectric conversion signal (pixel signal) corresponding to the amount of incident light by photoelectric conversion.
  • Light (visible light) transmitted through the lens 12 and the optical filter 11 is incident on the imaging surface 10a.
  • the intensity of light incident on the imaging surface 10a and the distribution (spectral distribution) of the amount of incident light for each wavelength range differ depending on the incident position.
  • FIG. 3 is a plan view showing a pixel arrangement in the present embodiment.
  • the photosensitive cell array 50 has a plurality of photosensitive cells arranged in a square lattice pattern on the imaging surface 10a.
  • the photosensitive cell array 50 includes a plurality of unit blocks 40, and each unit block 40 includes eight photosensitive cells 5a, 5b, 5c, 5d, 5e, 5f, 5g, and 5h arranged in 4 rows and 2 columns. Contains. Note that the arrangement of the photosensitive cells is not limited to such a square lattice arrangement, and may be an oblique arrangement or another arrangement.
  • XY coordinates shown in FIG. 3 are used when indicating directions. In this specification, the X direction may be referred to as “horizontal direction” and the Y direction may be referred to as “vertical direction”.
  • a spectral element array including a plurality of spectral elements is disposed on the light incident side facing the photosensitive cell array 50.
  • the spectral elements in the present embodiment will be described.
  • the spectroscopic element in the present embodiment is an optical element that directs incident light in different directions according to the wavelength range by using diffraction of light generated at the boundary between two types of translucent members having different refractive indexes.
  • This type of spectroscopic element consists of a high refractive index transparent member (core part) formed of a material having a relatively high refractive index and a low contact with each side surface of the core part formed of a material having a relatively low refractive index. And a refractive index transparent member (cladding portion). Due to the difference in refractive index between the core part and the clad part, a phase difference occurs between the light transmitted through the core part and diffraction occurs.
  • a high refractive index transparent member may be referred to as a “spectral element” because spectroscopy is possible due to a difference in refractive index between the core portion and the cladding portion. Details of such a diffractive spectral element are disclosed in, for example, Japanese Patent No. 4264465.
  • the spectral element array having the spectral elements as described above can be manufactured by performing thin film deposition and patterning by a known semiconductor manufacturing technique.
  • the material (refractive index), shape, size, arrangement pattern, and the like of the spectral elements it becomes possible to separate and integrate light in a desired wavelength range into individual photosensitive cells.
  • a signal corresponding to a necessary color component can be calculated from a set of photoelectric conversion signals output from each photosensitive cell.
  • FIG. 4A is a plan view schematically showing the basic structure of the image sensor 10.
  • the spectroscopic elements 1b, 1c, 1e, and 1g are arranged to face the four photosensitive cells (pixels) 5b, 5c, 5e, and 5g, respectively. Opposing spectral elements are not arranged in the pixels 5a, 5d, 5f, and 5h.
  • a plurality of patterns having such a basic structure are repeatedly formed on the imaging surface 10a.
  • the spectral elements 1c and 1g facing the pixels 5c and 5g in the 2nd row and the 1st column and the 4th row and the 1st column respectively receive light (Ye light) in a wavelength region corresponding to yellow (red and green) color components.
  • FIG. 4A shows a symbol indicating the color component of light incident on each pixel.
  • the symbol in parentheses in the figure represents the color component of light incident from a spectral element facing an adjacent pixel.
  • FIGS. 4B, 4C, and 4D are diagrams schematically showing an AA ′ line cross section, a BB ′ line cross section, and a CC ′ line cross section in FIG. 4A, respectively.
  • the structure of the 4th line in Fig.4 (a) is the same as the structure of the 2nd line, illustration of a cross section is abbreviate
  • FIG. 4B shows a cross-sectional structure of the first row of the pixel array.
  • a transparent layer 2 made of a translucent member having a refractive index lower than that of each spectral element is formed on the photosensitive cells 5a and 5b.
  • a convex lens-like structure is formed on the surface of the transparent layer 2 on the light incident side. Thereby, the light condensing property to each photosensitive cell can be enhanced.
  • the transparent layer 2 and the convex lens-like structure are formed in exactly the same way for the second to fourth rows.
  • the surface of the transparent layer 2 on the light incident side may not be formed in a convex lens shape.
  • a spectral element 1b that separates light into R light and Cy light is arranged facing the photosensitive cell 5b in the first row and the second column.
  • the light-splitting element 1b in the first row and the second column is formed of a transparent high refractive index member, has a plate-like shape that is long in the light traveling direction, and lacks one side of the tip from which light is emitted.
  • the spectral element 1 b causes the R light to enter the photosensitive cell 5 a in the first row and the first column, and the photosensitive cell in the first row and the second column facing each other. Cy light is incident on 5b.
  • FIG. 4C shows the cross-sectional structure of the second row of the pixel array.
  • the light-splitting element 1c in the second row and the first column is also formed of a transparent high refractive index member, has a plate shape that is long in the light traveling direction, and lacks one side of the tip from which light is emitted. Due to the difference in refractive index between the shape and the surrounding transparent layer 2, the spectral element 1 c makes Ye light incident on the photosensitive cell 5 c in the second row and the first column, and enters the photosensitive cell 5 d in the second row and the second column. B light is incident.
  • the photosensitive cell 5d in the second row and the second column receives the visible light W that is directly incident, and also receives the B light that is incident from the spectral element 1c in the second row and the first column. Note that the cross-sectional structure of the fourth row of the pixel array is the same as that of the second row, and the manner in which light is incident on each pixel is the same.
  • FIG. 4D shows a cross-sectional structure of the third row of the pixel array.
  • the spectral element 1e in the third row and first column has the same shape as the spectral element 1b in the first row and second column, but its direction is opposite to the direction of the spectral element 1b in the first row. Therefore, the photosensitive cell 5e in the third row and the first column receives Cy light, and the photosensitive cell 5f in the third row and the second column receives W light that is directly incident and R light that is incident from the photosensitive cell 5e.
  • FIG. 5 is a diagram showing the color components of light received by each photosensitive cell.
  • the pixels in the first row, first column and the third row, second column receive W light and R light.
  • the pixels in the first row, second column and the third row, first column receive Cy light (G light and B light).
  • the pixels in the second row and first column and the fourth row and first column receive Ye light (R light and G light).
  • the luminance signal and the color difference signal are expressed as follows.
  • the first and second rows in FIG. 5 are n lines, and the third and fourth rows are (n + 1) lines. Since the pixel signals of two pixels adjacent in the vertical direction are added, the n-line signal in the first field is a repetition of signals Sn, 1 and Sn, 2 expressed by the following equations 8 and 9. .
  • the signal of the (n + 1) line in the first field is a repetition of signals S n + 1,1 and S n + 1,2 expressed by the following equations 10 and 11.
  • the luminance signal YL is generated by adding two adjacent columns of signals in each line. Therefore, the luminance signal YL is expressed by the following Expression 12 for both the n line and the (n + 1) line.
  • the color difference signal is generated as follows. First, subtraction is performed between two adjacent signals in each line. As a result, a signal C (n) represented by the following expression 13 is obtained for the n line, and a signal C (n + 1) represented by the following expression 14 is obtained for the (n + 1) line.
  • the second and third rows of the pixel array are n ′ lines
  • the fourth and fifth rows are (n + 1) ′ lines
  • pixel signals of two pixels adjacent in the vertical direction are added.
  • the signal on the n ′ line repeats (Ys + Cs) and (2Ws + Rs + Bs).
  • the signal on the (n + 1) ′ line is a repetition of (Ys + Ws + Rs) and (Ws + Bs + Cs). That is, the read signal in the second field is shifted by one line from the read signal in the first field, but the signal read as a whole is the same. Therefore, both the luminance signal and the color difference signal are generated by the same signal processing as in the first field.
  • the luminance signal and the color difference signal indicating the same color information are generated by the same signal processing in both the first field and the second field. can do.
  • the image signal generation unit 15 in the imaging apparatus of the present embodiment generates color information by performing the above signal calculation.
  • the generated color information is output to a recording medium (not shown) or a display device by the image signal output unit 16.
  • the spectral element array is arranged facing the photosensitive cell array having 4 rows and 2 columns as a unit block.
  • the spectral elements are not arranged in the pixels in the first row, the first column, the second row, the second column, the third row, the second column, and the fourth row, the second column, and these pixels receive light directly incident through the transparent layer 2.
  • the R light included in the incident light is incident on the adjacent pixel of the opposite pixel so as to face the pixels in the first row, second column and the third row, first column, and Cy light (G light and B light) is applied to the opposite pixel.
  • a spectral element to be incident is arranged.
  • the B light included in the incident light is incident on the adjacent pixel of the opposing pixel and the Ye light (R light and G light) is incident on the opposing pixel in the pixels in the second row and first column and the fourth row and first column.
  • a spectral element is arranged. With these spectral elements, colorization can be realized in interlaced scanning in the field accumulation mode, and the light loss can be greatly reduced.
  • Each spectral element is ideally configured to cause almost all of the R light or B light included in the incident light to enter the adjacent pixel of the counter pixel and almost all of the other light to enter the counter pixel. There is no problem even if there is light loss. Good color information can be obtained by correcting the signal according to the degree of light loss.
  • the signal calculation processing performed by the image signal generation unit 15 in the present embodiment can be executed not by the imaging apparatus itself but by another device.
  • the color information can also be generated by causing an external device that has received an input of the photoelectric conversion signal output from the image sensor 10 to execute a program that defines the signal calculation processing in the present embodiment.
  • a spectral element that divides incident light into R light and Cy light and a spectral element that divides incident light into B light and Ye light are used, but other spectral elements can also be used.
  • FIG. 6 shows the color components of light received by each pixel when generalized in this way.
  • the generation of the luminance signal YL and the color difference signals (R ⁇ Y) and (B ⁇ Y) is performed according to the following procedure.
  • the n-line signal is a repetition of signals Sn, 1 and Sn, 2 expressed by the following equations 17 and 18.
  • signals indicating C1 light, C1 to light, C2 light, C2 to light, and C3 light are represented as C1s, C1 to s, C2s, C2 to s, and C3s, respectively.
  • the signal on the (n + 1) line is a repetition of signals S n + 1,1 and S n + 1,2 expressed by the following equations 19 and 20.
  • the luminance signal YL is expressed by the following Expression 21 for both the n line and the (n + 1) line.
  • the color difference signal first, subtraction is performed between two columns of signals in each line. As a result, a signal C (n) represented by the following expression 22 is obtained for the n line, and a signal C (n + 1) represented by the following expression 23 is obtained for the (n + 1) line.
  • color information can be generated by the above signal calculation.
  • the spectral element a spectral element using diffraction due to the difference in refractive index between members is used, but the spectral element is not limited to such a diffraction type element.
  • the same effect can be obtained by using a spectral element such as a microprism or a dichroic mirror.
  • the imaging apparatus according to the present embodiment is different from the imaging apparatus according to the first embodiment only in the arrangement of the spectral elements corresponding to the pixels in the third row and the fourth row in the pixel array of the imaging element. Is different. In the following description, differences from the first embodiment will be mainly described, and description of overlapping points will be omitted.
  • FIG. 7A is a plan view schematically showing the basic structure of the image sensor 10 in the present embodiment.
  • the spectroscopic elements 1b, 1c, 1f, and 1h are arranged to face the four photosensitive cells 5b, 5c, 5f, and 5h, respectively.
  • No spectral element is arranged on the photosensitive cells 5a, 5d, 5e, and 5g.
  • a plurality of patterns having such a basic structure are repeatedly formed on the imaging surface 10a.
  • the structures of the first row and the second row are the same as those in the first embodiment, but the third row and the fourth row are spectral elements with respect to the structure in the first embodiment. The arrangement is different.
  • the third row has the same structure as the first row.
  • the fourth row has the same configuration as the second row, but the horizontal direction of the spectral elements is reversed. Therefore, the cross-sectional structure is not shown for the first to third lines.
  • FIG. 7B is a cross-sectional view taken along the line DD ′ in FIG. 7A, and shows the cross-sectional structure of the fourth row of the pixel array.
  • B light included in incident light W light
  • Ye light R light and G light
  • a spectral element 1h that is incident on the cell 5h is disposed to face the pixel 5h. For this reason, the photosensitive cell 5h in the 4th row and the 2nd column receives Ye light, and the photosensitive cell 5g in the 4th row and the 1st column receives W light and B light.
  • FIG. 8 is a diagram showing the color components of light received by each photosensitive cell in the present embodiment.
  • the pixels in the first row and first column and the third row and first column receive W light and R light.
  • the pixels in the second row and second column and the fourth row and first column receive W light and B light.
  • the pixels in the first row, second column and the third row, second column receive Cy light (G light and B light).
  • the pixels in the second row, first column and the fourth row, second column receive Ye light (R light and G light).
  • the color component of light received by each pixel in the present embodiment is the reverse of the third row and first column and the third row and second column compared to the color component of light received by each pixel in the first embodiment. It is the same except that the column and the fourth row and the second column are opposite. Therefore, the luminance signal YL in the present embodiment can also be expressed by Expression 12 like the luminance signal in the first embodiment. Further, in both the first field and the second field, the difference C (n) between two adjacent columns of n lines is expressed by Equation 13, and the difference C (n + 1) between two adjacent columns of (n + 1) lines. Is a signal with the sign reversed in Equation 14. Therefore, color information can be generated by performing processing similar to the signal calculation processing in the first embodiment.
  • the imaging apparatus can achieve colorization in interlaced scanning in the field accumulation mode, and can significantly reduce light loss.
  • spectral elements can be used in addition to the spectral element that divides incident light into R light and Cy light and the spectral element that divides incident light into B light and Ye light.
  • a spectroscopic element may be used.
  • the spectral element is not limited to the one that uses the diffraction due to the difference in refractive index between the members, and for example, the same effect can be obtained by using a spectral element such as a microprism or a dichroic mirror. is there.
  • the image pickup apparatus of the present embodiment has the same color component of light received by each pixel, but the structure of the light splitting element and the way of light splitting are different. Therefore, in the following description, points different from those of the first embodiment will be mainly described, and description of overlapping points will be omitted.
  • FIG. 9A is a plan view schematically showing the basic structure of the image sensor in the present embodiment.
  • the spectroscopic elements 1b, 1c, 1e, and 1g are arranged to face the four photosensitive cells 5b, 5c, 5e, and 5g, respectively.
  • No spectral element is disposed on the photosensitive cells 5a, 5d, 5f, and 5h.
  • a plurality of patterns having such a basic structure are repeatedly formed on the imaging surface 10a.
  • the color component of light received by each photosensitive cell is the same as the color component of light received by each photosensitive cell in the first embodiment.
  • the spectral element according to the present embodiment is different from the spectral element according to the first embodiment in that light of a specific color component is designed to be incident on two adjacent pixels in the horizontal direction of the opposing pixel in equal amounts.
  • FIG. 9B is a cross-sectional view taken along the line EE ′ in FIG. 9A, and shows a cross-sectional structure of the first row of the pixel array.
  • the light separating element 3b disposed to face the pixel 5b is formed of a transparent high refractive index member and has a plate shape that is long in the light traveling direction.
  • the light separating element 3b uses the diffraction due to the difference in refractive index with the surrounding transparent layer 2 to make the Cy light incident on the counter pixel 5b and the R light incident on the pixels adjacent to the counter pixel in half.
  • the pixel 5a in the first row and the first column has the visible light W incident without passing through any spectral element, the R light (R / 2) incident from the spectral element 3b, and the spectral elements included in the adjacent unit block.
  • R light (R / 2) incident from the element is received.
  • the symbol R / 2 represents a half amount of the R light included in the light W incident on the light separating element 3b.
  • the pixel 5b in the first row and the second column receives Cy light (G light and B light) incident from the opposing spectral element 3b.
  • the third row of the pixel array also has a configuration similar to that of the first row although the arrangement of the spectral elements is shifted by one column, and the color component of light incident on each pixel is the same as that of the first row. .
  • FIG. 9C is a cross-sectional view taken along the line FF ′ in FIG. 9A, and shows a cross-sectional structure in the second row of the pixel array.
  • the light separating element 3c arranged to face the pixel 5c is also formed of a transparent high refractive index member and has a plate shape that is long in the light traveling direction.
  • the light-splitting element 3c uses the diffraction due to the difference in refractive index with the surrounding transparent layer 2 to make the Ye light incident on the counter pixel 5c and the B light in half on both pixels adjacent to the counter pixel.
  • the pixel 5c in the second row and the first column receives Ye light (R light and G light) incident from the opposing spectral element 3c.
  • the pixel 5d in the second row and the second column enters the visible light W that does not pass through any spectral element, the B light (B / 2) that enters from the spectral element 3c, and the spectral element included in the adjacent unit block. Receiving B light (B / 2).
  • the fourth row of the pixel array has the same configuration as that of the second row, and the color components of light incident on each pixel are the same.
  • each spectral element in the present embodiment causes the light of a specific color component to be separately incident on two pixels adjacent to the opposing pixel, so that the effect of the optical low-pass filter in the horizontal direction is higher than that in the first embodiment. Have.
  • spectral elements can be used in addition to the spectral element that divides incident light into R light and Cy light and the spectral element that divides incident light into B light and Ye light.
  • a spectroscopic element may be used. In this case, each spectral element only needs to be configured so that half of the C1 light or C2 light is incident on the pixels on both sides of each spectral element.
  • the spectral element is not limited to the spectral element using diffraction due to the difference in refractive index between the members, and for example, a spectral element such as a microprism or a dichroic mirror may be used.
  • each of the spectral elements in the present embodiment an equal amount of light of one color component is incident on the pixels adjacent to the opposing pixel, but the light may be incident on the pixels adjacent to the opposing pixel at different ratios.
  • the spectral element causes 70% of light of a specific color component included in incident light to be incident on one adjacent pixel of the counter pixel, and 30% of light of the specific color component is incident on the other adjacent pixel. It may be configured. Even in such a case, the amount of light of the first color component received by a pixel in which no spectral element is arranged is not changed, and thus the same effect as described above can be obtained.
  • the spectral element in the present embodiment and the spectral element in the first embodiment may be used in combination.
  • a configuration in which the spectral elements in the present embodiment are arranged in the first and third lines and the spectral elements in the first embodiment are arranged in the second and fourth lines is also possible.
  • the arrangement of the spectral elements in the present embodiment is the same arrangement as the spectral elements in the first embodiment, but may be the same arrangement as the spectral elements in the second embodiment. That is, in FIG. 9, the positions at which the spectral elements in the third and fourth rows may be shifted by one column. Even in this case, the effect of the present embodiment does not change.
  • the solid-state imaging device and imaging apparatus of the present invention are effective for all cameras that perform interlace scanning in the field accumulation mode.
  • it can be used for consumer cameras such as digital still cameras and digital video cameras, solid-state cameras for broadcasting, and solid-state surveillance cameras for industrial use.

Abstract

 固体撮像素子の基本画素構成において、1行2列目の画素および3行1列目の画素に対向して、水平方向の隣接画素に第1の色成分の光を入射させ、対向画素に第1の色成分の補色光を入射させる分光要素が配置される。2行1列目の画素および3行1列目の画素に対向して、水平方向の隣接画素に第2の色成分の光を入射させ、対向画素に第2の色成分の補色光を入射させる分光要素が配置される。1行1列目、2行2列目、3行2列目、および4行2列目には分光要素が配置されない。

Description

固体撮像素子および撮像装置
 本発明は固体撮像素子のカラー化技術に関する。
 近年、CCDやCMOS等の固体撮像素子(以下、「撮像素子」と称する場合がある。)を用いたデジタルカメラやデジタルムービーの高機能化、高性能化には目を見張るものがある。急速な半導体製造技術の進歩により、固体撮像素子における画素構造の微細化が進んでいる。その結果、固体撮像素子の画素および駆動回路の高集積化が図られてきた。このため、わずかの年数で撮像素子の画素数が100万画素程度から1000万画素以上へと著しく増加した。その一方で、撮像素子の多画素化に伴い、1画素の受ける光の量(光量)が低下するため、カメラ感度も低下するという問題が起きている。
 さらに通常のカラーカメラでは、撮像素子の各光感知部上に顔料を色素とする減色型の色フィルタが配置されるため、光利用率はかなり低い。例えば、赤(R)1要素、緑(G)2要素、青(B)1要素を基本構成としたベイヤー型の色フィルタでは、RフィルタはR光を透過させ、G光、B光を吸収する。GフィルタはG光を透過させ、R光、B光を吸収する。BフィルタはB光を透過させ、R光、G光を吸収する。すなわち、各色フィルタを透過する光はRGB3色のうちの1色であり、その他の2色は色フィルタに吸収されるため、利用される光は色フィルタに入射する可視光の約1/3である。
 一方、撮像素子からの信号読み出し方式には、1行毎に画素信号を読み出すノンインターレース方式(別名:プログレッシブ方式)と、1行おきに飛び越し走査で画素信号を読み出すインターレース方式とがある。ノンインターレース方式では、一般にベイヤー型の色フィルタ配列が用いられる。インターレース方式では、垂直方向に隣接する2画素の信号を混合するフィールド蓄積モードにおいて、ベイヤー型よりも感度が良好なカラー化方式が複数報告されている。
 例えば、特許文献1は、ホワイト(W)、緑、シアン(Cy)、黄(Ye)の色フィルタを用いて、感度及び解像度を改善する技術を開示している。また、特許文献2は、ホワイト、シアン、黄、およびその他の色の色フィルタを用いて垂直方向の色偽信号を減少させる技術を開示している。また、特許文献3には、赤、緑、シアン、黄の色フィルタを用いて色再現性を向上させる技術が開示されている。さらに、特許文献4は、マゼンタ(Mg)、緑、シアン、黄の色フィルタを用いて、感度および色再現性の良好な特性が得られる技術を開示している。特許文献4に開示された技術は、現在、フィールド蓄積モードにおいて主流の技術となっている。
 以下、図10を参照しながら特許文献4に開示されたカラー化方式を説明する。図10は、特許文献4に開示された撮像素子における色フィルタの基本色配置を示す図である。4行2列に配列された8個の光感知セル(画素)を単位ブロックとする光感知セルアレイに対向して色フィルタアレイが配置される。色フィルタアレイは、マゼンタ(Mg)、緑(G)、シアン(Cy)、黄(Ye)の4種類の色フィルタから構成されている。画素信号の読み出しに関しては、例えばテレビジョンのNTSC方式に準じて2ラインずつ画素信号が読み出される。第1フィールドと第2フィールドとで読み出される画素信号の組み合わせは1ラインだけずれる。2ライン分の画素信号は、垂直方向のみ加算され、各フィールドにおける1ライン分の画素信号として処理される。
 ここで、マゼンタ、緑、シアン、黄の各色フィルタを透過する光の光電変換信号量をそれぞれMs、Gs、Cs、Ysと表し、またそれらに含まれる赤成分、青成分をそれぞれRs、Bsと表すことにする。Ms=Rs+Bs、Cs=Gs+Bs、Ys=Rs+Gsより、第1フィールドのnラインの信号は、以下の式1、2で表される信号Sn,1、Sn,2の繰り返しとなる。
  (式1) Sn,1=Ms+Cs=Rs+Gs+2Bs
  (式2) Sn,2=Gs+Ys=Rs+2Gs
 また、第1フィールドのn+1ラインの信号は、次の式3、4で表される信号Sn+1,1、Sn+1,2の繰り返しとなる。
  (式3) Sn+1,1=Ms+Ys=2Rs+Gs+Bs
  (式4) Sn+1,2=Gs+Cs=2Gs+Bs
 これらの信号の読み出し方については、第2フィールドでも全く同じである。すなわち、第2フィールドにおけるn´ラインの信号および(n+1)´ラインの信号もそれぞれ式1、2の繰り返しおよび式3、4の繰り返しで表される。
 nライン、n+1ラインともに、水平方向に隣接する2画素に対応する信号の加算により輝度信号YLが生成される。また、nラインにおける信号Sn,1とSn,2との間の差分により色差信号BYが生成され、n+1ラインにおける信号Sn+1,1とSn+1,2との間の差分により色差信号RYが生成される。その結果、YL、BY、RYは、以下の式5~7で表される。
  (式5)YL=Sn,1+Sn,2=Sn+1,1+Sn+1,2=2Rs+3Gs+2Bs
  (式6)BY=Sn,1-Sn,2=2Bs-Gs
  (式7)RY=Sn+1,1+Sn+1,2=2Rs-Gs
 以上の信号演算処理により、特許文献4に開示されたカラー化方式によれば色を良好に再現できる。また、感度についても、特許文献4の撮像素子では補色であるマゼンタ、シアン、黄の色フィルタが用いられるため、ベイヤー方式を用いた場合よりも良好である。
特公昭63-51437号公報 特開昭61-93787号公報 特開平8-9395号公報 特公平6-28450号公報
 特許文献1~4に開示されたカラー化方式では、補色の色フィルタが用いられるため、原色の色フィルタを用いる方式に比べて光利用率を高めることができる。しかし、特許文献1~4の方式においても、用いられる色フィルタは減色型であるため、一部の光が吸収され、光損失が発生するという課題がある。
 本発明は、インターレース走査を行い、フィールド蓄積モードで画素信号を読み出す方式において、光の損失を大幅に低減できるカラー化技術を提供することを目的とする。
 本発明の固体撮像素子は、各々が4行2列に配列された8個の光感知セルを含む複数の単位ブロックが行列状に配列された光感知セルアレイと、前記光感知セルアレイに対向して配置された分光要素アレイであって、1行2列目の光感知セルに対向して配置された第1の分光要素、2行1列目の光感知セルに対向して配置された第2の分光要素、3行1列目の光感知セルに対向して配置された第3の分光要素、および4行1列目の光感知セルに対向して配置された第4の分光要素を含む分光要素アレイとを備えている。前記第1の分光要素は、1行1列目の光感知セルに第1の色成分の光を入射させ、1行2列目の光感知セルに前記第1の色成分以外の光を入射させる。前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光を入射させ、2行1列目の光感知セルに第2の色成分以外の光を入射させる。前記第3の分光要素は、3行2列目の光感知セルに前記第1の色成分の光を入射させ、3行1列目の光感知セルに前記第1の色成分以外の光を入射させる。前記第4の分光要素は、4行2列目の光感知セルに前記第2の色成分の光を入射させ、4行1列目の光感知セルに前記第2の色成分以外の光を入射させる。
 各単位ブロックにおいて、前記第1の分光要素は、1行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、第1の隣接単位ブロックに含まれる1行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、第2の隣接単位ブロックに含まれる2行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させ、前記第3の分光要素は、3行2列目の光感知セルに前記第1の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる3行2列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、前記第4の分光要素は、4行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる4行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させてもよい。
 各単位ブロックにおいて、1行1列目の光感知セルおよび3行2列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第1の色成分の光とを受け、1行2列目の光感知セルおよび4行2列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第2の色成分の光とを受け、1行2列目の光感知セルおよび3行1列目の光感知セルは、対向する分光要素から入射する前記第1の色成分以外の光を受け、2行1列目の光感知セルおよび4行1列目の光感知セルは、対向する分光要素から入射する前記第2の色成分以外の光を受けるように各構成要素が構成されていてもよい。
 本発明の他の固体撮像素子は、各々が4行2列に配列された8個の光感知セルを含む複数の単位ブロックが行列状に配列された光感知セルアレイと、前記光感知セルアレイに対向して配置された分光要素アレイであって、1行2列目の光感知セルに対向して配置された第1の分光要素、2行1列目の光感知セルに対向して配置された第2の分光要素、3行2列目の光感知セルに対向して配置された第3の分光要素、および4行2列目の光感知セルに対向して配置された第4の分光要素を含む分光要素アレイとを備えている。前記第1の分光要素は、1行1列目の光感知セルに、第1の色成分の光を入射させ、1行2列目の光感知セルに前記第1の色成分以外の光を入射させる。前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光を入射させ、2行1列目の光感知セルに第2の色成分以外の光を入射させる。前記第3の分光要素は、3行1列目の光感知セルに前記第1の色成分の光を入射させ、3行2列目の光感知セルに前記第1の色成分以外の光を入射させる。前記第4の分光要素は、4行1列目の光感知セルに前記第2の色成分の光を入射させ、4行2列目の光感知セルに前記第2の色成分以外の光を入射させる。
 各単位ブロックにおいて、前記第1の分光要素は、1行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、第1の隣接単位ブロックに含まれる1行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、第2の隣接単位ブロックに含まれる2行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させ、前記第3の分光要素は、3行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる3行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、前記第4の分光要素は、4行1列目の光感知セルに前記第2の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる4行1列目の光感知セルに前記第2の色成分の光の残りの半分を入射させてもよい。
 各単位ブロックにおいて、1行1列目の光感知セルおよび3行1列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第1の色成分の光とを受け、1行2列目の光感知セルおよび4行1列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第2の色成分の光とを受け、1行2列目の光感知セルおよび3行2列目の光感知セルは、対向する分光要素から入射する前記第1の色成分以外の光を受け、2行1列目の光感知セルおよび4行2列目の光感知セルは、対向する分光要素から入射する前記第2の色成分以外の光を受けるように各構成要素が構成されていてもよい。
 ある好ましい実施形態において、前記第1の色成分は、赤および青の一方の色成分であり、前記第2の色成分は、赤および青の他方の色成分である。
 本発明の撮像装置は、本発明による固体撮像素子と、前記固体撮像素子の撮像面に像を形成する光学系と、前記固体撮像素子から出力される信号を処理して色情報を生成する信号処理部とを備えている。
 本発明の固体撮像素子によれば、減色型の色フィルタではなく光を波長域に応じて分離する分光要素を用いて色情報の生成が行われる。そのため、従来技術と比較して光損失を低減できるとともに、フィールド蓄積モードにおいて良好な輝度信号及び色信号を生成できるという効果を有する。
本発明の第1の実施形態における撮像装置の全体構成図である。 本発明の第1の実施形態におけるレンズと撮像素子を示す図である。 本発明の第1の実施形態における撮像素子の画素配列を模式的に示す図である。 (a)は本発明の第1の実施形態における撮像素子の基本構造を示す平面図であり、(b)は(a)におけるAA´線断面図であり、(c)は(a)におけるBB´線断面図であり、(d)は(a)におけるCC´線断面図である。 本発明の第1の実施形態における各画素に入射する光の色成分を示す図である。 本発明の第1の実施形態における各画素に入射する光の色成分を一般化した図である。 (a)は本発明の第2の実施形態における撮像素子の基本構造を示す平面図であり、(b)は(a)におけるDD´線断面図である。 本発明の第2の実施形態における各画素に入射する光の色成分を示す図である。 (a)は本発明の第3の実施形態における撮像素子の基本構造を示す平面図であり、(b)は(a)におけるEE´線断面図であり、(c)は(a)におけるFF´線断面図である。 特許文献4におけるフィールド蓄積モードによるカラー化に用いられる基本色配置図である。
 以下、図1~9を参照しながら本発明の実施形態を説明する。以下の説明において、共通する要素には同一の符号を付している。なお、以下の説明において、波長域または色成分の異なる光を空間的に分離することを「分光」と称することがある。
 (実施形態1)
 まず、図1~6を参照しながら本発明の第1の実施形態による撮像装置を説明する。図1は、本実施形態による撮像装置の全体構成を示すブロック図である。本実施形態の撮像装置は、デジタル式の電子カメラであり、撮像部100と、撮像部100から送出される信号に基づいて画像を示す信号(画像信号)を生成する信号処理部200とを備えている。
 撮像部100は、被写体を結像するための光学レンズ12と、光学フィルタ11と、光学レンズ12および光学フィルタ11を通して結像した光情報を、光電変換によって電気信号に変換する固体撮像素子10とを備えている。撮像部100はさらに、撮像素子10を駆動するための基本信号を発生するとともに撮像素子10からの出力信号を受信して信号処理部200に送出する信号発生/受信部13と、信号発生/受信部13によって発生された基本信号に基づいて撮像素子10を駆動する素子駆動部14とを備えている。光学レンズ12は、公知のレンズであり、複数のレンズを有するレンズユニットであり得る。光学フィルタ11は、画素配列が原因で発生するモアレパターンを低減するための水晶ローパスフィルタに、赤外線を除去するための赤外カットフィルタを合体させたものである。撮像素子10は、典型的にはCCDまたはCMOSセンサであり、公知の半導体製造技術によって製造される。信号発生/受信部13および素子駆動部14は、例えばCCDドライバなどのLSIから構成されている。
 信号処理部200は、撮像部100から送出される信号を処理して画像信号を生成する画像信号生成部15と、画像信号の生成過程で発生する各種のデータを格納するメモリ17と、生成した画像信号を外部に送出する画像信号出力部16とを備えている。画像信号生成部15は、公知のデジタル信号処理プロセッサ(DSP)などのハードウェアと、画像信号生成処理を含む画像処理を実行するソフトウェアとの組合せによって好適に実現され得る。メモリ17は、DRAMなどによって構成される。メモリ17は、撮像部100から送出された信号を記録するとともに、画像信号生成部15によって生成された画像データや、圧縮された画像データを一時的に記録する。これらの画像データは、画像信号出力部16を介して不図示の記録媒体や表示部などに送出される。
 なお、本実施形態の撮像装置は、電子シャッタ、ビューファインダ、電源(電池)、フラッシュライトなどの公知の構成要素を備え得るが、それらの説明は本発明の理解に特に必要でないため省略する。また、以上の構成はあくまでも一例であり、本発明において、撮像素子10を除く構成要素には、公知の要素を適切に組み合わせて用いることができる。
 以下、本実施形態における撮像素子10を説明する。
 図2は、露光中にレンズ12を透過した光が撮像素子10に入射する様子を模式的に示す図である。図2では、簡単のためレンズ12および撮像素子10以外の構成要素の記載は省略されている。また、レンズ12は、一般には光軸方向に並んだ複数のレンズによって構成され得るが、簡単のため、単一のレンズとして描かれている。撮像素子10の撮像面10aには、2次元状に配列された複数の光感知セル(画素)を含む光感知セルアレイが配置されている。各光感知セルは、典型的にはフォトダイオードであり、光電変換によって入射光量に応じた光電変換信号(画素信号)を出力する。撮像面10aにはレンズ12および光学フィルタ11を透過した光(可視光)が入射する。一般に、撮像面10aに入射する光の強度および波長域ごとの入射光量の分布(分光分布)は、入射位置に応じて異なる。
 図3は、本実施形態における画素配列を示す平面図である。光感知セルアレイ50は、撮像面10a上に正方格子状に配列された複数の光感知セルを有している。光感知セルアレイ50は、複数の単位ブロック40から構成され、各単位ブロック40は4行2列に配列された8個の光感知セル5a、5b、5c、5d、5e、5f、5g、5hを含んでいる。なお、光感知セルの配列は、このような正方格子状の配列に限らず、斜交型の配列であってもよいし、他の配列であってもよい。以下の説明では、方向を示す際に図3に示すXY座標を用いることとする。また、本明細書において、X方向を「水平方向」、Y方向を「垂直方向」と呼ぶことがある。
 光感知セルアレイ50に対向して、光が入射する側に複数の分光要素を含む分光要素アレイが配置される。以下、本実施形態における分光要素を説明する。
 本実施形態における分光要素は、屈折率が異なる2種類の透光性部材の境界で生じる光の回折を利用して入射光を波長域に応じて異なる方向に向ける光学素子である。このタイプの分光要素は、屈折率が相対的に高い材料で形成された高屈折率透明部材(コア部)と、屈折率が相対的に低い材料で形成されコア部の各々の側面と接する低屈折率透明部材(クラッド部)とを有している。コア部とクラッド部との間の屈折率差により、両者を透過した光の間で位相差が生じるため、回折が起こる。この位相差は光の波長によって異なるため、光を波長域(色成分)に応じて空間的に分離することが可能となる。例えば、第1の方向および第2の方向に第1の色成分の光を半分ずつ向け、第3の方向に第1の色成分以外の光を向けることができる。また、3つの方向にそれぞれ異なる波長域(色成分)の光を向けることも可能である。コア部とクラッド部との屈折率差によって分光が可能になるため、本明細書では、高屈折率透明部材のことを「分光要素」と呼ぶことがある。このような回折型の分光要素の詳細は、例えば、特許第4264465号公報に開示されている。
 以上のような分光要素を有する分光要素アレイは、公知の半導体製造技術により、薄膜の堆積およびパターニングを実行することにより、製造され得る。分光要素の材質(屈折率)、形状、サイズ、配列パターンなどを適切に設計することにより、個々の光感知セルに所望の波長域の光を分離・統合して入射させることが可能となる。その結果、各光感知セルが出力する光電変換信号の組から、必要な色成分に対応する信号を算出することができる。
 次に、図4を参照しながら本実施形態における撮像素子10の基本構造および各分光要素の働きを説明する。
 図4(a)は撮像素子10の基本構造を模式的に示す平面図である。各単位ブロックにおいて、4つの光感知セル(画素)5b、5c、5e、5gの各々に対向して分光要素1b、1c、1e、1gがそれぞれ配置されている。画素5a、5d、5f、5hには対向する分光要素は配置されていない。このような基本構造を有する複数のパターンが撮像面10a上に繰り返し形成されている。
 1行2列目および3行1列目の画素5b、5eにそれぞれ対向する分光要素1b、1eは、シアン(緑および青)の色成分に対応する波長域の光(Cy光)を対向画素に入射させ、赤の色成分に対応する波長域の光(R光)を対向画素の水平方向における隣接画素に入射させる。2行1列目および4行1列目の画素5c、5gにそれぞれ対向する分光要素1c、1gは、黄(赤および緑)の色成分に対応する波長域の光(Ye光)を対向画素に入射させ、青の色成分に対応する波長域の光(B光)を対向画素の水平方向における隣接画素に入射させる。1行1列目、2行2列目、3行2列目、4行2列目の画素5a、5d、5f、5hには対向する分光要素は配置されないため、これらの画素は、いずれの分光要素も経由せずに直接入射する可視光(W光)を受ける。図4(a)には、各画素に入射する光の色成分を示す記号を記載している。なお、図中における括弧内の記号は、隣接画素に対向する分光要素から入射する光の色成分を表している。
 図4(b)、(c)、(d)は、それぞれ図4(a)におけるAA´線断面、BB´線断面、CC´線断面を模式的に示す図である。なお、図4(a)における4行目の構造は2行目の構造と同一であるため、4行目については断面の図示を省略する。
 図4(b)は、画素配列の1行目の断面構造を示している。光感知セル5a、5b上には各分光要素よりも屈折率の低い透光性部材からなる透明層2が形成されている。透明層2における光が入射する側の表面には、凸レンズ状の構造が形成されている。これによって各光感知セルへの集光性を高めることができる。透明層2および凸レンズ状の構造は、2行目~4行目についても全く同様に形成されている。なお、本発明において、透明層2における光が入射する側の表面は凸レンズ状に形成されていなくてもよい。
 1行2列目の光感知セル5bに対向して、光をR光とCy光とに分離する分光要素1bが配置されている。1行1列目の光感知セル5aは、可視光W(=R+G+B)を受光すると共に1行2列目の分光要素1bから入射するR光も受光する。1行2列目の分光要素1bは透明な高屈折率部材から形成され、光の進行方向に長い板状の形状を有し、光が出射する側の先端の片側が欠けている。その形状および周辺の透明層2との間の屈折率差により、分光要素1bは、1行1列目の光感知セル5aにR光を入射させ、対向する1行2列目の光感知セル5bにCy光を入射させる。
 図4(c)は画素配列の2行目の断面構造を示している。2行1列目の分光要素1cも、透明な高屈折率部材から形成され、光の進行方向に長い板状の形状を有し、光が出射する側の先端の片側が欠けている。その形状および周辺の透明層2との間の屈折率差により、分光要素1cは、2行1列目の光感知セル5cにYe光を入射させ、2行2列目の光感知セル5dにB光を入射させる。また、2行2列目の光感知セル5dは直接入射する可視光Wを受光すると共に2行1列目の分光要素1cから入射するB光も受光する。なお、画素配列の4行目も断面構造は2行目と同じであり、各画素への光の入射の仕方も同じである。
 図4(d)は画素配列の3行目の断面構造を示している。3行1列目の分光要素1eは、1行2列目の分光要素1bと同様の形状を有しているが、その向きは1行目の分光要素1bの向きと逆である。したがって、3行1列目の光感知セル5eはCy光を受光し、3行2列目の光感知セル5fは直接入射するW光および光感知セル5eから入射するR光を受光する。
 図5は、各光感知セルが受ける光の色成分を示す図である。以上の構成により、1行1列目および3行2列目の画素はW光およびR光を受ける。1行2列目および3行1列目の画素はCy光(G光およびB光)を受ける。2行1列目および4行1列目の画素はYe光(R光およびG光)を受ける。
 フィールド蓄積モードでは、輝度信号及び色差信号は以下のように表される。第1フィールドについては、図5における1行目および2行目がnライン、3行目および4行目が(n+1)ラインとなる。垂直方向に隣接する2画素の画素信号が加算されるため、第1フィールドのnラインの信号は、以下の式8、9で表される信号Sn,1、Sn,2の繰り返しとなる。
  (式8) Sn,1=Ws+Rs+Ys=3Rs+2Gs+Bs
  (式9) Sn,2=Cs+Ws+Bs=Rs+2Gs+3Bs
 また、第1フィールドの(n+1)ラインの信号は、以下の式10、11で表される信号Sn+1,1、Sn+1,2の繰り返しとなる。
  (式10) Sn+1,1=Cs+Ys=Rs+2Gs+Bs
  (式11) Sn+1,2=2Ws+Rs+Bs=3Rs+2Gs+3Bs
 輝度信号YLは、各ラインにおいて、隣接する2列の信号の加算によって生成される。したがって、輝度信号YLは、nライン、(n+1)ラインとも以下の式12で表される。
  (式12) YL=Sn,1+Sn,2=Sn+1,1+Sn+1,1=4Rs+4Gs+4Bs
 また、色差信号は次のように生成される。まず、各ラインにおいて隣接する2列の信号間で減算が行われる。その結果、nラインについては以下の式13で表される信号C(n)が得られ、(n+1)ラインについては以下の式14で表される信号C(n+1)が得られる。
  (式13) C(n)=Sn,1-Sn,2=2Rs-2Bs
  (式14) C(n+1)=Sn+1,2-Sn+1,1=2Rs+2Bs
 次に、C(n)+C(n+1)の演算により4Rsが得られ、C(n+1)-C(n)の演算により4Bsが得られる。得られた4Rs、4Bsと輝度信号YLとの差分演算により、以下の式15、16に示す色差信号(R‐Y)、(B‐Y)が生成される。但し、式15、16において、α、βはホワイトバランスを取るための係数である。α、βの値は、白の被写体を写した場合に色差信号(R-Y)、(B-Y)が0になるように設定される。
  (式15)R-Y=4Rs-αYL
  (式16)B-Y=4Bs-βYL
 第2フィールドでは、画素配列の2行目および3行目をn´ライン、4行目および5行目を(n+1)´ラインとし、垂直方向に隣接する2画素の画素信号が加算される。その結果、n´ラインの信号は、(Ys+Cs)、(2Ws+Rs+Bs)の繰り返しとなる。また、(n+1)´ラインの信号は、(Ys+Ws+Rs)、(Ws+Bs+Cs)の繰り返しとなる。すなわち、第2フィールドにおける読み出し信号は、第1フィールドにおける読み出し信号に対して1ライン分ずれるが、全体として読み出される信号は同じである。したがって、輝度信号、色差信号とも第1フィールドと全く同様の信号処理によって生成される。
 以上のように、本実施形態の撮像装置によれば、フィールド蓄積モードにおけるインターレース走査において、第1フィールド、第2フィールドとも、同一の信号処理によって同一の色情報を示す輝度信号、色差信号を生成することができる。
 本実施形態の撮像装置における画像信号生成部15は、上記の信号演算を行うことによって色情報を生成する。生成された色情報は画像信号出力部16によって不図示の記録媒体や表示装置などに出力される。
 以上のように、本実施形態の撮像装置は、4行2列を単位ブロックとする光感知セルアレイに対向して分光要素アレイが配置される。1行1列目、2行2列目、3行2列目、4行2列目の画素には分光要素は配置されず、これらの画素は透明層2を通って直接入射する光を受ける。一方、1行2列目および3行1列目の画素に対向して、入射光に含まれるR光を対向画素の隣接画素に入射させ、Cy光(G光およびB光)を対向画素に入射させる分光要素が配置される。また、2行1列目および4行1列目の画素には、入射光に含まれるB光を対向画素の隣接画素に入射させ、Ye光(R光およびG光)を対向画素に入射させる分光要素が配置される。これらの分光要素により、フィールド蓄積モードにおけるインターレース走査においてカラー化を実現できるとともに、光の損失を大幅に低減できるという効果を奏する。
 なお、各分光要素は、入射光に含まれるR光またはB光のほぼ全てを対向画素の隣接画素に入射させ、その他の光のほぼ全てを対向画素に入射させることが理想であるが、多少の光損失があっても問題はない。光損失の程度に応じて信号を補正することによって良好な色情報を得ることができる。
 さらに、本実施形態における画像信号生成部15が行う信号演算処理を、撮像装置自身ではなく他の機器に実行させることも可能である。例えば、撮像素子10から出力される光電変換信号の入力を受けた外部の機器に本実施形態における信号演算処理を規定するプログラムを実行させることによっても色情報を生成することが可能である。
 本実施形態では、入射光をR光とCy光とに分ける分光要素、および入射光をB光とYe光とに分ける分光要素が用いられるが、他の分光要素を用いることも可能である。一般化すると、入射光Wが3つの色成分の光C1、C2、C3の集合であるとして、入射光をC1光とその補色光C1~(=W-C1=C2+C3)とに分ける分光要素、およびC2光とその補色C2~(=W-C2=C1+C3)とに分ける分光要素が用いられていればよい。図6に、このように一般化された場合における各画素が受ける光の色成分を示す。
 このように一般化された場合、輝度信号YLおよび色差信号(R-Y)、(B-Y)の生成は以下の手順で行われる。
 まず、第1フィールド、第2フィールドとも、nラインの信号は、以下の式17、18で表される信号Sn,1、Sn,2の繰り返しとなる。ここで、C1光、C1~光、C2光、C2~光、C3光を示す信号をそれぞれC1s、C1~s、C2s、C2~s、C3sと表す。
  (式17) Sn,1=Ws+C1s+C2~s=3C1s+C2s+2C3s
  (式18) Sn,2=C1~s+Ws+C2s=C1s+3C2s+2C3s
 また、第1フィールド、第2フィールドとも、(n+1)ラインの信号は、以下の式19、20で表される信号Sn+1,1、Sn+1,2の繰り返しとなる。
  (式19) Sn+1,1=C1~s+C2~s=C1s+C2s+2C3s
  (式20) Sn+1,2=2Ws+C1s+C2s=3C1s+3C2s+2C3s
 したがって、輝度信号YLは、nライン、(n+1)ラインとも以下の式21で表される。
  (式21) YL=Sn,1+Sn,2=Sn+1,1+Sn+1,1=4C1s+4C2s+4C3s=4Ws
 また、色差信号に関しては、まず、各ラインにおいて2列の信号間で減算が行われる。その結果、nラインについては以下の式22で表される信号C(n)が得られ、(n+1)ラインについては以下の式23で表される信号C(n+1)が得られる。
  (式22) C(n)=Sn,1-Sn,2=2C1s-2C2s
  (式23) C(n+1)=Sn+1,2-Sn+1,1=2C1s+2C2s
 次に、C(n)+C(n+1)の演算により4C1sが得られ、C(n+1)-C(n)の演算により4C2sが得られる。得られた4C1s、4C2sと輝度信号YLとの差により、以下の式24、25に示す色差信号(R‐Y)、(B‐Y)が生成される。但し、式24、25において、α、βはホワイトバランスを取るための係数である。α、βの値は、白の被写体を写した場合に色差信号(R-Y)、(B-Y)が0になるように設定される。
  (式24)R-Y=4C1s-αYL
  (式25)B-Y=4C2s-βYL
 このように、色成分を一般化した場合においても、上記の信号演算によって色情報を生成することができる。
 なお、本実施形態では、分光要素として部材間の屈折率差による回折を利用して分光するものが用いられるが、分光要素はこのような回折型のものに限定されない。例えば、マイクロプリズムや、ダイクロイックミラー等の分光要素を用いても同様の効果を得ることが可能である。
 (実施形態2)
 次に図7、8を参照しながら本発明の第2の実施形態を説明する。本実施形態の撮像装置は、第1の実施形態の撮像装置と比較して、撮像素子の画素配列における3行目および4行目の画素に対応する分光要素の配置が異なっている点のみが異なっている。以下の説明においては、第1の実施形態と異なる点を中心に説明し、重複する点については説明を省略する。
 図7(a)は本実施形態における撮像素子10の基本構造を模式的に示す平面図である。各単位ブロックにおいて、4つの光感知セル5b、5c、5f、5hの各々に対向して分光要素1b、1c、1f、1hがそれぞれ配置されている。光感知セル5a、5d、5e、5g上には分光要素は配置されていない。このような基本構造を有する複数のパターンが撮像面10a上に繰り返し形成されている。このように、本実施形態においては、1行目および2行目の構造は実施形態1における構造と同様であるが、3行目および4行目については実施形態1における構造に対して分光要素の配置が異なっている。本実施形態において、3行目は1行目と同じ構造となっている。一方、4行目は2行目と同様の構成であるが、分光要素の水平方向の向きが逆である。そのため、1行目から3行目については断面構造の図示を省略する。
 図7(b)は、図7(a)におけるDD´線断面図であり、画素配列の4行目の断面構造を示している。図示されるように、入射光(W光)に含まれるB光を4行1列目の光感知セル5gに入射させ、Ye光(R光およびG光)を4行2列目の光感知セル5hに入射させる分光要素1hが画素5hに対向して配置されている。このため、4行2列目の光感知セル5hはYe光を受け、4行1列目の光感知セル5gはW光およびB光を受ける。
 図8は、本実施形態において各光感知セルが受ける光の色成分を示す図である。以上の構成により、1行1列目および3行1列目の画素はW光およびR光を受ける。2行2列目および4行1列目の画素はW光およびB光を受ける。1行2列目および3行2列目の画素はCy光(G光およびB光)を受ける。2行1列目および4行2列目の画素はYe光(R光およびG光)を受ける。
 本実施形態における各画素が受ける光の色成分は、実施形態1における各画素が受ける光の色成分と比べて、3行1列目と3行2列目とが逆であり、4行1列目と4行2列目とが逆である点を除けば同じである。よって、本実施形態における輝度信号YLも、実施形態1における輝度信号と同様、式12で表すことができる。また、第1フィールド、第2フィールドとも、nラインの隣接する2列の信号の差分C(n)は式13で表され、(n+1)ラインの隣接する2列の信号の差分C(n+1)は式14において符号を逆にした信号となる。したがって、実施形態1における信号演算処理と同様の処理を行うことにより、色情報を生成することができる。
 以上のことから、本実施形態の撮像装置においても、フィールド蓄積モードにおけるインターレース走査においてカラー化を実現できるとともに、光の損失を大幅に低減できるという効果を奏する。
 なお、本実施形態においても、入射光をR光とCy光とに分ける分光要素、および入射光をB光とYe光とに分ける分光要素に限らず、他の分光要素を用いることが可能である。一般化すれば、入射光WをC1光とその補色光C1~(=W-C1=C2+C3)とに分ける分光要素、およびC2光とその補色C2~(=W-C2=C1+C3)とに分ける分光要素が用いられていればよい。
 また、分光要素は、部材間の屈折率差による回折を利用して分光するものに限らず、例えば、マイクロプリズムや、ダイクロイックミラー等の分光要素を用いても同様の効果を得ることが可能である。
 (実施形態3)
 次に図9を参照しながら本発明の第3の実施形態を説明する。本実施形態の撮像装置は実施形態1の撮像装置と比較して、各画素が受ける光の色成分は同じであるが、分光要素の構造および分光の仕方が異なっている。そこで、以下の説明においては、第1の実施形態と異なる点を中心に説明し、重複する点についての説明は省略する。
 図9(a)は、本実施形態における撮像素子の基本構造を模式的に示す平面図である。各単位ブロックにおいて、4つの光感知セル5b、5c、5e、5gの各々に対向して分光要素1b、1c、1e、1gがそれぞれ配置されている。光感知セル5a、5d、5f、5h上には分光要素は配置されていない。このような基本構造を有する複数のパターンが撮像面10a上に繰り返し形成されている。本実施形態では、各光感知セルが受ける光の色成分は実施形態1における各光感知セルが受ける光の色成分と同じである。本実施形態における分光要素は、特定の色成分の光を対向画素の水平方向における2つの隣接画素に等量ずつ入射させるように設計されている点が実施形態1における分光要素と異なっている。
 図9(b)は、図9(a)におけるEE´線断面図であり、画素配列の1行目の断面構造を示している。画素5bに対向して配置された分光要素3bは、透明な高屈折率部材によって形成され、光の進行方向に長い板状の形状を有している。分光要素3bは、周辺の透明層2との屈折率差による回折を利用して、Cy光を対向画素5bに入射させ、R光を対向画素の両隣の画素に半分ずつ入射させる。その結果、1行1列目の画素5aは、いずれの分光要素も介さずに入射する可視光Wと、分光要素3bから入射するR光(R/2)と、隣接単位ブロックに含まれる分光要素から入射するR光(R/2)とを受ける。ここで、記号R/2は、分光要素3bに入射する光Wに含まれるR光の半分の量であることを表している。1行2列目の画素5bは、対向する分光要素3bから入射するCy光(G光およびB光)を受ける。なお、画素配列の3行目も、分光要素の配置は1列ずれるが、1行目と同様の構成を有しており、各画素へ入射する光の色成分も1行目と同様である。
 図9(c)は、図9(a)におけるFF´線断面図であり、画素配列の2行目の断面構造を示している。画素5cに対向して配置された分光要素3cも、透明な高屈折率部材によって形成され、光の進行方向に長い板状の形状を有している。分光要素3cは、周辺の透明層2との屈折率差による回折を利用して、Ye光を対向画素5cに入射させ、B光を半分ずつ対向画素の両隣の画素に入射させる。その結果、2行1列目の画素5cは、対向する分光要素3cから入射するYe光(R光およびG光)を受ける。2行2列目の画素5dは、いずれの分光要素も介さずに入射する可視光Wと、分光要素3cから入射するB光(B/2)と、隣接単位ブロックに含まれる分光要素から入射するB光(B/2)とを受ける。なお、画素配列の4行目も、2行目と同様の構成を有しており、各画素へ入射する光の色成分も同様である。
 本実施形態における各画素が受ける光の色成分は、実施形態1において各画素が受ける光の色成分と全く同じである。そのため、実施形態1における信号演算処理により、フィールド蓄積モードによるインターレース走査に対応したカラー化を実現できる。さらに、原色型の色フィルタではなく分光要素が用いられるため、光の損失を低減できるという効果を有する。また、本実施形態における各分光要素は対向画素に隣接する2画素に特定の色成分の光を分離入射させるため、水平方向に関する光学ローパスフィルタの効果が実施形態1の場合よりも高いという特徴を有している。
 なお、本実施形態においても、入射光をR光とCy光とに分ける分光要素、および入射光をB光とYe光とに分ける分光要素に限らず、他の分光要素を用いることが可能である。一般化すれば、入射光WをC1光とその補色光C1~(=W-C1=C2+C3)とに分ける分光要素、およびC2光とその補色C2~(=W-C2=C1+C3)とに分ける分光要素が用いられていればよい。この場合、各分光要素は、C1光またはC2光を半分ずつ各分光要素の両側の画素に入射するように構成されていればよい。
 また、分光要素は、部材間の屈折率差による回折を利用して分光するものに限らず、例えば、マイクロプリズムや、ダイクロイックミラー等の分光要素を用いてもよい。
 本実施形態における各分光要素は、対向画素の両隣の画素に1つの色成分の光を等量ずつ入射させるが、対向画素の両隣の画素に異なる割合で光を入射させてもよい。例えば、分光要素は、対向画素の一方の隣接画素に入射光に含まれる特定の色成分の光の7割を入射させ、他方の隣接画素に特定の色成分の光の3割を入射させるように構成されていてもよい。このような場合においても、分光要素が配置されていない画素が受ける第1の色成分の光の量に変わりはないため、上記と同様の効果を得ることができる。
 また、本実施形態における分光要素と実施形態1における分光要素とを組み合わせて用いてもよい。例えば、1行目および3行目には本実施形態における分光要素が配置され、2行目および4行目には実施形態1における分光要素が配置される構成も可能である。
 本実施形態における分光要素の配置は、実施形態1における分光要素と同様の配置であるが、実施形態2における分光要素と同様の配置であってもよい。すなわち、図9において、3行目および4行目の分光要素を配置する位置を1列ずらしてもよい。その場合であっても本実施形態の効果が変わるものではない。
 本発明の固体撮像素子および撮像装置は、フィールド蓄積モードでインターレース走査を行うすべてのカメラに有効である。例えば、デジタルスチルカメラやデジタルビデオカメラなどの民生用カメラ、放送用の固体カメラ、産業用の固体監視カメラなどに利用可能である。
 1b、1e、1f R光とCy光とに分ける分光要素(高屈折率材料)
 1c、1g、1h B光とYe光とに分ける分光要素(高屈折率材料)
 2 透光性部材
 3b、3e R光とCy光とに分ける分光要素(高屈折率材料)
 3c、3g B光とYe光とに分ける分光要素(高屈折率材料)
 5a、5b、5c、5d、5e、5f、5g、5h 光感知セル(画素)
 10 固体撮像素子
 10a 固体撮像素子の撮像面
 11 光学フィルタ
 12 光学レンズ
 13 信号発生/受信部
 14 素子駆動部
 15 画像信号生成部
 16 画像信号出力部
 17 メモリ
 40 光感知セルアレイの単位ブロック
 50 光感知セルアレイ
 100 撮像部
 200 信号処理部

Claims (8)

  1.  各々が4行2列に配列された8個の光感知セルを含む複数の単位ブロックが行列状に配列された光感知セルアレイと、
     前記光感知セルアレイに対向して配置された分光要素アレイであって、1行2列目の光感知セルに対向して配置された第1の分光要素、2行1列目の光感知セルに対向して配置された第2の分光要素、3行1列目の光感知セルに対向して配置された第3の分光要素、および4行1列目の光感知セルに対向して配置された第4の分光要素を含む分光要素アレイと、
    を備え、
     前記第1の分光要素は、1行1列目の光感知セルに第1の色成分の光を入射させ、1行2列目の光感知セルに前記第1の色成分以外の光を入射させ、
     前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光を入射させ、2行1列目の光感知セルに第2の色成分以外の光を入射させ、
     前記第3の分光要素は、3行2列目の光感知セルに前記第1の色成分の光を入射させ、3行1列目の光感知セルに前記第1の色成分以外の光を入射させ、
     前記第4の分光要素は、4行2列目の光感知セルに前記第2の色成分の光を入射させ、4行1列目の光感知セルに前記第2の色成分以外の光を入射させる、
    固体撮像素子。
  2.  各単位ブロックにおいて、
     前記第1の分光要素は、1行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、第1の隣接単位ブロックに含まれる1行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、
     前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、第2の隣接単位ブロックに含まれる2行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させ、
     前記第3の分光要素は、3行2列目の光感知セルに前記第1の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる3行2列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、
     前記第4の分光要素は、4行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる4行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させる、請求項1に記載の固体撮像素子。
  3.  各単位ブロックにおいて、
     1行1列目の光感知セルおよび3行2列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第1の色成分の光とを受け、
     1行2列目の光感知セルおよび4行2列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第2の色成分の光とを受け、
     1行2列目の光感知セルおよび3行1列目の光感知セルは、対向する分光要素から入射する前記第1の色成分以外の光を受け、
     2行1列目の光感知セルおよび4行1列目の光感知セルは、対向する分光要素から入射する前記第2の色成分以外の光を受ける、
    請求項1または2に記載の固体撮像素子。
  4.  各々が4行2列に配列された8個の光感知セルを含む複数の単位ブロックが行列状に配列された光感知セルアレイと、
     前記光感知セルアレイに対向して配置された分光要素アレイであって、1行2列目の光感知セルに対向して配置された第1の分光要素、2行1列目の光感知セルに対向して配置された第2の分光要素、3行2列目の光感知セルに対向して配置された第3の分光要素、および4行2列目の光感知セルに対向して配置された第4の分光要素を含む分光要素アレイと、
    を備え、
     前記第1の分光要素は、1行1列目の光感知セルに、第1の色成分の光を入射させ、1行2列目の光感知セルに前記第1の色成分以外の光を入射させ、
     前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光を入射させ、2行1列目の光感知セルに第2の色成分以外の光を入射させ、
     前記第3の分光要素は、3行1列目の光感知セルに前記第1の色成分の光を入射させ、3行2列目の光感知セルに前記第1の色成分以外の光を入射させ、
     前記第4の分光要素は、4行1列目の光感知セルに前記第2の色成分の光を入射させ、4行2列目の光感知セルに前記第2の色成分以外の光を入射させる、
    固体撮像素子。
  5.  各単位ブロックにおいて、
     前記第1の分光要素は、1行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、第1の隣接単位ブロックに含まれる1行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、
     前記第2の分光要素は、2行2列目の光感知セルに前記第2の色成分の光の半分を入射させ、第2の隣接単位ブロックに含まれる2行2列目の光感知セルに前記第2の色成分の光の残りの半分を入射させ、
     前記第3の分光要素は、3行1列目の光感知セルに前記第1の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる3行1列目の光感知セルに前記第1の色成分の光の残りの半分を入射させ、
     前記第4の分光要素は、4行1列目の光感知セルに前記第2の色成分の光の半分を入射させ、前記第2の隣接単位ブロックに含まれる4行1列目の光感知セルに前記第2の色成分の光の残りの半分を入射させる、請求項4に記載の固体撮像素子。
  6.  各単位ブロックにおいて、
     1行1列目の光感知セルおよび3行1列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第1の色成分の光とを受け、
     1行2列目の光感知セルおよび4行1列目の光感知セルは、いずれの分光要素も介さずに入射する前記第1の色成分の光、前記第2の色成分の光、および第3の色成分の光と、隣接する光感知セルに対向する分光要素から入射する前記第2の色成分の光とを受け、
     1行2列目の光感知セルおよび3行2列目の光感知セルは、対向する分光要素から入射する前記第1の色成分以外の光を受け、
     2行1列目の光感知セルおよび4行2列目の光感知セルは、対向する分光要素から入射する前記第2の色成分以外の光を受ける、
    請求項4または5に記載の固体撮像素子。
  7.  前記第1の色成分は、赤および青の一方の色成分であり、
     前記第2の色成分は、赤および青の他方の色成分である、
    請求項1から6のいずれかに記載の固体撮像素子。
  8.  請求項1から7のいずれかに記載の固体撮像素子と、
     前記固体撮像素子の撮像面に像を形成する光学系と、
     前記固体撮像素子から出力される信号を処理して色情報を生成する信号処理部と、
    を備えている撮像装置。
PCT/JP2011/002382 2010-08-24 2011-04-22 固体撮像素子および撮像装置 WO2012026051A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201180004302.0A CN102577395B (zh) 2010-08-24 2011-04-22 固体摄像元件和摄像装置
US13/502,417 US8514319B2 (en) 2010-08-24 2011-04-22 Solid-state image pickup element and image pickup apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010187250A JP5503458B2 (ja) 2010-08-24 2010-08-24 固体撮像素子および撮像装置
JP2010-187250 2010-08-24

Publications (1)

Publication Number Publication Date
WO2012026051A1 true WO2012026051A1 (ja) 2012-03-01

Family

ID=45723076

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/002382 WO2012026051A1 (ja) 2010-08-24 2011-04-22 固体撮像素子および撮像装置

Country Status (4)

Country Link
US (1) US8514319B2 (ja)
JP (1) JP5503458B2 (ja)
CN (1) CN102577395B (ja)
WO (1) WO2012026051A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014083836A1 (ja) * 2012-11-30 2014-06-05 パナソニック株式会社 集光装置、固体撮像素子および撮像装置
US9837457B2 (en) 2014-07-25 2017-12-05 Semiconductor Energy Laboratory Co., Ltd. Imaging device
US10180354B2 (en) 2014-11-07 2019-01-15 Semiconductor Energy Laboratory Co., Ltd. Imaging device and electronic device

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012221356A1 (de) * 2012-06-20 2013-12-24 Robert Bosch Gmbh Sensor und Verfahren zur Erfassung von Licht und Verfahren und Vorrichtung zur Ermittlung einer Farbinformation
US9099370B2 (en) 2012-09-03 2015-08-04 Panasonic Intellectual Property Management Co., Ltd. Solid-state imaging element and imaging device
KR102159166B1 (ko) 2014-05-09 2020-09-23 삼성전자주식회사 색분리 소자 및 상기 색분리 소자를 포함하는 이미지 센서
KR102276434B1 (ko) 2014-07-03 2021-07-09 삼성전자주식회사 색분리 소자를 포함하는 이미지 센서 및 상기 이미지 센서를 포함하는 촬상 장치
KR102299714B1 (ko) 2014-08-18 2021-09-08 삼성전자주식회사 컬러 필터 격리층을 구비하는 이미지 센서 및 상기 이미지 센서의 제조 방법
KR102340346B1 (ko) 2014-08-26 2021-12-16 삼성전자주식회사 칼라 필터 어레이 및 그 제조 방법 및 이를 포함하는 이미지 센서
KR102307458B1 (ko) 2014-10-20 2021-09-30 삼성전자주식회사 색분리 소자 및 그 제조 방법 및 이를 포함하는 이미지 센서
KR102409389B1 (ko) 2015-10-06 2022-06-15 삼성전자주식회사 색분리 소자를 포함하는 이미지 센서
EP3812801A1 (en) 2019-10-23 2021-04-28 Samsung Electronics Co., Ltd. Image sensor including color separating lens array and electronic device including the image sensor
CN112701132A (zh) 2019-10-23 2021-04-23 三星电子株式会社 图像传感器和包括该图像传感器的电子装置
US11682685B2 (en) 2019-10-24 2023-06-20 Samsung Electronics Co., Ltd. Color separation element and image sensor including the same
US11640645B2 (en) * 2019-10-25 2023-05-02 Samsung Electronics Co., Ltd. Apparatus and method of acquiring image by employing color separation lens array
US11652121B2 (en) 2019-11-28 2023-05-16 Samsung Electronics Co., Ltd. Color separation element and image sensor including the same
CN113257846A (zh) 2020-02-11 2021-08-13 三星电子株式会社 图像传感器和包括图像传感器的电子设备
CN114447006A (zh) 2020-10-30 2022-05-06 三星电子株式会社 包括分色透镜阵列的图像传感器和包括图像传感器的电子设备
CN114447009A (zh) 2020-10-30 2022-05-06 三星电子株式会社 包括分色透镜阵列的图像传感器和包括该图像传感器的电子装置
CN117395524A (zh) * 2023-12-11 2024-01-12 荣耀终端有限公司 一种图像传感器、摄像头模组、电子设备及显示装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6193787A (ja) * 1984-10-15 1986-05-12 Toshiba Corp カラ−固体撮像装置
JPH05153509A (ja) * 1991-11-30 1993-06-18 Toshiba Corp カラー撮像記録装置
WO2009153937A1 (ja) * 2008-06-18 2009-12-23 パナソニック株式会社 固体撮像装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5739684A (en) 1980-08-20 1982-03-04 Matsushita Electric Ind Co Ltd Solid-state color image sensor
JPH0628450B2 (ja) 1983-01-28 1994-04-13 松下電器産業株式会社 固体撮像装置
JPS62277880A (ja) * 1986-05-26 1987-12-02 Sony Corp 固体撮像装置
JPH06303620A (ja) * 1993-04-12 1994-10-28 Mitsubishi Electric Corp カラー固体静止画撮像装置
JPH089395A (ja) 1994-06-23 1996-01-12 Canon Inc カラー撮像装置
JP2005167874A (ja) * 2003-12-05 2005-06-23 Sanyo Electric Co Ltd 固体撮像素子及び画像信号処理装置
US20070097252A1 (en) * 2005-10-31 2007-05-03 Silverstein D A Imaging methods, cameras, projectors, and articles of manufacture
WO2009019818A1 (ja) 2007-08-06 2009-02-12 Panasonic Corporation 撮像用光検出装置
JP2009232352A (ja) * 2008-03-25 2009-10-08 Seiko Epson Corp 撮像装置及びカラーフィルタアレイ
JP5055643B2 (ja) * 2008-07-28 2012-10-24 株式会社リコー 撮像素子および画像撮像装置
WO2010070869A1 (ja) * 2008-12-19 2010-06-24 パナソニック株式会社 撮像装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6193787A (ja) * 1984-10-15 1986-05-12 Toshiba Corp カラ−固体撮像装置
JPH05153509A (ja) * 1991-11-30 1993-06-18 Toshiba Corp カラー撮像記録装置
WO2009153937A1 (ja) * 2008-06-18 2009-12-23 パナソニック株式会社 固体撮像装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014083836A1 (ja) * 2012-11-30 2014-06-05 パナソニック株式会社 集光装置、固体撮像素子および撮像装置
US9837457B2 (en) 2014-07-25 2017-12-05 Semiconductor Energy Laboratory Co., Ltd. Imaging device
US10418400B2 (en) 2014-07-25 2019-09-17 Semiconductor Energy Laboratory Co., Ltd. Imaging device
US10180354B2 (en) 2014-11-07 2019-01-15 Semiconductor Energy Laboratory Co., Ltd. Imaging device and electronic device

Also Published As

Publication number Publication date
CN102577395B (zh) 2015-07-22
JP5503458B2 (ja) 2014-05-28
US20120206637A1 (en) 2012-08-16
JP2012049619A (ja) 2012-03-08
CN102577395A (zh) 2012-07-11
US8514319B2 (en) 2013-08-20

Similar Documents

Publication Publication Date Title
JP5503458B2 (ja) 固体撮像素子および撮像装置
JP5325117B2 (ja) 固体撮像装置
JP5331107B2 (ja) 撮像装置
JP5106256B2 (ja) 撮像装置
WO2010058545A1 (ja) 撮像装置
WO2011010455A1 (ja) 撮像装置および固体撮像素子
JP6039558B2 (ja) 固体撮像装置
JP2006033493A (ja) 撮像装置
KR20160065464A (ko) 컬러 필터 어레이, 이를 포함하는 이미지 센서 및 이를 이용한 적외선 정보 획득 방법
JP5894573B2 (ja) 固体撮像素子、撮像装置および信号処理方法
JP5997149B2 (ja) 固体撮像素子、撮像装置、および信号処理方法
WO2010100896A1 (ja) 撮像装置および両面照射型固体撮像素子
WO2012001853A1 (ja) 3次元撮像装置および光透過板
JP5852006B2 (ja) 固体撮像素子、撮像装置および信号処理方法
JP6039567B2 (ja) 固体撮像装置
US8711257B2 (en) Color imaging device
JP2014086743A (ja) 固体撮像素子、撮像装置、および信号処理方法
JP2019075703A (ja) 偏光撮像装置
JP2014086742A (ja) 固体撮像素子、撮像装置、および信号処理方法

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180004302.0

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 13502417

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11819529

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11819529

Country of ref document: EP

Kind code of ref document: A1