WO2016038936A1 - 撮像装置及び合焦制御方法 - Google Patents

撮像装置及び合焦制御方法 Download PDF

Info

Publication number
WO2016038936A1
WO2016038936A1 PCT/JP2015/063794 JP2015063794W WO2016038936A1 WO 2016038936 A1 WO2016038936 A1 WO 2016038936A1 JP 2015063794 W JP2015063794 W JP 2015063794W WO 2016038936 A1 WO2016038936 A1 WO 2016038936A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
incident angle
imaging
phase difference
defocus amount
Prior art date
Application number
PCT/JP2015/063794
Other languages
English (en)
French (fr)
Inventor
貴嗣 青木
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2016547720A priority Critical patent/JP6171106B2/ja
Publication of WO2016038936A1 publication Critical patent/WO2016038936A1/ja
Priority to US15/456,188 priority patent/US9781333B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G02B7/10—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification by relative axial movement of several lenses, e.g. of varifocal objective lens
    • G02B7/102—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification by relative axial movement of several lenses, e.g. of varifocal objective lens controlled by a microcomputer
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/58—Optics for apodization or superresolution; Optical synthetic aperture systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/14—Mountings, adjusting means, or light-tight connections, for optical elements for lenses adapted to interchange lenses
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets

Definitions

  • the present invention relates to an imaging apparatus and a focus control method.
  • an imaging device In recent years, with the increase in the resolution of solid-state imaging devices such as CCD (Charge Coupled Device) image sensors and CMOS (Complementary Metal Oxide Semiconductor) image sensors, mobile phones such as digital still cameras, digital video cameras, and smartphones, PDA (Personal Digital). Demand for information equipment having an imaging function such as an assistant (mobile information terminal) is rapidly increasing. Note that an information device having the above imaging function is referred to as an imaging device.
  • Some of these imaging apparatuses employ a phase difference AF (Auto Focus) method as a focus control method for detecting a distance to a main subject and focusing on the subject.
  • AF Auto Focus
  • the defocus amount correction data for each imaging lens can be reduced with less capacity, and can be replaced with any type of imaging lens.
  • Japanese Patent Application Laid-Open No. 2004-151867 discloses a technique that enables execution of focusing control by a simple phase difference AF method.
  • an apodization filter (hereinafter referred to as an APD filter) is known as an optical filter for improving an out-of-focus image, that is, a so-called blurred image.
  • an APD filter is used, the outline of the blurred image can be made smooth.
  • Patent Document 2 and Patent Document 3 describe an imaging apparatus in which an APD filter is detachable from an optical axis of an imaging lens.
  • Patent Document 1 a parameter relating to the ratio between the defocus amount and the phase difference is obtained based on the information of the imaging lens and the light receiving sensitivity distribution that is the light receiving sensitivity for each incident angle of the incident light with respect to the pair of phase difference detection pixels.
  • the defocus amount is calculated using this parameter.
  • the imaging optical system includes an APD filter
  • the light incident on the light receiving surface of the imaging element is partially blocked by the APD filter.
  • the light receiving sensitivity in the pair of phase difference detection pixels is lowered by the amount of light being blocked. Therefore, the parameter is obtained based on a light receiving sensitivity distribution that is different from the actual situation, and the calculated defocus amount may be different from the actual value.
  • Patent Document 2 and Patent Document 3 disclose an imaging apparatus including an APD filter, but do not disclose the influence on AF.
  • the present invention has been made in view of the above circumstances, and an object of the present invention is to provide an imaging apparatus and a focusing control method capable of focusing on a subject with high accuracy even when the imaging optical system includes an APD filter.
  • the imaging device of the present invention images a subject through an imaging optical system including a focus lens, receives one of a pair of light beams that have passed through different portions of the pupil region of the imaging optical system, and detects a signal corresponding to the amount of received light.
  • An image sensor including a pair of a first signal detector and a second signal detector that receives the other of the pair of light beams and detects a signal according to the amount of received light, and an optical axis on the optical axis of the imaging optical system.
  • the incident angle range of light incident on the pair through the imaging optical system and the transmission of the optical filter And a light receiving sensitivity distribution indicating a light receiving sensitivity for each incident angle with respect to each incident light of the pair, and based on the acquired incident angle range, the transmittance distribution, and the light receiving sensitivity distribution,
  • Each of the pair A defocus amount calculation unit that calculates a defocus amount using the calculated parameter and the phase difference; A focusing control unit that performs focusing control to move the focus lens in the optical axis direction according to the defocus amount calculated by the calculation unit.
  • the focus control method of the present invention images a subject through an imaging optical system including a focus lens, receives one of a pair of light beams that have passed through different parts of the pupil region of the imaging optical system, and outputs a signal corresponding to the amount of received light.
  • a focusing control method in an imaging apparatus including an imaging element including a pair of a first signal detection unit to detect and a second signal detection unit that receives the other of the pair of light beams and detects a signal according to the amount of received light.
  • the optical filter enters the pair through the imaging optical system.
  • the incident angle range of the light to be obtained, the transmittance distribution of the optical filter, and the received light sensitivity distribution indicating the received light sensitivity for each incident angle with respect to each incident light of the pair are acquired, and the acquired incident angle range and the transmitted light are acquired.
  • the present invention it is possible to provide an imaging apparatus and a focusing control method capable of focusing on a subject with high accuracy even when the imaging optical system includes an APD filter.
  • FIG. 1 is a diagram illustrating a schematic configuration of a digital camera as an example of an imaging apparatus for describing an embodiment of the present invention.
  • FIG. 2 is a schematic plan view showing an overall configuration of an image sensor 5 mounted on the digital camera shown in FIG. 1.
  • FIG. 3 is a partially enlarged view of one AF area 53 shown in FIG. 2.
  • FIG. 4 is a diagram showing only the phase difference detection pixels 52 shown in FIG. 3.
  • the figure which shows the light reception sensitivity distribution of the pixels 52A and 52B for phase difference detection in the state in which the APD filter 3 exists on an optical axis. 2 is a flowchart for explaining the operation of the digital camera shown in FIG.
  • FIG. 1 is a diagram showing a schematic configuration of a digital camera as an example of an imaging apparatus for explaining an embodiment of the present invention.
  • the digital camera shown in FIG. 1 includes an imaging lens 1 including a focus lens for focus adjustment and a zoom lens for zoom magnification change, an aperture 2, an APD filter 3, a lens control unit 4, and a lens driving unit 8. And a lens device 40 having a diaphragm driving unit 9.
  • the lens device 40 is described as being detachable from the digital camera body, but may be fixed to the digital camera body.
  • the lens device 40 constitutes an imaging optical system and includes at least a focus lens.
  • the focus lens is a lens that adjusts the focal position of the imaging optical system by moving in the optical axis direction.
  • the imaging lens composed of a plurality of lenses is an all-group extended lens, the entire group becomes the focus lens.
  • the APD filter 3 is an optical filter whose transmittance decreases as the distance from the optical axis center of the imaging optical system increases in the direction perpendicular to the optical axis.
  • the lens device 40 as shown in FIG. 1, a model in which the APD filter 3 is fixedly disposed on the optical axis, a state in which the APD filter 3 is inserted on the optical axis, It is possible to mount any of the models configured to be able to switch the state retracted from the axis.
  • a lens device 40 that does not include the APD filter 3 can be attached to the digital camera body.
  • the lens control unit 4 of the lens device 40 is configured to be able to communicate with the system control unit 11 of the digital camera body by wire or wirelessly.
  • the lens control unit 4 drives the focus lens included in the imaging lens 1 through the lens driving unit 8 or drives the diaphragm 2 through the diaphragm driving unit 9 in accordance with a command from the system control unit 11. .
  • the lens control unit 4 inserts the APD filter 3 on the optical axis according to a command from the system control unit 11, Control is also performed to retract from the optical axis.
  • the lens control unit 4 has a built-in memory. In this memory, information indicating the presence / absence of the APD filter 3 in the lens device 40 and the transmittance distribution of the APD filter 3 in the case of a lens device equipped with the APD filter 3 are stored in the memory. And imaging lens information which is design information of the imaging lens 1 are stored.
  • the lens control unit 4 can communicate with the system control unit 11 wirelessly or by wire, and transmits various information stored in the memory to the system control unit 11 in response to a request from the system control unit 11.
  • the lens control unit 4 also transmits information on whether or not the APD filter 3 is inserted on the optical axis to the system control unit 11. .
  • the digital camera body is a CCD (Charge Coupled Device) type or CMOS (Complementary Metal Oxide Semiconductor) type image sensor 5 that captures an image of an object through an imaging optical system, and a correlated double sampling process connected to the output of the image sensor 5
  • An analog signal processing unit 6 that performs analog signal processing such as the above, and an A / D conversion circuit 7 that converts an analog signal output from the analog signal processing unit 6 into a digital signal.
  • the analog signal processing unit 6 and the A / D conversion circuit 7 are controlled by the system control unit 11.
  • the analog signal processing unit 6 and the A / D conversion circuit 7 may be built in the image sensor 5.
  • the system control unit 11 that performs overall control of the entire electric control system of the digital camera drives the image sensor 5 via the image sensor drive unit 10 and outputs the subject image captured through the lens device 40 as a captured image signal.
  • An instruction signal from the user is input to the system control unit 11 through the operation unit 14.
  • the system control unit 11 functions as a focus control unit that performs focus control to move the focus lens to a focus position based on the defocus amount calculated by the phase difference AF processing unit 19.
  • the electric control system of the digital camera includes an interpolation calculation and a gamma correction for the main memory 16, the memory control unit 15 connected to the main memory 16, and the captured image signal output from the A / D conversion circuit 7.
  • a digital signal processing unit 17 that performs calculation, RGB / YC conversion processing, and the like to generate captured image data
  • a phase difference AF processing unit 19 that calculates a defocus amount by a phase difference AF method
  • a detachable recording medium 21 are connected to the external memory control unit 20 and the display control unit 22 is connected to the display unit 23 mounted on the back of the camera.
  • the memory control unit 15, the digital signal processing unit 17, the phase difference AF processing unit 19, the external memory control unit 20, and the display control unit 22 are connected to each other by a control bus 24 and a data bus 25. Controlled by command.
  • FIG. 2 is a schematic plan view showing the overall configuration of the image sensor 5 mounted on the digital camera shown in FIG.
  • the imaging element 5 has a light receiving surface 50 on which a large number of pixels arranged in a two-dimensional manner are arranged in a row direction X and a column direction Y orthogonal to the row direction X.
  • nine AF areas 53 which are areas to be focused, are provided in the example of FIG.
  • the AF area 53 is an area including imaging pixels and phase difference detection pixels as pixels.
  • the imaging pixels are arranged on the light receiving surface 50 excluding the AF area 53.
  • the AF area 53 may be provided on the light receiving surface 50 without a gap.
  • FIG. 3 is a partially enlarged view of one AF area 53 shown in FIG.
  • each pixel 51 includes a photoelectric conversion unit such as a photodiode and a color filter formed above the photoelectric conversion unit.
  • a pixel 51 (also referred to as an R pixel 51) including a color filter (R filter) that transmits red light is marked with “R” and includes a color filter (G filter) that transmits green light.
  • the pixel 51 (also referred to as G pixel 51) is given a letter “G”
  • the pixel 51 (also referred to as B pixel 51) including a color filter (B filter) that transmits blue light is given a letter “B”. It is attached.
  • the color filter array is a Bayer array over the entire light receiving surface 50.
  • each G pixel 51 in an arbitrary pixel row among the pixel rows including the R pixel 51 and the G pixel 51, and the G pixel 51 of the same color closest to the G pixel 51 in the column direction Y. are the phase difference detection pixels 52.
  • one direction of the two-dimensional array is defined as a row direction X, and the other direction is defined as a column direction Y.
  • FIG. 4 is a diagram showing only the phase difference detection pixel 52 shown in FIG.
  • the phase difference detection pixel 52 includes two types of pixels, a phase difference detection pixel 52A and a phase difference detection pixel 52B.
  • the phase difference detection pixel 52A is a first signal detection unit that receives one of a pair of light beams that have passed through different portions of the pupil region of the imaging lens 1 and detects a signal corresponding to the amount of received light.
  • the phase difference detection pixel 52B is a second signal detection unit that receives the other of the pair of light beams and detects a signal corresponding to the amount of received light.
  • the plurality of pixels 51 other than the phase difference detection pixels 52A and 52B are imaging pixels, and the imaging pixels receive the pair of light beams that have passed through the imaging lens 1 and correspond to the amount of received light. Detects the detected signal.
  • a light shielding film is provided above the photoelectric conversion unit of each pixel 51, and an opening that defines a light receiving area of the photoelectric conversion unit is formed in the light shielding film.
  • the center of the opening of the imaging pixel 51 coincides with the center of the photoelectric conversion unit of the imaging pixel 51.
  • the center of the opening (outlined portion in FIG. 4) of the phase difference detection pixel 52A is eccentric to the right side with respect to the center of the photoelectric conversion unit of the phase difference detection pixel 52A.
  • the center of the opening (outlined portion in FIG. 4) of the phase difference detection pixel 52B is eccentric to the left with respect to the center of the photoelectric conversion unit of the phase difference detection pixel 52B.
  • the right direction here is one direction of the row direction X shown in FIG. 3, and the left direction is the other direction of the row direction X.
  • FIG. 5 is a diagram showing a cross-sectional configuration of the phase difference detection pixel 52A.
  • the opening c is eccentric to the right with respect to the photoelectric conversion unit (PD).
  • PD photoelectric conversion unit
  • the pixel group including the phase difference detection pixels 52A in an arbitrary row, and the phase difference detection pixels 52B arranged at the same distance in one direction with respect to the phase difference detection pixels 52A of the pixel group.
  • the phase difference in the row direction X in the image captured by each of these two pixel groups can be detected.
  • the imaging element 5 receives one of a pair of light beams that have passed through different parts of the pupil region of the imaging lens 1 and detects a signal corresponding to the amount of received light, and receives the other of the pair of light beams. Any configuration having a plurality of pairs with a signal detection unit that detects a signal corresponding to the amount of received light may be used, and the configuration is not limited to that shown in FIGS.
  • all the pixels included in the image sensor 5 are the imaging pixels 51, each of the imaging pixels 51 is divided into two, one division area is the phase difference detection pixel 52A, and the other division area is the position.
  • the phase difference detection pixel 52B may be used.
  • FIG. 6 is a diagram illustrating a configuration in which all pixels included in the image sensor 5 are set as the imaging pixels 51 and each imaging pixel 51 is divided into two.
  • the imaging pixel 51 given R in the imaging device 5 is divided into two, and the divided two are used as a phase difference detection pixel R ⁇ b> 1 and a phase difference detection pixel R ⁇ b> 2, respectively.
  • the imaging pixel 51 with G in the imaging element 5 is divided into two, and the two divided pixels are used as a phase difference detection pixel G1 and a phase difference detection pixel G2, respectively.
  • the imaging pixel 51 with B in the imaging device 5 is divided into two, and the two divided pixels are used as a phase difference detection pixel B1 and a phase difference detection pixel B2, respectively.
  • phase difference detection pixels R1, G1, B1 are each a first signal detection unit
  • the phase difference detection pixels R2, G2, B2 are each a second signal detection unit. Signals can be read independently from the first signal detector and the second signal detector. Then, by adding the signals of the first signal detection unit and the second signal detection unit, a normal imaging signal having no phase difference can be obtained. That is, in the configuration of FIG. 6, all the pixels can be used as both the phase difference detection pixel and the imaging pixel.
  • the phase difference AF processing unit 19 shown in FIG. 1 reads out from the phase difference detection pixel 52A and the phase difference detection pixel 52B in one AF area 53 selected from among the nine AF areas 53 by a user operation or the like. Using the detection signal group, a phase difference that is a relative positional shift amount between the two images formed by the pair of light beams is calculated.
  • the phase difference AF processing unit 19 determines the focus adjustment state of the imaging lens 1, here the amount away from the in-focus state and the direction away from the in-focus state, that is, the defocus amount. Ask.
  • the phase difference AF processing unit 19 sets the detection signal group data of the plurality of phase difference detection pixels 52A in the selected AF area 53 as A [1]... A [k], and this phase difference.
  • the data of the detection signal group of the phase difference detection pixel 52B that forms a pair with the detection pixel 52A is B [1]... B [k], and these two data are obtained by the following expression when shifted by “d”.
  • An area S [d] surrounded by two data waveforms is obtained.
  • the phase difference AF processing unit 19 obtains the value of d when the correlation value S [d] is minimum as the phase difference, and calculates the defocus amount from this phase difference.
  • FIG. 7 is a diagram for explaining the relationship between the phase difference and the defocus amount.
  • light rays that enter the vicinity of a point that intersects the optical axis on the light receiving surface of the image sensor 5 are indicated by broken lines.
  • the incident angle ⁇ of light incident on the image sensor 5 through the lens device 40 is determined by the aperture amount of the diaphragm 2.
  • the angle formed between the upper ray passing through the upper end of the aperture area of the aperture 2 and the principal ray out of the rays passing through the aperture 2 is the incident angle ⁇ 1
  • the lower end of the aperture region of the aperture 2 An angle formed by the lower ray passing through the principal ray and the principal ray is defined as an incident angle ⁇ 2.
  • the distance between the intersection of the lower light beam and the light receiving surface of the image sensor 5 and the intersection of the main light beam and the light receiving surface of the image sensor 5 is a1
  • the distance of the intersection of the image sensor 5 and the light receiving surface is a2.
  • the incident angle of light incident on the image sensor 5 will be described assuming that the sign of the incident angle formed by the upper light beam and the chief ray is positive, and the sign of the incident angle formed by the lower light beam and the main light beam is negative.
  • the defocus amount Dff is a value indicating the distance between the light receiving surface of the image sensor 5 and the imaging position of the subject image by the imaging optical system.
  • the phase difference calculated by the phase difference AF processing unit 19 corresponds to the sum of the distance a1 and the distance a2. That is, if the phase difference and the incident angles ⁇ 1 and ⁇ 2 are known, the defocus amount Dff can be obtained by the equation (4). As can be seen from Equation (4), the incident angles ⁇ 1 and ⁇ 2 are parameters related to the ratio between the phase difference and the defocus amount Dff.
  • the phase difference AF processing unit 19 calculates the incident angle ⁇ 1 and the incident angle ⁇ 2 in addition to the phase difference in order to calculate the defocus amount Dff.
  • a method of calculating the incident angle ⁇ 1 and the incident angle ⁇ 2 will be described.
  • the incident angle ⁇ 1 and the incident angle ⁇ 2 shown in FIG. 7 are fixed values when the aperture amount (F value) of the diaphragm 2 is determined.
  • the phase difference detection pixels 52A and 52B used for obtaining the phase difference have a characteristic (incidence angle sensitivity characteristic) in which the light reception sensitivity changes depending on the incident angle of light.
  • the lens device 40 is provided with an APD filter 3. For this reason, the incident angle sensitivity characteristics of the phase difference detection pixels 52A and 52B are combined with the transmittance characteristics of the APD filter 3 to be more complicated.
  • the incident angle of light incident on any pair of phase difference detection pixels varies variously within an incident angle range indicated by incident angles ⁇ 1 to incident angles ⁇ 2.
  • the phase difference AF processing unit 19 includes information on an incident angle range determined by the F value of the diaphragm 2 (incident angles ⁇ 1 and ⁇ 2 in FIG. 7), and a light receiving sensitivity distribution for each incident angle of the phase difference detection pixels 52A and 52B. And information on the transmittance distribution of the APD filter 3 are acquired. Then, based on the three pieces of acquired information, the phase difference AF processing unit 19 substitutes a value (referred to as ⁇ 1A) for “ ⁇ 1” and a value assigned to “ ⁇ 2” (referred to as ⁇ 2A) in Equation (4). And calculate. In this way, the accurate defocus amount can be calculated.
  • ⁇ 1A a value assigned to “ ⁇ 2”
  • FIG. 8 is a diagram showing the light receiving sensitivity distribution of the phase difference detection pixel 52A and the phase difference detection pixel 52B.
  • reference numeral IA indicates the light reception sensitivity distribution of the phase difference detection pixel 52A
  • reference numeral IB indicates the light reception sensitivity distribution of the phase difference detection pixel 52B.
  • the horizontal axis indicates the incident angle ⁇
  • the vertical axis indicates the pixel sensitivity I.
  • the light receiving sensitivity distribution shown in FIG. 8 is determined by the structure of the phase difference detection pixels 52A and 52B, is measured at the manufacturing stage of the digital camera, and is stored in the main memory 16 of the digital camera.
  • FIG. 9 is a diagram showing the transmittance distribution of the APD filter 3.
  • the horizontal axis in FIG. 9 indicates the position in the X direction, and the origin O intersects the optical axis.
  • the vertical axis represents the transmittance T.
  • the transmittance T of the APD filter 3 has the highest transmittance at a position intersecting the optical axis, and has a characteristic that the transmittance decreases as the distance from the optical axis increases.
  • Information on the transmittance distribution shown in FIG. 9 is stored in the internal memory of the lens device 40.
  • FIG. 9 shows the positions x1 and x2.
  • the light incident on the image sensor 5 is light in the incident angle range ⁇ 1 to ⁇ 2 in FIG.
  • the light in this range is attenuated by the transmittance T distributed in the range of x1 to x2 in FIG.
  • the light reception sensitivity distribution of the phase difference detection pixels 52A and 52B in a state where the lens device 40 on which the APD filter 3 is mounted is attached to the light reception sensitivity for each incident angle in the range from ⁇ 1 to ⁇ 2 in FIG. It is obtained by multiplying the transmittance at the portion through which light of each incident angle in the range from x1 to x2 in FIG. 9 passes.
  • the data shown in FIG. 10 can be obtained by multiplying the sensitivity I and the transmittance T corresponding to the same incident angle ⁇ . .
  • FIG. 10 is a diagram showing the light reception sensitivity distribution of the phase difference detection pixels 52A and 52B in a state in which the lens device 40 on which the APD filter 3 is mounted is mounted.
  • symbol IAa represents the light reception sensitivity distribution of the phase difference detection pixel 52A in the incident angle range ⁇ 1 to ⁇ 2
  • symbol IBa represents the light reception sensitivity distribution of the phase difference detection pixel 52B in the incident angle range ⁇ 1 to ⁇ 2. Show.
  • the phase difference AF processing unit 19 calculates the incident angle ⁇ A that becomes the sensitivity centroid A1 in the light reception sensitivity distribution IAa, and calculates the incident angle ⁇ B that becomes the sensitivity centroid b1 in the light reception sensitivity distribution IB. .
  • phase difference AF processing unit 19 calculates the incident angle ⁇ A and the incident angle ⁇ B by calculating the following formulas (5) and (6).
  • the integration range in the equations (5) and (6) is the incident angle range ( ⁇ 1 to ⁇ 2).
  • IA ( ⁇ ) represents the sensitivity of the phase difference detection pixel 52A at the incident angle ⁇ .
  • IB ( ⁇ ) indicates the sensitivity of the phase difference detection pixel 52B at the incident angle ⁇ .
  • T (x) indicates the transmittance at a distance x from the intersection with the optical axis in the X direction of the APD filter 3.
  • the multiplication value of the incident angle ⁇ , the light receiving sensitivity IA ( ⁇ ), and the transmittance T (x) is integrated by the value of ⁇ , and this integrated value is divided by the integrated value of ⁇ .
  • the incident angle ⁇ A that becomes the sensitivity center of gravity is obtained.
  • the multiplication value of the incident angle ⁇ , the light receiving sensitivity IB ( ⁇ ), and the transmittance T (x) is integrated by the value of ⁇ , and this integrated value is calculated by the integrated value of ⁇ .
  • the incident angle ⁇ B that becomes the sensitivity center of gravity is obtained.
  • the phase difference AF processing unit 19 substitutes ⁇ A for ⁇ 1 in equation (4), substitutes ⁇ B for ⁇ 2 in equation (4), and obtained the phase difference obtained by correlation calculation in (a1 + a2) of equation (4). Is substituted to calculate the defocus amount Df.
  • the phase difference AF processing unit 19 calculates ⁇ A and ⁇ B with T (x) in Equations (5) and (6) as 1.
  • FIG. 11 is a flowchart for explaining the AF operation of the digital camera shown in FIG.
  • the system control unit 11 acquires lens information from the lens device 40 and stores it in the main memory 16 (step S1).
  • the lens information acquired here includes information on the incident angle range for each aperture value by the imaging optical system, information on the transmittance distribution of the APD filter 3, and position information in the optical axis direction of the APD filter 3 (the lens device 40 and the digital information). Distance from the connection with the camera body to the APD filter 3).
  • step S2 When the operation unit 14 is operated and an AF instruction is given (step S2: YES), the phase difference AF processing unit 19 acquires information on the incident angle range corresponding to the F value being set from the main memory 16. Further, the phase difference AF processing unit 19 acquires information on the transmittance distribution of the APD filter 3 from the main memory 16. Further, the phase difference AF processing unit 19 acquires information on the light reception sensitivity distribution of the phase difference detection pixels 52 ⁇ / b> A and 52 ⁇ / b> B of the image sensor 5 from the main memory 16.
  • phase difference AF processing unit 19 acquires, from the main memory 16, position information of the APD filter 3 in the optical axis direction and distance information from the connection unit between the lens device 40 and the digital camera body to the light receiving surface of the image sensor 5. To do. This distance information is stored in the main memory 16 when the digital camera is manufactured.
  • the phase difference AF processing unit 19 calculates the APD filter from the position information in the optical axis direction of the APD filter 3 and the distance information from the connection unit between the lens device 40 and the digital camera body to the light receiving surface of the image sensor 5. 3 and the light receiving surface of the image sensor 5 are obtained. Specifically, a value obtained by adding the position information and the distance information is calculated as the distance D.
  • the phase difference AF processing unit 19 uses the obtained distance D, the incident angle range corresponding to the set F value acquired from the main memory 16, and the transmittance distribution of the APD filter 3 acquired from the main memory 16.
  • the incident angles ⁇ A and ⁇ B are calculated by the calculations of (5) and (6) (step S3).
  • the phase difference AF processing unit 19 detects a group of detection signals of the plurality of phase difference detection pixels 52A in the selected AF area 53, and the phase difference detection pixels forming a pair with the phase difference detection pixels 52A.
  • a correlation calculation with the detection signal group 52B is performed to calculate a phase difference (step S4).
  • the phase difference AF processing unit 19 calculates the defocus amount Dff by the calculation of Expression (4) using the incident angles ⁇ A and ⁇ B calculated in step S3 and the phase difference calculated in step S4 ( Step S5).
  • step S6 the system control unit 11 performs focus control for moving the focus lens to the focus position according to the defocus amount Dff (step S6). After step S6, the process proceeds to step S2.
  • the phase difference AF processing unit 19 restarts the process from step S1 when the lens device 40 is replaced.
  • the phase difference AF processing unit 19 determines that the APD filter 3 is optical when step S2 is YES. It is determined whether or not it is inserted on the axis. Then, when the APD filter 3 is inserted on the optical axis, the processes after step S3 are performed. On the other hand, when the APD filter 3 is not inserted on the optical axis, in Step S3, the calculation is performed by calculating T (x) of Equations (5) and (6) as 1, and calculating the incident angles ⁇ A and ⁇ B. To do.
  • the defocus amount can be calculated in consideration of the transmittance distribution of the APD filter 3. . Therefore, even when the lens device 40 including the APD filter 3 is attached, the subject can be focused with high accuracy.
  • the lens information may be configured to acquire identification information indicating the lens type from the lens device 40 and obtain lens information for each identification information stored in advance on the digital camera body side.
  • the defocus amount Dff is calculated by calculating the incident angle ⁇ A that is the sensitivity centroid in the light reception sensitivity distribution IAa and the incident angle ⁇ B that is the sensitivity centroid in the light reception sensitivity distribution IBa.
  • An incident angle ⁇ AA that is the center of the sensitivity area in the distribution IAa and an incident angle ⁇ BB that is the center of the sensitivity area in the light receiving sensitivity distribution IBa are obtained, and the defocus amount Dff is assigned by substituting the incident angle ⁇ AA and the incident angle ⁇ BB into Equation (4). May be calculated.
  • Patent Document 1 may be used for obtaining the sensitivity area center position. That is, in FIG. 12, the incident angle at the intersection of the horizontal axis and the line parallel to the vertical axis that equally halves the area of the region surrounded by the light receiving sensitivity distribution IBa and the horizontal axis is ⁇ BB. Further, the incident angle at the intersection of the horizontal axis and the line parallel to the vertical axis that equally halves the area of the region surrounded by the light receiving sensitivity distribution IAa and the horizontal axis is ⁇ AA.
  • one incident angle ⁇ A, ⁇ B is calculated in one AF area 53, but in this modification, the AF area 53 is divided into a plurality of areas, and the incident angles ⁇ A, ⁇ B are calculated for each divided region. An average value of the calculated incident angles ⁇ A ( ⁇ B) for each divided region is calculated and set as incident angles ⁇ A and ⁇ B corresponding to the AF area 53.
  • the subject image formed on the light receiving surface of the image pickup device 5 is not necessarily formed at the center of the image pickup device 5, but is located at a high position, a low position, a right side position, a left side position, etc. from the light receiving surface center. It exists in arbitrary coordinate position. Therefore, the accuracy can be further improved by dividing the AF area 53 into a plurality of divided areas and calculating the incident angles ⁇ A and ⁇ B for each divided area.
  • the lens device 40 includes a single APD filter 3.
  • the lens device 40 may include a plurality of APD filters.
  • the light transmission range in the transmittance distribution shown in FIG. 9 is obtained for each of the plurality of APD filters, and the transmittance distribution within this light transmission range is used for the calculation of the incident angles ⁇ A and ⁇ B.
  • the incident angles ⁇ A and ⁇ B are calculated by changing the equations (5) and (6) to the following equations (7) and (8). .
  • ⁇ A ⁇ ⁇ ⁇ IA ( ⁇ ) ⁇ T1 (x) ⁇ T2 (x) ⁇ d ⁇ / ⁇ d ⁇ (7)
  • ⁇ B ⁇ ⁇ ⁇ IB ( ⁇ ) ⁇ T1 (x) ⁇ T2 (x) ⁇ d ⁇ / ⁇ d ⁇ (8)
  • T1 (x) indicates the transmittance at one X-direction position x3 of the two APD filters.
  • T2 (x) indicates the transmittance at the other X-direction position x4 of the two APD filters.
  • the X direction position x3 and the X direction position x4 are positions on the APD filter where light having an arbitrary incident angle within an incident angle range incident on the image sensor 5 and the APD filter intersect.
  • T1 (x) can be converted into angle information using information on the distance between one APD filter and the light receiving surface of the image sensor 5. Further, T2 (x) can be converted into angle information using information on the distance between the other APD filter and the light receiving surface of the image sensor 5.
  • a digital camera has been taken as an example of the imaging device, but an embodiment of a smartphone with a camera as the imaging device will be described below.
  • FIG. 13 shows an appearance of a smartphone 200 that is an embodiment of the photographing apparatus of the present invention.
  • a smartphone 200 illustrated in FIG. 13 includes a flat housing 201, and a display input in which a display panel 202 as a display unit and an operation panel 203 as an input unit are integrated on one surface of the housing 201. Part 204 is provided.
  • Such a housing 201 includes a speaker 205, a microphone 206, an operation unit 207, and a camera unit 208.
  • the configuration of the housing 201 is not limited thereto, and for example, a configuration in which the display unit and the input unit are independent can be employed, or a configuration having a folding structure and a slide mechanism can be employed.
  • FIG. 14 is a block diagram showing a configuration of the smartphone 200 shown in FIG.
  • the main components of the smartphone include a wireless communication unit 210, a display input unit 204, a call unit 211, an operation unit 207, a camera unit 208, a storage unit 212, and an external input / output unit. 213, a GPS (Global Positioning System) receiving unit 214, a motion sensor unit 215, a power supply unit 216, and a main control unit 220.
  • a wireless communication function for performing mobile wireless communication via a base station device BS (not shown) and a mobile communication network NW (not shown) is provided.
  • the wireless communication unit 210 performs wireless communication with the base station apparatus BS accommodated in the mobile communication network NW according to an instruction from the main control unit 220. Using this wireless communication, transmission and reception of various file data such as audio data and image data, e-mail data, and reception of Web data and streaming data are performed.
  • the display input unit 204 displays images (still images and moving images), character information, and the like, visually transmits information to the user under the control of the main control unit 220, and detects user operations on the displayed information.
  • a so-called touch panel which includes a display panel 202 and an operation panel 203.
  • the display panel 202 uses an LCD (Liquid Crystal Display), an OELD (Organic Electro-Luminescence Display), or the like as a display device.
  • LCD Liquid Crystal Display
  • OELD Organic Electro-Luminescence Display
  • the operation panel 203 is a device that is placed so that an image displayed on the display surface of the display panel 202 is visible and detects one or more coordinates operated by a user's finger or stylus.
  • a detection signal generated due to the operation is output to the main control unit 220.
  • the main control unit 220 detects an operation position (coordinates) on the display panel 202 based on the received detection signal.
  • the display panel 202 and the operation panel 203 of the smartphone 200 exemplified as an embodiment of the photographing apparatus of the present invention integrally constitute a display input unit 204.
  • the arrangement 203 covers the display panel 202 completely.
  • the operation panel 203 may have a function of detecting a user operation even in an area outside the display panel 202.
  • the operation panel 203 includes a detection area (hereinafter referred to as a display area) for an overlapping portion that overlaps the display panel 202 and a detection area (hereinafter, a non-display area) for an outer edge portion that does not overlap the other display panel 202. May be included).
  • the operation panel 203 may include two sensitive areas of the outer edge portion and the other inner portion. Further, the width of the outer edge portion is appropriately designed according to the size of the housing 201 and the like.
  • the position detection method employed in the operation panel 203 include a matrix switch method, a resistance film method, a surface acoustic wave method, an infrared method, an electromagnetic induction method, a capacitance method, and the like. You can also
  • the call unit 211 includes a speaker 205 and a microphone 206, converts user's voice input through the microphone 206 into voice data that can be processed by the main control unit 220, and outputs the voice data to the main control unit 220. 210 or the audio data received by the external input / output unit 213 is decoded and output from the speaker 205.
  • the speaker 205 can be mounted on the same surface as the surface on which the display input unit 204 is provided, and the microphone 206 can be mounted on the side surface of the housing 201.
  • the operation unit 207 is a hardware key using a key switch or the like, and receives an instruction from the user.
  • the operation unit 207 is mounted on the side surface of the housing 201 of the smartphone 200 and is turned on when pressed with a finger or the like, and turned off when the finger is released with a restoring force such as a spring. It is a push button type switch.
  • the storage unit 212 includes a control program and control data of the main control unit 220, application software, address data that associates the name and telephone number of a communication partner, transmitted / received e-mail data, Web data downloaded by Web browsing, The downloaded content data is stored, and streaming data and the like are temporarily stored.
  • the storage unit 212 includes an internal storage unit 217 built in the smartphone and an external storage unit 218 having a removable external memory slot.
  • Each of the internal storage unit 217 and the external storage unit 218 constituting the storage unit 212 includes a flash memory type (hard memory type), a hard disk type (hard disk type), a multimedia card micro type (multimedia card micro type), This is realized using a storage medium such as a card type memory (for example, MicroSD (registered trademark) memory), a RAM (Random Access Memory), a ROM (Read Only Memory), or the like.
  • a flash memory type hard memory type
  • hard disk type hard disk type
  • multimedia card micro type multimedia card micro type
  • a storage medium such as a card type memory (for example, MicroSD (registered trademark) memory), a RAM (Random Access Memory), a ROM (Read Only Memory), or the like.
  • the external input / output unit 213 serves as an interface with all external devices connected to the smartphone 200, and communicates with other external devices (for example, universal serial bus (USB), IEEE 1394, etc.) or a network.
  • external devices for example, universal serial bus (USB), IEEE 1394, etc.
  • a network for example, Internet, wireless LAN, Bluetooth (registered trademark), RFID (Radio Frequency Identification), Infrared Data Association (IrDA) (registered trademark), UWB (Ultra Wideband) (registered trademark) ZigBee) (registered trademark, etc.) for direct or indirect connection.
  • an external device connected to the smartphone 200 for example, a wired / wireless headset, a wired / wireless external charger, a wired / wireless data port, a memory card (Memory card) connected via a card socket, or a SIM (Subscriber).
  • Identity Module Card / UIM (User Identity Module Card) card external audio / video equipment connected via audio / video I / O (Input / Output) terminal, external audio / video equipment connected wirelessly, yes / no
  • the external input / output unit 213 transmits data received from such an external device to each component inside the smartphone 200, or allows the data inside the smartphone 200 to be transmitted to the external device. Can do.
  • the GPS receiving unit 214 receives GPS signals transmitted from the GPS satellites ST1 to STn in accordance with instructions from the main control unit 220, executes a positioning calculation process based on the received plurality of GPS signals, A position consisting of longitude and altitude is detected.
  • the GPS reception unit 214 can acquire position information from the wireless communication unit 210 or the external input / output unit 213 (for example, a wireless LAN), the GPS reception unit 214 can also detect the position using the position information.
  • the motion sensor unit 215 includes, for example, a three-axis acceleration sensor, and detects the physical movement of the smartphone 200 in accordance with an instruction from the main control unit 220. By detecting the physical movement of the smartphone 200, the moving direction and acceleration of the smartphone 200 are detected. The detection result is output to the main control unit 220.
  • the power supply unit 216 supplies power stored in a battery (not shown) to each unit of the smartphone 200 in accordance with an instruction from the main control unit 220.
  • the main control unit 220 includes a microprocessor, operates according to a control program and control data stored in the storage unit 212, and controls each unit of the smartphone 200 in an integrated manner.
  • the main control unit 220 includes a mobile communication control function that controls each unit of the communication system and an application processing function in order to perform voice communication and data communication through the wireless communication unit 210.
  • the application processing function is realized by the main control unit 220 operating according to the application software stored in the storage unit 212.
  • Examples of the application processing function include an infrared communication function for controlling the external input / output unit 213 to perform data communication with the opposite device, an e-mail function for transmitting / receiving e-mails, and a web browsing function for browsing web pages. .
  • the main control unit 220 has an image processing function such as displaying video on the display input unit 204 based on image data (still image or moving image data) such as received data or downloaded streaming data.
  • the image processing function is a function in which the main control unit 220 decodes the image data, performs image processing on the decoding result, and displays an image on the display input unit 204.
  • the main control unit 220 executes display control for the display panel 202 and operation detection control for detecting a user operation through the operation unit 207 and the operation panel 203.
  • the main control unit 220 displays an icon for starting application software, a software key such as a scroll bar, or a window for creating an e-mail.
  • a software key such as a scroll bar, or a window for creating an e-mail.
  • the scroll bar refers to a software key for accepting an instruction to move the display portion of a large image that does not fit in the display area of the display panel 202.
  • the main control unit 220 detects a user operation through the operation unit 207 or accepts an operation on the icon or an input of a character string in the input field of the window through the operation panel 203. Or a display image scroll request through a scroll bar.
  • the main control unit 220 causes the operation position with respect to the operation panel 203 to overlap with the display panel 202 (display area) or other outer edge part (non-display area) that does not overlap with the display panel 202.
  • a touch panel control function for controlling the sensitive area of the operation panel 203 and the display position of the software key.
  • the main control unit 220 can also detect a gesture operation on the operation panel 203 and execute a preset function in accordance with the detected gesture operation.
  • Gesture operation is not a conventional simple touch operation, but an operation that draws a trajectory with a finger or the like, designates a plurality of positions at the same time, or combines these to draw a trajectory for at least one of a plurality of positions. means.
  • the camera unit 208 includes configurations other than the external memory control unit 20, the recording medium 21, the display control unit 22, the display unit 23, and the operation unit 14 in the digital camera shown in FIG.
  • the captured image data generated by the camera unit 208 can be recorded in the storage unit 212 or output through the external input / output unit 213 or the wireless communication unit 210.
  • the camera unit 208 is mounted on the same surface as the display input unit 204, but the mounting position of the camera unit 208 is not limited thereto, and may be mounted on the back surface of the display input unit 204. .
  • the camera unit 208 can be used for various functions of the smartphone 200.
  • an image acquired by the camera unit 208 can be displayed on the display panel 202, or the image of the camera unit 208 can be used as one of operation inputs of the operation panel 203.
  • the position can also be detected with reference to an image from the camera unit 208.
  • the optical axis direction of the camera unit 208 of the smartphone 200 is determined without using the triaxial acceleration sensor or in combination with the triaxial acceleration sensor. It is also possible to determine the current usage environment.
  • the image from the camera unit 208 can also be used in the application software.
  • the position information acquired by the GPS receiver 214 to the image data of the still image or the moving image, the voice information acquired by the microphone 206 (the text information may be converted into voice information by the main control unit or the like), Posture information and the like acquired by the motion sensor unit 215 can be added and recorded in the storage unit 212, or can be output through the external input / output unit 213 and the wireless communication unit 210.
  • the smartphone 200 configured as described above also provides an accessory to which the lens device 40 including the APD filter 3 can be attached.
  • the imaging device 5 is used as the imaging device of the camera unit 208. By performing the illustrated processing, the subject can be focused with high accuracy.
  • the disclosed imaging device images a subject through an imaging optical system including a focus lens, receives one of a pair of light beams that have passed through different parts of the pupil region of the imaging optical system, and detects a signal corresponding to the amount of received light
  • An image sensor including a pair of a first signal detector and a second signal detector that receives the other of the pair of light beams and detects a signal according to the amount of received light, and an optical axis on the optical axis of the imaging optical system.
  • each pair A defocus amount calculating unit that calculates a parameter related to a ratio between a phase difference and a defocus amount of the detection signal detected by the defocus amount, and calculates the defocus amount using the calculated parameter and the phase difference; and the defocus amount A focusing control unit that performs focusing control to move the focus lens in the optical axis direction according to the defocus amount calculated by the calculation unit.
  • the defocus amount calculation unit calculates the transmittance for light at each incident angle in a region through which light in the incident angle range of the optical filter passes, using the transmittance distribution.
  • the sensitivity centroid or the sensitivity area center Is calculated as the parameter.
  • the defocus amount calculation unit is based on a relationship between a distance between the light receiving surface of the imaging element and the optical filter, and an incident angle of each light in the incident angle range incident on the optical filter. Based on the position in the phase difference detection direction where each light is incident on the optical filter and the transmittance distribution, which is determined, with respect to the light at each incident angle in the region through which the light in the incident angle range of the optical filter passes. The transmittance is calculated.
  • the imaging optical system can be replaced, and the defocus amount calculation unit acquires information on the incident angle range and the transmittance distribution from the imaging optical system.
  • a subject is imaged through an imaging optical system including a focus lens, and one of a pair of light beams that have passed through different parts of the pupil region of the imaging optical system is received and the amount of received light is determined.
  • the pair passes through the imaging optical system.
  • An incident angle range of light incident on the optical filter, a transmittance distribution of the optical filter, and a light receiving sensitivity distribution indicating a light receiving sensitivity for each incident angle with respect to each incident light of the pair are acquired, and the acquired incident angle range is acquired.
  • a parameter related to the ratio between the phase difference of the detection signal detected by each of the pair and the defocus amount is calculated, and the calculated parameter and the phase difference are used.
  • the transmittance distribution is used to transmit light of each incident angle in a region through which light in the incident angle range of the optical filter passes.
  • the light receiving sensitivity distribution obtained by multiplying the light receiving sensitivity for each incident angle of the portion corresponding to the incident angle range of the light receiving sensitivity distribution by the calculated transmittance for each incident angle in the light receiving sensitivity distribution, Alternatively, the incident angle that is the center of the sensitivity area is calculated as the parameter.
  • the distance between the light receiving surface of the imaging element and the optical filter, and each light in the incident angle range incident on the optical filter In the region where light in the incident angle range of the optical filter passes based on the position in the phase difference detection direction where each light enters in the optical filter and the transmittance distribution, which is determined by the relationship of the incident angle.
  • the transmittance for light at each incident angle is calculated.
  • the imaging apparatus can replace the imaging optical system.
  • the defocus amount calculation step the information on the incident angle range and the transmittance distribution is captured. Obtained from the optical system.
  • the present invention is particularly convenient and effective when applied to a digital camera or the like.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Focusing (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Blocking Light For Cameras (AREA)

Abstract

　ＡＰＤフィルタを含むレンズ装置を通して被写体を撮像する位相差検出用画素のペアを含む撮像素子を備えるデジタルカメラの位相差ＡＦ処理部は、レンズ装置を通って位相差検出用画素のペアに入射される光の入射角範囲と、ＡＰＤフィルタにおいて入射角範囲の光が通過する領域における透過率と、位相差検出用画素の各々の光の入射角毎の受光感度を示す受光感度分布とに基づいて、位相差検出用画素の各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、このパラメータと位相差とを用いてデフォーカス量を算出する。

Description

撮像装置及び合焦制御方法
　本発明は、撮像装置及び合焦制御方法に関する。
　近年、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサ、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等の固体撮像素子の高解像度化に伴い、デジタルスチルカメラ、デジタルビデオカメラ、スマートフォン等の携帯電話機、ＰＤＡ（Ｐｅｒｓｏｎａｌ　Ｄｉｇｉｔａｌ　Ａｓｓｉｓｔａｎｔ，携帯情報端末）等の撮像機能を有する情報機器の需要が急増している。なお、以上のような撮像機能を有する情報機器を撮像装置と称する。
　これら撮像装置では、主要な被写体までの距離を検出してその被写体に焦点を合わせる合焦制御方法として位相差ＡＦ（Ａｕｔｏ　Ｆｏｃｕｓ、自動合焦）方式を採用しているものがある。
　位相差ＡＦ方式を採用する撮像装置において、撮像装置がレンズ交換式の場合に、撮像レンズ毎のデフォーカス量の補正用データをより少ない容量で済ませ、如何なる種類の撮像レンズに交換されても良好な位相差ＡＦ方式による合焦制御を実行できるようにした技術が、特許文献１に開示されている。
　また、ピントの合っていない画像、いわゆるボケ像を良好にするための光学フィルタとしてアポダイゼイションフィルタ（以下、ＡＰＤフィルタという）が知られている。ＡＰＤフィルタを用いるとボケ像の輪郭をなだらかにすることができる。
　特許文献２及び特許文献３には、ＡＰＤフィルタを撮像レンズの光軸上に挿脱可能にした撮像装置が記載されている。
国際公開ＷＯ２０１３／０４７１１１号公報 日本国特開平１０－２６８３８２号公報 日本国特開２０１１－２２１１２０号公報
　特許文献１では、撮像レンズの情報と、位相差検出用画素のペアに対する入射光の入射角毎の受光感度である受光感度分布とに基づいて、デフォーカス量と位相差との比に関するパラメータを求め、このパラメータを用いてデフォーカス量を算出している。
　しかしながら、撮像光学系がＡＰＤフィルタを含む場合、撮像素子の受光面に入射する光線は部分的にＡＰＤフィルタによって遮られる。このため、位相差検出用画素のペアにおける受光感度は、光線が遮られる分だけ低くなる。したがって、実態とは異なる受光感度分布に基づきパラメータを求めることとなり、算出されたデフォーカス量が実際の値とは異なる値となる可能性がある。
　特許文献２及び特許文献３ではＡＰＤフィルタを備える撮像装置が開示されているが、ＡＦへの影響に関する開示はされていない。
　本発明は、上記事情に鑑みてなされたものであり、撮像光学系がＡＰＤフィルタを含む場合でも、高精度に被写体に合焦させることができる撮像装置及び合焦制御方法を提供することを目的とする。
　本発明の撮像装置は、フォーカスレンズを含む撮像光学系を通して被写体を撮像し、上記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と上記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子と、上記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、上記撮像光学系を通って上記ペアに入射される光の入射角範囲と、上記光学フィルタの透過率分布と、上記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した上記入射角範囲、上記透過率分布、及び上記受光感度分布に基づいて、上記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した上記パラメータと上記位相差を用いてデフォーカス量を算出するデフォーカス量算出部と、上記デフォーカス量算出部により算出されたデフォーカス量にしたがって上記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備えるものである。
　本発明の合焦制御方法は、フォーカスレンズを含む撮像光学系を通して被写体を撮像し、上記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と上記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子を備える撮像装置における合焦制御方法であって、上記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、上記撮像光学系を通って上記ペアに入射される光の入射角範囲と、上記光学フィルタの透過率分布と、上記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した上記入射角範囲、上記透過率分布、及び上記受光感度分布に基づいて、上記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した上記パラメータと上記位相差を用いてデフォーカス量を算出するデフォーカス量算出ステップと、上記デフォーカス量算出ステップで算出したデフォーカス量にしたがって上記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備えるものである。
　本発明によれば、撮像光学系がＡＰＤフィルタを含む場合でも、高精度に被写体に合焦させることができる撮像装置及び合焦制御方法を提供することができる。
本発明の一実施形態を説明するための撮像装置の一例としてのデジタルカメラの概略構成を示す図。 図１に示すデジタルカメラに搭載される撮像素子５の全体構成を示す平面模式図。 図２に示す１つのＡＦエリア５３の部分拡大図。 図３に示す位相差検出用画素５２のみを示した図。 位相差検出用画素５２Ａの断面構成を示す図。 撮像素子５に含まれる全ての画素を撮像用画素５１とし、各撮像用画素５１を２つに分割した構成を示す図。 位相差とデフォーカス量と入射角との関係を説明するための図。 位相差検出用画素５２Ａ，５２Ｂの受光感度分布を示す図。 ＡＰＤフィルタ３の透過率分布を示す図。 ＡＰＤフィルタ３が光軸上にある状態での位相差検出用画素５２Ａ，５２Ｂの受光感度分布を示す図。 図１に示すデジタルカメラの動作を説明するためのフローチャート。 デフォーカス量の算出方法の変形例を説明するための図。 撮像装置としてのスマートフォンの構成を示す図。 図１３に示すスマートフォンのブロック図。
　以下、本発明の実施形態について図面を参照して説明する。
　図１は、本発明の一実施形態を説明するための撮像装置の一例としてのデジタルカメラの概略構成を示す図である。
　図１に示すデジタルカメラは、焦点調節のためのフォーカスレンズ及びズーム倍率変更のためのズームレンズを含む撮像レンズ１と、絞り２と、ＡＰＤフィルタ３と、レンズ制御部４と、レンズ駆動部８と、絞り駆動部９と、を有するレンズ装置４０を備える。本実施形態において、レンズ装置４０はデジタルカメラ本体に着脱可能なものとして説明するが、デジタルカメラ本体に固定されるものであってもよい。
　レンズ装置４０は撮像光学系を構成し、フォーカスレンズを少なくとも含む。フォーカスレンズとは、光軸方向に移動することで、撮像光学系の焦点位置を調節するレンズを言う。複数枚のレンズからなる撮像レンズが全群繰り出しのレンズの場合は、全群全体がフォーカスレンズとなる。
　ＡＰＤフィルタ３は、撮像光学系の光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタである。デジタルカメラ本体には、レンズ装置４０として、図１に例示したようにＡＰＤフィルタ３が光軸上に固定配置された機種と、ＡＰＤフィルタ３を光軸上に挿入した状態とＡＰＤフィルタ３を光軸上から退避させた状態とを切り替え可能に構成された機種とのいずれも装着可能である。また、デジタルカメラ本体には、ＡＰＤフィルタ３を搭載しないレンズ装置４０も装着可能である。
　レンズ装置４０のレンズ制御部４は、デジタルカメラ本体のシステム制御部１１と有線又は無線によって通信可能に構成される。レンズ制御部４は、システム制御部１１からの指令にしたがって、レンズ駆動部８を介して撮像レンズ１に含まれるフォーカスレンズを駆動したり、絞り駆動部９を介して絞り２を駆動したりする。
　レンズ制御部４は、レンズ装置４０がＡＰＤフィルタ３を光軸上に挿脱可能な機種の場合には、システム制御部１１からの指令にしたがって、ＡＰＤフィルタ３を光軸上に挿入したり、光軸上から退避させたりする制御も行う。
　レンズ制御部４は、メモリを内蔵しており、このメモリには、レンズ装置４０におけるＡＰＤフィルタ３の有無を示す情報と、ＡＰＤフィルタ３搭載レンズ装置の場合にはそのＡＰＤフィルタ３の透過率分布の情報と、撮像レンズ１の設計情報である撮像レンズ情報と、が記憶されている。
　レンズ制御部４は、システム制御部１１と無線又は有線によって通信可能であり、システム制御部１１からの要求に応じて、メモリに記憶されている各種情報をシステム制御部１１に送信する。レンズ装置４０がＡＰＤフィルタ３を光軸上に挿脱可能な機種の場合、レンズ制御部４は、光軸上にＡＰＤフィルタ３が挿入されているか否かの情報もシステム制御部１１に送信する。
　デジタルカメラ本体は、撮像光学系を通して被写体を撮像するＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）型やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型等の撮像素子５と、撮像素子５の出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６と、アナログ信号処理部６から出力されるアナログ信号をデジタル信号に変換するＡ／Ｄ変換回路７とを備える。アナログ信号処理部６及びＡ／Ｄ変換回路７は、システム制御部１１によって制御される。アナログ信号処理部６及びＡ／Ｄ変換回路７は撮像素子５に内蔵されることもある。
　デジタルカメラの電気制御系全体を統括制御するシステム制御部１１は、撮像素子駆動部１０を介して撮像素子５を駆動し、レンズ装置４０を通して撮像した被写体像を撮像画像信号として出力させる。システム制御部１１には、操作部１４を通してユーザからの指示信号が入力される。
　システム制御部１１は、位相差ＡＦ処理部１９によって算出されたデフォーカス量に基づいてフォーカスレンズを合焦位置に移動させる合焦制御を行う合焦制御部として機能する。
　更に、このデジタルカメラの電気制御系は、メインメモリ１６と、メインメモリ１６に接続されたメモリ制御部１５と、Ａ／Ｄ変換回路７から出力される撮像画像信号に対し、補間演算、ガンマ補正演算、及びＲＧＢ／ＹＣ変換処理等を行って撮像画像データを生成するデジタル信号処理部１７と、位相差ＡＦ方式によりデフォーカス量を算出する位相差ＡＦ処理部１９と、着脱自在の記録媒体２１が接続される外部メモリ制御部２０と、カメラ背面等に搭載された表示部２３が接続される表示制御部２２と、を備える。
　メモリ制御部１５、デジタル信号処理部１７、位相差ＡＦ処理部１９、外部メモリ制御部２０、及び表示制御部２２は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
　図２は、図１に示すデジタルカメラに搭載される撮像素子５の全体構成を示す平面模式図である。
　撮像素子５は、行方向Ｘと行方向Ｘに直交する列方向Ｙに二次元状に配列された多数の画素が配置される受光面５０を有する。この受光面５０には、焦点を合わせる対象となるエリアであるＡＦエリア５３が図２の例では９つ設けられている。
　ＡＦエリア５３は、画素として撮像用画素と位相差検出用画素とを含むエリアである。
　受光面５０のうちＡＦエリア５３を除く部分には、撮像用画素だけが配置される。なお、ＡＦエリア５３は、受光面５０に隙間無く設けてあってもよい。
　図３は、図２に示す１つのＡＦエリア５３の部分拡大図である。
　ＡＦエリア５３には、画素５１が二次元状に配列されている。各画素５１は、フォトダイオード等の光電変換部と、この光電変換部上方に形成されたカラーフィルタとを含む。
　図３では、赤色光を透過するカラーフィルタ（Ｒフィルタ）を含む画素５１（Ｒ画素５１ともいう）には“Ｒ”の文字を付し、緑色光を透過するカラーフィルタ（Ｇフィルタ）を含む画素５１（Ｇ画素５１ともいう）には“Ｇ”の文字を付し、青色光を透過するカラーフィルタ（Ｂフィルタ）を含む画素５１（Ｂ画素５１ともいう）には“Ｂ”の文字を付している。カラーフィルタの配列は受光面５０全体でベイヤ配列となっている。
　ＡＦエリア５３では、Ｇ画素５１の一部（図３中の網掛けを付した画素５１）が位相差検出用画素５２となっている。図３の例では、Ｒ画素５１とＧ画素５１を含む画素行のうちの任意の画素行における各Ｇ画素５１と、この各Ｇ画素５１に対して列方向Ｙに最も近い同色のＧ画素５１とが、位相差検出用画素５２となっている。ここでは図３に図示するように、２次元状配列の一方の方向を行方向Ｘ、他の方向を列方向Ｙと規定する。
　図４は、図３に示す位相差検出用画素５２のみを示した図である。
　図４に示すように、位相差検出用画素５２は、位相差検出用画素５２Ａと位相差検出用画素５２Ｂの２種類の画素を含む。
　位相差検出用画素５２Ａは、撮像レンズ１の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部である。
　位相差検出用画素５２Ｂは、上記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部である。
　なお、ＡＦエリア５３において、位相差検出用画素５２Ａ，５２Ｂ以外の複数の画素５１は撮像用画素であり、撮像用画素は、撮像レンズ１を通過した上記一対の光束を受光し受光量に応じた信号を検出する。
　各画素５１の光電変換部上方には遮光膜が設けられ、この遮光膜には、光電変換部の受光面積を規定する開口が形成されている。
　撮像用画素５１の開口の中心は、撮像用画素５１の光電変換部の中心と一致している。これに対し、位相差検出用画素５２Ａの開口（図４の白抜き部分）の中心は、位相差検出用画素５２Ａの光電変換部の中心に対し右側に偏心している。また、位相差検出用画素５２Ｂの開口（図４の白抜き部分）の中心は、位相差検出用画素５２Ｂの光電変換部の中心に対して左側に偏心している。ここでいう右方向は、図３で示す行方向Ｘの一方の方向であり、左方向は行方向Ｘのもう一方の方向である。
　図５は、位相差検出用画素５２Ａの断面構成を示す図である。図５に示すように、位相差検出用画素５２Ａは、開口ｃが光電変換部（ＰＤ）に対して右に偏心している。図５に示すように、光電変換部の片側を遮光膜によって覆うことにより、遮光膜で覆った方向と逆の方向から入射した光を選択的に遮光することができる。
　この構成により、任意の行にある位相差検出用画素５２Ａからなる画素群と、この画素群の各位相差検出用画素５２Ａに対して一方向に同一距離で配置された位相差検出用画素５２Ｂからなる画素群とによって、これら２つの画素群の各々によって撮像される像における行方向Ｘの位相差を検出することができる。
　なお、撮像素子５は、撮像レンズ１の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する信号検出部と、上記一対の光束の他方を受光し受光量に応じた信号を検出する信号検出部とのペアを複数有する構成であればよく、図２～図５に示した構成に限らない。
　例えば、撮像素子５に含まれる全ての画素を撮像用画素５１とし、各撮像用画素５１を２つに分割して、一方の分割エリアを位相差検出用画素５２Ａとし、他方の分割エリアを位相差検出用画素５２Ｂとした構成であってもよい。
　図６は、撮像素子５に含まれる全ての画素を撮像用画素５１とし、各撮像用画素５１を２つに分割した構成を示す図である。
　図６の構成では、撮像素子５においてＲを付した撮像用画素５１を２つに分割し、分割した２つをそれぞれ位相差検出用画素Ｒ１と位相差検出用画素Ｒ２としている。また、撮像素子５においてＧを付した撮像用画素５１を２つに分割し、分割した２つをそれぞれ位相差検出用画素Ｇ１と位相差検出用画素Ｇ２としている。更に、撮像素子５においてＢを付した撮像用画素５１を２つに分割し、分割した２つをそれぞれ位相差検出用画素Ｂ１と位相差検出用画素Ｂ２としている。
　この構成では、位相差検出用画素Ｒ１，Ｇ１，Ｂ１がそれぞれ第１の信号検出部となり、位相差検出用画素Ｒ２，Ｇ２，Ｂ２がそれぞれ第２の信号検出部となる。第１の信号検出部と第２の信号検出部からは独立に信号を読み出すことができる。そして、第１の信号検出部と第２の信号検出部の信号を加算すると、位相差のない通常の撮像用信号を得られる。つまり、図６の構成では、全ての画素を、位相差検出用画素と撮像用画素との両方として用いることができる。
　図１に示す位相差ＡＦ処理部１９は、９つのＡＦエリア５３の中からユーザ操作等により選択された１つのＡＦエリア５３にある位相差検出用画素５２Ａ及び位相差検出用画素５２Ｂから読み出される検出信号群を用いて上記一対の光束によって形成される２つの像の相対的な位置ずれ量である位相差を演算する。
　そして、位相差ＡＦ処理部１９は、この位相差に基づいて、撮像レンズ１の焦点調節状態、ここでは合焦状態から離れている量と合焦状態から離れている方向、すなわちデフォーカス量を求める。
　具体的には、位相差ＡＦ処理部１９は、選択されたＡＦエリア５３にある複数の位相差検出用画素５２Ａの検出信号群のデータをＡ［１］…Ａ［ｋ］とし、この位相差検出用画素５２Ａとペアを構成する位相差検出用画素５２Ｂの検出信号群のデータをＢ［１］…Ｂ［ｋ］とし、これら２つのデータを“ｄ”ずらしたときの以下の式によって求まる２つのデータ波形によって囲まれる面積Ｓ［ｄ］を求める。
Figure JPOXMLDOC01-appb-M000001
　位相差ＡＦ処理部１９は、相関値Ｓ［ｄ］の値が最小となるときのｄの値を位相差として求め、この位相差からデフォーカス量を算出する。
　図７は、位相差とデフォーカス量との関係を説明するための図である。図７では、撮像素子５の受光面のうち、光軸と交わる点近傍に入射する光線を破線で図示している。
　レンズ装置４０を通して撮像素子５に入射してくる光の入射角θは、絞り２の開口量によって決まる。図７では、絞り２を通過する光線のうち、絞り２の開口領域の上側端部を通過する上光線と主光線とのなす角度を入射角θ１とし、絞り２の開口領域の下側端部を通過する下光線と主光線とのなす角度を入射角θ２としている。また、下光線と撮像素子５の受光面との交点と、主光線と撮像素子５の受光面との交点の距離をａ１とし、上光線と撮像素子５の受光面との交点と、主光線と撮像素子５の受光面との交点の距離をａ２としている。
　撮像素子５に入射する光の入射角は、上光線と主光線のなす入射角の符号をプラスとし、下光線と主光線のなす入射角の符号をマイナスとして説明する。
　図７に示すように、デフォーカス量Ｄｆｆは、撮像素子５の受光面と、撮像光学系による被写体像の結像位置との距離を示す値である。
　入射角θ１，θ２と、距離ａ１，ａ２と、デフォーカス量Ｄｆｆとは一定の関数関係にあり、式（２）及び式（３）が成立する。
　ｔａｎθ１＝ａ１／Ｄｆ　　　　　…（２）
　ｔａｎ｜θ２｜＝ａ２／Ｄｆ　　　…（３）
　また、式（２），（３）から次の式（４）の関係が得られる。
　ｔａｎθ１＋ｔａｎ｜θ２｜＝（ａ１＋ａ２）／Ｄｆ　　　…（４）
　ここで、位相差ＡＦ処理部１９によって算出される位相差は、距離ａ１と距離ａ２の和に相当する。つまり、位相差と入射角θ１，θ２が分かれば、式（４）によりデフォーカス量Ｄｆｆを求めることができる。なお、式（４）から分かるように、入射角θ１，θ２は、位相差とデフォーカス量Ｄｆｆとの比に関するパラメータとなる。
　位相差ＡＦ処理部１９は、デフォーカス量Ｄｆｆを算出するために、位相差に加えて、入射角θ１と入射角θ２を算出する。以下、入射角θ１と入射角θ２の算出方法を説明する。
　図７に示した入射角θ１と入射角θ２は、絞り２の開口量（Ｆ値）が決まれば固定される値である。しかし、位相差を求めるために用いる位相差検出用画素５２Ａ，５２Ｂについては、その受光感度が光の入射角によって変化する特性（入射角感度特性）がある。
　また、レンズ装置４０にはＡＰＤフィルタ３が設けられている。このため、位相差検出用画素５２Ａ，５２Ｂの入射角感度特性は、ＡＰＤフィルタ３の透過率特性と組み合わさって更に複雑なものとなる。
　更に、任意の位相差検出用画素のペアに入射する光の入射角は、入射角θ１～入射角θ２で示される入射角範囲の中で様々に変化する。
　このため、Ｆ値で決まる入射角θ１と入射角θ２を式（４）にそのまま代入するのでは、正確なデフォーカス量を算出することは難しい。
　位相差ＡＦ処理部１９は、絞り２のＦ値で決まる入射角範囲（図７の入射角θ１，θ２）の情報と、位相差検出用画素５２Ａ，５２Ｂの各々の入射角毎の受光感度分布を示す情報と、ＡＰＤフィルタ３の透過率分布の情報とを取得する。そして、位相差ＡＦ処理部１９は、取得した３つの情報に基づいて、式（４）の“θ１”に代入する値（θ１Ａとする）と、“θ２”に代入する値（θ２Ａとする）とを算出する。このようにすることで、正確なデフォーカス量の算出を可能にしている。以下、θ１Ａとθ２Ａの算出方法を説明する。
　図８は、位相差検出用画素５２Ａと位相差検出用画素５２Ｂの受光感度分布を示す図である。図８において、符号ＩＡで示したのが位相差検出用画素５２Ａの受光感度分布を示し、符号ＩＢで示したのが位相差検出用画素５２Ｂの受光感度分布を示す。
　図８の横軸は入射角θを示し、縦軸は画素の感度Ｉを示す。図８に示す受光感度分布は、位相差検出用画素５２Ａ，５２Ｂの構造によって決まるものであり、デジタルカメラの製造段階で測定して、デジタルカメラのメインメモリ１６に記憶しておく。
　絞り２のＦ値が決まると、撮像素子５に入射する光の入射角の範囲は一意に決まる。図８では、Ｆ値に応じた入射角範囲が、入射角θ＝θ１から入射角θ＝θ２の範囲となっている。
　図９は、ＡＰＤフィルタ３の透過率分布を示す図である。図９の横軸はＸ方向の位置を示し、原点Ｏが光軸と交わる位置である。縦軸は透過率Ｔを示す。
　図９に示すように、ＡＰＤフィルタ３の透過率Ｔは、光軸と交わる位置における透過率が最も高く、光軸から離れるにしたがって透過率が低下する特性を持つ。図９に示す透過率分布の情報は、レンズ装置４０の内部メモリに記憶されている。
　図７に示したように、絞り２を通過した上光線がＡＰＤフィルタ３に入射するＸ方向位置をｘ１とし、絞り２を通過した下光線がＡＰＤフィルタ３に入射するＸ方向位置をｘ２として、図９には位置ｘ１とｘ２を図示している。
　図８に示したように、撮像素子５に入射する光は、図８の入射角範囲θ１～θ２の範囲の光となる。そして、この範囲の光は、図９のｘ１～ｘ２の範囲に分布する透過率Ｔによって減衰されて、撮像素子５に入射する。
　つまり、ＡＰＤフィルタ３を搭載するレンズ装置４０が装着された状態での位相差検出用画素５２Ａ，５２Ｂの受光感度分布は、図８のθ１～θ２までの範囲における各入射角に対する受光感度に、図９のｘ１～ｘ２までの範囲におけるこの各入射角の光が通過する部分での透過率を乗じたものとなる。
　なお、図８の受光感度分布に図９の透過率分布を掛け合わせる処理を行うためには、ＡＰＤフィルタ３の透過率分布の横軸を入射角に変換する必要がある。
　図７に示すように、ＡＰＤフィルタ３と撮像素子５の受光面との距離をＤとすると、絞り２を通過した上光線がＡＰＤフィルタ３に入射するＸ方向位置ｘ１は、ｘ１＝（Ｄ×ｓｉｎθ１）／２となる。同様に、絞り２を通過した下光線がＡＰＤフィルタ３に入射するＸ方向位置ｘ２は、ｘ２＝（Ｄ×ｓｉｎθ２）／２となる。
　この関係式から、図９に示す横軸を入射角θに変換した後、同じ入射角θに対応する感度Ｉと透過率Ｔを乗算することで、図１０に示したデータを得ることができる。
　図１０は、ＡＰＤフィルタ３を搭載するレンズ装置４０が装着された状態での位相差検出用画素５２Ａ，５２Ｂの受光感度分布を示す図である。図１０において、符号ＩＡａは、入射角範囲θ１～θ２における位相差検出用画素５２Ａの受光感度分布を示し、符号ＩＢａは、入射角範囲θ１～θ２における位相差検出用画素５２Ｂの受光感度分布を示す。
　位相差ＡＦ処理部１９は、図１０に示したデータのうち、受光感度分布ＩＡａにおいて感度重心Ａ１となる入射角θＡを算出し、受光感度分布ＩＢにおいて感度重心ｂ１となる入射角θＢを算出する。
　具体的には、位相差ＡＦ処理部１９は、以下の式（５），（６）の演算を行って、入射角θＡと入射角θＢを算出する。
　θＡ＝∫｛θ×ＩＡ（θ）×Ｔ（ｘ）｝ｄθ／∫θｄθ
　　　＝∫｛θ×ＩＡ（θ）×Ｔ（Ｄ×ｓｉｎθ／２）｝ｄθ／∫θｄθ　　…（５）
　θＢ＝∫｛θ×ＩＢ（θ）×Ｔ（ｘ）｝ｄθ／∫θｄθ
　　　＝∫｛θ×ＩＢ（θ）×Ｔ（Ｄ×ｓｉｎθ／２）｝ｄθ／∫θｄθ　　…（６）
　式（５），（６）における積分範囲は、入射角範囲（θ１～θ２）である。また、ＩＡ（θ）は、入射角θのときの位相差検出用画素５２Ａの感度を示す。ＩＢ（θ）は、入射角θのときの位相差検出用画素５２Ｂの感度を示す。Ｔ（ｘ）は、ＡＰＤフィルタ３のＸ方向における光軸との交点からの距離ｘにおける透過率を示す。
　すなわち、入射角範囲（θ１～θ２）において、入射角θ、受光感度ＩＡ（θ）、透過率Ｔ（ｘ）の乗算値をθの値で積算し、この積算値をθの積算値で除すことで、感度重心となる入射角θＡを求める。同様に、入射角範囲（θ１～θ２）において、入射角θ、受光感度ＩＢ（θ）、透過率Ｔ（ｘ）の乗算値をθの値で積算し、この積算値をθの積算値で除すことで、感度重心となる入射角θＢを求める。
　そして、位相差ＡＦ処理部１９は、式（４）のθ１にθＡを代入し、式（４）のθ２にθＢを代入し、式（４）の（ａ１＋ａ２）に相関演算によって求めた位相差を代入して、デフォーカス量Ｄｆを算出する。
　なお、ＡＰＤフィルタ３を搭載しないレンズ装置４０が装着された場合や、ＡＰＤフィルタ３を搭載しているレンズ装置４０が装着されているが、光軸上にＡＰＤフィルタ３が挿入されていない状態では、位相差ＡＦ処理部１９は、式（５），（６）におけるＴ（ｘ）を１としてθＡ，θＢを算出する。
　図１１は、図１に示すデジタルカメラのＡＦ動作を説明するためのフローチャートである。
　デジタルカメラの電源が投入されると、システム制御部１１は、レンズ装置４０からレンズ情報を取得してメインメモリ１６に記憶する（ステップＳ１）。ここで取得するレンズ情報は、撮像光学系による絞り値毎の入射角範囲の情報と、ＡＰＤフィルタ３の透過率分布の情報と、ＡＰＤフィルタ３の光軸方向の位置情報（レンズ装置４０とデジタルカメラ本体との接続部からＡＰＤフィルタ３までの距離）と、を含む。
　位相差ＡＦ処理部１９は、操作部１４が操作されてＡＦの指示がなされると（ステップＳ２：ＹＥＳ）、設定中のＦ値に対応する入射角範囲の情報をメインメモリ１６から取得する。また、位相差ＡＦ処理部１９は、ＡＰＤフィルタ３の透過率分布の情報をメインメモリ１６から取得する。また、位相差ＡＦ処理部１９は、撮像素子５の位相差検出用画素５２Ａ，５２Ｂそれぞれの受光感度分布の情報をメインメモリ１６から取得する。また、位相差ＡＦ処理部１９は、ＡＰＤフィルタ３の光軸方向の位置情報と、レンズ装置４０とデジタルカメラ本体との接続部から撮像素子５の受光面までの距離情報をメインメモリ１６から取得する。この距離情報はデジタルカメラの製造時にメインメモリ１６に記憶される。
　次に、位相差ＡＦ処理部１９は、ＡＰＤフィルタ３の光軸方向の位置情報と、レンズ装置４０とデジタルカメラ本体との接続部から撮像素子５の受光面までの距離情報とから、ＡＰＤフィルタ３と撮像素子５の受光面との距離Ｄを求める。具体的には、位置情報と距離情報を加算した値を距離Ｄとして算出する。
　位相差ＡＦ処理部１９は、求めた距離Ｄと、メインメモリ１６から取得した設定Ｆ値に対応する入射角範囲と、メインメモリ１６から取得したＡＰＤフィルタ３の透過率分布とを用いて、式（５），（６）の演算により、入射角θＡ，θＢを算出する（ステップＳ３）。
　次に、位相差ＡＦ処理部１９は、選択されたＡＦエリア５３にある複数の位相差検出用画素５２Ａの検出信号群と、この位相差検出用画素５２Ａとペアを構成する位相差検出用画素５２Ｂの検出信号群との相関演算を行って、位相差を算出する（ステップＳ４）。
　次に、位相差ＡＦ処理部１９は、ステップＳ３で算出した入射角θＡ，θＢと、ステップＳ４で算出した位相差とを用いた式（４）の演算により、デフォーカス量Ｄｆｆを算出する（ステップＳ５）。
　デフォーカス量Ｄｆｆが算出されると、システム制御部１１が、このデフォーカス量Ｄｆｆにしたがってフォーカスレンズを合焦位置に移動させる合焦制御を行う（ステップＳ６）。ステップＳ６の後はステップＳ２に処理が移行される。
　なお、位相差ＡＦ処理部１９は、レンズ装置４０が交換された場合には、ステップＳ１から処理をやり直す。また、レンズ装置４０として、ＡＰＤフィルタ３を光軸上に挿脱可能な機種が装着されている場合には、位相差ＡＦ処理部１９は、ステップＳ２：ＹＥＳのときに、ＡＰＤフィルタ３が光軸上に挿入されているか否かを判定する。そして、ＡＰＤフィルタ３が光軸上に挿入されている場合にはステップＳ３以降の処理を行う。一方、ＡＰＤフィルタ３が光軸上に挿入されていない場合には、ステップＳ３において、式（５），（６）のＴ（ｘ）を１にした演算を行って入射角θＡ，θＢを算出する。
　以上のように、図１のデジタルカメラによれば、ＡＰＤフィルタ３を含むレンズ装置４０が装着された場合には、ＡＰＤフィルタ３の透過率分布を考慮したデフォーカス量の算出を行うことができる。したがって、ＡＰＤフィルタ３を含むレンズ装置４０が装着された場合でも、高精度に被写体に合焦させることができる。
　なお、レンズ情報は、レンズ装置４０からレンズ種別を表す識別情報を取得し、デジタルカメラ本体側で予め記憶している識別情報毎のレンズ情報を得る構成としてもよい。
（第１変形例）
　上記実施形態では、受光感度分布ＩＡａにおいて感度重心となる入射角θＡと、受光感度分布ＩＢａにおいて感度重心となる入射角θＢとを求めることで、デフォーカス量Ｄｆｆを算出しているが、受光感度分布ＩＡａにおいて感度面積中心となる入射角θＡＡと、受光感度分布ＩＢａにおいて感度面積中心となる入射角θＢＢとを求め、入射角θＡＡと入射角θＢＢを式（４）に代入してデフォーカス量Ｄｆｆを算出してもよい。
　感度面積中心位置の求め方については特許文献１に記載のような手法を用いれば良い。つまり、図１２において、受光感度分布ＩＢａと横軸とで囲まれる領域の面積を均等に半分にする縦軸に平行な線と、横軸との交点の入射角をθＢＢとする。また、受光感度分布ＩＡａと横軸とで囲まれる領域の面積を均等に半分にする縦軸に平行な線と、横軸との交点の入射角をθＡＡとする。
（第２変形例）
　上述した実施形態では、１つのＡＦエリア５３で１つの入射角θＡ，θＢを算出したが、本変形例では、ＡＦエリア５３を複数分割し、分割領域毎に入射角θＡ，θＢを算出し、算出した分割領域毎の入射角θＡ（θＢ）の平均値を算出し、これをＡＦエリア５３に対応する入射角θＡ，θＢとする。
　撮像素子５の受光面に結像する被写体像は、必ずしも撮像素子５の中心に結像するわけではなく、受光面中心から高い位置，低い位置，右側に寄った位置，左側に寄った位置等の任意座標位置に存在することになる。このため、ＡＦエリア５３を複数の分割領域に分割し、それぞれの分割領域毎に入射角θＡ，θＢを算出する方が、より精度を高めることができる。
　また、上述した入射角範囲は像高に応じて変化するため、分割領域毎に入射角θＡ，θＢを算出する方が、高精度な算出が可能となる。
（第３変形例）
　上記実施形態では、レンズ装置４０が１つのＡＰＤフィルタ３を備えた構成としたが、レンズ装置４０が複数のＡＰＤフィルタを備える構成としても良い。この構成では、複数のＡＰＤフィルタのそれぞれについて図９に示した透過率分布における光線透過範囲を求め、この光線透過範囲内の透過率分布を入射角θＡ，θＢの演算に用いる。
　例えば、ＡＰＤフィルタを２つ有するレンズ装置４０が装着された場合には、式（５），（６）を以下の式（７），（８）に変えて、入射角θＡ，θＢを算出する。
　θＡ＝∫｛θ×ＩＡ（θ）×Ｔ１（ｘ）×Ｔ２（ｘ）｝ｄθ／∫θｄθ　　…（７）
　θＢ＝∫｛θ×ＩＢ（θ）×Ｔ１（ｘ）×Ｔ２（ｘ）｝ｄθ／∫θｄθ　　…（８）
　Ｔ１（ｘ）は、２つのＡＰＤフィルタの一方のＸ方向位置ｘ３における透過率を示す。Ｔ２（ｘ）は、２つのＡＰＤフィルタの他方のＸ方向位置ｘ４における透過率を示す。Ｘ方向位置ｘ３と、Ｘ方向位置ｘ４は、撮像素子５に入射する入射角範囲内での任意の入射角の光と、ＡＰＤフィルタとが交わるＡＰＤフィルタ上の位置である。
　なお、Ｔ１（ｘ）は、一方のＡＰＤフィルタと撮像素子５の受光面との距離の情報を用いて角度の情報に変換することができる。また、Ｔ２（ｘ）は、他方のＡＰＤフィルタと撮像素子５の受光面との距離の情報を用いて角度の情報に変換することができる。
　ここまでは撮像装置としてデジタルカメラを例にしたが、以下では、撮像装置としてカメラ付のスマートフォンの実施形態について説明する。
　図１３は、本発明の撮影装置の一実施形態であるスマートフォン２００の外観を示すものである。図１３に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示部としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６と、操作部２０７と、カメラ部２０８とを備えている。なお、筐体２０１の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造やスライド機構を有する構成を採用したりすることもできる。
　図１４は、図１３に示すスマートフォン２００の構成を示すブロック図である。図１４に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０とを備える。また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。
　無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Ｗｅｂデータやストリーミングデータなどの受信を行う。
　表示入力部２０４は、主制御部２２０の制御により、画像（静止画像及び動画像）や文字情報などを表示して視覚的にユーザに情報を伝達するとともに、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３とを備える。
　表示パネル２０２は、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ　Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ　Ｄｉｓｐｌａｙ）などを表示デバイスとして用いたものである。
　操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、ユーザの指や尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスをユーザの指や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。
　図１３に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。
　係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
　なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。更に、外縁部分の幅は、筐体２０１の大きさなどに応じて適宜設計されるものである。更にまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。
　通話部２１１は、スピーカ２０５やマイクロホン２０６を備え、マイクロホン２０６を通じて入力されたユーザの音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０あるいは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力させたりするものである。また、図１３に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。
　操作部２０７は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図１３に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。
　記憶部２１２は、主制御部２２０の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（ｆｌａｓｈ　ｍｅｍｏｒｙ　ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ　ｄｉｓｋ　ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ　ｃａｒｄ　ｍｉｃｒｏ　ｔｙｐｅ）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）などの格納媒体を用いて実現される。
　外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４など）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、ＲＦＩＤ（Ｒａｄｉｏ　Ｆｒｅｑｕｅｎｃｙ　Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ　Ｄａｔａ　Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ　Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）など）により直接的又は間接的に接続するためのものである。
　スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ　ｃａｒｄ）やＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ　Ｉｄｅｎｔｉｔｙ　Ｍｏｄｕｌｅ　Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ　Ｉｄｅｎｔｉｔｙ　Ｍｏｄｕｌｅ　Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるＰＤＡ、有／無線接続されるパーソナルコンピュータ、イヤホンなどがある。外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達することや、スマートフォン２００の内部のデータが外部機器に伝送されるようにすることができる。
　ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、ＧＰＳ衛星ＳＴ１～ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン２００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部２１４は、無線通信部２１０や外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
　モーションセンサ部２１５は、例えば、３軸の加速度センサなどを備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向や加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。
　電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。
　主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。また、主制御部２２０は、無線通信部２１０を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
　アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Ｗｅｂページを閲覧するＷｅｂブラウジング機能などがある。
　また、主制御部２２０は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。
　更に、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じたユーザ操作を検出する操作検出制御を実行する。表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
　また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じたユーザ操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。
　更に、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
　また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
　カメラ部２０８は、図１に示したデジタルカメラにおける外部メモリ制御部２０、記録媒体２１、表示制御部２２、表示部２３、及び操作部１４以外の構成を含む。
　カメラ部２０８によって生成された撮像画像データは、記憶部２１２に記録したり、外部入出力部２１３や無線通信部２１０を通じて出力したりすることができる。
　図１３に示すスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよい。
　また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示することや、操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用することができる。
　また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。更には、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。
　その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等などを付加して記憶部２１２に記録したり、外部入出力部２１３や無線通信部２１０を通じて出力したりすることもできる。
　以上のような構成のスマートフォン２００においても、ＡＰＤフィルタ３を含むレンズ装置４０を装着可能なアクセサリを提供し、カメラ部２０８の撮像素子として撮像素子５を用い、アクセサリが装着されたときには図１１に例示した処理を行うことで、高精度に被写体に合焦させることができる。
　以上説明してきたように、本明細書には以下の事項が開示されている。
　開示された撮像装置は、フォーカスレンズを含む撮像光学系を通して被写体を撮像し、上記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と上記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子と、上記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、上記撮像光学系を通って上記ペアに入射される光の入射角範囲と、上記光学フィルタの透過率分布と、上記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した上記入射角範囲、上記透過率分布、及び上記受光感度分布に基づいて、上記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した上記パラメータと上記位相差を用いてデフォーカス量を算出するデフォーカス量算出部と、上記デフォーカス量算出部により算出されたデフォーカス量にしたがって上記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備えるものである。
　開示された撮像装置は、上記デフォーカス量算出部は、上記透過率分布を用いて、上記光学フィルタの上記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出し、上記受光感度分布のうち上記入射角範囲に対応する部分の上記各入射角に対する受光感度に、上記各入射角に対する上記算出した透過率を乗じて得られる受光感度分布において感度重心又は感度面積中心となる入射角を上記パラメータとして算出するものである。
　開示された撮像装置は、上記デフォーカス量算出部は、上記撮像素子の受光面と上記光学フィルタとの距離、及び、上記光学フィルタに入射する上記入射角範囲の各光の入射角の関係によって決まる、上記光学フィルタにおいて上記各光が入射する位相差検出方向での位置と上記透過率分布とに基づいて、上記光学フィルタの上記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出するものである。
　開示された撮像装置は、上記撮像光学系が交換可能であり、上記デフォーカス量算出部は、上記入射角範囲と上記透過率分布の情報を上記撮像光学系から取得するものである。
　開示された撮像装置の合焦制御方法は、フォーカスレンズを含む撮像光学系を通して被写体を撮像し、上記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と上記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子を備える撮像装置における合焦制御方法であって、上記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、上記撮像光学系を通って上記ペアに入射される光の入射角範囲と、上記光学フィルタの透過率分布と、上記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した上記入射角範囲、上記透過率分布、及び上記受光感度分布に基づいて、上記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した上記パラメータと上記位相差を用いてデフォーカス量を算出するデフォーカス量算出ステップと、上記デフォーカス量算出ステップで算出したデフォーカス量にしたがって上記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備えるものである。
　開示された撮像装置の合焦制御方法は、上記デフォーカス量算出ステップでは、上記透過率分布を用いて、上記光学フィルタの上記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出し、上記受光感度分布のうち上記入射角範囲に対応する部分の上記各入射角に対する受光感度に、上記各入射角に対する上記算出した透過率を乗じて得られる受光感度分布において感度重心又は感度面積中心となる入射角を上記パラメータとして算出するものである。
　開示された撮像装置の合焦制御方法は、上記デフォーカス量算出ステップでは、上記撮像素子の受光面と上記光学フィルタとの距離、及び、上記光学フィルタに入射する上記入射角範囲の各光の入射角の関係によって決まる、上記光学フィルタにおいて上記各光が入射する位相差検出方向での位置と、上記透過率分布とに基づいて、上記光学フィルタの上記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出するものである。
　開示された撮像装置の合焦制御方法は、上記撮像装置は上記撮像光学系が交換可能なものであり、上記デフォーカス量算出ステップでは、上記入射角範囲と上記透過率分布の情報を上記撮像光学系から取得するものである。
　本発明は、特にデジタルカメラ等に適用して利便性が高く、有効である。
　本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
　本出願は、２０１４年９月１１日出願の日本特許出願（特願２０１４－１８５１６２）に基づくものであり、その内容はここに参照として取り込まれる。
１　撮像レンズ
２　絞り
３　ＡＰＤフィルタ（光学フィルタ）
４０　レンズ装置（撮像光学系）
５　撮像素子
１１　システム制御部（合焦制御部）
１９　位相差ＡＦ処理部（デフォーカス量算出部）

Claims (8)

  1. 　フォーカスレンズを含む撮像光学系を通して被写体を撮像し、前記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と前記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子と、
    　前記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、前記撮像光学系を通って前記ペアに入射される光の入射角範囲と、前記光学フィルタの透過率分布と、前記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した前記入射角範囲、前記透過率分布、及び前記受光感度分布に基づいて、前記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した前記パラメータと前記位相差を用いてデフォーカス量を算出するデフォーカス量算出部と、
    　前記デフォーカス量算出部により算出されたデフォーカス量にしたがって前記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備える撮像装置。
  2. 　請求項１記載の撮像装置であって、
    　前記デフォーカス量算出部は、前記透過率分布を用いて、前記光学フィルタの前記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出し、前記受光感度分布のうち前記入射角範囲に対応する部分の前記各入射角に対する受光感度に、前記各入射角に対する前記算出した透過率を乗じて得られる受光感度分布において感度重心又は感度面積中心となる入射角を前記パラメータとして算出する撮像装置。
  3. 　請求項２記載の撮像装置であって、
    　前記デフォーカス量算出部は、前記撮像素子の受光面と前記光学フィルタとの距離、及び、前記光学フィルタに入射する前記入射角範囲の各光の入射角の関係によって決まる、前記光学フィルタにおいて前記各光が入射する位相差検出方向での位置と、前記透過率分布とに基づいて、前記光学フィルタの前記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出する撮像装置。
  4. 　請求項１～３のいずれか１項記載の撮像装置であって、
    　前記撮像光学系が交換可能であり、
    　前記デフォーカス量算出部は、前記入射角範囲と前記透過率分布の情報を前記撮像光学系から取得する撮像装置。
  5. 　フォーカスレンズを含む撮像光学系を通して被写体を撮像し、前記撮像光学系の瞳領域の異なる部分を通過した一対の光束の一方を受光し受光量に応じた信号を検出する第１の信号検出部と前記一対の光束の他方を受光し受光量に応じた信号を検出する第２の信号検出部のペアを含む撮像素子を備える撮像装置による合焦制御方法であって、
    　前記撮像光学系の光軸上に、光軸中心から光軸と垂直な方向に離れるに従って透過率が低下する光学フィルタが存在する状態において、前記撮像光学系を通って前記ペアに入射される光の入射角範囲と、前記光学フィルタの透過率分布と、前記ペアの各々の入射光に対する入射角毎の受光感度を示す受光感度分布とを取得し、取得した前記入射角範囲、前記透過率分布、及び前記受光感度分布に基づいて、前記ペアの各々により検出される検出信号の位相差とデフォーカス量との比に関するパラメータを算出し、算出した前記パラメータと前記位相差を用いてデフォーカス量を算出するデフォーカス量算出ステップと、
    　前記デフォーカス量算出ステップで算出したデフォーカス量にしたがって前記フォーカスレンズを光軸方向に移動させる合焦制御を行う合焦制御部と、を備える合焦制御方法。
  6. 　請求項５記載の合焦制御方法であって、
    　前記デフォーカス量算出ステップでは、前記透過率分布を用いて、前記光学フィルタの前記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出し、前記受光感度分布のうち前記入射角範囲に対応する部分の前記各入射角に対する受光感度に、前記各入射角に対する前記算出した透過率を乗じて得られる受光感度分布において感度重心又は感度面積中心となる入射角を前記パラメータとして算出する合焦制御方法。
  7. 　請求項６記載の合焦制御方法であって、
    　前記デフォーカス量算出ステップでは、前記撮像素子の受光面と前記光学フィルタとの距離、及び、前記光学フィルタに入射する前記入射角範囲の各光の入射角の関係によって決まる、前記光学フィルタにおいて前記各光が入射する位相差検出方向での位置と、前記透過率分布とに基づいて、前記光学フィルタの前記入射角範囲の光が通過する領域における各入射角の光に対する透過率を算出する合焦制御方法。
  8. 　請求項５～７のいずれか１項記載の合焦制御方法であって、
    　前記撮像装置は前記撮像光学系が交換可能なものであり、
    　前記デフォーカス量算出ステップでは、前記入射角範囲と前記透過率分布の情報を前記撮像光学系から取得する合焦制御方法。
PCT/JP2015/063794 2014-09-11 2015-05-13 撮像装置及び合焦制御方法 WO2016038936A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016547720A JP6171106B2 (ja) 2014-09-11 2015-05-13 撮像装置及び合焦制御方法
US15/456,188 US9781333B2 (en) 2014-09-11 2017-03-10 Imaging device and focus control method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014185162 2014-09-11
JP2014-185162 2014-09-11

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/456,188 Continuation US9781333B2 (en) 2014-09-11 2017-03-10 Imaging device and focus control method

Publications (1)

Publication Number Publication Date
WO2016038936A1 true WO2016038936A1 (ja) 2016-03-17

Family

ID=55458699

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/063794 WO2016038936A1 (ja) 2014-09-11 2015-05-13 撮像装置及び合焦制御方法

Country Status (3)

Country Link
US (1) US9781333B2 (ja)
JP (1) JP6171106B2 (ja)
WO (1) WO2016038936A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019202984A1 (ja) * 2018-04-17 2019-10-24 富士フイルム株式会社 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
WO2019202983A1 (ja) * 2018-04-17 2019-10-24 富士フイルム株式会社 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
JP2021076760A (ja) * 2019-11-12 2021-05-20 キヤノン株式会社 レンズ装置、撮像装置、通信方法、および、プログラム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107135341B (zh) * 2017-05-03 2019-12-27 Oppo广东移动通信有限公司 影像传感器、相机模组及电子装置
JP7443034B2 (ja) 2019-11-29 2024-03-05 キヤノン株式会社 撮像装置、撮像アクセサリ、および、中間アクセサリ

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10268382A (ja) * 1997-03-21 1998-10-09 Minolta Co Ltd フィルタ交換式カメラ
JPH11249005A (ja) * 1998-03-05 1999-09-17 Canon Inc 自動焦点カメラ
JP2003241075A (ja) * 2002-02-22 2003-08-27 Canon Inc カメラシステム、カメラおよび撮影レンズ装置
JP2005062732A (ja) * 2003-08-20 2005-03-10 Canon Inc 撮影装置およびアポダイゼイションフィルタ
WO2013047111A1 (ja) * 2011-09-30 2013-04-04 富士フイルム株式会社 撮像装置及び合焦用パラメータ値算出方法
JP2014063100A (ja) * 2012-09-24 2014-04-10 Canon Inc 撮像装置及びそれに用いられる撮像光学系

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7099555B2 (en) 2003-08-20 2006-08-29 Canon Kabushiki Kaisha Light amount adjusting apparatus, optical equipment, optical filter and image-taking apparatus
JP5478935B2 (ja) * 2009-05-12 2014-04-23 キヤノン株式会社 撮像装置
JP5452329B2 (ja) 2010-04-06 2014-03-26 富士フイルム株式会社 フィルタ、撮像レンズ、撮像装置および携帯端末機器
JP2012182332A (ja) * 2011-03-02 2012-09-20 Sony Corp 撮像素子および撮像装置
WO2013047110A1 (ja) * 2011-09-30 2013-04-04 富士フイルム株式会社 撮像装置及び位相差画素の感度比算出方法
JP2014056014A (ja) * 2012-09-11 2014-03-27 Canon Inc 撮像素子および撮像装置
JP6186900B2 (ja) * 2013-06-04 2017-08-30 ソニー株式会社 固体撮像装置、電子機器、レンズ制御方法、および撮像モジュール
JP6305006B2 (ja) * 2013-10-18 2018-04-04 キヤノン株式会社 撮像装置、撮像システム、撮像装置の制御方法、プログラム、および、記憶媒体
JP2016038414A (ja) * 2014-08-05 2016-03-22 キヤノン株式会社 焦点検出装置およびその制御方法、並びに撮像装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10268382A (ja) * 1997-03-21 1998-10-09 Minolta Co Ltd フィルタ交換式カメラ
JPH11249005A (ja) * 1998-03-05 1999-09-17 Canon Inc 自動焦点カメラ
JP2003241075A (ja) * 2002-02-22 2003-08-27 Canon Inc カメラシステム、カメラおよび撮影レンズ装置
JP2005062732A (ja) * 2003-08-20 2005-03-10 Canon Inc 撮影装置およびアポダイゼイションフィルタ
WO2013047111A1 (ja) * 2011-09-30 2013-04-04 富士フイルム株式会社 撮像装置及び合焦用パラメータ値算出方法
JP2014063100A (ja) * 2012-09-24 2014-04-10 Canon Inc 撮像装置及びそれに用いられる撮像光学系

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019202984A1 (ja) * 2018-04-17 2019-10-24 富士フイルム株式会社 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
WO2019202983A1 (ja) * 2018-04-17 2019-10-24 富士フイルム株式会社 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
JPWO2019202984A1 (ja) * 2018-04-17 2021-05-13 富士フイルム株式会社 撮像装置並びに距離計測方法、距離計測プログラム及び記録媒体
US11593958B2 (en) 2018-04-17 2023-02-28 Fujifilm Corporation Imaging device, distance measurement method, distance measurement program, and recording medium
JP2021076760A (ja) * 2019-11-12 2021-05-20 キヤノン株式会社 レンズ装置、撮像装置、通信方法、および、プログラム
JP7395326B2 (ja) 2019-11-12 2023-12-11 キヤノン株式会社 レンズ装置、撮像装置、通信方法、および、プログラム

Also Published As

Publication number Publication date
JPWO2016038936A1 (ja) 2017-06-01
US20170187951A1 (en) 2017-06-29
US9781333B2 (en) 2017-10-03
JP6171106B2 (ja) 2017-07-26

Similar Documents

Publication Publication Date Title
JP6031587B2 (ja) 撮像装置、信号処理方法、信号処理プログラム
JP5982601B2 (ja) 撮像装置及び合焦制御方法
JP5799178B2 (ja) 撮像装置及び合焦制御方法
JP6307526B2 (ja) 撮像装置及び合焦制御方法
JP5779726B2 (ja) 撮像装置及び露出決定方法
JP6171106B2 (ja) 撮像装置及び合焦制御方法
WO2015033646A1 (ja) 撮像装置及び合焦制御方法
JP6028112B2 (ja) 撮像装置及び合焦制御方法
JP5982600B2 (ja) 撮像装置及び合焦制御方法
JP6367360B2 (ja) 撮像装置、撮像方法及び画像処理プログラム
JP5990665B2 (ja) 撮像装置及び合焦制御方法
JP6186498B2 (ja) 撮像装置及び合焦制御方法
JP6171105B2 (ja) 撮像装置及び合焦制御方法
JP6446599B2 (ja) 合焦制御装置、レンズ装置、撮像装置、合焦制御方法、合焦制御プログラム
JP6397048B2 (ja) 撮像装置、撮像方法及び画像処理プログラム
JP5978415B2 (ja) 撮像装置及び合焦制御方法
JP6326149B2 (ja) 撮像装置、撮像方法及び画像処理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15840360

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016547720

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15840360

Country of ref document: EP

Kind code of ref document: A1