JP6427720B2 - 撮像素子及び撮像装置 - Google Patents

撮像素子及び撮像装置 Download PDF

Info

Publication number
JP6427720B2
JP6427720B2 JP2018520726A JP2018520726A JP6427720B2 JP 6427720 B2 JP6427720 B2 JP 6427720B2 JP 2018520726 A JP2018520726 A JP 2018520726A JP 2018520726 A JP2018520726 A JP 2018520726A JP 6427720 B2 JP6427720 B2 JP 6427720B2
Authority
JP
Japan
Prior art keywords
pixel
phase difference
difference detection
imaging
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018520726A
Other languages
English (en)
Other versions
JPWO2017208702A1 (ja
Inventor
小林　誠
誠 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Application granted granted Critical
Publication of JP6427720B2 publication Critical patent/JP6427720B2/ja
Publication of JPWO2017208702A1 publication Critical patent/JPWO2017208702A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/34—Systems for automatic generation of focusing signals using different areas in a pupil plane
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values

Description

本発明は、撮像素子及び撮像装置に関する。
ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等の撮像素子の高解像度化に伴い、デジタルスチルカメラ、デジタルビデオカメラ、又は、スマートフォンを含む携帯電話機等の撮像機能を有する情報機器の需要が急増している。なお、以上のような撮像機能を有する情報機器を撮像装置と称する。
これら撮像装置では、主要な被写体に焦点を合わせる合焦制御方法として、位相差ＡＦ（Ａｕｔｏ Ｆｏｒｃｕｓ）方式（特許文献１、２参照）が採用されている。
位相差ＡＦ方式により合焦制御を行う撮像装置に搭載される撮像素子には、例えば、光電変換領域が互いに逆方向に偏心した位相差検出用画素のペアを受光面の全面に離散的に設けたものが使用される（特許文献１、２参照）。
特許文献１には、青色の光を光電変換する画素が配置されるべき位置に配置された位相差検出用画素と、緑色の光を光電変換する画素が配置されるべき位置に配置された位相差検出用画素とのペアを有する撮像素子が記載されている。
特許文献２には、水平方向の位相差を検出するための位相差検出用画素のペアと、垂直方向の位相差を検出するための位相差検出用画素のペアとを有し、これら２種類のペアが受光面に配置された撮像素子が記載されている。
日本国特開２００９−１５９２２６号公報 日本国特開２００８−１７７９０３号公報
位相差検出用画素は、光電変換領域がその他の通常の画素（撮像用画素）よりも小さくなっている。このため、位相差検出用画素の出力信号を撮像画像データ生成用の画素信号として使用するには不十分なものとなる。そこで、位相差検出用画素の出力信号を補正する必要が生じる。
位相差検出用画素の出力信号の補正方法には、位相差検出用画素の位置に対応する画素信号を、その位相差検出用画素の周囲の撮像用画素の出力信号を用いて補間生成する補間補正がある。
また、この補正方法には、位相差検出用画素とその近くにある撮像用画素との感度比に応じたゲインを、その位相差検出用画素の出力信号に乗じて位相差検出用画素の位置に対応する画素信号を生成するゲイン補正がある。
補間補正では、受光面上の位相差検出用画素とは異なる位置にある撮像用画素の出力信号を用いて補間がなされる。このため、細かい模様の被写体等を撮像している場合には、補正によって撮像画像品質が低下する可能性がある。
一般的に、撮像素子から出力されるカラーの撮像画像信号は画像処理されて、輝度信号及び色差信号から構成される撮像画像データに変換される。人の視覚にとって、色差の役割は輝度に比べて小さく、色差信号の解像度を下げても画質があまり落ちたように感じないという性質がある。つまり、撮像画像データの品質は、輝度信号の品質によって決まる。
このため、位相差検出用画素の出力信号の補正後の画素信号の色成分が、輝度信号への寄与度が大きいものである場合には、この位相差検出用画素の出力信号の補正方法としては補間補正ではなくゲイン補正を採用することが好ましい。
しかし、位相差検出用画素は、光電変換領域が位相差の検出方向に偏心している画素であるため、その出力信号のレベルは受光面上の位置によって異なる。
例えば、受光面に対して左右方向の位相差を検出するための位相差検出用画素のペアのうち、右方向に光電変換領域が偏心している位相差検出用画素を右偏心画素とする。
この場合、受光面の左方向の端部付近にある右偏心画素の出力信号は、受光面の右方向の端部付近にある右偏心画素の出力信号よりも小さくなる。このような出力信号差は、撮像レンズの広角化、又は、受光面のサイズの大型化等によって大きくなる傾向にある。
このため、受光面の位相差検出方向の端部付近にある位相差検出用画素の出力信号をゲイン補正する場合には、ゲインを大きな値にする必要がある。しかし、ゲインを大きくしすぎるとノイズが増える原因となるため、ゲインの最大値には制限を設ける必要がある。
ゲインの最大値に制限が設けられると、受光面の端部付近にある位相差検出用画素では、その出力信号をゲイン補正しても、撮像画像データ生成用の画素信号として利用可能なレベルに戻すことが難しくなる。
特許文献１，２には、ゲイン補正を行う場合の上述した課題について考慮されていない。
本発明は、上記事情に鑑みてなされたものであり、輝度信号への寄与度が最大となる位相差検出用画素の出力信号の補正方法としてゲイン補正の採用を可能にして撮像画像品質を向上させることのできる撮像素子と、この撮像素子を備える撮像装置を提供することを目的とする。
本発明の撮像素子は、異なる色の光を光電変換する複数の画素を有し、上記複数の画素が規則的なパターンにしたがって二次元状に配置された受光面を有する撮像素子であって、上記複数の画素は、輝度信号を得るために最も寄与する第一の色成分の信号を出力する第一の画素と、上記第一の色成分以外の色成分の信号を出力する第二の画素とを含み、上記第一の画素は、基準位置に光電変換領域がある第一の撮像用画素と、上記基準位置に対して任意の方向の一方の方向に偏心した位置に光電変換領域がある第一の位相差検出用画素と、上記基準位置に対して上記任意の方向の他方の方向に偏心した位置に光電変換領域がある第二の位相差検出用画素と、を含み、上記第二の画素は、上記基準位置に光電変換領域がある第二の撮像用画素であり、上記受光面には、上記パターンに基づく上記第一の画素の配置位置に配置された上記第一の位相差検出用画素と、上記パターンに基づく上記第二の画素の配置位置に配置された上記第二の位相差検出用画素の複数の第一のペアと、上記パターンに基づく上記第一の画素の配置位置に配置された上記第二の位相差検出用画素と、上記パターンに基づく上記第二の画素の配置位置に配置された上記第一の位相差検出用画素の複数の第二のペアと、を含む上記任意の方向に配列されたペアから構成されるペア行が形成されており、上記ペア行に含まれる上記複数の第一のペアは、上記ペア行の上記任意の方向における任意の位置よりも上記一方の方向側に配置されており、上記ペア行に含まれる上記複数の第二のペアは、上記ペア行の上記任意の方向における上記任意の位置よりも上記他方の方向側に配置されているものである。
本発明の撮像装置は、上記撮像素子と、上記撮像素子の上記複数の画素から出力される信号に基づいて撮像画像データを生成する画像処理部と、を備えるものである。
本発明によれば、輝度信号への寄与度が最大となる位相差検出用画素の出力信号の補正方法としてゲイン補正の採用を可能にして撮像画像品質を向上させることのできる撮像素子と、この撮像素子を備える撮像装置を提供することができる。
本発明の撮像装置の一実施形態であるデジタルカメラの概略構成を示す図である。 図１に示すデジタルカメラに搭載される撮像素子５の概略構成を示す平面模式図である。 図２に示す受光面５０の拡大模式図である。 図３に示す撮像用画素６０ｒ，６０ｇ，６０ｂの画素構成を示す平面模式図である。 図３に示す左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌの画素構成を示す平面模式図である。 図３に示す右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒの画素構成を示す平面模式図である。 図１に示すデジタルカメラにおけるデジタル信号処理部１７の機能ブロック図である。 図２に示す受光面５０の第一の変形例を示す拡大模式図である。 図２に示す受光面５０の第二の変形例を示す拡大模式図である。 図２に示す受光面５０の第五の変形例を示す拡大模式図である。 図２に示す受光面５０の第六の変形例を示す拡大模式図である。 撮像素子の画素配列パターンを示す模式図である。 撮像装置の一実施形態であるスマートフォンの外観を示す図である。 図１３に示すスマートフォンの構成を示すブロック図である。
以下、本発明の実施形態について図面を参照して説明する。
図１は、本発明の撮像装置の一実施形態であるデジタルカメラの概略構成を示す図である。
図１に示すデジタルカメラの撮像系は、撮像レンズ１及び絞り２を有する撮像光学系と、ＣＣＤイメージセンサ又はＣＭＯＳイメージセンサ等の撮像素子５とを備えている。
撮像レンズ１は、少なくともフォーカスレンズを含む。このフォーカスレンズは、撮像光学系の焦点位置を調節するためのレンズであり、単一のレンズ又は複数のレンズで構成される。フォーカスレンズが撮像光学系の光軸方向に移動することで焦点位置の調節が行われる。
撮像素子５は、複数の撮像用画素と、上記の撮像光学系の瞳領域の異なる部分を通過した一対の光束をそれぞれ受光する位相差検出用画素とを２次元状に配置した構成になっている。
撮像素子５は、撮像レンズ１により結像される光学像を光電変換して撮像画像信号を出力すると共に、上記一対の光束に対応する一対の像信号を出力することができる。
デジタルカメラの電気制御系全体を統括制御するシステム制御部１１は、レンズ駆動部８を制御して撮像レンズ１に含まれるフォーカスレンズの位置を調整する。また、システム制御部１１は、絞り駆動部９を介して絞り２の開口量を制御することにより、露光量の調整を行う。
また、システム制御部１１は、撮像素子駆動部１０を介して撮像素子５を駆動し、撮像レンズ１を通して撮像した被写体像を撮像画像信号として出力させる。システム制御部１１には、操作部１４を通してユーザからの指示信号が入力される。
デジタルカメラの電気制御系は、更に、撮像素子５の出力に接続された相関二重サンプリング処理等のアナログ信号処理を行うアナログ信号処理部６と、このアナログ信号処理部６から出力されるＲ（赤色）成分の色信号、Ｇ（緑色）成分の色信号、及び、Ｂ（青色）成分の色信号をデジタル信号に変換するアナログデジタル（Ａ／Ｄ）変換回路７とを備える。アナログ信号処理部６及びＡ／Ｄ変換回路７は、システム制御部１１によって制御される。
更に、デジタルカメラの電気制御系は、メインメモリ１６と、メインメモリ１６に接続されたメモリ制御部１５と、撮像素子５によって撮像して得られる撮像画像信号に対し画像処理を行って撮像画像データを生成するデジタル信号処理部１７と、撮像素子５の位相差検出用画素から出力される一対の像信号の位相差に基づいて撮像レンズ１のデフォーカス量を算出する焦点検出部１９と、着脱自在の記録媒体２１が接続される外部メモリ制御部２０と、カメラ背面等に搭載された表示部２３が接続される表示制御部２２とを備えている。
メモリ制御部１５、デジタル信号処理部１７、焦点検出部１９、外部メモリ制御部２０、及び、表示制御部２２は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
システム制御部１１とデジタル信号処理部１７は、それぞれ、プログラムを実行して処理を行う各種のプロセッサと、ＲＡＭ（Ｒａｍｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）を含む。
本明細書において、各種のプロセッサとは、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｓｅｓｓｉｎｇ Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等を含む。
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
システム制御部１１とデジタル信号処理部１７は、それぞれ、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
図２は、図１に示すデジタルカメラに搭載される撮像素子５の概略構成を示す平面模式図である。
撮像素子５の受光面５０には、行方向（左右方向）Ｘ及び行方向Ｘに直交する列方向（上下方向）Ｙに２次元状に配列された図示しない多数の画素が形成されている。
この受光面５０の任意の領域位置（図示する例では受光面５０内の略全域）には、矩形の位相差検出エリア５３が複数設定されている。この位相差検出エリア５３は、焦点を合わせる対象となる被写体に対応する範囲として、受光面５０上の位相差検出用画素を含むように設定されるエリアである。
図２に示した３５個の位相差検出エリア５３の各々は、位相差検出エリア５３として設定可能な最小のサイズであり、受光面５０上においてこの最小のサイズよりも大きなサイズの位相差検出エリアを設定することも可能である。
図２に示した列方向Ｙに伸びる直線Ｎは、デジタルカメラの撮像光学系の光軸と受光面５０との交点を通りかつ列方向Ｙに伸びる仮想的な直線を示している。
図２に示した構成例において、行方向Ｘが特許請求の範囲に記載の「任意の方向」に対応し、列方向Ｙが特許請求の範囲に記載の「直交方向」に対応し、左方向が特許請求の範囲に記載の「行方向Ｘの一方の方向」に対応し、右方向が特許請求の範囲に記載の「行方向Ｘの他方の方向」に対応する。また、行方向Ｘにおける直線Ｎの位置は、特許請求の範囲に記載の「任意の位置」に対応する。
図３は、図２に示す受光面５０の拡大模式図である。
撮像素子５の受光面５０には、Ｒ光を光電変換してＲ成分の信号（Ｒ信号）を出力する撮像用画素６０ｒ（図中“Ｒ”を付したブロック）と、Ｇ光を光電変換してＧ成分の信号（Ｇ信号）を出力する撮像用画素６０ｇ（図中“Ｇ”を付したブロック）と、Ｂ光を光電変換してＢ成分の信号（Ｂ信号）を出力する撮像用画素６０ｂ（図中“Ｂ”を付したブロック）と、が規則的なパターンであるベイヤ配列にしたがって二次元状に配置されている。
また、撮像素子５の受光面５０の直線Ｎよりも左側の領域には、ベイヤ配列に基づく撮像用画素６０ｇの配置位置（ベイヤ配列にしたがって撮像用画素６０ｇが配置されるべき位置）の一部に、Ｇ光を光電変換してＧ信号を出力する左偏心位相差検出用画素６１Ｇｇｌが配置されている。
また、撮像素子５の受光面５０の直線Ｎよりも左側の領域には、ベイヤ配列に基づく撮像用画素６０ｂの配置位置（ベイヤ配列にしたがって撮像用画素６０ｂが配置されるべき位置）の一部に、Ｇ光を光電変換してＧ信号を出力する右偏心位相差検出用画素６１Ｇｂｒが配置されている。
また、撮像素子５の受光面５０の直線Ｎよりも右側の領域には、ベイヤ配列に基づく撮像用画素６０ｇの配置位置の一部に、Ｇ光を光電変換してＧ信号を出力する右偏心位相差検出用画素６１Ｇｇｒが配置されている。
また、撮像素子５の受光面５０の直線Ｎよりも右側の領域には、ベイヤ配列に基づく撮像用画素６０ｂの配置位置の一部に、Ｇ光を光電変換してＧ信号を出力する左偏心位相差検出用画素６１Ｇｂｌが配置されている。
図４は、図３に示す撮像用画素６０ｒ，６０ｇ，６０ｂの画素構成を示す平面模式図である。図５は、図３に示す左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌの画素構成を示す平面模式図である。図６は、図３に示す右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒの画素構成を示す平面模式図である。
撮像用画素６０ｒ，６０ｇ，６０ｂは、図４に示すように、光電変換部（フォトダイオード）上に設けられた遮光膜６３が光電変換部の略全体と重なる位置に開口６３ａを有しており、この開口６３ａと重なる光電変換部が光電変換領域６４を構成している。
光電変換領域６４の行方向Ｘにおける中心の位置は、光電変換領域６４の位置を示し、この位置は基準位置となる。撮像用画素６０ｒ，６０ｇ，６０ｂは、図１に示す撮像レンズ１の瞳領域の異なる部分を通過した一対の光（撮像レンズ１の主軸に対して左側を通過した光と右側を通過した光）の双方を受光し光電変換する画素である。
左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌは、図５に示すように、光電変換部上に設けられた遮光膜６３の開口６３ｂの中心が、図４の開口６３ａに対して左側に偏心して設けられており、この開口６３ｂと重なる光電変換部が光電変換領域６４ｂを構成している。
光電変換領域６４ｂの行方向Ｘの中心は、光電変換領域６４ｂの位置を示し、この位置は、光電変換領域６４の位置に対して左側に偏心した位置にある。左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌは、上記一対の光の一方の光を受光して光電変換する画素である。左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌは、それぞれ第一の位相差検出用画素を構成する。
右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒは、図６に示すように、光電変換部上に設けられた遮光膜６３の開口６３ｃの中心が、図４の開口６３ａに対して右側に偏心して設けられており、この開口６３ｃと重なる光電変換部が光電変換領域６４ｃを構成している。
光電変換領域６４ｃの行方向Ｘの中心は、光電変換領域６４ｃの位置を示し、この位置は、光電変換領域６４の位置に対して右側に偏心した位置にある。右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒは、上記一対の光の他方の光を受光して光電変換する画素である。右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒは、それぞれ第二の位相差検出用画素を構成する。
このように、撮像素子５の受光面５０には、撮像用画素６０ｒ、撮像用画素６０ｇ、撮像用画素６０ｂ、左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌ、及び、右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒの計７種類の画素が二次元状に配置されている。
図１に示すデジタルカメラのデジタル信号処理部１７は、撮像素子５に含まれる全ての画素の各々の出力信号の集合である撮像画像信号に対してデモザイク処理を行って、撮像素子５の各画素の位置に対応させてＲ信号、Ｇ信号、及び、Ｂ信号を生成し、このＲ信号、Ｇ信号、及び、Ｂ信号を重みづけ加算することで各画素の位置に対応する輝度信号を生成する。
例えば、デジタル信号処理部１７は、Ｒ信号とＧ信号とＢ信号を３：６：１の割合で重みづけ加算することで輝度信号を得る。
デジタル信号処理部１７は、この輝度信号とＲ信号、Ｇ信号、及び、Ｂ信号とを利用して色差信号を生成する。このような処理により、撮像素子５の各画素の位置に対応させて輝度信号及び色差信号からなる画素信号が生成され、この画素信号の集合によって撮像画像データが構成される。
したがって、図１に示すデジタルカメラに搭載される撮像素子５においては、Ｒ信号を出力する画素（撮像用画素６０ｒ）、Ｇ信号を出力する画素（撮像用画素６０ｇ、左偏心位相差検出用画素６１Ｇｇｌ，６１Ｇｂｌ、右偏心位相差検出用画素６１Ｇｇｒ，６１Ｇｂｒ）、及び、Ｂ信号を出力する画素（撮像用画素６０ｂ）のうち、Ｇ信号を出力する画素が輝度信号を得るために最も寄与する色成分（第一の色成分）の信号を出力する第一の画素となり、Ｂ信号を出力する画素及びＲ信号を出力する画素がそれぞれ第一の色成分以外の色信号を出力する第二の画素となる。
図３に示す例では、受光面５０に形成されている行方向Ｘに並ぶ複数の画素からなる画素行のうち、Ｇ信号を出力する画素とＢ信号を出力する画素とが行方向Ｘに交互に配列される多数のＧＢ画素行の一部が、位相差検出用画素行Ｍとされている。
位相差検出用画素行Ｍは、受光面５０上において、列方向Ｙに向かって例えば等間隔に配置（図３の例では６つの画素行に１つの割合で配置）されている。
位相差検出用画素行Ｍは、直線Ｎよりも左側においては、ベイヤ配列においてＧ信号を出力する画素が配置されるべき位置に左偏心位相差検出用画素６１Ｇｇｌが配置され、ベイヤ配列においてＢ信号を出力する画素が配置されるべき位置に右偏心位相差検出用画素６１Ｇｂｒが配置されている。
位相差検出用画素行Ｍに含まれる各左偏心位相差検出用画素６１Ｇｇｌと、この各左偏心位相差検出用画素６１Ｇｇｌに対して右方向に最近接する位置にある右偏心位相差検出用画素６１Ｇｂｒとにより第一のペアＰ１が構成される。
また、位相差検出用画素行Ｍは、直線Ｎよりも右側においては、ベイヤ配列においてＧ信号を出力する画素が配置されるべき位置に右偏心位相差検出用画素６１Ｇｇｒが配置され、ベイヤ配列においてＢ信号を出力する画素が配置されるべき位置に左偏心位相差検出用画素６１Ｇｂｌが配置されている。
位相差検出用画素行Ｍに含まれる各右偏心位相差検出用画素６１Ｇｇｒと、この各右偏心位相差検出用画素６１Ｇｇｒに対して右方向に最近接する位置にある左偏心位相差検出用画素６１Ｇｂｌとにより第二のペアＰ２が構成される。
このように、各位相差検出用画素行Ｍは、直線Ｎよりも左側に配置された左偏心位相差検出用画素６１Ｇｇｌと右偏心位相差検出用画素６１Ｇｂｒの複数の第一のペアＰ１と、直線Ｎよりも右側に配置された右偏心位相差検出用画素６１Ｇｇｒと左偏心位相差検出用画素６１Ｇｂｌの複数の第二のペアＰ２とを含む行方向Ｘに配列された複数のペアから構成されている。位相差検出用画素行Ｍはペア行を構成する。
そして、各位相差検出用画素行Ｍにおいて、複数の第一のペアＰ１は直線Ｎよりも左側に配置され、複数の第二のペアＰ２は直線Ｎよりも右側に配置されている。
図１に示す焦点検出部１９は、デジタルカメラのユーザにより選択された位相差検出エリア５３に含まれる位相差検出用画素の出力信号に基づいて撮像光学系の瞳領域を行方向Ｘに２分割して得られる各分割領域を通して撮像される一対の像信号の位相差を算出する。
例えば、焦点検出部１９は、選択された位相差検出エリア５３に含まれる各位相差検出用画素行Ｍの第一のペアＰ１を構成する左偏心位相差検出用画素６１Ｇｇｌ及び右偏心位相差検出用画素６１Ｇｂｒの各々の出力信号群同士の相関演算を行って位相差を算出し、この位相差に基づいてデフォーカス量を算出する。
または、焦点検出部１９は、選択された位相差検出エリア５３に含まれる第二のペアＰ２を構成する右偏心位相差検出用画素６１Ｇｇｒ及び左偏心位相差検出用画素６１Ｇｂｌの各々の出力信号群同士の相関演算を行って位相差を算出し、この位相差に基づいてデフォーカス量を算出する。
図１に示すシステム制御部１１は、焦点検出部１９によって算出されたデフォーカス量に基づいて、撮像レンズ１に含まれるフォーカスレンズの位置を制御して焦点調節を行う。
そして、上記した焦点調節が行われた状態で撮像指示がなされると、システム制御部１１は、撮像素子５により撮像を行わせ、この撮像によって撮像素子５から出力される撮像画像信号がデジタル信号処理部１７に取り込まれる。
デジタル信号処理部１７は、この撮像画像信号を画像処理して撮像画像データを生成する。この画像処理には、デモザイク処理、ガンマ補正処理、及び、ホワイトバランス調整処理等が含まれる。デジタル信号処理部１７は、撮像素子５の画素から出力される信号に基づいて撮像画像データを生成する画像処理部を構成する。
図７は、図１に示すデジタルカメラにおけるデジタル信号処理部１７の機能ブロック図である。
デジタル信号処理部１７は、ゲイン補正処理部１７１と、補間補正処理部１７２と、撮像画像データ生成部１７３と、を備える。
ゲイン補正処理部１７１、補間補正処理部１７２、及び、撮像画像データ生成部１７３は、デジタル信号処理部１７に含まれるプロセッサがプログラムを実行することで形成される機能ブロックである。ゲイン補正処理部１７１と補間補正処理部１７２は、補正部を構成する。
ゲイン補正処理部１７１は、左偏心位相差検出用画素Ｇｇｌ及び右偏心位相差検出用画素Ｇｇｒの各々の出力信号にゲインを乗じて、左偏心位相差検出用画素Ｇｇｌ及び右偏心位相差検出用画素Ｇｇｒの各々の位置に対応する画素信号を生成する。
補間補正処理部１７２は、左偏心位相差検出用画素Ｇｂｌ及び右偏心位相差検出用画素Ｇｂｒの各々の位置に対応する画素信号を、これら左偏心位相差検出用画素Ｇｂｌ及び右偏心位相差検出用画素Ｇｂｒの各々の周囲にある撮像用画素６０ｂの出力信号（Ｂ信号）に基づいて補間生成する。
例えば、補間補正処理部１７２は、左偏心位相差検出用画素Ｇｂｌの上下に近接する２つの撮像用画素６０ｂの各々の出力信号の平均を算出し、この平均を、この左偏心位相差検出用画素Ｇｂｌの位置に対応する画素信号とする。
撮像画像データ生成部１７３は、撮像画像信号に含まれる撮像用画素６０ｒの出力信号、撮像用画素６０ｇの出力信号、及び、撮像用画素６０ｂの出力信号と、左偏心位相差検出用画素Ｇｇｌ及び右偏心位相差検出用画素Ｇｇｒの各々の出力信号のゲイン補正処理部１７１による補正後の信号と、補間補正処理部１７２により補間生成された左偏心位相差検出用画素Ｇｂｌ及び右偏心位相差検出用画素Ｇｂｒの各々の位置に対応する画素信号と、に基づいて、輝度信号及び色差信号からなる撮像画像データを生成する。
生成された撮像画像データは、例えば、外部メモリ制御部２０を介して記録媒体２１に記録したり、表示制御部２２を介して表示部２３に画像として表示したりすることができる。
以上のように、図１に示すデジタルカメラの撮像素子５は、直線Ｎを境にして、受光面５０の左側の領域には左偏心位相差検出用画素６１Ｇｇｌが配置され、受光面５０の右側の領域には右偏心位相差検出用画素６１Ｇｇｒが配置された構成である。
この構成によれば、直線Ｎからの距離が同じとなる左偏心位相差検出用画素６１Ｇｇｌ及び右偏心位相差検出用画素６１Ｇｇｒの各々の感度特性を同じにすることができる。
つまり、直線Ｎの右側又は左側においてＧ信号を出力する位相差検出用画素の出力信号のレベルが相対的に低下するのを防ぐことができる。
このため、左偏心位相差検出用画素６１Ｇｇｌ及び右偏心位相差検出用画素６１Ｇｇｒの各々の出力信号を適度なゲインによって画素信号として使用可能なレベルに戻すことができる。ゲインを大きくしなくてすむことで、ノイズを抑えて撮像画像品質を向上させることができる。
また、左偏心位相差検出用画素６１Ｇｇｌ及び右偏心位相差検出用画素６１Ｇｇｒの各々の出力信号はＧ信号であり、輝度信号への寄与度が最も大きい。このため、この出力信号をゲイン補正できることで、撮像画像品質を向上させることができる。
一方、左偏心位相差検出用画素６１Ｇｂｌ及び右偏心位相差検出用画素６１Ｇｂｒの各々の位置に対応する画素信号は、撮像用画素６０ｂの出力信号であるＢ信号に基づいて補間生成される。
Ｂ信号は、輝度信号に対する寄与度がＲ信号、Ｇ信号、及び、Ｂ信号の中で最も低い。このため、左偏心位相差検出用画素６１Ｇｂｌ及び右偏心位相差検出用画素６１Ｇｂｒの各々の位置に対応する画素信号を補間生成することによる撮像画像品質への影響を最小限に抑えることができる。
上記した実施形態では、ベイヤ配列にしたがって撮像用画素６０ｇ及び撮像用画素６０ｂが配置されるべき位置の一部に位相差検出用画素が配置される構成であったが、これに限らならい。
例えば、ベイヤ配列にしたがって撮像用画素６０ｇ及び撮像用画素６０ｒが配置されるべき位置に位相差検出用画素が配置される構成であってもよい。
つまり、受光面５０に形成されている画素行のうち、Ｒ信号を出力する画素とＧ信号を出力する画素とが行方向Ｘに交互に配列される多数のＲＧ画素行の一部が、位相差検出用画素行Ｍとされる構成であってもよい。
この構成では、各位相差検出用画素行Ｍにおいて、直線Ｎよりも左側では、撮像用画素６０ｇが配置されるべき位置に左偏心位相差検出用画素６１Ｇｇｌが配置され、撮像用画素６０ｒが配置されるべき位置に右偏心位相差検出用画素６１Ｇｂｒが配置される。
また、各位相差検出用画素行Ｍにおいて、直線Ｎよりも右側では、撮像用画素６０ｇが配置されるべき位置に右偏心位相差検出用画素６１Ｇｇｒが配置され、撮像用画素６０ｒが配置されるべき位置に左偏心位相差検出用画素６１Ｇｂｌが配置される。
Ｒ信号は、輝度信号への寄与度がＧ信号よりも小さいので、この構成であっても、撮像画像品質向上の効果を得ることができる。
なお、位相差検出用画素行Ｍは、第一のペアＰ１が行方向Ｘに並ぶ部分と第二のペアＰ２が行方向Ｘに並ぶ部分との境界が直線Ｎの位置によって決められているが、この境界の位置は直線Ｎの位置に限らない。
例えば、直線Ｎに平行な直線であって直線Ｎに対し右方向又は左方向に例えば２画素分ずれた位置にある直線によって各位相差検出用画素行Ｍの第一のペアＰ１が並ぶ部分と第二のペアＰ２が並ぶ部分の境界が構成されていてもよい。
または、直線Ｎに平行であり、かつ、図２の行方向Ｘにおいて中央にある５つの位相差検出エリア５３の各々と、この各々の行方向Ｘの両隣にある位相差検出エリア５３との間の領域を通る直線によって各位相差検出用画素行Ｍの第一のペアＰ１が並ぶ部分と第二のペアＰ２が並ぶ部分の境界が構成されていてもよい。
このように、位相差検出用画素行Ｍにおける上記境界の行方向Ｘの位置は任意であるが、この境界の位置は、直線Ｎの位置の近傍にあることが好ましい。
直線Ｎの近傍とは、撮像画像品質が許容できる程度に直線Ｎと近いことを言い、例えば直線Ｎの行方向Ｘの位置を基準としてこの位置から行方向Ｘに数画素〜数百画素程度離れた範囲内の位置のこと、又は、受光面５０を行方向Ｘにｎを３以上の奇数として均等にｎ分割したときの中央の分割エリア内の位置のことを言う。
以下、撮像素子５の変形例について説明する。
（第一の変形例）
図８は、図２に示す受光面５０の第一の変形例を示す拡大模式図である。
図８に示した第一の変形例の撮像素子５は、位相差検出用画素行Ｍに代えて、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２の２つのパターンの位相差検出用画素行が設けられている。その他の構成は図３に示したものと同じである。
第一の位相差検出用画素行Ｍ１は、第一のペアＰ１が配置された部分と第二のペアＰ２が配置された部分との境界が、直線Ｎに平行かつ直線Ｎに対して右方向に２画素分ずれた位置にある直線Ｎ１によって構成されている。
ここでは、直線Ｎ１と直線Ｎとの間の距離が２画素分とされているが、この距離は任意の画素数分の距離であればよい。第一の位相差検出用画素行Ｍ１は、第一のペア行を構成する。
第二の位相差検出用画素行Ｍ２は、第一のペアＰ１が配置された部分と第二のペアＰ２が配置された部分との境界が、直線Ｎに平行かつ直線Ｎに対して左方向に２画素分ずれた位置にある直線Ｎ２によって構成されている。
ここでは、直線Ｎ２と直線Ｎとの間の距離が２画素分とされているが、この距離は任意の画素数分の距離であればよい。第二の位相差検出用画素行Ｍ２は、第二のペア行を構成する。
第一の変形例の撮像素子５の受光面５０には、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２を含む複数の位相差検出用画素行が列方向Ｙに交互に周期性をもって配置されている。
このように第一の変形例の撮像素子５は、第一のペアＰ１が配置された部分と第二のペアＰ２が配置された部分との境界の位置が異なる第一の位相差検出用画素行Ｍ１及び第二の位相差検出用画素行Ｍ２を含み、第一の位相差検出用画素行Ｍ１及び第二の位相差検出用画素行Ｍ２が列方向Ｙに周期的に配列されている構成である。
この第一の変形例の構成では、例えば、図２の行方向Ｘにおいて中央にある５つの位相差検出エリア５３の各々と、この各々の行方向Ｘの両隣にある位相差検出エリア５３との間の領域に直線Ｎ１と直線Ｎ２の少なくとも一方が設定されることで、図２に示した各位相差検出エリア５３には、その外側に上記境界が存在する位相差検出用画素行が少なくとも１つ含まれることになる。
このように、各位相差検出エリア５３に、境界を跨がない位相差検出用画素行の部分が必ず存在することで、各位相差検出エリア５３で撮像した被写体像の位相差を精度よく算出することができる。この結果、デジタルカメラの合焦精度を向上させることができる。
なお、前述したように、受光面５０に設定される位相差検出エリアのサイズは、図２に示した位相差検出エリア５３よりも大きくすることが可能である。
このため、受光面５０に設定される位相差検出エリアの最大サイズ及び最小サイズを考慮して、設定可能な全ての位相差検出エリアの各々に、上記境界が外側に存在する位相差検出用画素行が少なくとも１つ含まれる構成とするのが好ましい。
具体的には、図８に示す撮像素子５において、以下の条件（１）及び条件（２）を満たす構成とすることで、設定可能な全ての位相差検出エリアの各々に、上記境界が外側に存在する位相差検出用画素行が少なくとも１つ含まれる構成となる。
条件（１）
直線Ｎ１と直線Ｎ２の行方向Ｘ間の距離は、位相差検出エリアの最大サイズの行方向Ｘの幅よりも大きい。
条件（２）
第一の位相差検出用画素行Ｍ１とこれに隣接する第二の位相差検出用画素行Ｍ２の間の距離は、位相差検出エリアの最小サイズの列方向Ｙの幅よりも小さい。
以上の条件を満たす構成とすることで、どのようなサイズの位相差検出エリアが設定されても、その設定された位相差検出エリアによって撮像される被写体像の位相差を高精度に算出することができ、合焦精度を向上させることができる。
また、第一の変形例によれば、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２が周期的に配列されているため、デジタル信号処理部１７が行う補間補正処理のアルゴリズムを簡略化することができる。
（第二の変形例）
図９は、図２に示す受光面５０の第二の変形例を示す拡大模式図である。
図９に示した第二の変形例の撮像素子５は、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２が、Ｎを２以上の自然数として、Ｎ個（図９の例では２個）おきに交互に列方向Ｙに周期性をもって配列されている点が、第一の変形例の撮像素子５とは異なる。その他の構成は、第一の変形例の撮像素子５と同じである。
この第二の変形例の構成では、例えば、図２の行方向Ｘにおいて中央にある５つの位相差検出エリア５３の各々と、この各々の行方向Ｘの両隣にある位相差検出エリア５３との間の領域に直線Ｎ１と直線Ｎ２の少なくとも一方があることで、図２に示した各位相差検出エリア５３には、その外側に上記境界が存在する位相差検出用画素行が少なくとも１つ含まれることになる。
このように、各位相差検出エリア５３に、境界を跨がない位相差検出用画素行が必ず存在することで、各位相差検出エリア５３で撮像した被写体像の位相差を精度よく算出することができる。この結果、デジタルカメラの合焦精度を向上させることができる。
また、第一の変形例と同様に、受光面５０に設定される位相差検出エリアの最大サイズ及び最小サイズを考慮して、設定可能な全ての位相差検出エリアの各々に、上記境界が外側に存在する位相差検出用画素行が少なくとも１つ含まれる構成とするのが好ましい。
具体的には、図９に示す撮像素子５において、以下の条件（３）及び条件（４）を満たす構成とすることで、設定可能な全ての位相差検出エリアの各々に、上記境界が外側に存在する位相差検出用画素行が少なくとも１つ含まれる構成とすることができる。
条件（３）
直線Ｎ１と直線Ｎ２の行方向Ｘ間の距離は、位相差検出エリアの最大サイズの行方向Ｘの幅よりも大きい。
条件（４）
列方向Ｙで隣接する位相差検出用画素行間の距離に上記Ｎを乗じて得られた値が、位相差検出エリアの最小サイズの列方向Ｙの幅よりも小さい。
以上の条件を満たす構成とすることで、どのようなサイズの位相差検出エリアが設定されても、その設定された位相差検出エリアによって撮像される被写体像の位相差を高精度に算出することができ、合焦精度を向上させることができる。
また、第二の変形例によれば、第一の位相差検出用画素行Ｍ１の列方向Ｙの隣には他の第一の位相差検出用画素行Ｍ１が必ず存在し、第二の位相差検出用画素行Ｍ２の列方向Ｙの隣には他の第二の位相差検出用画素行Ｍ２が必ず存在する。
このため、第一の位相差検出用画素行Ｍ１又は第二の位相差検出用画素行Ｍ２の任意の画素に欠陥があった場合に、この画素の欠陥補正を、この画素と同じ構成の隣接画素の出力信号を用いて行うことができる。したがって、欠陥画素があった場合の欠陥補正の精度を向上させることができる。
また、第二の変形例によれば、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２が周期的に配列されているため、デジタル信号処理部１７が行う補間補正処理のアルゴリズムを簡略化することができる。
（第三の変形例）
第一の変形例と第二の変形例では、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２が列方向Ｙに周期的に配列される構成とした。
この変形例として、第一の位相差検出用画素行Ｍ１と第二の位相差検出用画素行Ｍ２が列方向Ｙにランダムに配置されていてもよい。このような構成であっても撮像画像品質を向上させることができる。
（第四の変形例）
撮像素子５は、上記の境界の位置が異なる３つ以上の位相差検出用画素行が受光面５０に形成された構成であってもよい。このような構成であっても撮像画像品質を向上させることができる。
なお、この構成においても、３つ以上の位相差検出用画素行が列方向Ｙに周期的に配列されることで、補間補正のアルゴリズムを簡略化することができる。また、上記の条件（１），（２）又は（３），（４）を満たす構成とすることで、合焦精度を向上させることができる。
（第五の変形例）
第一のペアＰ１と第二のペアＰ２は、それぞれ、列方向Ｙの位置が同じ２つの位相差検出用画素によって構成されるものとしたが、列方向Ｙの位置が異なる２つの位相差検出用画素によって第一のペアＰ１と第二のペアＰ２が構成されてもよい。
図１０は、図２に示す受光面５０の第五の変形例を示す拡大模式図である。
図１０に示す撮像素子５は、列方向Ｙに隣接する２つのＧＢ画素行のうちの上の画素行の直線Ｎよりも左側において、撮像用画素６０ｇが配置されるべき位置に左偏心位相差検出用画素６１Ｇｇｌが配置され、この画素行の直線Ｎよりも右側において、撮像用画素６０ｂが配置されるべき位置に左偏心位相差検出用画素６１Ｇｂｌが配置されている。
また、図１０に示す撮像素子５は、上記２つのＧＢ画素行のうちの下の画素行の直線Ｎよりも左側において、撮像用画素６０ｂが配置されるべき位置に右偏心位相差検出用画素６１Ｇｂｒが配置され、この画素行の直線Ｎよりも右側において、撮像用画素６０ｇが配置されるべき位置に右偏心位相差検出用画素６１Ｇｇｒが配置されている。
図１０に示す撮像素子５では、直線Ｎよりも左側にある左偏心位相差検出用画素６１Ｇｇｌと、この左偏心位相差検出用画素６１Ｇｂｌに対して斜め右下方向に最近接する右偏心位相差検出用画素６１Ｇｂｒとが第一のペアＰ１を構成する。
また、図１０に示す撮像素子５では、直線Ｎよりも右側にある右偏心位相差検出用画素６１Ｇｇｒと、この右偏心位相差検出用画素６１Ｇｇｒに対して斜め右上方向に最近接する左偏心位相差検出用画素６１Ｇｂｌとが第二のペアＰ２を構成する。
そして、行方向Ｘに並ぶ複数の第一のペアＰ１と、行方向Ｘに並ぶ複数の第二のペアＰ２とによって、位相差検出用画素行Ｍａが構成されている。
図１０に示す構成であっても、図３に示す撮像素子５と同様の効果を得ることができる。なお、図１０に示す構成においても、第一の変形例から第四の変形例で説明した構成を適用することができる。
（第六の変形例）
撮像素子５は、多数の画素がベイヤ配列以外のパターンにしたがって配置される構成であってもよい。
図１１は、図２に示す受光面５０の第六の変形例を示す拡大模式図である。
図１１に示す撮像素子５の画素は、Ｒ光を光電変換する画素の数と、Ｂ光を光電変換する画素の数と、Ｇ光を光電変換する画素の数との比が１：１：２．５となるパターンにしたがって配置されている。
このパターンは、図１２に示したように、撮像用画素６０ｒ，６０ｇ，６０ｂを含むユニットＵ１と、ユニットＵ１において撮像用画素６０ｒと撮像用画素６０ｂの位置を入れ替えたユニットＵ２とが市松状に配置されたパターンである。
ユニットＵ１は、撮像用画素６０ｇが４隅と中央に配置されている。また、ユニットＵ１において、中央の撮像用画素６０ｇの行方向Ｘの両隣には撮像用画素６０ｒが配置され、中央の撮像用画素６０ｇの列方向Ｙの両隣には撮像用画素６０ｂが配置されている。図１２に示す画素配列の構成及び効果については、国際公開ＷＯ１３／１６８４９３号公報に詳細が記載されているため説明を省略する。
図１１に示す第六の変形例の撮像素子５は、図１２に示した画素配列において、直線Ｎよりも左側の撮像用画素６０ｇが配置されるべき位置の一部に左偏心位相差検出用画素６１Ｇｇｌが配置され、直線Ｎよりも右側の撮像用画素６０ｇが配置されるべき位置の一部に右偏心位相差検出用画素６１Ｇｇｒが配置された構成である。
また、図１１に示す撮像素子５は、図１２に示した画素配列において、直線Ｎよりも左側の撮像用画素６０ｂ，６０ｒが配置されるべき位置の一部に右偏心位相差検出用画素６１Ｇｂｒが配置され、直線Ｎよりも右側の撮像用画素６０ｂ，６０ｒが配置されるべき位置の一部に左偏心位相差検出用画素６１Ｇｂｌが配置された構成である。
図１１に示す撮像素子５では、左偏心位相差検出用画素６１Ｇｇｌと、これの右斜め下方向にある右偏心位相差検出用画素６１Ｇｂｒとにより第一のペアＰ１が構成される。
また、右偏心位相差検出用画素６１Ｇｇｒと、これの右斜め下方向にある左偏心位相差検出用画素６１Ｇｂｌとにより第二のペアＰ２が構成される。
そして、複数の第一のペアＰ１と複数の第二のペアＰ２とによって位相差検出用画素行Ｍｂが構成されている。
図１１に示す撮像素子５によれば、図３に示す撮像素子５と同様の効果を得ることができる。なお、図１１に示す構成においても、第一の変形例から第四の変形例で説明した構成を適用することができる。
以下では、撮像装置としてスマートフォンの構成について説明する。
図１３は、本発明の撮像装置の一実施形態であるスマートフォン２００の外観を示すものである。
図１３に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示部としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。
また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６と、操作部２０７と、カメラ部２０８とを備えている。
なお、筐体２０１の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造やスライド機構を有する構成を採用したりすることもできる。
図１４は、図１３に示すスマートフォン２００の構成を示すブロック図である。
図１４に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０とを備える。
また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。
無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Ｗｅｂデータやストリーミングデータなどの受信を行う。
表示入力部２０４は、主制御部２２０の制御により、画像（静止画像および動画像）や文字情報などを表示して視覚的にユーザに情報を伝達するとともに、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３とを備える。
表示パネル２０２は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）などを表示デバイスとして用いたものである。
操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、ユーザの指や尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスをユーザの指や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。
図１３に示すように、本発明の撮像装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。
係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。
更に、外縁部分の幅は、筐体２０１の大きさなどに応じて適宜設計されるものである。更にまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。
通話部２１１は、スピーカ２０５やマイクロホン２０６を備え、マイクロホン２０６を通じて入力されたユーザの音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０あるいは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力させたりするものである。
また、図１３に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。
操作部２０７は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図１３に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。
記憶部２１２は、主制御部２２０の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。
また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（ｆｌａｓｈ ｍｅｍｏｒｙ ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ ｄｉｓｋ ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ ｃａｒｄ ｍｉｃｒｏ ｔｙｐｅ）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの格納媒体を用いて実現される。
外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４など）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）など）により直接的又は間接的に接続するためのものである。
スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ ｃａｒｄ）やＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるＰＤＡ、有／無線接続されるパーソナルコンピュータ、イヤホンなどがある。外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達することや、スマートフォン２００の内部のデータが外部機器に伝送されるようにすることができる。
ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、ＧＰＳ衛星ＳＴ１〜ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン２００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部２１４は、無線通信部２１０や外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
モーションセンサ部２１５は、例えば、３軸の加速度センサなどを備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向や加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。
電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。
主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。また、主制御部２２０は、無線通信部２１０を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Ｗｅｂページを閲覧するＷｅｂブラウジング機能などがある。
また、主制御部２２０は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。
更に、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じたユーザ操作を検出する操作検出制御を実行する。表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。
なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じたユーザ操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。
更に、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
カメラ部２０８は、図１に示したデジタルカメラにおける外部メモリ制御部２０、記録媒体２１、表示制御部２２、表示部２３、及び操作部１４以外の構成を含む。カメラ部２０８によって生成された撮像画像データは、記憶部２１２に記録したり、外部入出力部２１３や無線通信部２１０を通じて出力したりすることができる。
図１３に示すスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよい。
また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示することや、操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用することができる。
また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。更には、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。
その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等などを付加して記憶部２１２に記録したり、外部入出力部２１３や無線通信部２１０を通じて出力したりすることもできる。
以上のような構成のスマートフォン２００においても、図１、図５に示したデジタル信号処理部１７が上述した処理を行うことで、高品質の撮像が可能になる。
なお、上記した実施形態及び各変形例の撮像素子５において、Ｒ信号を出力する画素、Ｇ信号を出力する画素、Ｂ信号を出力する画素の他に、白色光を光電変換するホワイト画素（例えばカラーフィルタ非搭載の画素）があるものにおいても、本願発明を適用可能である。
この場合は、ホワイト画素が配置されるべき位置と、Ｒ信号を出力する画素又はＢ信号を出力する画素が配置されるべき位置とに位相検出用画素が配置される。
また、上記した実施形態及び各変形例の撮像素子５は、３色の光を分光して光電変換するものとしたが、分光できる色の数は輝度信号への寄与度が最大となる色を含む２色であっても本発明を適用可能である。
また、上記した実施形態及び各変形例の撮像素子５において、左偏心位相差検出用画素６１Ｇｇｌ、右偏心位相差検出用画素６１Ｇｇｒ、左偏心位相差検出用画素６１Ｇｂｌ、及び、右偏心位相差検出用画素６１Ｇｂｒがそれぞれ光電変換する光の色は、その色の輝度信号への寄与度によって決まる。
例えば、撮像素子５が内視鏡等の用途で用いられる場合には、各画素に対応して生成したＲ信号、Ｇ信号、及び、Ｂ信号のうち、Ｒ信号の割合を最大として輝度信号を生成することが考えられる。
この場合には、左偏心位相差検出用画素６１Ｇｇｌ、右偏心位相差検出用画素６１Ｇｇｒ、左偏心位相差検出用画素６１Ｇｂｌ、及び、右偏心位相差検出用画素６１Ｇｂｒは、それぞれＲ光を光電変換する画素となる。
そして、直線Ｎ又は直線Ｎ１，Ｎ２よりも左側における撮像用画素６０ｒが配置されるべき位置の一部に左偏心位相差検出用画素６１Ｇｇｌが配置され、直線Ｎ又は直線Ｎ１，Ｎ２よりも右側における撮像用画素６０ｒが配置されるべき位置の一部に右偏心位相差検出用画素６１Ｇｇｒが配置される。
また、直線Ｎ又は直線Ｎ１，Ｎ２よりも左側における撮像用画素６０ｇ又は撮像用画素６０ｂが配置されるべき位置の一部に右偏心位相差検出用画素６１Ｇｂｒが配置され、直線Ｎ又は直線Ｎ１，Ｎ２よりも右側における撮像用画素６０ｇ又は撮像用画素６０ｂが配置されるべき位置の一部に左偏心位相差検出用画素６１Ｇｂｌが配置される。
このような構成により、位相差検出用画素の出力信号のうち、輝度信号への寄与度が最大となるＲ信号を、ゲイン補正によって画素信号として利用可能なレベルに戻すことができるため、撮像画像品質を向上させることができる。
また、上記した実施形態及び各変形例では、行方向Ｘに位相差を検出する場合を例にしたが、列方向Ｙに位相差を検出する場合にも、同様に本発明を適用可能である。
以上説明してきたように、本明細書には以下の事項が開示されている。
（１） 異なる色の光を光電変換する複数の画素を有し、上記複数の画素が規則的なパターンにしたがって二次元状に配置された受光面を有する撮像素子であって、上記複数の画素は、輝度信号を得るために最も寄与する第一の色成分の信号を出力する第一の画素と、上記第一の色成分以外の色成分の信号を出力する第二の画素とを含み、上記第一の画素は、基準位置に光電変換領域がある第一の撮像用画素と、上記基準位置に対して任意の方向の一方の方向に偏心した位置に光電変換領域がある第一の位相差検出用画素と、上記基準位置に対して上記任意の方向の他方の方向に偏心した位置に光電変換領域がある第二の位相差検出用画素と、を含み、上記第二の画素は、上記基準位置に光電変換領域がある第二の撮像用画素であり、上記受光面には、上記パターンに基づく上記第一の画素の配置位置に配置された上記第一の位相差検出用画素と、上記パターンに基づく上記第二の画素の配置位置に配置された上記第二の位相差検出用画素の複数の第一のペアと、上記パターンに基づく上記第一の画素の配置位置に配置された上記第二の位相差検出用画素と、上記パターンに基づく上記第二の画素の配置位置に配置された上記第一の位相差検出用画素の複数の第二のペアと、を含む上記任意の方向に配列されたペアから構成されるペア行が形成されており、上記ペア行に含まれる上記複数の第一のペアは、上記ペア行の上記任意の方向における任意の位置よりも上記一方の方向側に配置されており、上記ペア行に含まれる上記複数の第二のペアは、上記ペア行の上記任意の方向における上記任意の位置よりも上記他方の方向側に配置されている撮像素子。
（２） （１）記載の撮像素子であって、上記受光面には、上記任意の方向と直交する直交方向に配列された複数の上記ペア行が形成されており、上記複数のペア行は、上記任意の方向における上記任意の位置が異なる複数パターンのペア行を含む撮像素子。
（３） （２）記載の撮像素子であって、上記複数のペア行は、上記任意の方向における上記任意の位置が異なる第一のペア行及び第二のペア行を含み、上記第一のペア行と上記第二のペア行は上記直交方向に周期的に配列されている撮像素子。
（４） （３）記載の撮像素子であって、上記第一のペア行と上記第二のペア行は上記直交方向に交互に配列されている撮像素子。
（５） （３）記載の撮像素子であって、上記第一のペア行と上記第二のペア行は、Ｎを２以上の自然数として、上記直交方向に、Ｎ個おきに交互に配列されている撮像素子。
（６） （２）〜（５）のいずれか１項記載の撮像素子であって、上記受光面には、焦点を合わせる対象となる被写体に対応する範囲が設定可能であり、設定可能な全ての上記範囲の各々には、上記範囲の外側に上記任意の位置が存在する上記ペア行が少なくとも１つ含まれる撮像素子。
（７） （１）〜（６）のいずれか１項記載の撮像素子であって、上記第一の画素は、緑色の光を光電変換するものであり、上記第二の画素は、青色の光を光電変換するものである撮像素子。
（８） （１）記載の撮像素子であって、上記任意の位置は、上記撮像素子の受光面の前方に配置されるフォーカスレンズを含む撮像光学系の光軸と上記受光面との交点を通りかつ上記任意の方向と直交する直交方向に伸びる直線の近傍に設定されている撮像素子。
（９） （１）〜（８）のいずれか１項記載の撮像素子と、上記撮像素子の上記複数の画素から出力される信号に基づいて撮像画像データを生成する画像処理部と、を備える撮像装置。
（１０） （９）記載の撮像装置であって、上記画像処理部は、上記パターンに基づく上記第一の画素の配置位置に配置された上記第一の位相差検出用画素の出力信号にゲインを乗じてその第一の位相差検出用画素の位置に対応する画素信号を生成し、上記パターンに基づく上記第一の画素の配置位置に配置された上記第二の位相差検出用画素の出力信号にゲインを乗じてその第二の位相差検出用画素の位置に対応する画素信号を生成し、上記パターンに基づく上記第二の画素の配置位置に配置された上記第一の位相差検出用画素の位置に対応する画素信号を、その第一の位相差検出用画素の周囲にある上記第二の撮像用画素の出力信号に基づいて補間生成し、上記パターンに基づく上記第二の画素の配置位置に配置された上記第二の位相差検出用画素の位置に対応する画素信号を、その第二の位相差検出用画素の周囲にある上記第二の撮像用画素の出力信号に基づいて補間生成する補正部と、上記第一の撮像用画素の出力信号と、上記第二の撮像用画素の出力信号と、上記補正部により生成された画素信号とに基づいて、輝度信号及び色差信号からなる上記撮像画像データを生成する撮像画像データ生成部と、を備える撮像装置。
（１１） （１）〜（８）のいずれか１項記載の撮像素子と、上記撮像素子の上記複数の画素から出力される信号に基づいて撮像画像データを生成するプロセッサと、を備える撮像装置。
（１２） （１１）記載の撮像装置であって、上記プロセッサは、上記パターンに基づく上記第一の画素の配置位置に配置された上記第一の位相差検出用画素の出力信号にゲインを乗じてその第一の位相差検出用画素の位置に対応する画素信号を生成し、上記パターンに基づく上記第一の画素の配置位置に配置された上記第二の位相差検出用画素の出力信号にゲインを乗じてその第二の位相差検出用画素の位置に対応する画素信号を生成し、上記パターンに基づく上記第二の画素の配置位置に配置された上記第一の位相差検出用画素の位置に対応する画素信号を、その第一の位相差検出用画素の周囲にある上記第二の撮像用画素の出力信号に基づいて補間生成し、上記パターンに基づく上記第二の画素の配置位置に配置された上記第二の位相差検出用画素の位置に対応する画素信号を、その第二の位相差検出用画素の周囲にある上記第二の撮像用画素の出力信号に基づいて補間生成し、上記第一の撮像用画素の出力信号と、上記第二の撮像用画素の出力信号と、上記補正部により生成された画素信号とに基づいて、輝度信号及び色差信号からなる上記撮像画像データを生成する撮像装置。
本発明によれば、輝度信号への寄与度が最大となる位相差検出用画素の出力信号の補正方法としてゲイン補正の採用を可能にして撮像画像品質を向上させることのできる撮像素子と、この撮像素子を備える撮像装置を提供することができる。
以上、本発明を特定の実施形態によって説明したが、本発明はこの実施形態に限定されるものではなく、開示された発明の技術思想を逸脱しない範囲で種々の変更が可能である。
本出願は、２０１６年６月１日出願の日本特許出願（特願２０１６−１１０３９３）に基づくものであり、その内容はここに取り込まれる。
１ 撮像レンズ
２ 絞り
５ 撮像素子
６ アナログ信号処理部
７ アナログデジタル変換回路
８ レンズ駆動部
９ 絞り駆動部
１０撮像素子駆動部
１１ システム制御部
１４ 操作部
１５ メモリ制御部
１６ メインメモリ
１７ デジタル信号処理部
１７１ ゲイン補正処理部
１７２ 補間補正処理部
１７３ 撮像画像データ生成部
１９ 焦点検出部
２０ 外部メモリ制御部
２１ 記録媒体
２２ 表示制御部
２３ 表示部
２４ 制御バス
２５ データバス
５０ 受光面
５３ 位相差検出エリア
６０ｒ、６０ｇ、６０ｂ 撮像用画素
６１Ｇｇｒ、６０Ｇｂｒ 右偏心位相差検出用画素
６１Ｇｇｌ、６０Ｇｂｌ 左偏心位相差検出用画素
６３ 遮光膜
６３ａ、６３ｂ、６３ｃ 開口
６４、６４ｂ、６４ｃ 光電変換領域
Ｐ１ 第一のペア
Ｐ２ 第二のペア
Ｍ、Ｍａ、Ｍｂ 位相差検出用画素行
Ｍ１ 第一の位相差検出用画素行
Ｍ２ 第二の位相差検出用画素行
Ｎ、Ｎ１、Ｎ２ 直線
Ｘ 行方向
Ｙ 列方向
Ｕ１、Ｕ２ ユニット
２００ スマートフォン
２０１ 筐体
２０２ 表示パネル
２０３ 操作パネル
２０４ 表示入力部
２０５ スピーカ
２０６ マイクロホン
２０７ 操作部
２０８ カメラ部
２１０ 無線通信部
２１１ 通話部
２１２ 記憶部
２１３ 外部入出力部
２１４ ＧＰＳ受信部
２１５ モーションセンサ部
２１６ 電源部
２１７ 内部記憶部
２１８ 外部記憶部
２２０ 主制御部
ＳＴ１〜ＳＴｎ ＧＰＳ衛星

Claims (10)

  1. 異なる色の光を光電変換する複数の画素を有し、前記複数の画素が規則的なパターンにしたがって二次元状に配置された受光面を有する撮像素子であって、
    前記複数の画素は、輝度信号を得るために最も寄与する第一の色成分の信号を出力する第一の画素と、前記第一の色成分以外の色成分の信号を出力する第二の画素とを含み、
    前記第一の画素は、基準位置に光電変換領域がある第一の撮像用画素と、前記基準位置に対して任意の方向の一方の方向に偏心した位置に光電変換領域がある第一の位相差検出用画素と、前記基準位置に対して前記任意の方向の他方の方向に偏心した位置に光電変換領域がある第二の位相差検出用画素と、を含み、
    前記第二の画素は、前記基準位置に光電変換領域がある第二の撮像用画素であり、
    前記受光面には、前記パターンに基づく前記第一の画素の配置位置に配置された前記第一の位相差検出用画素と、前記パターンに基づく前記第二の画素の配置位置に配置された前記第二の位相差検出用画素の複数の第一のペアと、前記パターンに基づく前記第一の画素の配置位置に配置された前記第二の位相差検出用画素と、前記パターンに基づく前記第二の画素の配置位置に配置された前記第一の位相差検出用画素の複数の第二のペアと、を含む前記任意の方向に配列されたペアから構成されるペア行が形成されており、
    前記ペア行に含まれる前記複数の第一のペアは、前記ペア行の前記任意の方向における任意の位置よりも前記一方の方向側に配置されており、
    前記ペア行に含まれる前記複数の第二のペアは、前記ペア行の前記任意の方向における前記任意の位置よりも前記他方の方向側に配置されている撮像素子。
  2. 請求項１記載の撮像素子であって、
    前記受光面には、前記任意の方向と直交する直交方向に配列された複数の前記ペア行が形成されており、
    前記複数のペア行は、前記任意の方向における前記任意の位置が異なる複数パターンのペア行を含む撮像素子。
  3. 請求項２記載の撮像素子であって、
    前記複数のペア行は、前記任意の方向における前記任意の位置が異なる第一のペア行及び第二のペア行を含み、前記第一のペア行と前記第二のペア行は前記直交方向に周期的に配列されている撮像素子。
  4. 請求項３記載の撮像素子であって、
    前記第一のペア行と前記第二のペア行は前記直交方向に交互に配列されている撮像素子。
  5. 請求項３記載の撮像素子であって、
    前記第一のペア行と前記第二のペア行は、Ｎを２以上の自然数として、前記直交方向に、Ｎ個おきに交互に配列されている撮像素子。
  6. 請求項２〜５のいずれか１項記載の撮像素子であって、
    前記受光面には、焦点を合わせる対象となる被写体に対応する範囲が設定可能であり、設定可能な全ての前記範囲の各々には、前記範囲の外側に前記任意の位置が存在する前記ペア行が少なくとも１つ含まれる撮像素子。
  7. 請求項１〜６のいずれか１項記載の撮像素子であって、
    前記第一の画素は、緑色の光を光電変換するものであり、
    前記第二の画素は、青色の光を光電変換するものである撮像素子。
  8. 請求項１記載の撮像素子であって、
    前記任意の位置は、前記撮像素子の受光面の前方に配置されるフォーカスレンズを含む撮像光学系の光軸と前記受光面との交点を通りかつ前記任意の方向と直交する直交方向に伸びる直線の近傍に設定されている撮像素子。
  9. 請求項１〜８のいずれか１項記載の撮像素子と、
    前記撮像素子の前記複数の画素から出力される信号に基づいて撮像画像データを生成する画像処理部と、を備える撮像装置。
  10. 請求項９記載の撮像装置であって、
    前記画像処理部は、
    前記パターンに基づく前記第一の画素の配置位置に配置された前記第一の位相差検出用画素の出力信号にゲインを乗じて当該第一の位相差検出用画素の位置に対応する画素信号を生成し、前記パターンに基づく前記第一の画素の配置位置に配置された前記第二の位相差検出用画素の出力信号にゲインを乗じて当該第二の位相差検出用画素の位置に対応する画素信号を生成し、前記パターンに基づく前記第二の画素の配置位置に配置された前記第一の位相差検出用画素の位置に対応する画素信号を、当該第一の位相差検出用画素の周囲にある前記第二の撮像用画素の出力信号に基づいて補間生成し、前記パターンに基づく前記第二の画素の配置位置に配置された前記第二の位相差検出用画素の位置に対応する画素信号を、当該第二の位相差検出用画素の周囲にある前記第二の撮像用画素の出力信号に基づいて補間生成する補正部と、
    前記第一の撮像用画素の出力信号と、前記第二の撮像用画素の出力信号と、前記補正部により生成された画素信号とに基づいて、輝度信号及び色差信号からなる前記撮像画像データを生成する撮像画像データ生成部と、を備える撮像装置。
JP2018520726A 2016-06-01 2017-04-27 撮像素子及び撮像装置 Active JP6427720B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016110393 2016-06-01
JP2016110393 2016-06-01
PCT/JP2017/016820 WO2017208702A1 (ja) 2016-06-01 2017-04-27 撮像素子及び撮像装置

Publications (2)

Publication Number Publication Date
JP6427720B2 true JP6427720B2 (ja) 2018-11-21
JPWO2017208702A1 JPWO2017208702A1 (ja) 2018-11-29

Family

ID=60479392

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018520726A Active JP6427720B2 (ja) 2016-06-01 2017-04-27 撮像素子及び撮像装置

Country Status (4)

Country Link
US (1) US10694130B2 (ja)
JP (1) JP6427720B2 (ja)
CN (1) CN109196857B (ja)
WO (1) WO2017208702A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7176518B2 (ja) * 2017-07-24 2022-11-22 ソニーグループ株式会社 撮像装置、および画像処理方法、並びにプログラム
DE102019128781A1 (de) * 2019-10-24 2021-04-29 Leica Camera Aktiengesellschaft Verfahren zur Erzeugung eines Ausgabesignals eines PDAF-Bildpunkts
KR20220033357A (ko) * 2020-09-09 2022-03-16 삼성전자주식회사 이미지 센서 및 이미지 센서의 동작 방법

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100679856B1 (ko) * 2005-06-09 2007-02-07 (주) 픽셀플러스 좌우상하 비율에 따라 서로 다른 비율로 배치되는마이크로렌즈를 포함하는 이미지 센서
JP4983271B2 (ja) 2007-01-19 2012-07-25 株式会社ニコン 撮像装置
WO2009022634A1 (en) * 2007-08-10 2009-02-19 Canon Kabushiki Kaisha Image-pickup apparatus and control method therof
JP2009115893A (ja) * 2007-11-02 2009-05-28 Canon Inc 撮像装置
JP4978449B2 (ja) * 2007-12-10 2012-07-18 ソニー株式会社 撮像装置
JP5012495B2 (ja) 2007-12-26 2012-08-29 株式会社ニコン 撮像素子、焦点検出装置、焦点調節装置および撮像装置
JP5225151B2 (ja) * 2008-03-11 2013-07-03 キヤノン株式会社 撮像装置及び画像処理方法
JP5552214B2 (ja) * 2008-03-11 2014-07-16 キヤノン株式会社 焦点検出装置
JP5620992B2 (ja) * 2010-07-12 2014-11-05 富士フイルム株式会社 固体撮像装置
JP5513326B2 (ja) * 2010-09-07 2014-06-04 キヤノン株式会社 撮像素子及び撮像装置
CN103430073B (zh) * 2011-03-31 2014-12-31 富士胶片株式会社 摄像装置及摄像装置的控制方法
KR101853817B1 (ko) * 2011-07-20 2018-05-02 삼성전자주식회사 촬상 소자
WO2013046973A1 (ja) * 2011-09-29 2013-04-04 富士フイルム株式会社 固体撮像素子、撮像装置、及び合焦制御方法
KR20130038035A (ko) * 2011-10-07 2013-04-17 삼성전자주식회사 촬상소자
JP5979849B2 (ja) * 2011-11-21 2016-08-31 キヤノン株式会社 撮像素子及び撮像装置
JP2013157531A (ja) * 2012-01-31 2013-08-15 Sharp Corp 固体撮像素子および電子情報機器
CN104221369B (zh) * 2012-03-28 2016-02-10 富士胶片株式会社 摄像元件以及使用该摄像元件的摄像装置和摄像方法
JP5947602B2 (ja) * 2012-04-11 2016-07-06 キヤノン株式会社 撮像装置
WO2013179899A1 (ja) * 2012-06-01 2013-12-05 富士フイルム株式会社 撮像装置
JP5529928B2 (ja) * 2012-06-14 2014-06-25 オリンパスイメージング株式会社 撮像装置及び撮像装置の制御方法
WO2014006783A1 (ja) * 2012-07-06 2014-01-09 富士フイルム株式会社 撮像装置及び画像処理方法
JP5942757B2 (ja) * 2012-09-28 2016-06-29 株式会社ニコン 焦点検出装置および撮像装置
JP6288909B2 (ja) * 2012-10-19 2018-03-07 キヤノン株式会社 撮像素子及び撮像装置
DE112013005142T5 (de) * 2012-10-26 2015-08-06 Fujifilm Corporation Bildaufnahmevorrichtung und zugehöriges Fokussiersteuerverfahren
WO2014069228A1 (ja) * 2012-11-05 2014-05-08 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
WO2014091854A1 (ja) * 2012-12-11 2014-06-19 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、及び画像処理プログラム
JP6263035B2 (ja) * 2013-05-17 2018-01-17 キヤノン株式会社 撮像装置
JP6099536B2 (ja) * 2013-09-27 2017-03-22 オリンパス株式会社 画像処理装置、画像処理方法及び画像処理プログラム
WO2015045785A1 (ja) * 2013-09-30 2015-04-02 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
CN106133576B (zh) * 2014-03-25 2018-09-11 富士胶片株式会社 摄像装置及对焦控制方法

Also Published As

Publication number Publication date
CN109196857A (zh) 2019-01-11
US20190098240A1 (en) 2019-03-28
US10694130B2 (en) 2020-06-23
JPWO2017208702A1 (ja) 2018-11-29
WO2017208702A1 (ja) 2017-12-07
CN109196857B (zh) 2020-10-27

Similar Documents

Publication Publication Date Title
US9674461B2 (en) Imaging device and imaging method
JP5657182B2 (ja) 撮像装置及び信号補正方法
JP5542249B2 (ja) 撮像素子及びこれを用いた撮像装置及び撮像方法
JP5775977B2 (ja) 画像処理装置、撮像装置、画像処理方法、及び画像処理プログラム
JP6151632B2 (ja) 撮像モジュール及び撮像装置
JP5697801B2 (ja) 撮像装置及び自動焦点調節方法
JP6031587B2 (ja) 撮像装置、信号処理方法、信号処理プログラム
JP5982601B2 (ja) 撮像装置及び合焦制御方法
JP6165680B2 (ja) 撮像装置
JP5799178B2 (ja) 撮像装置及び合焦制御方法
JP5779726B2 (ja) 撮像装置及び露出決定方法
JP6989630B2 (ja) 撮像装置
JP5677625B2 (ja) 信号処理装置、撮像装置、信号補正方法
JP5978411B2 (ja) 撮像装置及び合焦制御方法
US11290635B2 (en) Imaging apparatus and image processing method
JP5542248B2 (ja) 撮像素子及び撮像装置
JP6427720B2 (ja) 撮像素子及び撮像装置
JP5677628B2 (ja) 撮像装置及び撮像方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180907

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180907

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180926

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181029

R150 Certificate of patent or registration of utility model

Ref document number: 6427720

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250