JP7337512B2 - IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD - Google Patents

IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD Download PDF

Info

Publication number
JP7337512B2
JP7337512B2 JP2019034468A JP2019034468A JP7337512B2 JP 7337512 B2 JP7337512 B2 JP 7337512B2 JP 2019034468 A JP2019034468 A JP 2019034468A JP 2019034468 A JP2019034468 A JP 2019034468A JP 7337512 B2 JP7337512 B2 JP 7337512B2
Authority
JP
Japan
Prior art keywords
pixel
unit pixel
signal
unit
imaging device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019034468A
Other languages
Japanese (ja)
Other versions
JP2020141206A (en
Inventor
槙子 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2019034468A priority Critical patent/JP7337512B2/en
Publication of JP2020141206A publication Critical patent/JP2020141206A/en
Application granted granted Critical
Publication of JP7337512B2 publication Critical patent/JP7337512B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Description

本発明は、複数の画素に対するアクセス制御を行う撮像素子、撮像装置および撮像素子の制御方法に関する。 The present invention relates to an image pickup device, an image pickup apparatus, and an image pickup device control method for controlling access to a plurality of pixels.

近年、画素信号を取得するだけでなく、付加機能を有する撮像装置が用いられている。例えば、撮像装置の固体撮像素子に配置された各画素は、瞳分割された複数の像の信号を取得することで、位相差検出方式による焦点検出が可能になる。関連する技術として、特許文献1の撮像装置が提案されている。特許文献1の撮像装置は、瞳分割された複数の像のA像信号とB像信号とを生成して、生成されたA像信号とB像信号との相関演算を行い、デフォーカス量を算出している。 2. Description of the Related Art In recent years, an imaging device that not only acquires pixel signals but also has additional functions has been used. For example, each pixel arranged in a solid-state imaging device of an imaging device acquires signals of a plurality of pupil-divided images, thereby enabling focus detection by a phase difference detection method. As a related technology, an imaging device is proposed in Japanese Patent Application Laid-Open No. 2002-200010. The imaging apparatus of Patent Document 1 generates an A image signal and a B image signal of a plurality of pupil-divided images, performs a correlation operation on the generated A image signal and the B image signal, and calculates a defocus amount. Calculated.

特開2014-157338号公報JP 2014-157338 A

特許文献1の撮像装置は、固体撮像素子に配置された複数の画素から画素信号を読み出す際、予め定められた方向に従って、順次、画素信号の読み出しを行う。画素信号の読み出しを水平方向に1ラインずつ順次行う方法で上下方向に瞳分割されたA像信号を取得する場合、同一垂直ラインのA像信号中に、概略1フレーム分のアクセス時間差が生じることとなる。B像信号の場合も同様である。動画や電子ファインダー用画像等、メカシャッタによる画素の遮光を伴わずに連続フレームの露光を行う場合、各画素へのアクセスが画素におけるフレームの露光終了に相当する。従って、各画素へのアクセス時間の差が、画素間の露光時間差となる。測定環境において光源が明滅する場合や、測定対象物に動体が含まれる場合等の状況においては、露光時間差に起因して、信号の読み出し中に同一垂直ラインのA像信号またはB像信号が変化することがある。A像信号またはB像信号が変化すると、両信号の相関演算の精度が低下する。その結果、瞳分割された像信号に基づく焦点検出の精度が低下する。 When reading out pixel signals from a plurality of pixels arranged in a solid-state imaging device, the imaging apparatus of Patent Document 1 sequentially reads out pixel signals in a predetermined direction. In the case of obtaining an A image signal that has been pupil-divided in the vertical direction by a method in which pixel signals are sequentially read out line by line in the horizontal direction, an access time difference of approximately one frame occurs in the A image signal of the same vertical line. becomes. The same applies to the B image signal. When exposure of continuous frames is performed without light shielding of pixels by a mechanical shutter, such as moving images and images for an electronic viewfinder, access to each pixel corresponds to the end of frame exposure in the pixel. Therefore, the difference in access time to each pixel becomes the exposure time difference between pixels. In situations such as when the light source blinks in the measurement environment or when the object to be measured includes a moving object, the A or B image signal of the same vertical line may change during signal readout due to exposure time differences. I have something to do. When the A image signal or the B image signal changes, the accuracy of the correlation calculation between both signals decreases. As a result, the accuracy of focus detection based on the pupil-divided image signal decreases.

本発明の目的は、瞳分割された像信号に基づく焦点検出の精度を向上させることができる撮像素子、撮像装置および撮像素子の制御方法を提供することにある。 SUMMARY OF THE INVENTION It is an object of the present invention to provide an image pickup device, an image pickup apparatus, and an image pickup device control method capable of improving the accuracy of focus detection based on a pupil-divided image signal.

上記目的を達成するために、本発明の撮像素子は、撮像領域に配置され、マイクロレンズの光軸から垂直方向または水平方向に偏芯した領域で受光した光に対応する画素信号を出力する行列状に配置された複数の画素と、前記マイクロレンズの光軸から垂直方向に偏芯した領域の画素から画素信号を読み出す場合に、前記垂直方向に対応する同じ列に配置された複数の画素から連続して画素信号を読み出す第1の制御を行い、前記マイクロレンズの光軸から前記水平方向に偏芯した領域の画素から画素信号を読み出す場合に、前記水平方向に対応する同じ行に配置された複数の画素から連続して画素信号を読み出す第2の制御を行う制御手段と、を備えることを特徴とする。 In order to achieve the above object, the image pickup device of the present invention is arranged in an image pickup area, and is a matrix for outputting pixel signals corresponding to light received in an area vertically or horizontally decentered from the optical axis of a microlens. When reading out pixel signals from a plurality of pixels arranged in a shape and pixels in a region eccentrically aligned in the vertical direction from the optical axis of the microlens, from the plurality of pixels arranged in the same column corresponding to the vertical direction When performing the first control of continuously reading out pixel signals and reading out pixel signals from the pixels in the region eccentrically aligned in the horizontal direction from the optical axis of the microlens, the and a control means for performing a second control for continuously reading out pixel signals from the plurality of pixels .

本発明によれば、瞳分割された像信号に基づく焦点検出の精度を向上させることができる。 According to the present invention, it is possible to improve the accuracy of focus detection based on a pupil-divided image signal.

撮像装置の構成を示すブロック図である。It is a block diagram which shows the structure of an imaging device. 第1実施形態に係る固体撮像素子の構成を示す構成図である。1 is a configuration diagram showing the configuration of a solid-state imaging device according to a first embodiment; FIG. 第1実施形態に係る固体撮像素子の駆動タイミングを示すタイミングチャートである。4 is a timing chart showing driving timings of the solid-state imaging device according to the first embodiment; 第1実施形態に係る処理の流れを示すフローチャートである。4 is a flowchart showing the flow of processing according to the first embodiment; 第2実施形態に係る固体撮像素子の構成を示す構成図である。FIG. 7 is a configuration diagram showing the configuration of a solid-state imaging device according to a second embodiment; 第2実施形態に係る固体撮像素子の駆動タイミングを示すタイミングチャートである。9 is a timing chart showing driving timings of the solid-state imaging device according to the second embodiment; 第3実施形態の固体撮像素子の全体構成を示す構成図である。It is a block diagram which shows the whole structure of the solid-state image sensor of 3rd Embodiment. 第3実施形態に係る固体撮像素子の画素エリアおよび単位画素セルの構成を示す構成図である。FIG. 11 is a configuration diagram showing configurations of a pixel area and a unit pixel cell of a solid-state imaging device according to a third embodiment; 第4実施形態に係る固体撮像素子の画素エリアおよび単位画素セルの構成を示す構成図である。FIG. 11 is a configuration diagram showing the configuration of a pixel area and a unit pixel cell of a solid-state imaging device according to a fourth embodiment; 第4実施形態に係る固体撮像素子の駆動タイミングを示すタイミングチャートである。It is a timing chart which shows the drive timing of the solid-state image sensor based on 4th Embodiment.

以下、本発明の各実施形態について図面を参照しながら詳細に説明する。しかしながら、以下の各実施形態に記載されている構成はあくまで例示に過ぎず、本発明の範囲は各実施形態に記載されている構成によって限定されることはない。 Hereinafter, each embodiment of the present invention will be described in detail with reference to the drawings. However, the configurations described in each embodiment below are merely examples, and the scope of the present invention is not limited by the configurations described in each embodiment.

<第1実施形態>
図1は、各実施形態の撮像装置の構成を示すブロック図である。撮像装置200は、固体撮像素子1、信号処理部2、制御部3、表示部4、記録部5、レンズ駆動部6および撮影レンズ7を有する。固体撮像素子1(撮像素子)は、撮影レンズ7によって形成される被写体の光学像を光電変換し、電気信号(画素信号)として出力する。信号処理部2は、固体撮像素子1が出力した画素信号に対して、補正処理や演算処理等の所定の処理を行い、撮像信号や焦点検出用信号を生成する。
<First Embodiment>
FIG. 1 is a block diagram showing the configuration of an imaging device according to each embodiment. The imaging device 200 has a solid-state imaging device 1 , a signal processing section 2 , a control section 3 , a display section 4 , a recording section 5 , a lens driving section 6 and a photographing lens 7 . The solid-state imaging device 1 (imaging device) photoelectrically converts an optical image of a subject formed by the photographing lens 7 and outputs it as an electric signal (pixel signal). The signal processing unit 2 performs predetermined processing such as correction processing and arithmetic processing on the pixel signals output from the solid-state imaging device 1 to generate imaging signals and focus detection signals.

制御部3は、撮像装置200の各機能ブロックを駆動するための制御信号を生成して、出力する。例えば、制御部3は、固体撮像素子1から取得した撮像信号に基づいて被写体のパターンを判定し、被写体のパターンに応じて焦点検出用信号の瞳の偏芯の優先方向を決定する。この場合、制御部3は、優先方向を判定する判定手段として機能し、固体撮像素子1の読み出しモードを指示する制御信号を生成する。また、制御部3は、焦点検出用信号を用いて、相関演算等によりデフォーカス量を演算し、レンズ駆動部6の制御信号を生成する。さらに、制御部3は、撮像信号に対して、現像や圧縮等の所定の信号処理を施す。制御部3は、例えば、CPUやRAM、ROM等を有する。この場合、ROMに格納されたプログラムがRAMに展開され、RAMに展開されたプログラムをCPUが実行することにより、制御部3の機能が実現されてもよい。 The control unit 3 generates and outputs a control signal for driving each functional block of the imaging device 200 . For example, the control unit 3 determines the pattern of the subject based on the imaging signal acquired from the solid-state imaging device 1, and determines the priority direction of the eccentricity of the pupil of the signal for focus detection according to the pattern of the subject. In this case, the control unit 3 functions as determination means for determining the priority direction, and generates a control signal for instructing the readout mode of the solid-state imaging device 1 . The control unit 3 also uses the focus detection signal to calculate the defocus amount by correlation calculation or the like, and generates a control signal for the lens driving unit 6 . Furthermore, the control unit 3 performs predetermined signal processing such as development and compression on the imaging signal. The control unit 3 has, for example, a CPU, RAM, ROM, and the like. In this case, the functions of the control unit 3 may be implemented by developing a program stored in the ROM into the RAM and causing the CPU to execute the program loaded into the RAM.

レンズ駆動部6は、撮影レンズ7を駆動し、制御部3からの制御信号に従って、ズーム制御やフォーカス制御、絞り制御等を行う。表示部4は、制御部3により信号処理が施された撮像信号や、撮像装置200の各種設定情報等を表示する。記録部5には、所定の記録媒体が着脱可能または着脱不能に接続される。記録部5は、制御部3が信号処理を施した撮像信号等を記録媒体に記録する。かかる記録媒体としては、例えば、フラッシュメモリ等の半導体メモリ等が適用され得る。撮影レンズ7は、撮像光学系やレンズユニット等であり、撮像装置200の本体から着脱可能または着脱不能である。撮影レンズ7は、被写体の光学像を固体撮像素子1の撮像面に入射させる。 A lens drive unit 6 drives a photographing lens 7 and performs zoom control, focus control, aperture control, etc. according to control signals from the control unit 3 . The display unit 4 displays an imaging signal subjected to signal processing by the control unit 3, various setting information of the imaging device 200, and the like. A predetermined recording medium is detachably or non-detachably connected to the recording unit 5 . The recording unit 5 records the imaging signal and the like subjected to signal processing by the control unit 3 on a recording medium. As such a recording medium, for example, a semiconductor memory such as a flash memory can be applied. The imaging lens 7 is an imaging optical system, a lens unit, or the like, and is detachable or non-detachable from the main body of the imaging device 200 . The photographing lens 7 causes an optical image of a subject to enter the imaging surface of the solid-state imaging device 1 .

図2は、第1実施形態に係る固体撮像素子1の構成を示す構成図である。図2(A)は、固体撮像素子1に設けられた単位画素セル10の構成を示す。単位画素セル10は、画素に対応する。各単位画素セル10には、それぞれマイクロレンズMLが設けられ、マイクロレンズMLに対応して、複数のフォトダイオードPD(PD_a、PD_b、PD_cおよびPD_d)が設けられる。例えば、単位画素セル10には、単一のマイクロレンズMLの下に、上下方向および左右方向にそれぞれ複数のフォトダイオードPDが設けられる。フォトダイオードPDは、光電変換手段に対応する。上下方向(V方向)は垂直方向に対応し、左右方向(H方向)は水平方向に対応する。以上の構成により、単位画素セル10内の各フォトダイオードPDに、それぞれマイクロレンズMLの光軸から偏芯した、異なる瞳を通過した光線を入射させることができる。 FIG. 2 is a configuration diagram showing the configuration of the solid-state imaging device 1 according to the first embodiment. FIG. 2A shows the configuration of a unit pixel cell 10 provided in the solid-state imaging device 1. FIG. A unit pixel cell 10 corresponds to a pixel. Each unit pixel cell 10 is provided with a microlens ML, and a plurality of photodiodes PD (PD_a, PD_b, PD_c and PD_d) are provided corresponding to the microlens ML. For example, the unit pixel cell 10 is provided with a plurality of photodiodes PD in vertical and horizontal directions under a single microlens ML. The photodiode PD corresponds to photoelectric conversion means. The vertical direction (V direction) corresponds to the vertical direction, and the horizontal direction (H direction) corresponds to the horizontal direction. With the above configuration, each photodiode PD in the unit pixel cell 10 can receive light rays that are decentered from the optical axis of the microlens ML and have passed through different pupils.

例えば、図2(B)の場合、フォトダイオードPD_aおよびPD_bに対応する領域は、マイクロレンズMLの光軸から、上下方向のうち一方の方向に偏芯した領域である。同様に、フォトダイオードPD_cおよびPD_dに対応する領域は、マイクロレンズMLの光軸から、上下方向のうち他方の方向に偏芯した領域である。アクセス順序制御部11は、フォトダイオードPD_aおよびPD_bから画素信号を出力させる場合、フォトダイオードPD_cおよびPD_dから画素信号を出力させないように制御する。これにより、単位画素セル10は、マイクロレンズMLの光軸から上下方向のうち一方の方向に偏芯した領域に対応するフォトダイオードPDから画素信号を出力する。一方、単位画素セル10は、上記偏芯した領域以外の領域に対応するフォトダイオードPDから画素信号を出力しない。図2(B)のように、単位画素セル10が上下方向に分割された構成を、「縦目」と称する。 For example, in the case of FIG. 2B, the regions corresponding to the photodiodes PD_a and PD_b are regions decentered in one of the vertical directions from the optical axis of the microlens ML. Similarly, the regions corresponding to the photodiodes PD_c and PD_d are regions decentered in the other vertical direction from the optical axis of the microlens ML. When the pixel signals are output from the photodiodes PD_a and PD_b, the access order control unit 11 performs control so that the pixel signals are not output from the photodiodes PD_c and PD_d. As a result, the unit pixel cell 10 outputs a pixel signal from the photodiode PD corresponding to a region that is decentered in one of the vertical directions from the optical axis of the microlens ML. On the other hand, the unit pixel cell 10 does not output a pixel signal from the photodiode PD corresponding to the region other than the eccentric region. A configuration in which the unit pixel cell 10 is vertically divided as shown in FIG. 2B is referred to as a “vertical grain”.

また、図2(C)の場合、フォトダイオードPD_aおよびPD_cに対応する領域は、マイクロレンズMLの光軸から、左右方向のうち一方の方向に偏芯した領域である。同様に、フォトダイオードPD_bおよびPD_dに対応する領域は、マイクロレンズMLの光軸から、左右方向のうち他方の方向に偏芯した領域である。アクセス順序制御部11は、フォトダイオードPD_aおよびPD_cから画素信号を出力させる場合、フォトダイオードPD_bおよびPD_dから画素信号を出力させないように制御する。これにより、単位画素セル10は、マイクロレンズMLの光軸から左右方向のうち一方の方向に偏芯した領域に対応するフォトダイオードPDから画素信号を出力する。一方、単位画素セル10は、上記偏芯した領域以外の領域に対応するフォトダイオードPDから画素信号を出力しない。図2(C)のように、単位画素セル10が左右方向に分割された構成を「横目」と称する。 Also, in the case of FIG. 2C, the regions corresponding to the photodiodes PD_a and PD_c are regions decentered in one of the left and right directions from the optical axis of the microlens ML. Similarly, the regions corresponding to the photodiodes PD_b and PD_d are regions decentered from the optical axis of the microlens ML in the other horizontal direction. When the pixel signals are output from the photodiodes PD_a and PD_c, the access order control unit 11 performs control so that the pixel signals are not output from the photodiodes PD_b and PD_d. As a result, the unit pixel cell 10 outputs a pixel signal from the photodiode PD corresponding to the region eccentric in one of the left and right directions from the optical axis of the microlens ML. On the other hand, the unit pixel cell 10 does not output a pixel signal from the photodiode PD corresponding to the region other than the eccentric region. A configuration in which the unit pixel cell 10 is divided in the horizontal direction as shown in FIG.

以上のように構成された単位画素セル10の各フォトダイオードPDで蓄積された電荷が、図2(B)のように単位画素セル10ごとに左右方向に合成されると、マイクロレンズMLの光軸から上下方向に偏芯された画素信号を取得することができる。左右方向の電荷の合成は、「PD_a+PD_b、PD_c+PD_d」により得られる。また、単位画素セル10の各フォトダイオードPDで蓄積された電荷が、図2(C)に示されるように、単位画素セル10ごとに上下方向に合成されると、マイクロレンズMLの光軸から左右方向に偏芯された画素信号を取得することができる。上下方向の電荷の合成は、「PD_a+PD_c、PD_b+PD_d」により得られる。上述したマイクロレンズMLの光軸から偏芯された画素信号は、瞳分割された像信号に基づく焦点検出用信号として、相関演算を用いたデフォーカス量の演算に用いられる。 When the charges accumulated in each photodiode PD of the unit pixel cell 10 configured as described above are combined in the horizontal direction for each unit pixel cell 10 as shown in FIG. It is possible to acquire pixel signals that are vertically eccentric from the axis. A combination of charges in the left-right direction is obtained by "PD_a+PD_b, PD_c+PD_d". In addition, when the charges accumulated in each photodiode PD of the unit pixel cell 10 are combined in the vertical direction for each unit pixel cell 10 as shown in FIG. A pixel signal eccentric in the horizontal direction can be obtained. A combination of charges in the vertical direction is obtained by "PD_a+PD_c, PD_b+PD_d". The pixel signal decentered from the optical axis of the microlens ML described above is used as a focus detection signal based on the pupil-divided image signal to calculate the defocus amount using correlation calculation.

図2(D)の場合、単位画素セル10の全てのフォトダイオードPDで蓄積された電荷が合成される。各電荷の合成は、「PD_a+PD_b+PD_c+PD_d」により得られる。この場合、撮像信号用に、マイクロレンズMLの光軸から偏芯されていない画素信号を取得することができる。図2(E)は、固体撮像素子1の単位画素セル10の構成を示す。各単位画素セル10には、各フォトダイオードPDのそれぞれに対応して、フォトダイオードPDへのアクセス手段である転送ゲートTX(TX_a、TX_b、TX_cおよびTX_d)が設けられる。 In the case of FIG. 2D, charges accumulated in all photodiodes PD of the unit pixel cell 10 are synthesized. The composite of each charge is obtained by "PD_a+PD_b+PD_c+PD_d". In this case, a pixel signal that is not decentered from the optical axis of the microlens ML can be obtained for the imaging signal. FIG. 2E shows the configuration of the unit pixel cell 10 of the solid-state imaging device 1. As shown in FIG. Each unit pixel cell 10 is provided with transfer gates TX (TX_a, TX_b, TX_c and TX_d), which are access means to the photodiodes PD, corresponding to the respective photodiodes PD.

(x)列(y)行の単位画素セル10の転送ゲートTX_aは、転送信号PTX_ab(y)およびPTX_ac(x)の双方がハイレベルのときアクティブとなる。単位画素セル10の転送ゲートTX_bは、転送信号PTX_ab(y)およびPTX_bd(x)の双方がハイレベルのときアクティブとなる。単位画素セル10の転送ゲートTX_cは、転送信号PTX_cd(y)およびPTX_ac(x)の双方がハイレベルのときアクティブとなる。単位画素セル10の転送ゲートTX_dは、転送信号PTX_cd(y)およびPTX_bd(x)の双方がハイレベルのときアクティブとなる。 The transfer gate TX_a of the unit pixel cell 10 of (x) column (y) row becomes active when both of the transfer signals PTX_ab(y) and PTX_ac(x) are at high level. The transfer gate TX_b of the unit pixel cell 10 becomes active when both of the transfer signals PTX_ab(y) and PTX_bd(x) are at high level. The transfer gate TX_c of the unit pixel cell 10 becomes active when both of the transfer signals PTX_cd(y) and PTX_ac(x) are at high level. The transfer gate TX_d of the unit pixel cell 10 becomes active when both of the transfer signals PTX_cd(y) and PTX_bd(x) are at high level.

各フォトダイオードPDは、対応する各転送ゲートTXがアクティブとなることで、ソースフォロワSFに接続される。ソースフォロワSFは、ゲートに入力された電荷に応じた電圧を画素信号として出力する。ソースフォロワSFのゲートはリセットゲートRESを介して基準電源VDDに接続される。リセットゲートRESは、リセット信号PRESがハイレベルのときアクティブとなる。リセットゲートRESがアクティブにされると、ゲート電圧が基準レベルにリセットされる。ソースフォロワSFの出力端は選択ゲートSEL_v(y)に接続される。選択ゲートSEL_v(y)は、選択信号PSEL_v(y)がハイレベルのときアクティブとなる。選択ゲートSEL_v(y)がアクティブになると、単位画素セル10の画素信号が出力される。 Each photodiode PD is connected to the source follower SF by activating the corresponding transfer gate TX. The source follower SF outputs a voltage corresponding to the charge input to the gate as a pixel signal. The gate of the source follower SF is connected to the reference power supply VDD through the reset gate RES. The reset gate RES becomes active when the reset signal PRES is at high level. When the reset gate RES is activated, the gate voltage is reset to the reference level. The output end of the source follower SF is connected to the selection gate SEL_v(y). The selection gate SEL_v(y) becomes active when the selection signal PSEL_v(y) is at high level. When the selection gate SEL_v(y) becomes active, the pixel signal of the unit pixel cell 10 is output.

図2(F)は、固体撮像素子1の全体構成を示す図である。図2(F)に示されるように、固体撮像素子1の撮像領域に、複数の単位画素セル10が二次元状(行列状)に配置される。図2(F)の例では、上下方向に4画素、左右方向に4画素の計16個の単位画素セル10が配置されている。固体撮像素子1に配置される単位画素セル10の数は任意の数であってよい。上下方向(垂直方向)と左右方向(水平方向)とのうち何れか一方の方向が第1の方向に対応し、他方の方向が第2の方向に対応する。第1の方向と第2の方向とは相互に直交する関係にある。第1の方向に配置される単位画素セル10の数と第2の方向に配置される単位画素セル10の数とは異なっていてもよい。制御手段としてのアクセス順序制御部11は、複数の単位画素セル10に共通に設けられる。アクセス順序制御部11は、各単位画素セル10へのアクセス順序を制御し、各単位画素セル10に対し駆動信号を発生する。 FIG. 2F is a diagram showing the overall configuration of the solid-state imaging device 1. As shown in FIG. As shown in FIG. 2F, a plurality of unit pixel cells 10 are arranged two-dimensionally (in a matrix) in the imaging region of the solid-state imaging device 1 . In the example of FIG. 2F, a total of 16 unit pixel cells 10, 4 pixels in the vertical direction and 4 pixels in the horizontal direction, are arranged. Any number of unit pixel cells 10 may be arranged in the solid-state imaging device 1 . One of the up-down direction (vertical direction) and the left-right direction (horizontal direction) corresponds to the first direction, and the other direction corresponds to the second direction. The first direction and the second direction are orthogonal to each other. The number of unit pixel cells 10 arranged in the first direction may be different from the number of unit pixel cells 10 arranged in the second direction. An access order control section 11 as control means is provided in common for the plurality of unit pixel cells 10 . The access order control section 11 controls the order of access to each unit pixel cell 10 and generates a drive signal for each unit pixel cell 10 .

図2(F)の例では、アクセス順序制御部11は、同一垂直ライン(x)列上に設けられた複数の単位画素セル10に対して、共通の転送信号PTX_ac(x)およびPTX_bd(x)を供給する。アクセス順序制御部11は、同一水平ライン(y)行上に設けられた複数の単位画素セル10に対して、共通の転送信号PTX_ab(y)およびPTX_cd(y)を供給する。アクセス順序制御部11は、同一水平ライン(y)行上に設けられた複数の単位画素セル10に対して、共通の選択信号PSEL_v(y)を供給する。同一垂直ライン(x)列上の複数の単位画素セル10は、共通の選択ゲートSEL_h(x)を介して後段のAD変換部12に接続される。アクセス順序制御部11は、選択ゲートSEL_h(x)に対して選択信号PSEL_h(x)を供給する。選択信号PSEL_h(x)がハイレベルのときに、選択ゲートSEL_h(x)がアクティブになる。以上の各転送信号および各選択信号として供給される信号レベルの組み合わせに応じて、任意の単位画素セル10中の任意のフォトダイオードPDをAD変換部12に電気的に接続させることができる。また、アクセス順序制御部11は、各単位画素セル10に対して、リセット信号PRESを供給する。AD変換部(AD変換器)は、単位画素セルが出力したアナログ信号をデジタル信号に変換する処理を行う信号処理手段であり、読み出し手段でもある。 In the example of FIG. 2F, the access order control unit 11 applies common transfer signals PTX_ac(x) and PTX_bd(x) to a plurality of unit pixel cells 10 provided on the same vertical line (x). ). The access order control unit 11 supplies common transfer signals PTX_ab(y) and PTX_cd(y) to a plurality of unit pixel cells 10 provided on the same horizontal line (y). The access order control unit 11 supplies a common selection signal PSEL_v(y) to a plurality of unit pixel cells 10 provided on the same horizontal line (y). A plurality of unit pixel cells 10 on the same vertical line (x) column are connected to the subsequent AD converter 12 via a common selection gate SEL_h(x). The access order control unit 11 supplies a selection signal PSEL_h(x) to the selection gate SEL_h(x). When the select signal PSEL_h(x) is at high level, the select gate SEL_h(x) becomes active. An arbitrary photodiode PD in an arbitrary unit pixel cell 10 can be electrically connected to the AD converter 12 according to a combination of signal levels supplied as each transfer signal and each selection signal. Also, the access order control unit 11 supplies a reset signal PRES to each unit pixel cell 10 . The AD converter (AD converter) is signal processing means for converting an analog signal output from the unit pixel cell into a digital signal, and is also reading means.

AD変換部12は、複数の単位画素セル10に共通に設けられ、保持手段およびAD変換手段を有する。AD変換部12は、光電変換手段(フォトダイオードPD)からの電流信号を電圧信号として保持し、デジタル信号に変換して後段の信号処理部2へ出力する。固体撮像素子1における各単位画素セル10へのアクセス順序の決定(x-yアドレス方式)の詳細は、上述した例には限定されない。 The AD conversion section 12 is provided in common for the plurality of unit pixel cells 10 and has a holding means and an AD conversion means. The AD conversion section 12 holds the current signal from the photoelectric conversion means (photodiode PD) as a voltage signal, converts it into a digital signal, and outputs it to the signal processing section 2 in the subsequent stage. Details of the determination of the order of access to each unit pixel cell 10 in the solid-state imaging device 1 (xy addressing method) are not limited to the above example.

図3は、第1実施形態に係る固体撮像素子1の駆動タイミングを示すタイミングチャートである。各選択信号のハイ期間に、各選択信号が入力されるゲートがアクティブとなる。図2(B)や図2(C)に示されるように、各単位画素セル10から取得される画素信号は、上下方向または左右方向に偏芯している。また、アクセス順序制御部11は、各単位画素セル10へのアクセス順序の異なる読み出しモードを選択する。以下における第1の読み出しモードは、第1の方向の複数の画素に対するアクセスを第2の方向の複数の画素に対するアクセスより優先させるモードである。第2の読み出しモードは、第2の方向の複数の画素に対するアクセスを第1の方向の複数の画素に対するアクセスより優先させるモードである。 FIG. 3 is a timing chart showing drive timings of the solid-state imaging device 1 according to the first embodiment. During the high period of each selection signal, the gate to which each selection signal is input becomes active. As shown in FIGS. 2B and 2C, the pixel signal obtained from each unit pixel cell 10 is vertically or horizontally eccentric. Also, the access order control unit 11 selects readout modes in which the order of access to each unit pixel cell 10 is different. A first readout mode below is a mode in which accesses to pixels in a first direction are prioritized over accesses to pixels in a second direction. A second readout mode is a mode in which access to the plurality of pixels in the second direction is prioritized over access to the plurality of pixels in the first direction.

図3(A)は、第1の読み出しモードにおける、画素信号に対するアクセスおよび画素信号の読み出しに関わるタイミングチャートである。第1の読み出しモードでは、単位画素セル10の各フォトダイオードPDで蓄積された電荷は、図2(B)のように、単位画素セル10ごとに左右方向に合成される(PD_a+PD_b、PD_c+PD_d)。これにより、マイクロレンズMLの光軸から上下方向に偏芯された画素信号が取得される。ここで、着目する単位画素セル10と同一垂直ライン上の各単位画素セル10を第1の単位画素セル群とする。アクセス順序制御部11は、着目する単位画素セル10と同一水平ライン上に配置された各単位画素セル10よりも、着目する単位画素セル10と同一垂直ライン上に配置された第1の単位画素セル群を優先して連続アクセスするように制御する。これにより、着目する単位画素セル10と同一垂直ライン上の各単位画素セル10の画素信号が、着目する単位画素セル10と同一水平ライン上に配置された各単位画素セル10の画素信号と比較して短時間で読み出される。アクセス順序制御部11は、画素信号の取得に先立ち、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 FIG. 3A is a timing chart relating to access to pixel signals and readout of pixel signals in the first readout mode. In the first readout mode, charges accumulated in each photodiode PD of the unit pixel cell 10 are combined in the horizontal direction for each unit pixel cell 10 (PD_a+PD_b, PD_c+PD_d) as shown in FIG. 2(B). As a result, pixel signals that are decentered in the vertical direction from the optical axis of the microlens ML are acquired. Here, each unit pixel cell 10 on the same vertical line as the focused unit pixel cell 10 is defined as a first unit pixel cell group. The access order control unit 11 selects the first unit pixel arranged on the same vertical line as the unit pixel cell 10 of interest rather than each unit pixel cell 10 arranged on the same horizontal line as the unit pixel cell 10 of interest. Control is performed so that the cell group is preferentially accessed continuously. Thereby, the pixel signal of each unit pixel cell 10 on the same vertical line as the unit pixel cell 10 of interest is compared with the pixel signal of each unit pixel cell 10 arranged on the same horizontal line as the unit pixel cell 10 of interest. and read out in a short time. Prior to obtaining the pixel signal, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

図3(A)において、期間t101に、アクセス順序制御部11は、(x-1)列の単位画素セルへ供給される転送信号PTX_ac(x-1)およびPTX_bd(x-1)をハイレベルとする。また、アクセス順序制御部11は、(y-1)行の単位画素セル10へ供給される転送信号PTX_ab(y-1)をハイレベルとする。これにより、転送信号PTX_ac(x-1)とPTX_ab(y-1)との論理積、および転送信号PTX_bd(x-1)とPTX_ab(y-1)との論理積がハイレベルとなる。従って、(x-1)列(y-1)行の単位画素セル10の転送ゲートTX_aおよびTX_bは、アクティブとなる。アクセスされたフォトダイオードPD_aおよびPD_bからの電荷が転送路(ソースフォロワSFのゲート)で混合されることで、マイクロレンズMLの光軸から上下方向に偏芯された画素信号の一方が生成される。上下方向に偏芯された画素信号は、単位画素セル10の4つのフォトダイオードPDの領域のうち、フォトダイオードPD_aおよびPD_bの領域に偏芯した方向の領域で受光した光に対応する画素信号である。ここで、アクセス順序制御部11は、当該単位画素セル10に対して、ハイレベルの選択信号PSEL_v(y-1)およびPSEL_h(x-1)を供給しておく。これにより、単位画素セル10で生成された画素信号がAD変換部12へ入力される。AD変換部12に入力された画素信号の電圧レベルは、AD変換部12内の保持手段により保持される。 In FIG. 3A, during period t101, the access order control unit 11 sets the transfer signals PTX_ac(x-1) and PTX_bd(x-1) supplied to the unit pixel cells of the (x-1) column to high level. and Also, the access order control unit 11 sets the transfer signal PTX_ab(y−1) supplied to the unit pixel cell 10 in the (y−1) row to high level. As a result, the logical product of the transfer signals PTX_ac(x-1) and PTX_ab(y-1) and the logical product of the transfer signals PTX_bd(x-1) and PTX_ab(y-1) become high level. Therefore, the transfer gates TX_a and TX_b of the unit pixel cell 10 of the (x-1) column (y-1) row become active. Charges from the accessed photodiodes PD_a and PD_b are mixed in the transfer path (the gate of the source follower SF) to generate one of the pixel signals vertically decentered from the optical axis of the microlens ML. . The vertically eccentric pixel signal is a pixel signal corresponding to the light received in the regions of the four photodiode PD regions of the unit pixel cell 10 that are eccentric to the regions of the photodiodes PD_a and PD_b. be. Here, the access order control unit 11 supplies high-level selection signals PSEL_v(y−1) and PSEL_h(x−1) to the unit pixel cell 10 in advance. Thereby, the pixel signal generated by the unit pixel cell 10 is input to the AD converter 12 . The voltage level of the pixel signal input to the AD conversion section 12 is held by holding means within the AD conversion section 12 .

AD変換部12は、期間t102において、保持手段により保持された画素信号の電圧レベルをデジタル信号に変換し、変換後のデジタル信号を後段の信号処理部2に出力する。この間、アクセス順序制御部11は、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 In period t102, the AD conversion unit 12 converts the voltage level of the pixel signal held by the holding unit into a digital signal, and outputs the converted digital signal to the signal processing unit 2 in the subsequent stage. During this time, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

アクセス順序制御部11は、期間t103において、再び(x-1)列の単位画素セルへ供給される転送信号PTX_ac(x-1)およびPTX_bd(x-1)をハイレベルとする。また、アクセス順序制御部11は、(y-1)行の単位画素セルへ供給される転送信号PTX_cd(y-1)をハイレベルとする。これにより、転送信号PTX_ac(x-1)とPTX_cd(y-1)との論理積、および転送信号PTX_bd(x-1)とPTX_cd(y-1)との論理積がハイレベルとなる。従って、(x-1)列(y-1)行の単位画素セル10の転送ゲートTX_cおよびTX_dがアクティブとなる。アクセスされたフォトダイオードPD_cおよびPD_dからの電荷が転送路上で混合されることで、マイクロレンズMLの光軸から上下方向に偏芯された画素信号の他方が生成される。上下方向に偏芯された画素信号は、単位画素セル10の4つのフォトダイオードPDの領域のうち、フォトダイオードPD_cおよびPD_dの領域に偏芯した方向の領域で受光した光に対応する画素信号である。アクセス順序制御部11は、単位画素セル10に対して、ハイレベルの選択信号PSEL_v(y-1)およびPSEL_h(x-1)を供給しておく。これにより、単位画素セル10で生成された画素信号がAD変換部12へ入力される。AD変換部12に入力された画素信号の電圧レベルは、AD変換部12内の保持手段により保持される。 In period t103, the access order control unit 11 again sets the transfer signals PTX_ac(x-1) and PTX_bd(x-1) supplied to the unit pixel cells of the (x-1) column to high level. Also, the access order control unit 11 sets the transfer signal PTX_cd(y−1) supplied to the unit pixel cells in the (y−1) row to high level. As a result, the logical product of the transfer signals PTX_ac(x-1) and PTX_cd(y-1) and the logical product of the transfer signals PTX_bd(x-1) and PTX_cd(y-1) become high level. Therefore, the transfer gates TX_c and TX_d of the unit pixel cell 10 in the (x-1) column (y-1) row become active. Charges from the accessed photodiodes PD_c and PD_d are mixed on the transfer path to generate the other pixel signal vertically decentered from the optical axis of the microlens ML. The vertically eccentric pixel signal is a pixel signal corresponding to the light received in the regions of the four photodiode PD regions of the unit pixel cell 10 that are eccentric to the regions of the photodiodes PD_c and PD_d. be. The access order control unit 11 supplies high-level selection signals PSEL_v(y−1) and PSEL_h(x−1) to the unit pixel cell 10 in advance. Thereby, the pixel signal generated by the unit pixel cell 10 is input to the AD converter 12 . The voltage level of the pixel signal input to the AD conversion section 12 is held by holding means within the AD conversion section 12 .

AD変換部12は、期間t104において、保持手段により保持された画素信号の電圧レベルをデジタル信号に変換し、変換後のデジタル信号を後段の信号処理部2に出力する。この間、アクセス順序制御部11は、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 In period t104, the AD conversion unit 12 converts the voltage level of the pixel signal held by the holding unit into a digital signal, and outputs the converted digital signal to the signal processing unit 2 in the subsequent stage. During this time, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

以上の期間t101からt104にかけての制御で、所定のアドレスの単位画素セル10に対するアクセスが行われ、アクセスした単位画素セル10から上下方向に偏芯された1組の画素信号が得られる。アクセス順序制御部11は、期間t105で、アクセス先の単位画素セル10を、同一垂直ライン上に配置された(x-1)列(y)行の単位画素セル10に切り替える。そして、アクセス順序制御部11は、上述した期間t101からt104までの制御と同様の制御を繰り返す。また、アクセス順序制御部11は、期間t106で、アクセス先の単位画素セル10を、同一垂直ライン上に配置された(x-1)列(y+1)行の単位画素セル10に切り替える。そして、アクセス順序制御部11は、上述した期間t101からt104までの制御と同様の制御を繰り返す。 Through the above control from t101 to t104, the unit pixel cell 10 at a predetermined address is accessed, and a set of vertically decentered pixel signals is obtained from the accessed unit pixel cell 10. FIG. In period t105, the access order control unit 11 switches the unit pixel cell 10 to be accessed to the unit pixel cell 10 of (x−1) column (y) row arranged on the same vertical line. Then, the access order control unit 11 repeats the same control as the control from period t101 to t104 described above. Further, in period t106, the access order control unit 11 switches the unit pixel cell 10 to be accessed to the unit pixel cell 10 of the (x−1) column and the (y+1) row arranged on the same vertical line. Then, the access order control unit 11 repeats the same control as the control from period t101 to t104 described above.

アクセス順序制御部11は、以上の制御を、アクセスする行を切り替えながら繰り返す。アクセス順序制御部11は、(x-1)列の全ての単位画素セル10へのアクセスが完了した後、次の列である(x)列の単位画素セル10へのアクセスに移行する制御を行う。アクセス順序制御部11は、期間t107からt112にかけて、アクセス先の単位画素セル10を、(x)列上の単位画素セルに切り替えた上で、期間t101からt106の制御と同様の制御を繰り返す。(x)列上の全て単位画素セル10へのアクセスが完了した後、アクセス順序制御部11は、期間t113からt118にかけて、アクセス先の単位画素セル10を、(x+1)列上の単位画素セル10に切り替える。そして、アクセス順序制御部11は、期間t101からt106の制御と同様の制御を繰り返す。アクセス順序制御部11が、以上の制御を全ての列に対して繰り返すことで、第1の読み出しモードによる1フレーム分の画素信号の読み出し動作が行われる。 The access order control unit 11 repeats the above control while switching the row to be accessed. After access to all the unit pixel cells 10 in the (x−1) column is completed, the access order control unit 11 performs control to shift to access to the unit pixel cells 10 in the next column (x) column. conduct. From period t107 to t112, the access order control unit 11 switches the unit pixel cell 10 to be accessed to the unit pixel cell on the (x) column, and then repeats the same control as the control from period t101 to t106. After access to all the unit pixel cells 10 on the (x) column is completed, the access order control unit 11 shifts the access destination unit pixel cells 10 to the unit pixel cells 10 on the (x+1) column from period t113 to t118. Switch to 10. Then, the access order control unit 11 repeats the same control as the control from period t101 to t106. The access order control unit 11 repeats the above control for all the columns, thereby performing the readout operation of pixel signals for one frame in the first readout mode.

以上のように、第1の読み出しモードにおいて、単位画素セル10は、受光した光に基づく電気信号を出力する領域がマイクロレンズMLの光軸から上下方向に偏芯している。この場合、アクセス順序制御部11は、偏芯方向と同じ方向である上下方向の各単位画素セル10に対するアクセスを、左右方向の各単位画素セル10に対するアクセスより優先させる。上述した第1の読み出しモードでは、第1の方向は上下方向であり、第2の方向は左右方向である。アクセス順序制御部11は、同一垂直ライン上に配置された単位画素セル10へのアクセスを、異なる垂直ライン上に配置された単位画素セル10へのアクセスを行う前に優先して行うように制御する。これにより、AF信号としての像信号の読み出し方向は、瞳分割方向に応じて選択されるため、同一垂直ライン上に配置された単位画素セル10同士の露光時間差が短縮される。その結果、同一垂直ラインのA像信号(またはB像信号)についての露光時間差を低減しながら、上下方向に偏芯された画素信号を取得することができる。また、読み出しが完了した垂直ラインから、順次、相関演算を開始することができる。このため、画素信号の読み出しからデフォーカス量演算やフォーカス動作までのタイムラグが短縮される。 As described above, in the first readout mode, in the unit pixel cell 10, the area that outputs the electrical signal based on the received light is vertically decentered from the optical axis of the microlens ML. In this case, the access order control unit 11 gives priority to access to each unit pixel cell 10 in the vertical direction, which is the same direction as the eccentric direction, over access to each unit pixel cell 10 in the horizontal direction. In the first readout mode described above, the first direction is the up-down direction and the second direction is the left-right direction. The access order control unit 11 performs control such that access to the unit pixel cells 10 arranged on the same vertical line is preferentially performed before access to the unit pixel cells 10 arranged on a different vertical line. do. As a result, since the readout direction of the image signal as the AF signal is selected according to the pupil division direction, the exposure time difference between the unit pixel cells 10 arranged on the same vertical line is shortened. As a result, vertically decentered pixel signals can be acquired while reducing the exposure time difference for the A image signal (or B image signal) of the same vertical line. In addition, the correlation calculation can be started sequentially from the vertical lines for which reading has been completed. Therefore, the time lag from readout of pixel signals to defocus amount calculation and focus operation is shortened.

図3(B)は、第2の読み出しモードにおける、画素信号に対するアクセスおよび画素信号の読み出しに関わるタイミングチャートである。第2の読み出しモードでは、単位画素セル10の各フォトダイオードPDで蓄積された電荷は、図2(C)に示されるように、単位画素セル10ごとに上下方向に合成される(PD_a+PD_c、PD_b+PD_d)。これにより、マイクロレンズMLの光軸から左右方向に偏芯された画素信号が取得される。ここで、着目する単位画素セル10と同一水平ライン上の各単位画素セル10を第2の単位画素セル群とする。アクセス順序制御部11は、着目する単位画素セル10と同一垂直ライン上に配置された各単位画素セル10よりも、着目する単位画素セル10と同一水平ライン上に配置された第2の単位画素セル群を優先して連続アクセスするように制御する。これにより、着目する単位画素セル10と同一水平ライン上の各単位画素セル10の画素信号が、着目する単位画素セル10と同一垂直ライン上に配置された各単位画素セル10の画素信号と比較して短時間で読み出される。アクセス順序制御部11は、画素信号の取得に先立ち、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 FIG. 3B is a timing chart relating to access to pixel signals and readout of pixel signals in the second readout mode. In the second readout mode, the charges accumulated in each photodiode PD of the unit pixel cell 10 are combined vertically for each unit pixel cell 10 (PD_a+PD_c, PD_b+PD_d), as shown in FIG. 2(C). ). As a result, pixel signals decentered in the horizontal direction from the optical axis of the microlens ML are acquired. Here, each unit pixel cell 10 on the same horizontal line as the unit pixel cell 10 of interest is defined as a second unit pixel cell group. The access order control unit 11 selects a second unit pixel arranged on the same horizontal line as the unit pixel cell 10 of interest rather than each unit pixel cell 10 arranged on the same vertical line as the unit pixel cell 10 of interest. Control is performed so that the cell group is preferentially accessed continuously. Thereby, the pixel signal of each unit pixel cell 10 on the same horizontal line as the unit pixel cell 10 of interest is compared with the pixel signal of each unit pixel cell 10 arranged on the same vertical line as the unit pixel cell 10 of interest. and read out in a short time. Prior to obtaining the pixel signal, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

図3(B)において、アクセス順序制御部11は、期間t121において、(y-1)行の単位画素セル10へ供給される転送信号PTX_ab(y-1)およびPTX_cd(y-1)をハイレベルとする。また、アクセス順序制御部11は、(x-1)列の単位画素セル10へ供給される転送信号PTX_ac(x-1)をハイレベルとする。これにより、転送信号PTX_ac(x-1)とPTX_ab(y-1)との論理積、および転送信号PTX_ac(x-1)とPTX_cd(y-1)との論理積はハイレベルとなる。従って、(x-1)列(y-1)行の単位画素セル10の転送ゲートTX_aおよびTX_cは、アクティブとなる。アクセスされたフォトダイオードPD_aおよびPD_cからの電荷は、転送路上で混合される。これにより、マイクロレンズMLの光軸から左右方向に偏芯された画素信号の一方が生成される。アクセス順序制御部11は、単位画素セル10に対して、ハイレベルの選択信号PSEL_v(y-1)およびPSEL_h(x-1)を供給しておく。これにより、単位画素セル10で生成された画素信号がAD変換部12へ入力される。AD変換部12に入力された画素信号の電圧レベルは、AD変換部12内の保持手段により保持される。 In FIG. 3B, the access order control unit 11 sets the transfer signals PTX_ab(y−1) and PTX_cd(y−1) supplied to the unit pixel cells 10 in the (y−1) row to high during period t121. Level. The access order control unit 11 also sets the transfer signal PTX_ac(x-1) supplied to the unit pixel cells 10 in the (x-1) column to high level. As a result, the logical product of the transfer signals PTX_ac(x-1) and PTX_ab(y-1) and the logical product of the transfer signals PTX_ac(x-1) and PTX_cd(y-1) become high level. Therefore, the transfer gates TX_a and TX_c of the unit pixel cell 10 in the (x-1) column (y-1) row become active. Charges from accessed photodiodes PD_a and PD_c are mixed on the transfer path. As a result, one of the pixel signals decentered in the horizontal direction from the optical axis of the microlens ML is generated. The access order control unit 11 supplies high-level selection signals PSEL_v(y−1) and PSEL_h(x−1) to the unit pixel cell 10 in advance. Thereby, the pixel signal generated by the unit pixel cell 10 is input to the AD converter 12 . The voltage level of the pixel signal input to the AD conversion section 12 is held by holding means within the AD conversion section 12 .

AD変換部12は、期間t122において、保持手段により保持された画素信号の電圧レベルをデジタル信号に変換し、後段の信号処理部2に出力する。この間、アクセス順序制御部11は、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 In period t122, the AD conversion unit 12 converts the voltage level of the pixel signal held by the holding unit into a digital signal, and outputs the digital signal to the signal processing unit 2 in the subsequent stage. During this time, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

アクセス順序制御部11は、期間t123において、再び(y-1)行の単位画素セルへ供給される転送信号PTX_ab(y-1)およびPTX_cd(y-1)をハイレベルとする。また、アクセス順序制御部11は、(x-1)列の単位画素セル10へ供給される転送信号PTX_bd(x-1)をハイレベルとする。これにより、転送信号PTX_bd(x-1)とPTX_ab(y-1)との論理積、および転送信号PTX_bd(x-1)とPTX_cd(y-1)との論理積はハイレベルとなる。従って、(x-1)列(y-1)行の単位画素セルの転送ゲートTX_bおよびTX_dがアクティブとなる。アクセスされたフォトダイオードPD_bおよびPD_dからの電荷が転送路上で混合される。これにより、マイクロレンズMLの光軸から左右方向に偏芯された画素信号の他方が生成される。アクセス順序制御部11は、単位画素セル10に対して、ハイレベルの選択信号PSEL_v(y-1)およびPSEL_h(x-1)を供給しておく。これにより、単位画素セル10で生成された画素信号がAD変換部12へ入力される。AD変換部12に入力された画素信号の電圧レベルが、AD変換部12内の保持手段により保持される。 In period t123, the access order control unit 11 again sets the transfer signals PTX_ab(y−1) and PTX_cd(y−1) supplied to the unit pixel cells in the (y−1) row to high level. The access order control unit 11 also sets the transfer signal PTX_bd(x-1) supplied to the unit pixel cells 10 in the (x-1) column to high level. As a result, the logical product of the transfer signals PTX_bd(x-1) and PTX_ab(y-1) and the logical product of the transfer signals PTX_bd(x-1) and PTX_cd(y-1) become high level. Therefore, the transfer gates TX_b and TX_d of the unit pixel cell of column (x-1) and row (y-1) are activated. Charges from accessed photodiodes PD_b and PD_d are mixed on the transfer path. As a result, the other of the pixel signals decentered in the horizontal direction from the optical axis of the microlens ML is generated. The access order control unit 11 supplies high-level selection signals PSEL_v(y−1) and PSEL_h(x−1) to the unit pixel cell 10 in advance. Thereby, the pixel signal generated by the unit pixel cell 10 is input to the AD converter 12 . The voltage level of the pixel signal input to the AD conversion section 12 is held by holding means within the AD conversion section 12 .

AD変換部12は、期間t124において、保持手段により保持された画素信号の電圧レベルをデジタル信号に変換し、後段の信号処理部2へ出力する。この間、アクセス順序制御部11は、リセット信号PRESをハイレベルとし、各単位画素セル10のソースフォロワSFのゲート電圧を基準レベルにリセットしておく。 In period t124, the AD conversion unit 12 converts the voltage level of the pixel signal held by the holding unit into a digital signal, and outputs the digital signal to the signal processing unit 2 in the subsequent stage. During this time, the access order control unit 11 sets the reset signal PRES to high level, and resets the gate voltage of the source follower SF of each unit pixel cell 10 to the reference level.

アクセス順序制御部11は、期間t121からt124にかけての制御で、所定のアドレスの単位画素セル10にアクセスする。そして、アクセスされた単位画素セル10から左右方向に偏芯された1組の画素信号が得られる。アクセス順序制御部11は、期間t125において、アクセス先の単位画素セル10を、同一水平ライン上に配置された(x)列(y-1)行の単位画素セル10に切り替える。そして、アクセス順序制御部11は、期間t121からt124にかけての制御と同様の制御を繰り返す。さらに、アクセス順序制御部11は、期間t126において、アクセス先の単位画素セル10を、同一水平ライン上に配置された(x+1)列(y-1)行の単位画素セル10に切り替える。そして、アクセス順序制御部11は、期間t121からt124までの制御と同様の制御を繰り返す。 The access order control unit 11 accesses the unit pixel cell 10 at a predetermined address under control from period t121 to t124. Then, a set of pixel signals decentered in the horizontal direction is obtained from the accessed unit pixel cell 10 . In period t125, the access order control unit 11 switches the unit pixel cell 10 to be accessed to the unit pixel cell 10 of (x) column (y−1) row arranged on the same horizontal line. Then, the access order control unit 11 repeats the same control as the control from period t121 to t124. Furthermore, in period t126, the access order control unit 11 switches the unit pixel cell 10 to be accessed to the unit pixel cell 10 of (x+1) column (y−1) row arranged on the same horizontal line. Then, the access order control unit 11 repeats the same control as the control from period t121 to t124.

アクセス順序制御部11は、以上の制御を、アクセスする列を切り替えながら繰り返す。アクセス順序制御部11は、(y-1)行の全ての単位画素セル10へのアクセスが完了した後、次の行である(y)行の単位画素セル10へのアクセスに移行する制御を行う。そして、アクセス順序制御部11は、期間t121からt126までの制御と同様の制御を繰り返す。(y)行上の単位画素セル10へのアクセスが完了した後、アクセス順序制御部11は、期間t133からt138にかけて、アクセス先の単位画素セル10を、(y+1)行上の単位画素セル10に切り替える。そして、アクセス順序制御部11は、期間t121からt126の制御と同様の制御を繰り返す。アクセス順序制御部11が、以上の制御を全ての行に対して繰り返すことで、第2の読み出しモードによる1フレーム分の画素信号の読み出し動作が行われる。 The access order control unit 11 repeats the above control while switching the column to be accessed. After access to all the unit pixel cells 10 in the (y−1) row is completed, the access order control unit 11 performs control to shift to access to the unit pixel cells 10 in the next row (y) row. conduct. Then, the access order control unit 11 repeats the same control as the control from period t121 to t126. After the access to the unit pixel cell 10 on the (y) row is completed, the access order control unit 11 moves the unit pixel cell 10 on the (y+1) row to the unit pixel cell 10 on the (y+1) row from time t133 to t138. switch to Then, the access order control unit 11 repeats the same control as the control from period t121 to t126. The access order control unit 11 repeats the above control for all rows, thereby performing the readout operation of pixel signals for one frame in the second readout mode.

以上のように、第2の読み出しモードにおいて、単位画素セル10は、受光する領域がマイクロレンズMLの光軸から左右方向に偏芯している。この場合、アクセス順序制御部11は、偏芯方向と同じ方向である左右方向の各単位画素セル10に対するアクセスを、上下方向の各単位画素セル10に対するアクセスより優先させる。上述した第2の読み出しモードでは、第1の方向は左右方向であり、第2の方向は上下方向である。アクセス順序制御部11は、同一水平ライン上に配置された単位画素セル10へのアクセスを、異なる水平ライン上に配置された単位画素セル10へのアクセスを行う前に優先して行うように制御する。これにより、第2の読み出しモードにおいても、第1の読み出しモードと同様の効果が得られる。 As described above, in the second readout mode, the unit pixel cell 10 has a light-receiving region that is laterally decentered from the optical axis of the microlens ML. In this case, the access order control unit 11 gives priority to access to each unit pixel cell 10 in the horizontal direction, which is the same direction as the eccentric direction, over access to each unit pixel cell 10 in the vertical direction. In the second readout mode described above, the first direction is the horizontal direction and the second direction is the vertical direction. The access order control unit 11 performs control such that access to the unit pixel cells 10 arranged on the same horizontal line is preferentially performed before access to the unit pixel cells 10 arranged on a different horizontal line. do. As a result, even in the second read mode, the same effect as in the first read mode can be obtained.

従って、アクセス順序制御部11は、第1の読み出しモードと第2の読み出しモードとで、マイクロレンズMLの光軸から偏芯した偏芯方向に応じて、画素信号の読出しにおける単位画素セル10へのアクセス順序を異ならせる。上記偏芯方向は、単位画素セル内の信号加算方向である。このため、画素信号の偏芯方向と同じ方向に延伸された同一ラインのA像信号、あるいはB像信号についての露光時間差を低減することができる。 Therefore, in the first readout mode and the second readout mode, the access order control unit 11 controls the readout of the pixel signal to the unit pixel cell 10 according to the direction of decentration from the optical axis of the microlens ML. different access order. The eccentric direction is the signal addition direction within the unit pixel cell. Therefore, it is possible to reduce the exposure time difference for the A image signal or the B image signal of the same line stretched in the same direction as the eccentric direction of the pixel signal.

図4は、第1実施形態に係る処理の流れを示すフローチャートである。図4のフローチャートは、第1実施形態以外の各実施形態にも適用される。上述したように、第1実施形態では、マイクロレンズMLの光軸からの偏芯方向に応じて、第1の方向に対する各単位画素セル10へのアクセスと第2の方向に対する各単位画素セル10へのアクセスとの何れを優先するかが決定される。そして、決定されたアクセスの優先方向に応じて、読み出しモードが選択される。図4において、撮像装置200の撮影動作が開始されると、制御部3が次のフレームで優先して取得する画素信号の偏芯方向に応じて読み出しモードを選択する。そして、制御部3は、固体撮像素子1に対して制御信号を発することで、読み出しモードの初期設定を行う(S401)。以下、初期設定として第2の読み出しモードが設定されるものとして説明するが、初期設定として第1の読み出しモードが設定されてもよい。また、初期設定において、前回の撮影動作で最後に設定された読み出しモードが引き継がれてもよい。 FIG. 4 is a flow chart showing the flow of processing according to the first embodiment. The flowchart of FIG. 4 is also applied to each embodiment other than the first embodiment. As described above, in the first embodiment, access to each unit pixel cell 10 in the first direction and access to each unit pixel cell 10 in the second direction are performed according to the eccentric direction from the optical axis of the microlens ML. It is determined whether to give priority to access to . Then, a read mode is selected according to the determined access priority direction. In FIG. 4, when the imaging operation of the imaging device 200 is started, the readout mode is selected according to the eccentric direction of the pixel signal that the control unit 3 preferentially acquires in the next frame. The control unit 3 then issues a control signal to the solid-state imaging device 1 to initialize the readout mode (S401). In the following description, it is assumed that the second readout mode is set as the initial setting, but the first readout mode may be set as the initial setting. Also, in the initial setting, the last readout mode set in the previous shooting operation may be inherited.

制御部3は、S401で設定された読み出しモードで、固体撮像素子1から画素信号の読み出し制御を行う(S402)。信号処理部2は、S402で読み出された画素信号を用いて、A像信号とB像信号との相関演算を行い、デフォーカス量を求める(S403)。制御部3は、求められたデフォーカス量に基づき、レンズ駆動部6へ撮影レンズ7の移動量を指示することで、レンズ駆動部6による撮影レンズ7のフォーカス制御が行われる(S404)。図4に示されるように、S403およびS404の処理と並行して、S405~S410の処理が行われる。 The control unit 3 performs readout control of pixel signals from the solid-state imaging device 1 in the readout mode set in S401 (S402). The signal processing unit 2 uses the pixel signals read out in S402 to perform a correlation calculation between the A image signal and the B image signal to obtain the defocus amount (S403). The control unit 3 instructs the lens driving unit 6 to move the photographing lens 7 based on the obtained defocus amount, so that the lens driving unit 6 performs focus control of the photographing lens 7 (S404). As shown in FIG. 4, the processes of S405 to S410 are performed in parallel with the processes of S403 and S404.

信号処理部2は、同一の単位画素セル10に対応するA像信号とB像信号とを加算することで、単位画素セル10の全てのフォトダイオードPDからの画素信号を加算し、撮像信号用に偏芯されていない信号を取得する処理を行う(S405)。制御部3は、S405の処理により得られる偏芯されていない画素信号に対して微分フィルタ等の演算処理を施し、被写体のエッジを検出する(S406)。制御部3は、検出された被写体のエッジから被写体パターンを判定する。被写体のパターンは、被写体のエッジ以外から検出されてもよい。具体的には、制御部3は、対象物の被写体のエッジの上下方向の勾配(V勾配)が、左右方向の勾配(H勾配)以上であるかを判定する(S407)。S407でYesと判定された場合、V勾配がH勾配に対し急峻であり、被写体の上下方向のエッジ(縦線エッジ)がより明瞭であると判定できる。一方、S407でNoと判定された場合、被写体の左右方向のH勾配が、上下方向のV勾配に対し急峻であり、対象物の左右方向のエッジ(横線エッジ)がより明瞭であると判定できる。 By adding the A image signal and the B image signal corresponding to the same unit pixel cell 10, the signal processing unit 2 adds the pixel signals from all the photodiodes PD of the unit pixel cell 10, A process for acquiring a signal that is not eccentric is performed (S405). The control unit 3 performs arithmetic processing such as a differential filter on the non-eccentric pixel signal obtained by the processing of S405, and detects the edge of the subject (S406). The control unit 3 determines a subject pattern from the detected edges of the subject. The pattern of the subject may be detected from other than the edge of the subject. Specifically, the control unit 3 determines whether the vertical gradient (V gradient) of the subject edge of the object is greater than or equal to the horizontal gradient (H gradient) (S407). If it is determined as Yes in S407, it can be determined that the V gradient is steeper than the H gradient, and that the subject's vertical edge (vertical line edge) is clearer. On the other hand, if the determination in S407 is No, it can be determined that the H gradient in the horizontal direction of the object is steeper than the V gradient in the vertical direction, and that the horizontal edge (horizontal line edge) of the object is clearer. .

S407でYesと判定された場合、制御部3は、次のフレームに用いられる偏芯方向に応じた読み出しモードとして、第1の読み出しモードを設定する(S408)。第1の読み出しモードは、上述したように、同一垂直ライン上に配置された単位画素セル10同士の露光時間差を短縮させつつ、上下方向に偏芯された画素信号を取得するモードである。S407でNoと判定された場合、制御部3は、次のフレームに用いられる偏芯方向に応じた読み出しモードとして、第2の読み出しモードを設定する(S409)。第2の読み出しモードは、上述したように、同一水平ライン上に配置された単位画素セル10同士の露光時間差を短縮させつつ、左右方向に偏芯された信号を取得するモードである。S406~S409の処理と並行して、制御部3は、S405で得られた偏芯されていない信号を、撮像信号として記録媒体に記録するように記録部5を制御する(S410)。なお、制御部3は、S410の処理とともに、撮像信号を表示部4に表示させる制御を行ってもよい。制御部3は、撮影続行の指示がされたかを判定する(S411)。例えば、ユーザが撮像装置200に対して撮影続行の操作を行ったか否かに基づいて、S411の判定が行われてもよい。S411でYesと判定された場合、フローはS402に戻り、撮影動作が続行する。S411でNoと判定された場合、撮影動作は終了する。 When it is determined as Yes in S407, the control unit 3 sets the first readout mode as the readout mode corresponding to the direction of eccentricity to be used in the next frame (S408). As described above, the first readout mode is a mode in which vertically eccentric pixel signals are acquired while reducing the exposure time difference between the unit pixel cells 10 arranged on the same vertical line. If it is determined No in S407, the control unit 3 sets the second readout mode as the readout mode corresponding to the direction of eccentricity to be used in the next frame (S409). As described above, the second readout mode is a mode in which the difference in exposure time between the unit pixel cells 10 arranged on the same horizontal line is shortened while obtaining signals that are decentered in the horizontal direction. In parallel with the processing of S406 to S409, the control unit 3 controls the recording unit 5 so that the non-eccentric signal obtained in S405 is recorded on the recording medium as an imaging signal (S410). Note that the control unit 3 may perform control to display the imaging signal on the display unit 4 along with the processing of S410. The control unit 3 determines whether an instruction to continue shooting has been issued (S411). For example, the determination in S411 may be performed based on whether or not the user has operated the imaging device 200 to continue shooting. If the determination in S411 is Yes, the flow returns to S402 to continue the shooting operation. If the determination in S411 is No, the shooting operation ends.

以上のように、前回に取得されたフレームの撮像信号の被写体パターンに応じて、アクセスを優先するマイクロレンズMLの光軸からの偏芯方向が決定される。併せて、決定された偏芯方向に応じた読み出しモード(第1の読み出しモードまたは第2の読み出しモード)が設定される。これにより、被写体パターンに適した方向に偏芯され、かつ露光時間差が低減された信号を取得することができる。よって、精度の高い焦点検出が実現される。 As described above, the direction of eccentricity from the optical axis of the microlens ML that gives priority to access is determined according to the subject pattern of the imaging signal of the previously acquired frame. At the same time, a readout mode (first readout mode or second readout mode) is set according to the determined eccentric direction. Thereby, it is possible to obtain a signal that is decentered in a direction suitable for the subject pattern and that has a reduced exposure time difference. Therefore, highly accurate focus detection is realized.

以上に説明したように、本実施形態では、アクセス順序制御部11は、使用する画素信号の偏芯方向に応じて、画素信号の読出しにおける単位画素セル10へのアクセス順序を異ならせる。これにより、マイクロレンズMLの光軸からの偏芯方向と同じ方向に延伸された同一ラインのA像信号またはB像信号についての露光時間差を低減することができる。よって、瞳分割により複数の像を取得可能な撮像装置において、焦点検出精度を向上させることができる。 As described above, in the present embodiment, the access order control unit 11 changes the access order to the unit pixel cells 10 in reading out pixel signals according to the eccentric direction of the pixel signals to be used. As a result, the exposure time difference for the A image signal or the B image signal of the same line stretched in the same direction as the eccentric direction from the optical axis of the microlens ML can be reduced. Therefore, focus detection accuracy can be improved in an imaging apparatus capable of acquiring a plurality of images by pupil division.

<第2実施形態>
次に、第2実施形態について説明する。図5は、第2実施形態に係る固体撮像素子501の構成を示す構成図である。図5(A)および(B)は、固体撮像素子501に配置される単位画素セル510nの構成を示す図である。単位画素セル510nは、マイクロレンズMLに対応して、フォトダイオードPDと転送ゲートTXとを有する。第2実施形態の単位画素セル510は、第1実施形態の単位画素セル10と異なり、単位画素セル510内でフォトダイオードPDが分割されていない。転送ゲートTXには、アクセス順序制御部511から、転送信号PTX_HおよびPTX_Vが供給される。ハイレベルの転送信号PTX_HおよびPTX_Vが供給されると、フォトダイオードPDがAD変換部522に電気的に接続されるように構成されている。
<Second embodiment>
Next, a second embodiment will be described. FIG. 5 is a configuration diagram showing the configuration of a solid-state imaging device 501 according to the second embodiment. 5A and 5B are diagrams showing the configuration of a unit pixel cell 510n arranged in the solid-state imaging device 501. FIG. The unit pixel cell 510n has a photodiode PD and a transfer gate TX corresponding to the microlens ML. In the unit pixel cell 510 of the second embodiment, unlike the unit pixel cell 10 of the first embodiment, the photodiode PD is not divided within the unit pixel cell 510 . Transfer signals PTX_H and PTX_V are supplied from the access order control unit 511 to the transfer gate TX. The photodiode PD is electrically connected to the AD converter 522 when high-level transfer signals PTX_H and PTX_V are supplied.

図5(C)~(F)は、固体撮像素子501においてマイクロレンズMLの光軸から偏芯された画素信号を得るための単位画素セル510(510a、510b、510cおよび510d)の構成を示す図である。単位画素セル510a、510b、510cおよび510dの撮像領域は、それぞれ金属薄膜等による遮光膜511a、511b、511cおよび511dにより部分的に覆われている。単位画素セル510a、510b、510cおよび510dには、それぞれ異なる位置に開口部512(512a、512b、512cおよび512d)が設けられている。これにより、各単位画素セル510内のフォトダイオードPDに、それぞれマイクロレンズMLの光軸から偏芯した、異なる瞳を通過した光線が入射される。従って、単位画素セル510のうち、開口部512の領域が、マイクロレンズMLの光軸から偏芯した領域となる。 5C to 5F show the configuration of a unit pixel cell 510 (510a, 510b, 510c and 510d) for obtaining pixel signals decentered from the optical axis of the microlens ML in the solid-state imaging device 501. It is a diagram. The imaging regions of the unit pixel cells 510a, 510b, 510c, and 510d are partially covered with light shielding films 511a, 511b, 511c, and 511d made of metal thin films, respectively. Openings 512 (512a, 512b, 512c and 512d) are provided at different positions in the unit pixel cells 510a, 510b, 510c and 510d. As a result, the photodiode PD in each unit pixel cell 510 receives light rays that are decentered from the optical axis of the microlens ML and have passed through different pupils. Therefore, in the unit pixel cell 510, the area of the opening 512 is an area that is decentered from the optical axis of the microlens ML.

図5(C)に示した単位画素セル510aには、遮光膜511aの上側に開口部512aが設けられる。図5(D)に示した単位画素セル510bには、遮光膜511bの下側に開口部512bが設けられる。図5(E)に示した単位画素セル510cには、遮光膜511cの左側に開口部512cが設けられる。図5(F)に示した単位画素セル510dには、遮光膜511dの右側に開口部512dが設けられる。 A unit pixel cell 510a illustrated in FIG. 5C is provided with an opening 512a above a light shielding film 511a. The unit pixel cell 510b shown in FIG. 5D is provided with an opening 512b below the light shielding film 511b. The unit pixel cell 510c shown in FIG. 5E is provided with an opening 512c on the left side of the light shielding film 511c. The unit pixel cell 510d shown in FIG. 5F is provided with an opening 512d on the right side of the light shielding film 511d.

図5(G)は、固体撮像素子501の全体構成を示す図である。固体撮像素子501の撮像領域には、複数の単位画素セル510が二次元状に配置される。また、二次元状に配置された複数の単位画素セル510の一部が、単位画素セル510a、510b、510cおよび510dに離散的に置換されている。図5(G)の例では、(x―1)列と(x+3)列に単位画素セル510aおよび510bが配置されている。また、(y-1)行と(y+3)行に単位画素セル510cおよび510dが配置されている。図5(G)の例では、水平方向に8画素、垂直方向に8画素の計64画素の単位画素セル510のうち、16画素が単位画素セル510a、510b、510cおよび510dであり、他の画素は、単位画素セル510nである。単位画素セル510a、510b、510cおよび510dの数や配置態様は、図5(G)の例に限定されない。 FIG. 5G is a diagram showing the overall configuration of the solid-state imaging device 501. As shown in FIG. A plurality of unit pixel cells 510 are two-dimensionally arranged in the imaging region of the solid-state imaging device 501 . Some of the plurality of unit pixel cells 510 arranged two-dimensionally are discretely replaced with unit pixel cells 510a, 510b, 510c and 510d. In the example of FIG. 5G, unit pixel cells 510a and 510b are arranged in the (x−1) column and the (x+3) column. In addition, unit pixel cells 510c and 510d are arranged in the (y−1) row and the (y+3) row. In the example of FIG. 5G, of the unit pixel cell 510 with a total of 64 pixels, 8 pixels in the horizontal direction and 8 pixels in the vertical direction, 16 pixels are the unit pixel cells 510a, 510b, 510c, and 510d. A pixel is a unit pixel cell 510n. The number and layout of the unit pixel cells 510a, 510b, 510c, and 510d are not limited to the example in FIG. 5(G).

アクセス順序制御部511は、各単位画素セル510に共通に設けられる。アクセス順序制御部511は、各単位画素セル510へのアクセス順序を制御し、各単位画素セル510に対して駆動信号を発生する。ここでは、アクセス順序制御部511は、同一垂直ライン(x)列上に設けられた複数の単位画素セル510に対して、共通の転送信号PTX_H(x)を供給する。また、アクセス順序制御部511は、同一水平ライン(y)行上に設けられた複数の単位画素セル510に対して、共通の転送信号PTX_V(y)を供給する。各単位画素セル510にはフォトダイオードPDへのアクセス手段である転送ゲートTXが設けられる。(x)列(y)行の単位画素セルの転送ゲートTXは、転送信号PTX_H(x)およびPTX_V(y)の双方がハイレベルのときアクティブとなる。転送信号PTX_H(x)およびPTX_V(y)の双方がハイレベルのとき、フォトダイオードPDは、後段のAD変換部522に電気的に接続される。 The access order control section 511 is commonly provided for each unit pixel cell 510 . The access order control section 511 controls the order of access to each unit pixel cell 510 and generates a drive signal for each unit pixel cell 510 . Here, the access order control section 511 supplies a common transfer signal PTX_H(x) to a plurality of unit pixel cells 510 provided on the same vertical line (x) column. Also, the access order control unit 511 supplies a common transfer signal PTX_V(y) to a plurality of unit pixel cells 510 provided on the same horizontal line (y). Each unit pixel cell 510 is provided with a transfer gate TX as an access means to the photodiode PD. The transfer gate TX of the unit pixel cell of (x) column (y) row becomes active when both transfer signals PTX_H(x) and PTX_V(y) are at high level. When both the transfer signals PTX_H(x) and PTX_V(y) are at high level, the photodiode PD is electrically connected to the AD converter 522 in the subsequent stage.

固体撮像素子501のうち、同一垂直ライン上、または、近傍の垂直ライン上に設けられた単位画素セル510aおよび510bから、マイクロレンズMLの光軸から上下方向に偏芯された画素信号を取得することができる。また、同一水平ライン上、または、近傍の水平ライン上に設けられた単位画素セル510cおよび510dから、マイクロレンズMLの光軸から左右方向に偏芯された画素信号を取得することができる。取得された偏芯された画素信号は、焦点検出用信号として、相関演算を用いたデフォーカス量の演算に用いることができる。マイクロレンズMLの光軸から偏芯されていない画素信号(撮像信号用の画素信号)は、単位画素セル510から取得される。単位画素セル510、510a、510b、510cおよび510dからの画素信号については、周辺の単位画素セルの信号を用いた補完処理やゲイン補正等により、撮像信号として利用されてもよい。 Pixel signals vertically decentered from the optical axis of the microlens ML are obtained from the unit pixel cells 510a and 510b provided on the same vertical line or on adjacent vertical lines in the solid-state imaging device 501. be able to. Further, it is possible to obtain pixel signals decentered in the horizontal direction from the optical axis of the microlens ML from the unit pixel cells 510c and 510d provided on the same horizontal line or on adjacent horizontal lines. The acquired eccentric pixel signal can be used as a focus detection signal to calculate a defocus amount using a correlation calculation. A pixel signal (pixel signal for imaging signal) that is not decentered from the optical axis of the microlens ML is acquired from the unit pixel cell 510 . Pixel signals from the unit pixel cells 510, 510a, 510b, 510c, and 510d may be used as imaging signals by interpolation processing, gain correction, or the like using signals from surrounding unit pixel cells.

図6は、第2実施形態に係る固体撮像素子501の駆動タイミングを示すタイミングチャートである。各制御信号のハイ期間に、各制御信号が入力されるゲートがアクティブとなる。アクセス順序制御部511は、第1実施形態と同様、各単位画素セル510へのアクセス順序が異なる第1の読み出しモードおよび第2の読み出しモードに基づいて、各単位画素セル510へのアクセス制御を行う。選択信号PSEL_h(x)、PSEL_v(y)およびリセット信号PRESの駆動は、第1実施形態と同様であるため、説明を省略する。 FIG. 6 is a timing chart showing driving timings of the solid-state imaging device 501 according to the second embodiment. The gate to which each control signal is input becomes active during the high period of each control signal. As in the first embodiment, the access order control unit 511 controls access to each unit pixel cell 510 based on a first read mode and a second read mode in which the order of access to each unit pixel cell 510 is different. conduct. Since the selection signals PSEL_h(x), PSEL_v(y) and the reset signal PRES are driven in the same manner as in the first embodiment, description thereof is omitted.

図6(A)は、第1の読み出しモードにおける信号読み出しに関わるタイミングチャートである。第1の読み出しモードでは、アクセス順序制御部511は、着目する単位画素セル510と同一垂直ライン上に配置された第1の画素セル群に連続してアクセスする制御を行う。これにより、同一垂直ライン上に配置された第1の単位画素セル群の各単位画素セル510の画素信号が、同一水平ライン上に配置された各単位画素セル510と比較して短時間で読み出される。 FIG. 6A is a timing chart relating to signal readout in the first readout mode. In the first readout mode, the access order control unit 511 performs control to continuously access the first pixel cell group arranged on the same vertical line as the unit pixel cell 510 of interest. As a result, the pixel signals of the unit pixel cells 510 of the first unit pixel cell group arranged on the same vertical line can be read out in a shorter time compared to the unit pixel cells 510 arranged on the same horizontal line. be

アクセス順序制御部511は、期間t601において、(x-1)列の単位画素セル510へ供給される転送信号PTX_H(x-1)をハイレベルとする。また、アクセス順序制御部511は、(y-1)行の単位画素セルへ供給される転送信号PTX_V(y-1)をハイレベルとする。これにより、転送信号PTX_H(x-1)と転送信号PTX_V(y-1)との論理積がハイレベルとなるため、(x-1)列(y-1)行の単位画素セル510の転送ゲートTXがアクティブとなる。アクセスされたフォトダイオードPDからの電荷が転送路上に読み出され、AD変換部522へ入力される。AD変換部522に入力された画素信号の電圧レベルは、AD変換部522内の保持手段によって保持される。 The access order control unit 511 sets the transfer signal PTX_H(x-1) supplied to the unit pixel cell 510 of the (x-1) column to high level in the period t601. In addition, the access order control unit 511 sets the transfer signal PTX_V(y-1) supplied to the unit pixel cells in the (y-1) row to high level. As a result, the AND of the transfer signal PTX_H (x-1) and the transfer signal PTX_V (y-1) becomes high level, so that the unit pixel cell 510 of the (x-1) column (y-1) row is transferred. Gate TX becomes active. Charges from the accessed photodiode PD are read onto the transfer path and input to the AD converter 522 . The voltage level of the pixel signal input to the AD conversion section 522 is held by holding means within the AD conversion section 522 .

AD変換部522は、期間t602において、保持手段により保持された電圧レベルをデジタル信号に変換して、変換されたデジタル信号を後段の信号処理部2へ出力する。期間t601からt602にかけての制御により、所定のアドレスの単位画素セル510にアクセスし、アクセスした単位画素セル510から画素信号を得ることができる。期間t603では、アクセス順序制御部511は、アクセス先の単位画素セル510を、同一垂直ライン上に配置された(x-1)列(y)行の単位画素セル510に切り替える。そして、アクセス順序制御部511は、期間t601からt602にかけての制御と同様の制御を繰り返す。アクセス順序制御部511は、以上の制御を、アクセスする行を切り替えながら繰り返し、(x-1)列の単位画素セル510へのアクセスが完了した後、次の列(x)列の単位画素セル510へのアクセスに移行する。 In period t602, the AD converting section 522 converts the voltage level held by the holding means into a digital signal, and outputs the converted digital signal to the signal processing section 2 in the subsequent stage. By controlling from period t601 to t602, the unit pixel cell 510 at a predetermined address can be accessed and the pixel signal can be obtained from the accessed unit pixel cell 510. FIG. In period t603, the access order control unit 511 switches the unit pixel cell 510 to be accessed to the unit pixel cell 510 of (x−1) column (y) row arranged on the same vertical line. Then, the access order control unit 511 repeats the same control as the control from period t601 to t602. The access order control unit 511 repeats the above control while switching the row to be accessed, and after the access to the unit pixel cell 510 of the (x−1) column is completed, 510 access.

アクセス順序制御部511は、期間t607からt612にかけて、アクセス先の単位画素セル510を、(x)列上の単位画素セル510に切り替える。そして、アクセス順序制御部511は、期間t601からt606にかけての制御と同様の制御を繰り返す。(x)列上の単位画素セル510へのアクセスが完了した後、アクセス順序制御部511は、期間t613からt618にかけて、アクセス先の単位画素セル510を、(x+1)列上の単位画素セルに切り替える。そして、アクセス順序制御部511は、期間t601からt606にかけての制御と同様の制御を繰り返す。アクセス順序制御部511は、以上の制御を、全列に対し繰り返す。これにより、第1の読み出しモードによる1フレーム分の画素信号の読み出し動作が行われる。 The access order control unit 511 switches the unit pixel cell 510 to be accessed to the unit pixel cell 510 on the (x) column from period t607 to t612. Then, the access order control unit 511 repeats the same control as the control from period t601 to t606. After the access to the unit pixel cell 510 on the (x) column is completed, the access order control unit 511 shifts the access destination unit pixel cell 510 to the unit pixel cell on the (x+1) column from period t613 to t618. switch. Then, the access order control unit 511 repeats the same control as the control from period t601 to t606. The access order control unit 511 repeats the above control for all columns. As a result, the readout operation of pixel signals for one frame is performed in the first readout mode.

以上のように、各単位画素セル510のうち単位画素セル510a、510b、510cおよび510dは、受光する領域がマイクロレンズMLの光軸から上下方向または左右方向に偏芯している。そして、複数の単位画素セル510a、510b、510cおよび510dは、離散的に配置される。上述したように、同一垂直ライン上に配置された単位画素セル510aおよび510bは、受光する領域が上下方向に偏芯している。また、同一水平ライン上に配置された単位画素セル510cおよび510dは、受光する領域が左右方向に偏芯している。第1の読み出しモードにおいて、アクセス順序制御部511は、上述した制御を行うことにより、第1実施形態と同様、同一垂直ラインのA像信号あるいはB像信号についての露光時間差を低減しながら、上下方向に偏芯された画素信号を取得することができる。また、読み出しが完了した垂直ラインから、順次、相関演算を開始することができる。このため、画素信号の読み出しからデフォーカス量演算やフォーカス動作までのタイムラグが短縮される。 ここで、アクセス順序制御部511は、焦点検出のために画素信号の読み出しを行い、画像信号の取得が不要な場合には、複数の単位画素セル510のうち、単位画素セル510aおよび510bを含む垂直ラインのみにアクセスするように制御してもよい。あるいは、アクセス順序制御部511は、複数の単位画素セル510のうち、単位画素セル510a、510b、510cおよび510dを含む垂直ラインのみにアクセスするように制御してもよい。これにより、1フレーム分の総読み出し時間の短縮化を図ることができる。この点は、以下の第2の読み出しモードも同様である。 As described above, the unit pixel cells 510a, 510b, 510c, and 510d among the unit pixel cells 510 have their light-receiving regions vertically or horizontally decentered from the optical axis of the microlens ML. The plurality of unit pixel cells 510a, 510b, 510c and 510d are discretely arranged. As described above, the unit pixel cells 510a and 510b arranged on the same vertical line have their light-receiving regions vertically eccentric. In addition, the unit pixel cells 510c and 510d arranged on the same horizontal line have their light-receiving regions eccentric in the horizontal direction. In the first readout mode, the access order control unit 511 performs the above-described control to reduce the exposure time difference between the A image signal and the B image signal of the same vertical line while reducing the exposure time difference between the A image signal and the B image signal of the same vertical line. A pixel signal that is eccentric in a direction can be obtained. In addition, the correlation calculation can be started sequentially from the vertical lines for which reading has been completed. Therefore, the time lag from readout of pixel signals to defocus amount calculation and focus operation is shortened. Here, the access order control unit 511 performs readout of pixel signals for focus detection, and when acquisition of image signals is unnecessary, among the plurality of unit pixel cells 510, the unit pixel cells 510a and 510b are included. It may be controlled to access only vertical lines. Alternatively, the access order control section 511 may control to access only vertical lines including the unit pixel cells 510a, 510b, 510c and 510d among the plurality of unit pixel cells 510. FIG. As a result, the total readout time for one frame can be shortened. This point also applies to the second read mode described below.

図6(B)は、第2の読み出しモードにおける、信号読み出しに関わるタイミングチャートである。第2の読み出しモードでは、アクセス順序制御部511は、着目する単位画素セル510と同一水平ライン上に配置された第2の画素セル群に連続してアクセスする制御を行う。これにより、同一水平ライン上に配置された第1の単位画素セル群の各単位画素セル510の画素信号が、同一垂直ライン上に配置された各単位画素セル510と比較して短時間で読み出される。 FIG. 6B is a timing chart relating to signal readout in the second readout mode. In the second readout mode, the access order control unit 511 performs control to continuously access the second pixel cell group arranged on the same horizontal line as the unit pixel cell 510 of interest. As a result, the pixel signals of the unit pixel cells 510 of the first unit pixel cell group arranged on the same horizontal line can be read out in a shorter time compared to the unit pixel cells 510 arranged on the same vertical line. be

アクセス順序制御部511は、期間t621において、(y-1)行の単位画素セル510へ供給される転送信号PTX_V(y-1)をハイレベルとする。また、アクセス順序制御部511は、(x-1)列の単位画素セル510へ供給される転送信号PTX_H(x-1)をハイレベルとする。これにより、転送信号PTX_H(x-1)と転送信号PTX_V(y-1)との論理積がハイレベルとなるため、(x-1)列(y-1)行の単位画素セル510の転送ゲートTXがアクティブとなる。アクセスされたフォトダイオードPDからの電荷が転送路上に読み出され、画素信号がAD変換部522へ入力される。AD変換部522に入力された画素信号の電圧レベルは、AD変換部522内の保持手段により保持される。AD変換部522は、期間t622において、保持手段により保持された電圧レベルをデジタル信号に変換し、後段の信号処理部2へ出力する。期間t621からt622にかけての制御で、所定のアドレスの単位画素セル510に対してアクセスがされ、アクセスされた単位画素セル510から画素信号を得ることができる。 The access order control unit 511 sets the transfer signal PTX_V(y−1) supplied to the unit pixel cell 510 of the (y−1) row to high level in the period t621. Also, the access order control unit 511 sets the transfer signal PTX_H(x-1) supplied to the unit pixel cell 510 of the (x-1) column to high level. As a result, the AND of the transfer signal PTX_H (x-1) and the transfer signal PTX_V (y-1) becomes high level, so that the unit pixel cell 510 of the (x-1) column (y-1) row is transferred. Gate TX becomes active. A charge from the accessed photodiode PD is read onto the transfer path, and a pixel signal is input to the AD converter 522 . The voltage level of the pixel signal input to the AD conversion section 522 is held by holding means within the AD conversion section 522 . In period t622, the AD conversion section 522 converts the voltage level held by the holding means into a digital signal, and outputs the digital signal to the signal processing section 2 in the subsequent stage. Under the control from period t621 to t622, the unit pixel cell 510 at a predetermined address is accessed, and the pixel signal can be obtained from the accessed unit pixel cell 510. FIG.

アクセス順序制御部511は、期間t623において、アクセス先の単位画素セル510を、同一垂直ライン上に配置された(x)列(y-1)行の単位画素セル510に切り替える。そして、アクセス順序制御部511は、期間t621からt622にかけての制御と同様の制御を繰り返す。アクセス順序制御部511は、以上の制御を、アクセスする列を切り替えながら繰り返す。(y-1)行の単位画素セル510へのアクセスが完了した後、アクセス順序制御部511は、次の行の単位画素セル510へのアクセスに移行する。アクセス順序制御部511は、期間t627からt632にかけて、アクセス先の単位画素セル510を、(y)行上の単位画素セル510に切り替える。そして、アクセス順序制御部511は、期間t621からt626にかけての制御と同様の制御を繰り返す。(y)行上の単位画素セル510へのアクセスが完了した後、アクセス順序制御部511は、期間t633からt638にかけて、アクセス先の単位画素セル510を、(y+1)行上の単位画素セル510に切り替える。そして、アクセス順序制御部511は、期間t621からt626にかけての制御と同様の制御を繰り返す。アクセス順序制御部511は、以上の制御を全行に対して繰り返すことで、第2の読み出しモードによる1フレーム分の画素信号の読み出し動作が行われる。 In period t623, the access order control unit 511 switches the unit pixel cell 510 to be accessed to the unit pixel cell 510 of (x) column (y−1) row arranged on the same vertical line. Then, the access order control unit 511 repeats the same control as the control from period t621 to t622. The access order control unit 511 repeats the above control while switching the column to be accessed. After the access to the unit pixel cells 510 in the (y−1) row is completed, the access order control section 511 shifts to access to the unit pixel cells 510 in the next row. The access order control unit 511 switches the unit pixel cell 510 to be accessed to the unit pixel cell 510 on the (y) row from period t627 to t632. Then, the access order control unit 511 repeats the same control as the control from period t621 to t626. After the access to the unit pixel cell 510 on the (y) row is completed, the access order control unit 511 shifts the access destination unit pixel cell 510 to the unit pixel cell 510 on the (y+1) row from period t633 to t638. switch to Then, the access order control unit 511 repeats the same control as the control from period t621 to t626. The access order control unit 511 repeats the above control for all rows, thereby performing the readout operation of pixel signals for one frame in the second readout mode.

上述したように、同一水平ライン上に配置された単位画素セル510cおよび510dは、受光する領域が水平方向に偏芯している。アクセス順序制御部511は、第2の読み出しモードにおいて、上述した制御を行うことにより、第1実施形態と同様、同一水平ラインのA像信号あるいはB像信号についての露光時間差を低減しながら、左右方向に偏芯された画素信号を取得することができる。また、読み出しが完了した垂直ラインから、順次、相関演算を開始することができる。このため、画素信号の読み出しからデフォーカス量演算やフォーカス動作までのタイムラグが短縮される。 As described above, the unit pixel cells 510c and 510d arranged on the same horizontal line have horizontally decentered light-receiving regions. By performing the above-described control in the second readout mode, the access order control unit 511 reduces the exposure time difference for the A image signal or the B image signal of the same horizontal line while reducing the exposure time difference between the left and right images, as in the first embodiment. A pixel signal that is eccentric in a direction can be obtained. In addition, the correlation calculation can be started sequentially from the vertical lines for which reading has been completed. Therefore, the time lag from readout of pixel signals to defocus amount calculation and focus operation is shortened.

従って、第2実施形態では、第1実施形態と同様、アクセス順序制御部511は、優先して使用する画素信号の偏芯方向に応じて単位画素セル510へのアクセス順序を異ならせる。これにより、マイクロレンズMLの光軸からの偏芯方向と同じ方向に延伸された同一ラインのA像信号、あるいはB像信号についての露光時間差を低減することができる。その結果、瞳分割により複数の像を取得可能な撮像装置において、焦点検出精度を向上させることができる。 Therefore, in the second embodiment, as in the first embodiment, the access order control unit 511 changes the access order to the unit pixel cells 510 according to the eccentric direction of the pixel signal to be preferentially used. As a result, the exposure time difference for the A image signal or the B image signal of the same line stretched in the same direction as the eccentric direction from the optical axis of the microlens ML can be reduced. As a result, focus detection accuracy can be improved in an imaging apparatus capable of obtaining a plurality of images by pupil division.

<第3実施形態>
図7は、第3実施形態の固体撮像素子701の全体構成を示す構成図である。第3実施形態では、撮像領域は、撮像領域より小さいエリアである複数の画素エリアに分割され、複数の画素エリアのそれぞれに対応する信号処理手段(AD変換部)が設けられる点で、第1実施形態と異なる。第3実施形態では、画素エリアごとにAD変換部が設けられるため、異なる画素エリアの単位画素セルに対し、同時にアクセスすることが可能である。
<Third Embodiment>
FIG. 7 is a configuration diagram showing the overall configuration of a solid-state imaging device 701 according to the third embodiment. In the third embodiment, the imaging region is divided into a plurality of pixel areas that are smaller than the imaging region, and signal processing means (AD converters) corresponding to each of the plurality of pixel areas are provided. Different from the embodiment. In the third embodiment, since an AD converter is provided for each pixel area, it is possible to access unit pixel cells in different pixel areas at the same time.

図7(A)は、固体撮像素子701の断面構造を示す模式図である。固体撮像素子701において、第1の基板714aと第2の基板714bとが積層されている。第1の基板714aと第2の基板714bとの間には接続層715が介在しており、第1の基板714aと第2の基板714bとが電気的に接続される。図7(B)は、第1の基板714おおび第2の基板714bの構成を示すブロック図である。第1の基板714aの撮像領域には、複数の画素エリア713が配置される。各画素エリア713は、撮像領域を分割したエリアである。また、各画素エリア713には、複数の単位画素セル710が二次元状に配置されている。 FIG. 7A is a schematic diagram showing a cross-sectional structure of the solid-state imaging device 701. FIG. In the solid-state imaging device 701, a first substrate 714a and a second substrate 714b are laminated. A connection layer 715 is interposed between the first substrate 714a and the second substrate 714b to electrically connect the first substrate 714a and the second substrate 714b. FIG. 7B is a block diagram showing the structures of the first substrate 714 and the second substrate 714b. A plurality of pixel areas 713 are arranged in the imaging region of the first substrate 714a. Each pixel area 713 is an area obtained by dividing the imaging region. A plurality of unit pixel cells 710 are arranged two-dimensionally in each pixel area 713 .

第2の基板714bには、複数の画素エリア713に共通のアクセス順序制御部711が設けられる。また、第2の基板714bには、単位画素セル710からの信号を処理するAD変換部712が、複数の画素エリア713にそれぞれ対応するように二次元状に配置される。アクセス順序制御部711は、接続層715を介して複数の画素エリア713へ共通の駆動信号を供給し、画素エリア713に含まれる複数の単位画素セル710へのアクセス順序を制御する。また、アクセス順序制御部711は、複数のAD変換部712へ共通の駆動信号を供給し、AD変換部712の駆動を制御する。画素エリア713は、接続層715を介して、それぞれ対応するAD変換部712に接続される。 An access order control unit 711 common to the plurality of pixel areas 713 is provided on the second substrate 714b. In addition, on the second substrate 714b, AD converters 712 that process signals from the unit pixel cells 710 are arranged two-dimensionally so as to correspond to the plurality of pixel areas 713, respectively. The access order control section 711 supplies a common drive signal to the plurality of pixel areas 713 via the connection layer 715 and controls the order of access to the plurality of unit pixel cells 710 included in the pixel area 713 . The access order control unit 711 also supplies a common drive signal to the plurality of AD conversion units 712 to control driving of the AD conversion units 712 . The pixel areas 713 are connected to corresponding AD converters 712 via connection layers 715 .

図8は、第3実施形態に係る固体撮像素子701の画素エリア713および単位画素セル710の構成を示す構成図である。図8(A)および(B)は、単位画素セル710の構成を示す構成図である。単位画素セル710には、第1実施形態と同様、マイクロレンズMLに対応して、複数のフォトダイオードPD_a、PD_b、PD_cおよびPD_dが設けられる。各単位画素セル710には、第1実施形態と同様、転送ゲートTX_a、TX_b、TX_cおよびTX_dが設けられる。 FIG. 8 is a configuration diagram showing configurations of a pixel area 713 and a unit pixel cell 710 of a solid-state imaging device 701 according to the third embodiment. 8A and 8B are configuration diagrams showing the configuration of the unit pixel cell 710. FIG. A unit pixel cell 710 is provided with a plurality of photodiodes PD_a, PD_b, PD_c, and PD_d corresponding to the microlenses ML, as in the first embodiment. Each unit pixel cell 710 is provided with transfer gates TX_a, TX_b, TX_c, and TX_d, as in the first embodiment.

図8(C)は、画素エリア713の構成を示す図である。画素エリア713には、複数の単位画素セル710が二次元状に配置される。アクセス順序制御部711は、画素エリア713内の同一垂直ライン(x)列上に設けられた複数の単位画素セル710に対して、共通の転送信号PTX_ab(x)およびPTX_cd(x)を供給する。また、アクセス順序制御部711は、画素エリア713内の同一水平ライン(y)行上に設けられた複数の単位画素セル710に対して、共通の転送信号PTX_ac(y)およびPTX_bd(y)を供給する。画素エリア713には、各単位画素セル710に対応して、共通のリセットゲートRESが設けられる。アクセス順序制御部711は、リセットゲートRESにリセット信号PRESを供給する。リセット信号PRESがハイレベルのときに、転送路上の電荷がリセットされる。AD変換部712は、画素エリア713の複数の単位画素セル710に共通に設けられる。AD変換部712は、ソースフォロワを有しており、単位画素セル710から入力された電荷に応じてソースフォロワが出力した電圧を、デジタル信号に変換する。 FIG. 8C is a diagram showing the configuration of the pixel area 713. As shown in FIG. A plurality of unit pixel cells 710 are two-dimensionally arranged in the pixel area 713 . The access order control unit 711 supplies common transfer signals PTX_ab(x) and PTX_cd(x) to a plurality of unit pixel cells 710 provided on the same vertical line (x) column in the pixel area 713. . Further, the access order control unit 711 applies common transfer signals PTX_ac(y) and PTX_bd(y) to a plurality of unit pixel cells 710 provided on the same horizontal line (y) in the pixel area 713. supply. A common reset gate RES is provided in the pixel area 713 corresponding to each unit pixel cell 710 . The access order control unit 711 supplies a reset signal PRES to the reset gate RES. Charges on the transfer path are reset when the reset signal PRES is at high level. The AD converter 712 is commonly provided for the plurality of unit pixel cells 710 in the pixel area 713 . The AD converter 712 has a source follower, and converts the voltage output by the source follower according to the charge input from the unit pixel cell 710 into a digital signal.

第3実施形態では、アクセス順序制御部711は、複数の画素エリア713を共通の駆動信号によって駆動し、複数の画素エリア713の単位画素セル710へのアクセス順序を制御する。画素エリア713内の各単位画素セル710の駆動タイミングは、第1実施形態と同様である。第3実施形態では、アクセス順序制御部711は、図3に示す駆動タイミングにより、複数の画素エリア713を並列に制御する点で、第1実施形態と異なる。また、単位画素セル710からの信号読み出しは、異なる画素エリア713について並列に行われる。よって、撮像領域全体として見たときに、単位画素セル710からの信号読み出しが離散順序となる。そこで、AD変換部712または信号処理部2は、同一ラインの単位画素セル710からの信号が撮像領域内の配置と同順になるように、画素信号の並べ替えを行う。 In the third embodiment, the access order control section 711 drives the plurality of pixel areas 713 with a common drive signal and controls the order of access to the unit pixel cells 710 of the plurality of pixel areas 713 . The driving timing of each unit pixel cell 710 in the pixel area 713 is the same as in the first embodiment. The third embodiment differs from the first embodiment in that the access order control unit 711 controls a plurality of pixel areas 713 in parallel according to the drive timings shown in FIG. Signal readout from the unit pixel cells 710 is performed in parallel for different pixel areas 713 . Therefore, when viewed as the entire imaging area, signal readout from the unit pixel cells 710 is in a discrete order. Therefore, the AD conversion unit 712 or the signal processing unit 2 rearranges the pixel signals so that the signals from the unit pixel cells 710 on the same line are arranged in the same order as in the imaging region.

第3実施形態における読み出しモードの選択に関わる制御は、選択信号PSEL_h(x)およびPSEL_v(y)が不要である点を除き、第1実施形態と同様である。固体撮像素子701は、複数のアクセス順序制御部711を有している。各アクセス順序制御部711が、複数の画素エリア713のうち何れの画素エリア713を制御するかが、選択可能であってもよい。この場合、各アクセス順序制御部711は、画素エリア713ごとに、水平方向の各画素の読み出しを優先させるか、または垂直方向の各画素の読み出しを優先させるかを制御してもよい。例えば、各アクセス順序制御部711は、図4のステップS407における被写体パターンの判定を、画素エリア713ごとに実施し、何れの読み出しモードを選択するかを、画素エリア713ごとに選択してもよい。各アクセス順序制御部711は、画素エリア713ごとに、被写体パターンに基づいて、第1の方向の複数の画素に対するアクセスと第2の方向の複数の画素に対するアクセスとの何れを優先させるかを決定してもよい。また、各アクセス順序制御部711の読み出しモードは固定されていてもよい。この場合、図4のS406~S409の処理は不要となり、撮像装置200の処理が簡略化される。 Control related to read mode selection in the third embodiment is the same as in the first embodiment, except that the selection signals PSEL_h(x) and PSEL_v(y) are unnecessary. The solid-state imaging device 701 has a plurality of access order control units 711 . Which pixel area 713 among the plurality of pixel areas 713 is to be controlled by each access order control unit 711 may be selectable. In this case, each access order control unit 711 may control, for each pixel area 713, whether to give priority to readout of each pixel in the horizontal direction or to give priority to readout of each pixel in the vertical direction. For example, each access order control unit 711 may determine the object pattern in step S407 of FIG. . Each access order control unit 711 determines, for each pixel area 713, which of the access to the plurality of pixels in the first direction and the access to the plurality of pixels in the second direction should be prioritized based on the subject pattern. You may Also, the read mode of each access order control unit 711 may be fixed. In this case, the processing of S406 to S409 in FIG. 4 becomes unnecessary, and the processing of the imaging device 200 is simplified.

<第4実施形態>
次に、第4実施形態について説明する。図9は、第4実施形態に係る固体撮像素子901の画素エリア913および単位画素セル910の構成を示す構成図である。図9に示されるように、第4実施形態は、1つの画素エリア913に対して、複数のAD変換部912が設けられている点が、第3実施形態と異なる。1つの画素エリア913に対応して複数のAD変換部912が設けられるため、画素エリア913内の複数の単位画素セル910に対して、並列にアクセスすることが可能である。
<Fourth Embodiment>
Next, a fourth embodiment will be described. FIG. 9 is a configuration diagram showing configurations of a pixel area 913 and a unit pixel cell 910 of a solid-state imaging device 901 according to the fourth embodiment. As shown in FIG. 9, the fourth embodiment differs from the third embodiment in that a plurality of AD converters 912 are provided for one pixel area 913 . Since a plurality of AD converters 912 are provided corresponding to one pixel area 913, it is possible to access a plurality of unit pixel cells 910 in the pixel area 913 in parallel.

図9(A)および(B)は、単位画素セル910の構成を示す構成図である。図9(A)に示されるように、単位画素セル910は、画素信号の出力先を選択するための出力ゲートOUT_hおよびOUT_vを有する。出力ゲートOUT_hは、供給される出力先選択信号POUT_hがハイレベルのときアクティブとなる。出力ゲートOUT_vは、供給される出力先選択信号POUT_vがハイレベルのときアクティブとなる。出力ゲートOUT_hは、左右方向(水平方向)に対応する出力ゲートであり、出力ゲートOUT_vは、上下方向(垂直方向)に対応する出力ゲートである。 9A and 9B are configuration diagrams showing the configuration of the unit pixel cell 910. FIG. As shown in FIG. 9A, the unit pixel cell 910 has output gates OUT_h and OUT_v for selecting output destinations of pixel signals. The output gate OUT_h becomes active when the supplied output destination selection signal POUT_h is at high level. The output gate OUT_v becomes active when the supplied output destination selection signal POUT_v is at high level. The output gate OUT_h is an output gate corresponding to the horizontal direction (horizontal direction), and the output gate OUT_v is an output gate corresponding to the vertical direction (vertical direction).

画素エリア913内の(x)列目のフォトダイオードPD_a、PD_b、PD_cおよびPD_dは、転送ゲートTX_a、TX_b、TX_cおよびTX_d、および共通の出力ゲートOUT_hを介して出力線914_h(x)に接続される。画素エリア913内の(y)行目のフォトダイオードPD_a、PD_b、PD_cおよびPD_dは、転送ゲートTX_a、TX_b、TX_cおよびTX_d、および共通の出力ゲートOUT_vを介して出力線914_v(y)に接続される。 Photodiodes PD_a, PD_b, PD_c, and PD_d in the (x)-th column in the pixel area 913 are connected to an output line 914_h(x) via transfer gates TX_a, TX_b, TX_c, and TX_d, and a common output gate OUT_h. be. The photodiodes PD_a, PD_b, PD_c and PD_d in the (y) row in the pixel area 913 are connected to the output line 914_v(y) via the transfer gates TX_a, TX_b, TX_c and TX_d and the common output gate OUT_v. be.

図9(C)は、画素エリア913の構成を示す図である。画素エリア913には、複数の単位画素セル910が二次元状に配置される。また、アクセス順序制御部911は、画素エリア913の同一垂直ライン(x)列上に設けられた複数の単位画素セル910に対して、共通の転送信号PTX_ab(x)およびPTX_cd(x)を供給する。また、アクセス順序制御部911は、画素エリア913の同一水平ライン(y)行上に設けられた複数の単位画素セル910に対して、共通の転送信号PTX_ac(y)およびPTX_bd(y)を供給する。画素エリア913の各単位画素セル910に対して、共通のリセット回路915が設けられる。アクセス順序制御部911は、リセット回路915にリセット信号PRESを供給する。リセット信号PRESがハイレベルのときに、転送路上の電荷がリセットされる。 FIG. 9C is a diagram showing the configuration of the pixel area 913. As shown in FIG. A plurality of unit pixel cells 910 are two-dimensionally arranged in the pixel area 913 . Also, the access order control unit 911 supplies common transfer signals PTX_ab(x) and PTX_cd(x) to a plurality of unit pixel cells 910 provided on the same vertical line (x) column in the pixel area 913. do. Also, the access order control unit 911 supplies common transfer signals PTX_ac(y) and PTX_bd(y) to a plurality of unit pixel cells 910 provided on the same horizontal line (y) row of the pixel area 913. do. A common reset circuit 915 is provided for each unit pixel cell 910 in the pixel area 913 . The access order control unit 911 supplies a reset signal PRES to the reset circuit 915 . Charges on the transfer path are reset when the reset signal PRES is at high level.

アクセス順序制御部911は、画素エリア913の全ての単位画素セル910に対して、共通の出力先選択信号POUT_hおよびPOUT_vを供給する。ハイレベルの出力先選択信号POUT_hが供給されると、1列目の単位画素セル群が出力線914_h(1)に接続される。同様に、2列目の単位画素セル群が出力線914_h(2)に接続され、3列目の単位画素セル群が出力線914_h(3)に接続され、4列目の単位画素セル群が出力線914_h(4)に接続される。また、ハイレベルの出力先選択信号POUT_vが供給されると、1行目の単位画素セル群が出力線914_v(1)に接続される。同様に、2行目の単位画素セル群が出力線914_v(2)に接続され、3行目の単位画素セル群が出力線914_v(3)に接続され、4行目の単位画素セル群が出力線914_v(4)に接続される。 The access order control unit 911 supplies common output destination selection signals POUT_h and POUT_v to all the unit pixel cells 910 in the pixel area 913 . When a high-level output destination selection signal POUT_h is supplied, the unit pixel cell group in the first column is connected to the output line 914_h(1). Similarly, the unit pixel cell group in the second column is connected to the output line 914_h(2), the unit pixel cell group in the third column is connected to the output line 914_h(3), and the unit pixel cell group in the fourth column is connected to the output line 914_h(2). It is connected to the output line 914_h(4). Also, when a high-level output destination selection signal POUT_v is supplied, the unit pixel cell group in the first row is connected to the output line 914_v(1). Similarly, the unit pixel cell group in the second row is connected to the output line 914_v(2), the unit pixel cell group in the third row is connected to the output line 914_v(3), and the unit pixel cell group in the fourth row is connected to the output line 914_v(2). It is connected to the output line 914_v(4).

図9(C)に示されるように、複数のAD変換部912_(1)、912_(2)、912_(3)および912_(4)が、画素エリア913内の複数の単位画素セル910に対して共通に設けられる。AD変換部912_(1)には、出力線914_h(1)および914_v(1)を介した画素信号が入力される。AD変換部912_(1)は、アクセス順序制御部911から出力された出力先選択信号POUT_hとPOUT_vとに従って、出力線914_h(1)または914_v(1)を選択する。AD変換部912_(1)は、出力線914_h(1)または914_v(1)から入力したアナログ信号を選択的にデジタル信号に変換する。 As shown in FIG. 9C, a plurality of AD converters 912_(1), 912_(2), 912_(3) and 912_(4) are applied to a plurality of unit pixel cells 910 in the pixel area 913. provided in common. A pixel signal is input to the AD converter 912_(1) through output lines 914_h(1) and 914_v(1). AD conversion section 912_(1) selects output line 914_h(1) or 914_v(1) according to output destination selection signals POUT_h and POUT_v output from access order control section 911 . AD converter 912_(1) selectively converts an analog signal input from output line 914_h(1) or 914_v(1) into a digital signal.

AD変換部912_(2)には、出力線914_h(2)または914_v(2)を介した画素信号が入力される。AD変換部912_(3)には、出力線914_h(3)または914_v(3)を介した画素信号が入力される。AD変換部912_(4)には出力線914_h(4)または914_v(4)を介した画素信号が入力される。AD変換部912_(2)、AD変換部912_(3)およびAD変換部912_(4)は、AD変換部912_(1)と同様に、入力されるアナログ信号を選択的にデジタル信号に変換する。アクセス順序制御部911は、複数のAD変換部912が並列に画素信号を受け取る複数の単位画素セルの組み合わせを選択することができる。 A pixel signal is input to the AD converter 912_(2) through the output line 914_h(2) or 914_v(2). A pixel signal is input to the AD converter 912_(3) through the output line 914_h(3) or 914_v(3). A pixel signal is input to the AD converter 912_(4) via the output line 914_h(4) or 914_v(4). AD converter 912_(2), AD converter 912_(3), and AD converter 912_(4) selectively convert input analog signals into digital signals, similar to AD converter 912_(1). . The access order control section 911 can select a combination of a plurality of unit pixel cells from which the plurality of AD conversion sections 912 receive pixel signals in parallel.

図10は、第4実施形態に係る固体撮像素子901の駆動タイミングを示すタイミングチャートである。各選択信号のハイ期間に、各選択信号が入力されるゲートがアクティブとなる。図10(A)は、第1の読み出しモードにおける、画素信号の読み出しに関わるタイミングチャートである。第1の読み出しモードでは、単位画素セル910の各フォトダイオードPDで蓄積された電荷は、単位画素セルごとに左右方向に合成される(PD_a+PD_b、PD_c+PD_d)。これにより、上下方向に偏芯された画素信号が取得される。このとき、着目する単位画素セル910と同一垂直ライン上に配置された単位画素セル群に並行してアクセスがされる。これにより、同一垂直ライン上に配置された単位画素セル群の画素信号が、同一水平ライン上に配置された単位画素セル群と比較して短時間で読み出される。 FIG. 10 is a timing chart showing drive timings of the solid-state imaging device 901 according to the fourth embodiment. During the high period of each selection signal, the gate to which each selection signal is input becomes active. FIG. 10A is a timing chart relating to readout of pixel signals in the first readout mode. In the first readout mode, charges accumulated in each photodiode PD of the unit pixel cell 910 are combined in the horizontal direction for each unit pixel cell (PD_a+PD_b, PD_c+PD_d). As a result, pixel signals that are decentered in the vertical direction are acquired. At this time, the unit pixel cell group arranged on the same vertical line as the unit pixel cell 910 of interest is accessed in parallel. Accordingly, the pixel signals of the unit pixel cell group arranged on the same vertical line are read out in a shorter time than the unit pixel cell group arranged on the same horizontal line.

アクセス順序制御部911は、画素信号の読み出しに先立って、画素エリア913の全ての単位画素セル910に供給される出力先選択信号POUT_vをハイレベルとする。これにより、1行目の単位画素セル群が出力線914_v(1)に接続される。また、2行目の単位画素セル群が出力線914_v(2)に接続される。また、3行目の単位画素セル群が出力線914_v(3)に接続される。また、4行目の単位画素セル群が出力線914_v(4)に接続される。また、アクセス順序制御部911は、リセット信号PRESをハイレベルとし転送路上の電荷を基準レベルにリセットしておく。 The access order control unit 911 sets the output destination selection signal POUT_v supplied to all the unit pixel cells 910 in the pixel area 913 to high level prior to reading out the pixel signals. As a result, the unit pixel cell group in the first row is connected to the output line 914_v(1). Also, the unit pixel cell group in the second row is connected to the output line 914_v(2). Also, the unit pixel cell group in the third row is connected to the output line 914_v(3). Also, the unit pixel cell group in the fourth row is connected to the output line 914_v(4). Also, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level.

アクセス順序制御部911は、期間t1001に、画素エリア913における1列目の単位画素セル910へ供給される転送信号PTX_ac(1)およびPTX_bd(1)をハイレベルとする。また、アクセス順序制御部911は、各行の単位画素セル910へ供給される転送信号PTX_ab(1)~PTX_ab(4)をハイレベルとする。これにより、転送信号PTX_ac(1)とPTX_ab(1)~PTX_ab(4)との論理積、および転送信号PTX_bd(1)とPTX_ab(1)~PTX_ab(4)との論理積がハイレベルとなる。従って、1列目の各行の単位画素セル910の転送ゲートTX_aおよびTX_bがアクティブとなる。アクセスされた1列目の単位画素セル群のうち、1行目の単位画素セル910のフォトダイオードPD_aおよびPD_bからの電荷は、出力線914_v(1)上で混合されて、上下方向の一方に偏芯された画素信号となる。そして、画素信号は、AD変換部912_(1)へ入力される。AD変換部912_(2)、AD変換部912_(3)およびAD変換部912_(4)にも、同様に、画素信号が入力される。AD変換部912_(1)~912_(4)に入力された画素信号に応じた電圧レベルが、AD変換部912_(1)~912_(4)内の保持手段により保持される。 The access order control unit 911 sets the transfer signals PTX_ac(1) and PTX_bd(1) supplied to the unit pixel cells 910 of the first column in the pixel area 913 to high level during the period t1001. Also, the access order control unit 911 sets the transfer signals PTX_ab(1) to PTX_ab(4) supplied to the unit pixel cells 910 in each row to high level. As a result, the logical product of transfer signal PTX_ac(1) and PTX_ab(1) to PTX_ab(4) and the logical product of transfer signal PTX_bd(1) and PTX_ab(1) to PTX_ab(4) become high level. . Therefore, the transfer gates TX_a and TX_b of the unit pixel cells 910 in each row of the first column become active. Charges from the photodiodes PD_a and PD_b of the unit pixel cell 910 in the first row among the accessed unit pixel cell group in the first column are mixed on the output line 914_v(1) and transferred to one of the vertical directions. A pixel signal with eccentricity is obtained. Then, the pixel signal is input to the AD converter 912_(1). Pixel signals are similarly input to the AD converters 912_(2), 912_(3), and 912_(4). Voltage levels corresponding to pixel signals input to the AD converters 912_(1) to 912_(4) are held by holding means in the AD converters 912_(1) to 912_(4).

AD変換部912_(1)~912_(4)は、期間t1002において、保持手段により保持された電圧レベルを並列にデジタル信号に変換し、後段の信号処理部2へ出力する。この間、アクセス順序制御部911は、リセット信号PRESをハイレベルとし、転送路上の電荷を基準レベルにリセットしておく。図10(A)において、期間t1002に対応する(1、1)~(1、4)は、1列目の各単位画素セル910のうち上下方向の一方に偏芯した画素信号が並列に処理されていることを示す。 In period t1002, the AD converters 912_(1) to 912_(4) convert the voltage levels held by the holding means into digital signals in parallel, and output the digital signals to the signal processor 2 in the subsequent stage. During this time, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level. In (1, 1) to (1, 4) corresponding to the period t1002 in FIG. 10A, the pixel signals eccentric in one of the vertical directions among the unit pixel cells 910 in the first column are processed in parallel. Indicates that

アクセス順序制御部911は、期間t1003において、再び画素エリア913における1列目の単位画素セル910へ供給される転送信号PTX_ac(1)およびPTX_bd(1)をハイレベルとする。また、アクセス順序制御部911は、各行の単位画素セル910へ供給される転送信号PTX_cd(1)~PTX_cd(4)をハイレベルとする。これにより、転送信号PTX_ac(1)とPTX_cd(1)~PTX_cd(4)との論理積、および転送信号PTX_bd(1)とPTX_cd(1)~PTX_cd(4)との論理積がハイレベルとなる。 In period t1003, the access order control unit 911 again sets the transfer signals PTX_ac(1) and PTX_bd(1) supplied to the first-column unit pixel cells 910 in the pixel area 913 to high level. The access order control unit 911 also sets the transfer signals PTX_cd(1) to PTX_cd(4) supplied to the unit pixel cells 910 in each row to high level. As a result, the logical product of transfer signal PTX_ac(1) and PTX_cd(1) to PTX_cd(4) and the logical product of transfer signal PTX_bd(1) and PTX_cd(1) to PTX_cd(4) become high level. .

従って、1列目の各行の単位画素セル910の転送ゲートTX_cおよびTX_dがアクティブとなる。アクセスされた1行目のフォトダイオードPD_cおよびPD_dからの電荷は、出力線914_v(1)上で混合されて上下方向の他方に偏芯された画素信号となる。そして、画素信号は、AD変換部912_(1)へ入力される。AD変換部912_(2)、AD変換部912_(3)およびAD変換部912_(4)に対する画素信号の入力も、AD変換部912_(1)と同様である。 Therefore, the transfer gates TX_c and TX_d of the unit pixel cells 910 in each row of the first column become active. The charges from the accessed photodiodes PD_c and PD_d of the first row are mixed on the output line 914_v(1) to form a pixel signal that is vertically eccentric to the other. Then, the pixel signal is input to the AD converter 912_(1). Input of pixel signals to the AD converter 912_(2), the AD converter 912_(3), and the AD converter 912_(4) is the same as the AD converter 912_(1).

AD変換部912_(1)~912_(4)に入力された画素信号に応じた電圧レベルが、AD変換部912_(1)~912_(4)内の保持手段により保持される。AD変換部912_(1)~912_(4)は、期間t1004において、保持手段に保持された電圧レベルをデジタル信号に並列に変換し、後段の信号処理部2へ出力する。図10(A)において、期間t1004に対応する(1、1)~(1、4)は、1列目の各単位画素セル910のうち上下方向の他方に偏芯した画素信号が並列に処理されていることを示す。この間、アクセス順序制御部911は、リセット信号PRESをハイレベルとし、転送路上の電荷を基準レベルにリセットしておく。以上、期間t1001からt1004にかけての制御で、画素エリア913における1列目の複数の単位画素セルに並行してアクセスし、アクセスした複数の単位画素セル910から上下方向に偏芯された1組の画素信号を得ることができる。アクセス順序制御部911は、期間t1005において、アクセス先の単位画素セル910を2列目の単位画素セル910に切り替える。そして、アクセス順序制御部911は、期間t1001からt1004にかけての制御と同様の制御を繰り返す。アクセス順序制御部911は、期間t1006およびt1007において、3列目以降の単位画素セル910についても、期間t1001からt1004にかけての制御と同様の制御を繰り返す。 以上、期間t1001~t1007の制御により、画素エリア913における全画素の単位画素セル910へのアクセスが完了する。撮像領域内の別の画素エリア913についても、当該画素エリア913と並行して期間t1001~t1007の制御が行われる。これにより、第1の読み出しモードによる1フレーム分の画素信号の読み出し動作が行われる。 Voltage levels corresponding to pixel signals input to the AD converters 912_(1) to 912_(4) are held by holding means in the AD converters 912_(1) to 912_(4). In period t1004, the AD converters 912_(1) to 912_(4) convert the voltage levels held in the holding means into digital signals in parallel, and output the digital signals to the signal processor 2 in the subsequent stage. In (1, 1) to (1, 4) corresponding to the period t1004 in FIG. 10A, pixel signals eccentric in the other vertical direction among the unit pixel cells 910 in the first column are processed in parallel. Indicates that During this time, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level. As described above, in the control from period t1001 to t1004, a plurality of unit pixel cells in the first column in the pixel area 913 are accessed in parallel, and a set of vertically decentered unit pixel cells 910 is created from the accessed unit pixel cells 910. A pixel signal can be obtained. In period t1005, the access order control unit 911 switches the unit pixel cell 910 to be accessed to the unit pixel cell 910 in the second column. Then, the access order control unit 911 repeats the same control as the control from period t1001 to t1004. During periods t1006 and t1007, the access order control section 911 repeats the same control as during periods t1001 to t1004 for the unit pixel cells 910 in the third and subsequent columns. As described above, access to the unit pixel cells 910 of all pixels in the pixel area 913 is completed by the control during the period t1001 to t1007. Another pixel area 913 within the imaging region is also controlled in periods t1001 to t1007 in parallel with the pixel area 913 concerned. As a result, the readout operation of pixel signals for one frame is performed in the first readout mode.

図10(B)は、第2の読み出しモードにおける、信号読み出しに関わるタイミングチャートである。第2の読み出しモードでは、単位画素セル910の各フォトダイオードPDで蓄積された電荷は、単位画素セルごとに上下方向に合成される(PD_a+PD_c、PD_b+PD_d)。これにより、左右方向に偏芯された画素信号が取得される。このとき、アクセス順序制御部911は、着目する単位画素セル910と同一水平ライン上に配置された画素セル群に並行してアクセスする。これにより、同一水平ライン上に配置された単位画素セル群の画素信号が、同一垂直ライン上に配置された単位画素セル群と比較して短時間で読み出される。 FIG. 10B is a timing chart relating to signal readout in the second readout mode. In the second readout mode, the charges accumulated in each photodiode PD of the unit pixel cell 910 are combined vertically for each unit pixel cell (PD_a+PD_c, PD_b+PD_d). As a result, pixel signals that are decentered in the horizontal direction are acquired. At this time, the access order control unit 911 accesses the pixel cell group arranged on the same horizontal line as the unit pixel cell 910 of interest in parallel. Accordingly, the pixel signals of the unit pixel cell group arranged on the same horizontal line are read out in a shorter time than the unit pixel cell group arranged on the same vertical line.

画素信号の読み出しに先立って、アクセス順序制御部911は、画素エリア913の全ての単位画素セル910に供給される出力先選択信号POUT_hをハイレベルとする。これにより、1列目の単位画素セル群が出力線914_h(1)に、2列目の単位画素セル群が出力線914_h(2)に、3列目の単位画素セル群が出力線914_h(3)に、4列目の単位画素セル群が出力線914_h(4)に、それぞれ接続される。また、アクセス順序制御部911は、リセット信号PRESをハイレベルとし転送路上の電荷を基準レベルにリセットしておく。 Prior to reading pixel signals, the access order control unit 911 sets the output destination selection signal POUT_h supplied to all the unit pixel cells 910 in the pixel area 913 to high level. As a result, the unit pixel cell group in the first column is connected to the output line 914_h(1), the unit pixel cell group in the second column is connected to the output line 914_h(2), and the unit pixel cell group in the third column is connected to the output line 914_h(2). 3), the unit pixel cell group in the fourth column is connected to the output line 914_h(4). Also, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level.

アクセス順序制御部911は、期間t1011において、画素エリア913における1行目の単位画素セル910へ供給される転送信号PTX_ab(1)およびPTX_cd(1)をハイレベルとする。また、アクセス順序制御部911は、各列の単位画素セル910へ供給される転送信号PTX_ac(1)~PTX_ac(4)をハイレベルとする。これにより、1行目の各列の単位画素セル910の転送ゲートTX_aおよびTX_cがアクティブとなる。アクセスされた1行目の単位画素セル群のうち、1列目の単位画素セル910のフォトダイオードPD_aおよびPD_cからの電荷は、出力線914_h(1)上で混合されて、左右方向の一方に偏芯された画素信号となる。混合された画素信号は、AD変換部912_(1)へ入力される。AD変換部912_(2)、AD変換部912_(3)およびAD変換部912_(4)に対する画素信号の入力も、AD変換部912_(1)に対する画素信号の入力と同様である。 The access order control unit 911 sets the transfer signals PTX_ab(1) and PTX_cd(1) supplied to the unit pixel cells 910 of the first row in the pixel area 913 to high level in the period t1011. The access order control unit 911 also sets the transfer signals PTX_ac(1) to PTX_ac(4) supplied to the unit pixel cells 910 of each column to high level. As a result, the transfer gates TX_a and TX_c of the unit pixel cells 910 in each column of the first row are activated. Charges from the photodiodes PD_a and PD_c of the unit pixel cell 910 in the first column of the accessed unit pixel cell group in the first row are mixed on the output line 914_h(1) and transferred to one of the left and right directions. A pixel signal with eccentricity is obtained. The mixed pixel signal is input to the AD converter 912_(1). The input of pixel signals to the AD converters 912_(2), 912_(3), and 912_(4) is the same as the input of the pixel signals to the AD converter 912_(1).

AD変換部912_(1)~912_(4)に入力された画素信号に応じた電圧レベルが、AD変換部912_(1)~912_(4)内の保持手段により保持される。AD変換部912_(1)~912_(4)は、期間t1012において、保持手段により保持された電圧レベルをデジタル信号に並行して変換し、後段の信号処理部2へ出力する。図10(B)において、期間t1012に対応する(1、1)~(4、1)は、1行目の各単位画素セル910のうち左右方向の一方に偏芯した画素信号が並列に処理されていることを示す。この間、アクセス順序制御部911は、リセット信号PRESをハイレベルとし、転送路上の電荷を基準レベルにリセットしておく。 Voltage levels corresponding to pixel signals input to the AD converters 912_(1) to 912_(4) are held by holding means in the AD converters 912_(1) to 912_(4). In period t1012, the AD converters 912_(1) to 912_(4) convert the voltage levels held by the holding means into digital signals in parallel, and output the digital signals to the signal processor 2 in the subsequent stage. In FIG. 10B, (1, 1) to (4, 1) corresponding to the period t1012 are pixel signals eccentric in one of the left and right directions among the unit pixel cells 910 in the first row that are processed in parallel. Indicates that During this time, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level.

アクセス順序制御部911は、期間t1013において、再び画素エリア913における1行目の単位画素セル910へ供給される転送信号PTX_ab(1)およびPTX_cd(1)をハイレベルとする。また、アクセス順序制御部911は、各行の単位画素セル910へ供給される転送信号PTX_bd(1)~PTX_bd(4)をハイレベルとする。これにより、1行目の各列の単位画素セル910の転送ゲートTX_bおよびTX_dがアクティブとなる。アクセスされた1行目のセル単位画素群のうち、1列目の単位画素セル910のフォトダイオードPD_bおよびPD_dからの電荷は、出力線914_h(1)上で混合されて左右方向の他方に偏芯された画素信号となる。画素信号は、AD変換部912_(1)へ入力される。AD変換部912_(2)、AD変換部912_(3)およびAD変換部912_(4)に対する画素信号の入力も、AD変換部912_(1)に対する画素信号の入力と同様である。 In period t1013, the access order control unit 911 again sets the transfer signals PTX_ab(1) and PTX_cd(1) supplied to the first row unit pixel cells 910 in the pixel area 913 to high level. Also, the access order control unit 911 sets the transfer signals PTX_bd(1) to PTX_bd(4) supplied to the unit pixel cells 910 of each row to high level. As a result, the transfer gates TX_b and TX_d of the unit pixel cells 910 in each column of the first row are activated. Charges from the photodiodes PD_b and PD_d of the unit pixel cells 910 in the first column among the accessed cell unit pixel groups in the first row are mixed on the output line 914_h(1) and biased to the other in the horizontal direction. A centered pixel signal is obtained. A pixel signal is input to the AD converter 912_(1). The input of pixel signals to the AD converters 912_(2), 912_(3), and 912_(4) is the same as the input of the pixel signals to the AD converter 912_(1).

AD変換部912_(1)~912_(4)に入力された画素信号に応じた電圧レベルが、AD変換部912_(1)~912_(4)内の保持手段により保持される。AD変換部912_(1)~912_(4)は、期間t1014において、保持手段により保持された電圧レベルをデジタル信号に並行して変換し、後段の信号処理部2へ出力する。図10(B)において、期間t1014に対応する(1、1)~(4、1)は、1行目の各単位画素セル910のうち左右方向の他方に偏芯した画素信号が並列に処理されていることを示す。この間、アクセス順序制御部911は、リセット信号PRESをハイレベルとし、転送路上の電荷を基準レベルにリセットしておく。以上、期間t1011からt1014にかけての制御で、画素エリア913における1行目の複数の単位画素セル910に並行してアクセスがされる。アクセスされた複数の単位画素セルから左右方向に偏芯された1組の画素信号が得られる。 Voltage levels corresponding to pixel signals input to the AD converters 912_(1) to 912_(4) are held by holding means in the AD converters 912_(1) to 912_(4). In period t1014, the AD converters 912_(1) to 912_(4) convert the voltage levels held by the holding means into digital signals in parallel, and output the digital signals to the signal processor 2 in the subsequent stage. In FIG. 10B, (1, 1) to (4, 1) corresponding to the period t1014 are pixel signals eccentric to the other side in the horizontal direction among the unit pixel cells 910 in the first row. Indicates that During this time, the access order control unit 911 sets the reset signal PRES to high level to reset the charge on the transfer path to the reference level. As described above, in the control from period t1011 to t1014, the plurality of unit pixel cells 910 in the first row in the pixel area 913 are accessed in parallel. A set of pixel signals decentered in the horizontal direction is obtained from the accessed unit pixel cells.

アクセス順序制御部911は、期間t1015において、アクセス先の単位画素セル910を、2行目の単位画素セル910に切り替える。そして、アクセス順序制御部911は、期間t1011からt1014にかけての制御と同様の制御を繰り返す。アクセス順序制御部911は、期間t1016およびt1017において、3行目以降の単位画素セル910についても、期間t1011からt1014にかけての制御と同様の制御を繰り返す。期間t1011~t1017の制御により、画素エリア913における全画素の単位画素セル910へのアクセスが完了する。撮像領域内の別の画素エリア913についても、当該画素エリア913と並行して期間t1011~t1017の制御が行われる。これにより、第2の読み出しモードによる1フレーム分の画素信号の読み出し制御が行われる。 In period t1015, the access order control unit 911 switches the unit pixel cell 910 to be accessed to the unit pixel cell 910 in the second row. Then, the access order control unit 911 repeats the same control as the control from period t1011 to t1014. During periods t1016 and t1017, the access order control unit 911 repeats the same control as during periods t1011 to t1014 for the unit pixel cells 910 in the third and subsequent rows. Access to the unit pixel cells 910 of all pixels in the pixel area 913 is completed by controlling the period t1011 to t1017. Another pixel area 913 within the imaging region is also controlled during periods t1011 to t1017 in parallel with the pixel area 913 concerned. As a result, readout control of pixel signals for one frame is performed in the second readout mode.

以上のように、画素エリア913に対して複数のAD変換部912が接続される。そして、アクセス順序制御部911は、複数のAD変換部912が並行して画素信号の読み出しを行うように、各単位画素セル910に対するアクセス順序の制御を行う。これにより、複数のAD変換部912が並行して処理できる。従って、第4実施形態では、第1実施形態乃至第3実施形態と同様の効果を得ることができるとともに、画素信号の処理時間の高速化を図ることができる。第4実施形態でも、第1の読み出しモードまたは第2の読み出しモードの選択が行われるが、読み出しモードの選択は、第1実施形態のそれと同様である。 As described above, multiple AD converters 912 are connected to the pixel area 913 . The access order control unit 911 controls the order of access to each unit pixel cell 910 so that the plurality of AD conversion units 912 read pixel signals in parallel. This allows a plurality of AD converters 912 to process in parallel. Therefore, in the fourth embodiment, the same effects as those of the first to third embodiments can be obtained, and the processing time of pixel signals can be increased. Selection of the first read mode or the second read mode is also performed in the fourth embodiment, but the selection of the read mode is the same as that of the first embodiment.

以上、本発明の好ましい実施形態について説明したが、本発明は上述した各実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。本発明は、上述の各実施形態の1以上の機能を実現するプログラムを、ネットワークや記憶媒体を介してシステムや装置に供給し、そのシステム又は装置のコンピュータの1つ以上のプロセッサーがプログラムを読み出して実行する処理でも実現可能である。また、本発明は、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。 Although preferred embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments, and various modifications and changes are possible within the scope of the gist thereof. The present invention supplies a program that implements one or more functions of each of the above-described embodiments to a system or device via a network or a storage medium, and one or more processors of the computer of the system or device reads the program. It is also possible to implement the process executed by The invention can also be implemented by a circuit (eg, an ASIC) that implements one or more functions.

1 固体撮像素子
3 制御部
10 単位画素セル
11 アクセス順序制御部
12 AD変換部
713 画素エリア
ML マイクロレンズ
1 solid-state imaging device 3 control unit 10 unit pixel cell 11 access order control unit 12 AD conversion unit 713 pixel area ML microlens

Claims (14)

撮像領域に配置され、マイクロレンズの光軸から垂直方向または水平方向に偏芯した領域で受光した光に対応する画素信号を出力する行列状に配置された複数の画素と、
前記マイクロレンズの光軸から垂直方向に偏芯した領域の画素から画素信号を読み出す場合に、前記垂直方向に対応する同じ列に配置された複数の画素から連続して画素信号を読み出す第1の制御を行い、前記マイクロレンズの光軸から前記水平方向に偏芯した領域の画素から画素信号を読み出す場合に、前記水平方向に対応する同じ行に配置された複数の画素から連続して画素信号を読み出す第2の制御を行う制御手段と、
を備えることを特徴とする撮像素子。
a plurality of pixels arranged in an imaging region and arranged in a matrix for outputting pixel signals corresponding to light received in a region vertically or horizontally decentered from the optical axis of the microlens;
A first method for reading out pixel signals continuously from a plurality of pixels arranged in the same column corresponding to the vertical direction when reading out pixel signals from pixels in a region vertically decentered from the optical axis of the microlens. When the pixel signals are read out from the pixels in the horizontally decentered region from the optical axis of the microlens, the pixel signals are continuously read from the plurality of pixels arranged in the same row corresponding to the horizontal direction. a control means for performing a second control for reading out
An imaging device comprising:
前記画素には、複数の光電変換手段が行列状に配置されており、
前記制御手段は、偏芯方向に応じて、前記領域に対応する前記光電変換手段から前記画素信号を出力させ、前記領域に対応していない前記光電変換手段から前記画素信号を出力させない制御を行うことを特徴とする請求項1に記載の撮像素子。
A plurality of photoelectric conversion means are arranged in a matrix in the pixel,
The control means controls output of the pixel signal from the photoelectric conversion means corresponding to the region and not output of the pixel signal from the photoelectric conversion means not corresponding to the region, according to the direction of eccentricity. 2. The imaging device according to claim 1, characterized in that:
前記行列状に配置された複数の画素から得られる画素信号の被写体のパターンに応じて、次のフレームで、前記制御手段が前記第1の制御と前記第2の制御との何れを行うかが決定されることを特徴とする請求項1または2に記載の撮像素子。 Which of the first control and the second control the control means performs in the next frame is determined according to the subject pattern of the pixel signals obtained from the plurality of pixels arranged in a matrix. 3. The imaging device according to claim 1, wherein the image sensor is determined. 前記被写体の前記垂直方向のエッジの勾配と前記水平方向のエッジの勾配とに基づいて、前記制御手段が前記第1の制御と前記第2の制御との何れを行うかが決定されることを特徴とする請求項に記載の撮像素子。 It is determined whether the control means performs the first control or the second control based on the gradient of the vertical edge and the gradient of the horizontal edge of the subject. 4. The imaging device according to claim 3 . 前記撮像素子から読み出された画素信号を用いて相関演算によりフォーカス制御を行う処理と、前記被写体のパターンに応じて前記制御手段が前記第1の制御と前記第2の制御との何れを行うかを決定する処理とは、並列に行われることを特徴とする請求項またはに記載の撮像素子。 A process of performing focus control by correlation calculation using pixel signals read out from the imaging device, and the control means performing any of the first control and the second control according to the pattern of the subject. 5. The imaging device according to claim 3 , wherein the process of determining whether is performed in parallel. 前記複数の画素のうち一部の複数の画素は、前記偏芯した領域に対応する領域が遮光されており、
前記制御手段は、前記複数の画素のうちの前記一部の複数の画素のみに対して前記第1の制御と前記第2の制御とのいずれかを行うように制御することを特徴とする請求項1記載の撮像素子。
Some of the plurality of pixels are shielded from light in a region corresponding to the decentered region,
The control means performs control to perform either the first control or the second control only on the plurality of pixels among the plurality of pixels. Item 1. The imaging device according to item 1.
前記撮像領域は二次元状に複数の画素エリアに分割されており、
前記複数の画素エリアのそれぞれに対応して、画素信号を処理する信号処理手段が設けられていることを特徴とする請求項1乃至のうち何れか1項に記載の撮像素子。
The imaging region is divided into a plurality of pixel areas in a two-dimensional manner,
7. The imaging device according to claim 1, further comprising signal processing means for processing pixel signals corresponding to each of said plurality of pixel areas.
前記制御手段は、前記複数の画素エリアのそれぞれに対応して設けられていることを特徴とする請求項に記載の撮像素子。 8. The imaging device according to claim 7 , wherein said control means is provided corresponding to each of said plurality of pixel areas. 前記複数の画素エリアのそれぞれに対応する前記制御手段は、対応する画素エリアの内の複数の画素に対する前記第1の制御または前記第2の制御を並列に行い、
前記複数の画素エリアのそれぞれに対応する信号処理手段は、並列に画素信号を処理することを特徴とする請求項またはに記載の撮像素子。
the control means corresponding to each of the plurality of pixel areas perform the first control or the second control in parallel on the plurality of pixels in the corresponding pixel area;
9. The imaging device according to claim 7 , wherein the signal processing means corresponding to each of the plurality of pixel areas process pixel signals in parallel.
前記複数の画素エリアごとに、前記制御手段が前記第1の制御と前記第2の制御との何れを行うかを決定する処理を行うことを特徴とする請求項に記載の撮像素子。 10. The image pickup device according to claim 9 , wherein the control means performs processing for determining which of the first control and the second control is to be performed for each of the plurality of pixel areas. 前記複数の画素エリアのそれぞれに、複数の信号処理手段が接続されていることを特徴とする請求項乃至のうち何れか1項に記載の撮像素子。 10. The imaging device according to any one of claims 7 to 9 , wherein a plurality of signal processing means are connected to each of the plurality of pixel areas. 前記複数の信号処理手段は、並列に画素信号を処理することを特徴とする請求項1に記載の撮像素子。 12. The imaging device according to claim 11 , wherein the plurality of signal processing means process pixel signals in parallel. 請求項1乃至12のうち何れか1項に記載の撮像素子を備えることを特徴とする撮像装置。 An imaging device comprising the imaging device according to any one of claims 1 to 12 . 撮像領域に配置され、マイクロレンズの光軸から垂直方向または水平方向に偏芯した領域で受光した光に対応する画素信号を出力する行列状に配置された複数の画素から画素信号を読み出す際に、前記マイクロレンズの光軸から前記垂直方向に偏芯した領域の画素から画素信号を読み出す場合に、前記垂直方向に対応する同じ列に配置された複数の画素から連続して画素信号を読み出す第1の制御を行い、前記マイクロレンズの光軸から前記水平方向に偏芯した領域の画素から画素信号を読み出す場合に、前記水平方向に対応する同じ行に配置された複数の画素から連続して画素信号を読み出す第2の制御を行う程を備えることを特徴とする撮像素子の制御方法。 When reading out pixel signals from a plurality of pixels arranged in an imaging region and outputting pixel signals corresponding to light received in a region vertically or horizontally decentered from the optical axis of the microlens, the pixels are arranged in a matrix. a pixel signal is read out continuously from a plurality of pixels arranged in the same column corresponding to the vertical direction when the pixel signal is read out from the pixel in the region decentered in the vertical direction from the optical axis of the microlens; 1 to read pixel signals from the pixels in the horizontally decentered region from the optical axis of the microlens, continuously from a plurality of pixels arranged in the same row corresponding to the horizontal direction A control method for an imaging device, comprising a step of performing second control for reading out pixel signals .
JP2019034468A 2019-02-27 2019-02-27 IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD Active JP7337512B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019034468A JP7337512B2 (en) 2019-02-27 2019-02-27 IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019034468A JP7337512B2 (en) 2019-02-27 2019-02-27 IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD

Publications (2)

Publication Number Publication Date
JP2020141206A JP2020141206A (en) 2020-09-03
JP7337512B2 true JP7337512B2 (en) 2023-09-04

Family

ID=72265224

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019034468A Active JP7337512B2 (en) 2019-02-27 2019-02-27 IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD

Country Status (1)

Country Link
JP (1) JP7337512B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012120127A (en) 2010-12-03 2012-06-21 Canon Inc Imaging apparatus
JP2012155221A (en) 2011-01-27 2012-08-16 Canon Inc Imaging apparatus and its control method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012120127A (en) 2010-12-03 2012-06-21 Canon Inc Imaging apparatus
JP2012155221A (en) 2011-01-27 2012-08-16 Canon Inc Imaging apparatus and its control method

Also Published As

Publication number Publication date
JP2020141206A (en) 2020-09-03

Similar Documents

Publication Publication Date Title
JP5856376B2 (en) Imaging apparatus and control method thereof
US9030596B2 (en) Focus detection apparatus and image pickup apparatus that perform focus detection using phase difference method
US9167181B2 (en) Imaging apparatus and method for controlling the imaging apparatus
US8902349B2 (en) Image pickup apparatus
US20100014770A1 (en) Method and apparatus providing perspective correction and/or image dewarping
US9344617B2 (en) Image capture apparatus and method of controlling that performs focus detection
US9535193B2 (en) Image processing apparatus, image processing method, and storage medium
JP2012155221A5 (en)
JP6095266B2 (en) Image processing apparatus and control method thereof
KR20150047112A (en) Imaging apparatus and its control method, and storage medium
JP2016161884A (en) Imaging device and control method of the same
US10812704B2 (en) Focus detection device, method and storage medium, for controlling image sensor operations
JP2013021615A (en) Image pickup apparatus
US9451175B2 (en) Imaging apparatus, information processing device, image pickup method, and non-transitory computer-readable storage medium storing a program therefor for obtaining light field information
JP7337512B2 (en) IMAGE SENSOR, IMAGING DEVICE, AND IMAGE SENSOR CONTROL METHOD
US20160234428A1 (en) Imaging device and image processing method
JP6566654B2 (en) Control device, imaging device, control method, program, and storage medium
US11889186B2 (en) Focus detection device, focus detection method, and image capture apparatus
JP7361514B2 (en) Image sensor and imaging device
JP6000627B2 (en) FOCUS DETECTION DEVICE, ITS CONTROL METHOD, CONTROL PROGRAM, AND IMAGING DEVICE
JP2015154153A (en) Camera with imaging apparatus
JP6671868B2 (en) Control device, imaging device, control method, program, and storage medium
JP7378935B2 (en) Image processing device
JP6491539B2 (en) Imaging apparatus and control method, system and program thereof
JP6590055B2 (en) Imaging device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220215

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230725

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230823

R151 Written notification of patent or utility model registration

Ref document number: 7337512

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151