JP4835136B2 - Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera - Google Patents

Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera Download PDF

Info

Publication number
JP4835136B2
JP4835136B2 JP2005352458A JP2005352458A JP4835136B2 JP 4835136 B2 JP4835136 B2 JP 4835136B2 JP 2005352458 A JP2005352458 A JP 2005352458A JP 2005352458 A JP2005352458 A JP 2005352458A JP 4835136 B2 JP4835136 B2 JP 4835136B2
Authority
JP
Japan
Prior art keywords
pupil
solid
imaging device
state imaging
focus detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005352458A
Other languages
Japanese (ja)
Other versions
JP2007158109A (en
Inventor
直紀 大河内
智 鈴木
洋二郎 手塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2005352458A priority Critical patent/JP4835136B2/en
Publication of JP2007158109A publication Critical patent/JP2007158109A/en
Application granted granted Critical
Publication of JP4835136B2 publication Critical patent/JP4835136B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Description

本発明は、画像信号の生成機能と、焦点検出用信号の生成機能とを兼ね備えた固体撮像装置に関する。   The present invention relates to a solid-state imaging device having both an image signal generation function and a focus detection signal generation function.

従来、焦点検出技術の1つとして瞳分割位相差方式が知られている。この方式は、撮影レンズの通過光束を瞳分割して一対の分割像を形成する。この一対の分割像のパターンズレを検出することで、撮影レンズのデフォーカス量を検出するものである。
このような瞳分割位相差方式の原理を適用した固体撮像装置として、特許文献1,2が知られている。特許文献1,2には、マイクロレンズ1つの下方に、光電変換域を2つずつ並べることで瞳分割を行い、焦点検出用信号を生成する構成が開示されている。また、特許文献3には、焦点検出時に光学要素アレイを固体撮像装置の前面に挿入することで瞳分割を行い、焦点検出用信号を生成する構成が開示されている。
なお、マイクロレンズを多層形成した固体撮像装置については、特許文献4に開示されている。
特開2002−314062号公報 特開2003−244712号公報 特開2004−191893号公報 特開平6−163866号公報
Conventionally, a pupil division phase difference method is known as one of focus detection techniques. This method forms a pair of divided images by dividing the luminous flux passing through the photographing lens into pupils. The defocus amount of the photographing lens is detected by detecting the pattern shift between the pair of divided images.
Patent Documents 1 and 2 are known as solid-state imaging devices to which the principle of the pupil division phase difference method is applied. Patent Documents 1 and 2 disclose a configuration in which a pupil detection is performed by arranging two photoelectric conversion areas under one microlens to generate a focus detection signal. Patent Document 3 discloses a configuration in which an optical element array is inserted into the front surface of a solid-state imaging device during focus detection to perform pupil division and generate a focus detection signal.
A solid-state imaging device in which microlenses are formed in multiple layers is disclosed in Patent Document 4.
JP 2002-314062 A JP 2003-244712 A JP 2004-191893 A JP-A-6-163866

上述した特許文献1,2では、1枚のマイクロレンズで受光光束を集光し、その集光範囲を2つの光電変換域で単純に区切ることで瞳分割を行う。この瞳分割では、狭い集光範囲内に2つの光電変換域を並べる必要があり、個々の光電変換域の受光効率を高めることが困難になる。そのため、焦点検出用信号の信号レベルが低く、焦点検出精度が悪いといった問題点があった。
一方、特許文献3では、瞳分割を正確に行うため、画素間隔の精度で光学要素アレイの位置決めを行う必要があり、その実現がとても困難であるという問題点があった。また、光学要素アレイを固体撮像装置の前面に挿抜する機構が必要となり、電子カメラの構成が複雑になるという問題点もあった。
In Patent Documents 1 and 2 described above, the received light beam is collected by one microlens, and pupil division is performed by simply dividing the light collection range by two photoelectric conversion areas. In this pupil division, it is necessary to arrange two photoelectric conversion areas within a narrow condensing range, and it becomes difficult to increase the light receiving efficiency of each photoelectric conversion area. Therefore, there are problems that the signal level of the focus detection signal is low and the focus detection accuracy is poor.
On the other hand, in Patent Document 3, in order to accurately perform pupil division, it is necessary to position the optical element array with the accuracy of the pixel interval, which is very difficult to realize. In addition, a mechanism for inserting and removing the optical element array in and out of the front surface of the solid-state imaging device is required, and the configuration of the electronic camera is complicated.

そこで、本発明では、固体撮像装置を用いて、良質な焦点検出用信号を生成する技術を提供することを目的とする。   Therefore, an object of the present invention is to provide a technique for generating a high-quality focus detection signal using a solid-state imaging device.

《1》 本発明の固体撮像装置は、撮像面にマイクロレンズを多層形成した固体撮像装置であって、瞳形成用マイクロレンズ、瞳分割用マイクロレンズ、および光電変換域を備える。
瞳形成用マイクロレンズは、受光光束を集光して、焦点検出対象である撮影レンズの射出瞳の実像を形成する。
瞳分割用マイクロレンズは、射出瞳の実像の像面近傍に配置されて、瞳形成用マイクロレンズの通過光束の一部を分離し、瞳分割光束とする。
光電変換域は、瞳分割光束を光電変換することで、焦点検出用信号を生成する。
《2》 なお好ましくは、画素単位に光電変換して、画像信号を生成する撮像用画素を更に備える。これら撮像用画素は、瞳分割用マイクロレンズと光電変換域と同一の構造を有する画素である。
《3》 また好ましくは、瞳分割用マイクロレンズは、撮像用画素の複数個に相当する区画を占有する。
《4》 なお好ましくは、射出瞳の実像を像中心に対して対称的に分割するよう、1つの瞳形成用マイクロレンズに対して複数の瞳分割用マイクロレンズを配置する。
《5》 また好ましくは、所定の最小色配列の繰り返しで、前記光電変換域ごとに色フィルタを備える。そして、この最小色配列の区域ごとに、1つの前記瞳形成用マイクロレンズを形成する。
《6》 なお好ましくは、1つの瞳形成用マイクロレンズに対して、放射状に4つの瞳分割用マイクロレンズを配置する。この場合、4つの光電変換域の組み合わせによって瞳分割方向が変更可能になる。
《7》 なお好ましくは、瞳分割用マイクロレンズを、瞳形成用マイクロレンズ/光電変換域の中間層の内部に形成されるインナーレンズとする。
《8》 本発明の電子カメラは、固体撮像装置、焦点演算部、および撮像制御部を備える。
固体撮像装置は、上記《1》ないしか《7》のいずれか1項に記載の固体撮像装置である。
焦点演算部は、この固体撮像装置から焦点検出用信号を読み出し、その焦点検出用信号から抽出される瞳分割像のパターンズレを検出して、焦点検出を行う。
撮像制御部は、この固体撮像装置から光電変換出力を読み出して画像信号を得る。
<< 1 >> A solid-state imaging device of the present invention is a solid-state imaging device in which microlenses are formed in a multilayer on an imaging surface, and includes a pupil-forming microlens, a pupil-dividing microlens, and a photoelectric conversion region.
The pupil forming microlens condenses the received light beam to form a real image of the exit pupil of the photographing lens that is a focus detection target.
The pupil-dividing microlens is disposed in the vicinity of the image plane of the real image of the exit pupil, and separates a part of the light beam passing through the pupil-forming microlens to obtain a pupil-divided light beam.
The photoelectric conversion area generates a focus detection signal by photoelectrically converting the pupil-divided light beam.
<< 2 >> Preferably, an imaging pixel that performs photoelectric conversion on a pixel basis to generate an image signal is further provided. These imaging pixels are pixels having the same structure as the pupil-dividing microlens and the photoelectric conversion area.
<< 3 >> Preferably, the pupil-dividing microlens occupies a section corresponding to a plurality of imaging pixels.
<< 4 >> Preferably, a plurality of pupil-dividing microlenses are arranged for one pupil-forming microlens so that the real image of the exit pupil is divided symmetrically with respect to the image center.
<< 5 >> Preferably, a color filter is provided for each photoelectric conversion region by repeating a predetermined minimum color arrangement. Then, one pupil forming microlens is formed for each area of the minimum color arrangement.
<< 6 >> Preferably, four pupil-dividing microlenses are arranged radially with respect to one pupil-forming microlens. In this case, the pupil division direction can be changed by a combination of four photoelectric conversion areas.
<< 7 >> Preferably, the pupil-dividing microlens is an inner lens formed inside the intermediate layer of the pupil-forming microlens / photoelectric conversion area.
<< 8 >> The electronic camera of the present invention includes a solid-state imaging device, a focus calculation unit, and an imaging control unit.
The solid-state imaging device is the solid-state imaging device according to any one of the above << 7 >> and << 7 >>.
The focus calculation unit reads a focus detection signal from the solid-state imaging device, detects a pattern shift of the pupil division image extracted from the focus detection signal, and performs focus detection.
The imaging control unit reads the photoelectric conversion output from the solid-state imaging device and obtains an image signal.

本発明では、瞳形成用マイクロレンズと瞳分割用マイクロレンズを撮像面に多層形成する。そのため、両マイクロレンズの位置関係は安定しており、常に正確な瞳分割を実現することが可能になる。そのため、良質な焦点検出用信号を生成することが可能になる。   In the present invention, a pupil forming microlens and a pupil dividing microlens are formed in a multilayer on the imaging surface. For this reason, the positional relationship between the two microlenses is stable, and accurate pupil division can always be realized. Therefore, it is possible to generate a high-quality focus detection signal.

《第1実施形態》
[電子カメラの構成説明]
図1は、本実施形態の電子カメラ10を示すブロック図である。
図1において、電子カメラ10には、撮影レンズ12が装着される。この撮影レンズ12は、レンズ制御部12aによってフォーカスや絞りが駆動される。この撮影レンズ12の像空間には、固体撮像装置11の撮像面が配置される。この固体撮像装置11は、撮像制御部14によって駆動される。固体撮像装置11から出力される画像データは、信号処理部15、およびA/D変換部16を介して処理された後、メモリ17に一時蓄積される。
このメモリ17は、バス18に接続される。このバス18には、レンズ制御部12a、撮像制御部14、マイクロプロセッサ19、焦点演算部20、記録部22、画像圧縮部24および画像処理部25なども接続される。
上記のマイクロプロセッサ19には、レリーズ釦などの操作部19aが接続される。また、上記の記録部22には、記録媒体22aが着脱自在に装着される。
<< First Embodiment >>
[Description of electronic camera configuration]
FIG. 1 is a block diagram showing an electronic camera 10 of the present embodiment.
In FIG. 1, a photographing lens 12 is attached to the electronic camera 10. The photographing lens 12 is driven by a lens control unit 12a for focus and diaphragm. In the image space of the photographic lens 12, the imaging surface of the solid-state imaging device 11 is arranged. The solid-state imaging device 11 is driven by the imaging control unit 14. Image data output from the solid-state imaging device 11 is processed via the signal processing unit 15 and the A / D conversion unit 16 and then temporarily stored in the memory 17.
This memory 17 is connected to a bus 18. The bus 18 is also connected with a lens control unit 12a, an imaging control unit 14, a microprocessor 19, a focus calculation unit 20, a recording unit 22, an image compression unit 24, an image processing unit 25, and the like.
The microprocessor 19 is connected to an operation unit 19a such as a release button. A recording medium 22a is detachably attached to the recording unit 22.

[画素レイアウトの説明]
図2は、固体撮像装置11の焦点検出エリア(焦点検出用画素37の配置エリア)を示す図である。このような焦点検出エリアは、撮像面の複数箇所に設けられる。
図3は、固体撮像装置11の撮像面の断面を示す図である。
以下、図2および図3を参照しながら、固体撮像装置11の画素構成を説明する。まず、固体撮像装置11の撮像面には、撮像用画素31の群が配置される。個々の撮像用画素31には、画素単位に受光光束を光電変換する光電変換域32が設けられる。この光電変換域32の上層には、平坦化層38を介して、受光光束を光電変換域32に集光するマイクロレンズ33が設けられる。
[Description of pixel layout]
FIG. 2 is a diagram illustrating a focus detection area (arrangement area of the focus detection pixels 37) of the solid-state imaging device 11. Such focus detection areas are provided at a plurality of locations on the imaging surface.
FIG. 3 is a diagram illustrating a cross-section of the imaging surface of the solid-state imaging device 11.
Hereinafter, the pixel configuration of the solid-state imaging device 11 will be described with reference to FIGS. 2 and 3. First, a group of imaging pixels 31 is arranged on the imaging surface of the solid-state imaging device 11. Each imaging pixel 31 is provided with a photoelectric conversion area 32 that photoelectrically converts a received light beam in units of pixels. Above the photoelectric conversion region 32, a microlens 33 that collects the received light flux on the photoelectric conversion region 32 is provided via a planarization layer 38.

撮像用画素31の群は、撮影レンズ12を介して撮像面に投影される被写体像を画素単位に光電変換することによって、画像信号を生成する。
一方、焦点検出エリアでは、撮像用画素31の群の間を縫うように、焦点検出用画素37が配置される。この焦点検出用画素37は、撮像用画素31の複数区画分に相当するサイズの瞳形成用マイクロレンズ36を有する。この瞳形成用マイクロレンズ36は、平坦化層39を介することで、マイクロレンズ33よりも上層に形成される。
The group of imaging pixels 31 generates an image signal by photoelectrically converting a subject image projected onto the imaging surface via the imaging lens 12 in units of pixels.
On the other hand, in the focus detection area, focus detection pixels 37 are arranged so as to sew between groups of imaging pixels 31. The focus detection pixel 37 includes a pupil forming microlens 36 having a size corresponding to a plurality of sections of the imaging pixel 31. The pupil forming microlens 36 is formed in an upper layer than the microlens 33 through the flattening layer 39.

この瞳形成用マイクロレンズ36は、撮影レンズ12からの受光光束を集光することにより、撮影レンズ12の射出瞳の実像を像空間側に形成する。瞳形成用マイクロレンズ36は、この像形成によって、射出瞳の半分から入射する光束(図3に示す実線光束)を実像の片側へ集め、射出瞳のもう半分から入射する光束(図3に示す点線光束)を実像のもう片側へ集める。   The pupil forming microlens 36 condenses the received light beam from the photographing lens 12 to form a real image of the exit pupil of the photographing lens 12 on the image space side. By this image formation, the pupil forming microlens 36 collects a light beam incident from one half of the exit pupil (solid line light beam shown in FIG. 3) on one side of the real image and enters a light beam incident from the other half of the exit pupil (shown in FIG. 3). Collect the dotted beam) on the other side of the real image.

この射出瞳の実像の像面近傍には、瞳分割用マイクロレンズ35が配置される。この瞳分割用マイクロレンズ35は、この実像の像面近傍で瞳形成用マイクロレンズ36の通過光束の一部をレンズ開口によって分離抽出することで、瞳分割光束を生成する。この瞳分割光束は光電変換域34で光電変換され、焦点検出用信号に変換される。なお、ここでの像面近傍とは、瞳分割光束の分離に支障無い許容範囲を意味する。   A pupil-dividing microlens 35 is disposed in the vicinity of the real image surface of the exit pupil. The pupil-dividing microlens 35 generates a pupil-divided light beam by separating and extracting a part of the light beam passing through the pupil-forming microlens 36 near the image plane of the real image by the lens opening. This pupil-divided light beam is photoelectrically converted in the photoelectric conversion area 34 and converted into a focus detection signal. Here, the vicinity of the image plane means an allowable range that does not interfere with the separation of the pupil-divided light beam.

なお、焦点検出用画素37の下層(瞳分割用マイクロレンズ35および光電変換域34)の構造は、複数の撮像用画素31(マイクロレンズ33と光電変換域32)の構造と同一である。
上述した構成により、焦点検出用画素37は、瞳形成用マイクロレンズ36の通過光束の内、撮影レンズ12の射出瞳の異なる位置を通った光束(瞳分割光束)を分離して受光するようになる。
The structure of the lower layer (pupil division microlens 35 and photoelectric conversion region 34) of the focus detection pixel 37 is the same as the structure of the plurality of imaging pixels 31 (microlens 33 and photoelectric conversion region 32).
With the configuration described above, the focus detection pixel 37 separates and receives light beams (pupil-divided light beams) that have passed through different positions of the exit pupil of the photographing lens 12 among the light beams that have passed through the pupil-forming microlens 36. Become.

例えば、撮像面の横方向に並べた光電変換域34は、射出瞳を横方向に分割した瞳分割光束を受光する。
また例えば、撮像面の縦方向に並べた光電変換域34は、射出瞳を縦方向に分割した瞳分割光束を受光する。
また、撮像面の斜め方向に並べた光電変換域34については、射出瞳を斜め方向に分割した瞳分割光束を受光する。
撮像面では、これらの焦点検出用画素37が、その瞳分割の方向に並ぶように、所定のピッチごとに配置される。なお、図2では、これらの焦点検出用画素37が単純に一直線に並ばないよう、その並び方を千鳥足状にずらしている。
For example, the photoelectric conversion areas 34 arranged in the horizontal direction on the imaging surface receive pupil-divided light beams obtained by dividing the exit pupil in the horizontal direction.
Further, for example, the photoelectric conversion areas 34 arranged in the vertical direction of the imaging surface receive a pupil-divided light beam obtained by dividing the exit pupil in the vertical direction.
Further, with respect to the photoelectric conversion areas 34 arranged in the oblique direction on the imaging surface, a pupil-divided light beam obtained by dividing the exit pupil in the oblique direction is received.
On the imaging surface, these focus detection pixels 37 are arranged at predetermined pitches so as to be aligned in the pupil division direction. In FIG. 2, the arrangement of the focus detection pixels 37 is staggered so that the pixels 37 are not simply aligned.

[回路説明]
図4は、固体撮像装置11の等価回路と半導体パターンを示す図である。
固体撮像装置11は、垂直転送回路3、水平転送回路4、相関二重サンプリング回路5、および画素から概略構成される。
以下、この画素の構成について説明する。画素には、フローティングデフージョンFDが設けられる。このフローティングデフージョンFDには、リセットトランジスタQRのゲート134を介して、リセットドレイン138が隣接配置される。このフローティングデフージョンFDと光電変換域32,34との間には、転送トランジスタQTの転送ゲート133が配置される。このようなフローティングデフージョンFDの電圧は、配線を介して増幅素子QAのゲート135に印加される。増幅素子QAのソース139は、行選択トランジスタQSのゲート136をオン制御することにより、垂直読み出し線2に接続される。
[Circuit explanation]
FIG. 4 is a diagram illustrating an equivalent circuit and a semiconductor pattern of the solid-state imaging device 11.
The solid-state imaging device 11 is roughly configured by a vertical transfer circuit 3, a horizontal transfer circuit 4, a correlated double sampling circuit 5, and pixels.
Hereinafter, the configuration of this pixel will be described. The pixel is provided with a floating diffusion FD. A reset drain 138 is disposed adjacent to the floating diffusion FD via the gate 134 of the reset transistor QR. A transfer gate 133 of the transfer transistor QT is disposed between the floating diffusion FD and the photoelectric conversion areas 32 and 34. Such a voltage of the floating diffusion FD is applied to the gate 135 of the amplifying element QA through the wiring. The source 139 of the amplifying element QA is connected to the vertical read line 2 by turning on the gate 136 of the row selection transistor QS.

[焦点検出用信号の読み出し動作]
続いて、電子カメラ10による焦点検出用信号の読み出し動作について説明する。
電子カメラ10内のマイクロプロセッサ19は、レリーズ釦の半押し操作に同期して撮像制御部14を駆動し、焦点検出用信号の読み出し動作を開始する。
図5は、この焦点検出用信号の読み出し動作を説明するタイミングチャートである。
まず、垂直転送回路3は、焦点検出用画素37の存在するn行目の制御信号φRS(n)と制御信号φTG(n)を立ち上げる。これにより、n行目の光電変換域32,34の不要電荷は、転送トランジスタQT、フローティングデフージョンFD、およびリセットトランジスタQRを介して、リセットドレイン138に排出される。
その後、垂直転送回路3は、n行目の制御信号φTG(n)を立ち下げて、転送トランジスタQTを非導通に変化させる。この時点から、n行目の光電変換域32,34は信号電荷の蓄積を開始する。
[Read operation of focus detection signal]
Next, a read operation of the focus detection signal by the electronic camera 10 will be described.
The microprocessor 19 in the electronic camera 10 drives the imaging control unit 14 in synchronization with the half-pressing operation of the release button, and starts a focus detection signal reading operation.
FIG. 5 is a timing chart for explaining the read operation of the focus detection signal.
First, the vertical transfer circuit 3 raises the control signal φRS (n) and the control signal φTG (n) in the n-th row where the focus detection pixels 37 exist. As a result, unnecessary charges in the n-th photoelectric conversion areas 32 and 34 are discharged to the reset drain 138 via the transfer transistor QT, the floating diffusion FD, and the reset transistor QR.
Thereafter, the vertical transfer circuit 3 falls the control signal φTG (n) in the n-th row and changes the transfer transistor QT to non-conduction. From this time, the photoelectric conversion areas 32 and 34 in the nth row start to accumulate signal charges.

この状態で、垂直転送回路3は、期間T1の間、制御信号φL(n)をハイレベルに設定し、n行目の行選択トランジスタQSを導通させる。これに同期して、垂直転送回路3は、n行目のリセットトランジスタQRの導通状態を期間T2だけ維持する。この導通状態の維持によって、n行目のフローティングデフージョンFDは、リセットドレイン138の電位にリセットされる。   In this state, the vertical transfer circuit 3 sets the control signal φL (n) to a high level during the period T1, and turns on the row selection transistor QS of the nth row. In synchronization with this, the vertical transfer circuit 3 maintains the conduction state of the reset transistor QR in the n-th row only for the period T2. By maintaining this conduction state, the floating diffusion FD in the n-th row is reset to the potential of the reset drain 138.

期間T2の後、リセットトランジスタQRが非導通に変化すると、フローティングデフージョンFDは、フローティング状態に戻る。このスイッチングの瞬間の電圧(リセット電圧)がフローティングデフージョンFDに保持される。このn行目のリセット電圧は、増幅素子QAを介して垂直読み出し線2にソースホロワ出力される。
このように垂直読み出し線2からは、n行目のリセット電圧が列単位に出力される。これらのリセット電圧は、制御信号φSHの立ち下げタイミング(期間T3の終了時点)に同期して、相関二重サンプリング回路5(回路内のコンデンサ群)に保持される。
After the period T2, when the reset transistor QR changes to non-conduction, the floating diffusion FD returns to the floating state. The voltage at the moment of switching (reset voltage) is held in the floating diffusion FD. The reset voltage in the n-th row is output as a source follower to the vertical readout line 2 via the amplifying element QA.
As described above, the reset voltage of the nth row is output from the vertical read line 2 in units of columns. These reset voltages are held in the correlated double sampling circuit 5 (capacitor group in the circuit) in synchronization with the falling timing of the control signal φSH (at the end of the period T3).

次に、垂直転送回路3は、制御信号φTG(n)を用いて、n行目の転送トランジスタQTを期間T4だけ導通させる。この導通によって、n行目の光電変換域32,34に蓄積された信号電荷が、フローティングデフージョンFDに転送される。この転送動作に伴って、フローティングデフージョンFDの電圧はリセット電圧から信号電荷の転送分だけ相対変化する。このn行目の信号電圧は、増幅素子QAを介して垂直読み出し線2にソースホロワ出力される。   Next, the vertical transfer circuit 3 uses the control signal φTG (n) to make the transfer transistor QT in the n-th row conductive for the period T4. By this conduction, the signal charges accumulated in the photoelectric conversion areas 32 and 34 in the nth row are transferred to the floating diffusion FD. Along with this transfer operation, the voltage of the floating diffusion FD changes relative to the reset voltage by the amount of signal charge transferred. The signal voltage of the nth row is output as a source follower to the vertical readout line 2 via the amplifying element QA.

このように垂直読み出し線2を介して列単位に出力されるn行目の信号電圧は、相関二重サンプリング回路5に印加される。相関二重サンプリング回路5からは、この信号電圧とリセット電圧の差に相当する真の信号電圧が出力される。
この状態で、水平転送回路4は、焦点検出用画素37が存在する列の制御信号φH3,φH4などを用いて、光電変換域34の真の信号電圧をVoutから順次に読み出す。
以上の動作を焦点検出用画素37に限定して繰り返すことにより、全画素を読み出すことなく、焦点検出用信号を短時間に読み出すことが可能になる。
このように読み出された焦点検出用信号は、信号処理部15およびA/D変換部16を介してデジタル化された後、メモリ17に一時蓄積される。
Thus, the n-th row signal voltage output in units of columns via the vertical readout line 2 is applied to the correlated double sampling circuit 5. The correlated double sampling circuit 5 outputs a true signal voltage corresponding to the difference between the signal voltage and the reset voltage.
In this state, the horizontal transfer circuit 4 sequentially reads the true signal voltage of the photoelectric conversion area 34 from Vout using the control signals φH3, φH4 and the like of the column in which the focus detection pixels 37 are present.
By repeating the above operation only for the focus detection pixel 37, it is possible to read the focus detection signal in a short time without reading all the pixels.
The focus detection signal read out in this way is digitized via the signal processing unit 15 and the A / D conversion unit 16 and then temporarily stored in the memory 17.

[焦点演算部20の動作について]
電子カメラ10内の焦点演算部20は、メモリ17内に蓄積された焦点検出用信号を用いて、焦点検出演算を実施する。以下、図3を参照しながら、この焦点検出の光学的な原理とその演算処理について説明する。
まず、1つの瞳形成用マイクロレンズ36に入射する受光光束は、撮影レンズ12の射出瞳を通過した光束である。この受光光束は瞳形成用マイクロレンズ36を介して集光され、射出瞳の実像を空中で結ぶ。この射出瞳の実像を分離するように、瞳分割用マイクロレンズ35が並べて配置される。このような配置により、個々の瞳分割用マイクロレンズ35には、撮影レンズ12の射出瞳を部分的に通過した光束が入射する。個々の瞳分割用マイクロレンズ35は、この光束を瞳分割光束(図3中に示すA,B)として出射する。このように分離された瞳分割光束A,Bは、対応する光電変換域34に到達して個別に光電変換される。
[Operation of the focus calculation unit 20]
The focus calculation unit 20 in the electronic camera 10 performs a focus detection calculation using the focus detection signal stored in the memory 17. Hereinafter, the optical principle of the focus detection and the calculation process will be described with reference to FIG.
First, a received light beam incident on one pupil forming microlens 36 is a light beam that has passed through the exit pupil of the photographing lens 12. This received light beam is condensed through the pupil forming microlens 36 and forms a real image of the exit pupil in the air. The pupil division microlenses 35 are arranged side by side so as to separate the real image of the exit pupil. With such an arrangement, the light beams partially passing through the exit pupil of the photographing lens 12 are incident on the individual pupil-dividing microlenses 35. Each of the pupil-dividing microlenses 35 emits this light beam as a pupil-divided light beam (A and B shown in FIG. 3). The pupil split light beams A and B thus separated reach the corresponding photoelectric conversion area 34 and are individually photoelectrically converted.

ところで、合焦被写体の一点(近接点も含む)から出た光束は、撮影レンズ12の射出瞳のそれぞれ違う位置を通過した後、撮像面に点像を結ぶために再び集束する。そのため、合焦状態にある場合、一組の光電変換域34は、被写体の同じ一点から出た瞳分割光束を受光する。したがって、光電変換によって得られる一組の瞳分割像は、その像パターンが略一致してほぼ位相差ゼロを示す。   By the way, the light beam emitted from one point (including the close point) of the focused subject passes through different positions of the exit pupil of the photographing lens 12, and then converges again to form a point image on the imaging surface. Therefore, when in a focused state, the set of photoelectric conversion areas 34 receives pupil-divided light beams emitted from the same point on the subject. Therefore, a set of pupil-divided images obtained by photoelectric conversion has substantially the same image pattern and exhibits substantially no phase difference.

一方、前ピン状態の被写体から出た光束は、撮影レンズ12の射出瞳の異なる箇所をそれぞれ通過した後、撮像面の手前で交差してずれた画素位置に到達する。この場合、一組の瞳分割像は、瞳分割方向にずれた位相差を示す。
逆に、後ピン状態の被写体から出た光束は、撮影レンズ12の射出瞳の異なる箇所をそれぞれ通過した後、集束不足のまま撮像面のずれた画素位置に到達する。この場合、一組の瞳分割像は、前ピン状態と逆方向にずれた位相差を示す。
On the other hand, the light beam emitted from the subject in the front pin state passes through different portions of the exit pupil of the photographing lens 12 and then reaches a pixel position that intersects and deviates in front of the imaging surface. In this case, the pair of pupil division images shows a phase difference shifted in the pupil division direction.
On the other hand, the light beam emitted from the object in the rear pin state passes through different portions of the exit pupil of the photographing lens 12 and then reaches the pixel position where the imaging surface is shifted with insufficient focusing. In this case, a set of pupil-divided images shows a phase difference shifted in the opposite direction to the front pin state.

以上説明したように、撮影レンズ12の合焦状況に応じて、瞳分割像の位相差が変化する。そこで、焦点演算部20は、メモリ17内の焦点検出用信号を分配して、一組の瞳分割像の像パターンを求める。焦点演算部20は、これらの像パターンについてパターンマッチング処理を実施して、位相差(像ズレ)を検出する。焦点演算部20は、この位相差に基づいて、撮影レンズ12の合焦状況やデフォーカス量を検出する。   As described above, the phase difference of the pupil-divided image changes according to the focusing state of the photographic lens 12. Therefore, the focus calculation unit 20 distributes the focus detection signal in the memory 17 to obtain an image pattern of a set of pupil division images. The focus calculation unit 20 performs a pattern matching process on these image patterns to detect a phase difference (image shift). The focus calculation unit 20 detects the in-focus state and the defocus amount of the photographing lens 12 based on this phase difference.

[画像信号の読み出し動作について]
焦点演算部20によって検出されたデフォーカス量は、レンズ制御部12aに伝達される。レンズ制御部12aは、伝達されるデフォーカス量に基づいて撮影レンズ12の焦点駆動を行い、撮影レンズ12を被写体に合焦させる。
その後、電子カメラ10内のマイクロプロセッサ19は、レリーズ釦の全押し操作に同期して撮像制御部14を用いて、画像信号の読み出し動作を開始する。
[Image signal readout operation]
The defocus amount detected by the focus calculation unit 20 is transmitted to the lens control unit 12a. The lens control unit 12a drives the photographing lens 12 based on the transmitted defocus amount, and focuses the photographing lens 12 on the subject.
Thereafter, the microprocessor 19 in the electronic camera 10 starts an image signal reading operation using the imaging control unit 14 in synchronization with the full pressing operation of the release button.

この画像信号の読み出し動作は、上述した焦点検出用信号と同様の読み出し手順を、撮像用画素31ごとに順次繰り返すことによって実施される。
なお、焦点検出用画素37の配置箇所については、画像信号が欠落する。この欠落部分の画像信号については、周辺の画像信号を用いて補間することが可能である。また、焦点検出用画素37の光電変換域34の信号に基づいて、欠落部分の画像信号を生成してもよい。
This image signal readout operation is performed by sequentially repeating the readout procedure similar to the focus detection signal described above for each imaging pixel 31.
It should be noted that image signals are missing at the locations where the focus detection pixels 37 are arranged. This missing image signal can be interpolated using surrounding image signals. Further, the image signal of the missing portion may be generated based on the signal of the photoelectric conversion area 34 of the focus detection pixel 37.

[第1実施形態の効果など]
第1実施形態では、図3に示すように、瞳形成用マイクロレンズ36および瞳分割用マイクロレンズ35を撮像面に多層形成する。そのため、両マイクロレンズ35,36の位置関係はずれることがなく、常に正確な瞳分割を実現することができる。
[Effects of First Embodiment]
In the first embodiment, as shown in FIG. 3, the pupil forming microlens 36 and the pupil dividing microlens 35 are formed in a multilayer on the imaging surface. Therefore, the positional relationship between the microlenses 35 and 36 is not deviated, and accurate pupil division can always be realized.

さらに、この多層形成では、瞳分割用マイクロレンズ35の光軸位置を、瞳形成用マイクロレンズ36の光軸位置からずらして配置する。このようなレンズのシフト作用によって、瞳分割光束A、Bの出射方向は、図3に示すように互いに離れる。この場合、瞳分割光束A、Bを受光する光電変換域34を通常の画素間隔程度まで離すことが可能となる。そのため、一組の光電変換域34を不自然に接近させることがなく、固体撮像装置11の設計や製造が容易になる。   Furthermore, in this multilayer formation, the optical axis position of the pupil-dividing microlens 35 is shifted from the optical axis position of the pupil-forming microlens 36. Due to the shifting action of the lens, the exit directions of the pupil-divided light beams A and B are separated from each other as shown in FIG. In this case, the photoelectric conversion area 34 that receives the pupil-divided light beams A and B can be separated to a normal pixel interval. Therefore, the set and photoelectric conversion area 34 are not unnaturally approached, and the design and manufacture of the solid-state imaging device 11 are facilitated.

さらに、行方向に並ぶ光電変換域34では、光電変換の期間を一致させることができる。そのため、時間差なく瞳分割を行うことが可能となり、動体被写体であっても瞳分割像の一致度が損なわれない。その結果、正確かつ確実な焦点検出が可能になる。   Furthermore, in the photoelectric conversion areas 34 arranged in the row direction, the photoelectric conversion periods can be matched. Therefore, it is possible to perform pupil division without time difference, and the degree of coincidence of the pupil divided images is not impaired even for a moving subject. As a result, accurate and reliable focus detection is possible.

また、焦点検出用画素37は、瞳形成用マイクロレンズ36を有する点を除けば、撮像用画素31と同一構造を有する。そのため、焦点検出用画素37の下層部分は、撮像用画素31と同様に製造することが可能となる。   The focus detection pixel 37 has the same structure as the imaging pixel 31 except that the focus detection pixel 37 has a pupil forming microlens 36. Therefore, the lower layer portion of the focus detection pixel 37 can be manufactured in the same manner as the imaging pixel 31.

言い換えると、瞳形成用マイクロレンズ36の配置パターンを変更するだけで、焦点検出エリアの配置を自在に変更することが可能になる。   In other words, it is possible to freely change the arrangement of the focus detection areas simply by changing the arrangement pattern of the pupil forming microlenses 36.

また、複数の焦点検出用画素37は、瞳分割方向に沿って撮像面に千鳥配置される。この千鳥配置では、個々の焦点検出用画素37の上下左右に、撮像用画素31が必ず存在する。そのため、焦点検出用画素37によって欠落する画像信号を、周囲の撮像用画素31を用いて高品質に補間することが可能になる。   The plurality of focus detection pixels 37 are staggered on the imaging surface along the pupil division direction. In this staggered arrangement, the imaging pixels 31 always exist on the top, bottom, left, and right of the individual focus detection pixels 37. For this reason, it is possible to interpolate an image signal lost by the focus detection pixel 37 with high quality using the surrounding imaging pixels 31.

さらに、第1実施形態の電子カメラ10では、特許文献3に比べて、光学要素アレイを挿抜する機構が不要となる。その結果、電子カメラ10の構成を単純にすることが可能になる。
次に、別の実施形態について説明する。
Furthermore, in the electronic camera 10 according to the first embodiment, a mechanism for inserting and removing the optical element array is unnecessary as compared with Patent Document 3. As a result, the configuration of the electronic camera 10 can be simplified.
Next, another embodiment will be described.

《第2実施形態》
図6は、固体撮像装置11aの焦点検出エリア(焦点検出用画素37aの配置エリア)を示す図である。図7は、固体撮像装置11aの半導体パターンを示す図である。
なお、電子カメラの構成や信号の読み出し手順などについては、第1実施形態と同じため、ここでの説明を省略する。
<< Second Embodiment >>
FIG. 6 is a diagram illustrating a focus detection area (arrangement area of the focus detection pixels 37a) of the solid-state imaging device 11a. FIG. 7 is a diagram illustrating a semiconductor pattern of the solid-state imaging device 11a.
The configuration of the electronic camera, the signal reading procedure, and the like are the same as those in the first embodiment, and a description thereof is omitted here.

第2実施形態の特徴は、焦点検出用画素37aを、瞳分割方向と直交する方向へサイズ拡大した点である。
このサイズ拡大に伴って、光電変換域34aの1区画は、図7に示すように、撮像用画素31の(2×1)区画分を占有する。瞳分割用マイクロレンズ35aは、この光電変換域34aを覆うように、楕円状にサイズ拡大する。さらに、瞳形成用マイクロレンズ36aは、瞳分割用マイクロレンズ35aの2個分を覆うように、サイズ拡大して等方形状となる。
A feature of the second embodiment is that the focus detection pixel 37a is enlarged in a direction orthogonal to the pupil division direction.
As the size is increased, one section of the photoelectric conversion area 34a occupies the (2 × 1) section of the imaging pixel 31 as shown in FIG. The pupil-dividing microlens 35a has an elliptical size so as to cover the photoelectric conversion area 34a. Further, the pupil forming microlens 36a has an isotropic shape with an enlarged size so as to cover two pupil dividing microlenses 35a.

[第2実施形態の効果など]
瞳分割用マイクロレンズ35aは、瞳分割方向と直交する方向に拡大する。そのため、瞳分割の性能を落とすことなく、光電変換域34aの受光効率を一段と高くすることができる。そのため、光電変換域34aの信号出力レベルは高くなり、低照度の環境下においても正確な焦点検出が可能になる。
[Effects of Second Embodiment, etc.]
The pupil division microlens 35a expands in a direction orthogonal to the pupil division direction. Therefore, the light receiving efficiency of the photoelectric conversion area 34a can be further increased without degrading the pupil division performance. Therefore, the signal output level of the photoelectric conversion area 34a becomes high, and accurate focus detection is possible even in a low illuminance environment.

さらに、瞳形成用マイクロレンズ36aは等方形状をなす。そのため、瞳形成用マイクロレンズ36aの設計や製造が容易となる。
また、第2実施形態では、焦点検出用画素37aのサイズを、撮像用画素31の複数個分のサイズに一致させている。そのため、撮像用画素31の群の間に焦点検出用画素37aを配置しても、無駄な隙間が生じず、受光量の損失は少ない。
Further, the pupil forming microlens 36a has an isotropic shape. This facilitates the design and manufacture of the pupil forming microlens 36a.
In the second embodiment, the size of the focus detection pixel 37 a is made to match the size of a plurality of the imaging pixels 31. Therefore, even if the focus detection pixels 37a are arranged between the groups of the imaging pixels 31, no useless gap is generated, and the loss of received light amount is small.

さらに、行方向に並ぶ光電変換域34aでは、列方向にサイズ拡大しているにも拘わらず、光電変換の期間を一致させることができる。そのため、時間差なく瞳分割を行うことが可能となり、動体被写体であっても瞳分割像の一致度が損なわれない。その結果、正確かつ確実な焦点検出が可能になる。   Further, in the photoelectric conversion areas 34a arranged in the row direction, the photoelectric conversion periods can be made to coincide with each other even though the size is increased in the column direction. Therefore, it is possible to perform pupil division without time difference, and the degree of coincidence of the pupil divided images is not impaired even for a moving subject. As a result, accurate and reliable focus detection is possible.

また、複数の焦点検出用画素37aは、瞳分割方向に沿って撮像面に千鳥配置される。この千鳥配置では、個々の焦点検出用画素37aの上下左右に、撮像用画素31が必ず存在する。そのため、焦点検出用画素37aによって欠落する画像信号を、周囲の撮像用画素31を用いて高品質に補間することが可能になる。
次に、別の実施形態について説明する。
The plurality of focus detection pixels 37a are staggered on the imaging surface along the pupil division direction. In this staggered arrangement, the imaging pixels 31 always exist on the upper, lower, left, and right sides of the individual focus detection pixels 37a. For this reason, it is possible to interpolate an image signal lost by the focus detection pixel 37 a with high quality using the surrounding imaging pixels 31.
Next, another embodiment will be described.

《第3実施形態》
図8は、固体撮像装置11bの断面図である。
第3実施形態の特徴は、瞳分割用マイクロレンズ35bを、瞳形成用マイクロレンズ36bと光電変換域34の中間層内のインナーレンズとした点である。なお、その他の構成は、第1実施形態や第2実施形態と同一であるため、ここでの説明は省略する。
<< Third Embodiment >>
FIG. 8 is a cross-sectional view of the solid-state imaging device 11b.
The feature of the third embodiment is that the pupil-dividing microlens 35 b is an inner lens in the intermediate layer between the pupil-forming microlens 36 b and the photoelectric conversion area 34. Since other configurations are the same as those of the first embodiment and the second embodiment, description thereof is omitted here.

この瞳分割用マイクロレンズ35bは、中間層を構成するレンズ形成層38bと平坦化層39bの屈折率を異ならせることによって形成される。なお、中間層を3層構成とすることによって、図8下段に示すように、瞳分割用マイクロレンズ35bをダブルインナーレンズ化することも可能である。また、インナーレンズを回折格子レンズの形態で実現してもよい。   The pupil-dividing microlens 35b is formed by making the refractive indexes of the lens forming layer 38b and the planarizing layer 39b constituting the intermediate layer different. Note that, when the intermediate layer has a three-layer structure, as shown in the lower part of FIG. 8, the pupil-dividing microlens 35b can be formed as a double inner lens. The inner lens may be realized in the form of a diffraction grating lens.

[第3実施形態の効果など]
第3実施形態においても、多層構成で瞳分割を行うことが可能になる。そのため、第1実施形態および第2実施形態と同じ効果を得ることができる。
[Effects of Third Embodiment]
Also in the third embodiment, it is possible to perform pupil division with a multilayer structure. Therefore, the same effect as the first embodiment and the second embodiment can be obtained.

さらに、第3実施形態では、瞳分割用マイクロレンズ35bをインナーレンズとするため、固体撮像装置11bの撮像面の構造を単純化することが可能になる。その結果、素子製造時の工程数を減らすことが可能になる。また、マイクロレンズ2層分の厚さを抑えることも可能となり、撮像用画素31bに入射する光が焦点検出用画素37bのマイクロレンズによってけられるなどの弊害を減らすことも可能になる。   Furthermore, in the third embodiment, since the pupil-dividing microlens 35b is an inner lens, the structure of the imaging surface of the solid-state imaging device 11b can be simplified. As a result, it is possible to reduce the number of processes when manufacturing the element. In addition, it is possible to reduce the thickness of two microlenses, and it is possible to reduce adverse effects such as light incident on the imaging pixel 31b being scattered by the microlens of the focus detection pixel 37b.

また、第3実施形態では、撮像用画素31bについても、2層のマイクロレンズ33b,33cを配置する。その結果、2層のマイクロレンズによって、撮像用画素31bの受光効率を高めることも同時に可能になる。
次に、別の実施形態について説明する。
In the third embodiment, two layers of microlenses 33b and 33c are also arranged for the imaging pixel 31b. As a result, the light receiving efficiency of the imaging pixel 31b can be increased at the same time by the two-layer microlens.
Next, another embodiment will be described.

《第4実施形態》
図9は、固体撮像装置11cを示す図である。なお、電子カメラの構成や信号の読み出し手順などについては、第1実施形態と同じため、ここでの説明を省略する。
<< 4th Embodiment >>
FIG. 9 is a diagram illustrating the solid-state imaging device 11c. The configuration of the electronic camera, the signal reading procedure, and the like are the same as those in the first embodiment, and a description thereof is omitted here.

第4実施形態の特徴は、1つの瞳形成用マイクロレンズ36cに対して、4つの瞳分割用マイクロレンズ35cを放射状(ここでは縦2画素×横2画素)に配置した点である。この放射配置の中心点は、瞳形成用マイクロレンズ36cのレンズ中心、または射出瞳の実像の像中心とすることが好ましい。つまり、4画素の瞳分割用マイクロレンズ35c及び光電変換域34cは、瞳形成用マイクロレンズ36cのレンズ中心などに対して点対称の位置に配置されることが好ましい。   A feature of the fourth embodiment is that four pupil-dividing microlenses 35c are arranged radially (here, two vertical pixels × two horizontal pixels) with respect to one pupil forming microlens 36c. The center point of this radiation arrangement is preferably the lens center of the pupil forming microlens 36c or the image center of the real image of the exit pupil. That is, it is preferable that the four-pixel pupil-dividing microlens 35c and the photoelectric conversion area 34c are arranged at point-symmetrical positions with respect to the lens center of the pupil-forming microlens 36c.

一方、光電変換域34cは、これら瞳分割用マイクロレンズ35cごとに設けられ、瞳分割用マイクロレンズ35cによって4分割された瞳分割光束をそれぞれ光電変換する。
さらに、固体撮像装置11cの撮像面には、ベイヤ配列の色フィルタ40cが、光電変換域34cごとに設けられる。このベイヤ配列の最小色配列(R,Gr,Gb,B)ごとに、1つの瞳形成用マイクロレンズ36cが形成される。
なお、瞳分割用マイクロレンズ35cについては、瞳形成用マイクロレンズ36cと光電変換域34cの中間層内に形成するインナーレンズとしてもよい。
On the other hand, the photoelectric conversion area 34c is provided for each of the pupil division microlenses 35c, and photoelectrically converts the pupil division light beams divided into four by the pupil division microlenses 35c.
Further, a Bayer array color filter 40c is provided for each photoelectric conversion region 34c on the imaging surface of the solid-state imaging device 11c. One pupil forming microlens 36c is formed for each minimum color array (R, Gr, Gb, B) of the Bayer array.
The pupil-dividing microlens 35c may be an inner lens formed in an intermediate layer between the pupil-forming microlens 36c and the photoelectric conversion area 34c.

[第4実施形態の焦点検出]
電子カメラ10は、予め範囲設定された焦点検出エリアに限定して、光電変換域34cの光電変換出力を読み出し、焦点検出用信号を得る。
焦点演算部20は、この焦点検出用信号から、Gr位置の光電変換出力とGb位置の光電変換出力を分離抽出することにより、斜め方向に瞳分割されたG色の分割像パターンを得ることができる。
焦点演算部20は、このG色の分割像パターンを斜め方向にずらして位相差を検出することによって焦点検出が可能になる。
[Focus Detection in Fourth Embodiment]
The electronic camera 10 reads out the photoelectric conversion output of the photoelectric conversion area 34c only in the focus detection area set in advance and obtains a focus detection signal.
The focus calculation unit 20 separates and extracts the photoelectric conversion output at the Gr position and the photoelectric conversion output at the Gb position from the focus detection signal, thereby obtaining a G-color divided image pattern that is pupil-divided in an oblique direction. it can.
The focus calculation unit 20 can detect the focus by shifting the G-color divided image pattern in an oblique direction and detecting a phase difference.

また、焦点演算部20は、放射状に4分割された光電変換出力を、縦2画素および横2画素にそれぞれ加算してもよい。この処理により、縦方向に瞳分割された分割像パターンと、横方向に瞳分割された分割像パターンとを同時に得ることができる。   In addition, the focus calculation unit 20 may add photoelectric conversion outputs radially divided into four to two vertical pixels and two horizontal pixels, respectively. By this processing, it is possible to simultaneously obtain a divided image pattern obtained by dividing the pupil in the vertical direction and a divided image pattern obtained by dividing the pupil in the horizontal direction.

焦点演算部20は、縦方向に瞳分割された分割像パターンを縦方向にずらしながら輝度分布の位相差を検出することにより、横エッジを主たる絵柄とする被写体について正確な焦点検出が可能になる。一方、横方向に瞳分割された分割像パターンを横方向にずらしながら輝度分布の位相差を検出することにより、縦エッジを主たる絵柄とする被写体について正確な焦点検出が可能になる。   The focus calculation unit 20 detects the phase difference of the luminance distribution while shifting the divided image pattern obtained by dividing the pupil in the vertical direction in the vertical direction, thereby enabling accurate focus detection for a subject having a horizontal edge as a main pattern. . On the other hand, by detecting the phase difference of the luminance distribution while shifting the divided image pattern obtained by dividing the pupil in the horizontal direction in the horizontal direction, it is possible to accurately detect the focus on the subject whose main image is the vertical edge.

なお、縦横の位相差検出誤差(画像マッチングの誤差)を比較することにより、2つの焦点検出結果から信頼度の高い方を選択することも可能である。   It is also possible to select the one with higher reliability from the two focus detection results by comparing the vertical and horizontal phase difference detection errors (image matching errors).

[第4実施形態の画像信号読み出し]
電子カメラ10は、求めた焦点検出結果に基づいてピントの自動調整を実施する。
その後、電子カメラ10内のマイクロプロセッサ19は、レリーズ釦の全押し操作に同期して、画像信号の読み出し動作を開始する。
この画像信号の読み出し動作は、有効画素領域の全域について、光電変換域34cの光電変換出力を順次読み出すことによって実施される。
[Reading Image Signal According to Fourth Embodiment]
The electronic camera 10 performs automatic focus adjustment based on the obtained focus detection result.
Thereafter, the microprocessor 19 in the electronic camera 10 starts an image signal reading operation in synchronization with the full pressing operation of the release button.
This image signal readout operation is performed by sequentially reading out the photoelectric conversion output of the photoelectric conversion region 34c for the entire effective pixel region.

[第4実施形態の効果など]
第4実施形態では、最小色配列ごとに、瞳形成用マイクロレンズ36cを1つずつ配置する。この構成により、瞳形成用マイクロレンズ36cは、モアレ防止用の光学ローパスフィルターと同様の機能を果たす可能になる。そのため、固体撮像装置11cから光学ローパスフィルターを省くことが可能になる。また、瞳形成用マイクロレンズ36cの光学作用分だけ、光学ローパスフィルターのぼかし量を低減して光学ローパスフィルターを薄型化することが可能になる。
[Effects of Fourth Embodiment, etc.]
In the fourth embodiment, one pupil forming microlens 36c is arranged for each minimum color arrangement. With this configuration, the pupil forming microlens 36c can perform the same function as an optical low-pass filter for preventing moire. Therefore, it is possible to omit the optical low-pass filter from the solid-state imaging device 11c. In addition, the optical low-pass filter can be thinned by reducing the blurring amount of the optical low-pass filter by the optical action of the pupil forming microlens 36c.

また、第4実施形態では、放射状に4つ配置された光電変換域34cを縦横にそれぞれ加算することで、瞳分割方向を臨機に変更することが可能になる。   Further, in the fourth embodiment, it is possible to change the pupil division direction instantly by adding four photoelectric conversion areas 34c arranged radially in the vertical and horizontal directions.

《実施形態の補足事項》
なお、上述した実施形態では、瞳形成用マイクロレンズの入射面側を凸形状に形成する。しかしながら、実施形態はこれに限定されるものではない。例えば、瞳形成用マイクロレンズの出射面側を凸形状として入射面側を平坦化または平坦に近づけてもよい。この形状であれば隣接する画素への斜め入射光が瞳形成用マイクロレンズによって遮られることが少なくなり、固体撮像装置の受光効率を高めることができる。
<< Additional items of embodiment >>
In the embodiment described above, the entrance surface side of the pupil forming microlens is formed in a convex shape. However, the embodiment is not limited to this. For example, the exit surface side of the pupil forming microlens may be convex, and the entrance surface side may be flattened or close to flat. With this shape, oblique incident light on adjacent pixels is less likely to be blocked by the pupil forming microlens, and the light receiving efficiency of the solid-state imaging device can be increased.

なお、上述した第1〜第3実施形態では、撮像用画素に色フィルタを配置してもよい。この場合、焦点検出用画素については、色フィルタを省略することで、焦点検出用画素の受光効率を高めることが好ましい。   In the first to third embodiments described above, a color filter may be arranged in the imaging pixel. In this case, it is preferable to increase the light receiving efficiency of the focus detection pixel by omitting the color filter for the focus detection pixel.

また、上述した第1〜第3実施形態では、予め定められた焦点検出エリアに限って、焦点検出用画素を配置する。しかしながら、実施形態はこれに限定されるものではない。例えば、撮像面の全域にわたって所定ピッチで焦点検出用画素を配置してもよい。この構成によって、所望の領域を柔軟に選択して、その領域から焦点検出用信号を読み出すことが可能になる。   In the first to third embodiments described above, focus detection pixels are arranged only in a predetermined focus detection area. However, the embodiment is not limited to this. For example, focus detection pixels may be arranged at a predetermined pitch over the entire imaging surface. With this configuration, a desired region can be flexibly selected, and a focus detection signal can be read from the region.

なお、上述した第1〜第3実施形態では、焦点検出用画素の区画内に、2個の光電変換域を設けている。しかしながら、実施形態はこれに限定されるものではない。焦点検出用画素の区画内に、複数個(3個以上)の光電変換域を放射状に配置してもよい。これら光電変換域を適当な傾きの中心線で線対称に分離してそれぞれ合成することで、焦点検出用画素の瞳分割方向を多様に変化させることが可能になる。また逆に、焦点検出用画素の区画内に、1つの光電変換域を設けてもよい。この場合、近接する焦点検出用画素を組にして瞳分割を行うことで焦点検出用信号を生成することが可能になる。   In the first to third embodiments described above, two photoelectric conversion areas are provided in the section of the focus detection pixel. However, the embodiment is not limited to this. A plurality (three or more) of photoelectric conversion areas may be radially arranged in the focus detection pixel section. By separating these photoelectric conversion areas symmetrically with a center line having an appropriate inclination and combining them, the pupil division direction of the focus detection pixels can be changed in various ways. Conversely, one photoelectric conversion area may be provided in the focus detection pixel section. In this case, it is possible to generate a focus detection signal by performing pupil division by using adjacent focus detection pixels as a set.

また、上述した第4実施形態では、撮像面の全域にわたって焦点検出用画素を配置する。しかしながら、実施形態はこれに限定されるものではない。複数のN画素おき(N=2,4,6・・など)に焦点検出用画素を配置し、その他の画素位置に撮像専用の画素を配置してもよい。また、市松状に焦点検出用画素を配置し、その他の画素位置に撮像専用の画素を配置してもよい。   In the fourth embodiment described above, focus detection pixels are arranged over the entire imaging surface. However, the embodiment is not limited to this. Focus detection pixels may be arranged at intervals of a plurality of N pixels (N = 2, 4, 6,...), And pixels dedicated to imaging may be arranged at other pixel positions. Alternatively, focus detection pixels may be arranged in a checkered pattern, and pixels dedicated to imaging may be arranged at other pixel positions.

なお、上述した第4実施形態では、原色ベイヤ配列のケースについて説明した。しかしながら、第4実施形態はこれに限定されるものではない。任意の色配列に応じて最小色配列を決定し、最小色配列の区域ごとに瞳形成用マイクロレンズを配置すればよい。   In the above-described fourth embodiment, the case of the primary color Bayer arrangement has been described. However, the fourth embodiment is not limited to this. A minimum color arrangement may be determined according to an arbitrary color arrangement, and a pupil forming microlens may be arranged for each area of the minimum color arrangement.

また、上述した実施形態では、XYアドレス方式(CMOS型など)の固体撮像装置のケースについて説明した。しかしながら、実施形態はこれに限定されるものではない。CCD型固体撮像装置などに本発明を適用してもよい。   Further, in the above-described embodiment, the case of an XY address type (CMOS type, etc.) solid-state imaging device has been described. However, the embodiment is not limited to this. The present invention may be applied to a CCD type solid-state imaging device or the like.

以上説明したように、本発明は、焦点検出用信号の生成機能を有する固体撮像装置に利用可能な技術である。   As described above, the present invention is a technique that can be used for a solid-state imaging device having a function of generating a focus detection signal.

電子カメラ10を示すブロック図である。1 is a block diagram showing an electronic camera 10. FIG. 固体撮像装置11の焦点検出エリアを示す図である。3 is a diagram illustrating a focus detection area of the solid-state imaging device 11. FIG. 固体撮像装置11の撮像面の断面図である。3 is a cross-sectional view of an imaging surface of the solid-state imaging device 11. FIG. 固体撮像装置11の等価回路と半導体パターンを示す図である。It is a figure which shows the equivalent circuit and semiconductor pattern of the solid-state imaging device. 焦点検出用信号の読み出し動作を説明するタイミングチャートである。6 is a timing chart for explaining a focus detection signal read operation. 固体撮像装置11aの焦点検出エリアを示す図である。It is a figure which shows the focus detection area of the solid-state imaging device 11a. 固体撮像装置11aの半導体パターンを示す図である。It is a figure which shows the semiconductor pattern of the solid-state imaging device 11a. 固体撮像装置11bの撮像面の断面図である。It is sectional drawing of the imaging surface of the solid-state imaging device 11b. 固体撮像装置11cを示す図である。It is a figure which shows the solid-state imaging device 11c.

符号の説明Explanation of symbols

10…電子カメラ,11…固体撮像装置,11a…固体撮像装置,11b…固体撮像装置,11c…固体撮像装置,12…撮影レンズ,12a…レンズ制御部,13…固体撮像装置,14…撮像制御部,15…信号処理部,16…A/D変換部,17…メモリ,18…バス,19…マイクロプロセッサ,19a…操作部,20…焦点演算部,22…記録部,22a…記録媒体,24…画像圧縮部,25…画像処理部,31…撮像用画素,31b…撮像用画素,32…光電変換域,33…マイクロレンズ,34…光電変換域,34a…光電変換域,34c…光電変換域,35…瞳分割用マイクロレンズ,35a…瞳分割用マイクロレンズ,35b…瞳分割用マイクロレンズ,35c…瞳分割用マイクロレンズ,36…瞳形成用マイクロレンズ,36a…瞳形成用マイクロレンズ,36b…瞳形成用マイクロレンズ,36c…瞳形成用マイクロレンズ,37…焦点検出用画素,37a…焦点検出用画素,38…平坦化層,38b…レンズ形成層,39…平坦化層,39b…平坦化層,40c…色フィルタ DESCRIPTION OF SYMBOLS 10 ... Electronic camera, 11 ... Solid-state imaging device, 11a ... Solid-state imaging device, 11b ... Solid-state imaging device, 11c ... Solid-state imaging device, 12 ... Imaging lens, 12a ... Lens control part, 13 ... Solid-state imaging device, 14 ... Imaging control 15, signal processing unit, 16, A / D conversion unit, 17, memory, 18, bus, 19, microprocessor, 19 a, operation unit, 20, focus calculation unit, 22, recording unit, 22 a, recording medium, 24 ... Image compression unit, 25 ... Image processing unit, 31 ... Imaging pixel, 31b ... Imaging pixel, 32 ... Photoelectric conversion area, 33 ... Micro lens, 34 ... Photoelectric conversion area, 34a ... Photoelectric conversion area, 34c ... Photoelectric Conversion region, 35... Pupil division microlens, 35a. Pupil division microlens, 35b. Pupil division microlens, 35c. Pupil division microlens, 36. Pupil formation microlens. 6a ... pupil forming microlens, 36b ... pupil forming microlens, 36c ... pupil forming microlens, 37 ... focus detection pixel, 37a ... focus detection pixel, 38 ... flattening layer, 38b ... lens forming layer, 39 ... flattened layer, 39b ... flattened layer, 40c ... color filter

Claims (8)

撮像面にマイクロレンズを多層形成した固体撮像装置であって、
受光光束を集光して、焦点検出対象である撮影レンズの射出瞳の実像を形成する瞳形成用マイクロレンズと、
前記射出瞳の実像の像面近傍に配置されて、前記瞳形成用マイクロレンズの通過光束の一部を分離し、瞳分割光束とする瞳分割用マイクロレンズと、
前記瞳分割光束を光電変換して、焦点検出用信号を生成する光電変換域と
を備えたことを特徴とする固体撮像装置。
A solid-state imaging device in which microlenses are formed in a multilayer on the imaging surface,
A pupil-forming microlens that collects the received light flux and forms a real image of the exit pupil of the photographing lens that is the focus detection target;
A pupil-dividing microlens that is arranged near the image plane of the real image of the exit pupil and separates a part of the light beam passing through the pupil-forming microlens to form a pupil-divided beam;
A solid-state imaging device comprising: a photoelectric conversion area that photoelectrically converts the pupil-divided light beam to generate a focus detection signal.
請求項1に記載の固体撮像装置において、
画素単位に光電変換して、画像信号を生成する撮像用画素を更に備え、
前記撮像用画素は、前記瞳分割用マイクロレンズと前記光電変換域と同一構造を有する
ことを特徴とする固体撮像装置。
The solid-state imaging device according to claim 1,
It further includes an imaging pixel that performs photoelectric conversion on a pixel basis to generate an image signal,
The imaging pixel has the same structure as the pupil-dividing microlens and the photoelectric conversion area.
請求項1に記載の固体撮像装置において、
画素単位に光電変換して、画像信号を生成する撮像用画素を更に備え、
前記瞳分割用マイクロレンズは、前記撮像用画素の複数個に相当する区画を占有する
ことを特徴とする固体撮像装置。
The solid-state imaging device according to claim 1,
It further includes an imaging pixel that performs photoelectric conversion on a pixel basis to generate an image signal,
The pupil-dividing microlens occupies a section corresponding to a plurality of the imaging pixels.
請求項1に記載の固体撮像装置において、
前記射出瞳の実像を対称的に分割するよう、1つの前記瞳形成用マイクロレンズに対して複数の前記瞳分割用マイクロレンズを配置する
ことを特徴とする固体撮像装置。
The solid-state imaging device according to claim 1,
A solid-state imaging device, wherein a plurality of pupil-dividing microlenses are arranged for one pupil-forming microlens so as to symmetrically divide the real image of the exit pupil.
請求項4に記載の固体撮像装置において、
所定の最小色配列の繰り返しで、前記光電変換域ごとに色フィルタを備え、
前記最小色配列の区域ごとに、1つの前記瞳形成用マイクロレンズを形成した
ことを特徴とする固体撮像装置。
The solid-state imaging device according to claim 4,
With a repetition of a predetermined minimum color arrangement, a color filter is provided for each photoelectric conversion area,
One solid-state imaging device, wherein one pupil forming microlens is formed for each area of the minimum color arrangement.
請求項4または請求項5に記載の固体撮像装置において、
1つの前記瞳形成用マイクロレンズに対して放射状に4つの前記瞳分割用マイクロレンズを配置し、
前記4つの光電変換域の組み合わせによって瞳分割方向を変更可能にした
ことを特徴とする固体撮像装置。
In the solid-state imaging device according to claim 4 or 5,
Four pupil division microlenses are arranged radially with respect to one pupil forming microlens,
A solid-state imaging device characterized in that a pupil division direction can be changed by a combination of the four photoelectric conversion areas.
請求項1に記載の固体撮像装置において、
前記瞳分割用マイクロレンズは、前記瞳形成用マイクロレンズ/前記光電変換域の中間層の内部に形成されるインナーレンズである
ことを特徴とする固体撮像装置。
The solid-state imaging device according to claim 1,
The pupil division microlens is an inner lens formed inside the pupil formation microlens / intermediate layer of the photoelectric conversion region.
請求項1ないし請求項7のいずれか1項に記載の固体撮像装置と、
前記固体撮像装置から前記焦点検出用信号を読み出し、前記焦点検出用信号から抽出される瞳分割像のパターンズレを検出して、焦点検出を行う焦点演算部と、
前記固体撮像装置から光電変換出力を読み出して画像信号を得る撮像制御部と
を備えたことを特徴とする電子カメラ。
A solid-state imaging device according to any one of claims 1 to 7,
A focus calculation unit that reads out the focus detection signal from the solid-state imaging device, detects a pattern shift of a pupil-divided image extracted from the focus detection signal, and performs focus detection;
An electronic camera comprising: an imaging control unit that reads out photoelectric conversion output from the solid-state imaging device and obtains an image signal.
JP2005352458A 2005-12-06 2005-12-06 Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera Active JP4835136B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005352458A JP4835136B2 (en) 2005-12-06 2005-12-06 Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005352458A JP4835136B2 (en) 2005-12-06 2005-12-06 Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera

Publications (2)

Publication Number Publication Date
JP2007158109A JP2007158109A (en) 2007-06-21
JP4835136B2 true JP4835136B2 (en) 2011-12-14

Family

ID=38242055

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005352458A Active JP4835136B2 (en) 2005-12-06 2005-12-06 Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera

Country Status (1)

Country Link
JP (1) JP4835136B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015015790A1 (en) 2013-07-31 2015-02-05 Canon Kabushiki Kaisha Solid-state image sensor and image capturing apparatus using the same
US9160942B2 (en) 2013-07-11 2015-10-13 Canon Kabushiki Kaisha Solid-state imaging sensor, ranging device, and imaging apparatus

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4946294B2 (en) * 2006-09-14 2012-06-06 ソニー株式会社 Imaging device and imaging apparatus
US20080080028A1 (en) * 2006-10-02 2008-04-03 Micron Technology, Inc. Imaging method, apparatus and system having extended depth of field
JP4823167B2 (en) * 2007-08-10 2011-11-24 キヤノン株式会社 Imaging device
JP4823168B2 (en) * 2007-08-10 2011-11-24 キヤノン株式会社 Imaging device
JP4823169B2 (en) * 2007-08-10 2011-11-24 キヤノン株式会社 Imaging device
JP4414486B2 (en) * 2007-08-13 2010-02-10 パナソニック株式会社 Imaging device and camera
JP4995002B2 (en) * 2007-08-21 2012-08-08 株式会社リコー Imaging device, focusing device, imaging method, and focusing method
JP5164617B2 (en) * 2008-03-11 2013-03-21 キヤノン株式会社 Imaging apparatus and image processing method
JP2010057067A (en) * 2008-08-29 2010-03-11 Sony Corp Image pickup apparatus and image processing apparatus
JP5228777B2 (en) * 2008-10-09 2013-07-03 株式会社ニコン Focus detection apparatus and imaging apparatus
JP5476702B2 (en) * 2008-10-31 2014-04-23 株式会社ニコン Imaging device and imaging apparatus
JP5543098B2 (en) * 2008-11-14 2014-07-09 キヤノン株式会社 Imaging device
JP4760915B2 (en) 2009-01-08 2011-08-31 ソニー株式会社 Solid-state image sensor
JP5232118B2 (en) * 2009-09-30 2013-07-10 富士フイルム株式会社 Imaging device and electronic camera
JP5644177B2 (en) 2010-05-07 2014-12-24 ソニー株式会社 Solid-state imaging device, manufacturing method thereof, and electronic apparatus
CN103003944B (en) 2010-07-12 2016-01-20 富士胶片株式会社 Solid state image pickup device
JP5538553B2 (en) * 2010-09-29 2014-07-02 富士フイルム株式会社 Solid-state imaging device and imaging apparatus
JP5834398B2 (en) * 2010-11-22 2015-12-24 株式会社ニコン Imaging device and imaging apparatus
JP5825817B2 (en) 2011-04-01 2015-12-02 キヤノン株式会社 Solid-state imaging device and imaging apparatus
JP5240591B2 (en) * 2011-06-27 2013-07-17 株式会社リコー Imaging device, focusing device, imaging method, and focusing method
JP5750394B2 (en) * 2012-03-30 2015-07-22 富士フイルム株式会社 Solid-state imaging device and imaging apparatus
JP2014075445A (en) * 2012-10-03 2014-04-24 Canon Inc Reverse face irradiation type imaging element
TWI636557B (en) * 2013-03-15 2018-09-21 新力股份有限公司 Solid-state imaging device, manufacturing method thereof, and electronic device
JP6289017B2 (en) * 2013-03-27 2018-03-07 キヤノン株式会社 Imaging apparatus, control method therefor, program, and storage medium
JP2016015430A (en) 2014-07-03 2016-01-28 ソニー株式会社 Solid-state image sensor and electronic apparatus
CN113363268A (en) * 2014-12-18 2021-09-07 索尼公司 Imaging device and mobile apparatus
US20180026065A1 (en) * 2016-07-21 2018-01-25 Visera Technologies Company Limited Image-sensor structures
CN117577654A (en) 2017-05-29 2024-02-20 索尼半导体解决方案公司 Solid-state image pickup device and electronic apparatus
JP7316764B2 (en) 2017-05-29 2023-07-28 ソニーセミコンダクタソリューションズ株式会社 Solid-state imaging device and electronic equipment
DE112019006460T5 (en) 2018-12-26 2021-09-16 Sony Semiconductor Solutions Corporation PICTURE CAPTURE ELEMENT AND PICTURE CAPTURE DEVICE
TW202127649A (en) * 2019-12-13 2021-07-16 日商索尼半導體解決方案公司 Imaging device and electronic apparatus

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3178629B2 (en) * 1992-11-24 2001-06-25 株式会社ニコン Solid-state imaging device and method of manufacturing the same
JP2001250931A (en) * 2000-03-07 2001-09-14 Canon Inc Solid-state image sensor and image sensing system using the same
JP2002314062A (en) * 2001-04-18 2002-10-25 Canon Inc Solid-state image sensing device and image sensing system
JP4027113B2 (en) * 2002-02-19 2007-12-26 キヤノン株式会社 Imaging apparatus and system
JP2003332548A (en) * 2002-05-16 2003-11-21 Fuji Film Microdevices Co Ltd Solid-state image pickup element and method of manufacturing the same
JP2004191893A (en) * 2002-12-13 2004-07-08 Canon Inc Imaging apparatus

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9160942B2 (en) 2013-07-11 2015-10-13 Canon Kabushiki Kaisha Solid-state imaging sensor, ranging device, and imaging apparatus
US9319607B2 (en) 2013-07-11 2016-04-19 Canon Kabushiki Kaisha Solid-state imaging sensor, ranging device, and imaging apparatus
US9402041B2 (en) 2013-07-11 2016-07-26 Canon Kabushiki Kaisha Solid-state image sensor and imaging apparatus using same
WO2015015790A1 (en) 2013-07-31 2015-02-05 Canon Kabushiki Kaisha Solid-state image sensor and image capturing apparatus using the same
US9627427B2 (en) 2013-07-31 2017-04-18 Canon Kabushiki Kaisha Solid-state image sensor and image capturing apparatus using the same

Also Published As

Publication number Publication date
JP2007158109A (en) 2007-06-21

Similar Documents

Publication Publication Date Title
JP4835136B2 (en) Solid-state imaging device having a function for generating a focus detection signal, and an electronic camera
JP4915126B2 (en) Solid-state imaging device and electronic camera
JP5023480B2 (en) Electronic camera
JP5034215B2 (en) Solid-state imaging device having function of generating focus detection signal
JP7298635B2 (en) Imaging element and imaging device
JP5157436B2 (en) Solid-state imaging device and imaging apparatus
JP5422889B2 (en) Solid-state imaging device and imaging apparatus using the same
US7978255B2 (en) Solid-state image sensor and image-capturing device
JP5552214B2 (en) Focus detection device
US8466998B2 (en) Solid-state image sensor and imaging apparatus equipped with solid-state image sensor
US8111982B2 (en) Imaging device and electronic camera
US20150358593A1 (en) Imaging apparatus and image sensor
JP5547349B2 (en) Digital camera
JP5028154B2 (en) Imaging apparatus and control method thereof
JP5744599B2 (en) Imaging device and imaging apparatus
US8614755B2 (en) Optical device and signal processor
JP4935078B2 (en) Solid-state imaging device and electronic camera using the same
JP6016396B2 (en) Imaging device and imaging apparatus
JP2010032646A (en) Focus detection apparatus
JP2007155930A (en) Solid-state imaging element and imaging apparatus using the same
JP2009047978A (en) Imaging apparatus, focusing unit, imaging method, and focusing method
JP2016111678A (en) Image sensor, image capturing apparatus, focus detection apparatus, image processing apparatus, and control method thereof
US10992859B2 (en) Image capture apparatus and control method thereof capable of reducing an image data amount
JP2012211942A (en) Solid-state image sensor and image pickup apparatus
JP2007150592A (en) Solid state imaging apparatus having function for generating focus detecting signal

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081023

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110830

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110901

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110912

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141007

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4835136

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141007

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250