JP4749959B2 - 撮像装置、並びにその製造装置および製造方法 - Google Patents
撮像装置、並びにその製造装置および製造方法 Download PDFInfo
- Publication number
- JP4749959B2 JP4749959B2 JP2006186025A JP2006186025A JP4749959B2 JP 4749959 B2 JP4749959 B2 JP 4749959B2 JP 2006186025 A JP2006186025 A JP 2006186025A JP 2006186025 A JP2006186025 A JP 2006186025A JP 4749959 B2 JP4749959 B2 JP 4749959B2
- Authority
- JP
- Japan
- Prior art keywords
- optical system
- image
- optical
- modulation element
- image signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 113
- 238000004519 manufacturing process Methods 0.000 title claims description 25
- 230000003287 optical effect Effects 0.000 claims description 235
- 238000012545 processing Methods 0.000 claims description 129
- 238000006243 chemical reaction Methods 0.000 claims description 99
- 238000004364 calculation method Methods 0.000 claims description 69
- 238000012937 correction Methods 0.000 claims description 49
- 238000000034 method Methods 0.000 claims description 47
- 238000003860 storage Methods 0.000 claims description 40
- 230000008569 process Effects 0.000 claims description 33
- 238000001514 detection method Methods 0.000 claims description 20
- 239000006185 dispersion Substances 0.000 claims description 19
- 238000012546 transfer Methods 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 14
- 230000009467 reduction Effects 0.000 claims description 12
- 238000009826 distribution Methods 0.000 claims description 10
- 230000000694 effects Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 6
- 241000255925 Diptera Species 0.000 claims description 2
- 230000006870 function Effects 0.000 description 35
- 238000010586 diagram Methods 0.000 description 28
- 230000004075 alteration Effects 0.000 description 27
- 230000004044 response Effects 0.000 description 18
- 238000013500 data storage Methods 0.000 description 13
- 210000001747 pupil Anatomy 0.000 description 7
- 230000015572 biosynthetic process Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 5
- 230000004907 flux Effects 0.000 description 4
- 238000011946 reduction process Methods 0.000 description 3
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 2
- 239000013078 crystal Substances 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 239000007788 liquid Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012806 monitoring device Methods 0.000 description 2
- 238000007493 shaping process Methods 0.000 description 2
- 206010010071 Coma Diseases 0.000 description 1
- 101000911772 Homo sapiens Hsc70-interacting protein Proteins 0.000 description 1
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 101000710013 Homo sapiens Reversion-inducing cysteine-rich protein with Kazal motifs Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 201000009310 astigmatism Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000004304 visual acuity Effects 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
Description
特に、デジタルカメラに象徴されるように撮像面は従来のフィルムに変わって固体撮像素子であるCCD(Charge Coupled Device),CMOS(Complementary Metal Oxide Semiconductor)センサが使用されているのが大半である。
この撮像レンズ装置1は、光学系2とCCDやCMOSセンサ等の撮像素子3とを有する。
光学系は、物体側レンズ21,22、絞り23、および結像レンズ24を物体側(OBJS)から撮像素子3側に向かって順に配置されている。
図39(A)〜(C)は、撮像レンズ装置1の撮像素子3の受光面でのスポット像を示している。
また、伝達関数を用いたフィルタ処理を行うデジタルカメラの自動露出制御システムが提案されている(たとえば特許文献6参照)。
"Wavefront Coding;jointly optimized optical and digital imaging systems",Edward R.Dowski,Jr.,Robert H.Cormack,Scott D.Sarama. "Wavefront Coding;A modern method of achieving high performance and/or low cost imaging systems",Edward R.Dowski,Jr.,Gregory E.Johnson.
したがって、単焦点でのレンズではともかく、ズーム系やAF系などのレンズでは、その光学設計の精度の高さやそれに伴うコストアップが原因となり採用するには大きな問題を抱えている。
換言すれば、従来の撮像装置においては、適正なコンボリューション演算を行うことができず、ワイド(Wide)時やテレ(Tele)時のスポット(SPOT)像のズレを引き起こす非点収差、コマ収差、ズーム色収差等の各収差を無くす光学設計が要求される。
しかしながら、これらの収差を無くす光学設計は光学設計の難易度を増し、設計工数の増大、コスト増大、レンズの大型化の問題を引き起こす。
したがって、たとえば上述した位相板等の光波面変調素子とその後の信号処理を用いるような、光学系と信号処理を含めた光学システムでは、暗所での撮影を行う場合、ノイズが増幅してしまい、復元画像に影響を与えてしまうという不利益がある。
前記光波面変調素子が、前記光学系の光軸をz軸とし、互いに直交する2軸をx、yとしたとき、位相が下記式で表される。
また、光学系を簡単化でき、コスト低減を図ることができ、しかも適切な画質の、ノイズの影響が小さい復元画像を得ることができる利点がある。
図1においては、撮像素子120を一例としてCCDとして記載している。
タイミングジェネレータ131では、撮像素子120のCCDの駆動タイミングを生成しており、A/Dコンバータ132は、CCDから入力されるアナログ信号をデジタル信号に変換し、画像処理装置140に出力する。
画像処理装置140は、制御装置190の露出情報に応じて、光学的伝達関数(OTF)に対してフィルタ処理を行う。なお、露出情報として絞り情報を含む。
画像処理装置140は、撮像素子120からの被写体の分散画像信号より分散のない画像信号を生成する機能を有する。また、信号処理部は、最初のステップでノイズ低減フィルタリングを施す機能を有する。
画像処理装置140は、光学的伝達関数(OTF)に対してフィルタ処理を行いコントラストを改善する処理を施す機能を有する。
画像処理装置140の処理については後でさらに詳述する。
また、図3は、本実施形態に係る撮像レンズ装置の望遠側のズーム光学系の構成例を模式的に示す図である。
そして、図4は、本実施形態に係るズーム光学系の広角側の像高中心のスポット形状を示す図であり、図5は、本実施形態に係るズーム光学系の望遠側の像高中心のスポット形状を示す図である。
たとえば、本実施形態においては、可変絞り110aが設けられ、露出制御(装置)において可変絞りの絞り度(開口度)を制御する。
また、本実施形態においては、光波面変調素子である位相板を用いて規則的に分散した画像を形成する場合について説明したが、通常の光学系として用いるレンズで光波面変調素子と同様に規則的に分散した画像を形成できるものを選択した場合には、光波面変調素子を用いずに光学系のみで実現することができる。この際は、後述する位相板に起因する分散に対応するのではなく、光学系に起因する分散に対応することとなる。
図で示された位相板113aは、光学系により収束される光束を規則正しく分散する光学レンズである。この位相板を挿入することにより、撮像素子120上ではピントのどこにも合わない画像を実現する。
換言すれば、位相板113aによって深度の深い光束(像形成の中心的役割を成す)とフレアー(ボケ部分)を形成している。
この規則的に分散した画像をデジタル処理により、ピントの合った画像に復元する手段を波面収差制御光学系システム、あるいは深度拡張光学系システム(DEOS:Depth Expantion Optical system)といい、この処理を画像処理装置140において行う。
図6に示すように、被写体の画像fがDEOS光学系Hに入ることにより、g画像が生成される。
これは、次のような式で表される。
g=H*f
ただし、*はコンボリューションを表す。
f=H-−1*g
ズームポジションをZPn,ZPn−1・・・とする。また、それぞれのH関数をHn,Hn−1、・・・・とする。
各々のスポット像が異なるため、各々のH関数は、次のようになる。
ここで、各々のH関数はメモリに格納しておいても構わないし、PSFを物体距離の関数としておき、物体距離によって計算し、H関数を算出することによって任意の物体距離に対して最適なフィルタを作るように設定できるようにしても構わない。また、H関数を物体距離の関数として、物体距離によってH関数を直接求めても構わない。
以下、この特徴について説明する。
図7(A)は焦点が0.2mmずれた場合(Defocus=0.2mm)、図7(B)が合焦点の場合(Best focus)、図7(C)が焦点が−0.2mmずれた場合(Defocus=−0.2mm)の各スポット像を示している。
図7(A)〜(C)からもわかるように、本実施形態に係る撮像装置100においては、位相板113aを含む波面形成用光学素子群113によって深度の深い光束(像形成の中心的役割を成す)とフレアー(ボケ部分)が形成される。
本実施形態においては、高精細な最終画像は後段の、たとえばデジタルシグナルプロセッサ(Digital Signal Processor)からなる画像処理装置140の補正処理に任せるため、図8(A),(B)に示すように、1次画像のMTFは本質的に低い値になっている。
このように、本実施形態においては、撮像装置100の製造組み立て時において、検知したコントラストがあらかじめ設定した閾値以上となる位置にすることにより、光学系と撮像素子の取り付け位置を調整することを可能としている。
タイミングジェネレータ232では、ピント調整制御部260の制御の下、センサ(撮像素子)220のCCDの駆動タイミングを生成しており、A/Dコンバータ231は、CCDから入力されるアナログ信号をデジタル信号に変換し、バッファメモリ240に可能する。
また、タイミングジェネレータ232は、ピント調整制御部260の制御の下、センサ220に対するレンズ211の位置を調整し、ピントを調整するための駆動信号をモータドライバ212に供給する。
コントラスト検知部250は、光学系のレンズ211が駆動される間の画像信号に基づく被写体のコントラストを繰り返し検知する。
ピント調整制御部260は、ピント位置を決定すると、その旨をたとえば表示等して報知する。
この光波面変調素子(位相変調素子)による点像分布の強度の高い部分を含む領域とは、換言すれば、「位相変調素子の影響をあまり受けない部分」である。
この「位相変調素子の影響をあまり受けない部分」について説明する。
「位相変調素子の影響をあまり受けない部分」とは図11、図12の点線部分で囲んだ箇所のことをいう。
そもそも上記式5で表された位相変調素子を用いて点光源を撮像すると、図13に示すように、非対称な形状になる。この位相変調素子によるボケ以外の部分を「位相変調素子の影響をあまり受けない部分」とする。
x軸、y軸の調整後、スタート位置を決定し(ST201)、その位置でのコントラストを測定する(ST202)。
そして、コントラストが閾値以下かどうかを判定し(ST203)、閾値以下でなければレンズ211を駆動し(ST204)、各位置でのコントラストを測定する(ST205)。
閾値以下である場合にはレンズ211の位置Aを記憶して(ST206)、レンズ211を駆動し(ST207)、各位置でのコントラストを測定する(ST208)。
次に、コントラストが閾値以下かどうかを判定し(ST209)、閾値以下でなければレンズ211を駆動し(ST207)、各位置でのコントラストを測定する(ST208)。
閾値以下である場合にはピント位置を算出し(ST210)、レンズ211を駆動する(ST211)。
なお、レンズ211の駆動は、z軸方向(光軸方向)の駆動を行う。
また、本実施形態のように、山登り方式にように、繰り返しコントラストを検知するようにしても良いが、検知したものが閾値以下であればそれ以降レンズを駆動しないようにしても良い。その場合には、ステップST206〜ST211の処理が省略され、最初に検知したものが閾値以下であればステップST204、ST205の処理も省略される。
図16および図17において、横軸はフォーカス位置を示し、縦軸がコントラスト比を示手いる。
図19は、光波面変調素子を持った光学系のMTFのレスポンスを示す図である。
この調整を行うことで調整を行わない場合よりも十分に広い被写界深度を得ることが可能となる。
図21は、前記波面収差の形状と0.5λ以下の範囲を太線で表したものである。
ただし、λはたとえば可視光領域、赤外領域の波長を用いる。
図22中曲線Bで示す特性は、たとえば本実施形態のように、波面形成用光学素子を用いずに波面を変形させない場合に得られる特性である。
なお、本実施形態における全ての補正は、空間周波数のパラメータによる。
たとえば、図22のMTF特性の場合、空間周波数に対するエッジ強調の曲線は、図23に示すようになる。
本実施形態では、撮像素子120による1次画像は深度が非常に深い光束条件にしている。そのために、1次画像のMTFは本質的に低い値になっており、そのMTFの補正を画像処理装置140で行う。
物点の1点から発散された球面波は結像光学系を通過後、収斂波となる。そのとき、結像光学系が理想光学系でなければ収差が発生する。波面は球面でなく複雑な形状となる。幾何光学と波動光学の間を取り持つのが波面光学であり、波面の現象を取り扱う場合に便利である。
結像面における波動光学的MTFを扱うとき、結像光学系の射出瞳位置における波面情報が重要となる。
MTFの計算は結像点における波動光学的強度分布のフーリエ変換で求まる。その波動光学的強度分布は波動光学的振幅分布を2乗して得られるが、その波動光学的振幅分布は射出瞳における瞳関数のフーリエ変換から求まる。
さらにその瞳関数はまさに射出瞳位置における波面情報(波面収差)そのものからであることから、その光学系110を通して波面収差が厳密に数値計算できればMTFが計算できることになる。
本実施形態においても、波面の形状変化を波面形成用光学素子で行うのが主であるが、まさにphase(位相、光線に沿った光路長)に増減を設けて目的の波面形成を行っている。
そして、目的の波面形成を行えば、射出瞳からの射出光束は、図7(A)〜(C)に示す幾何光学的なスポット像からわかるように、光線の密な部分と疎の部分から形成される。
この光束状態のMTFは空間周波数の低いところでは低い値を示し、空間周波数の高いところまでは何とか解像力は維持している特徴を示している。
すなわち、この低いMTF値(または、幾何光学的にはこのようなスポット像の状態)であれば、エリアジングの現象を発生させないことになる。
つまり、ローパスフィルタが必要ないのである。
そして、後段のDSP等からなる画像処理装置140でMTF値を低くしている原因のフレアー的画像を除去すれば良いのである。それによってMTF値は著しく向上する。
図25は、光波面変調素子を有する本実施形態の光学系の場合において物体が焦点位置にあるときと焦点位置から外れたときのMTFのレスポンスを示す図である。
また、図26は、本実施形態に係る撮像装置のデータ復元後のMTFのレスポンスを示す図である。
この光学系によって結像された画像を、コンボリューションフィルタによる処理によって、MTFのレスポンスが向上する。
なぜなら、図25に示した復元後のOTFを達成するためには復元フィルタでゲインを上げることになるが、センサのノイズも同時に上げることになる。そのため、ナイキスト周波数付近の高周波ではできるたけゲインを上げずに復元を行うことが好ましい。
通常の光学系の場合、ナイキスト周波数でのMTFが0.1以上あれば解像する。
したがって、復元前のMTFが0.1以上あれば復元フィルタでナイキスト周波数でのゲインを上げずに済む。復元前のMTFが0.1未満であると、復元画像がノイズの影響を大きく受けた画像になるため好ましくない。
なお、露出情報には、絞り情報が含まれる。
絞りを絞って撮影を行う場合、絞りによって光波面変調素子を形成する位相板113aが覆われてしまい、位相が変化してしまうため、適切な画像を復元することが困難となる。
そこで、本実施形態においては、本例のように、露出情報中の絞り情報に応じたフィルタ処理を行うことによって適切な画像復元を実現している。
まず、露出情報(RP)が検出されコンボリューション制御部144に供給される(ST101)。
コンボリューション制御部144においては、露出情報RPから、カーネルサイズ、数値演算係数がレジスタにセットされる(ST102)。
そして、撮像素子120で撮像され、AFE130を介して二次元コンボリューション演算部142に入力された画像データに対して、レジスタに格納されたデータに基づいてコンボリューション演算が行われ、演算され変換されたデータがカメラ信号処理部150に転送される(ST103)。
図31の例は露出情報に応じたフィルタカーネルを予め用意した場合のブロック図である。
図32の例は、信号処理部の最初にノイズ低減フィルタ処理のステップを有し、フィルタカーネルデータとして露出情報に応じたノイズ低減フィルタ処理ST1を予め用意した場合のブロック図である。
2次元コンボリューション演算部142においては、前記ノイズ低減フィルタST1を施した後、カラーコンバージョン処理ST2によって色空間を変換、その後カーネルデータを用いてコンボリューション処理ST3を施す。
再度ノイズ処理ST4を行い、カラーコンバージョン処理ST5によって元の色空間に戻す。カラーコンバージョン処理は、たとえばYCbCr変換が挙げられるが、他の変換でも構わない。
なお、再度のノイズ処理ST4は省略することも可能である。
図33例は、露出情報に応じたOTF復元フィルタを予め用意した場合のブロック図である。
2次元コンボリューション演算部142は、ノイズ低減処理ST11、カラーコンバージョン処理ST12の後に、前記OTF復元フィルタを用いてコンボリューション処理ST13を施す。
再度ノイズ処理ST14を行い、カラーコンバージョン処理ST15によって元の色空間に戻す。カラーコンバージョン処理は、たとえばYCbCr変換が挙げられるが、他の変換でも構わない。
なお、ノイズ低減処理ST11、ST14は、いずれか一方のみでもよい。
図34の例は、ノイズ低減フィルタ処理のステップを有し、フィルタカーネルデータとして露出情報に応じたノイズ低減フィルタを予め用意した場合のブロック図である。
なお、再度のノイズ処理ST4は省略することも可能である。
露出設定時に決まる露出情報を取得し、コンボリューション制御部144を通じてカーネルデータを選択制御する。
2次元コンボリューション演算部142においては、ノイズ低減フィルタ処理ST21を施した後、カラーコンバージョン処理ST22によって色空間を変換、その後カーネルデータを用いてコンボリューション処理ST23を施す。
再度、露出情報に応じたノイズ処理ST24を行い、カラーコンバージョン処理ST25によって元の色空間に戻す。カラーコンバージョン処理は、たとえばYCbCr変換が挙げられるが、他の変換でも構わない。
なお、ノイズ低減処理ST21は省略することも可能である。
図35は、撮像素子120からの被写体分散画像信号より分散のない画像信号を生成するが画像処理装置300の構成例を示している。
また一方、所定の狭い範囲内に収差が生じない画像処理を施すことにより、所定の狭い範囲外の画像にぼけ味を出すことも可能になる。
本例においては、主被写体までの距離を、距離検出センサを含む物体概略距離情報検出装置400により検出し、検出した距離に応じて異なる画像補正の処理を行うことにように構成されている。
この構成の他にも、以下の構成を採用することが可能である。
そして、変換手段としてのコンボリューション装置301が、係数選択手段としての画像処理演算プロセッサ303で選択された変換係数によって、画像信号の変換を行う。
そして、変換手段としてのコンボリューション装置301が、変換係数演算手段としての画像処理演算プロセッサ303で得られレジスタ302に格納された変換係数によって、画像信号の変換を行う。
第2変換係数記憶手段としても機能するレジスタ302に、位相板113aに起因する収差に対応した変換係数を予め記憶する。
そして、被写体距離情報生成手段としての物体概略距離情報検出装置400により生成された距離情報に基づき、補正値選択手段としての画像処理演算プロセッサ303が、補正値記憶手段としてのレジスタ302から被写体までの距離に応じた補正値を選択する。
変換手段としてのコンボリューション装置301が、第2変換係数記憶手段としてのレジスタ302から得られた変換係数と、補正値選択手段としての画像処理演算プロセッサ303により選択された補正値とに基づいて画像信号の変換を行う。
図36は、撮像素子120からの被写体分散画像信号より分散のない画像信号を生成するが画像処理装置300Aの構成例を示している。
そこで、本実施形態においては、ズーム情報検出装置500を設け、ズーム位置に応じて適正なコンボリューション演算を行い、ズーム位置によらず適性な焦点合わせ画像を得るように構成されている。
この構成の他にも、以下の構成を採用することが可能である。
そして、変換手段としてのコンボリューション装置301が、係数選択手段としての画像処理演算プロセッサ303で選択された変換係数によって、画像信号の変換を行う。
そして、変換手段としてのコンボリューション装置301が、変換係数演算手段としての画像処理演算プロセッサ303で得られレジスタ302に格納された変換係数によって、画像信号の変換を行う。
第2変換係数記憶手段としても機能するレジスタ302に、位相板113aに起因する収差に対応した変換係数を予め記憶する。
そして、ズーム情報生成手段としてのズーム情報検出装置500により生成されたズーム情報に基づき、補正値選択手段としての画像処理演算プロセッサ303が、補正値記憶手段としてのレジスタ302からズーム光学系のズーム位置またはズーム量に応じた補正値を選択する。
変換手段としてのコンボリューション装置301が、第2変換係数記憶手段としてのレジスタ302から得られた変換係数と、補正値選択手段としての画像処理演算プロセッサ303により選択された補正値とに基づいて画像信号の変換を行う。
この例では、物体距離情報とズーム情報で2次元的な情報を形成し、露出情報が奥行きのような情報を形成している。
また、図21、図22、および図23のカーネルデータ格納ROMに関しても、光学倍率、Fナンバやそれぞれのカーネルのサイズ、値に対して用いられるものとは限らない。また用意するカーネルデータの数についても3個とは限らない。
図31のように3次元、さらには4次元以上とすることで格納量が多くなるが、種々の条件を考慮してより適したものを選択することができるようになる。情報としては、上述した露出情報、物体距離情報、ズーム情報等であればよい。
また一方、所定の狭い範囲内に収差が生じない画像処理を施すことにより、所定の狭い範囲外の画像にぼけ味を出すことも可能になる。
また、光学系を簡単化でき、コスト低減を図ることができ、しかも適切な画質の、ノイズの影響が小さい復元画像を得ることができる利点がある。
また、難度が高く、高価でかつ大型化した光学レンズを必要とせずに、かつ、レンズを駆動させること無く、撮影したい物体に対してピントが合い、背景はぼかすといった、いわゆる自然な画像を得ることができる利点がある。
そして、本実施形態に係る撮像装置100は、デジタルカメラやカムコーダー等の民生機器の小型、軽量、コストを考慮されたDEOSの光学システムに使用することが可能である。
また、光学系110の構成を簡単化でき、製造が容易となり、コスト低減を図ることができる。
画質向上のため、可能な限りコントラストを上げることが望ましいが、そのことは高性能なレンズ系を必要とする。
現在、エリアジングの発生を避けるため、撮像レンズ装置では、一軸結晶系からなるローパスフィルタを併用し、エリアジングの現象の発生を避けている。
このようにローパスフィルタを併用することは、原理的に正しいが、ローパスフィルタそのものが結晶でできているため、高価であり、管理が大変である。また、光学系に使用することは光学系をより複雑にしているという不利益がある。
しかし、本実施形態によれば、ローパスフィルタを用いなくとも、エリアジングの現象の発生を避けることができ、高精細な画質を得ることができる。
また、図21、図22、および図23のカーネルデータ格納ROMに関しても、光学倍率、Fナンバやそれぞれのカーネルのサイズ、物体距離の値に対して用いられるものとは限らない。また用意するカーネルデータの数についても3個とは限らない。
Claims (25)
- 光学系と、
光学的伝達関数(OTF)を変調させる光波面変調素子と、
前記光学系および前記光波面変調素子を通過した被写体像を撮像する撮像素子と、
前記撮像素子からの分散画像信号より分散のない画像信号を生成する変換手段と、を有し、
前記光学系のピント位置は、
検知した前記画像信号に基づく被写体のコントラストを用いて、あらかじめ設定された被写体距離に対応するピント位置に移動させて設定され、
前記変換手段は、光学的伝達関数(OTF)に対してフィルタ処理を行いコントラストを改善する処理を施し、
前記光波面変調素子が、前記光学系の光軸をz軸とし、互いに直交する2軸をx、yとしたとき、位相が下記式で表される
撮像装置。
- 前記光波面変調素子が、物体距離に応じたOTFの変化を、光波面変調素子を持たない光学系よりも小さくする作用を持つ
請求項1記載の撮像装置。 - 前記コントラストが検知された部分は、前記位相変調素子による点像分布の強度の高い部分を含む領域である
請求項1または請求項2記載の撮像装置。 - 前記光波面変調素子を有する光学系のOTFが、前記光波面変調素子を含まない光学系の被写界深度よりも広い物体距離にわたって、前記撮像素子のナイキスト周波数まで0.1以上である
請求項1から3のいずれか一に記載の撮像装置。 - 前記画像信号に所定の演算処理を行う信号処理部を有し、
前記信号処理部は、ノイズ低減フィルタリングを施す手段を有する
請求項1から4のいずれか一に記載の撮像装置。 - 前記画像信号に所定の演算処理を行う信号処理部と、
前記信号処理部の演算係数を格納する記憶手段と、を有し、
前記記憶手段には、露出情報に応じたノイズ低減処理のための演算係数が格納される
請求項1から5のいずれか一に記載の撮像装置。 - 前記画像信号に所定の演算処理を行う信号処理部と、
前記信号処理部の演算係数を格納する記憶手段と、を有し、
前記記憶手段には、露出情報に応じた光学的伝達関数(OTF)復元のための演算係数が格納される
請求項1から5のいずれか一に記載の撮像装置。 - 前記露出情報として絞り情報を含む
請求項6または7に記載の撮像装置。 - 前記撮像装置は、
被写体までの距離に相当する情報を生成する被写体距離情報生成手段と、を備え、
前記変換手段は、前記被写体距離情報生成手段により生成される情報に基づいて前記分散画像信号より分散のない画像信号を生成する
請求項1から8のいずれか一に記載の撮像装置。 - 前記撮像装置は、
被写体距離に応じて少なくとも前記光波面変調素子または前記光学系に起因する分散に対応した変換係数を少なくとも2以上予め記憶する変換係数記憶手段と、
前記被写体距離情報生成手段により生成された情報に基づき、前記変換係数記憶手段から被写体までの距離に応じた変換係数を選択する係数選択手段と、を備え、
前記変換手段は、前記係数選択手段で選択された変換係数によって、画像信号の変換を行う
請求項9に記載の撮像装置。 - 前記撮像装置は、
前記被写体距離情報生成手段により生成された情報に基づき変換係数を演算する変換係数演算手段、を備え、
前記変換手段は、前記変換係数演算手段から得られた変換係数によって、画像信号の変換を行う
請求項9に記載の撮像装置。 - 前記撮像装置は、
前記光学系はズーム光学系を含み、
前記ズーム光学系のズーム位置またはズーム量に応じた少なくとも1以上の補正値を予め記憶する補正値記憶手段と、
少なくとも前記光波面変調素子または前記光学系に起因する分散に対応した変換係数を予め記憶する変換係数記憶手段と、
前記被写体距離情報生成手段により生成された情報に基づき、前記補正値記憶手段から被写体までの距離に応じた補正値を選択する補正値選択手段と、を備え、
前記変換手段は、前記変換係数記憶手段から得られた変換係数と、前記補正値選択手段から選択された前記補正値とによって、画像信号の変換を行う
請求項1から8のいずれか一に記載の撮像装置。 - 前記補正値記憶手段で記憶する補正値がカーネルサイズを含む
請求項12に記載の撮像装置。 - 前記撮像装置は、
被写体までの距離に相当する情報を生成する被写体距離情報生成手段と、
前記被写体距離情報生成手段により生成された情報に基づき変換係数を演算する変換係数演算手段と、を備え、
前記変換手段は、前記変換係数演算手段から得られた変換係数によって、画像信号の変換を行い分散のない画像信号を生成する
請求項1から8のいずれか一に記載の撮像装置。 - 前記変換係数演算手段は、カーネルサイズを変数として含む
請求項14に記載の撮像装置。 - 記憶手段を有し、
前記変換係数演算手段は、求めた変換係数を前記記憶手段に格納し、
前記変換手段は、前記記憶手段に格納された変換係数によって、画像信号の変換を行い分散のない画像信号を生成する
請求項14または15に記載の撮像装置。 - 前記変換手段は、前記変換係数に基づいてコンボリューション演算を行う
請求項14から16のいずれか一に記載の撮像装置。 - 光学系のピント位置を調整して撮像装置を製造するための撮像装置の製造装置であって、
光学的伝達関数(OTF)を変調させる光波面変調素子を有する光学系と、
前記光学系を通して、検知した前記画像信号に基づく被写体のコントラストを用いて、あらかじめ定められた被写体距離に対応するピント位置に移動させてピント位置の調整を行う調整装置を有し、
前記光波面変調素子が、前記光学系の光軸をz軸とし、互いに直交する2軸をx、yとしたとき、位相が下記式で表される
撮像装置の製造装置。
- 前記調整装置は、
光学系を光軸に沿って駆動する駆動系と、
前記駆動系により光学系が駆動される間の画像信号に基づく被写体のコントラストを検知する検知部と、
前記検知部で検知したコントラストを用いて、あらかじめ設定された被写体距離に対応するピント位置に移動させる制御部と、を有する
請求項18記載の撮像装置の製造装置。 - 前記光波面変調素子が、物体距離に応じたOTFの変化を、光波面変調素子を持たない光学系よりも小さくする作用を持つ
請求項18または19記載の撮像装置の製造装置。 - 前記コントラストが検知された部分は、前記位相変調素子による点像分布の強度の高い部分を含む領域である
請求項18から20のいずれか一に記載の撮像装置の製造装置。 - 光学系のピント位置を調整して撮像装置を製造するための撮像装置の製造方法であって、
光学的伝達関数(OTF)を変調させる光波面変調素子を有する光学系を配置し、
検知した画像信号に基づく被写体のコントラストを用いて、あらかじめ定められた被写体距離に対応するピント位置に移動させてピント位置の調整を行い、
前記光波面変調素子が、前記光学系の光軸をz軸とし、互いに直交する2軸をx、yとしたとき、位相が下記式で表される
撮像装置の製造方法。
- 前記光学系を光軸に沿って駆動し、
光学系が駆動される間の画像信号に基づく被写体のコントラストを検知し、
前記検知したコントラストを用いて、あらかじめ設定された被写体距離に対応するピント位置に移動させてピント調整を行う
請求項22記載の撮像装置の製造方法。 - 前記光波面変調素子が、物体距離に応じたOTFの変化を、光波面変調素子を持たない光学系よりも小さくする作用を持つ光学系のフォーカス位置の調整を行うことが可能である
請求項22または23記載の撮像装置の製造方法。 - 前記コントラストが検知された部分は、前記位相変調素子による点像分布の強度の高い部分を含む領域である
請求項22から24のいずれか一に記載の撮像装置の製造方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006186025A JP4749959B2 (ja) | 2006-07-05 | 2006-07-05 | 撮像装置、並びにその製造装置および製造方法 |
US11/773,792 US7916194B2 (en) | 2006-07-05 | 2007-07-05 | Image pickup apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006186025A JP4749959B2 (ja) | 2006-07-05 | 2006-07-05 | 撮像装置、並びにその製造装置および製造方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008017157A JP2008017157A (ja) | 2008-01-24 |
JP4749959B2 true JP4749959B2 (ja) | 2011-08-17 |
Family
ID=38918879
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006186025A Expired - Fee Related JP4749959B2 (ja) | 2006-07-05 | 2006-07-05 | 撮像装置、並びにその製造装置および製造方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7916194B2 (ja) |
JP (1) | JP4749959B2 (ja) |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4712631B2 (ja) * | 2005-07-28 | 2011-06-29 | 京セラ株式会社 | 撮像装置 |
US8350948B2 (en) * | 2005-11-29 | 2013-01-08 | Kyocera Corporation | Image device which bypasses blurring restoration during a through image |
JP2007322560A (ja) | 2006-05-30 | 2007-12-13 | Kyocera Corp | 撮像装置、並びにその製造装置および製造方法 |
JP4749959B2 (ja) | 2006-07-05 | 2011-08-17 | 京セラ株式会社 | 撮像装置、並びにその製造装置および製造方法 |
JP2008048293A (ja) | 2006-08-18 | 2008-02-28 | Kyocera Corp | 撮像装置、およびその製造方法 |
JP4749984B2 (ja) | 2006-09-25 | 2011-08-17 | 京セラ株式会社 | 撮像装置、並びにその製造装置および製造方法 |
JP4749985B2 (ja) * | 2006-09-28 | 2011-08-17 | 京セラ株式会社 | 撮像装置、並びにその製造装置および製造方法 |
WO2008081903A1 (ja) | 2006-12-27 | 2008-07-10 | Kyocera Corporation | 撮像装置および情報コード読取装置 |
US8567678B2 (en) | 2007-01-30 | 2013-10-29 | Kyocera Corporation | Imaging device, method of production of imaging device, and information code-reading device |
JP2008268869A (ja) | 2007-03-26 | 2008-11-06 | Fujifilm Corp | 撮像装置、撮像方法、及びプログラム |
WO2008117766A1 (en) * | 2007-03-26 | 2008-10-02 | Fujifilm Corporation | Image capturing apparatus, image capturing method and program |
JP2009010730A (ja) | 2007-06-28 | 2009-01-15 | Kyocera Corp | 画像処理方法と該画像処理方法を用いた撮像装置 |
JP4844979B2 (ja) * | 2007-08-30 | 2011-12-28 | 京セラ株式会社 | 画像処理方法と該画像処理方法を用いた撮像装置 |
JP4813447B2 (ja) | 2007-11-16 | 2011-11-09 | 富士フイルム株式会社 | 撮像システム、並びにこの撮像システムを備えた撮像装置、携帯端末機器、車載機器、および医療機器 |
JP2009122514A (ja) * | 2007-11-16 | 2009-06-04 | Fujinon Corp | 撮像システム、この撮像システムを備えた撮像装置、携帯端末機器、車載機器、および医療機器、並びに撮像システムの製造方法 |
JP4813446B2 (ja) * | 2007-11-16 | 2011-11-09 | 富士フイルム株式会社 | 撮像システム、この撮像システムを備えた撮像装置、携帯端末機器、車載機器、および医療機器、並びに撮像システムの製造方法 |
US8077247B2 (en) | 2007-12-07 | 2011-12-13 | Fujinon Corporation | Imaging system, imaging apparatus, portable terminal apparatus, onboard apparatus, medical apparatus and method of manufacturing the imaging system |
US8111318B2 (en) * | 2007-12-07 | 2012-02-07 | Fujinon Corporation | Imaging system, imaging apparatus, portable terminal apparatus, onboard apparatus, medical apparatus and method of manufacturing the imaging system |
JP5124835B2 (ja) * | 2008-02-05 | 2013-01-23 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、およびプログラム |
JP5076240B2 (ja) * | 2008-02-05 | 2012-11-21 | 富士フイルム株式会社 | 撮像装置、撮像方法、およびプログラム |
WO2009119838A1 (ja) * | 2008-03-27 | 2009-10-01 | 京セラ株式会社 | 光学系、撮像装置および情報コード読取装置 |
EP2265989A1 (en) * | 2008-04-03 | 2010-12-29 | Omnivision Technologies, Inc. | Imaging systems including distributed phase modification and associated methods |
JP4658162B2 (ja) | 2008-06-27 | 2011-03-23 | 京セラ株式会社 | 撮像装置および電子機器 |
US8363129B2 (en) | 2008-06-27 | 2013-01-29 | Kyocera Corporation | Imaging device with aberration control and method therefor |
JP5809387B2 (ja) * | 2008-08-28 | 2015-11-10 | 京セラ株式会社 | 撮像装置および電子機器 |
US8502877B2 (en) | 2008-08-28 | 2013-08-06 | Kyocera Corporation | Image pickup apparatus electronic device and image aberration control method |
JP4743553B2 (ja) | 2008-09-29 | 2011-08-10 | 京セラ株式会社 | レンズユニット、撮像装置、および電子機器 |
WO2010067740A1 (en) * | 2008-12-10 | 2010-06-17 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method, and data processing apparatus and data processing method |
JP4931266B2 (ja) * | 2010-08-27 | 2012-05-16 | キヤノン株式会社 | 画像処理方法、画像処理装置および画像処理プログラム |
JP5660711B2 (ja) * | 2010-09-16 | 2015-01-28 | 富士フイルム株式会社 | 復元ゲインデータ生成方法 |
KR101901602B1 (ko) * | 2011-01-14 | 2018-09-27 | 삼성전자주식회사 | 디지털 사진에서 노이즈를 제거하는 장치 및 방법 |
JP5274623B2 (ja) * | 2011-07-04 | 2013-08-28 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理プログラム、および画像処理方法 |
JP5264968B2 (ja) * | 2011-08-08 | 2013-08-14 | キヤノン株式会社 | 画像処理装置、画像処理方法、撮像装置、および、画像処理プログラム |
JP5414752B2 (ja) | 2011-08-08 | 2014-02-12 | キヤノン株式会社 | 画像処理方法、画像処理装置、撮像装置、および、画像処理プログラム |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3739089A (en) | 1970-11-30 | 1973-06-12 | Conco Inc | Apparatus for and method of locating leaks in a pipe |
US5724743A (en) | 1992-09-04 | 1998-03-10 | Snap-On Technologies, Inc. | Method and apparatus for determining the alignment of motor vehicle wheels |
JPH08161250A (ja) * | 1994-12-06 | 1996-06-21 | Canon Inc | 情報処理装置 |
US20020118457A1 (en) * | 2000-12-22 | 2002-08-29 | Dowski Edward Raymond | Wavefront coded imaging systems |
JP3275010B2 (ja) * | 1995-02-03 | 2002-04-15 | ザ・リジェンツ・オブ・ザ・ユニバーシティ・オブ・コロラド | 拡大された被写界深度を有する光学システム |
US5664243A (en) | 1995-06-08 | 1997-09-02 | Minolta Co., Ltd. | Camera |
US6021005A (en) | 1998-01-09 | 2000-02-01 | University Technology Corporation | Anti-aliasing apparatus and methods for optical imaging |
JP2000005127A (ja) * | 1998-01-23 | 2000-01-11 | Olympus Optical Co Ltd | 内視鏡システム |
US6069738A (en) | 1998-05-27 | 2000-05-30 | University Technology Corporation | Apparatus and methods for extending depth of field in image projection systems |
US6233060B1 (en) * | 1998-09-23 | 2001-05-15 | Seiko Epson Corporation | Reduction of moiré in screened images using hierarchical edge detection and adaptive-length averaging filters |
JP2001208974A (ja) * | 2000-01-24 | 2001-08-03 | Nikon Corp | 共焦点型顕微鏡及び一括照明型顕微鏡 |
US6642504B2 (en) | 2001-03-21 | 2003-11-04 | The Regents Of The University Of Colorado | High speed confocal microscope |
US6525302B2 (en) | 2001-06-06 | 2003-02-25 | The Regents Of The University Of Colorado | Wavefront coding phase contrast imaging systems |
US7006252B2 (en) * | 2001-10-17 | 2006-02-28 | Eastman Kodak Company | Image processing system and method that maintains black level |
JP3791777B2 (ja) | 2001-12-28 | 2006-06-28 | オリンパス株式会社 | 電子内視鏡 |
US20030158503A1 (en) | 2002-01-18 | 2003-08-21 | Shinya Matsumoto | Capsule endoscope and observation system that uses it |
DE10202163A1 (de) * | 2002-01-22 | 2003-07-31 | Bosch Gmbh Robert | Verfahren und Vorrichtung zur Bildverarbeitung sowie Nachtsichtsystem für Kraftfahrzeuge |
JP3958603B2 (ja) * | 2002-02-21 | 2007-08-15 | オリンパス株式会社 | 電子内視鏡システム及び電子内視鏡システム用の信号処理装置 |
JP4109001B2 (ja) * | 2002-03-27 | 2008-06-25 | 富士通株式会社 | 画質補正方法 |
US7271838B2 (en) * | 2002-05-08 | 2007-09-18 | Olympus Corporation | Image pickup apparatus with brightness distribution chart display capability |
US7158660B2 (en) | 2002-05-08 | 2007-01-02 | Gee Jr James W | Method and apparatus for detecting structures of interest |
JP4122865B2 (ja) | 2002-07-02 | 2008-07-23 | コニカミノルタオプト株式会社 | オートフォーカス装置 |
JP2004153497A (ja) | 2002-10-30 | 2004-05-27 | Kyocera Corp | ディジタルカメラの自動露出制御システム |
JP4565192B2 (ja) | 2003-03-31 | 2010-10-20 | オムニビジョン テクノロジーズ, インコーポレイテッド | 画像システムにおける収差を生じる影響を最小化するための、システムおよび方法 |
JP2004328506A (ja) * | 2003-04-25 | 2004-11-18 | Sony Corp | 撮像装置および画像復元方法 |
US7596286B2 (en) * | 2003-08-06 | 2009-09-29 | Sony Corporation | Image processing apparatus, image processing system, imaging apparatus and image processing method |
JP4383841B2 (ja) | 2003-12-12 | 2009-12-16 | キヤノン株式会社 | 交換レンズ |
US7663668B2 (en) * | 2004-04-05 | 2010-02-16 | Mitsubishi Electric Corporation | Imaging device |
US7245133B2 (en) * | 2004-07-13 | 2007-07-17 | Credence Systems Corporation | Integration of photon emission microscope and focused ion beam |
WO2006022373A1 (ja) * | 2004-08-26 | 2006-03-02 | Kyocera Corporation | 撮像装置および撮像方法 |
JP4778755B2 (ja) * | 2005-09-09 | 2011-09-21 | 株式会社日立ハイテクノロジーズ | 欠陥検査方法及びこれを用いた装置 |
JP4961182B2 (ja) * | 2005-10-18 | 2012-06-27 | 株式会社リコー | ノイズ除去装置、ノイズ除去方法、ノイズ除去プログラム及び記録媒体 |
JP4469324B2 (ja) * | 2005-11-01 | 2010-05-26 | イーストマン コダック カンパニー | 色収差抑圧回路及び色収差抑圧プログラム |
JP2007322560A (ja) * | 2006-05-30 | 2007-12-13 | Kyocera Corp | 撮像装置、並びにその製造装置および製造方法 |
JP4749959B2 (ja) | 2006-07-05 | 2011-08-17 | 京セラ株式会社 | 撮像装置、並びにその製造装置および製造方法 |
JP5089940B2 (ja) * | 2006-08-29 | 2012-12-05 | 株式会社トプコン | 眼球運動測定装置、眼球運動測定方法及び眼球運動測定プログラム |
JP4749984B2 (ja) * | 2006-09-25 | 2011-08-17 | 京セラ株式会社 | 撮像装置、並びにその製造装置および製造方法 |
US8249695B2 (en) * | 2006-09-29 | 2012-08-21 | Tearscience, Inc. | Meibomian gland imaging |
-
2006
- 2006-07-05 JP JP2006186025A patent/JP4749959B2/ja not_active Expired - Fee Related
-
2007
- 2007-07-05 US US11/773,792 patent/US7916194B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20080007797A1 (en) | 2008-01-10 |
US7916194B2 (en) | 2011-03-29 |
JP2008017157A (ja) | 2008-01-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4749959B2 (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP4749984B2 (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP4749985B2 (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP4712631B2 (ja) | 撮像装置 | |
JP4663737B2 (ja) | 撮像装置およびその画像処理方法 | |
JP2007322560A (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP2008048293A (ja) | 撮像装置、およびその製造方法 | |
JP4818957B2 (ja) | 撮像装置およびその方法 | |
JP2008268937A (ja) | 撮像装置および撮像方法 | |
US8462213B2 (en) | Optical system, image pickup apparatus and information code reading device | |
JP2007300208A (ja) | 撮像装置 | |
JP2008245266A (ja) | 撮像装置および撮像方法 | |
WO2006106737A1 (ja) | 撮像装置および撮像方法 | |
JP2009086017A (ja) | 撮像装置および撮像方法 | |
JP4818956B2 (ja) | 撮像装置およびその方法 | |
JP2008245265A (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP5197784B2 (ja) | 撮像装置 | |
JP2009033607A (ja) | 撮像装置および画像処理方法 | |
JP4722748B2 (ja) | 撮像装置およびその画像生成方法 | |
JP2008109230A (ja) | 撮像装置および画像処理方法 | |
JP2008058540A (ja) | 撮像装置、および画像処理方法 | |
JP4948967B2 (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP2009008935A (ja) | 撮像装置 | |
JP2008136145A (ja) | 撮像装置、並びにその製造装置および製造方法 | |
JP2009010783A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090316 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110325 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4749959 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140527 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |