JP5379241B2 - 光学画像装置、光学画像処理装置および光学画像形成方法 - Google Patents
光学画像装置、光学画像処理装置および光学画像形成方法 Download PDFInfo
- Publication number
- JP5379241B2 JP5379241B2 JP2011543783A JP2011543783A JP5379241B2 JP 5379241 B2 JP5379241 B2 JP 5379241B2 JP 2011543783 A JP2011543783 A JP 2011543783A JP 2011543783 A JP2011543783 A JP 2011543783A JP 5379241 B2 JP5379241 B2 JP 5379241B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image detector
- optical path
- optical
- micro
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 352
- 238000012545 processing Methods 0.000 title claims abstract description 62
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000012634 optical imaging Methods 0.000 claims abstract description 65
- 239000011159 matrix material Substances 0.000 claims description 108
- 238000000605 extraction Methods 0.000 claims description 68
- 238000003384 imaging method Methods 0.000 claims description 33
- 230000003595 spectral effect Effects 0.000 claims description 32
- 238000012546 transfer Methods 0.000 claims description 26
- 238000012937 correction Methods 0.000 claims description 21
- 125000006850 spacer group Chemical group 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 10
- 230000015572 biosynthetic process Effects 0.000 claims description 8
- 238000006243 chemical reaction Methods 0.000 claims description 8
- 238000009826 distribution Methods 0.000 claims description 7
- 238000000926 separation method Methods 0.000 claims description 5
- 239000012780 transparent material Substances 0.000 claims description 3
- 230000001131 transforming effect Effects 0.000 claims 2
- 239000003086 colorant Substances 0.000 claims 1
- 239000010410 layer Substances 0.000 description 65
- 230000005693 optoelectronics Effects 0.000 description 55
- 239000000758 substrate Substances 0.000 description 46
- 238000004519 manufacturing process Methods 0.000 description 33
- 230000008901 benefit Effects 0.000 description 21
- 235000012431 wafers Nutrition 0.000 description 20
- 238000005516 engineering process Methods 0.000 description 16
- 230000036961 partial effect Effects 0.000 description 16
- 239000000463 material Substances 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 230000002829 reductive effect Effects 0.000 description 11
- 230000007704 transition Effects 0.000 description 11
- 239000011521 glass Substances 0.000 description 10
- 229920003023 plastic Polymers 0.000 description 10
- 239000004033 plastic Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 238000002844 melting Methods 0.000 description 7
- 230000008018 melting Effects 0.000 description 7
- 230000009467 reduction Effects 0.000 description 7
- 150000001875 compounds Chemical class 0.000 description 6
- 238000010276 construction Methods 0.000 description 6
- 238000007781 pre-processing Methods 0.000 description 5
- 230000010076 replication Effects 0.000 description 5
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 4
- 239000011358 absorbing material Substances 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 206010010071 Coma Diseases 0.000 description 3
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 3
- 201000009310 astigmatism Diseases 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 239000011248 coating agent Substances 0.000 description 3
- 238000000576 coating method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000004907 flux Effects 0.000 description 3
- 238000001746 injection moulding Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 229910052710 silicon Inorganic materials 0.000 description 3
- 239000010703 silicon Substances 0.000 description 3
- 239000000243 solution Substances 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 229920001577 copolymer Polymers 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 230000005684 electric field Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000010147 laser engraving Methods 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 229910052757 nitrogen Inorganic materials 0.000 description 2
- 229920000620 organic polymer Polymers 0.000 description 2
- 238000012536 packaging technology Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 229920001690 polydopamine Polymers 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 239000006117 anti-reflective coating Substances 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 210000001507 arthropod compound eye Anatomy 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000004090 dissolution Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000004377 microelectronic Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 238000000059 patterning Methods 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000006120 scratch resistant coating Substances 0.000 description 1
- 238000006748 scratching Methods 0.000 description 1
- 230000002393 scratching effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 238000005476 soldering Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0025—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B3/00—Simple or compound lenses
- G02B3/0006—Arrays
- G02B3/0037—Arrays characterized by the distribution or form of lenses
- G02B3/0056—Arrays characterized by the distribution or form of lenses arranged along two different directions in a plane, e.g. honeycomb arrangement of lenses
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
- Solid State Image Pick-Up Elements (AREA)
Description
Claims (21)
- 少なくとも2つのマイクロレンズを有する少なくとも1つのマイクロレンズ・フィールド(10)と、
少なくとも2つの画像検出器マトリクス(30)を有する画像センサ(100)と、を備え、
前記少なくとも2つの画像検出器マトリクス(30)は、それぞれ、複数の画像検出器を含み、
前記画像検出器は前記画像センサ(100)の1画素に対応し、
前記画像検出器マトリクス(30)と前記マイクロレンズ・フィールド(10)との間の配置が存在し、その結果、それぞれの前記マイクロレンズは、前記画像検出器マトリクス(30)と共に光路を形成し、
異なる画像検出器マトリクス(30)の中心点は、前記画像検出器マトリクス(30)上に映し出された、関連した光路のマイクロレンズ窓(13a,13b)の図心に関して、異なる距離だけ横方向に移行され、その結果、少なくとも2つの前記光路は、部分的に重復している異なる検出領域を含み、かつ、前記2つの光路のうちの第1光路の抽出ギャップが、前記2つの光路のうちの少なくとも第2光路によって検出されるように、2つの光路の前記検出領域の重複部分は、前記画像検出器マトリクス(30)の画像検出器ラスタに関してオフセットされた前記画像検出器マトリクス(30)上に作像されること、
を特徴とする、光学画像装置(1000,1200,1300,1400,1500)。 - 前記重複部分は複数の対象物セルを含み、それぞれの対象物セルは前記画像センサ(100)の少なくとも1つの画像検出器上に作像され、
抽出格子はそれぞれの光路に関連し、
前記第1光路の抽出格子(810)は、前記重複部分のどの対象物セルが、前記第1光路の画像検出器マトリクス(30a)のどの画像検出器上に作像されるべきかを説明し、
前記第2光路の抽出格子(820)は、前記重複部分のどの対象物セルが、前記第2光路の画像検出器マトリクス(30b)のどの画像検出器上に作像されるべきかを説明し、
前記第1光路の抽出格子(810)は、第1対象物セルが、前記第1光路の画像検出器マトリクス(30a)の第1画像検出器上に作像されるように、かつ、前記第1対象物セルに隣接する第2対象物セルが、前記第1光路の画像検出器マトリクス(30a)の第1画像検出器と、前記第1光路の画像検出器マトリクス(30a)の、前記第1画像検出器に隣接する第2画像検出器と、の間のギャップ上に作像されるように、選択され、
前記第2光路の抽出格子(820)は、前記第2対象物セルが、前記第2光路の画像検出器マトリクス(30b)の第1画像検出器上に作像されるように、かつ、前記第1対象物セルが、前記第2光路の画像検出器マトリクス(30b)の前記第1画像検出器と、前記第2光路の画像検出器マトリクス(30b)の、前記第1画像検出器に隣接する第2画像検出器と、の間のギャップ上に作像されるように、選択されること、
を特徴とする、請求項1に記載の光学画像装置。 - 前記第1光路の抽出格子(810)は、前記第2光路の抽出格子(820)に関して、抽出間隔の非整数倍で移行され、
その結果、前記第2対象物セルに隣接する第3対象物セルは、前記第1光路の画像検出器マトリクス(30a)の前記第2画像検出器上に作像され、
前記抽出間隔は、前記第1対象物セルの中心点から前記第3対象物セルの中心点までの距離と等しいこと、
を特徴とする、請求項2に記載の光学画像装置。 - それぞれの前記検出領域のマイクロ画像を、それぞれの前記光路の中に発生させるように設けられ、
前記マイクロ画像は複数の画素を含み、前記画素は画像検出器上の対象物セルの画像形成によって形成され、
前記第1光路のマイクロ画像は、前記第2光路のマイクロ画像で挟み込まれ、その結果、前記第1光路と前記第2光路との前記重複部分の隣接する対象物セルが、直線に沿って、異なるマイクロ画像に交互に関連付けられること、
を特徴とする、請求項1〜請求項3のいずれかに記載の光学画像装置。 - 前記画像センサ(100)は、前記マイクロレンズ・フィールド(10)の前記マイクロレンズの焦点面に配置され、
スペーサー層が、前記画像センサ(100)と前記マイクロレンズ・フィールド(10)との間に配置され、
前記スペーサー層は、複数の光路を分離する構造を含み、前記構造は、隣接する光路間の光学クロストークを抑制するように設けられ、
前記スペーサー層は、少なくとも1つの窓フィールド(11)を含み、前記窓フィールド(11)は、前記マイクロレンズ間のギャップを通過する散乱光を抑制するように設けられていること、
を特徴とする、請求項1〜請求項4のいずれかに記載の光学画像装置。 - 複数の光路が異なるスペクトル伝達フィルタを含み、その結果、1つの関連したマイクロ画像が、それぞれの前記光路の中に生じ、異なる光路のマイクロ画像が、異なるスペクトル色に関連し、
前記光路は、色クロストークを抑制するための光路分離構造によって分離され、
隣接する光路は異なるスペクトル伝達フィルタを含み、前記隣接する光路の前記マイクロ画像は、前記光路の重複部分の隣接する対象物セルが、直線に沿って、異なるスペクトルマイクロ画像に交互に関連付けられるように挟み込まれていること、
を特徴とする、請求項1〜請求項5のいずれかに記載の光学画像装置。 - 装置と検出されるべき対象物(800)との間の距離を測定するためのセンサを含み、
第2光路の画像検出器マトリクス(30b)の第1画像検出器上への、第1対象物セルに隣接した第2対象物セルの画像形成に関して、第1光路の画像検出器マトリクス(30a)の第1画像検出器上への、第1対象物セルの画像形成のオフセットを修正し、前記修正の中で、前記第1光路の画像検出器マトリクス(30a)から前記第2光路の画像検出器マトリクス(30b)までの横方向の距離を考慮するように設けられていること、
を特徴とする、請求項1〜請求項6のいずれかに記載の光学画像装置。 - 異なるマイクロレンズは、マイクロレンズの構造パラメータの少なくとも1つに関して異なり、前記マイクロレンズは、全て、同じ焦点面に作像するように形成されていること、を特徴とする、請求項1〜請求項7のいずれかに記載の光学画像装置。
- 少なくとも1つのマイクロレンズが色消しレンズとして設けられていること、を特徴とする、請求項1〜請求項8のいずれかに記載の光学画像装置。
- 前記マイクロレンズ・フィールド(10)、および/または、透明材と空気の間のインタフェースが、反射防止層を含むこと、を特徴とする、請求項1〜請求項9のいずれかに記載の光学画像装置。
- 前記マイクロレンズ・フィールド(10)および前記画像検出器マトリクス(30)は、六角形の分布、正方形の分布もしくは長方形の分布で配置されていること、を特徴とする、請求項1〜請求項10のいずれかに記載の光学画像装置。
- マイクロレンズ・フィールド(10)は、屈折自由形式表面のフィールドとして設けられ、前記屈折自由形式表面は、より大きい2円錐形マイクロレンズの区域によって説明されること、を特徴とする、請求項1〜請求項11のいずれかに記載の光学画像装置。
- 複数の画素を有するマイクロ画像が、それぞれの光路の中に生じるように設けられ、
前記マイクロ画像の歪みを修正して、前記光路のマイクロ画像から全体画像(300)を再構成するための画像処理手段(70)を含み、
前記画像処理手段(70)は、それぞれのマイクロ画像ごとに別々に、かつ、時間的に並行して、歪みの修正を実行するように設けられ、
前記画像処理手段(70)は、前記挟み込まれたマイクロ画像の画素を交互に配置することによって、前記全体画像(300)の再構成を実行し、その結果、前記全体画像(300)を得るように設けられていること、
を特徴とする、請求項4〜請求項12のいずれかに記載の光学画像装置。 - 前記画像処理手段(70)は、前記画像センサ(100)を有するチップ上に設けられ、
前記画像処理手段(70)は、前記画像センサ(100)の前記画像検出器マトリクス(30)の画像検出器マトリクスギャップの中に配置された、複数の歪み修正用マイクロ画像処理手段(50)を含むこと、
を特徴とする、請求項13記載の光学画像装置。 - 少なくとも2つのマイクロレンズを有するマイクロレンズ・フィールド(10)と画像センサ(100)とを使用する光学画像形成方法であって、
前記画像センサ(100)は複数の画像検出器マトリクス(30)を含み、前記複数の画像検出器マトリクス(30)のそれぞれは複数の画像検出器を含み、前記画像検出器マトリクス(30)は前記マイクロレンズのそれぞれに関連し、その結果、それぞれの前記マイクロレンズは、関連した前記画像検出器マトリクス(30)と供に光路を形成し、
(a)それぞれの対象物セルが画像検出器上に作像されるように、前記マイクロレンズ・フィールド(10)を通して対象物を前記画像センサ(100)上に作像するステップを備え、
隣接する対象物セルは、隣接する光路の画像検出器上に作像され、その結果、マイクロ画像は、前記光路の画像検出器マトリクス上に形成され、それぞれのマイクロ画像は、隣接する光路のマイクロ画像で挟み込まれており、そして、光路の抽出ギャップは、少なくとも他方の光路によって検出されること、
を特徴とする、光学画像形成方法。 - (b)前記光路のそれぞれのマイクロ画像の水平および垂直鏡像化するステップと、
(c)異なる光路の前記マイクロ画像の画素値を、連続した座標面上に位置変換することによって、離散的格子構造から変換するステップと、
(d)前記連続した座標面からの前記画素値を、新しい離散的格子上に作像して、歪みのないマイクロ画像を得るステップと、
(e)前記歪みのないマイクロ画像の前記画素値を、前記マイクロ画像の挟み込みによって与えられた特定の体系に従って、画像マトリクスの中に再分類して、挟み込みのない全体画像を得るステップと、を更に備え、
前記(b)のステップにおいて、全てのマイクロ画像の前記水平および垂直鏡像化は時間的に並行して実行され、
前記(c)のステップにおいて、異なる光路のマイクロ画像の画像歪みの修正が実行され、
前記(d)のステップにおいて、異なる光路は時間的に並行して処理されること、
を特徴とする、請求項15に記載の光学画像形成方法。 - 位置変換による、離散的格子構造からの、異なる光路のマイクロ画像の画素値の変換は、連続した座標面上で、時間的に並行して実行されること、を特徴とする、請求項16に記載の光学画像形成方法。
- プログラムがコンピュータで実行されるとき、請求項15の方法を実行するためのプログラム・コードを有すること、を特徴とするコンピュータ・プログラム。
- 少なくとも2つのマイクロレンズを有する少なくとも1つのマイクロレンズ・フィールド(10)と、
少なくとも2つの画像検出器マトリクス(30)を有する画像センサ(100)と、を備え、
前記少なくとも2つの画像検出器マトリクス(30)は、それぞれ複数の画像検出器を含み、
1つの前記画像検出器は、前記画像センサ(100)の1つの画素に対応し、
前記画像検出器マトリクス(30)と前記マイクロレンズ・フィールド(10)との間の配置が存在し、その結果、それぞれの前記マイクロレンズは、前記画像検出器マトリクス(30)と共に光路を形成し、
異なる画像検出器マトリクス(30)の中心点は、前記画像検出器マトリクス(30)上に映し出された、関連した光路のマイクロレンズ窓(13a,13b)の図心に関して、異なる距離だけ横方向に移行され、その結果、少なくとも2つの前記光路は、部分的に重復している異なる検出領域を含み、かつ、2つの光路の前記検出領域の重複部分は、前記画像検出器マトリクス(30)の画像検出器ラスタに関してオフセットされた前記画像検出器マトリクス(30)上に作像され、
前記重複部分は複数の対象物セルを含み、それぞれの対象物セルは前記画像センサ(100)の少なくとも1つの画像検出器上に作像され、
抽出格子はそれぞれの光路に関連し、
第1光路の抽出格子(810)は、前記重複部分のどの対象物セルが、前記第1光路の画像検出器マトリクス(30a)のどの画像検出器上に作像されるべきかを説明し、
第2光路の抽出格子(820)は、前記重複部分のどの対象物セルが、前記第2光路の画像検出器マトリクス(30b)のどの画像検出器上に作像されるべきかを説明し、
前記第1光路の抽出格子(810)は、第1対象物セルが、前記第1光路の画像検出器マトリクス(30a)の第1画像検出器上に作像されるように、かつ、前記第1対象物セルに隣接する第2対象物セルが、前記第1光路の画像検出器マトリクス(30a)の第1画像検出器と、前記第1光路の画像検出器マトリクス(30a)の、前記第1画像検出器に隣接する第2画像検出器と、の間のギャップ上に作像されるように、選択され、
前記第2光路の抽出格子(820)は、前記第2対象物セルが、前記第2光路の画像検出器マトリクス(30b)の第1画像検出器上に作像されるように、かつ、前記第1対象物セルが、前記第2光路の画像検出器マトリクス(30b)の前記第1画像検出器と、前記第2光路の画像検出器マトリクス(30b)の、前記第1画像検出器に隣接する第2画像検出器と、の間のギャップ上に作像されるように、選択されること、
を特徴とする、光学画像装置(1000,1200,1300,1400,1500)。 - 少なくとも2つのマイクロレンズを有する少なくとも1つのマイクロレンズ・フィールド(10)と、
少なくとも2つの画像検出器マトリクス(30)を有する画像センサ(100)と、を備え、
前記少なくとも2つの画像検出器マトリクス(30)は、それぞれ複数の画像検出器を含み、
1つの前記画像検出器は、前記画像センサ(100)の1つの画素に対応し、
前記画像検出器マトリクス(30)と前記マイクロレンズ・フィールド(10)との間の配置が存在し、その結果、それぞれの前記マイクロレンズは、前記画像検出器マトリクス(30)と共に光路を形成し、
異なる画像検出器マトリクス(30)の中心点は、前記画像検出器マトリクス(30)上に映し出された、関連した光路のマイクロレンズ窓(13a,13b)の図心に関して、異なる距離だけ横方向に移行され、その結果、少なくとも2つの前記光路は、部分的に重復している異なる検出領域を含み、かつ、2つの光路の前記検出領域の重複部分は、前記画像検出器マトリクス(30)の画像検出器ラスタに関してオフセットされた前記画像検出器マトリクス(30)上に作像され、
装置と検出されるべき対象物(800)との間の距離を測定するためのセンサを含み、
第2光路の画像検出器マトリクス(30b)の第1画像検出器上への、第1対象物セルに隣接した第2対象物セルの画像形成に関して、第1光路の画像検出器マトリクス(30a)の第1画像検出器上への、第1対象物セルの画像形成のオフセットを修正するように構成され、かつ、前記修正の中で、前記第1光路の画像検出器マトリクス(30a)から前記第2光路の画像検出器マトリクス(30b)までの横方向の距離を考慮するように設けられていること、
を特徴とする、光学画像装置(1000,1200,1300,1400,1500)。 - 少なくとも2つのマイクロレンズを有するマイクロレンズ・フィールド(10)と画像センサ(100)とを使用する光学画像形成方法であって、
前記画像センサ(100)は複数の画像検出器マトリクス(30)を含み、前記複数の画像検出器マトリクス(30)のそれぞれは複数の画像検出器を含み、前記画像検出器マトリクス(30)は前記マイクロレンズのそれぞれに関連し、その結果、それぞれの前記マイクロレンズは、関連した前記画像検出器マトリクス(30)と供に光路を形成し、
(a)それぞれの対象物セルが画像検出器上に作像されるように、前記マイクロレンズ・フィールド(10)を通して対象物を前記画像センサ(100)上に作像するステップと、
(b)前記光路のそれぞれのマイクロ画像の水平および垂直鏡像化をするステップと、
(c)異なる光路の前記マイクロ画像の画素値を、連続した座標面上に位置変換することによって、離散的格子構造から変換するステップと、
(d)前記連続した座標面からの前記画素値を、新しい離散的格子上に作像して、歪みのないマイクロ画像を得るステップと、
(e)前記歪みのないマイクロ画像の前記画素値を、前記マイクロ画像の挟み込みによって与えられた特定の体系に従って、画像マトリクスの中に再分類して、挟み込みのない全体画像を得るステップと、を備え、
前記(a)のステップにおいて、隣接する対象物セルは、隣接する光路の画像検出器上に作像され、その結果、マイクロ画像は、前記光路の画像検出器マトリクス上に形成され、それぞれのマイクロ画像は、隣接する前記光路のマイクロ画像で光路で挟まれ、
前記(b)のステップにおいて、全てのマイクロ画像の前記水平および垂直鏡像化は時間的に並行して実行され、
前記(c)のステップにおいて、異なる光路のマイクロ画像の画像歪みの修正が実行され、
前記(d)のステップにおいて、異なる光路は時間的に並行して処理されること、
を特徴とする、光学画像形成方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102009049387.5 | 2009-10-14 | ||
DE102009049387.5A DE102009049387B4 (de) | 2009-10-14 | 2009-10-14 | Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung |
PCT/EP2010/065290 WO2011045324A2 (de) | 2009-10-14 | 2010-10-12 | Vorrichtung, bildverarbeitungsvorrichtung und verfahren zur optischen abbildung |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013017198A Division JP5589107B2 (ja) | 2009-10-14 | 2013-01-31 | 光学画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012507250A JP2012507250A (ja) | 2012-03-22 |
JP5379241B2 true JP5379241B2 (ja) | 2013-12-25 |
Family
ID=43126993
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011543783A Active JP5379241B2 (ja) | 2009-10-14 | 2010-10-12 | 光学画像装置、光学画像処理装置および光学画像形成方法 |
JP2013017198A Active JP5589107B2 (ja) | 2009-10-14 | 2013-01-31 | 光学画像処理装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013017198A Active JP5589107B2 (ja) | 2009-10-14 | 2013-01-31 | 光学画像処理装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US8629930B2 (ja) |
EP (3) | EP2429176B1 (ja) |
JP (2) | JP5379241B2 (ja) |
KR (1) | KR101284414B1 (ja) |
DE (1) | DE102009049387B4 (ja) |
ES (3) | ES2685583T3 (ja) |
WO (1) | WO2011045324A2 (ja) |
Families Citing this family (178)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10298834B2 (en) | 2006-12-01 | 2019-05-21 | Google Llc | Video refocusing |
KR101733443B1 (ko) | 2008-05-20 | 2017-05-10 | 펠리칸 이매징 코포레이션 | 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리 |
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
GB0912970D0 (en) * | 2009-07-27 | 2009-09-02 | St Microelectronics Res & Dev | Improvements in or relating to a sensor and sensor system for a camera |
EP2502115A4 (en) | 2009-11-20 | 2013-11-06 | Pelican Imaging Corp | RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER |
US20120012748A1 (en) | 2010-05-12 | 2012-01-19 | Pelican Imaging Corporation | Architectures for imager arrays and array cameras |
DE102010031535A1 (de) * | 2010-07-19 | 2012-01-19 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Bildaufnahmevorrichtung und Verfahren zum Aufnehmen eines Bildes |
US8878950B2 (en) | 2010-12-14 | 2014-11-04 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using super-resolution processes |
JP5785398B2 (ja) | 2011-02-17 | 2015-09-30 | キヤノン株式会社 | 撮像装置及び画像信号処理装置 |
JP5330439B2 (ja) * | 2011-03-18 | 2013-10-30 | 株式会社東芝 | カメラモジュール、画像処理装置及び画像処理方法 |
JP5224489B2 (ja) * | 2011-04-22 | 2013-07-03 | グラパックジャパン株式会社 | 画像表示シート及び画像表示体 |
KR101973822B1 (ko) | 2011-05-11 | 2019-04-29 | 포토네이션 케이맨 리미티드 | 어레이 카메라 이미지 데이터를 송신 및 수신하기 위한 시스템들 및 방법들 |
US20130070060A1 (en) | 2011-09-19 | 2013-03-21 | Pelican Imaging Corporation | Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion |
EP2761534B1 (en) | 2011-09-28 | 2020-11-18 | FotoNation Limited | Systems for encoding light field image files |
JP2013109011A (ja) * | 2011-11-17 | 2013-06-06 | Toshiba Corp | カメラモジュール |
US20130135515A1 (en) * | 2011-11-30 | 2013-05-30 | Sony Corporation | Digital imaging system |
US20130169606A1 (en) * | 2011-12-30 | 2013-07-04 | Qualcomm Mems Technologies, Inc. | Light direction distribution sensor |
EP2817955B1 (en) | 2012-02-21 | 2018-04-11 | FotoNation Cayman Limited | Systems and methods for the manipulation of captured light field image data |
US9599508B2 (en) | 2012-05-18 | 2017-03-21 | Rebellion Photonics, Inc. | Divided-aperture infra-red spectral imaging system |
EP2850403B1 (en) | 2012-05-18 | 2021-10-27 | Rebellion Photonics, Inc. | Divided-aperture infra-red spectral imaging system for chemical detection |
US9858649B2 (en) | 2015-09-30 | 2018-01-02 | Lytro, Inc. | Depth-based image blurring |
JP2015534734A (ja) | 2012-06-28 | 2015-12-03 | ペリカン イメージング コーポレイション | 欠陥のあるカメラアレイ、光学アレイ、およびセンサを検出するためのシステムおよび方法 |
US20140002674A1 (en) | 2012-06-30 | 2014-01-02 | Pelican Imaging Corporation | Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors |
US20140003777A1 (en) * | 2012-07-02 | 2014-01-02 | Commscope, Inc. Of North Carolina | Light focusing structures for fiber optic communications systems and methods of fabricating the same using semiconductor processing and micro-machining techniques |
EP3869797B1 (en) | 2012-08-21 | 2023-07-19 | Adeia Imaging LLC | Method for depth detection in images captured using array cameras |
US20140055632A1 (en) | 2012-08-23 | 2014-02-27 | Pelican Imaging Corporation | Feature based high resolution motion estimation from low resolution images captured using an array source |
EP2901671A4 (en) | 2012-09-28 | 2016-08-24 | Pelican Imaging Corp | CREATING IMAGES FROM LIGHT FIELDS USING VIRTUAL POINTS OF VIEW |
DE102012218835B4 (de) * | 2012-10-12 | 2016-09-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Bildsensor und verfahren |
US9143711B2 (en) | 2012-11-13 | 2015-09-22 | Pelican Imaging Corporation | Systems and methods for array camera focal plane control |
US20140158862A1 (en) * | 2012-12-11 | 2014-06-12 | Ying Wen Hsu | Micro-Image Acquisition and Transmission System |
TWI502212B (zh) * | 2013-01-11 | 2015-10-01 | Pixart Imaging Inc | 光學裝置、使用微透鏡之感光元件及其製作方法 |
JPWO2014119737A1 (ja) * | 2013-02-01 | 2017-01-26 | コニカミノルタ株式会社 | 複眼光学系、撮像装置、及び複眼光学系の製造方法 |
US9462164B2 (en) | 2013-02-21 | 2016-10-04 | Pelican Imaging Corporation | Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information |
US9374512B2 (en) | 2013-02-24 | 2016-06-21 | Pelican Imaging Corporation | Thin form factor computational array cameras and modular array cameras |
US9774789B2 (en) | 2013-03-08 | 2017-09-26 | Fotonation Cayman Limited | Systems and methods for high dynamic range imaging using array cameras |
US8866912B2 (en) | 2013-03-10 | 2014-10-21 | Pelican Imaging Corporation | System and methods for calibration of an array camera using a single captured image |
WO2014164550A2 (en) | 2013-03-13 | 2014-10-09 | Pelican Imaging Corporation | System and methods for calibration of an array camera |
US9888194B2 (en) | 2013-03-13 | 2018-02-06 | Fotonation Cayman Limited | Array camera architecture implementing quantum film image sensors |
US9519972B2 (en) | 2013-03-13 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies |
WO2014153098A1 (en) | 2013-03-14 | 2014-09-25 | Pelican Imaging Corporation | Photmetric normalization in array cameras |
WO2014159779A1 (en) | 2013-03-14 | 2014-10-02 | Pelican Imaging Corporation | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US9438888B2 (en) | 2013-03-15 | 2016-09-06 | Pelican Imaging Corporation | Systems and methods for stereo imaging with camera arrays |
US9445003B1 (en) | 2013-03-15 | 2016-09-13 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
US9497429B2 (en) | 2013-03-15 | 2016-11-15 | Pelican Imaging Corporation | Extended color processing on pelican array cameras |
US10122993B2 (en) | 2013-03-15 | 2018-11-06 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
US10334151B2 (en) | 2013-04-22 | 2019-06-25 | Google Llc | Phase detection autofocus using subaperture images |
DE102013209246B4 (de) * | 2013-05-17 | 2019-07-18 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren zur Herstellung einer falschlichtunterdrückenden Struktur und Vorrichtung mit derselben |
WO2014188018A1 (es) | 2013-05-21 | 2014-11-27 | BLASCO WHYTE, Isabel Lena | Integración monolítica de lentes plenópticas sobre sustratos fotosensores |
JP5791664B2 (ja) * | 2013-06-28 | 2015-10-07 | キヤノン株式会社 | 光学素子アレイ、及び固体撮像装置 |
KR102103983B1 (ko) * | 2013-07-31 | 2020-04-23 | 삼성전자주식회사 | 시프트된 마이크로 렌즈 어레이를 구비하는 라이트 필드 영상 획득 장치 |
US9202833B2 (en) | 2013-08-23 | 2015-12-01 | Semiconductor Components Industries, Llc | Imaging systems with baffle grids |
KR102114248B1 (ko) * | 2013-09-13 | 2020-05-22 | 삼성전자 주식회사 | 깊이 정보 기반 광학 왜곡 보상 장치 및 방법 |
WO2015048694A2 (en) | 2013-09-27 | 2015-04-02 | Pelican Imaging Corporation | Systems and methods for depth-assisted perspective distortion correction |
WO2015050499A1 (en) * | 2013-10-01 | 2015-04-09 | Heptagon Micro Optics Pte. Ltd. | Lens array modules and wafer-level techniques for fabricating the same |
US20150116527A1 (en) * | 2013-10-31 | 2015-04-30 | Heptagon Micro Optics Pte. Ltd. | Compact array camera modules having an extended field of view from which depth information can be extracted |
US9185276B2 (en) | 2013-11-07 | 2015-11-10 | Pelican Imaging Corporation | Methods of manufacturing array camera modules incorporating independently aligned lens stacks |
DE102013222780B3 (de) * | 2013-11-08 | 2015-04-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturvorrichtung und verfahren zur erfassung eines objektbereichs |
GB2520261B (en) * | 2013-11-12 | 2017-10-18 | Canon Kk | Visual servoing |
EP3540392A1 (en) | 2013-11-12 | 2019-09-18 | Rebellion Photonics, Inc. | Divided-aperture infra-red spectral imaging system |
US10119808B2 (en) | 2013-11-18 | 2018-11-06 | Fotonation Limited | Systems and methods for estimating depth from projected texture using camera arrays |
WO2015081279A1 (en) | 2013-11-26 | 2015-06-04 | Pelican Imaging Corporation | Array camera configurations incorporating multiple constituent array cameras |
DE102013226196A1 (de) * | 2013-12-17 | 2015-06-18 | Volkswagen Aktiengesellschaft | Optisches Sensorsystem |
DE102013226789B4 (de) * | 2013-12-19 | 2017-02-09 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Mehrkanaloptik-Bildaufnahmevorrichtung und Mehrkanaloptik-Bildaufnahmeverfahren |
JP6351285B2 (ja) * | 2014-02-13 | 2018-07-04 | キヤノン株式会社 | 画像形成装置、及び画像形成装置の制御方法 |
EP2908341B1 (en) * | 2014-02-18 | 2018-07-11 | ams AG | Semiconductor device with surface integrated focusing element |
WO2015134996A1 (en) | 2014-03-07 | 2015-09-11 | Pelican Imaging Corporation | System and methods for depth regularization and semiautomatic interactive matting using rgb-d images |
JP6327911B2 (ja) | 2014-04-03 | 2018-05-23 | キヤノン株式会社 | 光学素子、光学素子アレイ及び固体撮像装置 |
US11290662B2 (en) | 2014-05-01 | 2022-03-29 | Rebellion Photonics, Inc. | Mobile gas and chemical imaging camera |
US20170026588A1 (en) | 2014-05-01 | 2017-01-26 | Rebellion Photonics, Inc. | Dual-band divided-aperture infra-red spectral imaging system |
US10107515B2 (en) * | 2014-06-05 | 2018-10-23 | Honeywell International Inc. | HVAC controller with proximity sensor |
DE102014212104A1 (de) | 2014-06-24 | 2015-12-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und verfahren zur relativen positionierung einer multiaperturoptik mit mehreren optischen kanälen relativ zu einem bildsensor |
US10458905B2 (en) | 2014-07-07 | 2019-10-29 | Rebellion Photonics, Inc. | Gas leak emission quantification with a gas cloud imager |
DE102014213371B3 (de) * | 2014-07-09 | 2015-08-06 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und verfahren zur erfassung eines objektbereichs |
JP6555264B2 (ja) * | 2014-07-16 | 2019-08-07 | ソニー株式会社 | 複眼撮像装置 |
EP3201877B1 (en) | 2014-09-29 | 2018-12-19 | Fotonation Cayman Limited | Systems and methods for dynamic calibration of array cameras |
US9672594B2 (en) * | 2014-10-21 | 2017-06-06 | The Boeing Company | Multiple pixel pitch super resolution |
US9977961B2 (en) * | 2014-10-21 | 2018-05-22 | Bae Systems Information And Electronic Systems Integration Inc. | Method for maintaining detection capability when a frame in a multispectral image is corrupted |
EP3213053B1 (en) | 2014-12-23 | 2019-08-28 | Apple Inc. | Optical inspection system and method including accounting for variations of optical path length within a sample |
US9591287B2 (en) | 2015-01-21 | 2017-03-07 | Himax Technologies Limited | Lens module applied to camera |
DE102015002536B4 (de) * | 2015-02-28 | 2021-10-28 | Schölly Fiberoptic GmbH | Optikanordnung, Endoskop und korrespondierendes Verfahren zur Fertigung |
TWI564594B (zh) * | 2015-03-02 | 2017-01-01 | 奇景光電股份有限公司 | 透鏡模組 |
US10412373B2 (en) | 2015-04-15 | 2019-09-10 | Google Llc | Image capture for virtual reality displays |
US10567464B2 (en) | 2015-04-15 | 2020-02-18 | Google Llc | Video compression with adaptive view-dependent lighting removal |
US10440407B2 (en) | 2017-05-09 | 2019-10-08 | Google Llc | Adaptive control for immersive experience delivery |
US10275898B1 (en) | 2015-04-15 | 2019-04-30 | Google Llc | Wedge-based light-field video capture |
WO2016168415A1 (en) * | 2015-04-15 | 2016-10-20 | Lytro, Inc. | Light guided image plane tiled arrays with dense fiber optic bundles for light-field and high resolution image acquisition |
US10419737B2 (en) | 2015-04-15 | 2019-09-17 | Google Llc | Data structures and delivery methods for expediting virtual reality playback |
US10565734B2 (en) | 2015-04-15 | 2020-02-18 | Google Llc | Video capture, processing, calibration, computational fiber artifact removal, and light-field pipeline |
US10546424B2 (en) | 2015-04-15 | 2020-01-28 | Google Llc | Layered content delivery for virtual and augmented reality experiences |
US10085005B2 (en) | 2015-04-15 | 2018-09-25 | Lytro, Inc. | Capturing light-field volume image and video data using tiled light-field cameras |
US10469873B2 (en) | 2015-04-15 | 2019-11-05 | Google Llc | Encoding and decoding virtual reality video |
US10540818B2 (en) | 2015-04-15 | 2020-01-21 | Google Llc | Stereo image generation and interactive playback |
US10341632B2 (en) | 2015-04-15 | 2019-07-02 | Google Llc. | Spatial random access enabled video system with a three-dimensional viewing volume |
US11328446B2 (en) | 2015-04-15 | 2022-05-10 | Google Llc | Combining light-field data with active depth data for depth map generation |
US10444931B2 (en) | 2017-05-09 | 2019-10-15 | Google Llc | Vantage generation and interactive playback |
US9942474B2 (en) | 2015-04-17 | 2018-04-10 | Fotonation Cayman Limited | Systems and methods for performing high speed video capture and depth estimation using array cameras |
KR102372745B1 (ko) * | 2015-05-27 | 2022-03-11 | 에스케이하이닉스 주식회사 | 이미지 센서 및 이를 구비하는 전자장치 |
CA2987404A1 (en) | 2015-05-29 | 2016-12-08 | Rebellion Photonics, Inc. | Hydrogen sulfide imaging system |
US9979909B2 (en) | 2015-07-24 | 2018-05-22 | Lytro, Inc. | Automatic lens flare detection and correction for light-field images |
US10790325B2 (en) | 2015-07-29 | 2020-09-29 | Samsung Electronics Co., Ltd. | Imaging apparatus and image sensor including the same |
US11469265B2 (en) | 2015-07-29 | 2022-10-11 | Samsung Electronics Co., Ltd. | Imaging apparatus and image sensor including the same |
US10403668B2 (en) | 2015-07-29 | 2019-09-03 | Samsung Electronics Co., Ltd. | Imaging apparatus and image sensor including the same |
US11089286B2 (en) | 2015-07-29 | 2021-08-10 | Samsung Electronics Co., Ltd. | Image sensor |
DE102015216140A1 (de) | 2015-08-24 | 2017-03-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | 3D-Multiaperturabbildungsvorrichtung |
US11244434B2 (en) | 2015-08-24 | 2022-02-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multi-aperture imaging device |
EP3344971B1 (en) | 2015-09-01 | 2022-10-26 | Apple Inc. | Reference switch architectures for noncontact sensing of substances |
US9992477B2 (en) | 2015-09-24 | 2018-06-05 | Ouster, Inc. | Optical system for collecting distance information within a field |
CN105611122B (zh) | 2015-12-18 | 2019-03-01 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
DE102016200285A1 (de) * | 2016-01-13 | 2017-07-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Erfassen eines Objektbereichs |
DE102016200287A1 (de) * | 2016-01-13 | 2017-07-13 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Multiaperturabbildungsvorrichtungen, Verfahren zum Herstellen derselben und Abbildungssystem |
DE102016013511A1 (de) | 2016-04-18 | 2017-10-19 | Kastriot Merlaku | Mobiltelefon mit einem großen, vorzugsweise randlosen Bildschirm |
KR102573739B1 (ko) | 2016-04-21 | 2023-08-31 | 애플 인크. | 레퍼런스 스위칭을 위한 광학 시스템 |
US10275892B2 (en) | 2016-06-09 | 2019-04-30 | Google Llc | Multi-view scene segmentation and propagation |
US10578274B2 (en) | 2016-06-10 | 2020-03-03 | General Electric Company | Lens array assembly and method for making the same |
AT518905B1 (de) * | 2016-07-29 | 2018-04-15 | Zkw Group Gmbh | Projektionseinrichtung für einen Kraftfahrzeugscheinwerfer und Verfahren zu seiner Herstellung |
US10270947B2 (en) * | 2016-09-15 | 2019-04-23 | Microsoft Technology Licensing, Llc | Flat digital image sensor |
CA3041100A1 (en) | 2016-10-21 | 2018-04-26 | Rebellion Photonics, Inc. | Gas imaging system |
US10375327B2 (en) * | 2016-10-21 | 2019-08-06 | Rebellion Photonics, Inc. | Mobile gas and chemical imaging camera |
CN106488148B (zh) * | 2016-11-01 | 2019-09-17 | 首都师范大学 | 一种超分辨率图像传感器及其构造方法 |
EP3548935B1 (en) | 2016-12-05 | 2024-08-28 | Photonic Sensors & Algorithms, S.L. | Light field acquisition device |
US10679361B2 (en) | 2016-12-05 | 2020-06-09 | Google Llc | Multi-view rotoscope contour propagation |
DE102017200618A1 (de) | 2017-01-17 | 2018-07-19 | Robert Bosch Gmbh | Miniaturspektrometer und Verfahren eingerichtet zur spektralen Analyse eines Objekts |
WO2018156795A1 (en) | 2017-02-22 | 2018-08-30 | Rebellion Photonics, Inc. | Systems and methods for monitoring remote installations |
DE102017106831A1 (de) * | 2017-03-30 | 2018-10-04 | Sick Ag | Kamera und Verfahren zur Erfassung von relativ zu der Kamera in einer Förderrichtung bewegten Objekten |
US10594945B2 (en) | 2017-04-03 | 2020-03-17 | Google Llc | Generating dolly zoom effect using light field image data |
US10474227B2 (en) | 2017-05-09 | 2019-11-12 | Google Llc | Generation of virtual reality with 6 degrees of freedom from limited viewer data |
US10354399B2 (en) | 2017-05-25 | 2019-07-16 | Google Llc | Multi-view back-projection to a light-field |
WO2019018851A1 (en) | 2017-07-21 | 2019-01-24 | California Institute Of Technology | PLANAR ULTRAMINOUS PHOTOGRAPHIC CAMERA WITHOUT LENS |
CN107589468A (zh) * | 2017-07-25 | 2018-01-16 | 移康智能科技(上海)股份有限公司 | 一种人体探测方法、装置及电子设备 |
WO2019033110A1 (en) | 2017-08-11 | 2019-02-14 | California Institute Of Technology | THIN-DIMENSIONAL IMAGING WITHOUT LENS USING DIRECTIONAL DETECTION ELEMENTS |
US10539718B2 (en) | 2017-08-17 | 2020-01-21 | Honeywell International Inc. | Fresnel lens array with improved off-axis optical efficiency |
US10482618B2 (en) | 2017-08-21 | 2019-11-19 | Fotonation Limited | Systems and methods for hybrid depth regularization |
US10545215B2 (en) | 2017-09-13 | 2020-01-28 | Google Llc | 4D camera tracking and optical stabilization |
EP3688446A2 (en) | 2017-09-29 | 2020-08-05 | Apple Inc. | Resolve path optical sampling architectures |
WO2019094639A1 (en) | 2017-11-09 | 2019-05-16 | Rebellion Photonics, Inc. | Window obscuration sensors for mobile gas and chemical imaging cameras |
US10965862B2 (en) | 2018-01-18 | 2021-03-30 | Google Llc | Multi-camera navigation interface |
EP3752873A1 (en) | 2018-02-13 | 2020-12-23 | Apple Inc. | Integrated photonics device having integrated edge outcouplers |
US10529763B2 (en) * | 2018-04-19 | 2020-01-07 | Semiconductor Components Industries, Llc | Imaging pixels with microlenses |
WO2019211214A1 (en) * | 2018-05-01 | 2019-11-07 | Signify Holding B.V. | Lighting device with controllable light output characteristics |
US10936885B2 (en) | 2018-05-15 | 2021-03-02 | Toyota Research Institute, Inc. | Systems and methods of processing an image |
US10736506B2 (en) * | 2018-06-14 | 2020-08-11 | Broadspot Imaging Corp | Composite image with cross-channel illumination |
FR3084207B1 (fr) * | 2018-07-19 | 2021-02-19 | Isorg | Systeme optique et son procede de fabrication |
CN111386532B (zh) | 2018-09-12 | 2023-09-08 | 指纹卡安娜卡敦知识产权有限公司 | 指纹子图像的重建 |
JP7237506B2 (ja) * | 2018-10-02 | 2023-03-13 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置 |
WO2020103075A1 (zh) * | 2018-11-22 | 2020-05-28 | 深圳印象认知技术有限公司 | 一种图像处理方法及装置 |
JP2020098963A (ja) * | 2018-12-17 | 2020-06-25 | 株式会社日立製作所 | 撮像装置 |
KR20210020469A (ko) | 2019-08-14 | 2021-02-24 | 삼성전자주식회사 | 분광 카메라 |
CN110505384B (zh) * | 2019-08-29 | 2021-05-14 | Oppo广东移动通信有限公司 | 成像系统、终端和图像获取方法 |
KR20210028808A (ko) | 2019-09-04 | 2021-03-15 | 삼성전자주식회사 | 이미지 센서 및 이를 포함하는 촬상 장치 |
MX2022003020A (es) | 2019-09-17 | 2022-06-14 | Boston Polarimetrics Inc | Sistemas y metodos para modelado de superficie usando se?ales de polarizacion. |
KR20230004423A (ko) | 2019-10-07 | 2023-01-06 | 보스턴 폴라리메트릭스, 인크. | 편광을 사용한 표면 법선 감지 시스템 및 방법 |
KR102684228B1 (ko) | 2019-10-21 | 2024-07-11 | 삼성전자주식회사 | 복수-입력 폴디드 카메라 및 이를 포함하는 모바일 장치 |
WO2021108002A1 (en) | 2019-11-30 | 2021-06-03 | Boston Polarimetrics, Inc. | Systems and methods for transparent object segmentation using polarization cues |
DE102019220436B4 (de) * | 2019-12-20 | 2021-12-30 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung zur Unterdrückung von Störungen durch Reflexionslicht bei einem Licht-erzeugenden System, Verwendungen der Vorrichtung und Licht-erzeugendes System |
KR20210081767A (ko) | 2019-12-24 | 2021-07-02 | 삼성전자주식회사 | 이미지 장치 및 이미지 센싱 방법 |
US11195303B2 (en) | 2020-01-29 | 2021-12-07 | Boston Polarimetrics, Inc. | Systems and methods for characterizing object pose detection and measurement systems |
KR20220133973A (ko) | 2020-01-30 | 2022-10-05 | 인트린식 이노베이션 엘엘씨 | 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들 |
US11328150B2 (en) | 2020-04-30 | 2022-05-10 | Omnivision Technologies, Inc. | Lens-array imager |
WO2021243088A1 (en) | 2020-05-27 | 2021-12-02 | Boston Polarimetrics, Inc. | Multi-aperture polarization optical systems using beam splitters |
DE102020207302A1 (de) | 2020-06-10 | 2021-12-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein | Vorrichtung und Verfahren zur Aufnahme eines projizierten Punktmusters in einer Anzeigevorrichtung |
JP7532651B2 (ja) | 2020-09-09 | 2024-08-13 | アップル インコーポレイテッド | ノイズ緩和のための光学システム |
US11513324B2 (en) * | 2020-11-15 | 2022-11-29 | Aac Optics Solutions Pte. Ltd. | Camera module |
US11902638B1 (en) * | 2020-12-30 | 2024-02-13 | Ball Aerospace & Technologies Corp. | Gapless detector mosaic imaging systems and methods |
CN112804001B (zh) * | 2021-01-08 | 2022-05-27 | 中国人民解放军战略支援部队信息工程大学 | 孔径阵列接收机及其设计方法、装置、电子设备和介质 |
DE102021202164B3 (de) | 2021-03-05 | 2022-07-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein | Tandemblendenarchitektur zur Füllfaktorerhöhung von kompakten Multikanalabbildungssystemen |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US12069227B2 (en) | 2021-03-10 | 2024-08-20 | Intrinsic Innovation Llc | Multi-modal and multi-spectral stereo camera arrays |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11808934B2 (en) | 2021-04-20 | 2023-11-07 | Eagle Technology, Llc | Planar optical telescope and related methods |
US12067746B2 (en) | 2021-05-07 | 2024-08-20 | Intrinsic Innovation Llc | Systems and methods for using computer vision to pick up small objects |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
KR20230032755A (ko) | 2021-08-31 | 2023-03-07 | 삼성전자주식회사 | 영상 처리 방법 및 장치 |
CN114638824B (zh) * | 2022-05-11 | 2022-08-23 | 成都数联云算科技有限公司 | 基于aoi设备采集图像的融合方法、装置、设备和介质 |
CN115086550B (zh) * | 2022-05-30 | 2023-04-28 | 元潼(北京)技术有限公司 | 元成像系统 |
US12106599B2 (en) | 2022-06-13 | 2024-10-01 | Omnivision Technologies, Inc. | Thin, multi-lens, optical fingerprint sensor adapted to image through cell phone displays and with multiple photodiode groups each having separate fields of view for each microlens |
DE102023102131A1 (de) * | 2023-01-30 | 2024-08-01 | Ams-Osram Ag | Sensorvorrichtung mit einer mehrzahl von optikkanälen |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4585948A (en) * | 1983-03-15 | 1986-04-29 | The United States Of America As Represented By The Secretary Of The Air Force | Non-scanning integrated optical system with wide field of view search capability |
US5497269A (en) * | 1992-06-25 | 1996-03-05 | Lockheed Missiles And Space Company, Inc. | Dispersive microlens |
US5696371A (en) * | 1996-05-23 | 1997-12-09 | Eastman Kodak Company | Diffractive/refractive lenslet array |
US6137535A (en) * | 1996-11-04 | 2000-10-24 | Eastman Kodak Company | Compact digital camera with segmented fields of view |
US5796522A (en) * | 1996-12-20 | 1998-08-18 | Eastman Kodak Company | Lenslet array system with a baffle structure and a shutter |
EP0893915A3 (en) | 1997-06-25 | 2000-01-05 | Eastman Kodak Company | Compact image sensor with display integrally attached |
JP2000032354A (ja) | 1998-07-09 | 2000-01-28 | Sony Corp | 撮像装置 |
JP2001223931A (ja) * | 2000-02-10 | 2001-08-17 | Olympus Optical Co Ltd | 撮像装置及び画像システム |
US6660988B2 (en) * | 2001-05-01 | 2003-12-09 | Innovative Technology Licensing, Llc | Detector selective FPA architecture for ultra-high FPA operability and fabrication method |
JP2004032172A (ja) * | 2002-06-24 | 2004-01-29 | Canon Inc | 複眼撮像装置およびこれを備えた機器 |
DE102004003013B3 (de) * | 2004-01-20 | 2005-06-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Bilderfassungssystem und dessen Verwendung |
JP2005252625A (ja) | 2004-03-03 | 2005-09-15 | Canon Inc | 撮像装置および画像処理方法 |
US7936392B2 (en) * | 2004-10-01 | 2011-05-03 | The Board Of Trustees Of The Leland Stanford Junior University | Imaging arrangements and methods therefor |
US7651282B2 (en) * | 2005-05-04 | 2010-01-26 | The Trustees Of Columbia University In The City Of New York | Devices and methods for electronically controlling imaging |
WO2007014293A1 (en) * | 2005-07-25 | 2007-02-01 | The Regents Of The University Of California | Digital imaging system and method to produce mosaic images |
DE102006004802B4 (de) * | 2006-01-23 | 2008-09-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Bilderfassungssystem und Verfahren zur Herstellung mindestens eines Bilderfassungssystems |
US7557338B2 (en) * | 2006-03-14 | 2009-07-07 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Electronic device with integrated optical navigation module and microlens array therefore |
DE102006040657B4 (de) * | 2006-08-30 | 2016-05-12 | Robert Bosch Gmbh | Bilderfassungssystem für Anwendungen in Fahrzeugen |
US7956924B2 (en) * | 2007-10-18 | 2011-06-07 | Adobe Systems Incorporated | Fast computational camera based on two arrays of lenses |
JP5092685B2 (ja) * | 2007-10-23 | 2012-12-05 | 株式会社ニコン | 撮像素子および撮像装置 |
JP4483951B2 (ja) * | 2008-01-28 | 2010-06-16 | ソニー株式会社 | 撮像装置 |
JP2009206356A (ja) * | 2008-02-28 | 2009-09-10 | Toshiba Corp | 固体撮像装置およびその製造方法 |
US8259212B2 (en) * | 2009-01-05 | 2012-09-04 | Applied Quantum Technologies, Inc. | Multiscale optical system |
-
2009
- 2009-10-14 DE DE102009049387.5A patent/DE102009049387B4/de not_active Expired - Fee Related
-
2010
- 2010-10-12 EP EP11192388.4A patent/EP2429176B1/de active Active
- 2010-10-12 ES ES11192342.1T patent/ES2685583T3/es active Active
- 2010-10-12 EP EP10771393.5A patent/EP2428034B1/de active Active
- 2010-10-12 ES ES10771393T patent/ES2572229T3/es active Active
- 2010-10-12 JP JP2011543783A patent/JP5379241B2/ja active Active
- 2010-10-12 WO PCT/EP2010/065290 patent/WO2011045324A2/de active Application Filing
- 2010-10-12 ES ES11192388.4T patent/ES2466820T3/es active Active
- 2010-10-12 EP EP11192342.1A patent/EP2432213B1/de active Active
- 2010-10-12 KR KR1020117008573A patent/KR101284414B1/ko active IP Right Grant
-
2011
- 2011-03-29 US US13/074,089 patent/US8629930B2/en active Active
-
2013
- 2013-01-31 JP JP2013017198A patent/JP5589107B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
ES2685583T3 (es) | 2018-10-10 |
DE102009049387B4 (de) | 2016-05-25 |
JP2013102534A (ja) | 2013-05-23 |
KR101284414B1 (ko) | 2013-07-09 |
JP5589107B2 (ja) | 2014-09-10 |
EP2432213B1 (de) | 2018-05-30 |
EP2428034B1 (de) | 2016-04-13 |
EP2429176B1 (de) | 2014-04-16 |
US8629930B2 (en) | 2014-01-14 |
EP2428034A2 (de) | 2012-03-14 |
WO2011045324A2 (de) | 2011-04-21 |
EP2429176A1 (de) | 2012-03-14 |
ES2466820T3 (es) | 2014-06-11 |
US20110228142A1 (en) | 2011-09-22 |
EP2432213A1 (de) | 2012-03-21 |
ES2572229T3 (es) | 2016-05-30 |
KR20110074984A (ko) | 2011-07-05 |
JP2012507250A (ja) | 2012-03-22 |
DE102009049387A1 (de) | 2011-04-21 |
WO2011045324A3 (de) | 2011-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5379241B2 (ja) | 光学画像装置、光学画像処理装置および光学画像形成方法 | |
CN105900238B (zh) | 全光透镜在光传感器衬底上的单片集成 | |
US7253394B2 (en) | Image sensor and method for fabricating the same | |
US9578237B2 (en) | Array cameras incorporating optics with modulation transfer functions greater than sensor Nyquist frequency for capture of images used in super-resolution processing | |
US7920339B2 (en) | Method and apparatus providing singlet wafer lens system with field flattener | |
KR20220035971A (ko) | 개구-메타 표면 및 하이브리드 굴절-메타 표면 이미징 시스템 | |
JP5507585B2 (ja) | 多数のマイクロ光電子デバイスを製造する方法およびマイクロ光電子デバイス | |
US8456552B2 (en) | Image pick up unit using a lens array including a plurality of lens sections corresponding to m×n pixels of image pickup device | |
US20170359566A1 (en) | Folded optic passive depth sensing system | |
JP5627622B2 (ja) | 固体撮像装置および携帯情報端末 | |
CN112005150B (zh) | 用于移动设备的全光相机 | |
KR20100059896A (ko) | 이미지 센서 | |
CN111800560B (zh) | 使用晶圆级集成工艺的光场相机及方法 | |
Brückner et al. | Driving micro-optical imaging systems towards miniature camera applications | |
WO2024188873A1 (en) | Wafer-level compound lens | |
Meyer et al. | Ultra-compact imaging system based on multi-aperture architecture | |
Brückner | Multiaperture Cameras | |
Dannberg et al. | Thin wafer-level camera lenses inspired by insect compound eyes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120724 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120731 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20121026 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20121102 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130611 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130815 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130910 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130926 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5379241 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |