JP6790073B2 - チャネル特有の調整可能性を有するマルチ開口撮像装置 - Google Patents

チャネル特有の調整可能性を有するマルチ開口撮像装置 Download PDF

Info

Publication number
JP6790073B2
JP6790073B2 JP2018509495A JP2018509495A JP6790073B2 JP 6790073 B2 JP6790073 B2 JP 6790073B2 JP 2018509495 A JP2018509495 A JP 2018509495A JP 2018509495 A JP2018509495 A JP 2018509495A JP 6790073 B2 JP6790073 B2 JP 6790073B2
Authority
JP
Japan
Prior art keywords
optical
channel
imaging device
aperture imaging
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018509495A
Other languages
English (en)
Other versions
JP2018533751A (ja
Inventor
フランク ヴィッパーマン
フランク ヴィッパーマン
アンドレアス ブリュックナー
アンドレアス ブリュックナー
アンドレアス ブラオイアー
アンドレアス ブラオイアー
アレクサンダー オーベルデルスター
アレクサンダー オーベルデルスター
Original Assignee
フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ, フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ filed Critical フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ
Publication of JP2018533751A publication Critical patent/JP2018533751A/ja
Application granted granted Critical
Publication of JP6790073B2 publication Critical patent/JP6790073B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0816—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0875—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more refracting elements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
    • G02B27/646—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G02B7/08—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted to co-operate with a remote control mechanism
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B30/00—Camera modules comprising integrated lens units and imaging units, specially adapted for being embedded in other devices, e.g. mobile phones or vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Lenses (AREA)
  • Cameras In General (AREA)
  • Automatic Focus Adjustment (AREA)
  • Adjustment Of Camera Lenses (AREA)
  • Focusing (AREA)
  • Mounting And Adjusting Of Optical Elements (AREA)
  • Lens Barrels (AREA)

Description

本発明は、相互に隣接して配置された光チャネルの単一ラインアレイを含むマルチ開口撮像装置に関する。
従来のカメラは、対物フィールド全体または全視野を撮像する１つの撮像チャネルを含む。このようなカメラは、撮像システムを適合させ、したがって製造公差および使用温度範囲を拡大し、および／またはオートフォーカスおよび光学画像安定化機能を可能にする適応構成要素を含む。マルチ開口撮像システムは、それぞれが全視野の一部のみを撮像するいくつかの撮像チャネルからなる。
本発明の目的は、コストと撮像品質との間の改善された比率で製造され得るマルチ開口撮像装置を提供することである。
この目的は、独立請求項の主題によって達成される。
本発明の根底をなすアイデアは、各光チャネルのイメージセンサ領域、各光チャネルの光学系および各チャネルのビーム偏向装置間の各位置のチャネル特有の変化に対するあるいは各光チャネルの光学系の光学的特徴あるいは各光チャネルの光路の偏向に関するビーム偏向装置の光学特性のチャネル特有の変化に関する調整手段を有する互いに隣接して配置された光チャネルの単一ラインアレイを有するマルチ開口撮像装置を提供することであり、かつ、デフォルト値が記憶された記憶装置および／または調整装置のチャネル特有の制御のためにセンサデータをデフォルト値に変換するためのコントローラを用いて、例えばマルチ開口撮像装置の製造公差への要求および／またはこの手順により伴う追加の複雑さが再び補償されるような温度変化に対する位置及び形状の不変性に関してマルチ開口撮像装置への要求の低減を可能にする。調整手段は、マルチ開口撮像装置の光学的画像安定化コントローラおよび／またはマルチ開口撮像装置の手動またはオートフォーカス調整機能によって制御されるアクチュエータに加えて提供されてもよい。
有利な実施形態は、従属請求項の主題である。以下、添付図面を参照して、本発明の好適な実施形態を詳細に説明する。
図１は、一実施形態によるマルチ開口撮像装置の概略斜視図を示す図である。 図２は、図１の調整手段が備えることができ、イメージセンサ領域、光学系及び／又はそれぞれのチャネルのビーム偏向デバイスセグメントの間のチャネル特有の相対移動を実行するアクチュエータを例示するためのチャネルの１つの概略側面断面図を示すずである。 図３は、図１の調整手段が備えることができ、ライン延長方向に平行な軸の周りのビーム偏向装置の回転を実行するアクチュエータを例示するためのチャネルの１つの概略側面断面図を示す図である。 図４は、図１の調整手段が備えることができる相変化素子を示すために、光チャネルの１つの概略側面断面図を示す図である。 図５は、マルチ開口撮像装置の概略斜視図を示し、図１の調整手段、記憶装置および／またはコントローラ、および画像安定化コントローラおよびオートフォーカス制御を省略しているが、説明のために、図１の手段に加えて、例えば、マルチ開口撮像装置の画像安定化コントローラまたはオートフォーカスコントローラの一部である潜在的な追加アクチュエータの特定の例が示されている図である。 図６は、マルチ開口撮像装置の設置を説明するための携帯装置の斜視図を示す図である。 図７は、立体視目的のための２つのマルチ開口撮像装置の設置を説明するための携帯装置の斜視図である。 図８ａは、図１の変形例によるマルチ開口撮像装置の側面断面図を示しており、前記チャネルの光軸は、前記対をなす異なる傾斜のファセットの数が低減されるように、前記ライン延長方向に平行な共通平面内で発散的に進行するように、プレ発散することを示す図である。 図８ｂは、図１の変形例によるマルチ開口撮像装置の上面図をそれぞれ示しており、前記チャネルの光軸は、前記対をなす異なる傾斜のファセットの数が低減されるように、前記ライン延長方向に平行な共通平面内で発散的に進行するように、プレ発散することを示す図である。
図１は、マルチ開口撮像装置の一実施形態を示す。図１のマルチ開口撮像装置１０は、イメージセンサ１２と、それぞれの光学系１６1,１６2,１６3,１６4によって定義された複数の光チャネル１４とを含む。各光チャネル１４1,１４2,１４3,１４4は、それぞれの光学系１６1〜１６4によって、イメージセンサ１２のそれぞれのイメージセンサ領域１２1,１２2,１２3及び１２4上のマルチ開口撮像装置１０の全視野のチャネル特有の部分を投影し、部分視野は部分的に重なっている。イメージセンサ１２は、例えば、イメージセンサ領域１２1〜１２4に画素アレイを含むチップであってもよい。あるいは、イメージセンサ１２は、イメージセンサ領域１２1〜１２4ごとに１つの画素アレイチップを備えることができる。イメージセンサ１２が、イメージセンサ領域１２1〜１２4上に連続して延びる画素アレイ、すなわちイメージセンサ領域１２1〜１２4が位置する矩形または凸延長部の他のタイプの画素アレイを含むことも考えられ、この場合、このイメージセンサ１２の共通の連続画素アレイのイメージセンサ領域１２1〜１２4のみが例えば読出される。もちろん、これらの選択肢の異なる混合物も可能であり、例えば、２つまたは複数のチャネル用に１つのチップが存在し、また他のチャネル用に別のチップなどが存在する。イメージセンサ１２のいくつかのチップの場合、これらは、例えば、すべて一緒に、またはグループなどで、１つまたは複数のボードに実装することができる。
光学系１６1〜１６4は、それぞれ、例えば、レンズまたはレンズ群からなる。
好ましくは、イメージセンサ領域１２1〜１２4は、共通平面、すなわち、光チャネル１４の画像平面またはその光学系に配置される。図１において、この平面は、例えば、デカルト座標系のｘ軸及びｙ軸によって張られた又は定義された平面に平行であり、図１では以下の説明を簡略化するために示されており、符号２０が付されている。
イメージセンサ１２に平行な平面、すなわちｘｙ平面に平行な平面では、光学系１６1〜１６4は、例えば、互いに隣接して配置されている。図１の例では、イメージセンサ平面内のイメージセンサ領域１２1〜１２4の相対的な位置は、光学系１６1〜１６4の光学中心がイメージセンサ領域１２1〜１２4の中心に対して中心合わせされるように、光学系１６1〜１６4の相対的位置に合同的に配置され、光学系１６1〜１６4はｘ軸およびｙ軸に沿って、すなわちイメージセンサ１２に対して横方向に配置される。これは、図１の例では、光チャネル１４1〜１４4の光軸２２1〜２２4が互いに平行であり、座標系２０のｚ軸に平行であり、光軸がイメージセンサ領域１２1〜１２4および光学系１６1〜１６4のどの光学軸がセンタリングされるべきであるかを意味する。これまでに説明したイメージセンサ領域１２1〜１２4および光学系１６1〜１６4の配置に代わるものもあり得ることが指摘されている。例えば、光軸２２1〜２２4の発散も考えられる。光路の最初の平行発散の代替案は、以下でさらに議論される。
光学系１６1〜１６4は、それぞれのイメージセンサ領域１２1〜１２4上のマルチ開口撮像装置１０の異なる、部分的に重複する部分視野内のシーン内の対象物を投影し、イメージセンサ１２から対応する距離または対応する間隔で配置される。
複数の光チャネル１４1〜１４4は、単一ラインアレイとして示されている。光チャネル１４1〜１４4は、ｘ軸に沿って互いに隣接して配置される。従って、ｘ軸は、アレイ１４のライン延長方向に対応する。また、イメージセンサ領域１２1〜１２4は、この方向に沿って互いに隣接して配置されている。図１では、光チャネルの数は例示的に４つであるが、２つよりも多い異なる数も可能である。
光チャネルの線形アレイでは、イメージセンサ１２および光学系１６によってライン延長方向に沿って下方に制限されるように、マルチ開口撮像デバイス１０の延長部は、レンズの直径より大きい。ｚ軸に沿った、すなわち光チャネル１４1〜１４4の光軸または光路に沿ったイメージセンサ１２と光学系１６との相互配置によって決定されるような、マルチアパチャ撮像デバイス１０の最小延長部は、ｚ軸に沿った最小延長よりも小さいが、単一ラインアレイとしての光チャネル１４1〜１４4の実現のために、ライン延長方向ｘに垂直な横方向ｙにおけるマルチ開口撮像装置の最小延長よりも大きい。ｙ方向は、個々の光チャネル１４1〜１４4の横方向の延長によって、例えば、ｙ軸に沿った光学系１６1〜１６4の延長が例えば、ホルダ１８を含むように、決定される。この状況では、用途、すなわち、ハウジングが非常に薄い、例えば携帯電話などの可搬型装置のハウジングへのマルチ開口撮像装置の設置、に応じて、ビーム偏向のない光チャネルの視野が、実際にマルチ開口撮像装置１０の所望の視野の方向から外れた方向に向けられるように、イメージセンサ１２および光学系１６1〜１６4を方向付けることが望ましい場合がある。例えば、イメージセンサ１２及び光学系１６1〜１６4が平らなハウジングの最大面又は主面に対して垂直に向けられるように、すなわちイメージセンサ１２及び光学系１６1〜１６4の間の光軸２２1〜２２4がこれら主面に平行であるように、一方、撮影されるシーンは、それに垂直な方向にあり、すなわち、例えば前面である一主面の前にあり、あるいは、例えばハウジングの背面である他の主面の正面に例示的に表示ユニットを備えているように、例えば、マルチ開口撮像装置１０を設置することが望ましい場合がある。
このため、マルチ開口撮像装置１０は、複数の光チャネル１４の光路または光軸２２1〜２２4を偏向させるビーム偏向装置を備え、その結果、マルチ開口撮像装置１０から見て、マルチ開口撮像装置１０の全視野は、ｚ軸の方向ではなく、他の箇所にある。図１は、偏向後のマルチ開口撮像装置１０の全視野が基本的にｙ軸に沿っている、すなわち偏向が基本的にｚｙ平面内で行われる例示的な場合を示す。
前に説明したように、図１の実施形態では、ビーム偏向装置２４による偏向前または偏向なしのまたは例えば光学系１６1〜１６4での光軸２２1〜２２4は、互いに平行であり、図１に示されているように、そうでなければ、これらはわずかに逸脱するだけである。光学系１６1〜１６4およびイメージセンサ領域１２1〜１２4の対応する中心位置決めは、製造が容易であり、設置サイズの最小化に関して有利である。光チャネルの光路の平行性はまた、個々のチャネル１４1〜１４Nによってカバーされる部分視野または更なる手段、すなわちビーム偏向なしでそれぞれのイメージセンサ領域１２1〜１２4に投影される部分視野をほぼ完全に重複させる。図１のビーム偏向装置２４の別の機能は、マルチ開口撮像装置１０による全視野をより大きくカバーするために、チャネルの部分視野１４1〜１４Nは比較的程度は小さいが互いに重なり合うように光路に発散を与える。
例えば、ビーム偏向装置２４の前またはなしで光チャネル１４1〜１４4の光路の光軸２２1〜２２4が互いに平行であるかまたは逸脱していると仮定すると、すべてのチャネルにわたって平均化された方向に沿った平行な方向と比較して、光チャネル１４1〜１４Nの部分視野の最小開口角の１／１０未満である。追加の手段を用いることなく、部分視野が大部分のために重なり合う。追加の手段を用いることなく、部分視野が大部分のために重なり合う。したがって、図１のビーム偏向装置２４は、各光チャネル１４1〜１４N に対して、光学的に平面で相互に傾斜しているこのチャネルに明白に関連付けられた反射ファセット２６1〜２６4を含む。すなわち、光チャネルの部分的な視野は、空間角に関してはあまり重なり合わず、例えば、光チャネル１４1〜１４Nの個々の部分視野の開口角の１．５倍を超える開口角を含む全視野をカバーする。図１の例示的なケースでは、反射ファセット２６1〜２６4の相互の傾斜は、例えば、部分視野３０1〜３０4の２次元配列に従って、全視野２８をカバーするためにＸ軸に沿って直線的に互いに隣接して配置された光チャネル１４1〜１４Nを提供する。
図１の実施形態では、光チャネル１４1〜１４4の光軸２２1〜２２4の角度偏差／偏向が、ビーム偏向前の光軸の平均化された方向とビーム偏向後の光軸の平均化された方向とで張られた平面内で、即ち、一方では、図１の例におけるｘｙ平面内で、他方では、最後に述べた平面に垂直でビーム偏向後の光軸の平均方向に平行な平面内で、考慮される。図１の例は、ビーム偏向後の平均的方向がｙ軸に対応する例示的な場合に対応する。平均して、光チャネルの光軸は、ｘ軸周りのｙｚ平面内で９０°偏向され、平均して光軸はｙｚ平面から傾斜していない。
Figure 0006790073
これまで説明してきた図１のマルチ開口撮像装置１０のセットアップは、全体像を撮影する前またはその時点での所望のまたは瞬間的な調整に関係している。図１のマルチ開口撮像装置１０は、典型的には、前に述べた調整を用いて、例えば同じ時間に、全視野２８内のシーンを表す全体像を形成するために、イメージセンサ領域１２1〜１２4によって撮影された画像を結合するプロセッサ８５を含む。プロセッサ８５が、光チャネル１４1〜１４4によってイメージセンサ領域１２1〜１２4上に投影された画像を結合し、イメージセンサ領域１２1〜１２4によって撮影された、または全体画像を形成するために結合するために使用するアルゴリズムは、例えば、マルチ開口撮像装置１０の前に説明した構成要素の特定のパラメータを維持するための仮定が、全体画像の品質がある要件を満たすために維持されるように、またはアルゴリズムが全く適用されないように設計されている。例示的に、このアルゴリズムは、以下の仮定の１つまたは複数が成り立つことが仮定されている。

１）ｚ軸に沿った光学系 − イメージセンサ領域距離は、すべての光チャネル１４1〜１４4について等しい。

２）部分視野３０1〜３０4の相対的な位置、特に、その間の重なりは、所定の要件に対応するか、または所定の最大偏差よりも小さく逸脱する。
しかしながら、異なる理由により、上記の仮定の１つまたはいくつかが十分に保たれていないか、または十分に保たれていない可能性がある。保持しない理由は、例えば、光学系１６1〜１６4の互いの相対的位置における不正確さやイメージセンサ１２に対する不正確さなど、製造上のばらつきを保つことではない。製造の不正確さはまた、ミラー偏向デバイス２４の設置における不正確さ、およびファセット２６1〜２６4の互いの相対位置を含むことができる。加えて、または許容誤差の製造上の偏差の代替として、温度変化は、前に言及した仮定のうちの１つまたはいくつかを適用しないか、または十分に保持しないことがある。
イメージセンサ領域１２1〜１２4の画像を一体化または融合して全体画像を形成するために、プロセッサ８５によって実行されるアルゴリズムは、ある程度まで、例えば部分視野の相対的位置の設定された配置から互いまで全視野２８内で部分視野３０1〜３０4の位置の偏差等、イメージセンサ領域１２1〜１２4の最適な向きおよび配置からの要素のずれを補償することができる。画像を統合または融合するとき、プロセッサ８５は、例えば、そのような偏差をある程度補償することができる。しかしながら、ある偏差限界を超える（仮定２を維持しない）とき、プロセッサ８５は、例えば、偏差を補償することができない。
しかしながら、上述した仮定が、例えばある温度範囲にわたって常に維持されるようにマルチ開口撮像装置１０を製造することは、マルチ開口撮像装置の製造コストを増加させる傾向がある。これを回避するために、図１のマルチ開口撮像装置１０は、各光チャネル１４iのイメージセンサ領域１２iと、各光チャネル１４iの光学系１６iと、ビーム偏向装置２４またはその対応するセグメント２６iとの間の相対位置をチャネル特有に変更するための調整手段９０、または光学特性１４iまたは各光チャネルの光路の偏向に関するビーム偏向装置２４のセグメント２６iの光学特性をチャネル特有に変更するための調整手段９０を具備する。調整手段９０は、デフォルト値によって制御されるか、またはデフォルト値に従って調整作業を実行する。これらは、後述する記憶装置９２および／またはコントローラ９３によって提供される。
装置１０は、例えば、調整手段９０をチャネル特有に制御するためのデフォルト値が記憶された記憶装置９２を備える。デフォルト値は予め決定され、製造業者によって記憶装置９２に記憶される。さらに、図１に破線９４で示されているように、プロセッサ８５は、イメージセンサ領域１２1〜１２4の撮影画像の評価を使用して、例えば、画像をプロセッサ８５によって融合させたり、融合して全体画像を形成したり、記憶装置９２に保存されたデフォルト値を改善または更新することができる。例示的には、プロセッサ８５は、以下により詳細に説明されるように、調整手段９０を使用して現在の格納されたデフォルト値でマルチ開口撮像装置１０を調整することによってシーンを撮影する。このように、デフォルト値は、記憶装置９２から読出され、調整手段９０によってチャネル特有の調整のために使用される。撮影されたイメージセンサ領域１２1〜１２4の画像を解析することによって、プロセッサ８５は、これらの改善または更新されたデフォルト値を使用して、次の撮像で上記の前提条件のより正確または改善されたコンプライアンスの結果として次の撮像を行うために、撮影に使用された記憶装置９２内の記憶されたデフォルト値がどのように修正されるかに関する情報を獲得する。
格納されたデフォルト値は、調整値の完全なセット、すなわち、装置１０を完全に調整するための調整値のセットを含むことができる。それらは、設定された特性からチャネルの光学特性の固有のチャネル特有の偏差を低減またはキャンセルするために、上述したように選択され、以下に説明される。
デフォルト値は、例えば画像を撮影するときに、現在の状況にちょうど適している調整値のセットが常に使用されるように、例えば一連の連続的な温度間隔ごとに１つのようないくつかの調整値セットを含むことができる。従って、コントローラ９３は、例えば、デフォルト値セットと異なる既定の状況との間のテーブル関連付けに、記憶装置９２内でアクセスまたは参照することができる。このアクセスのために、コントローラ９３は、現在の状況を示すセンサデータ、例えば、空間における装置１０の温度、圧力、湿度、位置、および／または装置１０の現在の加速度または現在の回転速度などに関するデータを受信し、そしてこのデータから、記憶装置９２内のいくつかのデフォルト値セットのなかの１つ、すなわちセンサデータによって記述された現在の状況に最も近い所定の状況に関連するセットを判定する。センサデータは、イメージセンサ領域のイメージセンサデータから取得することもできる。例示的には、現在の温度が位置するそれぞれの温度間隔で設定された１つが、コントローラ９３によって選択される。オプションのフィードバック９４を使用するとき、記憶装置９２から調整手段９０によって撮影される特定の画像のために使用される選択されたセットのデフォルト値は、再び更新されてもよい。
格納されたデフォルト値は、例えば、格納されたデフォルト値、すなわち、部分視野の規則的な分布、光学系の焦点距離または光チャネルの被写界深度の距離からの部分視野の横方向偏差によって調整装置を制御することによって、光チャネル間の１つまたはいくつかの特性の分散の分布の尺度が減少するように構成することができる。
代替的には、デフォルト値は、例えばコントローラ９３内の現在のセンサデータの適切なデフォルト値へのマッピングを固定して統合することによって、記憶装置９２なしでコントローラ９３において決定されてもよい。このマッピングは、センサデータとデフォルト値との間の機能的結合によって記述することができる。機能的結合は、パラメータによって適応可能であってもよい。パラメータは、フィードバック９４を使用して適合させることができる。
記憶装置９２は、例えば、不揮発性記憶装置であってもよい。おそらく読取り専用記憶装置であるかもしれないが、書換え可能な記憶装置も可能である。コントローラ９３およびプロセッサ８５は、ソフトウェア、ハードウェア、またはプログラム可能なハードウェアで実現することができる。これらは、一般的なマイクロプロセッサ上で実行されるプログラムであってもよい。コントローラ９３のセンサデータを提供するためのセンサは、例えばイメージセンサ領域のような装置１０に属してもよく、あるいは装置が組込まれる装置の構成要素のような外部構成要素であってもよい。以下の図を参照して以下に説明する。
調整手段９０のためのいくつかの可能な実施例を以下に説明する。図１の調節手段９０は、以下に説明する実施形態の変形例の１つ、いくつかまたはすべてに適用することができる。特別な組合せについても以下で詳しく説明する。
図示の変形例では、調整手段９０は、例示的に、アクチュエータ１４iは、対応するチャネル１４iの光学系１６iを光軸２２iに沿って軸方向に、または光路に沿って、およびｘ軸および／またはｙ軸に沿って横方向に動かす各チャネル１４iのアクチュエータ９６iを備える。あるいは、アクチュエータ９６iは、例えばイメージセンサ１２iを動かすこともできる。一般に、アクチュエータ９６iは、イメージセンサ領域１２i、光学系１６ｉ、及び／又はビーム偏向装置２４の対応するセグメント２６ｉの相対的な動きを生じさせることができる。
図３に示す変形例によれば、調整手段９０は例えば各チャネル１４iの反射面などのセグメント２６iを光軸２２iすなわち、設定角度に関してその角度方向に、各チャネル１４iに対して変化させるアクチュエータ９８iを備える。ここで、セグメント２６iは、図１に示す反射面に限定されないことに留意されたい。各セグメント２６iはまた、光チャネル１４iの光路がプリズムを通過する間、ｙｚ平面内で光軸２２iの方向を偏向させるプリズムとして実現されてもよい。
図２および図３のアクチュエータ９６iおよび９８iによる相対的な移動を実現するために、すなわち、例えば並進移動方式で実施される光学系１６iの移動を生成するために、ならびにアクチュエータ９８iおよびＸ軸によるセグメント２６iを傾けるために、空気圧式アクチュエータ、油圧アクチュエータ、圧電アクチュエータ、熱アクチュエータ、静電アクチュエータ、または電気力学ドライブまたはＤＣまたはステッピングモータまたはボイスコイルドライブを使用することができる。
図４が参照する更なる変形例によれば、調節手段９０は、イメージセンサ領域１２iおよび光学系１６i（１００i'）の間または光学系１６iおよびビーム偏向装置セグメント２６i（１００i'''）の間で、前述した変形の組合せも可能であり、セグメント２６i（１００i''''）に統合されたそれぞれの光学系１６i（１００i''）に統合され得る、図４に示すような、各チャネル１４iに対する相変化光学素子又は相変化素子１００iを備える。相変化光学素子１００iは、例えば、液晶などの屈折率の位置依存変化を引起こすことがある。これに代えてまたはこれに加えて、相変化光学素子１００iは、例えば、可撓性、固体、透明材料に機械的作用を及ぼし、変形を引起こす圧電を使用することによって、または電気濡れ現象を使用することによって、光学的に活性な表面の形状を変化させる。相変化素子１００i''は、例えば、光学系１６iの屈折率を変化させることができる。あるいは、相変化素子１００i"は、光学系１６iの光学レンズ領域の形状を変化させ、それによって光学系１６iの実効屈折力を変化させることができる。相変化要素１００i''''は、例えば、対応する表面の仮想傾斜を引き起こすために、例えば反射ファセット上のセグメント２６iの光学的に関連する表面上に正弦位相格子を生成することができる。同様に、相変化素子１００i'または相変化素子１００i"は、光軸を偏向させることができる。
換言すれば、相変化光学素子１００iによって引起こされる相変化は、例えば、光軸２２iの周りの回転対称のように、主に回転対称であり、従って、１００i ''の場合には、光学系１６iの焦点距離が変化する。しかしながら、対応する方向における光軸２２iの偏向角または偏向の変化を引起こすために、要素１００iによって引起こされる相変化は、例えば、ｘ軸に沿って直線的に、またはｙ軸に沿って直線的に、ほぼ直線的であってもよい。
回転対称の位相変化は、焦点合わせに使用されてもよく、対応する光チャネル１４iの部分視野の位置を補正するための線形位相変化であってもよい。
図２ないし図４を参照して導入されたアクチュエータ９６i、９８i及び１００iは、他の種類のアクチュエータを表す。チャネル１４i毎に各種類の１つが存在してもよく、これらは、記憶装置内のデフォルト値によって個々にかつ別々に制御可能であり、および／または現在のイメージセンサデータ、例えば、温度、圧力、湿度、空間における位置、加速度などのさらなるセンサのデータが考慮される。上述したように、図示されたアクチュエータの１つまたは一部のみが装置１０内に存在してもよく、存在するアクチュエータは代替的に、それぞれのチャネルを個別に適合させるための少なくとも１つのチャネルまたは少なくとも２つのチャネルに存在してもよい。
もちろん混合物も可能であり、その混合物は同時に偏向および焦点距離の変化を引き起こすであろう。
図１に戻って参照すると、破線は、調整手段９０に加えて、任意に、マルチ開口撮像装置１０は、イメージセンサ１２、光アレイ１４およびビーム偏向装置２４の間の、すなわち全ての光チャネル１４1〜１４4に等しい、チャネル−グローバル相対移動を生成するための１つまたは複数のアクチュエータ１０２を備えることができる。１つまたはいくつかの追加のアクチュエータ１０２は、図１に示すように、オプションとして存在するオートフォーカスコントローラ１０４および／またはマルチ開口撮像装置の任意に存在する画像安定化コントローラの一部であってもよい。
追加のアクチュエータによって補足された図１の装置１０の具体例が図５に示されている。図５は、光チャネル１４1〜１４4の光学系１６1〜１６4が共通のキャリア１８を介して機械的に互いに固定されている、図１のマルチ開口撮像装置１０を示す。共通担体１８は、例えば、図５に示すように、光学系１６1〜１６4が形成されている透明な基板、例えば、成形、接着などであってもよく、光路２２1または光軸２２4は、基板１８を貫通する。代替的に、キャリア１８は、例えば、各チャネル１４1〜１４4に対して、それぞれのチャネルに関連する１６1〜１６4が固定される開口部を含む不透明材料から形成されたキャリアであってもよい。この共通ホルダを使用して、例えばｘ方向、すなわち、アレイ１４のライン延長方向に沿ったキャリア１８の並進運動により、光学系１６1〜１６4にすべてのチャネルに等しいグローバルな動きを与えることが可能である。アクチュエータ１０２ａがここに設けられている。これは、共通のキャリア１８をｘ軸に沿って並進運動させるアクチュエータ１０２ａによってすべての光チャネル１４1〜１４4に関して等しい光学系１６1〜１６4の並進運動を生成することを意味する。アクチュエータ１０２ａのタイプに関しては、図２および図３を参照する実施例を参照されたい。さらに、図５の装置１０は、ｚ軸に沿った、または光軸２２iに沿ったイメージセンサ１２iから光学系１６iまでの距離の変化がチャネルグローバル、すなわち全ての光チャネル１４1〜１４4に等しいアクチュエータ１０２ｂを含む。図５に示すように、アクチュエータ１０２ｂは、例えば、関連するイメージセンサ部分１２1〜１２4からキャリア１８を介さずに距離を変化させるために、光学系１６1〜１６4にｚ軸に沿う並進運動をさせるが、同様にｚ軸に沿って並進運動をさせるアクチュエータ１０２ａを介して、また、キャリア１８のためのサスペンションとして機能する。
さらに、図５の装置１０は、ビーム偏向装置２４を、ｘ軸に平行であるか、または光軸２２1〜２２4が位置する平面内にあるまたは同じものから遠くない軸の周りに回転させるアクチュエータ１０２ｃを含む。可能な実施例に関連するアクチュエータ１０２ｂおよび１０２ｃに関して、図２および３を参照する前に提供された例のリストを参照する。回転運動またはアクチュエータ１０２ｃによってビーム偏向装置２４に与えられた回転運動は、ビーム偏向装置２４のセグメント２６1ないし２６4に対して、すべてのチャネル１４1ないし１４4について同じ効果を有する。すなわち、チャネルグローバル特性である。ビーム偏向装置は、例えば、対応するセグメント２６1〜２６4を有するファセットミラーまたはプリズムであってもよい。
アクチュエータ１０２ｂを使用して、オートフォーカスコントローラ１０４は、例えば、チャネルグローバルにチャネル１４1〜１４4によって装置１０による撮影の焦点を制御することができる。画像安定化コントローラ１０６は、例えば、ユーザによる揺れを回避するために、アクチュエータ１０２ｃによって第１の方向１０８に、およびアクチュエータ１０２ａによって垂直方向１１０に全視野２８を安定化することができる。
ここで図５の装置１０は、たとえば、全視野内の部分視野の製造不正確さまたは温度誘発ドリフトを補償するように、イメージセンサ領域１２1〜１２4をチャネル特有の態様でｘ軸に沿っておよび／またはｙ軸に沿って並進移動させるために、各チャネル１４1〜１４4に対して、図２によるアクチュエータ、すなわち、各チャネル１４iのアクチュエータ９６iを例示的に備える。図５の装置１０は、これに代えてまたはそれに加えて、製造のために望ましくないことになる、光学系１６1〜１６4の焦点距離の差を補償するためのアクチュエータ１００i''を備えることができる。これに加えて、またはこれに代えて、図５の装置１０は、相対的な傾斜は、部分視野３０1〜３０4による全視野２８の所望のカバレッジをもたらすように、製造または温度によって生じるセグメント２６1〜２６4の相対的な傾きの偏差を互いに補償するアクチュエータ１００i'''を備える。それに加えて、またはこれに代えて、装置１０は、最終的に、タイプ１００i'または１００i'''のアクチュエータを備えることができる。
要するに、装置１０は、アレイ１４のライン延長方向ｘに平行な軸の周りでビーム偏向装置２４を回転させるように構成されたアクチュエータ１０２ｃを備えることができる。回転軸は、例えば、光学軸２２1〜２２4の平面内に配置されるか、または、光学系１６1〜１６4の直径の４分の１未満だけ、回転軸から離れて配置される。あるいは、もちろん、回転軸が遠く離れている、例えば、光学系の直径よりも小さいか、または４つの光学系の直径よりも小さいことも可能である。アクチュエータ１０２ｃは、撮影時の使用によるマルチ開口撮像装置１０の揺れを補償するために、例えば、５°未満又は１０°未満のスパン内のような小さい角度範囲における短い応答時間でビーム偏向装置２４を回転させるために設けられてもよい。この場合、アクチュエータ１０２ｃは、例えば、画像安定化コントローラによって制御される。
代替的にまたは追加的に、アクチュエータ１０２ｃは、より大きな角度シフトで部分視野３０1〜３０4（図１）の全カバレッジによって定義される全視野２８をその方向に変えるように構成することができる。このように、ビーム偏向装置２４を回転させて偏向を達成することも可能であり、この場合、例えば、ビーム偏向装置２４を両側で反射するミラーアレイとすることによって、全視野が装置１０に対して反対方向に配置される。
代替的にまたは追加的に、装置１０は、基板１８または基板１８自体により、光学系１６1〜１６4を使用して光学系１６1〜１６4をライン延長方向に並進的に移動させるように構成されたアクチュエータ１０２ａを備えるように構成されている。アクチュエータ１０２ａは、例えば、ライン延長方向に沿った運動５３によりミラー偏向装置２４を回転させることによって実現される画像安定化を横断する画像安定化を達成するために、上述した画像安定化コントローラによって制御されてもよい。
追加的または代替的に、装置１０は、被写界深度の調整を達成するように、イメージセンサ１２と光学系１６1〜１６4またはイメージセンサ１２と本体１８との間の画像側の距離を変更するためのアクチュエータ１０２ｂをさらに備えることができる。手段５４は、手動ユーザコントローラによって、または装置１０のオートフォーカスコントローラによって制御されてもよい。
アクチュエータ１０２ａは、また、基板１８を支持するのに役立ち、図５に示すように、好ましくは構造高さを増加させないためにライン延長方向に沿って基板１８に水平方向に隣接するように配置される。アクチュエータ１０２ｂおよび１０２ｃについては、構造高さを増加させないために、光路の平面内に配置することが好ましいこともまた真実である。
光学系１６1〜１６4は、既に述べた透明基板を介してなどの相互の間だけでなく、ビーム偏向装置に対しても、一定の相対位置で保持することができることが指摘されるべきである。好ましくは構造的な高さを増加させない、したがって好ましくは構成要素１２,１４および２４の平面内または光路の平面内に配置される適切なフレームなどである。相対位置の不変性は、光軸に沿った光学系とビーム偏向装置との間の距離に限定され、アクチュエータ１０２ｂは、例えば、光軸に沿って並進的にビーム偏向装置２４と共に光学系１６1〜１６4を移動する。光学系−ビーム偏向装置の距離は、チャネルの光路がビーム偏向装置２４のセグメントによって横方向に制限されないように最小距離に設定することもでき、セグメント２６iは、最適経路を制限しないために、横方向の伸長に関して最大の光学系−ビーム偏向装置の距離について寸法決めされなければならない。さらに、アクチュエータ１０２ａが光学系１６1〜１６4をライン延長方向に沿って並進的にビーム偏向装置に導くように、相対位置の不変性は、前述したフレームが光学系およびビーム偏向装置をｘ軸に沿って堅固な態様で互いに保持することを意味することができる。
ビーム偏向装置２４の回転運動を発生させるためのアクチュエータ１０２ｃ及びマルチ開口撮像装置１０の光学的画像安定化コントローラのアクチュエータ１０２ａに関連して、上述の光チャネルの光路を偏向させるビーム偏向装置２４は、画像または２次元での全画像フィールドの安定化、すなわち、基板１８の並進運動によって基本的にライン延長方向に平行な第１の画像軸に沿った画像安定化、および、ビーム偏向の前あるいはなしに、基本的に光軸に平行な、または、偏向された光軸を考慮するとき、ビーム偏向装置２４の回転運動を生成することにより光軸およびライン延長方向に垂直な、第２の画像軸に沿った画像安定化を可能にする。加えて、記載された構成は、上述したフレームおよびアレイ１４の固定されたビーム偏向装置を、例えば、焦点調節を実現し、したがって、オートフォーカス機能を実現する、上述のアクチュエータ５４により、ライン延長方向に垂直に並進移動させることができる。
完全を期すために、装置は、イメージセンサ領域を介してキャプチャするとき、チャネルを介してイメージセンサ領域に撮像されたチャネル毎のシーンの画像を撮影し、かつ、装置は任意で画像を結合または融合して、全視界内のシーンに対応する全画像を形成し、および／または例えば３Ｄ画像データおよび深度チャートを形成するための対象シーンに関する深度情報および例えば、リフォーカス（実際の撮影後のシャープネスの領域を決定する）、全焦点画像、仮想グリーンスクリーン（前景色と背景色の分離）などのソフトウエア技術的実現などの追加データを提供するプロセッサ８５などのプロセッサを含むことができる。後者のタスクは、前記プロセッサによって、または外部的に実行することもできる。しかしながら、プロセッサは、マルチ開口撮像装置の外部の構成要素を表すこともできる。
図６は、これまで説明した代替案の機器１０が例えば、携帯電話、スマートフォンまたはメディアプレーヤなどの携帯装置２００の平坦な筐体内に組込むことができ、この場合、イメージセンサ１２の平面またはイメージセンサ領域およびチャネル１４の光学系のレンズ面は、例えば、平坦な筐体の平坦な延長方向に垂直に、または、厚さ方向に平行に向けられることを示す。このように、ビーム偏向装置２４は、例えば、スクリーンを含む平坦な筐体の前面２０２の前に配置されるべき例えばマルチ開口撮像装置１０の全視界を提供する。あるいは、視野が前側２０２とは反対側の平坦なケーシングの裏側の前に位置する場合には、このような偏向が可能である。筐体は、光チャネル１４の光路を透過するように、貫通した側２０２に透明窓２０６を備えることができる。さらに、（機械的にに動かされる、エレクトロクロミック）切換え可能なダイヤフラムは、前面および／または背面の窓の開口部を通る光の入射に影響を及ぼすように取付けることができる。筐体の厚さに平行な装置１０の構造高さは、筐体内の装置１０の図示された位置によって小さく維持され得るので、装置２００の筐体または装置自体は平坦であり得る。切換可能性はまた、側面２０２の反対側の側面に窓を設け、例えば、２つの位置の間でビーム偏向装置を動かすことによって提供されてもよく、例えば、後者は、図９に示されているように表裏のミラーリングを行うミラーとして１つの位置から他の位置に回転させるか、または１つの位置のためのファセットの組と、他の位置のためのファセットの他の組を含むファセットミラーとして実行され、ファセットの組は、ライン延長方向に沿って互いに隣接して配置され、ライン延長方向に沿ったビーム偏向装置の並進往復運動は、位置間での切り替えを引き起こす。例えば、自動車のような携帯可能ではない別の装置に装置１０を設置することももちろん可能であろう。図７は、そのチャネルの部分視野が完全に同じ視野をカバーし、あるいは、任意には、合同であってもカバーするいくつかのモジュール１０が、例えば立体視目的のために、両方のモジュールに等しいライン延長方向に沿って互いの間の基本距離Ｂで装置２００内に設置できることを示す。２つ以上のモジュールも考えられる。モジュール１０のライン延長方向は、同一直線上になくてもよく、互いに平行であってもよい。しかしながら、すでに言及したように、装置１０またはモジュールは、グループ内の同じものがそれぞれ同じ全視野を完全にカバーするようにチャネルを装備することもできる。
光路または光軸が前の平行移動またはビーム偏向から外れる可能性があることはすでにすでに指摘されている。この状況は、チャネルが一種のプレ発散を提供され得るという点で以下に記載される。この光軸２２1〜２２4のプレ発散を使用して、例えば、全ての面の傾斜が異なるわけではなく、いくつかのチャネルのグループが等しく傾斜した面を例示的に含むことが可能である。後者は、一体的に形成されてもよいし、互いに連続的に、すなわち、ライン延長方向に隣接するチャネルのグループに関連するファセットとして連続的に統合されてもよい。これらのチャネルの光軸の発散は、光学系の光学中心とチャネルのイメージセンサ領域との間の横方向のオフセットによって達成されるので、これらの光軸の発散に起因する。プレ発散は、例えば、１つの平面に限定され得る。典型的には、ビーム偏向前または偏向なしの光軸は、一方の共通平面内にあるが、発散的な態様であってもよく、ファセットは他方の横断面において追加の発散のみを引き起こす、すなわちそれらは全てライン延長方向に平行であり、前述した光軸の共通平面とは異なるように互いに傾斜のみしており、ここでもいくつかのファセットは同一の傾斜を含むことができ、またはビーム偏向の前または偏向なしに、例えば、前述の光軸の共通平面内に既に存在する対で異なる光軸をチャネルのグループに共通に関連付けることができる。
このおよび前述のプレ発散は、例えば、光学系の光学中心がライン延長方向に沿って直線上に位置することによって達成され得、一方、イメージセンサ領域の中心は、イメージセンサ平面内の直線上の点、例えば、ライン延長方向に沿ったおよび／またはライン延長方向およびイメージセンサ法線の両方に垂直な方向に沿ってチャネル特有の方法でイメージセンサ平面における前述の直線上の点からずれた点、上のイメージセンサ領域の平面の法線に沿った光学中心の投射から偏向するように構成される。あるいは、イメージセンサの中心がライン延長方向に沿って直線上に位置することによって、プレ発散を達成することができるが、光学系の中心は、光学系中心平面の直線上の点、例えば、ライン延長方向に沿ったおよび／またはライン延長方向および光学中心平面の法線に垂直な方向に沿ったチャネル特有の態様における光学中心平面において前述の直線上の点から逸脱した点、の光学系の光学中心の平面の法線に沿ったイメージセンサの光学中心の投影からずれるように配置される。前述したそれぞれの投影からのチャネル特有の偏差は、単にライン延長方向にのみ、すなわちプレ発散が使用されている共通平面内に光軸が配置されることが好ましい。光学中心とイメージセンサ領域の中心の両方は、ライン延長方向に平行な直線上にあるが、異なる中間距離に位置する。これに対して、ライン延長方向に対して垂直な横方向のレンズとイメージセンサとの間の水平方向のオフセットは、より大きな構造的な高さをもたらす。ライン延長方向における純粋な面内オフセットは構造高さを変化させないが、ファセットはより少なくなり、及び／又はファセットは角度方向の傾斜のみを含み、それにより構造がより容易になる。一方で隣接するチャネル１４1,１４2と隣接するチャネル１４3,１４4とが光軸１４1,１４2,１４3,１４4を有する共通キャリア上に保持された図５による光学系の場合の図８ａと図８ｂに例示的に示すように、共通平面内にそれぞれ位置しているが、互いに対して斜めになっている、すなわち、プレ発散している。ファセット２６1,２６2はファセットで形成され、ファセット２６3,２６4は、ファセットの各対の間に破線で示されるように別のファセットによって形成されてもよく、唯一の２つのファセットは一方向にのみ傾斜し、両方ともライン延長方向に平行である。
さらに、例えば、超解像または対応する部分視野がこれらのチャネルによってサンプリングされることを使用し分解能を高めるために、一部の光チャネルが同じ部分視野に関連付けられるようにすることができる。そのようなグループ内の光チャネルは、例えば、ビーム偏向の前に平行であり、ファセットによって一部の視野に偏向される。有利には、グループのチャネルのイメージセンサの画素画像は、このグループの別のチャネルのイメージセンサの画素の画像の中間位置に配置される。
超解像度目的ではなく、立体視目的のためにのみ、例えば、ライン延長方向に直接的に隣接するチャネルのグループが、それらの部分的な視野を完全な視野で完全にカバーする実施例が考えられ、相互に直接的に隣接するチャネルの他のグループも全視野を完全にカバーする。
従って、上記の実施形態は、各チャネルが全視野の一部の視野を送信し、一部の視野が部分的に重なり合う単一ラインのチャネル構成を有するマルチ開口撮像装置の形態で実施されてもよい。立体画像撮影のためのステレオ、トリプル、クワドループルなどの構造のための複数のそのようなマルチ開口撮像装置を有する構造も可能である。従って、複数のモジュールは、連続した線として実装されてもよい。隣接するラインは、同一のアクチュエータおよび共通のビーム偏向要素を使用することができる。光路内に位置する１つまたは複数の実施基板は、ステレオ、トリプル、クワドループル構造を形成することができるライン全体にわたって延在してもよい。いくつかのチャネルが同じサブ画像領域を画像化する超解像度法を使用することができる。光軸は、既にビーム偏向装置がなくても発散できるので、ビーム偏向装置に必要なファセットはより少なくて済む。ファセットは有利には単一の角度成分のみを含む。イメージセンサは、単一のピースであってもよく、１つの連続した画素マトリクスまたは複数の分断された画素マトリクスのみを備えていてもよい。イメージセンサは、例えば、導電性基板上に互いに隣接して配置された多数のサブセンサで構成することができる。オートフォーカス駆動装置は、ビーム偏向素子が光学系と同期して動作されるか非稼動状態になるように構成されてもよい。

Claims (11)

  1. イメージセンサ（１２）と、
    互いに隣接して配置された光チャネル（１４1,１４2,１４3,１４4）の単一ラインアレイ（１４）であって、各光チャネルは、全視野（２８）の部分視野（３０1,３０2,３０3,３０4）を前記イメージセンサの各イメージセンサ領域（１２1,１２2,１２3,１２4）上に投射するための光学系（１６1,１６2,１６3,１６4）を含む、光チャネル単一ラインアレイと、
    前記光チャネルの光路（２２1,２２2,２２3,２２4）を偏向させるためのビーム偏向装置（２４）と、
    それぞれの光チャネルの前記イメージセンサ領域（１２1,１２2,１２3,１２4）、それぞれの光チャネルの前記光学系（１６1,１６2,１６3,１６4）および前記ビーム偏向装置（２４）の間の相対位置をチャネル特有に変更するため、あるいは前記それぞれの光チャネルの前記光学系（１６1,１６2,１６3,１６4）の光学特性または前記それぞれの光チャネルの前記光路の偏向に関する前記ビーム偏向装置のセグメント（２６1,２６2,２６3,２６4）をチャネル特有に変化させるための調整手段（９０;９６i;９８i;１００i）と、
    前記調整手段のためのデフォルト値が記憶された記憶装置および／または前記調整手段をチャネル特有に制御するために前記イメージセンサのセンサデータを前記調整手段のためのデフォルト値に変換するコントローラとを備える、マルチ開口撮像装置であって、
    前記ビーム偏向装置は、前記単一ラインアレイのライン延長方向に平行な回転軸の周りにチャネル全体が回転可能なように支持されており、
    前記マルチ開口撮像装置の光学的画像安定化制御装置によって制御される、前記回転軸を中心とした前記ビーム偏向装置（２４）の回転運動を生成するための第１のアクチュエータ（１０２ｃ）をさらに備え、
    第１の画像軸に沿った画像安定化は前記光チャネルの単一ラインアレイの光学系の並進運動により引き起こされ、かつ、第２の画像軸に沿った画像安定化は前記ビーム偏向装置の回転運動を発生させることによって引き起こされるように、前記マルチ開口撮像装置の前記光学的画像安定化制御装置によってさらに制御される、前記単一ラインアレイの前記ライン延長方向に沿った前記光チャネルの単一ラインアレイの光学系の並進移動のための第２のアクチュエータ（１０２ａ）をさらに備える、
    マルチ開口撮像装置。
  2. 前記調整手段は、
    少なくとも１つ、少なくとも２つ、または各チャネル（１４i）について、それぞれのチャネルの光学系をそれぞれのチャネルの光経路に対して横方向および／または縦方向に移動させるためのアクチュエータ（９６i）を備える、請求項１に記載のマルチ開口撮像装置。
  3. 前記調整手段は、
    少なくとも１つ、少なくとも２つ、または各チャネル（１４i）について、前記各光チャネルの前記光学系（１６i）の光学面の屈折率の局所分布または形状または前記各光チャネルの前記光路の偏向に関する前記ビーム偏向装置の前記セグメント（２６i）を変更するための位相変化素子（１００i）を備える、請求項１または２に記載のマルチ開口撮像装置。
  4. 前記調整手段は、
    少なくとも１つ、少なくとも２つ、または各チャネル（１４i）について、前記各光チャネルの光路の偏向に関する前記ビーム偏向装置の前記セグメントを傾斜させるためのアクチュエータ（９８i）を備える、請求項１ないし３のいずれかに記載のマルチ開口撮像装置。
  5. 前記調整手段に加えて、前記イメージセンサと前記単一ラインアレイと前記ビーム偏向装置の間でチャネル全体の相対運動を生成するためのアクチュエータ（１０２）をさらに備える、請求項１ないし４のいずれかに記載のマルチ開口撮像装置。
  6. 前記調整手段に加えて存在する前記アクチュエータは、前記マルチ開口撮像装置のオートフォーカスコントローラ（１０４）または画像安定化制御装置（１０６）の一部である、請求項５に記載のマルチ開口撮像装置。
  7. 前記複数の光チャネルの前記光路（２２1,２２2,２２3,２２4）に沿って前記複数の光チャネルの光学系を並進運動させるための第３のアクチュエータ（１０２ｂ）をさらに備える、請求項１ないし６のいずれかに記載のマルチ開口撮像装置。
  8. 前記第３のアクチュエータ（１０２ｂ）は、前記マルチ開口撮像装置のフォーカス制御装置により制御される、請求項７に記載のマルチ開口撮像装置。
  9. 前記デフォルト値は、光チャネル間の１つまたはいくつかの特性の分布のばらつきの尺度が、記憶された前記デフォルト値によって調整装置を制御することによって低減されるように前記コントローラが構成されるように適合されている、または光チャネル間の１つまたはいくつかの特性の分布のばらつきの尺度が、記憶された前記デフォルト値によって調整装置を制御することによって低減されるように前記コントローラが構成されるように、前記コントローラ内に、現在のセンサデータの適切なデフォルト値へのマッピングが固定的に統合され、
    ただし、記憶された前記デフォルト値は、
    部分視野の規則的な分布からの部分視野の横方向のずれ、
    光学系の焦点距離、
    前記光チャネルの被写界深度の距離である、
    請求項１ないし８のいずれかに記載のマルチ開口撮像装置。
  10. 前記デフォルト値または前記コントローラによる変換は、前記イメージセンサ領域のイメージセンサデータおよび／または温度、圧力、湿度、前記マルチ開口撮像装置の空間的位置および／または前記マルチ開口撮像装置の加速度および／またはマルチ開口撮像装置の回転速度に関するセンサのデータに依存する、請求項１〜９のいずれか１項に記載のマルチ開口撮像装置。
  11. イメージセンサ（１２）と、互いに隣接して配置された光チャネル（１４1,１４2,１４3,１４4）の単一ラインアレイ（１４）であって、各光チャネルは、全視野（２８）の部分視野（３０1,３０2,３０3,３０4）を前記イメージセンサの各イメージセンサ領域（１２1,１２2,１２3,１２4）上に投射するための光学系（１６1,１６2,１６3,１６4）を備える、単一ラインアレイ（１４）と、前記光チャネルの光路（２２1,２２2,２２3,２２4）を偏向させるためのビーム偏向装置（２４）であって、前記ビーム偏向装置は、前記単一ラインアレイのライン延長方向に平行な回転軸の周りにチャネル全体が回転可能なように支持されている、ビーム偏向装置とを備えるマルチ開口撮像装置を調整するための方法であって、前記方法は、
    記憶装置から前記調整のためのデフォルト値を読出す、または前記イメージセンサのセンサデータから前記調整のための前記デフォルト値を計算するステップと、
    デフォルト値におけるセンサデータに基づいて、各光チャネルのイメージセンサ領域（１２1,１２2,１２3,１２4）、各光チャネルの光学系（１６1,１６2,１６3,１６4）および前記ビーム偏向装置（２４）の間の相対位置をチャネル特有に変化させる、あるいは、各光チャネルの光学系の光学特性または各光チャネルの光路の偏向に関する前記ビーム偏向装置のセグメント（２６1,２６2,２６3,２６4）をチャネル特有に変化させるステップと、
    第１のアクチュエータ（１０２ｃ）によって前記ビーム偏向装置（２４）の前記回転軸の周りでの回転運動を生成し、前記マルチ開口撮像装置の光学的画像安定化制御装置によって前記第１のアクチュエータ（１０２ｃ）を制御するステップと、
    光チャネルの前記単一ラインアレイの光学系を第２のアクチュエータ（１０２ａ）によって前記単一ラインアレイのライン延長方向に沿って並進移動し、第１の画像軸に沿った画像安定化が光チャネルの前記単一ラインアレイの前記光学系の並進運動によって引き起こされ、かつ第２の画像軸に沿った画像安定化が前記ビーム偏向装置の前記回転運動を発生させることによって引き起こされるように、前記マルチ開口撮像装置の前記光学的画像安定化制御装置によって前記第２のアクチュエータ（１０２ａ）を制御するステップとを含む、方法。
JP2018509495A 2015-08-19 2016-08-18 チャネル特有の調整可能性を有するマルチ開口撮像装置 Active JP6790073B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102015215845.4 2015-08-19
DE102015215845.4A DE102015215845B4 (de) 2015-08-19 2015-08-19 Multiaperturabbildungsvorrichtung mit kanalindividueller Einstellbarkeit
PCT/EP2016/069653 WO2017029380A1 (de) 2015-08-19 2016-08-18 Multiaperturabbildungsvorrichtung mit kanalindividueller einstellbarkeit

Publications (2)

Publication Number Publication Date
JP2018533751A JP2018533751A (ja) 2018-11-15
JP6790073B2 true JP6790073B2 (ja) 2020-11-25

Family

ID=56801530

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018509495A Active JP6790073B2 (ja) 2015-08-19 2016-08-18 チャネル特有の調整可能性を有するマルチ開口撮像装置

Country Status (8)

Country Link
US (1) US10732377B2 (ja)
EP (1) EP3338131B1 (ja)
JP (1) JP6790073B2 (ja)
KR (1) KR102124774B1 (ja)
CN (1) CN108139565B (ja)
DE (1) DE102015215845B4 (ja)
TW (1) TWI617192B (ja)
WO (1) WO2017029380A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016200287A1 (de) 2016-01-13 2017-07-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtungen, Verfahren zum Herstellen derselben und Abbildungssystem
DE102017204035B3 (de) 2017-03-10 2018-09-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017012197B4 (de) * 2017-03-10 2021-04-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017206442B4 (de) * 2017-04-13 2021-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zur Abbildung von Teilgesichtsfeldern, Multiaperturabbildungsvorrichtung und Verfahren zum Bereitstellen derselben
DE102017206429A1 (de) 2017-04-13 2018-10-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung, Abbildungssystem und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017208709B3 (de) * 2017-05-23 2018-10-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrrichtung und Verfahren zum Bereitstellen einer Multiaperturabbildungsvorrichtung
DE102017211586A1 (de) 2017-07-06 2019-01-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit geringer falschlichtempfindlichkeit, abbildungssystem und verfahren zum bereitstellen einer multiaperturabbildungsvorrichtung
DE102017216172A1 (de) * 2017-09-13 2019-03-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multiaperturabbildungsvorrichtung mit geringer bauhöhe und umschaltbarer blickrichtung, abbildungssystem und verfahren zum bereitstellen einer multiaperturabbildungsvorrichtung
CN109360310A (zh) * 2018-10-11 2019-02-19 中控智慧科技股份有限公司 生物识别方法、芯片级系统和通道设备
DE102018222861A1 (de) 2018-12-21 2020-06-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zum Akkumulieren von Bildinformation
DE102018222865A1 (de) * 2018-12-21 2020-06-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte
DE102019204075B4 (de) * 2019-03-25 2022-03-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung mit einer Multiaperturabbildungsvorrichtung zur Erzeugung einer Tiefenkarte
CN111917946B (zh) * 2019-05-10 2021-11-19 荣耀终端有限公司 摄像模组及电子设备
CN112311969B (zh) * 2019-07-31 2022-05-10 华为技术有限公司 光学模组

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60151603A (ja) * 1984-01-18 1985-08-09 Canon Inc 光学素子
US5035472A (en) * 1990-06-20 1991-07-30 The United States Of America As Represented By The Secretary Of The Army Integrated multispectral man portable weapon sight
US6992699B1 (en) * 2000-08-02 2006-01-31 Telefonaktiebolaget Lm Ericsson (Publ) Camera device with selectable image paths
US7345277B2 (en) * 2000-08-09 2008-03-18 Evan Zhang Image intensifier and LWIR fusion/combination system
JP2002060621A (ja) * 2000-08-23 2002-02-26 Sumitomo Bakelite Co Ltd ポリフェニレンサルファイド樹脂組成物
JP2002171430A (ja) * 2000-11-30 2002-06-14 Canon Inc 複眼撮像系、撮像装置および電子機器
US8059185B2 (en) * 2005-12-28 2011-11-15 Canon Kabushiki Kaisha Photographing apparatus, image display method, computer program and storage medium for acquiring a photographed image in a wide range
WO2007091112A1 (en) * 2006-02-06 2007-08-16 Nokia Corporation Optical image stabilizer using gimballed prism
JP2008180773A (ja) * 2007-01-23 2008-08-07 Nikon Corp デジタルカメラおよび光学機器
WO2009097552A1 (en) * 2008-02-01 2009-08-06 Omnivision Cdm Optics, Inc. Image data fusion systems and methods
US7978222B2 (en) * 2008-03-01 2011-07-12 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Systems and methods for image stabilization
US20140055624A1 (en) * 2012-08-23 2014-02-27 Microsoft Corporation Switchable camera mirror apparatus
JP2014060621A (ja) * 2012-09-18 2014-04-03 Ricoh Co Ltd 光学部品位置合わせ装置
US9398264B2 (en) * 2012-10-19 2016-07-19 Qualcomm Incorporated Multi-camera system using folded optics
DE102013209819B4 (de) 2013-05-27 2018-01-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Optische Struktur mit daran angeordneten Stegen und Verfahren zur Herstellung derselben
CN105917641B (zh) * 2013-08-01 2018-10-19 核心光电有限公司 具有自动聚焦的纤薄多孔径成像系统及其使用方法
US9197816B2 (en) * 2013-10-18 2015-11-24 The Lightco Inc. Zoom related methods and apparatus
JP2016541151A (ja) * 2013-10-18 2016-12-28 ザ ライト・コ インコーポレイテッド カメラデバイスを実施および／または使用するための方法および装置
CN203745777U (zh) * 2014-01-10 2014-07-30 瑞声声学科技(深圳)有限公司 阵列式镜头装置
TWI494680B (zh) * 2014-01-28 2015-08-01 Altek Semiconductor Corp 影像擷取裝置及其影像形變校正方法
DE102014213371B3 (de) * 2014-07-09 2015-08-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und verfahren zur erfassung eines objektbereichs
CN105966352B (zh) 2015-10-21 2018-06-12 乐卡汽车智能科技（北京）有限公司 一种远程控制方法及装置

Also Published As

Publication number Publication date
CN108139565A (zh) 2018-06-08
US20180172945A1 (en) 2018-06-21
EP3338131B1 (de) 2021-07-28
DE102015215845A1 (de) 2017-02-23
WO2017029380A1 (de) 2017-02-23
TWI617192B (zh) 2018-03-01
EP3338131A1 (de) 2018-06-27
DE102015215845B4 (de) 2017-06-22
CN108139565B (zh) 2021-06-25
KR102124774B1 (ko) 2020-06-19
TW201711443A (zh) 2017-03-16
JP2018533751A (ja) 2018-11-15
KR20180042341A (ko) 2018-04-25
US10732377B2 (en) 2020-08-04

Similar Documents

Publication Publication Date Title
JP6790073B2 (ja) チャネル特有の調整可能性を有するマルチ開口撮像装置
US11474331B2 (en) Device comprising a multi-aperture imaging device, method for producing same and method for capturing a total field of view
US10606152B2 (en) Multi-aperture imaging device, imaging system and method for capturing an object area
US11290649B2 (en) Multi-aperture imaging device comprising an optical substrate
US10771668B2 (en) Multi-aperture imaging device, imaging system and method for capturing an object area
JP6643460B2 (ja) 反射ファセットを有するビーム偏向装置を備えた多開口撮像装置
US10362229B2 (en) Multi-aperture imaging device, portable device and method of producing a multi-aperture imaging device
TWI665469B (zh) 3d多孔徑成像裝置、多孔徑成像裝置、處理輸入訊號之裝置、影像訊號、提供3d多孔徑成像裝置之輸出訊號的方法、擷取全視野之方法
JP2020122969A (ja) 多開口撮像デバイス、撮像システム、および多開口撮像デバイスを提供する方法
TW201713993A (zh) 包含多通道成像器件之裝置及其製造方法
TWI754907B (zh) 用以產生深度圖之包含多光圈影像裝置之裝置
CN113330730A (zh) 包括用于累积图像信息的多孔径成像设备的设备

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180419

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180419

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190322

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200128

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200424

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201006

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201104

R150 Certificate of patent or registration of utility model

Ref document number: 6790073

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250