JP2006146194A - 複数の開口を有するフィルタを用いるオートフォーカス - Google Patents

複数の開口を有するフィルタを用いるオートフォーカス Download PDF

Info

Publication number
JP2006146194A
JP2006146194A JP2005317132A JP2005317132A JP2006146194A JP 2006146194 A JP2006146194 A JP 2006146194A JP 2005317132 A JP2005317132 A JP 2005317132A JP 2005317132 A JP2005317132 A JP 2005317132A JP 2006146194 A JP2006146194 A JP 2006146194A
Authority
JP
Japan
Prior art keywords
image
sensing device
defocus
image sensing
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005317132A
Other languages
English (en)
Inventor
D Amnon Silverstein
ディー・アムノン・シルヴァースタイン
Henryk Birecki
ヘンリク・ビレッキ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hewlett Packard Development Co LP
Original Assignee
Hewlett Packard Development Co LP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Development Co LP filed Critical Hewlett Packard Development Co LP
Publication of JP2006146194A publication Critical patent/JP2006146194A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/40Optical focusing aids
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/007Optical devices or arrangements for the control of light using movable or deformable optical elements the movable or deformable optical element controlling the colour, i.e. a spectral characteristic, of the light
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/34Systems for automatic generation of focusing signals using different areas in a pupil plane
    • G02B7/346Systems for automatic generation of focusing signals using different areas in a pupil plane using horizontal and vertical areas in the pupil plane, i.e. wide area autofocusing
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B11/00Filters or other obturators specially adapted for photographic purposes
    • G03B11/04Hoods or caps for eliminating unwanted light from lenses, viewfinders or focusing aids
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/18Focusing aids
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters

Abstract

【課題】シャッタ遅れ時間を短くする。
【解決手段】カメラのオートフォーカスシステムに用いるための、複数の開口を有するフィルタは、光を遮断する1つの不透明部分と、その中を光が通過する複数の開口とを有する。他の例では、複数の開口のそれぞれが、異なる色に対応するカラーフィルタを含んでいる。もう1つの例では、その中を光が通過する非対称の形状の開口が設けられている、光を遮断する不透明部分を有する。フィルタリングされた光に基づくデフォーカス判定が行われ、かつ、光学システムとイメージセンシングデバイスとの間の距離についての調整が、判定されたデフォーカスに基づいて決定される。
【選択図】図1

Description

本発明は、包括的には、カメラのためのオートフォーカスシステムに関し、さらに詳しくは、複数の開口を有するフィルタを用いるオートフォーカスシステムする。
シャッタ遅れ時間は、写真を撮影するためにユーザがシャッタボタンを押す時刻と、像が実際に捕捉される時刻との間の時間であり、それはカメラユーザを満足させるために最も重要な性能仕様のうちの1つである。
シャッタ遅れ時間の最も大きな要因になるのは、レンズとイメージセンシングデバイスとの間の距離を調整し、対象となるイメージエリアにおいて、より鮮明な焦点整合を達成するためのオートフォーカスである。許容可能な焦点を得るために、同じ像の複数のショットとコンボリューション技法とに基づいて、何度も繰返し調整することが必要な場合もあり、それゆえシャッタ遅れ時間が長くなる一因になる。シャッタ遅れ時間を大幅に削減するように、1つの捕捉された像、及びさらに簡単な計算に基づいてデフォーカスの度合いを判定することができるオートフォーカス技法が極めて望ましい。
[発明の概要]
本発明はオートフォーカスシステムにおいて用いるための複数開口フィルタ(multiple aperture filter)の1つ又は複数の実施形態を提供する。一実施形態では、そのフィルタは、光を遮断する不透明部分と、その中を光が通過する透明な複数の開口とを備える。別の実施形態では、そのフィルタは複数の開口を備え、複数の開口はそれぞれ、イメージセンシングデバイス上に対応するカラーイメージを形成するための異なるカラーフィルタを含む。本発明の別の実施形態では、そのフィルタは、光を遮断する不透明部分と、その中を光が通過する非対称な形状の開口とを備える。
本発明の一実施形態によるオートフォーカスシステムは,光学システムとイメージセンシングデバイスとの間に光学的に位置合わせされ、イメージセンシングデバイス上に同じ像の複数の像表現を形成するための、複数の開口を含むフィルタと、イメージセンシングデバイスに通信可能に接続され、イメージセンシングデバイス上の複数の像表現に基づいて像のデフォーカスを判定するためのデフォーカス判定モジュールと、判定されたデフォーカスに基づいて、光学システムとイメージセンシングデバイスとの間の距離を調整するための調整モジュールとを備える。
本発明の一実施形態による像のデフォーカスを判定するための方法は、イメージセンシングデバイス上に同じ像の複数の像表現を生成するステップと、イメージセンシングデバイス上の複数の像表現に基づいて像のデフォーカスを判定するステップと、判定されたデフォーカスに基づいて光学システムとイメージセンシングデバイスとの間の距離を調整するステップとを含む。
この概要において述べられる特徴及び利点、並びに、以下に記載される詳細な説明は、包括的ではなく、特に、図面、明細書及び特許請求の範囲に鑑みて、当業者にはさらに多くの特徴及び利点が明らかになるであろう。さらに、本明細書において用いられる用語は主に、読みやすさ及び教示のために選択されており、場合によっては発明内容を正確に説明したり、又は発明内容の範囲を明確にしたりするために選択されていない場合もあるので、そのような発明内容を定めるには特許請求の範囲を頼る必要があることに留意すべきである。
それらの図は、例示する目的のためだけに、本発明の実施形態を示している。本明細書に記載される本発明の原理から逸脱することなく、本明細書に例示される構造及び方法の他の実施形態が用いられる場合もあることは、以下に記載される説明から当業者には容易に理解されよう。
図1は、本発明の一実施形態による、複数開口フィルタを用いるオートフォーカスシステム12を含むカメラ10の機能ブロック図である。カメラ10には、静止画カメラ,動画カメラ(例えばビデオカメラ),又はその2つの組み合わせを用いることができ、そのカメラは、通信バス38を介して、ユーザインターフェースモジュール24,記憶モジュール22,及び通信インターフェースモジュール32に通信可能に接続されるオートフォーカスシステム12を備える。オートフォーカスシステム12は、通信バス38を介して、調整モジュール34及び撮像システム26に通信可能に接続されるデフォーカス判定モジュール20を備える。撮像システム26は、イメージセンシングデバイス30と光学的に結合されかつ位置合わせされる、複数開口フィルタ54を含む光学システム28を含む。オートフォーカス中に、光学システム28によって受光された光は複数開口フィルタ54によってフィルタリングされて、結果として、イメージセンシングデバイス30上に同じ像の複数の像表現(image representation)が生成される。複数開口フィルタ54は、イメージセンシングデバイス30上に光の分布をもたらし、その分布は、デフォーカスに応じて変化する。イメージセンシングデバイス30は、この光の分布の検出し、それを、デフォーカスを判定する際にデフォーカス判定モジュール20によって用いることができるコンピュータ読取り可能データとして表す。一例では、イメージセンシングデバイス30は、受光された光の強度を表す光子をコンピュータ読取り可能データに変換する光検出素子から成る電荷結合デバイス(CCD)アレイとして具現することができる。
デフォーカス判定モジュール20は、光学システム28とイメージセンシングデバイス30との間の距離(記述を簡単にするために、これ以降、「像距離」とも呼ばれる)の調整値を判定し、像距離に対する調整値を調整モジュール34に伝達する。調整モジュール34は、判定モジュール20からの距離調整値に基づいて1つ又は複数の素子を動かすための撮像システム26内にある1つ又は複数の素子に機械的に接続される。一例では、調整モジュール34は、ステッパモータユニットの制御下で撮像システムの素子を動かすことができる機械式アクチュエータとして具現される。
撮影されるシーン内にある物体は、光学システムへの異なる被写体距離を有するので、遠くにある物体のための焦点は、近くにある物体のための焦点と同じ平面にはない。通常、イメージセンシングデバイス30は、複数のブロックに分割され、デフォーカス判定は、ブロック毎に行われる。デフォーカス判定モジュール20は、異なるブロック毎に判定されたデフォーカスを用いて、そのシーンの像のための深度マップを作成することができる。デフォーカス判定モジュール20は、選択されたブロックのための距離調整値を判定する。そのブロックは判定基準に基づいて選択される。判定基準の一例は、デフォルトとして、LCDビューファインダディスプレイ36の中央にある焦点エリア内の被写体からの光を受光するブロックを用いることである。オートフォーカスモードでは、ユーザインターフェース24は、オートフォーカスの基準として別の焦点エリアを指示するためにユーザが選択することができる、オートフォーカスエリアのための指示子を表示することができる。
デフォーカス判定モジュール20は、ブロック毎の判定されたデフォーカス及び調整値を記憶モジュール22に記憶する。記憶モジュール22は、データを記憶し、そのデータはソフトウエア命令、並びに、計算のためのデータ及びイメージデータを含むことができる。
ユーザインターフェースモジュール24は、ユーザからの入力、例えばカメラ上のボタンを押すことによって指示される入力を処理し、この例ではシーンを表示するためのビューファインダとしての役割も果たす液晶ディスプレイ(LCD)であるディスプレイ36上に、ユーザに対する情報を表示することもできる。さらに、通信インターフェース32は、カメラが画像のようなデータを通信することができる、外部デバイスのためのインターフェースを提供する。
図1に示される各モジュール及びその一部は、プロセッサにおいて実行し、かつ、コンピュータ利用可能媒体に記憶するのに適したソフトウエア,若しくはハードウエア,若しくはファームウエア,又はこれらの任意の組み合わせで実装することができる。コンピュータ利用可能媒体は、プログラム,データ,又は他のデジタル情報を記憶することができる任意の構成を含む。コンピュータ利用可能媒体の例には、種々の形態において取り付けることができる、ランダムアクセスメモリ及びリードオンリーメモリのような種々のメモリの実施形態が含まれ、それらのメモリのいくつかの例には、ハードディスク,ディスク,フラッシュメモリ,又はメモリスティックがある。
図2は、本発明の1つ又は複数の実施形態において用いることができる、

複数開口フィルタ54を備えた光学システム28と、オートフォーカスシステムにおいて用いるためのイメージセンシングデバイス30とを有する、本発明の1つ又は複数の実施形態において用いることができる撮像システム26のブロック図である。この光学システム28は、イメージセンシングデバイス30に光を誘導するために、光学軸40を中心にして配置される三重レンズシステムとして配列される。三重レンズシステムは、光学軸40に対して位置合わせされた両凸前方レンズ42,両凹中央レンズ43,及び両凸後方レンズ44を含む。複数開口フィルタ54の一実施形態が、光学軸40と位置合わせされて配置される開口絞り48に配置される。
この実施形態では、イメージセンシングデバイス30は、電荷結合デバイス(CCD)として具現され、その電荷結合デバイスは、フィルタ52に光学的に結合され、赤,緑,青(RGB)モザイクパターンを与えるように構成される光検出素子50のアレイを含み、デジタル表現の個々のピクセルに対応する個々の光検出素子は、フィルタによって規定される赤色,緑色,又は青色に対して特に感度が高い。イメージセンシングデバイス30の別の実施形態では、CCDアレイの光検出素子は、それぞれ、個々の色に対応するので(例えば、Foveon社の技術を用いて作製されるCCD)、フィルタ52は不要である。
図3Aは、本発明の一実施形態による、光を遮断する不透明部分324と、その中を光が通過する複数の透明な開口320,322とを備える複数開口フィルタ154を示す。この例では、そのシーンが焦点から外れる場合には、イメージセンシングデバイス30上に2つの重なり合う像が形成されるであろう。結果として生成される二重の像は、単一の完全に焦点が合った像を、開口フィルタ154と同じ形状を有し、デフォーカスの量に比例する量だけ拡大縮小されているぼけカーネルでコンボルブする結果と概ね同じである。ぼけカーネルを推定することができる場合には、デフォーカスの度合い及び大きさを概ね判定することができる。未知のぼけカーネルを見つけるための1つのよく知られている方法は「ブラインド・デコンボリューション」である。ぼけカーネルが見つけられた後に、開口フィルタ154とサイズを比較される。フィルタ154のサイズに対するぼけカーネルのサイズの比は、イメージセンシングデバイス30とフィルタ154との間の距離に対する焦点面からイメージセンシングデバイス30までの距離に比例するであろう。
フィルタ154が2つの小さな開口154から成る場合には、ぼけカーネルは、デフォーカスの度合いに比例する距離だけ離隔した2つの点と概ね同じになるであろう。この場合、自己相関を用いて、2点間の距離を判定することができる。像が2つの開口の軸に沿って自己相関されるとき、自己相関関数は3つの鋭いピークを有するであろう。第1のピークと中央のピークとの間の距離は、そのカーネルの2点間の距離に等しくなり、この距離はデフォーカスの度合いに比例するであろう。
図3Bは、本発明のさらに別の実施形態による、光を遮断する不透明部分336と、その中を光が通過する非対称の形状の開口332,334とを備える複数開口フィルタ254を示す。図3Aの実施形態において示されるような同一の透明な開口部は、デフォーカスの方向、例えば像が焦点の内側にあるか、外側にあるかに関する情報を提供しない。この曖昧さを解決するための1つの方法は、非対称の形状の開口を用いて、デコンボリューション又は自己相関の何れかに基づくデフォーカス判定がデフォーカスの量及び方向の両方を与えることができるようにすることである。デコンボリューション及び自己相関は、何れも、オートフォーカス時間、それゆえシャッタ遅れ時間を長くするコンボリューションに関連する複雑な数学的計算を必要とする。
図3Cは、本発明の別の実施形態による、光を遮断する不透明部分307と、それぞれが異なるカラーフィルタを含む開口302,304とを備える複数開口フィルタ354を示す。赤色開口302及び青色開口304のような有色の開口を用いることにより、複雑なコンボリューションに基づく技法の代わりに、はるかに簡単な相互相関技法を用いることができる。異なる色に対して感度が高い光検出素子とともに、異なるカラーフィルタを用いることにより、2つの像の境界がより容易に検出される。それらの境界の検出から、2つの像間で対応するブロックを判定することができるので、選択されたブロック内の対象物、又はそのシーンのブロック状の深度マップのための、量及び方向を含むデフォーカスを判定することができる。
図3Dは、本発明のさらに別の実施形態による、光を遮断する不透明部分301と、カラーフィルタ開口305,309とを備える、別の形態の複数開口フィルタ454を示す。赤色開口305はフィルタ454の上側を形成し、青色開口309はフィルタの下側を形成し、その両側は中央の不透明部分301によって分離される。
相互相関を例示する一例として、前景にいる人物が、その人の50フィート後方にある高い木を背景にして写真を撮られているシーンについて考える。その人物の頭の先端のための焦点がイメージセンシングデバイス30の平面の後方にあり、高い木の先端のための焦点がイメージセンシングデバイス30の平面の前方にくる。この例では、オートフォーカスシステムはRGBモザイクを有するCCDアレイ30を含み、複数開口フィルタ354又は454が、その像からの光を受光するように位置合わせされる。木の先端を含む赤色像ブロック及び青色像ブロックからの色検出強度データを比較して、デフォーカス判定モジュール20は、赤色像ブロック内の木の先端が、青色像ブロック内の木の先端の右の方に約2ピクセル幅に相当する長さだけ広がることを検出する。同様に、デフォーカス判定モジュール20は、赤色像ブロック内の人物の頭の先端が、青色像ブロック内の頭の先端の左の方に約1ピクセル幅に相当する長さだけ広がることを検出する。2つの像の水平方向及び垂直方向の両方の分離を検出することができる。こうして、CCDデバイス30の色検出素子によって測定される対照的な色強度によって、コンボリューションを基にする技法を用いる場合よりも、デフォーカスの方向及び量を判定するのが容易になる。
図3C及び図3Dに示される実施形態のようなフィルタを用いることにより、デフォーカス判定モジュール20によって、二重になった像のためのデータを処理して、個々のピクセル値によって表されるような焦点調整不良のイメージエリアをシフトして、より鮮明な焦点を得るためのより良好な焦点整合状態にすることができる。
図3Eは、本発明のさらに別の実施形態による、光を遮断する不透明部分354と、3つのカラーフィルタ開口、すなわち赤色開口353、青色開口352及び緑色開口351とを備える、別の形態の複数開口フィルタ355を示す。この実施形態では、イメージセンシングデバイス30上に3つの像が形成され、フィルタの組(例えば、赤色及び緑色、青色及び緑色、並びに赤色及び青色)毎に1回ずつの3回の相互相関が実行され、それにより、デフォーカス判定において、より包括的なデータ及びより高い精度が与えられる。
考慮すべき事柄に基づいて、カラー開口を有するフィルタ(例えば354、454、355)毎に開口サイズを変更することができる。例えば、開口を大きくする結果として光が増えるので、複数開口フィルタをオートフォーカスモードから取り出す必要がなくなり、モータ摩耗が減少し、電池寿命が節約されるようになるであろう。しかしながら、特に緑色フィルタと青色フィルタとの間で重なりが生じる可能性があり、それによりカラーコントラストが減少し、デフォーカス判定がより難しくなる。
図3Fは、本発明のさらに別の実施形態による、その中を可視光が通過する部分315と、3つのカラーフィルタ開口、すなわち赤色光をフィルタリングするための開口316と、緑色光をフィルタリングするための開口312と、青色光をフィルタリングするための開口314とを含むリング部分310とを備えるフィルタ554を示す。この例では、開口は、120°の同じサイズの弧から成り、リングを構成する。3つのカラーマスクフィルタ554を用いることにより、写真のカラーバランスが影響を及ぼされないようにすることができる。リングレイアウト310は、主に、フィルタ554で検出されるオートフォーカス信号に最も寄与する周辺光線に焦点を合わせる。像のための光は、透明な内側部分315及び透明な外側部分317において遮断されることなく受光される。3つのカラーリングフィルタ554は、フォーカス信号が、撮影されるシーンに含まれる色の量に潜在的に影響を受けにくいという利点も提供する。リングの直径を、最大レンズ開口318内で最適化して、フォーカス信号を最大にし、全光損失を最小限に抑えることができる。さらに、レンズ収差を導入しないように、必要に応じて、種々のエリアの厚みを変更することができる。また球面収差はレンズの不変の特性であるので、デジタル信号処理において補正することができる。
図4は、図3Dのフィルタ454によって生成されるフィルタリングされた光の幾何学的な表現を示しており、その表現を用いて、本発明の一実施形態によるデフォーカス判定のための相互相関アルゴリズムを実施することができる。相互相関のために用いられる幾何学的表現は三角形である。その考察は、説明を容易にするために、光線の点から見ている。光線62が赤色フィルタ開口302を通過し、その結果として、対応する赤色光線が像平面においてイメージセンシングデバイス30を横切る。光線64が青色フィルタ開口304を通過し、その結果として、対応する青色光線が像平面においてイメージセンシングデバイス30を横切る。光線62がフィルタ454を横切る交点と光線64がフィルタ454を横切る交点との間の距離Uはわかっている。色検出素子の測定値から、イメージデバイス30は、赤色光線及び青色光線の交点を検出する。イメージデバイス30の色検出素子間のピクセル幅がわかっているので、赤色光線の交点と青色光線の交点との間の距離Vを判定することができる。また、光線62がフィルタ454を横切る交点及び光線64がフィルタ454を横切る交点、並びに赤色光線がイメージセンシングデバイス30を横切る交点及び青色光線がイメージセンシングデバイス30を横切る交点から、所望の焦点60の場所が決定される。文字bはフィルタ454から焦点60までの距離を表す。相似三角形が形成され、その三角形から、光学システム28からイメージセンシングデバイス30までの距離の調整値(b−a)を決定することができる。この場合には直角三角形である第1の相似三角形が、U/2、b及び赤色光線によって表される辺から形成される。同じく直角三角形である第2の相似三角形が、この場合、V/2、(b−a)及び斜辺として赤色光線から成る辺によって形成される。それらの相似三角形は同じ角度を共有する。第2の相似三角形は第1の相似三角形に比例する三角形である。従って、V/2がU/2に比例するので、(b−a)はbに比例する。従って、(b−a)は((V/2)/(U/2))bに等しい。
図5は、本発明の一実施形態による、複数の開口を含むフィルタを用いるイメージキャプチャデバイスのオートフォーカスのための方法を示す。単なる例示であって、限定はしないが、図5の方法の実施形態500は、図1のシステムの実施形態100との関連で説明される。デフォーカス判定モジュール20は、ステップ502において、カウンタ変数をイメージエリアのブロックの数に設定し、ステップ504において、ブロック(カウンタ)によって表される過程である、現在のブロックにおける相互相関アルゴリズムを実行して、そのブロックのためのデフォーカスの度合いを求め、ステップ506において、ブロック(カウンタ)のためのデフォーカスの度合いを記憶モジュール22に記憶する。その後、デフォーカス判定モジュールは、ステップ508において、カウンタを1だけデクリメントし、ステップ510において、ブロックの数が処理されたか否かを判定する。いくつかのブロックがまだ処理されていないことに応答して、デフォーカス判定モジュール20は、ステップ504において、次のブロックのための相互相関アルゴリズム、ブロック(カウンタ)を実行し、そのデフォーカスの度合いを判定し、ステップ506において記憶モジュール22にも記憶される。再び、ステップ508において、カウンタがデクリメントされ、ステップ510において、デフォーカスモジュール20は、別のブロックが処理されるべきであるか否かを判定する。ステップ510において、処理すべきブロックがそれ以上存在しないものと判定するのに応答して、デフォーカスモジュール20は、512において、デフォーカスがあるブロックを選択して、ステップ514において、デフォーカスの度合いに基づいて、光学システム28とイメージセンシングデバイス30との間の距離、すなわち像距離に対する調整値を判定する。デフォーカスモジュール20は、ユーザ入力に応答する調整値に基づいて、又は他の考慮すべき事柄に基づいて、別のブロックを選択してもよい。他の考慮すべき事柄の一例は、別のブロックのデフォーカスがパラメータの範囲外まで劣化することであろう。デフォーカスモジュール20は、判定された調整値を調整モジュール34に伝達し、調整モジュール34は、ステップ516において、判定された調整値に基づいて、光学システム28とイメージセンシングデバイス30との間の距離を調整する。
本発明の実施形態に関する上記の説明は、例示及び説明のために提供されてきた。それは、本発明を余すところなく述べることや、開示された形態そのものに限定することを意図していない。上記の教示に鑑みて、数多くの変更形態及び変形形態が可能である。本発明の範囲はこの詳細な説明によって限定されるのではなく、むしろ添付の特許請求の範囲によって限定されることが意図されている。当該技術分野の熟練者であれば、本発明の精神及び不可欠な特徴から逸脱することなく、本発明が他の具体的な形態において具現されてもよいことは理解されよう。
本発明の一実施形態による複数開口フィルタを用いるオートフォーカスシステムを含むカメラの機能ブロック図である。 本発明の1つ又は複数の実施形態において用いることができる、イメージセンシングデバイス上に同じ像の複数の像表現を形成するための複数開口フィルタを含む、オートフォーカスシステムにおいて用いるための撮像システムのブロック図である。 本発明の一実施形態による、光を遮断する不透明部分と、その中を光が通過する複数の透明な開口とを備える複数開口フィルタを示す図である。 本発明のさらに別の実施形態による、光を遮断する不透明部分と、その中を光が通過する非対称な形状の開口とを備える複数開口フィルタを示す図である。 本発明の別の実施形態による、光を遮断する不透明部分と、それぞれが異なるカラーフィルタを含む複数の開口とを備える複数開口フィルタを示す図である。 本発明のさらに別の実施形態による、光を遮断する不透明部分と、複数のカラーフィルタ開口とを備える、別の形態の複数開口フィルタを示す図である。 本発明のさらに別の実施形態による、光を遮断する不透明部分と、複数のカラーフィルタ開口とを備える、別の形態の複数開口フィルタを示す図である。 本発明のさらに別の実施形態による、フィルタの中を可視光が通過する部分と、3つのカラーフィルタ開口を含むリング部分とを備えるフィルタを示す図である。 本発明の一実施形態による、それを基にしてデフォーカス判定のための相互相関アルゴリズムを実施することができる、図3Dのフィルタによって生成されるフィルタリングされた光の幾何学的表現を示す図である。 本発明の別の実施形態による、或る像のためのデフォーカスを判定するための方法を示す図である。

Claims (10)

  1. 光検出素子を含み、前記光検出素子からコンピュータ読取り可能データを与えるためのイメージセンシングデバイスと、
    前記イメージセンシングデバイスと光学的に位置合わせされ、前記イメージセンシングデバイスから像距離だけ離隔する光学システムと、
    前記光学システムと前記イメージセンシングデバイスとの間に光学的に位置合わせされ、前記イメージセンシングデバイス上の同じ像の複数の像を形成するための、複数の開口を含むフィルタと、
    前記イメージセンシングデバイスに通信可能に接続され、前記光検出素子からの前記コンピュータ読取り可能データに基づいて像のデフォーカスを判定し、像距離調整値を決定するためのデフォーカス判定モジュールと、
    前記像距離調整値に基づいて前記光学システムと前記イメージセンシングデバイスとの間の前記像距離を調整するための調整モジュールと、
    を備えることを特徴とするオートフォーカスシステム。
  2. 前記デフォーカス判定モジュールは、前記像のデフォーカスを判定するために、前記コンピュータ読取り可能データにおいてデコンボリューションを実行することを特徴とする請求項1に記載のオートフォーカスシステム。
  3. 前記デフォーカス判定モジュールは、前記像の前記デフォーカスを判定するために、前記コンピュータ読取り可能データにおいて自己相関を実行することを特徴とする請求項1に記載のオートフォーカスシステム。
  4. 前記複数の開口は、それぞれ、前記イメージセンシングデバイス上に異なる色の像を形成するために、異なる色のカラーフィルタを備えることを特徴とする請求項1に記載のオートフォーカスシステム。
  5. 前記デフォーカス判定モジュールは、異なる色毎に形成される像のための前記コンピュータ読取り可能データにおいて相互相関を実行することを特徴とする請求項4に記載のオートフォーカスシステム。
  6. それぞれ異なるカラーフィルタは、前記イメージセンシングデバイス上の色検出素子の色感度に一致することを特徴とする請求項4に記載のオートフォーカスシステム。
  7. 前記フィルタは、前記カラーフィルタの外側にあるエリアにおいて透明であることを特徴とする請求項4に記載のオートフォーカスシステム。
  8. 前記フィルタは、オートフォーカスが完了した後の像捕捉中に前記光学システム及び前記イメージセンシングデバイスと位置合わせされたままであることを特徴とする請求項4に記載のオートフォーカスシステム。
  9. オートフォーカスのための方法であって、
    イメージセンシングデバイス上で同じ像の複数の像表現を生成するステップと、
    前記複数の表現のためのデータに基づいて前記像のデフォーカスを判定するステップと、
    前記イメージセンシングデバイスと光学的に位置合わせされる光学システムと前記イメージセンシングデバイスとの間の像距離に対する調整量を決定するステップと、
    前記決定された調整量に基づいて前記像距離を調整するステップと、
    を含むことを特徴とするオートフォーカスのための方法。
  10. 前記複数の像表現は、異なる色の同じ像にカラーフィルタをかけた表現に対応し、前記像のためのデフォーカスを判定するステップは、異なるカラーフィルタをかけられた表現の各組間の相互相関を実行するステップをさらに含むことを特徴とする請求項9に記載の方法。
JP2005317132A 2004-10-31 2005-10-31 複数の開口を有するフィルタを用いるオートフォーカス Pending JP2006146194A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/979,013 US20060092314A1 (en) 2004-10-31 2004-10-31 Autofocus using a filter with multiple apertures

Publications (1)

Publication Number Publication Date
JP2006146194A true JP2006146194A (ja) 2006-06-08

Family

ID=36261340

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005317132A Pending JP2006146194A (ja) 2004-10-31 2005-10-31 複数の開口を有するフィルタを用いるオートフォーカス

Country Status (2)

Country Link
US (1) US20060092314A1 (ja)
JP (1) JP2006146194A (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090107536A (ko) * 2007-01-22 2009-10-13 캘리포니아 인스티튜트 오브 테크놀로지 정량적 3-d 이미징을 위한 방법
US8089635B2 (en) 2007-01-22 2012-01-03 California Institute Of Technology Method and system for fast three-dimensional imaging using defocusing and feature recognition
WO2008133959A1 (en) * 2007-04-23 2008-11-06 California Institute Of Technology Single-lens 3-d imaging device using a polarization-coded aperture maks combined with a polarization-sensitive sensor
WO2010027391A2 (en) 2008-08-27 2010-03-11 California Institute Of Technology Method and device for high-resolution three-dimensional imaging which obtains camera pose using defocusing
JP5336952B2 (ja) * 2009-07-02 2013-11-06 キヤノン株式会社 光学機器
US20110018993A1 (en) * 2009-07-24 2011-01-27 Sen Wang Ranging apparatus using split complementary color filters
US8363093B2 (en) * 2009-07-27 2013-01-29 Eastman Kodak Company Stereoscopic imaging using split complementary color filters
US8773507B2 (en) * 2009-08-11 2014-07-08 California Institute Of Technology Defocusing feature matching system to measure camera pose with interchangeable lens cameras
WO2011031538A2 (en) * 2009-08-27 2011-03-17 California Institute Of Technology Accurate 3d object reconstruction using a handheld device with a projected light pattern
JP2011064988A (ja) * 2009-09-18 2011-03-31 Canon Inc 撮像装置およびレンズ装置
JP5227368B2 (ja) * 2010-06-02 2013-07-03 パナソニック株式会社 3次元撮像装置
DE102010023344A1 (de) 2010-06-10 2012-01-19 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Kameraobjektiv und Kamerasystem
JP5507362B2 (ja) 2010-06-30 2014-05-28 パナソニック株式会社 3次元撮像装置および光透過板
CN103221975B (zh) 2010-09-03 2017-04-19 加州理工学院 三维成像系统
JP5635844B2 (ja) * 2010-09-06 2014-12-03 キヤノン株式会社 焦点調整装置および撮像装置
US8619182B2 (en) 2012-03-06 2013-12-31 Csr Technology Inc. Fast auto focus techniques for digital cameras
US9530214B2 (en) * 2014-12-04 2016-12-27 Sony Corporation Image processing system with depth map determination based on iteration count of blur difference and method of operation thereof
US10613417B2 (en) * 2015-06-03 2020-04-07 Center For Integrated Smart Sensors Foundation Multi-aperture camera system having auto focusing function and/or depth estimation function
US11406264B2 (en) 2016-01-25 2022-08-09 California Institute Of Technology Non-invasive measurement of intraocular pressure

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5193124A (en) * 1989-06-29 1993-03-09 The Research Foundation Of State University Of New York Computational methods and electronic camera apparatus for determining distance of objects, rapid autofocusing, and obtaining improved focus images
US5485209A (en) * 1992-04-03 1996-01-16 Canon Kabushiki Kaisha Pupil divisional type focusing position detection apparatus for electronic cameras
US6091451A (en) * 1997-08-19 2000-07-18 Hewlett-Packard Company Digital imaging system having an anti color aliasing filter
US7612870B2 (en) * 1998-02-25 2009-11-03 California Institute Of Technology Single-lens aperture-coded camera for three dimensional imaging in small volumes
JP4020527B2 (ja) * 1999-03-16 2007-12-12 オリンパス株式会社 電子カメラ
US7158183B1 (en) * 1999-09-03 2007-01-02 Nikon Corporation Digital camera
JP3752126B2 (ja) * 2000-03-10 2006-03-08 ペンタックス株式会社 Af測距光学系
US20040012708A1 (en) * 2002-07-18 2004-01-22 Matherson Kevin James Optical prefilter system that provides variable blur

Also Published As

Publication number Publication date
US20060092314A1 (en) 2006-05-04

Similar Documents

Publication Publication Date Title
JP2006146194A (ja) 複数の開口を有するフィルタを用いるオートフォーカス
CN107977940B (zh) 背景虚化处理方法、装置及设备
TWI462055B (zh) 具有合成全色影像之彩色濾光器陣列影像
US10827107B2 (en) Photographing method for terminal and terminal
US9495751B2 (en) Processing multi-aperture image data
RU2466438C2 (ru) Способ облегчения фокусировки
US8351776B2 (en) Auto-focus technique in an image capture device
JP6173156B2 (ja) 画像処理装置、撮像装置及び画像処理方法
US9131145B2 (en) Image pickup apparatus and control method therefor
US9204034B2 (en) Image processing apparatus and image processing method
CN111028190A (zh) 图像处理方法、装置、存储介质及电子设备
CN110636277B (zh) 检测设备、检测方法和摄像设备
JP2005130468A (ja) 撮像装置及びその制御方法
JP2018107654A (ja) 画像処理装置および画像処理方法、プログラム、記憶媒体
US20210211580A1 (en) Phase detection autofocus (pdaf) optical system
JP6780389B2 (ja) 撮像制御装置および撮像制御方法
US11032465B2 (en) Image processing apparatus, image processing method, imaging apparatus, and recording medium
US11314150B2 (en) Phase detection autofocus (PDAF) optical system
US20220159191A1 (en) Image pickup apparatus
US11323689B2 (en) Image processing device, imaging device, image processing method, and recording medium
AU2011340207A1 (en) Auto-focus image system
CN108111831B (zh) 拍摄方法、成像装置、计算机可读存储介质和计算机设备
JP2014504375A5 (ja)
TWI390965B (zh) 數位影像的淺景深模擬方法
US9973679B2 (en) Control apparatus, image pickup apparatus, control method, and non-transitory computer-readable storage medium

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080826

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090224

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090317