JP6960915B2 - 適応光源 - Google Patents

適応光源 Download PDF

Info

Publication number
JP6960915B2
JP6960915B2 JP2018523008A JP2018523008A JP6960915B2 JP 6960915 B2 JP6960915 B2 JP 6960915B2 JP 2018523008 A JP2018523008 A JP 2018523008A JP 2018523008 A JP2018523008 A JP 2018523008A JP 6960915 B2 JP6960915 B2 JP 6960915B2
Authority
JP
Japan
Prior art keywords
scene
light
leds
array
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018523008A
Other languages
English (en)
Other versions
JP2019502294A (ja
Inventor
デル シデ,アーエン ファン
プフェッファー,ニコラ
フォルスト−ヴェイダー,クィント ファン
マルトィノフ,ユーリー
Original Assignee
ルミレッズ ホールディング ベーフェー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ルミレッズ ホールディング ベーフェー filed Critical ルミレッズ ホールディング ベーフェー
Publication of JP2019502294A publication Critical patent/JP2019502294A/ja
Priority to JP2021167181A priority Critical patent/JP7341202B2/ja
Application granted granted Critical
Publication of JP6960915B2 publication Critical patent/JP6960915B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • G03B15/03Combinations of cameras with lighting apparatus; Flash units
    • G03B15/05Combinations of cameras with electronic flash apparatus; Electronic flash units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/586Depth or shape recovery from multiple images from multiple light sources, e.g. photometric stereo
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2215/00Special procedures for taking photographs; Apparatus therefor
    • G03B2215/05Combinations of cameras with electronic flash units
    • G03B2215/0564Combinations of cameras with electronic flash units characterised by the type of light source
    • G03B2215/0567Solid-state light source, e.g. LED, laser
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Description

本開示の実施形態は、適応(アダプティブ)光源に関する。
現在利用可能な最も効率的な光源の中に、発光ダイオード(LED)、共振器型(resonant cavity)発光ダイオード(RCLED)、垂直共振器面発光レーザ(VCSEL)及び端面発光レーザを含む半導体発光デバイスがある。可視スペクトルで動作可能な高輝度発光デバイスの製造のために現在関心ある材料系は、III−V族半導体、特に、III族窒化物材料とも呼ばれる、ガリウム、アルミニウム、インジウム、及び窒素の二元、三元、及び四元合金を含む。典型的に、III族窒化物発光デバイスは、有機金属化学気相成長法(MOCVD)、分子線エピタキシー(MBE)又はその他のエピタキシャル技術により、サファイア、炭化シリコン、III族窒化物若しくは複合材の基板、又はその他の好適な基板の上に、異なる組成及びドーパント濃度の複数の半導体層のスタック(積層体)をエピタキシャル成長することによって製造される。スタックは、しばしば、基板上に形成された、例えばSiでドープされた1つ以上のn型層と、該1つ以上のn型層上に形成された活性領域内の1つ以上の発光層と、活性領域上に形成された、例えばMgでドープされた1つ以上のp型層とを含んでいる。これらn型領域及びp型領域の上に、電気コンタクトが形成される。
小型及び低電力の要求により、半導体発光デバイスは、例えばカメラ及び携帯電話などの手持ち式の電池駆動装置用の、例えばカメラフラッシュなどの光源にとって魅力的な候補である。
米国特許第8761594号は、カメラシステムにおいて空間的に動的な照明を提供するためのシステムおよび方法を開示している。空間的に動的な照明源が、カメラの視野内の所望の被写体のみの照明を可能にし、それにより、照明源から必要とされる光の量を減少させる。その空間的に動的な照明源は、照明素子のアレイと制御コンポーネントとを含み得る。照明アレイ内の各照明素子が、光学素子と組み合わされた発光素子を含み得る。この空間的に動的な照明源とカメラとが、カメラ及び照明システム内で組み合わされ得る。そのカメラ及び照明システムは、カメラ視野内の所望の被写体のみを動的に検出し、追跡し、選択的に照射することができる。
欧州特許出願公開第EP2128693号は、シーン内のフィーチャの深さ及び反射率に応じて照射強度が変化する空間的適応写真フラッシュを開示している。
本発明の実施形態によれば、例えばカメラ用のフラッシュとして使用され又はその他の好適用途に使用され得る光源が提供される。この光源は、当該光源によって放たれる照明パターンが変更され得るように構成される。例えば、カメラフラッシュとして使用されるとき、カメラの視野内の所与のシーンに対して、この光源は、周辺光によってよく照らされていないシーンの部分に多めの光を供給するとともに、周辺光によってよく照らされているシーンの部分に少なめの光を供給し得る。
光源として少なくとも1つの半導体発光デバイスを含むシステムを例示するブロック図である。 図2A、2B、及び2Cは、例えば図1のシステムを用いてシーンを照らす方法を例示している。 図2A、2B、及び2Cは、例えば図1のシステムを用いてシーンを照らす方法を例示している。 図2A、2B、及び2Cは、例えば図1のシステムを用いてシーンを照らす方法を例示している。 照らすべきシーンを例示している。 図3に例示したシーンの3次元(3D)マップを例示している。 図3に例示したシーンに関するフラッシュ強度プロファイルを例示している。 光源の一例の断面図である。 LEDアレイの上面図である。 図7のアレイ内の1つのLEDの断面図である。 以下の図の例において照らされるシーンを示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図10Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図11Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図12Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図13Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図14Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図10A、11A、12A、13A、14A、及び15Aは、図9に例示したシーンに関する様々な照度プロファイルを例示している。 図15Aに例示した照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図16及び17は、ズーム適用のための照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図16、17A、及び17Bは、ズーム応用のための照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図16、17A、及び17Bは、ズーム応用のための照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図18A及び18Bは、広角応用のための照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 図18A及び18Bは、広角応用のための照度プロファイルを生成するために図7のアレイ内のLEDに与えられる電流の量を例示している。 個々の光学系を備えたLEDのアレイの断面図である。 複数のLEDアレイを有する光源を例示している。 走査式の狭ビーム光源を例示している。 マトリクス制御要素を有する光源を例示している。 異なる色または色温度の光を放射する複数の光エミッタを有する光源を例示している。
以下の説明では、本発明の実施形態をカメラフラッシュとして説明するが、他の用途も企図され、本発明の範囲内である。
全てのカメラフラッシュに伴う1つの問題は、カメラの近くの被写体がしばしば露出オーバーとなる一方で、カメラから遠い被写体が十分な光を得ないことである。本発明の実施形態は、例えばポータブル装置若しくは電池駆動式装置用の、又はより大型の非電池駆動式の写真スタジオフラッシュ用の、例えばカメラフラッシュなどの光源を含む。本発明の実施形態に従った光源は、その照度プロファイルをシーンに適応させ、シーン上の全ての被写体に適量の光を送り届け得る。本発明の実施形態に従った適応光源は、例えば半導体発光デバイスなどの半導体光源を含み得るが、好適な如何なる光が使用されてもよい。
図1は、本発明の実施形態に従った適応光源の一例を示している。図1に示すシステムは、スマートフォン又は任意の好適装置に含まれ得る。図1に示すシステムは、ドライバ12に接続された光源10を含んでいる。ドライバ12は、後述するように、光源10に電力を供給する。ドライバ12は、マイクロプロセッサ14に接続されている。マイクロプロセッサは、入力装置18及びカメラ11から入力を受け取る。システムはまた、3Dセンサ16を含み得る。入力装置18は、例えば、ユーザが写真を撮るために押すボタンなどの、ユーザ起動入力装置とし得る。入力装置18は、例えば写真が自動的に撮影される場合など、一部の実施形態においてユーザ入力を必要としなくてもよい。入力装置18は、一部の実施形態において省略されてもよい。
3Dセンサ16は、写真を撮ることに先立ってシーンの3Dプロファイルを作成することができる如何なる好適センサであってもよい。一部の実施形態において、3Dセンサ16は飛行時間(ToF)カメラとし得る。ToFカメラは、被写体から反射された光がToFカメラに戻る時間を測定する。この時間を用いて、シーン内の各被写体までの距離を計算し得る。一部の実施形態において、3Dセンサ16は、ストラクチャード光センサとし得る。ストラクチャード光センサは、特別に設計されたパターンの光をシーンに投射するプロジェクション装置を含む。ストラクチャード光センサにも含まれるカメラはまた、シーンの被写体から反射された光パターンの各部分の位置を測定し、それらの被写体までの距離を三角測量によって決定する。一部の実施形態において、3Dセンサ16は、装置の本体内に互いから距離を置いて位置付けられた1つ以上の補助カメラであってもよい。補助カメラによって見られる被写体の位置を比較することにより、各被写体までの距離を三角測量によって決定することができる。一部の実施形態において、3Dセンサ16は、装置内の主カメラのオートフォーカス信号である。カメラレンズの焦点位置を走査する間に、システムは、それらの位置でシーンのどの部分に焦点が合っているかを検出することができる。そして、対応するレンズ位置を、それらの位置で焦点が合っている被写体までの距離に変換することによって、シーンの3Dプロファイルが構築される。適切なオートフォーカス信号は、例えば、コントラストを測定することによって、又はカメラセンサ内の位相検出センサを利用することによって、従来の方法によって得られる。位相検出センサが使用される場合、一部の実施形態において、適応フラッシュが最適に機能するために、個々の位相検出センサの位置は、後述するように、光源10の別々のセグメントによって照らされる領域に対応し得る。
図1に示したシステムを使用する方法の一例を図2Aに示す。ブロック20にて、例えば写真を撮影することを指示するといった入力が生成される。ブロック22にて、カメラ11が、フラッシュをオフにしてシーン(カメラの視野に対応する)の第1の予備画像を撮影する。ブロック24にて、光源10が、低光出力モード(典型的に、“トーチモード”と呼ばれる)でオンにされる。このとき、光源10の照度プロファイルは均一に保たれる。“均一”とは、シーンの全ての部分が既知の照明プロファイルで照らされることを意味する。ブロック26にて、光源10が均一な照度プロファイル及び低い輝度でオンであり続ける間に、第2の予備画像がキャプチャされる。ブロック27にて、システムが、シーンの全ての部分が最適露出を達成するための最適輝度を計算する。これは、第1の予備画像のピクセル輝度値を第2の画像のそれぞれのピクセル輝度値から減算し、その差を、最適露出レベルを達成するようにスケーリングすることによって、行われることができる。ブロック28にて、ブロック27で計算された照度プロファイルに従って光源10を作動させて、最終的な写真がカメラ11によって撮影される。
図1に示したシステムを使用する方法の他の一例を図2Bに示す。ブロック200にて、例えば写真を撮影することを指示するといった入力が生成される。ブロック220にて、カメラ11が、フラッシュをオフにしてシーン(カメラの視野に対応する)の第1の予備画像を撮影する。ブロック230にて、シーンの3Dプロファイルが生成される。例えば、3Dセンサ16がシーンの3Dプロファイルを生成してもよいし、あるいは、3Dセンサ16がシーンに関するデータを検知して該データをマイクロプロセッサ14に送信し、そして、マイクロプロセッサ14がシーンの3Dプロファイルを生成してもよい。ブロック270にて、システムが、シーンの全ての部分が最適露出を達成するための最適輝度を計算する。ブロック280にて、ブロック270で実行された計算に基づいて、シーンが光源によって照らされる。
図1に示したシステムを使用する方法の他の一例を図2Cに示す。ブロック2000にて、例えば写真を撮影することを指示するといった入力が生成される。ブロック2200にて、カメラ11が、フラッシュをオフにしてシーン(カメラの視野に対応する)の第1の予備画像を撮影する。ブロック2300にて、シーンの3Dプロファイルが生成される。ブロック2400にて、光源10が、低光出力モード(典型的に、“トーチモード”と呼ばれる)でオンにされる。このとき、光源10の照度プロファイルは均一に保たれる。“均一”とは、シーンの全ての部分が照らされることを意味する。ブロック2600にて、光源10をトーチモードにして、第2の予備画像がキャプチャされる。ブロック2700にて、システムが、図2A及び図2Bに関する文章にて上述したような撮影された2つの画像と3Dプロファイルとに基づいて、シーンの全ての部分が最適露出を達成するための最適輝度を計算する。ブロック2800にて、ブロック2700で計算された照度プロファイルに従って光源10を作動させて、最終的な写真がカメラ11によって撮影される。
図2A、2B、及び2Cの各々において、入力は、例えば、ユーザがボタンを押すことなどのユーザ入力、マイクロプロセッサ14によって生成された入力(例えば、マイクロプロセッサ14が、所定の時間に又は所定の間隔で写真を撮るようにプログラムされる場合)、又はその他の好適な入力とし得る。図3は、入力が生成されたときに写真にキャプチャされることになるシーンを例示している。図3に示すシーンは、前景の第1の人物30と、背景の第2の人物32とを含んでいる。このシーンは単に説明目的で選ばれたものである。カメラから様々な距離に複数の物体又は人物を有する他のシーンも、本発明の使用に適している。
図4は、図3に示したシーンに関する3Dプロファイルを例示している。図4では、明るい色調ほどカメラからの短い距離に対応し、暗い色調ほどカメラからの大きい距離に対応する。従って、前景の人物30は最も明るい色調を有しており、人物30がカメラに最も近いことを示している。背景の人物32はより暗い色調を有しており、人物32がカメラから遠いことを示している。背景は、カメラから最も遠い距離を指し示す黒色である。
フラッシュから遠く離れた位置にある被写体が高めの光強度を受け、フラッシュに近い位置にある被写体が少なめの光を受けるとし得る。よく知られているように、光の照度は距離の逆2乗則(照度〜1/距離)に従って低下する。故に、シーンの3Dプロファイルを用いて、シーンのそれぞれの部分に配分すべき光の必要量を計算することができる。必要な強度プロファイルを計算するアルゴリズムはまた、第1の画像のキャプチャで集められる情報であるシーン内の被写体の各々が周辺光から受けている照度を考慮に入れて、それに従ってフラッシュ光の量を調節してもよい。例えば、既によく照らされている被写体30(例えば、それらが明るい色である又は反射しているため)は、3Dプロファイルによって決定される光源からの距離のみに基づいて計算され得るものよりも少ない光を受けてもよく、よく照らされていない被写体30(例えば、それらが暗い又は反射していないため)は、上記計算され得るものよりも多い光を受けてもよい。
デジタルカメラ及びその画像プロセッサは、典型的に、顔認識アルゴリズムを含んでいる。一部の実施形態において、顔認識アルゴリズムからの情報を用いて、他の被写体と比較して、顔をより良く照らし得る。写真全体を良好に露光するのに十分な光がない場合、顔がより多くの光の恩恵を受ける。人が近すぎて露出オーバーの危険がある場合には、より多くの光が顔に向けられないように、この機能はオフにされるべきである。一部の実施形態において、3Dプロファイルからの相対的な光の計算は、写真における“赤目”を最小化するよう、人物の目に向けて送られる光の量を低減させてもよい。
一部の実施形態において、3Dプロファイルからの相対的な光の計算は、フラッシュから非常に離れていて適切に照らされることができないシーンの部分を特定してもよい。シーンの有益な部分に向けて送られる光の量を最大化し、ひいては、利用可能な駆動電流能力のいっそう良好な使用を提供するために、シーンのそれらの部分は最小限の量の光が送られる。
一部の実施形態において、ユーザインタフェース(例えば、スマートフォンのタッチスクリーン)が、シーンの各部分に送られる光の相対量をユーザが制御することを可能にし得る。例えば、ユーザは、フラッシュの適応機能をオン及びオフすることができ、3Dプロファイルから相対的な光を計算するために使用されるアルゴリズム(上述)の様々な部分をオン及びオフすることができ、また、手動でシーン上にフラッシュアクセントを作り出すことができる。
幾つかの照明モードが、本発明の実施形態によって企図される。
一部の実施形態において、第1グループの照明モードにて、非常に均一に照らされた有用な写真を達成するように、光源10からの照明がシーンにわたって分配される。特に、一部の実施形態において、露出オーバーが最小化され、前景が周辺光によってよく照らされている場合に、光源10からの全ての光が背景に向けられる。一部の実施形態において、光源はフィルイン(fill in)フラッシュとして機能し、背景が周辺光によってよく照らされている場合に、光源10からの全ての光が前景に向けられる。一部の実施形態において、前景と背景が周囲照明によって均等に照らされているとき、光源10からの光は大部分が背景に送られる。一部の実施形態において、暗い前景の場合、光源10からの光は、良好な写真のために十分なだけ前景を照らし、光源10からの光の残りは背景に送られる。
一部の実施形態において、第2グループの照明モードにて、選択された被写体が照らされる。特に、一部の実施形態において、顔認識と組み合わせて、顔が、最良の照明のために最も高く重み付けられ得る。一部の実施形態において、顔認識と組み合わせて、例えば、照らされた顔と顔に最も近い背景との間のコントラストを高めるために、顔(又はその他の被写体)の周りの背景は少なめの光を受け得る。一部の実施形態において、シーンの選択されたゾーンは、例えばユーザ入力によって特定される。光源10からの光は、選択されたゾーン内のみに向けられてもよい。選択されるゾーンの例は、ズームインされる画像、又は別の方法で特定されるシーンの部分を含む。一部の実施形態において、例えば名刺の写真では、光源10からの光が非常に高い均一度で放たれる。
図5は、図4に示した計算に基づいて図3のシーンに供される光を例示している。図5において、明るい色調ほど光源からの多い光に対応し、暗い色調ほど光源からの少ない光に対応する。図5に例示するように、より多くの光が、背景の人物32に対応する領域42に与えられる一方で、より少ない光が、前景の人物30に対応する領域40に与えられる。追加の光が、背景の人物の顔52に与えられる。人物30又は人物32のいずれも現れない(図示されていない)背景に、最も少ない量の光が与えられ得る。
図6、7、及び8は、図1に例示したシステムにて使用され得る光源10の一例を示している。好適な如何なる光源を使用されてもよく、本発明の実施形態は、図6、7、及び8に示す構造に限定されない。
図7は、LED62の正方形アレイ60の上面図である。LED62は、単一の基板上にモノリシックに成長され得る。他の例では、LED62は、単一の基板上にモノリシックに成長される必要はなく、ダイシングされた後に、隣接するLEDがともに非常に接近するようにマウント上に配列されてもよい。一部の実施形態において、LED62間のギャップは、個々のLED62の寸法(例えば、幅)の1/3未満である。3×3の正方形アレイが図示されているが、好適な如何なる数のLEDが使用されてもよく、また、アレイは、正方形である必要はなく、長方形又は任意の好適形状とし得る。個々のLEDのサイズは、例えば、光学レンズを含めた構築体積、カメラの視野、及びアレイ内のLED数のような、幾つかの設計パラメータに依存し得る。例えば、アレイは、カメラの全視界(すなわち、シーン全体)を照らすのに十分なLEDを含んでいなければならない。スマートフォン用途では、アレイの全幅は、一部の実施形態において2mm以下とし得る。もっと大きいカメラでは、アレイの幅は、一部の実施形態において10mm以下とし得る。これらの個々のLEDは正方形であるが、これは必要でなく、長方形のLED又は任意の好適形状のLEDが使用されてもよい。
図6は、光源10の断面図である。LED62のアレイ60は、アレイ60から取り出される光の大部分が光学系64に向けて放出されるように位置付けられている。図示の例では、光学系64は、アレイ60から離間されている。他の例では、光学系64は、アレイ60の上に置かれてもよい。光学系64は、光をコリメートして光をシーンの適切な領域に向ける任意の好適構造とし得る。光学系64は、例えば、レンズ、複数のレンズ、1つ以上のフレネルレンズ、1つ以上の屈折レンズ、1つ以上の全反射レンズ素子、1つ以上のリフレクタ、1つ以上のコリメータ、又はその他の好適な光学系とし得る。以下の例では、光学系64はフレネルレンズである。光源は、箱66の形状をしていてもよく、アレイ60が箱の底に配置され得るとともに、光学系64が箱の頂部を形成し得る。箱の内側の側壁68、アレイ60によって占有されない底の部分、及び光学系64によって占有されない蓋の部分は、光学設計の部分であり、従って、適宜に反射性又は光吸収性とし得る。
図8は、図6及び7に示したアレイ内の単一のLED62の一例の断面図である。好適な如何なるLEDが使用されてもよく、本発明の実施形態は、図8に例示する構造に限定されない。図8のデバイスでは、大部分の光が、成長基板を通じてLEDから取り出される。このようなデバイスは、フリップチップデバイスとして参照されることがある。図8のLEDは、技術的に知られているように、成長基板70上にIII族窒化物半導体構造を成長させることによって形成される。成長基板は、サファイアであることが多いが、例えば非III族窒化物材料、SiC、Si、GaN、又は複合基板など、好適な如何なる基板であってもよい。III族窒化物半導体構造が上に成長される成長基板の表面は、成長前にパターン加工、粗面加工、又はテクスチャ加工されてもよく、そうすることはデバイスからの光取り出しを向上させ得る。成長表面とは反対側の成長基板の表面(すなわち、フリップチップ構成において光の大部分がそれを通して取り出される表面)は、成長の前又は後にパターン加工、粗面加工、又はテクスチャ加工されてもよく、そうすることはデバイスからの光取り出しを向上させ得る。
半導体構造は、n型領域とp型領域との間に挟み込まれた発光領域又は活性領域を含んでいる。先ずn型領域72が成長され得る。n型領域72は、異なる組成及びドーパント濃度の複数の層を含み得る。該複数の層は、例えば、n型あるいは意図的にはドープされないものとし得るバッファ層若しくは核生成層などのプリパレーション層と、発光領域が効率的に発光するのに望ましい特定の光学特性、材料特性若しくは電気特性に合わせて設計されるn型、若しくはp型であってもよい、デバイス層とを含み得る。n型領域の上に、発光領域又は活性領域74が成長される。好適な発光領域の例は、単一の厚い若しくは薄い発光層、又はバリア層によって分離された複数の薄い若しくは厚い発光層を含んだマルチ量子井戸発光領域を含む。次いで、発光領域の上に、p型領域76が成長され得る。n型領域と同様に、p型領域は、異なる組成、厚さ及びドーパント濃度の複数の層を含むことができ、該複数の層は、意図的にはドープされていない層又はn型層を含んでいてもよい。
半導体構造の成長後に、p型領域の表面上に反射性のpコンタクト78が形成される。pコンタクト78は、しばしば、例えば反射メタル及びガードメタルなどの複数の導電層を含む。ガードメタルは、反射メタルのエレクトロマイグレーションを防止あるいは抑制し得る。反射メタルは銀であることが多いが、如何なる好適な1つ以上の材料が使用されてもよい。pコンタクト78を形成した後、nコンタクト80が上に形成されるn型領域72の部分を露出させるよう、pコンタクト78、p型領域76及び活性領域74の一部が除去される。nコンタクト80とpコンタクト78は、例えばシリコンの酸化物又はその他の好適材料などの誘電体で充填され得る間隙82によって、互いに電気的に分離(アイソレート)される。複数のnコンタクトビアが形成されてもよく、nコンタクト80及びpコンタクト78は、図8に例示される構成に限定されない。n及びpコンタクトは、技術的に知られているように、誘電体/金属スタックを有するボンドパッドを形成するように再配線されてもよい(図示せず)。
上述のように、アレイ60内のLED62は、単一のウエハ上に形成され、その後に、アレイ状の個々のLED62がなおも単一の成長基板部分に取り付けられたアレイ60として、ウエハからダイシングされ得る。他の例では、多数のLED62が単一のウエハ上に形成され、その後にウエハからダイシングされて、それ故に、ダイシング済みの個々のLEDが、アレイ60を形成するようにマウント上に配置されるようにし得る。
基板70は、半導体構造の成長後に、又は個々のデバイスを形成した後に、薄化され得る。一部の実施形態において、図8のデバイスから基板が除去される。図8のデバイスから取り出される光の大部分は、基板70(又は、基板70を除去することによって露出された半導体構造の表面)を通じて取り出される。本発明の実施形態は、フリップチップLEDに限定されず、好適な如何なるデバイスが使用されてもよい。
発光デバイスから取り出される光の経路内に、波長変換構造84が配置され得る。波長変換構造は、例えば、コンベンショナルな蛍光体、有機蛍光体、量子ドット、有機半導体、II−VI族若しくはIII−V族半導体、II−VI族若しくはIII−V族半導体量子ドット若しくはナノ結晶、染料、ポリマー、又は発光するその他の材料とし得る1つ以上の波長変換材料を含む。波長変換材料は、LEDによって発せられた光を吸収して、1つ以上の異なる波長の光を発する。LEDによって発せられた未変換の光が、この構造から取り出される光の最終的なスペクトルの一部をなすことが多いが、必ずしもそうである必要はない。構造から取り出される光の最終的なスペクトルは、白色、多色、又は単色とし得る。一般的な組み合わせの例は、黄色発光の波長変換材料と組み合わされた青色発光のLED、緑色発光及び赤色発光の波長変換材料と組み合わされた青色発光のLED、青色発光及び黄色発光の波長変換材料と組み合わされたUV発光のLED、並びに青色発光、緑色発光及び赤色発光の波長変換材料と組み合わされたUV発光のLEDを含む。構造から取り出される光のスペクトルを調整するために、他の色の光を発する波長変換材料が追加されてもよい。波長変換構造84は、例えばTiOなどの、光散乱要素又は光拡散要素を含んでいてもよい。
一部の実施形態において、波長変換構造84は、LEDとは別個に製造されて、例えばウエハボンディング又はシリコーン若しくはエポキシなどの好適な接着剤によってLEDに取り付けられる構造体である。そのような予め製造される波長変換素子の一例は、セラミック蛍光体であり、それは、例えば、粉末蛍光体又は蛍光体の前駆物質を、個々の波長変換素子へと後にダイシングされ得るものであるセラミックスラブへと焼結することによって形成される。セラミック蛍光体はまた、例えば、テープキャスティングによって形成されてもよく、その場合、ダイシング又は切断を必要とせずに、セラミックが正確な形状に製造される。好適な非セラミックのプリフォーム波長変換素子の例は、ロール、キャスト、又はその他の方法でシートへと形成される例えばシリコーン又はガラスなどの透明材料に分散され、次いで個々の波長変換素子へと個片化される粉末蛍光体、
例えばシリコーンなどの透明材料内に置かれ、そしてLEDのウエハ又は個々のLEDを覆ってラミネートされる粉末蛍光体、及びシリコーンと混合されて透明基板上に置かれた蛍光体を含む。波長変換素子は、予め形成される必要はなく、例えば、透明バインダと混合された波長変換材料であって、LEDによって放出される光の経路内にラミネートされ、ディスペンスされ、堆積され、スクリーン印刷され、電気泳動的に堆積され、又はその他の方法で位置付けられるものであってもよい。
波長変換構造84は、図8に例示されるようにLEDと直に接触して配置される必要はなく、一部の実施形態において、波長変換構造84は、LEDから離間される。
波長変換構造84は、アレイ内の複数のLED又は全てのLEDを覆うモノリシック素子であってもよいし、又は、別個のセグメントへと構造化されて、各々が対応するLEDに取り付けられてもよい。波長変換構造84のそれら別個のセグメントの間のギャップは、各セグメントからの発光をそのセグメントのみに閉じ込めるように、光学的に反射性の材料で充填され得る。
アレイ60内のLED62を、例えばマウント、印刷回路基板、又はその他の好適構造などの構造に電気的及び物理的に接続するために、例えばはんだ、スタッドバンプ、金層、又はその他の好適構造などのインターコネクト(図示せず)が使用され得る。マウントは、個々のLED62が図1のドライバ12によって個別に制御され得るように構成され得る。個々のLED62によって放たれた光が、シーンの異なる部分を照らす。個々のLEDへの電流を変化させることにより、シーンの対応する部分に供される光を変更することができる。各LED62に適切なレベルの電流を供給することによって、上述のようにして計算されたそのシーンに関する最適な照度プロファイルが得られる。
例えばモバイル装置又は電池駆動装置などの一部の装置では、図1の適応光源に利用可能な最大電流量が、しばしば、装置バッテリの能力によって制限される。全てのLED62への駆動電流レベルを定めるとき、システムは典型的に、利用可能な最大電流バジェットを考慮に入れ、それにより、LED間の正しい強度比が維持され且つ総光出力が最大化されながら、総駆動電流が最大値を超えないように、各LED62の駆動電流レベルを定める。
図9は、以下に図10A、11A、12A、13A、14A、及び15Aに示す例において照らされるシーンを示している。各例で各LEDに供給される電流の量が、図10B、11B、12B、13B、14B、及び15Bに示される。図9において破線で特定されるターゲット88は、上述の3Dプロファイルからの計算に従って、シーンの残りの部分よりも多くの光を必要とする。図10A、11A、12A、13A、14A、及び15Aの各々において、領域に供給される光の量は、色調の暗さが増すにつれて減少する。各図に示される配光は相対的であるとし得る。
図10Aは、図10Bに示すように全てのLED62が同じ量の電流を供給されるときに、シーンがどのように照らされるかを示している。シーンの中心が明るく照らされる一方で、シーンの外縁はあまり照らされない。従って、シーンの中心に近いターゲットの部分が、シーンのエッジ(端)に近いターゲットの部分よりも多く照らされる。
図11Aは、3つのLEDのみが電流を供給され、それら3つの各々が同じ量の電流を受け、他の6つのLEDが電流を受けないときに、シーンがどのように照らされるかを示している。電流を供給される3つのLED91、92、及び93は、図11Bに示すように、中央のLEDと、左端の列の下側2つのLEDである。図11Aに示すように、概ねターゲットに対応するシーンの右側が、シーンの残りの部分よりも明るく照らされる。図11BのLED91、92、及び93の電流密度は、全てのLEDが等しい電流を供給される図10Bに示した場合の3倍の高さとし得る。図11Aにおけるターゲットの照度は、図10Aにおけるターゲットの照度の約1.6倍の高さである。
より高い照度を得るために、図12A、12B、13A、及び13Bに示される2つの例に示すように、より少ないセグメントをスイッチオンすることができる。
図12Aは、2つのLEDのみが電流を供給され、それら各々が同じ量の電流を受け、他の7つのLEDが電流を受けないときに、シーンがどのように照らされるかを示している。電流を供給される2つのLED94及び95は、図12Bに示すように、左端の列の下側2つのLEDである。図12Aに示すように、概ねターゲットに対応するシーンの右側が、シーンの残りの部分よりも明るく照らされる。図12Aにおけるターゲットの照度は、図11Aにおけるターゲットの照度よりも高い。
図13Aは、単一のLEDのみが電流を供給され、他の8つのLEDが電流を受けないときに、シーンがどのように照らされるかを示している。電流を供給されるLED96は、図13Bに示すように、左端の列の中央のLEDである。図13Aに示すように、概ねターゲットに対応するシーンの右側が、シーンの残りの部分よりも明るく照らされるが、高く照らされるスポットが、図12A及び11Aにおいてよりも小さい。図13Aにおけるターゲットの照度は、図11Aにおけるターゲットの照度よりも高い。
ターゲット全体にわたる照度の均一性を向上させるために、図14A、14B、15A、及び15Bに示される2つの例に示すように、異なるLEDに供給される電流を異ならせ得る。
図14Aは、6つのLEDが可変レベルの電流を供給され、3つのLEDが電流を受けないときに、シーンがどのように照らされるかを示している。左の列の中央のLED96は、LED96を囲む5つのLED97、98、99、100、及び101の5倍の多さの電流を供給されている。図14Bに示すように、右の列の3つのLEDは電流を受けていない。図14Aに示すように、概ねターゲットに対応するシーンの右側が、シーンの残りの部分よりも明るく照らされる。ターゲットの照度は、例えば図13Aにおいてよりも均一である。
図15Aは、4つのLEDが可変レベルの電流を供給され、5つのLEDが電流を受けないときに、シーンがどのように照らされるかを示している。左の列の中央のLED102は、中央の列の一番下のLED105の4倍の多さであり且つ中央のLED104及び左の列の一番下のLED103の2倍の多さの電流である電流を供給されている。図15Bに示すように、一番上の行のLED及び右の列のLEDは電流を受けていない。図15Aに示すように、概ねターゲットに対応するシーンの右側が、シーンの残りの部分よりも明るく照らされる。ターゲットの照度は、例えば図13Aにおいてよりも均一である。
図16、17B、及び18Bは、ズーム応用及び広角応用のために、図6のLED62のアレイ60にどのように電流を印加し得るかを示している。カメラレンズをズームインするコマンドが受信されると、図16及び17Bに示すように、アレイの中心付近のLEDがより多くの電流を受け取る。図17Aは、図17Bに示すようにLEDが可変レベルの電流を供給されるときに、シーンがどのように照らされるかを示している。
カメラレンズをズームアウトするコマンドが受信されると、図18Bに示すように、アレイのエッジ付近のLEDがより多くの電流を受け取る。図18Aは、図18Bに示すようにLEDが可変レベルの電流を供給されるときに、シーンがどのように照らされるかを示している。
図16では、ズーム応用のために、中央のLED110のみが電流を供給され、中央のLEDを囲む8つのLEDは電流を受けていない。シーンの中心が明るく照らされることになり、シーンのエッジは、より少ない光を受けることになる。シーンの中心における照度は、9つ全てのLEDが等しい電流を受ける図10Aにおけるシーンの中心に対して2.2倍だけ増大され得る。
図17Bでは、ズーム応用のために、中央のLED111が、LED112の2倍の多さであり且つLED114の4倍の多さである電流を供給されている。シーンの中心が、シーンのエッジよりも多く照らされる。シーンの中心における照度は、9つ全てのLEDが等しい電流を受ける図10Aにおけるシーンの中心に対して1.15倍だけ増大され得る。
図18Bでは、広角応用のために、アレイのエッジの8つのLED118が等しい電流を受け、中央のLED116は電流を受けていない。シーンの中心における照度は、9つ全てのLEDが等しい電流を受ける図10Aにおけるシーンの中心における照度の0.85倍まで低減され得る。
この適応光源は、各ターゲットに対応するLEDのみに電流を供給することによって、又は各ターゲットに対応するLEDに多めの電流を供給することによって、複数のターゲットを照らすために使用され得る。この適応フラッシュを用いて、カメラから遠い要素に対応するLEDのみに電流を供給することによって、又はカメラから遠い要素に対応するLEDに多めの電流を供給することによって、カメラに近い要素とカメラから遠い要素とを含むシーンにおける露出オーバーを抑制し得る。
以上の例に関して与えられた照度値は、単一のフレネルレンズを備えた図示の3×3アレイについて計算されている。以上の例の各LEDの光出力は、LEDのドライバ電流によって、又は一定電流を持つパルス時間によって制御されることができる。
図19、20、21、22、及び23は、これに代わる光源を示している。
図19の光源では、アレイ内の各LED62が、図6に示したようなアレイ全体用の単一の光学系ではなく、個々の光学系122を有している。各光学系122は、そのLEDからの光を、シーンの特定の部分に向ける。光学系122は、例えば、レンズ、ドームレンズ、フレネルレンズ、リフレクタ、全反射レンズ、又はその他の好適構造を含む好適な如何なる光学系であってもよい。光学系122は同じである必要はなく、アレイ内の異なるLED62に対して異なる光学系が使用されてもよい。
図20の光源は、複数の光学素子を備えた複数のLEDアレイを含んでいる。例えば、図20は、各々が単一の対応するフレネルレンズを備えた2つの3×3アレイを示す。より多数又は少数のアレイが使用されてもよく、また、アレイは図示したデバイスに限定されない。一部の実施形態において、各アレイがシーンの一部を照らす。図20のアレイ124はシーンの上部128を照らし、アレイ126はシーンの下部130を照らす。一部の実施形態において、これらのアレイは、重なり合う部分にいっそう多くの光を提供するために、重なりをもってシーンの一部を照らす。例えば、これらのアレイは、エッジよりも多くの光を必要とすることが多いシーンの部分であり得るシーンの中心において重なり合い得る。
図21の光源は、例えばレーザなどの狭ビーム発光デバイスを使用する。図21の光源は、レーザ140を含んでおり、該レーザからの光の経路内に波長変換素子142が配置されている。集束光学系144が、所望サイズの光ビームを作り出し得る。ビームは、シーン150に入射する前に、第1走査ミラー146及び第2走査ミラー148に入射する。これらの走査ミラーは、光ビームがシーン全体を走査するように動かされることができ、その間に、ドライバが、シーンの異なる部分が異なる量の光を受け得るように光源の強度を制御する。より高い強度を必要とするシーンの部分をビームが走査するとき、レーザに供給される電流が増加し、より低い強度のみを必要とするシーンの部分をビームが走査するとき、レーザに供給される電流が減少する。
図22の光源は、例えばデジタルマイクロミラースイッチングデバイス又はマルチセグメント液晶ディスプレイなどの、マトリクス制御素子を含んでいる。LED又はレーザ152からの光が、マトリックス制御素子154を照らす。反射される光又は透過する光の強度が、計算された照度プロファイルに応じて変更される。マトリクススイッチング素子154からの反射光又は透過光が、シーン156上に投射される。マトリクススイッチング素子154は、多数の小型ミラーをピクセルとして有し得る。各ミラーの向きを変えることで、各ピクセルの強度を調整することができる。ミラーの向きはまた、複数の異なるミラーからのビームを重ね合わせることによって、より明るい領域を作り出すことにも使用され得る。
図23の光源は色調節可能(カラーチューナブル)である。図23の光源は、シーン164を照らすときに重なるビーム166及び168をそれぞれ放出するように配置された2つのアレイ160及び162を含んでいる。図6に示したアレイのような2つのアレイが図示されているが、他の好適な光エミッタが使用されてもよい。このシステムは、異なる発光スペクトルを持つ3つ又はそれより多くのアレイを含んでいてもよい。アレイ160及び162は、異なる色の光を発する。例えば、アレイ160及び162の双方が白色光を発し得るが、アレイ160は、アレイ162とは異なる色温度を持つ白色光を発し得る。すなわち、アレイ160及びアレイ162のうちの一方が暖白色光を発する。例えば、暖白色光を発するアレイは、1700Kほどの低さの色温度を持つ光を発することができ、寒白色光を発するアレイは、10000Kほどの高さの色温度を持つ光を発することができる。これら2つのアレイ間での色温度の差は、一部の実施形態において少なくとも1000K、一部の実施形態において少なくとも2000K、一部の実施形態において少なくとも3000K、そして一部の実施形態において少なくとも4000Kとし得る。これに代えて、アレイ160及び162は、異なる単色光を発してもよい。各アレイ内の各LEDに供給される適切な電流が、アレイ160及び162からの光の足し合わせが、シーンの各部分に対して適切な照度及び色温度を有するように計算される。更なる色又は色温度の光を発するアレイ(又はその他の光エミッタ)が追加されてもよい。
一部の実施形態において、複数のスペクトルを発する複数のLEDが、図6に示したような単一の光学系、又は図19に示したような個々の光学系とともに、単一のインターリーブされたアレイにて組み合わされ得る。異なる色のLEDがグループに編成され、各グループがシーンの一部を照らし、各グループが、各異なる色の少なくとも1つのLEDを含む。
上述の色調節可能(カラーチューナブル)光源は、シーンの異なる部分を異なる相関色温度(CCT)の光で照らすために使用され得る。例えば、カラーチューナブル光源は、異なる周辺光源のCCTを等化させるために使用され得る。低CCTの周辺光を有するシーンのセクションが、より高いCCTの光で照らされ得るとともに、高CCTの周辺光を有するシーンのセクションが、より低いCCTの光で照らされ得る。
一部の実施形態において、光源10は、複数の異なるカメラと共に使用され得る。例えば、1つのスマートフォンが複数のカメラを有することがあり、相異なるスマートフォンモデルが異なるカメラを使用することがある。それらのカメラは各々、特定の視野を有することができ、それに対して、そのカメラ用のフラッシュが調節される(例えば、視野の隅に最小レベルの照明を提供するように調節される)。従って、従来のフラッシュでは、各カメラが、そのカメラの視野に調節された別個のフラッシュを必要とする。本発明の実施形態に従って適応光源を用いると、各カメラのデフォルト電流分布を規定しておいて、そのカメラが選択されたときにそれを選択することができ、それ故に、単一の光源を複数のカメラに使用し得る。各カメラのデフォルトは、以上の実施形態で説明したように、撮影されるシーンに従って変更され得る。
以上の例では、半導体発光デバイスは、青色光又はUV光を発するIII族窒化物LEDであるが、例えばレーザダイオードなどの、LED以外の半導体発光デバイスや、例えばその他のIII−V族材料、III族リン化物、III族ヒ化物、II−VI族材料、ZnO、又はSi系材料などの、その他の材料系からなる半導体発光デバイスが使用されてもよい。
本発明を詳細に説明したが、当業者が認識するように、本開示を所与として、ここに記載の発明概念の精神を逸脱することなく、本発明に変更が為され得る。特に、複数の異なる例又は実施形態からの様々な要素が組み合わされてもよい、本発明の範囲は、図示して説明した特定の実施形態に限定されるものではない。

Claims (14)

  1. シーンの第1の画像をキャプチャすることと、
    前記第1の画像をキャプチャした後に、光源からの第1の量の光で前記シーンを照らすことであり、前記光源は発光ダイオード(LED)のアレイを有する、照らすことと、
    前記第1の量の光で前記シーンを照らしながら前記シーンの第2の画像をキャプチャすることと、
    前記シーンの3次元プロファイルを作成することと、
    前記3次元プロファイル、前記第1の画像、及び前記第2の画像に基づいて、前記シーンの各部分についての光の相対量を計算することであり、
    前記シーンの各部分の光の相対量を計算することは、前記シーンの第1の部分と前記シーンの第2の部分とが異なる量の光を受け取ることを決定する、
    計算することと、
    前記計算された相対量の光を照射するように前記光源を作動させることであり、
    前記光源を作動させることは、前記シーンの前記第1の部分を照らす第1のLEDに第1の量の電流を供給し、前記シーンの前記第2の部分を照らす第2のLEDに第2の量の電流を供給することを有する、
    作動させることと、
    前記計算された相対量の光を照射するように前記光源を作動させてから、前記シーンの最終的な画像をキャプチャすることと、
    を有する方法。
  2. 前記光源からの前記第1の量の光は、前記シーンの全ての部分が既知の照明プロファイルで照らされるように均一であり、且つ/或いは前記光源のトーチモードで提供される、請求項1に記載の方法。
  3. 前記光源は、前記第1の画像をキャプチャするときにオフにされる、請求項1又は2に記載の方法。
  4. 前記第1の量の電流及び前記第2の量の電流は、前記シーンの前景の被写体の露出オーバーが抑制されるように定められる、請求項1乃至3の何れか一項に記載の方法。
  5. 前記シーンの前記第2の画像は、前記シーンの前記3次元プロファイルを作成する前にキャプチャされ、
    前記シーンの前記3次元プロファイルは、前記シーンの前記第1の画像及び前記第2の画像に基づいて決定され、且つ
    前記シーンのそれぞれの部分の露出オーバーが抑制されるように、前記シーンの各部分について前記シーンのその部分の光の量を計算するために、前記第1の画像の及び前記第2の画像の輝度値が決定されて比較される、
    請求項1乃至4の何れか一項に記載の方法。
  6. 前記シーンの前記第2の画像は、前記シーンの前記3次元プロファイルを作成した後にキャプチャされ、
    前記シーンの前記3次元プロファイルは、3Dセンサを用いて生成され、且つ
    前記シーンのそれぞれの部分の露出オーバーが抑制されるように、前記シーンの各部分について前記シーンのその部分の光の量を計算するために、前記第1の画像の及び前記第2の画像の輝度値が決定されて比較される、
    請求項1乃至4の何れか一項に記載の方法。
  7. 前記シーンは、カメラレンズによって眺められる画像に対応し、
    当該方法は更に、ズームインするコマンドを受け取ることを有し、
    前記シーンの前記第1の部分は、前記第2の部分よりも、前記シーンの中心に近く、且つ
    前記第1の量は前記第2の量よりも大きい、
    請求項1に記載の方法。
  8. 前記シーンは、カメラレンズによって眺められる画像に対応し、
    当該方法は更に、ズームアウトするコマンドを受け取ることを有し、
    前記シーンの前記第1の部分は、前記第2の部分よりも、前記シーンの端に近く、且つ
    前記第1の量は前記第2の量よりも大きい、
    請求項1に記載の方法。
  9. 前記アレイ内の前記第1のLEDは、前記アレイ内の前記第2のLEDによって発せられる白色光とは異なる発光スペクトルの白色光を発する、請求項1に記載の方法。
  10. 前記光源は、LEDの第1のアレイと、LEDの第2のアレイとを有し、LEDの前記第1のアレイは、第1の色温度を持つ白色光を発するように構成され、
    LEDの前記第2のアレイは、前記第1の色温度とは異なる第2の色温度を持つ白色光を発するように構成され、
    当該方法は、
    前記シーンの各部分に定められた色温度をもたらすために、前記第1の色温度の第1の量の光を供給するための第1の電流を計算し、且つ前記第2の色温度の第2の量の光を供給するための第2の電流を計算し、
    LEDの前記第1のアレイとLEDの前記第2のアレイとによって提供される光の足し合わせが、前記シーンの各部分に前記定められた色温度をもたらすように、該第1の電流を供給することによってLEDの前記第1のアレイを作動させ、且つ該第2の電流を供給することによってLEDの前記第2のアレイを作動させる、
    という更なるステップを有する、
    請求項1に記載の方法。
  11. LEDの前記アレイはLEDの第1のアレイであり、前記光源は更に、LEDの第2のアレイを有し、LEDの前記第1のアレイが前記シーンの第1の部分を照らし、LEDの前記第2のアレイが前記シーンの第2の部分を照らす、請求項1に記載の方法。
  12. LEDの前記アレイはLEDの第1のアレイであり、前記光源は更に、LEDの第2のアレイを有し、LEDの前記第1のアレイ及びLEDの前記第2のアレイが前記シーンの同じ部分を照らす、請求項1に記載の方法。
  13. LEDの前記第1のアレイは、LEDの前記第2のアレイとは異なる発光スペクトルの光を発する、請求項12に記載の方法。
  14. 視野を有するカメラと、
    発光ダイオード(LED)のアレイを有する光源と、
    マイクロプロセッサであり、
    前記視野の第1の画像をキャプチャし、
    前記第1の画像をキャプチャした後に、前記光源からの第1の量の光で前記視野を照らし、
    前記視野が前記第1の量の光で照らされている間に、前記視野の第2の画像をキャプチャし、
    前記視野の3次元プロファイルを作成し、
    前記3次元プロファイル、前記第1の画像、及び前記第2の画像に基づいて、前記視野の各部分についての光の相対量を計算し、
    前記発光ダイオード(LED)のアレイによって前記計算された相対量の光を照射するように前記光源を作動させ、且つ
    前記計算された相対量の光を照射するように前記光源を作動させてから、前記視野の最終的な画像をキャプチャする、
    ための命令でエンコードされたマイクロプロセッサと
    を有し、
    前記視野の各部分の光の相対量を前記計算することは、前記視野の第1の部分と前記視野の第2の部分とが異なる量の光を受け取ることを決定し、且つ
    前記光源を前記作動させることは、
    前記視野の前記第1の部分を照らす第1のLEDに第1の量の電流を供給することと、
    前記視野の前記第2の部分を照らす第2のLEDに第2の量の電流を供給することと
    を有する、
    構造物。
JP2018523008A 2015-11-10 2016-11-02 適応光源 Active JP6960915B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021167181A JP7341202B2 (ja) 2015-11-10 2021-10-12 適応光源

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562253580P 2015-11-10 2015-11-10
US62/253,580 2015-11-10
EP16158004.8 2016-03-01
EP16158004 2016-03-01
PCT/EP2016/076360 WO2017080875A1 (en) 2015-11-10 2016-11-02 Adaptive light source

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021167181A Division JP7341202B2 (ja) 2015-11-10 2021-10-12 適応光源

Publications (2)

Publication Number Publication Date
JP2019502294A JP2019502294A (ja) 2019-01-24
JP6960915B2 true JP6960915B2 (ja) 2021-11-05

Family

ID=55446718

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2018523008A Active JP6960915B2 (ja) 2015-11-10 2016-11-02 適応光源
JP2018089652A Active JP7334026B2 (ja) 2016-03-01 2018-05-08 適応光源
JP2021167181A Active JP7341202B2 (ja) 2015-11-10 2021-10-12 適応光源
JP2023132428A Pending JP2023144049A (ja) 2016-03-01 2023-08-16 適応光源

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2018089652A Active JP7334026B2 (ja) 2016-03-01 2018-05-08 適応光源
JP2021167181A Active JP7341202B2 (ja) 2015-11-10 2021-10-12 適応光源
JP2023132428A Pending JP2023144049A (ja) 2016-03-01 2023-08-16 適応光源

Country Status (6)

Country Link
US (7) US10602074B2 (ja)
EP (4) EP3374827A1 (ja)
JP (4) JP6960915B2 (ja)
KR (3) KR20230004905A (ja)
CN (4) CN113433775B (ja)
WO (1) WO2017080875A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11803104B2 (en) 2015-11-10 2023-10-31 Lumileds Llc Adaptive light source

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016104381A1 (de) * 2016-03-10 2017-09-14 Osram Opto Semiconductors Gmbh Optoelektronische Leuchtvorrichtung, Verfahren zum Beleuchten einer Szene, Kamera sowie mobiles Endgerät
US10222681B2 (en) 2016-11-07 2019-03-05 Limileds LLC Segmented light or optical power emitting device with fully converting wavelength converting material and methods of operation
TWI608735B (zh) * 2017-03-13 2017-12-11 晶睿通訊股份有限公司 影像擷取裝置及亮度調整方法
JP6782433B2 (ja) * 2017-03-22 2020-11-11 パナソニックIpマネジメント株式会社 画像認識装置
US10083352B1 (en) * 2017-05-22 2018-09-25 Amazon Technologies, Inc. Presence detection and detection localization
US10684635B2 (en) * 2017-07-14 2020-06-16 Lite-On Electronics (Guangzhou) Limited Illumination system and operating method thereof
KR102476404B1 (ko) * 2017-07-18 2022-12-12 엘지이노텍 주식회사 ToF 모듈 및 그 ToF 모듈을 이용한 피사체 인식장치
JP2019046141A (ja) * 2017-09-01 2019-03-22 アルパイン株式会社 運転者監視装置、運転者監視方法、及びプログラム
SE541493C2 (en) * 2017-10-26 2019-10-15 Ivisys Aps System and method for optical inspection of an object
US10321534B1 (en) 2017-11-21 2019-06-11 Lumileds Llc Color error corrected segmented LED array
JP7105884B2 (ja) 2017-11-21 2022-07-25 ルミレッズ リミテッド ライアビリティ カンパニー 色誤差補正されたセグメント化されたledアレイ
JP7132502B2 (ja) * 2018-03-09 2022-09-07 日亜化学工業株式会社 光源装置
US10785422B2 (en) * 2018-05-29 2020-09-22 Microsoft Technology Licensing, Llc Face recognition using depth and multi-spectral camera
WO2020121174A1 (en) * 2018-12-10 2020-06-18 Gentex Corporation Scanning apparatus for reducing field of view search space
US11252336B2 (en) * 2019-05-31 2022-02-15 Samsung Electronics Co.. Ltd. Electronic device obtaining skin image and method of controlling the same
CN112313941A (zh) * 2019-09-20 2021-02-02 深圳市大疆创新科技有限公司 控制装置、摄像装置、控制方法以及程序
EP3805979A1 (en) 2019-10-11 2021-04-14 Lumileds Holding B.V. User controlled imaging device
JP7298459B2 (ja) * 2019-12-03 2023-06-27 富士通株式会社 監視システム及び監視方法
US11489005B2 (en) 2019-12-13 2022-11-01 Lumileds Llc Segmented LED arrays with diffusing elements
US11680696B2 (en) 2019-12-13 2023-06-20 Lumileds Llc Segmented LED arrays with diffusing elements
US20210231302A1 (en) * 2020-01-23 2021-07-29 Nichia Corporation Light source device
US11649945B2 (en) 2020-01-23 2023-05-16 Nichia Corporation Light source device
DE102020104522A1 (de) 2020-02-20 2021-08-26 OSRAM Opto Semiconductors Gesellschaft mit beschränkter Haftung Strahlungsemittierende vorrichtung und verfahren zur herstellung einer strahlungsemittierenden vorrichtung
US20210358149A1 (en) * 2020-05-18 2021-11-18 Nec Laboratories America, Inc Anti-spoofing 3d face reconstruction using infrared structure light
WO2023086633A1 (en) * 2021-11-15 2023-05-19 Lumileds Llc Multiple led arrays with non-overlapping segmentation
GB202117026D0 (en) * 2021-11-25 2022-01-12 Ams Int Ag Illumination device
EP4192000B1 (en) * 2021-11-29 2024-04-17 Tata Consultancy Services Limited Method and system for zone-wise adaptive illumination of objects
CN114698182B (zh) * 2022-05-31 2022-08-12 江苏邑文微电子科技有限公司 Uv led面光源光强均匀性的控制方法和系统

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01184879A (ja) * 1988-01-13 1989-07-24 Sunx Ltd 発光ダイオードアレイチップ
CN1627317A (zh) * 2003-12-12 2005-06-15 北京阳光奥森科技有限公司 利用主动光源获取人脸图像的方法
JP4059224B2 (ja) 2004-04-13 2008-03-12 株式会社デンソー 運転者の外観認識システム
JP2005338280A (ja) * 2004-05-25 2005-12-08 Nikon Corp 撮影用照明装置およびカメラ
JP2006010745A (ja) * 2004-06-22 2006-01-12 Sony Corp 照明装置
CN102006346A (zh) * 2004-09-21 2011-04-06 株式会社尼康 投影仪装置
JP4115467B2 (ja) * 2005-06-01 2008-07-09 富士フイルム株式会社 撮影装置
EP1742462A1 (en) * 2005-07-08 2007-01-10 Koninklijke Philips Electronics N.V. Digital image capturing device with scan type flash
JP4431532B2 (ja) 2005-09-16 2010-03-17 富士フイルム株式会社 対象画像の位置検出装置および方法ならびに対象画像の位置検出装置を制御するプログラム
KR20070081773A (ko) * 2006-02-13 2007-08-17 스마트 와이어레스 가부시키가이샤 적외선 얼굴 인증장치, 이를 구비하는 휴대 단말기 및보안장치
US7886979B2 (en) * 2006-09-19 2011-02-15 Microscan Systems, Inc. Methods for illuminating barcodes
US20080266438A1 (en) * 2007-04-30 2008-10-30 Henrik Eliasson Digital camera and method of operation
CN101378613B (zh) 2007-08-27 2012-07-04 佶益投资股份有限公司 发光二极管光源以及发光二极管灯体
WO2009064813A1 (en) * 2007-11-12 2009-05-22 Bally Gaming, Inc. Networked gaming system including anonymous player biometric identification and tracking
RU2010128573A (ru) * 2007-12-11 2012-01-20 Конинклейке Филипс Электроникс Н.В. (Nl) Осветительное устройство камеры
JP5069578B2 (ja) 2008-01-29 2012-11-07 パナソニック株式会社 撮像装置
JP2009182455A (ja) 2008-01-29 2009-08-13 Duaxes Corp レイヤ2スイッチ装置
JP2009204734A (ja) * 2008-02-26 2009-09-10 Sharp Corp 配光調整方法、照明装置及び撮像装置
EP2128693A1 (en) * 2008-05-28 2009-12-02 ETH Zurich Spatially Adaptive Photographic Flash Unit
US20100317398A1 (en) * 2009-06-10 2010-12-16 Ola Thorn Camera system and method for flash-based photography
US8553103B1 (en) * 2009-09-30 2013-10-08 Hewlett-Packard Development Company, L.P. Compensation of ambient illumination
JP2011123529A (ja) 2009-12-08 2011-06-23 Sony Corp 情報処理装置、情報処理方法、およびプログラム
US20110187878A1 (en) * 2010-02-02 2011-08-04 Primesense Ltd. Synchronization of projected illumination with rolling shutter of image sensor
US8890946B2 (en) * 2010-03-01 2014-11-18 Eyefluence, Inc. Systems and methods for spatially controlled scene illumination
CN101917795A (zh) * 2010-07-06 2010-12-15 上海洪剑智能科技有限公司 一种人脸识别用的调制光补光装置和补光方法
CN201788518U (zh) * 2010-09-04 2011-04-06 东莞市中控电子技术有限公司 具有脸像和虹膜采集功能的识别装置
US8285133B2 (en) * 2010-12-03 2012-10-09 Research In Motion Limited Dynamic lighting control in hybrid camera-projector device
JP2013042099A (ja) 2011-07-15 2013-02-28 Mitsubishi Chemicals Corp 半導体発光装置を搭載するための回路基板、発光モジュール、照明器具、及び照明システム
JP5366028B2 (ja) * 2011-08-25 2013-12-11 株式会社デンソー 顔画像撮像装置
US20130064531A1 (en) * 2011-09-13 2013-03-14 Bruce Harold Pillman Zoom flash with no moving parts
CN104145276B (zh) * 2012-01-17 2017-05-03 厉动公司 用于通过光学成像进行的对象检测和表征的增强对比度
US8831295B2 (en) * 2012-03-21 2014-09-09 Authentec, Inc. Electronic device configured to apply facial recognition based upon reflected infrared illumination and related methods
JP5979973B2 (ja) * 2012-05-18 2016-08-31 キヤノン株式会社 発光制御装置、その制御方法、および制御プログラム
US20140139632A1 (en) * 2012-11-21 2014-05-22 Lsi Corporation Depth imaging method and apparatus with adaptive illumination of an object of interest
JP6200151B2 (ja) * 2012-12-26 2017-09-20 キヤノン株式会社 撮像装置および調光制御方法
US8761594B1 (en) * 2013-02-28 2014-06-24 Apple Inc. Spatially dynamic illumination for camera systems
KR102099635B1 (ko) * 2013-04-09 2020-04-13 삼성전자 주식회사 카메라의 가이드 제공 방법 및 그 전자 장치
EP2984521A4 (en) * 2013-04-11 2016-10-19 De Roer Carlo Van SYSTEM AND METHOD FOR PRODUCING VIRTUAL LIGHT SOURCE MOTION IN CINEMATOGRAPHIC FILM AND OTHER MEDIA
JP2014219602A (ja) * 2013-05-09 2014-11-20 オリンパス株式会社 撮影装置
JP2015034850A (ja) * 2013-08-07 2015-02-19 オリンパス株式会社 撮影装置および撮影方法
US9292765B2 (en) * 2014-01-07 2016-03-22 Microsoft Technology Licensing, Llc Mapping glints to light sources
US9330302B2 (en) * 2014-02-26 2016-05-03 Microsoft Technology Licensing, Llc Polarized gaze tracking
JP2016032257A (ja) 2014-07-30 2016-03-07 株式会社デンソー ドライバ監視装置
TWI604320B (zh) 2014-08-01 2017-11-01 緯創資通股份有限公司 巨量資料存取方法以及使用該方法的系統
CN104580886B (zh) * 2014-12-15 2018-10-12 小米科技有限责任公司 拍摄控制方法及装置
US9674415B2 (en) 2014-12-22 2017-06-06 Google Inc. Time-of-flight camera system with scanning illuminator
US9918073B2 (en) * 2014-12-22 2018-03-13 Google Llc Integrated camera system having two dimensional image capture and three dimensional time-of-flight capture with movable illuminated region of interest
US20160182891A1 (en) * 2014-12-22 2016-06-23 Google Inc. Integrated Camera System Having Two Dimensional Image Capture and Three Dimensional Time-of-Flight Capture With A Partitioned Field of View
US9894257B2 (en) 2015-05-13 2018-02-13 Apple Inc. Light source module with adjustable diffusion
US10785393B2 (en) * 2015-05-22 2020-09-22 Facebook, Inc. Methods and devices for selective flash illumination
KR101627264B1 (ko) 2015-08-10 2016-06-03 주식회사 홍인터내셔날 복수의 카메라를 구비한 다트 게임 장치 및 컴퓨터-판독가능 매체에 저장된 컴퓨터 프로그램
US9571748B1 (en) * 2015-10-27 2017-02-14 International Business Machines Corporation Camera flash light direction management
CN113433775B (zh) 2015-11-10 2023-01-17 亮锐控股有限公司 自适应光源

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11803104B2 (en) 2015-11-10 2023-10-31 Lumileds Llc Adaptive light source

Also Published As

Publication number Publication date
CN113433775A (zh) 2021-09-24
EP3401841A1 (en) 2018-11-14
US20200259987A1 (en) 2020-08-13
EP3964889A1 (en) 2022-03-09
CN108369364A (zh) 2018-08-03
EP3885988A1 (en) 2021-09-29
CN113433775B (zh) 2023-01-17
CN114070986A (zh) 2022-02-18
JP2023144049A (ja) 2023-10-06
CN108881735A (zh) 2018-11-23
US11803104B2 (en) 2023-10-31
EP3374827A1 (en) 2018-09-19
WO2017080875A1 (en) 2017-05-18
KR20180084865A (ko) 2018-07-25
JP7334026B2 (ja) 2023-08-28
CN108881735B (zh) 2021-11-26
KR102555029B1 (ko) 2023-07-14
US10484616B2 (en) 2019-11-19
JP2022003832A (ja) 2022-01-11
US20230266639A1 (en) 2023-08-24
US11223777B2 (en) 2022-01-11
US20200154027A1 (en) 2020-05-14
US20170249501A1 (en) 2017-08-31
KR20230004905A (ko) 2023-01-06
US20220046162A1 (en) 2022-02-10
KR20180123641A (ko) 2018-11-19
JP2019502294A (ja) 2019-01-24
US20180324343A1 (en) 2018-11-08
JP2018191293A (ja) 2018-11-29
US20220094836A1 (en) 2022-03-24
JP7341202B2 (ja) 2023-09-08
EP3401841B1 (en) 2021-10-27
US10602074B2 (en) 2020-03-24
CN108369364B (zh) 2021-07-16
US11184552B2 (en) 2021-11-23

Similar Documents

Publication Publication Date Title
JP7341202B2 (ja) 適応光源
JP6821686B2 (ja) 適応光源用のドライバ

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180511

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191031

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201109

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210312

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211012

R150 Certificate of patent or registration of utility model

Ref document number: 6960915

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150