JP2024035101A - 構造化光走査システムと方法、並びにその画像プロジェクター - Google Patents
構造化光走査システムと方法、並びにその画像プロジェクター Download PDFInfo
- Publication number
- JP2024035101A JP2024035101A JP2023126231A JP2023126231A JP2024035101A JP 2024035101 A JP2024035101 A JP 2024035101A JP 2023126231 A JP2023126231 A JP 2023126231A JP 2023126231 A JP2023126231 A JP 2023126231A JP 2024035101 A JP2024035101 A JP 2024035101A
- Authority
- JP
- Japan
- Prior art keywords
- light
- light source
- scene
- patterns
- image projector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 9
- 238000007493 shaping process Methods 0.000 claims abstract description 7
- 238000010586 diagram Methods 0.000 abstract description 7
- 230000003287 optical effect Effects 0.000 description 13
- 239000004973 liquid crystal related substance Substances 0.000 description 4
- 239000000758 substrate Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000009510 drug design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2513—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/2006—Lamp housings characterised by the light source
- G03B21/2033—LED or laser light sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3191—Testing thereof
- H04N9/3194—Testing thereof including sensor feedback
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Geometry (AREA)
- Projection Apparatus (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- Electromagnetism (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【課題】画像プロジェクターを提供する。【解決手段】異なる光パターンに切り替えながら放射する光源と、光源が放射するビームを整形することで整形光パターンを発生させるために用いられ、シーン中の対象物に投射するためのビームシェイパーと、を備えている。【選択図】図1
Description
本発明は、画像プロジェクター(image projector)に関し、より詳しくは、プログラマブル(プログラム可能)光源を備えた画像プロジェクターであり、異なる光パターンを放射するように切り替え可能なものに関する。
画像プロジェクター(プロジェクターと略称する)は光学装置であり、(静止)画像または一連の画像(或いは、ビデオ周波数)を投影スクリーンの表面に投射する。
プロジェクターは構造化光走査システムに適用可能であり、既知のパターン(例えば、格子や横縞)をシーン中の対象物に投射する。構造化光三次元スキャナーは光の反射が導く変形を分析し、シーン中の対象物の深さ及び表面の情報を算出する。
しかしながら、従来の構造化光走査システムにおいて、プロジェクターの光源は固定構造を有し、対象物に対し同じ光パターンを放射する。このため、従来の構造化光走査システムはデコードレートが低く、ダイナミックレンジが狭いという欠点を有し、対象物の深さ及び表面の情報を正確に獲得できなかった。
そこで、本発明者は従来のプロジェクターと構造化光走査システムの欠点が改善可能と考え、鋭意検討を重ねた結果、合理的設計で上記の課題を効果的に改善する本発明の提案に至った。
本発明は上述の事情に鑑みてなされたものであり、上述のような問題点を解決することを課題の一例とする。すなわち、本発明は、異なる光パターンを生成することにより、好ましい構造化光走査デコードレートを獲得するプログラマブル光源を有する画像プロジェクターを提供することを目的の一とする。
本発明の一実施態様によれば、本発明は画像プロジェクターが提供される。本発明に係る画像プロジェクターは、光源及びビームシェイパーを備えている。光源は異なる光パターンに切り替えながら放射する。ビームシェイパーは光源が放射するビームを整形することで整形光パターンを発生させるために用いられ、シーン中の対象物に投射する。
本発明の他の実施態様によれば、本発明は構造化光走査システムが提供される。本発明に係る構造化光走査システムは、光源と、制御装置と、カメラと、を含んで構成されている。光源はビームを放射するために用いられ、前記光源は、複数のレーザーダイオードで構成されているレーザーアレイを備えている。制御装置は複数のレーザーダイオードをオンまたはオフにするように個別にプログラミングし、異なる光パターンに切り替えながら放射し、シーン中の対象物に投射する。カメラはシーン中の対象物から反射された反射光パターンをキャプチャし、制御装置にフィードバックして深さ及び表面の情報を決定するために用いられている。
本発明のさらなる他の実施態様によれば、本発明は構造化光走査方法が提供される。本発明に係る構造化光走査方法は、下記ステップを含む。光源を提供し、異なる光パターンに切り替えながら放射するステップ。光源が光パターンを有するビームをシーン中の対象物に放射するステップ。シーン中の対象物から反射された反射光パターンの変形に基づいて、深さ及び表面の情報を決定するステップ。深さ及び表面の情報を決定するステップにおいて獲得したデコードレートが所定の臨界値より大きいかどうかを判断するステップ。デコードレートが所定の臨界値より大きくない場合、光パターンを変更すると共に変更光パターンを有するビームをシーン中の対象物に放射するステップ。
本発明の他の目的、構成及び効果については、以下の発明の実施の形態の項から明らかになるであろう。
以下、本発明の実施の形態について詳細に説明する。ただし、本発明はこれに限定されるものではなく、記述した範囲内で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
まず、図面を参照しながら、本発明に係る画像プロジェクター100をさらに詳しく説明する。図1は本発明の一実施例に係る画像プロジェクター100の概略構成を示したブロックである。本実施例の画像プロジェクター100は、画像をシーン中の対象物の表面に投射し、スマートフォン、光学スキャン、顔認証、指向性表示、及びLiDARに応用可能であるが、本発明はこれらに限られない。
本実施例に係る画像プロジェクター100は、(可視または不可視)ビームを放射するために用いられる光源11を備えている。本実施例において、光源11は、レーザービームを放射するためのレーザーアレイを備え、電磁放射によりトリガーされて放射する光学増幅過程(すなわち、放射によりトリガーされて放射することで光を増幅する)に基づいてレーザービームを放射する。一実施例では、(光源11の)レーザーアレイは半導体レーザーダイオードアレイで構成されている垂直共振器型面発光レーザー(VCSEL)を含み、レーザービームはその上面から垂直に放射される。
図2は図1に示す(光源11の)垂直共振器型面発光レーザー(VCSEL)の概略図である。図2に示す如く、(プログラマブル)垂直共振器型面発光レーザーは行と列に配列される複数のレーザーダイオード111を備えている。本実施例の特徴の1つに基づいて、制御装置12(例えば、中央処理装置)は対応する信号線112により個別のレーザーダイオード111をオンまたはオフにし、信号線112は基板110に設置され、基板110はレーザーダイオード111を載置するために用いられている。これにより、(プログラマブル)垂直共振器型面発光レーザーのレーザーダイオード111が異なる光パターンを形成するように光を切り替えながら放射する。
図3A乃至図3Cは図1の光源の(プログラマブル)VCSELによって異なる時間に放射される(異なる)光のパターンである。中実の点はレーザーダイオード111に対応する放射光を示し、中空の点はレーザーダイオード111に対応する未放射光を示す。図3Dは本実施形態を用いないプログラマブル垂直共振器型面発光レーザーの光パターンを示す。図3Dの例では、垂直共振器型面発光レーザーの全てのレーザーダイオードが同時に発光する。換言すれば、垂直共振器型面発光レーザーが放射する光パターンは固定されているか、変更不可能である。
図1に戻って、本実施例に係る画像プロジェクター100は、光源11が放射するビームを整形することで整形光パターンを発生させ、シーン中の対象物に投射するためのビームシェイパー13を備えている。
一実施例では、ビームシェイパー13は回折光学素子(diffractive optical element, DOE)、マイクロレンズアレイ(micro lens array, MLA)、または多焦点回折レンズ(multifocal diffractive lens, MDL)を含み、光源11から放射されたビームを整形及び分裂させ、単一の入射ビームを複数個所に同時に集光することで、整形光パターンを生成してシーン中の対象物に投射する。図4Aは回折光学素子・マイクロレンズアレイ・多焦点回折レンズを用いて光源から放射されたビームを直接的に整形する例示を説明する。
一実施例では、光源11とビームシェイパー13との間にはレンズが設置されておらず、レンズシステムが形成されていない。他の実施例では、画像プロジェクター100が、光源11とビームシェイパー13との間に設置されている少なくとも1つのレンズ14を備えている。レンズ14は光透過光学素子であり、屈折させることで(光源11からの)ビームを集光、コリメート、または発散させる。一実施例では、複数のレンズ14を含むと共に共有軸に沿って設置されている複合レンズを使用する。
他の実施例では、レンズ14は光透過光学素子であり、屈折させることで(光源11からの)ビームを集光、コリメート、または発散させる。一実施例では、フレネル(Fresnel)レンズまたはメタ(Meta)レンズ14を使用しているが、本発明はこれらに限られない。図4Bは回折光学素子・マイクロレンズアレイ・多焦点回折レンズを使用して、光源から放射されたビームをレンズを介して間接的に整形する例示を説明する。
他の実施例では、ビームシェイパー13は、光源11から放射されたビームを整形及び分裂させ、整形光パターンを生成してシーン中の対象物に投射する液晶(LC)レンズを含む。図4Cは液晶レンズを用いて光源から放射されたビームを直接的に整形する例示を説明する。
図5は本発明の一実施例に係る構造化光走査システム500を示したブロックである。本実施例に係る構造化光走査システム500は図1の画像プロジェクター100を含むが、その説明は繰り返さない。
本実施例では、構造化光走査システム500は、シーン中の対象物から反射された(整形光パターンの)反射光パターンをキャプチャするためのカメラ101を備えている。キャプチャされた反射光パターンは制御装置12(例えば、デジタル画像処理装置)にフィードバックし、反射光パターンが光源11に対し発生させる光パターンの変形に基づいて深さ及び表面の情報を決定する。
図6は本発明の一実施例に係る構造化光走査方法600を示すフローチャートである。ステップ61において、光源11(例えば、実施例の垂直共振器型面発光レーザーのようなレーザーアレイ)が(第一または現在の)光パターンを有するビームを放射し、この光パターンは制御装置12によりプログラミングされて制御される。ステップ62において、制御装置12は(第一または現在の)光パターンが光源11に対し放射する(第一)光パターンの変形に基づいて深さ及び表面の情報を決定する。
続いて、ステップ63において、制御装置12が深さ及び表面の情報を決定するステップ(ステップ62)において獲得したデコードレートが所定の臨界値より大きいかどうかを判断する。デコードレートが所定の臨界値より大きくない場合、制御装置12は現在の光パターンを変更(またはプログラミング)する(ステップ64)。続いて、ステップ61のフローチャートに戻り、光源11が(第二)変更光パターン(現在の光パターンとする)を有するビームを放射し、制御装置12によりプログラミングされて制御される。デコードレートが所定の臨界値より大きくなるまで上記のフローチャートを継続的に実行する。図7A乃至図7Cには、図6に示すフローチャートに順次使用する光パターンを示す。
上記の実施例に基づいて、(プログラマブル垂直共振器型面発光レーザーが発生させる)異なる光パターンをシーン中の異なる対象物に適用し、或いは光源11/カメラ101に対し異なる距離を有する対象物に適用する。こうすることで、構造化光走査システム500及び方法600が更に好適なデコードレート(及び更に精確な深さ及び表面の情報)を獲得し、且つ更に広いダイナミックレンジを獲得する。
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
100 画像プロジェクター
500 構造化光走査システム
11 光源
12 制御装置
13 ビームシェイパー
14 レンズ
101 カメラ
110 基板
111 レーザーダイオード
112 信号線
600 構造化光走査法
61 パターンを有するビームを放射する
62 深さの決定
63 デコードレートが臨界値より大きいかどうかを判断する
64 パターン変更
DOE 回折光学素子
MLA マイクロレンズアレイ
MDL 多焦点回折レンズ
500 構造化光走査システム
11 光源
12 制御装置
13 ビームシェイパー
14 レンズ
101 カメラ
110 基板
111 レーザーダイオード
112 信号線
600 構造化光走査法
61 パターンを有するビームを放射する
62 深さの決定
63 デコードレートが臨界値より大きいかどうかを判断する
64 パターン変更
DOE 回折光学素子
MLA マイクロレンズアレイ
MDL 多焦点回折レンズ
Claims (5)
- 異なる光パターンに切り替えながら放射する光源と、
前記光源が放射するビームを整形することで整形光パターンを発生させるために用いられ、シーン中の対象物に投射するためのビームシェイパーと、を備えていることを特徴とする、
画像プロジェクター。 - 前記光源は、複数のレーザーダイオードで構成され、異なる光パターンを形成するようにオンまたはオフになるように個別にプログラミングされるレーザーアレイを備えていることを特徴とする、請求項1に記載の画像プロジェクター。
- 前記光源と前記ビームシェイパーとの間に設置されている少なくとも1つのレンズを更に備えていることを特徴とする、請求項1に記載の画像プロジェクター。
- ビームを放射するために用いられている光源であって、前記光源は、複数のレーザーダイオードで構成されているレーザーアレイを備えている光源と、
前記複数のレーザーダイオードをオンまたはオフにするように個別にプログラミングされ、異なる光パターンに切り替えながら放射し、シーン中の対象物に投射する制御装置と、
シーン中の物品から反射された反射光パターンをキャプチャし、前記制御装置にフィードバックして深さ及び表面の情報を決定するために用いられているカメラと、を備えていることを特徴とする、
構造化光走査システム。 - 光源を提供し、異なる光パターンに切り替えながら放射するステップと、
前記光源が光パターンを有するビームをシーン中の対象物に放射するステップと、
シーン中の対象物から反射された反射光パターンの変形に基づいて深さ及び表面の情報を決定するステップと、
深さ及び表面の情報を決定するステップにおいて獲得したデコードレートが所定の臨界値より大きいかどうかを判断するステップと、
前記デコードレートが所定の臨界値より大きくない場合、光パターンを変更すると共に変更光パターンを有するビームをシーン中の対象物に放射するステップと、を含むことを特徴とする、
構造化光走査法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/901,469 | 2022-09-01 | ||
US17/901,469 US20240077306A1 (en) | 2022-09-01 | 2022-09-01 | Structured-light scanning system and method and an image projector thereof |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024035101A true JP2024035101A (ja) | 2024-03-13 |
Family
ID=87517228
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023126231A Pending JP2024035101A (ja) | 2022-09-01 | 2023-08-02 | 構造化光走査システムと方法、並びにその画像プロジェクター |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240077306A1 (ja) |
EP (1) | EP4332500A1 (ja) |
JP (1) | JP2024035101A (ja) |
CN (1) | CN117631427A (ja) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10054430B2 (en) * | 2011-08-09 | 2018-08-21 | Apple Inc. | Overlapping pattern projector |
CN108604053B (zh) * | 2015-10-21 | 2021-11-02 | 普林斯顿光电子股份有限公司 | 编码图案投影仪 |
US9992474B2 (en) * | 2015-12-26 | 2018-06-05 | Intel Corporation | Stereo depth camera using VCSEL with spatially and temporally interleaved patterns |
WO2018033917A1 (en) * | 2016-08-18 | 2018-02-22 | Ramot At Tel-Aviv University Ltd. | Structured light projector |
US11269193B2 (en) * | 2017-11-27 | 2022-03-08 | Liqxtal Technology Inc. | Optical sensing device and structured light projector |
US20210313764A1 (en) * | 2020-04-05 | 2021-10-07 | Apple Inc. | Emitter array with uniform brightness |
-
2022
- 2022-09-01 US US17/901,469 patent/US20240077306A1/en active Pending
-
2023
- 2023-07-27 EP EP23188138.4A patent/EP4332500A1/en active Pending
- 2023-07-28 CN CN202310939703.XA patent/CN117631427A/zh active Pending
- 2023-08-02 JP JP2023126231A patent/JP2024035101A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
CN117631427A (zh) | 2024-03-01 |
US20240077306A1 (en) | 2024-03-07 |
EP4332500A1 (en) | 2024-03-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107424188B (zh) | 基于vcsel阵列光源的结构光投影模组 | |
CN106997603B (zh) | 基于vcsel阵列光源的深度相机 | |
KR102231081B1 (ko) | 구조형 광의 프로젝터 | |
CN107637074B (zh) | 使用立体摄像机与结构化光的头戴显示器的深度绘制 | |
US9797708B2 (en) | Apparatus and method for profiling a depth of a surface of a target object | |
KR102027184B1 (ko) | 동적 구조화 광을 사용하는 3차원 깊이 맵핑 | |
CN108332082B (zh) | 照明模组 | |
US9870068B2 (en) | Depth mapping with a head mounted display using stereo cameras and structured light | |
CN108337492B (zh) | 动态投影成像装置 | |
US10386706B2 (en) | Structured-light projector | |
US20200192206A1 (en) | Structured light projector, three-dimensional camera module and terminal device | |
JP2011160420A (ja) | 投影照明の画像センサの回転シャッタとの同期 | |
US10986289B2 (en) | Method and device for regulating imaging accuracy of motion-sensing camera | |
JP2001116526A (ja) | 3次元形状計測装置 | |
US10754167B2 (en) | Structured-light projector | |
US10473766B2 (en) | Light detection and ranging (LiDAR) system and method | |
US20230019896A1 (en) | Illumination device for a distance measurement camera system, a corresponding illumination method and a tof camera system | |
JP2024035101A (ja) | 構造化光走査システムと方法、並びにその画像プロジェクター | |
WO2019076811A1 (en) | 3D CAMERA SYSTEM WITH IMAGE SENSOR ARRAY WITH SHUTTER DETRATING ADDRESSABLE LIGHT SOURCES | |
TW202411763A (zh) | 結構光掃描系統與方法及其影像投影機 | |
CN217085782U (zh) | 一种结构光三维成像模块及深度相机 | |
JP2023522717A (ja) | コリメータ機能付き回折光学素子 | |
TW201915590A (zh) | 結構光投影機 | |
US20230236009A1 (en) | Light source for structured light, structured light projection apparatus and system | |
CN115963689A (zh) | 用于三维成像装置中的图案投影装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230803 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240402 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240514 |