JP2021018079A - 撮像装置、計測装置、及び、計測方法 - Google Patents
撮像装置、計測装置、及び、計測方法 Download PDFInfo
- Publication number
- JP2021018079A JP2021018079A JP2019132203A JP2019132203A JP2021018079A JP 2021018079 A JP2021018079 A JP 2021018079A JP 2019132203 A JP2019132203 A JP 2019132203A JP 2019132203 A JP2019132203 A JP 2019132203A JP 2021018079 A JP2021018079 A JP 2021018079A
- Authority
- JP
- Japan
- Prior art keywords
- light
- filter
- measuring device
- measurement
- wavelength
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims description 38
- 239000004065 semiconductor Substances 0.000 claims description 8
- 230000010355 oscillation Effects 0.000 claims description 4
- 238000005259 measurement Methods 0.000 abstract description 74
- 230000003287 optical effect Effects 0.000 description 66
- 238000010586 diagram Methods 0.000 description 36
- 230000000694 effects Effects 0.000 description 19
- 230000004907 flux Effects 0.000 description 12
- 230000010363 phase shift Effects 0.000 description 11
- 239000012071 phase Substances 0.000 description 10
- 238000005520 cutting process Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 239000011295 pitch Substances 0.000 description 9
- 239000000758 substrate Substances 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 239000000463 material Substances 0.000 description 7
- 230000009467 reduction Effects 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 230000015572 biosynthetic process Effects 0.000 description 5
- 238000000691 measurement method Methods 0.000 description 5
- JBRZTFJDHDCESZ-UHFFFAOYSA-N AsGa Chemical compound [As]#[Ga] JBRZTFJDHDCESZ-UHFFFAOYSA-N 0.000 description 3
- 229910001218 Gallium arsenide Inorganic materials 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000005530 etching Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 101100512048 Arabidopsis thaliana LWD1 gene Proteins 0.000 description 2
- VEXZGXHMUGYJMC-UHFFFAOYSA-N Hydrochloric acid Chemical compound Cl VEXZGXHMUGYJMC-UHFFFAOYSA-N 0.000 description 2
- NBIIXXVUZAFLBC-UHFFFAOYSA-N Phosphoric acid Chemical compound OP(O)(O)=O NBIIXXVUZAFLBC-UHFFFAOYSA-N 0.000 description 2
- 239000010949 copper Substances 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 239000010408 film Substances 0.000 description 2
- 229910052738 indium Inorganic materials 0.000 description 2
- APFVFJFRJDLVQX-UHFFFAOYSA-N indium atom Chemical compound [In] APFVFJFRJDLVQX-UHFFFAOYSA-N 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000001000 micrograph Methods 0.000 description 2
- 238000005316 response function Methods 0.000 description 2
- 239000011669 selenium Substances 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000001039 wet etching Methods 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- GYHNNYVSQQEPJS-UHFFFAOYSA-N Gallium Chemical compound [Ga] GYHNNYVSQQEPJS-UHFFFAOYSA-N 0.000 description 1
- MHAJPDPJQMAIIY-UHFFFAOYSA-N Hydrogen peroxide Chemical compound OO MHAJPDPJQMAIIY-UHFFFAOYSA-N 0.000 description 1
- BUGBHKTXTAQXES-UHFFFAOYSA-N Selenium Chemical compound [Se] BUGBHKTXTAQXES-UHFFFAOYSA-N 0.000 description 1
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- WYTGDNHDOZPMIW-RCBQFDQVSA-N alstonine Natural products C1=CC2=C3C=CC=CC3=NC2=C2N1C[C@H]1[C@H](C)OC=C(C(=O)OC)[C@H]1C2 WYTGDNHDOZPMIW-RCBQFDQVSA-N 0.000 description 1
- 229910000147 aluminium phosphate Inorganic materials 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000010304 firing Methods 0.000 description 1
- 229910052733 gallium Inorganic materials 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000010030 laminating Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000001451 molecular beam epitaxy Methods 0.000 description 1
- 239000012788 optical film Substances 0.000 description 1
- 238000000059 patterning Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 229910052711 selenium Inorganic materials 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000001947 vapour-phase growth Methods 0.000 description 1
Landscapes
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
まず、第1の実施の形態は、3次元形状計測装置に対する適用例である。図1は、この第1の実施の形態となる3次元形状計測装置の要部の構成図である。この図1に示すように、第1の実施の形態の3次元形状計測装置1は、計測情報取得ユニット20及び制御ユニット30を有している。
計測情報取得ユニット20は、投影部である光学装置10及び撮像部であるカメラ21を有している。光学装置10は、VCSEL(Vertical Cavity Surface Emitting Laser:面発光型レーザ)チップ11、ラインジェネレータ12(光学系)及び光偏向素子(ミラー)13を有している。
制御ユニット30は、制御部31及び演算処理部32を有する。この制御ユニット30は、光学装置10からパターン光を投影する制御、及び、カメラ21によりパターン光を撮像する制御等を行う。制御ユニット30は、カメラ21から供給された画像信号に基づいて、計測対象物の3次元計測等の演算処理を行う。制御部31は、光学装置10が投影するパターン光を別のパターン光に切り替える制御を行ってもよい。また、制御部31は、演算処理部32が3次元座標の算出に用いるキャリブレーション情報を出力する制御を行ってもよい。
図2は、光学装置10による計測対象物への光投影の様子を示す図である。図2において、光学装置10は、ライン光14を計測対象物15に向けて出射する。ライン光14は、VCSELチップ11の各発光素子aからの複数の光が重なり合っている光で、光偏向素子(ミラー)13のミラー面で偏向されて、図2に破線で示すように計測対象物15に照射される。具体的には、光偏向素子13が、図2に示すライン光の長手方向軸周りMの方向にミラー面を駆動することでミラー面に照射される光を偏向する。各ライン光は、所定のパターン光になるように制御される。これにより、計測対象物15に2次元のパターン光を照射し、計測対象物15に投影画像60を投影する。投影画像60は、例えば計測対象物15を含む領域に投影される。
図3は、VCSELチップ11の構成の一例を示す図である。図3に示すVCSELチップ11は、同一基板上で発光素子aを容易に集積可能な面発光型半導体レーザであり、1次元的に配列された複数の発光素子aを有する。
aの開口部の形状を四角形で示しているが、例えば六角形等であってもよいし、これに限定されず、その他の形状であってもよい。また、各発光素子aのレーザ光の波長は適宜設定してよい。例えば、可視でも不可視でもどちらでもよい。各発光素子aにおいては発光を独立に制御可能なように構成してもよい。
。
図5は、光学装置10の光学系の一例を示す図である。図5の上下の図のうち、上の図は、光学装置10の光学系を水平方向(H)から見た状態の図である。また、図5の上下の図のうち、下の図は、光学装置10の光学系を垂直方向(V)から見た状態の図である。
構成については図示を省略している。なお、各発光素子aの発散角の制御は、マイクロレンズアレイ及び(又は)マイクロシリンドリカルレンズアレイで行うことができる。つまり、各発光素子aの発散角の制御にマイクロレンズアレイを使用してもよいし、マイクロシリンドリカルレンズアレイを使用してもよい。また、これらの両方を組み合わせてもよい。ここでは、一例として、両方を組み合わせた例について示す。
光偏向素子13は、レーザ光を1軸又は2軸方向に走査する可動ミラーである。可動ミラーとしては、例えばMEMSミラー、ポリゴンミラー又はガルバノミラー等を用いることができる。なお、レーザ光を1軸又は2軸方向に走査可能であれば、その他の方式を用いたものでもよい。3次元形状計測装置では、ラインジェネレータ12により形成されたライン光14を走査範囲中の計測対象物15上に一軸走査する可動ミラーを使用する。可動ミラーでライン光を光走査することで、2次元面状の投影パターンが形成される。
図16は、カメラ21の構成を示す図である。カメラ21は、レンズ210及び撮像素子211を有する。撮像素子211としては、例えばCCDイメージセンサ又はCMOSイメージセンサ等を用いることができる。カメラ21に入射した光は、レンズ210を介して撮像素子211上に結像して光電変換される。撮像素子211で光電変換された電気信号は、画像信号へと変換され、その画像信号がカメラ21から制御ユニット30の演算処理部32(図1参照)へと出力される。
まず、一般的な撮像素子の場合、CCDイメージセンサ又はCIS(銅(Cu)、インジウム(In)、セレン(Se))と呼ばれる可視光〜NIR領域(近赤外領域:700〜2000nm)に感度を有するシリコンIC(Integrated Circuit)が使用される。
次に、図18は、3次元形状計測装置1のブロック図である。この図18において、演算処理部32は、カメラ21から出力された画像信号を解析する。演算処理部32は、画像信号の解析結果と、キャリブレーション情報とを用いた演算処理により、3次元情報の復元処理を行い、これにより対象の3次元計測を実行する。演算処理部32は、復元された3次元情報を制御部31に供給する。
次に、計測対象物を走査する投影パターンについて説明する。計測対象物に光を照射して、計測対象物の形状及び姿勢を3次元情報として取得する3次元計測手法としては、例えば位相シフト法を用いた計測手法、及び、光切断法を用いた計測手法が知られている。これらの計測手法は、例えば以下の非特許文献にそれぞれ開示されている。
図21は、第1の実施の形態の3次元計測装置1における計測対象物の計測態様を示している。この図21に示すように、3次元計測装置1は、カメラ21、光源、ラインジェネレータ12(光学系)及び光偏向素子(ミラー)13を有している。光源は、上述のように、波長λ1〜波長λ4で発振する多波長のVCSELチップ11である。また、カメラ21の撮像素子58上には、バンドパスフィルタ57が設けられている。図17を用いて説明したように、4つの各画素上に波長λ1〜波長λ4の光を透過するフィルタ片部57λ1〜57λ4がそれぞれ位置するように、撮像素子58に対してバンドパスフィルタ57が設けられている。
以上の説明から明らかなように、第1の実施の形態の3次元計測装置1は、VCSELチップ11を用いることで、各発光素子aが同レベルの出力光量となるように、出力の安定化を図ることができる。このため、特に輝度値を周期的に変化させた位相パターンを投影する3次元計測において、スペックルノイズの影響だけでなく光源の出力ムラを低減し、設計通りの位相パターンを投影することができ、高精度で安定した測定を行うことができる。
次に、上述の第1の実施の形態で説明した3次元計測装置1をロボットアーム(多関節アーム)に設けた第2の実施の形態の説明をする。図22は、第2の実施の形態のロボットアームの斜視図である。この図22において、ロボットアーム70は、対象物をピッキングするためのハンド部71を備え、ハンド部71の直近に上述の第1の実施の形態で説明した3次元計測装置1が設けられている。ロボットアーム70は、それぞれ屈曲可能な複数の可動部を備え、ハンド部71の位置及び向きを、制御に従い変更する。
次に、上述の第1の実施の形態で説明した3次元計測装置1をスマートフォン又はPC等の電子機器に設けた第3の実施の形態の説明をする。図23は、3次元計測装置1が設けられた第3の実施の形態のスマートフォンの斜視図である。スマートフォン80には、3次元計測装置1と使用者の認証機能が設けられている。使用者の認証機能としては、例えば専用のハードウェアが設けられている。この他、コンピュータ構成のCPUがROM等のプログラムを実行して本機能を実現するようにしてもよい。3次元計測装置1は、使用者81の顔、耳や頭部の形状等を計測する。一例ではあるが、この計測結果に基づいて、使用者81の認証処理等を行う。
次に、上述の第1の実施の形態で説明した3次元計測装置1を、自動車等の移動体に設けた第4の実施の形態の説明をする。図24は、3次元計測装置1が設けられた第4の実施の形態の移動体の要部の斜視図である。この図24において、自動車の車内85には、3次元計測装置1と運転支援機能が設けられている。運転支援機能は、例えば専用のハードウェアで実現される。または、運転支援機能は、コンピュータ構成のCPUがROM等に記憶されている運転支援プログラムを実行することでソフトウェア的に実現される。
次に、上述の第1の実施の形態で説明した3次元計測装置1を、造形装置の一例である3次元プリンタ装置に設けた第5の実施の形態の説明をする。図26は、第5の実施の形態の3次元プリンタ装置の要部の斜視図である。この図26において、3次元プリンタ装置90のヘッド部91に、上述の3次元計測装置1が設けられている。ヘッド部91は形成物92を形成するための造形液を吐出するノズル93を有する。3次元計測装置1は、3次元プリンタ装置90によって形成される形成物92の形成中の形状を計測する。そして、この計測結果に基づいて、3次元プリンタ装置90の形成物92の形成制御が行われる。
10 光学装置
12 ラインジェネレータ
13 光偏向素子(ミラー)
20 計測情報取得ユニット
21 カメラ21
30 制御ユニット
31 制御部
32 演算処理部
50 半導体基板
51 下部ブラッグ反射鏡(nDBR)
52 活性層
53 共振領域
54 上部ブラッグ反射鏡(pDBR)
57 バンドパスフィルタ
57λ1 波長λ1の光を透過するフィルタ片部
57λ2 波長λ2の光を透過するフィルタ片部
57λ3 波長λ3の光を透過するフィルタ片部
57λ4 波長λ4の光を透過するフィルタ片部
58 画素
59 フィルタ群
210 レンズ
211 撮像素子
Claims (8)
- 異なる波長の光を透過する複数のフィルタ片部を備えたフィルタ部と、
各前記フィルタ片部を透過した各波長の光をそれぞれ受光し、受光した光の情報に応じた受光信号をそれぞれ出力する複数の受光素子と
を有する撮像装置。 - 前記フィルタ部の各前記フィルタ片部は、隣接する各前記フィルタ片部が、それぞれ異なる波長の光を受光するように配置されていること
を特徴とする請求項1に記載の撮像装置。 - 前記フィルタ部の各前記フィルタ片部は矩形状を有しており、それぞれ2つの辺で隣のフィルタ片部と隣接する4つのフィルタ片部を一セットのフィルタ群とし、複数セットの前記フィルタ群を、前記受光素子上に周期的に配置して形成されていること
を特徴とする請求項2に記載の撮像装置。 - 前記光の情報は光量であること
を特徴とする請求項1から請求項3のうち、いずれか一項に記載の撮像装置。 - 所定の投影パターンの複数の異なる波長の光を、対象物に一以上のグループとして照射する照射部と、
請求項1から請求項4のうち、いずれか一項に記載の撮像装置と、
前記撮像装置からの受光信号に基づいて、前記対象物の奥行情報を計測する計測部と
を有する計測装置。 - 前記照射部は、複数の発振波長を有する面発光型半導体レーザであること
を特徴とする請求項5に記載の計測装置。 - 前記照射部は、複数の異なる波長の前記投影パターンを形成する投影パターン形成部を含むこと
を特徴とする請求項5又は請求項6に記載の計測装置。 - 請求項1から請求項4のうち、いずれか一項に記載の撮像装置を用い、
所定の投影パターンの複数の異なる波長の光を、対象物に一以上のグループとして照射し、
前記撮像装置からの受光信号に基づいて、前記対象物の奥行情報を計測する
計測方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019132203A JP2021018079A (ja) | 2019-07-17 | 2019-07-17 | 撮像装置、計測装置、及び、計測方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019132203A JP2021018079A (ja) | 2019-07-17 | 2019-07-17 | 撮像装置、計測装置、及び、計測方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021018079A true JP2021018079A (ja) | 2021-02-15 |
Family
ID=74563557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019132203A Pending JP2021018079A (ja) | 2019-07-17 | 2019-07-17 | 撮像装置、計測装置、及び、計測方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021018079A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230062169A1 (en) * | 2021-03-22 | 2023-03-02 | Kabushiki Kaisha Toshiba | Optical apparatus, optical inspection method and non-transitory storage medium |
WO2023074404A1 (ja) * | 2021-10-29 | 2023-05-04 | ソニーグループ株式会社 | 発光装置及び電子機器 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016170122A (ja) * | 2015-03-13 | 2016-09-23 | キヤノン株式会社 | 計測装置 |
-
2019
- 2019-07-17 JP JP2019132203A patent/JP2021018079A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016170122A (ja) * | 2015-03-13 | 2016-09-23 | キヤノン株式会社 | 計測装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230062169A1 (en) * | 2021-03-22 | 2023-03-02 | Kabushiki Kaisha Toshiba | Optical apparatus, optical inspection method and non-transitory storage medium |
WO2023074404A1 (ja) * | 2021-10-29 | 2023-05-04 | ソニーグループ株式会社 | 発光装置及び電子機器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11555926B2 (en) | Optical device, measurement device, robot, electronic apparatus, mobile object, and shaping device | |
US11531208B2 (en) | Light source, optical device, measuring device, robot, electronic apparatus, movable structure, and manufacturing apparatus | |
US11467261B2 (en) | Distance measuring device and moving object | |
US10679370B2 (en) | Energy optimized imaging system with 360 degree field-of-view | |
US20200241113A1 (en) | Lidar system including a transceiver array | |
WO2016017407A1 (ja) | レーザ測距装置 | |
US8675141B2 (en) | Closed loop feedback for electronic beam alignment | |
JP2007144024A (ja) | 自己混合レーザを用いる三次元計測内視鏡 | |
US10404954B2 (en) | Optical deflection apparatus, image projector, optical writing unit, and object recognition device | |
JP2021018079A (ja) | 撮像装置、計測装置、及び、計測方法 | |
JP2013257162A (ja) | 測距装置 | |
JP2010203864A (ja) | 物体検知装置 | |
JP2020092256A (ja) | 光源、光源装置、光学装置、計測装置、ロボット、電子機器、移動体、および造形装置 | |
JP7379859B2 (ja) | 光源、投影装置、計測装置、ロボット、電子機器、移動体、および造形装置 | |
WO2019021887A1 (ja) | 光レーダ装置 | |
US20200004127A1 (en) | Light source, projection device, measurement device, robot, electronic device, mobile object, and shaping apparatus | |
US11940564B2 (en) | Laser radar device | |
US20210333405A1 (en) | Lidar projection apparatus | |
JP2021018081A (ja) | 撮像装置、計測装置、及び、計測方法 | |
WO2021200016A1 (ja) | 測距装置および発光装置 | |
JP2021148670A (ja) | 測定方法、光学装置、計測装置、移動体、ロボット、電子機器及び造形装置 | |
US11527867B2 (en) | Surface emitting laser element, illumination device, projection device, measurement device, robot, electronic apparatus, mobile body, and modeling device | |
JP2022071666A (ja) | 光学装置、計測装置、ロボット、電子機器および造形装置 | |
JP2020159730A (ja) | 三次元計測方法、三次元計測装置およびロボットシステム | |
US20240045068A1 (en) | LiDAR SYSTEM AND RESOLUSION IMPROVEMENT METHOD THEREOF |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220518 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230725 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240206 |