JP4323779B2 - 3D shape measuring method and 3D shape measuring apparatus - Google Patents
3D shape measuring method and 3D shape measuring apparatus Download PDFInfo
- Publication number
- JP4323779B2 JP4323779B2 JP2002337972A JP2002337972A JP4323779B2 JP 4323779 B2 JP4323779 B2 JP 4323779B2 JP 2002337972 A JP2002337972 A JP 2002337972A JP 2002337972 A JP2002337972 A JP 2002337972A JP 4323779 B2 JP4323779 B2 JP 4323779B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- measured
- dimensional shape
- light source
- irradiated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、被計測物体の3次元形状または3次元形状と色を計測する3次元形状計測方法および3次元形状計測装置に係わり、特に、計測産業、通信産業、映像産業などの分野において使用される3次元形状計測方法および3次元形状計測装置に関する。
【0002】
【従来の技術】
カメラを用いて被計測物体の3次元形状を取得する様々な計測装置が提案されている。これらの方法は、ステレオ法に代表される被計測物体に特別な照明を照射しないパッシブ型計測装置、被計測物体に特別な照明を照射するアクティブ型計測装置に分類できる。
パッシブ型計測装置は、特に、ステレオ法はカメラ2台でできるため非常に低コストで汎用性もあり、昔から精力的に研究されてきたが、未だに計測の信頼性が低く汎用的に使える装置としては実用段階に至っていない。
一方、アクティブ型計測装置は計測精度、分解能、計測信頼性も実用水準に到達しており、近年では動画像計測も可能となった。
しかしながら、一般に装置が大型かつ高価であり携帯化できるサイズヘの小型化は不可能であった。
また、アプリケーションによっては、計測精度や分解能が低くて構わない場合も多いが、従来のアクティブ型計測装置ではこれらのスペックを下げても装置の低価格化や小型化を効率よくはかることができない。
【0003】
これに対し、異なる距離の光源から拡散光を被計測物体に照射し、各々の輝度値の比を取ることによって距離を求める装置が開示されている(例えば、特許文献1参照)。
前述の特許文献1に開示されている装置の構成を図14に示す。
図14において、13は被計測物体、11は遠方の光源、12は遠方の光源11より距離x0だけ被計測物体13に近い光源、14は撮影カメラ、15は画像データの記録メモリ、16は画像データの演算器、17は全体の制御装置である。
図14に示す装置は、計測精度分解能はあまり高くないものの、基本的には2つの光源とカメラを用意するだけで装置を構成することができるので、極めて低価格に作ることが可能であり、その他の方式と比較すれば比較的小型の装置にすることも可能である。
【0004】
図14に示す装置の動作と計測原理を説明する。
初めに、制御装置17は、光源11を点灯して拡散光を被計測物体13に照射し、撮影カメラ14で被計測物体13を撮影し、この画像データを記録メモリ15に記録した後、光源11を消灯する。
光源11と被計測物体13間の距離をx、光源11の光量をL1、光源12の光量をL2とすると、光源11で照明された被計測物体13上のある地点の輝度V1は、光源11から来る光を撮影カメラ14の方向に反射する反射率をkとすると、下記(1)式で与えられる。
【数1】
V1=kL1/4πx2 ・・・・・・・・・・・・・・・・・ (1)
次に、制御装置17は、光源12を点灯して拡散光を被計測物体13に照射し、撮影カメラ14で被計測物体13を撮影し、この画像データを画像メモリ15に記録した後、光源12を消灯する。
この時、光源12で照明された該地点の輝度V2は、下記(2)式で与えられる。
【数2】
V2=kL2/4π(x−x0)2 ・・・・・・・・・・・・ (2)
【0005】
次に、制御装置17は、演算器16を用いて、(1)式と(2)式の比をとることによって該地点の距離xを求め、全画素について、この演算を施すことによって被計測物体13の3次元形状データを求めて、記録メモリ15に書き込む。
この時の演算式は、(1)式および(2)式より、下記(3)式で与えられる。
【数3】
x=x0/{1−√(V1L2/V2L1)}・・・・・・・・・・・・ (3)
前述の特許文献1では、1点の距離計測なのか、3次元形状全体の計測なのか明示されていないが、動作原理は同じで3次元形状計測を明示的に示した請求項が特許文献2に記載されている。また、特許文献2と全く同じ内容の特許が数式の表現を代えて、特許文献3の請求項1および請求項2、特許文献4の請求項1、特許文献5の請求項1、および、特許文献6の請求項1に記載されている。
【0006】
なお、本願発明に関連する先行技術文献情報としては以下のものがある。
【特許文献1】
特開昭61−155909号公報
【特許文献2】
特開昭63−233312号公報
【特許文献3】
特開2002−77944号公報
【特許文献4】
特開2002−65581号公報
【特許文献5】
特開2002−95625号公報
【特許文献6】
特開2002−65585号公報
【0007】
【発明が解決しようとする課題】
しかし、前述の図14に示す装置は、以下に掲げる問題点がある。
(1)装置を薄型化できない。
装置の奥行き長は、図14の二つの光源間の距離x0で決まるが、x0を小さくすると距離計測の分解能が悪くなるため、実用に供するためにx0は大きくする必要がある。
しかし、x0が大きいと、装置の奥行き長が長くなる他、手前の光源12が遠方の光源11の影とならないように横方向にずらす距離yも大きくなってしまい、装置が大型化する問題が起こる。また、距離yを大きくすると、後で述べる課題2にかかげた問題がより深刻化する。
光学的に充分な距離x0を有しながら実際の装置の奥行き長が短くてすむ小型装置を提供することが本発明の課題1である。
【0008】
(2)光沢のある物体が計測できない。
前述の(1)式と、(2)式とは、どちらも同じ反射率kを用いている。これは照明の入射角に依存せず同一方向(撮影カメラ方向)への反射率は同じであることを前提としている。
しかしながら、一般に物体の反射率kは、照明の入射角や照明の波長に依存して変化し一定ではない。図14に示す装置では、光源の波長(色)が同じであること前提としているので後者の問題はないが、距離yが大きくなると、光源11と光源12の入射角の差も大きくなるので、反射率kの変化が無視できなり正確な計測ができなくなる。
特に、光沢のある物体に代表される鏡面反射特性の強い物体に照明を当てるとハイライトを生じるが、ハイライト近辺領域は照明の入射角のわずかな違いで反射率kが大きく変わるため計測不能となってしまう。
従って、従来の技術では石膏など光沢のない拡散反射特性の強い物体の計測に限られていた。ちなみに、前述の特許文献2では、実験に石膏像を使用している。
被計測物体が光沢のある物体でも計測可能な装置を提供することが本発明の課題2である。
【0009】
(3)性能を落とさず物体の色と形状を同時に取得できない。
従来の技術では、被計測物体の色は計測しない、もしくはカラーカメラを用いて形状計測と色計測を兼用する公知の方法によっている。
ところが、カラーカメラのSN比は、モノクロカメラより悪いためわずかな輝度差から距離情報を算出する本計測法においては不都合である。
別々の専用カメラを用いて形状計測と色計測を同時に行うことによってこの問題を解決しながら、両カメラの撮影の光軸を一つとしてオクルージョン(色計測カメラまたは形状計測カメラには写りながら形状計測カメラまたは色計測カメラからは影となって見えない領域)のない色と3次元形状の同時計測可能装置を提供することが、本発明の課題3である。
【0010】
本発明は、前記従来技術の問題点を解決するためになされたものであり、本発明の目的は、3次元形状計測方法および3次元形状計測装置において、光学的に十分な距離x0を有しながら実際の装置の奥行き長を短くして、小型化を図ることが可能となる技術を提供することにある。
また、本発明の他の目的は、3次元形状計測方法および3次元形状計測装置において、被計測物体が光沢のある物体でも計測することが可能となる技術を提供することにある。
また、本発明の他の目的は、3次元形状計測方法および3次元形状計測装置において、色計測カメラと形状計測カメラとして、それぞれ別々の専用カメラを用いて形状計測と色計測を同時に行うとともに、両カメラの撮影の光軸を一つとしてオクルージョンのない色と3次元形状とを同時に計測することが可能となる技術を提供することにある。
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述及び添付図面によって明らかにする。
【0011】
【課題を解決するための手段】
前述の課題1を解決するため、本発明(請求項6に記載された発明)では、被計測物体から同一距離に配置されるとともに、それぞれ拡散角の異なる拡散光を照射する複数の照明手段と、前記各照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、前記第1の撮影手段で撮影された画像データを記録する記録手段と、前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、前記照明手段は、それぞれ、照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離と前記複数の照明手段のうち基準となる照明手段が照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差が所定の距離差となるように、前記拡散角が設定されている。
本発明の3次元形状計測装置の動作、測定原理や動作は前述した従来の3次元形状計測装置と同じであり、照明手段の構成が異なる。これを図1を用いて説明する。
図1(a)は、従来の装置の照明手段を示す図であり、距離の異なる光源21と光源22からなり、各々の光源(21,22)から順次拡散光を被計測物体23に照射して撮影する。
この図1(a)から分かるように、装置の奥行き長24は少なくともx0以上が必要となる。また、手前の光源21が、奥の光源22の影とならないよう横または縦方向に距離25だけずらして配置しなければならない。
【0012】
これに対して、図1(b)に示す本発明の3次元形状計測装置は、被計測物体23から同一距離にある二つの光源(26,27)から拡散角の異なる拡散光を照射する。
光の広がり方は、光源26は位置215に仮想的な点光源を置いた場合と等価であり、光源27は位置216に仮想的な点光源を置いた場合と等価であるので、位置215と位置216の距離差で与えられる光学的な距離差x0は従来の3次元形状計測装置と同じである。
よって、同じ光学的な距離差x0を有しながら、実際の奥行き長は、図1(b)に示す28の長さに短縮できる。
図1(c)に示す本発明の3次元形状計測装置は、光源211に負の拡散角を与えている。光源211から照射された光は一旦収束した後で拡散光となる。
光の広がり方は、光源211は位置217に仮想的な点光源を置いた場合と等価であり、光源210は位置218に仮想的な点光源を置いた場合と等価であるので、位置217と位置218の距離差で与えられる光学的な距離差x0は従来の3次元形状計測装置と同じである。
光学的な焦点は、光源211の前方に位置する。よって、同じ光学的な距離差x0を有しながら、実際の奥行き長は、図1(c)に示す213の長さに短縮できる。
また、光源の照射面積も、図1(b)より小さいので、より小型の光源で済み、位置212に光源210をよせることによって、縦方向にずらす距離も、図1(b)に示す29よりも、図1(c)に示す214の距離に短縮できる。
【0013】
なお、前述の(1)式、(2)式で用いる光源の光量は、図14に示すように全方向に照射する点光源の光量を想定しているので、図1で用いるような特定の範囲に照射する光源の光量を予め補正する必要がある。
これは、光源26、光源211の光源の光量をL1’、照射範囲の立体角をω1、光源27、光源210の光源の光量をL2’、照射範囲の立体角をω2とすると、下記(4)式、(5)式にように変換することにより、全方向に照射する点光源の等価光量に変換される。
【数4】
L1=4πL1’/ω1 ・・・・・・・・・・・・・・・・・ (4)
L2=4πL2’/ω2 ・・・・・・・・・・・・・・・・・ (5)
以上説明したように、本発明の3次元形状計測装置は、光学的には十分な距離x0を有しながら、実際の3次元形状計測装置の奥行き長は短くてすみ3次元形状計測装置の小型化がはかれるので課題1が解決される。また、横または縦にずらす距離も小さくできるので、被計測物体への照射角度の差も小さくでき課題2の解決にも有効である。
【0014】
課題2を解決するため、本発明(請求項8に記載の発明)では、ハーフミラーを有し、複数の照明手段から照射されるそれぞれの拡散光をハーフミラーで合成して一つの光軸上で照射することを特徴とする。
図2に、本発明の3次元形状計測装置の照明手段の構成図を示す。
図2において、31と32は異なる距離にある光源、33はハーフミラー、34は被計測物体、35は撮影手段である。
図2に示す3次元形状計測装置では、光源31と光源32からの照射光は、どちらもハーフミラー33で、同じ光軸36に沿って進む光となり、被計測物体34に照射されるので、2つの光源を切り替えて照射しても、被計測物体34への照射角度の差をほとんど生じない。
その結果、被計測物体34が、鏡面反射特性の強い光沢のある物体でも照明の切り替えによる反射率の変化を無視できる程小さくできるので計測可能となり、課題2が解決される。
【0015】
課題2を解決するため、本発明(請求項9に記載の発明)では、被計測物体から一定距離に配置されるとともに、拡散角を時分割で変化させた拡散光を照射する単一の照明手段と、前記照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、前記第1の撮影手段で撮影された画像データを記録する記録手段と、前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、前記照明手段は、一つの光源と、前記一つの光源から照射される光の光学経路として、時分割で複数の異なる光学経路を生成する光学系と、前記光学系で生成される光学経路毎に、前記一つの光源から照射される光を拡散角がそれぞれ異なる拡散光に変換する複数の光学手段とを有し、前記光学手段は、それぞれ、変換した拡散光の仮想的な点光源の位置から前記被計測物体までの距離と前記複数の光学手段のうち基準となる光学手段が変換した拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差が所定の距離差となるように、前記拡散角が設定されており、前記演算手段は、前記画像データの各画素の輝度が、当該画像データの撮影時に照射された拡散光の仮想的な点光源の位置から前記被計測物体上の当該画素に対応する点までの距離の二乗に反比例することに基づいて、前記被計測物体の3次元形状を演算する。
本発明の3次元形状計測装置の動作、測定原理は、従来の3次元形状計測装置と同じであり照明手段の構成が異なる。この照明手段を図3を用いて説明する。
図3において、48は被計測物体、41は平行ビームを照射する光源、42と43は回転ミラー、44と45はミラー、46と47は曲率の異なる凹レンズであり、平行ビーム光を拡散角の異なる拡散光に変換する。
図3(a)は、回転ミラー42が光路からはずれた状態、回転ミラー43が光路に45度の角度で入り込んでいる状態を示す。
この状態では、光源41からの照射光は、光軸49に沿って通過し、凹レンズ46で拡散光に変換されて、被計測物体48に照射される。
【0016】
図3(b)は、回転ミラー42が光路に45度の角度に入り込んでいる状態、回転ミラー43が光路からはずれた状態を示す。
この状態では、光源41からの照射光は、光軸410に沿って通過し、凹レンズ47で、図3(a)とは異なる拡散角の拡散光に変換されて、被計測物体48に照射される。
つまり、時分割で、図3(a)の状態と、図3(b)の状態とを切り替えて照射することによって、どちらの拡散光も同じ光軸に沿って、被計測物体48に照射されるので照射角度の差をほとんど生じない。
その結果、被計測物体48が鏡面反射特性の強い光沢のある物体でも照明の切り替えによる反射率の変化を無視できる程小さくできるので計測可能となり、課題2が解決される。
【0017】
課題2を解決するため、本発明(請求項10に記載の発明)では、 被計測物体から一定距離に配置されるとともに、拡散角を時分割で変化させた拡散光を照射する単一の照明手段と、前記照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、前記第1の撮影手段で撮影された画像データを記録する記録手段と、前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、前記照明手段は、一つの光源と、前記一つの光源から照射される光を、時分割で拡散角がそれぞれ異なる拡散光に変換する光学手段とを有し、前記光学手段は、時分割で照射するそれぞれの拡散光の仮想的な点光源の位置から前記被計測物体までの距離と時分割で照射する拡散光のうち基準となる拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差がそれぞれ所定の距離差となるように、前記拡散角を時分割で変化させ、前記演算手段は、前記画像データの各画素の輝度が、当該画像データの撮影時に照射された拡散光の仮想的な点光源の位置から前記被計測物体上の当該画素に対応する点までの距離の二乗に反比例することに基づいて、前記被計測物体の3次元形状を演算する。
図4(a)に、本発明の3次元形状計測装置の照明手段の構成図を示す。
同図において、51は光源、52はズームレンズや可変焦点レンズに代表される拡散角を任意に制御できる光学系、53は被計測物体である。
光学系52のズーム比を変えることによって、拡散角度の異なる拡散光54と55を照射する。どちらの照射光も同じ光軸上で被計測物体53に照射されるので、被計測物体53への照射角度の差はほとんどない。
その結果、被計測物体53が、鏡面反射特性の強い光沢のある物体でも照明の切り替えによる反射率の変化を無視できる程小さくできるので計測可能となり、課題2が解決される。
また、請求項8と請求項10を組み合わせた3次元形状計測装置の照明手段を、図4(b)と、図4(c)に示す。
被計測物体の大きさや3次元形状計測装置からの距離によって最適な拡散角が異なるが、図4(b)と、図4(c)に示すように拡散角を任意に制御する手段を用いることによって、拡散光(56、57)の拡散角を任意に制御でき、被計測物体の大きさや3次元形状計測装置からの距離に幅広く対応することができる。
【0018】
課題2を解決するため、本発明(請求項11に記載の発明)では、偏光を照射する光源、若しくは、偏光を分離する光学手段のいずれかを照明手段内に有し、撮影手段の前に前記偏光と偏光の向きが直交する偏光を分離する光学手段を有し、偏光した拡散光を照射して該偏光の偏光の向きと直交する偏光のみを撮影することを特徴とする。
請求項11と請求項6に基づく3次元形状計測装置の照明手段と撮影手段の構成図を図5に示す。
図5において、61と62は異なる拡散角の拡散光を照射する手段、63は特定の向きの偏光を分離する手段、64は光沢のある被計測物体、65は、手段63とは偏光の向きが直交する偏光を分離する手段、66は撮影手段である。
従来の装置で照射すると画像67が撮影されるが、被計測物体64は光沢のある被計測物体なので、ハイライト領域68が発生してしまう。
【0019】
この現象と引き起こされる問題点を図6(a)を用いて説明する。図6(a)は、ある面に角度θで入射した光を同じ角度θに反射する反射率を図示している。
光沢のある物体の場合、垂直に入射した光を垂直方向に返す角度では鏡面反射によって著しく強い反射率71を示す。この領域がハイライト領域68に相当する。
本発明の3次元形状計測装置の計測原理においては、被計測物体表面の反射率kが照明を変えても変わらないことを前提としているが、異なる位置の光源をずらして配置している場合、照射角にわずかな違いδθが発生する。
光沢のない物体や、光沢のある物体においても、ハイライト領域から大幅にずれた角度(例えば、図中のθ1)であるなら、θ1と、θ1からδθ異なる入射光に対する反射率の差δk1は無視できるほど小さいが、ハイライト近傍領域の角度θ2である場合には、反射率の差δk2は無視できない程大きくなり計測不能となる。
【0020】
一方、本発明では偏光が照射される。仮に、この偏光をP偏光とする。
図6(b)は、ある面に角度θで入射したP偏光を同じ角度θに反射する光をP偏光と、P偏光と偏光の向きが直交するS偏光にわけて反射率を図示している。
これを見るとわかるようにハイライトの急激な反射率の増大分はほとんどP偏光で占められる。
本発明の3次元形状計測装置では、照明光と偏光の向きが直交する偏光のみを分離して撮影するので、図6(c)に示すS偏光のみが撮影される。よって、ハイライトの消失した画像69が撮影される。
ハイライトが消失しθに関わらずδkは常に無視できるほど小さくなるので、被計測物体64が、光沢のある物体でも計測が可能となり課題2を解決できる。
また、ハイライトは著しく高輝度なので撮影可能なダイナミックレンジを越える問題(白トビまたはオーバーフロー)を生じやすいが、本発明はこの問題も軽減する効果がある。
【0021】
課題3を解決するため、本発明(請求項12に記載の発明)は、照明手段が赤外光を照射する手段であり、撮影する手段の前に赤外光と可視光を分離する手段と可視光の撮影手段とを有し、赤外光と可視光の撮影を一つの光軸上で行うことを特徴とする。
請求項6と請求項12を組み合わせた3次元形状計測装置の構成とその動作を図7を用いて説明する。
図7において、81と82は赤外の異なる拡散光を照射する照射手段、83は被計測物体、84は赤外光は透過し可視光を反射するコールドミラー、85は赤外光を撮影する撮影手段、86は可視光を撮影する撮影手段である。
照射手段81または照射手段82から順次照射された異なる拡散角の赤外拡散光は被計測物体83に照射される。
被計測物体83からの反射光は、コールドミラー84を通過して撮影手段85にて撮影される。形状計測は、撮影手段85で撮影した画像を用いて行う。
【0022】
一方、被計測物体83から出る可視光は、コールドミラー84にて反射され、撮影手段86で撮影される。これによって、色画像は撮影手段86で計測されることになる。
なお、コールドミラー84から反射した画像は左右が反転しているので、後述の実施の形態のようにミラーでもう一回反転させるか、撮影手段86に左右反転機能を持つTVカメラを用いる。
本発明の3次元形状計測装置によって、形状計測カメラも色計測カメラも一つの光軸87から撮影することになるので、色計測カメラには写りながら形状計測カメラには影となって写らない領域、若しくはこれと反対の領域などのオクルージョンを発生しないで色と形状の同時計測可能な3次元形状計測装置を実現することができ課題3を解決できる。
また、形状計測に専用の赤外モノクロカメラを使用できるので高SN比で形状計測が可能な他、色画像取得のためのライティングを計測光に影響されることなく独立に設定できる利便性も提供できる。
【0023】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を詳細に説明する。
なお、実施の形態を説明するための全図において、同一機能を有するものは同一符号を付け、その繰り返しの説明は省略する。
[実施の形態1]
図8は、本発明の実施の形態1の3次元形状計測装置の概略構成を示す図であり、この図8は、本願の請求項6に記載の3次元形状計測装置の実施の形態である。
図8において、91と92は拡散光を照射するライト、93は曲率の小さなレンズ、94は曲率の大きなレンズであり、ライト(91、92)、レンズ93、およびレンズ94で、請求項6に記載の被計測物体95から同一距離にあり異なる拡散光を照射する複数の照明手段を構成する。
95は被計測物体、96は撮影カメラ、97は画像データを記録する記録メモリ、98は画像データの演算器、99は全体を制御する制御装置である。
なお、記録メモリ97、演算器98、および制御装置99は、画像入カポートを備えたコンピュータで構成し、演算器98と制御装置99は同じCPUに兼用させても良いし、記録メモリ97は、メモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0024】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置99は、ライト91を発光させて、撮影カメラ96で被計測物体95の撮影を行い、記録メモリ97に画像データを記録した後で、ライト91を消灯する。この時、ライト91から発せられた拡散光は、レンズ93にて拡散角を調整された上で被計測物体95に照射される。
次に、制御装置99は、ライト92を発光させて、撮影カメラ96で被計測物体95の撮影を行い、記録メモリ97に画像データを記録した後で、ライト92を消灯する。この時、ライト92から出た拡散光は、レンズ94にて負の拡散角を有する収束光に変換され、レンズ94の先で一旦収束した後で拡散光になり、被計測物体95に照射される。
制御装置99は、記録メモリ97に記録された2枚の画像データから、演算器98を用いて、前記の(3)式の演算を行うことによって、3次元形状データを算出し記録メモリ97に記録する。
なお、本実施の形態では、レンズ93とレンズ94とを用いたが、これは曲面ミラー、フレネルレンズ、ホログラフィカルレンズなどを用いても良い。
本実施の形態によれば、性能を落とさずに奥行き長の短い小型の3次元形状計測装置を実現することが可能となる。特に、一方だけを負の拡散角を有する拡散光(収束光)とすることによって、照明手段を著しく小型化することができる。
【0025】
[実施の形態2]
図9は、本発明の実施の形態2の3次元形状計測装置の概略構成を示す図であり、この図9は、本願の請求項7に記載の3次元形状計測装置の実施の形態である。
図9において、101と102は拡散光を照射するライト、103は曲率の大きなレンズ、104は曲率の小さなレンズ、105はハーフミラー、106は被計測物体、107は撮影カメラ、108は画像データを記録する記録メモリ、109は画像データの演算器、1010は全体を制御する制御装置である。
なお、記録メモリ108、演算器109、および制御装置1010は、画像入カポートを備えたコンピュータで構成し、演算器109と制御装置1010は同じCPUに兼用させても良いし、記録メモリ108はメモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0026】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置1010は、ライト101を発光させて、撮影カメラ107で被計測物体106の撮影を行い、記録メモリ108に画像データを記録した後で、ライト101を消灯する。この時、ライト101から発せられた拡散光は、レンズ103にて負の拡散角を有する収束光に変換され、ハーフミラー105にて光量の半分が反射した先で、一旦収束した後で、拡散光になり被計測物体106に照射される。
次に、制御装置1010は、ライト102を発光させて、撮影カメラ107で被計測物体106の撮影を行い、記録メモリ108に画像データを記録した後でライト102を消灯する。この時、ライト102から発せられた拡散光は、レンズ104にて拡散角を調整され、ハーフミラー105にて光量の半分が透過して被計測物体106に照射される。
制御装置1010は、記録メモリ108に記録された2枚の画像データから演算器109を用いて、前述の(3)式の演算を行うことによって、3次元形状データを算出し記録メモリ108に記録する。
なお、本実施の形態では、レンズ103とレンズ104とを用いたが、これは曲面ミラー、フレネルレンズ、ホログラフィカルレンズなどを用いても良い。
本実施の形態によれば、照明手段(101,102)は同じ光軸上で拡散光を照射することが可能となる。この結果、照射角度の差がほとんど生じないので、被計測物体が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
【0027】
[実施の形態3]
図10は、本発明の実施の形態3の3次元形状計測装置の概略構成を示す図であり、この図10は、本願の請求項9に記載の3次元形状計測装置の実施の形態である。
図10において、111は平行ビームを照射するレーザ発振器、112は円盤の半分が反射ミラーコーティングされ残り半分が透明な円盤、113は円盤112を回転させるモータ、114と115は曲率の異なるレンズ、116と117はミラー、118は被計測物体、119は撮影カメラ、1110は画像データを記録する記録メモリ、1111は画像データの演算器、1112は全体を制御する制御装置である。
なお、記録メモリ1110、演算器1111、および制御装置1112は画像入カポートを備えたコンピュータで構成し、演算器1111と制御装置1112は同じCPUに兼用させても良いし、記録メモリ1110はメモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0028】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置1112は、モータ113に円盤112を回転させるように命令する。
図10(a)に示すように、円盤112の透明領域が上部に位置する状態で、制御装置1112はレーザ発振器111を発光させる。なお、この状態の検知は、モータ113にロータリエンコーダ等を装備させても、モータ113にサーボモータを使っても、あるいは円盤112に非接触の透過光スイッチをつけて検知しても良い。
レーザ発振器111から照射された光は、円盤112の透明領域を通過しミラー116にて反射した後、レンズ114で所定の拡散角を有する拡散光に変換され再び円盤112の下部に入射する。円盤112の下部は、ミラー領域なので全光量が反射して被計測物体118を照射する。
制御装置1112は、撮影カメラ119を用いて被計測物体118の画像を撮影し、画像データを記録メモリ1110に記録した後で、レーザ発振器111を消灯する。
【0029】
次に、図10(b)に示すように、円盤112のミラー領域が上部に位置する状態で、制御装置1112はレーザ発振器111を発光させる。
レーザ発振器111から照射された光は、円盤112で反射し、ミラー117で再度反射した後、レンズ115によって、図10(a)のときとは異なる拡散角の拡散光に変換されて、円盤112の下部に入射する。円盤112の下部は、透明領域なので全光量が通過して被計測物体118を照射する。
制御装置1112は、撮影カメラ119を用いて被計測物体118の画像を撮影し画像データを記録メモリ1110に記録した後でレーザ発振器111を消灯する。
制御装置1112は、記録メモリ1110に記録された2枚の画像データから演算器1111を用いて、前述の(3)式3演算を行うことによって、3次元形状データを算出し記録メモリ1110に記録する。
本実施の形態の3次元形状計測装置の作用は、前述の実施の形態2の3次元形状計測装置と同じであるが、発光した光量全てを被計測物体118に照射できる点、および、光源が一つなので確実かつ正確に同強度の拡散光を照射できる点で優れている。
【0030】
また、円盤112のミラー化する領域は、例えば、90度毎に透明領域とミラー領域が繰り返されるパターンでも良く、図10に示したパターンに限定されるものではない。
また、本実施の形態では、時分割で複数の光学経路を内部に作り出す方法として、回転するミラーと透明の複合光学系を用いたが、例えば、図3に示した機械的に動くミラー、液晶または音響光学素子など屈折率を制御できる素子を用いても実現可能である。時分割で複数の異なる光学経路を照明手段内部に作る光学系であるならば、本実施の形態の手段に限定するものではない。
本実施の形態によれば、照明手段が同じ光軸上で拡散光を照射することが可能となる。この結果、照射角度の差がほとんど生じないので、被計測物体が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
更に、前述の実施の形態2の3次元形状計測装置と比べて、照明光量の利用効率が2倍高く、かつ、光源が一つなので確実かつ正確に同強度の拡散光を照射できる利点を有する。
【0031】
[実施の形態4]
図11は、本発明の実施の形態4の3次元形状計測装置の概略構成を示す図であり、この図11は、本願の請求項10に記載の3次元形状計測装置の実施の形態である。
図11において、121は拡散光を照射するライト、122は2周波液晶を用いた可変焦点レンズ、123は可変焦点レンズ122を駆動するためのアンプ、124は被計測物体、125は撮影カメラ、126は画像データを記録する記録メモリ、127は画像データの演算器、128は全体を制御する制御装置である。
なお、記録メモリ126、演算器127、および制御装置128は画像入カポートを備えたコンピュータで構成し、演算器127と制御装置128は同じCPUに兼用させても良いし、記録メモリ126はメモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0032】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置128は、アンプ123を用いて可変焦点レンズ122を所定の屈折率(第1の屈折率)に調整する。
次に、制御装置128は、ライト121を発光させて、撮影カメラ125で被計測物体124の撮影を行い、記録メモリ126に画像データを記録した後でライト121を消灯する。この時、ライト121から発せられた拡散光は、可変焦点レンズ122にて所定の拡散角(第1の拡散角)を有する拡散光に変換された後で被計測物体124に照射される。
次に、制御装置128は、アンプ123を用いて可変焦点レンズ122を、第1の屈折率とは異なる屈折率に調整する。
それから、制御装置128は、ライト121を発光させて撮影カメラ125で被計測物体124の撮影を行い、記録メモリ126に画像データを記録した後でライト121を消灯する。この時、ライト121から発せられた拡散光は、可変焦点レンズ122にて、第1の拡散角とは異なる拡散角を有する拡散光に変換された後で被計測物体124に照射される。
制御装置128は、記録メモリ126に記録された2枚の画像データから演算器127を用いて、前述の(3)式の演算を行うことによって、3次元形状データを算出し記録メモリ126に記録する。
【0033】
なお、本実施の形態では、拡散角を任意に制御できる手段に2周波液晶を用いた可変焦点レンズを用いたが、ズームレンズやバリフォーカルレンズを用いて拡散角を任意に制御できる手段を構成しても良い。
本実施の形態によれば、照明手段が同じ光軸上で拡散光を照射することが可能となる。この結果、照射角度の差がほとんど生じないので、被計測物体が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
更に、前述の実施の形態2の3次元形状計測装置と比べて、照明光量の利用効率が2倍高く、光源が一つなので確実かつ正確に同強度の拡散光を照射できる利点を有する。
また、図4(b)と図4(c)に示すように、本実施の形態の3次元形状計測装置は、被計測物体の大きさや計測3次元形状計測装置からの距離に幅広く対応できる効果も有する。
【0034】
[実施の形態5]
図12は、本発明の実施の形態5の3次元形状計測装置の概略構成を示す図であり、この図12は、本願の請求項11に記載の3次元形状計測装置の実施の形態である。
図12において、131と132は偏光する拡散光を照射するレーザダイオードであり、偏光の向きは同じに揃えている。
133は曲率の小さなレンズ、134は曲率の大きなレンズ、135は被計測物体、136は、レーザダイオード131や、レーザダイオード132とは偏光の向きが直交する光のみを分離する偏光フィルタ、137は撮影カメラ、138は画像データを記録する記録メモリ、139は画像データの演算器、1310は全体を制御する制御装置である。
なお、記録メモリ138、演算器139、および制御装置1310は画像入カポートを備えたコンピュータで構成し、演算器139と制御装置1310は同じCPUに兼用させても良いし、記録メモリ138はメモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0035】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置1310は、レーザダイオード131を発光させて、撮影カメラ137で被計測物体135の撮影を行い、記録メモリ138に画像データを記録した後でレーザダイオード131を消灯する。この時、レーザダイオード131から発せられた偏光の拡散光は、レンズ133にて拡散角を調整された上で被計測物体135に照射される。
被計測物体135からの反射光は、偏光の向きが、レーザダイオード131の偏光の向きと直交する光のみが偏光フィルタ136を透過して撮影カメラ137に届く。
次に、制御装置1310は、レーザダイオード132を発光させて、撮影カメラ137で被計測物体135の撮影を行い、記録メモリ138に画像データを記録した後でレーザダイオード132を消灯する。
この時、レーザダイオード132から出た偏光の拡散光は、レンズ134にて負の拡散角を有する収束光に変換され、レンズ134の先で一旦収束した後で拡散光になり被計測物体135に照射される。被計測物体135からの反射光は、偏光の向きが、レーザダイオード131の偏光の向きと直交する光のみが偏光フィルタ136を透過して撮影カメラ137に届く。
【0036】
制御装置1310は、記録メモリ138に記録された2枚の画像データから演算器139を用いて、前述の(3)式の演算を行うことによって、3次元形状データを算出し記録メモリ138に記録する。
なお、本実施の形態では、光源として、レーザダイオード131とレーザダイオード132を用いたが、一般の光源に偏光フィルタを組み合わせて光源を構成しても良い。また、偏光フィルタの代わりに偏光プリズムを用いて構成しても良い。
本実施の形態によれば、被計測物体135に生じるハイライトだけを消失して計測が可能となるため、被計測物体135が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
更に、ハイライトによって起こされる撮影可能なダイナミックレンジを越える問題(白トビまたはオーバーフロー)を軽減する効果も有する。
【0037】
[実施の形態6]
図13は、本発明の実施の形態6の3次元形状計測装置の概略構成を示す図であり、この図13は、本願の請求項12に記載の3次元形状計測装置の実施の形態である。
図13において、141と142は赤外光の拡散光を照射するライト、143は曲率の大きなレンズ、144は曲率の小さなレンズ、145はハーフミラー、146は被計測物体、147は赤外光のみを透過するコールドミラー、148はミラー、149は赤外光の撮影カメラ、1410はカラーカメラ、1411は画像データを記録する記録メモリ、1412は画像データの演算器、1413は全体を制御する制御装置である。
なお、記録メモリ1411、演算器1412、および制御装置1413は画像入カポートを備えたコンピュータで構成し、演算器1412と制御装置1413は同じCPUに兼用させても良いし、記録メモリ1411はメモリの他、ハードディスクや光ディスクで代用しても良い。また、図中、細い矢印は制御の流れ、太い矢印はデータの流れを表す。
【0038】
本実施の形態の3次元形状計測装置の動作を説明する。
制御装置1413は、ライト141を発光させて、撮影カメラ149で被計測物体146の赤外撮影を行い、記録メモリ1411に画像データを記録した後で、ライト141を消灯する。この時、ライト141から発せられた赤外拡散光は、レンズ143にて負の拡散角を有する収束光に変換され、ハーフミラー145にて光量の半分が反射した先で一旦収束した後で拡散光になり、被計測物体146に照射される。
次に、制御装置1413は、ライト142を発光させて撮影カメラ149で被計測物体146の撮影を行い、記録メモリ1411に画像データを記録した後でライト142を消灯する。この時、ライト142から発せられた赤外拡散光は、レンズ144にて拡散角を調整され、ハーフミラー145にて光量の半分が透過して被計測物体146に照射される。
制御装置1413は、記録メモリ1411に記録された2枚の画像データから演算器1412を用いて、前述の(3)式の演算を行うことによって、3次元形状データを算出し記録メモリ1411に記録する。
【0039】
次に、制御装置1413は、カラーカメラ1410を用いて被計測物体146の色を撮影し、色情報データとして記録メモリ1411に記録する。
この時、環境光が被計測物体146に反射してできる色情報を含む可視光は、コールドミラー147にて反射し、ミラー148にて再度反射してカラーカメラ1410で撮影される。なお、ミラー148で再度反射させるのは、コールドミラー147から反射した画像は左右が反転するため、もう一度反射する必要があるからである。カラーカメラ1410に左右逆転機能を有するカラーカメラを用いるのであれば、ミラー148は省略できる。
本実施の形態によれば、形状計測カメラも色計測カメラも同じ光軸から撮影するので、色計測力メラには写りながら形状計測カメラには影となって写らない領域、若しくはこれと反対の領域などのオクルージョンを発生させることなく色と形状の同時計測が可能となる。
また、形状計測に専用のモノクロカメラを使用できるので、高SN比で形状計測が可能な他、色画像取得のためのライティングを計測光に影響されることなく独立に設定できる効果も有する。
以上、本発明者によってなされた発明を、前記実施の形態に基づき具体的に説明したが、本発明は、前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは勿論である。
【0040】
【発明の効果】
本願において開示される発明のうち代表的なものによって得られる効果を簡単に説明すれば、下記の通りである。
(1)本発明によれば、性能を落とさずに奥行き長の短い小型の3次元形状計測装置を実現することが可能となる。
特に、一方だけを負の拡散角を有する拡散光(収束光)とすることによって、照明手段を著しく小型化することができる。
(2)本発明によれば、照明手段が同じ光軸上で拡散光を照射することが可能となる。この結果、照射角度の差がほとんど生じないので、被計測物体が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
(3)本発明によれば、照明光量の利用効率を向上させ、さらに、確実かつ正確に同強度の拡散光を照射することが可能となる。
(4)本発明によれば、被計測物体の大きさや3次元形状計測装置からの距離に幅広く対応することが可能となる。
【0041】
(5)本発明によれば、被計測物体に生じるハイライトだけを消失して計測が可能となるため、被計測物体が鏡面反射特性の強い光沢のある物体でも計測が可能となる。
更に、ハイライトによって起こされる撮影可能なダイナミックレンジを越える問題(白トビまたはオーバーフロー)を軽減することも可能となる。
(6)本発明によれば、形状計測カメラも色計測カメラも同じ光軸から撮影するので、色計測力メラには写りながら形状計測カメラには影となって写らない領域若しくはこれと反対の領域などのオクルージョンを発生しないで色と形状の同時計測が可能となる。
また、形状計測に専用のモノクロカメラを使用できるので、高SN比で形状計測が可能な他、色画像取得のためのライティングを計測光に影響されることなく独立に設定することが可能となる。
【図面の簡単な説明】
【図1】本発明の3次元形状計測装置の照明手段の構成を示す図である。
【図2】本発明の3次元形状計測装置の照明手段の構成を示す図である。
【図3】本発明の3次元形状計測装置の照明手段の構成を示す図である。
【図4】本発明の3次元形状計測装置の照明手段の構成を示す図である。
【図5】本発明の3次元形状計測装置の照明手段と撮影手段の構成を示す図である。
【図6】本発明の3次元形状計測装置の作用を説明するための、被計測物体の反射率を照明光と同じ向きの偏光、および照明光と直交する向きの偏光に分けて示したグラフである。
【図7】本発明の3次元形状計測装置の照明手段と撮影手段の構成を示す図である。
【図8】本発明の実施の形態1の3次元形状計測装置の概略構成を示す図である。
【図9】本発明の実施の形態2の3次元形状計測装置の概略構成を示す図である。
【図10】本発明の実施の形態3の3次元形状計測装置の概略構成を示す図である。
【図11】本発明の実施の形態4の3次元形状計測装置の概略構成を示す図である。
【図12】本発明の実施の形態5の3次元形状計測装置の概略構成を示す図である。
【図13】本発明の実施の形態6の3次元形状計測装置の概略構成を示す図である。
【図14】従来の3次元形状計測装置の概略構成を示す図である。
【符号の説明】
11,12,21,22,26,27,31,32,41,51,211,210…光源、13,23,34,48,53,64,83,95,106,118,124,135,146…被計測物体、14,96,107,119,125,137…撮影カメラ、15,97,108,126,138,1110,1411…記録メモリ、16,98,109,127,139,1111,1412…演算器、17,99,128,1010,1112,1310,1413…制御装置、33,105,145…ハーフミラー、35…撮影手段、36,49,87,410…光軸、42,43…回転ミラー、44,45,116,117,148…ミラー、46,47,93,94,103,104,114,115,133,134,143,144…レンズ、52…拡散角を任意に制御できる光学系、54,55,56,57…拡散光、61,62…拡散光を照射する手段、63,65…特定の向きの偏光を分離する手段、66…撮影手段、67,69…画像、68…ハイライト領域、81,82…赤外の異なる拡散光を照射する手段、
84,147…コールドミラー、85…赤外光を撮影する撮影手段、86…可視光を撮影する撮影手段、91,92,101,102,121…ライト、
111…レーザ発振器、112…円盤、113…モータ、122…可変焦点レンズ、123…アンプ、131,132…レーザダイオード、136…偏光フィルタ、141,142…赤外光の拡散光を照射するライト、149…赤外光の撮影カメラ、1410…カラーカメラ。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a three-dimensional shape measurement method and a three-dimensional shape measurement apparatus for measuring a three-dimensional shape or a three-dimensional shape and color of an object to be measured, and is used particularly in the fields of measurement industry, communication industry, video industry, and the like. The present invention relates to a three-dimensional shape measuring method and a three-dimensional shape measuring apparatus.
[0002]
[Prior art]
Various measurement apparatuses that acquire a three-dimensional shape of an object to be measured using a camera have been proposed. These methods can be classified into a passive measurement apparatus that does not irradiate special illumination to the object to be measured typified by a stereo method, and an active measurement apparatus that irradiates special illumination to the object to be measured.
In particular, the passive measurement device is very low cost and versatile because the stereo method can be performed with two cameras, and has been studied energetically for a long time. Has not yet reached the practical stage.
On the other hand, the active measurement device has reached the practical level of measurement accuracy, resolution, and measurement reliability, and in recent years, moving image measurement has become possible.
However, since the apparatus is generally large and expensive, it has been impossible to reduce the size to a size that can be portable.
Further, depending on the application, the measurement accuracy and resolution may be low in many cases, but the conventional active measurement device cannot efficiently reduce the cost and size of the device even if these specifications are lowered.
[0003]
On the other hand, an apparatus is disclosed in which a distance is obtained by irradiating an object to be measured with a diffused light from a light source having a different distance and taking a ratio of each luminance value (see, for example, Patent Document 1).
FIG. 14 shows the configuration of the device disclosed in Patent Document 1 described above.
In FIG. 14, 13 is an object to be measured, 11 is a distant light source, 12 is a light source closer to the object to be measured 13 by a distance x0 than the
Although the apparatus shown in FIG. 14 has a measurement accuracy resolution that is not so high, it is basically possible to construct the apparatus only by preparing two light sources and a camera, so that it can be made at an extremely low price. Compared to other methods, it is possible to make the device relatively small.
[0004]
The operation and measurement principle of the apparatus shown in FIG. 14 will be described.
First, the
When the distance between the light source 11 and the measured
[Expression 1]
V1 = kL1 / 4πx2 .... (1)
Next, the
At this time, the brightness V2 of the spot illuminated by the light source 12 is given by the following equation (2).
[Expression 2]
V2 = kL2 / 4π (x−x0)2 (2)
[0005]
Next, the
The arithmetic expression at this time is given by the following expression (3) from the expressions (1) and (2).
[Equation 3]
x = x0 / {1-√ (V1L2 / V2L1)} (3)
In the above-mentioned patent document 1, it is not specified whether the measurement is a single point distance measurement or the measurement of the entire three-dimensional shape, but the claim of the patent document 2 explicitly shows the three-dimensional shape measurement with the same operation principle. It is described in. In addition, patents having exactly the same contents as Patent Document 2 are replaced with expressions of mathematical expressions, and claims 1 and 2 of Patent Document 3, Claim 1 of Patent Document 4, Claim 1 of Patent Document 5, and Patents It is described in claim 1 of Document 6.
[0006]
The prior art document information related to the present invention includes the following.
[Patent Document 1]
JP 61-155909 A
[Patent Document 2]
Japanese Unexamined Patent Publication No. 63-23312
[Patent Document 3]
JP 2002-77944 A
[Patent Document 4]
JP 2002-65581 A
[Patent Document 5]
JP 2002-95625 A
[Patent Document 6]
JP 2002-65585 A
[0007]
[Problems to be solved by the invention]
However, the apparatus shown in FIG. 14 has the following problems.
(1) The apparatus cannot be thinned.
The depth length of the apparatus is determined by the distance x0 between the two light sources in FIG. 14. However, if x0 is reduced, the resolution of distance measurement deteriorates, so x0 needs to be increased for practical use.
However, when x0 is large, the depth length of the apparatus becomes long, and the distance y that the light source 12 in the front side is shifted in the lateral direction so as not to be a shadow of the distant light source 11 becomes large. Occur. Further, when the distance y is increased, the problem related to the problem 2 described later becomes more serious.
It is a first object of the present invention to provide a small-sized device that has an optically sufficient distance x0 and requires a short depth length of an actual device.
[0008]
(2) A glossy object cannot be measured.
Both the above-mentioned formula (1) and formula (2) use the same reflectance k. This presupposes that the reflectance in the same direction (the direction of the photographing camera) is the same regardless of the incident angle of illumination.
However, the reflectance k of an object generally varies depending on the incident angle of illumination and the wavelength of illumination and is not constant. In the apparatus shown in FIG. 14, since the wavelength (color) of the light source is assumed to be the same, the latter problem does not occur. However, as the distance y increases, the difference in incident angle between the light source 11 and the light source 12 also increases. The change in the reflectance k cannot be ignored and accurate measurement cannot be performed.
In particular, highlights are generated when an object with strong specular reflection characteristics, such as a glossy object, is illuminated. However, in the vicinity of the highlight, measurement cannot be performed because the reflectance k changes greatly due to a slight difference in the incident angle of illumination. End up.
Therefore, the conventional technique is limited to the measurement of an object having a strong luster diffuse reflection characteristic such as plaster. Incidentally, in the above-mentioned Patent Document 2, a gypsum image is used for the experiment.
It is a problem 2 of the present invention to provide an apparatus capable of measuring even a glossy object.
[0009]
(3) The color and shape of the object cannot be acquired at the same time without degrading performance.
In the prior art, the color of the object to be measured is not measured, or a known method is used that combines shape measurement and color measurement using a color camera.
However, since the S / N ratio of a color camera is worse than that of a monochrome camera, it is inconvenient in this measurement method that calculates distance information from a slight luminance difference.
While solving this problem by simultaneously performing shape measurement and color measurement using separate dedicated cameras, occlusion with a single optical axis for shooting by both cameras (shape measurement while reflected in color measurement camera or shape measurement camera) It is an object 3 of the present invention to provide an apparatus capable of simultaneously measuring a color and a three-dimensional shape without an area that cannot be seen as a shadow from a camera or a color measurement camera.
[0010]
The present invention has been made to solve the problems of the prior art, and an object of the present invention is to provide an optically sufficient distance x0 in the three-dimensional shape measuring method and the three-dimensional shape measuring apparatus. However, it is an object of the present invention to provide a technique capable of reducing the depth of an actual device and reducing the size.
Another object of the present invention is to provide a technique capable of measuring even a glossy object as a measurement object in a three-dimensional shape measurement method and a three-dimensional shape measurement apparatus.
Another object of the present invention is to simultaneously perform shape measurement and color measurement using separate dedicated cameras as the color measurement camera and the shape measurement camera in the three-dimensional shape measurement method and the three-dimensional shape measurement apparatus, It is an object of the present invention to provide a technique capable of simultaneously measuring an unoccluded color and a three-dimensional shape with a single optical axis taken by both cameras.
The above and other objects and novel features of the present invention will become apparent from the description of this specification and the accompanying drawings.
[0011]
[Means for Solving the Problems]
In order to solve the above-described problem 1, in the present invention (the invention described in claim 6), the light is disposed at the same distance from the object to be measured and irradiates diffused light having different diffusion angles.A plurality of illumination means, and the illumination means irradiated with each of the illumination meansShoot the object to be measuredFirst shootingMeans,Photographed by the first photographing meansimage dataRecordRecording means;Recorded in the recording meansimage data3D shape is calculated usingWith computing meansThe illuminating means includes a distance from a position of a virtual point light source of the diffused light to be irradiated to the object to be measured and a virtual of the diffused light emitted by the reference illuminating means among the plurality of illuminating means. The diffusion angle is set so that the difference between the position of the point light source and the distance from the object to be measured is a predetermined distance difference.
The operation, measurement principle, and operation of the three-dimensional shape measuring apparatus of the present invention are the same as those of the conventional three-dimensional shape measuring apparatus described above, and the configuration of the illumination means is different. This will be described with reference to FIG.
FIG. 1A is a diagram showing illumination means of a conventional apparatus, which is composed of a
As can be seen from FIG. 1A, the depth length 24 of the apparatus needs to be at least x0. Further, the
[0012]
On the other hand, the three-dimensional shape measuring apparatus of the present invention shown in FIG. 1B irradiates diffused light having different diffusion angles from two light sources (26, 27) at the same distance from the measured
Since the
Therefore, the actual depth length can be shortened to 28 shown in FIG. 1B while having the same optical distance difference x0.
The three-dimensional shape measuring apparatus of the present invention shown in FIG. 1C gives a negative diffusion angle to the
Since the
The optical focal point is located in front of the
Further, since the irradiation area of the light source is smaller than that in FIG. 1B, a smaller light source can be used, and by moving the
[0013]
Note that the light amount of the light source used in the above-described equations (1) and (2) is assumed to be the light amount of the point light source that irradiates in all directions as shown in FIG. It is necessary to correct in advance the light amount of the light source that irradiates the range.
If the
[Expression 4]
L1 = 4πL1 ′ / ω1 (4)
L2 = 4πL2 ′ / ω2 (5)
As described above, the three-dimensional shape measuring apparatus of the present invention has an optically sufficient distance x0, but the actual three-dimensional shape measuring apparatus has a short depth length and is small in size. Therefore, Problem 1 is solved. In addition, since the distance to be shifted horizontally or vertically can be reduced, the difference in the irradiation angle to the object to be measured can be reduced, which is effective in solving the problem 2.
[0014]
In order to solve the problem 2, the present invention (claims)8In the invention described in (1), it has a half mirror and is irradiated from a plurality of illumination means.eachThe diffused light is synthesized by a half mirror and irradiated on one optical axis.
In FIG. 2, the block diagram of the illumination means of the three-dimensional shape measuring apparatus of this invention is shown.
In FIG. 2, 31 and 32 are light sources at different distances, 33 is a half mirror, 34 is an object to be measured, and 35 is a photographing means.
In the three-dimensional shape measuring apparatus shown in FIG. 2, both the light emitted from the
As a result, even if the object to be measured 34 is a glossy object having a strong specular reflection characteristic, the change in reflectance due to switching of illumination can be made so small that it can be ignored, so that the problem 2 is solved.
[0015]
In order to solve the problem 2, the present invention (the invention according to claim 9)A single illuminating means that irradiates diffused light that is arranged at a certain distance from the measured object and whose diffusion angle is changed in a time-division manner, and a first that images the measured object irradiated by the illuminating means The illumination unit includes: an imaging unit; a recording unit that records image data captured by the first imaging unit; and an arithmetic unit that calculates a three-dimensional shape using the image data recorded in the recording unit. MeansOne light source,AboveAs an optical path of light emitted from one light source, an optical system that generates a plurality of different optical paths in a time division manner;AboveFor each optical path generated by the optical system,The light emitted from the one light sourceDifferent diffusion anglesExpansionA plurality of optical means for converting to diffuse light;And each of the optical means includes a distance from a virtual point light source position of the converted diffused light to the object to be measured and a diffused light converted by the reference optical means among the plurality of optical means. The diffusion angle is set so that the difference between the position of the virtual point light source and the distance to the object to be measured is a predetermined distance difference, and the calculation means is configured to obtain the luminance of each pixel of the image data. Is based on being inversely proportional to the square of the distance from the position of the virtual point light source of the diffused light irradiated at the time of capturing the image data to the point corresponding to the pixel on the object to be measured. The three-dimensional shape of the object is calculated.
The operation and measurement principle of the three-dimensional shape measuring apparatus of the present invention are the same as those of the conventional three-dimensional shape measuring apparatus, and the configuration of the illumination means is different. This illumination means will be described with reference to FIG.
In FIG. 3, 48 is an object to be measured, 41 is a light source that irradiates a parallel beam, 42 and 43 are rotating mirrors, 44 and 45 are mirrors, 46 and 47 are concave lenses having different curvatures, Convert to different diffuse light.
FIG. 3A shows a state in which the
In this state, the irradiation light from the
[0016]
FIG. 3B shows a state in which the
In this state, the irradiation light from the
That is, by irradiating the state of FIG. 3A and the state of FIG. 3B in a time-sharing manner, both diffused light is irradiated to the measured
As a result, even if the object to be measured 48 is a glossy object having a strong specular reflection characteristic, the change in reflectance due to switching of illumination can be made so small that it can be ignored, so that the problem 2 can be solved.
[0017]
In order to solve the problem 2, the present invention (the invention according to claim 10)A single illuminating means that irradiates diffused light that is arranged at a certain distance from the measured object and whose diffusion angle is changed in a time-division manner, and a first that images the measured object irradiated by the illuminating means The illumination unit includes: an imaging unit; a recording unit that records image data captured by the first imaging unit; and an arithmetic unit that calculates a three-dimensional shape using the image data recorded in the recording unit. The means includes one light source and light emitted from the one light source in a time-sharing manner.Different diffusion anglesExpansionConvert to diffuseOpticsmeansThe optical means includes a distance from a virtual point light source position of each diffused light irradiated in time division to the measured object and diffused light serving as a reference among the diffused light irradiated in time division The diffusion angle is changed in a time-sharing manner so that the difference from the position of the virtual point light source to the object to be measured is a predetermined distance difference, and the calculation means Based on the fact that the luminance of the pixel is inversely proportional to the square of the distance from the position of the virtual point light source of the diffused light irradiated at the time of capturing the image data to the point corresponding to the pixel on the measured object, A three-dimensional shape of the object to be measured is calculated.
FIG. 4A shows a configuration diagram of illumination means of the three-dimensional shape measuring apparatus of the present invention.
In the figure, 51 is a light source, 52 is an optical system that can arbitrarily control a diffusion angle represented by a zoom lens and a variable focus lens, and 53 is an object to be measured.
By changing the zoom ratio of the
As a result, even if the
Moreover, the illumination means of the three-dimensional shape measuring apparatus which combined Claim 8 and Claim 10 is shown in FIG.4 (b) and FIG.4 (c).
Although the optimum diffusion angle differs depending on the size of the object to be measured and the distance from the three-dimensional shape measuring apparatus, means for arbitrarily controlling the diffusion angle as shown in FIGS. 4B and 4C is used. Thus, the diffusion angle of the diffused light (56, 57) can be arbitrarily controlled, and can correspond widely to the size of the object to be measured and the distance from the three-dimensional shape measuring apparatus.
[0018]
In order to solve the problem 2, in the present invention (the invention described in claim 11), either the light source for irradiating the polarized light or the optical means for separating the polarized light is provided in the illuminating means, and before the photographing means. It has an optical means for separating the polarized light whose polarization direction is orthogonal, and irradiates with polarized diffused light to photograph only the polarized light orthogonal to the polarization direction of the polarized light.
FIG. 5 shows a configuration diagram of the illuminating means and the photographing means of the three-dimensional shape measuring apparatus according to claims 11 and 6.
In FIG. 5, 61 and 62 are means for irradiating diffused light having different diffusion angles, 63 is a means for separating polarized light in a specific direction, 64 is a glossy object to be measured, and 65 is a direction of polarized light with the
An
[0019]
This phenomenon and the problems caused will be described with reference to FIG. FIG. 6A illustrates the reflectance at which light incident on a certain surface at an angle θ is reflected at the same angle θ.
In the case of a glossy object, an extremely strong reflectivity 71 is exhibited due to specular reflection at an angle at which vertically incident light is returned in the vertical direction. This area corresponds to the highlight area 68.
In the measurement principle of the three-dimensional shape measurement apparatus of the present invention, it is premised that the reflectance k of the surface of the object to be measured does not change even if the illumination is changed. A slight difference δθ occurs in the irradiation angle.
Even in a non-glossy object or a glossy object, if the angle is significantly deviated from the highlight region (for example, θ1 in the figure), the difference in reflectance δk1 with respect to incident light different from θ1 by θ1 from θ1 is Although it is so small that it can be ignored, the reflectance difference δk2 becomes so large that it cannot be ignored when the angle θ2 is in the vicinity of the highlight, making measurement impossible.
[0020]
On the other hand, polarized light is irradiated in the present invention. Suppose that this polarized light is P-polarized light.
FIG. 6B illustrates the reflectance by dividing P-polarized light incident on a certain surface at an angle θ into P-polarized light that is reflected at the same angle θ, and S-polarized light in which the directions of the P-polarized light and the polarized light are orthogonal to each other. Yes.
As can be seen from this, the sudden increase in the reflectance of the highlight is mostly occupied by P-polarized light.
In the three-dimensional shape measuring apparatus according to the present invention, only the polarized light whose polarization direction is orthogonal to the illumination light is photographed separately, so only the S-polarized light shown in FIG. 6C is photographed. Therefore, the
Since the highlight disappears and δk is always small enough to be ignored regardless of θ, the object to be measured 64 can be measured even with a glossy object, and the problem 2 can be solved.
In addition, since the highlight is extremely high in brightness, a problem (white highlight or overflow) exceeding the dynamic range that can be photographed is likely to occur. However, the present invention has an effect of reducing this problem.
[0021]
In order to solve the problem 3, the present invention (the invention according to claim 12) is a means for the illumination means to irradiate infrared light, and means for separating infrared light and visible light before the means for photographing. And a visible light photographing means, and photographing infrared light and visible light on one optical axis.
The configuration and operation of a three-dimensional shape measuring apparatus combining claim 6 and claim 12 will be described with reference to FIG.
In FIG. 7,
Infrared diffused light with different diffusion angles sequentially irradiated from the
The reflected light from the
[0022]
On the other hand, the visible light emitted from the measured
Since the image reflected from the
Since the shape measuring camera and the color measuring camera are photographed from one
In addition, since a dedicated infrared monochrome camera can be used for shape measurement, shape measurement can be performed with a high signal-to-noise ratio and the convenience of being able to independently set lighting for color image acquisition without being affected by measurement light it can.
[0023]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
Note that components having the same function are denoted by the same reference symbols throughout the drawings for describing the embodiment, and the repetitive description thereof will be omitted.
[Embodiment 1]
FIG. 8 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the first embodiment of the present invention, and FIG. 8 is an embodiment of the three-dimensional shape measuring apparatus according to claim 6 of the present application. .
In FIG. 8, 91 and 92 are lights for irradiating diffused light, 93 is a lens having a small curvature, 94 is a lens having a large curvature, and the light (91, 92), the
The
[0024]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
Next, the
The
In the present embodiment, the
According to the present embodiment, it is possible to realize a small three-dimensional shape measuring apparatus having a short depth length without degrading performance. In particular, the illumination means can be significantly reduced in size by using only one of the diffused light (converged light) having a negative diffusion angle.
[0025]
[Embodiment 2]
FIG. 9 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the second embodiment of the present invention, and FIG. 9 is an embodiment of the three-dimensional shape measuring apparatus according to claim 7 of the present application. .
In FIG. 9, 101 and 102 are lights for irradiating diffused light, 103 is a lens with a large curvature, 104 is a lens with a small curvature, 105 is a half mirror, 106 is an object to be measured, 107 is an object to be measured, 107 is a photographing camera, and 108 is image data. A recording memory for recording, an
The
[0026]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
Next, the
The
In this embodiment, the
According to this embodiment, the illumination means (101, 102) can irradiate diffused light on the same optical axis. As a result, there is almost no difference in the irradiation angle, so that the object to be measured can be measured even with a glossy object having a strong specular reflection characteristic.
[0027]
[Embodiment 3]
FIG. 10 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the third embodiment of the present invention, and FIG. 10 is an embodiment of the three-dimensional shape measuring apparatus according to claim 9 of the present application. .
In FIG. 10, 111 is a laser oscillator that irradiates a parallel beam, 112 is a disk in which half of the disk is coated with a reflection mirror and the other half is transparent, 113 is a motor that rotates the
Note that the
[0028]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
As shown in FIG. 10A, the
The light emitted from the
The
[0029]
Next, as shown in FIG. 10B, the
The light emitted from the
The
The
The operation of the three-dimensional shape measuring apparatus according to the present embodiment is the same as that of the above-described three-dimensional shape measuring apparatus according to the second embodiment. Since it is one, it is excellent in that it can irradiate diffused light of the same intensity reliably and accurately.
[0030]
Further, the area of the
In this embodiment, a rotating mirror and a transparent composite optical system are used as a method for creating a plurality of optical paths in a time division manner. For example, a mechanically movable mirror or liquid crystal shown in FIG. Alternatively, an element such as an acousto-optic element that can control the refractive index can be used. The present invention is not limited to the means of this embodiment as long as it is an optical system that creates a plurality of different optical paths in the illumination means by time division.
According to the present embodiment, the illumination unit can irradiate diffused light on the same optical axis. As a result, there is almost no difference in the irradiation angle, so that the object to be measured can be measured even with a glossy object having a strong specular reflection characteristic.
Furthermore, compared with the three-dimensional shape measuring apparatus of the second embodiment described above, there is an advantage that the use efficiency of the illumination light amount is twice as high and the diffused light having the same intensity can be irradiated reliably and accurately because there is one light source. .
[0031]
[Embodiment 4]
FIG. 11 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the fourth embodiment of the present invention, and FIG. 11 is an embodiment of the three-dimensional shape measuring apparatus according to claim 10 of the present application. .
In FIG. 11, 121 is a light for irradiating diffused light, 122 is a variable focus lens using a two-frequency liquid crystal, 123 is an amplifier for driving the
The
[0032]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
Next, the
Next, the
Then, the
The
[0033]
In this embodiment, a variable focus lens using a two-frequency liquid crystal is used as a means for arbitrarily controlling the diffusion angle. However, a means for arbitrarily controlling the diffusion angle using a zoom lens or a varifocal lens is configured. You may do it.
According to the present embodiment, the illumination unit can irradiate diffused light on the same optical axis. As a result, there is almost no difference in the irradiation angle, so that the object to be measured can be measured even with a glossy object having a strong specular reflection characteristic.
Furthermore, compared to the above-described three-dimensional shape measuring apparatus of the second embodiment, there is an advantage that the use efficiency of the illumination light quantity is twice as high and the diffused light having the same intensity can be irradiated reliably and accurately because there is one light source.
Further, as shown in FIGS. 4B and 4C, the three-dimensional shape measuring apparatus of the present embodiment has an effect that can widely correspond to the size of the measured object and the distance from the measuring three-dimensional shape measuring apparatus. Also have.
[0034]
[Embodiment 5]
FIG. 12 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the fifth embodiment of the present invention, and FIG. 12 is an embodiment of the three-dimensional shape measuring apparatus according to claim 11 of the present application. .
In FIG. 12,
133 is a lens with a small curvature, 134 is a lens with a large curvature, 135 is an object to be measured, 136 is a polarization filter that separates only the
Note that the
[0035]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
In the reflected light from the
Next, the
At this time, the polarized diffused light emitted from the
[0036]
The
In this embodiment, the
According to the present embodiment, it is possible to perform measurement by erasing only the highlight generated in the measured
Furthermore, it has the effect of reducing the problem (white stripes or overflow) that exceeds the dynamic range that can be taken by the highlight.
[0037]
[Embodiment 6]
FIG. 13 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the sixth embodiment of the present invention, and FIG. 13 is an embodiment of the three-dimensional shape measuring apparatus according to claim 12 of the present application. .
In FIG. 13, 141 and 142 are lights for irradiating diffused light of infrared light, 143 is a lens having a large curvature, 144 is a lens having a small curvature, 145 is a half mirror, 146 is an object to be measured, and 147 is only infrared light. , 148 is an infrared camera, 1410 is a color camera, 1411 is a recording memory for recording image data, 1412 is a calculator for image data, and 1413 is a control device for controlling the whole. It is.
Note that the
[0038]
The operation of the three-dimensional shape measuring apparatus according to this embodiment will be described.
The
Next, the
The
[0039]
Next, the
At this time, visible light including color information formed by reflecting ambient light to the
According to the present embodiment, since the shape measuring camera and the color measuring camera are photographed from the same optical axis, the area that is reflected in the color measuring power mela but is not reflected in the shape measuring camera, or the opposite. Occlusion such as area occursWithout lettingSimultaneous measurement of color and shape is possible.
In addition, since a dedicated monochrome camera can be used for shape measurement, shape measurement can be performed with a high S / N ratio, and lighting for obtaining a color image can be independently set without being affected by measurement light.
Although the invention made by the present inventor has been specifically described based on the above-described embodiment, the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the scope of the invention. Of course.
[0040]
【The invention's effect】
The effects obtained by the representative ones of the inventions disclosed in the present application will be briefly described as follows.
(1) According to the present invention, it is possible to realize a small three-dimensional shape measuring apparatus having a short depth length without degrading performance.
In particular, the illumination means can be significantly reduced in size by using only one of the diffused light (converged light) having a negative diffusion angle.
(2) According to the present invention, the illumination means can irradiate diffused light on the same optical axis. As a result, there is almost no difference in the irradiation angle, so that the object to be measured can be measured even with a glossy object having a strong specular reflection characteristic.
(3) According to the present invention, it is possible to improve the utilization efficiency of the amount of illumination light, and to irradiate diffused light having the same intensity reliably and accurately.
(4) According to the present invention, it is possible to deal widely with the size of the object to be measured and the distance from the three-dimensional shape measuring apparatus.
[0041]
(5) According to the present invention, it is possible to perform measurement by erasing only the highlight generated in the object to be measured. Therefore, even if the object to be measured is a glossy object having a strong specular reflection characteristic, the measurement can be performed.
Furthermore, it is possible to reduce the problem (white stripes or overflow) that exceeds the dynamic range that can be taken by the highlight.
(6) According to the present invention, both the shape measurement camera and the color measurement camera are photographed from the same optical axis, so the area that is reflected in the color measurement force mela but is not reflected in the shape measurement camera or the opposite. Simultaneous measurement of color and shape is possible without generating occlusions such as areas.
In addition, since a dedicated monochrome camera can be used for shape measurement, shape measurement can be performed with a high S / N ratio, and lighting for obtaining a color image can be set independently without being affected by measurement light. .
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration of illumination means of a three-dimensional shape measuring apparatus according to the present invention.
FIG. 2 is a diagram showing a configuration of illumination means of the three-dimensional shape measuring apparatus of the present invention.
FIG. 3 is a diagram showing a configuration of illumination means of the three-dimensional shape measuring apparatus of the present invention.
FIG. 4 is a diagram showing a configuration of illumination means of the three-dimensional shape measuring apparatus of the present invention.
FIG. 5 is a diagram showing a configuration of illumination means and photographing means of the three-dimensional shape measuring apparatus of the present invention.
FIG. 6 is a graph showing the reflectance of an object to be measured divided into polarized light in the same direction as illumination light and polarized light in a direction orthogonal to illumination light for explaining the operation of the three-dimensional shape measuring apparatus of the present invention. It is.
FIG. 7 is a diagram showing a configuration of illumination means and photographing means of the three-dimensional shape measuring apparatus of the present invention.
FIG. 8 is a diagram showing a schematic configuration of the three-dimensional shape measuring apparatus according to the first embodiment of the present invention.
FIG. 9 is a diagram showing a schematic configuration of a three-dimensional shape measurement apparatus according to Embodiment 2 of the present invention.
FIG. 10 is a diagram showing a schematic configuration of a three-dimensional shape measuring apparatus according to a third embodiment of the present invention.
FIG. 11 is a diagram showing a schematic configuration of a three-dimensional shape measurement apparatus according to Embodiment 4 of the present invention.
FIG. 12 is a diagram showing a schematic configuration of a three-dimensional shape measurement apparatus according to Embodiment 5 of the present invention.
FIG. 13 is a diagram showing a schematic configuration of a three-dimensional shape measurement apparatus according to Embodiment 6 of the present invention.
FIG. 14 is a diagram showing a schematic configuration of a conventional three-dimensional shape measuring apparatus.
[Explanation of symbols]
11, 12, 21, 22, 26, 27, 31, 32, 41, 51, 211, 210... Light source, 13, 23, 34, 48, 53, 64, 83, 95, 106, 118, 124, 135, 146 ... object to be measured, 14, 96, 107, 119, 125, 137 ... photographing camera, 15, 97, 108, 126, 138, 1110, 1411 ... recording memory, 16, 98, 109, 127, 139, 1111 1412: arithmetic unit, 17, 99, 128, 1010, 1112, 1310, 1413 ... control device, 33, 105, 145 ... half mirror, 35 ... photographing means, 36, 49, 87, 410 ... optical axis, 42, 43 ... Rotating mirror, 44, 45, 116, 117, 148 ... Mirror, 46, 47, 93, 94, 103, 104, 114, 115, 133, 134, 1 3, 144 ... lens, 52 ... optical system capable of arbitrarily controlling the diffusion angle, 54, 55, 56, 57 ... diffused light, 61, 62 ... means for irradiating diffused light, 63, 65 ... polarized light in a specific direction Means for separating, 66 ... photographing means, 67, 69 ... image, 68 ... highlight region, 81, 82 ... means for irradiating diffused light of different infrared,
84, 147 ... cold mirror, 85 ... photographing means for photographing infrared light, 86 ... photographing means for photographing visible light, 91, 92, 101, 102, 121 ... light,
DESCRIPTION OF
Claims (12)
前記第1のステップで照射された前記被計測物体を撮影する第2のステップと、
前記第2のステップで撮影された画像データを記録する第3のステップと、
前記第1ないし第3のステップを、前記被計測物体から同一距離に配置されるとともに、それぞれ拡散角の異なる拡散光を照射する複数の照明手段を用い、各照明手段毎に実行する第4のステップと、
前記第3のステップで記録された各照射手段毎の画像データを用いて、3次元形状を演算する第5のステップとを有し、
前記照明手段は、それぞれ、照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離と前記複数の照明手段のうち基準となる照明手段が照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差が所定の距離差となるように、前記拡散角が設定されていることを特徴とする3次元形状計測方法。A first step of irradiating diffused light to or illumination means we object to be measured,
A second step of photographing the object to be measured irradiated in the first step;
A third step of recording the image data photographed in the second step;
The first to third steps are performed for each illumination unit using a plurality of illumination units that are arranged at the same distance from the object to be measured and irradiate diffused light having different diffusion angles. Steps,
A fifth step of calculating a three-dimensional shape using the image data for each irradiation means recorded in the third step ,
Each of the illumination means includes a distance from a position of a virtual point light source of the diffused light to be irradiated to the object to be measured and a virtual point of the diffused light emitted by a reference illumination means among the plurality of illumination means. as the difference between the distance from the position of the light source to the measurement subject becomes a predetermined distance difference, three-dimensional shape measuring method, wherein Rukoto the diffusion angle is set.
前記第1のステップで照射された前記被計測物体を撮影する第2のステップと、
前記第2のステップで撮影された画像データを記録する第3のステップと、
前記第1ないし第3のステップを、前記被計測物体から一定距離に配置された単一の照明手段を用い、前記照明手段から照射される拡散光の拡散角を時分割で変化させて複数回実行する第4のステップと、
前記第3のステップで記録された複数回の画像データを用いて、3次元形状を演算する第5のステップとを有し、
前記第4のステップでは、前記照明手段が、時分割で照射するそれぞれの拡散光の仮想的な点光源の位置から前記被計測物体までの距離と時分割で照射する拡散光のうち基準となる拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差がそれぞれ所定の距離差となるように、前記拡散角を時分割で変化させ、
前記第5のステップでは、前記画像データの各画素の輝度が、当該画像データの撮影時に照射された拡散光の仮想的な点光源の位置から前記被計測物体上の当該画素に対応する点までの距離の二乗に反比例することに基づいて、前記被計測物体の3次元形状を演算することを特徴とする3次元形状計測方法。A first step of irradiating diffused light to or illumination means we object to be measured,
A second step of photographing the object to be measured irradiated in the first step;
A third step of recording the image data photographed in the second step;
The first to third step, using a single illumination unit that is disposed on a predetermined distance from the measurement subject, multiple varied by time division spread angle of the diffused light emitted from said illuminating means A fourth step of executing times,
Using the image data of a plurality of times recorded in the third step, it has a a fifth step of calculating a three-dimensional shape,
In the fourth step, the illuminating unit serves as a reference among the distance from the position of the virtual point light source of each diffused light irradiated in time division to the measured object and the diffused light irradiated in time division. The diffusion angle is changed in a time-sharing manner so that the difference between the position of the virtual point light source of the diffused light and the distance from the measured object is a predetermined distance difference, respectively.
In the fifth step, the luminance of each pixel of the image data is changed from the position of a virtual point light source of diffused light irradiated at the time of photographing the image data to a point corresponding to the pixel on the object to be measured. A three-dimensional shape measuring method , comprising: calculating a three-dimensional shape of the object to be measured based on being inversely proportional to the square of the distance of the distance .
前記第2のステップは、偏光の向きが前記第1の方向と直交する第2の方向の光のみを撮影するステップであることを特徴とする請求項2または請求項3に記載の3次元形状計測方法。The first step is a step of irradiating diffused light whose polarization direction is the first direction;
4. The three-dimensional shape according to claim 2, wherein the second step is a step of photographing only light in a second direction whose polarization direction is orthogonal to the first direction. 5. Measurement method.
前記被計測物体から反射される可視光を撮影するステップを有し、
前記赤外光と可視光の撮影を同一の光軸上で行うことを特徴とする請求項1ないし請求項4のいずれか1項に記載の3次元形状計測方法。The first step is a step of irradiating infrared light;
Photographing visible light reflected from the object to be measured;
5. The three-dimensional shape measurement method according to claim 1, wherein the infrared light and the visible light are photographed on the same optical axis.
前記各照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、
前記第1の撮影手段で撮影された画像データを記録する記録手段と、
前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、
前記照明手段は、それぞれ、照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離と前記複数の照明手段のうち基準となる照明手段が照射する拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差が所定の距離差となるように、前記拡散角が設定されていることを特徴とする3次元形状計測装置。Together are arranged at the same distance from the measurement subject, a plurality of illuminating means for illuminating the different diffused light of each diffusion angle,
First imaging means for imaging the measurement object irradiated by each of the illumination means;
Recording means for recording image data photographed by the first photographing means;
Using the image data recorded in the recording means, e Bei and calculating means for calculating a three-dimensional shape,
Each of the illumination means includes a distance from a position of a virtual point light source of the diffused light to be irradiated to the object to be measured and a virtual point of the diffused light emitted by a reference illumination means among the plurality of illumination means. wherein the position of the light source so that the difference between the distance to the measurement subject becomes a predetermined distance difference, a three-dimensional shape measuring apparatus according to claim Rukoto the diffusion angle is set.
前記一つの光源から照射される光を拡散光に変換する光学手段とを有することを特徴とする請求項6に記載の3次元形状計測装置。Each illumination means includes one light source,
The three-dimensional shape measuring apparatus according to claim 6, further comprising an optical unit that converts light emitted from the one light source into diffused light.
前記ハーフミラーにより、前記各照明手段から照射されるそれぞれの拡散光を一つの光軸上に合成して、前記被計測物体を照射することを特徴とする請求項6または請求項7に記載の3次元形状計測装置。Have a half mirror,
8. The object to be measured is irradiated with the diffused light irradiated from each of the illuminating means on one optical axis by the half mirror, and the object to be measured is irradiated. 3D shape measuring device.
前記照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、
前記第1の撮影手段で撮影された画像データを記録する記録手段と、
前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、
前記照明手段は、一つの光源と、
前記一つの光源から照射される光の光学経路として、時分割で複数の異なる光学経路を生成する光学系と、
前記光学系で生成される光学経路毎に、前記一つの光源から照射される光を拡散角がそれぞれ異なる拡散光に変換する複数の光学手段とを有し、
前記光学手段は、それぞれ、変換した拡散光の仮想的な点光源の位置から前記被計測物体までの距離と前記複数の光学手段のうち基準となる光学手段が変換した拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差が所定の距離差となるように、前記拡散角が設定されており、
前記演算手段は、前記画像データの各画素の輝度が、当該画像データの撮影時に照射された拡散光の仮想的な点光源の位置から前記被計測物体上の当該画素に対応する点までの距離の二乗に反比例することに基づいて、前記被計測物体の3次元形状を演算することを特徴とする3次元形状計測装置。 A single illuminating means for irradiating diffused light that is arranged at a certain distance from the object to be measured and whose diffusion angle is changed in a time-sharing manner;
First imaging means for imaging the measurement object irradiated by the illumination means;
Recording means for recording image data photographed by the first photographing means;
Using image data recorded in the recording means, and calculating means for calculating a three-dimensional shape,
The illumination means includes one light source,
As an optical path of light emitted from the one light source, an optical system that generates a plurality of different optical paths in a time division manner;
Wherein each optical path generated by the optical system, the diffusion angle of light emitted from the one light source have a plurality of optical means for converting the expanding diffuser that different respectively,
Each of the optical means includes a distance from the position of a virtual point light source of the converted diffused light to the object to be measured and a virtual point of the diffused light converted by a reference optical means among the plurality of optical means. The diffusion angle is set so that the difference between the distance from the position of the light source to the measured object is a predetermined distance difference,
The calculation means is such that the brightness of each pixel of the image data is a distance from the position of a virtual point light source of diffused light irradiated at the time of capturing the image data to a point corresponding to the pixel on the object to be measured. A three-dimensional shape measuring apparatus that calculates a three-dimensional shape of the object to be measured based on being inversely proportional to the square of .
前記照明手段で照射された前記被計測物体を撮影する第1の撮影手段と、
前記第1の撮影手段で撮影された画像データを記録する記録手段と、
前記記録手段に記録された画像データを用いて、3次元形状を演算する演算手段とを備え、
前記照明手段は、一つの光源と、
前記一つの光源から照射される光を、時分割で拡散角がそれぞれ異なる拡散光に変換する光学手段とを有し、
前記光学手段は、時分割で照射するそれぞれの拡散光の仮想的な点光源の位置から前記被計測物体までの距離と時分割で照射する拡散光のうち基準となる拡散光の仮想的な点光源の位置から前記被計測物体までの距離との差がそれぞれ所定の距離差となるように、前記拡散角を時分割で変化させ、
前記演算手段は、前記画像データの各画素の輝度が、当該画像データの撮影時に照射された拡散光の仮想的な点光源の位置から前記被計測物体上の当該画素に対応する点までの距離の二乗に反比例することに基づいて、前記被計測物体の3次元形状を演算することを特徴とする3次元形状計測装置。 A single illuminating means for irradiating diffused light that is arranged at a certain distance from the object to be measured and whose diffusion angle is changed in a time-sharing manner;
First imaging means for imaging the measurement object irradiated by the illumination means;
Recording means for recording image data photographed by the first photographing means;
Using image data recorded in the recording means, and calculating means for calculating a three-dimensional shape,
The illumination means includes one light source,
The light emitted from the one light source, the diffusion angle in a time-division possess an optical means for converting the expanding diffuser that different respectively,
The optical means includes a distance from a virtual point light source position of each diffused light irradiated in time division to the measured object and a virtual point of diffused light serving as a reference among the diffused light irradiated in time division The diffusion angle is changed in a time-sharing manner so that the difference between the distance from the light source position to the object to be measured is a predetermined distance difference, respectively.
The calculation means is such that the brightness of each pixel of the image data is a distance from the position of a virtual point light source of diffused light irradiated at the time of capturing the image data to a point corresponding to the pixel on the object to be measured. A three-dimensional shape measuring apparatus that calculates a three-dimensional shape of the object to be measured based on being inversely proportional to the square of .
前記第1の撮影手段の前に、前記偏光の向きが前記第1の方向と直交する第2の方向の光を分離する偏光分離手段を有し、
前記第1の撮影手段は、前記偏光分離手段で分離された、偏光の向きが前記第2の方向の光のみを撮影することを特徴とする請求項8ないし請求項10のいずれか1項に記載の3次元形状計測装置。The illumination means irradiates diffused light whose polarization direction is the first direction;
Before the first photographing means, there is a polarization separation means for separating light in a second direction in which the direction of the polarization is orthogonal to the first direction,
The said 1st imaging | photography means image | photographs only the light of which the direction of polarization | polarized-light separated by the said polarization | polarized-light separation means is a said 2nd direction, It is any one of Claim 8 thru | or 10 characterized by the above-mentioned. The three-dimensional shape measuring apparatus described.
前記第1の撮影手段の前に、赤外光と可視光を分離する分離手段と、
前記分離手段で分離された可視光を撮影する第2の撮影手段とを有し、
前記第1の撮影手段は、前記分離手段で分離された赤外光のみを撮影するとともに、前記赤外光と可視光の撮影を同一の光軸上で行うことを特徴とする請求項6ないし請求項11のいずれか1項に記載の3次元形状計測装置。The illumination means irradiates infrared light,
Separating means for separating infrared light and visible light before the first imaging means;
Second imaging means for imaging visible light separated by the separation means,
The first imaging unit captures only the infrared light separated by the separating unit, and performs imaging of the infrared light and visible light on the same optical axis. The three-dimensional shape measuring apparatus according to claim 11.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002337972A JP4323779B2 (en) | 2002-11-21 | 2002-11-21 | 3D shape measuring method and 3D shape measuring apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002337972A JP4323779B2 (en) | 2002-11-21 | 2002-11-21 | 3D shape measuring method and 3D shape measuring apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004170305A JP2004170305A (en) | 2004-06-17 |
JP4323779B2 true JP4323779B2 (en) | 2009-09-02 |
Family
ID=32701332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002337972A Expired - Fee Related JP4323779B2 (en) | 2002-11-21 | 2002-11-21 | 3D shape measuring method and 3D shape measuring apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4323779B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2458927B (en) * | 2008-04-02 | 2012-11-14 | Eykona Technologies Ltd | 3D Imaging system |
JP2012512412A (en) * | 2008-12-16 | 2012-05-31 | サバンジ・ウニヴェルシテシ | 3D scanner |
JP2010281733A (en) * | 2009-06-05 | 2010-12-16 | National Institute Of Information & Communication Technology | Three-dimensional optical image-forming system |
JP2011205198A (en) * | 2010-03-24 | 2011-10-13 | Hitachi Ltd | Stereoscopic photographing device and method |
KR101451792B1 (en) * | 2013-05-30 | 2014-10-16 | 한국과학기술연구원 | Image rendering apparatus and method thereof |
KR101557295B1 (en) * | 2014-05-21 | 2015-10-05 | 주식회사 더에스 | 3-dimensional time of flight image capturing device |
-
2002
- 2002-11-21 JP JP2002337972A patent/JP4323779B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2004170305A (en) | 2004-06-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113748366B (en) | Optical waveguide beam splitter | |
US20240103290A1 (en) | Skew Mirror Auxiliary Imaging | |
US10317193B2 (en) | Multiple channel locating | |
US10502556B2 (en) | Systems and methods for 3D surface measurements | |
US7078720B2 (en) | Range finder for measuring three-dimensional geometry of object and method thereof | |
CN107783353B (en) | Device and system for capturing three-dimensional image | |
US7236256B2 (en) | Range finder and method | |
US11902494B2 (en) | System and method for glint reduction | |
US20230199324A1 (en) | Projection unit and photographing apparatus comprising same projection unit, processor, and imaging device | |
JP4323779B2 (en) | 3D shape measuring method and 3D shape measuring apparatus | |
CN113534484A (en) | Light emitting device and electronic equipment | |
US10379393B2 (en) | 3D shape reconstruction using projection onto electronic light diffusing layers | |
JP2015045575A (en) | Optical interference measurement device | |
JP2010078339A (en) | Device and method for measuring three-dimensional shape, and program | |
US20230084212A1 (en) | Three-dimensional space camera and photographing method therefor | |
CN112333428B (en) | AI-based large-view monitoring processing method and system for common camera | |
US20070002161A1 (en) | Focus detecting apparatus and image pickup apparatus | |
KR20230036950A (en) | Apparatus for measuring three-dimensional shape of target object which acquires multiple information of image through a single scan | |
US7577348B2 (en) | Focus detection apparatus and optical apparatus | |
JP2001042464A (en) | Method and device for producing stereoscopic image | |
JP2005057541A (en) | Spectroscopic camera head | |
JP4590134B2 (en) | 3D camera | |
US20190149804A1 (en) | Enhanced three dimensional imaging by focus controlled illumination | |
CN109073371B (en) | Apparatus and method for tilt detection | |
EP3615967A1 (en) | Tracking optical flow of backscattered laser speckle patterns |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050124 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20061023 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070130 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070402 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080304 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080507 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090602 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090605 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120612 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |