JP3711808B2

JP3711808B2 - Shape measuring apparatus and shape measuring method

Info

Publication number: JP3711808B2
Application number: JP28667999A
Authority: JP
Inventors: 修西川; 研東海; 勉安部
Original assignee: Fuji Xerox Co Ltd; Fujifilm Business Innovation Corp
Current assignee: Fujifilm Business Innovation Corp
Priority date: 1999-10-07
Filing date: 1999-10-07
Publication date: 2005-11-02
Anticipated expiration: 2019-10-07
Also published as: JP2001108420A

Description

【０００１】
【発明の属する技術分野】
本発明は、強度変調された出射光を物体に向けて出射し、物体からの反射光と出射光との位相差に基づいて物体までの距離を計測する形状計測装置および形状計測方法に関し、特に、小型かつ安価で、光利用効率が高く、物体表面の反射率の違い等の外的条件に左右されることなく、正確に物体までの距離を計測可能な形状計測装置および形状計測方法に関する。
【０００２】
【従来の技術】
三次元形状を計測する方式として、パッシブ方式とアクティブ方式の２つが提案されている。パッシブ方式は、エネルギーを対象物体に放射することなしに形状を計測する方式であり、アクティブ方式は、何らかのエネルギーを対象物体に放射しその反射を検出することによって形状を計測する方式である。
【０００３】
パッシブ方式において、対象物体までの複数点の距離を計測する方法の一つとしてステレオ法がある。このステレオ法は、２台のカメラをある間隔をおいて設置し、得られた２つの画像の視差から三角法により対象物体までの距離を計測する方式である。この方式は、画像として取り込むことができれば遠方までの距離を計測することができるという特長はあるが、模様のない滑らかな面を持った表面全体の三次元計測を行うことができないという重大な問題点が存在する。また、２台のカメラの光軸を一致させることが原理的にできないため、距離を測定できない領域（オクルージョン）が発生するという欠点があった。
【０００４】
アクティブ法において、対象物体までの複数点の距離を計測する方法の一つとして光切断法がある。この光切断法は、スリット光をある角度で対象物体に照射し、それとは別の角度から撮像した画像から三角法により対象物体までの距離を計測する方式である。この方式は、比較的簡単な構成で実現できるという特長はあるが、スリット光を微少な角度単位で走査しなければならず、その度に画像を撮像するため、計測時間が長くなるという問題点がある。この問題点を解決するために光切断法を応用した方式に空間コード化法がある。この空間コード化法は、スリット光を何回も照射する替わりに、投影光のパターンをコード化することにより、少ない投影回数で距離を計測する方式であるが、水平方向のサンプル数をｎとすると、ｌｏｇ₂ｎ回（ｎ＝５１２ポイントとして９回）の撮像を行わなければならないため、測定時間が長くなるという問題点があった。また、投光器と撮像器の光軸を一致させることが原理的にできないため、距離を測定できない領域（オクルージョン）が発生するという欠点があった。
【０００５】
アクティブ法において、１回の撮像で複数点の距離を計測できる方式の一つとして、強度変調された光を対象物体に照射し、その反射光の位相分布を計測する位相分布計測方式がある。
【０００６】
従来の位相分布計測方式としては、例えば、文献１「SPIE Vol,2588,1995年,126〜134ページに記載された論文(An new active 3D-Vision system based on rf-modulation interferometry light)」、および特許第２６９０６７３号、および、SPIE Vol.2748,1966年、47〜59ページ「The Emerging Versatility of a Scannless Range Imager」に示されるものがある。
【０００７】
図８は、文献１に示された従来の形状計測装置を示す。この形状計測装置１００は、光源１０１Ａから集光レンズ１０２を介してポッケルズセルのような結晶を用いた平面変調器１０３に出射された光に強度変調を施す変調／復調信号発生器１０４と、強度変調された光１０５ａを対象物体６に平面照射する投影レンズ１０６と、対象物体６で反射し結像レンズ１０７を介してポッケルズセルのような結晶を用いた平面復調器１０８に入射した反射光１０５ｂに強度復調を施す変調／復調信号発生器１０４と、強度復調を施された光信号を撮像するＣＣＤカメラ１０９とを有する。このような構成において、光源１０１Ａから発せられた光は、集光レンズ１０２により、平面変調器１０３に入射し、変調／復調信号発生器１０４の信号に基いて強度変調を施された後、その強度変調された光１０５ａは、投影レンズ１０６によって対象物体６に平面照射される。対象物体６からの反射光１０５ｂは、結像レンズ１０７により平面復調器１０８に入射し、変調／復調信号発生器１０４の信号に基いて強度復調を施された後、ＣＣＤカメラ１０９上に結像する。ＣＣＤカメラ１０９で撮像された濃淡画像は、対象物体６までの距離に起因する位相情報を含んでいる。コンピュータ１１０でこの濃淡画像を処理することにより、１回の撮像で対象物体６の距離データを得ることができる。
【０００８】
図９は、特許第２６９０６７３号公報に記載された従来の形状計測装置を示す。図８との相違点は、光源として半導体レーザ１０１Ｂを用いていること、ポッケルズセルのような結晶を用いた変調器は用いずに半導体レーザ１０１Ｂで直接強度変調を行っていること、ポッケルズセルのような結晶を用いた復調器は用いずにイメージインテンシファイア１１１で復調を行っていることの３点である。変調／復調信号発生器１０４の信号に基いて強度変調を施された光は、半導体レーザ１０１Ｂから放射された後、投影レンズ１０６によって対象物体６に平面照射される。対象物体６からの反射光１０５ｂは、結像レンズ１０７によりイメージインテンシファイア１１１に結像される。変調／復調信号発生器１０４の信号を高圧ドライブ回路１１２により高圧信号に変換し、イメージインテンシファイア１１１のゲインコントローラ端子に入力することにより強度復調された反射光は、ＣＣＤカメ１０９で撮像される。ＣＣＤカメラ１０９で撮像された濃淡画像は、対象物体６までの距離に起因する位相情報を含んでいる。コンピュータ１１０でこの濃淡画像を処理することにより、１回の撮像で対象物体６の距離データを得ることができる。
【０００９】
しかし、図８に示す形状計測装置１００によると、平面変調器１０３、平面復調器１０８にポッケルズセルのような結晶を用いた変調器／復調器を用いているため、非常に高価な装置となってしまうという欠点があった。また、この結晶を用いた変調器／復調器は開口が約数ミリ程度と小さいため、光源１０１Ａから放射された光および対象物体６で反射された光をこの開口に合わせて集光レンズ１０７を用いて集光しなければならず、装置が大型化してしまうという欠点があった。また、図９に示す形状計測装置１００によると、イメージインテンシファイア１１１を用いているため、非常に高価な装置となってしまうという欠点があった。また、このイメージインテンシファイア１１１を駆動するためには数百ボルトという高電圧信号を強度変調することが必要なため、駆動回路が複雑になるという欠点があった。また、このイメージインテンシファイア１１１はＣＣＤカメラ１０９に比べて大きいため装置全体が大型化してしまうという欠点があった。
【００１０】
そこで、高価な変調器／復調器や高価で大型のイメージインテンシファイアを用いることなく距離を計測する方式として、参照光を用いた位相分布計測方式による従来の形状計測装置として、例えば、特公昭５９−３０２３３号公報に示されるものがある。
【００１１】
図１０は、その従来の形状計測装置を示す。この形状計測装置１００は、発振器１２０の信号に基づく駆動回路１２１からの駆動信号によって所定の周波数で強度変調された光を出射する発光素子１２３と、発光素子１２３から投影レンズ１２４を介して入射した光を透過および反射させるビームスプリッタ１２５と、ビームスプリッタ１２５を透過し、物体６で反射し、再びビームスプリッタ１２５で反射した光、およびビームスプリッタ１２５で反射し、反射鏡１２８で反射して再びビームスプリッタ１２５を透過した光を集光レンズ１２６を介して受光する受光素子１２７と、受光素子１２７の出力信号を増幅する増幅器１２８と、増幅器１２８の出力信号を検波する検波器１２９と、検波器１２９の出力信号から振幅を読み取るレベル計１３０とを有する。
【００１２】
このような構成において、発振器１２０の信号に基づく駆動回路１２１からの駆動信号によって所定の周波数で強度変調された光が発光素子１２３から放射されると、その光は投影レンズ１２４を介してビームスプリッタ１２５に入射される。ビームスプリッタ１２５により透過された一方の光（照明光）は、物体６で反射し、再びビームスプリッタ１２５で反射され、集光レンズ１２６を介して受光素子１２７に入射される。ビームスプリッタ１２５により反射された他方の光（参照光）は、既知の距離に設置された反射鏡１２８により反射され、ビームスプリッタ１２５で透過され、同じく受光素子１２７に入射される。この２つの光は受光素子１２７上で光学的に合成され、その波形が電気信号に変換され、増幅器１２８に送られる。この波形の振幅は、受光素子１２７から物体６までの距離と受光素子１２７から反射鏡１２８までの距離との差により変化する。増幅された波形信号を検波器１２９により検波し、レベル計１３０で振幅を読み取ることにより物体６までの距離を算出することができる。
【００１３】
【発明が解決しようとする課題】
しかし、従来の形状計測装置によれば、発光素子１２３から受光素子１２７に至る間に照明光、参照光ともにビームスプリッタ１２５を２回通過するため、受光素子１２７に入射する光量が出射光の１／４になり、光利用効率が悪いという問題ある。
また、受光素子１２７に入射する光には、物体６表面の反射率の影響が含まれているため、受光素子１２７の出力信号に基づいて物体６までの距離を算出しているので、物体６表面の反射率の違いにより、正確な距離を測定できないという問題がある。
さらに、光軸に対して凹凸を持つ物体では正確な距離を測定できない、暗いところでは問題ないが、外光のあるところでは正確な距離を測定できない、三次元形状を測定するには光を２次元的に走査しなければならず、測定時間が長くなる等の通常の使用環境では距離測定が不可能となる重大な欠点がある。
【００１４】
従って、本発明の目的は、小型かつ安価で、光利用効率が高い形状計測装置を提供することにある。
また、本発明の他の目的は、物体表面の反射率の違い等の外的条件に左右されることなく、正確に物体までの距離を計測し得る形状計測装置および形状計測方法を提供することにある。
【００１５】
【課題を解決するための手段】
本発明は、上記目的を達成するため、所定の周波数で強度変調された出射光を物体に向けて出射し、前記物体からの反射光と前記出射光との位相差に基づいて前記物体までの距離を計測する形状計測装置において、前記所定の周波数で強度変調された前記出射光を前記物体に向けて出射する光出射手段と、前記光出射手段から出射された前記出射光を所定の方向に反射する反射部材と、前記物体からの前記反射光と前記反射部材からの前記出射光とを受光し、それらの合成により前記位相差が反映された合成検出信号、前記出射光の出射によって前記物体で反射した前記反射光を受光して反射光検出信号、および前記反射部材からの前記出射光を受光して参照光検出信号を出力する検出手段と、前記合成検出信号、前記反射光検出信号および前記参照光検出信号に基づいて、前記物体表面の反射率の違い等の外的成分を除去する補正を行って前記距離を演算する演算手段とを備えたことを特徴とする形状計測装置を提供する。
【００１６】
上記構成によれば、反射部材としては、例えば、出射光を所定の割合で透過および反射させるビームスプリッタ、あるいは物体への出射光の照射を妨げない位置に設けられた反射ミラーを用いることができる。反射部材としてビームスプリッタを用いることにより、出射光がビームスプリッタを通る回数が１回になるので、検出手段が受光する反射光と出射光の光量がビームスプリッタによって減少するのを抑制することが可能になる。反射部材として上記反射ミラーを用いることにより、検出手段が受光する反射光と出射光の光量が反射ミラーによって減少するのを防げる。また、合成検出信号、反射光検出信号および参照光検出信号に基づいて、物体表面の反射率の違い等の外的成分を除去する補正を行うことにより、物体までの距離が正確に求まる。
【００１７】
【発明の実施の形態】
図１は、本発明の第１の実施の形態に係る三次元形状計測装置を示す。この装置１は、変調信号を発生する変調信号発生器２と、変調信号発生器２からの変調信号に基づいて強度変調されたレーザ光からなる照明光４ａを出射する半導体レーザ３と、半導体レーザ３からの照明光４ａを対象物体６に向けて照射する投影レンズ５と、対象物体６で反射した反射光４ｂを光学フィルタ８を介して平面センサ９上に結像させる結像レンズ７と、半導体レーザ３からの照明光４ａを透過させるとともに、反射させ、その反射させたレーザ光を参照光４ｃとして光学フィルタ８を介して平面センサ９上に導くハーフミラー１０と、対象物体６と光学フィルタ８との間に配置された第１のシャッタ１１Ａと、ハーフミラー１０と光学フィルタ８との間に配置された第２のシャッタ１１Ｂと、平面センサ９の出力信号を濃淡情報として記憶する２次元の画像メモリ１２と、画像メモリ１２に記憶された濃淡情報に基づいて対象物体６の表面形状に関する距離データを２次元的に算出する距離演算部１３と、この装置１の各部を制御するＣＰＵ１４とを有する。
【００１８】
第１および第２のシャッタ１１Ａ，１１Ｂとしては、例えば、偏光子と検光子の間に透明電極を両端に設けた電気光学効果を有する単結晶板を配置したものを用いることができる。なお、液晶，機械式等を用いてもよい。また、本実施の形態では、電圧印加（ＯＮ）によって入射光を透過するものを用いる。
【００１９】
図２は、平面センサ９を構成する１つの画素回路を示す。平面センサ９は、振幅検出モードと光量検出モードとを有し、２次元状に配列された複数の画素を備える。１つの画素は、フォトダイオード９０と、第１のバイパス回路切り替え部９１Ａと、ハイパスフィルタ（ＨＰＦ:High Pass Filter)９２と、比較器９３ａ，ダイオード９３ｂ，コンデンサ９３ｃからなるピークホールド回路９３と、電流変換回路９４と、第２のバイパス回路切り替え部９１Ｂと、第１のバイパス回路切り替え部９１Ａと第２のバイパス回路切り替え部９１Ｂとに接続され、ＨＰＦ９２とピークホールド回路９３をバイパスするバイパス配線９５と、スイッチ９６と、電荷蓄積回路９７とを備える。
【００２０】
図３（ａ）〜（ｄ）は、平面センサ９の動作を示す。第１および第２のバイパス回路切り替え部９１Ａ，９１ＢをＡ側に設定すると、同図（ａ）に示すように、フォトダイオード９０から信号Ｓａが出力され、そのフォトダイオード９０の出力信号Ｓａは、ＨＰＦ９２でＤＣ成分Ｖ₀がカットされて同図（ｂ）に示す高周波信号Ｓｂとなり、ピークホールド回路９３に入力される。ピークホールド回路９３により同図（ｃ）に示すように振幅のピーク値が保持されたピーク値信号Ｓｃが出力される。このピーク値信号Ｓｃは非常に低電圧であり、検出が困難であるため、電流変換回路９４により電流に変換してから電荷蓄積回路９７に一定時間蓄積している。電荷蓄積回路９７の蓄積電圧Ｓｄは、同図（ｄ）に示すように、直線的に増加し、レーザ光の変調周波数ω／２πと比較して十分大きな時間Ｔ₁の期間積分すると、容易に検出可能な電圧値Ｖとなる。この電圧値Ｖは合成光の振幅に比例することは明らかである。データ転送期間Ｔ₂に電圧値Ｖは距離演算部１３に転送される。電荷蓄積回路９７からは、対象物体６からの強度変調光の振幅が検出され、対象物体６までの距離に対応した位相データを含んだ画像信号が得られる。放電期間Ｔ3 で電荷蓄積回路９７はスイッチ９６により接地され、蓄積された電荷は放出され、その後再び蓄積が開始される。一方、第１および第２のバイパス回路切り替え部９１Ａ，９１ＢをＢ側に設定すると、フォトダイオード９０の出力信号Ｓａは直接電荷蓄積回路９７に入力され、対象物体６からの定常光の平均輝度が検出され、対象物体６の輝度データが得られる。これらの回路によりフォトダイオード９０の出力信号Ｓａの高周波成分の振幅を電圧の形で検出することが可能となる。
【００２１】
次に、本装置１の動作を図４および図５をも参照し、図６のフローチャートに従って説明する。図４（ａ），（ｂ）は、反射光４ｂの位相遅れにより合成光の振幅が変化することを計算機シミュレーションにより表した図である。図５（ａ）は、照明光４ａ、参照光４ｃおよび外光４ｄによる撮像状態を示し、図５（ｂ）は、照明光４ａおよび外光４ｄによる撮像状態を示し、図５（ｃ）は、参照光４ｃのみによる撮像状態を示す。
【００２２】
（１）照明光４ａ、参照光４ｃおよび外光４ｄによる撮像
ここでは、図５（ａ）に示すように、強度変調された照明光４ａ、参照光４ｃ、および外光４ｄを用いた照明条件で対象物体６を撮像する（ＳＴ１）。すなわち、ＣＰＵ１４は、変調信号発生器２への制御信号により、半導体レーザ３から強度変調された照明光４ａを発生させる。また、ＣＰＵ１４は、第１および第２のシャッタ１１Ａ，１１Ｂへの制御信号により、両シャッタ１１Ａ，１１Ｂを開状態にし、対象物体６からの反射光４ｂ、および参照光４ｃを全て透過させる。すなわち、半導体レーザ３からの照明光４ａは、投影レンズ５を介してハーフミラー１０に入射する。ハーフミラー１０に入射した照明光４ａは、透過する光と反射する光に２分される。ハーフミラー１０を透過した照明光４ａは、対象物体６に照射され、対象物体６で反射した反射光４ｂは、結像レンズ７、および第１のシャッタ１１Ａを通り、光学フィルタ８を介して平面センサ９上に結像される。ハーフミラー１０で反射した参照光４ｃは、第２のシャッタ１１Ｂおよび光学フィルタ８を介して平面センサ９に入射する。従って、平面センサ９には、反射光４ｂと参照光４ｃとの合成光が入射する。また、ＣＰＵ１４は、平面センサ９への制御信号により、平面センサ９の光検出モードを強度変調光の振幅を検出する振幅検出モードに設定する。この状態で撮像することにより、後述する式（６）で表されるような反射光４ｂと参照光４ｃとの合成光の振幅情報が濃淡情報（画像データＡｎ）として画像メモリ１２に記憶される。
【００２３】
（２）照明光４ａおよび外光４ｄによる撮像
ここでは、図５（ｂ）に示すように、強度変調された照明光４ａを照射し、参照光４ｃを遮光し、外光４ｄが照射された状態で対象物体６を撮像する（ＳＴ２）。すなわち、ＣＰＵ１４は、変調信号発生器２への制御信号により半導体レーザ３から強度変調された照明光４ａを発生させる。また、ＣＰＵ１４は、第１および第２のシャッタ１１Ａ，１１Ｂへの制御信号により、第１のシャッタ１１Ａを開状態にし、第２のシャッタ１１Ｂを閉状態にして、対象物体６からの反射光４ｂを透過させ、参照光４ｃを遮光し、また、平面センサ９への制御信号により、平面センサ９の光検出モードを強度変調光の振幅を検出する振幅検出モードに設定する。この状態で撮像することにより、後述する式（７）で表されるような反射光４ｂの振幅情報が濃淡情報（画像データＢｎ）として２次元的に画像メモリ１２に記録される。
【００２４】
（３）参照光４ｃのみによる撮像
次に、ＣＰＵ１４は、半導体レーザモニタ出力線１４ａを監視し（ＳＴ３）、レーザ出力の変動が設定された閾値より大きい場合は、以下の撮像を行う（ＳＴ４）。レーザ出力の変動が設定された閾値より小さい場合は、撮像を終了する。但し、本装置１の起動時に１回だけ以下の撮像を行って得られた濃淡情報（画像データＣｎ）を画像メモリ１２に格納しておき、後述する距離データの算出に用いる。ここでは、図５（ｃ）に示すように、対象物体６からの反射光４ｂを遮光し、参照光４ｃのみを撮像する。すなわち、ＣＰＵ１４は、変調信号発生器２への制御信号により、半導体レーザ３から強度変調された照明光４ａを発生させる。また、ＣＰＵ１４は、第１および第２のシャッタ１１Ａ，１１Ｂへの制御信号により、第１のシャッタ１１Ａを閉状態にし、第２のシャッタ１１Ｂを開状態にして、対象物体６からの反射光４ｂを遮光し、参照光４ｃを透過させる。また、平面センサ９への制御信号により、平面センサ９の光検出モードを強度変調光の振幅を検出する振幅検出モードに設定する。この状態で撮像することにより、後述する式（８) で表されるような参照光４ｃによる振幅情報が濃淡情報（画像データＣｎ）として２次元的に画像メモリ１２に記録される。
【００２５】
（４）距離データを２次元的に算出
距離演算部１３では、このように撮像された２〜３枚の画像データＡｎ，Ｂｎ，Ｃｎを基に後述する式（１２）により距離データを２次元的に算出する（ＳＴ５）。
【００２６】
以下、この算出ついて詳細に説明する。変調の角周波数をω、振幅を２Ｅとすると、半導体レーザ３から放射される強度変調光からなる照明光４ａは、次の式（１）のように表される。
Ｉ₀＝Ｅ（ｓｉｎωｔ＋１）・・・（１）
【００２７】
対象物体６までの距離が０〜２．５ｍとすると、必要とされる変調周波数は３０ＭＨｚとなる。ハーフミラー１０の光透過率をａ、対象物体６上のある点での反射係数をＣ_nとすると、その点が平面センサ９上に結像された地点ｎに入射する反射光４ｂの強度は、外光４ｄの強度をｅとすると、次の式（２）のように表される。
Ｉ_n＝ｄ₁Ｃ_n・ａＥ｛ｓｉｎ（ωｔ＋φ_n）＋１｝＋ｅ・・・（２）
【００２８】
ここで、ｄ₁は本装置１の光学系（投影系および結像系）で決まる定数、φ_nは平面センサ９上に入射する光の光源からの飛行距離に起因する位相遅れである。（半導体レーザ３〜対象物体６）＋（対象物体６〜平面センサ９）間の距離をＬとすると、
φ_n＝ωＬ／Ｃただし、Ｃは光速
【００２９】
一方、ハーフミラー１０の反射率をｂとし、半導体レーザ３から平面センサ９までの光路長、および平面センサ９の大きさが変調波の波長と比較して十分に小さいとすると、平面センサ９上での参照光４ｃの強度は一様となり、平面センサ９上の地点ｎでは、次の式（３）のように表される。
Ｒ_n＝ｄ₂ｂＥ（ｓｉｎωｔ＋１）・・・（３）
ここで、ｄ₂は本装置１の光学系（結像系）で決まる定数である。
【００３０】
平面センサ９上の地点ｎでの光の強度Ｐ_nは、反射光４ｂと参照光４ｃの合成光となり、式（２)と式（３）の加算により次の式（４）のように表される。
【数１】

ただし、
【数２】

図４（ａ）では、対象物体６までの距離が比較的小さい場合、つまり位相遅れが小さい場合（π／４遅れ）であり、合成光の振幅は大きくなる。図２（ｂ）では、対象物体６までの距離が比較的大きい場合、つまり位相遅れが大きい場合（７π／８遅れ）であり、合成光の振幅は小さくなる。合成光は、上記式（４）で表されるように、ＤＣ成分
（ｄ₁Ｃ_nａ＋ｄ₂ｂ）Ｅ＋ｅ
および、高周波成分
【数３】

の和となる。振幅項の中に現れるｄ₁・Ｃ_n・ａＥおよびｄ₂・ｂＥは、強度変調しないした光を照射したときの反射光（物体６の表面反射率を含む）４ｂおよび参照光４ｃの振幅成分であるので、予め次のように測定しておくことが可能である。
【００３１】
図５（ａ）の撮像状態のとき、平面センサ９に入射する強度変調光の振幅を２Ａ_nとすると、Ａ_nは次の式（６）のように表される。
【数４】

図５（ｂ）の撮像状態のとき、平面センサ９に入射する光の強度は次のように表される。強度変調光の振幅を２Ｂ_nとすると、Ｂ_nは次の式（７）ように表わされる。
Ｂ_n＝ｄ₁Ｃ_nａＥ・・・（７）
【００３２】
図５（ｃ）の撮像状態のとき、平面センサ９に入射する光の強度は次の式（８）ように表される。
Ｃ_n＝ｄ₂ｂＥ・・・（８）
【００３３】
式（６），（７），（８）より、合成波の振幅は、次の式（９）のように表される。
【数５】

光源である半導体レーザ３と対象物体６との距離、および対象物体６と平面センサ９との間の距離をＬ、光速をＣとすると、位相遅れφ_nは、次の式（１１）のように表される。
φ_n＝ωＬ／Ｃ・・・（１１）
【００３４】
上記式（９），（１１）より距離Ｌは、先に述べた３種類の画像データＡｎ，Ｂｎ，Ｃｎにより次の式（１２）のように表される。
【数６】

従って、対象物体６までの距離を算出するには、３種類の画像データＡｎ，Ｂｎ，Ｃｎを検出すればよいことになる。式（１２）には対象物体６の反射係数Ｃ_n、光学系に起因する定数ｄ₁，ｄ₂、および外光強度ｅが含まれないので、どのような反射率分布を持った物体をどのような外光４ｄ下で撮像しても距離情報を取得することができる。
【００３５】
上述した第１の実施の形態によれば、以下の効果が得られる。
（イ）半導体レーザ３から出射された照明光４ａおよび参照光４ｃのハーフミラー１０を通る回数が共に１回になるので、平面センサ９が受光する反射光４ｂと参照光４ｃの光量の減少を抑制することが可能になる。
（ロ）光を復調する手段として従来用いられてきた結晶による光強度復調器、イメージインテンシファイア等の高価で大型な手段を必要とせずに、物体６までの距離に応じた位相分布が得られるため、安価で小型の三次元形状計測装置を提供することができる。
（ハ）平面センサ９の前面に光源の光を選択的に透過する光学フィルタ８を設けているので、光源として赤外線もしくは紫外線などを用いれば、外光４ｄの影響による誤差の小さい、高精度な三次元形状を計測することができる。
（ニ）対象物体６までの距離に応じた位相分布を電圧値として計測できるため、三次元形状を容易に計測することができる。
（ホ）１つの平面センサ９で距離画像と輝度画像の両方を得ることができ、この二つの画像は画素が１対１に対応しているため、距離画像を用いた輝度画像の画像処理を容易に行うことができる。
（ヘ）照明条件の異なる３枚の画像を撮像することにより、どのような反射率分布を持った対象物体６をどのような外光４ｄ下で撮像しても距離情報を取得することができる。
（ト）距離画像と輝度画像の両方が得られるので、例えば、スタジオで撮像した画像と建築画像および背景画像とを合成した合成画像の作成や合成画像から物体画像を切り出す処理等が容易になる。
【００３６】
図７は、本発明の第２の実施の形態に係る形状計測装置を示す。この第２の実施の形態は、第１の実施の形態のハーフミラー１０の代わりに、対象物体６に照射される照明光４ａの光路（同図中点線で示す。）から外れた位置に反射ミラー１５を配置したものであり、他は第１の実施の形態と同様に構成されている。この第２の実施の形態によれば、平面センサ９に入射する反射光４ｂの光量がハーフミラー１０によって半減しないため、平面センサ９の出力信号が大きくなり、Ｓ／Ｎ比が向上する。
【００３７】
なお、本発明は、上記実施の形態に限定されず、種々に変形実施が可能である。例えば、上記実施の形態では、光源として半導体レーザを使用しているが、原理的にコヒーレントな光を必要としないため、一般的な光源、例えば、キセノンランプ，ストロボ等を用いることも可能である。
また、上記実施の形態では、反射光４ｂと参照光４ｃを共通の平面センサ９で受光したが、反射光４ｂを平面センサで受光し、参照光４ｃを１つあるいは複数の受光素子で受光し、各々の出力信号を合成した合成信号を出力するようにしてよい。この場合、ハーフミラー等の反射部材を省略して出射光４ａを参照光として直接取り込むことも可能である。
また、第１の実施の形態では、ハーフミラー１０を用いたが、入射光を所定の比率で透過および反射させるビームスプリッタでもよい。
【００３８】
【発明の効果】
以上説明したように、本発明によれば、光出射手段から出射された出射光、および物体からの反射光の光量が反射部材によって減少するのを抑制することができるので、光利用効率が高くなる。また、出射光と反射光との位相差に基づいて物体までの距離を計測しているので、高価な変調器／復調器や高価で大型のイメージインテンシファイアを用いる必要がないため、小型かつ安価な形状計測装置および形状計測方法を提供することができる。
また、物体表面の反射率の違い等の外的成分を除去する補正を行って物体までの距離を演算することにより、正確に物体までの距離を計測することが可能になる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係る三次元形状計測装置の構成図
【図２】第１の実施の形態に係る平面センサを構成する画素回路を示すブロック図
【図３】（ａ）〜（ｄ）は、第１の実施の形態に係る平面センサの動作を説明するための波形図
【図４】（ａ），（ｂ）は、反射光の位相遅れにより合成光の振幅が変化することを計算機シミュレーションにより表した図
【図５】（ａ），（ｂ），（ｃ）は、第１の実施の形態に係る三次元形状計測装置の動作を説明するための図
【図６】第１の実施の形態に係る三次元形状計測装置の動作を説明するためのフローチャート
【図７】本発明の第２の実施の形態に係る三次元形状計測装置の構成図
【図８】従来の三次元形状計測装置の構成図
【図９】従来の三次元形状計測装置の構成図
【図１０】従来の三次元形状計測装置の構成図
【符号の説明】
１三次元形状計測装置
２変調信号発生器
３半導体レーザ
４ａ照明光
４ｂ反射光
４ｃ参照光
５投影レンズ
６対象物体
７結像レンズ
８光学フィルタ
９平面センサ
１０ハーフミラー
１１Ａ，１１Ｂシャッタ
１２画像メモリ
１３距離演算部
１４ＣＰＵ
１４ａ半導体レーザモニタ出力線
１５反射ミラー
９０フォトダイオード
９１Ａ第１のバイパス回路切り替え部
９１Ｂ第２のバイパス回路切り替え部
９２ハイパスフィルタ（ＨＰＦ)
９３ピークホールド回路
９３ａ比較器
９３ｂダイオード
９３ｃコンデンサ
９４電流変換回路
９５バイパス配線
９６スイッチ
９７電荷蓄積回路[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a shape measuring apparatus and a shape measuring method for emitting intensity-modulated emitted light toward an object and measuring the distance to the object based on the phase difference between the reflected light from the object and the emitted light. The present invention relates to a shape measuring apparatus and a shape measuring method that are small and inexpensive, have high light utilization efficiency, and can accurately measure a distance to an object without being influenced by external conditions such as a difference in reflectance on the surface of the object.
[0002]
[Prior art]
Two methods, a passive method and an active method, have been proposed for measuring a three-dimensional shape. The passive method is a method of measuring the shape without radiating energy to the target object, and the active method is a method of measuring the shape by radiating some energy to the target object and detecting its reflection.
[0003]
In the passive method, there is a stereo method as one of methods for measuring the distance of a plurality of points to a target object. This stereo method is a method in which two cameras are installed at a certain interval, and the distance to the target object is measured by the trigonometry from the parallax between the two obtained images. This method has the feature that if it can be captured as an image, it can measure the distance to a distant place, but it is a serious problem that it can not measure the whole surface with a smooth surface without a pattern There is a point. Further, since it is not possible in principle to match the optical axes of the two cameras, there is a drawback in that an area where the distance cannot be measured (occlusion) occurs.
[0004]
In the active method, there is a light cutting method as one of methods for measuring the distance of a plurality of points to a target object. This light cutting method is a method of irradiating a target object with slit light at a certain angle and measuring a distance from the image captured from a different angle to the target object by a trigonometric method. This method has the advantage that it can be realized with a relatively simple configuration, but the slit light must be scanned in minute angle units, and the image is taken each time, so the measurement time is long. There is. In order to solve this problem, there is a spatial encoding method as a method applying the light cutting method. This spatial encoding method is a method of measuring the distance with a small number of projections by encoding the pattern of the projection light instead of irradiating the slit light many times. The number of samples in the horizontal direction is n. Then, since log ₂ n times (n = 512 points, 9 times) must be taken, there is a problem that the measurement time becomes long. In addition, since it is impossible in principle to match the optical axes of the projector and the imager, there is a drawback that an area (occlusion) where the distance cannot be measured is generated.
[0005]
In the active method, there is a phase distribution measurement method that irradiates an object with intensity-modulated light and measures the phase distribution of the reflected light as one of the methods that can measure the distance of a plurality of points with one imaging.
[0006]
As a conventional phase distribution measurement method, for example, Reference 1 “SPIE Vol, 2588, 1995, pages 126 to 134 (An new active 3D-Vision system based on rf-modulation interferometry light)”, and Japanese Patent No. 2690673 and SPIE Vol. 2748, 1966, pages 47 to 59, “The Emerging Versatility of a Scannless Range Imager” are disclosed.
[0007]
FIG. 8 shows a conventional shape measuring apparatus disclosed in Document 1. The shape measuring apparatus 100 includes a modulation / demodulation signal generator 104 that modulates the intensity of light emitted from a light source 101A through a condenser lens 102 to a planar modulator 103 using a crystal such as a Pockels cell, and an intensity modulation. Intensity of the reflected light 105a incident on the planar demodulator 108 using a crystal such as a Pockels cell through the imaging lens 107 through the imaging lens 107 A modulation / demodulation signal generator 104 that performs demodulation and a CCD camera 109 that captures an optical signal subjected to intensity demodulation are included. In such a configuration, the light emitted from the light source 101A is incident on the planar modulator 103 by the condenser lens 102, subjected to intensity modulation based on the signal of the modulation / demodulation signal generator 104, and then The intensity-modulated light 105 a is irradiated onto the target object 6 by the projection lens 106. The reflected light 105 b from the target object 6 is incident on the planar demodulator 108 by the imaging lens 107, subjected to intensity demodulation based on the signal of the modulation / demodulation signal generator 104, and then imaged on the CCD camera 109. To do. The grayscale image captured by the CCD camera 109 includes phase information resulting from the distance to the target object 6. By processing this grayscale image with the computer 110, the distance data of the target object 6 can be obtained by one imaging.
[0008]
FIG. 9 shows a conventional shape measuring apparatus described in Japanese Patent No. 2690673. The difference from FIG. 8 is that the semiconductor laser 101B is used as a light source, the intensity modulation is directly performed by the semiconductor laser 101B without using a modulator using a crystal such as a Pockels cell, and a Pockels cell is used. Three points are that the image intensifier 111 performs demodulation without using a crystal demodulator. The light that has been intensity-modulated based on the signal of the modulation / demodulation signal generator 104 is emitted from the semiconductor laser 101B and then irradiated onto the target object 6 by the projection lens 106 on a plane. The reflected light 105 b from the target object 6 is imaged on the image intensifier 111 by the imaging lens 107. The reflected light whose intensity is demodulated by converting the signal of the modulation / demodulation signal generator 104 into a high voltage signal by the high voltage drive circuit 112 and inputting it to the gain controller terminal of the image intensifier 111 is imaged by the CCD camera 109. . The grayscale image captured by the CCD camera 109 includes phase information resulting from the distance to the target object 6. By processing this grayscale image with the computer 110, the distance data of the target object 6 can be obtained by one imaging.
[0009]
However, according to the shape measuring apparatus 100 shown in FIG. 8, since the modulator / demodulator using a crystal such as a Pockels cell is used for the planar modulator 103 and the planar demodulator 108, the apparatus is very expensive. There was a drawback of end. In addition, since the modulator / demodulator using this crystal has a small aperture of about several millimeters, the light radiated from the light source 101A and the light reflected by the target object 6 are matched with this aperture and the condenser lens 107 is adjusted. However, there is a drawback that the apparatus becomes large. Further, according to the shape measuring apparatus 100 shown in FIG. 9, since the image intensifier 111 is used, there is a disadvantage that the apparatus becomes very expensive. Further, in order to drive the image intensifier 111, it is necessary to intensity-modulate a high voltage signal of several hundred volts, so that there is a drawback that the drive circuit becomes complicated. Further, since the image intensifier 111 is larger than the CCD camera 109, there is a drawback that the entire apparatus becomes large.
[0010]
Therefore, as a method for measuring distances without using an expensive modulator / demodulator or an expensive and large image intensifier, as a conventional shape measuring device based on a phase distribution measuring method using reference light, for example, SHOKO There are some which are shown by 59-30233 gazette.
[0011]
FIG. 10 shows the conventional shape measuring apparatus. This shape measuring apparatus 100 is incident on a light emitting element 123 that emits light whose intensity is modulated at a predetermined frequency by a drive signal from a drive circuit 121 based on a signal from an oscillator 120, and a light incident from the light emitting element 123 via a projection lens 124. A beam splitter 125 that transmits and reflects light; and light that is transmitted through the beam splitter 125, reflected by the object 6, reflected again by the beam splitter 125, and reflected by the beam splitter 125, reflected by the reflecting mirror 128, and re-beamed. A light receiving element 127 that receives the light transmitted through the splitter 125 through the condenser lens 126, an amplifier 128 that amplifies the output signal of the light receiving element 127, a detector 129 that detects the output signal of the amplifier 128, and a detector 129. And a level meter 130 for reading the amplitude from the output signal.
[0012]
In such a configuration, when light whose intensity is modulated at a predetermined frequency by a drive signal from the drive circuit 121 based on the signal of the oscillator 120 is emitted from the light emitting element 123, the light is transmitted through the projection lens 124 to the beam splitter. 125 is incident. One light (illumination light) transmitted by the beam splitter 125 is reflected by the object 6, is reflected by the beam splitter 125 again, and enters the light receiving element 127 through the condenser lens 126. The other light (reference light) reflected by the beam splitter 125 is reflected by the reflecting mirror 128 installed at a known distance, is transmitted by the beam splitter 125, and is incident on the light receiving element 127. The two lights are optically combined on the light receiving element 127, the waveform is converted into an electric signal, and sent to the amplifier 128. The amplitude of this waveform varies depending on the difference between the distance from the light receiving element 127 to the object 6 and the distance from the light receiving element 127 to the reflecting mirror 128. The amplified waveform signal is detected by the detector 129, and the distance to the object 6 can be calculated by reading the amplitude with the level meter 130.
[0013]
[Problems to be solved by the invention]
However, according to the conventional shape measuring apparatus, since both the illumination light and the reference light pass through the beam splitter 125 twice from the light emitting element 123 to the light receiving element 127, the amount of light incident on the light receiving element 127 is 1 of the emitted light. There is a problem that the light utilization efficiency is poor.
Further, since the light incident on the light receiving element 127 includes the influence of the reflectance of the surface of the object 6, the distance to the object 6 is calculated based on the output signal of the light receiving element 127. There is a problem that an accurate distance cannot be measured due to a difference in reflectance of the surface.
In addition, it is not possible to measure an accurate distance with an object that has irregularities with respect to the optical axis, there is no problem in dark places, but an accurate distance cannot be measured in the presence of outside light. There is a serious drawback that distance measurement is impossible in a normal use environment such as a dimensional scan and a long measurement time.
[0014]
Accordingly, an object of the present invention is to provide a shape measuring apparatus that is small and inexpensive and has high light utilization efficiency.
Another object of the present invention is to provide a shape measuring device and a shape measuring method capable of accurately measuring a distance to an object without being influenced by external conditions such as a difference in reflectance of the object surface. It is in.
[0015]
[Means for Solving the Problems]
In order to achieve the above object, the present invention emits outgoing light that has been intensity-modulated at a predetermined frequency toward an object, and reaches the object based on the phase difference between the reflected light from the object and the outgoing light. In the shape measuring apparatus for measuring a distance, a light emitting means for emitting the emitted light, which has been intensity-modulated at the predetermined frequency, toward the object, and the emitted light emitted from the light emitting means in a predetermined direction. A reflecting member that reflects, the reflected light from the object and the emitted light from the reflecting member, and a combined detection signal in which the phase difference is reflected by combining them; Detecting means for receiving the reflected light reflected by the reflected light and receiving the reflected light detection signal, and receiving the emitted light from the reflecting member and outputting a reference light detection signal; the combined detection signal; the reflected light detection signal; Provided is a shape measuring apparatus comprising: an arithmetic means for calculating the distance by performing correction to remove external components such as a difference in reflectance of the object surface based on the reference light detection signal To do.
[0016]
According to the above configuration, as the reflecting member, for example, a beam splitter that transmits and reflects the emitted light at a predetermined ratio, or a reflecting mirror provided at a position that does not interfere with irradiation of the emitted light to the object can be used. . By using the beam splitter as the reflecting member, the number of times that the outgoing light passes through the beam splitter is one, so that it is possible to suppress the reflected light received by the detecting means and the amount of the outgoing light from being reduced by the beam splitter. become. By using the reflection mirror as the reflection member, it is possible to prevent the reflected light received by the detection means and the amount of emitted light from being reduced by the reflection mirror. Further, the distance to the object can be accurately obtained by performing correction for removing external components such as a difference in reflectance on the object surface based on the combined detection signal, the reflected light detection signal, and the reference light detection signal.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 1 shows a three-dimensional shape measuring apparatus according to a first embodiment of the present invention. The apparatus 1 includes a modulation signal generator 2 that generates a modulation signal, a semiconductor laser 3 that emits illumination light 4a composed of laser light that is intensity-modulated based on the modulation signal from the modulation signal generator 2, and a semiconductor laser. A projection lens 5 that irradiates the illumination light 4a from 3 toward the target object 6, an imaging lens 7 that forms an image of the reflected light 4b reflected by the target object 6 on the flat sensor 9 via the optical filter 8, and The half mirror 10 that transmits and reflects the illumination light 4a from the semiconductor laser 3 and guides the reflected laser light as the reference light 4c onto the flat sensor 9 through the optical filter 8, the target object 6, and the optical filter The output signal of the first sensor 11A disposed between the second shutter 11B, the second shutter 11B disposed between the half mirror 10 and the optical filter 8, and the output signal of the flat sensor 9 is shaded. A two-dimensional image memory 12 that is stored as a distance, a distance calculation unit 13 that two-dimensionally calculates distance data related to the surface shape of the target object 6 based on the density information stored in the image memory 12, and each unit of the apparatus 1 CPU 14 for controlling the above.
[0018]
As the first and

second shutters

11A and 11B, for example, a single crystal plate having an electro-optic effect in which transparent electrodes are provided at both ends between a polarizer and an analyzer can be used. A liquid crystal, a mechanical type, or the like may be used. In the present embodiment, a device that transmits incident light by voltage application (ON) is used.
[0019]
FIG. 2 shows one pixel circuit constituting the flat sensor 9. The flat sensor 9 has an amplitude detection mode and a light amount detection mode, and includes a plurality of pixels arranged two-dimensionally. One pixel includes a photodiode 90, a first bypass circuit switching unit 91A, a high pass filter (HPF) 92, a peak hold circuit 93 including a comparator 93a, a diode 93b, and a capacitor 93c, and a current. A bypass wiring 95 connected to the conversion circuit 94, the second bypass circuit switching unit 91B, the first bypass circuit switching unit 91A and the second bypass circuit switching unit 91B, and bypassing the HPF 92 and the peak hold circuit 93; , A switch 96 and a charge storage circuit 97.
[0020]
3A to 3D show the operation of the flat sensor 9. When the first and second bypass circuit switching units 91A and 91B are set to the A side, a signal Sa is output from the photodiode 90, as shown in FIG. The DC component V ₀ is cut by the HPF 92 to become the high frequency signal Sb shown in FIG. The peak hold circuit 93 outputs a peak value signal Sc in which the peak value of the amplitude is held as shown in FIG. Since the peak value signal Sc is very low voltage and difficult to detect, the peak value signal Sc is converted into a current by the current conversion circuit 94 and then stored in the charge storage circuit 97 for a certain period of time. The accumulated voltage Sd of the charge accumulating circuit 97 increases linearly as shown in FIG. 6D, and it is easy to integrate it for a period of time T ₁ that is sufficiently larger than the modulation frequency ω / 2π of the laser beam. It becomes a detectable voltage value V. It is clear that this voltage value V is proportional to the amplitude of the synthesized light. The voltage value V in the data transfer period T ₂ are transferred to the distance calculation unit 13. From the charge storage circuit 97, the amplitude of the intensity-modulated light from the target object 6 is detected, and an image signal including phase data corresponding to the distance to the target object 6 is obtained. In the discharge period T3, the charge storage circuit 97 is grounded by the switch 96, the stored charge is released, and then storage is started again. On the other hand, when the first and second bypass circuit switching units 91A and 91B are set to the B side, the output signal Sa of the photodiode 90 is directly input to the charge storage circuit 97, and the average luminance of the steady light from the target object 6 is As a result, luminance data of the target object 6 is obtained. With these circuits, the amplitude of the high frequency component of the output signal Sa of the photodiode 90 can be detected in the form of a voltage.
[0021]
Next, the operation of the apparatus 1 will be described with reference to FIGS. 4 and 5 and the flowchart of FIG. FIGS. 4A and 4B are diagrams showing by computer simulation that the amplitude of the combined light changes due to the phase delay of the reflected light 4b. FIG. 5A shows an imaging state with the illumination light 4a, the reference light 4c, and the external light 4d, FIG. 5B shows an imaging state with the illumination light 4a and the external light 4d, and FIG. The imaging state by only the reference light 4c is shown.
[0022]
(1) Imaging with Illumination Light 4a, Reference Light 4c, and External Light 4d Here, as shown in FIG. 5A, illumination conditions using intensity-modulated illumination light 4a, reference light 4c, and external light 4d Then, the target object 6 is imaged (ST1). That is, the CPU 14 generates the illumination light 4 a whose intensity is modulated from the semiconductor laser 3 in accordance with the control signal to the modulation signal generator 2. Further, the CPU 14 opens both the

shutters

11A and 11B by the control signals to the first and

second shutters

11A and 11B, and transmits all the reflected light 4b and the reference light 4c from the target object 6. That is, the illumination light 4 a from the semiconductor laser 3 enters the half mirror 10 via the projection lens 5. The illumination light 4a incident on the half mirror 10 is divided into two parts: a transmitted light and a reflected light. The illumination light 4a transmitted through the half mirror 10 is irradiated onto the target object 6, and the reflected light 4b reflected by the target object 6 passes through the imaging lens 7 and the first shutter 11A, and passes through the optical filter 8. An image is formed on the sensor 9. The reference light 4c reflected by the half mirror 10 enters the flat sensor 9 via the second shutter 11B and the optical filter 8. Therefore, the combined light of the reflected light 4b and the reference light 4c is incident on the flat sensor 9. Further, the CPU 14 sets the light detection mode of the flat sensor 9 to an amplitude detection mode for detecting the amplitude of the intensity-modulated light by a control signal to the flat sensor 9. By imaging in this state, the amplitude information of the combined light of the reflected light 4b and the reference light 4c as expressed by the equation (6) to be described later is stored in the image memory 12 as grayscale information (image data An). .
[0023]
(2) Imaging with Illumination Light 4a and External Light 4d Here, as shown in FIG. 5B, the intensity-modulated illumination light 4a is irradiated, the reference light 4c is shielded, and the external light 4d is irradiated The target object 6 is imaged in the state (ST2). That is, the CPU 14 generates the illumination light 4 a whose intensity is modulated from the semiconductor laser 3 by the control signal to the modulation signal generator 2. Further, the CPU 14 opens the first shutter 11A and closes the second shutter 11B according to the control signals to the first and

second shutters

11A and 11B, and reflects the reflected light 4b from the target object 6. Are transmitted, the reference light 4c is shielded, and the light detection mode of the flat sensor 9 is set to the amplitude detection mode for detecting the amplitude of the intensity-modulated light by the control signal to the flat sensor 9. By taking an image in this state, the amplitude information of the reflected light 4b as expressed by Expression (7) described later is recorded in the image memory 12 two-dimensionally as grayscale information (image data Bn).
[0024]
(3) Imaging with Reference Light 4c Only Next, the CPU 14 monitors the semiconductor laser monitor output line 14a (ST3), and if the fluctuation of the laser output is larger than the set threshold, the following imaging is performed (ST4). . When the fluctuation of the laser output is smaller than the set threshold value, the imaging is finished. However, the shading information (image data Cn) obtained by performing the following imaging only once when the apparatus 1 is activated is stored in the image memory 12 and used for calculation of distance data described later. Here, as shown in FIG. 5C, the reflected light 4b from the target object 6 is shielded and only the reference light 4c is imaged. That is, the CPU 14 generates the illumination light 4 a whose intensity is modulated from the semiconductor laser 3 in accordance with the control signal to the modulation signal generator 2. Further, the CPU 14 closes the first shutter 11A and opens the second shutter 11B according to control signals to the first and

second shutters

11A and 11B, and reflects the reflected light 4b from the target object 6. Is shielded, and the reference light 4c is transmitted. Further, the light detection mode of the flat sensor 9 is set to the amplitude detection mode for detecting the amplitude of the intensity-modulated light by a control signal to the flat sensor 9. By imaging in this state, the amplitude information by the reference light 4c as expressed by the equation (8) described later is recorded in the image memory 12 two-dimensionally as grayscale information (image data Cn).
[0025]
(4) Two-dimensional calculation of distance data The distance calculation unit 13 calculates the distance data two-dimensionally according to the equation (12) described later based on the two or three pieces of image data An, Bn, and Cn thus imaged. (ST5).
[0026]
Hereinafter, this calculation will be described in detail. If the angular frequency of modulation is ω and the amplitude is 2E, the illumination light 4 a made up of intensity-modulated light emitted from the semiconductor laser 3 is expressed by the following equation (1).
I ₀ = E (sin ωt + 1) (1)
[0027]
If the distance to the target object 6 is 0 to 2.5 m, the required modulation frequency is 30 MHz. When the light transmittance of the half mirror 10 is a and the reflection coefficient at a certain point on the target object 6 is C _n , the intensity of the reflected light 4 b incident on the point n imaged on the flat sensor 9 is When the intensity of the external light 4d is e, it is expressed as the following equation (2).
I _n = d ₁ C _n · aE {sin (ωt + φ _n ) +1} + e (2)
[0028]
Here, d ₁ is a constant determined by the optical system (projection system and imaging system) of the apparatus 1, and φ _n is a phase delay caused by the flight distance of light incident on the flat sensor 9 from the light source. When the distance between (semiconductor laser 3 to target object 6) + (target object 6 to plane sensor 9) is L,
φ _n = ωL / C where C is the speed of light
On the other hand, if the reflectance of the half mirror 10 is b, and the optical path length from the semiconductor laser 3 to the flat sensor 9 and the size of the flat sensor 9 are sufficiently smaller than the wavelength of the modulation wave, the flat sensor 9 The intensity of the reference light 4c is uniform and is expressed by the following equation (3) at a point n on the flat sensor 9.
R _n = d ₂ bE (sin ωt + 1) (3)
Here, d ₂ is a constant determined by the optical system (imaging system) of the apparatus 1.
[0030]
The light intensity P _n at the point n on the flat sensor 9 is a combined light of the reflected light 4b and the reference light 4c, and is expressed as the following expression (4) by adding the expressions (2) and (3). Is done.
[Expression 1]

However,
[Expression 2]

In FIG. 4A, when the distance to the target object 6 is relatively small, that is, when the phase delay is small (π / 4 delay), the amplitude of the combined light increases. In FIG. 2B, the distance to the target object 6 is relatively large, that is, the phase delay is large (7π / 8 delay), and the amplitude of the combined light becomes small. The synthesized light is represented by the DC component (d ₁ C _n a + d ₂ b) E + e as represented by the above formula (4).
And the high frequency component

The sum of D ₁ · C _n · aE and d ₂ · bE appearing in the amplitude term are the amplitude components of the reflected light (including the surface reflectance of the object 6) 4b and the reference light 4c when irradiated with light whose intensity is not modulated. Therefore, it is possible to measure in advance as follows.
[0031]
In the imaging state of FIG. 5A, when the amplitude of the intensity-modulated light incident on the flat sensor 9 is 2A _n , A _n is expressed as the following equation (6).
[Expression 4]

In the imaging state of FIG. 5B, the intensity of light incident on the flat sensor 9 is expressed as follows. Assuming that the amplitude of the intensity-modulated light is 2B _n , B _n is expressed by the following equation (7).
B _n = d ₁ C _n aE (7)
[0032]
In the imaging state of FIG. 5C, the intensity of light incident on the flat sensor 9 is expressed as the following equation (8).
C _n = d ₂ bE (8)
[0033]
From the equations (6), (7), (8), the amplitude of the synthesized wave is expressed as the following equation (9).
[Equation 5]

When the distance between the semiconductor laser 3 as the light source and the target object 6, the distance between the target object 6 and the flat sensor 9 is L, and the speed of light is C, the phase delay φ _n is _expressed by the following equation (11). It is expressed in
φ _n = ωL / C (11)
[0034]
From the above equations (9) and (11), the distance L is expressed as the following equation (12) by the three types of image data An, Bn, and Cn described above.
[Formula 6]

Therefore, to calculate the distance to the target object 6, it is only necessary to detect three types of image data An, Bn, and Cn. Expression (12) does not include the reflection coefficient C _n of the target object 6, the constants d ₁ and d ₂ due to the optical system, and the external light intensity e. The distance information can be acquired even when imaged under such external light 4d.
[0035]
According to the first embodiment described above, the following effects can be obtained.
(A) Since the number of times the illumination light 4a emitted from the semiconductor laser 3 and the reference light 4c pass through the half mirror 10 is one, the light quantity of the reflected light 4b and the reference light 4c received by the flat sensor 9 is reduced. It becomes possible to suppress.
(B) A phase distribution corresponding to the distance to the object 6 can be obtained without requiring expensive and large-scale means such as a crystal light intensity demodulator and an image intensifier, which have been conventionally used as means for demodulating light. Therefore, an inexpensive and small three-dimensional shape measuring apparatus can be provided.
(C) Since the optical filter 8 that selectively transmits light from the light source is provided on the front surface of the flat sensor 9, if infrared light or ultraviolet light is used as the light source, the error due to the influence of the external light 4d is small and highly accurate. A three-dimensional shape can be measured.
(D) Since the phase distribution corresponding to the distance to the target object 6 can be measured as a voltage value, the three-dimensional shape can be easily measured.
(E) It is possible to obtain both a distance image and a luminance image with one flat sensor 9, and the two images have a one-to-one correspondence with the pixels, and therefore, image processing of the luminance image using the distance image is performed. It can be done easily.
(F) By capturing three images with different illumination conditions, distance information can be obtained no matter what external light 4d the target object 6 having any reflectance distribution is imaged. .
(G) Since both a distance image and a luminance image can be obtained, for example, it is easy to create a composite image obtained by combining an image captured in a studio, an architectural image, and a background image, and to extract an object image from the composite image. .
[0036]
FIG. 7 shows a shape measuring apparatus according to the second embodiment of the present invention. In the second embodiment, instead of the half mirror 10 of the first embodiment, reflection is performed at a position deviated from the optical path of the illumination light 4a irradiated to the target object 6 (shown by a dotted line in the figure). The mirror 15 is arranged, and the rest is configured in the same manner as in the first embodiment. According to the second embodiment, since the amount of the reflected light 4b incident on the flat sensor 9 is not halved by the half mirror 10, the output signal of the flat sensor 9 is increased and the S / N ratio is improved.
[0037]
In addition, this invention is not limited to the said embodiment, A various deformation | transformation implementation is possible. For example, in the above embodiment, a semiconductor laser is used as a light source. However, since a coherent light is not required in principle, a general light source such as a xenon lamp or a strobe can be used. .
In the above embodiment, the reflected light 4b and the reference light 4c are received by the common flat sensor 9, but the reflected light 4b is received by the flat sensor, and the reference light 4c is received by one or a plurality of light receiving elements. A combined signal obtained by combining the output signals may be output. In this case, it is possible to directly capture the emitted light 4a as reference light by omitting a reflecting member such as a half mirror.
In the first embodiment, the half mirror 10 is used. However, a beam splitter that transmits and reflects incident light at a predetermined ratio may be used.
[0038]
【The invention's effect】
As described above, according to the present invention, it is possible to suppress the light emitted from the light emitting means and the amount of reflected light from the object from being reduced by the reflecting member, so that the light utilization efficiency is high. Become. Since the distance to the object is measured based on the phase difference between the emitted light and the reflected light, there is no need to use an expensive modulator / demodulator or an expensive and large image intensifier. An inexpensive shape measuring device and shape measuring method can be provided.
In addition, it is possible to accurately measure the distance to the object by calculating the distance to the object by performing correction to remove external components such as a difference in reflectance on the object surface.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a three-dimensional shape measuring apparatus according to a first embodiment of the present invention. FIG. 2 is a block diagram showing a pixel circuit that constitutes a planar sensor according to the first embodiment. FIGS. 4A to 4D are waveform diagrams for explaining the operation of the flat sensor according to the first embodiment. FIGS. 4A and 4B are diagrams showing the synthesized light due to the phase delay of the reflected light. FIGS. 5A, 5B, and 5C are diagrams for explaining the operation of the three-dimensional shape measuring apparatus according to the first embodiment. FIG. FIG. 6 is a flowchart for explaining the operation of the three-dimensional shape measuring apparatus according to the first embodiment. FIG. 7 is a configuration diagram of the three-dimensional shape measuring apparatus according to the second embodiment of the invention. 8] Configuration diagram of a conventional three-dimensional shape measurement device [Fig. 9] Configuration diagram of a conventional three-dimensional shape measurement device [Fig. 0] configuration diagram of a conventional three-dimensional shape measuring apparatus [Description of symbols]
DESCRIPTION OF SYMBOLS 1 3D shape measuring apparatus 2 Modulation signal generator 3 Semiconductor laser 4a Illumination light 4b Reflected light 4c Reference light 5 Projection lens 6 Target object 7 Imaging lens 8 Optical filter 9 Planar sensor 10

Half mirror

11A, 11B Shutter 12 Image memory 13 Distance calculation unit 14 CPU
14a Semiconductor laser monitor output line 15 Reflection mirror 90 Photodiode 91A First bypass circuit switching unit 91B Second bypass circuit switching unit 92 High-pass filter (HPF)
93 Peak hold circuit 93a Comparator 93b Diode 93c Capacitor 94 Current conversion circuit 95 Bypass wiring 96 Switch 97 Charge storage circuit

Claims

In a shape measuring device that emits emitted light that has been intensity-modulated at a predetermined frequency toward an object, and measures the distance to the object based on the phase difference between the reflected light from the object and the emitted light.
Light emitting means for emitting the emitted light, which has been intensity-modulated at the predetermined frequency, toward the object;
A reflecting member that reflects the emitted light emitted from the light emitting means in a predetermined direction;
The reflected light reflected from the object by receiving the reflected light from the object and the emitted light from the reflecting member and reflecting the phase difference by combining them. Detecting means for receiving a reflected light detection signal and receiving the emitted light from the reflecting member and outputting a reference light detection signal;
Computation means for computing the distance by performing correction to remove external components such as a difference in reflectance of the object surface based on the combined detection signal, the reflected light detection signal, and the reference light detection signal. A shape measuring device characterized by that.

The detection means is provided in the predetermined direction and outputs a detection signal corresponding to the light intensity of incident light, on an optical path between the object and the detector, and the reflection member and the detection Two shutter means each provided on an optical path between the detector and opening / closing the optical path by an opening / closing operation, and the combined detection signal and the reflected light from the detector by opening / closing control of the two shutter means. The shape measuring apparatus according to claim 1, further comprising a control unit that outputs a detection signal and the reference light detection signal.

The detection means outputs an amplitude detection signal indicating the amplitude of the combined light of the reflected light and the emitted light as the combined detection signal in which the phase difference is reflected, and detects steady reflected light from the object by external light Output a light amount detection signal indicating the amount of steady reflected light as a signal,
The shape measuring apparatus according to claim 1, wherein the calculating unit calculates the distance based on the amplitude detection signal and calculates the luminance of the object based on the light amount detection signal.

The detection means includes a detector that outputs a detection signal corresponding to the light intensity of incident light, and an optical filter that is provided in front of the detector and selectively transmits light from the reflecting member or the object. The shape measuring device according to claim 1, comprising the configuration.

The detection means includes a plurality of detection elements that are two-dimensionally arranged and output detection signals according to the light intensity of incident light.
The shape measuring apparatus according to claim 1, wherein the calculation unit calculates the distances to a plurality of points on the object.

In a shape measuring device that emits emitted light that has been intensity-modulated at a predetermined frequency toward an object, and measures the distance to the object based on the phase difference between the reflected light from the object and the emitted light.
Light emitting means for emitting the emitted light, which has been intensity-modulated at the predetermined frequency, toward the object;
The reflected light from the object and the emitted light are received, and a combined detection signal in which the phase difference is reflected by combining them, and the reflected light reflected by the object by the emission of the emitted light is received and reflected. A detection means that receives the detection signal and the emitted light and outputs a reference light detection signal;
Computation means for computing the distance by performing correction to remove external components such as a difference in reflectance of the object surface based on the combined detection signal, the reflected light detection signal, and the reference light detection signal. A shape measuring device characterized by that.

In a shape measuring method for emitting emitted light that is intensity-modulated at a predetermined frequency toward an object, and measuring a distance to the object based on a phase difference between reflected light from the object and the emitted light,
The emitted light whose intensity is modulated at the predetermined frequency is emitted toward the object, the reflected light and the emitted light are detected, and converted into a combined detection signal reflecting the phase difference by combining them, A first step of emitting the emitted light toward the object, detecting reflected light reflected by the object and converting it to a reflected light detection signal, detecting the emitted light and converting it to a reference light detection signal; ,
A second step of calculating the distance by performing correction to remove external components such as a difference in reflectance of the object surface based on the combined detection signal, the reflected light detection signal, and the reference light detection signal; A shape measuring method comprising: