JP6590489B2 - 情報処理装置および方法 - Google Patents

Description

本発明は、対象にパターン光を投影し、撮影した画像を入力して三次元座標を算出する情報処理装置および方法に関する。

空間符号化法などに代表される縞パターンを、プロジェクターなどの投影手段によって計測対象に投影し、その反射光が撮像手段で観測された位置をもとに三角測量の原理によって三次元座標を求める三次元計測装置が広く知られている。このような三次元計測装置では、三次元座標の計測精度が計測対象の材質に大きく依存するという課題があった。すなわち、計測対象表面が光を拡散反射させ、表面の反射率が大きい材質からなる計測対象であれば、このような三次元計測装置は高精度かつ安定的に三次元形状を計測することができる。しかしながら、工業生産の分野ではプラスチック等の樹脂のように、光を表面で反射させるのみならず、内部に光を浸透させ散乱を生じさせるような材質が多く使われている。このような計測対象を従来の三次元計測装置で計測する際には、計測対象物に生じる、一般的に表面下散乱あるいは内部散乱と呼ばれる現象によって、計測精度の悪化や、そもそも計測自体が不能になる等の問題が発生していた。この計測精度の悪化の要因には、計測される三次元座標が計測対象の内部方向（物体の奥側）に系統的にずれることによるもの（系統誤差）と、計測される三次元座標が偶発にばらつくことによるもの（偶然誤差）が存在する。そのため、このような計測対象の計測時には、白色のパウダー等を対象表面に事前に塗布するなどの処置が要求され、三次元計測装置の適用範囲が大きく制限されていた。

古瀬達彦、日浦慎作、佐藤宏介、スリット光の変調による相互反射と表面下散乱に頑健な三次元形状計測、ＭＩＲＵ２００９ 画像の認識・理解シンポジウム

非特許文献１に記載の方法では、計測対象物にＭ系列で変調したスリット光を投影し、撮影画像から画像処理によって内部散乱光成分を除去することによって、高精度な三次元計測を実現している。しかしながら、最終的に計測される三次元座標の精度は計測対象物の材質と、投影されるスリット光の明暗の周期との関係に大きく依存する。より具体的には、明暗周期が小さい（より細密な破線）スリット光を投影すると、撮影画像からより多くの内部散乱光が取り除かれることとなり、計測される三次元座標が計測対象の内部方向に系統的にずれる現象（系統誤差）が緩和される。その一方で、より多くの内部散乱光が取り除かれることにより、残存する直接反射光成分が少なくなることで信号のＳ／Ｎ比が悪化し、計測される三次元座標のばらつき（偶然誤差）が大きくなる。逆に、スリット光の明暗周期が大きい（より粗い破線）スリット光を投影すると、三次元座標が一様にずれる現象（系統誤差）が顕著となる一方、三次元座標のばらつき（偶然誤差）は小さくなる。

これらの関係は、計測対象物の透過率が高いほど、より顕著に表出する。すなわち、三次元座標が一様にずれる系統誤差と、三次元座標が偶発的にばらつく偶然誤差という二種類の誤差がそれぞれ背反する特性を持ち、これらの誤差が計測対象物の材質と、スリット光の明暗周期に依存している。しかしながら、非特許文献１では、破線の周期が場所によって異なる上、この周期を決定づけるＭ系列の符号長を決めるための指針は示されていない。そのため、三次元計測を行うユーザが、計測に先立って、計測対象物の材質、明暗周期と誤差との関係を理解した上で、この明暗周期（Ｍ系列の符号長）を試行錯誤により決定する必要があり、煩わしいものであった。

本発明は、上記課題に鑑みてなされたものであり、ユーザが試行錯誤を繰り返すことなく、計測対象物に対して適切な計測光のパターンを投影して高精度に三次元形状を計測できる装置を提供することにある。

上記の目的を達成するための本発明の一態様による情報処理装置は以下の構成を備える。すなわち、
投影部から所定の破線周期で明部と暗部とを繰り返す破線状の計測パターン光が投影された計測対象物を撮像部により撮影して得られる撮影画像に基づいて、前記計測対象物の三次元座標を計測する情報処理装置であって、
前記投影部から輝点が投影された前記計測対象物を前記撮像部により撮影することにより、前記輝点の撮影画像を取得する取得手段と、
前記撮影画像を用いて、破線周期が異なる破線状の複数の計測パターン光に対応した複数の仮想画像を生成する生成手段と、
前記複数の仮想画像のおのおのに基づいて、前記複数の計測パターン光のそれぞれの三次元計測時に生じる誤差量であって、前記計測対象物の内部散乱光に起因して三次元座標の計測値がずれる系統誤差と、三次元座標の計測時に偶発的に生じる偶然誤差とを含む前記誤差量を予測する予測手段と、
前記予測手段により予測された前記誤差量に基づいて、三次元座標の計測に用いる前記計測パターン光の破線周期を決定する決定手段と、を備える。

本発明によれば、適切な計測光のパターンで高精度に三次元形状を計測することが可能となる。

第１実施形態に係る三次元形状計測システムの全体構成を模式的に示す図。 第１実施形態に係る検査パターンを説明する図。 第１実施形態に係る計測パターンを説明する図。 第１実施形態に係る処理部１０３の内部の構成を説明する図。 第１実施形態による誤差量の予測方法を説明する図。 第１実施形態による誤差量の予測方法を説明する図。 第１実施形態の処理の流れを説明するフローチャート。 第２実施形態における空間分割パターン画像の例を示す図。 第２および第３実施形態における計測パターン画像の例を示す図。

以下、添付の図面を参照して、本発明の好適な実施形態を説明する。

＜第１実施形態＞
第１実施形態では、半透明物体である計測対象物上の三次元座標を高精度に算出するためのパラメータ（計測パターン光）を決定する。すなわち、所定のパターン光である検査パターン光の投影像から三次元計測時の偶然誤差および系統誤差の予測値を算出することにより、最適な計測パターンが決定される。実際の三次元計測の際には、こうして決定された計測パターン光が計測対象物に投影される。これにより、偶然誤差および系統誤差の影響が最小化あるいは低減され、計測対象物が半透明物体であっても高精度な三次元座標を算出することができる。

図１は本実施形態に係る三次元形状計測システムの全体構成を模式的に示す図である。図１の構成は一例であり図示されるものに限定されないことは言うまでもない。情報処理装置１００は内部に処理部１０３を含み、投影部１０１と撮像部１０２を接続することによって、三次元形状計測装置として動作する。情報処理装置１００は投影部１０１にパターン画像を送出し、撮像部１０２から撮影画像を入力する。情報処理装置１００には「計測パターン決定モード」「三次元座標算出モード」の２種類の動作モードが存在し、各モードでそれぞれ異なる処理を行う。このモードの決定は、情報処理装置１００に対してユーザが指定する。

計測パターン決定モードでは投影部１０１が計測対象物１０４に対して検査パターン光を投影し、撮像部１０２は計測対象物１０４に投影された検査パターンの像を撮影する。情報処理装置１００はこの撮影画像に基づき、最適な三次元計測を行うための計測パターンを決定する。一方、三次元座標算出モードでは、投影部１０１が計測対象物１０４に対して、上述の計測パターン決定モードで決定された計測パターン光を投影し、撮像部１０２が計測対象物１０４に投影された計測パターンの像を撮影する。情報処理装置１００はこの撮影画像に基づき、計測対象物１０４の三次元座標を算出する。

投影部１０１は、光源、表示素子、投影光学系、制御回路などによって構成され、計測対象物１０４にパターン光を投影する。なお、本例において計測対象物１０４は半透明物体であるとする。投影部１０１において、光源で発生した光は、表示素子上に表示されるパターン画像によって変調され、投影光学系を通じて投影される。パターン画像によって変調された投影光であるパターン光は、そのパターン画像を変更することによって任意に制御することが可能である。パターン光は計測対象物１０４の表面等で反射し、撮像部１０２によって撮像される。本実施形態において、パターン画像には検査パターン画像と計測パターン画像の二種類が存在する。

図２（ａ）は検査パターン画像の例を示している。白で示された領域はパターン光が投影される画素であり、黒で示された領域はパターン光が投影されない画素である。投影部１０１に図２（ａ）の検査パターン画像を入力すると、投影部１０１は、投影部１０１の１画素のみを点灯し、他の画素はすべて消灯するように計測対象物１０４にパターン光を投影する。なお、図２（ａ）は説明のために単純な例を挙げたものであり、本実施形態では実際には図２（ｂ）に示す検査パターン画像に対応するパターン光が投影される。この検査パターン画像については後述する。

図３は本実施形態における計測パターン画像の一つの例を示している。投影部１０１は、この計測パターン画像に基づき、投影部１０１のある一定の画素数分だけ連続して点灯、そしてそれに隣接する一定の画素数分だけ連続して消灯し、これを繰り返した破線状のパターン光が計測対象物１０４に投影される。

撮像部１０２は、計測対象物１０４上に投影されたパターン光の反射光を撮像する。この反射光は撮像光学系を介して撮像素子上に結像され、撮像素子が検出した信号強度に基づいた画像が生成され、処理部１０３の内部に備える画像入力部２０１に送られる。処理部１０３は、コンピュータおよび電気回路によって、本実施形態における情報処理装置の主要なアルゴリズムの処理を実現する。

図４（ａ）は、処理部１０３内部の構成を模式的に示す図である。画像入力部２０１は、撮像部１０２において撮像された計測対象物１０４の画像を入力し、撮影画像を得る。画像入力部２０１は、撮像部１０２を制御する撮影制御部としても機能する。得られた撮影画像は、処理部１０３が計測パターン決定モードで動作しているときには誤差予測部２０２に、三次元座標算出モードで動作しているときには算出部２０４に送られる。誤差予測部２０２は、投影部１０１が計測対象物１０４に対して検査パターン光を投影したときの撮影画像を入力し、その撮影画像から三次元座標を算出するときの誤差量を予測し、これらの誤差を抑制する最適な計測パターンを決定する。誤差予測部２０２は、処理部１０３が計測パターン決定モードで動作しているときにのみ処理を行い、三次元座標算出モードで動作しているときには処理を行わない。

図４（ｂ）は処理部１０３のハードウエア構成例を示すブロック図である。ＣＰＵ２５１は、ＲＯＭ２５２またはＲＡＭ２５３に格納されたプログラムを実行することにより、上述した処理部１０３内の各機能部を実現する。ＲＡＭ２５３は、ＣＰＵ２５１のメインメモリとして機能する。外部記憶装置２５４は、たとえばハードディスクであり、ＲＡＭ２５３に展開される各種プログラムや、撮像部１０２により撮影された画像を記憶する。インターフェース２５５は外部機器（本例では、投影部１０１や撮像部１０２）を処理部１０３に接続する。バス２５６は、上述した各部を、相互に通信可能に接続する。なお、上記では処理部１０３内の各機能部がＣＰＵ２５１により実現されるものとしたが、これに限られるものではなく、各機能部の一部またはすべてが専用のハードウエアにより実現されるようにしてもよい。

次に、誤差予測部２０２が行う処理の詳細について説明する。図２（ｃ）は図２（ａ）で示した検査パターン投影時に得られる撮影画像の例である。計測対象物１０４上に投影される１つの輝点は、検査パターン画像の１画素に対応する。図２（ｄ）は図２（ｃ）の撮影画像中の点像付近の領域を拡大した様子を示す図である。計測対象物１０４に投影された検査パターン光（輝点）は、計測対象物１０４が引き起こす内部散乱の影響により、元の検査パターン画像に対して左右非対称な広がりを持つ点像として観測される。計測対象物１０４の透明度が低い場合には、内部散乱の影響が小さくなり、点像が左右対称に近くなり、広がりも狭くなる。

一方、図３（ｂ）は同じ計測対象物１０４に図３（ａ）の計測パターン画像を投影したときに得られる撮影画像の例である。撮影画像には計測パターン光がなす破線に対応する輝線が観測されるが、上述したように計測対象物１０４が引き起こす内部散乱の影響により、元の計測パターン画像に対して左右非対称に広がって観測される。

さて、図２（ｃ）の撮影画像のうち点像領域だけを切り出した図２（ｄ）の画像は、投影部１０１のＰＳＦ（Point Spread Function）とみなすことができる。以降、図２（ｄ）に示す画像を検査パターンＰＳＦ画像と表記する。図３（ａ）の計測パターンは、図２（ａ）の検査パターン画像を平行移動させ加算することで合成することが可能である。また同様に、図２（ｄ）の検査パターンＰＳＦ画像の点像の領域を同様に平行移動させ加算すること（いわゆる畳み込み演算）によって、計測パターン光の投影により得られる図３（ｂ）の投影画像とほぼ同等の画像を生成することが可能である。そこで、本実施形態の誤差予測部２０２は、入力した検査パターンの撮影画像から、複数種の計測パターンの撮影画像と等価な画像を生成し、各計測パターンを採用したときの三次元計測時の誤差を予測する。以降、複数種の計測パターンの撮影画像と等価な画像を、計測パターン仮想撮影画像と呼ぶ。

図２（ｂ）は本実施形態において、実際に投影される検査パターン画像の例を示している。図２（ｂ）の検査パターン画像は図２（ａ）の検査パターン画像に対して、左、中央、上の部分に１画素ずつ輝点が設けられている。すなわち、検査パターンは、パターン光を投影する投影部１０１の解像度における最小サイズの輝点が、撮影画像において互いに重ならないように離間して配置されたパターンである。この検査パターン光を計測対象物１０４に投影すると、撮影画像上では３つの点像が観測されることになる。誤差予測部２０２はこれらの３つの点像を用いて、投影部１０１の１画素の撮影画像中での大きさＳｘ，Ｓｙを計算する。Ｓｘ，Ｓｙは畳み込み演算に対する平行移動量として用いられる。例えば、左側の輝点と中央の輝点との間隔が、投影部１０１において９画素幅であるとし、対応する撮影画像上での点像の間隔が１６画素幅であるとする。撮影画像上の点像の間隔は、例えば双方の輝度ピーク間の距離を測ればよい。このとき、投影部１０１の１画素の横幅は、１６÷（９−１）＝２であるから、撮影画像上で２画素幅である（すなわち、Ｓｘ＝２）と算出でき。縦幅Ｓｙについても、上側の輝点と中央の輝点とから同じように算出することができる。上述したように、図２（ｂ）に示す検査パターン中の３つの輝点画素は、計測対象物１０４への投影時に、それぞれの輝点がなす点像が互いに重ならない間隔で設定される。

誤差予測部２０２は、算出したＳｘ，Ｓｙを用いて、破線周期ｎに対する計測パターン仮想撮影画像を生成する。ここで破線周期ｎとは、投影部１０１の連続ｎ／２画素が点灯し、次に隣接する連続ｎ／２画素が消灯となる破線を構成するための周期を示し、偶数の整数のみの値を取る。検査パターンＰＳＦ画像をＩ_０とすると、破線周期ｎ，位相ｐの計測パターン仮想撮影画像Ｉ_０ｎ，ｐは以下の［数１］によって生成することができる。

ただし、［数１］においてｌ（ｎ，ｐ，ｋ）は周期ｎ，位相ｐの破線を表す周期関数であり、［数２］のように定義される。ただし、ｎ＝０の場合には実線を表す。また、Ｓ（Ｉ，ｘ，ｙ）は画像Ｉを横方向にｘ画素、縦方向にｙ画素分平行移動させた画像を出力する関数である。数式２のεは微小な正の実数を示す。また、ｓｇｎは入力した値の符号を判定する関数であり、入力が負の場合は−１、０の場合は０、正の場合は＋１を出力する。ｋは破線中での位置を示すインデックスであり、Ｎによって破線の範囲が定義される。よって、［数１］においては破線の長さは２Ｎとなる。１／（２Ｎ＋１）は破線の輝度総和を一定とするための正規化係数である。
なお、［数２］のｌ（ｎ，ｐ，ｋ）においては、周期ｎ、位相ｐで破線の明部が１、暗部が０となるような周期関数を構成できればよい。したがって、［数２］以外の、異なる表現で記述されてもよい。

図５（ａ）は［数１］によって生成された計測パターン仮想撮影画像Ｉ_０ｎ，ｐの１つの例を示している。計測パターン仮想撮影画像Ｉ_０ｎ，ｐは、実際に計測パターン光を計測対象物１０４に投影して得られた撮影画像と等価な画像とみなすことができる。なお、検査パターンＰＳＦ画像Ｉ_０としては、撮影画像中に存在する、図２（ｂ）に示すような計測パターンの３つの輝点のうちの１つの画像、すなわち、図２（ｄ）に示されるような画像が用いられる。

次に、誤差予測部２０２は、破線周期ｎを変えることにより得られる複数の計測パターンの仮想画像を用いて、三次元計測時に生じる誤差量を予測する。本実施形態では、誤差量として、計測対象物１０４における内部散乱光に起因して三次元座標がオフセットする系統誤差量と、三次元座標が偶発的にずれる偶然誤差量を推定する。誤差予測部２０２は、計測パターンの仮想画像から直接反射光成分の画像を取得する。そして、誤差予測部２０２は、計測パターンの直接反射光成分の画像における複数の特定位置に基づいて近似直線を取得し、近似直線のズレ（近似直線間の距離）から系統誤差量を、複数の特定位置の近似直線に対するばらつきから偶然誤差量を推定する。

まず、誤差予測部２０２は、以下の［数３］に従って、計測パターン仮想撮影画像Ｉ_０ｎ，ｐを横（右）方向に投影部１０１の１画素分をシフトさせた計測パターン仮想撮影画像Ｉ_１ｎ，ｐを生成する。したがって、計測パターン仮想撮影画像Ｉ_０ｎ，ｐと計測パターン仮想撮影画像Ｉ_１ｎ，ｐは、投影部１０１において水平方向に隣接する破線の計測パターンとなる。［数３］では、［数１］と比較して、関数Ｓ（Ｉ，ｘ，ｙ）への入力のみが異なっている。すなわち、Ｉ_１ｎ，ｐはＩ_０ｎ，ｐに対して破線全体を右方向にシフトさせて投影したときの撮影画像と等価とみなすことができる。

誤差予測部２０２は、上記の方法によって得られた計測パターン仮想撮影画像Ｉ_０ｎ，ｐおよびＩ_１ｎ，ｐから、以下のようにして三次元計測時における誤差量を予測する。まず、誤差予測部２０２は、ある破線周期ｎに対する計測パターン仮想撮影画像Ｉ_０ｎ，ｐおよびＩ_１ｎ，ｐに対して、それぞれ内部散乱光成分を除去し、直接反射光成分Ｉ_ｄ，０ｎおよびＩ_ｄ，１ｎを推定する処理を行う。直接反射光成分Ｉ_ｄ，ｊｎは、以下の［数４］によって推定することができる。［数４］において、ｊは横方向シフトに関するインデックスであり、０または１の値を取る。計測パターン仮想撮影画像Ｉ_１ｎ，ｐおよびＩ_０ｎ，ｐでは、計測パターンが破線として観測されるのに対し、得られる直接反射光成分Ｉ_ｄ，０ｎおよびＩ_ｄ，１ｎでは、計測パターンは実線の線分として観測される。

誤差予測部２０２は、得られたＩ_ｄ，０ｎおよびＩ_ｄ，１ｎから、これらの２線分がなすエッジ位置を算出する。図５（ｂ）は得られた直接反射光成分Ｉ_ｄ，０ｎおよびＩ_ｄ，１ｎの例を示す図である。図５（ｂ）では、説明のためにＩ_ｄ，０ｎおよびＩ_ｄ，１ｎを両方を同じ図の中に含めるように描いているが、実際には１枚の画像中には１つの線分のみ（Ｉ_ｄ，０ｎおよびＩ_ｄ，１ｎのいずれか一方のみ）が観測される。

図５（ｃ）はあるＹ座標における直接反射光成分Ｉ_ｄ，０ｎおよびＩ_ｄ，１ｎのＸ軸（スキャンライン）上の輝度分布を示す図である。図５（ｃ）に示される輝度分布は、たとえば図５（ｂ）で破線で示されたスキャンラインに沿った輝度分布である。誤差予測部２０２は、この輝度分布から、分布の２線分が交差するＸ座標（図５（ｃ）におけるＰ_ｉ）をエッジ位置Ｐ_ｉとして算出する。すなわち、本実施形態では、計測パターンの仮想画像から得られる直接反射光成分の画像Ｉ_ｄ，０ｎと、その計測パターンに隣接する計測パターンの仮想画像から得られる直接反射光成分の画像Ｉ_ｄ，１ｎとの境界の位置をエッジ位置として求める。したがって、エッジ位置Ｐ_ｉは［数５］によって求めることができる。

なお、直接反射光成分から求まるエッジ位置Ｐ_ｉは、投影部１０１が投影する計測パターン光について、撮像部１０２において観測される座標のサブピクセル値である。本実施形態では、このサブピクセル値を高精度に得るために、２本の隣接する線分の交点によってエッジ位置を算出しているが、これに限られるものではない。例えば１本の計測線（直接反射光成分Ｉ_ｄ，０ｎ）の断面の輝度変化（計測線を横断する方向の輝度分布）から輝度ピークをサブピクセル値として求め、これを計測線の中心線とみなして観測座標としてもよい。

誤差予測部２０２は、線分が観測されているすべてのスキャンライン（撮影画像の水平方向の各画素ライン）についてエッジ位置Ｐ_ｉを求める。図６（ａ）はスキャンラインごとにＰ_ｉを算出した例であり、各スキャンラインでのエッジ位置Ｐ_ｉを×印で示している。本来であればいずれのスキャンラインにおいてもＰ_ｉは２線分の中央付近に位置することになる。しかしながら、破線周期ｎが大きい場合には、［数４］において撮影画像から内部散乱光成分が十分に除去されないため、Ｐ_ｉが水平方向または垂直方向に系統的にずれて観測される（系統誤差が大きくなる）。また、破線周期ｎが小さい場合には、撮影画像からより多くの内部散乱光が取り除かれるため、残存する直接反射光成分が少なくなる（系統誤差が小さくなる）。しかしながら、その結果として直接反射光成分のＳ／Ｎ比が悪化し、エッジ位置Ｐ_ｉが水平方向に偶発的にばらついて観測される（偶然誤差が大きくなる）。本実施形態においてはエッジ位置Piをスキャンラインに沿って求めているが、線分に直交する方向に対して走査するようにしてもよく、いかなる方向でも構成可能である。あるいは、[数１]によって生成した仮想画像を任意の角度だけ回転させ、その後にスキャンラインに沿って操作するようにしてもよい。

誤差予測部２０２は、以上のようにして求めた複数のエッジ位置Ｐ_ｉ（×印）から得られた近似直線の切片ｂ_ｎと、残差の分散値σ_ｎを算出する。図６（ａ）の白線は、複数のエッジ位置Ｐ_ｉに対して求めた近似直線を表している。こうして算出された分散値σ_ｎは三次元計測時における偶然誤差の予測値（以下、偶然誤差量予測値σ_ｎ）を表すことになる。また、切片ｂ_ｎについては、この値が系統誤差を直接的に表現するものではないため、ｂ_ｎを用いて以下の［数６］によって求めた、系統誤差量予測値ｓ_ｎを用いる。なお、ｂ_ｎはｎ＝０（すなわち実線）における切片である。すなわち、[数６]における｜ｂ_ｎ−ｂ_０｜は実線と破線周期ｎにおける破線との距離を示している。

誤差予測部２０２は、破線周期を変えた複数のｎについてそれぞれ系統誤差量予測値ｓ_ｎと偶然誤差量予測値σ_ｎを求め、これらから誤差評価値を算出し、評価することによって、計測対象物１０４に対して適切な破線周期ｎを決定する。図６（ｂ）は、本実施形態において、破線周期ｎと誤差量予測値ｓ_ｎとσ_ｎとの関係を示す図である。図６（ｂ）における破線が系統誤差量予測値ｓ_ｎを、実線が偶然誤差量予測値σ_ｎを表している。先述のように、破線周期ｎに関して、誤差量予測値ｓ_ｎとσ_ｎとの間にはトレードオフの関係があるため、最適な破線周期ｎは、三次元計測における前提条件やユーザの要望によって変化する可能性がある。そのため、誤差予測部２０２は複数のｎについて誤差評価値ｅ_ｎを算出しておき、この値を最小にする破線周期ｎを求める（［数７］）。なお、誤差評価値ｅ_ｎは［数８］のように定義される。あるいは、誤差評価値ｅ_ｎを誤差量予測値ｓ_ｎ，σ_ｎの逆数で定義し、この値を最大にする破線周期ｎを求めるようにしてもよい。

［数８］のαは、偶然誤差と系統誤差のどちらの影響をより重要視するかを決めるパラメータであり、０から１まで間の実数値を取る。αが０に近い場合には主として偶然誤差を小さくするような破線周期ｎが選ばれる。これは、例えば計測対象物１０４が単一かつ均一な半透明物体であり、計測対象物１０４の相対的な形状のみを必要とする場合に適用できる。逆にαが１に近い場合には主として系統誤差を小さくするような破線周期ｎが選ばれる。これは、計測対象物１０４の概略あるいは正解形状が既知であり、三次元計測後の処理として、算出した三次元点群をもとにモデルフィッティング等を適用して計測対象物１０４の位置姿勢を推定する場合に用いることができる。この場合には、モデルフィッティング等の処理により三次元座標の偶然誤差の影響が軽減されるため、三次元計測においては偶然誤差をある程度許容することが可能である。そのため、系統誤差の最小化をより優先するようにαを定めることが望ましいと言える。本実施形態におけるパラメータαは情報処理装置１００が定数として備えるものとする。

パターン生成部２０３は、主として処理部１０３が三次元座標算出モードで動作しているときに処理を行うが、生成したパターン光画像をユーザが確認する等の目的で計測パターン決定モードで動作しているときに処理を行ってもよい。パターン生成部２０３は、誤差予測部２０２が推定した破線周期ｎに対応する計測パターン画像を生成するとともに、投影部１０１に計測パターン画像を投影させる投影制御部としても機能する。

算出部２０４は、処理部１０３が三次元座標算出モードで動作しているときに処理を行う。パターン生成部２０３が生成した最適な破線周期の計測パターン光が投影部１０１によって計測対象物１０４上に投影され、その投影像が撮像部１０２によって撮像されると、画像入力部２０１によってその撮影画像が処理部１０３に取得される。算出部２０４は、この撮影画像から計測対象物１０４上の三次元座標を導出する。投影部１０１は破線の位相をずらしながら、１周期分の破線を構成する計測パターン光を計測対象物１０４上に投影するので、画像入力部２０１は破線の１周期分の撮影画像を入力する。算出部２０４は、[数４]によって撮影画像から内部散乱光成分を取り除き、直接反射光成分を得る。その後、算出部２０４は［数５］によって計測パターン光が観測された撮像部１０２の座標をサブピクセル値として求める。なお、本実施形態では、このサブピクセル値を高精度に得るために、２本の隣接する線分の交点によってエッジ位置を算出しているが、これに限られるものではない。誤差予測部２０２と同様に、計測線の中心を求め、これを撮像部１０２の座標としてもよい。算出部２０４は、投影部１０１の座標と撮像部１０２の座標とから三次元座標を算出する。三次元座標の算出処理については公知の技術であるため、説明を省略する。

以上のような構成を備えた本実施形態の処理部１０３の制御について、図７のフローチャートを参照してさらに説明する。図７は、第１実施形態の三次元形状計測装置の処理の流れを示すフローチャートである。まず、情報処理装置１００が起動されると、ステップＳ７０１において、初期化処理が行われる。ステップＳ７０１の初期化処理には、投影部１０１および撮像部１０２の起動や、装置の較正データなど各種パラメータを設定する処理などが含まれる。また、この時点で処理部１０３が計測パターン決定モードで動作するように設定される。

ステップＳ７０２において、処理部１０３は、投影部１０１より所定のパターン光である検査パターン光が投影された計測対象物１０４の撮影画像を取得する。すなわち、パターン生成部２０３が図２（ｂ）のような検査パターン画像を生成し、投影部１０１は生成された検査パターン画像にしたがった検査パターン光を計測対象物１０４に投影する。すなわち、撮像部１０２は計測対象物１０４上に検査パターン光が投影された画像を撮像し、得られた撮影画像は画像入力部２０１によって処理部１０３内部に入力される。

ステップＳ７０３において、誤差予測部２０２は、検査パターン光の撮影画像から、上述した処理により三次元計測時の誤差量を予測し、適切な破線周期ｎを決定する。すなわち、まず、誤差予測部２０２は、ステップＳ７０２で取得された撮影画像における所定のパターン光（検査パターン光）の画像を用いて、複数種類の計測パターンに対応した複数の仮想画像（計測パターン仮想撮影画像）を生成する。本実施形態では、検査パターンＰＳＦ画像を用いて、［数２］により、複数種類の破線周期における計測パターンの仮想画像が取得される。その後、こうして得られた複数の仮想画像のおのおのについて、誤差予測部２０２は、三次元計測時に生じる誤差量（本実施形態では、偶然誤差σ_ｎと系統誤差ｓ_ｎ）を予測する。誤差予測部２０２は、こうして予測された誤差量に基づいて、たとえば三次元座標の算出に用いる計測パターンを［数８］により算出される誤差評価値ｅ_ｎが最小となる破線周期ｎを決定する。破線周期ｎが決定された後、処理部１０３の動作モードは三次元座標算出モードに変更される。

ステップＳ７０４において、パターン生成部２０３は決定された破線周期ｎの計測パターン画像を生成する。ステップＳ７０５において、投影部１０１は、計測パターン画像にしたがった計測パターン光を計測対象物１０４に投影し、撮像部１０２は計測対象物１０４上に計測パターン光が投影された画像を撮像する。撮影画像は画像入力部２０１によって処理部１０３内部に入力される。ステップＳ７０６において、算出部２０４は、ステップＳ７０５で得られた撮影画像中の計測パターンの画像から計測対象物１０４上の三次元座標を算出する。

以上述べたように、本実施形態によれば、たとえば半透明物体である計測対象物１０４の三次元座標を高精度に算出するためのパラメータ（すなわち計測パターン）が、検査パターンの投影画像に基づいて決定される。より具体的には、投影部１０１から検査パターン光を計測対象物上に投影し、撮像部１０２でその投影像を撮像する。誤差予測部２０２は検査パターン光の投影像から計測パターンの仮想像を生成し、三次元計測時の偶然誤差および系統誤差の予測値（σ_ｎ、ｓ_ｎ）を算出する。パターン生成部２０３は、それら予測値をもとに適切な計測パターンを決定する。三次元座標算出モードで三次元計測を行う際には、パターン生成部２０３が、偶然誤差および系統誤差の予測値をもとに決定した適切な計測パターン光を投影する。これにより、偶然誤差および系統誤差の影響が最小化もしくは低減され、半透明物体の高精度な三次元座標を算出することが可能となる。

［変形例１］本実施形態における検査パターン画像は図２（ｂ）の例に限られるものではない。例えば、図３（ａ）に示す計測パターン画像を検査パターン画像に替えることも可能である。その場合、図３（ｂ）のように得られた撮影画像に対して、図３（ａ）の計測パターン画像を既知のカーネルとしてＰＳＦ推定を行うことによって、図２（ｄ）のような検査パターンＰＳＦ画像を得ることができる。たとえば、計測パターン画像と撮影画像をそれぞれをフーリエ変換したものに対して、変換後の撮影画像を変換後の計測パターン画像で除算し、それを逆フーリエ変換することによって、検査パターンＰＳＦ画像が得られる。

［変形例２］上記実施形態では、［数８］に用いられるパラメータαは情報処理装置１００が定数として備えるものとしたが、パラメータαをユーザに入力させるようにしてもよい。この場合、たとえば誤差予測値（σ_ｎ，ｓ_ｎ）や誤差評価値ｅ_ｎが算出されるごとにそれらの値をユーザに提示し、ユーザはその結果を受けて新たなαを入力できるように情報処理装置１００を構成してもよい。このようにすることで、よりユーザの要望に合致した三次元計測を実現することが可能となる。さらに、パラメータαに代えて、ユーザが許容できる誤差評価値ｅ_ｔあるいは系統誤差量ｓ_ｔと偶然誤差量σ_ｔを入力するようにしてもよい。この場合、誤差予測部２０２は、誤差評価値ｅ_ｎや誤差予測値（σ_ｎ，ｓ_ｎ）が入力された許容値（ｅ_ｔ、ｓ_ｔ、σ_ｔ）を下回るように、破線周期ｎを決定するようにしてもよい。

＜第２実施形態＞
第２実施形態では、空間符号化による空間分割パターンと破線による計測パターン投影とを組み合わせ、半透明物体である計測対象物１０４上の三次元座標を高速かつ高精度に算出する構成を説明する。三次元計測に先立ち、計測パターン決定モードにて投影部１０１から検査パターン光を計測対象物１０４上に投影し、撮像部１０２はその投影像を撮像する。誤差予測部２０２は検査パターン光の投影像から三次元計測時に生じる偶然誤差および系統誤差の予測値を算出し、これらの予測値と、同時投影する破線の数と、計測に必要な投影パターン数とをもとに適切な計測パターンを決定する。計測対象物１０４の三次元計測を行う際には、上記のようにして決定された計測パターン光がパターン生成部２０３により投影される。これにより、計測に必要な投影パターン数と偶然誤差および系統誤差の影響とが最小化あるいは低減され、高精度な三次元座標を高速に算出することができる。第２実施形態の構成および処理の流れは第１実施形態と同様である。但し、第２実施形態では、誤差予測部２０２において、空間符号化による空間分割パターンと破線による計測パターン投影とを組み合わせた場合の誤差量を予測し、投影パターン数、偶然誤差および系統誤差との影響を最小化または低減する。また、パターン生成部２０３および算出部２０４についても、空間分割パターンと計測パターンとを組み合わせるように変更される。以下、第２実施形態について説明する。

図８に本実施形態における空間分割パターン画像の例を示す。図８に示すパターンＰ１からパターンＰ４までの画像はグレイコードと呼ばれるパターンである。投影部１０１によってこれらＰ１〜Ｐ４の４つのパターンが計測対象物１０４に順次投影され、撮像部１０２によって投影パターンに対応した画像が撮像される。これら４枚の画像での明暗は１６通り（２の４乗）の組み合わせが存在し、投影部１０１が投影する空間全体を１６の領域に分割した際、いずれの領域に属するかを決定することができる。これは撮影画像中の当該画素が投影部１０１のいずれの個所から照光されたかを特定することと等価である。たとえば、投影部１０１が１２８の解像度（画素）を持つとすると、これを１６で割った８画素単位で領域が特定される。

撮影画像においては、パターン光が投影されることにより明部となった画素を１、暗部を０とし、パターンの投影順に並べることによって例えば１０１０のような二進数で表現される符号が形成される。この例の場合、符号「１０１０」は１０進数で１０と解釈される。一方、図８の空間分割パターンはグレイコードであるため、この符号を通常の数値に変換すると、１０進数で１２となる。すなわち、この例において当該領域は空間を１番目から１６番目までの１６の領域に分割したときの１３番目を表す領域に属することとなる。この１３番目の領域は、投影部１０１の画素において、同一のグレイコードを形成する場所によって定義される。例示した場合においては、パターンＰ１において明部、Ｐ２において暗部、Ｐ３において明部、Ｐ４において暗部を形成する、投影部１０１での画素である。

一方、撮影画像中で明暗の組み合わせを読み取るために、投影パターンＰ１〜Ｐ４に加えて、その反転パターンを用いることが広く行われている。反転パターンの例を図８のパターンＮ１〜Ｎ４に示す。パターンＮ１〜Ｎ４はパターンＰ１〜Ｐ４をそれぞれ反転させたものである。例えば投影部１０１はパターンＰ１とパターンＮ１とを計測対象物１０４に向けて投影し、撮像部１０２はそれぞれのパターンが投影された画像を撮像する。このときの画像をＩＰ１（ｘ，ｙ）、ＩＮ１（ｘ，ｙ）とする（ｘ，ｙは画像中での画素の位置を示す）。ＩＰ１（ｘ，ｙ）＞ＩＮ１（ｘ，ｙ）を満たす画素については明部（すなわち１）の画素、そうでない画素については暗部（すなわち０）の画素とすることによって、明暗を判定することができる。この明暗判定の処理は、本実施形態においては算出部２０４によって行われる。

図９（ａ）に第２実施形態における計測パターン画像の例を示す。図８に示した空間分割パターンにより、投影部１０１が投影する空間は８画素幅で全１６の領域に分割される。そのため、分割された各領域に１本だけ破線が含まれるように計測パターン画像を構成することによって、１６本までの破線を同時に投影しても、個々の破線を一意に識別することが可能となる。第２実施形態において空間分割された各領域は８画素幅となるため、投影部１０１の横方向の画素すべてに破線を投影するためには、同時に投影した１６本の破線を１画素ずつ横方向にシフトさせながら計測パターンを８回投影すればよいことになる。したがって、１つの破線の周期をｎとすると、空間符号化で８枚（Ｐ１〜Ｐ４およびＮ１〜Ｎ４）、破線を１周期分縦にシフトさせるのにｎ枚、破線を横にシフトさせるのに８枚を要するため、合計で８＋８×ｎ枚の投影パターンを必要とする。一方、第１実施形態の構成では同じ密度の計測を行うために１２８×ｎ枚の計測パターンを必要とする。このように必要となる撮影画像の枚数を減らすことができるので、第２実施形態では第１実施形態と比較して、大幅な高速化が実現される。

その一方で、図３（ｂ）に示したように、半透明物体である計測対象物１０４に破線の計測パターン光を投影した場合には、計測対象物１０４の内部散乱により、元の計測パターン画像よりも非対称に広がった投影像が観測される。このとき、図９（ａ）のように破線の間隔が狭い場合には、破線による内部散乱の影響が互いに重なり合ってしまうため、系統誤差と偶然誤差が共に増大してしまう。そのため、高精度な三次元計測を実現するためには破線の間隔をなるべく広く取り、同時に投影する破線の数を抑制する必要が生じる。しかし、同時に投影する破線の数を減少させると、投影パターン数（必要な撮影画像の枚数）が増大するため、計測時間が長くなってしまう。すなわち、第２実施形態のように空間分割パターンと計測パターンとを組み合わせて計測を行う場合には、計測精度と投影枚数との間にもトレードオフが発生する。そこで、第２実施形態では、計測パターン決定モードにおいて、第１実施形態で示した破線周期ｎに加えて、最適な破線間隔ｍについても算出する。

誤差予測部２０２は、第１実施形態で用いた［数３］に替えて以下に示す［数９］によって計測パターン仮想撮影画像Ｉ_{ｊｍ，ｎ，ｐ}を算出する。この計測パターン仮想撮影画像は、検査パターン光の画像を用いて、第１の方向（たとえば垂直方向）に延びる破線周期ｎの破線が第１の方向に直交する第２の方向（たとえば水平方向）に破線間隔ｍで配置された計測パターンに対応した仮想画像となる。［数９］において、Ｍは同時に投影する破線の数（空間分割パターンによる空間分割数に等しい）を示す。

また、誤差評価値ｅ_ｍ，ｎについては、投影間隔に関する項を追加し、［数８］に代えて［数１０］のように定義する。［数１０］のｃ_ｍはパターンの投影数（必要とする空間分割パターンと計測パターンとの和）を表す。なお、誤差評価値の算出のための偶然誤差（σ_ｍ，ｎ）や系統誤差（ｓ_ｍ，ｎ）は、計測パターン仮想撮影画像Ｉ_{ｊｍ，ｎ，ｐ}のうちの一つの仮想画像を用いて算出すればよい。αは［数８］と同様である。βは、誤差と計測速度のどちらの影響をより重要視するかを決めるパラメータであり、０から１まで間の実数値を取る。βが０に近い場合には主として誤差量を小さくするような破線周期ｎと破線間隔ｍが選ばれる。βが１に近い場合には、計測速度を速くするような破線周期ｎと破線間隔ｍが選ばれる。誤差予測部２０２は誤差評価値ｅ_ｍ，ｎを算出し、この値を最小にする破線周期ｎおよび破線間隔ｍを求める。なお、パラメータα、βは情報処理装置１００が定数として備える。

三次元座標算出モードにおいて、パターン生成部２０３は、誤差予測部２０２が推定した破線間隔ｍ、破線周期ｎに対応するパターン光画像（空間分割パターン画像および計測パターン画像）を生成する。投影部１０１はパターン生成部２０３が生成したパターン光画像の計測パターン光を投影し、撮像部１０２はその計測パターン光が投影された計測対象物１０４を撮影する。算出部２０４は、投影部１０１が計測パターン光を計測対象物１０４に投影したときの撮影画像から、内部散乱光成分を除去し、三次元座標を算出する処理を行う。また、算出部２０４は、投影部１０１が空間分割パターン（図８）を投影したときの撮影画像から複数の破線を識別する処理についても合わせて行う。

［変形例１］上記第２実施形態では、［数１０］のパラメータα、βを情報処理装置１００が定数として備えるものとしたが、これに限られるものではない。第１実施形態のパラメータαと同様に、パラメータαやβをユーザに入力させるようにしてもよい。また、この場合、誤差予測値（σ_ｎ，ｓ_ｎ）やパターン投影数ｃ_ｍ、誤差評価値ｅ_ｍ，ｎが算出されるごとにそれらの値をユーザに提示し、ユーザがその結果を受けて新たなα、βを入力できるように情報処理装置１００を構成してもよい。このようにすることで、よりユーザの要望に合致した三次元計測を実現することが可能となる。

［変形例２］また、パラメータα、βに代えて、ユーザが許容できる誤差評価値ｅ_ｔあるいは系統誤差量ｓ_ｔと偶然誤差量σ_ｔ、最大パターン投影数ｃ_ｍやｃ_ｍから推計できる最大計測時間を入力するようにしてもよい。この場合、誤差予測部２０２は、誤差評価値ｅ_ｍ，ｎや誤差予測値（σ_ｍ，ｎ，ｓ_ｍ，ｎ）、パターン投影数ｃ_ｍが入力された許容値を下回るように、破線周期ｎや破線間隔ｍを決定する。

以上のような第２実施形態の構成によれば、図８に示されるような空間符号化による空間分割パターンと破線による計測パターン投影とを組み合わせ、半透明物体である計測対象物１０４上の三次元座標を高速かつ高精度に算出することができる。第２実施形態では、計測パターン決定モードにおいて、誤差予測部２０２が検査パターン光の投影像から、複数の破線パターンを同時投影した場合の三次元計測時の偶然誤差および系統誤差の予測値を算出する。そして、誤差予測部２０２は、これらの予測値と、同時投影する破線の数に応じた計測に必要な投影パターン数とをもとに最適な計測パターンを決定する。三次元座標算出モードでは、決定された最適な計測パターン光が投影され、計測対象物１０４の三次元座標が計測される。これにより、計測に必要な投影パターン数と偶然誤差および系統誤差の影響とが最小化または低減され、高精度な三次元座標を高速に算出することが可能となる。

＜第３実施形態＞
第３実施形態では、三次元座標算出モードにおいて複数の破線パターンを同時に投影し、半透明物体である計測対象物１０４上の三次元座標を高速かつ高精度に算出する。それに先立つ計測パターン決定モードにおいて、誤差予測部２０２は検査パターン光の投影像から三次元計測時の偶然誤差および系統誤差の予測値を算出する。そして、誤差予測部２０２は、これらの予測値と、同時投影する破線の数と、計測に必要な投影パターン数とをもとに最適な計測パターンを決定する。これにより、計測に必要な投影パターン数と偶然誤差および系統誤差の影響とが最小化または低減され、高精度な三次元座標を高速に算出することができる。第３実施形態の構成および処理の流れは第１実施形態と同様である。ただし、第３実施形態では、誤差予測部２０２において、破線による計測パターン光を複数同時に投影した場合の誤差量を予測し、投影パターン数、偶然誤差および系統誤差との影響を最小化または低減する。また、パターン生成部２０３および算出部２０４では、複数の破線パターンを投影し、三次元座標を算出する。

図９（ｂ）は本実施形態における計測パターン画像の例を示す。第２実施形態と同様に複数の破線が同時に投影されるように構成されているが、第３実施形態では各破線の識別を、空間分割パターンによって行うのではなく、各破線の縦方向の位相が破線によって固有になるように設定することで行う。すなわち、内部散乱光を除去するための縦方向に破線を順次シフトさせる操作に関して、この投影順を破線ごとに異ならせることにより、破線の位相の違いによって各破線が識別される。

この位相の組み合わせの数は破線周期ｎに比例するため、破線周期ｎが大きいほど破線の識別能力が高くなり、同時に投影できる破線の数も増大し、必要な計測パターンの総数も減少する。しかしながら、破線周期ｎは内部散乱光の除去性能だけでなく、各破線の間隔にも影響を与える。そのため、第１実施形態とは異なり、系統誤差および偶然誤差のふるまいは破線周期ｎに対して単調増加あるいは単調減少ではなく、より複雑な関係を示すことになる。また、第２実施形態とは異なり、破線間隔ｍと破線周期ｎとは互いに独立ではなく依存関係を有する。

誤差予測部２０２は、第１実施形態の［数３］に替えて以下の［数１１］によって計測パターン仮想撮影画像Ｉ_{ｊｍ，ｎ，ｐ}を算出する。［数１１］は第２実施形態における［数９］と類似するが、破線パターンを定義する周期関数がｌからｌ’へ置き換えられている。ｌ’は［数１２］によって定義される。なお、［数１２］におけるφ（ｊ，ｒ，ｐ，ｋ）は、破線ごとの位相の違いを示す関数であり、番号ｒの投影順ｊによって破線の位相が特定される。

誤差評価値ｅ_ｍ，ｎを第２実施形態と同様に［数１０］のように定義する。誤差予測部２０２は、［数１０］にしたがって誤差評価値ｅ_ｍ，ｎを算出し、この値を最小にする破線周期ｎおよび破線間隔ｍを求める。

三次元座標算出モードにおいて、パターン生成部２０３は、誤差予測部２０２が推定した破線周期ｍ、破線周期ｎに対応する計測パターン画像を生成する。このとき［数１２］に基づき、破線ごとに投影順を変更した計測パターン画像を生成し、同一の計測パターン画像中で破線が一意に識別できるようにする。算出部２０４は、投影部１０１が計測パターン光を計測対象物１０４に投影したときの撮影画像から、内部散乱光成分を除去し、三次元座標を算出する処理を行う。またこのとき算出部２０４は、複数の破線の位相の違いから、これらを識別する処理についても合わせて行う。

以上のように、第３実施形態によれば、各々の位相の違いにより識別が可能な複数の破線パターンを同時に投影し、半透明物体である計測対象物１０４上の三次元座標を高速かつ高精度に算出することができる。第３実施形態では、計測パターン決定モードにいて、投影部１０１から検査パターン光を計測対象物１０４上に投影し、撮像部１０２はその投影像を撮像する。誤差予測部２０２は検査パターン光の投影像から、破線周期ｎ、破線間隔ｍ、位相φに応じた三次元計測時の偶然誤差および系統誤差の予測値を算出する。そして、誤差予測部２０２は、これらの予測値と、同時投影する破線の数と、計測に必要な投影パターン数とをもとに最適な計測パターンを決定する。これにより、計測に必要な投影パターン数と偶然誤差および系統誤差の影響とが最小化または低減され、高精度な三次元座標を高速に算出することが可能となる。

以上説明したように、第１〜第３実施形態によれば、半透明物体である計測対象の内部散乱等の影響を抑制し、計測精度を向上させる三次元計測装置および方法が提供される。

＜他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００：情報処理装置、１０１：投影部、１０２：撮像部、１０３：処理部、１０４：計測対象物、２０１：画像入力部、２０２：誤差予測部、２０３：パターン生成部、２０４：算出部

Claims (14)

1. 投影部から所定の破線周期で明部と暗部とを繰り返す破線状の計測パターン光が投影された計測対象物を撮像部により撮影して得られる撮影画像に基づいて、前記計測対象物の三次元座標を計測する情報処理装置であって、
   前記投影部から輝点が投影された前記計測対象物を前記撮像部により撮影することにより、前記輝点の撮影画像を取得する取得手段と、
   前記撮影画像を用いて、破線周期が異なる破線状の複数の計測パターン光に対応した複数の仮想画像を生成する生成手段と、
   前記複数の仮想画像のおのおのに基づいて、前記複数の計測パターン光のそれぞれの三次元計測時に生じる誤差量であって、前記計測対象物の内部散乱光に起因して三次元座標の計測値がずれる系統誤差と、三次元座標の計測時に偶発的に生じる偶然誤差とを含む前記誤差量を予測する予測手段と、
   前記予測手段により予測された前記誤差量に基づいて、三次元座標の計測に用いる前記計測パターン光の破線周期を決定する決定手段と、を備えることを特徴とする情報処理装置。
2. 前記取得手段は、前記投影部の解像度における最小サイズの複数の輝点が、撮影画像において互いに重ならないように離間して配置されたパターンであることを特徴とする請求項１に記載の情報処理装置。
3. 前記生成手段は、前記複数の輝点の画像のうちの、一つの輝点に対応した画像を用いて、前記複数の仮想画像を生成することを特徴とする請求項２に記載の情報処理装置。
4. 前記生成手段は、前記複数の輝点の間隔の前記投影部における画素の数と前記輝点の間隔の前記撮影画像における画素の数とに基づいて、前記一つの輝点に対応した画像を移動させ加算することにより、前記複数の計測パターン光に対応した前記複数の仮想画像を生成することを特徴とする請求項３に記載の情報処理装置。
5. 前記予測手段は、それぞれの仮想画像について内部散乱光成分を除去して得られる直接反射光成分の画像を用いて前記誤差量を予測することを特徴とする請求項４に記載の情報処理装置。
6. 前記予測手段は、前記直接反射光成分の画像から得られる複数の特定位置に基づいて近似直線を取得し、前記近似直線に対する前記複数の特定位置のばらつきを求めることにより、前記偶然誤差の量を得ることを特徴とする請求項５に記載の情報処理装置。
7. 前記複数の特定位置は、前記計測パターン光の仮想画像から得られる直接反射光成分の画像と、前記計測パターン光に隣接する計測パターン光の仮想画像から得られる直接反射光成分の画像との境界の位置を含むことを特徴とする請求項６に記載の情報処理装置。
8. 前記複数の特定位置は、前記計測パターン光の仮想画像から得られる直接反射光成分の画像を横断する方向の輝度分布における輝度ピークの位置を含むことを特徴とする請求項６に記載の情報処理装置。
9. 前記予測手段は、前記直接反射光成分の画像の複数の特定位置に基づいて得られた近似直線間の距離に基づいて前記系統誤差の量を算出することを特徴とする請求項５乃至８のいずれか１項に記載の情報処理装置。
10. 前記生成手段は、前記輝点の撮影画像を用いて、第１の方向に延びる破線周期ｎの破線が前記第１の方向に直交する第２の方向に破線間隔ｍで配置された計測パターン光に対応した仮想画像を生成し、前記破線周期ｎと前記破線間隔ｍを異ならせることにより複数の仮想画像を生成することを特徴とする請求項１乃至９のいずれか１項に記載の情報処理装置。
11. 前記生成手段は、前記破線間隔ｍで配置された破線が互いに異なる位相を有する計測パターン光に対応した仮想画像を生成することを特徴とする請求項１０に記載の情報処理装置。
12. 更に、前記投影部に、前記決定手段により決定された計測パターン光を前記計測対象物に投影させる投影制御手段と、
    前記計測パターン光が投影された前記計測対象物を、前記撮像部に撮像させる撮影制御手段と、
    前記撮影画像に基づいて、前記計測対象物の三次元座標を導出する導出手段を備えることを特徴とする請求項１乃至１１のいずれか１項に記載の情報処理装置。
13. 投影部から所定の破線周期で明部と暗部とを繰り返す破線状の計測パターン光が投影された計測対象物を撮像部により撮影して得られる撮影画像に基づいて、前記計測対象物の三次元座標を計測する情報処理装置の制御方法であって、
    取得手段が、前記投影部から輝点が投影された前記計測対象物を前記撮像部により撮影することにより、前記輝点の撮影画像を取得する取得工程と、
    生成手段が、前記撮影画像を用いて、破線周期が異なる破線状の複数の計測パターン光に対応した複数の仮想画像を生成する生成工程と、
    予測手段が、前記複数の仮想画像のおのおのに基づいて、前記複数の計測パターン光のそれぞれの三次元計測時に生じる誤差量であって、前記計測対象物の内部散乱項に起因して参事座標の計測値がずれる系統誤差と、三次元座標の計測時に偶発的に生じる風前後里を含む前記誤差量を予測する予測工程と、
    決定手段が、前記予測工程で予測された前記誤差量に基づいて、三次元座標の計測に用いる前記計測パターン光の破線周期を決定する決定工程と、を有することを特徴とする情報処理装置の制御方法。
14. コンピュータを、請求項１乃至１２の何れか１項に記載の情報処理装置の各手段として機能させるためのプログラム。