JP5643645B2 - 有形物の形状の3次元測定のためのシステム及び方法 - Google Patents

有形物の形状の3次元測定のためのシステム及び方法 Download PDF

Info

Publication number
JP5643645B2
JP5643645B2 JP2010523096A JP2010523096A JP5643645B2 JP 5643645 B2 JP5643645 B2 JP 5643645B2 JP 2010523096 A JP2010523096 A JP 2010523096A JP 2010523096 A JP2010523096 A JP 2010523096A JP 5643645 B2 JP5643645 B2 JP 5643645B2
Authority
JP
Japan
Prior art keywords
projector
line
image
capturing
optical axis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010523096A
Other languages
English (en)
Other versions
JP2010538269A (ja
Inventor
ラーパ,ニコライ・エル
ブライロフ,ユリー・エイ
Original Assignee
アーテック・グループ・インコーポレーテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=40406938&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP5643645(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by アーテック・グループ・インコーポレーテッド filed Critical アーテック・グループ・インコーポレーテッド
Publication of JP2010538269A publication Critical patent/JP2010538269A/ja
Application granted granted Critical
Publication of JP5643645B2 publication Critical patent/JP5643645B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2513Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Description

本開示は、有形物の3次元(「3D」)測定に関する。
構造光三角測量法の使用等を通じて有形物の3D表面形状の非接触測定を行うための既知の装置及び方法が存在する。
有形物の表面形状を測定する三角測量法は、一般に、振幅変調、時間変調、及び波長変調のうちの1つ以上をされた光(「構造光」)の物体の表面上への投影を使用する。物体の表面上に投影される構造光の画像(以下、「画像」という)は、構造光が投影される方向と異なる方向にあるカメラによって取り込まれる。画像は、次いで、物体の表面の形状を計算するために解析される。構造光を形成して画像を走査する特定のシステムのパラメータ、表面の形状のパラメータ、物体の表面と当該システムの構成要素との間の距離のパラメータ、及び当該システムの構成要素に対する物体の向きのパラメータ等の幾つかのパラメータは、解析結果に影響を与える。一般に、物体の形状、物体の表面とシステムの構成要素との間の距離、及びシステムの構成要素に対する物体の向きを除いて、列挙されるパラメータの大部分が事前に知られているか、又は容易に識別できるため、画像を解析するために三角測量法を使用して、物体の表面の形状を求めることができる。
1つ又は複数の実施形態にしたがって、非接触構造光三角測量を使用する有形物の形状の3D測定のためのシステム及び方法を提供する。システムは、任意の物体の表面上に構造光パターンを投影するための光投影機と、物体の表面に作用する構造光パターンの画像を取り込むためのカメラとを備える。システムは照らされた物体の表面形状の3D測定値を求めるための演算装置を更に備え、この3次元測定値は、投影した構造光と取り込んだ画像との間の計算された対応に基づき、三角測量アルゴリズム用いることを通じて求められる。構造光は、投影機及びカメラの両方の中心投影領域の頂点を通る平面内に存在する符号化要素を含み、ここで、このような平面は測定される物体の空間をも通っている。この配置は、構造光が歪められる場合のある方向の数を1つの既知の方向に制限することによって、構造光内の符号化要素と取り込まれた画像内の符号化要素との間の対応を容易に識別することを可能にし、それによって、非接触構造光三角測量手法を使用して、物体の表面形状の3D測定値を迅速且つ正確に取得するシステム及び方法を提供する。
同じ符号が同じ要素を指す添付の図面と共に以下の説明を参照して、本開示の上記の特徴及び目的はより明らかとなるだろう。
本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムのブロック図の代表例である。 投影機と、カメラと、三角測量法を使用して測定される物体との間の配置及び関係を表わす幾何学図である。 構造光三角測量システムにおけるスライド及び対応する画像の例である。 構造光三角測量システムにおいて使用される構造光パターンの代表例である。 構造光三角測量システムにおいて使用される構造光パターンの代表例である。 構造光三角測量システムにおいて使用される構造光パターンの代表例である。 本発明の1つ又は複数の実施形態による、投影機経線及びカメラ経線の例示である。 本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムにおける、経線の位置付けの幾何学的規則の部分的透視図である。 本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムにおける、カメラに対する投影機の幾何学的な相対的位置付けの代表例である。 図7の投影機及びカメラの相対的位置付けに対する投影機経線及びカメラ経線の位置の例示である。 本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムにおける、カメラに対する投影機の幾何学的な相対的位置付けの代表例である。 図9の投影機及びカメラの相対的位置付けに対する投影機経線及びカメラ経線の位置の例示である。 本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムにおける、カメラに対する投影機の幾何学的な相対的位置付けの代表例である。 図11の投影機及びカメラの相対的位置付けに対する投影機経線及びカメラ経線の位置の例示である。 本発明の1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステムによって生成される代表的光構造の例示である。 本発明の1つ又は複数の実施形態による、図7の投影機及びカメラの相対的位置付けに対する、図13の光構造に対応する平面物体から得られる代表的な取り込み画像の例示である。 本発明の1つ又は複数の実施形態による、図7の投影機及びカメラの相対的位置付けに対する、図13の光構造に対応する非平面物体から得られる代表的な取り込み画像の例示である。
一般に、本発明は、有形物の形状の3D測定のためのシステム及び方法を含む。同じ符号は同じ構成要素を指す前述の図面を参照して、これから本発明のある実施形態について述べる。
ここで図1を参照すると、1つ又は複数の実施形態による、有形物の形状の3D測定のためのシステム100のブロック図の例示が全体として示される。システム100は光学ユニット102と演算装置104とを含む。光学ユニット102は1つ又は複数の投影機106により構造光を生成する。1つの実施形態において、投影機106は、光源126と、光源126から放射される光を変調するための光変調装置122とを含むスライド投影機である。光変調装置122は、スライドを含むスライド型、液晶画面を含む液晶ディスプレイ(LCD)型、又はその他の構造光を生成する装置であってよく、以下、このような装置をスライド122という。投影機は、測定される物体111の表面110上に光円錐114中に構造光113としてスライド画像を投影するための、頂点124を有するレンズ181を更に含む。この実施形態及び他の実施形態によると、構造光113はまた、干渉光生成方法、モアレ光生成方法、及び回折光生成方法等の他の方法を使用して生成できる。
1つ又は複数の実施形態において、投影機106は、光学的波長、可視波長、及び赤外波長のうちの1つから選択される波長で構造光を投影する。1つ又は複数の実施形態において、投影機106はフラッシュライトを備える。1つ又は複数の実施形態において、投影機106は連続光源である。
光学ユニット102は、物体111の表面110に作用する構造光113の画像を取り込むためのカメラ108又は他の画像検出装置を含む。1つ又は複数の実施形態において、カメラ108は、頂点130を有するレンズ180と、マトリックスラジエーション受像装置(matrix radiation receiver)128と、カメラ駆動装置132とを含む。レンズ180は、マトリックスラジエーション受像装置128の表面上に画像を形成する。カメラ駆動装置132は、マトリックスラジエーション受像装置128の動作を制御する電子信号の管理及び処理のユニットとして機能し、取り込み画像がカメラ出力134に転送される前に、所望なように又は必要に応じて、受像装置128によって取り込まれた画像を他のフォーマット(例えば、VGA、bmp、jpeg等)に変換できる。カメラ108は、物体111の表面110の一部分を包含する視野118を有する。投影機106は中心投影機光学軸112を有し、カメラ108は中心カメラ光学軸116を有しており、それによって三角測量角120は投影機光学軸112とカメラ光学軸116との交点でそれらに挟まれてなす角であるようになっている。
演算装置104は、限定されないが、物体111の表面110の3D形状、物体111までの距離、及び取り込まれる表面110の向き等の所望の計算を行うために、カメラ出力134から受像する取り込み画像を解析する。演算装置104はまた、投影機106及びカメラ108、並びにそれらに含まれる様々な構成要素を制御できる。
ここで図2の幾何学的配置図を参照すると、1つ又は複数の実施形態について、光学ユニット100の機能が更に詳細に説明されよう。1つ又は複数の実施形態において、投影機106の投影レンズ181の入射瞳及び射出瞳の中心124は投影構造光113の頂点であり、一方、1つ又は複数の実施形態において、カメラ108のレンズ180の入射瞳及び射出瞳の中心130はカメラ視野118の頂点である。
三角測量法の使用によって、スライド122内の複数の点が物体111の表面110上に投影され、次いで、カメラ108によって取り込まれる取り込み画像内のそれぞれの点に1対1でマップされる。取り込み画像内の各点の位置は、物体111の表面110までの距離、並びに、光学ユニット102に対する表面110の形状及び向き等の様々な要因に依存する。測定される表面110の形状及び位置を再構築するために、当業者に知られている三角測量技術を使用して、取り込み画像の各点がスライド122内のそれぞれの点と関連付けられ、次いで、点の座標から表面110の形状、位置、及び向きのうちの1つ以上が導かれる。図2は、スライド122上及び受像装置128での取り込み画像上での対応する点に基づいて、特定の点で表面110の形状を計算する1つの可能な方法を例示する。
ここで図3を参照すると、物体111の表面110の形状を求めるために投影画像及び取り込み画像がどのように使用されるかを表わす透視図の例示が提供される。線パターン162を有するスライド122は、光源126からの投影光の振幅変調を行って、物体111の表面110上に投影機106から構造光113としてパターンを投影する。次いで、線パターン186が表面110上に現れる。カメラ108は、結果として得られる、表面110に作用する構造光113の対応する取り込み画像140を記録する。この例において、表面110の形状を計算する複雑さは、取り込み画像140内のパターン内の線185とスライド122内のパターン内の線162との間の対応を識別する複雑さにある。すべての線が同様の外観を有し、スライド122内のどの線162が、取り込み画像140内の特定の線185を生成したかを見分けることが困難であるため、画像140とスライド122における線間の適切な対応を求めることが困難なことがある。更に、物体11の形状がより複雑になるほど、より高い頻度で線が壊れ、スライド122と取り込み画像140との間の対応を見つけるタスクはより複雑になる。
取り込み画像140の点とスライド122の点との間の対応を探査するタスクを簡素化するために、投影光113は取り込み画像140において識別できる区別可能な要素の集まりを表わすように構造化できる。この異成分の取り込み画像140への導入は、「符号化」と呼ばれる。図4Aから図4Cは、物体111の表面110上に投影できる符号化された構造光113の幾つかの代表例を表わす。
符号化の存在にもかかわらず、特に、物体の表面110と、投影機106と、カメラ108との間の距離の有限性によって生じる遠近感歪みの存在によって、カメラ108によって取り込まれる画像内の構造光の要素を識別するタスクは、依然として複雑である。遠近感歪みは、構造光113の取り込み画像140を2つの方向に変形させ、取り込み画像140の各点における表面110の形状に依存する。結果的に、投影構造光113の各要素は、予測外に、取り込み画像140においてシフトし、回転し、その形状をねじる場合があり、したがって、可能性のある歪み(回転、形状の歪み)のすべてを考慮して、その識別には取り込み画像140内の2次元探査が必要である。このような探査に伴う複雑さはしばしば、取り込み画像140内の構造光要素の検出における頻繁なエラーをもたらし、その結果、物体の表面110の形状の測定エラーとなる。探査タスクはまた、レジストレーション時間を延長するか、又はより強力な、したがって、より大きく、より高価な、コンピュータのシステム、すなわち演算装置104を必要とするリソース集中型探査アルゴリズムを必要とする。
1つ又は複数の実施形態において、システム100は、構造光113が歪められる場合のある方向の数を1つの既知の方向に制限すること、その方向において構造光113の符号シーケンスを構成すること、及び特別な構造光符号化方法を使用することによって、カメラ108によって取り込まれる画像140内の構造光113の要素を検出するタスクを簡素化し、それによって、より効果的且つ効率的な3D画像化を達成する。
アフィンエピポーラ幾何学によると、物体又は場面の形状にかかわらず、2つのカメラが同じ物体又は場面を見ているとき、一方のカメラの画像内の各点を通る直線を引くことができ、その線に対応する物体又は場面の全ての点は、他方のカメラの画像内の直線に沿って存在している。この原則が、有形物の3D形状を求めるための構造光による三角測量を使用する表面形状走査に適用できる。
1つ又は複数の実施形態において、有形物の形状の3D測定のためのシステム100及び関連する方法は、投影機106及びカメラ108の互いに関する位置にかかわらず、スライド122の各点を通る直線187を引くことができ、それによって、取り込まれる表面110の形状にかかわらず、構造光113内の投影パターンが物体111の表面110上に投影されるとき、カメラ108によって取り込まれる画像140内に対応する直線188が存在するという仮定を用いる。このような線187と線188との何れの組も1対1の対応を形成し、図5に例として示されるように、以下、このような線は「経線(meridian)」、特に、カメラ108によって取り込まれる画像については「カメラ経線188」、投影機106からの投影構造光113については「投影機経線187」という。1つの実施形態において、投影機経線187及びカメラ経線188は、スライド122及びマトリックスラジエーション受像装置128の表面上に表われる代表的な線であるが、実際には、それらは、物体111上に投影され、カメラ108によって取り込まれるパターンの部分ではない。
1つ又は複数の実施形態において、図6に例示されるように、物体111の表面110上に投影レンズ181から構造光113を投影することによって経線187の位置が求められ、投影機経線187の各々は、表面110に投影機106から投影される構造光113の頂点124から伸びる平面125内に存在することとなる。マトリックスラジエーション受像装置128内のカメラ経線188の各々も、物体111の空間内でカメラ108のカメラ視野118の頂点130からも伸びる平面125のそれぞれ1つの内に存在することとなる。物体111の空間内の同じ平面125に存在する投影機経線187及びカメラ経線188は対応する組を形成する。
このように、投影機経線187と、カメラ経線188と、頂点124及び130から伸びる平面125との間には、直接、相互関係がある。平面125は、物体111の空間内の投影機経線187及びカメラ経線188の光跡に類似しているとみなせる。言い換えると、投影機経線187及びカメラ経線188は、投影機レンズ180及びカメラレンズ181によって作られる、スライド122及びマトリックスラジエーション受像装置128の表面上の平面125の画像とみなせる。
投影機106と、カメラ108と、物体111との間の向きはいくつも可能であるが、投影機106及びカメラ108の位置付けに関連して、投影機経線187とカメラ経線188との間の関係を例示するために、ここで幾つかの例示的な位置付けの配置が説明することにする。
図7を参照すると、1つ又は複数の実施形態において、投影機106から投影される構造光113の頂点124をカメラ108の視野118の頂点130に結ぶ線150は、投影機光学軸112に垂直である。この実施形態において、投影機経線187は厳密に平行であり、この実施形態に対応する投影機経線187及びカメラ経線188の例示が、図8に示される。
図9を参照すると、1つ又は複数の実施形態において、投影機106から投影される構造光113の頂点124をカメラ108の視野118の頂点130に結ぶ線152は、カメラ光学軸116に垂直である。この実施形態において、カメラ経線187は厳密に平行であり、この実施形態に対応する投影機経線187及びカメラ経線188の例示が、図10に示される。
図11を参照すると、1つ又は複数の実施形態において、投影機106の中心投影113の頂点124をカメラ108の中心投影118の頂点130に結ぶ線154は、投影機光学軸112及びカメラ光学軸116の何れにも垂直ではない。この実施形態において、図12に例示されるように、投影機経線187及びカメラ経線188は何れも厳密に平行である必要がない。
1つ又は複数の実施形態において、投影機106によって投影される構造光113は、取り込み画像内で可能な方向及び歪みの数を制限するように構成でき、それによって、取り込み画像内の構造光要素を識別するタスクを簡素化し、ある場合には、表面形状計算アルゴリズムの完全な線形化を達成する。1つの実施形態において、可能な方向及び歪みの数は、経線の中の1つに制限される。
1つ又は複数の実施形態において、スライド122は、構造光113が、投影機106及びカメラ108の頂点124及び130を通る平面125内に存在する少なくとも2つの符号化要素を含んで形成されるように選択される。1つ又は複数の実施形態において、構造光113は、複数の異なる符号化要素の集合を含むパターンとして、各符号化要素の集合内の符号化要素の全てが、投影機106及びカメラ108の頂点124、130を通る同じ該当する平面125内に存在するように形成できる。異なる符号化要素の集合は異なる平面125内に存在する。1つ又は複数の実施形態において、このような符号化要素は、異なる形状、形、及び長さのうちの1つ以上を有する区域毎に表わされる。たとえば、図13に示される例示的実施形態を参照すると、構造光113は、異なる太さの区域毎に表わされる2つの符号化要素164及び165を含む構造160として形成される。符号化要素は、各線162内のそれらのシーケンスが異なる長さの異なる太さを有する実線を形成するように、複数の平行な線162に沿って1つずつ配置される。同時に、全ての符号化要素は、線162と共同してグリッドを形成する複数の平行な経線187上に存在する。このような手段で、各経線187に沿った、異なる太さの符号化区域164及び165のシーケンスを含む集合は、他の隣接する経線187内の符号化区域164及び165のシーケンスに対して特異なシーケンスを形成することとなる。パターンの他の型が、構造光113内に符号化要素、すなわち符号化区域164及び165を生成するために生成できることは理解されよう。
図13のこのような光構造160を使用して、代表的な平面物体(図14)及び非平面物体(図15)に対しての図7の投影機106とカメラ108との相関的位置付けに基づくカメラ108によって記録された代表的な取り込み画像140の部分を、図14及び図15に例示する。これらの図から、符号化要素164及び165の集合が、スライド122内の該当する投影機経線187上に各々存在し、また、画像140内の該当するカメラ経線188と共に存在することになることがわかる(これらの図において、投影機経線187及びカメラ経線188は垂直線として例示される)。解析される物体111の表面110の特定の形状によって、画像140内の符号化要素164及び165は、カメラ経線188の長さに沿った方向にのみに移動させられることとなる。そのとき、スライド122内の符号化要素164及び165のそれぞれの位置に関して、また、同じか又は異なるカメラ経線188に沿った同じ符号化要素164又は165の同じ集合内の他の符号化要素164及び165の移動及び位置のうちの一方又は双方に関して、カメラ経線188に沿った符号化要素164の移動及び位置のうちの一方又は双方を解析することによって、表面110の所望の3D測定を行うことができる。
構造160は、ここに説明される何れの実施形態にも使用可能である。特定の実施形態に使用するために、構造160は、それを拡大縮小、シフト、又はそうでなければ変更することによって、スライド122の範囲に適合させることが望ましい。加えて、構造160は、構造160の符号化要素164及び165の集合が特定の実施形態のために選ばれた経線と一致するように、必要に応じて変形できる。
演算システム104は、本発明による有形物の形状の3D測定ための方法を実施するのに適した汎用のコンピュータシステムより構成されてよい。演算システム104は、適切な演算環境の1つの例に過ぎず、本発明の使用又は機能の範囲に関していかなる限定を示唆しようとするものではない。様々な実施形態において、有形物の形状の3D測定のための本システム及び方法は、多数の他の汎用又は特殊用途の演算システム環境又は構成によって操作可能である。本発明で使用するために適するであろうよく知られた演算システム、環境、及び構成うちの1つ以上の例としては、限定されないが、パソコン、サーバーコンピュータ、手持ちサイズ型すなわちノート型デバイス、マルチプロセッサシステム、マイクロプロセッサをベースとするシステム、プログラマブル家庭用電化製品、ネットワークパソコン、ミニコン、メインフレームコンピュータ、上記のシステム又はデバイスの何れかを含む分散コンピューティング環境等がある。
様々な実施形態において、有形物の形状の3D測定のための三角測量アルゴリズム及び方法は、プログラムモジュール等の、コンピュータによって実行されるコンピュータ実行可能命令の一般的な内容で説明できる。一般に、プログラムモジュールは、特定のタスクを実行するか、又は特定の抽象データ型を実装するルーチン、プログラム、オブジェクト、コンポーネント、データ構造等を含む。これらのアルゴリズム及び方法はまた、通信ネットワークを介してリンクされる遠隔処理装置によってタスクが実行される分散コンピューティング環境において実施できる。分散コンピューティング環境において、プログラムモジュールは、メモリ記憶装置を含むローカル及びリモートコンピュータ記憶媒体の両方に置くことができる。1つの実施形態において、演算システム104は、1つ又は複数のコンピュータプログラムを実行することによって物体の3D形状測定を実施する。コンピュータプログラムはメモリ及びROMのうちの一方又は双方等のメモリメディア若しくは記憶媒体内に格納されるか、又はそれらはネットワーク接続若しくは他のI/O接続を介してCPUに提供される。
ここに説明される本実施形態によって形成されるシステム及び方法は、非接触構造光三角測量を使用する有形物の形状の3D測定を提供する。このようなシステム及び方法は、1つの座標系内で、その系を参照して、複雑な形状の有形物の表面上に投影される点群(すなわち、光構造)の座標を迅速且つ正確に測定することができる。これらの教示は、物体の表面形状、表面までの距離、又は空間的な向きに関する正確なデータを必要とする科学及び工学的問題の全体に亘って適応できる。本システム及び方法は、限定されないが、デジタルイメージング、部分形状の制御、コンピュータアニメーション、文化的、歴史的、又は科学的価値のある物体の形状の取り込み、形状認識、局所解剖学、マシンビジョン、医療処置、装置及びロボットの特別なポジショニング等、多くの分野において有用な用途を有する。

Claims (18)

  1. 有形の物体の形状の3D測定のためのシステムであって、
    前記物体の表面上に構造光パターンを投影するための光投影機であって、光源と、スライド表面に位置するスライド・パターンを有するスライドと、投影機レンズ頂点を有する投影機レンズとを含む前記光投影機と、
    前記物体に反射した前記構造光パターンの画像を取り込むための装置であって、装置レンズ頂点を有する装置レンズを含む前記装置と、
    前記スライド・パターンにおける点と前記画像における点との間の対応に基づいて、三角測量アルゴリズムを使用して、前記物体の形状に関する測定値を求めるための演算装置と
    を備え、
    前記スライド・パターンは複数の符号化要素を含み、該符号化要素の各々は、前記構造光の振幅又は波長の空間的又は時間的分布を定め、
    前記符号化要素は少なくとも第1集合又は第2集合の1つに割り当てられ、該第1集合及び第2集合の各々は、前記符号化要素のうちの少なくとも2つを含み、
    前記スライド表面に少なくとも第1の線及び第2の線が定められ、前記第1の線は、前記スライド表面と、前記投影機レンズ頂点及び前記装置レンズ頂点を通過する第1平面との交わりにより定められ、前記第2の線は、前記スライド表面と、前記投影機レンズ頂点及び前記装置レンズ頂点を通過する第2平面との交わりにより定められ、
    前記第1集合の符号化要素は前記第1の線に沿って位置し、前記第2集合の符号化要素は前記第2の線に沿って位置する、有形の物体の形状の3D測定のためのシステム。
  2. 前記物体の表面に少なくとも第3の線及び第4の線が定められ、前記第3の線は、前記物体の表面と前記第1平面との交わりにより定められ、前記第4の線は、前記物体の表面と前記第2平面との交わりにより定められる、請求項1に記載のシステム。
  3. 前記光投影機は中心光学軸を更に有し、更に、前記光投影機及び画像を取り込むための前記装置は、前記投影機レンズ頂点と前記装置レンズ頂点との間に伸びる線が前記光投影機の前記中心光学軸に垂直であるように配置された、請求項1に記載のシステム。
  4. 画像を取り込むための前記装置は中心光学軸を有し、更に、前記光投影機及び画像を取り込むための前記装置は、前記投影機レンズ頂点と前記装置レンズ頂点との間に伸びる線が画像を取り込むための前記装置の前記中心光学軸に垂直であるように配置された、請求項1に記載のシステム。
  5. 前記光投影機は投影機中心光学軸を有し、画像を取り込むための前記装置は装置中心光学軸を有し、更に、前記光投影機及び画像を取り込むための前記装置は、前記投影機レンズ頂点と前記装置レンズ頂点と間に伸びる線が、前記投影機中心光学軸及び装置中心光学軸の何れにも垂直ではないように配置された、請求項1に記載のシステム。
  6. 前記光投影機は、光学的波長、可視波長、及び赤外波長から選択された波長で構造光を投影する、請求項1に記載のシステム。
  7. 前記光投影機はフラッシュライトの光源である、請求項1に記載のシステム。
  8. 前記構造光パターンは変更可能に一体に集合化できる複数の符号化要素を含み、よって、各集合内の前記符号化要素の全てが、符号化要素の隣接する集合内の符号化要素のシーケンスに対して一意なシーケンスを形成する、請求項1に記載のシステム。
  9. 前記演算装置は前記物体の表面の3次元形状を求める、請求項1に記載のシステム。
  10. 光投影機から物体の表面上に構造光パターンを投影するステップであって、前記光投影機は、光源と、スライド表面に位置するスライド・パターンを有するスライドと、投影機レンズ頂点を有する投影機レンズとを含む、ステップと、
    画像を取り込むための装置で前記物体の前記表面に反射した前記構造光パターンの画像を取り込むステップであって、画像を取り込むための前記装置は装置レンズ頂点を有する装置レンズを含む、ステップと、
    前記スライド・パターンにおける点と前記画像における点との間の対応に基づいて、三角測量アルゴリズムを使用して、前記物体の前記表面に関する測定値を求めるステップと
    を含み、
    前記スライド・パターンは複数の符号化要素を含み、該符号化要素の各々は、前記構造光の振幅又は波長の空間的又は時間的分布を定め、
    前記符号化要素は少なくとも第1集合又は第2集合の1つに割り当てられ、該第1集合及び第2集合の各々は、前記符号化要素のうちの少なくとも2つを含み、
    前記スライド表面に少なくとも第1の線及び第2の線が定められ、前記第1の線は、前記スライド表面と、前記投影機レンズ頂点及び前記装置レンズ頂点を通過する第1平面との交わりにより定められ、前記第2の線は、前記スライド表面と、前記投影機レンズ頂点及び前記装置レンズ頂点を通過する第2平面との交わりにより定められ、
    前記第1集合の符号化要素は前記第1の線に沿って位置し、前記第2集合の符号化要素は前記第2の線に沿って位置する、有形の物体の形状の3D測定のための方法。
  11. 前記物体の表面に少なくとも第3の線及び第4の線が定められ、前記第3の線は、前記物体の表面と前記第1平面との交わりにより定められ、前記第4の線は、前記物体の表面と前記第2平面との交わりにより定められる、請求項10に記載の方法。
  12. 前記光投影機は中心光学軸を更に有し、前記方法は、前記投影機レンズ頂点と前記装置レンズ頂点との間に伸びる線が前記光投影機の前記中心光学軸に垂直であるように前記光投影機及び画像を取り込むための前記装置を配置するステップを更に含む、請求項10に記載の方法。
  13. 画像を取り込むための前記装置は中心光学軸を有し、前記方法は、前記投影機レンズ頂点と前記装置レンズ頂点と間に伸びる線が画像を取り込むための前記装置の前記中心光学軸に垂直であるように前記光投影機及び画像を取り込むための前記装置を配置するステップを更に含む、請求項10に記載の方法。
  14. 前記光投影機は投影機中心光学軸を有し、画像を取り込むための前記装置は装置中心光学軸を有し、前記方法は、前記投影機レンズ頂点と前記装置レンズ頂点と間に伸びる線が前記投影機中心光学軸及び前記装置中心光学軸の何れにも垂直ではないように前記光投影機及び画像を取り込むための前記装置を配置するステップを更に含む、請求項10に記載の方法。
  15. 光学的波長、可視波長、及び赤外波長から選択される波長で構造光を投影するステップを更に含む請求項10に記載の方法。
  16. フラッシュライトの光源から前記構造光を投影するステップを更に含む請求項10に記載の方法。
  17. 前記構造光パターンは変更可能に一体に集合化できる複数の符号化要素を含み、よって、各集合内の前記符号化要素の全てが、符号化要素の隣接する集合内の符号化要素のシーケンスに対して一意なシーケンスを形成する、請求項10に記載の方法。
  18. 前記物体の表面の3次元形状を求めるステップを更に含む請求項10に記載の方法。
JP2010523096A 2007-08-28 2008-08-26 有形物の形状の3次元測定のためのシステム及び方法 Active JP5643645B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/846,494 US7768656B2 (en) 2007-08-28 2007-08-28 System and method for three-dimensional measurement of the shape of material objects
US11/846,494 2007-08-28
PCT/US2008/074354 WO2009032641A1 (en) 2007-08-28 2008-08-26 System and method for three-dimensional measurement of the shape of material objects

Publications (2)

Publication Number Publication Date
JP2010538269A JP2010538269A (ja) 2010-12-09
JP5643645B2 true JP5643645B2 (ja) 2014-12-17

Family

ID=40406938

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010523096A Active JP5643645B2 (ja) 2007-08-28 2008-08-26 有形物の形状の3次元測定のためのシステム及び方法

Country Status (13)

Country Link
US (1) US7768656B2 (ja)
EP (1) EP2188589B1 (ja)
JP (1) JP5643645B2 (ja)
KR (1) KR101601331B1 (ja)
CN (1) CN101821580B (ja)
AU (1) AU2008296518B2 (ja)
DK (1) DK2188589T3 (ja)
ES (1) ES2801395T3 (ja)
HU (1) HUE049584T2 (ja)
MX (1) MX2010002346A (ja)
PL (1) PL2188589T3 (ja)
RU (1) RU2521725C2 (ja)
WO (1) WO2009032641A1 (ja)

Families Citing this family (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008062407A2 (en) 2006-11-21 2008-05-29 Mantisvision Ltd. 3d geometric modeling and 3d video content creation
US8090194B2 (en) 2006-11-21 2012-01-03 Mantis Vision Ltd. 3D geometric modeling and motion capture using both single and dual imaging
CA2606267A1 (fr) * 2007-10-11 2009-04-11 Hydro-Quebec Systeme et methode de cartographie tridimensionnelle d'une surface structurelle
FR2925706B1 (fr) * 2007-12-19 2010-01-15 Soc Tech Michelin Dispositif d'evaluation de la surface d'un pneumatique.
WO2010006081A1 (en) 2008-07-08 2010-01-14 Chiaro Technologies, Inc. Multiple channel locating
US8294762B2 (en) * 2008-10-10 2012-10-23 Fujifilm Corporation Three-dimensional shape measurement photographing apparatus, method, and program
US8339616B2 (en) * 2009-03-31 2012-12-25 Micrometric Vision Technologies Method and apparatus for high-speed unconstrained three-dimensional digitalization
FR2950140B1 (fr) 2009-09-15 2011-10-21 Noomeo Procede de numerisation tridimensionnelle comprenant une double mise en correspondance
FR2950157A1 (fr) * 2009-09-15 2011-03-18 Noomeo Procede de numerisation tridimensionnelle d'une surface comprenant laprojection d'un motif combine
JP5631025B2 (ja) * 2010-03-10 2014-11-26 キヤノン株式会社 情報処理装置、その処理方法及びプログラム
US8649025B2 (en) 2010-03-27 2014-02-11 Micrometric Vision Technologies Methods and apparatus for real-time digitization of three-dimensional scenes
US8467992B1 (en) 2010-09-15 2013-06-18 The Boeing Company Vision based location and measurement device and methods
KR101188357B1 (ko) * 2011-04-21 2012-10-08 정제교 기설정 배율각을 가진 다중투사광의 2차원 영상획득을 통한 3차원 인식 방법
JP6170281B2 (ja) * 2011-05-10 2017-07-26 キヤノン株式会社 三次元計測装置、三次元計測装置の制御方法、およびプログラム
WO2012168904A2 (en) 2011-06-07 2012-12-13 Creaform Inc. Sensor positioning for 3d scanning
JP6061631B2 (ja) * 2011-07-11 2017-01-18 キヤノン株式会社 計測装置、情報処理装置、計測方法、情報処理方法、および、プログラム
KR101268515B1 (ko) * 2011-07-22 2013-06-04 경북대학교 산학협력단 3차원 스캔 장치 및 3차원 형상 복원 방법
CN102506704B (zh) * 2011-10-14 2013-12-25 天津大学 一种压缩弹簧几何参数在线测量方法
JP6023415B2 (ja) * 2011-10-17 2016-11-09 キヤノン株式会社 三次元計測装置、三次元計測装置の制御方法およびプログラム
JP5635218B1 (ja) 2011-11-23 2014-12-03 クレアフォーム・インコーポレイテッドCreaform Inc. 空間コード化スライド画像に対するパターンのアライメント方法およびシステム
US9448064B2 (en) * 2012-05-24 2016-09-20 Qualcomm Incorporated Reception of affine-invariant spatial mask for active depth sensing
WO2014000738A2 (de) * 2012-06-29 2014-01-03 Inb Vision Ag Verfahren zur bilderfassung einer vorzugsweise strukturierten oberfläche eines objekts und vorrichtung zur bilderfassung
JP6429772B2 (ja) 2012-07-04 2018-11-28 クレアフォーム・インコーポレイテッドCreaform Inc. 3d走査および位置決めシステム
US8937657B2 (en) * 2012-07-15 2015-01-20 Erik Klass Portable three-dimensional metrology with data displayed on the measured surface
JP6267700B2 (ja) 2012-07-18 2018-01-24 クレアフォーム・インコーポレイテッドCreaform Inc. 3d走査および位置決めのインターフェース
JP6270157B2 (ja) 2012-07-30 2018-01-31 国立研究開発法人産業技術総合研究所 画像処理システムおよび画像処理方法
KR102070428B1 (ko) 2012-08-30 2020-01-28 삼성전자주식회사 물체의 형상 정보를 생성하는 방법 및 그 장치
TR201811449T4 (tr) * 2012-11-07 2018-09-21 Artec Europe S A R L Üç boyutlu nesnelerin doğrusal boyutlarını gözetlemek için yöntem.
US20140152771A1 (en) * 2012-12-01 2014-06-05 Og Technologies, Inc. Method and apparatus of profile measurement
US20140152769A1 (en) * 2012-12-05 2014-06-05 Paul Atwell Three-dimensional scanner and method of operation
DE102012222505B4 (de) 2012-12-07 2017-11-09 Michael Gilge Verfahren zum Erfassen dreidimensionaler Daten eines zu vermessenden Objekts, Verwendung eines derartigen Verfahrens zur Gesichtserkennung und Vorrichtung zur Durchführung eines derartigen Verfahrens
US9049369B2 (en) 2013-07-10 2015-06-02 Christie Digital Systems Usa, Inc. Apparatus, system and method for projecting images onto predefined portions of objects
US9047514B2 (en) 2013-07-10 2015-06-02 Christie Digital Systems Usa, Inc. Apparatus, system and method for projecting images onto predefined portions of objects
EP3022524B1 (en) * 2013-07-16 2018-12-12 Polyrix Inc. Inspection system for inspecting an object and inspection method for same
US9562760B2 (en) 2014-03-10 2017-02-07 Cognex Corporation Spatially self-similar patterned illumination for depth imaging
US20150279121A1 (en) 2014-03-27 2015-10-01 Knockout Concepts, Llc Active Point Cloud Modeling
CN103955064A (zh) * 2014-04-17 2014-07-30 长沙中科院文化创意与科技产业研究院 一种投射多光点图像的装置及方法
WO2016024200A2 (en) * 2014-08-12 2016-02-18 Mantisvision Ltd. Structured light projection and imaging
US10571668B2 (en) 2015-05-09 2020-02-25 Cognex Corporation Catadioptric projector systems, devices, and methods
CN105043253B (zh) * 2015-06-18 2018-06-05 中国计量大学 基于面结构光技术货车侧防护栏安装尺寸测量系统及方法
RU2629541C2 (ru) * 2015-11-09 2017-08-29 АРТЕК ЮРОП С.а.р.Л. Бесконтактное биометрическое устройство идентификации пользователя по чертам лица
US11057608B2 (en) * 2016-01-04 2021-07-06 Qualcomm Incorporated Depth map generation in structured light system
DE102016002398B4 (de) 2016-02-26 2019-04-25 Gerd Häusler Optischer 3D-Sensor zur schnellen und dichten Formerfassung
DE102016113228A1 (de) * 2016-07-18 2018-01-18 Ensenso GmbH System mit Kamera, Projektor und Auswerteeinrichtung
WO2018213872A1 (en) 2017-05-22 2018-11-29 The Bionics Institute Of Australia "systems and methods for monitoring neural activity"
EP3496806B1 (en) 2016-08-08 2022-07-06 Deep Brain Stimulation Technologies Pty. Ltd. Systems and methods for monitoring neural activity
EP3315902B1 (de) 2016-10-27 2023-09-06 Pepperl+Fuchs SE Messvorrichtung und verfahren zur triangulationsmessung
LU100021B1 (en) 2017-01-13 2018-07-30 Adapttech Ltd Socket fitting system
US10122997B1 (en) 2017-05-03 2018-11-06 Lowe's Companies, Inc. Automated matrix photo framing using range camera input
US10699429B2 (en) 2017-08-19 2020-06-30 Cognex Corporation Coding distance topologies for structured light patterns for 3D reconstruction
CN109635619B (zh) 2017-08-19 2021-08-31 康耐视公司 用于三维重建的结构化光图案的编码距离拓扑
CN108627119B (zh) * 2018-05-15 2020-09-25 佛山市南海区广工大数控装备协同创新研究院 一种基于线扫激光的板式家具轮廓尺寸检测方法
CN108776338B (zh) * 2018-06-19 2022-05-24 四川大学 信号源空间传感方法、装置及主动式传感系统
MX2021002767A (es) 2018-09-19 2021-05-31 Artec Europe S A R L Escaner tridimensional con retroalimentacion de recopilacion de datos.
US11995851B2 (en) * 2018-10-04 2024-05-28 Isak Du Preez Optical surface encoder
CN113474619A (zh) 2019-02-05 2021-10-01 阿泰克欧洲公司 使用可移动扫描仪生成纹理模型
CN111751838A (zh) * 2019-03-28 2020-10-09 上海小瞳智能科技有限公司 一种微型固态激光雷达及其数据处理方法
US20220230335A1 (en) * 2021-01-20 2022-07-21 Nicolae Paul Teodorescu One-shot high-accuracy geometric modeling of three-dimensional scenes
CN114413787B (zh) * 2022-01-21 2024-04-19 西安知微传感技术有限公司 基于结构光的三维测量方法及大景深三维深度相机系统

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4648717A (en) * 1984-02-06 1987-03-10 Robotic Vision Systems, Inc. Method of three-dimensional measurement with few projected patterns
JPH02110305A (ja) * 1988-10-19 1990-04-23 Mitsubishi Electric Corp 3次元計測装置
DE4007500A1 (de) * 1990-03-09 1991-09-12 Zeiss Carl Fa Verfahren und vorrichtung zur beruehrungslosen vermessung von objektoberflaechen
JPH0498106A (ja) * 1990-08-16 1992-03-30 Nippon Telegr & Teleph Corp <Ntt> 3次元形状計測方法
DE19638758A1 (de) * 1996-09-13 1998-03-19 Rubbert Ruedger Verfahren und Vorrichtung zur dreidimensionalen Vermessung von Objekten
DE19821611A1 (de) * 1998-05-14 1999-11-18 Syrinx Med Tech Gmbh Verfahren zur Erfassung der räumlichen Struktur einer dreidimensionalen Oberfläche
US6751344B1 (en) * 1999-05-28 2004-06-15 Champion Orthotic Investments, Inc. Enhanced projector system for machine vision
DE19963333A1 (de) * 1999-12-27 2001-07-12 Siemens Ag Verfahren zur Ermittlung von dreidimensionalen Oberflächenkoordinaten
JP2003527582A (ja) * 2000-01-07 2003-09-16 サイバーオプティクス コーポレーション テレセントリック・プロジェクタを有する位相プロフィル測定システム
US6937348B2 (en) * 2000-01-28 2005-08-30 Genex Technologies, Inc. Method and apparatus for generating structural pattern illumination
JP3553451B2 (ja) * 2000-02-18 2004-08-11 独立行政法人 科学技術振興機構 光干渉断層像観測装置
CA2306515A1 (en) * 2000-04-25 2001-10-25 Inspeck Inc. Internet stereo vision, 3d digitizing, and motion capture camera
JP2001356010A (ja) * 2000-06-12 2001-12-26 Asahi Hightech Kk 三次元形状測定装置
US7625335B2 (en) * 2000-08-25 2009-12-01 3Shape Aps Method and apparatus for three-dimensional optical scanning of interior surfaces
JP3519698B2 (ja) * 2001-04-20 2004-04-19 照明 與語 3次元形状測定方法
JP2003057191A (ja) 2001-08-20 2003-02-26 Ricoh Co Ltd 円筒状被検物形状測定装置及び該円筒状被検物形状測定装置の調整方法と信号処理方法
AU2002308896A1 (en) 2002-03-18 2003-09-29 A4 Vision Sa Device for contactless inspection of linear dimensions of three-dimensional objects
US7212663B2 (en) * 2002-06-19 2007-05-01 Canesta, Inc. Coded-array technique for obtaining depth and other position information of an observed object
JP2004077290A (ja) * 2002-08-19 2004-03-11 Fuji Xerox Co Ltd 3次元形状計測装置および方法
US7286246B2 (en) * 2003-03-31 2007-10-23 Mitutoyo Corporation Method and apparatus for non-contact three-dimensional surface measurement
JP4391137B2 (ja) * 2003-06-10 2009-12-24 Jfeテクノリサーチ株式会社 3次元曲面形状の測定装置及び測定方法
JP3792679B2 (ja) * 2003-06-23 2006-07-05 Necビューテクノロジー株式会社 投射面距離測定装置を有するプロジェクタ
JP4480488B2 (ja) * 2003-08-28 2010-06-16 富士通株式会社 計測装置、コンピュータ数値制御装置及びプログラム
US7330577B2 (en) * 2004-01-27 2008-02-12 Densys Ltd. Three-dimensional modeling of the oral cavity by projecting a two-dimensional array of random patterns
US7525669B1 (en) * 2004-07-09 2009-04-28 Mohsen Abdollahi High-speed, scanning phase-shifting profilometry using 2D CMOS sensor
DE102005018656B4 (de) * 2005-04-21 2007-04-12 GOM - Gesellschaft für Optische Meßtechnik mbH Projektor für eine Anordnung zum dreidimensionalen optischen Vermessen von Objekten
JP4577126B2 (ja) * 2005-07-08 2010-11-10 オムロン株式会社 ステレオ対応づけのための投光パターンの生成装置及び生成方法
JP2009517634A (ja) * 2005-11-28 2009-04-30 3シェイプ アー/エス 符号化された構造光
JP4741943B2 (ja) 2005-12-13 2011-08-10 ルネサスエレクトロニクス株式会社 検査装置及び検査方法
JP2008275392A (ja) * 2007-04-26 2008-11-13 National Institute Of Advanced Industrial & Technology 3次元形状計測方法および装置

Also Published As

Publication number Publication date
CN101821580B (zh) 2016-11-16
RU2521725C2 (ru) 2014-07-10
KR101601331B1 (ko) 2016-03-08
PL2188589T3 (pl) 2020-11-16
WO2009032641A1 (en) 2009-03-12
KR20100087083A (ko) 2010-08-03
US7768656B2 (en) 2010-08-03
EP2188589A1 (en) 2010-05-26
US20090059241A1 (en) 2009-03-05
CN101821580A (zh) 2010-09-01
AU2008296518A1 (en) 2009-03-12
JP2010538269A (ja) 2010-12-09
RU2010111797A (ru) 2011-10-10
HUE049584T2 (hu) 2020-09-28
DK2188589T3 (da) 2020-06-15
MX2010002346A (es) 2010-08-04
EP2188589B1 (en) 2020-04-15
AU2008296518B2 (en) 2014-01-23
ES2801395T3 (es) 2021-01-11
EP2188589A4 (en) 2017-03-29

Similar Documents

Publication Publication Date Title
JP5643645B2 (ja) 有形物の形状の3次元測定のためのシステム及び方法
CN107532885B (zh) 光图案中的强度变化用于体积中的物体的深度绘制
US8488129B2 (en) Combined object capturing system and display device and associated method
US20120176478A1 (en) Forming range maps using periodic illumination patterns
US20120281087A1 (en) Three-dimensional scanner for hand-held phones
WO2014020823A1 (ja) 画像処理システムおよび画像処理方法
JP2015021862A (ja) 3次元計測装置及び3次元計測方法
Barone et al. Structured light stereo catadioptric scanner based on a spherical mirror
JP4382430B2 (ja) 頭部の三次元形状計測システム
JP2015206654A (ja) 情報処理装置、情報処理方法、プログラム
Drouin et al. Active 3D imaging systems
KR20090022486A (ko) 단일 카메라를 이용한 객체 정보 추정기 및 그 방법
Zhang et al. An efficient method for dynamic calibration and 3D reconstruction using homographic transformation
JP2005292027A (ja) 三次元形状計測・復元処理装置および方法
JP3781762B2 (ja) 三次元座標校正システム
Lee et al. System input–output theoretic three-dimensional measurement based on circular-shaped structured light patterns
JP6884393B2 (ja) 射影変換を用いて変形格子を長方形格子や正方形格子に変換して位相解析を行なう方法および装置
Hazra et al. Two Novel Methods for Multiple Kinect v2 Sensor Calibration
Wetzler et al. Low cost 3D Laser Scanning Unit with application to Face Recognition
Ospald Performance analysis for a structured light range-sensor
Miller III A system for three-dimensional shape estimation and texture extraction via structured light

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110823

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130201

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130426

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130501

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130508

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130801

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131212

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140311

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140318

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140411

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140418

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140502

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140611

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140819

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140909

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141031

R150 Certificate of patent or registration of utility model

Ref document number: 5643645

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250