JP2011221024A - 3次元運動特性の測定 - Google Patents

3次元運動特性の測定 Download PDF

Info

Publication number
JP2011221024A
JP2011221024A JP2011087260A JP2011087260A JP2011221024A JP 2011221024 A JP2011221024 A JP 2011221024A JP 2011087260 A JP2011087260 A JP 2011087260A JP 2011087260 A JP2011087260 A JP 2011087260A JP 2011221024 A JP2011221024 A JP 2011221024A
Authority
JP
Japan
Prior art keywords
image
light
depth map
dimensional
dimensional motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011087260A
Other languages
English (en)
Inventor
Acoeur Venkatesan Varun
ヴァルン・アクール・ヴェンカテサン
Bhagaria Venkatesh
ヴェンカテッシュ・バガリア
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of JP2011221024A publication Critical patent/JP2011221024A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01HMEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H9/00Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means
    • G01H9/002Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means for representing acoustic field distribution
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2509Color coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

【課題】所与の画像フレームレートについてより高速の運動を測定するのに有利に用いることができる3次元運動を測定するシステムおよび方法を提供すること。
【解決手段】物体(5)の3次元運動を測定するシステム(1)は、縞模様の線(11)の断面パターン(18)を有する少なくとも2つの異なる色の光(17)を、別個の時間間隔(TR、TG、TB)で物体(5)の表面(6)上へ投影するようになされた光投影手段(2)を含む。このシステム(1)は、露光時間(TE)中に物体の画像を取り込む画像取得手段(3)も含み、別個の時間間隔(TR、TG、TB)は、露光時間(TE)の期間内にある。このシステム(1)は、画像取得手段(3)の位置から見たときの物体(5)上の縞模様の線(21a〜c)の投影パターンに基づいて色ごとに異なる奥行きマップを得、各色の奥行きマップ上の対応する点を決定し、奥行きマップ上の対応する点の位置に基づいて物体の3次元運動特性を決定するように画像を処理するようになされた画像処理手段(4)をさらに含む。
【選択図】図1

Description

本発明は、物体の3次元運動の特性決定に関する。
従来、動いている物体、例えば振動物体の運動の動的測定は、動いている物体の連続画像を連続的な時間間隔で取り込むカメラベースシステムを用いて行われており、それにより運動特性は、連続的に取り込んだ画像フレーム中の物体の位置に基づいて決定されている。振動運動を測定する他の既知の技法は、歪みゲージおよびレーザドップラに基づく方法を使用することを含む。しかし、典型的には、そのような技法は、2次元運動の測定に適しており、したがって、機械部品および土木構造物の損傷および衝撃の解析にとって重要である振動の空間モードなどの3次元運動の測定に都合よく使用することができない。
詳細には、カメラベースシステムは、動いている物体の表面上の様々な点の変位を経時的に取り込む。しかし、これらシステムは、2つの連続画像フレームの取り込みの間の時間間隔の関数である使用されるカメラのフレームレートによって制限される。フレームレートが増加するにつれてカメラのコストが増加し、それによってフレームレートの実際的制限がもたらされる。システムが、動いている物体の速度に関して最大限界および最小限界を有するので、これにより、そのようなシステムによる高速運動の取り込みに支障がもたらされる。
本発明の目的は、所与の画像フレームレートについてより高速の運動を測定するのに有利に用いることができる3次元運動を測定するシステムおよび方法を提供することである。
上記目的は、請求項1に記載のシステム、および請求項9に記載の方法によって実現される。
本発明の根底にある概念は、画像取得手段(例えば、カメラ)の所与のフレームレートについて増加した速度で3次元運動を測定することである。これは、物体の表面上に複数の異なる色の光を投影することによってなされ、光の各色は、画像取得手段による画像取り込みの露光時間の期間内にある別個の時間間隔で投影される。このようにして、単一の画像フレーム中に、各色に対応する別個の画像に基づいて物体の運動を取り込むことが可能である。したがって、画像露光時間の期間内にある別個の時間間隔で投影される光の色数に基づいて、カメラのフレームレートは、効果的に増倍される。さらに、投影した光は、物体の表面に入射する縞模様の線の断面パターンを有するように構成される。画像取得手段の位置から見たときの物体上の投影した縞模様の線に基づいて、3次元奥行きマップが、色ごとに得られる。したがって、所与の一画像フレームに対して、画像露光時間の期間内にある別個の時間間隔で投影される光の色数に基づいて、複数の奥行きマップが得られる。各色の奥行きマップ上の点同士の間で対応が確立される。最後に、3次元運動が、これら奥行きマップ上の対応する点の位置に基づいて測定される。
一実施形態では、光投影手段は、赤色、緑色および青色から選択される異なる色の少なくとも2つの光源を備え、この光投影手段が、別個の時間間隔で光源をストロボする手段をさらに含む。赤色、緑色および青色などの2つ以上の原色の光を使用することにより、別個のストロボ間隔からなる期間全体において露出される画像の別個の色平面を形成することになる。このことは、露光時間中に物体の運動を正確に取り込むのに役立つ。
例示的な一実施形態では、断面パターンは、一連の平行な縞模様の線を含み、光投影手段は、この断面パターンを有するように投影される光のプロファイルを構成するための格子を含む。これにより、物体上の投影した線の構造化パターンを与え、この構造化パターンは、物体の動きと共に構造化したやり方で変形する。
一実施形態では、画像処理手段は、奥行きマップ上の対応する点の座標の差に基づいて3次元運動特性を決定するようになされている。
有利な一実施形態では、3次元運動は、3次元振動運動を含み、画像処理手段は、振動特性を運動特性として決定するようになされている。3次元振動の測定は、性能解析ならびに損傷および衝撃の解析のための複雑な構造または機械部品の寿命および健全性についての推定に不可欠である。
例示的な一実施形態では、画像処理手段は、振動数を含む振動特性を決定するようになされている。
一実施形態では、画像処理手段は、時間ラッピングアルゴリズム(time wrapping algorithm)を用いて振動特性を決定するようになされている。
例示的な一実施形態では、対応する問題を正確に解決するために、画像処理手段は、テンプレートマッチングアルゴリズムを用いて奥行きマップ上の対応する点を決定するようになされている。
添付図面に示した例示の実施形態を参照して、本発明を以下にさらに説明する。
本発明の一実施形態による物体の3次元運動を測定するシステムの概略図である。 投影した光の断面パターンの概略説明図である。 画像露光時間と異なる色の光の別個の投影間隔との間の関係を示すタイミング図である。 異なる光の色についてカメラによって取り込まれる投影線の例示的な図である。 異なる光の色についてカメラによって取り込まれる投影線の例示的な図である。 異なる光の色についてカメラによって取り込まれる投影線の例示的な図である。 本明細書中の一実施形態による画像のサンプル収集フェーズの例示的な図である。 正しいラッピング時間(correct wrapping time)でのクラスタデータサンプルの例示的な図である。 正しくないラッピング時間での散乱データサンプルの例示的な図である。 物体の3次元振動運動の振動数を計算する方法を説明する例示的な流れ図である。
本明細書に詳細に記載した本発明の実施形態は、比較的低いフレームレートを有するカメラなどの画像取得手段を用いた、より高速な運動測定に用いることができる物体の3次元(3D)運動を測定するシステムおよび方法を提供する。そのため、物体の高速画像は、別個の時間間隔で物体に複数の異なる色の光を投影し、ある露光時間で物体の画像を取り込むことによって取得され、その結果、露光時間の期間は、異なる色の投影光の別個の時間間隔を含むようになっている。上記技法は、本明細書では色平面スライシングと呼ばれる。色平面スライシングというこの技法を用いて、低フレームレート(したがって、低コスト)の色カメラが、露光時間中に取り込まれた単一の画像に重なる各色の複数の画像をとても小さい間隔で得ることが可能である。さらに、3Dの運動を測定するために、まず、物体の3D形状を決定し、色平面スライシング技法を連係して使用して、時間における物体の位置の3次元振動を決定する。
図1を参照すると、物体5の3D運動を測定するシステム1が示されている。システム1は、前述のように、別個の時間間隔で物体5上に異なる色の光を投影するようになされた光投影手段2を含む。「別個の時間間隔」により、様々な色を投影するための時間間隔は、それらの間で重複を有さないことが理解できる。好ましくは、使用される色は、互いに対して異なる色、すなわち、互いに共通する1つまたは複数の成分を有さない色を含む。この例では、三原色、すなわち赤色、緑色および青色の光が、光投影手段2で使用される。光投影手段2は、異なる色の別々の光源、または適切な色フィルタを備えた単一光源、例えば白色光源を含んでもよい。例示した実施形態では、光投影手段2は、3つの光源、すなわち赤色光源7、緑色光源8、および青色光源9を含む。各光源は、例えば、LED、レーザ、または他の任意のタイプの光源を含むことができ、それらは、点光源または面光源であり得る。
さらにより高速の運動に対しては、例えば赤色光、緑色光、青色光および紫外光を含む4つ以上の別個の光の色が、別個の時間間隔で物体上に投影されてもよい。したがって、本発明の技術的利点は、少なくとも2つの別個の色の光を投影することによって実現される。
物体上に投影される光ビーム17は、縞模様の線の断面パターンを有する。図2は、光ビーム17の断面II-IIを横切る物体5上に投影される光ビーム17の例示的な断面を示しており、光ビーム17は、一連の平行な縞模様の線11の断面パターン18を有する。これは、ビームプロファイルを前述の断面パターン18に形成する格子10を設けることによって実現される。格子10は、例えば、複数の平行な縦方向スリットを含んでもよく、例示した実施形態では、このスリットは、方向Y-Yに沿っている。代替として、光ビーム17は、縞模様の線の他の任意の構造断面パターンを有してもよく、この構造断面パターンは、曲線のパターンを含むこともできる。図1に戻って参照すると、したがって、光源7、8および9は、点光源であり得る。投影した光17の線11は、図示した例では、不規則または3次元の表面である物体5の表面上の離散したストリップに入射する。画像取得手段3、この例では色カメラ3は、表面5上の投影した線の画像を取り込む。カメラ3は、光投影手段2の位置および物体5の位置に対して三角形の位置から画像を取り込む。言い換えると、カメラ3は、光投影手段2、物体5およびカメラ3が一直線に並ばないように配置される。したがって、表面6上の任意のストリップについては、カメラ3によって見るときのストリップ上の形状を投影した線は、時間において一定のままとはならず、方向X-X、Y-YおよびZ-Zのいずれかに沿っての物体5の運動中にはっきりと変形することになる。異なるストロボ間隔中にカメラ3によって取り込まれる物体5の表面6上の投影した線の変形は、これら時間間隔で奥行きマップを得る基礎を形成し、この奥行きマップは、物体5の3D運動を測定するための基礎として用いられる。
ある露光時間中、光源7、8および9を別個の時間間隔でストロボして、赤色光、緑色光および青色光を物体に連続的に投影し、カメラ3は、この露光時間で画像を取り込む。赤色光、緑色光および青色光をストロボするための時間間隔と露光時間との間の関係は、図3に示す例示的なタイミング図12を用いて示される。本明細書では、トレース13は、カメラ露出のオン時間およびオフ時間を表し、トレース14、15および16は、赤色、緑色および青色のストロボのオン時間およびオフ時間をそれぞれ表す。カメラ露出のオン時間によって表される露光時間は、trefと呼ばれる時点で開始し、TEの期間に及ぶ。赤色光、緑色光および青色光は、時点trefからT1、T2およびT3の各遅れでストロボされる。赤色、緑色および青色のストロボのオン時間の時間間隔は、それぞれTR、TGおよびTBである。見て分かるように、オン時間の時間間隔TR、TGおよびTBは別個のものであり、すなわち、それらの間で重複を有さず、露光時間TEの期間内である。ストロボ間隔TR、TGおよびTBは、運動が測定されている物体の速度に基づいて調整および適合することができる。
図1に示す筋書きでは、赤色光源7が、ストロボされている。少し時間間隔をおいて、緑色光源8がストロボされ、続いて青色光源9がストロボされる。図4A、図4Bおよび図4Cは、カメラ3の位置から見たときの、赤色光源、緑色光源および青色光源それぞれのストロボ間隔中にカメラ3によって取り込まれる物体5上の縞模様の線21a、21bおよび21cの投影パターンを示す。露光時間中の物体の運動により、投影した縞模様の線は、あるストロボ間隔から次のストロボ間隔にかけて次第に変形する。例えば、赤色光ストロボ中に取り込まれる位置22aの点は、緑色ストロボ中に位置22bに移動し、青色ストロボ中に位置22cに移動するように見られる。
図1に戻って参照すると、カメラ3は、全色の投影した線を単一画像上で取得するために、3つのストロボの期間全体の間、露出される。したがって、カメラ3によって取り込まれる画像は、3つの別個の色平面内に投影した縞模様の線を含む。カメラ3によって取り込まれる画像は、例えばプロセッサおよびメモリを含む画像処理手段4によって処理される。取り込んだ画像の投影した線に基づいて、画像処理手段4は、色ごとに物体の3次元奥行きマップを得る。奥行きマップは、物体の表面の点とそれに対する3次元座標の観点のそれらの位置とに関するグラフまたは表形式のプロットを含む。各色の奥行きマップに基づいて、画像処理手段4は、3つの色平面の間の物体の深さの変化を計算し、それに基づいて物体の運動が、3Dの空間的に測定できる。そのため、画像処理手段4は、後述のように、1つまたは複数のコンピュータベースアルゴリズムを実行するようになされ得る。
詳細には、3色の奥行きマップは、例えば、テンプレートマッチングアルゴリズムを用いて、画像処理手段4によって解析されてそれらの間の対応する点を見つける。本明細書で使用され得る例示的なテンプレートマッチングアルゴリズムは、ICP(iterative closest point)アルゴリズムである。点の対応の問題は、それにより、ある特定の色平面(例えば、赤色)内の点が、時間的にその後の色平面(緑色および青色)内のどこに移動されるのか指示するので重要である。次いで、画像処理手段4は、奥行きマップ中の対応する点の位置に基づいて3D運動特性を決定する。例えば、2つの時間的に連続した色平面についての一対の対応する点の座標の差に基づいて、物体の瞬間速度を決定することができる。さらに、2つの時間的に連続した一対の色平面について決定した瞬間速度の差に基づいて、物体の瞬間加速度を決定することができる。
本発明の例示的な一実施形態は、そのようなシステムを物体の3次元振動の調査に適合したものを示してもいる。上述の通り、従来の一画像フレームは、3つの色平面を含み、各色平面は、少し間隔をおいて取得される。しかし、3つの色平面に関してのサンプリングレートが、カメラ画像取得間隔によって制限されるので、振動運動は、この間隔の間に正確に取り込むことができない。しかし、たいていの物理系は、周期的に振動するので、1つの画像取得間隔サイクル自体の中で多くのサンプルを取り込むことは必要でない可能性がある。
図示した例では、色ごとのストロボ間隔は、0.001ミリ秒であるようにとられており、カメラの画像取得間隔は、30ミリ秒であると仮定する。カメラの画像取得間隔は、カメラの画像フレームレートの逆数である。提案した技法によれば、ある点の位置のサンプルは、30ミリ秒の周期でフレームごとに周期的に収集され、すなわち第1のサイクルまたはフレームにおいて0.001ミリ秒、0.002ミリ秒、0.003ミリ秒で、第2のサイクルまたはフレームにおいて30×1ミリ秒+0.001ミリ秒、30×1ミリ秒+0.002ミリ秒、30×1ミリ秒+0.003ミリ秒で、第3のサイクルまたはフレームにおいて30×2ミリ秒+2+0.001ミリ秒、30×2ミリ秒+2+0.002ミリ秒、30×2ミリ秒+2+0.003ミリ秒でといったように収集される。このように、画像取得間隔の異なる部分で十分なサンプルが収集されることが確実になる。
サンプル収集は、図5に示されており、物体もしくは物体中の点の変位Yが、時間T(ミリ秒)に対してプロットされている。提案した照明系により、任意の小さい間隔で3つのサンプルを収集することが可能となる。30ミリ秒のサイクル31、32、33、34ごとに、座標(t1、y1)、(t2、y2)、(t3、y3)、サイクル32が与えるサンプル点(t4、y4)、(t5、y5)、(t6、y6)、といったものなどを有する点41a〜c、42a〜c、43a〜cおよび44a〜cによって表されるように、3つのサンプルが収集される。点(tn、yn)は、サンプル取得時間、およびこの特定の取得時間での点の位置を表す。これら位置は、例えばテンプレートマッチングを用いて、奥行きマップ上の点の対応に基づいて決定される。振動現象は、カメラの画像取得間隔内で変わらず、このことは、サンプリングおよび解析の基礎をなすとさらに仮定する。
振動特性の決定は、物体の振動運動を最も良く説明する曲線50を決定することを含む。詳細には、例示の実施形態は、特徴的なサイクル51を決定するために時間ラッピングアルゴリズムを使用する。時間ラッピングアルゴリズムは、特徴的なサイクルの周期TWを最初に推測することから始める。続いて、データサンプルが、仮定した周期TWにまとめられる。例えば、周期TW=10を最初に推測した場合、(2.1、3.2)、(3.2、0.123)、(4.5、0.34)、(12.5、0.91)、(22.4、0.21)、(25.1、-2.3)でのサンプルは、(2.1、3.2)、(3.2、0.123)、(4.5、0.34)、(2.5、0.91)、(22.4、0.21)、(5.1、-2.3)としてまとめられる。ラッピング時間が、時間周期TWと一致する場合、サンプルデータ点は、図6A中のデータ点60によって示すようにクラスタ化される。ラッピング時間が、時間周期TWと一致しない場合、サンプルデータ点は、図6B中のデータ点70によって示すようにまばらになる。例示的な実施形態では、この場合、誤差量(error metric)は、5つの連続した点の間の対距離(pair-wise distance)の二乗平均平方根値として決定される。次いで、時間周期TWは、繰り返してスキャンされ、誤差量の最小値に対応するTWの値が、特徴的なサイクルとして決定される。振動数は、決定した特徴的なサイクルの逆数として決定される。
図7は、本発明の一実施形態による物体の3D振動特性を測定する方法100の概要を示す例示的な流れ図である。方法100は、以下に述べるアクションブロック101〜109を含む。ブロック101は、カメラ露出の開始を含む。ブロック102は、第1の別個の時間間隔で物体上に投影される赤色光をストロボする段階を含む。ブロック103は、第2の別個の時間間隔で物体上に投影される緑色光をストロボする段階を含む。ブロック103は、第3の別個の時間間隔で物体上に投影される青色光をストロボする段階を含む。上述の通り、投影した光の断面パターンは、一連の平行線を含み、投影した光が、物体の表面の離散したストリップに入射するようになっている。ブロック105は、カメラ露出を停止する段階を含む。ブロック106は、3つの異なる色の投影した線を含む画像を取り込む段階を含む。ブロック107は、取り込んだ色ごとの投影した線に基づいて色ごとに奥行きマップを得る段階と、奥行きマップ上の対応する点を決定する段階とを含む。決定した対応する点の位置は、記憶される。画像取得時間に対応するフレーム間の遅延が生じ、その後に次の取得サイクルとなり、制御は、ブロック101に戻る。十分な枚数の画像を撮った後、制御は、上述の通り、例えば時間ラッピングアルゴリズムを用いて振動特性を決定する段階を含むブロック108に進む。
本発明の実施形態は、上述の利点に加えていくつかの利点を提供する。例えば、本発明は、多くの高価な高速カメラよりもとても高精度で広範な速度測定および加速度測定を実現する。さらに、システムのコストが最小限であり、すなわち、提案した時間的色平面スライシング照明装置(temporal color plane slicing lighting apparatus)は、色カメラで用いられる既存の照明系を置き換えるだけでよい。この組み合わせは、追加の構成部品または組み立て無しで、工場で直接使用できる。本発明は、例えば、故障を判定するためのクランクシャフトやショックアブソーバなどの機械的部品の荷重および動的応力および歪みの予測、大型土木構造物の評価、振動膜の評価、ならびに物体の振動モード形状解析などのいくつかの用途を見出すことができる。
本発明をいくつかの好ましい実施形態を参照して詳細に説明してきたが、本発明は、これら正確な実施形態に限定されないことを理解されたい。むしろ、本発明を実施するための現在の最良の形態を説明する本開示を考慮すると、多くの修正形態および変形形態が、本発明の範囲および精神から逸脱することなく当業者に思い浮かぶであろう。したがって本発明の範囲は、前述の説明によってではなく添付の特許請求の範囲によって示される。特許請求の範囲の趣旨の範囲内、および特許請求の範囲の均等の範囲内に入る全ての変更、修正および変形は、特許請求の範囲内とみなされるべきである。
1 システム
2 光投影手段
3 画像取得手段、色カメラ、カメラ
4 画像処理手段
5 物体、表面
6 表面
7 赤色光源、光源
8 緑色光源、光源
9 青色光源、光源
10 格子
11 一連の平行な縞模様の線、線
12 例示的なタイミング図
13 トレース
14 トレース
15 トレース
16 トレース
17 光ビーム、投影した光
18 断面パターン
21a 縞模様の線
21b 縞模様の線
21c 縞模様の線
22a 位置
22b 位置
22c 位置
31 サイクル
32 サイクル
33 サイクル
34 サイクル
41a〜c 点
42a〜c 点
43a〜c 点
44a〜c 点
50 曲線
51 特徴的なサイクル
60 データ点
70 データ点
100 方法
101 アクションブロック、ブロック
102 アクションブロック、ブロック
103 アクションブロック、ブロック
104 アクションブロック
105 アクションブロック、ブロック
106 アクションブロック、ブロック
107 アクションブロック、ブロック
108 アクションブロック、ブロック
109 アクションブロック

Claims (15)

  1. 物体(5)の3次元運動を測定するシステム(1)であって、
    - 縞模様の線(11)の断面パターン(18)を有する少なくとも2つの異なる色の光(17)を、別個の時間間隔(TR、TG、TB)で前記物体(5)の表面(6)上へ投影するようになされた光投影手段(2)と、
    - 露光時間(TE)中に前記物体の画像を取り込む画像取得手段(3)であって、前記別個の時間間隔(TR、TG、TB)が、前記露光時間(TE)の期間内にある、画像取得手段(3)と、
    - 前記画像取得手段(3)の位置から見たときの前記物体(5)上の縞模様の線(21a〜c)の投影パターンに基づいて色ごとに異なる奥行きマップを得、各色の前記奥行きマップ上の対応する点を決定し、前記奥行きマップ上の対応する点の位置に基づいて前記物体の3次元運動特性を決定するように前記画像を処理するようになされた画像処理手段(4)と
    を備えるシステム(1)。
  2. 前記光投影手段(2)が、赤色、緑色および青色から選択される異なる色の少なくとも2つの光源(7、8、9)を備え、前記光投影手段(2)が、前記別個の時間間隔(TR、TG、TB)で前記光源をストロボする手段をさらに含む、
    請求項1に記載のシステム(1)。
  3. 前記断面パターン(18)が、一連の平行な縞模様の線(11)を含み、前記光投影手段(2)が、前記断面パターン(18)を有するように投影される前記光(17)のプロファイルを形成するための格子(10)を含む、請求項1または2に記載のシステム(1)。
  4. 前記画像処理手段(4)が、前記奥行きマップ上の対応する点の座標の差に基づいて前記3次元運動特性を決定するようになされている、請求項1から3のいずれかに記載のシステム(1)。
  5. 前記3次元運動が、3次元振動運動を含み、前記画像処理手段(4)が、振動特性を前記運動特性として決定するようになされている、請求項1から4のいずれかに記載のシステム(1)。
  6. 前記画像処理手段(4)が、振動数を含む振動特性を決定するようになされている、
    請求項5に記載のシステム(1)。
  7. 前記画像処理手段(4)が、時間ラッピングアルゴリズムを用いて前記振動特性を決定するようになされている、
    請求項5または6に記載のシステム(1)。
  8. 前記画像処理手段(4)が、テンプレートマッチングアルゴリズムを用いて前記奥行きマップ上の対応する点を決定するようになされている、請求項1から7のいずれかに記載のシステム(1)。
  9. 物体の3次元運動を測定する方法であって、
    - 縞模様の線(11)の断面パターン(18)を有する少なくとも2つの異なる色の光(17)を、別個の時間間隔(TR、TG、TB)で前記物体(5)の表面(6)上へ投影する段階と、
    - 露光時間(TE)中に前記物体の画像を取り込む段階であって、前記別個の時間間隔(TR、TG、TB)が、前記露光時間(TE)の期間内にある、取り込む段階と、
    - 前記画像を取り込む位置から見たときの前記物体(5)上の縞模様の線(21a〜c)の投影パターンに基づいて色ごとに異なる奥行きマップを得、各色の前記奥行きマップ上の対応する点を決定し、前記奥行きマップ上の対応する点の位置に基づいて前記物体の3次元運動特性を決定するように前記画像を処理する段階と
    を含む方法。
  10. 前記奥行きマップ上の対応する点の座標の差に基づいて前記3次元運動特性を決定する段階を含む、
    請求項9に記載の方法。
  11. 前記3次元運動が、3次元振動運動を含み、前記運動特性を決定する段階が、振動特性を決定する段階を含む、請求項9または10に記載の方法。
  12. 前記振動特性の前記決定が、振動数を計算する段階を含む、請求項11に記載の方法。
  13. 前記振動特性を決定するために時間ラッピングアルゴリズムを使用する段階を含む、請求項11または12に記載の方法。
  14. 前記奥行きマップ上の対応する点が、テンプレートマッチングアルゴリズムを用いて決定される、請求項9から13のいずれかに記載の方法。
  15. 前記投影が、前記別個の時間間隔(TR、TG、TB)で赤色、緑色および青色から選択される異なる色の少なくとも2つの光源(7、8、9)をストロボする段階を含む、請求項9から14のいずれかに記載の方法。
JP2011087260A 2010-04-09 2011-04-11 3次元運動特性の測定 Pending JP2011221024A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP10003832.2 2010-04-09
EP10003832A EP2375227A1 (en) 2010-04-09 2010-04-09 Measurement of three-dimensional motion characteristics

Publications (1)

Publication Number Publication Date
JP2011221024A true JP2011221024A (ja) 2011-11-04

Family

ID=42236354

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011087260A Pending JP2011221024A (ja) 2010-04-09 2011-04-11 3次元運動特性の測定

Country Status (3)

Country Link
US (1) US8107723B2 (ja)
EP (1) EP2375227A1 (ja)
JP (1) JP2011221024A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018021035A1 (ja) * 2016-07-26 2018-02-01 ソニー株式会社 画像処理装置および方法、内視鏡システム、並びにプログラム

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8908995B2 (en) 2009-01-12 2014-12-09 Intermec Ip Corp. Semi-automatic dimensioning with imager on a portable device
US8908958B2 (en) * 2009-09-03 2014-12-09 Ron Kimmel Devices and methods of generating three dimensional (3D) colored models
US10013787B2 (en) * 2011-12-12 2018-07-03 Faceshift Ag Method for facial animation
WO2013100350A1 (en) 2011-12-28 2013-07-04 Samsung Electronics Co., Ltd. Image processing apparatus, upgrade apparatus, display system including the same, and control method thereof
US9779546B2 (en) 2012-05-04 2017-10-03 Intermec Ip Corp. Volume dimensioning systems and methods
US9007368B2 (en) * 2012-05-07 2015-04-14 Intermec Ip Corp. Dimensioning system calibration systems and methods
US10007858B2 (en) 2012-05-15 2018-06-26 Honeywell International Inc. Terminals and methods for dimensioning objects
US10321127B2 (en) 2012-08-20 2019-06-11 Intermec Ip Corp. Volume dimensioning system calibration systems and methods
US9939259B2 (en) 2012-10-04 2018-04-10 Hand Held Products, Inc. Measuring object dimensions using mobile computer
US20140104413A1 (en) 2012-10-16 2014-04-17 Hand Held Products, Inc. Integrated dimensioning and weighing system
US9336602B1 (en) * 2013-02-19 2016-05-10 Amazon Technologies, Inc. Estimating features of occluded objects
US9080856B2 (en) 2013-03-13 2015-07-14 Intermec Ip Corp. Systems and methods for enhancing dimensioning, for example volume dimensioning
US10228452B2 (en) 2013-06-07 2019-03-12 Hand Held Products, Inc. Method of error correction for 3D imaging device
US9239950B2 (en) 2013-07-01 2016-01-19 Hand Held Products, Inc. Dimensioning system
US9464885B2 (en) 2013-08-30 2016-10-11 Hand Held Products, Inc. System and method for package dimensioning
US9823059B2 (en) 2014-08-06 2017-11-21 Hand Held Products, Inc. Dimensioning system with guided alignment
US10775165B2 (en) 2014-10-10 2020-09-15 Hand Held Products, Inc. Methods for improving the accuracy of dimensioning-system measurements
US9779276B2 (en) 2014-10-10 2017-10-03 Hand Held Products, Inc. Depth sensor based auto-focus system for an indicia scanner
US10810715B2 (en) 2014-10-10 2020-10-20 Hand Held Products, Inc System and method for picking validation
US9762793B2 (en) 2014-10-21 2017-09-12 Hand Held Products, Inc. System and method for dimensioning
US9897434B2 (en) 2014-10-21 2018-02-20 Hand Held Products, Inc. Handheld dimensioning system with measurement-conformance feedback
US9557166B2 (en) 2014-10-21 2017-01-31 Hand Held Products, Inc. Dimensioning system with multipath interference mitigation
US9752864B2 (en) 2014-10-21 2017-09-05 Hand Held Products, Inc. Handheld dimensioning system with feedback
US10060729B2 (en) 2014-10-21 2018-08-28 Hand Held Products, Inc. Handheld dimensioner with data-quality indication
US9786101B2 (en) 2015-05-19 2017-10-10 Hand Held Products, Inc. Evaluating image values
US10066982B2 (en) 2015-06-16 2018-09-04 Hand Held Products, Inc. Calibrating a volume dimensioner
US9857167B2 (en) 2015-06-23 2018-01-02 Hand Held Products, Inc. Dual-projector three-dimensional scanner
US20160377414A1 (en) 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
US9835486B2 (en) 2015-07-07 2017-12-05 Hand Held Products, Inc. Mobile dimensioner apparatus for use in commerce
EP3118576B1 (en) 2015-07-15 2018-09-12 Hand Held Products, Inc. Mobile dimensioning device with dynamic accuracy compatible with nist standard
US20170017301A1 (en) 2015-07-16 2017-01-19 Hand Held Products, Inc. Adjusting dimensioning results using augmented reality
US10094650B2 (en) 2015-07-16 2018-10-09 Hand Held Products, Inc. Dimensioning and imaging items
US10249030B2 (en) 2015-10-30 2019-04-02 Hand Held Products, Inc. Image transformation for indicia reading
US10453185B2 (en) * 2015-11-12 2019-10-22 Aquifi, Inc. System and method for high dynamic range depth capture using multiple cameras
US10225544B2 (en) 2015-11-19 2019-03-05 Hand Held Products, Inc. High resolution dot pattern
US10025314B2 (en) 2016-01-27 2018-07-17 Hand Held Products, Inc. Vehicle positioning and object avoidance
US10339352B2 (en) 2016-06-03 2019-07-02 Hand Held Products, Inc. Wearable metrological apparatus
US9940721B2 (en) 2016-06-10 2018-04-10 Hand Held Products, Inc. Scene change detection in a dimensioner
US10163216B2 (en) 2016-06-15 2018-12-25 Hand Held Products, Inc. Automatic mode switching in a volume dimensioner
US10909708B2 (en) 2016-12-09 2021-02-02 Hand Held Products, Inc. Calibrating a dimensioner using ratios of measurable parameters of optic ally-perceptible geometric elements
US11047672B2 (en) 2017-03-28 2021-06-29 Hand Held Products, Inc. System for optically dimensioning
CN107271025B (zh) * 2017-06-20 2023-04-11 福州大学 一种转轴三维振动同步测量的装置及方法
US10733748B2 (en) 2017-07-24 2020-08-04 Hand Held Products, Inc. Dual-pattern optical 3D dimensioning
US10584962B2 (en) 2018-05-01 2020-03-10 Hand Held Products, Inc System and method for validating physical-item security
TWI756811B (zh) * 2019-09-03 2022-03-01 日商新川股份有限公司 振動檢測系統
US11639846B2 (en) 2019-09-27 2023-05-02 Honeywell International Inc. Dual-pattern optical 3D dimensioning
CN114746905A (zh) * 2019-11-27 2022-07-12 特里纳米克斯股份有限公司 通过显示器的深度测量
US11783506B2 (en) * 2020-12-22 2023-10-10 Continental Autonomous Mobility US, LLC Method and device for detecting a trailer angle
CN113340403B (zh) * 2021-05-31 2022-08-16 福州大学 基于圆周条纹和线阵相机的转轴径向振动测量方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002250613A (ja) * 2001-02-27 2002-09-06 Ricoh Co Ltd 光学的三次元形状計測システム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19861203B4 (de) * 1998-02-16 2004-01-29 Polytec Gmbh Verfahren und Vorrichtun gzur flächenhaften Schwingungsanalyse
CA2306515A1 (en) * 2000-04-25 2001-10-25 Inspeck Inc. Internet stereo vision, 3d digitizing, and motion capture camera
DE10063293A1 (de) * 2000-12-19 2002-07-04 Fraunhofer Ges Forschung Verfahren und Vorrichtung zur mehrkanaligen Inspektion von Oberflächen im Durchlauf
KR100406843B1 (ko) * 2001-04-06 2003-11-21 (주) 인텍플러스 색정보를 이용한 실시간 3차원 표면형상 측정방법 및 장치
US7961912B2 (en) * 2004-10-14 2011-06-14 Stevick Glen R Method and apparatus for dynamic space-time imaging system
WO2008086016A1 (en) * 2007-01-10 2008-07-17 Cyberoptics Corporation Inspection system
WO2009018849A1 (de) * 2007-08-09 2009-02-12 Siemens Aktiengesellschaft Anordnung zur bildaufnahme von elementen
FI20075975L (fi) * 2007-12-31 2009-07-01 Metso Automation Oy Rainan mittaus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002250613A (ja) * 2001-02-27 2002-09-06 Ricoh Co Ltd 光学的三次元形状計測システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6014045041; Varun, A.V. et al.: 'Color plane slicing and its applications to motion characterization for machine vision' 2009 IEEE/ASME International Conference on Advanced Intelligent Mechatronics (AIM 2009) , 2009, 590-594, Institute of Electrical and Electronics Engineers *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018021035A1 (ja) * 2016-07-26 2018-02-01 ソニー株式会社 画像処理装置および方法、内視鏡システム、並びにプログラム
JPWO2018021035A1 (ja) * 2016-07-26 2019-05-09 ソニー株式会社 画像処理装置および方法、内視鏡システム、並びにプログラム
US11457801B2 (en) 2016-07-26 2022-10-04 Sony Corporation Image processing device, image processing method, and endoscope system

Also Published As

Publication number Publication date
US20110249864A1 (en) 2011-10-13
EP2375227A1 (en) 2011-10-12
US8107723B2 (en) 2012-01-31

Similar Documents

Publication Publication Date Title
JP2011221024A (ja) 3次元運動特性の測定
EP2384423B1 (en) Measurement of vibration characteristics of an object
JP6621836B2 (ja) 光パターンの強度変動を利用した体積内の物体の深さマッピング
KR101604037B1 (ko) 카메라와 레이저 스캔을 이용한 3차원 모델 생성 및 결함 분석 방법
US9733072B2 (en) Three dimensional measurement apparatus, control method therefor, information processing apparatus, control method therefor, and non-transitory computer-readable storage medium
TW201510475A (zh) 三維形貌輪廓量測裝置及其方法
KR20190104367A (ko) 3차원 형상 계측 장치, 3차원 형상 계측 방법 및 프로그램
JP2017075887A (ja) 振動検出装置、検査装置、振動検出方法、及び振動検出プログラム
US7495777B2 (en) Method and apparatus for contact free measurement of periodically moving objects
JP2011112639A (ja) 三次元形状測定装置
JP6035031B2 (ja) 複数の格子を用いた三次元形状計測装置
JP3629532B2 (ja) 連続移動物体のリアルタイム形状計測方法及びシステム
JP2014199193A (ja) 三次元計測装置、三次元計測方法及びプログラム
JP5956296B2 (ja) 形状計測装置及び形状計測方法
JP5795095B2 (ja) 重み付けを用いた格子画像の位相解析方法
KR101539945B1 (ko) 간섭계를 이용한 진동측정방법
JP7179439B2 (ja) 情報処理装置、情報処理方法及びプログラム
EP3070432B1 (en) Measurement apparatus
JP2015001791A (ja) 画像解析装置
KR101275749B1 (ko) 3차원 깊이정보 획득 방법 및 그 장치
JP2016109580A (ja) 計測装置および計測方法
CN107339952A (zh) 一种高低两组各三方向投影的三维测量装置
US11610324B2 (en) Three-dimensional shape measuring method and three-dimensional shape measuring device
CN110689566B (zh) 一种拉链厚度尺寸的检测方法及系统
Curto et al. Fitting a Normal Probability Distribution to Depth Estimations of Three REALSENSE™ Rgb-D Cameras Tested in Scenes with Transparency

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141017

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150323