JP2020159730A - Three-dimensional measurement method, three-dimensional measurement device, and robot system - Google Patents
Three-dimensional measurement method, three-dimensional measurement device, and robot system Download PDFInfo
- Publication number
- JP2020159730A JP2020159730A JP2019056578A JP2019056578A JP2020159730A JP 2020159730 A JP2020159730 A JP 2020159730A JP 2019056578 A JP2019056578 A JP 2019056578A JP 2019056578 A JP2019056578 A JP 2019056578A JP 2020159730 A JP2020159730 A JP 2020159730A
- Authority
- JP
- Japan
- Prior art keywords
- light
- unit
- mirror
- laser beam
- relationship
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Mechanical Optical Scanning Systems (AREA)
- Manipulator (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
本発明は、三次元計測方法、三次元計測装置およびロボットシステムに関するものである。 The present invention relates to a three-dimensional measuring method, a three-dimensional measuring device, and a robot system.
特許文献1に記載されている画像描画装置は、レーザー光を出射する光源部と、レーザー光の明るさに関する指標を計測するセンサーと、レーザー光をミラーで反射させて走査するスキャナー部と、光源部を制御する制御部と、を有する。また、制御部は、ミラーの振幅が所定の大きさで一定となった後、所定の画像が描画されるようにレーザー光をスキャナー部の走査範囲より狭い描画範囲に出射し、また、レーザー光の明るさを調整するための調整用レーザー光を描画範囲外に出射する。そして、制御部は、調整用レーザー光の出力開始後、調整用レーザー光の強度が安定するまでの期間が経過した時点で調整用レーザー光の出射を停止し、その後は、調整用レーザー光の明るさに関する指標に基づいてレーザー光の明るさを調整する。
The image drawing device described in
ロボットのアームに三次元計測装置を取り付けた場合、対象物の計測とアームによる対象物に対する作業は同時に実行できないため、それぞれ異なる時間に実行させる必要がある。そのため、計測の間だけレーザー光を出射させ、アームが作業を行っている間はレーザー光を停止させる場合、ミラーの振幅が所定の大きさで一定になった後に調整用レーザー光を出射して、安定した強度のレーザー光に調整してから三次元計測を開始していたのでは、ロボットによる三次元計測と作業を含む全体の工程のサイクルタイムが長くなってしまうという課題があった。 When the three-dimensional measuring device is attached to the arm of the robot, the measurement of the object and the work on the object by the arm cannot be performed at the same time, so that they must be executed at different times. Therefore, when the laser beam is emitted only during the measurement and the laser beam is stopped while the arm is working, the adjustment laser beam is emitted after the amplitude of the mirror becomes constant at a predetermined magnitude. If the three-dimensional measurement was started after adjusting the laser beam to a stable intensity, there was a problem that the cycle time of the entire process including the three-dimensional measurement by the robot and the work became long.
本発明の三次元計測方法は、レーザー光を出射する光出射部と、
前記光出射部から出射される前記レーザー光の強度を検出する光強度検出部と、
前記レーザー光を反射するミラーを備え、前記ミラーの揺動によって前記レーザー光を走査する光走査部と、
前記ミラーの揺動角を検出する揺動角検出部と、
撮像部と、を備え、
前記光走査部で走査された前記レーザー光により形成されるパターン光を対象物に投影し、前記パターン光が投影されている前記対象物を前記撮像部により撮像することにより、前記対象物の三次元計測を行う三次元計測方法であって、
前記ミラーの駆動を開始して前記ミラーの揺動角が閾値角度となったら、前記光出射部に駆動電圧を印加して前記レーザー光を出射させ、前記光強度検出部の検出結果に基づいて、前記駆動電圧の大きさと前記レーザー光の強度との関係を取得する工程と、
前記ミラーの揺動角が前記閾値角度より大きい目標角度となったら、前記関係に基づいて前記光出射部の駆動を制御することにより、前記対象物に前記パターン光を投影する工程と、を有することを特徴とする。
The three-dimensional measurement method of the present invention includes a light emitting unit that emits laser light and a light emitting unit.
A light intensity detecting unit that detects the intensity of the laser light emitted from the light emitting unit,
An optical scanning unit that includes a mirror that reflects the laser beam and scans the laser beam by swinging the mirror.
A swing angle detection unit that detects the swing angle of the mirror,
Equipped with an imaging unit
The pattern light formed by the laser beam scanned by the optical scanning unit is projected onto the object, and the object on which the pattern light is projected is imaged by the imaging unit to create a tertiary of the object. It is a three-dimensional measurement method that performs original measurement.
When the driving of the mirror is started and the swing angle of the mirror reaches the threshold angle, a driving voltage is applied to the light emitting unit to emit the laser light, and based on the detection result of the light intensity detecting unit. , The step of acquiring the relationship between the magnitude of the driving voltage and the intensity of the laser beam, and
When the swing angle of the mirror becomes a target angle larger than the threshold angle, the process includes a step of projecting the pattern light onto the object by controlling the drive of the light emitting unit based on the relationship. It is characterized by that.
以下、本発明の三次元計測方法、三次元計測装置およびロボットシステムを添付図面に示す実施形態に基づいて詳細に説明する。 Hereinafter, the three-dimensional measurement method, the three-dimensional measurement device, and the robot system of the present invention will be described in detail based on the embodiments shown in the accompanying drawings.
<第1実施形態>
図1は、本発明の第1実施形態に係るロボットシステムの全体構成を示す図である。図2は、三次元計測装置の全体構成を示す図である。図3は、図2に示す三次元計測装置が有する光走査部を示す平面図である。図4は、投影部により投影されるパターン光の一例を示す平面図である。図5は、位相シフト法を用いた三次元計測の手順を示すフローチャートである。図6は、三次元計測の開始タイミングを示すタイミングチャートである。図7は、駆動電圧Vと強度Pとの関係を示すグラフである。図8は、光走査部で走査されたレーザー光の一部が遮蔽される様子を示す断面図である。
<First Embodiment>
FIG. 1 is a diagram showing an overall configuration of a robot system according to the first embodiment of the present invention. FIG. 2 is a diagram showing the overall configuration of the three-dimensional measuring device. FIG. 3 is a plan view showing an optical scanning unit included in the three-dimensional measuring device shown in FIG. FIG. 4 is a plan view showing an example of the pattern light projected by the projection unit. FIG. 5 is a flowchart showing a procedure of three-dimensional measurement using the phase shift method. FIG. 6 is a timing chart showing the start timing of the three-dimensional measurement. FIG. 7 is a graph showing the relationship between the drive voltage V and the intensity P. FIG. 8 is a cross-sectional view showing how a part of the laser beam scanned by the optical scanning unit is shielded.
図1に示すロボットシステム1は、人共存型のロボットシステムであり、ロボット2と、レーザー光Lを用いて対象物Wの三次元計測を行う三次元計測装置4と、三次元計測装置4の計測結果に基づいてロボット2の駆動を制御するロボット制御装置5と、ロボット制御装置5と通信可能なホストコンピューター6と、を有する。これら各部は、有線または無線により通信可能とされ、該通信は、インターネットのようなネットワークを介してなされてもよい。なお、ロボットシステム1は、人共存型のものに限定されない。
The
−ロボット−
ロボット2は、例えば、精密機器やこれを構成する部品の給材、除材、搬送および組立等の作業を行うロボットである。ただし、ロボット2の用途としては、特に限定されない。本実施形態のロボット2は、6軸ロボットであり、図1に示すように、床や天井に固定されるベース21と、ベース21に連結されたロボットアーム22と、を有する。
-Robot-
The
ロボットアーム22は、ベース21に第1軸O1まわりに回動自在に連結された第1アーム221と、第1アーム221に第2軸O2まわりに回動自在に連結された第2アーム222と、第2アーム222に第3軸O3まわりに回動自在に連結された第3アーム223と、第3アーム223に第4軸O4まわりに回動自在に連結された第4アーム224と、第4アーム224に第5軸O5まわりに回動自在に連結された第5アーム225と、第5アーム225に第6軸O6まわりに回動自在に連結された第6アーム226と、を有する。また、第6アーム226には、ロボット2に実行させる作業に応じたエンドエフェクター24が装着される。
The
また、ロボット2は、ベース21に対して第1アーム221を回動させる第1駆動装置251と、第1アーム221に対して第2アーム222を回動させる第2駆動装置252と、第2アーム222に対して第3アーム223を回動させる第3駆動装置253と、第3アーム223に対して第4アーム224を回動させる第4駆動装置254と、第4アーム224に対して第5アーム225を回動させる第5駆動装置255と、第5アーム225に対して第6アーム226を回動させる第6駆動装置256と、を有する。第1〜第6駆動装置251〜256は、それぞれ、例えば、駆動源としてのモーターと、モーターの駆動を制御するコントローラーと、モーターの回転量を検出するエンコーダーと、を有する。そして、第1〜第6駆動装置251〜256は、それぞれ、ロボット制御装置5によって独立して制御される。
Further, the
ロボット2としては、本実施形態の構成に限定されず、例えば、ロボットアーム22が有するアームの数が1本〜5本であってもよいし、7本以上であってもよい。また、例えば、ロボット2の種類は、スカラロボットや、2つのロボットアーム22を有する双腕ロボットであってもよい。
The
−ロボット制御装置−
ロボット制御装置5は、ホストコンピューター6からロボット2の位置指令を受け、各アーム221〜226が受けた位置指令に応じた位置となるように、第1〜第6駆動装置251〜256の駆動をそれぞれ独立して制御する。ロボット制御装置5は、例えば、コンピューターから構成され、情報を処理するプロセッサー(CPU)と、プロセッサーに通信可能に接続されたメモリーと、外部インターフェースと、を有する。メモリーにはプロセッサーにより実行可能な各種プログラムが保存され、プロセッサーは、メモリーに記憶された各種プログラム等を読み込んで実行することができる。
-Robot control device-
The robot control device 5 receives a position command of the
−三次元計測装置−
三次元計測装置4は、位相シフト法を用いて対象物Wの三次元計測を行う。図2に示すように、三次元計測装置4は、対象物Wを含む領域にレーザー光Lにより形成したパターン光PLを投影する投影部41と、パターン光PLが投影された対象物Wを含む領域を撮像した撮像画像を取得する撮像部47と、投影部41および撮像部47の駆動を制御する制御部48と、撮像画像に基づいて対象物Wの三次元形状を計測する計測部49と、を備える。
-Three-dimensional measuring device-
The three-dimensional measuring device 4 performs three-dimensional measurement of the object W by using the phase shift method. As shown in FIG. 2, the three-dimensional measuring device 4 includes a
これら各構成要素のうち、少なくとも投影部41および撮像部47は、それぞれ、ロボット2の第5アーム225に固定されている。そのため、投影部41および撮像部47の相対的な位置関係は、固定されている。また、投影部41は、第5アーム225の先端側すなわちエンドエフェクター24側に向けてレーザー光Lを照射するように配置され、撮像部47は、第5アーム225の先端側を向き、レーザー光Lの照射範囲を含む領域を撮像するように配置されている。
Of these components, at least the
ここで、第5アーム225の先端側にエンドエフェクター24が位置する関係は、第5アーム225以外の第1〜第4アーム221〜224、第6アーム226が動いても維持される。そのため、第5アーム225に投影部41および撮像部47を固定することにより、三次元計測装置4は、常に、エンドエフェクター24の先端側にレーザー光Lを出射することができると共に、エンドエフェクター24の先端側を撮像することができる。したがって、エンドエフェクター24により対象物Wを把持しようとするときの姿勢、つまり、エンドエフェクター24が対象物Wに対して如何なる姿勢で対向しても、当該姿勢において対象物Wに向けてレーザー光Lを照射することができると共に、対象物Wを撮像することができる。そのため、より確実に対象物Wの三次元計測を行うことができる。
Here, the relationship in which the
ただし、投影部41および撮像部47の配置は、特に限定されず、第1〜第4アーム221〜224や第6アーム226に固定されていてもよい。また、投影部41および撮像部47のいずれか一方は、ベース21、床、天井、壁等の可動しない部位に固定されていてもよい。
However, the arrangement of the
投影部41は、対象物Wに向けてレーザー光Lを照射することにより、対象物Wに対し図4に示す縞状のパターン光PLを投影する機能を有する。投影部41は、図2に示すように、レーザー光Lを出射する光出射部42と、光出射部42から出射されたレーザー光Lが通過する複数のレンズを含む光学系44と、光学系44を通過したレーザー光Lを対象物Wに向けて走査する光走査部45と、レーザー光Lの強度を検出する光強度検出部46と、光走査部45が有するミラー454の揺動角を検出する揺動角検出部43と、を有する。
The
光出射部42としては、特に限定されず、例えば、垂直共振器面発光レーザー(VCSEL)、外部共振器型垂直面発光レーザー(VECSEL)等の半導体レーザーを用いることができる。
The
光強度検出部46としては、特に限定されず、例えば、フォトダイオードを用いることができる。また、本実施形態では、光強度検出部46は、光出射部42に内蔵されている。ただし、光強度検出部46の構成としては、特に限定されず、例えば、光強度検出部46を光出射部42とは別体とし、さらに、レーザー光Lの光路の途中にハーフミラーを配置してレーザー光Lの一部を分岐させ、分岐させたレーザー光を光強度検出部46が受光するような構成であってもよい。
The light
光学系44は、光出射部42から出射されるレーザー光Lを対象物W付近に集光する集光レンズ441と、集光レンズ441によって集光されたレーザー光Lを後述する揺動軸Jと平行な方向すなわち図2の紙面奥行き方向に延びるライン状とするロッドレンズ442と、を有する。
The
光走査部45は、ロッドレンズ442によってライン状となったレーザー光Lを走査する機能を有する。これにより、レーザー光Lを二次元的すなわち面状に拡散させて照射することができる。光走査部45としては、特に限定されず、例えば、MEMS(Micro Electro Mechanical Systems)、ガルバノミラー、ポリゴンミラー等を用いることができる。
The
本実施形態の光走査部45は、MEMSで構成されている。図3に示すように、光走査部45は、可動部451と、可動部451を支持する支持部452と、可動部451と支持部452とを接続し、可動部451を支持部452に対して揺動軸Jまわりに揺動可能とする梁部453と、可動部451の表面に配置され、レーザー光Lを反射するミラー454と、可動部451の裏面に設けられた永久磁石455と、永久磁石455と対向配置されたコイル456と、を有する。このような光走査部45は、揺動軸Jがライン状のレーザー光Lの延在方向とほぼ一致するように配置されている。そして、コイル456に駆動信号が印加されると、可動部451が揺動軸Jまわりに所定の周期で正・逆交互に揺動し、これにより、ライン状のレーザー光Lが面状に走査される。
The
揺動角検出部43は、図3に示すように、梁部453と支持部452との境界部に設けられたピエゾ抵抗部431を有する。ピエゾ抵抗部431は、可動部451が揺動軸Jまわりに揺動するのに伴って支持部452に発生する応力に応じて抵抗値が変化する。そのため、ピエゾ抵抗部431の抵抗値変化に基づいて、可動部451の揺動軸Jまわりの傾きすなわちミラー454の揺動角を検知することができる。ただし、揺動角検出部43としては、ミラー454の揺動角を検出することができれば、特に限定されない。
As shown in FIG. 3, the swing
以上、投影部41について説明したが、その構成としては、対象物Wにパターン光PLを投影することができれば、特に限定されない。例えば、本実施形態では、光学系44によってレーザー光Lをライン状に拡散しているが、これに限定されず、例えば、MEMSやガルバノミラーを用いてライン状に拡散させてもよい。つまり、2つの光走査部45を用いてレーザー光Lを二次元走査してもよい。また、例えば、2軸自由度を有するジンバル型のMEMSを用いてレーザー光Lを二次元走査してもよい。
Although the
撮像部47は、少なくとも1つの対象物Wにパターン光PLが投影されている状態を撮像する。図2に示すように、撮像部47は、例えば、CMOSイメージセンサー、CCDイメージセンサー等の撮像素子472と集光レンズ473とを備えたカメラ471で構成されている。カメラ471は、計測部49に接続され、画像データを計測部49に送信する。
The
図2に示すように、制御部48は、揺動角検出部43から出力される検出信号すなわちミラー454の揺動軸Jまわりの傾きに関する角度情報Iθ、および、光強度検出部46から出力される検出信号すなわちレーザー光Lの強度に関する光強度情報Ipを受け付ける情報受付部481と、情報受付部481が受け付けた角度情報Iθおよび光強度情報Ipに基づいて、投影部41および撮像部47の駆動を制御する駆動制御部483と、を有する。
As shown in FIG. 2, the
このような制御部48は、例えば、コンピューターから構成され、情報を処理するプロセッサー(CPU)と、プロセッサーに通信可能に接続されたメモリーと、外部インターフェースと、を有する。メモリーにはプロセッサーにより実行可能な各種プログラムが記憶されており、プロセッサーは、メモリーに記憶された各種プログラム等を読み込んで実行することができる。
Such a
駆動制御部483は、情報受付部481が受け付けた角度情報Iθに基づいて、ミラー454の揺動と同期させて光出射部42からレーザー光Lを出射し、例えば、図4に示すような、輝度値の明暗で表現した縞模様の繰返し周期fを有するパターン光PLを対象物W上に投影する。この際、駆動制御部483は、情報受付部481が受け付けた光強度情報Ipをフィードバックし、レーザー光Lの強度が所望の強度となるように、光出射部42に印加する駆動電圧Vの大きさを制御するのが好ましい。駆動制御部483は、さらに、カメラ471の駆動を制御し、パターン光PLが投影されている状態の対象物Wを含む領域を撮像する。
The
次に、対象物Wの三次元計測に用いる位相シフト法について説明する。図5に示すように、駆動制御部483は、対象物Wに第1周期f1をもつ第1パターン光PL1を投影し、第1パターン光PL1が投影された対象物Wを含む領域をカメラ471で撮像するよう各部を制御する第1撮像ステップS1と、対象物Wに第1周期f1よりも短い第2周期f2をもつ第2パターン光PL2を投影し、第2パターン光PL2が投影された対象物Wを含む領域をカメラ471で撮像するよう各部を制御する第2撮像ステップS2と、対象物Wに第2周期f2よりも短い第3周期f3をもつ第3パターン光PL3を投影し、第3パターン光PL3が投影された対象物Wを含む領域をカメラ471で撮像するよう各部を制御する第3撮像ステップS3と、対象物Wに第3周期f3よりも短い第4周期f4をもつ第4パターン光PL4を投影し、第4パターン光PL4が投影された対象物Wを含む領域をカメラ471で撮像するよう各部を制御する第4撮像ステップS4と、を有する。
Next, the phase shift method used for the three-dimensional measurement of the object W will be described. As shown in FIG. 5, the
このように、駆動制御部483は、位相シフト法の中でも異なる周期fを有する複数のパターン光PLを用いる「複数周期位相シフト法」を用いて対象物Wの三次元計測を行う。位相シフト法においては、パターン光PLの周期fが長い程、計測レンジが拡大するが、深度分解能が低下し、パターン光PLの周期fが短い程、計測レンジが縮小するが、深度分解能が向上する。そこで、複数周期位相シフト法を用いることにより、広い計測レンジと高い深度分解能との両立を図ることができる。ただし、複数周期位相シフト法としては、特に限定されず、例えば、複数周期で周期毎に複数回計測する手法であってもよいし、複数周期で周期毎に異なった回数計測する手法であってもよい。
As described above, the
また、駆動制御部483は、第1撮像ステップS1において、対象物Wに第1パターン光PL1をπ/2ずつ位相をずらして4回投影し、その都度、第1パターン光PL1が投影された対象物Wを含む領域をカメラ471で撮像するよう各部を制御する。このことは、第2撮像ステップS2、第3撮像ステップS3および第4撮像ステップS4についても同様である。
Further, in the first imaging step S1, the
計測部49は、第1〜第4撮像ステップS1〜S4において撮像部47が取得した複数の撮像画像に基づいて、対象物Wの三次元計測を行う。具体的には、対象物Wの姿勢、位置(空間座標)等を含む三次元情報を算出する。そして、計測部49は、算出した対象物Wの三次元情報をホストコンピューター6に送信する。
The measuring
以上、位相シフト法について説明したが、これに限定されず、例えば、第2撮像ステップS2以降を省略してもよい。また、反対に、第5撮像ステップ、第6撮像ステップまたはそれ以上のステップを有していてもよい。ステップを増やすほど、計測レンジの拡大と深度分解能の向上とを図ることができるが、撮影回数が増す分、撮像画像を取得するのに要する時間が増えて、ロボット2の稼働効率が低下する。そのため、三次元計測の精度および計測レンジとロボット2の稼働効率との兼ね合いからステップの数を適宜設定すればよい。
Although the phase shift method has been described above, the method is not limited to this, and for example, the second imaging step S2 and subsequent steps may be omitted. On the contrary, it may have a fifth imaging step, a sixth imaging step or more. As the number of steps is increased, the measurement range can be expanded and the depth resolution can be improved. However, as the number of times of shooting increases, the time required to acquire the captured image increases, and the operating efficiency of the
また、第1撮像ステップS1において、位相をずらした第1パターン光PL1を投影する回数は、4回に限定されず、撮影結果から位相を計算できる回数であればよい。この回数を増やす程、より精度よく位相を計算することができるが、カメラ471による撮像回数が増す分、撮像画像を取得するのに要する時間が増えて、ロボット2の稼働効率が低下する。そのため、三次元計測の精度とロボット2の稼働効率との兼ね合いから第1パターン光PL1の投影回数を適宜設定すればよい。第2撮像ステップS2、第3撮像ステップS3および第4撮像ステップS4についても同様である。
Further, in the first imaging step S1, the number of times the first pattern light PL1 whose phase is shifted is not limited to four times, and the number of times the phase can be calculated from the imaging result may be used. As the number of times increases, the phase can be calculated more accurately, but as the number of times of imaging by the
また、パターン光PLとしては、位相シフト法に用いることができるものであれば、特に限定されない。 The pattern light PL is not particularly limited as long as it can be used in the phase shift method.
−ホストコンピューター−
ホストコンピューター6は、計測部49が算出した対象物Wの三次元情報からロボット2の位置指令を生成し、生成した位置指令をロボット制御装置5に送信する。ロボット制御装置5は、ホストコンピューター6から受信した位置指令に基づいて第1〜第6駆動装置251〜256をそれぞれ独立して駆動し、第1〜第6アーム221〜226を指示された位置に移動させる。なお、本実施形態では、ホストコンピューター6と計測部49とが別体となっているが、これに限定されず、ホストコンピューター6に計測部49としての機能が搭載されていてもよい。
− Host computer −
The host computer 6 generates a position command of the
以上、ロボットシステム1の全体構成について簡単に説明した。次に、三次元計測装置4によって対象物Wの三次元計測を開始するタイミングについて説明する。本実施形態のロボットシステム1では、まず、ロボットアーム22を対象物Wの三次元計測を行うための姿勢とし、次に、ロボットアーム22が前記姿勢で停止している状態において光走査部45の駆動を開始して可動部451を揺動軸Jまわりに揺動させ、次に、光出射部42からレーザー光Lを出射してパターン光PLを対象物Wに投影し、次に、パターン光PLが投影された対象物Wを含む領域をカメラ471で撮像することにより対象物Wの三次元計測を行う。
The overall configuration of the
このように、ロボットアーム22が停止してから光走査部45の駆動を開始することにより、光走査部45を常時駆動させておく場合と比べて、省電力化を図ることができる。また、可動部451を揺動させてからレーザー光Lを出射することにより、レーザー光Lが常に走査されるため、同じ個所に照射され続けるのを抑制することができる。そのため、ロボット2と共存する人の眼にレーザー光Lが入ってしまったとしても、一瞬で済むため、眼への悪影響をより確実に抑制することができる。したがって、ロボット2と共存する人にとってより安全なロボットシステム1となる。
In this way, by starting the driving of the
また、図6に示すように、ロボットシステム1では、ミラー454の揺動角として、閾値角度θ1と、閾値角度θ1より大きい目標角度θ2とが設定され、これらは、制御部48に記憶されている。そして、駆動制御部483は、情報受付部481が受け付けた角度情報Iθに基づいて、ミラー454の揺動角が目標角度θ2でほぼ一定となるように光走査部45の駆動を制御する。また、駆動制御部483は、光走査部45の駆動を開始して、ミラー454の揺動角が目標角度θ2となったら、パターン光PLを形成するためのレーザー光Lを光出射部42から出射して対象物Wの三次元計測を行うよう各部を制御する。目標角度θ2としては、特に限定されず、例えば、パターン光PLを対象物Wに投影するのに十分な角度として設定される。これにより、対象物Wの三次元計測をより確実に行うことができる。
Further, as shown in FIG. 6, in the
しかしながら、光出射部42は、レーザー光Lの出射開始直後では、レーザー光Lの強度が不安定となる。つまり、光出射部42に印加する駆動電圧Vの大きさと出射されるレーザー光Lの強度Pとの関係が変動する。なお、以下では、駆動電圧Vと強度Pとの関係を単に「V/P関係」とも言う。そのため、レーザー光Lの強度Pが安定する前に対象物Wの三次元計測を開始すると、対象物Wに対して精度の低いパターン光PLが投影され、対象物Wの三次元計測の精度が低下する。一方、レーザー光Lの強度Pが安定するまで待ってから対象物Wの三次元計測を開始すれば、その分、対象物Wの三次元計測に時間がかかり、ロボット2による作業全体のサイクルタイムが長くなってしまう。
However, in the
そこで、このような問題を解消するために、駆動制御部483は、ミラー454の揺動角が目標角度θ2よりも小さい閾値角度θ1以上となった段階で、V/P関係を取得するために、光出射部42からV/P関係取得用のレーザー光Lを出射するよう各部を制御する。これにより、対象物Wの三次元計測を行う前にV/P関係を取得でき、三次元計測を行う際には、このV/P関係に基づき、レーザー光Lが所望の強度Pとなるように光出射部42に印加する駆動電圧Vの大きさを制御することができる。そのため、レーザー光Lの出射開始直後においても安定した強度Pのレーザー光Lを出射することができ、出射直後から高精度な三次元計測が可能となる。つまり、ロボット2による作業全体のサイクルタイムの延長を招くことなく、対象物Wの三次元計測を高精度に行うことができる。
Therefore, in order to solve such a problem, the
閾値角度θ1としては、特に限定されず、レーザー光Lの強度によっても異なるが、ロボット2と共存する人の眼に入り得るレーザー光Lの単位時間当たりのエネルギー量が十分に小さくなる角度、つまり、共存する人の安全性を十分に確保できる程に大きい角度として設定することができる。これにより、共存する人への安全性を十分に確保することができる。
The threshold angle θ1 is not particularly limited and varies depending on the intensity of the laser beam L, but is an angle at which the amount of energy per unit time of the laser beam L that can enter the human eye coexisting with the
次に、V/P関係の取得方法について説明する。駆動制御部483は、V/P関係を取得するために、光出射部42に異なる大きさの駆動電圧Vを印加して、光出射部42から異なる強度Pのレーザー光Lを出射させる。例えば、まず、第1駆動電圧V1を光出射部42に印加し、その際に出射されるレーザー光Lの強度P1を光強度検出部46から出力される光強度情報Ipに基づいて測定する。次に、第1駆動電圧V1よりも大きい第2駆動電圧V2を光出射部42に印加し、その際に出射されるレーザー光Lの強度P2を光強度検出部46から出力される光強度情報Ipに基づいて測定する。
Next, a method of acquiring the V / P relationship will be described. In order to acquire the V / P relationship, the
そして、駆動制御部483は、これら測定結果から、駆動電圧Vとレーザー光Lの強度Pとの関係を演算し、例えば、図7に示すように、V/P関係を示す式Q(近似式を含む)を取得する。ただし、V/P関係を示すものとしては、式Qに限定されず、例えば、駆動電圧Vと強度Pとが関連付けられたテーブルであってもよい。このような方法によれば、V/P関係を簡単に取得することができる。
Then, the
なお、上述の説明では、第1駆動電圧V1を印加したときのレーザー光Lの強度P1と、第2駆動電圧V2を印加したときのレーザー光Lの強度P2と、に基づいてV/P関係を取得しているが、これに限定されない。例えば、さらに、第2駆動電圧V2よりも大きい第3駆動電圧を印加したときのレーザー光Lの強度、第3駆動電圧よりも大きい第4駆動電圧を印加したときのレーザー光Lの強度またはそれ以上の強度の駆動電圧を印加したときのレーザー光Lの強度に基づいてV/P関係を取得してもよい。基準が増える程、V/P関係をより精度よく求めることができる。 In the above description, the V / P relationship is based on the intensity P1 of the laser light L when the first drive voltage V1 is applied and the intensity P2 of the laser light L when the second drive voltage V2 is applied. Has been obtained, but is not limited to this. For example, further, the intensity of the laser beam L when a third drive voltage larger than the second drive voltage V2 is applied, the intensity of the laser beam L when a fourth drive voltage larger than the third drive voltage is applied, or the intensity thereof. The V / P relationship may be acquired based on the intensity of the laser beam L when the driving voltage having the above intensity is applied. As the number of standards increases, the V / P relationship can be obtained more accurately.
ここで、V/P関係を取得する際のミラー454の揺動の1周期あたりのレーザー光Lの出射回数をnとし、パターン光PLの縞Bの数をmとしたとき、n≦mの関係を満足していることが好ましい(ただし、n、mは共に自然数である)。このように、n≦mの関係を満足することにより、V/P関係を取得するために出射するレーザー光Lがより安全なものとなる。つまり、パターン光PLは、ロボット2と共存する人の眼に入ったとしても、安全性を十分に確保することができる強度で投影されるため、n≦mの関係を満足していれば、単位時間あたりにそれ以上のエネルギー量のレーザー光Lがロボット2と共存する人の眼に照射されることが抑制され、V/P関係を取得する際においても、当該人の安全をより確実に確保することができる。
Here, when the number of times the laser beam L is emitted per cycle of the swing of the
なお、本実施形態では、異なる周期fを持つパターン光PL1〜PL4を用いて三次元計測を行っている。この場合、パターン光PL1〜PL4のうち、最も縞Bの数が多いパターン光PLに含まれる縞Bの数をmとすることが好ましい。これにより、上述の効果をより確実に発揮することができる。 In this embodiment, three-dimensional measurement is performed using the pattern lights PL1 to PL4 having different periods f. In this case, it is preferable that the number of stripes B included in the pattern light PL having the largest number of stripes B among the pattern light PL1 to PL4 is m. Thereby, the above-mentioned effect can be more reliably exhibited.
以上、V/P関係の取得方法について説明した。ここで、駆動制御部483がV/P関係を取得する前に、ミラー454の揺動角が目標角度θ2となった場合、駆動制御部483は、V/P関係を取得してから対象物Wの三次元計測を行うよう各部を制御する。これにより、対象物Wの三次元計測を精度よく行うことができる。
The method of acquiring the V / P relationship has been described above. Here, if the swing angle of the
ここで、V/P関係は、光出射部42の状態、特に光出射部42の温度によっても変動する。そのため、対象物Wの三次元計測を行っている最中にもV/P関係が変化するおそれがある。そこで、対象物Wの三次元計測を行う前に取得したV/P関係を三次元計測中も随時更新することが好ましい。これにより、レーザー光Lの強度Pをより精度よく制御することができ、対象物Wの三次元計測をさらに精度よく行うことができる。
Here, the V / P relationship also varies depending on the state of the
以下、V/P関係を更新する方法を説明する。駆動制御部483は、光出射部42からパターン光PLを形成するためのレーザー光Lを出射しないタイミングで、V/P関係を更新するためのレーザー光Lを出射させ、その際の駆動電圧Vとレーザー光Lの強度Pとの関係に基づいて、V/P関係を更新する。これにより、パターン光PLの投影を邪魔することなくV/P関係を更新することができる。
Hereinafter, a method of updating the V / P relationship will be described. The
図8に示すように、本実施形態では、目標角度θ2の両端部で反射されたレーザー光Lは、シェード部40によって遮蔽されて三次元計測装置4の外に出射されないようになっている。そこで、駆動制御部483は、目標角度θ2の両端部では、パターン光PLを形成するためのレーザー光Lの出射を停止し、代わりに、V/P関係を更新するためのレーザー光Lを出射するように各部を制御する。これにより、V/P関係を更新するためのレーザー光Lが三次元計測装置4の外に出射されず、例えば、当該レーザー光Lがパターン光PLに混じることによるパターン光PLの劣化を抑制することができる。なお、シェード部40は、例えば、三次元計測装置4の筐体の一部として構成することができる。
As shown in FIG. 8, in the present embodiment, the laser light L reflected at both ends of the target angle θ2 is shielded by the
V/P関係を更新するためのレーザー光Lを出射させるために光出射部42に印加する駆動電圧Vとしては、特に限定されないが、例えば、V/P関係を取得する際に用いた第1駆動電圧V1、第2駆動電圧V2とすることができる。これにより、例えば、新たに取得した第1駆動電圧V1と強度P1との関係や、第2駆動電圧V2と強度P2との関係を、前回取得した関係と置き換えることにより、V/P関係の更新を簡単に行うことができる。また、例えば、前回取得した強度P1と今回取得した強度P1との差ΔP1や、前回取得した強度P2と今回取得した強度P2との差ΔP2に基づいて、式Qを補正することもできる。
The drive voltage V applied to the
このようなV/P関係の更新は、対象物Wの三次元計測が終了するまで、周期的に繰り返して行うことが好ましい。これにより、対象物Wの三次元計測をより精度よく行うことができる。 It is preferable that such updating of the V / P relationship is periodically repeated until the three-dimensional measurement of the object W is completed. As a result, the three-dimensional measurement of the object W can be performed more accurately.
以上、ロボットシステム1について説明した。このようなロボットシステム1は、前述したように、ロボットアーム22を備えるロボット2と、対象物Wの三次元計測を行う三次元計測装置4と、三次元計測装置4による計測結果に基づいてロボット2の動作を制御するロボット制御装置5と、を備える。また、三次元計測装置4は、レーザー光Lを出射する光出射部42と、光出射部42から出射されるレーザー光Lの強度を検出する光強度検出部46と、レーザー光Lを反射するミラー454を備え、ミラー454の揺動によってレーザー光Lを走査する光走査部45と、ミラー454の揺動角を検出する揺動角検出部43と、対象物Wを撮像する撮像部47と、制御部48と、を備える。そして、光走査部45で走査されたレーザー光Lにより形成されるパターン光PLを対象物Wに投影し、パターン光PLが投影されている対象物Wを撮像部47により撮像することにより、対象物Wの三次元計測を行うように構成されている。また、制御部48は、ミラー454の駆動を開始してミラー454の揺動角が閾値角度θ1となったら、光出射部42に駆動電圧Vを印加してレーザー光Lを出射し、光強度検出部46の検出結果に基づいて、駆動電圧Vの大きさとレーザー光Lの強度Pとの関係であるV/P関係を取得し、ミラー454の揺動角が閾値角度θ1より大きい目標角度θ2となったら、V/P関係に基づいて光出射部42の駆動を制御することにより、対象物Wにパターン光PLを投影するよう制御する。
The
このような構成のロボットシステム1によれば、スタンバイ状態からの復帰直後であっても、光出射部42から安定した強度のレーザー光Lを出射することができる。そのため、目標角度θ2となってから速やかにかつ精度よく対象物Wの三次元計測を行うことができる。つまり、ロボット2による作業全体のサイクルタイムの延長を招くことなく、対象物Wの三次元計測を高精度に行うことができる。
According to the
また、前述したように、三次元計測装置4は、レーザー光Lを出射する光出射部42と、光出射部42から出射されるレーザー光Lの強度を検出する光強度検出部46と、レーザー光Lを反射するミラー454を備え、ミラー454の揺動によってレーザー光Lを走査する光走査部45と、ミラー454の揺動角を検出する揺動角検出部43と、対象物Wを撮像する撮像部47と、制御部48と、を備える。そして、光走査部45で走査されたレーザー光Lで形成されるパターン光PLを対象物Wに投影し、パターン光PLが投影されている対象物Wを撮像部47により撮像することにより、対象物Wの三次元計測を行うように構成されている。また、制御部48は、ミラー454の駆動を開始してミラー454の揺動角が閾値角度θ1となったら、光出射部42に駆動電圧Vを印加してレーザー光Lを出射し、光強度検出部46の検出結果に基づいて、駆動電圧Vの大きさとレーザー光Lの強度Pとの関係であるV/P関係を取得し、ミラー454の揺動角が閾値角度θ1より大きい目標角度θ2となったら、V/P関係に基づいて光出射部42の駆動を制御することにより、対象物Wにパターン光PLを投影するよう制御する。
Further, as described above, the three-dimensional measuring device 4 includes a
このような構成の三次元計測装置4によれば、スタンバイ状態からの復帰直後であっても、光出射部42から安定した強度のレーザー光Lを出射することができる。そのため、目標角度θ2となってから速やかにかつ精度よく対象物Wの三次元計測を行うことができる。つまり、ロボット2による作業全体のサイクルタイムの延長を招くことなく、対象物Wの三次元計測を高精度に行うことができる。
According to the three-dimensional measuring device 4 having such a configuration, the laser beam L having a stable intensity can be emitted from the
また、前述したように、制御部48は、V/P関係を取得する際、光出射部42に異なる大きさの駆動電圧Vを印加して、光出射部42から異なる強度Pのレーザー光Lを出射させる。特に、本実施形態では、第1駆動電圧V1を光出射部42に印加して、強度P1のレーザー光Lを出射させ、次に、第1駆動電圧V1よりも大きい第2駆動電圧V2を光出射部42に印加し、強度P2のレーザー光Lを出射させている。これにより、第1駆動電圧V1と強度P1との関係と、第2駆動電圧V2と強度P2との関係と、に基づいて、簡単にV/P関係を示す式Qを求めることができる。そのため、強度P1、P2以外の強度のレーザー光Lについても、精度よく、光出射部42から出射させることができ、パターン光PLを精度よく形成することができる。
Further, as described above, when the
また、前述したように、制御部48は、ミラー454の揺動角が目標角度θ2となったら、光出射部42からパターン光PLを形成するためのレーザー光Lを出射しないタイミングで、V/P関係を更新するためのレーザー光Lを出射するよう制御する。これにより、パターン光PLの投影を邪魔することなく、V/P関係を更新することができる。
Further, as described above, when the swing angle of the
また、前述したように、パターン光PLは、縞状であり、パターン光PLの縞Bの数をmとし、V/P関係を取得する際のミラー454の揺動の1周期あたりのレーザー光Lの出射回数をnとしたとき、n≦mである。これにより、V/P関係を取得する際においても、ロボット2と共存する人の安全をより確実に確保することができる。
Further, as described above, the pattern light PL is striped, the number of stripes B of the pattern light PL is m, and the laser light per cycle of the swing of the
また、前述したように、対象物Wの三次元計測方法は、レーザー光Lを出射する光出射部42と、光出射部42から出射されるレーザー光Lの強度を検出する光強度検出部46と、レーザー光Lを反射するミラー454を備え、ミラー454の揺動によってレーザー光Lを走査する光走査部45と、ミラー454の揺動角を検出する揺動角検出部43と、対象物Wを撮像する撮像部47と、を備え、光走査部45で走査されたレーザー光Lにより形成されるパターン光PLを対象物Wに投影し、パターン光PLが投影されている対象物Wを撮像部47により撮像することにより、対象物Wの三次元計測を行う方法である。このような方法は、ミラー454の駆動を開始してミラー454の揺動角が閾値角度θ1となったら、光出射部42に駆動電圧Vを印加してレーザー光Lを出射させ、光強度検出部46の検出結果に基づいて、駆動電圧Vの大きさとレーザー光Lの強度との関係であるV/P関係を取得する工程と、ミラー454の揺動角が閾値角度θ1より大きい目標角度θ2となったら、V/P関係に基づいて光出射部42の駆動を制御することにより、対象物Wにパターン光PLを投影する工程と、を有する。
Further, as described above, in the three-dimensional measurement method of the object W, the
このような構成の三次元計測方法によれば、スタンバイ状態からの復帰直後であっても、光出射部42から安定した強度のレーザー光Lを出射することができる。そのため、目標角度θ2となってから速やかにかつ精度よく対象物Wの三次元計測を行うことができる。つまり、ロボット2による作業全体のサイクルタイムの延長を招くことなく、対象物Wの三次元計測を高精度に行うことができる。
According to the three-dimensional measurement method having such a configuration, the laser beam L having a stable intensity can be emitted from the
また、前述したように、対象物Wの三次元計測方法では、V/P関係を取得する工程は、光出射部42に異なる大きさの駆動電圧Vを印加して、光出射部42から異なる強度Pのレーザー光Lを出射させる。特に、本実施形態では、第1駆動電圧V1を光出射部42に印加して、強度P1のレーザー光Lを出射させ、次に、第1駆動電圧V1よりも大きい第2駆動電圧V2を光出射部42に印加し、強度P2のレーザー光Lを出射させている。これにより、第1駆動電圧V1と強度P1との関係と、第2駆動電圧V2と強度P2との関係と、に基づいて、簡単にV/P関係を示す近似式Qを求めることができる。そのため、強度P1、P2以外の強度のレーザー光Lについても、精度よく、光出射部42から出射させることができ、パターン光PLを精度よく形成することができる。
Further, as described above, in the three-dimensional measurement method of the object W, the step of acquiring the V / P relationship is different from the
また、前述したように、対象物Wの三次元計測方法では、ミラー454の揺動角が目標角度θ2となったら、光出射部42からパターン光PLを形成するためのレーザー光Lを出射しないタイミングで、V/P関係を更新するためのレーザー光Lを出射する。これにより、パターン光PLの投影を邪魔することなく、V/P関係を更新することができる。
Further, as described above, in the three-dimensional measurement method of the object W, when the swing angle of the
また、前述したように、対象物Wの三次元計測方法では、パターン光PLは、縞状であり、パターン光PLの縞の数をmとし、V/P関係を取得する際のミラー454の揺動の1周期あたりのレーザー光Lの出射回数をnとしたとき、n≦mとなるよう制御する。これにより、V/P関係を取得する際においても、ロボット2と共存する人の安全をより確実に確保することができる。
Further, as described above, in the three-dimensional measurement method of the object W, the pattern light PL is striped, the number of stripes of the pattern light PL is m, and the
<第2実施形態>
図9は、本発明の第2実施形態に係るロボットシステムでの三次元計測の開始タイミングを示すタイミングチャートである。
<Second Embodiment>
FIG. 9 is a timing chart showing the start timing of three-dimensional measurement in the robot system according to the second embodiment of the present invention.
本実施形態は、V/P関係を取得する方法が異なること以外は、前述した第1実施形態と同様である。そのため、以下の説明では、本実施形態に関し、前述した実施形態との相違点を中心に説明し、同様の事項に関してはその説明を省略する。また、図9において、前述した実施形態と同様の構成については、同一符号を付している。 The present embodiment is the same as the above-described first embodiment except that the method for acquiring the V / P relationship is different. Therefore, in the following description, the present embodiment will be mainly described with respect to the differences from the above-described embodiment, and the description of the same matters will be omitted. Further, in FIG. 9, the same reference numerals are given to the same configurations as those in the above-described embodiment.
本実施形態のロボットシステム1では、図9に示すように、閾値角度θ1として、第1閾値角度θ11と、第1閾値角度θ11よりも大きい第2閾値角度θ12と、が設定されている。そして、駆動制御部483は、光走査部45の駆動を開始して、ミラー454の揺動角が第1閾値角度θ11となったら、光出射部42に第1駆動電圧V1を印加してレーザー光Lを出射し、その際に出射されるレーザー光Lの強度P1を光強度検出部46から出力される光強度情報Ipに基づいて測定する。また、駆動制御部483は、ミラー454の揺動角が第2閾値角度θ12となったら、第1駆動電圧V1よりも大きい第2駆動電圧V2を光出射部42に印加し、その際に出射されるレーザー光Lの強度P2を光強度検出部46から出力される光強度情報Ipに基づいて測定する。そして、駆動制御部483は、これらの測定結果に基づいてV/P関係を取得する。
In the
このような構成によれば、例えば、前述した第1実施形態と比べて、より早く、V/P関係を取得するためのレーザー光Lの出射を開始することができる。そのため、より確実に、ミラー454が目標角度θ2となる前にV/P関係を取得することができ、目標角度θ2となったら直ぐに、対象物Wの三次元計測を行うことができる。また、ミラー454の揺動角が小さい程、光出射部42に印加する駆動電圧Vを小さくしているため、揺動角が小さくても、ロボット2と共存する人の眼に入り得るレーザー光Lの単位時間当たりのエネルギー量が十分に小さくなる。そのため、共存する人の安全性を十分に確保することができる。
According to such a configuration, for example, the emission of the laser beam L for acquiring the V / P relationship can be started earlier than in the first embodiment described above. Therefore, the V / P relationship can be acquired more reliably before the
このように、本実施形態の三次元計測装置4では、閾値角度θ1は、第1閾値角度θ11と、第1閾値角度θ11よりも大きい第2閾値角度θ12と、を有する。そして、制御部48は、ミラー454の揺動角が第1閾値角度θ11となったら、光出射部42に第1駆動電圧V1を印加してレーザー光Lを出射し、ミラー454の揺動角が第2閾値角度θ12となったら、光出射部42に第2駆動電圧V2を印加してレーザー光Lを出射し、第1駆動電圧V1を印加したときのレーザー光Lの強度P1と、第2駆動電圧V2を印加したときのレーザー光Lの強度P2と、に基づいてV/P関係を取得するよう制御する。
As described above, in the three-dimensional measuring device 4 of the present embodiment, the threshold angle θ1 has a first threshold angle θ11 and a second threshold angle θ12 larger than the first threshold angle θ11. Then, when the swing angle of the
これにより、より早く、V/P関係を取得するためのレーザー光Lの出射を開始することができる。そのため、より確実に、目標角度θ2となる前に、V/P関係を取得することができ、目標角度θ2となったら直ぐに対象物Wの三次元計測を行うことができる。また、ミラー454の揺動角が小さい程、光出射部42に印加する駆動電圧Vを小さくすることにより、揺動角が小さくても、ロボット2と共存する人の眼に入り得るレーザー光の単位時間当たりのエネルギー量を十分に小さくすることができる。そのため、共存する人の安全性を十分に確保することができる。
As a result, the emission of the laser beam L for acquiring the V / P relationship can be started earlier. Therefore, the V / P relationship can be acquired more reliably before the target angle θ2 is reached, and the three-dimensional measurement of the object W can be performed immediately after the target angle θ2 is reached. Further, the smaller the swing angle of the
また、本実施形態の対象物Wの三次元計測方法では、閾値角度θ1は、第1閾値角度θ11と、第1閾値角度θ11よりも大きい第2閾値角度θ12と、を有する。そして、ミラー454の揺動角が第1閾値角度θ11となったら、光出射部42に第1駆動電圧V1を印加してレーザー光Lを出射し、ミラー454の揺動角が第2閾値角度θ12となったら、光出射部42に第2駆動電圧V2を印加してレーザー光Lを出射し、第1駆動電圧V1を印加したときのレーザー光Lの強度P1と、第2駆動電圧V2を印加したときのレーザー光Lの強度P2と、に基づいてV/P関係を取得する。
Further, in the three-dimensional measurement method of the object W of the present embodiment, the threshold angle θ1 has a first threshold angle θ11 and a second threshold angle θ12 larger than the first threshold angle θ11. Then, when the swing angle of the
これにより、より早く、V/P関係を取得するためのレーザー光Lの出射を開始することができる。そのため、より確実に、目標角度θ2となる前に、V/P関係を取得することができ、目標角度θ2となったら直ぐに対象物Wの三次元計測を行うことができる。また、ミラー454の揺動角が小さい程、光出射部42に印加する駆動電圧Vを小さくすることにより、揺動角が小さくても、ロボット2と共存する人の眼に入り得るレーザー光の単位時間当たりのエネルギー量を十分に小さくすることができる。そのため、共存する人の安全性を十分に確保することができる。
As a result, the emission of the laser beam L for acquiring the V / P relationship can be started earlier. Therefore, the V / P relationship can be acquired more reliably before the target angle θ2 is reached, and the three-dimensional measurement of the object W can be performed immediately after the target angle θ2 is reached. Further, the smaller the swing angle of the
このような第2実施形態によっても、前述した第1実施形態と同様の効果を発揮することができる。 Even with such a second embodiment, the same effect as that of the first embodiment described above can be exhibited.
以上、本発明の三次元計測方法、三次元計測装置およびロボットシステムを図示の実施形態に基づいて説明したが、本発明は、これに限定されるものではなく、各部の構成は、同様の機能を有する任意の構成のものに置換することができる。また、本発明に、他の任意の構成物が付加されていてもよい。 The three-dimensional measurement method, the three-dimensional measurement device, and the robot system of the present invention have been described above based on the illustrated embodiments, but the present invention is not limited to this, and the configurations of each part have the same functions. Can be replaced with any configuration having. Further, any other constituents may be added to the present invention.
1…ロボットシステム、2…ロボット、21…ベース、22…ロボットアーム、221…第1アーム、222…第2アーム、223…第3アーム、224…第4アーム、225…第5アーム、226…第6アーム、24…エンドエフェクター、251…第1駆動装置、252…第2駆動装置、253…第3駆動装置、254…第4駆動装置、255…第5駆動装置、256…第6駆動装置、4…三次元計測装置、40…シェード部、41…投影部、42…光出射部、43…揺動角検出部、431…ピエゾ抵抗部、44…光学系、441…集光レンズ、442…ロッドレンズ、45…光走査部、451…可動部、452…支持部、453…梁部、454…ミラー、455…永久磁石、456…コイル、46…光強度検出部、47…撮像部、471…カメラ、472…撮像素子、473…集光レンズ、48…制御部、481…情報受付部、483…駆動制御部、49…計測部、5…ロボット制御装置、6…ホストコンピューター、B…縞、Ip…光強度情報、Iθ…角度情報、J…揺動軸、L…レーザー光、O1…第1軸、O2…第2軸、O3…第3軸、O4…第4軸、O5…第5軸、O6…第6軸、P、P1、P2…強度、PL…パターン光、PL1…第1パターン光、PL2…第2パターン光、PL3…第3パターン光、PL4…第4パターン光、Q…式、S1…第1撮像ステップ、S2…第2撮像ステップ、S3…第3撮像ステップ、S4…第4撮像ステップ、V…駆動電圧、V1…第1駆動電圧、V2…第2駆動電圧、W…対象物、f…周期、f1…第1周期、f2…第2周期、f3…第3周期、f4…第4周期、θ1…閾値角度、θ11…第1閾値角度、θ12…第2閾値角度、θ2…目標角度 1 ... Robot system, 2 ... Robot, 21 ... Base, 22 ... Robot arm, 221 ... 1st arm, 222 ... 2nd arm, 223 ... 3rd arm, 224 ... 4th arm, 225 ... 5th arm, 226 ... 6th arm, 24 ... End effector, 251 ... 1st drive device, 252 ... 2nd drive device, 253 ... 3rd drive device, 254 ... 4th drive device, 255 ... 5th drive device, 256 ... 6th drive device 4, 4 ... 3D measuring device, 40 ... Shade unit, 41 ... Projection unit, 42 ... Light emission unit, 43 ... Shaking angle detection unit, 431 ... Piezo resistance unit, 44 ... Optical system, 441 ... Condensing lens, 442 ... Rod lens, 45 ... Optical scanning unit, 451 ... Movable part, 452 ... Support part, 453 ... Beam part, 454 ... Mirror, 455 ... Permanent magnet, 456 ... Coil, 46 ... Light intensity detection unit, 47 ... Imaging unit, 471 ... Camera, 472 ... Imaging element, 473 ... Condensing lens, 48 ... Control unit, 481 ... Information reception unit, 483 ... Drive control unit, 49 ... Measurement unit, 5 ... Robot control device, 6 ... Host computer, B ... Stripes, Ip ... Light intensity information, Iθ ... Angle information, J ... Swinging axis, L ... Laser light, O1 ... 1st axis, O2 ... 2nd axis, O3 ... 3rd axis, O4 ... 4th axis, O5 ... 5th axis, O6 ... 6th axis, P, P1, P2 ... Intensity, PL ... Pattern light, PL1 ... 1st pattern light, PL2 ... 2nd pattern light, PL3 ... 3rd pattern light, PL4 ... 4th pattern light , Q ... Equation, S1 ... 1st imaging step, S2 ... 2nd imaging step, S3 ... 3rd imaging step, S4 ... 4th imaging step, V ... drive voltage, V1 ... 1st drive voltage, V2 ... 2nd drive Voltage, W ... Object, f ... Cycle, f1 ... 1st cycle, f2 ... 2nd cycle, f3 ... 3rd cycle, f4 ... 4th cycle, θ1 ... Threshold angle, θ11 ... 1st threshold angle, θ12 ... 2 threshold angle, θ2 ... target angle
Claims (11)
前記光出射部から出射される前記レーザー光の強度を検出する光強度検出部と、
前記レーザー光を反射するミラーを備え、前記ミラーの揺動によって前記レーザー光を走査する光走査部と、
前記ミラーの揺動角を検出する揺動角検出部と、
撮像部と、を備え、
前記光走査部で走査された前記レーザー光により形成されるパターン光を対象物に投影し、前記パターン光が投影されている前記対象物を前記撮像部により撮像することにより、前記対象物の三次元計測を行う三次元計測方法であって、
前記ミラーの駆動を開始して前記ミラーの揺動角が閾値角度となったら、前記光出射部に駆動電圧を印加して前記レーザー光を出射させ、前記光強度検出部の検出結果に基づいて、前記駆動電圧の大きさと前記レーザー光の強度との関係を取得する工程と、
前記ミラーの揺動角が前記閾値角度より大きい目標角度となったら、前記関係に基づいて前記光出射部の駆動を制御することにより、前記対象物に前記パターン光を投影する工程と、を有することを特徴とする三次元計測方法。 A light emitting part that emits laser light and
A light intensity detecting unit that detects the intensity of the laser light emitted from the light emitting unit,
An optical scanning unit that includes a mirror that reflects the laser beam and scans the laser beam by swinging the mirror.
A swing angle detection unit that detects the swing angle of the mirror,
Equipped with an imaging unit
The pattern light formed by the laser beam scanned by the optical scanning unit is projected onto the object, and the object on which the pattern light is projected is imaged by the imaging unit to create a tertiary of the object. It is a three-dimensional measurement method that performs original measurement.
When the driving of the mirror is started and the swing angle of the mirror reaches the threshold angle, a driving voltage is applied to the light emitting unit to emit the laser light, and based on the detection result of the light intensity detecting unit. , The step of acquiring the relationship between the magnitude of the driving voltage and the intensity of the laser beam, and
When the swing angle of the mirror becomes a target angle larger than the threshold angle, the step of projecting the pattern light onto the object by controlling the drive of the light emitting unit based on the relationship is provided. A three-dimensional measurement method characterized by this.
前記光出射部に異なる大きさの前記駆動電圧を印加し、
前記光出射部から異なる強度の前記レーザー光を出射させる請求項1に記載の三次元計測方法。 The process of acquiring the relationship is
By applying the driving voltage of different magnitudes to the light emitting portion,
The three-dimensional measurement method according to claim 1, wherein the laser beam having a different intensity is emitted from the light emitting portion.
前記ミラーの揺動角が前記第1閾値角度となったら、前記光出射部に第1駆動電圧を印加して前記レーザー光を出射し、
前記ミラーの揺動角が前記第2閾値角度となったら、前記光出射部に第2駆動電圧を印加して前記レーザー光を出射し、
前記第1駆動電圧を印加したときの前記レーザー光の強度と、前記第2駆動電圧を印加したときの前記レーザー光の強度と、に基づいて前記関係を取得する請求項2に記載の三次元計測方法。 The threshold angle has a first threshold angle and a second threshold angle larger than the first threshold angle.
When the swing angle of the mirror reaches the first threshold angle, a first drive voltage is applied to the light emitting portion to emit the laser light.
When the swing angle of the mirror reaches the second threshold angle, a second drive voltage is applied to the light emitting portion to emit the laser light.
The three-dimensional aspect according to claim 2, wherein the relationship is acquired based on the intensity of the laser light when the first drive voltage is applied and the intensity of the laser light when the second drive voltage is applied. Measurement method.
前記パターンの縞の数をmとし、
前記関係を取得する際の前記ミラーの揺動の1周期あたりの前記レーザー光の出射回数をnとしたとき、
n≦mである請求項4に記載の三次元計測方法。 The pattern is striped and
Let m be the number of stripes in the pattern.
When the number of times the laser beam is emitted per cycle of the swing of the mirror when acquiring the relationship is n.
The three-dimensional measurement method according to claim 4, wherein n ≦ m.
前記光出射部から出射される前記レーザー光の強度を検出する光強度検出部と、
前記レーザー光を反射するミラーを備え、前記ミラーの揺動によって前記レーザー光を走査する光走査部と、
前記ミラーの揺動角を検出する揺動角検出部と、
撮像部と、
制御部と、を備え、
前記光走査部で走査された前記レーザー光により形成されるパターン光を対象物に投影し、前記パターン光が投影されている前記対象物を前記撮像部により撮像することにより、前記対象物の三次元計測を行う三次元計測装置であって、
前記制御部は、
前記ミラーの駆動を開始して前記ミラーの揺動角が閾値角度となったら、前記光出射部に駆動電圧を印加して前記レーザー光を出射させ、前記光強度検出部の検出結果に基づいて、前記駆動電圧の大きさと前記レーザー光の強度との関係を取得し、
前記ミラーの揺動角が前記閾値角度より大きい目標角度となったら、前記関係に基づいて前記光出射部の駆動を制御することにより、前記対象物に前記パターン光を投影するよう制御することを特徴とする三次元計測装置。 A light emitting part that emits laser light and
A light intensity detecting unit that detects the intensity of the laser light emitted from the light emitting unit,
An optical scanning unit that includes a mirror that reflects the laser beam and scans the laser beam by swinging the mirror.
A swing angle detection unit that detects the swing angle of the mirror,
Imaging unit and
With a control unit
A pattern light formed by the laser beam scanned by the optical scanning unit is projected onto an object, and the object on which the pattern light is projected is imaged by the imaging unit to create a three-dimensional object. It is a three-dimensional measuring device that performs original measurement.
The control unit
When the driving of the mirror is started and the swing angle of the mirror reaches the threshold angle, a driving voltage is applied to the light emitting unit to emit the laser light, and based on the detection result of the light intensity detecting unit. , Obtain the relationship between the magnitude of the drive voltage and the intensity of the laser beam,
When the swing angle of the mirror becomes a target angle larger than the threshold angle, the pattern light is projected onto the object by controlling the driving of the light emitting unit based on the relationship. A featured three-dimensional measuring device.
前記光出射部に異なる大きさの前記駆動電圧を印加し、
前記光出射部から強度の異なる前記レーザー光を出射させる請求項6に記載の三次元計測装置。 When the control unit acquires the relationship,
By applying the driving voltage of different magnitudes to the light emitting portion,
The three-dimensional measuring device according to claim 6, wherein the laser light having a different intensity is emitted from the light emitting unit.
前記制御部は、
前記ミラーの揺動角が前記第1閾値角度となったら、前記光出射部に第1駆動電圧を印加して前記レーザー光を出射し、
前記ミラーの揺動角が前記第2閾値角度となったら、前記光出射部に第2駆動電圧を印加して前記レーザー光を出射し、
前記第1駆動電圧を印加したときの前記レーザー光の強度と、前記第2駆動電圧を印加したときの前記レーザー光の強度と、に基づいて前記関係を取得するよう制御する請求項7に記載の三次元計測装置。 The threshold angle has a first threshold angle and a second threshold angle larger than the first threshold angle.
The control unit
When the swing angle of the mirror reaches the first threshold angle, a first drive voltage is applied to the light emitting portion to emit the laser light.
When the swing angle of the mirror reaches the second threshold angle, a second drive voltage is applied to the light emitting portion to emit the laser light.
The seventh aspect of claim 7 is that the relationship is controlled to be acquired based on the intensity of the laser beam when the first drive voltage is applied and the intensity of the laser light when the second drive voltage is applied. Three-dimensional measuring device.
前記パターンの縞の数をmとし、
前記関係を取得する際の前記ミラーの揺動の1周期あたりの前記レーザー光の出射回数をnとしたとき、
n≦mとなるよう制御する請求項9に記載の三次元計測装置。 The pattern is striped and
Let m be the number of stripes in the pattern.
When the number of times the laser beam is emitted per cycle of the swing of the mirror when acquiring the relationship is n.
The three-dimensional measuring device according to claim 9, wherein the three-dimensional measuring device is controlled so that n ≦ m.
対象物の三次元計測を行う三次元計測装置と、
前記三次元計測装置による計測結果に基づいて前記ロボットの動作を制御するロボット制御装置と、を備え、
前記三次元計測装置は、
レーザー光を出射する光出射部と、
前記光出射部から出射される前記レーザー光の強度を検出する光強度検出部と、
前記レーザー光を反射するミラーを備え、前記ミラーの揺動によって前記レーザー光を走査する光走査部と、
前記ミラーの揺動角を検出する揺動角検出部と、
撮像部と、
制御部と、を備え、
前記光走査部で走査された前記レーザー光により形成されるパターン光を前記対象物に投影し、前記パターン光が投影されている前記対象物を前記撮像部により撮像することにより、前記対象物の三次元計測を行い、
前記制御部は、
前記ミラーの駆動を開始して前記ミラーの揺動角が閾値角度となったら、前記光出射部に駆動電圧を印加して前記レーザー光を出射させ、前記光強度検出部の検出結果に基づいて、前記駆動電圧の大きさと前記レーザー光の強度との関係を求め、
前記ミラーの揺動角が前記閾値角度より大きい目標角度となったら、前記関係に基づいて前記光出射部の駆動を制御することにより、前記対象物に前記パターン光を投影するよう制御することを特徴とするロボットシステム。 A robot equipped with a robot arm and
A three-dimensional measuring device that performs three-dimensional measurement of an object,
A robot control device that controls the operation of the robot based on the measurement result of the three-dimensional measuring device is provided.
The three-dimensional measuring device is
A light emitting part that emits laser light and
A light intensity detecting unit that detects the intensity of the laser light emitted from the light emitting unit,
An optical scanning unit that includes a mirror that reflects the laser beam and scans the laser beam by swinging the mirror.
A swing angle detection unit that detects the swing angle of the mirror,
Imaging unit and
With a control unit
By projecting the pattern light formed by the laser beam scanned by the optical scanning unit onto the object and imaging the object on which the pattern light is projected by the imaging unit, the object is imaged. Perform three-dimensional measurement
The control unit
When the driving of the mirror is started and the swing angle of the mirror reaches the threshold angle, a driving voltage is applied to the light emitting unit to emit the laser light, and based on the detection result of the light intensity detecting unit. , The relationship between the magnitude of the driving voltage and the intensity of the laser beam was obtained.
When the swing angle of the mirror becomes a target angle larger than the threshold angle, the driving of the light emitting unit is controlled based on the relationship to control the pattern light to be projected onto the object. A featured robot system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019056578A JP2020159730A (en) | 2019-03-25 | 2019-03-25 | Three-dimensional measurement method, three-dimensional measurement device, and robot system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019056578A JP2020159730A (en) | 2019-03-25 | 2019-03-25 | Three-dimensional measurement method, three-dimensional measurement device, and robot system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020159730A true JP2020159730A (en) | 2020-10-01 |
Family
ID=72642780
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019056578A Pending JP2020159730A (en) | 2019-03-25 | 2019-03-25 | Three-dimensional measurement method, three-dimensional measurement device, and robot system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2020159730A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021148670A (en) * | 2020-03-19 | 2021-09-27 | 株式会社リコー | Measurement method, optical device, measurement device, moving body, robot, electronic instrument, and shape formation device |
CN114526689A (en) * | 2022-02-03 | 2022-05-24 | 上海研视信息科技有限公司 | Steel coil end face scanning system based on 3D imaging technology |
-
2019
- 2019-03-25 JP JP2019056578A patent/JP2020159730A/en active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021148670A (en) * | 2020-03-19 | 2021-09-27 | 株式会社リコー | Measurement method, optical device, measurement device, moving body, robot, electronic instrument, and shape formation device |
CN114526689A (en) * | 2022-02-03 | 2022-05-24 | 上海研视信息科技有限公司 | Steel coil end face scanning system based on 3D imaging technology |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110645918B (en) | Three-dimensional measuring device, control device, and robot system | |
JP7172305B2 (en) | Three-dimensional measuring device and robot system | |
US7184150B2 (en) | Laser digitizer system for dental applications | |
CN110640749B (en) | Robot control device and robot system | |
US10837759B2 (en) | Three-dimensional measuring device, controller, and robot system | |
JP7409532B2 (en) | Optical equipment, measuring equipment, robots, electronic equipment, moving objects, and modeling equipment | |
JP2014159989A (en) | Object detector and robot system | |
JP2017520755A (en) | 3D coarse laser scanner | |
JP2016035403A (en) | Laser ranging device | |
JP7379859B2 (en) | Light sources, projection devices, measurement devices, robots, electronic devices, moving objects, and modeling devices | |
JP2020159730A (en) | Three-dimensional measurement method, three-dimensional measurement device, and robot system | |
KR20180092738A (en) | Apparatus and method for obtaining depth information using digital micro-mirror device | |
JP7310218B2 (en) | Three-dimensional measuring method, three-dimensional measuring device and robot system | |
JP2020159731A (en) | Three-dimensional measurement method, three-dimensional measurement device, and robot system | |
JP2020159732A (en) | Three-dimensional measurement method, three-dimensional measurement device, and robot system | |
JP2022098072A (en) | Three-dimensional shape measuring method, three-dimensional shape measuring device, and robot system | |
US12030243B2 (en) | Measuring apparatus, movable apparatus, robot, electronic device, fabricating apparatus, and measuring method | |
US20220026538A1 (en) | Distance Measuring Device And Robot | |
JP7310481B2 (en) | Depth sensor control method, depth sensor and robot system | |
JP7268553B2 (en) | Rocking angle control method, three-dimensional measuring device and robot system | |
CN111750800B (en) | Three-dimensional measuring device and robot system | |
JP2022184389A (en) | Three-dimensional shape measurement method, three-dimensional shape measurement device and robot system | |
JP2021148670A (en) | Measurement method, optical device, measurement device, moving body, robot, electronic instrument, and shape formation device | |
JP2022098073A (en) | Three-dimensional shape measuring method, three-dimensional shape measuring device, and robot system | |
JP2023003591A (en) | Calibration method and robot system |