JP6919622B2 - Control systems, control methods, and control programs - Google Patents
Control systems, control methods, and control programs Download PDFInfo
- Publication number
- JP6919622B2 JP6919622B2 JP2018085121A JP2018085121A JP6919622B2 JP 6919622 B2 JP6919622 B2 JP 6919622B2 JP 2018085121 A JP2018085121 A JP 2018085121A JP 2018085121 A JP2018085121 A JP 2018085121A JP 6919622 B2 JP6919622 B2 JP 6919622B2
- Authority
- JP
- Japan
- Prior art keywords
- target
- moving
- moving mechanism
- time
- visual sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 33
- 230000007246 mechanism Effects 0.000 claims description 112
- 230000033001 locomotion Effects 0.000 claims description 108
- 230000000007 visual effect Effects 0.000 claims description 64
- 238000003384 imaging method Methods 0.000 claims description 45
- 238000012937 correction Methods 0.000 claims description 19
- 230000001133 acceleration Effects 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 230000006870 function Effects 0.000 description 24
- 238000012545 processing Methods 0.000 description 24
- 230000008569 process Effects 0.000 description 22
- 238000004891 communication Methods 0.000 description 14
- 230000015654 memory Effects 0.000 description 13
- 238000005259 measurement Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 239000000872 buffer Substances 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000012887 quadratic function Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 238000009826 distribution Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 238000012890 quintic function Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D3/00—Control of position or direction
- G05D3/12—Control of position or direction using feedback
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
- B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Control Of Position Or Direction (AREA)
- Manipulator (AREA)
Description
本開示は、視覚センサによって計測されたワークの位置に基づいて、ワークの位置決めを行なうための技術に関する。 The present disclosure relates to a technique for positioning a work based on the position of the work measured by a visual sensor.
FA(ファクトリー オートメーション)において、対象物の位置を目標位置に合わせる技術(位置決め技術)が各種実用化されている。この際、対象物の位置と目標位置との偏差(距離)を計測する方法として、視覚センサによって撮像された画像を用いる方法がある。 In FA (factory automation), various technologies (positioning technology) for aligning the position of an object with a target position have been put into practical use. At this time, as a method of measuring the deviation (distance) between the position of the object and the target position, there is a method of using an image captured by a visual sensor.
特開2017−24134号公報(特許文献1)には、可動台と、可動台を移動させる移動機構と、可動台に載置されたワークを繰り返し撮像し、当該ワークの位置を繰り返し検出する視覚センサとを備えるワーク位置決め装置が開示されている。ワーク位置決め装置は、視覚センサによって位置が検出されるごとに、検出された位置と目標位置との差を算出し、当該差が許容範囲内であると判定されたときに、可動台の移動を停止する。ワーク位置決め装置は、可動台の移動停止後に視覚センサによって検出された位置と目標位置との差を算出し、算出された差が許容範囲内であるか否かを判定する。差が許容範囲外であると判定されると、当該差を小さくする可動台の移動方向が決定され、決定された移動方向へ可動台を移動させるように、移動機構が制御される。 Japanese Patent Laying-Open No. 2017-24134 (Patent Document 1) describes a visual sense in which a movable table, a moving mechanism for moving the movable table, and a work mounted on the movable table are repeatedly imaged and the position of the work is repeatedly detected. A work positioning device including a sensor is disclosed. The work positioning device calculates the difference between the detected position and the target position each time the position is detected by the visual sensor, and when it is determined that the difference is within the permissible range, the movable table is moved. Stop. The work positioning device calculates the difference between the position detected by the visual sensor and the target position after the movable table has stopped moving, and determines whether or not the calculated difference is within the permissible range. When it is determined that the difference is out of the permissible range, the moving direction of the movable table that reduces the difference is determined, and the moving mechanism is controlled so as to move the movable table in the determined moving direction.
視覚センサによってワークの実位置が計測される間隔は、移動機構に指令値を出力する間隔よりも短い。そのため、より滑らかに移動機構を駆動するためには、視覚センサがワークの実位置を計測してから次に実位置を計測するまでの間において、移動機構に出力する指令値を何らかの手段で補間する必要がある。 The interval at which the actual position of the work is measured by the visual sensor is shorter than the interval at which the command value is output to the moving mechanism. Therefore, in order to drive the moving mechanism more smoothly, the command value output to the moving mechanism is interpolated by some means between the time when the visual sensor measures the actual position of the work and the time when the actual position is measured next. There is a need to.
本開示は上述のような問題点を解決するためになされたものであって、ある局面における目的は、視覚センサの計測位置に基づいて駆動される移動機構をより滑らかに駆動することが可能な制御システムを提供することである。他の局面における目的は、視覚センサの計測位置に基づいて駆動される移動機構をより滑らかに駆動することが可能な制御方法を提供することである。他の局面における目的は、視覚センサの計測位置に基づいて駆動される移動機構をより滑らかに駆動することが可能な制御プログラムを提供することである。 The present disclosure has been made to solve the above-mentioned problems, and an object in a certain aspect is to be able to drive a moving mechanism driven based on a measurement position of a visual sensor more smoothly. It is to provide a control system. An object in another aspect is to provide a control method capable of more smoothly driving a moving mechanism driven based on the measurement position of the visual sensor. An object in another aspect is to provide a control program capable of more smoothly driving a moving mechanism driven based on the measurement position of the visual sensor.
本開示の一例では、制御システムは、対象物を移動させるための移動機構と、撮像指示を受け付けたことに基づいて上記対象物を撮像し、撮像により得られた画像から上記対象物の実位置を計測するための視覚センサと、上記実位置から所定の到達目標位置に上記対象物を移動させるための、上記移動機構の必要移動距離を算出するための算出部と、上記必要移動距離と時刻とを少なくとも説明変数とし、上記移動機構の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、上記撮像指示が上記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するための位置決定部と、上記位置決定部によって決定される目標位置に上記移動機構を移動させるための移動制御部とを備える。 In one example of the present disclosure, the control system images the object based on the movement mechanism for moving the object and the reception of the imaging instruction, and the actual position of the object is obtained from the image obtained by the imaging. A visual sensor for measuring the above, a calculation unit for calculating the required movement distance of the movement mechanism for moving the object from the actual position to a predetermined arrival target position, and the required movement distance and time. Is defined as a predetermined interval shorter than the interval at which the imaging instruction is output to the visual sensor based on the target trajectory represented by the multi-order function with the target position of the moving mechanism as the objective variable. Each control cycle includes a position determination unit for determining a target position corresponding to the current time, and a movement control unit for moving the movement mechanism to the target position determined by the position determination unit.
この開示によれば、上記制御システムは、視覚センサが対象物の実位置を計測してから次に対象物の実位置を計測するまでの間において、移動機構の目標位置を補間でき、移動機構をより滑らかに駆動することが可能になる。 According to this disclosure, the control system can interpolate the target position of the moving mechanism between the time when the visual sensor measures the actual position of the object and the next time when the actual position of the object is measured. Can be driven more smoothly.
本開示の一例では、上記多次関数は、5次以上の関数である。
この開示によれば、上記多次関数が5次以上の関数で規定されることにより、移動機構の目標位置がより滑らかになる。
In one example of the present disclosure, the multi-order function is a function of degree 5 or higher.
According to this disclosure, the target position of the moving mechanism becomes smoother because the multiple-order function is defined by a function of the fifth order or higher.
本開示の一例では、上記位置決定部は、上記移動機構の加速度が予め定められた最大加速度を超えないように、上記目標軌道を生成する。 In one example of the present disclosure, the positioning unit generates the target trajectory so that the acceleration of the moving mechanism does not exceed a predetermined maximum acceleration.
この開示によれば、上記制御システムは、移動機構の速度が急に変化することを抑制することができる。 According to this disclosure, the control system can suppress a sudden change in the speed of the moving mechanism.
本開示の一例では、上記位置決定部は、上記視覚センサが上記対象物の実位置を計測する度に上記目標軌道を生成し、新たに生成された上記目標軌道で前回に生成された上記目標軌道を更新する。 In one example of the present disclosure, the position-determining unit generates the target trajectory each time the visual sensor measures the actual position of the object, and the target previously generated by the newly generated target trajectory. Update the orbit.
この開示によれば、目標軌道の誤差は、視覚センサの撮像周期ごとに修正される。
本開示の一例では、上記位置決定部は、上記目標軌道の更新前後で、上記移動機構の速度が変化しないように新たな上記目標軌道を生成する。
According to this disclosure, the error of the target trajectory is corrected for each imaging cycle of the visual sensor.
In one example of the present disclosure, the position-determining unit generates a new target trajectory so that the speed of the moving mechanism does not change before and after the update of the target trajectory.
この開示によれば、目標軌道を更新する過程で、移動機構上における対象物のすべりや、移動機構の位置決め後における残留振動が抑制され、結果として、対象物のアライメント時間が短縮される。 According to this disclosure, in the process of updating the target trajectory, slippage of the object on the moving mechanism and residual vibration after positioning of the moving mechanism are suppressed, and as a result, the alignment time of the object is shortened.
本開示の一例では、上記制御システムは、上記制御周期ごとに上記移動機構の実位置を検出するための検出部と、上記目標軌道の更新のタイミングにおいて上記検出部によって検出された実位置と、上記タイミングにおける上記移動機構の目標位置との位置偏差で、上記必要移動距離を補正するための補正部とをさらに備える。 In one example of the present disclosure, the control system includes a detection unit for detecting the actual position of the moving mechanism for each control cycle, and an actual position detected by the detection unit at the timing of updating the target trajectory. A correction unit for correcting the required movement distance by the position deviation from the target position of the movement mechanism at the timing is further provided.
この開示によれば、目標軌道を更新する過程で、移動機構の位置の誤差が吸収され、移動機構の速度が急変することが防止される。その結果、対象物のすべりや、移動機構の位置決め後における残留振動が抑制され、結果として、対象物のアライメント時間が短縮される。 According to this disclosure, in the process of updating the target trajectory, the error in the position of the moving mechanism is absorbed, and the speed of the moving mechanism is prevented from suddenly changing. As a result, slippage of the object and residual vibration after positioning of the moving mechanism are suppressed, and as a result, the alignment time of the object is shortened.
本開示の他の例では、対象物を移動させるための移動機構の制御方法は、撮像指示を視覚センサに出力し、上記対象物を撮像して得られた画像から上記対象物の実位置を上記視覚センサに計測させるステップと、上記実位置から所定の到達目標位置に上記対象物を移動させるための、上記移動機構の必要移動距離を算出するステップと、上記必要移動距離と時刻とを少なくとも説明変数とし、上記移動機構の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、上記撮像指示が上記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、上記決定するステップで決定される目標位置に上記移動機構を移動させるステップとを備える。 In another example of the present disclosure, the control method of the moving mechanism for moving the object is to output an imaging instruction to a visual sensor and obtain the actual position of the object from the image obtained by imaging the object. At least the step of causing the visual sensor to measure, the step of calculating the required movement distance of the movement mechanism for moving the object from the actual position to the predetermined arrival target position, and the required movement distance and time. Every predetermined control cycle shorter than the interval at which the imaging instruction is output to the visual sensor based on the target trajectory represented by the multi-order function with the target position of the moving mechanism as the explanatory variable. In addition, a step of determining a target position corresponding to the current time and a step of moving the moving mechanism to the target position determined in the determination step are provided.
この開示によれば、上記制御システムは、視覚センサが対象物の実位置を計測してから次に対象物の実位置を計測するまでの間において、移動機構の目標位置を補間でき、移動機構をより滑らかに駆動することが可能になる。 According to this disclosure, the control system can interpolate the target position of the moving mechanism between the time when the visual sensor measures the actual position of the object and the next time when the actual position of the object is measured. Can be driven more smoothly.
本開示の他の例では、対象物を移動させるための移動機構の制御プログラムは、上記移動機構を制御するためのコントローラに、撮像指示を視覚センサに出力し、上記対象物を撮像して得られた画像から上記対象物の実位置を上記視覚センサに計測させるステップと、上記実位置から所定の到達目標位置に上記対象物を移動させるための、上記移動機構の必要移動距離を算出するステップと、上記必要移動距離と時刻とを少なくとも説明変数とし、上記移動機構の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、上記撮像指示が上記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、上記決定するステップで決定される目標位置に上記移動機構を移動させるステップとを実行させる。 In another example of the present disclosure, the control program of the moving mechanism for moving the object is obtained by outputting an imaging instruction to the visual sensor to the controller for controlling the moving mechanism and imaging the object. A step of causing the visual sensor to measure the actual position of the object from the obtained image, and a step of calculating the required movement distance of the moving mechanism for moving the object from the actual position to a predetermined target position. The imaging instruction is output to the visual sensor based on the target trajectory represented by the multi-order function with the required movement distance and time as at least explanatory variables and the target position of the movement mechanism as the objective variable. For each predetermined control cycle shorter than the interval, the step of determining the target position corresponding to the current time and the step of moving the moving mechanism to the target position determined in the determination step are executed.
この開示によれば、上記制御システムは、視覚センサが対象物の実位置を計測してから次に対象物の実位置を計測するまでの間において、移動機構の目標位置を補間でき、移動機構をより滑らかに駆動することが可能になる。 According to this disclosure, the control system can interpolate the target position of the moving mechanism between the time when the visual sensor measures the actual position of the object and the next time when the actual position of the object is measured. Can be driven more smoothly.
ある局面において、視覚センサの計測位置に基づいて駆動される移動機構をより滑らかに駆動することができる。 In a certain aspect, the moving mechanism driven based on the measurement position of the visual sensor can be driven more smoothly.
以下、図面を参照しつつ、本発明に従う各実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。したがって、これらについての詳細な説明は繰り返さない。 Hereinafter, embodiments according to the present invention will be described with reference to the drawings. In the following description, the same parts and components are designated by the same reference numerals. Their names and functions are the same. Therefore, the detailed description of these will not be repeated.
<A.適用例>
まず、図1を参照して、本発明が適用される場面の一例について説明する。図1は、本実施の形態に従う制御システム1の概要を示す模式図である。
<A. Application example>
First, an example of a situation in which the present invention is applied will be described with reference to FIG. FIG. 1 is a schematic diagram showing an outline of a
制御システム1は、画像処理を用いてアライメントを行なう。アライメントは、典型的には、工業製品の製造過程などにおいて、対象物(以下、「ワークW」ともいう。)を生産ラインの本来の位置に配置する処理などを意味する。このようなアライメントの一例として、制御システム1は、液晶パネルの生産ラインにおいて、ガラス基板に回路パターンの焼付処理(露光処理)前に、露光マスクに対するガラス基板の位置決めを行なう。
The
制御システム1は、たとえば、視覚センサ50と、コントローラ200と、サーボドライバ300と、移動機構400とを含む。移動機構400は、たとえば、サーボモータ410と、ステージ420とで構成されている。
The
視覚センサ50は、撮像視野に存在する被写体を撮像して画像データを生成する撮像処理を行なうものであり、ステージ420に載置されるワークWを撮像する。視覚センサ50は、コントローラ200からの撮像トリガTRに応じて撮像を行なう。視覚センサ50は、撮像トリガTRを受け付けたことに基づいてワークWを撮像し、撮像により得られた画像データに対して画像解析を行なうことでワークWの実位置PVvを計測する。実位置PVvは、計測される度にコントローラ200に出力される。
The
コントローラ200は、たとえばPLC(プログラマブル ロジック コントローラ)であり、各種のFA制御を行なう。コントローラ200は、機能構成の一例として、算出部250と、位置決定部252と、移動制御部254とを含む。
The
算出部250は、視覚センサ50によって検出されたワークWの実位置PVvと、所定の到達目標位置SPとに基づいて、ワークWを実位置PVvから到達目標位置SPに移動させるための移動機構400の必要移動距離Lを算出する。算出された必要移動距離Lは、位置決定部252に出力される。
The
ある局面において、到達目標位置SPは、視覚センサ50が所定の画像処理を行なうことにより検出される。この場合、視覚センサ50は、予め定められたマークを画像から検出し、当該マークを到達目標位置SPとして認識する。他の局面において、到達目標位置SPは、生産工程ごとに予め決められている。
In a certain aspect, the arrival target position SP is detected by the
位置決定部252は、必要移動距離Lと時刻tとを少なくとも説明変数とし、移動機構400の目標位置SP(t)を目的変数とする多次関数で表される目標軌道TGに基づいて、現時刻tにおける目標位置SP(t)を決定する。
The position-determining
図2は、目標軌道TGの一例を示す図である。図2に示されるように、目標軌道TGは、制御周期Tsごとの移動機構400の目標位置SP(t)を規定している。図2に示されるように、目標位置SP(t)の初期値は必要移動距離Lとなり、目標位置SP(t)の最終値はゼロとなる。目標位置SP(t)は、撮像周期Tbよりも短い制御周期Tsごとに移動制御部254に出力される。一例として、撮像周期Tbは、撮像状況などに応じて変動し、たとえば約60msである。制御周期Tsは、固定であり、たとえば1msである。
FIG. 2 is a diagram showing an example of the target trajectory TG. As shown in FIG. 2, the target trajectory TG defines the target position SP (t) of the moving
移動制御部254は、制御周期Tsごとに、現時刻tに対応する目標位置SP(t)に移動機構400を移動させるための移動指令MVを生成し、当該移動指令MVをサーボドライバ300に出力する。移動指令MVは、たとえば、サーボドライバ300に対する指令位置、指令速度、または指令トルクのいずれかである。
The
サーボドライバ300は、制御周期Tsごとに受ける移動指令MVに従って、移動機構400を駆動する。より具体的には、サーボドライバ300は、後述のエンコーダ412(図6参照)によって検出されるエンコーダ値PVmを取得して、エンコーダ値PVmから特定されるステージ420の速度/位置が目標値に近付くように移動指令MVが近付くようにサーボモータ410をフィードバック制御する。エンコーダによって検出されたエンコーダ値PVmは、制御周期Tsと同じ周期でコントローラ200に入力される。
The
以上のように、本実施の形態では、位置決定部252は、必要移動距離Lと時刻tとを少なくとも説明変数とし、移動機構400の目標位置SP(t)を目的変数とする多次関数で表される目標軌道TGに基づいて、現時刻tに対応する目標位置SP(t)を決定する。目標位置SP(t)は、撮像周期Tbよりも短い制御周期Tsごとに移動制御部254に出力される。これにより、視覚センサ50がワークWの実位置PVvを計測してから次に実位置PVvを計測するまでの間において、移動機構400に出力する移動指令を補間でき、移動機構400をより滑らかに駆動することが可能になる。
As described above, in the present embodiment, the position-determining
<B.制御システム1の装置構成>
図3は、制御システム1の装置構成の一例を示す図である。図3に示されるように、制御システム1は、視覚センサ50と、コントローラ200と、1つ以上のサーボドライバ300(図3の例では、サーボドライバ300X,300Y)と、移動機構400とを含む。視覚センサ50は、画像処理装置100と、1つ以上のカメラ(図3の例では、カメラ102および104)とを含む。
<B. Device configuration of
3, Ru FIG showing one example of a device configuration of the
画像処理装置100は、カメラ102,104がワークWを撮影して得られた画像データに基づいて、ワークWの特徴部分12(たとえば、ネジ穴など)を検出する。画像処理装置100は、検出した特徴部分12の位置をワークWの実位置PVvとして検出する。
The
コントローラ200には、1つ以上のサーボドライバ300(図3の例では、サーボドライバ300X,300Y)が接続されている。サーボドライバ300Xは、コントローラ200からの受けるX方向の移動指令に従って、制御対象のサーボモータ410Xを駆動する。サーボドライバ300Yは、コントローラ200からの受けるY方向の移動指令に従って、制御対象のサーボモータ410Yを駆動する。
One or more servo drivers 300 (
コントローラ200は、X方向に対して生成された目標軌道TGxに従って、サーボドライバ300Xに対してX方向の目標位置を指令値として与える。また、コントローラ200は、Y方向に対して生成された目標軌道TGyに従って、サーボドライバ300Yに対してY方向の目標位置を指令値として与える。X,Y方向のそれぞれの目標位置が順次更新されることで、ワークWが到達目標位置SPに移動させられる。
The
コントローラ200およびサーボドライバ300は、フィールドネットワークを介してデイジーチェーンで接続されている。フィールドネットワークには、たとえば、EtherCAT(登録商標)が採用される。但し、フィールドネットワークは、EtherCATに限定されず、任意の通信手段が採用され得る。一例として、コントローラ200およびサーボドライバ300は、信号線で直接接続されてもよい。また、コントローラ200およびサーボドライバ300は、一体的に構成されてもよい。
The
移動機構400は、ベースプレート4,7と、ボールネジ6,9と、ステージ420と、1つ以上のサーボモータ410(図3の例では、サーボモータ410X,410Y)とで構成されている。
The moving
ベースプレート4には、ステージ420をX方向に沿って移動させるボールネジ6が配置されている。ボールネジ6は、ステージ420に含まれるナットと係合されている。ボールネジ6の一端に連結されたサーボモータ410Xが回転駆動することで、ステージ420に含まれるナットとボールネジ6とが相対回転し、その結果、ステージ420がX方向に沿って移動する。
A
ベースプレート7は、ステージ420およびベースプレート4をY方向に沿って移動させるボールネジ9が配置されている。ボールネジ9は、ベースプレート4に含まれるナットと係合されている。ボールネジ9の一端に連結されたサーボモータ410Yが回転駆動することで、ベースプレート4に含まれるナットとボールネジ9とが相対回転し、その結果、ステージ420およびベースプレート4がY方向に沿って移動する。
A ball screw 9 for moving the
なお、図3には、サーボモータ410X,410Yによる2軸駆動の移動機構400が示されているが、移動機構400は、XY平面上の回転方向(θ方向)にステージ420を駆動するサーボモータがさらに組み込まれてもよい。
Although FIG. 3 shows a two-axis
<C.ハードウェア構成>
図4および図5を参照して、視覚センサ50を構成する画像処理装置100およびコントローラ200のハードウェア構成について順に説明する。
<C. Hardware configuration>
With reference to FIGS. 4 and 5, the hardware configurations of the
(C1.画像処理装置100のハードウェア構成)
図4は、視覚センサ50を構成する画像処理装置100のハードウェア構成の一例を示す模式図である。図4を参照して、画像処理装置100は、典型的には、汎用的なコンピュータアーキテクチャに従う構造を有しており、予めインストールされたプログラムをプロセッサが実行することで、後述するような各種の画像処理を実現する。
(C1. Hardware configuration of image processing device 100)
FIG. 4 is a schematic view showing an example of the hardware configuration of the
より具体的には、画像処理装置100は、CPU(Central Processing Unit)やMPU(Micro-Processing Unit)などのプロセッサ110と、RAM(Random Access Memory)112と、表示コントローラ114と、システムコントローラ116と、I/O(Input Output)コントローラ118と、ハードディスク120と、カメラインターフェイス122と、入力インターフェイス124と、コントローラインターフェイス126と、通信インターフェイス128と、メモリカードインターフェイス130とを含む。これらの各部は、システムコントローラ116を中心として、互いにデータ通信可能に接続される。
More specifically, the
プロセッサ110は、システムコントローラ116との間でプログラム(コード)などを交換して、これらを所定順序で実行することで、目的の演算処理を実現する。
The
システムコントローラ116は、プロセッサ110、RAM112、表示コントローラ114、およびI/Oコントローラ118とそれぞれバスを介して接続されており、各部との間でデータ交換などを行なうとともに、画像処理装置100全体の処理を司る。
The
RAM112は、典型的には、DRAM(Dynamic Random Access Memory)などの揮発性の記憶装置であり、ハードディスク120から読み出されたプログラムや、カメラ102および104によって取得されたカメラ画像(画像データ)、カメラ画像に対する処理結果、およびワークデータなどを保持する。
The
表示コントローラ114は、表示部132と接続されており、システムコントローラ116からの内部コマンドに従って、各種の情報を表示するための信号を表示部132へ出力する。
The
I/Oコントローラ118は、画像処理装置100に接続される記録媒体や外部機器との間のデータ交換を制御する。より具体的には、I/Oコントローラ118は、ハードディスク120と、カメラインターフェイス122と、入力インターフェイス124と、コントローラインターフェイス126と、通信インターフェイス128と、メモリカードインターフェイス130と接続される。
The I /
ハードディスク120は、典型的には、不揮発性の磁気記憶装置であり、プロセッサ110で実行される制御プログラム150に加えて、各種設定値などが格納される。このハードディスク120にインストールされる制御プログラム150は、メモリカード136などに格納された状態で流通する。なお、ハードディスク120に代えて、フラッシュメモリなどの半導体記憶装置やDVD−RAM(Digital Versatile Disk Random Access Memory)などの光学記憶装置を採用してもよい。
The
カメラインターフェイス122は、ワークを撮影することで生成された画像データを受け付ける入力部に相当し、プロセッサ110とカメラ102,104との間のデータ伝送を仲介する。カメラインターフェイス122は、カメラ102および104からの画像データをそれぞれ一時的に蓄積するための画像バッファ122aおよび122bを含む。複数のカメラに対して、カメラの間で共有できる単一の画像バッファを設けてもよいが、処理高速化のため、それぞれのカメラに対応付けて独立に複数配置することが好ましい。
The
入力インターフェイス124は、プロセッサ110とキーボード134、マウス、タッチパネル、専用コンソールなどの入力装置との間のデータ伝送を仲介する。
The
コントローラインターフェイス126は、プロセッサ110とコントローラ200との間のデータ伝送を仲介する。
通信インターフェイス128は、プロセッサ110と図示しない他のパーソナルコンピュータやサーバ装置などとの間のデータ伝送を仲介する。通信インターフェイス128は、典型的には、イーサネット(登録商標)やUSB(Universal Serial Bus)などからなる。
The communication interface 128 mediates data transmission between the
メモリカードインターフェイス130は、プロセッサ110と記録媒体であるメモリカード136との間のデータ伝送を仲介する。メモリカード136には、画像処理装置100で実行される制御プログラム150などが格納された状態で流通し、メモリカードインターフェイス130は、このメモリカード136から制御プログラムを読み出す。メモリカード136は、SD(Secure Digital)などの汎用的な半導体記憶デバイスや、フレキシブルディスク(Flexible Disk)などの磁気記録媒体や、CD−ROM(Compact Disk Read Only Memory)などの光学記録媒体等からなる。あるいは、通信インターフェイス128を介して、配信サーバなどからダウンロードしたプログラムを画像処理装置100にインストールしてもよい。
The
上述のような汎用的なコンピュータアーキテクチャに従う構造を有するコンピュータを利用する場合には、本実施の形態に従う機能を提供するためのアプリケーションに加えて、コンピュータの基本的な機能を提供するためのOS(Operating System)がインストールされていてもよい。この場合には、本実施の形態に従う制御プログラムは、OSの一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の順序および/またはタイミングで呼び出して処理を実行するものであってもよい。 When using a computer having a structure according to the general-purpose computer architecture as described above, in addition to the application for providing the function according to the present embodiment, the OS for providing the basic function of the computer ( Operating System) may be installed. In this case, the control program according to the present embodiment may call the necessary modules in a predetermined order and / or timing among the program modules provided as a part of the OS to execute the process. good.
さらに、本実施の形態に従う制御プログラムは、他のプログラムの一部に組み込まれて提供されるものであってもよい。その場合にも、プログラム自体には、上記のような組み合わせられる他のプログラムに含まれるモジュールを含んでおらず、当該他のプログラムと協働して処理が実行される。すなわち、本実施の形態に従う制御プログラムとしては、このような他のプログラムに組み込まれた形態であってもよい。 Further, the control program according to the present embodiment may be provided by being incorporated into a part of another program. Even in that case, the program itself does not include the modules included in the other programs to be combined as described above, and the processing is executed in cooperation with the other programs. That is, the control program according to the present embodiment may be a form incorporated in such another program.
なお、代替的に、制御プログラムの実行により提供される機能の一部もしくは全部を専用のハードウェア回路として実装してもよい。 Alternatively, a part or all of the functions provided by executing the control program may be implemented as a dedicated hardware circuit.
(C2.コントローラ200のハードウェア構成)
図5は、コントローラ200のハードウェア構成を示す模式図である。図5を参照して、コントローラ200は、主制御ユニット210とを含む。図5には、3軸分のサーボモータ410X,410Y,410θが示されており、この軸数に応じた数のサーボドライバ300X,300Y,300θが設けられる。
(C2. Hardware configuration of controller 200)
FIG. 5 is a schematic view showing the hardware configuration of the
主制御ユニット210は、チップセット212と、プロセッサ214と、不揮発性メモリ216と、主メモリ218と、システムクロック220と、メモリカードインターフェイス222と、通信インターフェイス228と、内部バスコントローラ230と、フィールドバスコントローラ238とを含む。チップセット212と他のコンポーネントとの間は、各種のバスを介してそれぞれ結合されている。
The
プロセッサ214およびチップセット212は、典型的には、汎用的なコンピュータアーキテクチャに従う構成を有している。すなわち、プロセッサ214は、チップセット212から内部クロックに従って順次供給される命令コードを解釈して実行する。チップセット212は、接続されている各種コンポーネントとの間で内部的なデータを遣り取りするとともに、プロセッサ214に必要な命令コードを生成する。システムクロック220は、予め定められた周期のシステムクロックを発生してプロセッサ214に提供する。チップセット212は、プロセッサ214での演算処理の実行の結果得られたデータなどをキャッシュする機能を有する。
The
主制御ユニット210は、記憶手段として、不揮発性メモリ216および主メモリ218を有する。不揮発性メモリ216は、OS、システムプログラム、ユーザプログラム、データ定義情報、ログ情報などを不揮発的に保持する。主メモリ218は、揮発性の記憶領域であり、プロセッサ214で実行されるべき各種プログラムを保持するとともに、各種プログラムの実行時の作業用メモリとしても使用される。
The
主制御ユニット210は、通信手段として、通信インターフェイス228と、内部バスコントローラ230と、フィールドバスコントローラ238とを有する。これらの通信回路は、データの送信および受信を行なう。
The
通信インターフェイス228は、画像処理装置100との間でデータを遣り取りする。
内部バスコントローラ230は、内部バス226を介したデータの遣り取りを制御する。より具体的には、内部バスコントローラ230は、バッファメモリ236と、DMA(Dynamic Memory Access)制御回路232と、内部バス制御回路234とを含む。
The
The
メモリカードインターフェイス222は、主制御ユニット210に対して着脱可能なメモリカード224とプロセッサ214とを接続する。
The
フィールドバスコントローラ238は、フィールドネットワークに接続するための通信インターフェイスである。コントローラ200は、フィールドバスコントローラ238を介してサーボドライバ300(たとえば、サーボドライバ300X,300Y,300θ)と接続される。当該フィールドネットワークには、たとえば、EtherCAT(登録商標)、EtherNet/IP(登録商標)、CompoNet(登録商標)などが採用される。
The
<D.目標軌道TGの更新処理>
上述の位置決定部252(図1参照)は、視覚センサ50の撮像周期Tbごとに目標軌道TGを生成する。このとき、位置決定部252は、新たに生成された目標軌道TGで前回に生成された目標軌道TGを更新する。すなわち、目標軌道TGは、視覚センサ50によってワークWの実位置が計測される度に更新される。これにより、目標軌道TGの誤差は、視覚センサ50の撮像周期Tbごとに修正される。
<D. Target trajectory TG update process>
The above-mentioned position-determining unit 252 (see FIG. 1) generates a target trajectory TG for each imaging cycle Tb of the
典型的には、位置決定部252は、目標軌道TGの更新前後で、移動機構400の速度が変化しないように新たな目標軌道TGを生成する。以下では、図6および図7を参照して、目標軌道TGの更新処理について説明する。
Typically, the position-determining
図6は、図1に示される制御システム1の機能構成をさらに具体化した図である。図6に示されるように、コントローラ200は、算出部250と、補正部251X,251Yと、位置決定部252X,252Yと、移動制御部254X,254Yとを含む。
FIG. 6 is a diagram further embodying the functional configuration of the
補正部251X、位置決定部252X、および移動制御部254Xは、X軸方向の駆動制御を行なうサーボドライバ300Xのための機能構成である。補正部251Y、位置決定部252Y、および移動制御部254Yは、Y軸方向の駆動制御を行なうサーボドライバ300Yのための機能構成である。その他の点に関しては、補正部251X,251Yの機能は同じであり、位置決定部252X,252Yの機能は同じであり、移動制御部254X,254Yの機能は同じである。
The
算出部250は、視覚センサ50によって検出されたワークWの実位置PVvと、所定の到達目標位置SPとに基づいて、ワークWを実位置PVvから到達目標位置SPに移動させるための移動機構400の必要移動距離Lを算出する。その後、算出部250は、移動機構400の必要移動距離LをX軸方向の必要移動距離LxとY軸方向の必要移動距離Lyとに分解し、必要移動距離Lxを補正部251Xに出力するとともに、必要移動距離Lyを補正部251Yに出力する。
The
補正部251Xは、移動機構400の実位置を検出するためのエンコーダ412X(検出部)からのためのエンコーダ値PVmに基づいて移動機構400の実位置を特定する。より具体的には、エンコーダ412Xは、サーボモータ410Xの移動量に応じてパルス信号を発生する。サーボモータ410Xに含まれるカウンタは、エンコーダ412Xからパルス信号を受け、当該パルス信号に含まれるパルス数をカウントすることで移動機構400の移動量をエンコーダ値PVmとして計測する。エンコーダ値PVmは、制御周期Tsごとに補正部251にコントローラ200に入力される。補正部251は、移動機構400の移動量に相当するエンコーダ値PVmに基づいて、X方向における移動機構400の実位置を特定する。
The
補正部251Xは、移動機構400の実位置と目標位置SP(t)との位置偏差En(t)を誤差として算出する。そして、補正部251Xは、必要移動距離Lxに位置偏差En(t)で補正し、補正後の必要移動距離Lmを位置決定部252Xに出力する。補正部251Yは、補正部251Xと同様に、エンコーダ412Yからのエンコーダ値PVmに基づいて、Y方向における必要移動距離Lmを位置決定部252Yに出力する。
The
位置決定部252Xは、視覚センサ50の撮像周期Tbが到来したことに基づいて、必要移動距離Lmから目標軌道TGを生成する。図7は、更新前の目標軌道TG1と、更新後の目標軌道TG2とを示す図である。
The position-determining
図7に示されるように、時刻t5において、視覚センサ50によりワークWの実位置PVvが計測され、目標軌道が更新されるとする。補正部251Xは、目標軌道の更新のタイミングにおいて検出された移動機構400の実位置と、当該タイミングにおける移動機構400の目標位置との位置偏差En(t)で、必要移動距離Lを補正する。図7の例では、必要移動距離Lに位置偏差En(t5)を加算することで、必要移動距離Lが必要移動距離Lmに補正されている。その後、位置決定部252Xは、補正後の必要移動距離Lmに基づいて、新たな目標軌道TG2を生成する。
As shown in FIG. 7, at time t5, the actual position PVv of the work W is measured by the
これにより、目標軌道TG1から目標軌道TG2に更新する過程で、移動機構400の位置の誤差が吸収され、移動機構400の速度が急変することが防止される。その結果、移動機構400上におけるワークWのすべりや、移動機構400の位置決め後における残留振動が抑制され、結果として、ワークWのアライメント時間が短縮される。
As a result, in the process of updating from the target trajectory TG1 to the target trajectory TG2, the error in the position of the moving
位置決定部252Xは、更新後の目標軌道TG2に基づいて、現時刻tに対応する目標位置SP(t)を決定し、当該目標位置SP(t)を制御周期Tsごとに移動制御部254Xに出力する。移動制御部254Xの機能については、図1で説明した移動制御部254と同じであるので、その説明については繰り返さない。
The
<E.コントローラ200の制御構造>
図8を参照して、コントローラ200の制御構造について説明する。図8は、コントローラ200が実行する制御処理の一部を表わすフローチャートである。図8に示される処理は、コントローラ200のプロセッサ214がプログラムを実行することにより実現される。他の局面において、処理の一部または全部が、回路素子またはその他のハードウェアによって実行されてもよい。
<E. Control structure of
The control structure of the
図8に示される処理は、ある軸方向に対する制御フローを表わす。すなわち、実際には、図8に示されるステップS130,S150以外の処理は、軸方向の分だけ並列に実行される。 The process shown in FIG. 8 represents a control flow in a certain axial direction. That is, in reality, the processes other than steps S130 and S150 shown in FIG. 8 are executed in parallel by the amount in the axial direction.
ステップS110において、プロセッサ214は、計測時刻t(現時刻)をゼロに初期化する。
In step S110, the
ステップS130において、プロセッサ214は、視覚センサ50からワークWの位置計測が完了したことを示す情報を受け付けたか否かを判断する。プロセッサ214は、視覚センサ50からワークWの位置計測が完了したことを示す情報を受け付けたと判断した場合(ステップS130においてYES)、制御をステップS131に切り替える。そうでない場合には(ステップS130においてNO)、プロセッサ214は、制御をステップS138に切り替える。
In step S130, the
ステップS131において、プロセッサ214は、上述の算出部250(図1参照)として、視覚センサ50によって検出されたワークWの実位置PVvと、所定の到達目標位置SPとに基づいて、ワークWを実位置PVvから到達目標位置SPに移動させるための移動機構400の必要移動距離Lを算出する。
In step S131, the
ステップS132において、プロセッサ214は、上述の補正部251(図6参照)として、計測時刻tにおける位置偏差En(t)を必要移動距離Lに加算し、必要移動距離Lを必要移動距離Lmに補正する。必要移動距離Lの補正方法については図7で説明した通りであるので、その説明については繰り返さない。
In step S132, the
ステップS134において、プロセッサ214は、計測時刻tをゼロに初期化する。
ステップS136において、プロセッサ214は、軌道時間Tを算出する。軌道時間Tは、目標軌道TGの開始点から終了点まで移動機構400を移動するために要する時間を表わす。一例として、軌道時間Tは、下記式(1)に基づいて算出される。
In step S134, the
In step S136, the
T=max{f(Amax),Tmin} ・・・(1)
上記式(1)に示される「Amax」は、最大加速度を表わす。「f()」は、最大加速度Amaxで必要移動距離Lを移動機構400に移動させた場合にかかる軌道時間Tを求めるための関数である。「Tmin」は、所定の最小軌道時間である。「max(α,β)」は、数値α,βの内から最大値を取得するための関数である。
T = max {f (A max ), T min } ... (1)
"A max " represented by the above formula (1) represents the maximum acceleration. “F ()” is a function for obtaining the orbital time T required when the required movement distance L is moved to the
上記式(1)により、軌道時間Tは、最小軌道時間Tmin未満にならないように決められる。最小軌道時間Tminが設けられていなければ、必要移動距離Lが非常に短い場合に、移動機構400が目標位置にすぐに到達してしまうので、次の撮像タイミングまでの時間を無駄にすることになる。しかしながら、最小軌道時間Tminが設けられることで、必要移動距離Lが非常に短い場合に、移動機構400は、最大加速度よりも低い加速度で移動することとなり、移動機構400は、滑らかに移動することができる。一例として、軌道時間Tminは、平均撮像間隔に対して一定の割合(たとえば、50%)を乗じることで算出される。
According to the above equation (1), the orbital time T is determined so as not to be less than the minimum orbital time T min. If the minimum orbit time T min is not provided, the moving
ステップS138において、プロセッサ214は、上述の位置決定部252(図1参照)として、ステップS132で得られた補正後の必要移動距離Lmと、ステップS136で算出された軌道時間Tとに基づいて、現時刻tに対応する目標位置SP(t)を算出する。一例として、目標位置SP(t)は、下記式(2)に基づいて算出される。
In step S138, the
SP(t)=Lm*[1−(t/T)3{10−15(t/T)}+6(t/T)2}]・・・(2)
上記式(2)の右辺は、移動機構400の目標軌道TGを表わす。式(2)に示されるように、目標軌道TGは、必要移動距離Lmと時刻tとを少なくとも説明変数とし、移動機構400の目標位置SP(t)を目的変数とする多次関数で表される。
SP (t) = Lm * [1- (t / T) 3 {10-15 (t / T)} + 6 (t / T) 2 }] ... (2)
The right side of the above equation (2) represents the target trajectory TG of the moving
なお、式(2)においては、目標軌道TGが時刻tの5次関数で表されているが、目標軌道TGの次数は、6次以上の多次関数で表されてもよい。また、目標軌道TGは、スプライン補間関数で表されてもよい。 In the equation (2), the target trajectory TG is represented by a quintic function at time t, but the order of the target trajectory TG may be represented by a multi-order function of 6th order or higher. Further, the target trajectory TG may be represented by a spline interpolation function.
最大加速度Amaxが与えられた場合、上記式(2)に示される軌道時間Tは、下記式(3)〜式(5)で計算される。 When the maximum acceleration A max is given, the orbital time T represented by the above equation (2) is calculated by the following equations (3) to (5).
f(Amax)=C1*Lm/Amax ・・・(3)
C1=60C2(2C2 2−3C2+1) ・・・(4)
C2=0.5−31/2/6 ・・・(5)
ステップS140において、プロセッサ214は、上述の移動制御部254(図1参照)として、ステップS138で得られた目標位置SP(t)に移動機構400を移動させるための移動指令MVを生成し、当該移動指令MVをサーボドライバ300に出力する。
f (A max ) = C 1 * Lm / A max ... (3)
C 1 = 60C 2 (2C 2 2 -3C 2 + 1) ・ ・ ・ (4)
C 2 = 0.5-3 1/2 / 6 ··· (5)
In step S140, the
ステップS142において、プロセッサ214は、計測時間tに制御周期Tsを加算し、計測時間tを更新する。
In step S142, the
ステップS150において、プロセッサ214は、目標軌道TGの更新処理を終了するか否かを判断する。一例として、プロセッサ214は、目標軌道TGの更新処理の停止命令を受け付けたことに基づいて、図8に示される処理を終了する。プロセッサ214は、目標軌道TGの更新処理を終了すると判断した場合(ステップS150においてYES)、図8に示される処理を終了する。そうでない場合には(ステップS150においてNO)、プロセッサ214は、制御をステップS130に戻す。
In step S150, the
なお、上述では、制御周期Tsごとに目標位置SP(t)が算出される例について説明を行ったが、プロセッサ214は、移動機構400が最終的な目標到達位置SPに到達するまでの間における各時刻の目標位置SP(t)を一括して算出してもよい。
In the above description, an example in which the target position SP (t) is calculated for each control cycle Ts has been described, but the
<F.付記>
以上のように、本実施形態は以下のような開示を含む。
<F. Addendum>
As described above, the present embodiment includes the following disclosures.
[構成1]
対象物を移動させるための移動機構(400)と、
撮像指示を受け付けたことに基づいて前記対象物を撮像し、撮像により得られた画像から前記対象物の実位置を計測するための視覚センサ(50)と、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構(400)の必要移動距離を算出するための算出部(250)と、
前記必要移動距離と時刻とを少なくとも説明変数とし、前記移動機構(400)の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するための位置決定部(252)と、
前記位置決定部(252)によって決定される目標位置に前記移動機構(400)を移動させるための移動制御部とを備える、制御システム。
[Structure 1]
A movement mechanism (400) for moving an object,
A visual sensor (50) for imaging the object based on the reception of the imaging instruction and measuring the actual position of the object from the image obtained by the imaging.
A calculation unit (250) for calculating the required movement distance of the movement mechanism (400) for moving the object from the actual position to a predetermined arrival target position.
The imaging instruction is output to the visual sensor based on a target trajectory represented by a quadratic function having the required movement distance and time as at least explanatory variables and the target position of the movement mechanism (400) as the objective variable. A position determination unit (252) for determining a target position corresponding to the current time for each predetermined control cycle shorter than the interval.
A control system including a movement control unit for moving the movement mechanism (400) to a target position determined by the position determination unit (252).
[構成2]
前記多次関数は、5次以上の関数である、構成1に記載の制御システム。
[Structure 2]
The control system according to
[構成3]
前記位置決定部(252)は、前記移動機構(400)の加速度が予め定められた最大加速度を超えないように、前記目標軌道を生成する、構成1に記載の制御システム。
[Structure 3]
The control system according to
[構成4]
前記位置決定部(252)は、前記視覚センサ(50)が前記対象物の実位置を計測する度に前記目標軌道を生成し、新たに生成された前記目標軌道で前回に生成された前記目標軌道を更新する、構成1〜3のいずれか1項に記載の制御システム。
[Structure 4]
The position-determining unit (252) generates the target trajectory each time the visual sensor (50) measures the actual position of the object, and the target previously generated by the newly generated target trajectory. The control system according to any one of
[構成5]
前記位置決定部(252)は、前記目標軌道の更新前後で、前記移動機構(400)の速度が変化しないように新たな前記目標軌道を生成する、構成4に記載の制御システム。
[Structure 5]
The control system according to
[構成6]
前記制御システムは、
前記制御周期ごとに前記移動機構(400)の実位置を検出するための検出部(412)と、
前記目標軌道の更新のタイミングにおいて前記検出部によって検出された実位置と、前記タイミングにおける前記移動機構の目標位置との位置偏差で、前記必要移動距離を補正するための補正部とをさらに備える、構成5に記載の制御システム。
[Structure 6]
The control system
A detection unit (412) for detecting the actual position of the movement mechanism (400) for each control cycle, and
A correction unit for correcting the required movement distance by the position deviation between the actual position detected by the detection unit at the update timing of the target trajectory and the target position of the movement mechanism at the timing is further provided. The control system according to configuration 5.
[構成7]
対象物を移動させるための移動機構(400)の制御方法であって、
撮像指示を視覚センサに出力し、前記対象物を撮像して得られた画像から前記対象物の実位置を前記視覚センサに計測させるステップと、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構(400)の必要移動距離を算出するステップと、
前記必要移動距離と時刻とを少なくとも説明変数とし、前記移動機構(400)の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、
前記決定するステップで決定される目標位置に前記移動機構(400)を移動させるステップとを備える、制御方法。
[Structure 7]
It is a control method of a moving mechanism (400) for moving an object.
A step of outputting an imaging instruction to a visual sensor and causing the visual sensor to measure the actual position of the object from an image obtained by imaging the object.
A step of calculating the required movement distance of the movement mechanism (400) for moving the object from the actual position to a predetermined arrival target position, and
The imaging instruction is output to the visual sensor based on a target trajectory represented by a quadratic function having the required movement distance and time as at least explanatory variables and the target position of the movement mechanism (400) as the objective variable. Steps to determine the target position corresponding to the current time for each predetermined control cycle shorter than the interval
A control method including a step of moving the moving mechanism (400) to a target position determined in the determination step.
[構成8]
対象物を移動させるための移動機構(400)の制御プログラムであって、
前記制御プログラムは、前記移動機構(400)を制御するためのコントローラ(200)に、
撮像指示を視覚センサに出力し、前記対象物を撮像して得られた画像から前記対象物の実位置を前記視覚センサに計測させるステップと、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構(400)の必要移動距離を算出するステップ(S131)と、
前記必要移動距離と時刻とを少なくとも説明変数とし、前記移動機構(400)の目標位置を目的変数とする多次関数で表される目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、
前記決定するステップで決定される目標位置に前記移動機構(400)を移動させるステップ(S140)とを実行させる、制御プログラム。
[Structure 8]
A control program for a moving mechanism (400) for moving an object.
The control program is applied to the controller (200) for controlling the moving mechanism (400).
A step of outputting an imaging instruction to a visual sensor and causing the visual sensor to measure the actual position of the object from an image obtained by imaging the object.
A step (S131) of calculating the required movement distance of the movement mechanism (400) for moving the object from the actual position to a predetermined arrival target position.
The imaging instruction is output to the visual sensor based on a target trajectory represented by a quadratic function having the required movement distance and time as at least explanatory variables and the target position of the movement mechanism (400) as the objective variable. Steps to determine the target position corresponding to the current time for each predetermined control cycle shorter than the interval
A control program that executes a step (S140) of moving the moving mechanism (400) to a target position determined in the determined step.
今回開示された実施の形態は全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内での全ての変更が含まれることが意図される。 It should be considered that the embodiments disclosed this time are exemplary in all respects and not restrictive. The scope of the present invention is shown by the scope of claims rather than the above description, and it is intended to include all modifications within the meaning and scope equivalent to the scope of claims.
1 制御システム、4,7 ベースプレート、6,9 ボールネジ、12 特徴部分、50 視覚センサ、100 画像処理装置、102,104 カメラ、110,214 プロセッサ、112 RAM、114 表示コントローラ、116 システムコントローラ、118 I/Oコントローラ、120 ハードディスク、122 カメラインターフェイス、122a 画像バッファ、124 入力インターフェイス、126 モーションコントローラインターフェイス、128,228 通信インターフェイス、130,222 メモリカードインターフェイス、132 表示部、134 キーボード、136,224 メモリカード、150 制御プログラム、200 コントローラ、210 主制御ユニット、212 チップセット、216 不揮発性メモリ、218 主メモリ、220 システムクロック、230 内部バスコントローラ、232 制御回路、234 内部バス制御回路、236 バッファメモリ、238 フィールドバスコントローラ、250 算出部、251,251X,251Y 補正部、252,252X,252Y 位置決定部、254,254X,254Y 移動制御部、300,300X,300Y サーボドライバ、400 移動機構、410,410X,410Y サーボモータ、412,412X,412Y エンコーダ、420 ステージ。 1 Control system, 4,7 base plate, 6,9 ball screw, 12 features, 50 visual sensor, 100 image processor, 102,104 camera, 110,214 processor, 112 RAM, 114 display controller, 116 system controller, 118 I / O controller, 120 hard disk, 122 camera interface, 122a image buffer, 124 input interface, 126 motion controller interface, 128,228 communication interface, 130,222 memory card interface, 132 display, 134 keyboard, 136,224 memory card, 150 control program, 200 controller, 210 main control unit, 212 chipset, 216 non-volatile memory, 218 main memory, 220 system clock, 230 internal bus controller, 232 control circuit, 234 internal bus control circuit, 236 buffer memory, 238 fields Bus controller, 250 calculation unit, 251,251X, 251Y correction unit, 252, 252X, 252Y position determination unit, 254,254X, 254Y movement control unit, 300, 300X, 300Y servo driver, 400 movement mechanism, 410, 410X, 410Y Servo motor, 421, 412X, 412Y encoder, 420 stages.
Claims (10)
撮像指示を受け付けたことに基づいて前記対象物を撮像し、撮像により得られた画像から前記対象物の実位置を計測するための視覚センサと、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構の必要移動距離、および目標軌道の開始点から終了点まで前記移動機構を移動するために要する軌道時間を算出するための算出部と、
前記必要移動距離と前記軌道時間と時刻とを少なくとも説明変数とし、前記移動機構の目標位置を目的変数とする多次関数で表される前記目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するための位置決定部と、
前記位置決定部によって決定される目標位置に前記移動機構を移動させるための移動制御部とを備える、制御システム。 A movement mechanism for moving an object,
A visual sensor for imaging the object based on the reception of the imaging instruction and measuring the actual position of the object from the image obtained by the imaging, and
Calculate the required movement distance of the moving mechanism for moving the object from the actual position to a predetermined target position , and the orbit time required to move the moving mechanism from the start point to the end point of the target trajectory. And the calculation part to do
And the track time and time and the required movement distance is at least explanatory variables, based on the target trajectory represented by the multidimensional function aimed variable target position of the moving mechanism, the imaging instruction is the visual sensor A position determination unit for determining the target position corresponding to the current time for each predetermined control cycle shorter than the output interval.
A control system including a movement control unit for moving the movement mechanism to a target position determined by the position determination unit.
前記制御周期ごとに前記移動機構の実位置を検出するための検出部と、
前記目標軌道の更新のタイミングにおいて前記検出部によって検出された実位置と、前記タイミングにおける前記移動機構の目標位置との位置偏差で、前記必要移動距離を補正するための補正部とをさらに備える、請求項6に記載の制御システム。 The control system
A detection unit for detecting the actual position of the moving mechanism for each control cycle,
A correction unit for correcting the required movement distance by the position deviation between the actual position detected by the detection unit at the update timing of the target trajectory and the target position of the movement mechanism at the timing is further provided. The control system according to claim 6.
撮像指示を視覚センサに出力し、前記対象物を撮像して得られた画像から前記対象物の実位置を前記視覚センサに計測させるステップと、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構の必要移動距離を算出するステップと、
目標軌道の開始点から終了点まで前記移動機構を移動するために要する軌道時間を算出するステップと、
前記必要移動距離と前記軌道時間と時刻とを少なくとも説明変数とし、前記移動機構の目標位置を目的変数とする多次関数で表される前記目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、
前記決定するステップで決定される目標位置に前記移動機構を移動させるステップとを備える、制御方法。 It is a control method of a movement mechanism for moving an object.
A step of outputting an imaging instruction to a visual sensor and causing the visual sensor to measure the actual position of the object from an image obtained by imaging the object.
A step of calculating the required movement distance of the movement mechanism for moving the object from the actual position to a predetermined arrival target position, and
A step of calculating the orbital time required to move the moving mechanism from the start point to the end point of the target orbit, and
And the track time and time and the required movement distance is at least explanatory variables, based on the target trajectory represented by the multidimensional function aimed variable target position of the moving mechanism, the imaging instruction is the visual sensor A step of determining a target position corresponding to the current time for each predetermined control cycle shorter than the output interval, and
A control method including a step of moving the moving mechanism to a target position determined in the determination step.
前記制御プログラムは、前記移動機構を制御するためのコントローラに、
撮像指示を視覚センサに出力し、前記対象物を撮像して得られた画像から前記対象物の実位置を前記視覚センサに計測させるステップと、
前記実位置から所定の到達目標位置に前記対象物を移動させるための、前記移動機構の必要移動距離を算出するステップと、
目標軌道の開始点から終了点まで前記移動機構を移動するために要する軌道時間を算出するステップと、
前記必要移動距離と前記軌道時間と時刻とを少なくとも説明変数とし、前記移動機構の目標位置を目的変数とする多次関数で表される前記目標軌道に基づいて、前記撮像指示が前記視覚センサに出力される間隔よりも短い予め定められた制御周期ごとに、現時刻に対応する目標位置を決定するステップと、
前記決定するステップで決定される目標位置に前記移動機構を移動させるステップとを実行させる、制御プログラム。 A control program for a movement mechanism for moving an object.
The control program is used as a controller for controlling the moving mechanism.
A step of outputting an imaging instruction to a visual sensor and causing the visual sensor to measure the actual position of the object from an image obtained by imaging the object.
A step of calculating the required movement distance of the movement mechanism for moving the object from the actual position to a predetermined arrival target position, and
A step of calculating the orbital time required to move the moving mechanism from the start point to the end point of the target orbit, and
And the track time and time and the required movement distance is at least explanatory variables, based on the target trajectory represented by the multidimensional function aimed variable target position of the moving mechanism, the imaging instruction is the visual sensor A step of determining a target position corresponding to the current time for each predetermined control cycle shorter than the output interval, and
A control program that executes a step of moving the moving mechanism to a target position determined in the determined step.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018085121A JP6919622B2 (en) | 2018-04-26 | 2018-04-26 | Control systems, control methods, and control programs |
PCT/JP2019/014127 WO2019208108A1 (en) | 2018-04-26 | 2019-03-29 | Control system, control method and control program |
KR1020207026088A KR102683350B1 (en) | 2018-04-26 | 2019-03-29 | Control system, control method and computer readable storage medium |
CN201980018616.2A CN111886556B (en) | 2018-04-26 | 2019-03-29 | Control system, control method, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018085121A JP6919622B2 (en) | 2018-04-26 | 2018-04-26 | Control systems, control methods, and control programs |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019188549A JP2019188549A (en) | 2019-10-31 |
JP6919622B2 true JP6919622B2 (en) | 2021-08-18 |
Family
ID=68295242
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018085121A Active JP6919622B2 (en) | 2018-04-26 | 2018-04-26 | Control systems, control methods, and control programs |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP6919622B2 (en) |
KR (1) | KR102683350B1 (en) |
CN (1) | CN111886556B (en) |
WO (1) | WO2019208108A1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7059968B2 (en) | 2019-03-01 | 2022-04-26 | オムロン株式会社 | Control device and alignment device |
WO2024142578A1 (en) * | 2022-12-26 | 2024-07-04 | パナソニックIpマネジメント株式会社 | Positioning device |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4086522A (en) * | 1976-09-08 | 1978-04-25 | Unimation, Inc. | Computer assisted teaching arrangement for conveyor line operation |
JPH09244725A (en) * | 1996-03-05 | 1997-09-19 | Sony Corp | Method and device for track interpolation, and controller |
JPH1124718A (en) * | 1997-07-07 | 1999-01-29 | Toshiba Corp | Device and method for controlling robot |
JP2007257276A (en) * | 2006-03-23 | 2007-10-04 | Toyota Motor Corp | Traveling path preparation method, autonomous traveling object and autonomous traveling object control system |
JP2007271796A (en) * | 2006-03-30 | 2007-10-18 | Fujifilm Corp | Exposure apparatus, and photolithographic method and apparatus |
CN103079746A (en) * | 2010-09-01 | 2013-05-01 | 三菱电机株式会社 | Laser processing apparatus and substrate position detecting method |
JP5418490B2 (en) * | 2010-12-27 | 2014-02-19 | 三菱電機株式会社 | POSITIONING CONTROL DEVICE AND POSITIONING DEVICE HAVING THE SAME |
JP6511715B2 (en) * | 2013-10-31 | 2019-05-15 | セイコーエプソン株式会社 | Robot control device, robot system, and robot |
JP6276024B2 (en) * | 2013-12-25 | 2018-02-07 | アレイ株式会社 | Imaging apparatus, and image processing apparatus and method |
JP2015213139A (en) * | 2014-05-07 | 2015-11-26 | 国立大学法人 東京大学 | Positioning device |
US10272573B2 (en) * | 2015-12-18 | 2019-04-30 | Ge Global Sourcing Llc | Control system and method for applying force to grasp a brake lever |
JP6174636B2 (en) * | 2015-07-24 | 2017-08-02 | ファナック株式会社 | Work positioning device for positioning work |
CN107921639B (en) * | 2015-08-25 | 2021-09-21 | 川崎重工业株式会社 | Information sharing system and information sharing method between multiple robot systems |
-
2018
- 2018-04-26 JP JP2018085121A patent/JP6919622B2/en active Active
-
2019
- 2019-03-29 CN CN201980018616.2A patent/CN111886556B/en active Active
- 2019-03-29 KR KR1020207026088A patent/KR102683350B1/en active IP Right Grant
- 2019-03-29 WO PCT/JP2019/014127 patent/WO2019208108A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JP2019188549A (en) | 2019-10-31 |
WO2019208108A1 (en) | 2019-10-31 |
KR20210004958A (en) | 2021-01-13 |
CN111886556B (en) | 2024-06-07 |
KR102683350B1 (en) | 2024-07-09 |
CN111886556A (en) | 2020-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6167622B2 (en) | Control system and control method | |
CN110581945B (en) | Control system, control device, image processing device, and storage medium | |
JP7078894B2 (en) | Control systems, controls, image processing devices and programs | |
JP6919622B2 (en) | Control systems, control methods, and control programs | |
JP7143643B2 (en) | Positioning system, monitoring device, monitoring method and program | |
JP6950631B2 (en) | Positioning system, control methods and programs | |
JP6919623B2 (en) | Control systems, control methods, and control programs | |
CN110581944B (en) | Control system, control device, and storage medium | |
JP7020262B2 (en) | Control systems, control methods and programs | |
JP6922829B2 (en) | Control systems, control methods, and control programs | |
JP7035902B2 (en) | Measurement system, measurement method, and measurement program | |
CN115265598A (en) | Method, device and system for calibrating an inertial measurement unit |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200309 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210216 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210405 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210622 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210705 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6919622 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |