JP2018202593A - Workpiece recognition device and workpiece recognition method - Google Patents
Workpiece recognition device and workpiece recognition methodInfo
- Publication number
- JP2018202593A JP2018202593A JP2017114569A JP2017114569A JP2018202593A JP 2018202593 A JP2018202593 A JP 2018202593A JP 2017114569 A JP2017114569 A JP 2017114569A JP 2017114569 A JP2017114569 A JP 2017114569A JP 2018202593 A JP2018202593 A JP 2018202593A
- Authority
- JP
- Japan
- Prior art keywords
- workpiece
- installation space
- predetermined
- predetermined range
- highest point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 11
- 238000009434 installation Methods 0.000 claims abstract description 56
- 238000003384 imaging method Methods 0.000 claims description 38
- 239000012636 effector Substances 0.000 claims description 32
- 230000007246 mechanism Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 15
- 235000013305 food Nutrition 0.000 description 14
- 230000002093 peripheral effect Effects 0.000 description 14
- 238000011960 computer-aided design Methods 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 5
- 241000287828 Gallus gallus Species 0.000 description 4
- 235000013194 Lyophyllum decastes Nutrition 0.000 description 4
- 240000005856 Lyophyllum decastes Species 0.000 description 4
- 235000013330 chicken meat Nutrition 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 239000011435 rock Substances 0.000 description 4
- 230000009471 action Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 235000015173 baked goods and baking mixes Nutrition 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
- B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Manipulator (AREA)
Abstract
Description
本発明は、ワークの認識装置及びワークを認識する方法に関する。 The present invention relates to a workpiece recognition apparatus and a workpiece recognition method.
従来から、複数のワークが設置された設置スペースにおいてワークを認識することが行われている。例えば、特許文献1に記載された対象物取り出し装置において、このような処理が行われている。 Conventionally, a workpiece is recognized in an installation space where a plurality of workpieces are installed. For example, such processing is performed in the object take-out apparatus described in Patent Document 1.
特許文献1の対象物取り出し装置は、把持順決定装置を備える。把持順決定装置は、位置が認識された複数の対象物を、上方に位置するものから順に選択し、選択された順に複数の対象物について干渉度判定を行う。干渉度判定では、選択された対象物を取り出す場合に、当該選択された対象物が、これに水平方向に隣接する他の対象物に干渉する度合いを第1の度合いとし、当該他の対象物を取り出す場合に、当該他の対象物が、当該選択された対象物に干渉する度合いを第2の度合いとし、第1の度合いが第2の度合い以下であるかの判定を行う。把持順決定装置は、判定が肯定された順に複数の対象物の順位が上位になるように取り出し順序を定める。 The object take-out device of Patent Document 1 includes a gripping order determination device. The gripping order determination device selects a plurality of objects whose positions are recognized in order from the one located above, and performs interference degree determination for the plurality of objects in the selected order. In the interference degree determination, when the selected object is taken out, the degree to which the selected object interferes with another object adjacent in the horizontal direction is defined as a first degree, and the other object is detected. When the second object is taken out, the degree of interference of the other object with the selected object is set as the second degree, and it is determined whether the first degree is equal to or less than the second degree. The gripping order determination device determines the order of extraction so that the order of the plurality of objects is higher in the order in which the determination is affirmed.
ところで、特許文献1や同様の処理を行うための従来のワークの認識装置は、一般に、所定の形状を有するワーク(例えば、機械の組み立てに用いる部材など)に対して処理を行うものであり、所定の形状を有しないワーク(例えば、唐揚げなどの食品や岩石など)が含まれるような場合に、上記のような処理を行うことが困難になるという問題があった。また、従来のワークの認識装置は、複数のワークが設置された設置スペースを撮像することでCAD(Computer−Aided Design)データなどの3次元データを取得し、当該3次元データと予め記憶しておいたワークの形状に関するデータなどと比較する処理を行う必要があった。すなわち、従来のワークの認識装置は、大きなデータ量を取り扱って複雑な処理を行う必要があった。これにより、処理速度が遅くなってしまうという問題があった。 By the way, the conventional workpiece recognition apparatus for performing the same processing as Patent Document 1 generally performs processing on a workpiece having a predetermined shape (for example, a member used for assembly of a machine) When workpieces that do not have a predetermined shape (for example, food such as deep-fried food or rocks) are included, there is a problem that it is difficult to perform the above-described processing. In addition, a conventional workpiece recognition device acquires three-dimensional data such as CAD (Computer-Aided Design) data by imaging an installation space where a plurality of workpieces are installed, and stores the three-dimensional data in advance. It was necessary to perform processing to compare with data on the shape of the workpiece placed. That is, the conventional workpiece recognition apparatus needs to handle a large amount of data and perform complicated processing. As a result, there is a problem that the processing speed becomes slow.
そこで、本発明は、所定の形状を有しないワークが含まれるような場合であっても、複数のワークが設置された設置スペースにおいてワークを迅速に認識することができる、ワークの認識装置及びワークを認識する方法を提供することを目的とする。 Accordingly, the present invention provides a workpiece recognition apparatus and workpiece capable of quickly recognizing a workpiece in an installation space in which a plurality of workpieces are installed even when a workpiece having a predetermined shape is included. It aims at providing the method of recognizing.
前記課題を解決するために、本発明に係るワークの認識装置は、複数のワークが設置された設置スペースにおいてワークを認識するためのワークの認識装置であって、前記設置スペースの所定の範囲内を撮像して画像情報を得るための撮像装置と、前記撮像装置から得られた画像情報を解析して前記ワークを認識するための制御部と、を備え、前記制御部は、前記画像情報を解析することで、前記設置スペースの所定の範囲内において高さ位置が最も高いポイントを検出する第1のステップと、前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積を検出する第2のステップと、前記面積が所定の条件を満たす場合に、前記最も高いポイントにワークが存在することを認識する第3のステップと、を実行し、前記所定の条件は、前記面積が予め定められた第2の閾値よりも大きいと判定することを含む。 In order to solve the above problems, a workpiece recognition apparatus according to the present invention is a workpiece recognition device for recognizing a workpiece in an installation space where a plurality of workpieces are installed, and is within a predetermined range of the installation space. An image capturing apparatus for obtaining image information by capturing the image, and a control unit for recognizing the workpiece by analyzing the image information obtained from the image capturing apparatus. By analyzing, a first step of detecting a point having the highest height position within a predetermined range of the installation space, and a height position of the highest point within a predetermined distance from the highest point A second step of detecting an area of a portion where the difference is smaller than a predetermined first threshold; and when the area satisfies a predetermined condition, the workpiece is set at the highest point. Run a third step that recognizes the the present, the predetermined condition includes determining that the area is larger than a second predetermined threshold value.
この構成によれば、従来のワークの認識装置で一般に行われているようにワークの形状を認識する必要がないため、CADデータなどの大きなデータ量を取り扱う必要がない。また、ワークの形状に関するデータなどを予め記憶しておく必要もなく、さらに当該データとの比較を行う必要もない。すなわち、複雑な処理を行う必要もない。その結果、本発明に係るワークの認識装置は、所定の形状を有しないワークが含まれるような場合であっても、複数のワークが設置された設置スペースにおいてワークを迅速に認識することができる。 According to this configuration, since it is not necessary to recognize the shape of the workpiece as is generally done with a conventional workpiece recognition apparatus, it is not necessary to handle a large amount of data such as CAD data. Further, it is not necessary to previously store data relating to the shape of the workpiece, and it is not necessary to perform comparison with the data. That is, it is not necessary to perform complicated processing. As a result, the workpiece recognition apparatus according to the present invention can quickly recognize a workpiece in an installation space in which a plurality of workpieces are installed, even when a workpiece not having a predetermined shape is included. .
前記所定の条件は、前記面積が前記第2の閾値よりも大きい予め定められた第3の閾値よりも小さいと判定することをさらに含んでもよい。 The predetermined condition may further include determining that the area is smaller than a predetermined third threshold value that is larger than the second threshold value.
この構成によれば、誤って認識することなく確実にワークを認識することができる。 According to this configuration, the workpiece can be reliably recognized without being erroneously recognized.
前記撮像装置は、前記設置スペースの所定の範囲内を斜め上方から撮像してもよい。 The imaging device may capture an image of a predetermined range of the installation space from obliquely above.
この構成によれば、撮像装置の視野角が広くなるため、広い範囲を撮像することが可能になる。 According to this configuration, since the viewing angle of the imaging device is widened, it is possible to capture a wide range.
前記撮像装置は、前記設置スペースの所定の範囲内を2地点から撮像し、前記制御部は、前記2地点から撮像することで得られる視差を解析して、前記設置スペースの所定の範囲内の高さ位置を検出することにより、前記第1のステップ及び前記第2のステップを実行してもよい。 The imaging device captures an image within a predetermined range of the installation space from two points, and the control unit analyzes a parallax obtained by imaging from the two points, and within the predetermined range of the installation space. The first step and the second step may be executed by detecting a height position.
この構成によれば、画像情報の解析を容易に行うことができるため、効率良く高さ位置を検出することが可能になる。 According to this configuration, since it is possible to easily analyze the image information, the height position can be detected efficiently.
前記設置スペースの所定の範囲内にドットパターンを照射する投光器をさらに備え、前記撮像装置は、前記ドットパターンが照射されている前記設置スペースの所定の範囲内を撮像し、前記制御部は、前記設置スペースの所定の範囲内を撮像することで得られる画像情報を解析することにより、前記第1のステップ及び前記第2のステップを実行してもよい。 The projector further includes a projector that irradiates a dot pattern within a predetermined range of the installation space, the imaging device images a predetermined range of the installation space irradiated with the dot pattern, and the control unit The first step and the second step may be executed by analyzing image information obtained by imaging within a predetermined range of the installation space.
この構成によれば、画像情報の解析を容易に行うことができるため、効率良く高さ位置を検出することが可能になる。 According to this configuration, since it is possible to easily analyze the image information, the height position can be detected efficiently.
前記投光器が照射するドットパターンは青色であってもよい。 The dot pattern irradiated by the projector may be blue.
青色の光は波長が短く強い光である。したがって、この構成によれば、周囲の光に影響を受け難くいドットパターンを照射することが可能となる。また、ワークとして例えば食品を取り扱う場合、ワークが青色であることが極めて稀であるため、ドットパターンとワークが似た色になる可能性を低くすることができる。これにより、ワークに対して鮮明にドットパターンを照射することができるため、画像情報の解析を一層容易に行うことが可能となる。 Blue light is strong light with a short wavelength. Therefore, according to this configuration, it is possible to irradiate a dot pattern that is not easily affected by ambient light. Further, when a food is handled as a work, for example, it is very rare that the work is blue, so the possibility that the dot pattern and the work are similar in color can be reduced. Thereby, since a dot pattern can be clearly irradiated with respect to a workpiece | work, it becomes possible to perform analysis of image information still more easily.
前記複数のワークは、前記設置スペースの所定の範囲内にばら積みされていてもよい。 The plurality of workpieces may be stacked in a predetermined range of the installation space.
この構成によれば、本発明に係るワークの認識装置を有効に用いることができる。 According to this configuration, the workpiece recognition apparatus according to the present invention can be used effectively.
前記制御部は、前記設置スペースの所定の範囲内からワークを保持して取り出すためのロボットをさらに制御し、前記ロボットは、ロボットアームと、前記ロボットアームの先端部に取り付けられ、前記ワークを保持するためのエンドエフェクタと、を備え、前記制御部は、前記第3のステップにおいて、前記最も高いポイントにワークが存在することを認識した場合に、前記ロボットアームにより前記エンドエフェクタを前記最も高いポイント又は前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分まで移動させる第4のステップと、前記エンドエフェクタにより前記最も高いポイントに存在するワークを保持する第5のステップと、前記ロボットアームにより前記エンドエフェクタ及びそれに保持されたワークを前記設置スペースの所定の範囲内から移動させる第6のステップと、をさらに実行してもよい。 The control unit further controls a robot for holding and taking out a workpiece from within a predetermined range of the installation space. The robot is attached to a robot arm and a tip of the robot arm and holds the workpiece. And when the control unit recognizes that a workpiece is present at the highest point in the third step, the robot arm moves the end effector to the highest point. Or a fourth step of moving to a portion where a difference in height position from the highest point within a predetermined distance from the highest point is smaller than a predetermined first threshold; and A fifth step of holding a workpiece existing at a high point; A sixth step of moving the end effector and workpiece held thereby from within a predetermined range of the installation space by may further execution.
この構成によれば、本発明に係るワークの認識装置を用いて、設置スペースの所定の範囲内において最上部に位置する取り出し易いワークから順に保持して取り出すことができる。これにより、エンドエフェクタが衝突することでワークが傷んだり、設置スペースからワークがこぼれ落ちたりしてしまうことを防止することができる。 According to this configuration, using the workpiece recognition apparatus according to the present invention, it is possible to sequentially hold and take out a workpiece that is located at the uppermost position within a predetermined range of the installation space. Thereby, it can prevent that a workpiece | work is damaged by an end effector colliding, or a workpiece | work spills out from an installation space.
前記エンドエフェクタは、負圧により吸着することで前記ワークを保持してもよい。 The end effector may hold the workpiece by adsorbing with a negative pressure.
この構成によれば、ワークを傷めることなく保持することができる。なお、この作用は、ワークが傷みやすい例えば唐揚げなどの食品である場合において特に有効である。 According to this configuration, the workpiece can be held without being damaged. This action is particularly effective when the work is a food that is easily damaged, such as fried chicken.
前記エンドエフェクタは、前記ロボットの高さ方向に沿って延びる中心軸線上に設けられ、前記撮像装置は、前記ロボットに前記中心軸線から外れて設けられることにより、前記設置スペースの所定の範囲内を斜め上方から撮像してもよい。 The end effector is provided on a central axis extending along the height direction of the robot, and the imaging device is provided on the robot so as to be away from the central axis, so that the end effector falls within a predetermined range of the installation space. You may image from diagonally upward.
この構成によれば、撮像装置は、視野角が広がり、且つエンドエフェクタに妨げられることを抑制することができるため、効率良く広い範囲を撮像することができる。 According to this configuration, the imaging device can suppress a wide viewing angle and can be prevented from being obstructed by the end effector, and thus can efficiently image a wide range.
前記課題を解決するために、本発明に係るワークを認識する方法は、複数のワークが設置された設置スペースにおいてワークを認識する方法であって、前記設置スペースの所定の範囲内を撮像して得られる前記画像情報を解析することで、前記設置スペースの所定の範囲内において高さ位置が最も高いポイントを検出する第1のステップと、前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積を検出する第2のステップと、前記面積が所定の条件を満たす場合に、前記最も高いポイントにワークが存在することを認識する第3のステップと、を備え、前記所定の条件は、前記面積が予め定められた第2の閾値よりも大きいと判定することを含む。 In order to solve the above problems, a method for recognizing a workpiece according to the present invention is a method for recognizing a workpiece in an installation space in which a plurality of workpieces are installed, and imaging a predetermined range of the installation space. By analyzing the obtained image information, a first step of detecting a point having the highest height position within a predetermined range of the installation space, and the highest point within a predetermined distance from the highest point A second step of detecting the area of the portion where the height position difference is smaller than a predetermined first threshold, and when the area satisfies a predetermined condition, there is a workpiece at the highest point A third step of recognizing that the predetermined condition includes determining that the area is greater than a predetermined second threshold value.
この構成によれば、従来のワークの認識装置で一般に行われているようにワークの形状を認識する必要がないため、CADデータなどの大きなデータ量を取り扱う必要がない。また、ワークの形状に関するデータなどを予め記憶しておく必要もなく、さらに当該データとの比較を行う必要もない。すなわち、複雑なステップを行う必要もない。その結果、本発明に係るワークを認識する方法は、所定の形状を有しないワークが含まれるような場合であっても、複数のワークが設置された設置スペースにおいてワークを迅速に認識することができる。 According to this configuration, since it is not necessary to recognize the shape of the workpiece as is generally done by a conventional workpiece recognition apparatus, it is not necessary to handle a large amount of data such as CAD data. Further, it is not necessary to previously store data relating to the shape of the workpiece, and it is not necessary to perform comparison with the data. That is, there is no need to perform complicated steps. As a result, the method for recognizing a workpiece according to the present invention can quickly recognize a workpiece in an installation space where a plurality of workpieces are installed, even when a workpiece having a predetermined shape is included. it can.
本発明によれば、所定の形状を有しないワークが含まれるような場合であっても、複数のワークが設置された設置スペースにおいてワークを迅速に認識することができる、ワークの認識装置及びワークを認識する方法を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, even if it is a case where the workpiece | work which does not have a predetermined | prescribed shape is contained, the workpiece | work recognition apparatus and workpiece | work which can recognize a workpiece | work quickly in the installation space in which the several workpiece | work was installed. Can be provided.
以下、本発明の一実施形態に係るワークの認識装置について図面を参照して説明する。なお、本実施形態によって本発明が限定されるものではない。また、以下では、全ての図を通じて、同一又は相当する要素には同一の参照符号を付して、その重複する説明を省略する。 Hereinafter, a workpiece recognition apparatus according to an embodiment of the present invention will be described with reference to the drawings. In addition, this invention is not limited by this embodiment. In the following description, the same or corresponding elements are denoted by the same reference symbols throughout the drawings, and redundant description thereof is omitted.
図1は、本発明の一実施形態に係るワークの認識装置が制御するロボットを食品の製造現場に適用し、食品の盛り付け作業を行う様子を示す図である。本実施形態に係るワークの認識装置は、図1で手前左側に設けられているトレーT1(設置スペース)の所定の範囲内を撮像して画像情報を得るための撮像装置90と、撮像装置90から得られた画像情報を解析してトレーT1内に設置された唐揚げW1(ワーク)を認識するための制御部100と、を備える。図1に示すように、本実施形態に係るワークの認識装置は、食品の製造現場に適用され、弁当箱Lに食品の盛り付け作業を行うロボット10を制御する。なお、図1では、食品の製造現場と、そこに設けられるロボット10のうちその一部であるエンドエフェクタ80の先端部のみとを図示してある。
FIG. 1 is a diagram showing a state in which food is placed by applying a robot controlled by a workpiece recognition apparatus according to an embodiment of the present invention to a food production site. The workpiece recognition apparatus according to the present embodiment includes an
図1では、手前左側に設けられているトレーT1(設置スペース)内に複数の唐揚げW1(複数のワーク)がばら積みされており、手前右側に設けられているトレーT2(設置スペース)内に複数の焼売W2(複数のワーク)が個別に載置されている。また、図1では、奥側において左右方向に延びるようにベルトコンベアBが設けられており、図中右側から左側に向かって、複数の弁当箱Lを繰り返し搬送している。 In Figure 1, the tray T 1 is provided on the front left side (installation space) a plurality of fried in W 1 (more work) and is bulk, tray T 2 (the installation space provided in front right ) A plurality of baked goods W 2 (a plurality of workpieces) are individually placed. Moreover, in FIG. 1, the belt conveyor B is provided so that it may extend in the left-right direction in the back | inner side, and the several lunch box L is conveyed repeatedly toward the left side from the right side in the figure.
本実施形態に係るワークの認識装置が制御するロボット10は、トレーT1、トレーT2及びベルトコンベアB(すなわち、食品の製造現場)の上方に設けられ、図中手前側に設けられているトレーT1から唐揚げW1を保持して取り出し、図中奥側に設けられているベルトコンベアB上を搬送されてくる弁当箱Lに盛り付ける。次に、図中奥側からトレーT2まで移動して、トレーT2から焼売W2を保持して取り出し、前記弁当箱Lに盛り付ける。そして、図中奥側からトレーT1まで移動して再び唐揚げW1を保持して取り出し、前記ベルトコンベアB上を搬送されてくる次の弁当箱Lに盛り付ける。ロボット10は、上記作業を繰り返すことで、複数の弁当箱Lに食品の盛り付け作業を行う。
The
図2は、本発明の一実施形態に係るワークの認識装置が制御するロボットの正面図である。ロボット10は、バケット15を備えるベース2を有している。バケット15は開口を取り囲む上縁部15aを有し、上縁部15aには水平に突出する複数のリブ17が設けられている。リブ17は、架台191に設けられた取付口191aの周縁部191bに支持され、周縁部191bにリブ17を例えば螺止することによりベース2が架台191に固定される。
FIG. 2 is a front view of the robot controlled by the workpiece recognition apparatus according to the embodiment of the present invention. The
なお、図2はリブ17の下面が周縁部191bの上面に当接し、リブ17が螺止された周縁部191bに保持される形態を例示している。しかし、これに代えて、リブ17の上面が周縁部191bの下面に当接し、リブ17が螺止された周縁部191bによって保持されてもよい。
2 illustrates a form in which the lower surface of the
ベース2が架台191に固定されると、ロボット10のうち上縁部15aよりも下側の部分が、架台191から吊り下げられるようにして作業スペース内に配置される。バケット15の下部は、複数組のアーム機構3(ロボットアーム)を介して単一のブラケット4と連結されている。平面視において、複数組のアーム機構3の基端部は周方向に等間隔をおいて配置されている。より詳しくは、ロボット10の基準姿勢において、複数組のアーム機構3は所定の中心軸線101(高さ方向に沿って延びる中心軸線)を中心として等間隔で回転対称に設けられている。本実施形態において例示する形態によれば、アーム機構3は3組設けられ、これらは中心軸線101を中心として120度の等間隔で回転対称に設けられている。また、本実施形態において、ロボット10は、中心軸線101が鉛直方向に延在するように設置されている。しかし、これに限られるものではなく、ロボット10は、中心軸線101が鉛直方向に対して傾斜するように設置されてもよい。
When the
図3は、ロボット10の各アーム機構3の構成例を示す図である。
FIG. 3 is a diagram illustrating a configuration example of each
図2及び図3に示すように、各アーム機構3は、アーム18と第1リンク21及び第2リンク22を有する平行リンクユニット19とを備える。アーム18は、その基端部においてバケット15の下部に揺動可能に連結されている。各アーム18の揺動支軸は中心軸線101と直交する互いに同一の平面内に位置している。すなわち、本実施形態において、各アーム18の揺動支軸は、互いに同一の水平面内に位置している。第1リンク21は基端部においてアーム18の先端部に揺動可能に連結され、先端部においてブラケット4に揺動可能に連結されている。第2リンク22は、第1リンク21と平行に延び、所定の中心軸線101の延在方向において同じ位置に配設されている。そして、第2リンク22は、基端部においてアーム18の先端部に揺動可能に連結され、先端部においてブラケット4に揺動可能に連結されている。第1リンク21及び第2リンク22が一対のリンクを構成している。
As shown in FIGS. 2 and 3, each
基端側リンク挟着部20及び平行リンクユニット19の基端部は、平行リンクユニット19をアーム18に対して任意の方向に揺動可能に連結する基端ジョイント8を構成している。また、先端側リンク挟着部29及び平行リンクユニット19の先端部は、平行リンクユニット19をブラケット4に対して任意の方向に揺動可能に連結する先端ジョイント9を構成している。
The proximal end portion of the proximal end side
図4は、基端ジョイント8の構成例を示す図である。
FIG. 4 is a diagram illustrating a configuration example of the
図2、図3及び図4に示すように、アーム18は、先端部に一対のジョイント部23を有する基端側リンク挟着部20を有する。一対のジョイント部23は、軸線102がアーム18の先端部から中心軸線101を中心とする円の接線方向に伸延し、アーム18の先端部から互いに反対方向外側に伸延している。そして、各ジョイント部23の先端部が球面状の自由端を構成している。ジョイント部23の球面状の自由端がボール部24を構成する。
As shown in FIGS. 2, 3, and 4, the
第1リンク21及び第2リンク22の基端部には、第1リンク21及び第2リンク22の延在方向と直交する方向に窪んだ凹状部25が形成されている。凹状部25には腕状のソケット26が着脱可能に装着され、ソケット26の内周面は略半球面を形成している。このソケット26の内周面の形状は、ボール部24の外周面の形状と略同一に形成されている。そして、第1リンク21及び第2リンク22のソケット26によって一対のジョイント部23のボール部24を挟み込むように、ソケット26とボール部24とが嵌め合わせられている。これにより、当該ボール部24の外周面とソケット26の内周面とが球面対偶を成し、第1リンク21及び第2リンク22がそれぞれアーム18に対して少なくとも2自由度を持って揺動可能に連結されている。
A
そして、第1リンク21の基端部と第2リンク22の基端部との間には付勢ユニット27が架け渡されている。付勢ユニット27は第1リンク21及び第2リンク22を互いに近づけるよう付勢し、これによりリンク21,22が基端側リンク挟着部20を挟む状態を保つように構成され、第1及び第2のリンク21,22のアーム18からの脱落を防止している。
An urging
図6は、ブラケット4の構成例を概略的に示す底面図である。
FIG. 6 is a bottom view schematically showing a configuration example of the
図2、図3及び図6に示すように、ブラケット4は平板状に形成され、中心軸線101と直交する平面上において延在する姿勢、すなわち、水平姿勢で設けられている。ブラケット4は、複数の先端側リンク挟着部29を有する。各先端側リンク挟着部29は、例えばブラケット4の外周縁部に形成されている。そして、複数の先端側リンク挟着部29は、中心軸線101と平行に伸びる軸線を中心として等間隔で回転対称に設けられている。本実施形態において例示する形態によれば、先端側リンク挟着部29は3つ設けられ、これらは中心軸線101と平行に伸びる軸線を中心として120度の等間隔で回転対称に設けられている。
As shown in FIGS. 2, 3, and 6, the
図5は、先端ジョイント9の構成例を示す図である。
FIG. 5 is a diagram illustrating a configuration example of the
図5に示すように、各先端側リンク挟着部29は、一対のジョイント部30を有する。一対のジョイント部30は、軸線104がブラケット4の外周縁部から中心軸線101を中心とする円の接線方向に伸延し、ブラケット4の外周縁部から互いに反対方向外側に伸延している。すなわち、軸線104は、組付状態において、軸線102と平行となるように構成されている。そして、各ジョイント部30の先端部が球面状の自由端を構成している。ジョイント部30の球面状の自由端がボール部31を構成する。
As shown in FIG. 5, each distal end side
第1リンク21及び第2リンク22の先端部は、その基端部と同様に構成されている。
そして、第1リンク21及び第2リンク22のソケット26によって一対のジョイント部30のボール部31を挟み込むように、ソケット26とボール部31とが嵌め合わせられている。これにより、当該ボール部31とソケット26が球面対偶を成し、第1リンク21及び第2リンク22がそれぞれブラケット4に対して少なくとも2自由度を持って揺動可能に連結されている。
The distal end portions of the
The
このように、基端ジョイント8及び先端ジョイント9は、ボールジョイントに構成されている。そして、第1リンク21及び第2リンク22は、基端部が基端側リンク挟着部20を回動自在に挟むように配置され、且つ先端部がブラケット4に設けられている対応する先端側リンク挟着部29を回動自在に挟むように配置されている。
Thus, the
そして、第1リンク21の先端部と第2リンク22の先端部との間にも上記同様の付勢ユニット27が架け渡されている。これにより、リンク21,22が先端側リンク挟着部29を挟む状態を保つように構成され、リンク21,22のブラケット4からの脱落を防止している。このように、平行リンクユニット19は、パラレルリンクに構成されている。
The urging
上記構成によると、ブラケット4は、第1及び第2リンク21,22から成る複数組のパラレルリンクを介してベース2に連結される。図2に示すように、ベース2の下部には各アーム18の基端部をベース2に対して揺動させるアームアクチュエータ13が設けられている。各アームアクチュエータ13の動作に応じて各アーム18が揺動すると、複数組のアーム機構3によって規定される所定の位置にブラケット4が可動範囲内で移動する。このとき、ブラケット4のベース2に対する姿勢が複数組のパラレルリンクで拘束(規定)され、所定の中心軸線101と直交する平面方向における姿勢を維持する。
According to the above configuration, the
そして、複数組のアーム機構3によって規定される所定の位置にブラケット4が可動範囲内で移動すると、中心軸線101に対する平行リンクユニット19の傾斜角度が変化する。また、図7及び図8に示すように、第1リンク21及び第2リンク22を通る平面上において、第1リンク21及び第2リンク22が揺動する。これによって、第1リンク21及び第2リンク22を通る平面の法線方向から見て、第1リンク21及び第2リンク22の延在方向と直交する方向における、第1リンク21と第2リンク22との間隔が変化する。具体的には、第1リンク21及び第2リンク22が一対のジョイント部23及び一対のジョイント部30と直交する姿勢をとる状態において、第1リンク21及び第2リンク22と直交する方向における第1リンク21と第2リンク22との間隔D1は、最大となる。そして、この姿勢から揺動するにしたがって、第1リンク21及び第2リンク22と直交する方向における第1リンク21と第2リンク22との間隔は狭まる。すなわち、図7及び図8に示す間隔D2及びD3は上記間隔D1よりも小さくなる。
When the
図2に示すように、ブラケット4の下面側(ロボットアームの先端部)には、唐揚げW1及び焼売W2を保持するためのエンドエフェクタ80が取り付けられる。
As shown in FIG. 2, an
本実施形態に係るワークの認識装置は、トレーT1及びトレーT2(設置スペース)の所定の範囲内を撮像して画像情報を得るための撮像装置90を備える。ここで、設置スペースの所定の範囲内とは、例えば、平面視したトレーT1(又はトレーT2)を2分割したときのいずれか一方であってもよいし、3分割以上したときのいずれかであってもよいし、又は分割せずに任意に選択された範囲内であってもよい。なお、このように平面視したトレーT1(又はトレーT2)をいくつかのエリアに分割し、当該エリアごとに上記した処理を繰り返し行ってもよい。また、設置スペースの所定の範囲内は、平面視したトレーT1(又はトレーT2)の全体であってもよい。
The workpiece recognition apparatus according to the present embodiment includes an
図2に示すように、ロボット10のアーム機構3の上端部と同じか又はほぼ同じ高さ位置において、2つのアーム機構3の間に取り付けられる撮像装置90を備える。撮像装置90は、ロボット10に中心軸線101から外れて設けられることにより、トレーT1内及びトレーT2の所定の範囲内を斜め上方から撮像する。また、撮像装置90は、その内部の2地点からトレーT1内及びトレーT2内を撮像する。
As shown in FIG. 2, the
本実施軽形態に係る認識装置は、図示しない投光器をさらに備える。当該投光器は、トレーT1内及びトレーT2内にドットパターンを投光する。当該ドットバターンは青色である。なお、当該投光器は、ロボット10に直接取り付けて設けられてもよいし、ロボット10とは別個に設けられてもよい。
The recognition apparatus according to the present embodiment further includes a projector (not shown). The projector is for projecting a dot pattern in the tray T 1 and the tray T 2. The dot pattern is blue. Note that the projector may be directly attached to the
図9は、本発明の一実施形態に係るワークの認識装置が制御するロボットのエンドエフェクタを示す斜視図である。本実施形態に係るエンドエフェクタ80は、ロボット10の高さ方向に沿って延びる中心軸線101上に設けられ、負圧により吸着することで、1つの唐揚げW1又は1つの焼売W2を保持することができる。エンドエフェクタ80は、ブラケット4の下面側(ロボットアームの先端部)に取り付けられる取付け部81と、取付け部81の底面から鉛直方向に延びる3本の軸部材82と、3本の軸部材82の下端部に取り付けられる負圧形成部83と、負圧形成部83の底面に取り付けられる中空の略円筒状に形成された可撓性を有する保持部84と、を含む。保持部84は、前記したように構成されることで、作業対象となるワークが凹凸のある唐揚げW1であったとしても、それを覆うように吸着して傷まないように保持することができる。
FIG. 9 is a perspective view showing an end effector of a robot controlled by a workpiece recognition apparatus according to an embodiment of the present invention. The
(制御部100が行う処理の一例)
本発明の一実施形態に係るワークの認識装置の制御部100が実行する処理の一例について、主に図10を参照して説明する。図10は、本発明の一実施形態に係るロボットの制御部100が実行する処理を示すフローチャートである。
(Example of processing performed by control unit 100)
An example of processing executed by the
まず、制御部100は、ベルトコンベアBにより搬送されて弁当箱Lが所定の位置を通過したことをセンサ等により検知すると、撮像装置90により得られる画像情報を解析することで、複数の唐揚げW1がばら積みされたトレーT1(設置スペース)の所定の範囲内において高さ位置が最も高いポイントを検出する。このようにして第1のステップS1が実行される。
First, when the
次に、制御部100は、第1のステップS1において検出した最も高いポイントから所定の距離以内において、当該最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積を検出する。このようにして第2のステップS2が実行される。
Next, the
なお、制御部100は、撮像装置90により2地点から撮像することで得られる視差を解析することで、トレーT1の所定の範囲内の高さ位置を検出することにより、第1のステップS1及び第2のステップS2を実行してもよい。さらに、図示しない投光器によりトレーT1の所定の範囲内にドットパターンを照射し、ドットパターンが照射されているトレーT1を撮像することで得られる画像情報を解析することにより、第1のステップS1及び第2のステップS2を実行してもよい。
The
さらに、制御部100は、第2のステップS2で検出した面積が所定の条件を満たす場合に、最も高いポイントに唐揚げW1(ワーク)が存在することを認識する。ここで、所定の条件は、前記面積が予め定められた第2の閾値よりも大きいと判定することを含む。このようにして第3のステップS3が実行される。
Furthermore, when the area detected in the second step S2 satisfies a predetermined condition, the
なお、所定の条件は、前記面積が第2の閾値よりも大きい予め定められた第3の閾値よりも小さいと判定することをさらに含んでもよい。 The predetermined condition may further include determining that the area is smaller than a predetermined third threshold larger than the second threshold.
そして、制御部100は、第3のステップS3において、最も高いポイントに唐揚げW1が存在することを認識した場合に、3組のアーム機構3(ロボットアーム)によりエンドエフェクタ80を第1のステップS1で検出した最も高いポイント又は最も高いポイントから所定の距離以内において最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分まで移動させる。このようにして第4のステップS4が実行される。ここで、最も高いポイントから所定の距離以内において最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の中で、例えば、その重心となる部分まで移動させてもよい。これにより、唐揚げW1(ワーク)を保持し易くなる。
Then, the
次に、エンドエフェクタ80により第1のステップS1で検出した最も高いポイントに存在する唐揚げW1を保持する。このとき、エンドエフェクタ80は、負圧により吸着することで唐揚げW1を保持してもよい。このようにして第5のステップS5が実行される。
Next, the deep-fried W 1 present at the highest point detected in the first step S 1 is held by the
最後に、3組のアーム機構3(ロボットアーム)によりエンドエフェクタ80及びそれに保持された唐揚げW1をトレーT1(設置スペース)の所定の範囲内から移動させる。このようにして第6のステップS6が実行される。なお、3組のアーム機構3は、取り出した唐揚げW1をベルトコンベアBにより搬送されてくる弁当箱Lの所定の位置に載置することで、弁当箱Lに盛り付け作業を行う。
Finally, the
制御部100は、上記のようにして、複数の唐揚げW1がばら積みだれたトレーT1から唐揚げW1を保持して取り出し、弁当箱Lに盛り付ける。
As described above, the
なお、ロボット10は、上記のように唐揚げW1を盛り付けたあと、トレーT2内に載置された複数の焼売W2から焼売W2を保持して取り出し、同じ弁当箱Lに対して盛り付け作業を行う。ここで、焼売W2は、トレーT1内にばら積みされた唐揚げW1と異なり、トレーT2内で互いに重ならないように載置されている。しかしながら、焼売W2ごとに僅かに形状が異なることで、トレーT2内においても高さ位置にもばら付きがある。したがって、制御部100は、トレーT1内にばら積みされた唐揚げW1を保持して取り出した場合と同様に、トレーT2内の高さ位置についても検出し、上記した第1のステップS1乃至第6のステップS6を実行する。
Note that the
また、ロボット10は、上記した第1のステップS1乃至第6のステップS6を繰り返し行うことで、ベルトコンベアB上を順に搬送されてくる複数の弁当箱Lに対して同様の盛り付け作業を行うことができる。そして、トレーT1の底板表面の高さ位置と、弁当箱Lへの盛り付けを許容される最も小さい唐揚げW1の高さ寸法とを予め記憶しておくことにより、その予め記憶しておいたデータに基づいて、トレーT1内にばら積みされた唐揚げW1が全て無くなった場合にそれを認識して、唐揚げW1の取り出し作業を終了してもよい。なお、焼売W2についても同様であるため、ここではその説明を繰り返さない。
In addition, the
(効果)
本実施形態に係るワークの認識装置は、唐揚げW1がばら積みされたトレーT1の所定の範囲内を上方から撮像することにより得られる画像情報を解析することで、トレーT1の所定の範囲内において高さ位置が最も高いポイントを検出する。そして、当該最も高いポイントから所定の距離以内において所定の条件が満たされていると判定した場合に、当該最も高いポイントに唐揚げW1が存在すると認識する。ここで、所定の条件は、最も高いポイントから所定の距離以内において最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積が、予め定められた第2の閾値よりも大きいと判定することを含む。これにより、本実施形態では、従来のワークの認識装置が一般に行うように、ワークの形状を認識する必要がないため、CADデータなどの大きなデータ量を取り扱う必要がない。また、ワークの形状に関するデータなどを予め記憶しておく必要もなく、さらにこのようなデータとの比較を行う必要もない。すなわち、複雑な処理を行う必要もない。その結果、本実施形態に係るワークの認識装置は、所定の形状を有しないワークが含まれるような場合であっても、複数のワークが設置された設置スペースにおいてワークを迅速に認識することができる。
(effect)
The workpiece recognition apparatus according to the present embodiment analyzes the image information obtained by imaging from above the predetermined range of the tray T 1 in which the deep-fried chicken W 1 is stacked, and thereby analyzes the predetermined information on the tray T 1 . The point with the highest height position within the range is detected. Then, recognizing in within a predetermined distance from the highest point and the predetermined condition is satisfied when it is determined, a fried W 1 to the highest point exists. Here, the predetermined condition is that the area of a portion where the difference in height position from the highest point within a predetermined distance from the highest point is smaller than a predetermined first threshold is a predetermined second. And determining that the value is larger than the threshold value. Thereby, in this embodiment, since it is not necessary to recognize the shape of the workpiece as is generally done by a conventional workpiece recognition apparatus, it is not necessary to handle a large amount of data such as CAD data. Further, it is not necessary to store data relating to the shape of the workpiece in advance, and it is not necessary to perform comparison with such data. That is, it is not necessary to perform complicated processing. As a result, the workpiece recognition apparatus according to the present embodiment can quickly recognize a workpiece in an installation space where a plurality of workpieces are installed, even when a workpiece not having a predetermined shape is included. it can.
また、所定の条件が、第2のステップS2で検出した面積が第2の閾値よりも大きい予め定められた第3の閾値よりも小さいと判定することをさらに含むことにより、誤って認識することなく確実にワークを認識することができる。 In addition, the predetermined condition may be erroneously recognized by further including determining that the area detected in the second step S2 is smaller than a predetermined third threshold value that is larger than the second threshold value. It is possible to recognize the workpiece reliably.
そして、本実施形態に係る撮像装置90は、トレーT1(設置スペース)の所定の範囲内を斜め上方から撮像することにより、視野角が広くなるため、広い範囲を撮像することが可能になる。
The
さらに、本実施形態では、トレーT1内を2地点から撮像することで得られる視差を解析することで、トレーT1内の高さ位置を検出することにより、第1のステップS1及び第2のステップS2が実行される。これにより、本実施形態に係るワークの認識装置は、画像情報の解析を容易に行うことができるため、効率良く高さ位置を検出することが可能になる。 Furthermore, in the present embodiment, by analyzing the disparity obtained by imaging the inside of the tray T 1 from two points, by detecting the height position of the tray T 1, the first step S1 and the second Step S2 is executed. Thereby, since the workpiece recognition apparatus according to the present embodiment can easily analyze the image information, the height position can be detected efficiently.
そして、本実施形態では、投光器を用いてドットパターンが照射されているトレーT1内を撮像することで得られる画像情報を解析することにより、第1のステップS1及び第2のステップS2が実行される。これにより、本実施形態に係るワークの認識装置は、画像情報の解析を容易に行うことができるため、効率良く高さ位置を検出することが可能になる。 In the present embodiment, by analyzing the image information obtained by imaging the inside of the tray T 1 which dot patterns are irradiated with the projector, the first step S1 and second step S2 is executed Is done. Thereby, since the workpiece recognition apparatus according to the present embodiment can easily analyze the image information, the height position can be detected efficiently.
また、本実施形態では、投光器が照射するドットパターンが青色である。ここで、青色の光は、波長が短く強い光である。したがって、上記のように青色とすることで、周囲の光に影響を受け難くいドットパターンを照射することが可能となる。また、本実施形態のようにワークが唐揚げW1などの食品である場合、ワークが青色であることが極めて稀であるため、ドットパターンとワークが似た色になる可能性を低くすることができる。これにより、ワークに対して鮮明にドットパターンを照射することができるため、画像情報の解析を一層容易に行うことが可能となる。 In the present embodiment, the dot pattern irradiated by the projector is blue. Here, blue light is strong light with a short wavelength. Therefore, by using blue as described above, it is possible to irradiate a dot pattern that is not easily affected by ambient light. In addition, when the work is a food such as deep-fried W 1 as in the present embodiment, the work is rarely blue, so the possibility that the dot pattern and the work are similar in color is reduced. Can do. Thereby, since a dot pattern can be clearly irradiated with respect to a workpiece | work, it becomes possible to perform analysis of image information still more easily.
さらに、本実施形態では、複数の唐揚げW1(ワーク)がばら積みされているトレーT1(設置スペース)において上記した処理が行われる。これにより、本実施形態に係るワークの認識装置を有効に用いることができる。 Further, in the present embodiment, the above-described processing is performed in the tray T 1 (installation space) in which a plurality of deep-fried W 1 (work) are stacked. Thereby, the workpiece recognition apparatus according to the present embodiment can be used effectively.
そして、本実施形態では、ワークの認識装置の制御部100がトレーT1(設置スペース)の所定の範囲内から唐揚げW1(ワーク)を保持して取り出すためのロボット10をさらに制御する。これにより、本実施形態に係るワークの認識装置を用いて、トレーT1の所定の範囲内において最上部に位置する取り出し易い唐揚げW1から順に保持して取り出すことができる。その結果、エンドエフェクタ80が衝突することで唐揚げW1が傷んだり、トレーT1から唐揚げW1がこぼれ落ちたりしてしまうことを防止することができる。
In this embodiment, the
本実施形態に係るエンドエフェクタ80は、負圧により吸着することで唐揚げW1を保持する。これにより、ワークを傷めることなく保持することができる。この作用は、本実施形態のように、ワークが傷みやすい唐揚げW1などのような場合に特に有効である。
The
また、本実施形態に係るエンドエフェクタ80は、ロボット10の高さ方向に沿って延びる中心軸線101上に設けられ、撮像装置90は、ロボット10に中心軸線101から外れて設けられることにより、トレーT1の所定の範囲内を斜め上方から撮像する。これにより、撮像装置90は、視野角が広がり、且つエンドエフェクタ80に妨げられることを抑制することができるため、効率良く広い範囲を撮像することができる。
Further, the
(変形例)
上記実施形態では、ワークの認識装置の制御部100がロボット10を制御することで、設置スペースの所定の範囲内からワークを保持して取り出し、上記第4のステップS4〜第5のステップS5を実施する場合について説明したが、これに限定されない。すなわち、ワークの認識装置の制御部100は、第1のステップS1〜第3のステップS3のみ行ってもよいし、当該ステップを行ったあとで、それを利用して、最も高い位置に存在するワークに対して任意の加工を行うなどロボット10が実施するのとは別の処理を行ってもよい。
(Modification)
In the said embodiment, the
上記実施形態では、ワークが所定の形状を有しない食品(唐揚げW1及び焼売W2)である場合について説明したが、これに限定されない。例えば、ワークは所定の形状を有しない岩石であってもよい。なお、本発明に係るワークの認識装置及びワークを認識する方法は、所定の形状を有しないワークに対して作業を行うことで特に有効に用いられるが、所定の形状を有するワーク(例えば、機械の組み立てに用いる部材など)に対しても同様に作業を行うことができる。 In the above embodiment, the workpiece has been described for the case where a food does not have a predetermined shape (fried W 1 and Shaomai W 2), but is not limited thereto. For example, the workpiece may be a rock that does not have a predetermined shape. Note that the workpiece recognition apparatus and the workpiece recognition method according to the present invention can be used particularly effectively by performing work on a workpiece that does not have a predetermined shape. The same operation can be performed on the members used for the assembly.
上記実施形態では、エンドエフェクタ80が負圧により吸着することでワーク(唐揚げW1及び焼売W2)を保持する場合について説明したが、これに限定されない。例えば、エンドエフェクタ80は、例えば、針を刺すことでワークを保持してもよいし、両側から拘束するようにして把持(又はチャック)することでワークを保持してもよい。
In the above-described embodiment, the case has been described in which the
上記実施形態では、ロボット10が、ロボットアームとして、天吊りされた状態の3組のアーム機構3を備える場合について説明したが、これに限定されない。例えば、ロボット10は、多関節を有するロボットアームを1つのみ有し、そのロボットアームの先端部にエンドエフェクタ80が取り付けられるものであってもよい。また、ロボット10が設置スペースの脇に設置されていてもよい。
In the above-described embodiment, the case where the
上記説明から、当業者にとっては、本発明の多くの改良や他の実施形態が明らかである。したがって、上記説明は、例示としてのみ解釈されるべきであり、本発明を実行する最良の態様を当業者に教示する目的で提供されたものである。本発明の精神を逸脱することなく、その構造及び/又は機能の詳細を実質的に変更できる。 From the foregoing description, many modifications and other embodiments of the present invention are obvious to one skilled in the art. Accordingly, the foregoing description should be construed as illustrative only and is provided for the purpose of teaching those skilled in the art the best mode of carrying out the invention. The details of the structure and / or function may be substantially changed without departing from the spirit of the invention.
2 ベース
3 アーム機構
4 ブラケット
8 基端ジョイント
9 先端ジョイント
10 ロボット
13 アームアクチュエータ
15 バケット
15a 上縁部
17 リブ
18 アーム
19 平行リンクユニット
20 基端側リンク挟着部
21 第1リンク
21 リンク
22 第2リンク
23 ジョイント部
24 ボール部
25 凹状部
26 ソケット
27 付勢ユニット
29 先端側リンク挟着部
30 ジョイント部
31 ボール部
80 エンドエフェクタ
81 取付け部
82 軸部材
83 負圧形成部
84 保持部
90 撮像装置
100 制御部
101 中心軸線
102 軸線
104 軸線
191 架台
191a 取付口
191b 周縁部
B ベルトコンベア
L 弁当箱
T1、T2トレー
W1 唐揚げ
W2 焼売
2
Claims (11)
前記設置スペースの所定の範囲内を撮像して画像情報を得るための撮像装置と、
前記撮像装置から得られた画像情報を解析して前記ワークを認識するための制御部と、を備え、
前記制御部は、
前記画像情報を解析することで、前記設置スペースの所定の範囲内において高さ位置が最も高いポイントを検出する第1のステップと、
前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積を検出する第2のステップと、
前記面積が所定の条件を満たす場合に、前記最も高いポイントにワークが存在することを認識する第3のステップと、を実行し、
前記所定の条件は、前記面積が予め定められた第2の閾値よりも大きいと判定することを含む、ワークの認識装置。 A workpiece recognition device for recognizing a workpiece in an installation space where a plurality of workpieces are installed,
An imaging device for obtaining image information by imaging within a predetermined range of the installation space;
A controller for recognizing the workpiece by analyzing image information obtained from the imaging device,
The controller is
Analyzing the image information to detect a point having the highest height position within a predetermined range of the installation space; and
A second step of detecting an area of a portion where a difference in height position from the highest point within a predetermined distance from the highest point is smaller than a predetermined first threshold;
Performing a third step of recognizing that a workpiece is present at the highest point when the area satisfies a predetermined condition;
The workpiece recognition apparatus, wherein the predetermined condition includes determining that the area is larger than a predetermined second threshold.
前記制御部は、前記2地点から撮像することで得られる視差を解析して、前記設置スペースの所定の範囲内の高さ位置を検出することにより、前記第1のステップ及び前記第2のステップを実行する、請求項1乃至3のいずれかに記載のワークの認識装置。 The imaging device captures an image of a predetermined range of the installation space from two points,
The control unit analyzes the parallax obtained by imaging from the two points, and detects a height position within a predetermined range of the installation space, whereby the first step and the second step The workpiece recognition apparatus according to claim 1, wherein:
前記撮像装置は、前記ドットパターンが照射されている前記設置スペースの所定の範囲内を撮像し、
前記制御部は、前記設置スペースの所定の範囲内を撮像することで得られる画像情報を解析することにより、前記第1のステップ及び前記第2のステップを実行する、請求項1乃至4のいずれかに記載のワークの認識装置。 A projector that irradiates a dot pattern within a predetermined range of the installation space;
The imaging device images within a predetermined range of the installation space irradiated with the dot pattern,
5. The control unit according to claim 1, wherein the control unit executes the first step and the second step by analyzing image information obtained by capturing an image within a predetermined range of the installation space. The workpiece recognition device according to claim 1.
前記ロボットは、
ロボットアームと、
前記ロボットアームの先端部に取り付けられ、前記ワークを保持するためのエンドエフェクタと、を備え、
前記制御部は、
前記第3のステップにおいて、前記最も高いポイントにワークが存在することを認識した場合に、前記ロボットアームにより前記エンドエフェクタを前記最も高いポイント又は前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分まで移動させる第4のステップと、
前記エンドエフェクタにより前記最も高いポイントに存在するワークを保持する第5のステップと、
前記ロボットアームにより前記エンドエフェクタ及びそれに保持されたワークを前記設置スペースの所定の範囲内から移動させる第6のステップと、
をさらに実行する、請求項1乃至7のいずれかに記載のワークの認識装置。 The control unit further controls a robot for holding and taking out a workpiece from within a predetermined range of the installation space;
The robot is
A robot arm,
An end effector attached to the tip of the robot arm and holding the workpiece;
The controller is
In the third step, when it is recognized that a workpiece is present at the highest point, the highest point within a predetermined distance from the highest point or the highest point by moving the end effector by the robot arm. A fourth step of moving to a portion where the difference in height position is smaller than a predetermined first threshold;
A fifth step of holding the workpiece present at the highest point by the end effector;
A sixth step of moving the end effector and the work held thereon by the robot arm from a predetermined range of the installation space;
The workpiece recognition apparatus according to claim 1, further executing:
前記設置スペースの所定の範囲内を撮像して得られる画像情報を解析することで、前記設置スペースの所定の範囲内において高さ位置が最も高いポイントを検出する第1のステップと、
前記最も高いポイントから所定の距離以内において前記最も高いポイントとの高さ位置の差が予め定められた第1の閾値よりも小さい部分の面積を検出する第2のステップと、
前記面積が所定の条件を満たす場合に、前記最も高いポイントにワークが存在することを認識する第3のステップと、を備え、
前記所定の条件は、前記面積が予め定められた第2の閾値よりも大きいと判定することを含む、ワークを認識する方法。 A method for recognizing a workpiece in an installation space where a plurality of workpieces are installed,
A first step of detecting a point having the highest height position within a predetermined range of the installation space by analyzing image information obtained by imaging the predetermined range of the installation space;
A second step of detecting an area of a portion where a difference in height position from the highest point within a predetermined distance from the highest point is smaller than a predetermined first threshold;
A third step of recognizing that a workpiece is present at the highest point when the area satisfies a predetermined condition,
The method for recognizing a workpiece, wherein the predetermined condition includes determining that the area is larger than a predetermined second threshold value.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017114569A JP6860432B2 (en) | 2017-06-09 | 2017-06-09 | Work recognition device and work recognition method |
CN201880038077.4A CN110799311B (en) | 2017-06-09 | 2018-06-07 | Workpiece recognition device and workpiece recognition method |
PCT/JP2018/021889 WO2018225827A1 (en) | 2017-06-09 | 2018-06-07 | Workpiece recognition device, and method for recognizing workpiece |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017114569A JP6860432B2 (en) | 2017-06-09 | 2017-06-09 | Work recognition device and work recognition method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018202593A true JP2018202593A (en) | 2018-12-27 |
JP6860432B2 JP6860432B2 (en) | 2021-04-14 |
Family
ID=64567408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017114569A Active JP6860432B2 (en) | 2017-06-09 | 2017-06-09 | Work recognition device and work recognition method |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP6860432B2 (en) |
CN (1) | CN110799311B (en) |
WO (1) | WO2018225827A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11213954B2 (en) | 2019-05-21 | 2022-01-04 | Toyota Jidosha Kabushiki Kaisha | Workpiece identification method |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022116606A (en) * | 2021-01-29 | 2022-08-10 | セイコーエプソン株式会社 | Robot control method and robot system |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0430991A (en) * | 1990-05-25 | 1992-02-03 | Toyoda Mach Works Ltd | Robot with visual device |
JP2012135820A (en) * | 2010-12-24 | 2012-07-19 | Ihi Corp | Automatic picking device and automatic picking method |
JP2014024142A (en) * | 2012-07-26 | 2014-02-06 | Fanuc Ltd | Apparatus and method for taking out bulk articles by robot |
JP2015089590A (en) * | 2013-11-05 | 2015-05-11 | ファナック株式会社 | Method and apparatus for taking out bulked article by using robot |
JP2017030115A (en) * | 2015-08-04 | 2017-02-09 | 株式会社リコー | Picking device, picking method and picking program |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015202544A (en) * | 2014-04-15 | 2015-11-16 | 株式会社安川電機 | Robot control system, information communication module, robot controller, computer program and robot control method |
-
2017
- 2017-06-09 JP JP2017114569A patent/JP6860432B2/en active Active
-
2018
- 2018-06-07 CN CN201880038077.4A patent/CN110799311B/en active Active
- 2018-06-07 WO PCT/JP2018/021889 patent/WO2018225827A1/en active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0430991A (en) * | 1990-05-25 | 1992-02-03 | Toyoda Mach Works Ltd | Robot with visual device |
JP2012135820A (en) * | 2010-12-24 | 2012-07-19 | Ihi Corp | Automatic picking device and automatic picking method |
JP2014024142A (en) * | 2012-07-26 | 2014-02-06 | Fanuc Ltd | Apparatus and method for taking out bulk articles by robot |
JP2015089590A (en) * | 2013-11-05 | 2015-05-11 | ファナック株式会社 | Method and apparatus for taking out bulked article by using robot |
JP2017030115A (en) * | 2015-08-04 | 2017-02-09 | 株式会社リコー | Picking device, picking method and picking program |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11213954B2 (en) | 2019-05-21 | 2022-01-04 | Toyota Jidosha Kabushiki Kaisha | Workpiece identification method |
Also Published As
Publication number | Publication date |
---|---|
CN110799311B (en) | 2022-06-24 |
JP6860432B2 (en) | 2021-04-14 |
CN110799311A (en) | 2020-02-14 |
WO2018225827A1 (en) | 2018-12-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6983524B2 (en) | Information processing equipment, information processing methods and programs | |
US10124489B2 (en) | Locating, separating, and picking boxes with a sensor-guided robot | |
US9415511B2 (en) | Apparatus and method for picking up article randomly piled using robot | |
US10894324B2 (en) | Information processing apparatus, measuring apparatus, system, interference determination method, and article manufacturing method | |
JP6771744B2 (en) | Handling system and controller | |
JP5333344B2 (en) | Shape detection apparatus and robot system | |
US20150246778A1 (en) | Device and method of arraying articles by using robot, and article transfer system | |
Nerakae et al. | Using machine vision for flexible automatic assembly system | |
JP7299330B2 (en) | Multi-camera image processing | |
JP5785284B2 (en) | Robot system that prevents accidents of transported objects falling | |
JP6950638B2 (en) | Manipulator controller, manipulator control method, and manipulator control program | |
JP2011183537A (en) | Robot system, robot device and work taking-out method | |
JP7062406B2 (en) | Information processing equipment and robot arm control system | |
WO2018225827A1 (en) | Workpiece recognition device, and method for recognizing workpiece | |
JP5440885B2 (en) | Robot system | |
JP7377627B2 (en) | Object detection device, object grasping system, object detection method, and object detection program | |
JP7233858B2 (en) | ROBOT CONTROL DEVICE, ROBOT CONTROL METHOD, AND ROBOT CONTROL PROGRAM | |
JP2016196077A (en) | Information processor, information processing method, and program | |
JP2018169275A (en) | Inspection system and controller for controlling inspection system and program | |
JPWO2018212203A1 (en) | Gripping system | |
JP6167760B2 (en) | Article position recognition device | |
CN110383453A (en) | Base board delivery device | |
JP2023524607A (en) | ROBOT MULTI-SPECIFIED GRIPPER ASSEMBLY AND METHOD OF OPERATION THEREOF | |
JP2015136769A (en) | End effector control method | |
CN113977581A (en) | Grabbing system and grabbing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200520 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210302 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210326 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6860432 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |