JP2019058967A - Food transfer system and food holding device - Google Patents

Food transfer system and food holding device Download PDF

Info

Publication number
JP2019058967A
JP2019058967A JP2017184104A JP2017184104A JP2019058967A JP 2019058967 A JP2019058967 A JP 2019058967A JP 2017184104 A JP2017184104 A JP 2017184104A JP 2017184104 A JP2017184104 A JP 2017184104A JP 2019058967 A JP2019058967 A JP 2019058967A
Authority
JP
Japan
Prior art keywords
food
gripping
fruit
vegetables
fruits
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017184104A
Other languages
Japanese (ja)
Other versions
JP7201313B2 (en
Inventor
貴裕 野崎
Takahiro Nozaki
貴裕 野崎
大西 公平
Kohei Onishi
公平 大西
佑貴 斉藤
Yuki Saito
佑貴 斉藤
福島 聡
Satoshi Fukushima
聡 福島
和則 二宮
Kazunori Ninomiya
和則 二宮
充隆 栗田
Mitsutaka Kurita
充隆 栗田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Keio University
Shibuya Seiki Co Ltd
Original Assignee
Keio University
Shibuya Seiki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Keio University, Shibuya Seiki Co Ltd filed Critical Keio University
Priority to JP2017184104A priority Critical patent/JP7201313B2/en
Priority to PCT/JP2018/035501 priority patent/WO2019059403A1/en
Publication of JP2019058967A publication Critical patent/JP2019058967A/en
Application granted granted Critical
Publication of JP7201313B2 publication Critical patent/JP7201313B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/16Sorting according to weight
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices

Abstract

To provide a technology that holds foods having irregular shapes and sizes more properly.SOLUTION: A food transfer system includes: transfer means which transfers foods; data acquisition means which acquires data about each food transferred by the transfer means; individual information acquisition means which acquires individual information including at least one of a position or quality of each food on the basis of an acquisition result of the data acquisition means; holding means which holds the food which is a holding object on the basis of the individual information; position detection means which detects a position of a movable member which holds the food in the holding means; a movement mechanism which moves the holding means to a predetermined position; and control means which controls operation of the movable member in the holding means on the basis of position information of the position detection means.SELECTED DRAWING: Figure 1

Description

本発明は、果物や野菜等の個々に形状が不均一な農産物や、唐揚げや魚の切り身、惣菜等の個々に形状が不均一な食品を移載する食品移載システム及び食品把持装置に関する。   The present invention relates to a food transfer system and a food gripping apparatus for transferring food products such as fruits and vegetables having an uneven shape individually to each other, food items such as fried chicken and fish fillets, and vegetables each having an uneven shape individually.

従来、果物や野菜等の果菜を自動的に移載する技術が知られている。
例えば、特許文献1には、青果物の大きさや硬さに合わせて青果物を吸着した時の吸引力を調節して、青果物を移送する吸着移送装置に関する技術が開示されている。
Conventionally, techniques for automatically transferring fruits and vegetables such as fruits and vegetables are known.
For example, Patent Document 1 discloses a technique relating to an adsorption and transfer device that transports fruits and vegetables by adjusting the suction force when the fruits and vegetables are adsorbed according to the size and hardness of the fruits and vegetables.

特開2017−024811公報JP 2017-024811 gazette

しかしながら、特許文献1に記載された技術においては、青果物を吸着して保持することから、形状や大きさが不定形な果菜を確実に保持することが困難である。また、軟弱な果菜や腐敗部分を有する果菜を吸着した場合、吸引力によって果菜を傷付けたり、腐敗部分の切片によって吸引の詰まりを発生させたりする可能性がある。
また、果菜に限らず形状や大きさが不定形な総菜等の食品においても個々の形状が不均一であるため、その取り扱いが困難である。そのため、このような食品の取り扱いを自動化することは難しく、お弁当の詰め合わせ作業等は人手により行っているのが現状である。
このように、従来の技術においては、果菜や総菜等の形状や大きさが不定形の食品を適切に保持することが困難であった。
However, in the technique described in Patent Document 1, since fruits and vegetables are adsorbed and held, it is difficult to reliably hold fruits and vegetables having an irregular shape and size. In addition, when a weak fruit or a fruit having a rotted portion is adsorbed, the suction force may damage the fruit or the block of the rotted portion may cause suction clogging.
In addition, not only fruits and vegetables but also foods such as general dishes with irregular shapes and sizes are not uniform in their individual shapes, which makes their handling difficult. Therefore, it is difficult to automate the handling of such food, and it is the present condition that the assortment work of the lunch box etc. is performed manually.
As described above, in the prior art, it has been difficult to properly hold food of irregular shape and size such as fruits and vegetables.

本発明の課題は、形状や大きさが不定形の食品をより適切に保持する技術を提供することである。   An object of the present invention is to provide a technique for more appropriately holding food of irregular shape and size.

上記課題を解決するため、本発明の一態様に係る食品移載システムは、
食品を搬送する搬送手段と、
前記搬送手段によって搬送される前記食品に関するデータを取得するデータ取得手段と、
前記データ取得手段の取得結果に基づいて、前記食品の位置または品質の少なくともいずれかを含む個体情報を取得する個体情報取得手段と、
前記個体情報に基づいて、把持対象の前記食品を把持する把持手段と、
前記把持手段における食品を把持する可動部材の位置を検出する位置検出手段と、
前記把持手段を所定位置に移動させる移動機構と、
前記位置検出手段の位置情報に基づいて、前記把持手段における前記可動部材の動作を制御する制御手段と、
を備える。
また、第2の発明は、前記請求項1に記載した発明において、前記制御手段は、前記食品の把持動作に対応して設定された、制御エネルギーを速度または位置のエネルギーと力のエネルギーとに割り当てる変換を行うことにより、前記把持手段における動作を制御することを特徴とするものである。
さらに、第3の発明は、前記請求項1または請求項2に記載した発明において、前記制御手段は、前記食品の品質について、複数段階の設定値を記憶する記憶手段を備え、前記制御手段は、前記個体情報取得手段の取得結果に基づいて、前記記憶手段に記憶された前記設定値の中から、把持対象の前記食品の品質に対応する前記設定値を読み出し、当該設定値に基づいて、前記把持手段における動作を制御することを特徴とするものである。
さらに、第4の発明は、前記請求項1ないし請求項3に記載した発明において、前記把持手段は、重量計測部をさらに備え、前記制御手段は、前記把持手段が前記食品を把持した際に算出された制御のためのパラメータに基づいて、前記食品の重量を判定することを特徴とするものである。
さらに、第5の発明は、前記請求項1ないし請求項4に記載した発明において、前記制御手段は、前記個体情報取得手段の取得結果に基づいて、前記把持手段が前記食品を把持する際の接触位置を制御することを特徴とするものである。
さらに、第6の発明は、食品把持装置であって、把持対象の食品に関して当該食品の品質を含む個体情報を取得する個体情報取得手段と、
前記個体情報に基づいて、把持対象の前記食品を把持する把持手段と、
前記把持手段における食品を把持する可動部材の位置を検出する位置検出手段と、
前記位置検出手段の位置情報に基づいて、前記把持手段における可動部材の動作を制御する制御手段と、を備えることを特徴とするものである。
さらに、第7の発明は、前記請求項6に記載した発明において、前記制御手段は、前記食品の把持動作に対応して設定された、制御エネルギーを速度または位置のエネルギーと力のエネルギーとに割り当てる変換を行うことにより、前記把持手段における動作を制御することを特徴とするものである。
In order to solve the above-mentioned subject, the food transfer system concerning one mode of the present invention is:
Transport means for transporting food;
Data acquisition means for acquiring data relating to the food conveyed by the conveyance means;
An individual information acquisition unit that acquires individual information including at least one of the position and the quality of the food based on the acquisition result of the data acquisition unit;
Grasping means for grasping the food to be grasped based on the individual information;
Position detection means for detecting the position of the movable member holding the food in the holding means;
A moving mechanism for moving the gripping means to a predetermined position;
Control means for controlling the movement of the movable member in the holding means based on the position information of the position detection means;
Equipped with
Further, according to a second aspect of the invention, in the invention according to the first aspect, the control means sets control energy to energy of speed or position and energy of force, which is set corresponding to the gripping operation of the food. It is characterized in that the operation in the holding means is controlled by performing the conversion to be assigned.
Furthermore, according to the third invention, in the invention described in the first or second aspect, the control means includes storage means for storing a plurality of setting values of the quality of the food, and the control means is The setting value corresponding to the quality of the food to be gripped is read out from the setting values stored in the storage unit based on the acquisition result of the individual information acquiring unit, and the setting value is read based on the setting value. The operation of the gripping means is controlled.
Furthermore, according to the fourth invention, in the invention described in the first to third inventions, the holding means further includes a weight measuring unit, and the control means holds the food when the holding means holds the food. The weight of the food is determined based on the calculated control parameter.
Furthermore, according to the fifth invention, in the invention described in the first to fourth inventions, the control means is configured to grip the food based on the acquisition result of the individual information acquisition means. It is characterized in that the contact position is controlled.
Furthermore, the sixth invention is a food gripping apparatus, wherein individual information acquiring means for acquiring individual information including the quality of the food with respect to the food to be gripped;
Grasping means for grasping the food to be grasped based on the individual information;
Position detection means for detecting the position of the movable member holding the food in the holding means;
And control means for controlling the movement of the movable member in the gripping means on the basis of the position information of the position detecting means.
Still further, according to a seventh invention, in the invention according to the sixth invention, the control means sets control energy to energy of speed or position and energy of force, which is set corresponding to the gripping operation of the food. It is characterized in that the operation in the holding means is controlled by performing the conversion to be assigned.

本発明によれば、形状や大きさが不定形の食品をより適切に保持する技術を提供することができる。
また、請求項2の発明では、前記請求項1の発明において、把持動作に対応して設定された効率のよい把持動作が可能となる。
さらに、請求項3の発明では、予め設定されている基準値のデータに基づきハンドの動作を制御することで、把持対象の食品個別の条件に適合した把持動作を行うことが可能となる。
さらに、請求項4の発明では、ハンドの把持動作により食品の重量を判定し、判定した食品の選別先に食品を移送することができる。
さらに、請求項5の発明では、食品の品質に応じて把持する箇所を変更することができ、食品をより適切に保持することができる。
さらに、請求項6の発明では、食品をより適切に保持する技術を提供することができる。
さらに、請求項7の発明では、前記請求項7の発明において、把持動作に対応して設定された効率のよい把持動作が可能となる。
According to the present invention, it is possible to provide a technique for more appropriately holding food of irregular shape and size.
Further, according to the invention of claim 2, an efficient gripping operation set corresponding to the gripping operation according to the invention of claim 1 can be performed.
Furthermore, in the invention of claim 3, by controlling the operation of the hand based on the data of the reference value set in advance, it becomes possible to perform the gripping operation adapted to the conditions of the food to be gripped.
Furthermore, according to the invention of claim 4, the weight of the food can be determined by the gripping operation of the hand, and the food can be transferred to the determined sorting destination of the food.
Furthermore, according to the invention of claim 5, the place to be gripped can be changed according to the quality of the food, and the food can be held more appropriately.
Furthermore, the invention of claim 6 can provide a technique for holding food more appropriately.
Furthermore, according to the invention of claim 7, an efficient gripping operation set corresponding to the gripping operation according to the invention of claim 7 becomes possible.

本発明の一実施形態に係る果菜移載システム1の構成を示す模式図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a schematic diagram which shows the structure of the fruit vegetable transfer system 1 which concerns on one Embodiment of this invention. ハンドユニット53の構成を示す模式図である。FIG. 6 is a schematic view showing a configuration of a hand unit 53. 図2Aの状態からハンドユニット53が回転した状態を示す模式図である。It is a schematic diagram which shows the state which the hand unit 53 rotated from the state of FIG. 2A. 制御装置10の機能的構成を示すブロック図である。FIG. 2 is a block diagram showing a functional configuration of a control device 10. 把持パラメータ決定部16bにおける制御則の概念を示す模式図である。It is a schematic diagram which shows the concept of the control law in the holding | grip parameter determination part 16b. 果菜移載システム1において実行される果菜選別処理の流れを説明するフローチャートである。FIG. 6 is a flow chart for explaining the flow of a fruit and vegetable sorting process performed in the fruit and vegetable transfer system 1; FIG.

以下、本発明を果菜移載システムに応用した実施形態について、図面を参照して説明する。
本発明に係る果菜移載システム及び果菜把持装置は、選別される果菜を撮影装置によって撮影し、撮影された画像から、個別の果菜の大きさ、形状、特性(色や傷害の程度、腐敗部分及び生傷の有無等)、重量といった品質情報を取得する。そして、把持ロボットにより果菜を把持する際に、取得された果菜の品質情報に基づいて、予め設定されている把持動作の基準値を初期値として果菜把持装置の把持動作を開始し、果菜把持装置が果菜を把持する際は、果菜把持装置における所定の位置の情報(例えば、アクチュエータの移動子の位置情報等)または果菜把持装置が果菜から受ける力の情報に基づいて、リアルハプティクスを応用した位置(または速度)及び力の制御を行う。
これにより、把持対象の果菜の大きさ、形状あるいは表面状態等の個別の条件に適合した把持動作を行うことができ、果菜を適切に保持することが可能となる。
なお、本実施形態においては、把持ロボットによって、コンベアで搬送される果菜の中から、格外の個体は加工食品用として、及び腐敗を有する個体は廃棄用としてピックアップして除外すると共に、把持した際に重量を判定し、格外の個体であっても重量不足で加工食品用として使用できないものを廃棄用として除外する場合を例に挙げて説明する。
Hereinafter, an embodiment in which the present invention is applied to a fruit vegetable transfer system will be described with reference to the drawings.
According to the present invention, the system for transferring fruits and vegetables and the holding apparatus for fruits and vegetables according to the present invention shoots fruits to be sorted by a photographing device, and based on the photographed image, the size, shape and characteristics of individual fruits and vegetables And get quality information such as the presence or absence of raw injury) and weight. Then, when gripping vegetables by the gripping robot, the gripping operation of the vegetable gripping device is started with the reference value of the gripping operation set in advance as an initial value based on the acquired quality information of the fruit vegetables, and the vegetable gripping device When gripping a fruit vegetable, the Real Haptics was applied based on the information of the predetermined position in the fruit vegetable gripping device (for example, the positional information of the moving element of the actuator etc.) or the information of the force received by the fruit vegetable gripping device from the fruit vegetable Control position (or speed) and force.
As a result, it is possible to perform a gripping operation adapted to individual conditions such as the size, shape or surface condition of the fruit to be gripped, and it becomes possible to hold the fruit properly.
In the present embodiment, among the fruits and vegetables transported by the conveyor by the gripping robot, extraneous individuals are picked up for processing food, and those with rot are picked up and discarded for disposal, and also gripped. The case where the weight is determined and even an exceptional individual can not be used for processed food due to insufficient weight will be described as an example for the case of being excluded for disposal.

図1は、本発明の一実施形態に係る果菜移載システム1の構成を示す模式図である。
図1に示すように、果菜移載システム1は、制御装置10と、搬送装置20と、照明装置30と、撮影装置40と、把持ロボット(果菜把持装置)50と、を備えている。
制御装置10は、果菜移載システム1全体を制御する。例えば、制御装置10は、演算処理装置、メモリ、ストレージデバイス及び通信インターフェース等を備える情報処理装置によって構成され、演算処理装置によってプログラムを実行することにより、果菜移載システム1における各種機能を実現する。一例として、制御装置10は、PLC(Programmable Logic Controller)あるいはPC(Personal Computer)等の情報処理装置によって構成することができる。
具体的には、制御装置10は、搬送装置20の動作(駆動、停止、搬送速度等)、照明装置30のオン/オフ及び撮影装置40の撮影動作を制御する。
FIG. 1: is a schematic diagram which shows the structure of the fruit vegetable transfer system 1 which concerns on one Embodiment of this invention.
As shown in FIG. 1, the fruit vegetable transfer system 1 includes a control device 10, a carrier device 20, an illumination device 30, an imaging device 40, and a gripping robot (fruit vegetable gripping device) 50.
The control device 10 controls the entire fruit and vegetable transfer system 1. For example, the control device 10 is configured by an information processing device including an arithmetic processing device, a memory, a storage device, a communication interface, and the like, and realizes various functions in the fruit vegetable transfer system 1 by executing a program by the arithmetic processing device. . As an example, the control device 10 can be configured by an information processing device such as a programmable logic controller (PLC) or a personal computer (PC).
Specifically, the control device 10 controls the operation (drive, stop, conveyance speed, etc.) of the conveyance device 20, the on / off of the illumination device 30, and the photographing operation of the photographing device 40.

また、制御装置10は、後述する果菜選別処理を実行することにより、把持ロボット50の把持動作を含む果菜の選別動作(移送)を制御する。このとき、制御装置10は、把持ロボット50における所定の位置(または速度)の情報に基づいて、リアルハプティクスを応用した位置(または速度)及び力の制御を行うことにより、果菜の把持動作を制御する。なお、果菜選別処理を実行することにより、制御装置10において実現される機能的な構成については後述する。   Further, the control device 10 controls the sorting operation (transfer) of the fruits including the gripping operation of the gripping robot 50 by executing the fruit and vegetable sorting processing described later. At this time, the control device 10 performs the gripping operation of the fruit by controlling the position (or velocity) and the force to which the real haptics are applied based on the information of the predetermined position (or velocity) in the gripping robot 50. Control. The functional configuration realized in the control device 10 by executing the fruit and vegetable sorting process will be described later.

搬送装置20は、果菜を多列で搬送するコンベアを構成し、搬送体21と、受動プーリー22と、駆動プーリー23と、搬送用モータ24と、ブレーキ板25とを備えている。
搬送体21は、選別される果菜の供給を受け、撮影装置40による撮影領域を経た後、把持ロボット50によるピックアップ領域に果菜を搬送する。
The transfer device 20 constitutes a conveyor for transferring the fruits and vegetables in multiple rows, and includes a transfer body 21, a passive pulley 22, a drive pulley 23, a transfer motor 24, and a brake plate 25.
The transport body 21 receives the supply of the fruits and vegetables to be sorted, passes the photographing area by the photographing device 40, and then conveys the fruits and vegetables to the pickup area by the holding robot 50.

本実施形態における搬送体21は、回転軸が平行となるように配列された複数の回転ローラ21aを備えており、これら複数の回転ローラ21aが全周にわたって設置された環状の構造を有している。搬送体21において、複数の回転ローラ21aは、両端を環状のチェーンあるいはベルトによってそれぞれ回転可能に保持されている。これら複数の回転ローラ21aは、選別される果菜が隙間から落下しない配列間隔で設置されており、本実施形態においては、複数の回転ローラ21aの間隔を数センチメートル程度としている。   The conveyance body 21 in the present embodiment includes a plurality of rotation rollers 21 a arranged so that the rotation axes are parallel, and has a ring structure in which the plurality of rotation rollers 21 a are installed over the entire circumference. There is. In the transport body 21, the plurality of rotary rollers 21a are rotatably held at both ends by an annular chain or belt. The plurality of rotating rollers 21a are disposed at an arrangement interval in which the fruits to be sorted do not fall from the gap, and in the present embodiment, the interval of the plurality of rotating rollers 21a is about several centimeters.

また、搬送体21は、受動プーリー22と駆動プーリー23とに巻き掛けられており、駆動プーリー23の回転軸は、ベルト部材によって搬送用モータ24の回転軸と連結されている。
したがって、搬送用モータ24が回転すると、その回転が駆動プーリー23に伝達され、駆動プーリー23に巻き掛けられている搬送体21は、受動プーリー22との間で周回することにより、連続的な搬送動作を行う。
Further, the transport body 21 is wound around the passive pulley 22 and the drive pulley 23, and the rotation shaft of the drive pulley 23 is connected to the rotation shaft of the transport motor 24 by a belt member.
Therefore, when the transport motor 24 rotates, the rotation is transmitted to the drive pulley 23, and the transport body 21 wound around the drive pulley 23 circulates with the passive pulley 22 to continuously transport. Do the action.

ブレーキ板25は、搬送体21の通過領域における特定の位置(搬送される果菜を回転させる位置)であって、複数の回転ローラ21aの下面側(果菜の載置面に対する裏面側)に設置され、各回転ローラ21aの表面(円筒面)との間に摩擦を生じさせる。即ち、搬送体21が搬送動作を行うと、ブレーキ板25に接触した回転ローラ21aは、ブレーキ板25との摩擦により従動して回転することとなり、この回転により、ブレーキ板25が設置された領域を通過する果菜を回転させる作用が発生する。以下、ブレーキ板25が設置された領域を適宜「回転領域」と称する。なお、ブレーキ板25が設置された領域以外において、回転ローラ21aは、ほぼ回転することなく果菜を載置した状態で移動する。以下、ブレーキ板25が設置された領域以外を適宜「非回転領域」と称する。   The brake plate 25 is installed at a specific position (position to rotate the transported vegetables) in the passage area of the transport body 21 and on the lower surface side (the back surface side with respect to the mounting surface of the vegetables) of the plurality of rotating rollers 21a. The friction is generated with the surface (cylindrical surface) of each rotating roller 21a. That is, when the transport body 21 carries out the transport operation, the rotating roller 21a in contact with the brake plate 25 is driven to rotate by the friction with the brake plate 25, and by this rotation, the area where the brake plate 25 is installed An action occurs to rotate the fruit that passes through the Hereinafter, the area in which the brake plate 25 is installed will be referred to as "rotational area" as appropriate. In addition, except the area | region in which the brake board 25 was installed, the rotation roller 21a moves in the state which mounted the vegetables, without rotating substantially. Hereinafter, areas other than the area where the brake plate 25 is installed will be referred to as “non-rotational area” as appropriate.

照明装置30は、可視光を発する可視光ランプと、紫外光を発する紫外光ランプとを備え、制御装置10の制御に従って、搬送される果菜に可視光及び紫外光を照射する。本実施形態において、照明装置30は、果菜の搬送方向において、撮影装置40の上流及び下流にそれぞれ備えられている。   The lighting device 30 includes a visible light lamp that emits visible light and an ultraviolet light lamp that emits ultraviolet light, and according to the control of the control device 10, the fruit that is conveyed is irradiated with visible light and ultraviolet light. In the present embodiment, the lighting devices 30 are respectively provided upstream and downstream of the photographing device 40 in the direction of transporting fruits and vegetables.

撮影装置40は、可視光画像及び紫外光画像を撮影可能なデジタルカメラによって構成され、制御装置10の制御に従って、可視光画像及び紫外光画像をそれぞれ撮影する。可視光画像は、主に果菜の位置、大きさ及び形状を認識するために用いられ、紫外光画像は、主に果菜の特性を検出(表面または内部の腐敗部分や生傷の検出等)するために用いられる。
なお、搬送される果菜の形状、大きさ及び表面/内部の状態は、撮影装置40によって撮影した画像に基づいて認識されることから、制御装置10は、搬送される果菜を追跡可能な時間間隔で撮影するよう撮影装置40を制御する。一例として、撮影装置40によって、1/30秒間隔で、可視光画像と紫外光画像とを交互に撮影すること等が可能である。
The photographing device 40 is configured of a digital camera capable of photographing a visible light image and an ultraviolet light image, and photographs the visible light image and the ultraviolet light image respectively according to the control of the control device 10. The visible light image is mainly used to recognize the position, size and shape of the fruit vegetables, and the ultraviolet light image is mainly for detecting the characteristics of the fruit vegetables (such as detection of spoilage on the surface or inside, and detection of a bruise) Used for
In addition, since the shape, size, and surface / internal state of the fruit to be conveyed are recognized based on the image photographed by the photographing device 40, the control device 10 can track the fruit to be conveyed at a time interval Control the photographing device 40 so as to take a picture. As an example, it is possible to alternately capture a visible light image and an ultraviolet light image at intervals of 1/30 seconds by the imaging device 40.

把持ロボット50は、3軸のパラレルリンクロボット(デルタ型の多関節ロボット)を備えている。本実施形態においては、2台の把持ロボット50が設置されており、これら2台の把持ロボット50が分担して果菜の選別作業を行う。なお、把持ロボット50は、果菜をピックアップ可能な形態であれば、6軸のパラレルリンクロボットや垂直多関節ロボット等、他の方式のロボットを採用することも可能である。   The gripping robot 50 is provided with a 3-axis parallel link robot (delta-type articulated robot). In the present embodiment, two gripping robots 50 are installed, and these two gripping robots 50 share the task of sorting fruits and vegetables. In addition, as long as the gripping robot 50 can pick up fruits and vegetables, robots of other types such as a 6-axis parallel link robot and a vertical articulated robot can be adopted.

具体的には、把持ロボット50は、筐体50aから延びる3つのアーム51a〜51cと、各アーム51a〜51cの伸縮を制御する伸縮用モータ52a〜52cと、アーム51a〜51cの先端に設置されたハンドユニット53と、ハンドユニット53を水平方向に回転させる回転用モータ54と、を備えている。
図2Aは、ハンドユニット53の構成を示す模式図である。
図2Aに示すように、ハンドユニット53は、果菜把持用のツールとして構成され、果菜に接触して保持作用を生じさせる可動部材53a〜53cと、可動部材53a〜53cの開閉を制御する開閉用モータ53dと、ハンドユニット53を垂直方向に移動させる垂直モータ53eと、を備えている。
Specifically, the gripping robot 50 is installed at three arms 51a to 51c extending from the housing 50a, telescopic motors 52a to 52c for controlling expansion and contraction of the arms 51a to 51c, and tips of the arms 51a to 51c. The hand unit 53 and the rotation motor 54 for rotating the hand unit 53 in the horizontal direction are provided.
FIG. 2A is a schematic view showing the configuration of the hand unit 53. As shown in FIG.
As shown in FIG. 2A, the hand unit 53 is configured as a tool for gripping fruits and vegetables, and movable members 53a to 53c that contact the fruits to produce a holding action, and opening and closing for controlling the opening and closing of the movable members 53a to 53c. A motor 53 d and a vertical motor 53 e for moving the hand unit 53 in the vertical direction are provided.

本実施形態において、把持ロボット50の伸縮用モータ52a〜52c、ハンドユニット53の開閉用モータ53d、垂直モータ53e及び回転用モータ54は、制御装置10の制御に従って動作する。
例えば、伸縮用モータ52a〜52cは、制御装置10の制御に従って、ハンドユニット53が把持対象の果菜の位置に移動するように、各アーム51a〜51cの伸縮を制御する。
In the present embodiment, the extension / contraction motors 52 a to 52 c of the gripping robot 50, the opening / closing motor 53 d of the hand unit 53, the vertical motor 53 e and the rotation motor 54 operate according to the control of the control device 10.
For example, the telescopic motors 52a to 52c control the telescopic movement of the arms 51a to 51c so that the hand unit 53 moves to the position of the object to be gripped according to the control of the control device 10.

また、開閉用モータ53dは、制御装置10の制御に従って、可動部材53a〜53cが把持対象の果菜に応じてリアルハプティクスに基づく開閉位置及び接触力となるように、可動部材53a〜53cの開閉動作を制御する。本実施形態において、開閉用モータ53dは、モータ回転軸の回転位置を検出する位置検出センサ53d−1を備えている。位置検出センサ53d−1の検出結果は、可動部材53a〜53dの開閉位置を示す情報であり、後述する果菜選別処理における入力(後述する把持パラメータ決定部16bの入力)として用いられる。また、可動部材53a〜53cの把持動作の初期値(位置及び力)は、可視光画像及び紫外光画像の解析結果に応じて、果菜の大きさ及び特性等の品質に応じた値(予め設定されている基準値のデータ)に設定される。そして、ハンドユニット53が把持対象の果菜を把持した後(把持動作の開始後)は、制御装置10が開閉用モータ53dにおけるモータ回転軸の回転位置及び回転トルクを逐次演算することにより、可動部材53a〜53cの開閉位置及び接触力が制御される。
この結果、本実施形態におけるハンドユニット53は、把持対象の果菜の大きさ、形状あるいは柔らかさ等の個別の条件に適合した把持動作を行うことが可能となる。
Further, the open / close motor 53d opens / closes the movable members 53a to 53c so that the movable members 53a to 53c become the open / close position and the contact force based on the real haptics according to the object to be gripped under the control of the control device 10. Control the operation. In the present embodiment, the opening and closing motor 53d includes a position detection sensor 53d-1 that detects the rotational position of the motor rotation shaft. The detection result of the position detection sensor 53d-1 is information indicating the open / close position of the movable members 53a to 53d, and is used as an input (input of a grip parameter determination unit 16b described later) in a fruit vegetable sorting process described later. In addition, initial values (position and force) of the gripping operation of the movable members 53a to 53c are values according to the quality such as the size and characteristics of fruits and vegetables according to the analysis result of the visible light image and the ultraviolet light image Is set to the reference value data). Then, after the hand unit 53 grips the fruit to be gripped (after the start of the gripping operation), the control device 10 sequentially calculates the rotational position and the rotational torque of the motor rotation shaft in the opening / closing motor 53 d The open / close positions and contact forces of 53a to 53c are controlled.
As a result, the hand unit 53 in the present embodiment can perform the gripping operation adapted to individual conditions such as the size, shape, and softness of the fruit to be gripped.

また、垂直モータ53eは、位置検出センサ53e−1を備えており、制御装置10の制御に従って、回転用モータ54と可動部材53a〜53cの距離を一定に保つように制御される。さらに、垂直モータ53eは、把持対象の果菜の重量に応じてリアルハプティクスに基づく制御(ハンドユニット53を持ち上げる動作における位置(または速度)あるいは力の少なくともいずれかの制御)を行うことにより、重量を計測することができるようになっている。即ち、垂直モータ53eが果菜を把持した際に流れる駆動電流等に基づいて、把持している果菜の重さを検出することができる。また、垂直モータ53eの負荷または位置検出センサ53e−1の検出結果等から、ハンドユニット53が垂直方向において物体(果菜等)に接触したことを判定することができる。   Further, the vertical motor 53e is provided with a position detection sensor 53e-1, and is controlled to keep the distance between the rotation motor 54 and the movable members 53a to 53c constant under the control of the control device 10. Furthermore, the vertical motor 53e performs weight control by performing control based on real haptics (control of at least one of position (or velocity) and / or force in the lifting operation of the hand unit 53) according to the weight of the fruit to be gripped. Can be measured. That is, the weight of the holding fruit can be detected based on the drive current or the like flowing when the vertical motor 53e holds the fruit. Moreover, it can be determined from the load of the vertical motor 53e, the detection result of the position detection sensor 53e-1, etc. that the hand unit 53 is in contact with an object (fruit and the like) in the vertical direction.

回転用モータ54は、ハンドユニット53を水平方向に回転させることにより、把持対象の果菜に対する可動部材53a〜53cの位置を変化させる。
図2Bは、図2Aの状態からハンドユニット53が回転した状態を示す模式図である。
図2Bに示すように、図2Aの状態から、ハンドユニット53が果菜に対して回転することにより、果菜の腐敗部分に可動部材53a〜53cが接触する可能性を低減でき、可動部材53a〜53cに腐敗部分の断片が付着することを抑制できる。
また、密集して流れてくる果菜から把持対象の果菜を把持する際、可動部材53a〜53cを果菜の隙間に位置させることで、周りの果実に可動部材53a〜53cが接触することを防止することができる。
The rotation motor 54 changes the positions of the movable members 53a to 53c with respect to the object to be gripped by rotating the hand unit 53 in the horizontal direction.
FIG. 2B is a schematic view showing a state in which the hand unit 53 is rotated from the state of FIG. 2A.
As shown in FIG. 2B, when the hand unit 53 rotates with respect to the fruit vegetables from the state of FIG. 2A, the possibility of the movable members 53a to 53c coming into contact with the rotten parts of the fruit vegetables can be reduced, and the movable members 53a to 53c. Can inhibit the attachment of fragments of rotten parts.
In addition, when gripping the fruits to be gripped from the densely flowing fruits, by positioning the movable members 53a to 53c in the gaps between the fruits, the movable members 53a to 53c are prevented from coming into contact with the surrounding fruits. be able to.

[機能的構成]
次に、果菜移載システム1における制御装置10の機能的構成について説明する。
図3は、制御装置10の機能的構成を示すブロック図である。
図3に示すように、制御装置10が果菜選別処理を実行することにより、機能的構成として、画像取得部11と、画像解析部12と、項目判定部13と、果菜特定部14と、ロボット制御部15と、ハンドユニット制御部16と、重量判定部17と、搬送制御部18と、制御データ記憶部19と、が形成される。
[Functional configuration]
Next, the functional configuration of the control device 10 in the fruit vegetable transfer system 1 will be described.
FIG. 3 is a block diagram showing a functional configuration of the control device 10. As shown in FIG.
As shown in FIG. 3, the control device 10 executes the fruit and vegetable sorting process to obtain an image acquisition unit 11, an image analysis unit 12, an item determination unit 13, a fruit and vegetable identification unit 14, and a robot as functional components. A control unit 15, a hand unit control unit 16, a weight determination unit 17, a transport control unit 18, and a control data storage unit 19 are formed.

画像取得部11は、撮影装置40に対して、可視光画像と紫外光画像とを交互に撮影させる撮影指示を出力し、撮影された可視光画像及び紫外光画像を取得する。
画像解析部12は、可視光画像を解析(オブジェクト認識及び色彩検出等)することにより、搬送体21上で果菜が分布している位置、果菜の大きさ、色や傷害、及び形状を認識する。また、画像解析部12は、紫外光画像を解析(輝度検出等)することにより、果菜の水腐れ等の腐敗部分及び生傷の有無を認識する。本実施形態において、画像解析部12は、果菜の大きさ、色や傷害、及び形状を認識する場合、搬送装置20における回転領域の可視光画像を参照し、果菜の水腐れ等の腐敗部や生傷の検出等を認識する場合、搬送装置20における回転領域の紫外光画像を参照する。また、画像解析部12は、搬送装置20における回転領域の可視光画像に撮影されている各果菜と紫外光画像に撮影されている各果菜とを対応付けて、果菜を個別に追跡する。そして、画像解析部12は、搬送装置20における非回転領域の可視光画像(果菜の回転が停止した状態の画像)を参照して、ピックアップ領域に搬送される各果菜の位置を認識する。これにより、個別の果菜の大きさ、形状、特性(色や傷害の程度、腐敗部分及び生傷の有無等)が認識される。さらに、画像解析部12は、これらの認識結果(位置及び品質)を個体情報として記憶する。
The image acquisition unit 11 outputs, to the imaging device 40, an imaging instruction for imaging the visible light image and the ultraviolet light image alternately, and acquires the captured visible light image and the ultraviolet light image.
The image analysis unit 12 analyzes the visible light image (object recognition, color detection, etc.) to recognize the position where the fruits are distributed on the carrier 21, the size, color, injury, and shape of the fruits. . In addition, the image analysis unit 12 analyzes the ultraviolet light image (brightness detection and the like) to recognize the presence or absence of rotten portions such as water rot and the like of the fruit vegetables. In the present embodiment, when recognizing the size, color, injury, and shape of the fruit vegetables, the image analysis unit 12 refers to the visible light image of the rotation area in the transport device 20, and rots such as water rot of the fruit vegetables In the case of recognizing the detection of a raw injury or the like, the ultraviolet light image of the rotation area in the transfer device 20 is referred to. Further, the image analysis unit 12 individually tracks each of the fruits by correlating each of the fruits and vegetables captured in the visible light image of the rotation area of the transport device 20 with each of the fruits and vegetables photographed in the ultraviolet light image. Then, the image analysis unit 12 refers to the visible light image of the non-rotation area in the conveyance device 20 (an image in a state in which the rotation of the fruit has been stopped), and recognizes the position of each fruit being conveyed to the pickup area. As a result, the size, shape, and characteristics (such as color and degree of injury, presence or absence of spoilage and live injury, etc.) of individual fruits and vegetables are recognized. Furthermore, the image analysis unit 12 stores these recognition results (position and quality) as individual information.

項目判定部13は、画像解析部12の解析結果に基づいて、規格に基づく果菜の評価項目を判定する。なお、項目判定部13によって判定される項目には、果菜の大きさ及び形状(規格におけるサイズ及び形状の分類)、果菜の特性(色や傷害の程度、腐敗部分及び生傷の有無)、果菜の重量等の品質に関する項目が含まれる。なお、本実施形態において、果菜の重量については、後述する重量判定部17によって判定される。   The item determination unit 13 determines, based on the analysis result of the image analysis unit 12, an evaluation item of a fruit based on a standard. The items determined by the item determination unit 13 include the size and shape of the fruit vegetables (classification of the size and shape in the standard), the characteristics of the fruit vegetables (color, degree of injury, presence or absence of rotten parts and raw injuries), Items related to quality such as weight are included. In the present embodiment, the weight of fruits and vegetables is determined by a weight determination unit 17 described later.

果菜特定部14は、ピックアップの対象とする果菜を各把持ロボット50に割り当て、各把持ロボット50によってピックアップする果菜を特定する。具体的には、果菜特定部14は、搬送体21によってピックアップ領域に搬送される各果菜において、2台の把持ロボット50それぞれがピックアップして選別する対象の果菜の位置を逐次特定する。ピックアップ領域における果菜の位置は、画像解析部12によって認識された非回転領域における果菜の位置を基に、搬送装置20の搬送速度を加味することで特定することができる。本実施形態においては、搬送体21によってピックアップ領域に搬送される果菜の中から、格外の個体及び腐敗を有する個体のみを把持ロボットによりピックアップして除外し、下流側に設置された作業場(商品となる個体を選別する作業場等)へ果菜を搬送する。   The fruit and vegetable identification unit 14 assigns fruits and vegetables to be picked up to the respective holding robots 50, and specifies fruits and vegetables to be picked up by the respective holding robots 50. Specifically, the fruit and vegetable identification unit 14 sequentially specifies the position of the fruit and vegetables to be picked up and sorted by each of the two gripping robots 50 in each of the fruit and vegetables that are transported to the pickup region by the carrier 21. The position of fruits and vegetables in the pick-up area can be specified by taking into consideration the transport speed of the transfer device 20 based on the position of fruits and vegetables in the non-rotational area recognized by the image analysis unit 12. In this embodiment, among the fruits and vegetables which are transported to the pickup area by the transport body 21, only extraneous individuals and rotten individuals are picked up by the gripping robot and excluded, and the work place installed on the downstream side Transport the fruits and vegetables to the workplace etc.)

ロボット制御部15は、各アーム51a〜51cの伸縮を制御する伸縮用モータ52a〜52cの駆動信号を出力することにより、果菜特定部14によって特定された各果菜の位置に把持ロボット50のハンドユニット53を移動させる。また、ロボット制御部15は、リアルハプティクスに基づく垂直方向の位置(または速度)あるいは力の少なくともいずれかの制御に従って、垂直モータ53eの駆動信号を出力することにより、ハンドユニット53を垂直方向に移動させる。この場合、ロボット制御部15は、垂直モータ53eの回転軸の現在位置(あるいはハンドユニット53の垂直方向の現在位置等、回転軸と対応する現在位置)を入力として、位置(または速度)あるいは力の少なくとも一方の領域における演算(例えば、後述する式(1)及び(2)に従う演算)を行うことにより、垂直モータ53eの動作を表すパラメータを決定する。また、ロボット制御部15は、項目判定部13による果菜の評価項目の判定結果及び重量判定部17による果菜の重量の判定結果に基づいて、果菜の選別先(「腐敗果」、「格外」等)を決定し、決定した果菜の選別先に果菜を移送する。なお、本実施形態においては、搬送装置20におけるピックアップ領域の側方に果菜の選別先に対応する収容箱が設置されている。   The robot control unit 15 outputs drive signals of the extension motors 52a to 52c for controlling the extension and contraction of the arms 51a to 51c, whereby the hand unit of the gripping robot 50 is located at the position of each fruit specified by the fruit specifying unit 14 Move 53. Further, the robot control unit 15 vertically outputs the hand unit 53 by outputting a drive signal of the vertical motor 53e according to control of at least one of position (or velocity) in the vertical direction based on real haptics and / or force. Move it. In this case, the robot control unit 15 receives the current position of the rotation axis of the vertical motor 53e (or the current position corresponding to the rotation axis, such as the current position in the vertical direction of the hand unit 53) as an input. A parameter representing the operation of the vertical motor 53e is determined by performing an operation (for example, an operation according to the equations (1) and (2) described later) in at least one of the regions. In addition, the robot control unit 15 selects the destination of the fruits based on the result of the judgment of the evaluation item of the fruits and vegetables by the item judgment unit 13 and the result of the judgment of the weight of the fruits and vegetables by the weight judgment unit 17 ), And transfer the fruits to the selected fruits. In addition, in this embodiment, the storage box corresponding to the sorting destination of fruits and vegetables is installed in the side of the pickup area | region in the conveying apparatus 20. As shown in FIG.

ハンドユニット制御部16は、把持対象の果菜の大きさ、形状あるいは柔らかさ等の個別の条件に適合した把持動作を行う。
具体的には、ハンドユニット制御部16は、回転用モータ駆動部16aと、把持パラメータ決定部16bと、開閉用モータ駆動部16cと、可動部材位置取得部16dと、把持成功/失敗判定部16eと、を備えている。
The hand unit control unit 16 performs a gripping operation adapted to individual conditions such as the size, shape, or softness of the fruit to be gripped.
Specifically, the hand unit control unit 16 includes a rotation motor drive unit 16a, a grip parameter determination unit 16b, an open / close motor drive unit 16c, a movable member position acquisition unit 16d, and a grip success / failure determination unit 16e. And have.

回転用モータ駆動部16aは、果菜の把持動作における回転用モータ54の駆動を制御する。具体的には、回転用モータ駆動部16aは、画像解析部12による果菜の品質(水腐れ等の腐敗部分及び生傷の有無)の解析結果に基づいて、ハンドユニット53における可動部材53a〜53cが把持対象の果菜の腐敗部分あるいは生傷の位置に接触しないように、ハンドユニット53を水平方向に回転させる。また、回転用モータ駆動部16aは、画像解析部12による果菜の位置からの可動部材53a〜53cが周囲の果菜に接触しないようにハンドユニット53を水平方向に回転させる。   The rotation motor drive unit 16a controls the drive of the rotation motor 54 in the gripping operation of the fruits and vegetables. Specifically, based on the analysis result of the quality of the fruits and vegetables (the rotted portion such as water rot and the presence or absence of a live injury) by the image analysis unit 12, the rotation motor drive unit 16a has movable members 53a to 53c in the hand unit 53. The hand unit 53 is rotated in the horizontal direction so as not to contact the rotten portion or the position of the raw injury of the fruit to be gripped. The rotation motor drive unit 16a rotates the hand unit 53 in the horizontal direction so that the movable members 53a to 53c from the position of the fruit vegetable by the image analysis unit 12 do not contact the surrounding fruit vegetable.

把持パラメータ決定部16bは、開閉用モータ53dの回転軸の現在位置(あるいは可動部材53a〜53cの現在位置等の回転軸と対応する現在位置)を入力として、位置(または速度)あるいは力の少なくとも一方の領域における演算を行うことにより、開閉用モータ53dの動作を表すパラメータを決定する。なお、把持パラメータ決定部16bは、把持動作の開始時には、画像解析部12によって認識された果菜の品質に基づいて、制御データ記憶部19に記憶されている把持動作の基準値を読み出し、読み出した基準値を初期値として、開閉用モータ53dの回転軸の位置及び力(回転トルク)を制御する。   The grip parameter determination unit 16b receives at least the position (or speed) or the force using as input the current position of the rotation axis of the open / close motor 53d (or the current position corresponding to the rotation axis such as the current position of the movable members 53a to 53c). By performing the calculation in one of the regions, a parameter representing the operation of the open / close motor 53d is determined. At the start of the gripping operation, the gripping parameter determining unit 16b reads out and reads the reference value of the gripping operation stored in the control data storage unit 19 based on the quality of fruits and vegetables recognized by the image analyzing unit 12. The position and force (rotational torque) of the rotation shaft of the opening and closing motor 53d are controlled with the reference value as an initial value.

図4は、リアルハプティクス技術による把持パラメータ決定部16bにおける制御則の概念を示す模式図である。
図4に示すように、把持パラメータ決定部16bにおける制御則は、開閉用モータ53d(制御対象システム)と、力・速度割当変換ブロック110と、理想力源ブロック120あるいは理想速度(位置)源ブロック130の少なくとも一つと、逆変換ブロック140とを含む制御則として表される。
FIG. 4 is a schematic view showing the concept of the control rule in the gripping parameter determination unit 16b by the real haptics technique.
As shown in FIG. 4, the control rule in the grip parameter determination unit 16b is the opening / closing motor 53d (control target system), the force / speed assignment conversion block 110, the ideal force source block 120 or the ideal speed (position) source block It is expressed as a control law including at least one of 130 and an inverse transformation block 140.

力・速度割当変換ブロック110は、開閉用モータ53dの動作の基準となる値(基準値)と、開閉用モータ53dの回転軸の現在位置とを入力とする座標変換を定義している。この座標変換は、基準値及び現在速度(または位置)を要素とする入力ベクトルを速度(または位置)の制御目標値を算出するための速度(または位置)からなる出力ベクトルに変換すると共に、基準値及び現在の力を要素とする入力ベクトルを力の制御目標値を算出するための力からなる出力ベクトルに変換するものである。具体的には、力・速度割当変換ブロック110における座標変換は、次式(1)及び(2)のように表される。   The force / speed assignment conversion block 110 defines coordinate conversion using as input a value (reference value) serving as a reference of the operation of the opening / closing motor 53 d and the current position of the rotation axis of the opening / closing motor 53 d. This coordinate transformation converts an input vector having a reference value and the current velocity (or position) into an output vector consisting of a velocity (or position) for calculating a control target value of velocity (or position), and a reference An input vector having a value and a current force as an element is converted into an output vector consisting of forces for calculating a control target value of the force. Specifically, coordinate conversion in the force / velocity allocation conversion block 110 is expressed as the following equations (1) and (2).

dX2=[H]・dX1 (1)
F2=[H]・F1 (2)
dX2 = [H] · dX1 (1)
F2 = [H] · F1 (2)

ただし、式(1)において、dは一階微分を表す演算子、dX2は速度の状態値を導出するための速度ベクトル、dX1は、基準値及び開閉用モータ53dの作用に基づく速度(開閉用モータ53dの回転軸の速度、または、可動部材53a〜53c等、開閉用モータ53dの回転軸と対応する部分の速度)を要素とするベクトル、Hは把持機能を表す変換行列である。また、式(2)において、dF2(ただし、dは二階微分を表す演算子)は力の状態値を導出するための力ベクトル、dF1は基準値及び開閉用モータ53dの作用に基づく力(開閉用モータ53dの回転軸の回転トルク、または、可動部材53a〜53c等、開閉用モータ53dの回転軸と対応する部分の力)を要素とするベクトルである。 However, in the equation (1), d is an operator representing a first-order derivative, dX2 is a velocity vector for deriving a state value of velocity, dX1 is a velocity based on the reference value and the action of the switching motor 53d (for switching A vector whose element is the speed of the rotation axis of the motor 53d or the speed of a portion corresponding to the rotation axis of the open / close motor 53d, such as the movable members 53a to 53c, and H is a transformation matrix representing a gripping function. Further, in equation (2), d 2 F 2 (where d 2 is an operator representing the second derivative) is a force vector for deriving a state value of force, d 2 F 1 is a reference value and the action of the motor 53 d for opening and closing Is a vector whose element is a force based on (a rotational torque of a rotation shaft of the opening / closing motor 53d or a force of a portion corresponding to the rotation shaft of the opening / closing motor 53d such as the movable members 53a to 53c).

理想力源ブロック120は、力・速度割当変換ブロック110によって定義された座標変換に従って、力の領域における演算を行うブロックである。理想力源ブロック120においては、機能別力・速度割当変換ブロック110によって定義された座標変換に基づく演算を行う際の力に関する目標値が設定されている。この目標値は、把持対象の果菜の個別の条件に適合させて把持する把持機能に対応して、固定値または可変値として設定される。   The ideal force source block 120 is a block that performs operations in the area of force in accordance with the coordinate transformation defined by the force / velocity assignment transformation block 110. In the ideal force source block 120, a target value regarding a force when performing an operation based on the coordinate transformation defined by the function-based force / velocity assignment transformation block 110 is set. This target value is set as a fixed value or a variable value corresponding to the gripping function to be gripped in accordance with the individual conditions of the fruit to be gripped.

理想速度(位置)源ブロック130は、力・速度割当変換ブロック110によって定義された座標変換に従って、速度(位置)の領域における演算を行うブロックである。理想速度(位置)源ブロック130においては、力・速度割当変換ブロック110によって定義された座標変換に基づく演算を行う際の速度(位置)に関する目標値が設定されている。この目標値は、把持対象の果菜の個別の条件に適合させて把持する把持機能に対応して、固定値または可変値として設定される。   The ideal velocity (position) source block 130 is a block that performs operations in the region of velocity (position) in accordance with the coordinate transformation defined by the force / velocity assignment transformation block 110. In the ideal velocity (position) source block 130, a target value regarding the velocity (position) when performing an operation based on the coordinate transformation defined by the force / velocity assignment transformation block 110 is set. This target value is set as a fixed value or a variable value corresponding to the gripping function to be gripped in accordance with the individual conditions of the fruit to be gripped.

逆変換ブロック140は、速度(位置)及び力の領域の値を開閉用モータ53dへの入力の領域の値(例えば電圧値または電流値等)に変換するブロックである。
これにより、開閉用モータ53dにおける位置の情報が力・速度割当変換ブロック110に入力されると、位置の情報に基づいて得られる速度(位置)及び力の情報を用いて、力・速度割当変換ブロック110において、把持対象の果菜の個別の条件に適合させて把持する把持機能に応じた位置及び力の領域それぞれの制御則が適用される。そして、理想力源ブロック120において、機能に応じた力の演算が行われ、理想速度(位置)源ブロック130において、機能に応じた速度(位置)の演算が行われ、力及び速度(位置)それぞれに制御エネルギーが分配される。
The inverse conversion block 140 is a block for converting the values of the velocity (position) and force regions into values (for example, voltage values or current values) of the input region to the switching motor 53d.
Thereby, when the information on the position in the opening / closing motor 53d is input to the force / velocity assignment conversion block 110, the force / velocity assignment conversion is performed using the information on the velocity (position) and force obtained based on the position information. At block 110, the control laws of the position and the force area respectively corresponding to the gripping function to be adapted to the specific condition of the fruit to be gripped and gripping are applied. Then, calculation of force according to the function is performed in the ideal force source block 120, calculation of speed (position) according to the function is performed in the ideal velocity (position) source block 130, and force and speed (position) are calculated. Control energy is distributed to each.

理想力源ブロック120及び理想速度(位置)源ブロック130における演算結果は、開閉用モータ53dの制御目標を示す情報となり、これらの演算結果が逆変換ブロック140において開閉用モータ53dの入力値とされる。
その結果、開閉用モータ53dは、力・速度割当変換ブロック110によって定義された機能(把持対象の果菜の個別の条件に適合させて把持する把持機能)に従う動作を実行し、目的とするハンドユニット53の把持動作が実現される。即ち、把持ロボット50は、式(1)及び(2)に従って、リアルハプティクスに基づく把持動作を行い、把持対象の果菜の大きさ、形状あるいは表面/内部の状態等の個別の条件に適合した把持動作が実現される。
The calculation results in the ideal force source block 120 and the ideal speed (position) source block 130 become information indicating the control target of the opening / closing motor 53d, and these calculation results are taken as input values of the opening / closing motor 53d in the inverse conversion block 140. Ru.
As a result, the open / close motor 53d executes an operation according to the function defined by the force / velocity assignment conversion block 110 (gripping function adapted to the specific conditions of the fruit to be gripped and gripped), and the target hand unit 53 gripping operations are realized. That is, the gripping robot 50 performs the gripping operation based on the real haptics according to the equations (1) and (2), and conforms to individual conditions such as size, shape or surface / internal state of the fruit to be gripped The gripping operation is realized.

図3に戻り、開閉用モータ駆動部16cは、果菜の把持動作における開閉用モータ53dの駆動を制御する。例えば、開閉用モータ駆動部16cは、把持動作における制御の初期値として、予め設定されている把持動作を表すパラメータを用いて制御を行い、把持動作の開始後は、把持パラメータ決定部16bによって決定されたパラメータ(上記制御則に基づいて逐次算出されるパラメータ)を用いて制御を行う。   Returning to FIG. 3, the opening / closing motor drive unit 16 c controls the driving of the opening / closing motor 53 d in the gripping operation of the fruits and vegetables. For example, the open / close motor drive unit 16c performs control using a parameter representing a preset gripping operation as an initial value of control in the gripping operation, and after the start of the gripping operation, it is determined by the gripping parameter determination unit 16b. The control is performed using the parameters (parameters sequentially calculated based on the above control rule).

可動部材位置取得部16dは、位置検出センサ53d−1から開閉用モータ53dの回転軸の現在位置(あるいは可動部材53a〜53cの現在位置等の回転軸と対応する現在位置)を取得する。なお、開閉用モータ53dの回転軸の現在位置は、例えば、ロータリーエンコーダ等によって取得することができる。また、可動部材53a〜53cの現在位置を取得する場合、可動部材53a〜53cの端部の位置を検出するエンコーダ等によって取得することができる。モータの電気的特性からエンコーダ等のセンサを用いずに位置を推定することも可能である。   The movable member position acquisition unit 16d acquires the current position of the rotary shaft of the opening / closing motor 53d (or the current position corresponding to the rotary shaft such as the current position of the movable members 53a to 53c) from the position detection sensor 53d-1. The current position of the rotary shaft of the opening and closing motor 53d can be obtained, for example, by a rotary encoder or the like. Moreover, when acquiring the present position of movable member 53a-53c, it can acquire with the encoder etc. which detect the position of the edge part of movable member 53a-53c. It is also possible to estimate the position from the electrical characteristics of the motor without using a sensor such as an encoder.

把持成功/失敗判定部16eは、ハンドユニット53が把持対象とした果菜の実際の把持に成功したか否かの判定を行う。この判定結果は、果菜移載システム1における選別作業の結果のデータの一部として記憶したり、把持パラメータ決定部16bが開閉用モータ53dの動作を表すパラメータを決定するアルゴリズムの補正(例えば、式(1)及び(2)における変換行列Hの要素の補正等)に用いたりすることができる。なお、把持が成功した場合、把持ロボット50によって、果菜が所定の収容箱へ移載される。   The gripping success / failure determination unit 16e determines whether or not actual gripping of the fruit that the hand unit 53 has made a gripping target has succeeded. The determination result is stored as a part of data of the result of the sorting operation in the fruit vegetable transfer system 1, or the correction of the algorithm (for example, the equation for determining the parameter representing the operation of the open / close motor 53d) It can be used for the correction of the elements of the transformation matrix H in (1) and (2). If the gripping is successful, the gripping robot 50 transfers the fruits and vegetables to a predetermined storage box.

重量判定部17は、ハンドユニット53が把持した果菜の重量を判定する。本実施形態において、重量判定部17は、図4に示した制御則の概念を示す模式図と同様に、垂直モータ53eに関して力・速度割当変換ブロック110と、理想力源ブロック120あるいは理想速度(位置)源ブロック130の少なくとも一つと、逆変換ブロック140とを有しており、上記のリアルハプティクス技術により垂直モータ53e(位置検出センサ53e−1)から取得される位置と力のパラメータから、把持している果菜の重量を判定する。重量判定部17によって果菜の重量が判定される結果、果菜のサイズ、形状、特性及び重量等、規格の判定項目の判定が全て完了し、把持された果菜の選別先が確定する。なお、重量判定部17は、判定した重量を個体情報に含めて記憶する。   The weight determination unit 17 determines the weight of the fruit that the hand unit 53 holds. In the present embodiment, the weight determination unit 17 is similar to the schematic diagram showing the concept of the control law shown in FIG. Position) At least one of the source block 130 and the inverse transformation block 140, from the parameters of the position and force obtained from the vertical motor 53e (position detection sensor 53e-1) by the above-described real haptics technique, Determine the weight of the fruit you are holding. As a result of the weight determination unit 17 determining the weight of the fruit vegetables, all the judgments of the judgment items of the standard such as the size, shape, characteristics and weight of the fruit vegetables are completed, and the sorting destination of the held fruit vegetables is decided. The weight determination unit 17 stores the determined weight in the individual information.

搬送制御部18は、搬送用モータ24の回転速度及び回転トルクを制御することにより、搬送装置20における果菜の搬送を制御する。また、搬送制御部18は、把持ロボット50のピックアップ領域に搬送される果菜の個数と、把持ロボット50によって選別された果菜の個数とに基づいて、把持ロボット50による果菜の選別のペースが搬送装置20による果菜の搬送のペースを下回っているか否かを判定する。そして、搬送制御部18は、把持ロボット50による果菜の選別のペースが搬送装置20による果菜の搬送のペースを下回っていると判定した場合、搬送装置20を一時的に停止(または速度を低下)させる。   The conveyance control unit 18 controls the conveyance of the fruits and vegetables in the conveyance device 20 by controlling the rotation speed and the rotation torque of the conveyance motor 24. Further, the transport control unit 18 is configured such that the pace of sorting of vegetables by the gripping robot 50 is a transport device based on the number of fruits and vegetables transported to the pick-up area of the gripping robot 50 and the number of fruits and vegetables sorted by the gripping robot 50 It is judged whether it is under the pace of conveyance of fruit vegetables by 20 or not. Then, when the transfer control unit 18 determines that the pace of sorting of fruits and vegetables by the gripping robot 50 is lower than the pace of transfer of fruits and vegetables by the transfer device 20, the transfer device 20 is temporarily stopped (or the speed is reduced). Let

制御データ記憶部19は、果菜選別処理を実行するために予め設定されたデータ(予め設定されている把持動作の基準値を表すパラメータ)や、果菜選別処理の実行によって生成された各種データ(把持パラメータ決定部16bによって決定されたパラメータ等)を記憶する。本実施形態において、把持動作の基準値を表すパラメータは、果菜の大きさ及び果菜の特性について、それぞれ複数段階に分類した値が用意されている。例えば、果菜の大きさについて、Sサイズ、Mサイズ、Lサイズそれぞれに対応する位置の基準値が予め設定されている。同様に、果菜の特性について、良品(腐敗部分がないもの)、不良品(腐敗部分があるもの)それぞれに対応する力の基準値が予め設定されている。把持パラメータ決定部16bは、項目判定部13によって判定された果菜の大きさ及び特性に応じて、制御データ記憶部19に記憶されている基準値のパラメータを初期値として読み出し、把持動作を開始する。   The control data storage unit 19 includes data preset for performing the fruit vegetable sorting process (a parameter representing a reference value of the gripping operation set in advance), and various data (gripping done by the fruit vegetable sorting process) The parameters etc. determined by the parameter determination unit 16 b are stored. In the present embodiment, as parameters representing the reference value of the gripping operation, values in which the size of the fruit vegetables and the characteristics of the fruit vegetables are classified into a plurality of stages are prepared. For example, with respect to the size of fruits and vegetables, reference values of positions corresponding to S size, M size, and L size are set in advance. Similarly, with respect to the characteristics of fruits and vegetables, reference values of the strength corresponding to each of the non-defective product (without rotten portion) and the non-defective product (with rotable portion) are set in advance. The gripping parameter determination unit 16b reads the parameter of the reference value stored in the control data storage unit 19 as an initial value according to the size and characteristics of the fruit and vegetables determined by the item determination unit 13 and starts the gripping operation .

[動作]
次に、果菜移載システム1の動作を説明する。
図5は、果菜移載システム1において実行される果菜選別処理の流れを説明するフローチャートである。
果菜選別処理は、制御装置10において、果菜選別処理の実行を指示する操作が行われることに対応して開始される。
[Operation]
Next, the operation of the fruit-plant transfer system 1 will be described.
FIG. 5 is a flowchart for explaining the flow of the fruit and vegetable sorting process performed in the fruit and vegetable transfer system 1.
The fruit and vegetable sorting process is started in response to the operation of instructing the execution of the fruit and vegetable sorting process in the control device 10.

ステップS1において、画像取得部11は、撮影装置40に対して、可視光画像と紫外光画像とを交互に撮影させる撮影指示を出力し、撮影された可視光画像及び紫外光画像を取得する。
ステップS2において、画像解析部12は、可視光画像を解析(オブジェクト認識及び色彩検出等)することにより、搬送体21上で果菜が分布している位置、果菜の大きさ、色や傷害、及び形状を認識する。
In step S1, the image acquisition unit 11 outputs an imaging instruction for imaging the visible light image and the ultraviolet light image alternately to the imaging device 40, and acquires the captured visible light image and the ultraviolet light image.
In step S2, the image analysis unit 12 analyzes the visible light image (object recognition, color detection, etc.) to detect the position at which the fruit is distributed on the transport body 21, the size of the fruit, color, injury, and the like. Recognize the shape.

ステップS3において、画像解析部12は、紫外光画像を解析(輝度検出等)することにより、果菜の水腐れ等の腐敗部分及び生傷の有無を認識する。
ステップS4において、項目判定部13は、画像解析部12の解析結果に基づいて、規格に基づく果菜の評価項目を判定する。このとき判定される項目には、果菜の大きさ及び形状(規格におけるサイズ及び形状の分類)、果菜の特性(色や傷害の程度、腐敗部分及び生傷の有無)が含まれる。
In step S3, the image analysis unit 12 analyzes the ultraviolet light image (brightness detection and the like) to recognize the presence or absence of a rotten part such as water rot and the like of a fruit vegetable.
In step S4, the item determination unit 13 determines the evaluation item of the fruit based on the standard based on the analysis result of the image analysis unit 12. The items to be determined at this time include the size and shape of the fruit vegetables (classification of the size and shape in the standard), and the characteristics of the fruit vegetables (color, degree of injury, presence or absence of rotten parts and raw injuries).

ステップS5において、果菜特定部14は、ピックアップの対象とする果菜を各把持ロボット50に割り当て、各把持ロボット50によってピックアップする果菜を特定する。このとき、果菜特定部14は、搬送体21によってピックアップ領域に搬送される各果菜において、2台の把持ロボット50それぞれがピックアップして選別する対象の果菜の位置を特定する。   In step S5, the fruit and vegetable identification unit 14 assigns the fruit and vegetables to be picked up to each holding robot 50, and specifies the fruits and vegetables to be picked up by each holding robot 50. At this time, the fruit and vegetable identification unit 14 specifies the position of the fruit and vegetable to be picked up and sorted by each of the two gripping robots 50 in each fruit and vegetable conveyed to the pickup area by the carrier 21.

ステップS6において、ロボット制御部15は、各アーム51a〜51cの伸縮を制御する伸縮用モータ52a〜52cの駆動信号を出力することにより、果菜特定部14によって特定された各果菜の位置に把持ロボット50のハンドユニット53を移動させる。また、ロボット制御部15は、リアルハプティクスに基づく垂直方向の位置(または速度)あるいは力の少なくともいずれかの制御に従って、垂直モータ53eの駆動信号を出力することにより、ハンドユニット53を垂直方向に移動させる。
ステップS7において、ハンドユニット制御部16は、把持対象の果菜の大きさ、形状あるいは柔らかさ等の個別の条件に適合した把持動作を行う。このとき、ハンドユニット制御部16は、図4に示す制御則に従い、把持対象の果菜の個別の条件に適合させて把持する把持機能を実現する。
In step S6, the robot control unit 15 holds the robot at the position of each fruit identified by the fruit identification unit 14 by outputting drive signals of the extension motors 52a to 52c that control extension and contraction of the arms 51a to 51c. 50 hand units 53 are moved. Further, the robot control unit 15 vertically outputs the hand unit 53 by outputting a drive signal of the vertical motor 53e according to control of at least one of position (or velocity) in the vertical direction based on real haptics and / or force. Move it.
In step S7, the hand unit control unit 16 performs a gripping operation adapted to individual conditions such as the size, shape or softness of the fruit to be gripped. At this time, the hand unit control unit 16 implements a gripping function of gripping and meeting the individual conditions of the fruit to be gripped in accordance with the control rule shown in FIG. 4.

ステップS8において、ハンドユニット制御部16(把持成功/失敗判定部16e)は、ハンドユニット53が把持対象とした果菜の実際の把持に成功したか否かの判定を行う。
ハンドユニット53が把持対象とした果菜の実際の把持に成功した場合、ステップS8においてYESと判定されて、処理はステップS9に移行する。
一方、ハンドユニット53が把持対象とした果菜の実際の把持に成功していない場合、ステップS8においてNOと判定されて、処理はステップS11に移行する。
In step S8, the hand unit control unit 16 (gripping success / failure determination unit 16e) determines whether the actual gripping of the fruit that the hand unit 53 has made a gripping target has succeeded.
If the hand unit 53 succeeds in actually gripping the fruit to be gripped, YES is determined in step S8, and the process proceeds to step S9.
On the other hand, when the hand unit 53 has not succeeded in actually gripping the fruit to be gripped, NO is determined in step S8, and the process proceeds to step S11.

ステップS9において、重量判定部17は、ハンドユニット53が把持した果菜の重量を判定する。
ステップS10において、ロボット制御部15は、項目判定部13による果菜の評価項目の判定結果及び重量判定部17による果菜の重量の判定結果に基づいて、果菜の選別先(「腐敗果」、「格外」等)を決定し、決定した果菜の選別先に果菜を移送する。
In step S9, the weight determination unit 17 determines the weight of the fruit that the hand unit 53 grips.
In step S10, the robot control unit 15 selects the fruits selected based on the judgment result of the evaluation item of the fruit by the item judgment unit 13 and the judgment result of the weight of the fruit by the weight judgment unit 17 Etc.), and transfer the fruits to the selected fruits.

ステップS11において、搬送制御部18は、把持ロボット50のピックアップ領域に搬送される果菜の個数と、把持ロボット50によって選別された果菜の個数とに基づいて、把持ロボット50による果菜の選別のペースが搬送装置20による果菜の搬送のペースを下回っているか否かを判定する。
把持ロボット50による果菜の選別のペースが搬送装置20による果菜の搬送のペースを下回っている場合、ステップS11においてYESと判定されて、処理はステップS12に移行する。
一方、把持ロボット50による果菜の選別のペースが搬送装置20による果菜の搬送のペースを下回っていない場合、ステップS11においてNOと判定されて、処理はステップS1に移行する。
In step S11, the transport control unit 18 determines the pace of sorting of the fruits and vegetables by the gripping robot 50 based on the number of fruits and vegetables transported to the pick-up area of the gripping robot 50 and the number of fruits and vegetables sorted by the gripping robot 50. It is determined whether it is below the pace of conveyance of fruits and vegetables by the conveyance apparatus 20.
If the pace of sorting of the fruits and vegetables by the gripping robot 50 is lower than the pace of conveyance of the fruits and vegetables by the conveyance device 20, YES is determined in step S11, and the process proceeds to step S12.
On the other hand, when the pace of sorting of the fruits and vegetables by the gripping robot 50 is not less than the pace of conveyance of the fruits and vegetables by the conveyance device 20, NO is determined in step S11, and the process proceeds to step S1.

ステップS12において、搬送制御部18は、搬送装置20を一時的に停止(または速度を低下)させる。
ステップS12の後、制御装置10において、果菜選別処理の終了を指示する操作が行われるまで、果菜選別処理が繰り返される。
In step S12, the transport control unit 18 temporarily stops the transport device 20 (or reduces the speed).
After step S12, the fruit and vegetable sorting process is repeated until an operation for instructing the end of the fruit and vegetable sorting process is performed in the control device 10.

以上のように、本実施形態に係る果菜移載システム1は、搬送装置20によって搬送される果菜の大きさ、形状あるいは特性等の品質に関する情報(品質情報)を、撮影装置40によって撮影された画像等を基に解析する。そして、把持ロボット50は、リアルハプティクスに基づく制御により、把持対象の果菜の大きさ、形状あるいは表面状態等の個別の条件に適合した把持動作を行う。
そのため、果菜移載システム1においては、形状や大きさが不定形な果菜をより確実に保持することができる。また、軟弱な果菜であっても、表面を傷付けることなく、果菜の柔らかさに応じた把持力で保持することができる。
したがって、果菜移載システム1によれば、果菜を適切に保持することが可能となる。
As described above, in the fruit vegetable transfer system 1 according to the present embodiment, information (quality information) regarding the quality such as the size, shape, or characteristics of the fruit vegetables transported by the transport device 20 is photographed by the imaging device 40 Analyze based on images etc. Then, the gripping robot 50 performs gripping operation adapted to individual conditions such as the size, shape or surface state of the fruit to be gripped by control based on real haptics.
Therefore, in the fruit vegetable transfer system 1, it is possible to more reliably hold fruits and vegetables of irregular shape and size. Moreover, even if it is a weak fruit vegetable, it can be hold | maintained by the holding force according to the softness of fruit vegetables, without damaging the surface.
Therefore, according to the fruit vegetable transfer system 1, it becomes possible to hold fruit vegetables appropriately.

また、把持ロボット50は、力センサを用いることなく、個別の果菜に応じた把持力を出力するため、果菜を把持した際の振動の収束等に影響されることなく、速やかに把持力を決定して、果菜を移送することが可能となる。なお、本実施形態におけるリアルハプティクスに基づく制御を補助するために、力センサを備えることとしてもよい。
また、把持パラメータ決定部16bは、把持動作の開始時には、画像解析部12によって認識された果菜の大きさ及び果菜の特性に基づいて、制御データ記憶部19に記憶されている把持動作の基準値を読み出し、読み出した基準値を初期値として、開閉用モータ53dの回転軸の位置及び力(回転トルク)を制御する。
したがって、把持対象の果菜によらず、より適切な把持力で果菜を移送することができる。例えば、腐敗や過熟等によって極端に柔らかい果菜であっても、果菜を潰したり崩壊させたりすることなく、適切な把持動作を実現することができる。
さらに、果菜を移送中に、果菜の姿勢が変化しても、把持力を保持するようにハンドユニット53が動作して果菜を落とすことなく把持し続けることができる。
Further, since the gripping robot 50 outputs the gripping force according to the individual fruit vegetables without using a force sensor, the gripping force is determined promptly without being influenced by the convergence of the vibration when gripping the fruit vegetables, etc. It is then possible to transport fruits and vegetables. In addition, in order to assist control based on real haptics in the present embodiment, a force sensor may be provided.
Further, at the start of the gripping operation, the gripping parameter determining unit 16 b is a reference value of the gripping operation stored in the control data storage unit 19 based on the size of the fruit and the characteristics of the fruit recognized by the image analyzing unit 12 Is read out, and the position and force (rotational torque) of the rotation shaft of the motor 53 d for opening and closing are controlled with the read out reference value as an initial value.
Therefore, the fruit can be transferred with a more appropriate gripping force regardless of the fruit to be gripped. For example, even with extremely soft fruits and vegetables due to rot and overripening, etc., it is possible to realize an appropriate gripping operation without crushing or disintegrating the fruits.
Furthermore, even if the posture of the fruit is changed while the fruit is being transferred, the hand unit 53 can be operated to maintain the gripping force and the gripping can be continued without dropping the fruit.

なお、本発明は、本発明の効果を奏する範囲で変形、改良等を適宜行うことができ、上述の実施形態に限定されない。
例えば、上述の実施形態において、果菜移載システム1が、コンベアで搬送される果菜の中から、格外の個体及び腐敗を有する個体を把持ロボットによりピックアップして除外すると共に、果菜の規格毎に箱詰めする下流側に設置された作業場(商品となる個体を選別する作業場等)へ果菜を搬送する場合を例に挙げて説明したが、これに限られない。
即ち、果菜移載システム1が、コンベアで搬送される果菜の中から、格外の個体及び腐敗を有する個体を把持ロボット50によりピックアップして除外すると共に、商品となる個体を把持して重量を計測し、各等階級毎に直接箱詰めすることとしてもよい。この場合、果菜移載システム1における処理ラインを簡素化できる。
また、上述の実施形態においては搬送装置上に直接果菜を乗せ搬送しているが、コンテナ内に収容された果菜を搬送し、対象となる個体を直接把持して、規格毎に選別して箱詰めすることとしてもよい。
また、把持ロボット50によって、選果機で事前に規格毎に選別された果菜を把持して箱詰めする作業を行うこととしてもよい。
The present invention can be appropriately modified or improved as long as the effects of the present invention are achieved, and the present invention is not limited to the above-described embodiment.
For example, in the above-described embodiment, the fruit-plant transfer system 1 picks up extra individuals and rotten individuals from among the fruits carried by the conveyor and removes them by the gripping robot, and packs them according to the specification of fruits. Although the case of transporting fruits and vegetables to the work place (work place etc. which selects the individual used as goods) installed in the lower stream side was mentioned as an example and explained, it is not restricted to this.
That is, among the fruits and vegetables transferred by the conveyor, the fruit and vegetables transfer system 1 picks up and removes extraneous individuals and rotten individuals by the gripping robot 50, and grips the individual to be a commodity to measure the weight. Alternatively, they may be boxed directly for each equal rank. In this case, the processing line in the fruit-plant transfer system 1 can be simplified.
Moreover, in the above-mentioned embodiment, although fruit vegetables are directly put on the conveyance apparatus and conveyed, the fruit vegetables accommodated in the container are conveyed, the object object is directly grasped, it sorts according to a standard, and is packed You may do it.
In addition, the gripping robot 50 may perform an operation of gripping and boxing fruits and vegetables sorted according to the specifications in advance by the fruit collecting machine.

上述の実施形態において、把持ロボット50を2台設置することとして説明したが、これに限られない。即ち、選別する果菜の数や必要とされる選別のペース等を加味して、より多くの把持ロボット50を設置したり、1台の把持ロボット50で果菜を選別したりすることができる。   In the above-mentioned embodiment, although it explained as installing two grasping robots 50, it is not restricted to this. That is, it is possible to install more gripping robots 50 or sort fruits by one gripping robot 50 in consideration of the number of fruits to be sorted, the necessary sorting pace and the like.

また、上述の実施形態において、ハンドユニット53の具体的な形態は、図2に示す構成に限られるものではなく、種々の構成とすることができる。例えば、ハンドユニット53における可動部材53a〜53cを各種形状とすることが可能である。一例として、可動部材53a〜53cの先端を内側に屈曲させた形状とし、果菜の保持をより容易なものとすることができる。   Further, in the embodiment described above, the specific form of the hand unit 53 is not limited to the configuration shown in FIG. 2, and various configurations can be made. For example, the movable members 53a to 53c in the hand unit 53 can have various shapes. As an example, the tips of the movable members 53a to 53c may be bent inward to make it easier to hold fruits and vegetables.

また、上述の実施形態において、式(1)及び(2)における変換行列は目的に応じて変化させることができ、この変換行列を変化させることにより、把持パラメータ決定部16bが決定する開閉用モータ53dの動作を表すパラメータを簡単に変化させることができる。即ち、変換行列を変化させることで、可動部材53a〜53cが弾性力によって把持力を生成している状態や一定の把持力を維持する状態等、目的に応じた動作を表すパラメータを出力することが可能である。   Further, in the above embodiment, the conversion matrix in the equations (1) and (2) can be changed according to the purpose, and by changing this conversion matrix, the motor for opening and closing determined by the gripping parameter determination unit 16b Parameters representing the operation of 53 d can be easily changed. That is, by changing the transformation matrix, outputting parameters representing an operation according to the purpose, such as a state in which the movable members 53a to 53c generate a gripping force by elastic force or a state in which a constant gripping force is maintained. Is possible.

また、上述の実施形態において、撮影装置40が可視光画像及び紫外光画像を撮影する場合を例に挙げて説明したが、これに限られない。即ち、果菜の外観や特性等の品質を認識できる方法であれば、例えば、レーザー光を照射することにより、果菜の形状を表す画像(形状データ)や果菜同士の重なりを表す3次元データを取得したり、赤外線によって果菜の糖度を取得したりする等、果菜に関する種々のデータを取得する方法を用いることが可能である。
さらに、上述の実施形態においては品質情報の複数を用いて開閉用モータ53dの動作や移送先を決定しているが、目的に応じて品質情報の少なくとも一つを用いることとしてもよい。
Moreover, although the case where the imaging device 40 image | photographs a visible light image and an ultraviolet light image was mentioned as the example and demonstrated in the above-mentioned embodiment, it is not restricted to this. That is, if it is a method that can recognize the quality such as appearance and characteristics of fruits and vegetables, for example, by irradiating laser light, an image (shape data) representing the shape of fruits and three-dimensional data representing overlap between fruits and vegetables are acquired Alternatively, it is possible to use a method of acquiring various data related to fruits such as obtaining sugar content of fruits and vegetables by infrared rays.
Furthermore, although the operation and transfer destination of the open / close motor 53d are determined using a plurality of quality information in the above embodiment, at least one of the quality information may be used according to the purpose.

また、上述の実施形態に記載された例を適宜組み合わせて、本発明を実施することが可能である。
上述の実施形態における制御のための処理は、ハードウェア及びソフトウェアのいずれにより実行させることも可能である。
即ち、上述の処理を実行できる機能が果菜移載システム1に備えられていればよく、この機能を実現するためにどのような機能構成及びハードウェア構成とするかは上述の例に限定されない。
In addition, the present invention can be implemented by appropriately combining the examples described in the above embodiments.
The processing for control in the above-described embodiment can be performed by either hardware or software.
That is, the fruit transfer system 1 only needs to have a function capable of executing the above-mentioned processing, and what kind of functional configuration and hardware configuration to realize this function is not limited to the above example.

さらに、本実施形態は果菜把持装置において説明したが、不定形の食品を扱う食品把持装置にも応用できる。   Furthermore, although this embodiment was demonstrated in the fruit-fruit holding | gripping apparatus, it can apply also to the foodstuff holding | gripping apparatus which handles an irregular-shaped foodstuff.

なお、上記実施形態は、本発明を適用した一例を示しており、本発明の技術的範囲を限定するものではない。即ち、本発明は、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができ、上記実施形態以外の各種実施形態を取ることが可能である。本発明が取ることができる各種実施形態及びその変形は、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   The above embodiment shows an example to which the present invention is applied, and does not limit the technical scope of the present invention. That is, various changes such as omissions and substitutions can be made without departing from the scope of the present invention, and various embodiments other than the above-described embodiments can be taken. Various embodiments which can be taken by the present invention and the modifications thereof are included in the invention described in the claims and the equivalents thereof.

1 果菜移載システム、10 制御装置、11 画像取得部、12 画像解析部、13 項目判定部、14 果菜特定部、15 ロボット制御部、16 ハンドユニット制御部、16a 回転用モータ駆動部、16b 把持パラメータ決定部、16c 開閉用モータ駆動部、16d 可動部材位置取得部、16e 把持成功/失敗判定部、17 重量判定部、18 搬送制御部、19 制御データ記憶部、20 搬送装置、21 搬送体、21a 回転ローラ、22 受動プーリー、23 駆動プーリー、24 搬送用モータ、25 ブレーキ板、30 照明装置、40 撮影装置、50 把持ロボット(移動機構)、50a 筐体、51a〜51c アーム、52a〜52c 伸縮用モータ、53 ハンドユニット、53a〜53c 可動部材、53a〜53c 可動部材、53d 開閉用モータ、53d−1,53e−1 位置検出センサ、53e 垂直モータ、54 回転用モータ、110 力・速度割当変換ブロック、120 理想力源ブロック、130 理想速度(位置)源ブロック、140 逆変換ブロック   DESCRIPTION OF SYMBOLS 1 fruit and vegetables transfer system, 10 control apparatus, 11 image acquisition part, 12 image analysis part, 13 item determination part, 14 fruit and vegetable identification part, 15 robot control part, 16 hand unit control part, 16a motor drive part for rotation, 16b grip Parameter determination unit, 16c motor drive unit for opening and closing, 16d movable member position acquisition unit, 16e gripping success / failure determination unit, 17 weight determination unit, 18 transport control unit, 19 control data storage unit, 20 transport device, 21 transport body, 21a rotation roller, 22 passive pulley, 23 drive pulley, 24 transport motor, 25 brake plate, 30 illumination device, 40 photographing device, 50 gripping robot (moving mechanism), 50a case, 51a to 51c arm, 52a to 52c expansion and contraction Motor, 53 hand unit, 53a to 53c movable member, 53a to 53c Movable member, 53d opening / closing motor, 53d-1, 53e-1 position detection sensor, 53e vertical motor, 54 rotation motor, 110 force / speed allocation conversion block, 120 ideal force source block, 130 ideal speed (position) source block , 140 inverse transformation block

Claims (7)

食品を搬送する搬送手段と、
前記搬送手段によって搬送される前記食品に関するデータを取得するデータ取得手段と、
前記データ取得手段の取得結果に基づいて、前記食品の位置または品質の少なくともいずれかを含む個体情報を取得する個体情報取得手段と、
前記個体情報に基づいて、把持対象の前記食品を把持する把持手段と、
前記把持手段における食品を把持する可動部材の位置を検出する位置検出手段と、
前記把持手段を所定位置に移動させる移動機構と、
前記位置検出手段の位置情報に基づいて、前記把持手段における前記可動部材の動作を制御する制御手段と、
を備えることを特徴とする食品移載システム。
Transport means for transporting food;
Data acquisition means for acquiring data relating to the food conveyed by the conveyance means;
An individual information acquisition unit that acquires individual information including at least one of the position and the quality of the food based on the acquisition result of the data acquisition unit;
Grasping means for grasping the food to be grasped based on the individual information;
Position detection means for detecting the position of the movable member holding the food in the holding means;
A moving mechanism for moving the gripping means to a predetermined position;
Control means for controlling the movement of the movable member in the holding means based on the position information of the position detection means;
A food transfer system comprising:
前記制御手段は、前記食品の把持動作に対応して設定された、制御エネルギーを速度または位置のエネルギーと力のエネルギーとに割り当てる変換を行うことにより、前記把持手段における動作を制御することを特徴とする請求項1に記載の食品移載システム。   The control means controls the operation of the gripping means by performing conversion which assigns control energy to energy of speed or position and energy of force, which is set corresponding to the gripping action of the food. The food transfer system according to claim 1. 前記食品の品質について、複数段階の設定値を記憶する記憶手段を備え、
前記制御手段は、前記個体情報取得手段の取得結果に基づいて、前記記憶手段に記憶された前記設定値の中から、把持対象の前記食品の品質に対応する前記設定値を読み出し、当該設定値に基づいて、前記把持手段における動作を制御することを特徴とする請求項1または2に記載の食品移載システム。
Storage means for storing a plurality of setting values for the quality of the food;
The control means reads the setting value corresponding to the quality of the food to be gripped from the setting values stored in the storage means based on the acquisition result of the individual information acquisition means, and the setting value The food transfer system according to claim 1 or 2, wherein an operation in the gripping means is controlled on the basis of.
前記把持手段は、重量計測部をさらに備え、
前記制御手段は、前記重量計測部が前記食品を把持した際に算出したパラメータに基づいて、前記食品の重量を判定することを特徴とする請求項1から3のいずれか1項に記載の食品移載システム。
The gripping means further comprises a weight measuring unit,
The food according to any one of claims 1 to 3, wherein the control means determines the weight of the food based on a parameter calculated when the weight measuring unit grips the food. Transfer system.
前記制御手段は、前記個体情報取得手段の取得結果に基づいて、前記把持手段が前記食品を把持する際の接触位置を制御することを特徴とする請求項1から4のいずれか1項に記載の食品移載システム。   The said control means controls the contact position at the time of the said holding | grip means hold | gripping the said foodstuff based on the acquisition result of the said individual information acquisition means, The any one of Claim 1 to 4 characterized by the above-mentioned. Food transfer system. 把持対象の食品に関して当該食品の品質を含む個体情報を取得する個体情報取得手段と、
前記個体情報に基づいて、把持対象の前記食品を把持する把持手段と、
前記把持手段における食品を把持する可動部材の位置を検出する位置検出手段と、
前記位置検出手段の位置情報に基づいて、前記把持手段における前記可動部材の動作を制御する制御手段と、
を備えることを特徴とする食品把持装置。
An individual information acquisition unit for acquiring individual information including the quality of the food to be gripped;
Grasping means for grasping the food to be grasped based on the individual information;
Position detection means for detecting the position of the movable member holding the food in the holding means;
Control means for controlling the movement of the movable member in the holding means based on the position information of the position detection means;
A food gripping device comprising:
前記制御手段は、前記食品の把持動作に対応して設定された、制御エネルギーを速度または位置のエネルギーと力のエネルギーとに割り当てる変換を行うことにより、前記把持手段における動作を制御することを特徴とする請求項6に記載の食品把持装置。   The control means controls the operation of the gripping means by performing conversion which assigns control energy to energy of speed or position and energy of force, which is set corresponding to the gripping action of the food. The food gripping device according to claim 6, wherein
JP2017184104A 2017-09-25 2017-09-25 Food transfer system and food gripping device Active JP7201313B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017184104A JP7201313B2 (en) 2017-09-25 2017-09-25 Food transfer system and food gripping device
PCT/JP2018/035501 WO2019059403A1 (en) 2017-09-25 2018-09-25 Food product transfer system and food product gripping device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017184104A JP7201313B2 (en) 2017-09-25 2017-09-25 Food transfer system and food gripping device

Publications (2)

Publication Number Publication Date
JP2019058967A true JP2019058967A (en) 2019-04-18
JP7201313B2 JP7201313B2 (en) 2023-01-10

Family

ID=65810449

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017184104A Active JP7201313B2 (en) 2017-09-25 2017-09-25 Food transfer system and food gripping device

Country Status (2)

Country Link
JP (1) JP7201313B2 (en)
WO (1) WO2019059403A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021024026A (en) * 2019-08-05 2021-02-22 株式会社イシダ Article gripper
JP2021117019A (en) * 2020-01-22 2021-08-10 アンリツインフィビス株式会社 Boxing inspection system and boxing inspection method
WO2022157890A1 (en) * 2021-01-21 2022-07-28 東都フォルダー工業株式会社 Cloth pick-up device

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0663291U (en) * 1993-02-17 1994-09-06 高野ベアリング株式会社 Processed food holding device
JPH06335886A (en) * 1993-05-28 1994-12-06 Sanyo Electric Co Ltd Control of robot hand
JPH08323678A (en) * 1995-05-25 1996-12-10 Sanyo Electric Co Ltd Soft object grip device
JPH10217172A (en) * 1997-01-30 1998-08-18 Kubota Corp Robot hand
JP2010005732A (en) * 2008-06-26 2010-01-14 Toyota Industries Corp Robot hand mechanism, robot having robot hand mechanism and control method of robot hand mechanism
JP2013086229A (en) * 2011-10-20 2013-05-13 Yaskawa Electric Corp Robot system
WO2015041046A1 (en) * 2013-09-19 2015-03-26 学校法人慶應義塾 Position/force controller, and position/force control method and program
WO2017017751A1 (en) * 2015-07-27 2017-02-02 株式会社ニレコ Produce sorting device and produce sorting method

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0663291U (en) * 1993-02-17 1994-09-06 高野ベアリング株式会社 Processed food holding device
JPH06335886A (en) * 1993-05-28 1994-12-06 Sanyo Electric Co Ltd Control of robot hand
JPH08323678A (en) * 1995-05-25 1996-12-10 Sanyo Electric Co Ltd Soft object grip device
JPH10217172A (en) * 1997-01-30 1998-08-18 Kubota Corp Robot hand
JP2010005732A (en) * 2008-06-26 2010-01-14 Toyota Industries Corp Robot hand mechanism, robot having robot hand mechanism and control method of robot hand mechanism
JP2013086229A (en) * 2011-10-20 2013-05-13 Yaskawa Electric Corp Robot system
WO2015041046A1 (en) * 2013-09-19 2015-03-26 学校法人慶應義塾 Position/force controller, and position/force control method and program
WO2017017751A1 (en) * 2015-07-27 2017-02-02 株式会社ニレコ Produce sorting device and produce sorting method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021024026A (en) * 2019-08-05 2021-02-22 株式会社イシダ Article gripper
JP2021117019A (en) * 2020-01-22 2021-08-10 アンリツインフィビス株式会社 Boxing inspection system and boxing inspection method
JP7308770B2 (en) 2020-01-22 2023-07-14 アンリツ株式会社 Packaging inspection system and packaging inspection method
WO2022157890A1 (en) * 2021-01-21 2022-07-28 東都フォルダー工業株式会社 Cloth pick-up device

Also Published As

Publication number Publication date
JP7201313B2 (en) 2023-01-10
WO2019059403A1 (en) 2019-03-28

Similar Documents

Publication Publication Date Title
WO2019059403A1 (en) Food product transfer system and food product gripping device
CN109794437B (en) Intelligent sorting system based on computer vision
KR20220165262A (en) Pick and Place Robot System
CN109070146B (en) Method and device for orienting umbilicus-bearing fruit, in particular for packaging umbilicus-bearing fruit
JP2021092582A (en) Device for acquiring and analyzing product specific data of product of food processing industry, system with the device, and product processing method of food processing industry
JP2018027581A (en) Picking system
KR102027040B1 (en) Object auto arrangement system using image processing algorithm
JP2010519013A (en) Method and system for processing items
JP6527108B2 (en) Article transport device
KR102109698B1 (en) Object auto sorting, classifying system using image processing algorithm
WO2020126893A2 (en) Automatic suspension of meat items
JP6006568B2 (en) Fish small bone remover
JP7248317B2 (en) Tofu production system
Panda et al. Robotics for general material handling machines in food plants
EP4237204A1 (en) Item packing system, end effetor and method of sorting and/or packing vine fruit
WO2021221177A1 (en) Tofu production system
WO2023036752A1 (en) A robotic working tool and a robotic meat handling system for use in slaughterhouses
JP6860432B2 (en) Work recognition device and work recognition method
KR102027039B1 (en) Object auto arrangement system using image processing algorithm
JP7418743B2 (en) Identification transfer device and identification transfer method for target workpieces
CN108190346A (en) A kind of automatic shelf
WO2021160486A1 (en) Automatic suspension of meat items
JP2021171842A (en) Selector of dismantled material
CN117163380A (en) Automatic grabbing system, method and device based on machine vision and packaging pastry
WO2017042760A1 (en) System for grain sorting

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171013

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20200408

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20200409

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210531

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221222

R150 Certificate of patent or registration of utility model

Ref document number: 7201313

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150