JP3131993B2 - 果菜類収穫機等の視覚装置 - Google Patents
果菜類収穫機等の視覚装置Info
- Publication number
- JP3131993B2 JP3131993B2 JP02289993A JP28999390A JP3131993B2 JP 3131993 B2 JP3131993 B2 JP 3131993B2 JP 02289993 A JP02289993 A JP 02289993A JP 28999390 A JP28999390 A JP 28999390A JP 3131993 B2 JP3131993 B2 JP 3131993B2
- Authority
- JP
- Japan
- Prior art keywords
- fruit
- light
- image sensor
- distance
- sensor camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Stroboscope Apparatuses (AREA)
- Closed-Circuit Television Systems (AREA)
- Harvesting Machines For Specific Crops (AREA)
Description
【発明の詳細な説明】 ［産業上の利用分野］ 本発明は、ハウス栽培等で使用する無人の果菜類収穫
機等に設けられる視覚装置に関するものである。
機等に設けられる視覚装置に関するものである。
［従来の技術］ ハウス栽培等における収穫の省力化を図るために、所
定の経路に沿って自走しつつ成熟した果菜類を自動的に
収穫する果菜類収穫機の開発が進められている。この種
の果菜類収穫機は、対象物である栽培植物からの反射光
をイメージセンサカメラに撮像しこれをコンピュータで
画像処理する視覚装置を備え、該視覚装置によって見つ
け出された収穫可能な果実をロボットハンドで摘果する
とともに、これを所定の容器に収納するように構成され
ている。
定の経路に沿って自走しつつ成熟した果菜類を自動的に
収穫する果菜類収穫機の開発が進められている。この種
の果菜類収穫機は、対象物である栽培植物からの反射光
をイメージセンサカメラに撮像しこれをコンピュータで
画像処理する視覚装置を備え、該視覚装置によって見つ
け出された収穫可能な果実をロボットハンドで摘果する
とともに、これを所定の容器に収納するように構成され
ている。
［発明が解決しようとする課題］ しかしながら、背景の土やハウスの支柱等が対象物と
同色の色素を有する場合、対象物と背景との区別が不明
確であるという問題があった。
同色の色素を有する場合、対象物と背景との区別が不明
確であるという問題があった。
［課題を解決するための手段］ 上記課題を解決するために、本発明は次のような構成
とした。
とした。
すなわち、本発明にかかる視覚装置は、栽培植物に実
った果実を自動的に収穫する果菜類収穫機等の視覚装置
であって、対象物である果実に向けて投光する投光手段
と、対象物からの反射光を撮像するイメージセンサカメ
ラとを備え、前記投光手段は対象物と同色のストロボ光
を発し、かつ当該光の達する距離が対象物までの距離よ
りも若干遠くなるように設定されていることを特徴とし
ている。
った果実を自動的に収穫する果菜類収穫機等の視覚装置
であって、対象物である果実に向けて投光する投光手段
と、対象物からの反射光を撮像するイメージセンサカメ
ラとを備え、前記投光手段は対象物と同色のストロボ光
を発し、かつ当該光の達する距離が対象物までの距離よ
りも若干遠くなるように設定されていることを特徴とし
ている。
［作 用］ 投光手段が対象物と同色のストロボ光を発し、その反
射光を撮像するので、対象物の特性が増幅される結果、
対象物を明確に識別できる。また、投光手段から投光さ
れるストロボ光は、対象物までの距離よりも若干遠くな
るように設定されるので、背景が撮像されにくく、対象
物の識別の誤動作を防止することができる。
射光を撮像するので、対象物の特性が増幅される結果、
対象物を明確に識別できる。また、投光手段から投光さ
れるストロボ光は、対象物までの距離よりも若干遠くな
るように設定されるので、背景が撮像されにくく、対象
物の識別の誤動作を防止することができる。
［実施例］ 第１図は本発明の１例であるトマト収穫機の全体斜視
図であり、これに示した収穫機１は、電動式の四輪本体
車体３に収穫作業用のマニピュレータ５と、収穫した果
実を容れるキャリア６が設けられている。本体車体３に
は後記制御装置７、バッテリー等が内蔵されており、車
体前面部に制御装置のコントロールパネルが設けられて
いる。また、収穫物排出のために、キャリア６の底板は
昇降可能となっている。
図であり、これに示した収穫機１は、電動式の四輪本体
車体３に収穫作業用のマニピュレータ５と、収穫した果
実を容れるキャリア６が設けられている。本体車体３に
は後記制御装置７、バッテリー等が内蔵されており、車
体前面部に制御装置のコントロールパネルが設けられて
いる。また、収穫物排出のために、キャリア６の底板は
昇降可能となっている。
マニピュレータ５は遠隔操作されるハンド部10を備
え、このハンド部10の支持移動機構として、昇降用のブ
ーム12およびアーム13と、旋回用のテーブル15と、進退
用のブーム16およびアーム17とが設けられている。ハン
ド部10は、第２図に示すように、撮像用のイメージセン
サカメラ20と投光手段である赤色のストロボランプ21を
並設した視覚部22が基部24の先端部に設けられており、
この視覚部22よりも前方に突出させて一対の刃体からな
る枝切断用のカッタ25が前方に突出させて取り付けられ
ているとともに、該カッタの直下部に摘果した果実51が
落下収容されるバケット26が取り付けられている。な
お、バケット26の底部は開閉可能になっている。
え、このハンド部10の支持移動機構として、昇降用のブ
ーム12およびアーム13と、旋回用のテーブル15と、進退
用のブーム16およびアーム17とが設けられている。ハン
ド部10は、第２図に示すように、撮像用のイメージセン
サカメラ20と投光手段である赤色のストロボランプ21を
並設した視覚部22が基部24の先端部に設けられており、
この視覚部22よりも前方に突出させて一対の刃体からな
る枝切断用のカッタ25が前方に突出させて取り付けられ
ているとともに、該カッタの直下部に摘果した果実51が
落下収容されるバケット26が取り付けられている。な
お、バケット26の底部は開閉可能になっている。
第３図に示すように、制御装置７は画像処理ユニット
30、マニピュレータ制御ユニット31、走行制御ユニット
32、およびこれらを統括する総合制御ユニット33から構
成されている。画像処理ユニット30は、イメージセンサ
カメラ20のアイリス絞り35およびフォーカス機構36とス
トロボランプ21に制御信号を送り、イメージセンサカメ
ラ20から画像信号が送られてくる。マニピュレータ制御
ユニット31は、ハンド部駆動モータ37、カッタ駆動モー
タ38、バケット底開閉モータ39およびマニピュレータ駆
動モータ40（１〜７）に制御信号を送り、マニピュレー
タの状態を検出するためのポテンションメータ41（１〜
３）およびエンコーダ42（１〜４）から検出信号が送ら
れてくる。また、走行制御ユニット32は、車輪駆動モー
タ44、ステアリングモータ45およびキャリア底昇降モー
タ46に制御信号が送られ、経路標識を検出する倣いセン
サ47および回行センサ48から検出信号が送られてくる。
30、マニピュレータ制御ユニット31、走行制御ユニット
32、およびこれらを統括する総合制御ユニット33から構
成されている。画像処理ユニット30は、イメージセンサ
カメラ20のアイリス絞り35およびフォーカス機構36とス
トロボランプ21に制御信号を送り、イメージセンサカメ
ラ20から画像信号が送られてくる。マニピュレータ制御
ユニット31は、ハンド部駆動モータ37、カッタ駆動モー
タ38、バケット底開閉モータ39およびマニピュレータ駆
動モータ40（１〜７）に制御信号を送り、マニピュレー
タの状態を検出するためのポテンションメータ41（１〜
３）およびエンコーダ42（１〜４）から検出信号が送ら
れてくる。また、走行制御ユニット32は、車輪駆動モー
タ44、ステアリングモータ45およびキャリア底昇降モー
タ46に制御信号が送られ、経路標識を検出する倣いセン
サ47および回行センサ48から検出信号が送られてくる。
つぎに、実際の収穫機１の動作について説明する。
ある株50の前に収穫機１が停止すると、イメージセン
サカメラ20から送られてくる画像信号を画像処理ユニッ
ト30で処理しつつ、ハンド部10を適当に移動させて収穫
可能な果実51の探索を行なう。この際に、ストロボラン
プ21の投光量を、視覚部22から株50までの距離Ｂ＋α
（αは任意の正数）の範囲の物体を撮像可能な光量とな
るよう制御する。なお、畝間距離Ｃは既知（Ｃ＝1000〜
1300mm程度）であり、本体車体３の中心から視覚部まで
の距離Ａはエンコーダ42（１〜４）からの信号を解析す
ることにより算出されるので、距離Ｂは容易に知ること
ができる。このように、対象物よりも若干遠くにあるも
のまでイメージセンサカメラ20に撮像するようにしてお
くと、背景となる土52や支柱53等は撮像されないので、
対象物である株50が容易に識別できるのである。また、
本実施例のように、ストロボランプ21の光を収穫対象物
であるトマトと同色（赤色）にしておくと、対象物から
の反射光をイメージセンサカメラ20に撮像した際にトマ
トの特性が増幅されるようになるので、果実51と葉や茎
との区別が明瞭となる。
サカメラ20から送られてくる画像信号を画像処理ユニッ
ト30で処理しつつ、ハンド部10を適当に移動させて収穫
可能な果実51の探索を行なう。この際に、ストロボラン
プ21の投光量を、視覚部22から株50までの距離Ｂ＋α
（αは任意の正数）の範囲の物体を撮像可能な光量とな
るよう制御する。なお、畝間距離Ｃは既知（Ｃ＝1000〜
1300mm程度）であり、本体車体３の中心から視覚部まで
の距離Ａはエンコーダ42（１〜４）からの信号を解析す
ることにより算出されるので、距離Ｂは容易に知ること
ができる。このように、対象物よりも若干遠くにあるも
のまでイメージセンサカメラ20に撮像するようにしてお
くと、背景となる土52や支柱53等は撮像されないので、
対象物である株50が容易に識別できるのである。また、
本実施例のように、ストロボランプ21の光を収穫対象物
であるトマトと同色（赤色）にしておくと、対象物から
の反射光をイメージセンサカメラ20に撮像した際にトマ
トの特性が増幅されるようになるので、果実51と葉や茎
との区別が明瞭となる。
このようにして、収穫可能な果実51が見つけ出される
と、ハンド部移動機構を作動させてハンド部10をこれに
近づけ、カッタ25で果実51が付いている茎55を切断す
る。茎55は果実51の重みで垂れ下がっているので、果実
51の上方近傍でカッタ25を開閉させるようにすればよ
い。摘み取られた果実51はバケット26の中に落下する。
つぎに、バケット26がキャリア６の上方にくるようハン
ド部10を移動させ、バケット底を開放して中の果実をキ
ャリア６内に収容する。以下同様にして１株分の収穫可
能な果実を全て収穫し終えると、本体車体３が株間距離
分だけ前進し、次の株の収穫作業を開始する。
と、ハンド部移動機構を作動させてハンド部10をこれに
近づけ、カッタ25で果実51が付いている茎55を切断す
る。茎55は果実51の重みで垂れ下がっているので、果実
51の上方近傍でカッタ25を開閉させるようにすればよ
い。摘み取られた果実51はバケット26の中に落下する。
つぎに、バケット26がキャリア６の上方にくるようハン
ド部10を移動させ、バケット底を開放して中の果実をキ
ャリア６内に収容する。以下同様にして１株分の収穫可
能な果実を全て収穫し終えると、本体車体３が株間距離
分だけ前進し、次の株の収穫作業を開始する。
［発明の効果］ 以上の説明から明らかなように、本発明にかかる果菜
類収穫機等の視覚装置は、背景となる地面の土やハウス
の支柱等はイメージセンサカメラに撮像されないように
投光手段の投光量が制御されるので、イメージセンサカ
メラにとらえられた栽培植物の像が明瞭になるととも
に、対象物と同色の光が投光されるので、イメージセン
サカメラで撮像した像における対象物の特性が増幅され
る結果、収穫すべき果実を正確に識別できるようになっ
た。
類収穫機等の視覚装置は、背景となる地面の土やハウス
の支柱等はイメージセンサカメラに撮像されないように
投光手段の投光量が制御されるので、イメージセンサカ
メラにとらえられた栽培植物の像が明瞭になるととも
に、対象物と同色の光が投光されるので、イメージセン
サカメラで撮像した像における対象物の特性が増幅され
る結果、収穫すべき果実を正確に識別できるようになっ
た。
第１図は本発明の１実施例である果菜類収穫機の全体斜
視図、第２図はハンド部の斜視図、第３図は制御装置の
ブロック図、第４図は収穫作業状態をあらわす図であ
る。 １……果菜類収穫機、３……本体車体、７……制御装
置、10……ハンド部、20……イメージセンサカメラ、21
……ストロボランプ（投光手段）、22……視覚部。
視図、第２図はハンド部の斜視図、第３図は制御装置の
ブロック図、第４図は収穫作業状態をあらわす図であ
る。 １……果菜類収穫機、３……本体車体、７……制御装
置、10……ハンド部、20……イメージセンサカメラ、21
……ストロボランプ（投光手段）、22……視覚部。
フロントページの続き (58)調査した分野(Int.Cl.7，ＤＢ名) A01D 46/30 A01D 46/24 G03B 15/03 G03B 15/05
Claims (1)
- 【請求項１】栽培植物に実った果実を自動的に収穫する
果菜類収穫機等の視覚装置であって、対象物である果実
に向けて投光する投光手段と、対象物からの反射光を撮
像するイメージセンサカメラとを備え、前記投光手段は
対象物と同色のストロボ光を発し、かつ当該光の達する
距離が対象物までの距離よりも若干遠くなるように設定
されていることを特徴とする果菜類収穫機等の視覚装
置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP02289993A JP3131993B2 (ja) | 1990-10-26 | 1990-10-26 | 果菜類収穫機等の視覚装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP02289993A JP3131993B2 (ja) | 1990-10-26 | 1990-10-26 | 果菜類収穫機等の視覚装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH04166013A JPH04166013A (ja) | 1992-06-11 |
| JP3131993B2 true JP3131993B2 (ja) | 2001-02-05 |
Family
ID=17750394
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP02289993A Expired - Fee Related JP3131993B2 (ja) | 1990-10-26 | 1990-10-26 | 果菜類収穫機等の視覚装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3131993B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102612926A (zh) * | 2012-04-01 | 2012-08-01 | 华南农业大学 | 一种机械化水果采摘收集运输系统及方法 |
| CN109168630A (zh) * | 2018-09-12 | 2019-01-11 | 三峡大学 | 一种基于机器视觉的低矮果实采摘装置 |
| EP3539735A1 (en) * | 2018-03-13 | 2019-09-18 | Soluciones Robóticas Agrícolas S.L. | Robotic arm end effector for fruit harvesting |
Families Citing this family (37)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2006013593A1 (en) * | 2004-08-06 | 2006-02-09 | Valente Pali Precompressi Srl | Automated fruit and vegetables picker |
| JP4496161B2 (ja) * | 2005-12-14 | 2010-07-07 | 政典 杉坂 | 柱状物の昇降装置 |
| EP1891852B1 (en) * | 2006-08-25 | 2010-02-03 | EGA MATIC ApS | Method and collection vehicle for harvesting crops growing on stems |
| JP5023259B2 (ja) * | 2007-11-30 | 2012-09-12 | 長崎県 | アスパラガス切断可否自動判定装置 |
| ES2340244B2 (es) * | 2008-10-16 | 2011-01-03 | Soluciones Roboticas Agricolas Slu | Maquina para la recoleccion automatica de frutos cultivados en hileras. |
| RU2483524C1 (ru) * | 2012-02-13 | 2013-06-10 | Марина Георгиевна Сафонова | Навесное оборудование для сбора бахчевых культур |
| CN103404307B (zh) * | 2013-07-30 | 2015-06-17 | 西北农林科技大学 | 一种全自动猕猴桃采摘末端执行器 |
| CN103448061B (zh) * | 2013-08-07 | 2015-08-12 | 西北农林科技大学 | 一种猕猴桃果实采摘末端执行器 |
| CN103444359B (zh) * | 2013-08-30 | 2016-07-13 | 华南农业大学 | 一种香蕉采摘装置及采摘方法 |
| CN103749094A (zh) * | 2013-12-16 | 2014-04-30 | 西北农林科技大学 | 一种猕猴桃果实采摘机器人及采摘方法 |
| CN104396446B (zh) * | 2014-12-09 | 2016-02-03 | 广西大学 | 一种扭簧式果实采摘装置 |
| CN104663135B (zh) * | 2015-01-12 | 2017-01-18 | 上海交通大学 | 一种用于果实采摘机器人的末端执行器 |
| CN105309131B (zh) * | 2015-11-30 | 2017-09-05 | 青岛农业大学 | 智能辨识枸杞采摘装置 |
| CN106612959B (zh) * | 2016-09-29 | 2018-11-13 | 南京信息职业技术学院 | 用于芒果采摘机械手的末端采摘装置 |
| CN106717546B (zh) * | 2016-11-22 | 2019-05-24 | 中国计量大学 | 番茄果实串收获机械手末端执行器及其方法 |
| US20200008355A1 (en) * | 2017-03-14 | 2020-01-09 | Metomotion Ltd. | Automated harvester effector |
| CN106973645A (zh) * | 2017-04-21 | 2017-07-25 | 金丰（宁波）精密机械科技有限公司 | 包括传动齿轮的切割平台 |
| CN106941872A (zh) * | 2017-04-21 | 2017-07-14 | 金丰（宁波）精密机械科技有限公司 | 使用传动齿轮来进行切割的方法 |
| CN107018759B (zh) * | 2017-06-08 | 2023-09-26 | 宝鸡文理学院 | 基于单片机控制的自动夹持剪蒂型苹果采摘器 |
| CN107306603A (zh) * | 2017-07-31 | 2017-11-03 | 山东省农业机械科学研究院 | 冬枣采摘装置 |
| CN107439143B (zh) * | 2017-09-11 | 2020-04-24 | 中国农业大学 | 一种温室串番茄采收机及采收方法 |
| CN107637279A (zh) * | 2017-09-30 | 2018-01-30 | 石河子大学 | 红花采摘机器人 |
| CN107787681A (zh) * | 2017-10-17 | 2018-03-13 | 江苏大学 | 一种葡萄串果快速无脱落采收的机器人系统与实现方法 |
| CN107893661A (zh) * | 2017-12-15 | 2018-04-10 | 成都格机械有限公司 | 隧道掘进台车 |
| CN108093854B (zh) * | 2017-12-19 | 2019-09-27 | 徐州工业职业技术学院 | 一种仿人手式草莓采摘装置 |
| CN108401684A (zh) * | 2018-05-03 | 2018-08-17 | 黄冈师范学院 | 一种智能水果采摘机及采摘方法 |
| CN108811771A (zh) * | 2018-08-28 | 2018-11-16 | 贺婷 | 一种水果采摘车 |
| CN109699301B (zh) * | 2019-02-22 | 2020-07-31 | 四川农业大学 | 一种智能柑橘采摘机及柑橘采摘方法 |
| JP7223659B2 (ja) * | 2019-08-02 | 2023-02-16 | 井関農機株式会社 | 果菜類収穫機 |
| CN110710383A (zh) * | 2019-12-03 | 2020-01-21 | 仲恺农业工程学院 | 一种香蕉采摘与吊放作业机器人 |
| CN111699839B (zh) * | 2020-06-22 | 2022-04-22 | 威海美达智能电子科技有限公司 | 一种基于5g网络的远程采摘设备和方法 |
| CN112690095B (zh) * | 2020-12-27 | 2023-08-25 | 上海电机学院 | 一种农作物精准采摘装置 |
| CN113661832A (zh) * | 2021-09-07 | 2021-11-19 | 石国欢 | 一种免人工采摘自助采集油茶籽的装置及使用方法 |
| CN113678636B (zh) * | 2021-09-23 | 2022-08-02 | 湖南文理学院 | 一种小型智能化柑橘采摘装置 |
| CN113994814A (zh) * | 2021-11-25 | 2022-02-01 | 陕西科技大学 | 一种智能果蔬采摘机器人 |
| CN114731845A (zh) * | 2022-02-24 | 2022-07-12 | 华南农业大学 | 一种移动式脐橙采摘接收设备 |
| CN115462240A (zh) * | 2022-07-18 | 2022-12-13 | 北京林业大学 | 一种梳理式山桐子采收装置 |
-
1990
- 1990-10-26 JP JP02289993A patent/JP3131993B2/ja not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102612926A (zh) * | 2012-04-01 | 2012-08-01 | 华南农业大学 | 一种机械化水果采摘收集运输系统及方法 |
| CN102612926B (zh) * | 2012-04-01 | 2014-01-15 | 华南农业大学 | 一种机械化水果采摘收集运输系统及方法 |
| EP3539735A1 (en) * | 2018-03-13 | 2019-09-18 | Soluciones Robóticas Agrícolas S.L. | Robotic arm end effector for fruit harvesting |
| CN109168630A (zh) * | 2018-09-12 | 2019-01-11 | 三峡大学 | 一种基于机器视觉的低矮果实采摘装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH04166013A (ja) | 1992-06-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3131993B2 (ja) | 果菜類収穫機等の視覚装置 | |
| US12004451B2 (en) | Autonomous crop harvester | |
| US5544474A (en) | System for harvesting crop items and crop harvesting tools used therewith | |
| US11134617B2 (en) | Self-guided blossom picking device | |
| US7854108B2 (en) | Agricultural robot system and method | |
| US7765780B2 (en) | Agricultural robot system and method | |
| US20060150602A1 (en) | Method and apparatus for remotely assisted harvester | |
| US20090090093A1 (en) | Method and machine for vine automatic pruning | |
| JP2010207118A (ja) | 果実収穫用エンドエフェクタ | |
| EP4201191A1 (en) | Fruit picking robotic installation on platforms | |
| WO2022123448A1 (en) | Robotic farm system and method of operation | |
| JP2893864B2 (ja) | 果実収穫機における転倒防止装置 | |
| Kurhade et al. | Review on “Automation in Fruit Harvesting | |
| JP7543652B2 (ja) | 作物収穫車両 | |
| NL2029815B1 (en) | Agricultural machine for use in a field | |
| JPH0430717A (ja) | 袋を検出して果実を捕捉収穫する果実収穫機 | |
| JPH0430716A (ja) | 果実収穫用ロボット | |
| JP2900591B2 (ja) | 無人収穫機 | |
| JP3225264B2 (ja) | 収穫装置 | |
| JP2955440B2 (ja) | 刈取収穫機の刈高さ制御装置 | |
| JPS6242655Y2 (ja) | ||
| JP2022185955A (ja) | 圃園管理装置並びにこれを用いた営農管理方法 | |
| JPH0560323B2 (ja) | ||
| JPH0653013B2 (ja) | 果菜類の収穫用ハンド | |
| JPH0317448B2 (ja) |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| LAPS | Cancellation because of no payment of annual fees |