JP6853591B2 - 農作業装置、農作業管理システム、及びプログラム - Google Patents

Description

本発明は、農作業装置、農作業管理システム、及びプログラムに関する。

農業経営の合理化や農業機械の高性能化にともなって、一圃場あたりの収穫データ等の各種農作業データを集積し、将来の農作業計画やビジネス計画に役立てることがますます重要になってきている。

これに関して、特許文献１には、農業機械に装着され、本機側のデ−タを、通信ラインを介して管理端末器に送信するように構成されたデ−タ収集装置において、該管理端末器の記憶装置内に設定されるデ−タフアイルを自動的に作成するように構成すると共に、そのファイル名には、少なくとも作業した日付、機械の識別コ−ド、作業者名、若しくは圃場番号の各要素の１つ又は複数が含まれていることを特徴とする農業機械のデ−タ収集装置が開示されている。

特開平０６−２３１３２９号公報

特許文献１のデータ収集装置においては、圃場データを収集することができるものの、圃場データを収集した後、圃場データを収集した位置と圃場データとの関連性を導き出すことができない。よって、圃場データを適切に管理することができず、且つ、圃場データを有効活用することができないため、将来の農作業やビジネスを円滑に実行できないおそれがあった。

本発明は、上記の事情に鑑みてなされたものであり、農作業情報を適切に管理することができ、且つ、農作業情報の活用による将来の農作業やビジネスの円滑な実行を可能にする農作業装置、農作業管理システム、及びプログラムを提供することを目的の一つとする。

本発明の一実施形態に係る農作業装置は、第１撮像装置と、前記第１撮像装置が農作業の対象を撮像することにより得られる第１画像情報に基づいて、前記対象に対して前記農作業を実行するか否かを判断する農作業判断部と、前記農作業判断部の判断結果に基づいて前記農作業を実行する農作業実行部と、前記農作業の結果を含む農作業情報を生成する農作業情報生成部と、前記対象の位置を測定する測定部と、前記農作業情報と、測定された前記位置を示す位置情報と、を管理する農作業情報管理部と、を備える。

上記農作業装置において、前記第１画像情報と、前記対象を含む参照画像としての第２画像情報と、に基づいて前記対象の異常の有無を判断する異常判断部を更に備えてもよい。

上記農作業装置において、前記測定部は、前記第１画像情報に基づいて前記対象の寸法を測定し、前記農作業判断部は、測定された前記寸法と所定の閾値との比較結果と、前記異常の有無と、に基づいて、前記対象に対して前記農作業を実行するか否かを判断してもよい。

上記農作業装置において、前記農作業情報管理部は、前記対象の位置を測定した時間を示す時間情報を、前記農作業情報と前記位置情報とに関連づけて記録してもよい。

上記農作業装置において、前記農作業を実行するためのアーム装置を更に備え、前記農作業実行部は、前記測定部により測定された前記対象の位置に基づいて前記動作を制御してもよい。

上記農作業装置において、前記アーム装置は、第２撮像装置を備え、前記農作業実行部は、前記第２撮像装置が前記対象を撮像することにより得られる第３画像情報に基づいて、前記アーム装置の前記動作を制御してもよい。

上記農作業装置において、農作業装置が予め定められた経路に沿って移動するように制御する駆動装置を更に備え、前記駆動装置は、前記農作業判断部により、前記第１画像情報に含まれる前記対象に対して前記農作業を実行するか否かを判断した後に当該農作業装置の移動を制御してもよい。

上記農作業装置において、前記第１撮像装置は、前記経路に配置されているマーカを検出し、前記駆動装置は、検出された前記マーカに基づいて農作業装置の移動を制御してもよい。

上記農作業装置において、前記測定部が測定する前記対象の位置は、前記第１撮像装置が前記対象を撮像した位置を含んでもよい。

本発明の一実施形態に係る農作業管理システムは、請求項１〜９のいずれか一項に記載の農作業装置と、農作業管理サーバと、を備える農作業管理システムであって、前記農作業装置は、前記農作業の結果を示す前記農作業情報と前記位置情報とを前記農作業管理サーバに送信し、前記農作業管理サーバは、前記農作業情報と前記位置情報とに基づいて、前記対象に対して実行する前記農作業の内容を予測する農作業予測部を備える。

上記農作業管理システムは、出力部を備える携帯端末を更に備え、前記農作業管理サーバは、前記農作業情報と前記位置情報とを関連づけて予め定められた出力態様で出力するための出力情報を生成する出力情報生成部を更に備え、前記出力部は、前記出力情報に基づいて前記農作業情報と前記位置情報とを予め定められた出力態様で出力してもよい。

本発明の一実施形態に係るプログラムは、撮像装置を備える農作業装置を、前記撮像装置が農作業の対象を撮像することにより得られる画像情報に基づいて、前記対象に対して前記農作業を実行するか否かを判断する農作業判断部と、前記農作業判断部の判断結果に基づいて前記農作業を実行する農作業実行部と、前記農作業の結果を含む農作業情報を生成する農作業情報生成部と、前記対象の位置を測定する測定部と、前記農作業情報と、測定された前記位置を示す位置情報と、を管理する農作業情報管理部と、して機能させる。

なお、各実施形態において、「部」、「装置」、「システム」とは、単に物理的手段を意味するものではなく、その「部」、「装置」、「システム」が有する機能をソフトウェアによって実現する場合も含む。また、１つの「部」、「装置」、「システム」が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の「部」、「装置」、「システム」の機能が１つの物理的手段や装置により実現されてもよい。

本発明によれば、農作業情報と対象の位置とを関連付けて管理することにより、農作業情報を適切に管理することができ、且つ、農作業情報の活用による将来の農作業やビジネスの円滑な実行を可能にする。

本発明の一実施形態に係る農作業管理システムの概略構成の一例を示すブロック図。 本発明の一実施形態に係る農作業装置の概略構成の一例を示すブロック図。 本発明の一実施形態に係る農作業装置の記録装置に記録される農作業情報テーブルの一例を示す。 本発明の一実施形態に係る農作業装置の記録装置に記録される農作業情報テーブルの一例を示す図。 本発明の一実施形態に係る農作業装置の記録装置に記録される農作業情報テーブルの一例を示す図。 本発明の一実施形態に係る農作業装置の記録装置に記録される農作業情報テーブルの一例を示す図。 本発明の一実施形態に係る農作業管理サーバの概略構成の一例を示すブロック図。 本発明の一実施形態に係る農作業処理フローの一例を示すフローチャート。 本発明の一実施形態に係る圃場において農作業装置が実行する農作業の一例を示す図。 本発明の一実施形態に係る農作業判断処理フローの一例を示すフローチャート。 本発明の一実施形態に係る農作業判断処理における画像処理の一例を説明する図。 本発明の一実施形態に係る農作業判断処理における農作物測定処理の一例を説明する図。 本発明の一実施形態に係る農作業実行処理フローの一例を示すフローチャート。 本発明の一実施形態に係る圃場において農作業装置が実行する農作業の一例を示す図。

以下、図面を参照して、一実施形態を説明する。ただし、以下に説明する実施形態は、あくまでも例示であり、以下に明示しない種々の変形や技術の適用を排除する意図はない。すなわち、本発明は、その趣旨を逸脱しない範囲で種々変形して実施することができる。また、一連の図面の記載において、同一または類似の部分には同一または類似の符号を付して表している。

［農作業管理システムの全体構成］
図１は、本発明の一実施形態に係る農作業管理システムの概略構成の一例を示すブロック図である。図１に示すように、農作業管理システム１００は、例示的に、圃場ＦＦにおいて農作業を実行し、農作業の結果を管理する農作業装置１と、農作業装置１が実行する農作業の結果を管理し、農作業の結果に基づいて将来実行される農作業の内容を予測する農作業管理サーバ５と、農作業に従事するユーザＵが保持する携帯端末３と、を備える。

ここで、「農作業」としては、例えば畝Ｒに配置されているアスパラＡ（対象）を収穫すること、圃場ＦＦに対して薬剤を散布すること、及び、圃場ＦＦにおいて除草を行うこと等を含む。農作業の「対象」は、アスパラＡのような農作物に限られず、圃場ＦＦ内に形成される畝Ｒ等の地面部分、圃場ＦＦ内の所定の空間を含んでもよい。

農作業装置１、携帯端末３及び農作業管理サーバ５は、所定の通信ネットワークＮを介して相互に通信可能に接続されている。例えば、農作業装置１は、通信ネットワークＮを介して、携帯端末３から農作業装置１において農作業を実行するための指示を受け付ける。農作業装置１は、携帯端末３からの指示に基づいて、例えば畝Ｒにおいて栽培されているアスパラＡを、アーム１６を用いて収穫する。農作業装置１は、農作業の結果を含む農作業情報を生成し、通信ネットワークＮを介して、農作業管理サーバ５に少なくとも当該農作業情報と位置情報とを送信する。農作業管理サーバ５は、通信ネットワークＮを介して、携帯端末３に対して、少なくとも当該農作業情報と位置情報とを送信する。携帯端末３は、通信ネットワークＮを介して、農作業管理サーバ５から少なくとも当該農作業情報と位置情報とを受信し、出力部７において出力する。

このように、農作業情報と対象の位置とを関連付けて管理することにより、農作業情報を適切に管理することができ、且つ、農作業情報の活用による将来の農作業やビジネスの円滑な実行を可能にする。そして、ユーザＵは、携帯端末３の出力部７において、農作業装置１が実行する農作業の結果を確認することができる。また、例えばユーザＵが農作物の生産者である場合は、携帯端末３の出力部７に出力される農作業の結果の一例である薬剤の散布量を、消費者に提示することで消費者に農作物の安心と安全とを宣伝することができる。さらに、携帯端末３は、ＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）技術を備えた透過式メガネ型端末であってもよい。この場合は、ユーザＵが当該メガネ型端末を装着して畝Ｒを見ると、畝Ｒにおいて未収穫の箇所を含む領域が光って表示される等の強調表示が実行される。このように、ユーザＵは、未収穫の箇所を容易に特定できる。

なお、通信ネットワークＮは、インターネット、パケット通信網、及び回線通信網の組み合わせであってもよく、例えば農作業装置１と携帯端末３と農作業管理サーバ５のそれぞれの通信部分は無線ネットワークであるが、有線ネットワークを含んでもよい。

また、農作業管理システム１００においては、農作業装置１、携帯端末３及び農作業管理サーバ５のそれぞれの台数は任意であり、それぞれが２台以上となるように構成することができる。

［農作業装置の構成］
図２は、本発明の一実施形態に係る農作業装置の概略構成の一例を示すブロック図である。図２に示すように、農作業装置１は、例示的に、不図示のＧＰＳ衛星から送信されたＧＰＳ信号に基づいて農作業装置１の位置を検出するＧＰＳセンサ１２と、農作業の対象を撮像するカメラ１４（第１撮像装置）と、農作業を実行するためのアーム装置１６と、農作業装置１が実行する各処理に必要な情報を記録する記録装置１８と、図１に示す携帯端末３及び農作業管理サーバ５と各種情報を送受信する通信装置２０と、農作業装置１が予め定められた経路に沿って移動するように制御する駆動装置２２と、上記各構成要素と接続された中央処理装置１０と、を備える。なお上記各構成要素は、それぞれが単一の構成要素であってもよいし、複数の構成要素を含む構成要素であってもよい。カメラ１４は、例えば、耐外乱光性能を有する、パルスレーザを使用するＴＯＦ（Ｔｉｍｅ Ｏｆ Ｆｌｉｇｈｔ）型距離画像センサ、及び、ＣＣＤ（Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）を備えるカメラの少なくとも一方を備える。

中央処理装置１０は、農作業情報を管理するための処理を実行するために上記各構成要素を制御する。中央処理装置１０は、例えばＣＰＵ、ＭＰＵ等であって、記録装置１８に格納されたプログラムに従って動作する。中央処理装置１０は、機能的に、対象の位置、高さ及び奥行等を測定する農作物測定部３０（測定部）と、対象が規格外品であるか、対象が病害を有しているか等を含む対象の異常を判断する異常判断部３２と、カメラ１４が農作業の対象を撮像することにより得られる画像情報（第１画像情報）に基づいて、対象に対して農作業を実行するか否かを判断する農作業判断部３４と、農作業判断部３４の判断結果に基づいて農作業を実行する農作業実行部３６と、農作業の結果を含む農作業情報を生成する農作業情報生成部３８と、農作業情報生成部３８が生成した農作業情報を管理する農作業情報管理部４０と、を備える。なお、規格外品は、外品ともいう。

記録装置１８は、農作業情報生成部３８が生成する農作業情報を記録する。記録装置１８は、農作業情報を、例えば図３〜図６に示す農作業情報テーブルとして記録する。

図３に示すように、記録装置１８は、対象の収穫の有無及び収穫量を含む農作業情報を、対象が栽培されている位置を含む農作業位置（位置情報）と農作業位置が測定された日時とに関連づけて記録する。

図４に示すように、記録装置１８は、図１に示す農作業装置１が対象を収穫する際に向いている方向、及び、収穫する対象を含む画像情報を含む農作業情報を、農作業位置と農作業位置が測定された日時とに関連づけて記録する。

図５に示すように、記録装置１８は、対象の収穫の有無、及び、対象の規格外品・病害量を含む農作業情報を、農作業位置と農作業位置が測定された日時とに関連づけて記録する。

図６に示すように、記録装置１８は、薬剤散布量を含む農作業情報を、農作業位置として薬剤を散布した位置と当該位置が測定された日時とに関連づけて記録する。

なお、記録装置１８は、農作業装置１が雑草を除去する雑草除去装置である場合、農作業情報として、除去した雑草の重量を、除去した雑草の位置（又は除去処理を実行した農作業装置１の位置）と、雑草を除去した日時と、関連付けて記録してもよい。

また、図３〜図６に示す各農作業情報テーブルは、記録装置１８において互いに関連づけて記録されてもよい。また、農作業情報テーブルは、図３〜図６に示す農作業情報テーブルの少なくとも二つ以上を組み合わせて構成されてもよい。

農作業位置は、図１に示すＧＰＳセンサ１２が検出する農作業装置１の位置であってもよい。農作業位置は、複数の対象のそれぞれの位置であってもよい。複数の対象のそれぞれの位置は、例えば、畝において、農作物が農作業装置１に対してより近くに（手前に）配置されているか）又はより遠くに（奥に）配置されているかを示す情報であってもよい。図４に示す農作業情報テーブルにおける方向情報は、所定の方向を基準とした場合の角度で示され、複数の対象のそれぞれを収穫する場合に対象ごとに対応づけられた方向であってもよいし、複数の対象を含む対象グループを収穫する場合にグループごとに対応づけられた方向であってもよい。図４に示す農作業情報テーブルにおける画像情報は、単一の対象を含む画像情報であってもよいし、複数の対象を含む画像情報であってもよい。また、画像情報は、農作業装置１が薬剤を散布している状況を示す画像情報であってもよいし、農作業装置１が薬剤を散布した後の状況を示す画像情報であってもよい。

なお、記録装置１８は、例えばＲＯＭやＲＡＭ、ハードディスク等の情報記録媒体で構成され、中央処理装置１０によって実行されるプログラムを保持する情報記録媒体である。また、記録装置１８は、中央処理装置１０のワークメモリとしても動作する。なお、記録装置１８に格納されたプログラムは、例えば、ネットワークを介して、農作業装置１の外部からダウンロードされて提供されてもよいし、又は、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等のコンピュータで読み取り可能な各種の情報記録媒体によって提供されてもよい。

通信装置２０は、例えば、図１に示すように、通信ネットワークＮを介して、携帯端末３から農作業を実行するための指示を受信する。他方で通信装置２０は、通信ネットワークＮを介して、農作業管理サーバ５に例えば図３〜図６に示す農作業情報テーブルを送信する。

駆動装置２２は、例えば、左右の車軸に支持された移動用車輪であり、移動用車輪を回転させることにより前後に移動でき、旋回することができる。

［農作業管理サーバの構成］
図７は、本発明の一実施形態に係る農作業管理サーバの概略構成の一例を示すブロック図である。図７に示すように、農作業管理サーバ７は、例示的に、図１に示す農作業装置１及び携帯端末３との間で各種の情報を送受信する通信部５０と、農作業情報に基づく情報処理を実行する情報処理部５２と、図１に示す農作業装置１から送信される農作業情報を農作業情報テーブルＡＴ（図３〜図６を参照）と、図１及び図９に示す圃場ＦＦを示す圃場マップＭと、を記憶する記録部５４と、備える。ここで、圃場マップＭは、後述するとおり、図１に示す携帯端末３において農作業の実行範囲を設定する場合や農作業装置１において実際に農作業を実行する場合の移動範囲の制御等に用いられる。なお、記録部５４は、情報処理部５２が実行する各種情報処理に関する各種プログラム等を記録してもよい。

情報処理部３４は、機能的に、図１に示す農作業装置１から送信され、通信部５０において受信する農作業情報と対象の位置を示す位置情報とに基づいて、対象に対して実行する農作業の内容を予測する農作業予測部６０と、農作業情報と対象の位置を示す位置情報とを関連づけて予め定められた出力態様で出力するための出力情報を生成する出力情報生成部６２と、を備える。農作業予測部６０は、農作業情報として農作物（対象）の画像情報を参照することで、農作物の状態に鑑みた将来の農作業の内容を予測する。例えば、アスパラ群の画像から各アスパラの成長状況を把握し、将来の農作業の内容の一例として収穫時期や今後の収穫量の見込み等を測定する。ここで、出力情報は、農作業予測部６０の予測結果を予め定められた出力態様で出力するための出力情報を含んでもよい。出力情報は、図１に示す携帯端末３からの要求に応じて通信部５０を介して携帯端末３に送信され、携帯端末３の出力部７において出力される。

［農作業処理］
図８及び図９を用いて、本発明の一実施形態に係る農作業処理の全体のフローを説明する。図８は、本発明の一実施形態に係る農作業処理フローの一例を示すフローチャートである。図９は、本発明の一実施形態に係る圃場において農作業装置が実行する農作業の一例を示す図である。

（ステップＳ１）
図１に示すユーザＵは、携帯端末３において農作業装置１が農作業を実行する農作業範囲を設定する。例えば、携帯端末３は、図７に示す、農作業管理サーバ５の記録部５４に記録された圃場マップ情報Ｍを取得する。そして、ユーザＵは、携帯端末３において、図９に示すように、圃場ＦＦにおける農作業装置１が移動する経路Ｌ１、Ｌ３及びＬ５、並びに、農作業装置１が作業を開始するスタート地点Ｐ１及び作業を終了するエンド地点Ｐ７を設定する。

（ステップＳ３）
図２に示す農作業装置１の駆動装置２２は、農作業装置１が圃場ＦＦ内を、設定された経路Ｌ１に沿って移動するように制御する。まず、農作業装置１は、例えば１０ｃｍ程度移動したら停止し、後述するとおり農作業を実行する。そして、農作業が完了したら、再度１０ｃｍ程度移動し、農作業を実行するということを繰り返す。なお、駆動装置２２は、図２に示す農作業判断部３４により、カメラ１４からの画像情報（第１画像情報）に含まれるすべての対象に対して農作業を実行するか否かを判断した後に当該農作業装置１の移動を制御するように構成されてもよい。なお、農作業装置１の移動量に関して、上記では１０ｃｍ程度と説明したが、これに限られず、当該移動量については、収穫対象物の大きさや配置位置、及び、カメラ１４のレンズのサイズ等に基づいて適宜設定されてもよい。

（ステップＳ５）
農作業装置１が農作業を実行する。例えば、図２に示す農作業実行部３６は、対象に対して農作業を実行するか否かを判断する農作業判断部３４の判断結果に基づいて農作業を実行する。なお、農作業判断部３４の処理については、図１０〜１２を用いて詳述する。また、農作業実行部３６の処理については、図１３及び１４を用いて詳述する。農作業としては、例えば畝Ｒ１に配置されている対象を収穫すること、圃場ＦＦに対して薬剤を散布すること、及び、圃場ＦＦにおいて除草を行うこと等を含む。

図２に示す農作業装置１の農作業情報生成部３８は、農作業の結果を含む農作業情報（図３〜図６参照）を生成する。また、農作物測定部３０（測定部）は、農作業を実行する位置を測定する。農作業を実行する位置は、例えば、農作業を実行する農作業装置１の位置、又は、圃場ＦＦにおいて配置されている対象の位置を含む。農作物測定部３０は、農作業を実行する農作業装置１の位置については、図２に示すＧＰＳセンサ１２が検出する位置情報に基づいて測定する。また、農作物測定部３０は、圃場ＦＦにおいて配置されている対象の位置については、図２に示すＧＰＳセンサ１２が検出する農作業装置１の位置情報と、カメラ１４が対象を撮像することにより得られる画像情報と、に基づいて測定する。より具体的には、農作物測定部３０は、図２に示すＧＰＳセンサ１２が検出する農作業装置１の位置情報に基づいて、圃場ＦＦにおいて配置されている対象の位置を推定した後、カメラ１４が対象を撮像することにより得られる画像情報に基づいて対象の正確な位置を特定してもよい。

農作業情報管理部４０は、農作業情報と、農作物測定部３０により測定された対象の位置を示す位置情報と、対象の位置を測定した時間を示す時間情報と、を関連づけて、図３〜図６に示す農作業情報テーブルとして記録装置１８において管理する。図２に示す農作業装置１の通信装置２０は、記録装置１８に記録された農作業情報テーブルを所定のタイミングで図１に示す農作業管理サーバ５に送信する。例えば、通信装置２０は、農作業情報テーブルを、定期的に送信してもよいし、農作業が実行される毎に送信してもよいし、一連の農作業がすべて終了した時点で送信してもよい。

（ステップＳ７）
図２に示す農作業装置１のカメラ１４（第１撮像装置）が圃場ＦＦ内のマーカＭ１を検出する。

（ステップＳ９）
図２に示す農作業装置１の駆動装置２２は、カメラ１４により検出されたマーカＭ１に基づいて農作業装置１の移動を制御する。例えば、農作業装置１は、マーカＭ１を検出することで、圃場ＦＦの端の地点である地点Ｐ３に到着したことを判定する。農作業装置１は、旋回し、経路Ｌ３へ移行し、畝Ｒ３に対して農作業を再開する。次に、農作業装置１は、マーカＭ３を検出することで、圃場ＦＦの端の地点である地点Ｐ５に到着したことを判定する。農作業装置１は、駆動装置２２は、旋回し、経路Ｌ５へ移行し、畝Ｒ５に対して農作業を再開する。

（ステップＳ１１）
農作業装置１が設定された経路Ｌ５のエンド地点Ｐ７に到着すると、農作業装置１は農作業を終了する。

［農作業判断処理］
図１０〜図１２を用いて、本発明の一実施形態に係る農作業判断処理のフローを説明する。図１０は、本発明の一実施形態に係る農作業判断処理フローの一例を示すフローチャートである。図１１は、本発明の一実施形態に係る農作業装置のカメラが撮像することにより得られる画像情報の一例を示す図である。

（ステップＳ２１）
図１１に示すように、図２に示す農作業装置１のカメラ１４は、農作業の対象であるアスパラ群を撮像することで、画像（第１画像情報）を取得する。

（ステップＳ２３）
図２に示す農作業装置１の異常判断部３２は、ステップＳ２１で取得した画像（第１画像情報）と、例えば農作業装置１の記録装置１８に記録された、農作業の対象であるアスパラを含む参照画像（第２画像情報）と、を比較する。より具体的に、異常判断部３２は、異常判断を実行するための人工知能モデルを活用する。人工知能モデルは、過去に実行した、異常の有無の判断結果に基づいて繰り返し学習することで正確に異常判断が可能なように形成される。ここで、人工知能モデルには、過去の異常判断の際に用いられた画像（参照画像）が大量に蓄積されている。そして、異常判断部３２は、ステップＳ２１で取得した画像について、当該人工知能モデルを参照することで、後述するとおり、アスパラの異常の有無を判断可能となる。

（ステップＳ２５）
異常判断部３２は、ステップＳ２３の比較結果に基づいてアスパラの異常の有無を判断する。例えば、参照画像には、収穫するに値するような良品のアスパラが含まれており、異常判断部３２は、収穫予定のアスパラをカメラ１４で撮像した画像と、良品のアスパラが含まれた参照画像と、を比較することで、実際に収穫予定のアスパラが良品であるか否かを判断する。また、参照画像には、収穫するに値しないような規格外品のアスパラが含まれており、異常判断部３２は、収穫予定のアスパラをカメラ１４で撮像した画像と、規格外品のアスパラが含まれた参照画像と、を比較することで、実際に収穫予定のアスパラが規格外品であるか否かを判断するように構成されてもよい。

異常判断部３２は、収穫予定のアスパラの色が茶色である場合、参照画像に含まれる良品の色（例えば、緑色）と異なるので、収穫予定のアスパラは、なんらかの病気を有していると判断する。また、異常判断部３２は、収穫予定のアスパラの形状が大きな曲線部を有する場合は、参照画像に含まれる良品の形状（例えば、直線形状）と異なるので、収穫予定のアスパラは規格外品として判断する。

（ステップＳ２７）
図２に示す農作業装置１の農作物測定部３０は、カメラ１４がアスパラを撮像することにより得られた画像情報に基づいて、アスパラの栽培位置、高さ、及び奥行を測定する。なお、農作物測定部３０は、農作業装置１が備える不図示の測定レーザの照射波、及び、アスパラからの反射波に基づいて、アスパラの栽培位置等を測定してもよい。また、農作業装置１は、カメラ１４及び測定レーザの双方を用いて、アスパラの栽培位置、高さ、及び奥行を測定するように構成されてもよい。

図１２は、図１１における破線部分に含まれる２本のアスパラＡ１及びＡ２が拡大表示された画像情報の一例を示す図である。図１２に示すように、農作物測定部３０は、例えば、カメラ１４からの画像情報に基づいて、各アスパラＡ１及びＡ２の先端及び末端（根元）それぞれのＸＹＺ座標（位置）を測定することで、アスパラＡ１とアスパラＡ２との位置の差Ｄを測定可能である。また、農作物測定部３０は、アスパラＡ１の高さＨ（寸法）、及び、アスパラＡ１の幅Ｗ（寸法）を測定することができる。

（ステップＳ２９）
農作物測定部３０は、測定された寸法と設定した閾値とを比較することによりアスパラの状態を判断する。農作物測定部３０は、測定されたアスパラＡ１の高さが３０ｃｍである場合は、設定した閾値（２６ｃｍ）を上回るので、収穫に値する程度に成長したアスパラであると判断する。他方で、農作物測定部３０は、測定されたアスパラＡ１の高さが１５ｃｍである場合は、設定した閾値（２６ｃｍ）を下回るので、収穫に値する程度に成長したアスパラでないと判断する。なお、農作物測定部３０は、測定されたアスパラの幅と設定した閾値とを比較することによりアスパラの状態を判断してもよい。なお、「閾値」については、設定した閾値に限られず、所定の閾値であってもよい。

（ステップＳ３１）
図２に示す農作業装置１の農作業判断部３４は、異常判断部３２が出力した判断結果と、農作物測定部３０が出力した判断結果と、に基づいてアスパラを収穫するか否かを判断する。例えば、異常判断部３２の判断結果が「異常なし」で、農作物測定部３０の判断結果が「２６ｃｍ以上：十分に成長している」である場合は、出荷するに十分なアスパラであるという意味において、「収穫する」と判断する。また、異常判断部３２の判断結果が「異常あり」で、農作物測定部３０の判断結果が「２６ｃｍ以下：十分に成長していない」である場合は、今後成長したとしても、出荷するに値しないアスパラであるという意味において、「収穫する」と判断する。この場合は、収穫した後、廃棄等される。さらに、異常判断部３２の判断結果が「異常あり」で、農作物測定部３０の判断結果が「２６ｃｍ以上：十分に成長している」である場合も、出荷するに値しないアスパラであるという意味において、「収穫する」と判断する。この場合も、収穫した後、廃棄等される。さらにまた、農作業判断部３４は、異常判断部３２の判断結果が「異常なし」で、農作物測定部３０の判断結果が「２６ｃｍ以下：十分に成長していない」である場合は、規格外品でもなくなんらかの病気も有しないので、収穫予定のアスパラが収穫するに値する程度に成長するまで待つという意味で、「収穫しない」と判断する。

このように、農作業判断部３４は、異常判断部３２の判断結果と農作物測定部３０の判断結果とを総合的に考慮して、対象を収穫するか否かを判断するので、農作業判断部３４が、農作物測定部３０の判断結果、及び、異常判断部３２の判断結果のいずれか一方に基づいて、農作業を実行するか否かを判断する場合に比べて、より正確な判断を実行することができる。

［農作業実行処理］
図１３及び図１４を用いて、本発明の一実施形態に係る農作業実行処理フローを説明する。図１３は、本発明の一実施形態に係る農作業実行処理フローの一例を示すフローチャートである。図１４は、本発明の一実施形態に係る圃場において農作業装置が実行する農作業の一例を示す図である。

（ステップＳ４１）
図１０のステップＳ２９において説明したとおり、図２に示す農作物測定部３０は、アスパラＡ５の栽培位置、高さ、及び奥行を測定する。次に、農作業実行部３６は、農作物測定部３０の測定結果に基づいて、アスパラＡ５を収穫するまでのアーム装置１６の進入経路、例えば、アーム装置１６の現在位置から図１４に示す圃場ＦＦの畝ＲにおけるアスパラＡ５が配置されている位置までの進入経路を設定する。また、進入経路とは、アーム装置１６の三次元座標位置から、図１４に示す圃場ＦＦの畝ＲにおけるアスパラＡ５の切断ポイントを示す三次元座標位置までの経路を含んでもよい。ここで、進入経路については、農作物実行部３６が生成した上で設定するように構成されてもよいし、農作物測定部３０が、測定結果に基づいて進入経路を生成し、農作物実行部３６が進入経路を設定するように構成されてもよい。

（ステップＳ４３）
例えばアーム装置１６に搭載されたカメラ１４（第２撮像装置）によって画像情報（第３画像情報）を取得する。アーム装置１６に搭載されているカメラ１４（第２撮像装置）は、農作業装置１の本体部分に搭載されるカメラに比べて、アーム装置１６の実際の進入経路をより正確に測定できる。

（ステップＳ４５）
農作業実行部３６は、取得した画像情報に基づいて、アーム装置１６の進入経路がステップＳ４１において設定した進入経路と異なっているか否かを判断する。アーム装置１６の進入経路がステップＳ４１において設定した進入経路と異なっていない場合（Ｎｏの場合）は、ステップＳ４９に進む。他方で、アーム装置１６の進入経路がステップＳ４１において設定した進入経路と異なっている場合（Ｙｅｓの場合）は、ステップＳ４７に進む。

（ステップＳ４７）
農作業実行部３６は、カメラ１４からの画像情報に基づいてアーム装置１６の進入経路を制御する。例えば、アーム装置１６の進入経路がステップＳ４１において設定した進入経路と異なっている場合は、アスパラＡ５を確実に収穫することができないおそれがあるため、アーム装置１６の進入経路を正しい経路に修正し、アスパラＡ５を確実に収穫する。例えば、進入経路が、アーム装置１６の三次元座標位置から、図１４に示す圃場ＦＦの畝ＲにおけるアスパラＡ５の切断ポイントを示す三次元座標位置までの経路を含む場合、農作業実行部３６は、カメラ１４からの画像情報に基づいて、当該切断ポイントのズレを補正するように構成されてもよい。

（ステップＳ４９）
農作業実行部３６は、アーム装置１６を用いてアスパラＡ５を収穫する。

（ステップＳ５１）
農作業実行部３６は、アーム装置１６を用いて収穫したアスパラＡ５をストレージＳに格納する。

以上説明したように、本実施形態によれば、農作業情報と農作業の対象の位置とを関連付けて管理することにより、農作業情報を適切に管理することができ、且つ、農作業情報の活用による将来の農作業やビジネスの円滑な実行を可能にする。

図２及び図１０に示すように、農作業判断部３４は、異常判断部３２の判断結果と農作物測定部３０の判断結果とを総合的に考慮して、対象を収穫するか否かを判断する。よって、農作業判断部３４が、農作物測定部３０の判断結果、及び、異常判断部３２の判断結果のいずれか一方に基づいて、農作業を実行するか否かを判断する場合に比べて、より正確な判断を実行することができる。

（他の実施形態）
上記各実施形態は、本発明の理解を容易にするためのものであり、本発明を限定して解釈するものではない。本発明はその趣旨を逸脱することなく、変更／改良（たとえば、各実施形態を組み合わせること、各実施形態の一部の構成を省略すること）され得るとともに、本発明にはその等価物も含まれる。

上記実施形態においては、図７に示すように、出力情報生成部６２は、農作業管理サーバ５が備える。しかしながら、出力情報生成部は、図１に示す携帯端末３が備えてもよい。この場合、農作業管理サーバ５は、農作業情報を携帯端末３に送信し、携帯端末３において出力情報を生成し、生成した出力情報を携帯端末３の出力部７において出力するように構成される。また、図７に示すように、農作業予測部６０は、農作業管理サーバ５が備える。しかしながら、農作業予測部６０は、携帯端末３又は農作業装置１が備えてもよい。さらに、図２に示すように、農作物測定部３０、異常判断部３２、農作業判断部３４、農作業実行部３６、農作業情報生成部３８及び農作業情報管理部４０の少なくとも一の構成要素は、農作業管理サーバ５又は携帯端末３が備えてもよい。このように、農作業装置１、携帯端末３、及び農作業管理サーバ５の各構成が備える各構成要素については、処理内容に矛盾を生じない範囲で、他の構成が備えるものとしてもよい。

上記実施形態においては、図２及び図１０に示すように、農作業判断部３４は、農作物測定部３０の判断結果と、異常判断部３２の判断結果と、に基づいて農作業を実行するか否かを判断する。しかしながら、農作業判断部３４は、農作物測定部３０の判断結果、及び、異常判断部３２の判断結果のいずれか一方に基づいて、農作業を実行するか否かを簡易的に判断するように構成されてもよい。

上記実施形態においては、農作業情報、位置情報、及び日時情報は、農作業装置１から農作業管理サーバ５を介して携帯端末３に対して送信される。しかしながら、農作業情報は、農作業装置１から直接的に、携帯端末３に送信されてもよい。また、上記実施形態においては、農作業情報、位置情報、及び日時情報は、図１に示す携帯端末３の出力部７において、出力される。しかしながら、農作業情報、位置情報、及び日時情報は、農作業装置１が備える出力部（不図示）において、出力されてもよい。

１…農作業装置、３…携帯端末、５…農作業管理サーバ、７…出力部、１０…中央処理装置、１２…ＧＰＳセンサ、１４…カメラ、１６…アーム装置、１８…記録装置、２０…通信装置、２２…駆動装置、３０…農作物測定部、３２…異常判断部、３４…農作業判断部、３６…農作業実行部、３８…農作業情報生成部、４０…農作業情報管理部、５０…通信部、５２…情報処理部、５４…記録部、６０…農作業予測部、６２…出力情報生成部、１００…農作業管理システム

Claims (10)

1. 第１撮像装置と、
   前記第１撮像装置が農作業の対象を撮像することにより得られる第１画像情報に基づいて、前記対象に対して前記農作業を実行するか否かを判断する農作業判断部と、
   前記農作業判断部の判断結果に基づいて前記農作業を実行する農作業実行部と、
   前記農作業の結果を含む農作業情報を生成する農作業情報生成部と、
   前記対象の位置を測定する測定部と、
   前記農作業情報と、測定された前記位置を示す位置情報と、を管理する農作業情報管理部と、
   前記第１画像情報と、前記対象を含む参照画像としての第２画像情報と、に基づいて前記対象の品質を判断する品質判断部と、
   を備え、
   前記測定部は、前記第１画像情報に基づいて前記対象の寸法を測定し、
   前記農作業判断部は、前記寸法と設定した閾値との比較結果と、前記品質と、に基づいて、前記対象に対して前記農作業を実行するか否かを判断する、
   農作業装置。
2. 前記農作業情報管理部は、前記対象の位置を測定した時間を示す時間情報を、前記農作業情報と前記位置情報とに関連づけて記録する、
   請求項１に記載の農作業装置。
3. 前記農作業を実行するためのアーム装置を更に備え、
   前記農作業実行部は、前記測定部により測定された前記対象の位置に基づいて前記農作業を制御する、
   請求項１又は２に記載の農作業装置。
4. 前記アーム装置は、第２撮像装置を備え、
   前記農作業実行部は、前記第２撮像装置が前記対象を撮像することにより得られる第３画像情報に基づいて、前記アーム装置の前記農作業を制御する、
   請求項３に記載の農作業装置。
5. 農作業装置が予め定められた経路に沿って移動するように制御する駆動装置を更に備え、
   前記駆動装置は、前記農作業判断部により、前記第１画像情報に含まれる前記対象に対して前記農作業を実行するか否かを判断した後に当該農作業装置の移動を制御する、
   請求項１〜４のいずれか一項に記載の農作業装置。
6. 前記第１撮像装置は、前記経路に配置されているマーカを検出し、
   前記駆動装置は、検出された前記マーカに基づいて農作業装置の移動を制御する、
   請求項５に記載の農作業装置。
7. 前記測定部が測定する前記対象の位置は、前記第１撮像装置が前記対象を撮像した位置を含む、
   請求項１〜６のいずれか一項に記載の農作業装置。
8. 請求項１〜７のいずれか一項に記載の農作業装置と、
   農作業管理サーバと、
   を備える農作業管理システムであって、
   前記農作業装置は、前記農作業の結果を示す前記農作業情報と前記位置情報とを前記農作業管理サーバに送信し、
   前記農作業管理サーバは、前記農作業情報と前記位置情報とに基づいて、前記対象に対して実行する前記農作業の内容を予測する農作業予測部を備える、
   農作業管理システム。
9. 出力部を備える携帯端末を更に備え、
   前記農作業管理サーバは、
   前記農作業情報と前記位置情報とを関連づけて予め定められた出力態様で出力するための出力情報を生成する出力情報生成部を更に備え、
   前記出力部は、前記出力情報に基づいて前記農作業情報と前記位置情報とを予め定められた出力態様で出力する、
   請求項８に記載の農作業管理システム。
10. 撮像装置を備える農作業装置を、
    前記撮像装置が農作業の対象を撮像することにより得られる第１画像情報に基づいて、前記対象に対して前記農作業を実行するか否かを判断する農作業判断部と、
    前記農作業判断部の判断結果に基づいて前記農作業を実行する農作業実行部と、
    前記農作業の結果を含む農作業情報を生成する農作業情報生成部と、
    前記対象の位置を測定する測定部と、
    前記農作業情報と、測定された前記位置を示す位置情報と、を管理する農作業情報管理部と、
    前記第１画像情報と、前記対象を含む参照画像としての第２画像情報と、に基づいて前記対象の品質を判断する品質判断部と、して機能させ、
    前記測定部は、前記第１画像情報に基づいて前記対象の寸法を測定し、
    前記農作業判断部は、前記寸法と設定した閾値との比較結果と、前記品質と、に基づいて、前記対象に対して前記農作業を実行するか否かを判断する、プログラム。

Images