JP6749448B2 - Work vehicle support system - Google Patents

Work vehicle support system Download PDF

Info

Publication number
JP6749448B2
JP6749448B2 JP2019051527A JP2019051527A JP6749448B2 JP 6749448 B2 JP6749448 B2 JP 6749448B2 JP 2019051527 A JP2019051527 A JP 2019051527A JP 2019051527 A JP2019051527 A JP 2019051527A JP 6749448 B2 JP6749448 B2 JP 6749448B2
Authority
JP
Japan
Prior art keywords
traveling
work
travel
route
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019051527A
Other languages
Japanese (ja)
Other versions
JP2019136039A (en
Inventor
さくら 冨田
さくら 冨田
祐樹 久保田
祐樹 久保田
千明 小丸
千明 小丸
和央 阪口
和央 阪口
林 繁樹
繁樹 林
仲島 鉄弥
鉄弥 仲島
佐野 友彦
友彦 佐野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kubota Corp
Original Assignee
Kubota Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kubota Corp filed Critical Kubota Corp
Priority to JP2019051527A priority Critical patent/JP6749448B2/en
Publication of JP2019136039A publication Critical patent/JP2019136039A/en
Application granted granted Critical
Publication of JP6749448B2 publication Critical patent/JP6749448B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、自動で作業地を作業走行する作業車のための作業車支援システムに関する。 The present invention relates to a work vehicle support system for a work vehicle that automatically travels on a work site.

走行しながら作業を行う作業車を自動走行させる試みが、従来から行われている。そのためには、作業対象となる作業領域がマップデータなどを通じて認識されなければならない。例えば、特許文献1に開示された圃場作業車両の無人作業方法では、まず、作業領域である圃場の外周を手動運転により一周走行する外周ティーチングを行って、当該圃場の地図座標及び基準走行方位が算定される。次いで、圃場内の全領域を作業走行するための、走行作業経路を設定し、その経路上を時々刻々得られる車両の圃場内位置情報と走行方位情報とに基づき自動的に作業走行することで、圃場内の全領域に対する作業走行が自動操縦で行われる。この特許文献1で取り扱われている圃場作業車両は耕耘作業、整地作業、代掻き作業などを行うトラクタであり、圃場内の全領域を作業走行する。 BACKGROUND ART Attempts have been made to automatically drive a work vehicle that performs work while traveling. For that purpose, the work area to be worked must be recognized through map data or the like. For example, in the unmanned work method for a field work vehicle disclosed in Patent Document 1, first, an outer circumference teaching is performed in which the outer circumference of a field, which is a work area, is manually driven to make one round, and the map coordinates and reference traveling direction of the field are Calculated. Next, by setting a traveling work route for performing work traveling in the entire area of the field, the vehicle automatically travels on the route based on the position information in the field and the traveling direction information of the vehicle that is obtained momentarily. , Work traveling for all areas in the field is performed by automatic control. The field work vehicle handled in Patent Document 1 is a tractor that performs plowing work, leveling work, scraping work, and the like, and travels over the entire area in the field.

特許文献2には、直線作業走行の繰り返しで苗植付け作業を行う自動走行田植機の目標走行経路を算定する方法が開示されている。この田植機は、車体位置を計測するGPSを備え、ティーチング開始時にティーチングSWを押下した時のGPSアンテナの位置を開始点とし、ティーチング終了時にティーチングSWを押下した時のGPSアンテナの位置を終了点とする。得られた開始点と終了点の情報に基づいて、開始点と終了点を結ぶ基準線が算定され、この基準線(線分)に平行で、植付け幅を考慮した直線を植付け作業走行のための目標経路として生成する。 Patent Document 2 discloses a method of calculating a target traveling route of an automatic traveling rice transplanter that performs seedling planting work by repeating straight line work traveling. This rice transplanter is equipped with a GPS for measuring the vehicle body position. The starting point is the position of the GPS antenna when the teaching SW is pressed at the start of teaching, and the ending point is the position of the GPS antenna when the teaching SW is pressed at the end of teaching. And A reference line connecting the start point and the end point is calculated based on the obtained information of the start point and the end point, and a straight line parallel to this reference line (segment) and in consideration of the planting width is used for planting work traveling. It is generated as the target route of.

特開平10−066406号公報JP, 10-066406, A 特開2008−67617号公報JP, 2008-67617, A

特許文献1では、自動での作業走行経路を算定するための作業車の外周ティーチング走行は、圃場区画の位置情報を得るために行われるものであり、そのティーチング走行時には実質的な圃場作業は行われない。外周ティーチング走行の後、外周ティーチング走行で得られた圃場区画全体に対する走行作業経路が算定され、実際の自動作業走行が実施される。このため、作業対象となる圃場が広大になればなるほど、外周ティーチング走行に必要とされる時間や燃料が圃場作業の観点からは無視できない無駄な経費となる。 In Patent Document 1, the outer periphery teaching traveling of the work vehicle for automatically calculating the work traveling route is performed to obtain position information of the field section, and substantial field work is performed during the teaching traveling. I don't know. After the outer periphery teaching traveling, the traveling work route for the entire field section obtained by the outer periphery teaching traveling is calculated, and the actual automatic work traveling is carried out. For this reason, the larger the field to be worked becomes, the more time and fuel required for outer circumference teaching travel becomes a wasteful expense that cannot be ignored from the viewpoint of field work.

特許文献2では、直線状のティーチング走行時に作業(苗植付作業)が行われるかどうかは明示されていない。また、作業走行経路の算定の際、直線状のティーチング走行によって得られる直線状の基準線に平行な作業走行経路しか算定できない。さらには、ティーチング走行において圃場全体のマップ情報を得ることができないので、作業走行経路の往復経路数や経路長さを予め算定できない。
このような従来技術の実情から、外形マップが準備されていない作業地での自動作業走行経路を算定するためのさらに効果的な技術が所望されている。
In Patent Document 2, whether or not work (seedling work) is performed during linear teaching traveling is not specified. Further, when calculating the work traveling route, only the work traveling route parallel to the linear reference line obtained by the linear teaching traveling can be calculated. Furthermore, since the map information of the entire field cannot be obtained during teaching travel, the number of round trip routes and the route length of the work travel route cannot be calculated in advance.
From such a situation of the conventional technique, a more effective technique for calculating an automatic work traveling route in a work place where an outline map is not prepared is desired.

本発明による作業車支援システムは、作業車の自車位置を検出する自車位置検出モジュールと、作業予定領域の外周を周回作業走行する際に前記自車位置検出モジュールによって取得された自車位置データから、前記作業予定領域内の未作業領域の外形マップを算定する未作業領域外形マップ算定部とを備え、前記未作業領域外形マップ算定部は、前記自車位置データに対応する軌跡点群の重心位置を基準中心とし、軌跡点群から前記基準中心に近い複数の辺要素を算定し、前記辺要素から多角形状の前記未作業領域の外形マップを算定するThe work vehicle support system according to the present invention is a vehicle position detection module that detects a vehicle position of a work vehicle, and a vehicle position that is acquired by the vehicle position detection module when traveling around an outer periphery of a scheduled work area. A non-working area contour map calculating unit that calculates a contour map of a non-working area within the scheduled work area from the data, and the non-working area contour map calculating unit is a locus point group corresponding to the vehicle position data. Using the center of gravity position as the reference center, a plurality of side elements near the reference center are calculated from the locus point group, and the polygon outer shape map of the unworked area is calculated from the side elements .

この構成では、作業予定領域の外形マップ(座標位置)を算定するために作業予定領域の外周を周回する際、作業予定領域に対する作業も同時に行う。つまり、作業予定領域の境界線に沿って初期作業走行(兼ティーチング走行)することで、作業予定領域の最外周領域の作業を実施するとともに、初期作業走行中に自車位置検出モジュールによって取得される自車位置データから作業予定領域の境界線の座標位置を得ることができる。この作業予定領域の境界線の座標位置から、作業予定領域から初期作業走行によって作業完了した領域を除いた未作業領域の外形マップが算定される。作業予定領域の最外周領域の座標位置を取得するためのティーチング走行においても、作業予定領域に対する作業が行われるので、作業効率がよい。 In this configuration, when the outer circumference of the work scheduled area is circulated in order to calculate the outer shape map (coordinate position) of the work scheduled area, work is also performed on the work scheduled area at the same time. In other words, by performing the initial work traveling (also teaching traveling) along the boundary line of the scheduled work area, the work in the outermost peripheral area of the scheduled work area is performed, and it is acquired by the vehicle position detection module during the initial work traveling. The coordinate position of the boundary line of the scheduled work area can be obtained from the own vehicle position data. From the coordinate position of the boundary line of the scheduled work area, the outline map of the unworked area, excluding the area where the work is completed by the initial work traveling, is calculated from the scheduled work area. Even in the teaching traveling for acquiring the coordinate position of the outermost peripheral area of the work scheduled area, the work is performed in the work scheduled area, so that the work efficiency is good.

未作業領域を自動作業走行するためには、当該未作業領域に適した目標走行経路が必要である。このため、本発明の実施形態では、前記未作業領域外形マップ算定部によって算定された外形マップに基づいて、前記未作業領域を作業走行するための目標走行経路を算定する経路算定部が備えられている。 In order to travel automatically in the unworked area, a target travel route suitable for the unworked area is required. Therefore, in the embodiment of the present invention, a route calculation unit that calculates a target traveling route for traveling in the unworked region based on the contour map calculated by the unworked region contour map calculation unit is provided. ing.

未作業領域の自動作業走行の適切な経路は、領域形状が類似していても作業対象の状態、例えば麦や米の収穫作業での穀稈の生育状態などによっても異なる。このため、本発明の好適な実施形態の1つでは、前記経路算定部は、前記目標走行経路を複数通り生成し、所定の走行条件に基づいて最適な目標走行経路を出力するように構成されている。これにより、設定された走行条件(走行速度、作業時間、傾斜の有無など)に最適に適合する目標走行経路が出力されるので、自動作業走行がより理に適ったものとなる。特に、作業の経済性に重きを置く場合には、複数通りの前記目標走行経路毎に所要走行時間が予測演算され、前記所要走行時間が前記走行条件として利用される構成が好ましい。 A suitable route for automatic work traveling in the unworked area varies depending on the state of the work target, for example, the growing state of the grain culm in the harvesting work of wheat or rice, even if the area shapes are similar. Therefore, in one of the preferred embodiments of the present invention, the route calculation unit is configured to generate a plurality of target traveling routes and output an optimal target traveling route based on a predetermined traveling condition. ing. As a result, the target travel route optimally adapted to the set travel conditions (travel speed, working time, presence/absence of inclination, etc.) is output, which makes automatic work traveling more reasonable. In particular, when the economic efficiency of the work is emphasized, it is preferable that the required traveling time is predicted and calculated for each of the plurality of target traveling routes, and the required traveling time is used as the traveling condition.

未作業領域の自動作業走行の経路の決定には、オペレータの経験に基づく判断も重要である。このため、本発明の好適な実施形態の1つでは、前記経路算定部は、前記目標走行経路を複数通り生成し、複数通りの前記目標走行経路がオペレータによる選択のために報知される。なお、オペレータの判断材料として所要走行時間が重要である。このことから、複数通りの前記目標走行経路毎に所要走行時間が予測され、前記所要走行時間が複数通りの前記目標走行経路に対応付けて報知される構成も利点がある。 Judgment based on the experience of the operator is also important for determining the route of automatic work traveling in the unworked area. Therefore, in one of the preferred embodiments of the present invention, the route calculation unit generates a plurality of the target traveling routes, and the plurality of the target traveling routes are notified to the operator for selection. The required travel time is important as a criterion for the operator. From this, there is also an advantage in that the required travel time is predicted for each of the plurality of target travel routes, and the required travel time is reported in association with the plurality of target travel routes.

目標走行経路に沿った自動作業走行を実行している際に、何らかの理由で、当該目標走行経路を離脱しなければならない事態が生じる。例えば、燃料切れ、あるいは作業車がコンバインとすれば、その穀粒タンクの満杯が生じた場合、燃料補給や穀粒アンロードのために、畦道などの道路に接近しなければならない。その後、再び、目標走行経路の離脱位置に戻って自動作業走行を行うが、離脱位置が遠く離れている場合、最短で達する目標走行経路から自動作業走行を開始した方が効率がよい。このため、本発明の好適な実施形態の1つでは、前記目標走行経路を用いた前記未作業領域に対する作業走行中に、当該作業車が前記目標走行経路を離脱した場合、それまでの作業走行において前記自車位置検出モジュールによって取得された自車位置データから、新たな未作業領域の外形マップが算定され、この新たに算定された外形マップと離脱した作業車の現在位置とに基づいて、残りの未作業領域を作業走行するための目標走行経路が再算定される。 While executing the automatic work traveling along the target traveling route, there may be a situation where the target traveling route must be left for some reason. If, for example, the fuel is exhausted or the work vehicle is a combine, if the grain tank becomes full, a road such as a ridge must be approached for refueling and grain unloading. After that, the automatic work traveling is performed again by returning to the departure position of the target travel route. However, when the departure position is far away, it is more efficient to start the automatic work travel from the target travel route that reaches the shortest distance. Therefore, in one of the preferred embodiments of the present invention, when the work vehicle departs from the target travel route during the work travel to the unworked area using the target travel route, the work travel up to that time is performed. In the own vehicle position data acquired by the own vehicle position detection module, the outline map of the new unworked area is calculated, based on the newly calculated outline map and the current position of the work vehicle that has left, The target travel route for the work travel in the remaining unworked area is recalculated.

コンバインなどの農作業車は、往復の直線走行とその間の方向転換走行(一般にはUターン)を繰り返しながら、作業対象領域(圃場など)における収穫などの作業を行う。その際、作業は直線走行において行われ、方向転換走行では作業は行われない。作業対象領域が長方形のような矩形であれば、方向転換走行軌跡が直線走行から方向転換走行への走行軌跡と方向転換走行から直線走行への走行軌跡が対称形状となり、操向制御が容易である。しかしながら、作業対象領域が台形のような非矩形であれば、方向転換走行軌跡が直線走行から方向転換走行への走行軌跡と方向転換走行から直線走行への走行軌跡が非対称形状となり、操向制御が複雑となって、方向転換後の位置ずれが生じやすい。この問題を避けるため、本発明の好適な実施形態の1つでは、前記目標走行経路が直線作業走行と方向転換非作業走行とを組み合わせた単位走行ユニットとして算定され、前記方向転換非作業走行は、Uターン進入操向角とUターン離脱操向角とが一致する単純Uターン走行と、前記単純Uターン走行の端点と前記直線作業走行の端点とを接続する補助直線非作業走行とに分割されている。この構成では、方向転換非作業走行が、走行軌跡が対称である単純Uターン走行と調整用の直線走行とから成り立つので、操向制御が簡単となり、方向転換後の位置ずれが生じにくい。 Agricultural work vehicles such as combine harvesters perform work such as harvesting in a work target area (field, etc.) while repeating reciprocating straight-line travel and direction-changing travel (generally, U-turn) therebetween. At that time, the work is performed in a straight line traveling, and is not performed in the direction change traveling. If the work target area is a rectangle such as a rectangle, the turning trajectory will be symmetrical between the straight-to-turning traveling trajectory and the turning-to-straight traveling trajectory, which facilitates steering control. is there. However, if the work target area is a non-rectangular shape such as a trapezoid, the turning trajectory will be asymmetrical between the straight-to-direction traveling trajectory and the direction-to-straight traveling trajectory. Is complicated, and the positional deviation after the direction change is likely to occur. In order to avoid this problem, in one of the preferred embodiments of the present invention, the target travel route is calculated as a unit traveling unit that is a combination of straight line work traveling and direction change non-working, and the direction change non-working is calculated as follows. , A simple U-turn traveling in which the U-turn approaching steering angle and the U-turn leaving steering angle match, and an auxiliary straight non-working traveling connecting the end point of the simple U-turn traveling and the end point of the straight-line working traveling Has been done. In this configuration, since the direction-change non-working traveling is composed of the simple U-turn traveling whose traveling loci are symmetrical and the straight traveling for adjustment, the steering control is simplified, and the displacement after the direction changing is less likely to occur.

穀物収穫を行うコンバインは、一般的には、最初に圃場外周に沿った回り刈りを行い、それによって作り出された外周の既刈領域を方向転換領域として内領域の収穫作業を行う。この回り刈りを、上述した初期作業走行(兼ティーチング走行)として用いると、良好な作業効率が得られる。このことから、本発明の好適な実施形態の1つでは、前記作業車はコンバインであり、前記外周の周回作業走行は穀稈収穫のための回り刈り走行である。Generally, a combine harvester that performs grain harvesting first performs swivel cutting along the outer circumference of the field, and harvests the inner area with the already cut area on the outer circumference used as a direction change area. If this cutting around is used as the above-mentioned initial work traveling (and teaching traveling), good working efficiency can be obtained. From this, in one of the suitable embodiments of the present invention, the work vehicle is a combine, and the orbiting work traveling of the outer periphery is a round cutting traveling for harvesting the grain stems.

本発明による作業車支援システムの基本原理を説明するための説明図である。It is an explanatory view for explaining the basic principle of the work vehicle support system according to the present invention. 本発明による作業車支援システムが搭載された作業車の一例であるコンバインの側面図である。1 is a side view of a combine, which is an example of a work vehicle equipped with a work vehicle support system according to the present invention. コンバインの平面図である。It is a top view of a combine. コンバインのキャビンの内部を示す平面断面図である。It is a plane sectional view showing the inside of the cabin of a combine harvester. 作業車支援システムが組み込まれたコンバインの制御系を説明するための機能ブロック図である。It is a functional block diagram for explaining a control system of a combine in which a work vehicle support system was incorporated. 作業車支援システムによる作業走行制御の一例を示すフローチャート図である。It is a flowchart figure which shows an example of the work traveling control by the work vehicle assistance system. 中央作業走行のための目標走行経路の一例を示す走行経路図である。It is a travel route map showing an example of a target travel route for central work travel. 中央作業走行のための目標走行経路の一例を示す走行経路図である。It is a travel route map showing an example of a target travel route for central work travel. 中央作業走行のための目標走行経路の一例を示す走行経路図である。It is a travel route map showing an example of a target travel route for central work travel.

本発明による作業車支援システムの具体的な実施形態を説明する前に、図1を用いて、作業車支援システムの基本原理、特にティーチング走行を通じて作業予定領域の外形マップを算定する基本原理を説明する。図1では、この作業車支援システムを装備した作業車によって作業される作業予定領域は、単純な長方形で示されている。作業車は、操縦レバーなどを含む手動走行操作ユニットによって手動走行を行う手動走行制御ユニットと、自動走行情報に基づいて自動走行を行う自動走行制御ユニットと、作業車の自車位置を検出する自車位置検出モジュールとを備えている。手動走行操作ユニットは、作業車に搭乗している操作員によって手動操作される。自動走行情報には、走行機器情報と作業機器情報とが含まれている。走行機器情報には、自車位置検出モジュールによって検出される自車位置が目標走行経路に一致するように作業車を自動走行制御するための操向制御データや車速制御データが含まれる。作業機器情報には、目標走行経路を走行中に行うべき作業を実行するための作業機器に対する作業制御データが含まれる。 Before describing a specific embodiment of the work vehicle support system according to the present invention, a basic principle of the work vehicle support system, particularly a basic principle of calculating an outline map of a work scheduled area through teaching traveling will be described with reference to FIG. To do. In FIG. 1, a work scheduled area to be worked by a work vehicle equipped with this work vehicle support system is shown by a simple rectangle. The work vehicle includes a manual travel control unit that performs manual travel using a manual travel operation unit that includes a steering lever, an automatic travel control unit that performs automatic travel based on automatic travel information, and a vehicle that detects the position of the work vehicle. And a vehicle position detection module. The manual traveling operation unit is manually operated by an operator who is on board the work vehicle. The automatic traveling information includes traveling device information and working device information. The traveling device information includes steering control data and vehicle speed control data for automatically controlling the travel of the work vehicle so that the vehicle position detected by the vehicle position detection module matches the target traveling route. The work equipment information includes work control data for the work equipment for performing work to be performed while traveling on the target travel route.

作業予定領域として、ここでは圃場が想定されており、外周囲は柵や畦などによって境界づけられている。この圃場に対する作業走行、例えば稲や麦などの収穫作業走行は、最初に行われる外周囲に沿った環状の回り作業走行と、当該回り作業走行によって残された未作業領域に対する中央作業走行に分けられる。回り作業走行は、多角形(図1では四角形)の外周の一辺に沿った作業走行と、多角形のコーナ領域で行われる切り返し走行(後進を組み込むことで方向転換を行う:αターンとも呼ばれる)とに分けられる。回り作業走行は手動走行制御のもとに行われ、中央作業走行は自動走行制御のもとで行われる。 A field is assumed here as the planned work area, and the outer periphery is bounded by fences and ridges. The work run for this field, for example, the harvest work run for rice and wheat, is divided into the first round work run along the outer circumference and the central work run for the unworked area left by the round work run. To be The round-trip work traveling is a work traveling along one side of the outer periphery of a polygon (a quadrangle in FIG. 1) and a turning traveling performed in a corner area of the polygon (the direction is changed by incorporating a backward movement: also called an α-turn). Can be divided into The round work traveling is performed under the manual traveling control, and the central working traveling is performed under the automatic traveling control.

手動走行による回り作業走行時に、自車位置検出モジュールによって継時的に検出された自車位置を示す自車位置データ群(例えば緯度経度データ群からなる周回走行ログ)が回り作業走行軌跡として記録される。記録された自車位置のデータ群は、図1において、黒点で仮想的に示されている。この回り作業走行軌跡に作業幅を加味することで、回り作業走行を通じて作り出された、作業予定領域における作業済領域のマップデータが算定できる。さらに、この作業済領域の内側に位置する領域(図1では薄く塗られている)が、続いて行われる自動作業走行によって作業されるべき未作業領域となる。この未作業領域の外形マップは、作業済領域のマップデータからが算定できる。なお、図1の回り作業走行軌跡の部分拡大図に示すように、回り作業走行が複数周回された場合は、最内周の回り作業走行の自車位置のデータ群が未作業領域の外形マップの算定に用いられる。もちろん、その際、最内周の回り作業走行以外の周回の自車位置のデータ群も、最内周の回り作業走行での自車位置のデータ群の欠損を補完するためなどに用いられる。 At the time of a manual work traveling round trip, a vehicle position data group (for example, a circular traveling log including a latitude/longitude data group) indicating the vehicle position continuously detected by the vehicle position detection module is recorded as a round work traveling locus. To be done. The recorded data group of the vehicle position is virtually shown by a black dot in FIG. By adding the work width to this round work traveling locus, the map data of the worked area in the scheduled work area created through the round work traveling can be calculated. Further, the area located inside the worked area (lightly painted in FIG. 1) is an unworked area to be worked by the subsequent automatic work running. The outline map of this unworked area can be calculated from the map data of the worked area. In addition, as shown in a partially enlarged view of the circular work traveling locus in FIG. 1, when the circular work traveling is repeated a plurality of times, the data group of the vehicle position of the innermost peripheral traveling work is an outline map of an unworked area. It is used to calculate Of course, at this time, the data group of the vehicle position of the lap other than the innermost circumference work traveling is also used to complement the loss of the data group of the own vehicle position in the innermost circumference work traveling.

周回走行ログである自車位置のデータ群から未作業領域の外形マップを算定するアルゴリズムの一例を以下に示す。
(1)走行軌跡点群である周回走行ログから、ノイズ的な自車位置データをフィルタリングで取り除き、走行軌跡に属すると見なされるデータ群だけを抽出する。
(2)抽出されたデータ群の重心位置を算定する。
(3)基準点(一般には作業車の回り作業終点)を基点として、抽出データ群の各点の重心に対する方位を算定する。
(4)算定された各点の方位から重心位置を基準中心とする360度分(非作業領域1周分)のデータを処理対象データとして抽出する。
(5)抽出された処理対象データを多角形(図1では四角形)の各辺に属する辺要素として区分けする。
(6)区分けされた各辺の辺要素を線形近似し、各辺を示す近似直線式を算定し、各辺の交点座標を算定する。
(7)車体における自車位置の基準箇所と作業幅とに基づいて未作業領域の外形マップを算定する。
An example of an algorithm for calculating the outline map of the unworked area from the data group of the own vehicle position which is the orbital traveling log is shown below.
(1) Noise-related vehicle position data is removed from the orbiting traveling log, which is the traveling locus point group, by filtering, and only the data group considered to belong to the traveling locus is extracted.
(2) The position of the center of gravity of the extracted data group is calculated.
(3) The azimuth of each point of the extracted data group with respect to the center of gravity is calculated using the reference point (generally the end point of the work around the work vehicle) as a base point.
(4) From the calculated azimuth of each point, data for 360 degrees (for one round of the non-working area) with the center of gravity as the reference center is extracted as the processing target data.
(5) The extracted processing target data is divided into side elements belonging to each side of a polygon (a quadrangle in FIG. 1).
(6) The divided side elements of each side are linearly approximated, an approximate linear equation representing each side is calculated, and the intersection coordinates of each side are calculated.
(7) The outline map of the unworked area is calculated based on the reference position of the vehicle position on the vehicle body and the working width.

未作業領域の外形マップが算定されると、当該未作業領域の自動作業走行(中央作業走行)のための目標走行経路が算定される。図1の例では、目標走行経路は、未作業領域での往復直線作業走行と、直線作業走行の往路と復路との間をつなぐための作業済領域での方向転回走行とを含む。目標走行経路の始点(中央作業走行開始点)、直線作業走行の方向、隣接する直線作業走行の往路と復路との間隔などに応じて、目標走行経路が算定可能である。その際、往路と復路とを接続する経路間移動は、直進と旋回とを組み合わせることで行われ、さらには後進による切り返しも可能である。経路間移動の開始から終了までにかかる時間は移動距離や前後進切替の有無によって異なる。Uターンのような単純な経路間移動では、移動時間は短いが、旋回に必要な面積が大きくなる。また、切り返し経路間移動では、移動に必要となる面積は小さいが、移動時間が長くなる。基本的には、できるだけ移動時間が短い経路間移動が採用される。しかしながら、各種経路間移動の組み合わせの自在性や作業済領域である外周領域の大きさなどから、種々の目標経路が算定可能である。このため、算定された複数の目標走行経路から実際に用いられる目標走行経路を選択するための手法として、以下のモードが用意されている。
モード1:目標走行経路が複数通り生成され、複数通りの目標走行経路がモニタ画面等に表示され、オペレータによる選択により、実行するべき目標走行経路が決定される。
モード2:生成された目標走行経路を実行した際の所要走行時間が走行条件の1つとして予測され、最も短時間の目標走行経路が自動的に選択される。
モード3:複数通りの目標走行経路がその所要走行時間とともに表示され、オペレータによる選択により、実行するべき目標走行経路が決定される。
When the outline map of the unworked area is calculated, the target travel route for automatic work travel (central work travel) in the unworked area is calculated. In the example of FIG. 1, the target travel route includes reciprocating linear work traveling in the unworked area and directional turning traveling in the worked area for connecting the forward and return paths of the linear work traveling. The target travel route can be calculated according to the start point of the target travel route (central work travel start point), the direction of the straight work travel, the distance between the forward and return paths of the adjacent straight work travel, and the like. At that time, the movement between the paths connecting the forward path and the return path is performed by combining straight traveling and turning, and it is also possible to reverse the vehicle by moving backward. The time it takes from the start to the end of movement between routes depends on the movement distance and the presence/absence of forward/reverse switching. In a simple movement between routes such as a U-turn, the movement time is short, but the area required for turning becomes large. Further, in the movement between the switching paths, the area required for the movement is small, but the movement time is long. Basically, the movement between routes with the shortest movement time is adopted. However, various target routes can be calculated based on the flexibility of combinations of movements between various routes and the size of the outer peripheral region that is the completed region. Therefore, the following modes are prepared as a method for selecting a target travel route that is actually used from the calculated plurality of target travel routes.
Mode 1: A plurality of target travel routes are generated, a plurality of target travel routes are displayed on a monitor screen or the like, and the target travel route to be executed is determined by the operator's selection.
Mode 2: The required travel time when the generated target travel route is executed is predicted as one of the travel conditions, and the shortest target travel route is automatically selected.
Mode 3: A plurality of target travel routes are displayed together with the required travel time, and the target travel route to be executed is determined by the operator's selection.

目標走行経路の直線走行と方向転換走行とからなる目標走行経路の算定に関して、直線走行から方向転換走行への移行の種類によって目標走行経路算定アルゴリズムが異なる。図1では、方向転換走行として、手動走行における回り作業走行では切り返し走行が採用されており、中央作業走行ではUターン走行が採用されている。どちらの方向転換走行を採用するかは、接続される直線走行の位置と方向に応じて選択すること好ましいが、算定条件として、いずれかの方向転換走行に限定してもよいし、1つの作業領域において混在させてもよい。 Regarding the calculation of the target travel route including the straight travel and the direction change travel of the target travel route, the target travel route calculation algorithm differs depending on the type of transition from the straight travel to the direction change travel. In FIG. 1, as the direction-changing traveling, the turning traveling is adopted in the round work traveling in the manual traveling, and the U-turn traveling is adopted in the central working traveling. It is preferable to select which direction change travel is to be adopted according to the position and direction of the connected straight line travel, but the calculation condition may be limited to either direction change travel or one work. They may be mixed in the area.

図1では、作業対象領域が長方形で示されているが、実際には、図1の部分拡大図に示されているように、やや台形のように辺が傾斜しているケースが少なくない。このようなケースでは、直線作業走行の往路の終端と復路の始端を直接円弧経路で接続するような方向転換走行経路を採用すると、U字状の方向転換走行経路の曲率が連続的に変化するため、自動走行制御が難しくなる。このような実情に対処するためには、図1の部分拡大図に示すように方向転換走行は、Uターン進入操向角とUターン離脱操向角とが一致する単純Uターン走行、つまり実質的には半円弧と、前記単純Uターン走行の端点と前記直線作業走行の端点とを接続する補助直線非作業走行とに分割するアルゴリズムが採用される。 In FIG. 1, the work target area is shown as a rectangle, but in reality, as shown in the partially enlarged view of FIG. 1, there are many cases in which the sides are inclined like a trapezoid. In such a case, if a direction-changing traveling route that directly connects the end of the outward route and the start end of the returning route for straight work traveling is connected by an arc route, the curvature of the U-shaped direction-changing traveling route continuously changes. Therefore, automatic traveling control becomes difficult. In order to deal with such a situation, as shown in the partially enlarged view of FIG. 1, the direction change traveling is a simple U-turn traveling in which the U-turn approach steering angle and the U-turn exit steering angle are the same, that is, the substantial Specifically, an algorithm for dividing into a semi-circle and an auxiliary straight line non-working run that connects the end point of the simple U-turn run and the end point of the straight line work run is adopted.

次に、本発明による作業車支援システムの具体的な実施形態の1つを、作業車の一例であるコンバインに搭載された例を用いて説明する。図2は、コンバインの側面図であり、図3は平面図である。このコンバインは自脱型コンバインであり、クローラ式の走行装置1と、走行装置1によって支持される機体フレーム2とを備えている。機体フレーム2の前部には、植立穀稈を刈り取る昇降可能な刈取部3が備えられている。機体フレーム2の後部には、刈取穀稈を脱穀する脱穀装置11と穀粒を貯留する穀粒タンク12とが、左右方向に並べて配置されている。機体フレーム2の前部であって穀粒タンク12の前方には、キャビン13が備えられている。キャビン13は天井パネル14を備えている。キャビン13の下方には、エンジン10が配置されている。穀粒タンク12には、穀粒タンク12内の穀粒を排出するアンローダ15が備えられている。 Next, one specific embodiment of the work vehicle support system according to the present invention will be described using an example of being mounted on a combine, which is an example of a work vehicle. FIG. 2 is a side view of the combine, and FIG. 3 is a plan view. The combine is a self-removing combine, and includes a crawler type traveling device 1 and a body frame 2 supported by the traveling device 1. A front part of the machine body frame 2 is provided with a mowing unit 3 capable of ascending and descending for cutting the planted grain culms. At the rear part of the machine body frame 2, a threshing device 11 for threshing the cut culms and a grain tank 12 for storing grain are arranged side by side in the left-right direction. A cabin 13 is provided at the front of the machine frame 2 and in front of the grain tank 12. The cabin 13 includes a ceiling panel 14. The engine 10 is arranged below the cabin 13. The grain tank 12 is provided with an unloader 15 that discharges the grain in the grain tank 12.

刈取部3は、左右向きの水平な揺動軸心周りで上下揺動可能に構成されている。刈取部3は、植立穀稈を引き起こす引起装置31と、引起穀稈を刈り取る刈取装置32と、刈取穀稈を脱穀装置11に搬送する搬送装置33とを有している。 The reaping unit 3 is configured to be vertically swingable around a horizontally swinging horizontal swing axis. The mowing unit 3 includes a raising device 31 that causes planted grain culms, a mowing device 32 that trims the raised grain culms, and a conveying device 33 that conveys the stalks to the threshing device 11.

図3と図4とに示すように、キャビン13には、運転座席130が設けられている。運転座席130の前方側にはフロントパネル131が、運転座席130の左方にはサイドパネル132が設けられている。フロントパネル131には、例えば、操縦レバー(ステアリングレバー)91などの操作具や、各種情報を表示するメータパネル133が配置されている。メータパネル133には、作業速度やエンジン回転、燃料残量を示すメータ画面などが表示される。さらに、特定の情報をグラフィカルに表示するための液晶パネル等のモニタ134が、例えば、キャビン13内における左側上部に配置されている。モニタ134には、自動作業走行に用いられる目標走行経路の選択画面などが表示される。サイドパネル132には、例えば、主変速レバー92やその他の操作具が配置されている。サイドパネル132には、アンローダ用のリモコン135が載置されている。 As shown in FIGS. 3 and 4, the cabin 13 is provided with a driver's seat 130. A front panel 131 is provided on the front side of the driver's seat 130, and a side panel 132 is provided on the left side of the driver's seat 130. On the front panel 131, for example, operation tools such as a steering lever (steering lever) 91 and a meter panel 133 that displays various kinds of information are arranged. On the meter panel 133, a work speed, engine rotation, a meter screen showing the remaining fuel amount, and the like are displayed. Further, a monitor 134 such as a liquid crystal panel for graphically displaying specific information is arranged on the upper left side in the cabin 13, for example. The monitor 134 displays a target travel route selection screen used for automatic work travel. On the side panel 132, for example, the main shift lever 92 and other operation tools are arranged. An unloader remote controller 135 is mounted on the side panel 132.

このコンバインは、操縦レバー91や主変速レバー92の操作に基づく手動走行だけでなく、設定された目標経路に沿った自動走行も可能である。自動走行に関する操作具として、例えば、サイドパネル132に、自動走行の実行または中止を指令するオートパイロットON・OFFスイッチ90及びティーチング走行ON・OFFスイッチ96が配置されている。なお、これらのスイッチは、モニタ134に表示されるソフトウエアスイッチで代用してもよいし、両方の形態で備えられてもよい。 This combine is capable of not only manual traveling based on the operation of the control lever 91 and the main shift lever 92 but also automatic traveling along a set target route. As an operation tool related to automatic traveling, for example, an autopilot ON/OFF switch 90 and a teaching traveling ON/OFF switch 96 for instructing execution or suspension of automatic traveling are arranged on the side panel 132. Note that these switches may be replaced by software switches displayed on the monitor 134, or may be provided in both forms.

キャビン13の上方には、図2と図3に示すように、天井パネル14の側端から上方に延びたブラケットに取り付けられた自車位置検出ボックス620が配置されている。この自車位置検出ボックス620には自車位置検出のために用いられるアンテナ及び演算機器等が内蔵されている。この実施形態では、自車位置検出には、衛星航法と慣性航法とが採用されている。 As shown in FIGS. 2 and 3, a vehicle position detection box 620 mounted on a bracket extending upward from a side end of the ceiling panel 14 is disposed above the cabin 13. The vehicle position detection box 620 contains an antenna, a computing device, etc. used for detecting the vehicle position. In this embodiment, satellite navigation and inertial navigation are adopted for the vehicle position detection.

図5には、このコンバインに構築されている制御系が示されている。この制御系は、第1車載ネットワーク5Aと第2車載ネットワーク5Bとを備えている。第1車載ネットワーク5Aと第2車載ネットワーク5Bとは、中継ユニット5Cによってブリッジされている。第1車載ネットワーク5Aには、コンバインの基本的な動作制御を行う機能要素、例えば、入力信号処理ユニット50、手動走行制御ユニット52、機器制御ユニット53、エンジン制御ユニット54、報知ユニット55が構築されている。第2車載ネットワーク5Bには、本発明における作業車支援システムとして機能する自動走行に関する機能要素、例えば、自動走行制御ユニット61、自車位置検出モジュール62、外形マップ算定部63、経路算定部64が構築されている。この作業車支援システムは、図1を用いて説明された基本原理を採用している。 FIG. 5 shows a control system constructed in this combine. This control system includes a first vehicle-mounted network 5A and a second vehicle-mounted network 5B. The first vehicle-mounted network 5A and the second vehicle-mounted network 5B are bridged by the relay unit 5C. In the first vehicle-mounted network 5A, functional elements that perform basic operation control of the combine, for example, an input signal processing unit 50, a manual travel control unit 52, a device control unit 53, an engine control unit 54, and a notification unit 55 are built. ing. In the second vehicle-mounted network 5B, functional elements related to automatic driving functioning as a work vehicle support system according to the present invention, for example, an automatic driving control unit 61, a vehicle position detection module 62, a contour map calculation unit 63, and a route calculation unit 64 are provided. Has been built. This work vehicle support system employs the basic principle described with reference to FIG.

機器制御ユニット53は、走行用の各種動作機器(走行機器)に制御信号を与えて駆動させる走行機器制御部531と、作業用の各種動作機器(作業機器)に制御信号を与えて駆動させる作業機器制御部532とを含む。図5で示すように、走行機器と作業機器とは、動作機器20と総称されている。エンジン制御ユニット54は、エンジン10の始動、停止、回転数調整などのためにエンジン10に制御信号を与える。図5に示されている手動走行操作ユニット9は、コンバインの作業走行において人によって操作される操作具の総称であり、操縦レバー91や主変速レバー92などが含まれる。このコンバインでは、基本的にはバイワイヤ方式が採用されており、手動走行操作ユニット9に対する操作は、操作信号として入力信号処理ユニット50に入力される。作業状態検出機器8は、動作機器20の状態情報、すなわち作業機器情報を検出するものであって、コンバインに装備されている各種センサやスイッチ(例えば、各種作業機構のクラッチの入り切りを検出するスイッチや車速センサ)などが含まれる。作業状態検出機器8からの検出信号も基本的には入力信号処理ユニット50に入力される。 The device control unit 53 includes a traveling device control unit 531 that gives a control signal to drive various operating devices for traveling (traveling device), and a work that gives control signals to various operating devices for work (working device) to drive. A device control unit 532 is included. As shown in FIG. 5, the traveling equipment and the working equipment are collectively referred to as the operating equipment 20. The engine control unit 54 gives control signals to the engine 10 for starting, stopping, adjusting the number of revolutions of the engine 10, and the like. The manual traveling operation unit 9 shown in FIG. 5 is a general term for operating tools operated by a person during work traveling of the combine, and includes a steering lever 91, a main shift lever 92, and the like. In this combine, the by-wire system is basically adopted, and the operation on the manual traveling operation unit 9 is input to the input signal processing unit 50 as an operation signal. The work state detection device 8 detects state information of the operating device 20, that is, work device information, and various sensors and switches (for example, switches for detecting engagement/disengagement of clutches of various work mechanisms) mounted on the combine. And vehicle speed sensor) etc. are included. The detection signal from the work state detection device 8 is also basically input to the input signal processing unit 50.

報知ユニット55は、報知信号を報知デバイス73に送信し、オペレータや周囲に与えるべき種々の情報を報知する。報知デバイス73には、モニタ134だけでなく、機体内外の種々のランプ(例えば図2や図3に示される報知灯731)やブザー732が含まれる。 The notification unit 55 transmits a notification signal to the notification device 73 to notify various information to be given to the operator and the surroundings. The notification device 73 includes not only the monitor 134 but also various lamps inside and outside the body (for example, the notification lamp 731 shown in FIGS. 2 and 3) and the buzzer 732.

手動走行制御ユニット52は、入力信号処理ユニット50を通じて入力された信号や作業状態検出機器8からの作業機器情報を利用して演算処理や判定処理を施し、手動操作に基づく動作機器20の動作を制御するためのデータを生成する。生成されたデータは機器制御ユニット53に送られ、機器制御ユニット53から動作機器20に制御信号として変換出力される。これにより、手動操作に対応する動作機器20の動作が実現する。例えば、方向転換出力信号に基づいて走行装置1の方向転換駆動が行われ、機体進行方向が変更される。 The manual traveling control unit 52 uses the signal input through the input signal processing unit 50 and the work device information from the work state detection device 8 to perform arithmetic processing and determination processing, and to operate the operation device 20 based on the manual operation. Generate data to control. The generated data is sent to the device control unit 53, and is converted and output from the device control unit 53 to the operating device 20 as a control signal. As a result, the operation of the operating device 20 corresponding to the manual operation is realized. For example, the direction change drive of the traveling device 1 is performed based on the direction change output signal, and the machine body traveling direction is changed.

自車位置検出モジュール62は、GNSS(GPSでもよい)を用いて緯度や経度などの方位を検出する衛星航法用モジュール621を備えており、その構成は、カーナビゲーションシステムなどで用いられている測位ユニットに類似している。この実施形態における自車位置検出モジュール62には、瞬間的な作業車両の動き(方向ベクトルなど)や向きを検出するために、及び衛星航法用モジュール621を補完するために、ジャイロ加速度センサや磁気方位センサを組み込んだ慣性航法用モジュール622が備えられている。 The vehicle position detection module 62 includes a satellite navigation module 621 that detects a direction such as latitude and longitude using GNSS (GPS may be used), and its configuration is the positioning used in a car navigation system or the like. Similar to the unit. The vehicle position detection module 62 in this embodiment includes a gyro acceleration sensor and a magnetic sensor to detect the instantaneous movement (direction vector etc.) and direction of the work vehicle and to supplement the satellite navigation module 621. An inertial navigation module 622 incorporating a heading sensor is provided.

外形マップ算定部63は、自動作業走行の対象となる圃場の外形マップを算定する。ティーチング走行ON・OFFスイッチ96をON操作することで、外形マップを算定するティーチングモードを起動させた状態で、稲や麦が実っている圃場の外周を手動走行で周回作業走行が行われると、その際に自車位置検出モジュール62によって取得された自車位置データから、外形マップ算定部63は、自動作業走行すべき未作業領域の外形マップを算定する。外形マップが算定されると、経路算定部64が外形マップに基づいて、未作業領域を作業走行するための目標走行経路を算定する。目標走行経路が複数通り算定される場合には、各目標走行経路を模式的に示すイラストを予測走行時間とともにモニタ134の画面に表示し、その選択を操作員に促す。 The outer shape map calculation unit 63 calculates an outer shape map of a field that is a target of automatic work traveling. When the teaching traveling ON/OFF switch 96 is turned ON, the teaching work mode for calculating the outer shape map is activated, and when the outer circumference of the field where rice and wheat are grown is manually run, the orbiting work traveling is performed. At this time, from the vehicle position data acquired by the vehicle position detection module 62, the contour map calculation unit 63 calculates a contour map of an unworked area in which automatic work traveling is to be performed. When the outline map is calculated, the route calculation unit 64 calculates the target travel route for traveling in the unworked area based on the outline map. When a plurality of target travel routes are calculated, an illustration schematically showing each target travel route is displayed on the screen of the monitor 134 together with the estimated travel time, and the operator is prompted to select it.

自動走行制御ユニット61は、自動走行に必要な自動走行情報に基づいて自動走行を実行する。自動走行情報には、自車位置データに基づく自車位置と目標走行経路とのずれ、自車の進行方向の目標走行経路の延び方向とのずれ、予め設定されている車速、目標走行経路を走行中に行うべき作業装置の動作、作業状態検出機器8からの機体状態情報などが含まれている。自動走行制御ユニット61は、このような自動走行情報に基づいて必要な制御データを機器制御ユニット53に与え、コンバインに搭載されている走行機器や作業機器を制御する。 The automatic travel control unit 61 executes automatic travel based on the automatic travel information necessary for automatic travel. The automatic traveling information includes the deviation between the own vehicle position based on the own vehicle position data and the target traveling route, the deviation between the traveling direction of the own vehicle and the extending direction of the target traveling route, the preset vehicle speed, and the target traveling route. It includes the operation of the work device to be performed during traveling, the machine state information from the work state detection device 8, and the like. The automatic traveling control unit 61 supplies necessary control data to the equipment control unit 53 based on such automatic traveling information, and controls the traveling equipment and working equipment mounted on the combine.

この実施形態では、中継ユニット5Cは、第1車載ネットワーク5Aと第2車載ネットワーク5Bとの間のデータ交換を行うだけでなく、それ自体にも外部機器に対する入出力インターフェースやデータ処理部を備えている。従って、中継ユニット5Cには、報知デバイス73としての報知灯731やブザー732、オートパイロットON・OFFスイッチ90、ティーチング走行ON・OFFスイッチ96が接続され、さらには無線方式で自動走行用リモコン95が接続されている。 In this embodiment, the relay unit 5C not only exchanges data between the first vehicle-mounted network 5A and the second vehicle-mounted network 5B, but also includes an input/output interface and a data processing unit for external devices. There is. Therefore, the relay unit 5C is connected to the notification light 731 as the notification device 73, the buzzer 732, the auto pilot ON/OFF switch 90, the teaching travel ON/OFF switch 96, and further, the automatic travel remote controller 95 is wirelessly connected. It is connected.

報知灯731は、図2と図3とに示すように、穀粒タンク12の天井に立設された円柱状のランプであり、自動走行時に点灯し、コンバインが自動走行中であることを周囲に知らせることができる。同様にブザー732を通じて、コンバインがティーチング作業走行中であることや自動走行中であることを周囲に知らせることもできる。コンバインの自動走行時は、コンバインの外から必要最低限の指令をコンバインに与える必要があるので、自動走行用リモコン95が用意されている。自動走行用リモコン95には、例えば、緊急停止ボタン、エンジン始動ボタン、自動運転ボタンが設けられており、外部から、コンバインの緊急停止、エンジンの始動、自動運転の指令をコンバインの制御系に与えることができる。 As shown in FIG. 2 and FIG. 3, the notification light 731 is a cylindrical lamp that is erected on the ceiling of the grain tank 12, and is lit during automatic traveling to indicate that the combine is automatically traveling. Can be informed. Similarly, the buzzer 732 can notify the surroundings that the combine is traveling for teaching work or is automatically traveling. During automatic traveling of the combine, since it is necessary to give a necessary minimum command to the combine from outside the combine, an automatic traveling remote controller 95 is prepared. The remote control 95 for automatic traveling is provided with, for example, an emergency stop button, an engine start button, and an automatic operation button, and externally gives a command for emergency stop of the combine, engine start, and automatic operation to the combine control system. be able to.

次に、コンバインが圃場で自動走行しながら刈取り収穫作業を行う際の一例を、図6のフローチャートを用いて説明する。まず、オペレータは手動運転で、周回作業走行を開始する開始位置へコンバインを移動させる(#10)。ティーチング走行ON・OFFスイッチ96をON操作し(#12)、枕地作業としての周回作業走行と外周ティーチング走行を同時に行う(#14)。十分な枕地を確保できると、周回作業走行を終了するとともに、外周ティーチングを停止させるためにティーチング走行ON・OFFスイッチ96をOFF操作する。ティーチング走行ON・OFFスイッチ96がOFF操作されると(#16YES分岐)、それまでの外周ティーチング走行で取得された自車位置データ群を用いて、枕地以外である圃場の未作業領域の外形マップが算定される(#20)。 Next, an example in which the combine performs the cutting and harvesting work while automatically traveling in the field will be described with reference to the flowchart of FIG. First, the operator manually moves the combine to a start position where the orbiting work traveling is started (#10). The teaching traveling ON/OFF switch 96 is turned on (#12), and the circular traveling traveling as the headland work and the outer peripheral teaching traveling are simultaneously performed (#14). When a sufficient headland can be secured, the traveling traveling work is ended, and the teaching traveling ON/OFF switch 96 is turned OFF to stop the outer periphery teaching. When the teaching travel ON/OFF switch 96 is turned OFF (YES branch of #16), the outer shape of the unworked area of the field other than the headland is used by using the vehicle position data group acquired in the outer circumference teaching travel up to that point. The map is calculated (#20).

未作業領域の刈取り収穫作業は、自動作業走行で行われるので、未作業領域における1つ以上の目標走行経路が算定される(#22)。算定された目標走行経路に対して走行速度を設定し、必要走行時間を予測する(#24)。算定された目標走行経路が複数あれば、操作員による選択のため、算定された目標走行経路が1つであれば、オペレータによる確認のため、目標走行経路のイラストと予測走行時間をモニタ134に表示する(#26)。自動作業走行のための目標走行経路が決定すると(#28)、当該自動作業走行の開始位置までコンバインを移動させる(#30)。コンバインが自動作業走行の開始位置に達すると、オートパイロットON・OFFスイッチ90をON操作して(#32)、自動作業走行を開始する(#34)。 Since the mowing and harvesting work of the unworked area is performed by the automatic work running, one or more target travel routes in the unworked area are calculated (#22). The traveling speed is set for the calculated target traveling route, and the required traveling time is predicted (#24). If there are a plurality of calculated target travel routes, the operator selects the target travel route. If there is one calculated target travel route, the operator can check the target travel route illustration and predicted travel time on the monitor 134. It is displayed (#26). When the target travel route for the automatic work travel is determined (#28), the combine is moved to the start position of the automatic work travel (#30). When the combine reaches the start position of the automatic work traveling, the automatic pilot ON/OFF switch 90 is turned on (#32), and the automatic work traveling is started (#34).

自動作業走行は、緊急避難的には、上述したように操縦レバー91の操作などをトリガーとして停止することが可能であるが、正常には、オートパイロットON・OFFスイッチ90のOFF操作によって終了する。このフローチャートでは、緊急避難的な自動走行から手動走行への移行制御は割愛されている。自動作業走行中において、オートパイロットON・OFFスイッチ90のOFF操作による自動走行の中止が指令されたかどうかチェックされる(#36)。オートパイロットON・OFFスイッチ90のOFF操作が確認されると、さらに未作業領域に割り当てられたすべての目標走行経路での作業走行が完了しているかどうかチェックされる(#38)。作業走行が完了していなければ(#38NO分岐)、作業途中での経路離脱と見なされ、手動走行制御に移行する。この離脱走行の一例は、コンバインでは、満杯になった穀粒タンク12のアンローディングのために畦に待機している搬送車まで車体を移動させる離脱走行であり、通常行われる走行の1つである(#40)。離脱走行の完了は、再度、オートパイロットON・OFFスイッチ90のON操作によって確認される(#42)。オートパイロットON・OFFスイッチ90がON操作されると、つまり離脱走行が完了すれば(#42YES分岐)、その時点でのコンバインの自車位置と、離脱時に残されている未作業領域の外形マップから、自動作業走行の再開位置を含む目標走行経路が再算定される(#44)。自動作業走行の再開位置への移動は、自動走行制御で可能であるが、手動走行制御で行うことも可能である(#46)。いずれにせよ、新たな目標走行経路における自動作業走行の再開位置に達すると、これまで通りの、目標走行経路に沿った自動作業走行が再開される(#48)。 In the case of emergency evacuation, the automatic work traveling can be stopped by using the operation of the control lever 91 as a trigger as described above, but normally it is ended by the OFF operation of the autopilot ON/OFF switch 90. .. In this flowchart, the transition control from automatic driving to manual driving, which is an emergency evacuation, is omitted. During the automatic work traveling, it is checked whether or not a command to stop the automatic traveling is given by the OFF operation of the auto pilot ON/OFF switch 90 (#36). When the OFF operation of the autopilot ON/OFF switch 90 is confirmed, it is further checked whether or not the work traveling on all the target traveling routes assigned to the unworked area is completed (#38). If the work traveling is not completed (NO branch of #38), it is considered that the route has left during the work, and the manual traveling control is performed. An example of this leaving run is a leaving run in which the vehicle body is moved to the transport vehicle waiting in the ridge for unloading the full grain tank 12 in the combine, which is one of the normally running runs. Yes (#40). Completion of departure traveling is confirmed again by turning on the autopilot ON/OFF switch 90 (#42). When the autopilot ON/OFF switch 90 is turned ON, that is, when the leaving traveling is completed (#42 YES branch), the position of the own vehicle of the combine at that time and the outline map of the unworked area left at the time of leaving Then, the target travel route including the restart position of the automatic work travel is recalculated (#44). The movement to the restart position of the automatic work traveling can be performed by the automatic traveling control, but can also be performed by the manual traveling control (#46). In any case, when the automatic work traveling restart position on the new target traveling route is reached, the automatic working traveling along the target traveling route as before is restarted (#48).

ステップ#38のチェックで、すべての目標走行経路での作業走行が完了しているならば、作業予定領域の作業が完了であるので、この刈取り収穫作業は終結する。 If the work traveling on all the target travel routes is completed in the check in step #38, the work in the planned work area is completed, and thus the harvesting work is completed.

〔別実施の形態〕
(1)上述した実施形態では、作業車の実際の走行軌跡の目標走行経路からの偏差が所定値を超えた場合や、オーバ―ラップ量が前もって設定されているオーバーラップ量を所定量以上ずれた場合、目標走行経路が新たに算定されたが、操作員の判断に基づいて任意のタイミングで目標走行経路を再算定することも可能である。
(2)上述した実施形態では、コンバインの制御系は、中継ユニット5Cでブリッジされた第1車載ネットワーク5Aと第2車載ネットワーク5Bとを備えていたが、3つ以上の車載ネットワークを備えてもよいし、単一の車載ネットワークで構成してもよい。第1車載ネットワーク5Aを従来の手動走行車両の車載ネットワークとすれば、従来の手動走行車両に自動走行機能を付加する場合、中継ユニット5Cでブリッジされ第2車載ネットワーク5Bに自動走行に関する機能ブロックを構築することで、従来の手動走行車両の車載ネットワークを実質的にそのまま流用することができるという利点が得られる。
(3)上述した実施形態では、コンバインに搭乗している操作員によって手動走行操作ユニット9が操作されることで手動走行する構成としたが、自動走行用リモコン95からの信号が入力信号処理ユニット50に入力されるように構成され、車外にいる操作員によって自動走行用リモコン95が操作されることで手動走行するように構成されていてもよい。この場合、モニタ134の代わりとして、スマートフォンやタブレット端末が採用され、車外にいる操作員によってモニタ134の操作等されるように構成すると好適である。
(4)
上述した実施形態では、外形マップが算定された後の自動作業走行(中央作業走行)のための目標走行経路として、図1に示すように、往復の直線作業走行を180度Uターン走行でつないでいくものが取り上げられた。以下に、それ以外の目標走行経路の例を説明する。
(a)図7で示された目標走行経路は、外側から中心に向けて四角形の渦巻き状に走行するものであり、その直線経路を接続する90度角部は、後進を組み合わせた切り返し走行経路となっている。この切り返し走行経路を説明する。この切り返し走行経路は、切り返し走行経路に入る前の入側直線経路L1から、ほぼ直線状に、あるいは渦巻方向に曲がりながら(図面では直線で示されている)前進走行する第1経路r1、逆方向の操舵角で後進走行する第2経路r2、切り返し走行経路から次の出側直線経路L2に向かって前進走行する第3経路r3からなる。なお、第2経路r2は、第3経路r3がほぼ直線となるような位置まで延びると好都合である。図7では、切り返し走行は外周の4つだけしか示されていないが、全ての90度角部で取り入れることができる。
(b)図8で示された目標走行経路は、平行に並んだ直線経路L1〜L6を2つ経路毎に180度Uターン経路でつなぐものである。その際、180度Uターン経路は1つ以上の直線経路を跨ぐ。つまり、Uターン経路でつながれる2つの直線経路の間に1つ以上の直線経路が挟まれるのである。この目標走行経路では、直線経路L1は、2つの直線経路L2,L3を間に挟む180度Uターン経路S1によって直線経路L4につながれる。次に、直線経路L4は、直線経路L3を間に挟む180度Uターン経路S2によって直線経路L2につながれる。さらに、直線経路L2は、2つの直線経路L3,L4を間に挟む180度Uターン経路S3によって直線経路L5につながれる。このように、180度Uターン経路は、1つ以上の直線経路を挟んで次の直線経路につながるため、曲率半径が大きくなって旋回しやすくなり、結果的に高速走行が可能となる利点をもつ。
(c)図9で示された目標走行経路は、図7の目標走行経路と図8の目標走行経路との組み合わせである。つまり、その外側の走行経路には、図7に示された、切り返し走行経路が用いられている。その内側の走行経路には、図8に示された走行経路が用いられており、これは、1つ以上の直線経路を間に挟む180度Uターン経路を用いた走行経路である。
[Another embodiment]
(1) In the above-described embodiment, when the deviation of the actual travel path of the work vehicle from the target travel route exceeds a predetermined value, or the overlap amount deviates from the preset overlap amount by a predetermined amount or more. In this case, the target travel route is newly calculated, but it is also possible to recalculate the target travel route at an arbitrary timing based on the judgment of the operator.
(2) In the above-described embodiment, the combine control system includes the first vehicle-mounted network 5A and the second vehicle-mounted network 5B that are bridged by the relay unit 5C. Alternatively, a single in-vehicle network may be used. If the first in-vehicle network 5A is used as an in-vehicle network for a conventional manually-operated vehicle, and if an automatic traveling function is added to the conventional manually-operated vehicle, the relay unit 5C bridges the second in-vehicle network 5B with a functional block relating to the automatic traveling. By constructing, there is an advantage that the vehicle-mounted network of the conventional manually-operated vehicle can be substantially used as it is.
(3) In the above-described embodiment, the manual traveling operation unit 9 is operated by the operator on the combine to manually travel, but the signal from the automatic traveling remote controller 95 is an input signal processing unit. It may be configured to be input to 50, and to be manually traveled by operating the automatic travel remote controller 95 by an operator outside the vehicle. In this case, it is preferable that a smartphone or a tablet terminal is adopted as a substitute for the monitor 134 and that the operator outside the vehicle operates the monitor 134.
(4)
In the above-described embodiment, as the target travel route for the automatic work travel (central work travel) after the outline map is calculated, the reciprocating linear work travel is connected by 180 degrees U-turn travel as shown in FIG. Things that went out were picked up. Hereinafter, examples of other target travel routes will be described.
(A) The target travel route shown in FIG. 7 travels in a quadrangle spiral shape from the outside toward the center, and the 90-degree corners connecting the straight routes are the reverse travel route in which reverse travel is combined. Has become. This switching route will be described. This turning-back traveling route is a first route r1 that travels forward from the entrance-side straight-line route L1 before entering the turning-back traveling route while curving in a substantially straight line shape or in a spiral direction (indicated by a straight line in the drawing). A second route r2 that travels backward at a steering angle in a direction, and a third route r3 that travels forward from the turning-back traveling route toward the next exit-side linear route L2. In addition, it is convenient that the second route r2 extends to a position where the third route r3 is substantially a straight line. In FIG. 7, the turning travel is shown only on the four outer circumferences, but it can be incorporated at all 90-degree corners.
(B) In the target travel route shown in FIG. 8, every two linear routes L1 to L6 arranged in parallel are connected by a 180 degree U-turn route. At that time, the 180-degree U-turn path crosses over one or more straight paths. That is, one or more linear paths are sandwiched between two linear paths connected by the U-turn path. In this target travel route, the straight route L1 is connected to the straight route L4 by the 180-degree U-turn route S1 sandwiching the two straight routes L2 and L3. Next, the straight path L4 is connected to the straight path L2 by the 180-degree U-turn path S2 sandwiching the straight path L3. Further, the straight line path L2 is connected to the straight line path L5 by a 180-degree U-turn path S3 that sandwiches the two straight line paths L3 and L4. As described above, since the 180-degree U-turn route is connected to the next straight route across one or more straight routes, the radius of curvature becomes large, which facilitates turning, resulting in high-speed running. Hold.
(C) The target travel route shown in FIG. 9 is a combination of the target travel route of FIG. 7 and the target travel route of FIG. That is, the turning travel route shown in FIG. 7 is used for the travel route on the outside thereof. The traveling route shown in FIG. 8 is used as the traveling route inside thereof, which is a traveling route using a 180-degree U-turn route sandwiching one or more straight routes.

本発明は、自脱型コンバイン、普通型コンバイン、あるいは田植機やトラクタなどの作業車に適用することが可能である。 INDUSTRIAL APPLICABILITY The present invention can be applied to self-removing combine harvesters, ordinary combine harvesters, or work vehicles such as rice transplanters and tractors.

20 :動作機器
31 :引起装置
32 :刈取装置
33 :搬送装置
5A :第1車載ネットワーク
5B :第2車載ネットワーク
5C :中継ユニット
50 :入力信号処理ユニット
52 :手動走行制御ユニット
53 :機器制御ユニット
531 :走行機器制御部
532 :作業機器制御部
54 :エンジン制御ユニット
55 :報知ユニット
61 :自動走行制御ユニット
62 :自車位置検出モジュール
620 :自車位置検出ボックス
621 :衛星航法用モジュール
622 :慣性航法用モジュール
63 :外形マップ算定部
64 :経路算定部
73 :報知デバイス
731 :報知灯
8 :作業状態検出機器
9 :手動走行操作ユニット
90 :オートパイロットON・OFFスイッチ
91 :操縦レバー
92 :主変速レバー
95 :自動走行用リモコン
96 :ティーチング走行ON・OFFスイッチ
20: Operating device 31: Raising device 32: Harvesting device 33: Conveying device 5A: First in-vehicle network 5B: Second in-vehicle network 5C: Relay unit 50: Input signal processing unit 52: Manual traveling control unit 53: Device control unit 531 : Traveling equipment control unit 532: Working equipment control unit 54: Engine control unit 55: Notification unit 61: Automatic traveling control unit 62: Own vehicle position detection module 620: Own vehicle position detection box 621: Satellite navigation module 622: Inertial navigation Module 63: Outline map calculation unit 64: Route calculation unit 73: Notification device 731: Notification light 8: Work state detection device 9: Manual traveling operation unit 90: Autopilot ON/OFF switch 91: Steering lever 92: Main shift lever 95: Remote controller for automatic driving 96: ON/OFF switch for teaching travel

Claims (9)

衛星航法により、作業車の自車位置を検出する自車位置検出モジュールと、
作業予定領域の外周を周回作業走行する際に前記自車位置検出モジュールによって取得された自車位置データから、前記作業予定領域内の未作業領域の外形マップを算定する未作業領域外形マップ算定部と、を備え
前記未作業領域外形マップ算定部は、前記自車位置データに対応する軌跡点群の重心位置を基準中心とし、軌跡点群から前記基準中心に近い複数の辺要素を算定し、前記辺要素から多角形状の前記未作業領域の外形マップを算定する作業車支援システム。
A vehicle position detection module that detects the vehicle position of the work vehicle by satellite navigation,
A non-working area contour map calculator that calculates a contour map of a non-working area in the work planning area from the vehicle position data acquired by the vehicle position detection module when traveling around the circumference of the work planning area and, with a,
The unworked area outer shape map calculation unit calculates a plurality of side elements near the reference center from the locus point group with the center of gravity of the locus point group corresponding to the vehicle position data as a reference center, and calculates the side elements from the side elements. A work vehicle support system for calculating a contour map of the polygonal unworked area .
前記未作業領域外形マップ算定部によって算定された外形マップに基づいて、前記未作業領域を作業走行するための目標走行経路を算定する経路算定部が備えられている請求項1に記載の作業車支援システム。 The work vehicle according to claim 1, further comprising: a route calculation unit that calculates a target travel route for performing work travel in the unworked area based on the outer shape map calculated by the unworked area outer shape map calculation unit. Support system. 前記経路算定部は、前記目標走行経路を複数通り生成し、所定の走行条件に基づいて最適な目標走行経路を出力する請求項2に記載の作業車支援システム。 The work vehicle support system according to claim 2, wherein the route calculation unit generates a plurality of the target traveling routes and outputs an optimum target traveling route based on a predetermined traveling condition. 前記経路算定部は、前記目標走行経路を複数通り生成し、複数通りの前記目標走行経路がオペレータによる選択のために報知される請求項2に記載の作業車支援システム。 The work vehicle support system according to claim 2, wherein the route calculation unit generates a plurality of the target traveling routes and notifies the plurality of the target traveling routes for selection by an operator. 複数通りの前記目標走行経路毎に所要走行時間が予測され、前記所要走行時間が前記走行条件として利用される請求項3に記載の作業車支援システム。 The work vehicle support system according to claim 3, wherein the required traveling time is predicted for each of the plurality of target traveling routes, and the required traveling time is used as the traveling condition. 複数通りの前記目標走行経路毎に所要走行時間が予測され、前記所要走行時間が複数通りの前記目標走行経路に対応付けて報知される請求項2から4のいずれか一項に記載の作業車支援システム。 The work vehicle according to any one of claims 2 to 4, wherein the required travel time is predicted for each of the plurality of target travel routes, and the required travel time is reported in association with the plurality of target travel routes. Support system. 前記目標走行経路を用いた前記未作業領域に対する作業走行中に、当該作業車が前記目標走行経路を離脱した場合、それまでの作業走行において前記自車位置検出モジュールによって取得された自車位置データから、新たな未作業領域の外形マップが算定され、新たに算定された外形マップと離脱した作業車の現在位置とに基づいて、残りの未作業領域を作業走行するための目標走行経路が再算定される請求項2から6のいずれか一項に記載の作業車支援システム。 When the work vehicle departs from the target traveling route during the work traveling to the unworked area using the target traveling route, the vehicle position data acquired by the vehicle position detecting module in the work traveling until then. From this, a new outline map of the unworked area is calculated, and based on the newly calculated outline map and the current position of the work vehicle that has left, the target travel route for work traveling in the remaining unworked area is re-established. The work vehicle support system according to any one of claims 2 to 6, which is calculated. 前記目標走行経路が直線作業走行と方向転換非作業走行とを組み合わせた単位走行ユニットとして算定され、 The target travel route is calculated as a unit travel unit that combines linear work travel and direction change non-work travel,
前記方向転換非作業走行は、Uターン進入操向角とUターン離脱操向角とが一致する単純Uターン走行と、前記単純Uターン走行の端点と前記直線作業走行の端点とを接続する補助直線非作業走行とに分割されて、算定される請求項2から7のいずれか一項に記載の作業車支援システム。 The direction-changing non-working traveling is a simple U-turn traveling in which the U-turn approaching steering angle and the U-turn leaving steering angle are the same, and an assist for connecting the end point of the simple U-turn traveling and the end point of the straight-line working traveling. The work vehicle support system according to any one of claims 2 to 7, wherein the work vehicle support system is calculated by being divided into straight non-work traveling.
前記作業車はコンバインであり、前記外周の周回作業走行は穀稈収穫のための回り刈走行である請求項1から8のいずれか一項に記載の作業車支援システム。 The work vehicle support system according to any one of claims 1 to 8, wherein the work vehicle is a combine, and the orbiting work traveling of the outer periphery is a round cutting traveling for grain culm harvesting.
JP2019051527A 2019-03-19 2019-03-19 Work vehicle support system Active JP6749448B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019051527A JP6749448B2 (en) 2019-03-19 2019-03-19 Work vehicle support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019051527A JP6749448B2 (en) 2019-03-19 2019-03-19 Work vehicle support system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015180940A Division JP6502221B2 (en) 2015-09-14 2015-09-14 Work vehicle support system

Publications (2)

Publication Number Publication Date
JP2019136039A JP2019136039A (en) 2019-08-22
JP6749448B2 true JP6749448B2 (en) 2020-09-02

Family

ID=67692324

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019051527A Active JP6749448B2 (en) 2019-03-19 2019-03-19 Work vehicle support system

Country Status (1)

Country Link
JP (1) JP6749448B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022118569A1 (en) * 2020-12-02 2022-06-09 ヤンマーホールディングス株式会社 Combine and method for calculating unworked land

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7403397B2 (en) * 2020-06-30 2023-12-22 株式会社クボタ agricultural machinery
JP2022011847A (en) * 2020-06-30 2022-01-17 株式会社クボタ Agricultural implement and automatic travel method of agricultural implement
JP7387572B2 (en) * 2020-06-30 2023-11-28 株式会社クボタ agricultural machinery
JP7454487B2 (en) * 2020-11-20 2024-03-22 ヤンマーホールディングス株式会社 Driving route generation system, driving route generation method, and driving route generation program
JP2022087958A (en) * 2020-12-02 2022-06-14 ヤンマーホールディングス株式会社 Work vehicle and work vehicle control method
JP7447881B2 (en) * 2021-09-29 2024-03-12 井関農機株式会社 work vehicle
CN115617928A (en) * 2022-05-20 2023-01-17 丰疆智能科技股份有限公司 Agricultural machinery information sharing method and system, electronic equipment and storage medium

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5911409A (en) * 1982-07-13 1984-01-21 Kubota Ltd Unmanned traveling truck
JPH09178481A (en) * 1995-12-25 1997-07-11 Kubota Corp Device for preparing running data of working vehicle, and guidance and control device
JP3877301B2 (en) * 2002-06-11 2007-02-07 ヤンマー農機株式会社 Agricultural work vehicle
JP4185813B2 (en) * 2003-05-28 2008-11-26 ヤンマー株式会社 Navigation system
DE102004027242A1 (en) * 2004-06-03 2005-12-22 Claas Selbstfahrende Erntemaschinen Gmbh Route planning system for agricultural machines
DE102004031211A1 (en) * 2004-06-28 2006-02-09 Claas Selbstfahrende Erntemaschinen Gmbh Method and device for controlling an agricultural machine
JP6278682B2 (en) * 2013-12-12 2018-02-14 株式会社クボタ Field work machine
CN106163259A (en) * 2014-03-07 2016-11-23 洋马株式会社 Crops harvester
JP6502221B2 (en) * 2015-09-14 2019-04-17 株式会社クボタ Work vehicle support system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022118569A1 (en) * 2020-12-02 2022-06-09 ヤンマーホールディングス株式会社 Combine and method for calculating unworked land

Also Published As

Publication number Publication date
JP2019136039A (en) 2019-08-22

Similar Documents

Publication Publication Date Title
JP6502221B2 (en) Work vehicle support system
JP6749448B2 (en) Work vehicle support system
JP6936356B2 (en) Work vehicle automatic driving system
WO2020026651A1 (en) Harvesting machine, travel system, travel method, travel program, and storage medium
WO2019124217A1 (en) Work vehicle, travel path selection system for work vehicle, and travel path calculation system
JP7014687B2 (en) Harvester
JP7357444B2 (en) harvester
JP2020127405A5 (en)
JP6804999B2 (en) Work driving management system
JP7174484B2 (en) agricultural vehicle
JP6842907B2 (en) Work vehicle automatic driving system
JP6920969B2 (en) Travel route management system
JP6884092B2 (en) Travel route selection system for work vehicles and work vehicles
JP6983734B2 (en) Harvester
JP2018099112A5 (en)
JP6994831B2 (en) Automatic steering system
JP7423666B2 (en) harvester
JP6991058B2 (en) Automatic steering system
WO2022004698A1 (en) Agricultural work machine, agricultural work machine control program, recording medium on which agricultural work machine control program is recorded, and agricultural work machine control method
WO2022071382A1 (en) Agricultural work machine, agricultural work machine control program, recording medium on which agricultural work machine control program is recorded, and agricultural work machine control method
WO2022004474A1 (en) Harvester, automatic traveling method of harvester, program, recording medium, system, agricultural machine, automatic traveling method of agricultural machine, method, and automatic steering management system
JP7030662B2 (en) Harvester
JP7403397B2 (en) agricultural machinery
JP6952597B2 (en) Work platform
JP7334281B2 (en) harvester

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190417

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190513

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A132

Effective date: 20200428

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200714

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200811

R150 Certificate of patent or registration of utility model

Ref document number: 6749448

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150