JP6884240B1 - Unmanned work vehicle and cargo handling system - Google Patents

Unmanned work vehicle and cargo handling system Download PDF

Info

Publication number
JP6884240B1
JP6884240B1 JP2020009810A JP2020009810A JP6884240B1 JP 6884240 B1 JP6884240 B1 JP 6884240B1 JP 2020009810 A JP2020009810 A JP 2020009810A JP 2020009810 A JP2020009810 A JP 2020009810A JP 6884240 B1 JP6884240 B1 JP 6884240B1
Authority
JP
Japan
Prior art keywords
traveling
unit
safety score
image data
learning model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020009810A
Other languages
Japanese (ja)
Other versions
JP2021117644A (en
Inventor
絢介 甲斐
絢介 甲斐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Logisnext Co Ltd
Original Assignee
Mitsubishi Logisnext Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Logisnext Co Ltd filed Critical Mitsubishi Logisnext Co Ltd
Priority to JP2020009810A priority Critical patent/JP6884240B1/en
Application granted granted Critical
Publication of JP6884240B1 publication Critical patent/JP6884240B1/en
Publication of JP2021117644A publication Critical patent/JP2021117644A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Forklifts And Lifting Vehicles (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

【課題】倉庫内の状況に応じて走行速度を変更することが可能な無人作業車を提供する。【解決手段】走行および荷役作業を行う無人作業車200であって、車体と、車体前方の画像データを生成する画像データ生成部201と、画像データが入力されると走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部202と、画像データを学習モデル部202に入力することで学習モデル部202から安全性スコアを取得する処理部203と、車体の走行速度に関する速度指令値に応じて車体の走行制御を行うとともに安全性スコアに応じて速度指令値の補正を行う走行制御部204と、を備えることを特徴とする。【選択図】図1PROBLEM TO BE SOLVED: To provide an unmanned work vehicle capable of changing a traveling speed according to a situation in a warehouse. An unmanned work vehicle 200 that performs traveling and cargo handling work, the vehicle body, an image data generation unit 201 that generates image data in front of the vehicle body, and the degree of safety of the traveling route when the image data is input. A learning model unit 202 machine-learned to generate a safety score indicating the above, a processing unit 203 that acquires a safety score from the learning model unit 202 by inputting image data into the learning model unit 202, and a vehicle body. It is characterized by including a traveling control unit 204 that controls traveling of the vehicle body according to a speed command value related to traveling speed and corrects a speed command value according to a safety score. [Selection diagram] Fig. 1

Description

本発明は、無人作業車および荷役システムに関する。 The present invention relates to an unmanned work vehicle and a cargo handling system.

倉庫内では、管理装置の管理下で、複数の無人作業車(例えば、レーザー誘導方式の無人フォークリフト)が走行および荷役作業を行う。管理装置は、各無人作業車の走行ルートを決定し、決定した走行ルートを無人作業車に通知する。通知を受けた無人作業車は、自己位置を認識しながら、通知された走行ルートに従って走行する。 In the warehouse, a plurality of unmanned work vehicles (for example, a laser-guided unmanned forklift) run and handle cargo under the control of a management device. The management device determines the travel route of each unmanned work vehicle, and notifies the unmanned work vehicle of the determined travel route. The unmanned work vehicle that receives the notification travels according to the notified travel route while recognizing its own position.

レーザー誘導方式の無人フォークリフトは、レーザースキャナを備える(例えば、特許文献1参照)。レーザースキャナは、レーザー光源を回転させながら周囲にレーザーを投光するとともに、倉庫内に配置された複数の反射板からの反射光を検出する。レーザー誘導方式の無人フォークリフトは、反射板の位置をマップ上で記憶しており、三角測量の原理に基づいて自己位置を算出する。これにより、レーザー誘導方式の無人フォークリフトは、自己位置を認識しながら、通知された走行ルートを走行することができる。 The laser-guided unmanned forklift is provided with a laser scanner (see, for example, Patent Document 1). The laser scanner projects a laser to the surroundings while rotating the laser light source, and detects the reflected light from a plurality of reflecting plates arranged in the warehouse. The laser-guided unmanned forklift stores the position of the reflector on the map and calculates its own position based on the principle of triangulation. As a result, the laser-guided unmanned forklift truck can travel on the notified travel route while recognizing its own position.

特開平8−161039号公報Japanese Unexamined Patent Publication No. 8-161039

従来の無人フォークリフトは、予め設定された走行速度で走行ルートを走行するので、倉庫内の状況に応じて走行速度を変更することができないという問題がある。 Since the conventional unmanned forklift travels on the traveling route at a preset traveling speed, there is a problem that the traveling speed cannot be changed according to the situation in the warehouse.

本発明は上記事情に鑑みてなされたものであって、その課題とするところは、倉庫内の状況に応じて走行速度を変更することが可能な無人作業車および当該無人作業車を含む荷役システムを提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is an unmanned work vehicle capable of changing the traveling speed according to the situation in the warehouse and a cargo handling system including the unmanned work vehicle. Is to provide.

上記課題を解決するために、本発明に係る無人作業車は、
走行および荷役作業を行う無人作業車であって、
荷役装置が設けられた車体と、
前記車体の前方を含む画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記車体の走行速度に関する速度指令値に応じて前記車体の走行制御を行うとともに、前記安全性スコアに応じて前記速度指令値の補正を行う走行制御部と、
を備えることを特徴とする。
In order to solve the above problems, the unmanned work vehicle according to the present invention
An unmanned work vehicle that travels and handles cargo.
A car body equipped with a cargo handling device and
An image data generation unit that captures an image including the front of the vehicle body and generates image data,
When the image data is input, a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of the traveling route of the vehicle body by using a machine learning algorithm having a predetermined parameter, and a learning model unit.
A processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit, and a processing unit.
A traveling control unit that controls traveling of the vehicle body according to a speed command value related to the traveling speed of the vehicle body and corrects the speed command value according to the safety score.
It is characterized by having.

上記無人作業車において、
前記走行制御部は、前記安全性スコアが所定の第1閾値よりも小さい場合に、前記速度指令値を減少させる第1補正を行うよう構成できる。
In the above unmanned work vehicle
The travel control unit can be configured to make a first correction to reduce the speed command value when the safety score is smaller than a predetermined first threshold value.

上記無人作業車において、
前記走行制御部は、前記安全性スコアが所定の第2閾値よりも大きい場合に、前記速度指令値を増加させる第2補正を行うよう構成できる。
In the above unmanned work vehicle
The travel control unit can be configured to perform a second correction that increases the speed command value when the safety score is larger than a predetermined second threshold value.

上記無人作業車において、
前記荷役装置は、昇降動作を行うフォークを含み、
前記走行制御部は、前記安全性スコアが所定の第3閾値よりも大きい場合に、走行中における前記昇降動作を許可する一方、前記安全性スコアが前記第3閾値以下の場合に、走行中における前記昇降動作を禁止するよう構成できる。
In the above unmanned work vehicle
The cargo handling device includes a fork that moves up and down.
The travel control unit permits the ascending / descending motion during traveling when the safety score is larger than a predetermined third threshold value, while the traveling control unit permits the ascending / descending operation during traveling, while the traveling control unit is traveling when the safety score is equal to or less than the third threshold value. It can be configured to prohibit the elevating operation.

上記課題を解決するために、本発明に係る荷役システムは、
管理装置と、前記管理装置の管理下で走行および荷役作業を行う複数の無人作業車と、を含む荷役システムであって、
前記無人作業車は、
荷役装置が設けられた車体と、
前記車体の前方を含む画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記車体の走行速度に関する速度指令値に応じて前記車体の走行制御を行うとともに、前記安全性スコアに応じて前記速度指令値の補正を行う走行制御部と、
を備えることを特徴とする。
In order to solve the above problems, the cargo handling system according to the present invention
A cargo handling system including a management device and a plurality of unmanned work platforms that travel and carry out cargo handling work under the control of the management device.
The unmanned work vehicle
A car body equipped with a cargo handling device and
An image data generation unit that captures an image including the front of the vehicle body and generates image data,
When the image data is input, a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of the traveling route of the vehicle body by using a machine learning algorithm having a predetermined parameter, and a learning model unit.
A processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit, and a processing unit.
A traveling control unit that controls traveling of the vehicle body according to a speed command value related to the traveling speed of the vehicle body and corrects the speed command value according to the safety score.
It is characterized by having.

上記荷役システムにおいて、
前記処理部は、前記学習モデル部に入力した前記画像データに前記学習モデル部から取得した前記安全性スコアを関連付けた、安全性スコア付きの画像データを前記管理装置に送信し、
前記管理装置は、
前記安全性スコア付きの画像データを収集して学習用データを生成する収集部と、
前記学習用データに基づく機械学習を行い、前記学習モデル部に含まれる前記パラメータを更新するための更新データを生成し、前記更新データを前記学習モデル部に送信するパラメータ更新部と、
を備え、
前記学習モデル部は、前記更新データに基づいて前記パラメータを更新するよう構成できる。
In the above cargo handling system
The processing unit transmits image data with a safety score in which the image data input to the learning model unit is associated with the safety score acquired from the learning model unit to the management device.
The management device is
A collection unit that collects image data with the safety score and generates learning data,
A parameter update unit that performs machine learning based on the learning data, generates update data for updating the parameters included in the learning model unit, and transmits the update data to the learning model unit.
With
The learning model unit can be configured to update the parameters based on the update data.

本発明によれば、倉庫内の状況に応じて走行速度を変更することが可能な無人作業車および当該無人作業車を含む荷役システムを提供することができる。 According to the present invention, it is possible to provide an unmanned work vehicle whose traveling speed can be changed according to a situation in a warehouse and a cargo handling system including the unmanned work vehicle.

第1実施形態に係る荷役システムのブロック図である。It is a block diagram of the cargo handling system which concerns on 1st Embodiment. 第1実施形態に係る無人作業車(無人フォークリフト)の側面図である。It is a side view of the unmanned work vehicle (unmanned forklift) which concerns on 1st Embodiment. 第1実施形態に係る荷役システムの平面図である。It is a top view of the cargo handling system which concerns on 1st Embodiment. 第2実施形態に係る荷役システムのブロック図である。It is a block diagram of the cargo handling system which concerns on 2nd Embodiment.

以下、添付図面を参照して、本発明に係る無人作業車および荷役システムの実施形態について説明する。 Hereinafter, embodiments of the unmanned work vehicle and the cargo handling system according to the present invention will be described with reference to the accompanying drawings.

[第1実施形態]
図1に、本発明の第1実施形態に係る荷役システム1のブロック図を示す。荷役システム1は、管理装置100と、少なくとも1台のレーザー誘導方式の無人フォークリフト200(本発明の「無人作業車」に相当)とを備える。
[First Embodiment]
FIG. 1 shows a block diagram of a cargo handling system 1 according to the first embodiment of the present invention. The cargo handling system 1 includes a management device 100 and at least one laser-guided unmanned forklift truck 200 (corresponding to the “unmanned work vehicle” of the present invention).

管理装置100は、通信部101と、統括制御部102と、表示部103とを備える。管理装置100は、図3に示すように、無人フォークリフト200が走行する施設(本実施形態では、複数の棚3を有する倉庫2)の外に設けてもよいし、施設の中に設けてもよい。 The management device 100 includes a communication unit 101, a general control unit 102, and a display unit 103. As shown in FIG. 3, the management device 100 may be provided outside the facility (in this embodiment, the warehouse 2 having a plurality of shelves 3) on which the unmanned forklift 200 travels, or may be provided inside the facility. Good.

通信部101は、管理装置100に予め登録された無人フォークリフト200と無線通信を行うよう構成されている。 The communication unit 101 is configured to perform wireless communication with the unmanned forklift 200 registered in advance in the management device 100.

統括制御部102は、無人フォークリフト200の走行および荷役作業を管理するよう構成されている。例えば、統括制御部102は、無人フォークリフト200の荷役作業のスケジュールを作成するとともに荷役作業を円滑に行うための走行ルートを決定する。統括制御部102は、通信部101を介して走行ルートを無人フォークリフト200に通知する。 The integrated control unit 102 is configured to manage the traveling and cargo handling work of the unmanned forklift 200. For example, the overall control unit 102 creates a schedule for the cargo handling work of the unmanned forklift 200 and determines a traveling route for smoothly performing the cargo handling work. The integrated control unit 102 notifies the unmanned forklift 200 of the traveling route via the communication unit 101.

表示部103は、例えば、液晶ディスプレイで構成されている。表示部103には、無人フォークリフト200の走行情報および荷役作業情報が表示される。 The display unit 103 is composed of, for example, a liquid crystal display. The display unit 103 displays running information and cargo handling work information of the unmanned forklift 200.

無人フォークリフト200は、管理装置100の管理下で走行および荷役作業を行うよう構成されている。図2に示すように、無人フォークリフト200は、車体210と、荷役装置211と、車体210の上部に設けられたレーザースキャナ212とを備える。荷役装置211は、車体210の前後に水平移動可能に設けられたマストと、マストに昇降可能に設けられたフォークとを含む。 The unmanned forklift 200 is configured to perform traveling and cargo handling operations under the control of the management device 100. As shown in FIG. 2, the unmanned forklift 200 includes a vehicle body 210, a cargo handling device 211, and a laser scanner 212 provided on the upper portion of the vehicle body 210. The cargo handling device 211 includes a mast provided so as to be horizontally movable in the front and rear of the vehicle body 210, and a fork provided in the mast so as to be able to move up and down.

図3に示すように、レーザースキャナ212は、レーザー光源を回転させながら周囲にレーザーLを投光し、倉庫2内に配置された複数の反射板4からの反射光L’を検出する。レーザースキャナ212の演算部は、反射板4の位置を所定のマップ上で記憶しており、三角測量の原理に基づいて車体210の現在地を算出する。このようにして、無人フォークリフト200は、車体210の現在地に関する現在地情報を取得しながら、通知された走行ルートに従って走行する。 As shown in FIG. 3, the laser scanner 212 projects the laser L to the surroundings while rotating the laser light source, and detects the reflected light L'from the plurality of reflectors 4 arranged in the warehouse 2. The calculation unit of the laser scanner 212 stores the position of the reflector 4 on a predetermined map, and calculates the current location of the vehicle body 210 based on the principle of triangulation. In this way, the unmanned forklift 200 travels according to the notified travel route while acquiring the current location information regarding the current location of the vehicle body 210.

再び図1を参照して、無人フォークリフト200は、画像データ生成部201と、学習モデル部202と、処理部203と、走行制御部204とを備える。 With reference to FIG. 1 again, the unmanned forklift 200 includes an image data generation unit 201, a learning model unit 202, a processing unit 203, and a traveling control unit 204.

画像データ生成部201は、撮影手段および画像処理手段を含むよう構成されている。撮影手段は、車体210の前方を含む画像(静止画および/または動画)を撮影し、画像処理手段に出力する。画像処理手段は、当該画像に基づいて、学習モデル部202に入力可能な画像データを生成する。 The image data generation unit 201 is configured to include a photographing means and an image processing means. The photographing means captures an image (still image and / or moving image) including the front of the vehicle body 210 and outputs the image to the image processing means. The image processing means generates image data that can be input to the learning model unit 202 based on the image.

学習モデル部202は、画像データ生成部201で生成された画像データが入力されると、所定のパラメータを有するニューラルネットワーク等の機械学習アルゴリズムを用いて、走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習済みモデルである。 When the image data generated by the image data generation unit 201 is input, the learning model unit 202 uses a machine learning algorithm such as a neural network having a predetermined parameter to indicate the degree of safety of the traveling route. A trained model machine-learned to generate scores.

学習済みモデルの機械学習では、上記のとおりニューラルネットワーク等の機械学習アルゴリズムを用いて、教師データを大量に入力する。教師データは、倉庫2内の走行ルートを撮影した画像データに所定の安全性スコアを紐付けしたデータを含む。安全性スコアとしては、数値パラメータ(本実施形態では、1〜5の数値パラメータ)を用いる。数値パラメータの設定は、人またはコンピュータが行う。例えば、棚3の近くを走行し、かつ走行ルート上に人がいる場合は、安全性が低いと判断して小さい数値パラメータを設定する。画像データが示す走行ルートの状況と安全性の程度との間には、相関関係等の一定の関係が存在することを推認できる。 In machine learning of a trained model, a large amount of teacher data is input using a machine learning algorithm such as a neural network as described above. The teacher data includes data in which a predetermined safety score is associated with image data obtained by photographing a traveling route in the warehouse 2. Numerical parameters (numerical parameters 1 to 5 in this embodiment) are used as the safety score. Numerical parameters are set by a person or a computer. For example, when traveling near the shelf 3 and there is a person on the traveling route, it is judged that the safety is low and a small numerical parameter is set. It can be inferred that there is a certain relationship such as a correlation between the condition of the traveling route indicated by the image data and the degree of safety.

処理部203は、画像データ生成部201から取得した画像データを学習モデル部202に入力することで、学習モデル部202から安全性スコアを取得するよう構成されている。処理部203は、学習モデル部202から取得した安全性スコアとレーザースキャナ212で取得した現在地情報とを関連付けたデータを管理装置100に送信する。処理部203は、学習モデル部202に入力した画像データに安全性スコアを関連付けて、安全性スコア付きの画像データを生成し、当該安全性スコア付きの画像データを管理装置100に送信してもよい。 The processing unit 203 is configured to acquire a safety score from the learning model unit 202 by inputting the image data acquired from the image data generation unit 201 into the learning model unit 202. The processing unit 203 transmits data associated with the safety score acquired from the learning model unit 202 and the current location information acquired by the laser scanner 212 to the management device 100. Even if the processing unit 203 associates the safety score with the image data input to the learning model unit 202, generates the image data with the safety score, and transmits the image data with the safety score to the management device 100. Good.

処理部203および走行制御部204は、例えば、少なくとも1つのマイコンを含み、マイコンのCPUが所定のプログラムを実行すること等によって処理部203および走行制御部204の各種機能が実現される。 The processing unit 203 and the traveling control unit 204 include, for example, at least one microcomputer, and various functions of the processing unit 203 and the traveling control unit 204 are realized by the CPU of the microcomputer executing a predetermined program or the like.

走行制御部204は、車体210の走行速度に関する速度指令値に応じて車体210の走行制御を行うよう構成されている。例えば、管理装置100から走行ルートが通知されると、走行制御部204は、車体210の走行速度が予め設定された速度になるように速度指令値を設定する。速度指令値を設定した走行制御部204は、所定の周期で補正を行うか否かを判定し、速度指令値または補正後の速度指令値に基づいて、車体210に設けられた走行モータの回転速度の指令値を算出し、当該走行モータを制御することにより車体210の走行制御を行う。 The travel control unit 204 is configured to control the travel of the vehicle body 210 according to a speed command value related to the travel speed of the vehicle body 210. For example, when the management device 100 notifies the travel route, the travel control unit 204 sets a speed command value so that the travel speed of the vehicle body 210 becomes a preset speed. The travel control unit 204 that sets the speed command value determines whether or not to perform correction at a predetermined cycle, and rotates the travel motor provided on the vehicle body 210 based on the speed command value or the corrected speed command value. The traveling control of the vehicle body 210 is performed by calculating the command value of the speed and controlling the traveling motor.

走行制御部204は、処理部203から取得した安全性スコアに応じて速度指令値の補正を行うよう構成されている。走行制御部204は、例えば表1に示すような、安全性スコアと速度指令値およびフォークの昇降動作との関係が規定されたデータを記憶している。表1では、速度指令値の補正を行わない場合(補正なしの場合)の速度指令値をVとしている。 The travel control unit 204 is configured to correct the speed command value according to the safety score acquired from the processing unit 203. The travel control unit 204 stores data in which the relationship between the safety score, the speed command value, and the ascending / descending motion of the fork is defined, as shown in Table 1, for example. In Table 1, the speed command value when the speed command value is not corrected (when there is no correction) is V.

Figure 0006884240
Figure 0006884240

安全性スコアの数値パラメータが5の場合、走行制御部204は、速度指令値Vを速度指令値V1(>V)に増加させる補正(第2補正)を行う。速度指令値V1は、例えば、速度指令値Vに所定の係数K1およびゲインG1を乗算したものである。なお、係数K1は車体210の寸法等によって決まる固定値であり、ゲインG1は環境等に応じて変更可能なパラメータである。後述する係数K2,K3およびゲインG2,G3も同様とする。 When the numerical parameter of the safety score is 5, the traveling control unit 204 makes a correction (second correction) for increasing the speed command value V to the speed command value V1 (> V). The speed command value V1 is, for example, a speed command value V multiplied by a predetermined coefficient K1 and a gain G1. The coefficient K1 is a fixed value determined by the dimensions of the vehicle body 210 and the like, and the gain G1 is a parameter that can be changed according to the environment and the like. The same applies to the coefficients K2 and K3 and the gains G2 and G3 described later.

また、安全性スコアの数値パラメータが5の場合、走行制御部204は、走行中におけるフォークの昇降動作を許可する。これにより、無人フォークリフト200は、フォークを昇降させながら荷役作業位置に向かうことができるので、荷役作業位置でのフォークの昇降時間を短縮化でき、荷役作業の迅速化を図ることができる。 Further, when the numerical parameter of the safety score is 5, the traveling control unit 204 permits the fork to move up and down during traveling. As a result, the unmanned forklift 200 can move to the cargo handling work position while raising and lowering the fork, so that the fork lifting time at the cargo handling work position can be shortened and the cargo handling work can be speeded up.

安全性スコアの数値パラメータが4の場合、走行制御部204は、速度指令値Vを補正することなく、走行中におけるフォークの昇降動作を許可する。 When the numerical parameter of the safety score is 4, the travel control unit 204 permits the fork to move up and down during travel without correcting the speed command value V.

安全性スコアの数値パラメータが3の場合、走行制御部204は、速度指令値Vを補正することなく、走行中におけるフォークの昇降動作を禁止する。これにより、無人フォークリフト200は、より安全に走行することができる。 When the numerical parameter of the safety score is 3, the travel control unit 204 prohibits the fork from moving up and down during travel without correcting the speed command value V. As a result, the unmanned forklift 200 can travel more safely.

安全性スコアの数値パラメータが2の場合、走行制御部204は、速度指令値Vを速度指令値V2(<V)に減少させる補正(第1補正)を行うとともに、走行中におけるフォークの昇降動作を禁止する。速度指令値V2は、例えば、速度指令値Vに所定の係数K2およびゲインG2を乗算したものである。 When the numerical parameter of the safety score is 2, the traveling control unit 204 makes a correction (first correction) for reducing the speed command value V to the speed command value V2 (<V), and raises and lowers the fork during traveling. Is prohibited. The speed command value V2 is, for example, a speed command value V multiplied by a predetermined coefficient K2 and a gain G2.

安全性スコアの数値パラメータが1の場合、走行制御部204は、速度指令値Vを速度指令値V3(<V2)に減少させる補正(第1補正)を行うとともに、走行中におけるフォークの昇降動作を禁止する。速度指令値V3は、例えば、速度指令値Vに所定の係数K3およびゲインG3を乗算したものである。 When the numerical parameter of the safety score is 1, the traveling control unit 204 makes a correction (first correction) for reducing the speed command value V to the speed command value V3 (<V2), and raises and lowers the fork during traveling. Is prohibited. The speed command value V3 is, for example, a speed command value V multiplied by a predetermined coefficient K3 and a gain G3.

上記のとおり、本実施形態に係る無人フォークリフト200では、走行制御部204が、安全性スコアが3よりも小さい場合(すなわち、2,1の場合)に速度指令値Vを減少させる補正を行う一方、安全性スコアが4よりも大きい場合(すなわち、5の場合)に、速度指令値を増加させる補正を行う。したがって、本実施形態に係る無人フォークリフト200によれば、倉庫2内の走行ルートの状況に応じて走行速度を変更する柔軟な走行が可能となる。 As described above, in the unmanned forklift truck 200 according to the present embodiment, the traveling control unit 204 makes a correction to reduce the speed command value V when the safety score is smaller than 3 (that is, in the case of 2 or 1). , If the safety score is greater than 4 (ie, 5), a correction is made to increase the speed command value. Therefore, according to the unmanned forklift truck 200 according to the present embodiment, flexible traveling in which the traveling speed is changed according to the condition of the traveling route in the warehouse 2 becomes possible.

[第2実施形態]
図4に、本発明の第2実施形態に係る荷役システム11のブロック図を示す。荷役システム11は、管理装置300と、複数台のレーザー誘導方式の無人フォークリフト200とを備える。無人フォークリフト200の構成は、第1実施形態と共通するため、ここでは説明を省略する。
[Second Embodiment]
FIG. 4 shows a block diagram of the cargo handling system 11 according to the second embodiment of the present invention. The cargo handling system 11 includes a management device 300 and a plurality of laser-guided unmanned forklifts 200. Since the configuration of the unmanned forklift 200 is the same as that of the first embodiment, the description thereof will be omitted here.

管理装置300は、複数台の無人フォークリフト200の走行および荷役作業を管理する。管理装置300は、収集部301と、パラメータ更新部302とを備えること以外、第1実施形態の管理装置100と共通する。 The management device 300 manages the traveling and cargo handling operations of a plurality of unmanned forklifts 200. The management device 300 is common to the management device 100 of the first embodiment except that the collection unit 301 and the parameter update unit 302 are provided.

収集部301は、無人フォークリフト200から安全性スコア付きの画像データを収集し、当該安全性スコア付きの画像データに基づいてパラメータ更新部302に入力可能な学習用データを生成するよう構成されている。 The collecting unit 301 is configured to collect image data with a safety score from the unmanned forklift 200 and generate learning data that can be input to the parameter updating unit 302 based on the image data with the safety score. ..

また、収集部301は、無人フォークリフト200から画像データ(画像データ生成部201で生成された安全性スコアが付いていない画像データ)を収集し、当該画像データに安全性スコアを紐付けした学習用データを生成してもよい。この場合、学習用データは、第1実施形態の教師データと同様にして生成することができる。すなわち、収集部301は、安全性スコアとして数値パラメータ(本実施形態では、1〜5の数値パラメータ)を用いるとともに、個々の画像データに対して安全性スコアを設定する。例えば、棚3の近くを走行し、かつ走行ルート上に人がいる場合は、安全性が低いと判断して小さい数値パラメータを設定する。画像データが示す走行ルートの状況と安全性の程度との間には、相関関係等の一定の関係が存在することを推認できる。 Further, the collecting unit 301 collects image data (image data without a safety score generated by the image data generation unit 201) from the unmanned forklift 200, and associates the image data with the safety score for learning. Data may be generated. In this case, the learning data can be generated in the same manner as the teacher data of the first embodiment. That is, the collecting unit 301 uses numerical parameters (numerical parameters 1 to 5 in this embodiment) as the safety score, and sets the safety score for each image data. For example, when traveling near the shelf 3 and there is a person on the traveling route, it is judged that the safety is low and a small numerical parameter is set. It can be inferred that there is a certain relationship such as a correlation between the condition of the traveling route indicated by the image data and the degree of safety.

パラメータ更新部302は、無人フォークリフト200の学習モデル部202に含まれる機械学習アルゴリズムのパラメータ(例えば、ニューラルネットワークの重み付けのパラメータ)を更新するための更新データを生成する。パラメータ更新部302は、更新データを生成するために、ニューラルネットワーク等の機械学習アルゴリズムを用いて、学習用データに基づく機械学習を行う。パラメータ更新部302は、生成した更新データを、通信部101を介して複数台の無人フォークリフト200に送信する。 The parameter update unit 302 generates update data for updating the parameters of the machine learning algorithm (for example, the parameters of the weighting of the neural network) included in the learning model unit 202 of the unmanned forklift 200. The parameter update unit 302 performs machine learning based on the learning data by using a machine learning algorithm such as a neural network in order to generate the update data. The parameter update unit 302 transmits the generated update data to a plurality of unmanned forklifts 200 via the communication unit 101.

無人フォークリフト200の学習モデル部202は、受信した更新データに基づいて機械学習アルゴリズムのパラメータを更新する。これにより、学習モデル部202は、更新されたパラメータを有する機械学習アルゴリズムに基づいて、安全性スコアを生成することができる。 The learning model unit 202 of the unmanned forklift 200 updates the parameters of the machine learning algorithm based on the received update data. This allows the learning model unit 202 to generate a safety score based on a machine learning algorithm with updated parameters.

[変形例]
以上、本発明に係る無人作業車および荷役システムの実施形態について説明したが、本発明は上記実施形態に限定されるものではない。
[Modification example]
Although the embodiment of the unmanned work vehicle and the cargo handling system according to the present invention has been described above, the present invention is not limited to the above embodiment.

本発明の無人作業車は、荷役装置が設けられた車体と、車体の前方を含む画像を撮影して画像データを生成する画像データ生成部と、画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、画像データを学習モデル部に入力することで学習モデル部から安全性スコアを取得する処理部と、車体の走行速度に関する速度指令値に応じて車体の走行制御を行うとともに、安全性スコアに応じて速度指令値の補正を行う走行制御部と、を備えるのであれば適宜構成を変更できる。 The unmanned work vehicle of the present invention has a vehicle body provided with a cargo handling device, an image data generation unit that captures an image including the front of the vehicle body and generates image data, and a predetermined parameter when the image data is input. A learning model unit that has been machine-learned to generate a safety score that indicates the degree of safety of the vehicle's travel route using its own machine learning algorithm, and a learning model unit that inputs image data to the learning model unit. It is provided with a processing unit that acquires a safety score from the vehicle, and a traveling control unit that controls the traveling of the vehicle body according to the speed command value related to the traveling speed of the vehicle body and corrects the speed command value according to the safety score. If, the configuration can be changed as appropriate.

例えば、走行制御部は、安全性スコアが所定の第1閾値よりも小さい場合に速度指令値を減少させる補正を行い、かつ/または安全性スコアが所定の第2閾値(>第1閾値)よりも大きい場合に速度指令値を増加させる補正を行うよう構成できる。 For example, the driving control unit makes a correction to reduce the speed command value when the safety score is smaller than the predetermined first threshold value, and / or the safety score is from the predetermined second threshold value (> first threshold value). Can be configured to make a correction to increase the speed command value when is also large.

上記実施形態では、安全性スコアの数値パラメータを1〜5の範囲で設定しているが、当該範囲は適宜変更できる。 In the above embodiment, the numerical parameters of the safety score are set in the range of 1 to 5, but the range can be changed as appropriate.

第2実施形態に係る収集部301およびパラメータ更新部302は、管理装置300ではなく、無人フォークリフト200に備えられていてもよい。しかしながら、大量のデータを取得できるという観点からは、管理装置300が収集部301およびパラメータ更新部302を備えることが好ましい。 The collecting unit 301 and the parameter updating unit 302 according to the second embodiment may be provided in the unmanned forklift 200 instead of the management device 300. However, from the viewpoint that a large amount of data can be acquired, it is preferable that the management device 300 includes a collection unit 301 and a parameter update unit 302.

本発明の無人作業車は、レーザー誘導方式の無人フォークリフトに限定されるものではなく、別の方式の無人フォークリフトや無人搬送車でもよい。 The unmanned work vehicle of the present invention is not limited to the laser-guided unmanned forklift, and may be another type of unmanned forklift or automatic guided vehicle.

1,11 荷役システム
2 倉庫
3 棚
4 反射板
100 管理装置
101 通信部
102 統括制御部
103 表示部
200 無人フォークリフト
201 画像データ生成部
202 学習モデル部
203 処理部
204 走行制御部
210 車体
211 荷役装置
212 レーザースキャナ
300 管理装置
301 収集部
302 パラメータ更新部
1,11 Cargo handling system 2 Warehouse 3 Shelf 4 Reflector 100 Management device 101 Communication unit 102 General control unit 103 Display unit 200 Unmanned forklift 201 Image data generation unit 202 Learning model unit 203 Processing unit 204 Travel control unit 210 Body 211 Cargo handling device 212 Laser scanner 300 Management device 301 Collection unit 302 Parameter update unit

Claims (3)

走行および荷役作業を行う無人作業車であって、
荷役装置が設けられた車体と、
前記車体の前方を含む画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記車体の走行速度に関する速度指令値に応じて前記車体の走行制御を行うとともに、前記安全性スコアに応じて前記速度指令値の補正を行う走行制御部と、
を備え
前記走行制御部は、前記安全性スコアが所定の第1閾値よりも小さい場合に、前記速度指令値を減少させる第1補正を行う一方、前記安全性スコアが所定の第2閾値よりも大きい場合に、前記速度指令値を増加させる第2補正を行い、
前記荷役装置は、昇降動作を行うフォークを含み、
前記走行制御部は、前記安全性スコアが所定の第3閾値よりも大きい場合に、走行中における前記昇降動作を許可する一方、前記安全性スコアが前記第3閾値以下の場合に、走行中における前記昇降動作を禁止することを特徴とする無人作業車。
An unmanned work vehicle that travels and handles cargo.
A car body equipped with a cargo handling device and
An image data generation unit that captures an image including the front of the vehicle body and generates image data,
When the image data is input, a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of the traveling route of the vehicle body by using a machine learning algorithm having a predetermined parameter, and a learning model unit.
A processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit, and a processing unit.
A traveling control unit that controls traveling of the vehicle body according to a speed command value related to the traveling speed of the vehicle body and corrects the speed command value according to the safety score.
Equipped with a,
When the safety score is smaller than a predetermined first threshold value, the travel control unit makes a first correction for reducing the speed command value, while the safety score is larger than a predetermined second threshold value. The second correction to increase the speed command value is performed.
The cargo handling device includes a fork that moves up and down.
The travel control unit permits the ascending / descending motion during traveling when the safety score is larger than a predetermined third threshold value, while the traveling control unit permits the ascending / descending operation during traveling, while the traveling control unit is traveling when the safety score is equal to or less than the third threshold value. An unmanned work vehicle characterized by prohibiting the ascending / descending operation.
管理装置と、前記管理装置の管理下で走行および荷役作業を行う複数の無人作業車と、を含む荷役システムであって、
前記無人作業車は、
荷役装置が設けられた車体と、
前記車体の前方を含む画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記車体の走行速度に関する速度指令値に応じて前記車体の走行制御を行うとともに、前記安全性スコアに応じて前記速度指令値の補正を行う走行制御部と、
を備え
前記走行制御部は、前記安全性スコアが所定の第1閾値よりも小さい場合に、前記速度指令値を減少させる第1補正を行う一方、前記安全性スコアが所定の第2閾値よりも大きい場合に、前記速度指令値を増加させる第2補正を行い、
前記荷役装置は、昇降動作を行うフォークを含み、
前記走行制御部は、前記安全性スコアが所定の第3閾値よりも大きい場合に、走行中における前記昇降動作を許可する一方、前記安全性スコアが前記第3閾値以下の場合に、走行中における前記昇降動作を禁止することを特徴とする荷役システム。
A cargo handling system including a management device and a plurality of unmanned work platforms that travel and carry out cargo handling work under the control of the management device.
The unmanned work vehicle
A car body equipped with a cargo handling device and
An image data generation unit that captures an image including the front of the vehicle body and generates image data,
When the image data is input, a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of the traveling route of the vehicle body by using a machine learning algorithm having a predetermined parameter, and a learning model unit.
A processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit, and a processing unit.
A traveling control unit that controls traveling of the vehicle body according to a speed command value related to the traveling speed of the vehicle body and corrects the speed command value according to the safety score.
Equipped with a,
When the safety score is smaller than a predetermined first threshold value, the traveling control unit makes a first correction for reducing the speed command value, while the safety score is larger than a predetermined second threshold value. The second correction to increase the speed command value is performed.
The cargo handling device includes a fork that moves up and down.
The travel control unit permits the ascending / descending motion during traveling when the safety score is larger than a predetermined third threshold value, while the traveling control unit permits the ascending / descending operation during traveling, while the traveling control unit is traveling when the safety score is equal to or less than the third threshold value. A cargo handling system characterized in that the elevating operation is prohibited.
前記処理部は、前記学習モデル部に入力した前記画像データに前記学習モデル部から取得した前記安全性スコアを関連付けた、安全性スコア付きの画像データを前記管理装置に送信し、
前記管理装置は、
前記安全性スコア付きの画像データを収集して学習用データを生成する収集部と、
前記学習用データに基づく機械学習を行い、前記学習モデル部に含まれる前記パラメータを更新するための更新データを生成し、前記更新データを前記学習モデル部に送信するパラメータ更新部と、
を備え、
前記学習モデル部は、前記更新データに基づいて前記パラメータを更新することを特徴とする請求項に記載の荷役システム。
The processing unit transmits image data with a safety score in which the image data input to the learning model unit is associated with the safety score acquired from the learning model unit to the management device.
The management device is
A collection unit that collects image data with the safety score and generates learning data,
A parameter update unit that performs machine learning based on the learning data, generates update data for updating the parameters included in the learning model unit, and transmits the update data to the learning model unit.
With
The cargo handling system according to claim 2 , wherein the learning model unit updates the parameters based on the update data.
JP2020009810A 2020-01-24 2020-01-24 Unmanned work vehicle and cargo handling system Active JP6884240B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020009810A JP6884240B1 (en) 2020-01-24 2020-01-24 Unmanned work vehicle and cargo handling system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020009810A JP6884240B1 (en) 2020-01-24 2020-01-24 Unmanned work vehicle and cargo handling system

Publications (2)

Publication Number Publication Date
JP6884240B1 true JP6884240B1 (en) 2021-06-09
JP2021117644A JP2021117644A (en) 2021-08-10

Family

ID=76218169

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020009810A Active JP6884240B1 (en) 2020-01-24 2020-01-24 Unmanned work vehicle and cargo handling system

Country Status (1)

Country Link
JP (1) JP6884240B1 (en)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0772925A (en) * 1993-09-06 1995-03-17 Yamatake Honeywell Co Ltd Obstruction evading controller
JP2018135069A (en) * 2017-02-23 2018-08-30 パナソニックIpマネジメント株式会社 Information processing system, information processing method, and program

Also Published As

Publication number Publication date
JP2021117644A (en) 2021-08-10

Similar Documents

Publication Publication Date Title
EP3539522B1 (en) Systems and methods for providing synchronized movements of a powered wheelchair and an exoskeleton
US11690768B2 (en) Systems and methods for communication between wheelchairs and vehicles
JP6884240B1 (en) Unmanned work vehicle and cargo handling system
CN111017804A (en) Intelligent mobile transfer system and transfer method thereof
JP6639557B2 (en) Automatic guided vehicle and control method thereof
JP2021059435A (en) Cargo handling system and control method
JP6874174B1 (en) Cargo handling system and management equipment
JP7144564B1 (en) Forklift and cargo handling system
JP2021076995A (en) Cargo handling system
JP2021089569A (en) Cargo handling system
US20040031649A1 (en) Industrial truck with a control device
CN208673144U (en) Unmanned logistics vehicle
JP2017149375A (en) Cargo vehicle, cargo vehicle system, method for controlling cargo vehicle, method for controlling cargo vehicle system and program for controlling cargo vehicle
JP7084101B1 (en) Forklift and cargo handling system
JP2022039291A (en) Operation parameter adjusting method and robot system
JP2022139496A (en) Fork lift and cargo handling system
JP2017088317A (en) Industrial vehicle management system
CN111370111A (en) Large-scale image equipment control system and method based on voice and storage medium
JP6232467B2 (en) Cargo handling vehicle system, break management method and control program
EP4099126A2 (en) Systems and methods for material handling vehicle travel control based on speed and steering angle detection
JP5648674B2 (en) Work position detection system
JP2017204076A (en) Cargo vehicle system, rest management method and control program
CN112132493B (en) Order picking regulation and control method and robot
JP6259500B1 (en) Cargo vehicle calling device, cargo handling vehicle system, cargo handling vehicle call method, and cargo handling vehicle call device control program
JP5332122B2 (en) Work position detection system and work position detection method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210421

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210506

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210511

R150 Certificate of patent or registration of utility model

Ref document number: 6884240

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150