JP2022147047A - Forklift and cargo handling system - Google Patents

Forklift and cargo handling system Download PDF

Info

Publication number
JP2022147047A
JP2022147047A JP2021048141A JP2021048141A JP2022147047A JP 2022147047 A JP2022147047 A JP 2022147047A JP 2021048141 A JP2021048141 A JP 2021048141A JP 2021048141 A JP2021048141 A JP 2021048141A JP 2022147047 A JP2022147047 A JP 2022147047A
Authority
JP
Japan
Prior art keywords
unit
safety
score
forklift
safety score
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021048141A
Other languages
Japanese (ja)
Other versions
JP7084101B1 (en
Inventor
良平 寺尾
Ryohei Terao
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Logisnext Co Ltd
Original Assignee
Mitsubishi Logisnext Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Logisnext Co Ltd filed Critical Mitsubishi Logisnext Co Ltd
Priority to JP2021048141A priority Critical patent/JP7084101B1/en
Application granted granted Critical
Publication of JP7084101B1 publication Critical patent/JP7084101B1/en
Publication of JP2022147047A publication Critical patent/JP2022147047A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Forklifts And Lifting Vehicles (AREA)

Abstract

To provide a forklift that is able to prompt an operator more appropriately to pay attention.SOLUTION: A forklift 200A that performs a cargo handling operation in a working area, includes: an image data generation unit 203 that photographs an image in a traveling direction of a vehicle body and generates image data; a learning model unit 204 having machine-learned so as to generate a safety score indicating a degree of safety of a traveling route of the vehicle body; a processing unit 205 that acquires a safety score from the learning model unit 204 by inputting the image data to the learning model unit 204; an illuminating unit 201 that emits notification light to a road surface in the traveling direction; and a control unit 208 that controls the illuminating unit 201, wherein the control unit 208 changes an output mode for the notification light, based on the safety score.SELECTED DRAWING: Figure 1

Description

本発明は、フォークリフトおよび荷役システムに関する。 The present invention relates to forklifts and cargo handling systems.

従来から、作業場にいる作業者(他のフォークリフトのオペレータを含む)に注意を促す目的で、路面に報知光を照射しながら走行するフォークリフトが知られている(例えば、特許文献1参照)。しかしながら、従来のフォークリフトは、報知光の出力態様が一定であるため、作業者への注意喚起が不十分であった。 2. Description of the Related Art Conventionally, forklifts are known that travel while illuminating a road surface with notification light for the purpose of alerting workers (including other forklift operators) in the workplace (see, for example, Patent Document 1). However, since the conventional forklift has a constant output mode of the notification light, it is insufficient to alert the operator.

特願2000-344005号Japanese Patent Application No. 2000-344005

本発明は上記事情に鑑みてなされたものであって、その課題とするところは、作業者に対してより適切な注意喚起を促すことが可能なフォークリフトおよび荷役システムを提供することにある。 SUMMARY OF THE INVENTION The present invention has been made in view of the above circumstances, and an object thereof is to provide a forklift truck and a cargo handling system capable of prompting a worker to be alerted more appropriately.

上記課題を解決するために、本発明に係るフォークリフトは、
作業場において荷役作業を行うフォークリフトであって、
車体と、
前記車体の進行方向の画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記進行方向の路面に向かって報知光を照射する照明部と、
前記照明部を制御する制御部と、を備え、
前記制御部は、
前記安全性スコアに基づいて、前記報知光の出力態様を変化させることを特徴とする。
In order to solve the above problems, the forklift according to the present invention includes:
A forklift that performs cargo handling work in a workshop,
a vehicle body;
an image data generating unit that captures an image of the traveling direction of the vehicle body and generates image data;
a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of a travel route of the vehicle body using a machine learning algorithm having predetermined parameters when the image data is input;
a processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit;
a lighting unit that emits notification light toward the road surface in the traveling direction;
A control unit that controls the lighting unit,
The control unit
The output mode of the notification light is changed based on the safety score.

この構成では、車体の走行ルートの安全性の程度を示す安全性スコアに基づいて報知光の出力態様を変化させるので、作業者に対してより適切な注意喚起を促すことが可能となる。 In this configuration, since the output mode of the notification light is changed based on the safety score indicating the degree of safety of the travel route of the vehicle body, it is possible to prompt the worker to be alerted more appropriately.

上記フォークリフトは、
自己位置の推定を行う位置推定部と、
前記作業場における前記安全性スコアの分布を示す環境マップを生成するマップ生成部と、を備え、
前記マップ生成部は、
前記処理部から取得した前記安全性スコアを現在スコアとし、前記環境マップ内の前記自己位置における前記安全性スコアを過去スコアとし、前記現在スコアと前記過去スコアとを比較して安全性の低い方の前記安全性スコアを前記制御部に出力し、
前記制御部は、
前記マップ生成部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させるよう構成できる。
The forklift above
a position estimation unit that estimates the self-position;
a map generator that generates an environment map showing the distribution of the safety scores in the workplace;
The map generation unit
The safety score acquired from the processing unit is defined as a current score, the safety score at the self-position within the environment map is defined as a past score, and the current score and the past score are compared to determine which one has the lowest safety score. outputting the safety score of to the control unit;
The control unit
The output mode of the notification light can be changed based on the safety score acquired from the map generator.

上記フォークリフトは、
自己位置の推定を行う位置推定部と、
前記作業場で走行中の作業車の位置に関する他車位置を取得する情報取得部と、
を備え、
前記処理部は、
前記自己位置と前記他車位置との距離に応じて、前記学習モデル部から取得した前記安全性スコアの前記安全性の程度を変更して前記制御部に出力し、
前記制御部は、
前記処理部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させるよう構成できる。
The forklift above
a position estimation unit that estimates the self-position;
an information acquisition unit that acquires the position of another vehicle related to the position of the work vehicle traveling in the workshop;
with
The processing unit is
changing the degree of safety of the safety score acquired from the learning model unit according to the distance between the self position and the other vehicle position, and outputting the safety score to the control unit;
The control unit
The output mode of the notification light can be changed based on the safety score acquired from the processing unit.

上記課題を解決するために、本発明に係る荷役システムは、
管理装置と、前記管理装置の管理下で作業場において荷役作業を行う少なくとも1台のフォークリフトと、を備える荷役システムであって、
前記フォークリフトは、
車体と、
前記車体の進行方向の画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記進行方向の路面に向かって報知光を照射する照明部と、
前記照明部を制御する制御部と、を備え、
前記制御部は、
前記安全性スコアに基づいて、前記報知光の出力態様を変化させることを特徴とする。
In order to solve the above problems, the cargo handling system according to the present invention includes:
A cargo handling system comprising a management device and at least one forklift that performs cargo handling work in a workplace under the management of the management device,
The forklift is
a vehicle body;
an image data generating unit that captures an image of the traveling direction of the vehicle body and generates image data;
a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of a travel route of the vehicle body using a machine learning algorithm having predetermined parameters when the image data is input;
a processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit;
a lighting unit that emits notification light toward the road surface in the traveling direction;
A control unit that controls the lighting unit,
The control unit
The output mode of the notification light is changed based on the safety score.

上記荷役システムにおいて、
前記フォークリフトは、自己位置の推定を行う位置推定部を備え、
前記管理装置は、
前記フォークリフトから前記安全性スコアおよび前記自己位置を取得するための通信部と、
前記作業場における前記安全性スコアの分布を示す環境マップを生成するマップ生成部と、を備え、
前記マップ生成部は、
前記フォークリフトから取得した前記安全性スコアを現在スコアとし、前記環境マップ内の前記フォークリフトの前記自己位置における前記安全性スコアを過去スコアとし、前記現在スコアと前記過去スコアとを比較して安全性の低い方の前記安全性スコアを前記フォークリフトの前記制御部に送信し、
前記制御部は、
前記マップ生成部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させるよう構成できる。
In the above cargo handling system,
The forklift includes a position estimation unit that estimates its own position,
The management device
a communication unit for obtaining the safety score and the self-location from the forklift;
a map generator that generates an environment map showing the distribution of the safety scores in the workplace;
The map generation unit
The safety score obtained from the forklift is used as a current score, the safety score at the self-position of the forklift in the environment map is used as a past score, and the current score and the past score are compared to determine safety. transmitting the lower safety score to the controller of the forklift;
The control unit
The output mode of the notification light can be changed based on the safety score acquired from the map generator.

上記荷役システムにおいて、
前記フォークリフトは、自己位置の推定を行う位置推定部を備え、
前記管理装置は、
前記フォークリフトの前記自己位置と前記作業場で走行中の作業車の位置に関する他車位置とを取得する情報取得部と、
前記自己位置と前記他車位置との距離を算出する演算部と、
を備え、
前記処理部は、
前記演算部から取得した前記距離に応じて、前記学習モデル部から取得した前記安全性スコアの前記安全性の程度を変更して前記制御部に出力し、
前記制御部は、
前記処理部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させるよう構成できる。
In the above cargo handling system,
The forklift includes a position estimation unit that estimates its own position,
The management device
an information acquisition unit that acquires the self-position of the forklift and the position of other vehicles related to the position of the work vehicle traveling in the workshop;
a calculation unit that calculates the distance between the self position and the position of the other vehicle;
with
The processing unit is
according to the distance obtained from the calculation unit, changing the degree of safety of the safety score obtained from the learning model unit and outputting it to the control unit;
The control unit
The output mode of the notification light can be changed based on the safety score acquired from the processing unit.

上記荷役システムにおいて、
前記処理部は、前記学習モデル部に入力した前記画像データに前記学習モデル部から取得した前記安全性スコアを関連付けた、安全性スコア付きの画像データを前記管理装置に送信し、
前記管理装置は、
前記安全性スコア付きの画像データを収集して学習用データを生成する収集部と、
前記学習用データに基づく機械学習を行い、前記学習モデル部に含まれる前記パラメータを更新するための更新データを生成し、前記更新データを前記学習モデル部に送信するパラメータ更新部と、
を備え、
前記学習モデル部は、前記更新データに基づいて前記パラメータを更新するよう構成できる。
In the above cargo handling system,
The processing unit transmits image data with a safety score, in which the safety score obtained from the learning model unit is associated with the image data input to the learning model unit, to the management device,
The management device
a collection unit that collects the image data with the safety score and generates learning data;
a parameter updating unit that performs machine learning based on the learning data, generates update data for updating the parameters included in the learning model unit, and transmits the update data to the learning model unit;
with
The learning model unit can be configured to update the parameters based on the update data.

本発明によれば、作業者に対してより適切な注意喚起を促すことが可能なフォークリフトおよび荷役システムを提供することができる。 According to the present invention, it is possible to provide a forklift truck and a cargo handling system capable of prompting a worker to be alerted more appropriately.

第1実施形態に係る荷役システムのブロック図である。1 is a block diagram of a cargo handling system according to a first embodiment; FIG. 第1実施形態に係るフォークリフトの側面図である。1 is a side view of a forklift according to a first embodiment; FIG. 第1実施形態に係る荷役システムの平面図である。1 is a plan view of a cargo handling system according to a first embodiment; FIG. (A)第1実施形態に係る管理装置に表示されるモデル図である。(B)第1実施形態に係るフォークリフトのマップ生成部で生成されるモデル図(環境マップ)である。4A is a model diagram displayed on the management device according to the first embodiment; FIG. (B) is a model diagram (environmental map) generated by the map generator of the forklift according to the first embodiment; 第2実施形態に係る荷役システムのブロック図である。It is a block diagram of the cargo handling system concerning a 2nd embodiment. 第3実施形態に係る荷役システムのブロック図である。FIG. 11 is a block diagram of a cargo handling system according to a third embodiment; FIG. 第3実施形態に係る荷役システムにおいて、フォークリフトと別の作業車との位置関係を示す平面図である。FIG. 11 is a plan view showing the positional relationship between a forklift and another working vehicle in the cargo handling system according to the third embodiment; 第4実施形態に係る荷役システムのブロック図である。It is a block diagram of a cargo handling system concerning a 4th embodiment. 第5実施形態に係る荷役システムのブロック図である。It is a block diagram of a cargo handling system concerning a 5th embodiment. 第5実施形態に係るフォークリフトの側面図である。It is a side view of the forklift concerning 5th Embodiment.

以下、添付図面を参照して、本発明に係るフォークリフトおよび荷役システムの実施形態について説明する。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of a forklift and a cargo handling system according to the present invention will be described with reference to the accompanying drawings.

[第1実施形態]
図1に、本発明の第1実施形態に係る荷役システム1Aのブロック図を示す。荷役システム1Aは、管理装置100Aと、少なくとも1台のレーザー誘導方式の無人フォークリフト200A(本発明の「フォークリフト」に相当)とを備える。
[First embodiment]
FIG. 1 shows a block diagram of a cargo handling system 1A according to the first embodiment of the present invention. The cargo handling system 1A includes a management device 100A and at least one laser-guided unmanned forklift 200A (corresponding to the "forklift" of the present invention).

管理装置100Aは、通信部101と、統括制御部102と、表示部103とを備える。管理装置100Aは、図3に示すように、無人フォークリフト200Aが走行する作業場2(本実施形態では、複数のラック3を有する倉庫)の外に設けてもよいし、作業場2の中に設けてもよい。 100 A of management apparatuses are provided with the communication part 101, the integrated control part 102, and the display part 103. FIG. As shown in FIG. 3, the management device 100A may be provided outside the workplace 2 (in this embodiment, a warehouse having a plurality of racks 3) where the unmanned forklift 200A travels, or may be provided inside the workplace 2. good too.

通信部101は、管理装置100Aに予め登録された無人フォークリフト200Aと無線通信を行うよう構成されている。 The communication unit 101 is configured to wirelessly communicate with the unmanned forklift 200A registered in advance in the management device 100A.

統括制御部102は、無人フォークリフト200Aの走行および荷役作業を管理するよう構成されている。例えば、統括制御部102は、無人フォークリフト200Aの荷役作業のスケジュールを作成するとともに荷役作業を円滑に行うための走行ルートを決定する。統括制御部102は、通信部101を介して走行ルートを無人フォークリフト200Aに通知する。 The integrated control unit 102 is configured to manage travel and cargo handling work of the unmanned forklift 200A. For example, the integrated control unit 102 creates a cargo handling schedule for the unmanned forklift 200A and determines a travel route for smooth cargo handling. The integrated control unit 102 notifies the unmanned forklift truck 200A of the travel route via the communication unit 101 .

表示部103は、例えば、液晶ディスプレイで構成されている。表示部103には、無人フォークリフト200Aの走行情報および荷役作業情報が表示される。図4(A)に示すように、表示部103は、作業場2のモデル図M1を表示し、モデル図M1において無人フォークリフト200Aの現在地Ma、走行ルートRa等を走行情報として表示してもよい。 The display unit 103 is composed of, for example, a liquid crystal display. The display unit 103 displays travel information and cargo handling work information of the unmanned forklift 200A. As shown in FIG. 4A, the display unit 103 may display a model diagram M1 of the workplace 2, and display the current location Ma, travel route Ra, and the like of the unmanned forklift 200A in the model diagram M1 as travel information.

無人フォークリフト200Aは、管理装置100Aの管理下で走行および荷役作業を行うよう構成されている。図2に示すように、無人フォークリフト200Aは、車体210と、荷役装置211と、車体210の上部に設けられたレーザースキャナ212とを備える。荷役装置211は、車体210の前後に水平移動可能に設けられたマストと、マストに昇降可能に設けられたフォークとを含む。 The unmanned forklift 200A is configured to travel and perform cargo handling work under the control of the management device 100A. As shown in FIG. 2 , the unmanned forklift 200A includes a vehicle body 210 , a cargo handling device 211 , and a laser scanner 212 provided on the upper portion of the vehicle body 210 . The cargo handling device 211 includes a mast horizontally movable in front and rear of the vehicle body 210 and a fork vertically movable on the mast.

図3に示すように、レーザースキャナ212は、レーザー光源を回転させながら周囲にレーザーLを投光し、作業場2内に配置された複数の反射板4からの反射光L’を検出する。レーザースキャナ212の演算部は、反射板4の位置を所定のマップ上で記憶しており、三角測量の原理に基づいて車体210の現在地(自己位置)を算出する。このようにして、無人フォークリフト200Aは、車体210の現在地に関する現在地情報を取得しながら、通知された走行ルートに従って走行する。 As shown in FIG. 3 , the laser scanner 212 projects a laser L around while rotating the laser light source, and detects the reflected light L′ from the plurality of reflectors 4 arranged in the workplace 2 . A calculation unit of the laser scanner 212 stores the position of the reflector 4 on a predetermined map, and calculates the current position (self-position) of the vehicle body 210 based on the principle of triangulation. In this manner, unmanned forklift 200A travels along the notified travel route while acquiring current location information regarding the current location of vehicle body 210 .

再び図1を参照して、無人フォークリフト200Aは、照明部201と、警報音出力部202と、画像データ生成部203と、学習モデル部204と、処理部205と、位置推定部206と、マップ生成部207と、制御部208とを備える。 Referring to FIG. 1 again, unmanned forklift 200A includes illumination unit 201, alarm sound output unit 202, image data generation unit 203, learning model unit 204, processing unit 205, position estimation unit 206, map A generation unit 207 and a control unit 208 are provided.

照明部201は、例えば、少なくとも1つのLEDライトで構成され、制御部208の制御下で車体210の進行方向の路面に向かって報知光を照射する。図2に示すように、無人フォークリフト200Aは、主に、フォークが進行方向とは逆を向く状態で走行するので、照明部201はフォークとは逆側の路面に向かって報知光を照射する。なお、照明部201は、走行時にフォークが進行方向を向く場合にも、進行方向の路面に向かって報知光を照射できるように、フォークの側の路面に向かって報知光を照射するLEDライトをさらに含んでもよい。 The lighting unit 201 is composed of, for example, at least one LED light, and emits notification light toward the road surface in the traveling direction of the vehicle body 210 under the control of the control unit 208 . As shown in FIG. 2, the unmanned forklift 200A mainly travels with the forks facing in the opposite direction to the direction of travel, so the illumination unit 201 emits notification light toward the road surface on the opposite side of the forks. The illumination unit 201 includes an LED light that emits notification light toward the road surface on the side of the forks so that the notification light can be emitted toward the road surface in the direction of travel even when the forks face the direction of travel during running. It may contain further.

路面に現れる報知光の像は、本実施形態では輪郭が曖昧な円状であるが、照明部201に設けられたレンズやスリットの作用により、輪郭が明確なスポット状、ライン状または矢印状とされていてもよい。また、報知光の色は、報知効果を高めるために、路面に対して目立つ色であることが好ましい。例えば、路面の色が白または淡いグレーである場合は、青、赤、緑等の彩度の高い色が好ましい。 In this embodiment, the image of the notification light that appears on the road surface is circular with an ambiguous outline. may have been Moreover, the color of the notification light is preferably a color that stands out against the road surface in order to enhance the notification effect. For example, when the color of the road surface is white or light gray, colors with high saturation such as blue, red, and green are preferable.

さらに、照明部201は、制御部208の制御下で報知光の出力態様を変化させるよう構成されている。本実施形態における出力態様は、報知光の点滅速度を変化させたものであり、具体的には、常時点灯、低速点滅、中速点滅、高速点滅、消灯の5パターンを含む。 Furthermore, the lighting unit 201 is configured to change the output mode of the notification light under the control of the control unit 208 . The output modes in the present embodiment vary the flashing speed of the notification light, and specifically include five patterns of constant lighting, slow flashing, medium speed flashing, high speed flashing, and off.

警報音出力部202は、例えば、少なくとも1つのスピーカーで構成され、制御部208の制御下で警報音を出力する。また、車体210に障害物センサが設けられている場合、障害物センサが車体210の周囲に存在する障害物(例えば、走行ルート上に置かれた荷物)を検出した際に、警報音出力部202が警報音を出力してもよい。 The alarm sound output unit 202 is composed of at least one speaker, for example, and outputs an alarm sound under the control of the control unit 208 . Further, when an obstacle sensor is provided on the vehicle body 210, when the obstacle sensor detects an obstacle existing around the vehicle body 210 (for example, luggage placed on the travel route), an alarm sound output unit 202 may output an audible alarm.

画像データ生成部203は、少なくとも1つの撮影手段と、画像処理手段とを含むよう構成されている。撮影手段は、車体210の進行方向を含む画像(静止画および/または動画)を撮影し、言い換えれば、照明部201が報知光を照射する方向の画像を撮影し、画像処理手段に出力する。画像処理手段は、当該画像に基づいて、学習モデル部204に入力可能な画像データを生成する。 The image data generator 203 is configured to include at least one photographing means and image processing means. The image capturing means captures an image (still image and/or moving image) including the traveling direction of the vehicle body 210, in other words, captures an image in the direction in which the illumination unit 201 irradiates the notification light, and outputs the image to the image processing means. The image processing means generates image data that can be input to the learning model unit 204 based on the image.

学習モデル部204は、画像データ生成部203で生成された画像データが入力されると、所定のパラメータを有するニューラルネットワーク等の機械学習アルゴリズムを用いて、走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習済みモデルである。 When the image data generated by the image data generation unit 203 is input, the learning model unit 204 uses a machine learning algorithm such as a neural network having predetermined parameters to calculate the safety level indicating the degree of safety of the travel route. A trained model that has been machine-learned to generate a score.

学習済みモデルの機械学習では、上記のとおりニューラルネットワーク等の機械学習アルゴリズムを用いて、教師データを大量に入力する。教師データは、作業場2内の走行ルートを撮影した画像データに所定の安全性スコアを紐付けしたデータを含む。安全性スコアとしては、数値パラメータ(本実施形態では、1~5の数値パラメータ)を用いる。数値パラメータの設定は、人またはコンピュータが行う。 In the machine learning of trained models, a large amount of teacher data is input using a machine learning algorithm such as a neural network as described above. The training data includes data in which a predetermined safety score is associated with image data obtained by photographing a travel route in the workplace 2 . A numerical parameter (in this embodiment, a numerical parameter of 1 to 5) is used as the safety score. Numeric parameters are set by a human or a computer.

例えば、ラック3の近くを走行し、かつ走行ルート上に人がいる場合は、安全性が低いと判断して数値パラメータを1に設定する。人はいないが別の作業車(例えば、別のフォークリフト)がいる場合は、数値パラメータを2に設定する。人も別の作業車もいない場合は、安全性が高いと判断して数値パラメータを3以上に設定する。画像データが示す走行ルートの状況と安全性の程度との間には、相関関係等の一定の関係が存在することを推認できる。 For example, if the vehicle is traveling near the rack 3 and there are people on the traveling route, it is determined that the safety is low and the numerical parameter is set to 1. If there is no person but another work vehicle (eg another forklift), set the numeric parameter to 2. If there is neither a person nor another working vehicle, it is determined that the safety is high, and the numerical parameter is set to 3 or more. It can be inferred that there is a certain relationship such as a correlation between the situation of the travel route indicated by the image data and the degree of safety.

処理部205は、画像データ生成部203から取得した画像データを学習モデル部204に入力することで、学習モデル部204から安全性スコアを取得するよう構成されている。処理部205は、取得した安全性スコアをマップ生成部207に出力する。また、処理部205は、学習モデル部204に入力した画像データに学習モデル部204から取得した安全性スコアを関連付けて、安全性スコア付きの画像データを生成し、当該安全性スコア付きの画像データを管理装置100Aに送信してもよい。 The processing unit 205 is configured to acquire a safety score from the learning model unit 204 by inputting the image data acquired from the image data generation unit 203 to the learning model unit 204 . The processing unit 205 outputs the acquired safety score to the map generation unit 207 . Further, the processing unit 205 associates the image data input to the learning model unit 204 with the safety score acquired from the learning model unit 204 to generate image data with a safety score, and generates image data with the safety score. may be transmitted to the management device 100A.

位置推定部206は、車体210の現在地(自己位置)を認識し、車体210の現在地に関する現在地情報を取得するよう構成されている。本実施形態では、位置推定部206は、レーザースキャナ212およびその演算部に相当する。位置推定部206は、取得した現在地情報をマップ生成部207に出力する。 The position estimation unit 206 is configured to recognize the current position (self-position) of the vehicle body 210 and acquire current position information regarding the current position of the vehicle body 210 . In this embodiment, the position estimation unit 206 corresponds to the laser scanner 212 and its computation unit. Position estimation section 206 outputs the acquired current location information to map generation section 207 .

マップ生成部207は、作業場2における安全性スコアの分布を示す環境マップを記憶および生成するよう構成されている。図4(B)に示すように、環境マップは、所定の領域ごとに安全性スコアが関連付けされている作業場2のモデル図M2である。安全性スコアは、後述するように適宜更新される。 The map generator 207 is configured to store and generate an environment map showing the distribution of safety scores in the workplace 2 . As shown in FIG. 4B, the environment map is a model diagram M2 of the workplace 2 in which a safety score is associated with each predetermined area. Safety scores are updated as appropriate, as described below.

マップ生成部207は、処理部205から安全性スコアが入力され、かつ位置推定部206から現在地情報(自己位置)が入力されると、処理部205から取得した安全性スコアを現在スコアとし、環境マップ内の自己位置における安全性スコアを過去スコアとし、現在スコアと過去スコアとを比較する。マップ生成部207は、比較した後、安全性の低い方の安全性スコア(小さい数値パラメータの安全性スコア)を制御部208に出力する。 When the safety score is input from the processing unit 205 and the current location information (self-location) is input from the position estimation unit 206, the map generation unit 207 uses the safety score acquired from the processing unit 205 as the current score, The safety score at the self-position within the map is set as the past score, and the current score and the past score are compared. After the comparison, the map generator 207 outputs to the controller 208 the lower safety score (safety score of the smaller numerical parameter).

マップ生成部207は、安全性スコアを制御部208に出力した後に、現在スコアを用いて過去スコアを更新するよう構成されている。更新方法として、マップ生成部207は、現在スコアを単純に過去スコアに置き換えてもよいし、少なくとも1回分の過去スコアと現在スコアとの平均値を算出して過去スコアを当該平均値と置き換えてもよい。 The map generation unit 207 is configured to update the past score using the current score after outputting the safety score to the control unit 208 . As an update method, the map generation unit 207 may simply replace the current score with the past score, or calculate the average value of the past score for at least one time and the current score, and replace the past score with the average value. good too.

処理部205、マップ生成部207および制御部208は、例えば、少なくとも1つのマイコンで構成され、マイコンのCPUが所定のプログラムを実行すること等によって処理部205、マップ生成部207および制御部208の各種機能が実現される。 The processing unit 205, the map generation unit 207, and the control unit 208 are configured by, for example, at least one microcomputer, and the processing unit 205, the map generation unit 207, and the control unit 208 are controlled by the CPU of the microcomputer executing a predetermined program. Various functions are realized.

制御部208は、マップ生成部207から取得した安全性スコアに応じて、報知光の出力態様および警報音の出力状態を調整するよう構成されている。制御部208は、表1に示すような、安全性スコアと報知光および警報音との関係が規定されたデータを記憶している。 The control unit 208 is configured to adjust the output mode of the notification light and the output state of the alarm sound according to the safety score acquired from the map generation unit 207 . The control unit 208 stores data defining the relationship between the safety score, the notification light, and the alarm sound, as shown in Table 1.

Figure 2022147047000002
Figure 2022147047000002

安全性スコアの数値パラメータが5の場合、制御部208は、照明部201の報知光の出力態様を常時点灯の状態にして、警報音出力部202の警報音をオフ状態にする。安全性スコアの数値パラメータが4~2の範囲では、制御部208は、報知光の出力態様を点滅の状態にするとともに、安全性スコアの数値パラメータが小さくなる(安全性が低くなる)につれて、点滅の速度を速くする。安全性スコアの数値パラメータが1の場合、制御部208は、報知光の出力態様を消灯の状態にする一方、警報音出力部202に警報音を出力させる。 When the numerical parameter of the safety score is 5, the control unit 208 sets the output mode of the notification light of the illumination unit 201 to the constant lighting state, and turns off the alarm sound of the alarm sound output unit 202 . When the numerical parameter of the safety score is in the range of 4 to 2, the control unit 208 sets the output mode of the notification light to a blinking state, and as the numerical parameter of the safety score decreases (safety decreases), Increase blinking speed. When the numerical parameter of the safety score is 1, the control unit 208 turns off the output mode of the notification light and causes the alarm sound output unit 202 to output an alarm sound.

制御部208は、安全性スコアの数値パラメータが大きくなる(安全性が高くなる)方向に報知光の出力態様を変化させる場合、頻繁に報知光の出力態様が変化するのを防ぐために、前回の出力態様の変化から所定時間(例えば、数秒間)経過した後に変化させてもよい。 When the control unit 208 changes the output mode of the notification light in the direction in which the numerical parameter of the safety score increases (the safety increases), the control unit 208 prevents frequent changes in the output mode of the notification light. The change may be made after a predetermined time (for example, several seconds) has passed since the change in the output mode.

上記のとおり、本実施形態に係る無人フォークリフト200Aでは、画像データに基づいてリアルタイムで生成された安全性スコアを現在スコアとし、環境マップ内の自己位置における安全性スコアを過去スコアとし、安全性の低い方の安全性スコアに基づいて報知光の出力態様を変化させる。 As described above, in the unmanned forklift 200A according to the present embodiment, the safety score generated in real time based on the image data is the current score, the safety score at the self-position in the environment map is the past score, and the safety score is The output mode of the notification light is changed based on the lower safety score.

例えば、作業者が頻繁に作業している領域において作業者が死角領域(例えば、作業者がラック3や荷物に隠れて撮影手段から見えない領域)に入った場合、現在スコアよりも過去スコアの方が安全性の低いスコア(小さい数値パラメータのスコア)となるため、無人フォークリフト200Aは、過去スコアに基づいて報知光の出力態様を変化させる。したがって、本実施形態に係る無人フォークリフト200Aによれば、死角領域にいる作業者に対しても適切に注意喚起を促すことが可能となる。 For example, when the worker enters a blind spot area (for example, an area where the worker is hidden by the rack 3 or a load and cannot be seen from the photographing means) in an area where the worker frequently works, the past score is higher than the current score. Since the safer score is lower (small numerical parameter score), the unmanned forklift truck 200A changes the output mode of the notification light based on the past score. Therefore, according to the unmanned forklift truck 200A according to the present embodiment, it is possible to appropriately call attention to the worker in the blind spot area.

[第2実施形態]
図5に、本発明の第2実施形態に係る荷役システム1Bのブロック図を示す。荷役システム1Bは、管理装置100Bと、少なくとも1台のレーザー誘導方式の無人フォークリフト200B(本発明の「フォークリフト」に相当)とを備える。無人フォークリフト200Bは、マップ生成部207を備えていないことを除いて第1実施形態と共通する。
[Second embodiment]
FIG. 5 shows a block diagram of a cargo handling system 1B according to the second embodiment of the present invention. The cargo handling system 1B includes a management device 100B and at least one laser-guided unmanned forklift 200B (corresponding to the "forklift" of the present invention). The unmanned forklift 200B is the same as the first embodiment except that it does not include the map generator 207. FIG.

管理装置100Bは、無人フォークリフト200Bの走行および荷役作業を管理する。管理装置100Bは、マップ生成部104、収集部105、およびパラメータ更新部106を備えることを除いて第1実施形態と共通する。 The management device 100B manages traveling and cargo handling work of the unmanned forklift 200B. The management device 100B is the same as the first embodiment except that it includes a map generator 104, a collector 105, and a parameter updater .

マップ生成部104は、第1実施形態の無人フォークリフト200Aが備えるマップ生成部207と同じ構成である。すなわち、マップ生成部104は、無人フォークリフト200Bから安全性スコアおよび現在地情報(自己位置)が入力されると、無人フォークリフト200Bから取得した安全性スコアを現在スコアとし、環境マップ内の自己位置における安全性スコアを過去スコアとし、現在スコアと過去スコアとを比較する。マップ生成部104は、比較した後、安全性の低い方の安全性スコア(小さい数値パラメータの安全性スコア)を無人フォークリフト200Bの制御部208に送信する。 The map generator 104 has the same configuration as the map generator 207 included in the unmanned forklift 200A of the first embodiment. That is, when the safety score and the current location information (self-position) are input from unmanned forklift 200B, map generation unit 104 uses the safety score obtained from unmanned forklift 200B as the current score, and calculates the safety score at the self-position within the environment map. The sex score is taken as the past score, and the current score and the past score are compared. After the comparison, the map generation unit 104 transmits the safety score of the lower safety (the safety score of the smaller numerical parameter) to the control unit 208 of the unmanned forklift 200B.

収集部105は、無人フォークリフト200Bから安全性スコア付きの画像データを収集し、当該安全性スコア付きの画像データに基づいてパラメータ更新部106に入力可能な学習用データを生成するよう構成されている。 The collection unit 105 is configured to collect image data with a safety score from the unmanned forklift 200B and generate learning data that can be input to the parameter update unit 106 based on the image data with the safety score. .

また、収集部105は、無人フォークリフト200Bから画像データ(画像データ生成部203で生成された安全性スコアが付いていない画像データ)を収集し、当該画像データに安全性スコアを紐付けした学習用データを生成してもよい。この場合、学習用データは、第1実施形態の教師データと同様にして生成することができる。すなわち、収集部105は、安全性スコアとして数値パラメータ(本実施形態では、1~5の数値パラメータ)を用いるとともに、個々の画像データに対して安全性スコアを設定する。例えば、ラック3の近くを走行し、かつ走行ルート上に人がいる場合は、安全性が低いと判断して小さい数値パラメータを設定する。一方で、人がいない場合は、安全性が高いと判断して大きい数値パラメータを設定する。画像データが示す走行ルートの状況と安全性の程度との間には、相関関係等の一定の関係が存在することを推認できる。 In addition, the collection unit 105 collects image data (image data generated by the image data generation unit 203 and without a safety score) from the unmanned forklift 200B, and associates the safety score with the image data for learning. data may be generated. In this case, learning data can be generated in the same manner as teacher data in the first embodiment. That is, the collection unit 105 uses a numerical parameter (in this embodiment, numerical parameters of 1 to 5) as a safety score, and sets a safety score for each piece of image data. For example, if the vehicle is traveling near the rack 3 and there are people on the traveling route, it is determined that the safety is low and a small numerical parameter is set. On the other hand, when there is no person, it is determined that the safety is high and a large numerical parameter is set. It can be inferred that there is a certain relationship such as a correlation between the situation of the travel route indicated by the image data and the degree of safety.

パラメータ更新部106は、無人フォークリフト200Bの学習モデル部204に含まれる機械学習アルゴリズムのパラメータ(例えば、ニューラルネットワークの重み付けのパラメータ)を更新するための更新データを生成する。パラメータ更新部106は、更新データを生成するために、ニューラルネットワーク等の機械学習アルゴリズムを用いて、学習用データに基づく機械学習を行う。パラメータ更新部106は、生成した更新データを、通信部101を介して無人フォークリフト200Bに送信する。 The parameter updating unit 106 generates update data for updating the parameters of the machine learning algorithm (for example, weighting parameters of the neural network) included in the learning model unit 204 of the unmanned forklift 200B. The parameter updating unit 106 performs machine learning based on learning data using a machine learning algorithm such as a neural network in order to generate update data. Parameter update unit 106 transmits the generated update data to unmanned forklift 200B via communication unit 101 .

無人フォークリフト200Bの学習モデル部204は、受信した更新データに基づいて機械学習アルゴリズムのパラメータを更新する。これにより、学習モデル部204は、更新されたパラメータを有する機械学習アルゴリズムに基づいて、安全性スコアを生成することができる。 The learning model unit 204 of the unmanned forklift 200B updates the parameters of the machine learning algorithm based on the received update data. This allows the learning model unit 204 to generate safety scores based on machine learning algorithms with updated parameters.

[第3実施形態]
図6に、本発明の第3実施形態に係る荷役システム1Cのブロック図を示す。荷役システム1Cは、管理装置100Cと、レーザー誘導方式の無人フォークリフト200C(本発明の「フォークリフト」に相当)と、少なくとも1台の作業車300Cとを備える。
[Third embodiment]
FIG. 6 shows a block diagram of a cargo handling system 1C according to the third embodiment of the present invention. The cargo handling system 1C includes a management device 100C, a laser-guided unmanned forklift 200C (corresponding to the "forklift" of the present invention), and at least one working vehicle 300C.

作業車300Cは、本実施形態では、レーザー誘導方式の無人フォークリフトであるが、管理装置100Cの管理下で走行し、かつ自己位置(本発明の「他車位置」に相当)の推定を行うことができるのであれば、任意のフォークリフトまたは無人搬送車であってもよい。 The work vehicle 300C, which is a laser-guided unmanned forklift in this embodiment, travels under the control of the management device 100C and estimates its own position (corresponding to the "other vehicle position" of the present invention). Any forklift or automated guided vehicle that can

管理装置100Cは、第1実施形態と共通する。無人フォークリフト200Bは、マップ生成部207を備えていないこと、その代わりに情報取得部209を備えていること、を除いて第1実施形態と共通する。 100 C of management apparatuses are common in 1st Embodiment. The unmanned forklift 200B is the same as the first embodiment except that it does not have a map generation unit 207 and instead has an information acquisition unit 209 .

情報取得部209は、作業車300Cの現在地(他車位置)に関する位置情報を取得するよう構成されている。情報取得部209は、位置情報を作業車300Cから直接または管理装置100Cを介して間接的に取得し、処理部205に出力する。 The information acquisition unit 209 is configured to acquire position information regarding the current location (other vehicle position) of the work vehicle 300C. The information acquisition unit 209 acquires position information directly from the work vehicle 300</b>C or indirectly via the management device 100</b>C, and outputs the position information to the processing unit 205 .

処理部205は、自己位置と他車位置との距離に応じて、学習モデル部204から取得した安全性スコアの安全性の程度(第1実施形態と同様の1~5の数値パラメータ)を変更して制御部208に出力する。 The processing unit 205 changes the degree of safety of the safety score acquired from the learning model unit 204 (numerical parameters of 1 to 5 as in the first embodiment) according to the distance between the self position and the position of the other vehicle. and output to the control unit 208 .

本実施形態では、処理部205は、学習モデル部204から取得した安全性スコアが示す安全性の程度(数値パラメータ)が所定の第1閾値以上で、かつ自己位置と他車位置との距離が所定の第2閾値以下の場合に、安全性スコアの安全性の程度を変更して制御部208に出力する。 In this embodiment, the processing unit 205 determines that the degree of safety (numerical parameter) indicated by the safety score acquired from the learning model unit 204 is equal to or greater than a predetermined first threshold, and the distance between the self position and the position of the other vehicle is If it is equal to or less than a predetermined second threshold, the degree of safety of the safety score is changed and output to the control unit 208 .

第1閾値は、例えば、撮影手段が撮影した画像に作業車300Cが映っていないときの安全性スコアのうち、最も小さい数値パラメータに設定される。本実施形態では、第1閾値は、数値パラメータ3に設定される。第2閾値は、例えば、図7に示すように、L1[m]に設定される。すなわち、処理部205は、安全性スコアの数値パラメータが3以上で、かつ自己位置と他車位置との距離がL1[m]以下の場合に、安全性スコアの数値パラメータを減少させて(例えば、1だけ小さくして)制御部208に出力する。 The first threshold is set to, for example, the smallest numerical parameter among the safety scores when the working vehicle 300C is not shown in the image captured by the image capturing means. In this embodiment, the first threshold is set to the numerical parameter 3. The second threshold is set to L1[m], for example, as shown in FIG. That is, the processing unit 205 reduces the numerical parameter of the safety score (for example , reduced by 1) and output to the control unit 208 .

図7の場合、ラック3の存在により撮影手段が撮影した画像に作業車300Cが映らないため、安全性スコアの数値パラメータが3以上となり、自己位置と他車位置との距離L2[m]はL1[m]以下であるため、安全性スコアの数値パラメータを減少させるための条件を満たす。 In the case of FIG. 7, since the work vehicle 300C is not shown in the image captured by the image capturing means due to the presence of the rack 3, the numerical parameter of the safety score is 3 or more, and the distance L2 [m] between the self position and the other vehicle position is Since it is less than or equal to L1[m], it satisfies the condition for decreasing the numerical parameter of the safety score.

本実施形態に係る無人フォークリフト200Cでは、処理部205は、自己位置と他車位置との距離(図7では、L2)に応じて、学習モデル部204から取得した安全性スコアの数値パラメータを変更して制御部208に出力し、制御部208は、処理部205から取得した安全性スコアに基づいて、報知光の出力態様を変化させる。これにより、例えば、撮影手段の死角領域にいる作業者(図7では、作業者X)の近くを作業車300Cが走行している場合、作業者に対して適切に注意喚起を促すことが可能となる。 In the unmanned forklift 200C according to the present embodiment, the processing unit 205 changes the numerical parameter of the safety score acquired from the learning model unit 204 according to the distance (L2 in FIG. 7) between the self position and the position of the other vehicle. and outputs it to the control unit 208 , and the control unit 208 changes the output mode of the notification light based on the safety score acquired from the processing unit 205 . As a result, for example, when the work vehicle 300C is traveling near a worker (worker X in FIG. 7) who is in the blind spot area of the photographing means, it is possible to appropriately call attention to the worker. becomes.

[第4実施形態]
図8に、本発明の第4実施形態に係る荷役システム1Dのブロック図を示す。荷役システム1Dは、管理装置100Dと、レーザー誘導方式の無人フォークリフト200D(本発明の「フォークリフト」に相当)と、少なくとも1台の作業車300Dとを備える。
[Fourth Embodiment]
FIG. 8 shows a block diagram of a cargo handling system 1D according to the fourth embodiment of the present invention. The cargo handling system 1D includes a management device 100D, a laser-guided unmanned forklift 200D (corresponding to the "forklift" of the present invention), and at least one working vehicle 300D.

無人フォークリフト200Dは、情報取得部209を備えていないことを除いて第3実施形態の無人フォークリフト200Cと共通する。作業車300Dは、任意のフォークリフトまたは無人搬送車であってもよいが、本実施形態では、作業車300Dの少なくとも1台は、無人フォークリフト200Dと同様の構成を備えるフォークリフトとする。 The unmanned forklift 200D is the same as the unmanned forklift 200C of the third embodiment except that the information acquisition unit 209 is not provided. The work vehicle 300D may be any forklift or automatic guided vehicle, but in this embodiment, at least one of the work vehicles 300D is a forklift having the same configuration as the unmanned forklift 200D.

管理装置100Dは、収集部105、パラメータ更新部106、情報取得部107、および演算部108を備えることを除いて第3実施形態の管理装置100Cと共通する。収集部105およびパラメータ更新部106は、第2実施形態と共通する。 The management device 100D is the same as the management device 100C of the third embodiment except that it includes a collection unit 105, a parameter update unit 106, an information acquisition unit 107, and a calculation unit . A collection unit 105 and a parameter update unit 106 are common to those in the second embodiment.

情報取得部107は、通信部101を介して、無人フォークリフト200Dの現在地(自己位置)に関するに関する現在地情報と、作業車300Dの現在地(他車位置)に関する位置情報を取得するよう構成されている。 The information acquisition unit 107 is configured to acquire, via the communication unit 101, current location information regarding the current location (self location) of the unmanned forklift 200D and location information regarding the current location (other vehicle location) of the work vehicle 300D.

演算部108は、情報取得部107が取得した現在地情報および位置情報に基づいて、自己位置と他車位置との距離(例えば、図7のL2)を算出するよう構成されている。図8では、演算部108と統括制御部102とを別々に示しているが、統括制御部102が演算部108の機能を備えていてもよい。 The calculation unit 108 is configured to calculate the distance (for example, L2 in FIG. 7) between the self position and the position of the other vehicle based on the current location information and the position information acquired by the information acquisition unit 107 . Although FIG. 8 shows the computation unit 108 and the integrated control unit 102 separately, the integrated control unit 102 may have the functions of the computation unit 108 .

演算部108は、算出した距離を、通信部101を介して無人フォークリフト200Dの処理部205に送信する。処理部205は、管理装置100Dから取得した自己位置と他車位置との距離に応じて、第3実施形態と同様に、学習モデル部204から取得した安全性スコアの安全性の程度(本実施形態では、1~5の数値パラメータ)を変更して制御部208に出力する。 The calculation unit 108 transmits the calculated distance to the processing unit 205 of the unmanned forklift 200D via the communication unit 101. FIG. Similar to the third embodiment, the processing unit 205 calculates the degree of safety of the safety score obtained from the learning model unit 204 (this embodiment In the form, numerical parameters 1 to 5) are changed and output to the control unit 208 .

制御部208は、処理部205から取得した安全性スコアに基づいて、報知光の出力態様を変化させる。これにより、例えば、撮影手段の死角領域にいる作業者の近くを作業車300Dが走行している場合、作業者に対して適切に注意喚起を促すことが可能となる。 Based on the safety score acquired from the processing unit 205, the control unit 208 changes the output mode of the notification light. As a result, for example, when the work vehicle 300D is traveling near the worker who is in the blind spot area of the photographing means, it is possible to appropriately call the worker's attention.

[第5実施形態]
図9に、本発明の第5実施形態に係る荷役システム1Eのブロック図を示す。荷役システム1Eは、管理装置100Eと、少なくとも1台の有人フォークリフト200E(本発明の「フォークリフト」に相当)とを備える。
[Fifth embodiment]
FIG. 9 shows a block diagram of a cargo handling system 1E according to the fifth embodiment of the present invention. The cargo handling system 1E includes a management device 100E and at least one manned forklift 200E (corresponding to the "forklift" of the present invention).

管理装置100Eは、第1実施形態と共通する。管理装置100Eは、例えば、有人フォークリフト200Eと通信を行い、有人フォークリフト200Eに荷役作業のスケジュールを送信する。 A management device 100E is common to the first embodiment. The management device 100E, for example, communicates with the manned forklift 200E and transmits the cargo handling schedule to the manned forklift 200E.

有人フォークリフト200Eは、図10に示すように、車体220と、荷役装置221と、車体220の上部に設けられたヘッドガード222とを備えるカウンターバランスタイプのフォークリフトである。ヘッドガード222には、照明部201が取り付けられている。荷役装置221は、車体220の前後に水平移動可能に設けられたマストと、マストに昇降可能に設けられたフォークとを含む。 The manned forklift 200E is a counterbalance type forklift that includes a vehicle body 220, a cargo handling device 221, and a head guard 222 provided on the upper portion of the vehicle body 220, as shown in FIG. The lighting section 201 is attached to the head guard 222 . The cargo handling device 221 includes a mast horizontally movable in front and rear of the vehicle body 220 and a fork vertically movable on the mast.

再び図9を参照して、有人フォークリフト200Eは、照明部201と、警報音出力部202と、画像データ生成部203と、学習モデル部204と、処理部205と、制御部208とを備える。照明部201、警報音出力部202、画像データ生成部203、学習モデル部204、および処理部205は、第1実施形態と共通する。 Referring to FIG. 9 again, manned forklift 200E includes illumination unit 201, alarm sound output unit 202, image data generation unit 203, learning model unit 204, processing unit 205, and control unit 208. An illumination unit 201, an alarm sound output unit 202, an image data generation unit 203, a learning model unit 204, and a processing unit 205 are common to those in the first embodiment.

有人フォークリフト200Eは、図10に示すようにフォークが進行方向とは逆を向く状態で走行する場合もあれば、フォークが進行方向を向く状態で走行する場合もある。このため、照明部201は、フォークとは逆側の路面に向かって報知光を照射する第1のLEDライトと、フォークの側の路面に向かって報知光を照射する第2のLEDライト(図10では、図示せず)を含むことが好ましい。第2のLEDライトは、例えば、マストに設けてもよい。 As shown in FIG. 10, the manned forklift truck 200E may travel with the forks facing the direction opposite to the direction of travel, or may travel with the forks facing the direction of travel. For this reason, the lighting unit 201 includes a first LED light that emits notification light toward the road surface on the opposite side of the fork and a second LED light that emits notification light toward the road surface on the fork side (Fig. 10, not shown). A second LED light may be provided, for example, on the mast.

画像データ生成部203の撮影手段は、照明部201の第1のLEDライトが報知光を照射する方向の画像を撮影する第1の撮影手段と、照明部201の第2のLEDライトが報知光を照射する方向の画像を撮影する第2の撮影手段とを含むことが好ましい。あるいは、画像データ生成部203の撮影手段が、制御部208の制御下で、撮影する向きを変えることができるように構成されていてもよい。 The photographing means of the image data generating unit 203 includes a first photographing unit for photographing an image in the direction in which the first LED light of the illumination unit 201 irradiates the notification light, and a second LED light of the illumination unit 201 that emits the notification light. and second photographing means for photographing an image in the direction in which the is irradiated. Alternatively, the photographing means of the image data generation unit 203 may be configured to be able to change the photographing direction under the control of the control unit 208 .

制御部208は、安全性スコアを処理部205から取得することを除いて、第1実施形態と共通する。制御部208は、処理部205から取得した安全性スコアに応じて、報知光の出力態様および警報音の出力状態を調整する。 The control unit 208 is the same as the first embodiment except that it acquires the safety score from the processing unit 205 . The control unit 208 adjusts the output mode of the notification light and the output state of the alarm sound according to the safety score acquired from the processing unit 205 .

本実施形態に係る有人フォークリフト200Eによれば、走行ルートの安全性の程度を示す安全性スコアに基づいて報知光の出力態様を変化させるので、作業者に対してより適切な注意喚起を促すことが可能となる。 According to the manned forklift truck 200E according to the present embodiment, since the output mode of the notification light is changed based on the safety score indicating the degree of safety of the travel route, it is possible to urge the operator to be more appropriately alerted. becomes possible.

[変形例]
以上、本発明に係るフォークリフトおよび荷役システムの実施形態について説明したが、本発明は上記実施形態に限定されるものではない。
[Modification]
Although the embodiments of the forklift truck and cargo handling system according to the present invention have been described above, the present invention is not limited to the above embodiments.

本発明のフォークリフトは、車体と、車体の進行方向の画像を撮影して画像データを生成する画像データ生成部と、画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、画像データを学習モデル部に入力することで学習モデル部から安全性スコアを取得する処理部と、進行方向の路面に向かって報知光を照射する照明部と、照明部を制御する制御部と、を備え、制御部は、安全性スコアに基づいて、報知光の出力態様を変化させるのであれば、適宜構成を変更できる。 The forklift of the present invention includes a vehicle body, an image data generation unit that captures an image in the traveling direction of the vehicle body and generates image data, and when image data is input, a machine learning algorithm having a predetermined parameter is used to A learning model section machine-learned to generate a safety score that indicates the degree of safety of the vehicle's driving route, and a process of obtaining a safety score from the learning model section by inputting image data into the learning model section. , a lighting unit that emits notification light toward the road surface in the traveling direction, and a control unit that controls the lighting unit, and the control unit changes the output mode of the notification light based on the safety score. If so, the configuration can be changed as appropriate.

本発明のフォークリフトは、無人フォークリフトであってもよいし、有人フォークリフトであってもよい。無人フォークリフトは、レーザー誘導方式の無人フォークリフトに限定されるものではなく、別の方式の無人フォークリフトでもよいし、有人運転と無人運転とを切り替え可能な有人無人フォークリフトでもよい。有人フォークリフトは、カウンターバランスタイプに限定されるものではなく、リーチタイプ、ピッキングリフト、またはラックフォークタイプのものでもよい。 The forklift of the present invention may be an unmanned forklift or a manned forklift. The unmanned forklift is not limited to a laser-guided unmanned forklift, but may be another type of unmanned forklift, or a manned and unmanned forklift capable of switching between manned and unmanned operations. The manned forklift is not limited to the counterbalance type, but may be of the reach type, picking lift, or rack fork type.

本発明の無人フォークリフトは、自律走行機構を備えることが好ましい。自律走行機構は、例えば、レーザー誘導機構またはSLAM誘導機構を含む。レーザー誘導機構は、上記実施形態で示したように、レーザースキャナと壁等に設けられた反射体とを用いて特定した自己位置および姿勢(姿勢角)に基づいて自律走行するための機構である。SLAM誘導機構は、自己位置の推定および環境地図の作成を行うSLAMにより特定した自己位置および姿勢に基づいて自律走行するための機構である。 The unmanned forklift of the present invention preferably has an autonomous travel mechanism. The autonomous running mechanism includes, for example, a laser guidance mechanism or a SLAM guidance mechanism. As shown in the above embodiment, the laser guidance mechanism is a mechanism for autonomous travel based on the self-position and attitude (attitude angle) specified using a laser scanner and a reflector provided on a wall or the like. . The SLAM guidance mechanism is a mechanism for autonomous travel based on the self-position and attitude specified by SLAM, which estimates the self-position and creates an environment map.

本発明の制御部は、報知光の出力態様を変化させる方法として、報知光の点滅速度を変化させる以外の方法を含んでもよい。例えば、下記の表2のように報知光の色を変化させてもよいし、報知光の色を変化させつつ上記実施形態のように点滅速度も変化させてもよい。

Figure 2022147047000003
The control unit of the present invention may include a method other than changing the flashing speed of the notification light as a method of changing the output mode of the notification light. For example, the color of the notification light may be changed as shown in Table 2 below, or the flashing speed may be changed as in the above embodiment while changing the color of the notification light.
Figure 2022147047000003

第2実施形態に係る収集部105およびパラメータ更新部106は、管理装置100Bではなく、無人フォークリフト200Bに備えられていてもよい。しかしながら、大量のデータを取得できるという観点からは、管理装置100Bが収集部105およびパラメータ更新部106を備えることが好ましい。第4実施形態についても同様である。 The collection unit 105 and the parameter update unit 106 according to the second embodiment may be provided in the unmanned forklift 200B instead of the management device 100B. However, from the viewpoint of being able to acquire a large amount of data, it is preferable that the management device 100B include the collection unit 105 and the parameter update unit 106. FIG. The same applies to the fourth embodiment.

1A~1E 荷役システム
2 作業場
3 ラック
4 反射板
100A~100E 管理装置
101 通信部
102 統括制御部
103 表示部
104 マップ生成部
105 収集部
106 パラメータ更新部
107 情報取得部
108 演算部
200A~200D 無人フォークリフト
200E 有人フォークリフト
201 照明部
202 警報音出力部
203 画像データ生成部
204 学習モデル部
205 処理部
206 位置推定部
207 マップ生成部
208 制御部
209 情報取得部
210、220 車体
211、221 荷役装置
212 レーザースキャナ
222 ヘッドガード
300C、300D 作業車
1A to 1E Cargo handling system 2 Workplace 3 Rack 4 Reflector 100A to 100E Management device 101 Communication unit 102 Integrated control unit 103 Display unit 104 Map generation unit 105 Collection unit 106 Parameter update unit 107 Information acquisition unit 108 Calculation unit 200A to 200D Unmanned forklift 200E Manned forklift 201 Lighting unit 202 Warning sound output unit 203 Image data generation unit 204 Learning model unit 205 Processing unit 206 Position estimation unit 207 Map generation unit 208 Control unit 209 Information acquisition unit 210, 220 Vehicle body 211, 221 Cargo handling device 212 Laser scanner 222 Head guard 300C, 300D work vehicle

Claims (7)

作業場において荷役作業を行うフォークリフトであって、
車体と、
前記車体の進行方向の画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記進行方向の路面に向かって報知光を照射する照明部と、
前記照明部を制御する制御部と、を備え、
前記制御部は、
前記安全性スコアに基づいて、前記報知光の出力態様を変化させる
ことを特徴とするフォークリフト。
A forklift that performs cargo handling work in a workshop,
a vehicle body;
an image data generating unit that captures an image of the traveling direction of the vehicle body and generates image data;
a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of a travel route of the vehicle body using a machine learning algorithm having predetermined parameters when the image data is input;
a processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit;
a lighting unit that emits notification light toward the road surface in the traveling direction;
A control unit that controls the lighting unit,
The control unit
A forklift, wherein an output mode of the notification light is changed based on the safety score.
自己位置の推定を行う位置推定部と、
前記作業場における前記安全性スコアの分布を示す環境マップを生成するマップ生成部と、を備え、
前記マップ生成部は、
前記処理部から取得した前記安全性スコアを現在スコアとし、前記環境マップ内の前記自己位置における前記安全性スコアを過去スコアとし、前記現在スコアと前記過去スコアとを比較して安全性の低い方の前記安全性スコアを前記制御部に出力し、
前記制御部は、
前記マップ生成部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させる
ことを特徴とする請求項1に記載のフォークリフト。
a position estimation unit that estimates the self-position;
a map generator that generates an environment map showing the distribution of the safety scores in the workplace;
The map generation unit
The safety score acquired from the processing unit is defined as a current score, the safety score at the self-position within the environment map is defined as a past score, and the current score and the past score are compared to determine which one has the lowest safety score. outputting the safety score of to the control unit;
The control unit
The forklift truck according to claim 1, wherein the output mode of the notification light is changed based on the safety score acquired from the map generator.
自己位置の推定を行う位置推定部と、
前記作業場で走行中の作業車の位置に関する他車位置を取得する情報取得部と、
を備え、
前記処理部は、
前記自己位置と前記他車位置との距離に応じて、前記学習モデル部から取得した前記安全性スコアの前記安全性の程度を変更して前記制御部に出力し、
前記制御部は、
前記処理部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させる
ことを特徴とする請求項1に記載のフォークリフト。
a position estimation unit that estimates the self-position;
an information acquisition unit that acquires the position of another vehicle related to the position of the work vehicle traveling in the workshop;
with
The processing unit is
changing the degree of safety of the safety score acquired from the learning model unit according to the distance between the self position and the other vehicle position, and outputting the safety score to the control unit;
The control unit
The forklift truck according to claim 1, wherein the output mode of the notification light is changed based on the safety score acquired from the processing unit.
管理装置と、前記管理装置の管理下で作業場において荷役作業を行う少なくとも1台のフォークリフトと、を備える荷役システムであって、
前記フォークリフトは、
車体と、
前記車体の進行方向の画像を撮影して画像データを生成する画像データ生成部と、
前記画像データが入力されると、所定のパラメータを有する機械学習アルゴリズムを用いて、前記車体の走行ルートの安全性の程度を示す安全性スコアを生成するように機械学習された学習モデル部と、
前記画像データを前記学習モデル部に入力することで前記学習モデル部から前記安全性スコアを取得する処理部と、
前記進行方向の路面に向かって報知光を照射する照明部と、
前記照明部を制御する制御部と、を備え、
前記制御部は、
前記安全性スコアに基づいて、前記報知光の出力態様を変化させる
ことを特徴とする荷役システム。
A cargo handling system comprising a management device and at least one forklift that performs cargo handling work in a workplace under the management of the management device,
The forklift is
a vehicle body;
an image data generating unit that captures an image of the traveling direction of the vehicle body and generates image data;
a learning model unit that is machine-learned to generate a safety score indicating the degree of safety of a travel route of the vehicle body using a machine learning algorithm having predetermined parameters when the image data is input;
a processing unit that acquires the safety score from the learning model unit by inputting the image data into the learning model unit;
a lighting unit that emits notification light toward the road surface in the traveling direction;
A control unit that controls the lighting unit,
The control unit
A cargo handling system, wherein an output mode of the notification light is changed based on the safety score.
前記フォークリフトは、自己位置の推定を行う位置推定部を備え、
前記管理装置は、
前記フォークリフトから前記安全性スコアおよび前記自己位置を取得するための通信部と、
前記作業場における前記安全性スコアの分布を示す環境マップを生成するマップ生成部と、を備え、
前記マップ生成部は、
前記フォークリフトから取得した前記安全性スコアを現在スコアとし、前記環境マップ内の前記フォークリフトの前記自己位置における前記安全性スコアを過去スコアとし、前記現在スコアと前記過去スコアとを比較して安全性の低い方の前記安全性スコアを前記フォークリフトの前記制御部に送信し、
前記制御部は、
前記マップ生成部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させる
ことを特徴とする請求項4に記載の荷役システム。
The forklift includes a position estimation unit that estimates its own position,
The management device
a communication unit for obtaining the safety score and the self-location from the forklift;
a map generator that generates an environment map showing the distribution of the safety scores in the workplace;
The map generation unit
The safety score obtained from the forklift is used as a current score, the safety score at the self-position of the forklift in the environment map is used as a past score, and the current score and the past score are compared to determine safety. transmitting the lower safety score to the controller of the forklift;
The control unit
5. The cargo handling system according to claim 4, wherein the output mode of the notification light is changed based on the safety score obtained from the map generator.
前記フォークリフトは、自己位置の推定を行う位置推定部を備え、
前記管理装置は、
前記フォークリフトの前記自己位置と前記作業場で走行中の作業車の位置に関する他車位置とを取得する情報取得部と、
前記自己位置と前記他車位置との距離を算出する演算部と、
を備え、
前記処理部は、
前記演算部から取得した前記距離に応じて、前記学習モデル部から取得した前記安全性スコアの前記安全性の程度を変更して前記制御部に出力し、
前記制御部は、
前記処理部から取得した前記安全性スコアに基づいて、前記報知光の前記出力態様を変化させる
ことを特徴とする請求項4に記載の荷役システム。
The forklift includes a position estimation unit that estimates its own position,
The management device
an information acquisition unit that acquires the self-position of the forklift and the position of other vehicles related to the position of the work vehicle traveling in the workshop;
a calculation unit that calculates the distance between the self position and the position of the other vehicle;
with
The processing unit is
according to the distance obtained from the calculation unit, changing the degree of safety of the safety score obtained from the learning model unit and outputting it to the control unit;
The control unit
5. The cargo handling system according to claim 4, wherein the output mode of the notification light is changed based on the safety score acquired from the processing unit.
前記処理部は、前記学習モデル部に入力した前記画像データに前記学習モデル部から取得した前記安全性スコアを関連付けた、安全性スコア付きの画像データを前記管理装置に送信し、
前記管理装置は、
前記安全性スコア付きの画像データを収集して学習用データを生成する収集部と、
前記学習用データに基づく機械学習を行い、前記学習モデル部に含まれる前記パラメータを更新するための更新データを生成し、前記更新データを前記学習モデル部に送信するパラメータ更新部と、
を備え、
前記学習モデル部は、前記更新データに基づいて前記パラメータを更新することを特徴とする請求項4~6のいずれか一項に記載の荷役システム。
The processing unit transmits image data with a safety score, in which the safety score obtained from the learning model unit is associated with the image data input to the learning model unit, to the management device,
The management device
a collection unit that collects the image data with the safety score and generates learning data;
a parameter updating unit that performs machine learning based on the learning data, generates update data for updating the parameters included in the learning model unit, and transmits the update data to the learning model unit;
with
The cargo handling system according to any one of claims 4 to 6, wherein the learning model unit updates the parameters based on the update data.
JP2021048141A 2021-03-23 2021-03-23 Forklift and cargo handling system Active JP7084101B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021048141A JP7084101B1 (en) 2021-03-23 2021-03-23 Forklift and cargo handling system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021048141A JP7084101B1 (en) 2021-03-23 2021-03-23 Forklift and cargo handling system

Publications (2)

Publication Number Publication Date
JP7084101B1 JP7084101B1 (en) 2022-06-14
JP2022147047A true JP2022147047A (en) 2022-10-06

Family

ID=82016019

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021048141A Active JP7084101B1 (en) 2021-03-23 2021-03-23 Forklift and cargo handling system

Country Status (1)

Country Link
JP (1) JP7084101B1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6874662B2 (en) * 2017-12-07 2021-05-19 株式会社豊田自動織機 Industrial vehicle
JP6586497B1 (en) * 2018-09-19 2019-10-02 三菱ロジスネクスト株式会社 Plug-in control device and plug-in control method
JP2021033701A (en) * 2019-08-26 2021-03-01 株式会社豊田自動織機 Work support system

Also Published As

Publication number Publication date
JP7084101B1 (en) 2022-06-14

Similar Documents

Publication Publication Date Title
US10829356B2 (en) De-centralized operational indicator system for a materials handling vehicle
KR20230004432A (en) Vehicle control by remote operator
CN106660215A (en) Warning system and robot system
KR20230019121A (en) Monitoring of logistics vehicles
CN109081272A (en) It is a kind of to mix the unmanned transhipment fork truck guided and method with vision based on laser
CN116888063A (en) Intelligent warehouse security mechanism
KR20220144392A (en) Positioning support system for material handling vehicles
JP2022147047A (en) Forklift and cargo handling system
JP6898054B2 (en) Cargo handling system
JP6918908B2 (en) Cargo handling system
JP7084098B1 (en) Forklift and cargo handling system
JPH107384A (en) Warning device for crane
JP7084099B1 (en) Forklift and cargo handling system
CN111844038B (en) Robot motion information identification method, obstacle avoidance robot and obstacle avoidance system
EP4049964A1 (en) Industrial vehicle
EP2919150A1 (en) Safety system for vehicles
JP7017294B2 (en) Manned unmanned forklift and cargo handling system
CN113739090A (en) Automatic lighting device
JP6874174B1 (en) Cargo handling system and management equipment
JP7478198B2 (en) Guidance System
JP6884240B1 (en) Unmanned work vehicle and cargo handling system
KR20230167195A (en) Anti-collision system and method for construction machinery
JP2024053777A (en) Guidance System
KR20230099709A (en) Automated guided vehicle for tracking worker
JP2023177780A (en) Cargo-handling vehicle and control method of the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210324

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220412

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220601

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220601

R150 Certificate of patent or registration of utility model

Ref document number: 7084101

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150