JP7258389B2 - クレーン用情報処理装置 - Google Patents
クレーン用情報処理装置 Download PDFInfo
- Publication number
- JP7258389B2 JP7258389B2 JP2022163092A JP2022163092A JP7258389B2 JP 7258389 B2 JP7258389 B2 JP 7258389B2 JP 2022163092 A JP2022163092 A JP 2022163092A JP 2022163092 A JP2022163092 A JP 2022163092A JP 7258389 B2 JP7258389 B2 JP 7258389B2
- Authority
- JP
- Japan
- Prior art keywords
- crane
- load
- suspended load
- information processing
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 185
- 238000012545 processing Methods 0.000 claims description 124
- 238000001514 detection method Methods 0.000 claims description 44
- 241000288140 Gruiformes Species 0.000 description 324
- 230000033001 locomotion Effects 0.000 description 192
- 238000000034 method Methods 0.000 description 189
- 238000012423 maintenance Methods 0.000 description 98
- 230000008569 process Effects 0.000 description 92
- 238000010801 machine learning Methods 0.000 description 74
- 230000006870 function Effects 0.000 description 65
- 238000011156 evaluation Methods 0.000 description 52
- 230000032258 transport Effects 0.000 description 46
- 230000005856 abnormality Effects 0.000 description 39
- 238000005457 optimization Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 27
- 230000005484 gravity Effects 0.000 description 27
- 230000008859 change Effects 0.000 description 24
- 230000009471 action Effects 0.000 description 23
- 239000003550 marker Substances 0.000 description 23
- 230000036544 posture Effects 0.000 description 15
- 230000003287 optical effect Effects 0.000 description 14
- 238000003745 diagnosis Methods 0.000 description 13
- 238000004364 calculation method Methods 0.000 description 10
- 230000006872 improvement Effects 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 9
- 230000002159 abnormal effect Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 8
- 230000002787 reinforcement Effects 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 7
- 230000002354 daily effect Effects 0.000 description 7
- 238000007689 inspection Methods 0.000 description 7
- 238000012502 risk assessment Methods 0.000 description 7
- 238000005520 cutting process Methods 0.000 description 6
- 238000009826 distribution Methods 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 5
- 230000000737 periodic effect Effects 0.000 description 5
- 238000012549 training Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012854 evaluation process Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000013439 planning Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000003442 weekly effect Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 230000001186 cumulative effect Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 239000000779 smoke Substances 0.000 description 3
- 238000011282 treatment Methods 0.000 description 3
- 239000002699 waste material Substances 0.000 description 3
- 206010000117 Abnormal behaviour Diseases 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 2
- 238000004220 aggregation Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000003066 decision tree Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000000474 nursing effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000012384 transportation and delivery Methods 0.000 description 2
- 238000004804 winding Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000007621 cluster analysis Methods 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003754 machining Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 239000002243 precursor Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000035484 reaction time Effects 0.000 description 1
- 238000000611 regression analysis Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/18—Control systems or devices
- B66C13/46—Position indicators for suspended loads or for crane elements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/18—Control systems or devices
- B66C13/48—Automatic control of crane drives for producing a single or repeated working cycle; Programme control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C15/00—Safety gear
- B66C15/06—Arrangements or use of warning devices
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C15/00—Safety gear
- B66C15/06—Arrangements or use of warning devices
- B66C15/065—Arrangements or use of warning devices electrical
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Control And Safety Of Cranes (AREA)
Description
近年、特に天井クレーンについて、その有用性を高めるための種々の提案がなされている。例えば、特許文献1は、クレーンとともに移動するカメラで撮影した画像に基づいてクレーンの水平方向の位置を特定する技術を開示している。クレーンの位置が特定できれば、これによってクレーンを種々の用途に活用することが可能となる。また、特許文献2は、クレーンに取り付けたカメラによって、吊荷周辺の危険領域に人がいないかを判断する技術を開示している。
(1)クレーンを稼働させた実績を客観的かつ視覚的に把握することができなかった。そもそも、クレーンの移動距離がどれだけになるのか、クレーンでどれだけの吊荷を運搬したのか、などの実績を客観的なデータとして記憶されてはいなかった。
本発明は、上述した種々の点で、固定の領域内で移動するクレーンについて、その有用性を高めるために、クレーンの稼働中に取得される情報を処理する技術を提供することを目的とする。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を検出する位置検出部と、
該位置情報を時系列で記憶する稼働実績データベースと、
前記稼働実績データベースから、前記位置情報を読み出し、前記吊上装置の移動軌跡を表示する表示制御部とを備える情報処理装置とすることができる。
第1の構成では、位置情報を時系列で記憶しているため、移動軌跡の表示は、吊上装置を移動軌跡に沿って移動させた動画の形で提供することもできる。
移動軌跡の表示先も種々の選択が可能である。例えば、情報処理装置とネットワーク等で接続されたコンピュータのディスプレイや、タブレット、スマートフォンなどを用いることができる。
(1)吊上装置とともに移動し、下方の画像を撮影するカメラを備え、
クレーンが設置された場所について予め壁、設備や障害物などの基準物の位置をデータベースとして記憶しておき、
カメラで撮影された画像を解析して、前記基準物との位置関係を特定することにより、カメラの位置、ひいては吊上装置の位置情報を特定するようにしてもよい。
(2)吊上装置が移動する走行レールに、位置を特定するためのマーキングを施し、
吊上装置とともに移動するセンサによって、当該マーキングを読み取り、
該読み取り結果に基づいて、走行レール上の位置、ひいては吊上装置の位置情報を特定するようにしてもよい。
(3)吊上装置とともに移動し、該吊上装置から水平方向に周囲の障害物までの距離を測定可能な測距センサを備え、
クレーンが設置された場所について予め壁、設備や障害物などの基準物の位置をデータベースとして記憶しておき、
前記測距センサにより計測された前記吊上装置と基準物との距離に基づいて、前記測距センサの位置、ひいては吊上装置の位置情報を特定するようにしてもよい。
上述の方法に限らず、種々の方法をとることが可能である。
位置情報は、クレーンが設置された施設内のいずれかの点を基準とするxy座標、緯度経度などとすることができる。
また、時系列の態様としては、(1)位置情報と時効とを対応づけて記憶する態様、(2)位置情報を所定の時間間隔で取得するものとしておき、開始時刻と位置情報を記憶し、その後は、位置情報とその順序を対応づけて記憶する態様、などとすることができる。
吊上装置は、比較的直線的に移動することから、位置情報を取得した後、直線とみなせる位置情報は省略する前処理を施した上で記憶させるようにしてもよい。こうすることにより、データ量の削減を図ることができる。
前記稼働実績データベースは、前記位置情報とともに、前記吊荷を運搬中か否かを示す運搬情報を記憶しており、
前記表示制御部は、前記吊荷を運搬中の移動軌跡と、その他の移動軌跡とを視覚的に判別可能に表示するものとしてもよい。
表示態様としては、例えば、運搬中と空荷の状態で、移動軌跡を表示させる際の色、線種、線の太さなどを変える方法が挙げられる。また、運搬開始および運搬終了地点に、所定のマークを表示させてもよい。
また、上記態様においては、運搬中、その他を選択的に表示させてもよい。さらに、運搬中の1回目、2回目というように、特定の運搬のみ、または空荷の状態のみを表示させてもよい。
該吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記カメラで撮影された画像データを、時系列で記憶する画像データベースとを有し、
前記表示制御部は、前記移動軌跡に加えて、該移動軌跡上の各位置において撮影された画像とを表示させるものとしてもよい。
画像データは、吊上装置の位置情報または時刻と関連づけて記憶する。
画像の表示は、種々の態様で行うことができる。例えば、移動軌跡の一点をマウスその他で指示したときに、その点に対応する画像を表示させてもよい。この場合、指示された位置または時刻に完全に対応する画像が存在しない場合には、最も位置または時刻が近接する画像を抽出して表示させればよい。また別の態様として、画像の表示は、吊上装置を移動軌跡に沿って移動させる動画と併せ、それぞれの地点で撮影された画像を表示させてもよい。
前記稼働実績データベースは、さらに、前記吊上装置に対する操作を時系列で記憶しており、
前記表示制御部は、前記移動軌跡に加えて、該移動軌跡上の各位置における操作を表示させるものとしてもよい。
上記態様において、稼働実績データベースにおいて、操作の内容を表す操作データの記憶は種々の態様で行うことができる。例えば、吊上装置の位置情報と操作データとを対応づけて記憶させてもよい。また、位置情報とは別途、操作データを記憶させてもよい。吊荷の上げ下げを行う場合には、吊上装置の位置情報は変化しないはずであるから、操作データを個別に記憶させるものとすれば、無用な位置情報を記憶させる必要がなくなり、全体としてデータ量を抑制することが可能となる。
上記態様において、操作の表示は、種々の態様で行うことができる。移動軌跡上の一点をマウスその他で指示したときに、その点に対応する操作内容を表示させてもよい。また別の態様として、画像の表示は、吊上装置を移動軌跡に沿って移動させる動画と併せ、それぞれの地点で撮影された画像を表示させてもよい。
さらに、前記稼働実績データベースに基づいて、前記吊上装置の稼働について、所定の統計処理を行う統計処理部を有し、
前記表示制御部は、前記移動軌跡に加えて、前記統計処理の結果を表示させるものとしてもよい。
一日単位の統計処理だけでなく、週または月単位での統計処理を行い、または、日、週、月ごとの対比などの処理を行っても良い。
これらの情報を表示させることにより、クレーンの稼働実績を客観的に把握することができる。また、統計処理の結果を移動軌跡と併せて表示することにより、両者の相関を把握することができ、稼働実績の改善に役立てることができる。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンの稼働実績を記憶する稼働実績データベースと、
前記稼働実績データベースに基づいて、前記クレーンのメンテナンス時期を判断するメンテナンス時期判断部とを備える情報処理装置とすることができる。
第2の構成において記憶すべき稼働実績は、メンテナンス時期の判断方法に応じて決めることができる。稼働実績としては、例えば、吊上装置の移動距離、運搬した吊荷の総重量、クレーンのコントローラの操作回数、吊上装置の移動/停止回数、定期点検後の経過日数などが挙げられる。
メンテナンス時期の判断方法は、後述する通り機械学習を利用する方法、および機械学習によらない方法のいずれを用いても良い。機械学習によらない方法としては、過去の稼働実績データベースに基づく統計処理などによって、故障が生じる可能性、時期などを予測する方法が挙げられる。また、稼働実績データベースに基づいて、解析的に故障が生じる可能性、時期を予測する方法をとってもよい。
第2の構成における稼働実績データベースは、第1の構成と同様、種々の態様をとることができる。また、メンテナンス時期判断部も、吊上装置と接続された制御装置、コンピュータ、インターネットを介して接続されたサーバなどにソフトウェア的に設けることができる。ハードウェア的に構成しても差し支えない。
前記メンテナンス時期判断部は、前記クレーンの過去の稼働実績に基づいて機械学習によって得られたメンテナンス時期を判断するための学習モデルを用いて前記メンテナンス時期の判断を行うものとしてもよい。
学習モデルの生成は、後述する通り、種々の方法をとることができる。また、メンテナンス時期を判断するために用いられる稼働実績と、学習モデルを生成するために用いられる稼働実績とは異なっていても差し支えない。即ち、別途用意された稼働実績に基づいて学習モデルを生成し、それを情報処理装置に適用するものとしてもよい。
また、クレーンの稼働によって得られた稼働実績を反映して学習モデルを再学習させる機能を組み込んでもよい。
前記稼働実績には、前記クレーンに対する操作指示の実績が含まれ、
前記学習モデルは、前記クレーンに対する操作指示の実績に基づいて得られる、該クレーンのコントローラのメンテナンス時期を判断するための学習モデルであるものとしてもよい。
前記稼働実績データベースは、 前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置に対する操作と、該吊上装置の移動または停止の反応との関係を記憶しており、
前記学習モデルは、当該関係に基づいて、前記吊上装置を移動させるモータまたは該吊上装置のコントローラのメンテナンス時期を判断する学習モデルであるものとしてもよい。
上記態様では、このように、操作と移動または停止の反応との関係に基づいて、モータまたはコントローラのメンテナンス時期を精度良く判断することが可能となる。上記態様において用い得る稼働実績としては、例えば、操作から移動開始または停止開始までの反応時間、操作に対する加速度または減速度、操作中に到達した最大速度、移動中の速度の安定性などとすることができる。
前記稼働実績データベースは、前記吊荷の振動、前記吊上装置の巻上げ量と吊荷高さとの関係の少なくとも一方を記憶しており、
前記学習モデルは、当該データに基づいて、前記吊上装置のワイヤのメンテナンス時期を判断する学習モデルであるものとしてもよい。
上記態様において、吊荷の挙動は種々の方法で検知することができる。例えば、吊上装置に吊荷を撮影可能なカメラまたはレーザレーダなどの3次元点群を取得可能な装置を装着し、撮影した画像または3次元点群の解析によって振動を求めても良い。ワイヤ自体に歪みゲージを装着し、ワイヤ自体の振動を検出してもよい。また、吊荷高さは、吊荷装置に装着したレーザレーダなどによって、吊荷までの距離を計測することによって求められる。
即ち、
固定の領域内で吊荷を移動させるクレーンのメンテナンス時期を判断するための学習モデルを生成する学習モデル生成システムであって、
前記クレーンの稼働実績を記憶する稼働実績データベースと、
前記稼働実績データベースの稼働実績に対して、予め設定された所定の処理を施して学習用データを生成する学習用データ生成部と、
前記学習用データを用いて機械学習により、前記クレーンのメンテナンス時期を判断するための学習モデルを生成するメンテナンス時期判断モデル生成部とを備える学習モデル生成システムとすることができる。
学習データの生成は、学習モデルの内容に応じて種々の態様で行うことができる。例えば、稼働実績に基づいて操作指示の実績、操作と吊荷の移動または停止の反応との関係、吊荷の振動、吊上装置の巻き上げ量と吊荷高さとの関係などを表すデータを生成し、これを学習データとすることができる。
学習モデルの生成については、過去に故障が生じた稼働実績が十分に得られている場合には、教師あり学習、特に回帰分析を利用することができる。また、次に示す通り、教師なし学習も有用である。クレーンの稼働実績は、ほとんどが正常運転下でのデータになると考えられる。従って、教師なし学習によって、正常運転を示すデータのクラスタを判断する学習モデルを生成すれば、このクラスタから外れる傾向にある稼働実績が得られた場合には、異常が生じつつあることを意味すると考えられる。これによって、メンテナンス時期を判断することが可能となる。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンの稼働中における前記吊荷と、その周辺の人または障害物との位置関係を特定し、該位置関係を記憶する稼働実績データベースと、
前記稼働実績データベースに基づいて、前記クレーンの稼働についての危険の有無またはその程度を判断する危険度評価部を備える情報処理装置とすることができる。
位置関係は、種々の方法で取得することができる。例えば、吊上装置に下方を撮影可能なカメラまたはレーザレーダなどの3次元点群を取得可能な装置を装着し、撮影した画像または3次元点群の解析によって位置関係を求めても良い。位置関係には、吊荷とその周辺の人または障害物との距離、吊荷の移動方向を基準とした人等の方向などが挙げられる。また、これらの位置関係は、ある時点における静的な情報として取得してもよいし、一定期間の位置関係の変化という動的な情報として取得してもよい。動的な情報として取得する場合には、例えば、作業者が吊荷に接近し、一定期間、接触した後、離れたというように、一連の作業手順を把握することが可能となる。
危険の有無またはその程度の判断方法は、後述する通り機械学習を利用する方法、および機械学習によらない方法のいずれを用いても良い。機械学習によらない方法としては、吊荷と所定の位置関係にある場合は危険であるというように判断する方法や、過去の位置関係などと事故発生との統計処理によって、危険が生じる可能性などを予測する方法などが挙げられる。
第3の構成における危険とは、必ずしも吊荷と人または障害物との衝突に限るものではない。例えば、吊荷の落下や、吊荷の異常な挙動なども含まれる。これらの危険の判断については、例えば、吊荷とワイヤの位置関係、吊荷に対してワイヤが所定の手順で取り付けられたか、などに基づいて判断することができる。
前記危険度評価部は、前記吊荷の運搬を、所定の複数の場面に分け、場面ごとに、使用するデータおよび方法を変えて、前記判断を行うものとしてもよい。
前記吊荷の運搬に携わる作業者が予め設定された所定の基本動作を行ったか否かを判断する基本動作判断部を有し、
前記危険度評価部は、前記基本動作の実施の程度を考慮して前記判断を行うものとしてもよい。
基本動作の判断は、種々の方法で行うことができる。後述する通り、機械学習を用いてもよい。また、例えば、指さし確認のような動作であれば、作業者が、当該動作に特徴的な姿勢をとったか否かを画像等に基づいて判断してもよい。また、作業者が吊荷と一定期間接触していることが確認できた場合には、そのことに基づいて、吊荷に対する所定の点検がなされたものと判断してもよい。
前記危険度評価部は、前記クレーンの過去の稼働実績に基づいて機械学習によって得られた、危険を判断するための学習モデルを用いて前記危険の有無またはその程度の判断を行うものとしてもよい。
学習モデルの生成は、後述する通り、種々の方法をとることができる。また、危険を判断するために用いられる稼働実績と、学習モデルを生成するために用いられる稼働実績とは異なっていても差し支えない。即ち、別途用意された稼働実績に基づいて学習モデルを生成し、それを情報処理装置に適用するものとしてもよい。
また、クレーンの稼働によって得られた稼働実績を反映して学習モデルを再学習させる機能を組み込んでもよい。
前記危険度評価部は、前記危険の有無またはその程度の判断について、その理由を合わせて特定するものとしてもよい。
一方、機械学習を利用して危険を判断する場合は、その学習モデルに利用される稼働実績データを、理由として示してもよい。また、学習モデルとして、決定木のように判断過程を追跡しやすいモデルを用いている場合には、当該判断過程において、危険と判断される方向が選択されたノードに基づいて、理由を求めるようにしてもよい。
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を検出する位置検出部を有し、
前記稼働実績データベースは、前記位置情報を時系列で記憶しており、
さらに、前記稼働実績データベースから、前記位置情報を読み出し、前記吊上装置の移動軌跡を表示するとともに、前記危険度評価部による判断結果を該移動軌跡上の各位置と対応づけて表示する表示制御部を備えるものとしてもよい。
該吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記カメラで撮影された画像データを、時系列で記憶する画像データベースとを有し、
前記表示制御部は、前記移動軌跡に加えて、該移動軌跡上の各位置において撮影された画像とを表示させるものとしてもよい。
前記吊上装置を稼働する際に本来行われるべき前記基本動作を表す画像データを記憶する基本動作データベースを有し、
前記危険度評価部は、危険と判断した場合には、前記基本動作データベースから、本来行われるべき基本動作を選択し、
前記表示制御部は、前記基本動作データベースを用いて、前記選択された基本動作を表す画像を表示するものとしてもよい。
即ち、固定の領域内で吊荷を移動させるクレーンを稼働させるための基本動作が行われているか否かを判断するための学習モデルを生成する学習モデル生成システムであって、
本来行われるべき前記基本動作を表した教師データを記憶する基本動作データベースと、
前記教師データに基づいて、前記基本動作が行われているか否かを判断するための学習モデルを生成する基本動作判断用学習モデル生成部とを備える学習モデル生成システムとすることができる。
教師データとしては、基本動作を表す一連の静止画像の集合として用意することができる。また、作業者の動作のみを抽出した画像としておくことが好ましい。
実際の判断は、吊上装置に取り付けたカメラ等で撮影した画像に基づいて行われることになるため、教師データも、同様の条件で撮影した画像データを用いることが好ましい。
即ち、固定の領域内で吊荷を移動させるクレーンの稼働中における危険の有無およびその程度を判断するための学習モデルを生成する学習モデル生成システムであって、
前記クレーンの過去の稼働実績を記憶する稼働実績データベースと、
前記稼働実績データベースを読み込み、前記吊荷の運搬を、所定の複数の場面に分け、場面ごとに、予め設定された所定の処理を施して学習用データを生成する学習用データ生成部と、
前記学習用データを用いて機械学習により、前記場面ごとに、前記危険の有無およびその程度を判断するための学習モデルを生成する危険度判断モデル生成部とを備える学習モデル生成システムである。
場面ごとに分けて学習モデルを生成するのであるから、それに用いる稼働実績も、場面ごとに異なるものとしてもよい。
学習モデルの生成については、過去に危険が生じた稼働実績が十分に得られている場合には、教師あり学習を利用することができる。また、教師なし学習も有用である。クレーンの稼働実績は、ほとんどが危険のない正常運転下でのデータになると考えられる。従って、教師なし学習によって、危険のない正常運転を示すデータのクラスタを判断する学習モデルを生成すれば、このクラスタから外れる傾向にある稼働実績が得られた場合には、異常が生じつつあることを意味すると考えられる。これによって、危険の有無およびその程度を判断することが可能となる。
固定の領域内で吊荷を移動させるクレーンの稼働に関する情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の発着地の位置情報を入力する入力部と、
前記発着地を結び、所定の評価が最適となる最適経路を求める最適経路設定部を備える情報処理装置とすることができる。
第4の構成において、最適経路を求めるための「評価」は、種々考えられる。例えば、吊上装置の移動距離を短くするほど評価を高くしてもよい。吊上装置が移動方向を変える回数が少ないほど評価を高くしてもよい。
最適経路を求める方法は、機械学習を利用する方法、および機械学習によらず解析的に求める方法のいずれを用いても良い。機械学習を用いる場合には、所定の「評価」を報酬とする強化学習を利用することができる。
第4の構成は、クレーンの移動後に、その移動軌跡を踏まえて最適な経路を求めるものとしてもよい。また、クレーンを稼働させる前の計画段階で、最適経路を設定するようにしてもよい。
前記最適経路設定部は、前記吊上装置の移動について予め設定された拘束条件を考慮して前記最適経路を求めるものとしてもよい。
拘束条件としては、例えば、クレーンが設置された施設内の設備および障害物の移動の可否が挙げられる。こうすることにより、設備等が移動できず実現不能な経路が、最適経路として出力されることを回避できる。
障害物等の考慮は、吊荷の有無によって変えてもよい。例えば、吊荷の運搬中は、吊荷自体が設備や障害物に衝突しないよう最適経路を求め、空荷の状態では、吊荷装置は天井付近を移動するから、高さの低い設備等は無視して最適経路を求めることができる。
前記最適経路設定部は、前記吊上装置を操作する操作者の通路の位置を、前記拘束条件として考慮するものとしてもよい。
前記最適経路設定部は、前記吊上装置の移動方向が予め設定された所定数の方向に限定されていることを、前記拘束条件として考慮するものとしてもよい。
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を時系列で記憶する稼働実績データベースを有し、
前記最適経路設定部は、前記稼働実績データベースに蓄積された前記吊上装置の移動軌跡と前記最適経路のそれぞれに対して、前記評価のための指標を算出するものとしてもよい。
前記稼働実績データベースに蓄積された前記吊上装置の移動軌跡と、前記最適経路とを対比して表示する表示制御部とを備えるものとしてもよい。
また、最適経路の表示に合わせて、拘束条件として考慮した設備、障害物、作業者の通路などを表示してもよい。こうすることで、最適経路が求められた理由を理解しやすくなる。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンの稼働実績として、前記クレーンの稼働中における危険の有無またはその程度の判断結果、および前記クレーンの運転効率の少なくとも一方を、時系列的に記憶する稼働実績データベースと、
前記危険の程度が所定以上となる時点、または前記運転効率が所定以下となる時点を特定可能な態様で、前記稼働実績を表示する表示制御部とを備える情報処理装置とすることができる。
第5の構成において、対象となる時点は、種々の方法で決めることができる。例えば、危険の程度が高い時点は、危険が発生する確率としての「危険度」が所定値以上となる時点を特定すればよい。危険度は、吊荷と周囲との距離、位置関係などに応じて予め設定しておいてもよい。
運転効率については、例えば、吊荷の移動軌跡と最適経路との移動距離の比などに基づいて算出することができる。
前記表示制御部は、前記稼働実績の時間変化を表すグラフを表示するものとしてもよい。
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記カメラで撮影された画像データを、時系列で記憶する画像データベースとを有し、
前記表示制御部は、前記稼働実績データとともに、各時点において撮影された画像を表示させるものとしてもよい。
前記表示制御部は、前記稼働実績データのうち、類似したケースに対応するものを関連付け、該関連づけられたケースについて、対比できる態様で、前記表示を行うものとしてもよい。
固定の領域内で吊荷を移動させるクレーンによる運搬に関する情報を処理する情報処理装置であって、
複数の吊荷の運搬ケースに対して、運搬順序および前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の移動軌跡を記憶する稼働実績データベースと、
前記稼働実績データベースに基づいて、所定の評価が向上するように前記吊荷の運搬順序を改善した運搬シーケンスを求める運搬シーケンス最適化部を備える情報処理装置とすることができる。
評価は、例えば、吊上装置の移動距離とすることができる。複数の吊荷を運搬する場合、その順序によっては、吊上装置が空荷での移動距離が長くなり無駄が生じる。第6の構成によれば、移動距離が短くなるように、吊荷の運搬順序を最適化する。この結果、移動距離の無駄を抑制できる。最適化を図る際の評価は、移動距離に限らず、種々の設定が可能である。
前記運搬シーケンス最適化部は、前記吊荷の運搬順序に対して予め設定された拘束条件を考慮して前記運搬シーケンスを求めるものとしてもよい。
前記稼働実績データベースに蓄積された前記吊上装置の移動軌跡に対して、所定の評価が向上するよう該吊上装置の移動を改善した最適経路を求める最適経路設定部を有し、
前記運搬シーケンス最適化部は、前記最適経路を反映して前記運搬シーケンスを求めるものとしてもよい。
また、運搬シーケンスに影響を与えるのは、空荷の状態での移動軌跡であるから、かかる移動軌跡に対してのみ最適経路を求めるようにしてもよい。
固定の領域内で吊荷を移動させるクレーンの稼働中に関する情報を処理する情報処理装置であって、
前記クレーンが使用される施設内の設備および障害物のレイアウトを記憶するレイアウトデータベースと、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の移動軌跡を記憶する稼働実績データベースと、
前記稼働実績データベースに基づいて、所定の評価が向上するよう前記レイアウトを改善するレイアウト最適化部を備える情報処理装置とすることができる。
第7の構成において、最適レイアウトを求めるための「評価」は、種々考えられる。例えば、吊上装置の移動距離を短くするほど評価を高くしてもよい。吊荷の運搬経路を最短にするためには、発着地を結ぶ直線状の経路を運搬すればよい。この経路上に、施設内の設備または障害物が存在する場合には、これらを移動させれば、当該吊荷の運搬経路が最適になるレイアウトが得られることになる。最適レイアウトを求めるときには、吊荷の発着地自体も変更してもよい。頻繁に運搬する吊荷を、近くに置けるように場所を確保すれば、運搬経路が最適となるレイアウトが得られることになる。吊荷が複数存在する場合には、これらの要素を総合的に考慮して、最適のレイアウトを求めればよい。
最適経路を求める方法は、機械学習を利用する方法、および機械学習によらず解析的に求める方法のいずれを用いても良い。機械学習を用いる場合には、所定の「評価」を報酬とする強化学習を利用することができる。
前記レイアウト最適化部は、前記設備の移動について予め設定された拘束条件を考慮して前記レイアウトを求めるものとしてもよい。
前記稼働実績データベースは、複数の吊荷に対する運搬経路を記憶しており、
前記レイアウト最適化部は、該複数の吊荷に対する運搬経路の総和が最短となるよう前記レイアウトを求めるものとしてもよい。
前記レイアウト最適化部は、
前記吊荷の発着地を変更することで前記改善を試み、
その後、前記設備を移動することで前記改善を試みることで前記レイアウトを求めるものとしてもよい。
最適レイアウトを求める場合には、吊荷の発着地の変更と、設備等の移動の2つの要素が考えられる。上記態様では、この2つの要素のうち、より自由度の高い、吊荷の発着地の変更を優先するのである。こうすることにより、現状のレイアウトから移動しやすい最適レイアウトを求めることが可能となる。
前記レイアウト最適化部は、前記所定の評価を報酬とする強化学習によって前記レイアウトを求めるものとしてもよい。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置とともに移動し、前記吊荷と、その周辺の人または障害物との位置関係および姿勢を特定するためのデータを取得するデータ取得部と、
前記吊荷と、その周辺の人または障害物との位置関係および姿勢に基づき、事故が発生したか否かを判断する事故判断部とを備える情報処理装置とすることができる。
第8の構成では、吊荷と、その周辺の人または障害物との位置関係および姿勢を特定可能とすることにより、これらに基づいて、事故の発生を判断することができるため、事故への対処を速やかに行うことが可能となる。
第8の構成において、位置関係および姿勢の特定は、第3の構成で説明した種々の方法をとることができる。
事故の発生は、後述する通り機械学習を利用する方法、および機械学習によらない方法のいずれを用いても良い。機械学習によらない方法としては、所定の位置関係や姿勢にある場合は事故であるというように判断する方法などが挙げられる。
第8の構成において、事故への対処を速やかに行うという目的を考えれば、事故が発生していないのに事故であると判断する誤りは許容され、事故が発生しているのに事故ではないと判断する誤りは十分に回避されるべきである。従って、第8の構成においては、事故の発生の判断方法は、事故が発生しているのに事故ではないと判断する誤りを回避することを重視して設定することが好ましい。こうすることにより、システムの信頼性を向上させることができる。
第8の構成において、事故が発生したと判断されるときには、種々の通報動作を行うようにしてもよい。例えば、大きな警報音や警報ランプで周囲の作業者に事故の発生を報知する態様、予め設定されたアドレス等を利用して事故発生のメールを送信する態様などが挙げられる。
前記事故判断部は、前記吊荷から所定の範囲内に、倒れている人の姿を検出したときに事故が発生したと判断するものとしてもよい。
前記吊荷と、その周辺の人または障害物との位置関係および姿勢を特定するためのデータを稼働実績として記憶する稼働実績データベースと、
前記事故判断部は、前記稼働実績データベースに基づく教師なし機械学習によって得られる学習モデルを用いて、事故の発生を判断するものとしてもよい。
学習モデルの生成は、後述する通り、種々の方法をとることができる。また、事故の発生を判断するために用いられる稼働実績と、学習モデルを生成するために用いられる稼働実績とは異なっていても差し支えない。即ち、別途用意された稼働実績に基づいて学習モデルを生成し、それを情報処理装置に適用するものとしてもよい。
前記事故判断部は、事故が発生したと判断されるときに、予め設定された通報先への通報を行うものとしてもよい。
該吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記カメラで撮影された画像データを、時系列で記憶する画像データベースとを有し、
前記事故が発生したと判断された場合に、該事故発生時点と前記画像データとを関連づけて記憶し、要求に応じて、当該関連づけられた画像データを出力する異常時画像提供部を備えるものとしてもよい。
上記態様においては、事故発生時点の画像データを、画像データベースとは別に記憶しておくものとしてもよい。また、事故発生時点の時刻情報を記憶しておくなど、当該時点の画像データを、画像データベース上で特定する情報を記憶しておいてもよい。この場合には、特定された画像データを、画像データベースから読み出して出力すればよい。
上記態様において、出力とは、ディスプレイ等への表示、および画像データの提供の双方を含む。
即ち、固定の領域内で吊荷を移動させるクレーンの稼働中における事故の発生を判断するための学習モデルを生成する学習モデル生成システムであって、
前記吊荷と、その周辺の人または障害物との位置関係および姿勢を特定するためのデータを稼働実績として記憶する稼働実績データベースと、
前記稼働実績データベースに基づきクラスター分析を行い事故の発生を判断するための学習モデルを生成する事故判断モデル生成部とを備える学習モデル生成システムである。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置とともに移動し、画像、赤外線、および3次元点群の少なくとも一つを取得するデータ取得部と、
前記吊上装置を予め設定されたスキャンパターンで駆動するとともに、該駆動中に前記データ取得部により取得されたデータに基づいて、異常の有無を判断し、異常発生時には予め設定された警備動作を実行する警備動作部とを備える情報処理装置とすることができる。
上述のスキャンパターンは、施設内を均等に監視できるように予め設定した移動軌跡を言う。吊上装置の駆動装置に対して、かかるスキャンパターンに従って動くよう制御信号を出力する制御装置を用意することによって、このスキャンパターンを実現することができる。
第9の構成において、データ取得部は、発見する異常の種類に応じて備えればよい。画像を取得する装置としてはカメラを用いることができる。赤外線を取得する装置としては赤外線カメラまたは赤外線センサを用いることができる。3次元点群を得る装置としてはレーザレーダを用いることができる。
第9の構成における警備動作は、警報音の発生や、所定のアドレスへのメール送信など、種々の動作を取り得る。
前記警備動作部は、前記異常を発見したときには、前記吊上装置のスキャンパターンを変更するものとしてもよい。
前記警備動作部は、
前記画像または赤外線に基づいて、火災発生の有無を判断し、
火災発生と判断されるときには、該発生の場所に前記吊上装置を、移動させるものとしてもよい。
上記態様では、火災発生と判断されるときには、発生の場所に吊上装置を移動させる。従って、火災の状況を、継続的に監視することが可能となる。
上記態様において、一端、火災発生と判断した後、それが誤りであると判断された場合には、当初のスキャンパターンに戻るようにしてもよい。
前記警備動作部は、
前記データ取得部により取得されたデータに基づいて、人物の有無を判断し、
人物がいると判断されるときには、該吊上装置が装備された施設の出入口に前記吊上装置を移動させるものとしてもよい。
人物の有無は、種々の方法で判断できる。画像や3次元点群に基づいて判断してもよい。赤外線によって判断してもよい。
人物を発見したとき、十分に追随できるのであれば、それが好ましい。しかし、一般に、吊上装置の移動速度は、人物が走る速度に至らないことが多いため、人物を完全に追随することは困難である。そこで、上記態様では、人物の存在を検知すると、出入口に吊上装置を移動させる。発見された人物は、出入口から退出すると考えられるため、このように出入口に吊上装置を移動させることにより、退出時の人物の様子を撮影等することが可能となる。
出入口が複数存在する場合には、これらの出入口を順次巡回するように移動させればよい。また、発見した人物の位置に最も近い出入口に優先的に移動させるようにしてもよい。
該吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記カメラで撮影された画像データを、時系列で記憶する画像データベースとを有し、
前記異常が発生したと判断された場合に、該異常の発生時点と前記画像データとを関連づけて記憶し、要求に応じて、当該関連づけられた画像データを出力する異常時画像提供部を備えるものとしてもよい。
固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を検出する位置検出部と、
前記クレーンにおいて前記吊荷を吊り上げる際に、地切時の安全を支援するための地切安全支援部を備え、
該地切安全支援部は、
前記吊荷を着床させたときに、前記吊上装置の位置情報を該吊荷と対応づけて登録し、
前記着床した吊荷を改めて搬送する際に、前記登録した位置情報に一致するよう前記吊上装置を移動させる情報処理装置としてもよい。
即ち、第10の構成では、吊荷を着床させたときに、吊上装置の位置情報を吊荷と対応づけて登録しておく。着床の時点では、吊上装置は吊荷の重心上を正確に吊り上げている状態であるから、このときの吊上装置と吊荷との位置関係を正確に再現できれば、次に同じ吊荷を吊り上げるときに、正確に重心上を吊り上げることが可能となるはずである。かかる考え方に基づき、第10の構成では、着床した吊荷を改めて搬送する時には、登録してあった位置情報に一致するように吊上装置を移動させるのである。この移動は、例えば、登録してある位置情報を読み出して、その位置に吊上装置を移動させるようにしてもよいし、作業員が、吊荷の近くまで目視等で移動させた上で、登録してある位置情報に基づいて吊上装置の位置を修正するようにしてもよい。
このように着床時の位置情報を利用することにおり、着床時の吊上装置と吊荷との位置関係を再現することが可能となり、地切時の吊荷の振動を抑制することが可能となるのである。
例えば、クレーンでは、吊荷にワイヤをかけ、これをクレーンのフックに引っかけて吊り上げることが多いが、厳密に言えば、フックへのワイヤの引っかけ方によっても、吊り上げる位置と吊荷の重心位置とにずれが生じるおそれもある。そこで、これを回避するため、吊荷へのワイヤの取り付け位置と、フックにワイヤを引っかける順序が再現される工夫を施しても良い。例えば、吊荷のそれぞれのワイヤの取り付け位置に数字その他の識別マークを表示しておき、この識別マークで特定される順序でフックにワイヤを引っかけるようにしてもよい。
また、別の態様として、クレーン側から吊荷に対してレーザ照射を行っても良い。着床するときにレーザ照射されるスポットに対応するマーカを吊荷の上面に貼り付けたり、吊の上面に印を描くなどしておくのである。こうすれば、次に吊荷を吊り上げる時には、レーザ照射のスポットが、このマーカまたは印に一致するよう吊上装置の位置を調整すれば、より精度良く適正な位置関係を再現することが可能となる。
前記地切安全支援部は、
前記吊荷を着床させた後、該吊荷を外した状態で前記吊上装置の巻上が開始された時点で前記登録を行うようにしてもよい。
もちろん、上述の態様によらず、作業員の操作によって位置情報を登録する態様をとっても差し支えない。
前記地切安全支援部は、
前記着床した吊荷を改めて吊上げたときには、前記登録された位置情報を抹消するようにしてもよい。
上記態様では、かかる意味で無用となった位置情報を抹消することができる。こうすることにより、無用な位置情報を保持しておく記憶容量などを抑制することができるとともに、誤って無用な位置情報が利用される危険を抑制することができる。
該吊上装置とともに移動し、下方の画像を撮影するカメラを有し、
前記地切安全支援部は、
前記吊荷を着床させたときに、さらに、前記カメラで撮影した画像データを登録し、
前記着床した吊荷を改めて搬送する際に、前記画像データも利用して、前記吊上装置の移動を行うようにしてもよい。
また、別の態様として、着床した吊荷を吊上装置で吊り上げる際にカメラで画像を撮影し、登録されている画像データとマッチングすることにより、吊荷の正誤、吊荷と吊上装置との位置のずれの有無などの検出を行うこともできる。こうすれば、吊荷と吊上装置の位置関係の再現精度を一層向上させることができる。
前記地切安全支援部は、
前記吊荷を吊り下げていない状態で、前記吊上装置に対して巻下げの指示がなされた場合には、その時点における前記吊上装置から所定範囲内の前記登録された位置情報に基づいて、前記吊上装置の位置を修正するようにしてもよい。
また、上述した情報処理装置において実現される種々の情報処理を、コンピュータによって実行する情報処理方法として構成してもよいし、かかる方法をコンピュータに行わせるためのコンピュータプログラムとして構成してもよい。さらに、かかるコンピュータプログラムを記録したコンピュータが読み取り可能な記録媒体として構成してもよい。
実施例については、以下の順序で説明する。
A.システム構成:
B.軌跡表示機能:
C.メンテナンス時期通知機能:
D.危険度評価機能:
E.最適経路設定機能:
F.運転診断機能:
G.運搬シーケンス最適化機能:
H.レイアウト最適化機能:
I.事故判断機能:
J.警備機能:
K.地切安全支援機能:
L.効果および変形例:
図1は、情報処理装置の構成を示す説明図である。
天井クレーン100は、工場内に設置された走行レール上を作業者の操作に応じて移動して、重量物を運搬する装置である。その構造については、後述する。
天井クレーン100は、無線LAN20を介して、情報処理装置200に接続されている。情報処理装置200は、ハードウェアとしてはサーバによって構築されており、天井クレーン100の稼働中には、種々の情報が取得され、情報処理装置200に蓄積される。情報処理装置200は、これらの情報の解析、天井クレーン100の動作の制御などの機能を奏する。
無線LAN20には、この他、端末としてのコンピュータ30が接続されている。コンピュータ30は、情報処理装置200に蓄積されたデータや解析結果などの閲覧、天井クレーン100の動作指示などに利用される。コンピュータ30の他、タブレット、スマートフォンなどを端末として利用してもよい。
実施例では、このように学習モデル生成システム500を、情報処理装置200とは別個のシステムとして構築しているが、両者を同一の施設内に設置してもよいし、学習モデル生成システム500を、情報処理装置200に組み込んで、一体のシステムとして構成してもよい。
また、逆に、後述する情報処理装置200の種々の機能の一部または全部を、インターネットを介して接続された外部サーバによって提供するものとしてもよい。この意味で、情報処理装置200は、必ずしも一つの工場敷地内のみで構成されるシステムに限定されるものではない。
ホイスト120におけるワイヤ121の巻上げ/巻下げ、ホイスト120の移動などの操作は、ケーブル131で接続されたコントローラ130によって行うことができる。図中の左下に、コントローラ130の拡大図を示した。図示する通り、コントローラ130には、電源をオン・オフするための押ボタン132、ワイヤ121の巻上げ/巻下げのための押ボタン133、東西南北の4方向に移動させるための4つの押ボタン134が設けられている。実施例において、コントローラ130は、かかる方式に限定されるものではない。例えば、4つの押ボタン134に代えて、コントローラ自体を円筒状の筐体の中心軸周りに回転させることにより、ホイスト120の移動方向を指示可能な構成としてもよい。コントローラ130は、ケーブル131で接続された有線式のものに代えて、無線式のものを利用してもよい。
図中には示していないが、ホイスト120には、表示器123の表示内容を撮影可能なカメラをさらに取り付けても良い。例えば、下方を撮影するカメラ124の向きを変更可能に取り付けておくことにより、表示器123を撮影するためのカメラを兼用させてもよい。このように表示器123を撮影するカメラを設けることにより、その画像から、表示器123の表示内容、表示状態の異常を判断することができ、表示器123の故障の未然防止や故障への迅速な対応が可能となる。
クレーンが設置された施設には、建物の天井近傍に、走行レール101、102が平行かつ水平に敷設されている。
走行レール101、102の上には、モータの動力によって、矢印aのように走行できるようサドル111、112が取り付けられている。サドル111、112には、両者にまたがるようにクレーンガーダ110が固定されている。クレーンガーダ110は、水平かつ走行レール101、102に直交する方向に設けられている。サドル111、112が矢印a方向に移動すると、これに伴ってクレーンガーダ110も一体として移動することができる。
ホイスト120は、モータによって、クレーンガーダ110に沿って矢印b方向に移動できるよう、クレーンガーダ110に取り付けられている。
従って、矢印a方向のクレーンガーダ110の移動と、矢印b方向のホイスト120の移動の組合せによって、ホイスト120は、走行レール101、102の間の空間を任意に移動することが可能となる。
図示する通り、走行レール102には、位置を検出するためのマーカ103が描かれている。サドル112に固定されたセンサ113によって、光学的にマーカ103を読み取ることにより、サドル112の移動量、ひいてはサドル112のa方向の位置を検出することができる。同様に、クレーンガーダ110にも位置検出用のマーカ114が描かれている。ホイスト120の移動時には、ホイスト120に固定されたセンサ127によって、光学的にマーカ114を読み取ることにより、ホイスト120の移動量、ひいてはホイスト120のb方向の位置を検出することができる。この結果、センサ113、127で読み取った結果に基づき、ホイスト120の水平方向の位置座標(x、y)を検知することが可能である。位置座標は、無線LAN20を介して情報処理装置200に送信される。
図3は、位置検出機構の構成を示す説明図である。走行レール102において、サドル112のa方向の位置、即ち図2におけるX座標を検出するための機構を示した。図3中では、右方向がX座標のプラス方向、左方向がマイナス方向であるとする。原点は、任意の場所に設定することができる。
位置検出用マーカ103aは、白および黒の領域を交互に描いたものである。黒の領域の幅wbは一定である。また、白の領域の幅wwも一定である。両者wb、wwは同じ幅としても良いし、異なっていてもよい。位置検出用マーカ103aは、走行レール120全般にわたって描かれている。本実施例では、予め図示するパターンを描いたテープを用意し、これを走行レール120に貼付する方法をとった。
座標検出用マーカ103bは、走行レール120の適宜の位置に描かれている短いマーカである。走行レール120の1カ所に設けても良いし、複数箇所に設けても良い。座標検出用マーカ103bは、白と黒の領域で形成されるが、その本数および幅は、設けられている箇所ごとに異なっている。即ち、白と黒の本数および幅で構成される一つのパターンによって、走行レール120の特定の位置を表すものとなっている。
例えば、予め施設内の設備等の位置をデータベースとして用意しておき、カメラ124で撮影された下方の画像を解析し、設備等との相対的な位置関係を求めることにより、カメラ124の位置座標、ひいてはホイスト120の位置座標を検出する方法をとってもよい。この場合、設備の代わりに、検出しやすい所定形状のマーカを用いるようにしてもよい。
また、レーザレーダ125によって、施設周囲の壁までの距離を計測し、これによって、壁に対する位置、ひいてはホイスト120の位置座標を検出するようにしてもよい。レーザレーダ125に代えて、周囲までの距離を測定するためのレーザ測距装置を別途、ホイスト120に取り付けてもよい。
施設内で電波が良好に受信できる場合には、GPSを併用することも有用である。
以下、それぞれの機能部について説明する。
稼働実績データベース201は、天井クレーン100の稼働中の種々の情報を格納するデータベースである。格納するデータとしては、ホイスト120の位置座標、コントローラの操作データ、吊荷の種別や運搬スケジュールなどの作業データなどが含まれる。位置座標、操作データ等は、それぞれのデータが得られた時刻情報と関連づけることにより、時系列に格納されている。本実施例では、位置座標、操作データは、別々に記憶するものとした。各時刻、位置座標および操作データを一組のデータとして逐次記憶する方法をとってもよい。この方法では、位置座標と操作との関係は容易に照合できる利点があるが、例えば、吊荷の吊り上げ、降下の操作中は、ホイスト120が移動しないにも関わらず、同じ位置座標が繰り返し記憶されることになり、無駄なデータ量が生じやすい。データの記憶形式は、このようなメリット・デメリットを総合的に考慮して、選択すればよい。
以下、稼働実績データベース201に格納されたデータを、「稼働実績データ」と総称することがある。
以上で説明した処理によって、床面全体の画像を得れば、施設内の設備や障害物の配置を把握することができる。かかる画像に基づいて、設備や障害物の位置座標を特定し、施設内の設備等の配置を表すデータを作成してもよい。
実施例では、一定の時刻ごとに位置座標を検出するものとした。一方、クレーンは、比較的直線的に移動するため、例えば、一定の速度で移動している間は、細かく位置座標を検出する必要性はそれほど高くない。そこで、位置検出部211は、一定期間の位置座標を一時的に蓄積し、ほぼ一定の速度で直線的に移動していると判断される区間については、取得したデータを省略して稼働実績データベース201に格納するようにしてもよい。こうすることにより、位置座標のデータ量を抑制することが可能となる。
統計処理の結果は、メンテナンス時期の判断や運転診断などに用いることができる。統計処理の結果も、稼働実績データベース201に格納してもよい。
地切安全支援部250は、こうした事故を抑制するため、吊荷を床においた時のクレーンの位置を記憶しておき、その吊荷を再度吊り上げる時には、記憶しておいて位置を正確に再現するのである。こうすることにより、クレーンは、吊荷の重心を正確に吊り上げることが可能となる。
地切安全支援部250は、かかる機能に伴い、記憶しておいた位置を管理する機能、重心位置を精度良く再現するための種々の機能、位置の登録または再現などの利便性を向上する機能なども併せて実現する。もちろん、これらの機能は、その一部を省略しても差し支えない。
また、本実施例では、以下、情報処理装置200に固有の学習モデルを提供するものとして説明するが、学習モデル生成システム500は、複数のクレーンに共通する汎用の学習モデルを生成するシステムとすることもできる。
稼働実績データベース501、3次元点群データベース502、画像データベース503の内容は、学習モデルの生成を考慮して、情報処理装置200における各データベースと異ならせてもよい。例えば、以下で説明する機械学習に不要なデータは省略してもよい。また、情報処理装置200で学習モデルを用いてなされた判断結果を、稼働実績データの一つとして記憶してもよい。
実施例の情報処理装置200が提供する機能の一つとして軌跡表示機能について説明する。
図5は、軌跡表示処理のフローチャートである。主として図4に示した位置検出部211および表示制御部232が稼働実績データベース201に記憶された稼働実績データを用いて行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。
処理を開始すると、情報処理装置200は、表示対象の日時の指定を入力する(ステップS10)。この指定は、コンピュータ30などの端末から行うことができる。日付を指定したときは、該当する一日分の移動軌跡が表示される。開始日時、終了日時を指定した場合には、該当する期間の移動軌跡が表示される。一日のうち特定の時間帯の移動軌跡を表示させたい場合などに有用である。複数の日時を指定したときは、該当する日の移動軌跡が表示される。これらの移動軌跡を対比したい場合などに有用である。日時の指定は、他にも種々の態様を用意してもよい。
そして、これらに基づいて統計データを算出する(ステップS12).本実施例では、走行レール101、102方向の移動距離である走行距離、クレーンガーダ110方向の移動距離である横行距離、コントローラの押ボタンの操作回数、吊荷の運搬距離、クレーンの稼働時間などを求めるものとした。この他の統計処理を行うものとしてもよい。
その他の場合、即ち、表示の終了が指示されたときは、軌跡表示処理は終了する。以上の処理により、情報処理装置200は、指定された日時における移動軌跡を表示する。
また、ボタンd13をクリックすると、移動軌跡を動画で表示させることができる。動画は、例えば、移動軌跡上を、クレーンを表すシンボルが移動する態様としてもよい。また、クレーンの移動に応じて移動軌跡を描くようにしてもよい。動画表示する際には、クレーンの移動に応じて、コントローラの操作(d16)も変化させることが好ましい。
シンボルd23を移動させる動画表示の他、領域d21で移動軌跡上の一点d23をクリックすると、それに対応する静止画像が領域d22に表示されるようにしてもよい。
移動軌跡の表示は、図6、図7に示した他、種々の態様をとることができる。
また、移動軌跡と操作または画像とを対応づけて表示することにより、クレーンの運転が適切になされていたか否かも含めて状況を確認しやすくなる。
さらに、統計処理の結果も表示することにより、稼働実績を客観的に把握することが可能となる。
次に、情報処理装置200が提供する機能の一つとして、クレーンのメンテナンス時期を通知する機能について説明する。
(1)機械学習に依らない処理:
図8は、メンテナンス時期判断処理のフローチャートである。主として図4に示したメンテナンス時期判断部220が稼働実績データベース201に記憶された稼働実績データを用いて行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。
処理を開始すると、情報処理装置200は、稼働実績データを読み込み(ステップS20)、前回のメンテナンス以降の各種の累計データを生成する(ステップS21)。メンテナンスには、定期点検を含めてもよい。メンテナンス以降としたのは、メンテナンスによってクレーンの不具合などは解消されていると考えられるからである。もっとも、メンテナンスにおいて、必ずしも全ての部品交換などが行われる訳ではないから、メンテナンスの対象とされていない箇所については、前回に当該箇所が対象とされたメンテナンス以降の累計データを生成するようにしてもよい。これらのメンテナンス実績は、稼働実績データとともに記憶させておけばよい。表示器の画像をカメラで撮影している場合には、その画像データも、コントローラの操作内容またはクレーンの動作と関連づけて記憶しておいてもよい。こうすることにより、表示器の異常の検出に活用することができる。また、無線式のコントローラを利用している場合には、バッテリの充電履歴などをメンテナンス実績として蓄積しておくようにしてもよい。こうすることで、バッテリの消耗の予測に活用することができる。
累計データとしては、例えば、コントローラの押ボタンの操作回数、クレーンの走行距離・横行距離、吊荷の運搬距離などが挙げられる。この他の累計データを生成してもよい。
また、無線式のコントローラを利用する場合、そのバッテリの消耗も判定の対象となり得る。ただし、無線コントローラの場合は、クレーンの稼働中にバッテリの消耗によりコントロールできなくなる状態が生じることは回避する必要があるため、バッテリの残量が低下した場合でも、吊り荷の着地やクレーンの待機位置への移動など、危険のない状態まで稼働させる必要がある。従って、バッテリに対する判定閾値の設定は、これらの操作が可能な残量を確保できる範囲で設定することが好ましい。
情報処理装置200は、メンテナンスの判断対象ごとに、上述の判断処理を行う。判断方法は、判断対象ごとに変えてもよい。また、メンテナンス時期の予測は、上述以外の方法を用いても構わない。
メンテナンス時期の判断は、機械学習を利用してもよい。以下では、変形例として、機械学習を適用する例について説明する。
図9は、メンテナンス時期判断用データ生成処理のフローチャートである。稼働実績として蓄積されているデータに基づいて、機械学習用のデータを生成する処理である。主として図4に示した学習用データ生成部510が行う処理であり、ハードウェア的には学習モデル生成システム500のCPUが実行する処理である。
処理を開始すると、学習モデル生成システム500は、稼働実績データベース501から稼働実績データを読み込み(ステップS30)、モータ作動状況のデータを生成する(ステップS31)。
図中にデータ生成の内容を示した。上のグラフは、コントローラの押ボタンのオン・オフの状態を示した。押ボタンは、複数あるが、ここでは、そのうちの一つのみを例として示している。図示する通り、押ボタンをオンにしているtopの間、クレーンは移動する。中段には、モータの電流を示した。押ボタンをオンにしてから、時間td経過後からモータに電流が流れ始める。その後、電流は、若干のノイズによる変化を挟みながら、押ボタンがオフになるまで流れる。この例では、途中、押ボタンがオンになっているtopの期間内に、時間ti0、ti1の間、モータ電流が不意に落ち込む箇所が現れている。下段には、クレーンの移動速度の変化を示した。押ボタンの操作後、モータの電流変化に応じて、クレーンは移動する。モータ電流が落ち込む箇所では、クレーンの移動速度も同様に低下している。クレーンの平均速度からは、クレーンの平均速度が求められる。
上述の通り、データの生成処理(ステップS31)では、モータおよび押ボタンのメンテナンスの要否およびその時期を判断するためのデータとして、押ボタンをオンにしている時間間隔top、モータ電流が立ち上がるまでの時間td、モータ電流が落ち込む時間ti0,ti1、クレーンの平均速度などを生成する。モータの作動状況に関しては、機械学習の内容に応じて、他にも種々のデータを生成してもよい。
図中にデータ生成の内容を示した。左側は、クレーンの巻き上げ量と吊り荷高さとの関係である。クレーンを巻き上げるにつれて、吊荷の高さは比例的に上昇する。吊荷を吊り上げるためのワイヤ121に緩みが生じてくると、吊り上げ時に伸びが生じやすくなるため、このグラフの傾きが緩やかになったり、直線からずれたりすることがある。こうした現象を考慮し、データ生成処理(ステップS32)では、ワイヤ121のメンテナンス時期を判断するためのデータとして、クレーン巻き上げ量に対する吊荷の上昇を表すデータ、例えば、図示したグラフの傾きなどが算出される。
図の右側には、搬送中の吊荷高さの変化を示した。搬送中は、吊荷の高さは、振動しながら、ほぼ一定の高さを維持する。ところが、ワイヤ121に緩みが生じてくると、弾性力が低下するため、この振動の周波数が低下し、また、振幅が大きくなる傾向が現れることがある。こうした現象を考慮し、データ生成処理(ステップS32)では、ワイヤ121のメンテナンス時期を判断するためのデータとして、クレーン搬送中の吊荷高さの振動について、振幅および周波数が算出される。
モータの作動状況に関しては、機械学習の内容に応じて、他にも種々のデータを生成してもよい。例えば、作業者のヘルメットにカメラを装着しておき、吊荷を撮影するとともにその状況を画像解析して、機械学習用のデータを生成してもよい。吊荷の高さ、振動などのデータを取得してもよいし、荷物を吊り下げるときのワイヤの角度およびその変化などを取得してもよい。
また、表示器については、表示器を撮影した画像に基づき、表示の欠損の有無や数量、表示のちらつきの有無や程度などを数値化して機械学習用のデータとすることができる。
処理を開始すると、学習モデル生成システム500は、メンテナンス時期判断用データ生成処理(図9)で生成された学習データを読み込む(ステップS40)。
例えば、押ボタンについてクラスタを生成する例を考える。押ボタンの操作に関係する学習データとしては、先に示した通り、押ボタンをオンにしている時間間隔top、モータ電流が立ち上がるまでの時間td、モータ電流が落ち込む時間ti0,ti1、クレーンの平均速度などが挙げられる。クレーンを稼働しているときは、ほとんどが、メンテナンスを要しない正常状態にあると考えられるから、学習データが、集中する領域は、正常な状態を表していると考えられる。一方、この集中する領域から外れたデータは、異常が生じつつある状態、即ち、メンテナンスを要する状態にあると言える。従って、学習データに基づいて、正常と考えられる領域をクラスタとして認識させるための学習モデルを生成すれば、メンテナンスの要否に活用することができるのである。
図中に、処理のイメージを示した。白丸で示したデータが、正常状態の学習データを表している。×で表したデータが、異常状態の学習データを表している。クラスタを生成するとは、図中の破線の領域を判断する学習モデルを生成する処理に相当する。クラスタは、例えば、その中心CGと、距離Rで表される。判断対象となる学習データが、中心CGからの距離Rを超える場合には、クラスタ外にあると判断され、メンテナンスが必要であると判断されることになる。
なお、図中の例では、3次元空間で学習データを表しているが、学習データの種類および数によって、この空間の次元は変動する。
処理を開始すると、情報処理装置200は、稼働実績データを読み込み(ステップS50)、メンテナンス時期判断処理用データ生成処理を実行する(ステップS51)。この処理内容は、図9で説明した通りである。学習モデルを生成するときに行った処理と同様の処理を実行するのである。
そして、情報処理装置200は、予め生成されたメンテナンス時期判断モデルを利用して、クラスタ中心からの距離DCを算出する(ステップS52)。図中にイメージを示した。先に説明した通り、学習モデルは、稼働実績が「正常」と判断されるクラスタの中心CGおよびその距離Rを与える。従って、稼働実績が、クラスタ内に存在するか否かを判定するために、距離DCを算出するのである。
以上で説明したメンテナンス時期判断処理(図8、図11)によれば、クレーンについて、定期点検を迎える前に、メンテナンス時期を判断することができ、故障を早期に回避することが可能となる。
また、機械学習を利用する場合には、複数の要素を総合的に考慮することができ、メンテナンスの要否およびその時期の判断を精度良く行うことが可能となる。本実施例では、正常な稼働状態における稼働実績データに基づいて教師なし機械学習を用いているため、故障が生じた実績を多量に集めなくとも、機械学習を適用することができる利点がある。
(1)運搬場面の判断:
図12は、危険度評価処理のフローチャートである。主として図4に示した危険度評価部223および基本動作判断部221が行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。この処理は、クレーンの稼働後に、稼働実績データ、3次元点群データ、画像データに基づいて、危険の有無およびその程度を判断するために実行される処理である。作業者のヘルメット、軍手、作業着などにセンサを付したり、画像解析によって認識を容易にするための特徴的なマーカを貼付するなどして、作業者の姿勢を特定しやすくしてもよい。
以下の説明において、「危険度」とは、危険の有無およびその程度を表すための指標を意味する。
吊荷の運搬場面を判断すると、情報処理装置200は、場面ごとに以下の処理によって、危険の有無およびその程度を評価する。
情報処理装置200は、吊荷形状、ワイヤの位置、クレーン位置等を検出する(ステップS61)。これらの検出は、3次元点群データおよび画像データの解析によって行うことができる。画像データは、平面的でありカメラ124から対象物までの距離の特定が困難なのに対し、3次元点群データは、3次元的に位置が把握できているため、この解析に有用である。作業員のヘルメットにカメラを装着し、そのカメラによって荷物を撮影した画像データに基づく解析結果を利用してもよい。このカメラでは、荷物を吊り上げる際のワイヤの角度やワイヤの伸び、荷物の回転、振動などを捕捉することができる。
例えば、吊り上げ前に対しては、吊荷にワイヤを取り付けるまでの手順が対象となる。従って、例えば、
a) 作業開始前に、吊荷の周囲の状況を確認できる位置に作業者が存在したか?
b) フックは、吊荷の形状から推定される重心に対して安全な位置に掛けられているか?;
c) 作業者が、ワイヤの点検をできる位置にいたか?;
など、危険を判断するための所定の項目に基づいて、それぞれの項目に特徴的な位置関係を基準の位置関係として用いることができる。
また、作業者だけでなく、吊荷の周囲で、作業者を補助する補助者の位置などを考慮に入れても良い。
さらに、吊荷にワイヤを取り付ける作業のみでなく、かかる作業にとりかかる前にヘルメットの装着具合などの安全点検を行っているか、といった基本動作を危険度の判断要素として考慮してもよい。
このように画像データおよび3次元点群データの解析により、上述の項目を判断することができる。
同様の計算を、全項目に対して行う。そして、得られた危険度の平均値または最大値に基づいて、全体の危険度を算出する。
また、この計算過程で、最大の危険度となった項目は、全体の危険度に与える影響が大きいことになる。従って、当該項目の内容を、危険度に対する「理由」として選択することができる。
危険度の判断要素としては、他に作業環境を考慮するようにしてもよい。例えば、吊荷にワイヤを取り付ける作業が暗い場所で行われるとミスの原因となり得ると考えられるため、作業をしている現場の照度が基準以上か否かを考慮するようにしてもよい。
a) 吊り上げ前に、ワイヤを掛けた作業者が、クレーンを操作する作業者に準備が整った旨の合図をしたか?;
b) ワイヤの付近に作業者が存在しないか?;
c) 吊荷の周囲に作業者が存在しないか?;
などである。危険度およびその理由は、吊り上げ前と同様の方法で算出および選択することができる。また、クレーンを操作する者以外に、吊荷の周辺で合図等をする補助の作業者の位置、動作などを考慮してもよい。
さらに、吊り上げ中に荷物が水平を保っているか、地切の際に荷物が水平方向に移動したか否か、荷物の振動の程度などを考慮してもよい。
荷物を吊り上げる際のクレーンの巻上速度を考慮してもよい。巻上速度には予め定めた推奨値または上限値があるため、これを超えると危険度が高くなる。こうした観点で、巻上速度に基づく危険度判定を行うものとしてもよい。
危険度評価処理は、稼働実績データに基づいて事後に行うものとして説明したが、クレーンの稼働中に、可能な限りリアルタイムで行っても良い。この場合、危険度が所定値を超える場合には、結果出力(ステップS69)として、通報を行うようにしてもよい。通報としては、例えば、クレーンの表示器123への警告を表示する方法、操作中の現場に警報音を鳴らす方法、管理者にメール等で通知する方法などをとることができる。
次に、運搬場面が、運搬開始であると判断された場合(ステップS60)について説明する。
情報処理装置200は、吊荷とクレーンの操作者や周囲の障害物との位置関係などを検出し、基本動作等がなされているか否かを検出する(ステップS63)。
そして、この検出結果に応じて、危険度を算出し、その理由を作成し(ステップS64)、結果を出力する(ステップS69)。
a)吊荷を運搬する移動経路内に、人物および障害物が存在しないか?;
b)吊荷の付近に人物がいないか?;
c)吊荷が揺れていないか?;
などである。
これらに基づいて基準の位置関係および危険度を設定しておき、ステップS62で説明したのと同様の方法で、項目ごとの危険度を算出することができる。
a)吊荷の進行方向の確認動作;
b)運搬開始前の合図;
などである。本実施例では、基本動作のうち指さしの姿勢など特徴的な複数の姿勢を、予めデータベースとして抽出しておき、判断対象となる画像データまたは3次元点群データを解析して、これらの特徴的な姿勢が検出されるか否かを判定するものとした。
基本動作は、クレーンを有する企業ごとに異なる場合もある。従って、基本動作については、カスタマイズ機能を設けても良い。即ち、各企業が、予め用意された基本動作を取捨選択したり、独自に用意した基本動作を追加可能としてもよい。かかる機能を設けることで、各企業の規則に従った評価を実現することができる。
このようにカスタマイズ機能を設ける場合には、独自の基本動作を追加するための支援機能を加えても良い。例えば、カメラで撮影した状態で当該基本動作を作業員が実演することにより、その基本動作に特徴的な複数の姿勢を切り出して、データベースに登録する機能などが挙げられる。
基本動作についての考え方は、他の場面においても同様である。
次に、運搬場面が、運搬中であると判断された場合(ステップS60)について説明する。
情報処理装置200は、吊荷とクレーンの操作者や周囲の障害物との位置関係、クレーンの移動速度などを検出し、基本動作等がなされているか否かを検出する(ステップS65)。
そして、この検出結果に応じて、危険度を算出し、その理由を作成し(ステップS66)、結果を出力する(ステップS69)。
a)吊荷の付近に人物および障害物が存在しないか?;
b)吊荷の揺れや傾きはないか?;
c)移動速度は適正か?;
などである。
これらに基づいて基準の位置関係および危険度を設定しておき、ステップS62で説明したのと同様の方法で、項目ごとの危険度を算出することができる。
また、運搬中には、通路の状況などを合わせて考慮してもよい。例えば、通路に油などの異物が付着している状況では操作者が転倒し、クレーンが危険な状態になるおそれがある。従って、カメラで撮影した画像に基づいて、通路上の異物の有無などを解析し、これに基づいて危険度を算出するようにしてもよい。
a)吊荷の進行方向の確認動作;
b)方向を変える場合の確認動作;
などである。基本動作の検出は、ステップS63,S64で説明したのと同様の方法で行うことができる。
次に、運搬場面が、吊荷降下中であると判断された場合(ステップS60)について説明する。
情報処理装置200は、吊荷とクレーンの操作者や周囲の障害物との位置関係、基本動作等がなされているか否かを検出する(ステップS67)。
そして、この検出結果に応じて、危険度を算出し、その理由を作成し(ステップS68)、結果を出力する(ステップS69)。
a)吊荷の着地場所、吊荷の下に人物および障害物が存在しないか?;
b)吊荷の向きは適正か?;
などである。
これらに基づいて基準の位置関係および危険度を設定しておき、ステップS62で説明したのと同様の方法で、項目ごとの危険度を算出することができる。
a)吊荷の着地場所の安全確認動作;
b)巻下前の合図;
などである。基本動作の検出は、ステップS63,S64で説明したのと同様の方法で行うことができる。
最後に、運搬場面が、吊荷降下後であると判断された場合(ステップS60)について説明する。
情報処理装置200の処理としては、吊り上げ前、吊り上げ中と同じである(ステップS61,S62,S69)。
a) フックは、吊荷から確実に外されているか?;
c) 作業者が、ワイヤの付近にいないか?;
などである。即ち、吊荷降下後に、確実にワイヤを外すことなく巻き上げを行うと、思わぬ事故を招くこともあるため、これらの危険の有無を判断することになる。
これらに基づいて基準の位置関係および危険度を設定しておき、ステップS62で説明したのと同様の方法で、項目ごとの危険度を算出することができる。
なお、上述の例では、吊り上げ前、吊り上げ中、吊荷降下後における判断(ステップS61、S62)においては、基本動作の検出を省略した。これらの場面において基本動作が存在しないという意味ではなく、これらの場面では、基本動作よりも基準の位置関係の方が危険に対する影響が大きいと考えられるからである。従って、これらの運搬場面についても、他と同様、基本動作の検出、判断を行ってもよい。
危険度評価には、機械学習を適用することも有用である。危険度評価においては、先に説明した基本動作が行われているか否かの判断、および危険度の評価のそれぞれに対して、機械学習の適用が可能である。以下、順に説明する。
処理を開始すると、学習モデル生成システム500は、基本動作リストおよび学習データを読み込む(ステップS70)。これらは、基本動作データベース505に格納されているデータである。
図中にデータ構造のイメージを示した。例えば、「巻き下げ前の周囲確認」という基本動作に対しては、この名称と対応づけて、一連の動作データが格納されているのである。動作データは、基本動作を表す一連の静止画像の集合である。「巻き下げ前の合図」およびその他の基本動作に対しても同様である。
処理を開始すると、学習モデル生成システム500は、稼働実績データを読み込む(ステップS80)。
そして、学習モデル生成システム500は、運搬場面に応じて、学習用データを生成する(ステップS81)。図中に運搬場面と学習データの内容を示した。それぞれ先に図12で説明した内容と同様である。
なお、学習モデルを利用する場合、そのロジックが不明であることが多いため、理由の選択は、困難である場合がある。学習モデルを、決定木のようにロジックが追い求めやすい方法で生成している場合は、危険度の結果に影響を与えたノードに対応する説明を理由として選択する方法が考えられる。
以上で説明した処理により、情報処理装置200は、クレーンの稼働について、危険度およびその理由を判定することができる。クレーンの稼働は、種々の運搬場面に分けられ、全てに共通の判断基準を定めることは困難である。実施例では、かかる点を考慮し、運搬場面に分けて危険度を評価するため、各運搬場面で危険度を適切に評価することが可能となる。
また、基本動作が行われたか否かの判断に、機械学習を適用することにより、危険度の判定自体に機械学習を適用しない場合であっても、その精度を向上させることができる。
さらに、危険度の評価は、種々の要素が関係し合うため、機械学習を適用すれば、より適切な評価を実現することが可能となる。
(1)最適経路設定の考え方:
クレーンで吊荷を運搬する場合、従来、運搬効率については、あまり考慮されていなかった。しかし、吊荷をA地点からB地点に移動させるとき、両地点を直線で結ぶ経路が最短距離となり、最も効率が良くなる。そこで、情報処理装置200は、運搬効率が高くなるよう最適経路を設定する機能を提供する。実際には、設備や障害物を避ける必要があるため、最適経路は、これらの拘束条件を考慮して設定される。以下、最適経路設定の考え方を示し、その処理について説明する。
拘束条件1は、施設内の設備または障害物に衝突しないこと、である。図中の例では、ハッチングを付した障害物を回避できる経路を設定する必要がある。拘束条件をさらに厳しくし、設備および障害物に対して所定の距離をあけること、と設定してもよい。
拘束条件2は、操作者の通路から所定の距離内を移動すること、である。図中に通路の境界線から距離Wの位置を破線で示した。この範囲内がクレーンの移動可能エリアとなる。
拘束条件3は、クレーンの移動方向の規制である。移動方向は、クレーンの仕様に応じて定まるものであり、本実施例では、図示する通り、クレーンは8方向に移動可能とした。東西南北の4方向にのみ移動可能なクレーンにおいては、4方向となる。かかるクレーンにおいて、東と北というように2方向のボタンを同時に操作することにより、クレーンを斜め方向に移動させることも技術的には可能であるが、危険な操作であるため、行わないことを前提とする。
なお、着地地点1から吊荷地点2までの移動時には、クレーンは空荷の状態で、天井付近を移動することができる。従って、この状態では、施設内の設備または障害物に衝突しないことという拘束条件1を省略したり、天井付近に存在する障害物等のみを考慮するようにしてもよい。このように、吊荷の有無によって拘束条件を変えることにより、一層、最適な経路を得ることが可能となる。
図17は、最適経路設定処理のフローチャートである。主として図4に示した最適経路設定部233が行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。この処理は、例えば、クレーンの稼働後に、稼働実績データを読み込み、その事後評価および経路の改善のために行うことができる。また、クレーンの稼働前に、吊荷地点、着地地点の位置座標を指定し、運搬計画を立案する作業として、最適経路を設定させる処理として行うこともできる。
情報処理装置200は、また、拘束条件を読み込む(ステップS91)。本実施例では、障害物の位置座標、操作者通路の位置座標、クレーンの移動可能方向を読み込むものとした。これらの条件は、設備内で概ね固定されているから、予めデータベースとして設定しておき、これを読み込むようにしてもよい。
情報処理装置200は、上述の各条件に従って、最適経路を設定する(ステップS92)。最適経路の考え方は、図16で説明した通りである。
そして、最適化による運転効率を算出する(ステップS95)。本実施例では、移動経路の「移動距離」で評価するものとした。従って、最適化前の移動距離と最適経路の移動距離の比を運転効率と定義している。運転効率は、任意に定義することができる。
運搬計画を実行しているときは(ステップS93)、ステップS94、S95の処理はスキップされる。
情報処理装置200は、以上で求めた最適経路および運転効率を出力して(ステップS96)、最適経路設定処理を終了する。
図18の例において、施設内の設備および障害物、操作者の通路などを表示してもよい。こうすることにより、最適経路が設定された理由を理解することが可能となる。
以上で説明した最適経路設定処理によれば、クレーンの移動経路の最適化を図ることができ、運転効率を向上させることができる。
なお、本実施例では、移動距離が最短となることを評価指標として最適経路を設定するが、最適経路は、他の評価に基づいて設定してもよい。例えば、進行方向を曲げる回数が少ない経路を最適経路として求めるものとしてもよい。
また、本実施例では、解析的に最適経路を設定するものとしたが、機械学習を利用してもよい。例えば、移動距離を「報酬」とする強化学習を利用することが考えられる。
クレーンの稼働中は、事故に至らないまでも危険な場面が生じることがある。また、運転効率を向上させる余地がある場合もある。クレーンを稼働した後、事後的に危険や運転効率の診断を行うことができれば、これらの改善を図ることができる。情報処理装置200は、かかる観点から、以下に説明する通り、クレーンの運転を事後的に診断する運転診断機能を提供する。
処理を開始すると、情報処理装置200は、稼働実績データを読み込む(ステップS100)。読み込み対象となる稼働実績データは、軌跡表示処理(図5)のステップS10と同様、種々の方法で指定することができる。
類似ケースの判断は、種々の基準で行うことができる。本実施例では、吊荷の発着地が共通する運搬を類似ケースとして関連づけるものとした。
そして、情報処理装置200は、最適経路および運転効率を読み込む(ステップS103)。最適経路等は、図17で説明した最適経路設定処理で得られた結果である。運転効率は、吊荷ごとの発着地間の運搬効率、空荷での移動時の運搬効率などに分けて算出し、また、全体の移動経路に対する総合運転効率を算出する。
また、情報処理装置200は、各種統計データを算出する(ステップS104)。統計データとしては、コントローラの押ボタンの操作回数、吊荷の運搬回数、運搬距離、総合の危険度などが挙げられる。この他の統計データを求めても良い。
また、その下には、過去の事例1、過去の事例2のボタンが表示されている。これらをクリックすると、それぞれ関連づけられた過去の事例が表示される。本実施例では、過去の事例に表示を切り替えるものとしたが、危険度のグラフについては、過去の事例を、重畳して表示できるようにしてもよい。こうすることにより、危険度が改善された状況を客観的に把握することができる。
また、図20の例では、危険度のグラフのみを示しているが、運転効率を合わせて表示してもよい。
なお、ボタンの押し間違いなどの検出は、種々の方法が考えられる。例えば、操作者がある方向の押しボタンを押した後、非常に短い時間内にその操作を中止し、逆方向のボタンを操作した場合に、押し間違いが発生したと判断するようにしてもよい。また、吊荷周囲の壁や人などに接触する方向に移動をした場合には、それが短い時間であっても押し間違いが発生したと判断するようにしてもよい。
クレーンによって、複数の吊荷を運搬する場合、その順序によって、運搬効率が異なる。吊荷を下ろした後、空荷で移動する距離が変化するからである。情報処理装置200は、かかる観点から、運転効率が高くなる搬送順序を、最適運搬シーケンスとして提供する。以下、この機能について説明する。
図中の破線で示した経路は、クレーンが空荷で移動する際に生じ得る経路を表している。経路Lacは、着地地点Aから吊荷地点Cに移動する際の経路である。同様に、経路Lab、Lba、Lbc、Lca、Lcbが得られる。
拘束条件がある場合には、これを満たす運搬シーケンスのみが選択対象となる。図21(b)の例では、×を付した3つのケースは、拘束条件を満たさないため、選択対象から除外される。従って、最適化運搬シーケンスは、残った運搬シーケンスから選択すればよい。
運搬情報を推定するため、情報処理装置200は、現在運搬中の吊荷の形状及び発着地点についての情報を入力する(ステップS112)。計画段階であれば、運搬すべき吊荷の一部について、運搬情報を入力するようにしてもよい。
情報処理装置200は、稼働実績データを読み込み(ステップS113)、類似の運搬実績を検索する(ステップS114)。類似の運搬実績は、ステップS112で入力した吊荷、発着地点と、同一の運搬情報を含むものを言う。そして、検索された運搬実績に基づいて、一日の吊荷、発着地点を推定する(ステップS114)。
また、上述の例では、運搬情報を推定することもできるため、運搬情報の入力を省略することも可能である。
図16、図17において、クレーンで吊荷を運搬する場合の経路の最適化を説明した。ただし、この最適経路は、施設内の設備および障害物は移動させない状態のものである。更なる最適化を図るためには、設備等を移動させたり、吊荷の発着地を変更したりすることが好ましい。かかる観点から、情報処理装置200は、レイアウトを最適化する機能を提供する。以下、この機能について説明する。
この状態で、まず、最適経路設定処理(図16、図17)を利用して、それぞれの候補1~3まで運搬するための最適経路を求める。このとき、施設内の設備および障害物のうち、移動可能なものについては、存在しないものとして経路を求める。図の例において候補1までの経路については、移動可能な可動障害物1については存在しないものと考え、移動できない不動障害物1を考慮して、経路を求める。この結果、運搬経路1が得られたとする。同様に候補2までの運搬経路としては、可動障害物2は存在しないものとして扱うことにより、運搬経路2が得られたとする。候補3までの運搬経路は、不動障害物2を考慮し、運搬経路3が得られたとする。
そして、これらの運搬経路1~3のうち、移動距離が最短となるものを選択する。図の例で、運搬経路1が選択されたとすると、吊荷の着地地点としては、候補1が選択されることとなり、可動障害物1は運搬経路1を実現できるよう移動することになる。
こうして、吊荷の着地点および可動障害物のレイアウトの最適化を図ることができる。
処理を開始すると情報処理装置200は、吊荷の運搬情報、施設の配置情報を入力する(ステップS120)。これらの情報としては、例えば、吊荷の発着地点、拘束条件、必要スペース、数量などが挙げられる。拘束条件は、経路最適化処理、運搬シーケンスの最適化処理で説明した通りである。必要スペースとは、着地点として必要な広さを意味する。
他に入力する情報としては、障害物の位置および可動/不動の種別、吊荷と設備との拘束性などが挙げられる。例えば、ある部品を加工のために特定の装置付近に運搬するような場合には、当該部品の着地点は、当該装置の位置に拘束されることになる。別の例として、完成品をトラックで施設外に発送する場合には、施設内での完成品の運搬先は、トラックへの積み込みヤードに拘束されることになる。拘束性とは、このように吊荷の吊荷位置または着地点が施設によって拘束される場合の拘束関係を意味する。
そして、情報処理装置200は、その発着候補地点を抽出する(ステップS122)。発着候補地点は、対象となる吊荷に対する必要スペースおよび設備との拘束性を考慮して抽出することになる。
次に、情報処理装置200は、選択された候補地点および運搬経路に応じて、可動障害物を移動する(ステップS124)。図23において、可動障害物1を移動させた処理に相当する。
ただし、可動障害物を移動するスペースが存在しない場合など、可動障害物が移動できない場合もある。そこで、情報処理装置200は、可動障害物の移動可否を判断し(ステップS125)、移動できない場合には、当該可動障害物の種別を不動障害物に変更して(ステップS126)、再度、ステップS123、S124の処理を実行する。こうすることにより、実現可能な発着地候補が定まり、レイアウトが得られる。
実施例では、解析的に最適レイアウトを求める方法を示したが、機械学習を利用して最適レイアウトを求めるものとしてもよい。例えば、吊荷の移動距離を「報酬」とする強化学習を利用することができる。こうすることにより、機械学習によって、移動距離が短くなる発着地、レイアウトを求めることが可能となる。
実施例では、「移動距離」を最適化のための評価としたが、その他の評価に基づいて最適化を行うようにしてもよい。
クレーンの稼働時には、種々の事故が発生することがある。稼働中に事故の発生を検出できれば、通報などの対処を速やかに行うことができる。また、本実施例のシステムは、カメラ124を搭載しているため、事故の画像を記録することができるから、事故発生時の画像を速やかに特定することができれば、事故原因の解析などに活用することができる。かかる観点から、情報処理装置200は、事故の発生を判断する機能を提供する。以下、この機能について説明する。
図25は、事故判断処理のフローチャートである。主として図4に示した事故判断部224が行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。この処理は、クレーンの稼働中に、稼働実績データ、3次元点群データ、画像データに基づいて、事故の発生を判断するために実行される処理である。画像データ等に加えて、作業者のヘルメット、軍手、作業着などにセンサを付したり、画像解析によって認識を容易にするための特徴的なマーカを貼付するなどして、作業者の姿勢を特定しやすくしてもよい。また、この処理は、クレーンの稼働後に、事故発生の場面を特定するために実行してもよい。
運搬画面の判断は、例えば、コントローラの押ボタンの操作内容によって判断することができる。例えば、クレーンが一定の場所に所定時間停止していた状態から、巻き上げの操作が行われた場合は「吊り上げ」と判断できる。また、移動の操作が行われているときは「運搬中」と判断できる。移動後、巻き下げの操作が行われた場合は、「吊荷降下」と判断できる。その後、再度、巻き上げの操作が行われた場合は、吊荷を下ろした後の「巻き上げ」と判断できる。
吊荷の運搬場面を判断すると、情報処理装置200は、場面ごとに以下の処理によって、危険の有無およびその程度を評価する。危険度の評価(図12)と同様の方法で判断してもよい。
情報処理装置200は、吊荷形状、操作者や障害物の位置、人の姿勢、接触の有無を検出する(ステップS131)。これらの検出は、3次元点群データおよび画像データの解析によって行うことができる。画像データは、平面的でありカメラ124から対象物までの距離の特定が困難なのに対し、3次元点群データは、3次元的に位置が把握できているため、この解析に有用である。
例えば、吊り上げ前に対しては、吊荷にワイヤを取り付けるまでの手順が対象となる。従って、例えば、
a) 吊荷が極端に傾いているか?;
b) 吊荷の付近で人が倒れているか?;
などを判断基準とすることができる。
次に、運搬場面が、運搬中であると判断された場合(ステップS130)について説明する。
情報処理装置200は、吊荷とクレーンの操作者や周囲の障害物との位置関係、クレーンの移動速度などを検出する(ステップS133)。
そして、この検出結果に応じて、運搬中の判断基準に基づいて事故の発生を判断し(ステップS134)、その結果に応じて、結果格納および通報を行う(ステップS137、S138)。
a)吊荷の付近に人物が倒れていないか?;
b)吊荷に極端な揺れや傾きはないか?;
c)移動速度が異常値でないか?;
などである。
次に、運搬場面が、吊荷降下中であると判断された場合(ステップS130)について説明する。
情報処理装置200は、吊荷とクレーンの操作者や周囲の障害物との位置関係、人の姿勢等を検出する(ステップS135)。
そして、この検出結果に応じて、吊荷降下用の判断基準に基づいて事故の発生を判断し(ステップS136)、その結果に応じて、結果格納および通報を行う(ステップS137、S138)。
a)吊荷の下に人物および障害物が存在しないか?;
b)吊荷に極端な傾きが生じていないか?;
などである。なお、吊荷の下の人物等は、吊荷降下中の画像データ等のみでは判断し難いが、吊荷降下に至るまでの一連の画像に基づいて判断することができる。即ち、吊荷降下前の画像データにおいて、吊荷近傍に人が存在しており、その後、画像の範囲外に移動したことが確認できず、吊荷降下時に当該人物が確認できない場合には、吊荷の下に当該人物が存在する可能性が高いかを判定することができる。
事故の発生の判断には、機械学習を適用することも有用である。
図26は、事故判断モデル生成処理のフローチャートである。主として図4に示した事故判断モデル生成部523が行う処理であり、ハードウェア的には学習モデル生成システム500のCPUが実行する処理である。
処理を開始すると、学習モデル生成システム500は、稼働実績データを読み込む(ステップS140)。
そして、学習モデル生成システム500は、運搬場面に応じて、学習用データを生成する(ステップS141)。図中に運搬場面と学習データの内容を示した。それぞれ先に図25で説明した内容と同様である。
運搬場面の多くは、事故が発生していない状態であることを考慮し、教師なし学習を行うものとしてもよい。この方法では、稼働実績データに基づいて、図10で説明したようにクラスタを生成するための学習を行わせるのである。こうすることで、稼働時のデータが、クラスタに属するか否かを判断すれば、事故の発生を判断することが可能となる。
図27は、事件画像提供処理のフローチャートである。主として図4に示した異常時画像提供部235が行う処理であり、ハードウェア的には情報処理装置200のCPUが実行する処理である。
処理を開始すると、情報処理装置200は、事件データベース204に記憶された事件データを読み込み、コンピュータ30にその一覧を表示する(ステップS150)。事件データには、今までに生じた事故その他の異常の発生日時が記憶されている。
事件画像提供処理においては、当時の画像データだけでなく、そのときの種々の稼働実績データ、例えば、クレーンの位置、どのような動作状態であったか、またコントローラの操作内容など、を併せて出力してもよい。
以上で説明した事故判断処理によれば、情報処理装置200は、クレーンの稼働中の事故の発生を判断することができ、通報などの対処を行う。従って、クレーンの管理者は、事故への対処を速やかに行うことができる。
また、事故の発生した時刻等が記憶されているため、当時の状況を画像で容易に確認することが可能となる。また、この画像データは、外部に提供することも可能であるため、外部の機関が、事故の状況を分析等するのに役立てることができる。
クレーンは、通常の稼働時は、吊荷の運搬に利用される。しかし、施設の終業後などには、クレーンにカメラ124が搭載されていることを活用して、監視などに利用することができる。以下では、クレーンを火災および不審者の監視に活用する例について説明する。
処理を開始すると、情報処理装置200は、正常時のスキャンパターンを読み込み(ステップS160)、スキャンパターンでクレーンを移動させる(ステップS161)。図の右側に、正常時のスキャンパターンを示した。正常時には、図中の左側に示すように、施設内をジグザグに折り返すパターンでスキャンを行う。こうすることにより、施設内全体の画像をカメラ124で順次、撮影することができる。
異常地点を特定すると、情報処理装置200は、正常時のスキャンパターンを中止し、異常地点にクレーンを移動する(ステップS165)。
こうすることにより、クレーンのカメラ124およびレーザレーダ125で、異常地点の様子を記録することができる。情報処理装置200は、その結果を事件データベース204に格納するとともに、通報を行う(ステップS169)。通報は、事故の発生時(図25のステップS138)と同様の方法をとることができる。
人間が検出できなかったときは(ステップS167)、火災についても不審者についても異常なしと判断されるため、正常時のスキャンパターンを継続する(ステップS161)。
一方、人間が検出されたときは(ステップS167)、不審者がいると判断されるため、情報処理装置200は、正常時のスキャンパターンを中止し、出口重点スキャンに変更する(ステップS168)。図の右側に、出口重点スキャンを例示した。施設内に出口1~3の3箇所の出口が存在する場合、図中に矢印で示すように、これらの出口を巡回するパターンでクレーンを移動させるのである。クレーンの移動速度は、一般的には人間の移動速度ほど速くないため、不審者を完全に追随することは困難である。一方、不審者は、施設から逃走するためには、いずれかの出口を利用しなくてはならない。そこで、出口重点スキャンに切り換えることにより、不審者の姿を補足することができる可能性を向上させることができる。出口重点スキャンにおいて、出口付近に不審者を検出したときは、スキャンを停止し、当該出口を重点的に撮影等するようにしてもよい。
情報処理装置200は、不審者を検出したときも、その結果を事件データベース204に格納するとともに、通報を行う(ステップS169)。
異常の情報は、事件データベース204に格納されているため、事件画像提供処理(図27)を活用することにより、異常時の画像データ等を提供することができ、その状況を事後的に検証しやすい利点もある。
また、異常を発見した場合のクレーンの移動も、固定のカメラでカバーされている領域を踏まえて設定してもよい。例えば、出入り口付近が固定のカメラでカバーされている場合には、可能な限り不審者を追随するよう移動させることが考えられる。
吊荷に取り付けられたワイヤをクレーンのフックに引っかけて、吊荷を吊り上げるとき、重心の上方を正確に吊り上げることは困難であり、フックの位置と重心とは若干ながらずれがあることが多かった。従って、従来、このずれに起因して、地切、即ち吊荷が床から離れる瞬間に、吊荷が左右または前後に移動することがあり、吊荷の近傍で作業をしていた作業員に衝突するなどの危険があった。
本実施例では、かかる危険を抑制するための機能として地切安全支援機能を備えている。以下、当該機能について説明する。
まず、クレーンで吊荷Baを左上の位置Pa0から、下方のPa1に搬送する場合を考える。位置Pa0の近傍に、吊り上げる際の側面から見た状態を模式的に示した。吊荷Baにワイヤを取り付け、矢印Uaのように吊り上げる時、その重心CGの位置は目測等で判断することになるため、正確に重心CGの上方を吊り上げることは困難である。従って、矢印Uaのようにクレーンを巻き上げると吊荷Baが床から離れる瞬間に、矢印Sのように振動するおそれがある。これが地切時の振動である。
そして、クレーンは、吊荷Bbを吊上げ、搬送2と示した矢印のように、位置Pb1まで搬送する。位置Pb1で着床する際には、クレーンは吊荷Bbの重心上を正確に吊り上げているから、着床時のクレーンの位置座標は、次に吊荷Bbを吊り上げる際に、重心上を正確に吊り上げるために有用である。そこで、実施例の情報処理装置200は、このときの座標CG2(X2,Y2)を吊荷Bbと対応づけて記憶しておく。
このように吊荷を着床させたときのクレーンの位置情報を登録しておき、これを利用することによって、次に吊荷を吊り上げる際に、その重心位置とクレーンとの位置関係を正確に再現するというのが、実施例における地切安全支援機能の考え方である。
図30は、クレーンによる吊荷の吊上状態を示す説明図である。吊荷の4隅にワイヤW1~W4を取り付け、これをホイスト120のフック122に引っかけることによって吊荷を吊り上げている。このとき、厳密に言えば、ワイヤW1~W4をフック122に引っかける順序によって、それぞれのワイヤへの張力のかかり具合が変わるため、その合力が吊荷の重心位置からずれる可能性がある。かかる誤差を抑制するため、例えば、図中に示すように吊荷の4隅に、1~4の数字を描いておき、ワイヤW1~W4をこの数字に従った順序でフック122に引っかけるようにしてもよい。こうすることにより、ワイヤの引っかけ方も正確に再現することができるため、より正確にホイスト120と重心との位置関係を再現することが可能となる。
上記態様において、吊荷の4隅に描くのは、数字に限らず、フック122へのワイヤの引っかけ方を特定可能な識別表示であれば、何であってもよい。
次に吊荷を搬送するとき、ホイスト120と吊荷の重心との位置関係が正確に再現されていれば、レーザ124aは、先にマーキングしたスポットMを照射するはずである。従って、レーザ124aによる照射とマーキングしたスポットMとの位置関係を見れば、ホイスト120の位置をより正確に再現することができる。
本実施例では、ホイスト120にカメラ124が取り付けられているから、その撮影画像に基づいて、レーザ124aによる照射とマーキングしたスポットMとのずれを検出し、ずれがなくなるようにホイスト120の位置を制御してもよい。
まず、着床時の位置座標の登録時に撮影画像も関連づけて登録しておく態様である。こうすることで、着床後に改めて吊荷を搬送するために位置座標を呼び出すときに、撮影画像に基づいて直感的に誤りなく位置情報を呼び出すことができる。
また、吊荷を吊り上げる際に、カメラ124で撮影した撮影画像と、登録してある撮影画像とをマッチングし、両者のずれに基づいてホイスト120と重心との位置関係を一致させるように制御してもよい。こうすることで、両者の位置関係をより正確に再現することが可能となる。
処理を開始すると、情報処理装置200は、吊荷の搬送中であるかを判断する(ステップS180)。搬送中でないときは、特に何も行わず、この処理を終了する。搬送中か否かの判断は、例えば、クレーンにかかる荷重に基づいて判断してもよいし、カメラ124で撮影した画像に基づいて判断してもよい。
例えば、クレーンのコントローラに、登録用のボタン等を設けてもよい。
また、吊荷が着床した後、ワイヤが取り外されて空荷の状態で巻上の操作がなされたときに、これを登録操作と判断するようにしてもよい。空荷か否かに関わらず巻上の操作がなされたときに、登録操作と判断する方法をとってもよい。ただし、吊荷を一旦着床させた後、位置の微修正のために再度巻上を行った場合が生じ得ることを考慮し、これを除外する処理を加えることが好ましい。
また、吊荷情報とは、位置情報と吊荷との関係を特定できれば良いから、情報処理装置200が吊荷に対して識別情報、即ち吊荷IDを付与するようにしてもよい。この場合、吊荷IDを吊荷側に描いておけば、これによって吊荷を特定することが可能となる。また、吊荷IDに、日付時刻などを含めるようにしておけば、吊荷を搬送した作業履歴によって吊荷を概ね特定することも可能となる。
このように吊荷情報を用いることにより、誤り等によって、異なる吊荷に対する位置情報が利用される危険性を抑制することができる。
なお、画像については、省略しても差し支えない。
具体的な処理としては、登録済みのデータから、ステップS185で登録される位置座標から所定の距離内に存在する位置座標を検索し、これを抹消すればよい。
なお、重複が生じないように位置座標が適切に管理されている場合には、ステップS186の処理を省略しても差し支えない。
登録済みの位置情報が無用となる場合とは、即ち、着床した吊荷が移動された場合である。吊荷は、必ずしもクレーンのみによって移動されるとは限らない。吊荷の種類によっては、フォークリフトなど別の手段によって移動される場合もあるし、別のクレーンで移動させることもあり得る。また、吊荷によっては、廃棄等で処分されることもある。
このようなときに、登録済みの位置情報を残しておくと記憶容量を浪費することになるだけでなく、他の吊荷を搬送する際に誤って利用されるおそれもある。そこで、無用となった位置情報は適宜、抹消していくことが好ましい。
本実施例では、作業員が無用な位置情報を個別に指定して抹消する方法と、情報処理装置200が自動的に抹消する方法を併用するものとした。
また、クレーンの位置情報に基づいて指定してもよい。例えば、吊荷を搬送しようとして登録済みの位置情報を呼び出し、クレーンを移動させたところ、吊荷が存在しない場所に移動してしまったというような状況では、簡易に無用な位置情報を解除対象とすることができる。
条件1は、抹消指示を受け付けることである。解除情報の指定を受けた場合でも、誤った位置情報を抹消しないよう、再度確認するのである。
条件2は、登録情報に対応する位置に、荷物が存在しないことが確認されることである。解除指示を受けない場合、ステップS191で読み込んだクレーンの位置座標に対応する登録情報が見つかったからといって、必ずしもその情報が誤りとは限らない。吊荷が置いてある場所の上を空荷のクレーンが移動しているだけのこともあるからである。そこで、カメラ124の画像などに基づいて、その登録情報に荷物があるか否かを判断し、荷物が存在しないときには、誤った登録情報であると判断して抹消するのである。
これらの条件を用いることにより、無用な位置情報の登録を抹消することができる。
処理を開始すると、情報処理装置200は、登録情報の呼出指示がなされたかを判断する(ステップS200)。呼出指示がなされたときには、登録情報の指定を受け付ける(ステップS205)。この指定は、解除指示(図32のステップS192)と同様、3通りの方法をとることができる。
そして、登録情報が指定されると、その位置情報に基づいてクレーンを移動する(ステップS206)。
そこで、情報処理装置200は、作業員の指示に従って、吊荷の吊上を行う(ステップS207)。このとき、重心を正確につりあげるため、情報処理装置200は、登録されていた画像と、カメラ124で撮影される画像のマッチングを行い、ずれの有無を判断するようにしてもよい。所定以上のずれがある場合には、地切時の振動が生じるおそれがあるため、吊上を停止したり、警報を発するなどすることが好ましい。
以上、実施例としての情報処理装置200、学習モデル生成システム500について説明した。上述の種々の特徴は、必ずしも全てを備えている必要はなく、適宜、その一部を省略したり組み合わせたりしてもよい。
また、本発明については、実施例の他、種々の変形例を構成可能である。実施例では、施設内で吊荷を運搬するクレーンを例示したが、介護施設において被介護者を運搬するための介護クレーンに適用しても良い。その他、種々の変形例が可能である。
100 天井クレーン
101、102 走行レール
103 マーカ
110 クレーンガーダ
111、112 サドル
113 センサ
114 マーカ
120 ホイスト
121 ワイヤ
122 フック
123 表示器
124 カメラ
125 レーザレーダ
127 センサ
130 コントローラ
131 ケーブル
132、133、134 押ボタン
200 情報処理装置
201 稼働実績データベース
202 3次元点群データベース
202 3次元点群データベース
203 画像データベース
204 事件データベース
205 基本動作データベース
210 クレーン移動制御部
211 位置検出部
212 データ取得部
220 メンテナンス時期判断部
221 基本動作判断部
222 統計処理部
223 危険度評価部
224 事故判断部
225 警備動作部
230 運転診断部
231 運搬シーケンス最適化部
232 表示制御部
233 最適経路設定部
234 レイアウト最適化部
235 異常時画像提供部
240 送受信部
250 地切安全支援部
500 学習モデル生成システム
501 稼働実績データベース
502 3次元点群データベース
503 画像データベース
505 基本動作データベース
510 学習用データ生成部
520 基本動作判断用学習モデル生成部
521 メンテナンス時期判断モデル生成部
522 危険度判断モデル生成部
523 事故判断モデル生成部
540 送受信部
Claims (4)
- 固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を検出する位置検出部と、
前記クレーンにおいて前記吊荷を吊り上げる際に、地切時の安全を支援するための地切安全支援部を備え、
該地切安全支援部は、
前記吊荷を着床させたときに、前記吊上装置の位置情報を該吊荷と対応づけて登録し、
前記着床した吊荷を改めて搬送する際に、前記登録した位置情報に一致するよう前記吊上装置を移動させるために、
前記吊荷を吊り下げていない状態で、前記吊上装置に対して巻下げの指示がなされた場合には、その時点における前記吊上装置から所定範囲内の前記登録された位置情報に基づいて、前記吊上装置の位置を修正する情報処理装置。 - 固定の領域内で吊荷を移動させるクレーンの稼働中に取得される情報を処理する情報処理装置であって、
前記クレーンにおいて前記吊荷を吊り上げるための装置であって水平方向に移動可能に設置された吊上装置の水平方向の位置情報を検出する位置検出部と、
該吊上装置とともに移動し、下方の画像を撮影するカメラと、
前記クレーンにおいて前記吊荷を吊り上げる際に、地切時の安全を支援するための地切安全支援部を備え、
該地切安全支援部は、
前記吊荷を着床させたときに、前記吊上装置の位置情報を該吊荷と対応づけて登録し、
前記着床した吊荷を改めて搬送する際に、前記登録した位置情報に一致するよう前記吊上装置を移動させるとともに、
前記吊荷を着床させたときに、さらに、前記カメラで撮影した画像データを登録し、
前記着床した吊荷を改めて搬送する際に、前記吊荷を吊り上げる際に前記カメラで撮影される前記吊荷の画像と、前記登録されていた画像データとのマッチングを行い、そのずれによって、地切時の振動が生じるおそれの有無を判断する情報処理装置。 - 請求項1または2記載の情報処理装置であって、
前記地切安全支援部は、
前記吊荷を着床させた後、該吊荷を外した状態で前記吊上装置の巻上が開始された時点で前記登録を行う情報処理装置。 - 請求項1または2記載の情報処理装置であって、
前記地切安全支援部は、
前記着床した吊荷を改めて吊上げたときには、前記登録された位置情報を抹消する情報処理装置。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020171200 | 2020-10-09 | ||
JP2020171200 | 2020-10-09 | ||
JP2022555519A JP7289581B2 (ja) | 2020-10-09 | 2021-10-06 | クレーン用情報処理装置 |
PCT/JP2021/036901 WO2022075340A1 (ja) | 2020-10-09 | 2021-10-06 | クレーン用情報処理装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022555519A Division JP7289581B2 (ja) | 2020-10-09 | 2021-10-06 | クレーン用情報処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022185104A JP2022185104A (ja) | 2022-12-13 |
JP7258389B2 true JP7258389B2 (ja) | 2023-04-17 |
Family
ID=81125975
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022555519A Active JP7289581B2 (ja) | 2020-10-09 | 2021-10-06 | クレーン用情報処理装置 |
JP2022163092A Active JP7258389B2 (ja) | 2020-10-09 | 2022-10-11 | クレーン用情報処理装置 |
JP2022163091A Active JP7258388B2 (ja) | 2020-10-09 | 2022-10-11 | クレーン用情報処理装置 |
JP2022163090A Active JP7228944B2 (ja) | 2020-10-09 | 2022-10-11 | クレーン用情報処理装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022555519A Active JP7289581B2 (ja) | 2020-10-09 | 2021-10-06 | クレーン用情報処理装置 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022163091A Active JP7258388B2 (ja) | 2020-10-09 | 2022-10-11 | クレーン用情報処理装置 |
JP2022163090A Active JP7228944B2 (ja) | 2020-10-09 | 2022-10-11 | クレーン用情報処理装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230242380A1 (ja) |
EP (1) | EP4227253A1 (ja) |
JP (4) | JP7289581B2 (ja) |
WO (1) | WO2022075340A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114677375B (zh) * | 2022-05-27 | 2022-10-21 | 杭州未名信科科技有限公司 | 一种智能塔吊集群的协同控制方法、装置、存储介质及终端 |
JP7420896B1 (ja) | 2022-10-20 | 2024-01-23 | 株式会社タダノ | 操縦者技量評価装置及び前記操縦者技量評価装置を有するクレーン |
CN115402933B (zh) * | 2022-11-01 | 2023-03-24 | 河南豫中起重集团有限公司 | 基于工业大数据及工业物联网的防摇起重机 |
JP2024087440A (ja) * | 2022-12-19 | 2024-07-01 | 株式会社タダノ | クレーン装置 |
CN116040487B (zh) * | 2023-03-06 | 2023-06-16 | 中国电建集团山东电力建设第一工程有限公司 | 一种基于大数据的起重设备运行安全监管系统 |
CN117430026B (zh) * | 2023-12-20 | 2024-02-20 | 国网浙江省电力有限公司金华供电公司 | 基于5g技术仓位智能管理的智能行吊控制方法 |
CN117902487B (zh) * | 2024-03-19 | 2024-07-09 | 山西六建集团有限公司 | 一种塔机任务的吊装循环数据统计与分析系统及方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130251498A1 (en) | 2010-12-03 | 2013-09-26 | Konecranes Plc | Method for positioning load and fetching positioned load or stacking loads with crane |
JP2014069933A (ja) | 2012-09-28 | 2014-04-21 | Ns Solutions Corp | 情報処理装置、情報処理方法及びプログラム |
JP2014234260A (ja) | 2013-05-31 | 2014-12-15 | 株式会社キトー | クレーン装置管理システム、情報処理装置、情報処理方法およびプログラム |
JP2015068019A (ja) | 2013-09-27 | 2015-04-13 | 株式会社日立製作所 | 搬送経路計算システム |
JP2015189528A (ja) | 2014-03-27 | 2015-11-02 | 三菱重工マシナリーテクノロジー株式会社 | クレーン運転支援装置、クレーンシステム、クレーン運転支援方法及びプログラム |
WO2017138311A1 (ja) | 2016-02-10 | 2017-08-17 | 株式会社日立産機システム | 巻上機、巻上機の管理システムおよび管理方法 |
WO2017141320A1 (ja) | 2016-02-15 | 2017-08-24 | 株式会社大島造船所 | クレーンの操作を支援するための判定装置、判定システム、プログラムおよび記録媒体 |
JP2018014092A (ja) | 2016-07-18 | 2018-01-25 | リープヘル−ヴェルク ネンツィング ゲーエムベーハー | 機械部品の期待耐用年数の推定方法 |
JP2018095373A (ja) | 2016-12-09 | 2018-06-21 | 株式会社タダノ | クレーン |
KR101983533B1 (ko) | 2019-04-23 | 2019-05-29 | 김대건 | 금형가공용 mct |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5117992A (en) * | 1991-01-28 | 1992-06-02 | Virginia International Terminals, Inc. | System for learning control commands to robotically move a load, especially suitable for use in cranes to reduce load sway |
JP6601903B2 (ja) | 2015-07-14 | 2019-11-06 | 株式会社五合 | 報知装置、及び移動システム |
JP6630881B2 (ja) | 2016-09-15 | 2020-01-15 | 株式会社五合 | 情報処理装置、カメラ、移動体、移動体システム、情報処理方法およびプログラム |
JP7138421B2 (ja) * | 2017-10-02 | 2022-09-16 | 株式会社Nttファシリティーズ | 作業支援装置、及び作業支援方法 |
-
2021
- 2021-10-06 JP JP2022555519A patent/JP7289581B2/ja active Active
- 2021-10-06 EP EP21877639.1A patent/EP4227253A1/en active Pending
- 2021-10-06 WO PCT/JP2021/036901 patent/WO2022075340A1/ja unknown
-
2022
- 2022-10-11 JP JP2022163092A patent/JP7258389B2/ja active Active
- 2022-10-11 JP JP2022163091A patent/JP7258388B2/ja active Active
- 2022-10-11 JP JP2022163090A patent/JP7228944B2/ja active Active
-
2023
- 2023-04-04 US US18/295,586 patent/US20230242380A1/en active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130251498A1 (en) | 2010-12-03 | 2013-09-26 | Konecranes Plc | Method for positioning load and fetching positioned load or stacking loads with crane |
JP2014069933A (ja) | 2012-09-28 | 2014-04-21 | Ns Solutions Corp | 情報処理装置、情報処理方法及びプログラム |
JP2014234260A (ja) | 2013-05-31 | 2014-12-15 | 株式会社キトー | クレーン装置管理システム、情報処理装置、情報処理方法およびプログラム |
JP2015068019A (ja) | 2013-09-27 | 2015-04-13 | 株式会社日立製作所 | 搬送経路計算システム |
JP2015189528A (ja) | 2014-03-27 | 2015-11-02 | 三菱重工マシナリーテクノロジー株式会社 | クレーン運転支援装置、クレーンシステム、クレーン運転支援方法及びプログラム |
WO2017138311A1 (ja) | 2016-02-10 | 2017-08-17 | 株式会社日立産機システム | 巻上機、巻上機の管理システムおよび管理方法 |
WO2017141320A1 (ja) | 2016-02-15 | 2017-08-24 | 株式会社大島造船所 | クレーンの操作を支援するための判定装置、判定システム、プログラムおよび記録媒体 |
JP2018014092A (ja) | 2016-07-18 | 2018-01-25 | リープヘル−ヴェルク ネンツィング ゲーエムベーハー | 機械部品の期待耐用年数の推定方法 |
JP2018095373A (ja) | 2016-12-09 | 2018-06-21 | 株式会社タダノ | クレーン |
KR101983533B1 (ko) | 2019-04-23 | 2019-05-29 | 김대건 | 금형가공용 mct |
Also Published As
Publication number | Publication date |
---|---|
JP2022185104A (ja) | 2022-12-13 |
WO2022075340A1 (ja) | 2022-04-14 |
US20230242380A1 (en) | 2023-08-03 |
JP7258388B2 (ja) | 2023-04-17 |
JP7228944B2 (ja) | 2023-02-27 |
JP2022185103A (ja) | 2022-12-13 |
JP7289581B2 (ja) | 2023-06-12 |
EP4227253A1 (en) | 2023-08-16 |
JPWO2022075340A1 (ja) | 2022-04-14 |
JP2022188244A (ja) | 2022-12-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7258389B2 (ja) | クレーン用情報処理装置 | |
US11752936B2 (en) | Industrial vehicle feedback system | |
CN108189043B (zh) | 一种应用于高铁机房的巡检方法及巡检机器人系统 | |
JPWO2022075340A5 (ja) | ||
CN105574683A (zh) | 一种全方位变电站巡检系统及方法 | |
JP6812311B2 (ja) | 情報処理装置、情報処理方法、および、制御プログラム | |
JP6636412B2 (ja) | 保守員自動手配システム及び保守員自動手配方法 | |
US20220051175A1 (en) | System and Method for Mapping Risks in a Warehouse Environment | |
CN110412904A (zh) | 大楼维护系统以及大楼维护辅助方法 | |
CN115752462A (zh) | 楼宇内重点巡检目标巡检方法、系统、电子设备和介质 | |
Ali et al. | Tower crane safety technologies: A synthesis of academic research and industry insights | |
CN118117487A (zh) | 一种输电线路无计划作业的多维立体监控系统 | |
CN117255978A (zh) | 用于机器人机队的管理的系统和方法 | |
US20240281946A1 (en) | Mobile robot and unmanned inspection system and method including the same | |
CN117496431B (zh) | 一种基于室内外定位系统的户外作业安全监测方法 | |
KR102635901B1 (ko) | Ai 로봇을 이용한 건설 현장의 위험 객체 인식 시스템 및 그 방법 | |
CN118842993A (en) | Climbing frame potential safety hazard identification system, climbing frame potential safety hazard identification method, electronic equipment and readable storage medium | |
JP2021039709A (ja) | プラットホーム危険度判別プログラム及びシステム | |
CN115730753A (zh) | 铁路客站设备差异化巡检方法、装置、设备及存储介质 | |
JP2024113258A (ja) | 情報処理システム、情報処理方法及び情報処理プログラム | |
RUB et al. | D6. 1–Technical requirements specification for equipment optimization | |
CN117681247A (zh) | 机器人中转区域管理 | |
JP2021060774A (ja) | プラットホーム危険度判別プログラム及びシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221012 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221012 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230207 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230320 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230329 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7258389 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |