JP2023049565A - 位置検出システム、ターゲット、及び位置検出方法 - Google Patents
位置検出システム、ターゲット、及び位置検出方法 Download PDFInfo
- Publication number
- JP2023049565A JP2023049565A JP2021159370A JP2021159370A JP2023049565A JP 2023049565 A JP2023049565 A JP 2023049565A JP 2021159370 A JP2021159370 A JP 2021159370A JP 2021159370 A JP2021159370 A JP 2021159370A JP 2023049565 A JP2023049565 A JP 2023049565A
- Authority
- JP
- Japan
- Prior art keywords
- position detection
- unit
- photographing
- color information
- extraction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 153
- 238000000605 extraction Methods 0.000 claims abstract description 84
- 239000000284 extract Substances 0.000 claims abstract description 14
- 239000000725 suspension Substances 0.000 claims description 36
- 238000009434 installation Methods 0.000 claims description 17
- 230000007246 mechanism Effects 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 description 37
- 238000005259 measurement Methods 0.000 description 13
- 230000005484 gravity Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 239000013256 coordination polymer Substances 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 4
- 230000000875 corresponding effect Effects 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 238000000034 method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 238000004804 winding Methods 0.000 description 2
- 229910000831 Steel Inorganic materials 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66C—CRANES; LOAD-ENGAGING ELEMENTS OR DEVICES FOR CRANES, CAPSTANS, WINCHES, OR TACKLES
- B66C13/00—Other constructional features or details
- B66C13/18—Control systems or devices
- B66C13/46—Position indicators for suspended loads or for crane elements
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Control And Safety Of Cranes (AREA)
Abstract
Description
本発明は、位置検出システム、ターゲット、及び位置検出方法に関する。
例えば特許文献1には、クレーンに設けられた撮影部によって、吊部上に設けられたマーカを撮影し、当該撮影情報に基づいて、吊部で吊られた対象物の位置を検出する位置検出システムが記載されている。
上述のような位置検出システムにおいて、吊部上に設けられたマーカは、帯状または放射状の形状を有している。従って、位置検出システムは、撮影情報の中の、マーカの形状のみの情報から、対象物の位置を検出している。そのため、例えば、吊部上に出来た水たまりからの太陽の反射光が撮影部に入ると、マーカの形状が区別できず、帯状の形状が崩れて正常な位置検出が出来ないかもしれない。また、手すり等の突起物からの反射光をマーカと誤認識するかもしれない。従って、対象物の位置を確実に検出できる位置検出システムが求められていた。
本発明は、このような課題を解決するためになされたものであり、対象物の位置を確実に検出できる位置検出システム、ターゲット、及び位置検出方法を提供することを目的とする。
本発明に係る位置検出システムは、クレーンの吊部材及び吊部で吊られた対象物の位置を検出する位置検出システムであって、吊部材の吊点と共に移動するクレーンの構造体に設けられ、対象物を撮影する撮影部と、撮影部の撮影情報から、色情報を抽出して、抽出領域を特定する色情報抽出部と、色情報抽出部の抽出結果に基づいて、対象物とクレーンとの相対位置を検出する位置検出部と、を備える。
本発明に係る位置検出システムにおいて、色情報抽出部は、撮影部の撮影情報から、色情報を抽出して、抽出領域を特定する。また、位置検出部は、色情報抽出部の抽出結果に基づいて、対象物とクレーンとの相対位置を検出することができる。このように、位置検出部が、撮影情報の色情報の抽出に基づく場合、例えば太陽光の反射などの外乱の影響を低減した状態で、対象物の位置検出を行うことができる。以上より、対象物の位置を確実に検出することができる。
位置検出部は、互いに異なる特性を有する複数のターゲットを検出してよい。この場合、位置検出部は、各々のターゲットの個別の特性を有効に活用することで、対象物の位置をより詳細に検出することができる。
位置検出部は、互いに異なる特性として、互いに異なる色情報を有する複数のターゲットを検出してよい。この場合、各々のターゲットの色情報を変えるだけで、容易に異なる特性の複数のターゲットを準備することができる。
位置検出部は、互いに異なる色情報を有する複数のターゲットの位置関係に基づいて、対象物の水平面内での回転方向における姿勢を検出してよい。すなわち、複数のターゲットの特性が互いに異なっているため、位置検出部は、回転方向における各ターゲットの位置関係を参照することで、容易に回転方向における対象物の姿勢を検出できる。
位置検出部は、単一の撮影部からの撮影情報に基づいて、対象物に加え、当該対象物の設置場所を検出してよい。この場合、複数の撮影部を用いなくとも、位置検出部は、単一の撮影部からの撮影情報に基づいて、容易に対象物と設置場所との相対的な位置関係を把握することができる。
位置検出システムは、構造体の動作に関わらず、撮影部を下方へ向けるように撮影部の姿勢を調整する姿勢調整機構を備えてよい。この場合、例えばジブクレーンのように構造体の動作によって撮影部の姿勢が変わりやすいクレーンの場合であっても、姿勢調整機構が、撮影部を下方へ向けるように姿勢を調整することができる。
本発明に係るターゲットは、クレーンの吊部材及び吊部で吊られた対象物の位置を検出するためのターゲットであって、画像内で抽出可能な任意の色情報を有する。
このターゲットを対象物に設けることによって、位置検出システムは、画像内でターゲットの色情報を抽出して、位置検出を行うことができる。この場合、上述の位置検出システムと同趣旨の作用・効果を得ることができる。
本発明に係る位置検出方法は、クレーンの吊部材及び吊部で吊られた対象物の位置を検出する位置検出方法であって、吊部材の吊点と共に移動するクレーンの構造体に設けられた撮影部によって、対象物を撮影する撮影工程と、撮影工程での撮影情報から、色情報を抽出して、抽出領域を特定する色情報抽出工程と、色情報抽出工程での抽出結果に基づいて、対象物とクレーンとの相対位置を検出する位置検出工程と、を備える。
この位置検出方法によれば、上述の位置検出システムと同趣旨の作用・効果を得ることができる。
本発明によれば、対象物の位置を確実に検出できる位置検出システム、ターゲット、及び位置検出方法を提供することができる。
以下、本発明による位置検出システムの好適な実施形態について図面を参照しながら説明する。図1は、本実施形態に係る位置検出システムを示す概略図である。図2は、図1が適用されるクレーンの概略構成図である。
本実施形態に係る位置検出システム100は、クレーン1の吊部材17及び吊部16で吊られた吊荷SL(対象物)の位置を検出するシステムである。位置検出システム100は、システム構成としては、計測装置10と、制御装置40と、入力部51と、出力部52と、ターゲット50A,50Bと、を備える。
図2に示すように、本実施形態において例示されるクレーン1として、旋回を行うと共に走行を行うことができるジブクレーンが挙げられる。クレーン1は、装置構成としては、走行体11、塔体12、旋回体13、ジブ14、及びマスト15を有している。
走行体11は、車輪が走行レール上を駆動されることで、走行レールに沿ってクレーン1を走行させる。塔体12は、走行体11上に立設された柱状の構造体である。旋回体13は、塔体12の上端に設けられ、塔体12に対して鉛直軸線CL回りに旋回可能である。旋回体13は、その上部に運転室13aを含んでいる。ジブ14は、旋回体13の一部にピン結合されている。マスト15は、旋回体13上に立設されている。旋回体13の後側の端部、マスト15の上端部であるマストトップ、及びジブ14の先端部は、ワイヤーロープW1により互いに支持されている。ワイヤーロープW1が巻取り及び巻戻しされることにより、ジブ14は、その基端部を支点として起伏動作を行う。また、ワイヤーロープW2は、吊部16と連結されている。ワイヤーロープW2が巻き取り及び巻戻しされることにより、吊部16は、上下方向へ移動する。なお、ワイヤーロープW2のうち、ジブ14の上端から下方へ延びることで、吊部16及び吊荷SLを吊っている部分を吊部材17と称する。なお、吊部材17の振幅の基点となる箇所を「吊点SP」と称する。
吊部16には、ターゲット50A,50Bが設けられている。図3に示すように、ターゲット50A,50Bは、後述の撮影部21が上側から撮影できるように、吊部16の上面16aに設けられている。ターゲット50A,50Bは、吊部16の中央よりも一方側に寄せられた位置にて、互いに並べられた状態で配置されている。また、ターゲット50A、50Bは円形状を有している。ただし、ターゲット50A,50Bの位置、形状、及び大きさは特に限定されない。また、ターゲットの数量も特に限定されない。
ターゲット50A,50Bは、互いに異なる特性を有する。互いに異なる特性は、画像中でターゲット50Aとターゲット50Bとを区別可能な特性であればよく、例えば、互いに異なる色情報、互いに異なる形状などが挙げられる。本実施形態では、ターゲット50A,50Bは、互いに異なる色情報を有している。ターゲット50A,50Bは、画像内で抽出可能な任意の色情報をそれぞれ有する。画像内で抽出可能な任意の色情報とは、後述の色情報抽出部42の処理によって抽出可能な色情報であればよい。このような色情報は、具体的には、赤色、緑色、青色などの様々な色が挙げられ、白色以外の色であればよい。例えば、ターゲット50Aは全体が赤色となっており、ターゲット50Bは全体が緑色となっている。ただし、ターゲット50A,50Bの色は特に限定されない。
図1に戻り、計測装置10は、撮影部21と、距離計測部22と、傾斜検出部23と、を備えている。計測装置10は、撮影部21、距離計測部22、及び傾斜検出部23によって検出された検出情報を制御装置40へ送信する。また、計測装置10は、制御装置40からの指令信号を受信する。
撮影部21は、吊荷SLを撮影する計測機器である。撮影部21は、吊点SPと共に移動するクレーン1の構造体30に設けられる。本実施形態では、図2に示すように、撮影部21は、ジブ14の先端部に設けられた取付部材31に取り付けられている。撮影部21は、レンズ部が鉛直方向の下側を向くように配置されている。撮影部21は、下方へ広がる撮影範囲E内の撮影情報を取得することができる。撮影範囲Eは、吊荷SLの振れ角度が許容できる最大の値となっても、吊荷SLが撮影範囲E外に出ないような大きさに設定される。撮影部21は、一台の撮影範囲Eだけで吊荷SLの移動範囲の全範囲を網羅できることが好ましい。撮影部21によって取得された撮影情報、すなわち画像の一例を図3に示す。撮影部21は、一般的なカラーカメラによって構成されてよい。従って、撮影部21によって撮影された画像は、カラーの画像である。
撮影部21は、吊点SPの近傍に設けられている。ただし、撮影部21は、吊点SPと共に移動する構造体30であり、且つ、吊荷SLを撮影可能な位置であれば、どこに設けられてもよい。例えば、ジブ14の長手方向における中央付近の位置、またはジブ14の旋回体13との接続部付近の位置に設けられてもよい。
ここで、図4に示すように、位置検出システム100は、構造体30の動作に関わらず、撮影部21を下方へ向けるように撮影部21の姿勢を調整する姿勢調整機構60を備える。姿勢調整機構60は、保持部61と、ヒンジ部62と、固定部63と、を備える。保持部61は、撮影部21を保持する部材である。保持部61は、底板部61aと、上板部61bと、底板部61aと上板部61bとを四隅で連結する柱部61cと、を備える。底板部61aの下面には、撮影部21が設けられる。また、底板部61aの上面には傾斜検出部23が設けられる。底板部61aは、上板部61bに比して厚みが厚く、且つ、重く構成されている。ヒンジ部62は、保持部61の上板部61bと、固定部63と、を回転可能に連結する部材である。
固定部63は、クレーン1の構造体30に姿勢調整機構60を固定するための部材である。クレーン1の構造体30の姿勢が変化することに伴って、固定部63の姿勢も変化する。例えば、図4(a)に示す状態では、固定部63は水平な状態で構造体30に取り付けられている。この状態では、保持部61の底板部61aも水平な状態となっている。これに対し、ジブ14が起伏すると、図4(b)に示すように、固定部63は、水平に対して傾斜するような姿勢となる。このとき、保持部61は、ヒンジ部62によって、固定部63に対して相対的に回転する。従って、保持部61の底板部61aの水平な状態が保たれる。このとき、底板部61aの重量が大きいことにより、固定部63に対して回転し易くなっている。これにより、構造体30の動作に関わらず、撮影部21が下側を向いた状態が維持される。
図1に示すように、距離計測部22は、撮影部21と吊荷SLとの距離を検出する計測機器である。当該距離は、吊部材17の長さに近似させることができる。従って、距離計測部22は、ワイヤーロープW2を巻き取る巻取装置32に設けられた巻き出し量の検出センサによって構成されてよい(図2参照)。当該検出センサは、巻き出されたワイヤーロープW2の巻き出し量に基づいて、吊部材17の長さを検出可能である。なお、距離計測部22は、このような巻取装置32に設けられた検出センサに限定されず、例えば、撮影部21付近に設けられたレーザ式やレーダ式の距離計測器によって構成されてもよい。また、距離計測部22は省略されてもよい。
傾斜検出部23は、撮影部21の傾斜量を検出する計測機器である。傾斜検出部23は、水平方向に対する撮影部21の傾斜量が変化した場合、当該傾斜量を検出する。傾斜検出部23は、撮影部21の傾斜量が変化した時に、同じ傾斜量で傾斜する位置に設けられる。傾斜検出部23は、撮影部21が取り付けられている部材と、同じ部材に取り付けられればよい。例えば、傾斜検出部23は、撮影部21が取り付けられた底板部61aに設けられてよい(図4参照)。なお、傾斜検出部23は省略されてもよい。
入力部51は、ユーザーが制御装置40に対して情報入力を行うインターフェースである。入力部51は、例えば、キーボード、マウス、タッチパネル、マイクなどが採用される。出力部52は、制御装置40からの情報をユーザーに出力するインターフェースである。出力部52は、例えば、モニタ、スピーカなどが採用される。
制御装置40は、位置検出システム100全体を制御する装置である。制御装置40は、プロセッサ、メモリ、ストレージ、通信インターフェース及びユーザインターフェースを備え、一般的なコンピュータとして構成されている。プロセッサは、CPU(Central Processing Unit)などの演算器である。メモリは、ROM(Read Only Memory)やRAM(Random Access Memory)などの記憶媒体である。ストレージは、HDD(Hard Disk Drive)などの記憶媒体である。通信インターフェースは、データ通信を実現する通信機器である。プロセッサは、メモリ、ストレージ、通信インターフェース及びユーザインターフェースを統括し、後述する機能を実現する。制御装置40では、例えば、ROMに記憶されているプログラムをRAMにロードし、RAMにロードされたプログラムをCPUで実行することにより各種の機能を実現する。制御装置40は、複数のコンピュータから構成されていてもよい。
制御装置40は、情報取得部41と、色情報抽出部42と、位置検出部43と、記憶部44と、を備える。
情報取得部41は、計測装置10から検出情報を取得する。情報取得部41は、撮影部21によって撮影された撮影情報(すなわち画像)を取得する。また、情報取得部41は、距離計測部22による計測結果、及び/又は傾斜検出部23による検出結果を取得する。
記憶部44は、位置検出システム100の位置検出に用いられる各種情報を記憶する。記憶部44は、吊部16に設けられたターゲット50A,50Bに関する情報を記憶する。このような情報として、例えば、ターゲット50A,50Bの色情報、形状情報、大きさ情報、位置情報などが挙げられる。
色情報抽出部42は、撮影部21の撮影情報から、色情報を抽出して、抽出領域を特定する。色情報抽出部42は、画像の中から、特定の色情報を抽出し、当該色情報を有する領域を抽出領域として特定する。色情報抽出部42は、少なくともターゲット50A,50Bに対応する領域は、抽出領域として特定する。色情報抽出部42は、画像の中において、ターゲット50A,50B以外の領域であっても、特定の色情報を有している領域であれば、抽出領域として特定する。
位置検出部43は、色情報抽出部42の抽出結果に基づいて、吊荷SLとクレーン1との相対位置を検出する。位置検出部43は、吊荷SLとクレーン1との相対位置として、吊荷SLの振れ角を検出することができる。例えば、図3に示すように、位置検出部43は、撮影部21の画像に対し、吊点SP鉛直下の位置を振れ角の原点OP(振れ角0点)とする。位置検出部43は、画像中のターゲット50A,50Bによる色彩パターンと、原点OPとの距離を振れ角として検出する。ここでは、位置検出部43は、色彩パターンの重心WPと、原点OPとのX方向の距離をX方向振れ角θxとして検出する。位置検出部43は、色彩パターンの重心WPと、原点OPとのY方向の距離をY方向振れ角θyとして検出する。このように、位置検出部43は、色彩パターン重心WPの振れ角に基づいて、吊荷SLのクレーン1に対する相対位置を検出する。
位置検出部43は、互いに異なる特性を有する複数のターゲット50A,50Bを検出する。位置検出部43は、互いに異なる特性として、互いに異なる色情報を有する複数のターゲット50A,50Bを検出する。
次に、図5及び図6を参照して、色情報抽出部42及び位置検出部43の具体的な処理の一例について説明する。図5(a)は、撮影部21によって撮影されたカラー画像CPを示す。このカラー画像CPは、RGB(赤緑青)の画像信号によって構成された画像である。カラー画像CPには、吊部16及びターゲット50A,50Bが写っている。カラー画像CP内において、ターゲット50Aは赤色で表示され、ターゲット50Bは緑色で表示され、吊部16は光の影響で白色に表示される。また、カラー画像CPには、吊部16よりも遠方の様子も写り込んでいる。このうち、物体OB1,OB2は赤色で表示され、物体OB3,OB4,OB5は緑色で表示される。
色情報抽出部42は、色情報を抽出するために、カラー画像CPのRGB(赤緑青)の画像信号をHSV(色相、彩度、明度)に変換する。そして、色情報抽出部42は、H(色相)画像において、ターゲット50A,50Bの色でフィルタを掛けたフィルタ画像FP1,FP2を取得する。図5(b)は、ターゲット50Aの色である赤色でフィルタを掛けたフィルタ画像FP1を示す。図5(c)は、ターゲット50Bの色である緑色でフィルタを掛けたフィルタ画像FP2を示す。図5(b)に示すように、フィルタ画像FP1において、赤色の色情報を有する領域は明るく表示され、他は暗く表示される。また、図5(b)に示すように、フィルタ画像FP2において、緑色の色情報を有する領域は明るく表示され、他は暗く表示される。
そのため、色情報抽出部42は、フィルタ画像FP1の中から、赤色の色情報を抽出し、当該赤色の色情報を有する領域を抽出領域RE1,RE2,RE6として抽出する。なお、抽出領域RE1は物体OB1に対応し、抽出領域RE2は物体OB2に対応し、抽出領域RE6はターゲット50Aに対応する。色情報抽出部42は、フィルタ画像FP2の中から、緑色の色情報を抽出し、当該緑色の色情報を有する領域を抽出領域RE3,RE4,RE5,RE7として抽出する。なお、抽出領域RE3は物体OB3に対応し、抽出領域RE4は物体OB4に対応し、抽出領域RE5は物体OB5に対応し、抽出領域RE7はターゲット50Bに対応する。
次に、位置検出部43は、抽出領域RE1~RE7の中から、ターゲット50A,50Bに該当するものを特定する。なお、図6は、フィルタ画像FP1とフィルタ画像FP2とを合成した合成フィルタ画像FP3である。図6に示すように、位置検出部43は、抽出領域RE1~RE7を評価して、各々の重心位置、及び面積を演算する。図6において、「Pr」は赤色の抽出領域であることを示し、「Pg」は緑色の抽出領域であることを示し、「Pr」「Pg」に付された番号は識別番号であり、カッコの中の数値は抽出領域の面積を示しており、十字のマークは抽出領域の重心を示している。
撮影部21とターゲット50A,50Bとの間の距離、画像内のターゲット50A,50Bの面積、ターゲット50A,50B間の要素間距離との関係は、演算又は計測を事前に行われ、関連付けした対比データとして記憶部44に記憶される。位置検出部43は、距離計測部22で計測された距離と、記憶部44の対比データとを照らし合わせることで、合成フィルタ画像FP3内におけるターゲット50A,50Bの面積、及びターゲット50A,50B間の要素間距離の予定値を取得する。また、合成フィルタ画像FP3内でのターゲット50A,50Bの外接長方形(図6において、白色の破線で示す長方形)の縦横比の予定値は、予め記憶部44に記憶されている。
位置検出部43は、合成フィルタ画像FP3内の抽出領域RE1~RE7のうち、ターゲット50A,50Bに該当しないものを候補から外すことで、ターゲット50A,50Bに該当する抽出領域を特定する。具体的に、位置検出部43は、面積の値と、外接長方形の縦横比の値が、ターゲット50A,50Bの予定値から一定以上外れている抽出領域については、候補から除去する。位置検出部43は、抽出領域RE2,RE3,RE4の面積が、ターゲット50A,50Bの予定値に比べて小さ過ぎるため、候補から外す。位置検出部43は、抽出領域RE1の外接長方形の縦横比が、ターゲット50A,50Bの予定値から大きく外れているため、候補から外す。これにより、抽出領域RE5,RE6,RE7が候補として残る。位置検出部43は、抽出領域RE6と抽出領域RE7との要素間距離D1、及び抽出領域RE5と抽出領域RE6との要素間距離D2を演算する。位置検出部43は、ターゲット50A,50Bの要素間距離の予定値と、要素間距離D1,D2とを比較する。これにより、位置検出部43は、予定値に最も近い要素間距離D1に係る抽出領域RE6と抽出領域RE7が、ターゲット50A,50Bであると認識する。
位置検出部43は、抽出領域RE6は赤色の領域であるためターゲット50Aに対応すると認識し、抽出領域RE7は緑色の領域であるためターゲット50Bに対応すると認識する。ここで、位置検出部43は、互いに異なる色情報を有する複数のターゲット50A,50Bの位置関係に基づいて、吊荷SLの水平面内での回転方向における姿勢を検出することができる。なお、ここでの回転方向は、鉛直方向に延びる中心軸を基準とした回転方向である。例えば、抽出領域RE6がターゲット50Aに対応し、抽出領域RE7がターゲット50Bに対応する姿勢が、吊荷SLの正規の姿勢(回転方向における0°の姿勢)であるものとする。これに対し、位置検出部43が、抽出領域RE6がターゲット50Bに対応し、抽出領域RE7がターゲット50Aに対応することを検出した場合、吊荷SLの水平面内での回転方向における姿勢が、180°回転していることを検出する。
位置検出部43は、抽出領域RE6,RE7の重心をターゲット50A,50Bのターゲット位置とする。また、位置検出部43は、両者のターゲット位置から、色彩パターンの重心WPを演算する。位置検出部43は、事前に分かっているターゲット50A,50B間の幾何学的配置の特徴から、スキュー角度を演算する。
ここで、撮影部21の姿勢(レンズの向き)が、鉛直方向に対して一定の場合には、位置検出部43は、事前に計測等で求めた振れ角の原点OP1の位置と、上記で得られた色彩パターンの重心WPとの距離に基づいて、振れ角θx,θy(図3参照)を検出する。予め求められた原点OP1の位置は、記憶部44に記憶される。ここで、撮影部21の姿勢が変化する場合には、振れ角の原点の位置が変化する。図6では、原点OP1から原点OP2に変化している。従って、位置検出部43は、傾斜検出部23の検出結果に基づいて、振れ角の原点OP2を、元の位置である原点OP1に補正する。
なお、制御装置40は、撮影部21の撮影情報、傾斜検出部23の検出結果、及び距離計測部22の計測結果を常時取込、振れ角の評価演算を常時行ってよい。そして、制御装置40は、振れ角の情報を、上位側の運転画面(出力部52)や振れ止めシステム等に送信してよい。
ここで、図7に示すように、位置検出部43は、単一の撮影部21からの撮影情報に基づいて、吊荷SLに加え、当該吊荷SLの設置場所71を検出する。設置場所71は、クレーン1が吊っている吊荷SLを設置する場所、またはクレーン1の吊対象となる吊荷SLが設置されている場所である。図7に示す例では、クレーン1が吊っている吊荷SLを設置する場所としての設置場所71が例示されている。設置場所71には、ターゲット70A、70Bが設けられている。ターゲット70A,70Bは互いに異なり、且つターゲット50A,50Bとも異なる色情報を有する。設置場所71の中には、吊荷SLを設置する領域を厳密に規定した吊荷設置枠72が設定されている。ターゲット70A,70Bは、吊荷設置枠72の外側に設けられている。位置検出部43は、ターゲット50A,50Bと同様な方法で、ターゲット70A,70Bの位置を特定する。ターゲット70A,70Bと吊荷設置枠72との位置関係は予め設定されているため、位置検出部43は、ターゲット70A,70Bに基づいて、画像内における吊荷設置枠72の位置を検出することができる。
上述のように、ターゲット50A,50Bの色彩パターンとターゲット70A,70Bの色彩パターンによって、位置検出部43は、吊部16と設置場所71の区別を行うことができ、同じ画像上での位置と角度を評価できる。また、クレーン1が自動で吊荷SLの保持、または荷降ろし時には、吊部16と設置場所71の検出内容に基づいて、両者の相対位置を検出することができる。これにより、クレーン1は、吊荷SLの保持・荷降ろしが出来る相対位置、及び角度範囲に収まる事を確認しながら、吊荷SLのハンドリングを行うことができる。
次に、図8を参照して、位置検出システム100による位置検出方法の内容について説明する。図8に示すように、撮影部21は、吊荷SLを撮影する(ステップS110:撮影工程)。撮影部21は撮影情報を制御装置40へ送信し、制御装置40の情報取得部41が撮影情報を取得する。
次に、色情報抽出部42は、ステップS110での撮影情報から、色情報を抽出して、抽出領域を特定する(ステップS120:色情報抽出工程)。次に、位置検出部43は、ステップS120での抽出結果に基づいて、吊荷SLとクレーン1との相対位置を検出する(ステップS130:位置検出工程)。
具体的に、ステップS130では、位置検出部43は、複数の抽出領域の中から、ターゲット50A,50Bに対応するものを特定する(ステップS140)。次に、位置検出部43は、ターゲット50A,50Bの重心に基づいて、振れ角を検出する(ステップS150)。次に、位置検出部43は、ステップS150で検出した振れ角に基づいて、吊荷SLの位置を検出する(ステップS160)。ステップS160が終了したら、図8に示す制御処理が終了し、再びステップS110から処理が開始される。
次に、本実施形態に係る位置検出システム100、ターゲット50A,50B、及び位置検出方法の作用・効果について説明する。
本実施形態に係る位置検出システム100において、色情報抽出部42は、撮影部21の撮影情報から、色情報を抽出して、抽出領域を特定する。また、位置検出部43は、色情報抽出部42の抽出結果に基づいて、吊荷SLとクレーン1との相対位置を検出することができる。このように、位置検出部43が、撮影情報の色情報の抽出に基づく場合、例えば太陽光の反射などの外乱の影響を低減した状態で、吊荷SLの位置検出を行うことができる。以上より、位置検出部43は、ターゲット以外の光源を誤検出することなく、吊荷SLの位置を確実に検出することができる。
位置検出部43は、互いに異なる特性を有する複数のターゲット50A,50Bを検出してよい。この場合、位置検出部43は、各々のターゲット50A,50Bの個別の特性を有効に活用することで、吊荷SLの位置をより詳細に検出することができる。
位置検出部43は、互いに異なる特性として、互いに異なる色情報を有する複数のターゲット50A,50Bを検出してよい。この場合、各々のターゲット50A,50Bの色情報を変えるだけで、容易に異なる特性の複数のターゲット50A,50Bを準備することができる。例えば、形状を変えることで異なる特性とする場合、各ターゲットの形状を工夫する必要があり、且つ、吊部16の設置場所の制約などを考慮する必要がある。これに対し、ターゲット50A,50Bは、両方ともシンプルな円形として、互いの色を変えるだけで容易に特性を変えている。
位置検出部43は、互いに異なる色情報を有する複数のターゲット50A,50Bの位置関係に基づいて、吊荷SLの水平面内での回転方向における姿勢を検出してよい。すなわち、複数のターゲット50A,50Bの特性が互いに異なっているため、位置検出部43は、回転方向における各ターゲット50A,50Bの位置関係を参照することで、容易に回転方向における吊荷SLの姿勢を検出できる。
位置検出部43は、単一の撮影部21からの撮影情報に基づいて、吊荷SLに加え、当該吊荷SLの設置場所を検出してよい。この場合、複数の撮影部21を用いなくとも、位置検出部43は、単一の撮影部21からの撮影情報に基づいて、容易に吊荷SLと設置場所との相対的な位置関係を把握することができる。
位置検出システム100は、構造体30の動作に関わらず、撮影部21を下方へ向けるように撮影部21の姿勢を調整する姿勢調整機構60を備えてよい。この場合、例えばジブクレーンのように構造体30の動作によって撮影部21の姿勢が変わりやすいクレーンの場合であっても、姿勢調整機構60が、撮影部21を下方へ向けるように姿勢を調整することができる。
本実施形態に係るターゲット50A,50Bは、クレーン1の吊部材17及び吊部16で吊られた吊荷SLの位置を検出するためのターゲット50A,50Bであって、画像内で抽出可能な任意の色情報を有する。
このターゲット50A,50Bを吊荷SLに設けることによって、位置検出システム100は、画像内でターゲット50A,50Bの色情報を抽出して、位置検出を行うことができる。この場合、上述の位置検出システム100と同趣旨の作用・効果を得ることができる。
本実施形態に係る位置検出方法は、クレーン1の吊部材17及び吊部16で吊られた吊荷SLの位置を検出する位置検出方法であって、吊部材17の吊点SPと共に移動するクレーン1の構造体30に設けられた撮影部21によって、吊荷SLを撮影する撮影工程と、撮影工程での撮影情報から、色情報を抽出して、抽出領域を特定する色情報抽出工程と、色情報抽出工程での抽出結果に基づいて、吊荷SLとクレーン1との相対位置を検出する位置検出工程と、を備える。
この位置検出方法によれば、上述の位置検出システム100と同趣旨の作用・効果を得ることができる。
また、位置検出システム100は、色情報を使うことにより、太陽光反射などの外乱に対してロバスト性の高い位置検出を行うことができる。更に、色情報を用いて位置検出を行うため、撮影部21として一般的なカラーカメラの利用が可能となる。従って、安価なシステムとなり、また監視用途のカメラとの兼用が可能となりシステムの導入が容易になる。また、吊部16上に光源などの特別なターゲットの配置を不要とすることができるため、システムの導入が容易となる。
本発明は、上述の実施形態に限定されるものではない。
例えば、上述の実施形態では、クレーン1としてジブクレーンを例示したが、クレーンの種類は特に限定されるものではない。例えば、天井クレーン、ゴライアスクレーン、レードルクレーンなどのクレーンに対して、本発明を適用してもよい。レードルクレーンの場合、溶融して赤くなった金属が存在する環境で作業が行われる。従って、位置検出システム100は、吊荷SLの背景の赤くなった高熱の金属の色を抽出して、吊荷SLの位置を検出してよい。このように、レードルクレーンのように吊荷にターゲットが置けない場合や、吊具の色パターンが粉塵等で埋もれてしまうような場合でも、位置検出システムは、溶鋼の色を検出の対象とする事ができるので、吊荷の振れの検出を行うことが可能となる。
上述の実施形態では、距離計測部22を用いて撮影部21と吊荷SLとの距離を計測していた。距離計測部22を省略する場合、画像中のターゲット50A,50Bの情報のみに基づいて吊荷SLを認識し、その画像上のターゲット50A,50Bのサイズ基づいて、撮影部21と吊荷SL間の距離を推定してよい。
振れ検出のロバスト性向上させる時には、色彩形状パターンを吊部16上の光源で作り、輝度の情報も利用して位置検出を行ってよい。これにより、外乱を除去してロバスト性を向上させることができる。なお、パトランプなどの色付きの光源をターゲットとして、色情報の抽出が行われてもよい。
位置検出部43は、異なる複数の吊荷SLの色彩パターンを同時に検出可能としてもよい。この場合、各吊荷SLに固有の色彩パターンを与える事により、位置検出部43は、振れ角と同時に吊荷SLの識別も行うことができる。
上述の実施形態では、位置検出システム100は、単一の撮影部21によって吊荷SLの位置検出を行っていたが、複数の撮影部21を用いてもよい。
10…クレーン、21…撮影部、42…色情報抽出部、43…位置検出部、50A,50B,70A,70B…ターゲット、60…姿勢調整機構、100…位置検出システム。
Claims (8)
- クレーンの吊部材及び吊部で吊られた対象物の位置を検出する位置検出システムであって、
前記吊部材の吊点と共に移動する前記クレーンの構造体に設けられ、前記対象物を撮影する撮影部と、
前記撮影部の撮影情報から、色情報を抽出して、抽出領域を特定する色情報抽出部と、
前記色情報抽出部の抽出結果に基づいて、前記対象物と前記クレーンとの相対位置を検出する位置検出部と、を備える、位置検出システム。 - 前記位置検出部は、互いに異なる特性を有する複数のターゲットを検出する、請求項1に記載の位置検出システム。
- 前記位置検出部は、互いに異なる特性として、互いに異なる色情報を有する複数のターゲットを検出する、請求項2に記載の位置検出システム。
- 前記位置検出部は、互いに異なる特性を有する複数の前記ターゲットの位置関係に基づいて、前記対象物の水平面内での回転方向における姿勢を検出する、請求項2又は3に記載の位置検出システム。
- 前記位置検出部は、単一の前記撮影部からの前記撮影情報に基づいて、前記対象物に加え、当該対象物の設置場所を検出する、請求項1~4の何れか一項に記載の位置検出システム。
- 前記構造体の動作に関わらず、前記撮影部を下方へ向けるように前記撮影部の姿勢を調整する姿勢調整機構を備える、請求項1~5の何れか一項に記載の位置検出システム。
- クレーンの吊部材及び吊部で吊られた対象物の位置を検出するためのターゲットであって、
画像内で抽出可能な任意の色情報を有する、ターゲット。 - クレーンの吊部材及び吊部で吊られた対象物の位置を検出する位置検出方法であって、
前記吊部材の吊点と共に移動する前記クレーンの構造体に設けられた撮影部によって、前記対象物を撮影する撮影工程と、
前記撮影工程での撮影情報から、色情報を抽出して、抽出領域を特定する色情報抽出工程と、
前記色情報抽出工程での抽出結果に基づいて、前記対象物と前記クレーンとの相対位置を検出する位置検出工程と、を備える、位置検出方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021159370A JP2023049565A (ja) | 2021-09-29 | 2021-09-29 | 位置検出システム、ターゲット、及び位置検出方法 |
PCT/JP2022/036183 WO2023054475A1 (ja) | 2021-09-29 | 2022-09-28 | 位置検出システム、ターゲット、及び位置検出方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021159370A JP2023049565A (ja) | 2021-09-29 | 2021-09-29 | 位置検出システム、ターゲット、及び位置検出方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023049565A true JP2023049565A (ja) | 2023-04-10 |
Family
ID=85782848
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021159370A Pending JP2023049565A (ja) | 2021-09-29 | 2021-09-29 | 位置検出システム、ターゲット、及び位置検出方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2023049565A (ja) |
WO (1) | WO2023054475A1 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2703546B2 (ja) * | 1987-12-29 | 1998-01-26 | 川崎製鉄株式会社 | 荷物載置場所のターゲット認識方法 |
JP3237558B2 (ja) * | 1996-01-29 | 2001-12-10 | 日本鋼管株式会社 | ロープ懸垂式クレーンの吊り荷の位置検出装置 |
JP2010091517A (ja) * | 2008-10-10 | 2010-04-22 | Soka Univ | 位置計測装置 |
DE202012012116U1 (de) * | 2012-12-17 | 2014-03-19 | Liebherr-Components Biberach Gmbh | Turmdrehkran |
-
2021
- 2021-09-29 JP JP2021159370A patent/JP2023049565A/ja active Pending
-
2022
- 2022-09-28 WO PCT/JP2022/036183 patent/WO2023054475A1/ja unknown
Also Published As
Publication number | Publication date |
---|---|
WO2023054475A1 (ja) | 2023-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9738493B2 (en) | Tower slewing crane | |
WO2021208273A1 (zh) | 用于识别状态参数的系统、吊装定位系统及吊装设备 | |
JP5642409B2 (ja) | クレーンの制御装置及びクレーン | |
JP2020097487A (ja) | 光学センサ及び/又は電磁センサを使用してクレーン状態を判定するためのシステム | |
WO2020013054A1 (ja) | クレーン | |
JP6491576B2 (ja) | 角度検出装置 | |
JP2018080054A (ja) | 作業支援装置、及び作業支援方法 | |
CN111487610A (zh) | 起重机及其吊装作业的定位系统和定位方法、存储介质 | |
CN112010187B (zh) | 一种基于塔吊的监测方法及装置 | |
CN212425180U (zh) | 吊装信息识别系统、吊装定位系统及吊装设备 | |
WO2023054475A1 (ja) | 位置検出システム、ターゲット、及び位置検出方法 | |
JP2010091517A (ja) | 位置計測装置 | |
KR100624008B1 (ko) | 크레인용 스프레더의 자동제어를 위한 자동착지시스템 및그 방법 | |
JP7064977B2 (ja) | 操作支援システム | |
JP6879618B2 (ja) | クレーンの運転支援システム及び運転支援方法 | |
JP2023141651A (ja) | 吊荷移動経路生成装置、積載型トラッククレーンおよびプログラム | |
WO2020085394A1 (ja) | クレーンシステム、クレーン位置決め装置、及びクレーン位置決め方法 | |
JP3933284B2 (ja) | 振れ検出装置 | |
JP6696102B1 (ja) | 画像処理装置およびマーカ | |
JP3237558B2 (ja) | ロープ懸垂式クレーンの吊り荷の位置検出装置 | |
JPH0662267B2 (ja) | 吊荷の振れ角検出方法 | |
JP4163289B2 (ja) | 振れ検出装置の校正方法 | |
JP7322548B2 (ja) | 吊りロープ振れ判定方法、データ処理装置、クレーン | |
WO2019017472A1 (ja) | ガイド情報表示装置、クレーンおよびガイド情報の生成方法 | |
JP7063516B2 (ja) | クレーンの操作支援システムおよび操作支援方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20240617 |