JP5870444B2 - 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム - Google Patents

位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム Download PDF

Info

Publication number
JP5870444B2
JP5870444B2 JP2011224941A JP2011224941A JP5870444B2 JP 5870444 B2 JP5870444 B2 JP 5870444B2 JP 2011224941 A JP2011224941 A JP 2011224941A JP 2011224941 A JP2011224941 A JP 2011224941A JP 5870444 B2 JP5870444 B2 JP 5870444B2
Authority
JP
Japan
Prior art keywords
position information
target position
marker
location
article
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011224941A
Other languages
English (en)
Other versions
JP2013082549A (ja
Inventor
山本 力
力 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimizu Corp
Original Assignee
Shimizu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimizu Corp filed Critical Shimizu Corp
Priority to JP2011224941A priority Critical patent/JP5870444B2/ja
Publication of JP2013082549A publication Critical patent/JP2013082549A/ja
Application granted granted Critical
Publication of JP5870444B2 publication Critical patent/JP5870444B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control And Safety Of Cranes (AREA)

Description

本発明は、位置特定装置、位置特定方法、位置特定プログラム、および位置特定システムに関する。
撮影装置により撮影されて得られた物体の画像の解析処理を実行することによって物体に設けられたターゲットを認識し、その画像上のターゲットを追尾することによって撮影装置と物体との位置関係を制御するビジュアルフィードバック技術が知られている。このビジュアルフィードバック技術は、クレーンのフックを資材の玉掛け可能位置に移動させる制御に応用されている。例えば、建設資材に設けられた特定のマーカ図形をターゲットとし、ビジュアルフィードバック技術を適用することによって、クレーンのフックを玉掛け可能位置に誘導するクレーン制御が知られている。
また、物体の位置情報が記録されたバーコードまたはQRコード(登録商標)をターゲットとし、位置調整部がこれらバーコードまたはQRコード(登録商標)に記録されたコードから位置情報を読み取り、この位置情報に基づいて位置を調整する技術が知られている(例えば、特許文献1参照)。
特開2011−36107号公報
上記のビジュアルフィードバック技術においては、物体の撮像画像を時系列に取得し、各撮像画像について画像処理を実行してターゲットの位置をフィードバックさせる必要がある。よって、ビジュアルフィードバック技術では画像処理部の処理負荷が重いためコストが高く、また、位置合わせに時間がかかるという問題がある。また、ターゲットの設置位置の精度が重要であるため、この設置位置にずれがあると、誘導の誤差を生じさせることとなり、位置合わせに時間がかかってしまう。
また、特許文献1に開示された技術は、バーコードまたはQRコード(登録商標)に記録された位置情報が、所定の基準位置に対する上、下、左、右、右上、右下、左上、左下等の方向を示す情報であり、位置合わせの対象である二つの物体の相互の位置関係が大よそ既知であることが前提である。よって、例えば、建設現場や大規模倉庫のように建設資材の置き場所が変更される環境においては、バーコードまたはQRコード(登録商標)に固定的に記録された位置情報を用いることができないため、特許文献1に開示された技術を適用して、建設資材に対するクレーンのフックの位置合わせを行うことは実現できない。
そこで、本発明は、上記の問題点を解決するためになされたものであり、目標位置(ターゲットの位置)が移動により変更されたり、ターゲットの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその位置を特定することができる、位置特定装置、位置特定方法、位置特定プログラム、および位置特定システムを提供することを目的とする。
[1]上記の課題を解決するため、本発明の一態様である位置特定装置は、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、を備え、前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[2]上記の課題を解決するため、本発明の一態様である位置特定システムは、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新部と、を備え、前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[3]上記[2]記載の位置特定システムにおいて、前記目標位置情報取得部は、前記更新された後の位置情報を前記位置情報管理装置から取得し、前記位置特定システムは、さらに、前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御部を有することを特徴とする。
[4]上記[2]記載の位置特定システムにおいて、前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置であることを特徴とする。
[5]上記の課題を解決するため、本発明の一態様である位置特定方法は、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを、画像データ取得部が取得する画像データ取得ステップと、前記画像データ取得部が取得した前記画像データから前記マーカの画像を、マーカ画像検出部が検出するマーカ画像検出ステップと、前記マーカ画像検出部が検出した前記マーカの画像から、コード検出部が前記所定のコードを検出するコード検出ステップと、前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出ステップにおいて検出された前記所定のコードに基づいて、目標位置情報取得部が前記物品に対応する前記目標位置情報を取得する目標位置情報取得ステップと、を有し、前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、前記目標位置情報取得ステップは、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[6]上記[5]記載の位置特定方法において、前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新ステップと、を有することを特徴とする。
[7]上記[6]記載の位置特定方法において、前記目標位置情報取得ステップは、前記更新された後の位置情報を前記位置情報管理装置から取得し、前記位置特定方法は、さらに、姿勢制御部が前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した生成制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御ステップを有することを特徴とする。
[8]上記[6]記載の位置特定方法において、前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置であることを特徴とする。
[9]上記の課題を解決するため、本発明の一態様である位置特定プログラムは、コンピュータを、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、として機能させ、前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[10]上記[9]記載の位置特定プログラムにおいて、コンピュータを、前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新部、として機能させることを特徴とする。
[11]上記[10]記載の位置特定プログラムにおいて、前記目標位置情報取得部は、前記更新された後の位置情報を前記位置情報管理装置から取得し、前記位置特定プログラムは、さらに、前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した生成制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御部を有する、ことを特徴とする。
[12]上記[10]記載の位置特定プログラムにおいて、前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置であることを特徴とする。
本発明によれば、ターゲットの位置が移動により変更されたり、ターゲットの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその位置を特定することができる。
本発明の一実施形態である位置特定システムを、建設現場や資材置き場等において用いられるクレーン制御システムに適用した場合の、概略の全体構成を示すブロック図である。 同実施形態における位置特定装置の機能構成を示すブロック図である。 位置情報管理装置の記憶部に記憶される、位置情報テーブルのデータ構成を示す図である。 建設資材とこの建設資材に対する目標位置とを、模式的に示した図である。 位置特定装置および位置情報管理装置の処理の手順を示すフローチャートである。 建設現場において、2台の機械装置が建設資材を移送するクレーン制御システムを模式的に示す図である。
以下、本発明を実施するための形態について、図面を参照して詳細に説明する。
図1は、本発明の一実施形態である位置特定システムを、建設現場や資材置き場等において用いられるクレーン制御システムに適用した場合の、概略の全体構成を示すブロック図である。このクレーン制御システムは、置き場所が固定されない建設資材の位置を正確に特定し、建設資材の玉掛け位置または玉掛け可能範囲内にクレーンのフックを移動させるシステムである。なお、上記の、置き場所が固定されないとは、建設現場や資材置き場等のように、建設資材の保管場所が変更され得ることである。
図1に示すように、クレーン制御システム1は、撮影装置(撮影部)10と、位置特定装置20と、ネットワーク30と、位置情報管理装置(位置情報管理部)40と、姿勢制御装置50と、機械装置60とを含んで構成される。位置特定装置20と、位置情報管理装置40と、姿勢制御装置50とは、ネットワーク30を介して接続されている。
位置特定システムは、撮影装置10と、位置特定装置20と、ネットワーク30と、位置情報管理装置40とを含むものである。
上記の建設現場には、マーカCが設けられた物品である建設資材Mが、移動可能に地面やパレット等に置かれている。マーカCは、所定のコードが視認可能に記録された印(マーク、マーキング)である。マーカCは、例えば、バーコードや二次元コードである。二次元コードとしては、例えばQRコード(登録商標)が適用可能である。所定のコードは、マーカCの識別情報(マーカ識別情報)と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを含んでいる。位置情報テーブルは、マーカCごとの目標位置情報を格納するデータテーブルである。この位置情報テーブルについては、その詳細を後述する。所在地情報は、ネットワーク上で当該位置情報テーブルを特定する情報であり、例えば、位置情報管理装置40が格納する位置情報テーブルを示すURL(Uniform Resource Locator)である。なお、所在地情報は、位置情報管理装置40のネットワーク上の所在地を少なくとも示すものである。マーカCは、建設資材Mの移動単位ごとに、外側から視認できる位置に、貼付、印刷等によって設けられる。単一の建設資材Mが移動単位である場合は、建設資材MごとにマーカCが設けられる。また、例えば、パレットに載置された4組の建設資材Mが移動単位である場合は、外側から見える一の建設資材MにマーカCが設けられる。
建設資材Mは、建設用部材であり、例えば、プレキャストコンクリート(Precast Concrete;PC)板である。
撮影装置10は、マーカCを撮影して得た画像データを位置特定装置20に供給する装置である。撮影装置10は、静止画像データを得るデジタルカメラ装置でもよいし、動画像データを得るデジタルビデオカメラ装置でもよい。また、撮影装置10は、モノクロ撮影機能を有するものでもよいし、カラー撮影機能を有するものでもよい。また、撮影装置10は、ネットワークに接続可能なカメラ装置により実現されるものであってもよい。ネットワークに接続可能なカメラ装置には、例えば、ウェブカメラ装置、スマートフォン等の撮影機能付携帯端末が含まれる。撮影装置10は、建設資材Mに設けられたマーカCを撮影可能な位置に、固定または可動に設けられる。または、撮影装置10は、利用者により保持される。
位置特定装置20は、撮影装置10から供給される画像データを取り込み、この画像データからマーカCの画像を検出する。位置特定装置20は、例えば、公知のテンプレートマッチング法や、画像特徴量の抽出によるオブジェクト検出技術を適用して、画像データからマーカCの画像を検出する。
位置特定装置20は、検出したマーカCの画像から前述した所定のコードを読み取り、このコードに基づいて位置情報管理装置40から、マーカCに対応する目標位置情報を取得する。
位置特定装置20は、取得した目標位置情報が示す目標位置を、機械装置60の作業部(例えば、クレーンのフック)の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。
ネットワーク30は、コンピュータネットワークを構成する電気通信回線であり、例えば、建設現場や建設工事会社に設けられたLAN(Local Area Network)やインターネットに接続される。
位置情報管理装置40は、位置情報テーブルを記憶した記憶部を備えるサーバ装置である。記憶部は、磁気ハードディスク装置、半導体記憶装置等により実現される。位置情報管理装置40は、位置特定装置20から供給される、マーカCに対応する目標位置情報の取得要求を取り込む。位置情報管理装置40は、その取得要求に基づいて、記憶部に記憶された位置情報テーブルから目標位置情報を抽出し、この目標位置情報を要求元である位置特定装置20に供給する。
姿勢制御装置50は、位置特定装置20から供給される姿勢制御命令を取り込み、この姿勢制御命令が示す移動先目標位置にフック等の作業部を移動させるよう、機械装置60の操作制御を行う。
機械装置60は、例えば、移動単位である、建設資材Mまたは建設資材Mの組み合わせを吊り上げるクレーンである。機械装置60は、姿勢制御装置50による制御によってフック等の作業部を移動させる。
図2は、位置特定装置20の機能構成を示すブロック図である。
同図に示すように、位置特定装置20は、画像データ取得部21と、マーカ画像検出部22と、コード検出部23と、目標位置情報要求部24と、目標位置情報取得部25と、姿勢制御部26とを備える。
画像データ取得部21は、撮影装置10から供給される画像データを取り込む。画像データが静止画像データである場合、画像データ取得部21は、取り込んだ画像データをフレーム画像データとしてマーカ画像検出部22に供給する。また、画像データが動画像データである場合、画像データ取得部21は、取り込んだ動画像データからキーフレームを検出し、このキーフレームのデータをフレーム画像データとして、順次またはあらかじめ決定された所定フレーム数おきにマーカ画像検出部22に供給する。
マーカ画像検出部22は、画像データ取得部21から供給されるフレーム画像データを取り込んでこのフレーム画像データからマーカCの画像を検出し、このマーカCの画像をコード検出部23に供給する。マーカ画像検出部22は、例えば、マーカCの外形や全てのマーカCに共通に設けられる特徴的な図形を参照画像データ(テンプレート画像データ)としてあらかじめ保有しておく。マーカ画像検出部22は、フレーム画像データにおいて参照画像データと一致する画像があるか否かを探索することにより、フレーム画像データからマーカCの画像を検出する。
コード検出部23は、マーカ画像検出部22から供給されるマーカCの画像を取り込む。そして、コード検出部23は、マーカCの画像から所定のコードを検出し、この所定のコードを目標位置情報要求部24に供給する。具体的には、コード検出部23は、マーカCの画像から、当該マーカCを識別するマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを読み取り、これらの情報を目標位置情報要求部24に供給する。
目標位置情報要求部24は、コード検出部23から供給される所定のコードを取り込み、この所定のコードに基づいて、マーカCに対応する目標位置情報の取得要求を位置情報管理装置40に供給する。具体的には、目標位置情報要求部24は、所定のコードにおける所在地情報に基づき位置情報管理装置40にアクセスし、マーク識別情報を位置情報管理装置40に供給する。
目標位置情報取得部25は、マーカCに対応する目標位置情報の取得要求を取り込んだ位置情報管理装置40から供給される、前記の取得要求に対応した目標位置情報を取り込む。すなわち、目標位置情報取得部25は、マーク識別情報に基づいて位置情報管理装置40によって取得された目標位置情報を位置情報管理装置40から取得する。そして、目標位置情報取得部25は、取り込んだ目標位置情報を姿勢制御部26に供給する。
姿勢制御部26は、目標位置情報取得部25から供給される目標位置情報を取り込む。そして、姿勢制御部26は、この目標位置情報が示す目標位置を、機械装置60の作業部の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。
図3は、位置情報管理装置40の記憶部に記憶される、位置情報テーブルのデータ構成を示す図である。同図に示すように、位置情報テーブルは、マーカ識別情報と、資材情報と、日時情報と、目標位置情報との各項目を対応付けたデータテーブルである。位置情報管理装置40は、マーカ識別情報を主キーとして位置情報テーブルからレコードを抽出する。
項目「マーカ識別情報」は、マーカCを識別する文字、数字、記号、またはこれらの組み合わせによる情報を格納する項目である。
項目「資材情報」は、マーカ識別情報に対応するマーカCが設けられた一または複数の建設資材Mを特定する情報を格納する項目である。資材情報は、例えば、建設資材Mの型番、シリアル番号等の情報である。
項目「日時情報」は、項目「目標位置情報」に目標位置情報が格納または更新(上書き)されるときの日時を示す情報を格納する項目である。日時情報は、例えば、年、月、日、時、分、および秒を示す情報である。
項目「目標位置情報」は、マーカ識別情報に対応するマーカCが設けられた一または複数の建設資材Mについての、位置合わせの目標となる位置を示す位置情報である。目標位置情報は、図3に示すように、目標位置を示す緯経度および高度である。
なお、目標位置情報は、直交座標系によって特定される座標値としてもよい。直交座標系は、例えば、地球中心慣性ECI(Earth−Centered Inertial)座標系や、地球中心地球固定ECEF(Earth−Centered Earth−Fixed)座標系等である。
図4(a),(b)は、建設資材とこの建設資材に対する目標位置とを、模式的に示した図である。同図(a)は、建設資材Mに設けられたフック掛けへの玉掛け位置を目標位置Pとした例である。位置情報管理装置40が保有する位置情報テーブルには、建設資材Mに設けられたマーカCのマーカ識別情報と、建設資材Mを特定する資材情報と、目標位置Pを示す目標位置情報と、この目標位置情報を位置情報テーブルに格納または上書きしたときの日時を示す日時情報とが格納される。建設資材Mに対するマーカCの設置位置の精度は問われるものではない。
また、同図(b)は、建設資材Mb1,Mb2,Mb3からなる一組の建設資材に掛けられるワイヤへの玉掛け可能な位置を目標位置Pとした例である。位置情報管理装置40が保有する位置情報テーブルには、建設資材Mb1に設けられたマーカCのマーカ識別情報と、建設資材Mb1,Mb2,Mb3からなる一組の建設資材を特定する資材情報と、目標位置Pを示す目標位置情報と、この目標位置情報を位置情報テーブルに格納または上書きしたときの日時を示す日時情報とが格納される。建設資材Mb1に対するマーカCの設置位置の精度は問われるものではない。
次に、位置情報管理装置40が記憶する位置情報テーブルへのデータの登録および更新について説明する。このデータ登録および更新を実行する端末(例えば、コンピュータ装置)は、図1には図示していないが、ネットワーク30に接続されている。
第1の例として、建設資材Mが建設現場に搬入されると、端末は、オペレータによる操作によって、建設資材Mに設けられたマーカCに対応するマーカ識別情報を指定した検索要求を位置情報管理装置40に供給する。
位置情報管理装置40は、端末から供給される検索要求を取り込むと、この検索要求に指定されたマーカ識別情報をキーとして、記憶部に記憶された位置情報テーブルを検索する。そして、キーがヒットするレコードが検出された場合、位置情報管理装置40は、そのレコードを抽出し、このレコードを検索応答として端末に供給する。一方、キーがヒットするレコードが検出されない場合、位置情報管理装置40は、マーカ識別情報に対応するレコードが無いことを示す情報を検索応答として端末に供給する。
または、第2の例として、建設資材Mが建設現場に搬入されると、端末は、位置特定装置20を制御して、位置特定装置20から所定のコードを取得する。具体的には、端末は、位置特定装置20を制御し、撮影装置10にマーカCを撮影させて、撮影装置10から位置特定装置20に画像データを取り込ませる。そして、端末は、位置特定装置20が画像データから読み取った所定のコード、つまりマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを、位置特定装置20から取り込む。そして、端末は、取得した所定のコードを用いて位置情報管理装置40にアクセスする。
位置情報管理装置40は、端末からのアクセスを受けると、マーカ識別情報をキーとして、記憶部に記憶された位置情報テーブルを検索する。そして、キーがヒットするレコードが検出された場合、位置情報管理装置40は、そのレコードを抽出し、このレコードを検索応答として端末に供給する。一方、キーがヒットするレコードが検出されない場合、位置情報管理装置40は、マーカ識別情報に対応するレコードが無いことを示す情報を検索応答として端末に供給する。
端末は、位置情報管理装置40から供給される検索応答を取り込む。そして、検索応答がマーカ識別情報に対応するレコードである場合、このレコードに、資材情報Mを特定する資材情報を格納する。一方、検索応答がレコード無しであることを示す情報である場合、レコードを生成し、このレコードに、マーカCに対応するマーカ識別情報と、資材情報Mを特定する資材情報とを格納する。
そして、端末は、建設資材Mが保管場所等に置かれた後に測定された目標位置を示す目標位置情報と、現在日時を示す日時情報とをレコードに記録または更新する。目標位置の測定については後述する。
端末は、データが格納または更新されたレコードを、位置情報管理装置40に供給する。そして、位置情報管理装置40は、端末から供給されるレコードを取り込み、このレコードを位置情報テーブルに追加したり、そのレコードで更新したりする。
建設資材Mに対応する目標位置は、建設資材Mが移動されるたびに測定される。この目標位置の測定方法について説明する。
建設資材Mに対する目標位置は、例えば、GPS(Global Positioning System)受信機等の位置検出装置による位置測定によって得られる。つまり、建設資材Mに対応する目標位置に位置検出装置を設け、この位置検出装置が測定して得る位置を目標位置とする。
次に、本発明の一実施形態におけるクレーン制御システムの動作について説明する。
図5は、位置特定装置20および位置情報管理装置40の処理の手順を示すフローチャートである。
まず、位置特定装置20の動作について説明する。
ステップS1において、画像データ取得部21は、撮影装置10から供給される画像データを受け付けている(S1:NO)。そして、画像データ取得部21は、撮影装置10から画像データの供給を受けると(S1:YES)、ステップS2の処理に移す。
ステップS2において、画像データ取得部21は、画像データを取り込む。画像データが静止画像データである場合、画像データ取得部21は、取り込んだ画像データをフレーム画像データとしてマーカ画像検出部22に供給する。また、画像データが動画像データである場合、画像データ取得部21は、取り込んだ動画像データからキーフレームを検出し、このキーフレームのデータをフレーム画像データとして、順次またはあらかじめ決定された所定フレーム数おきにマーカ画像検出部22に供給する。
次に、ステップS3において、マーカ画像検出部22は、取り込んだフレーム画像データからマーカCの画像を検出する。例えば、マーカ画像検出部22は、例えば、マーカCの外形や全てのマーカCに共通に設けられる特徴的な図形を参照画像データとしてあらかじめ保有しておく。マーカ画像検出部22は、取り込んだフレーム画像データにおいて参照画像データと一致する画像があるか否かを探索することにより、フレーム画像データからマーカCの画像を検出する。
ステップS4において、マーカ画像検出部22は、フレーム画像データからマーカCの画像を検出した場合(S4:YES)はステップS5の処理に移し、フレーム画像データからマーカCの画像を検出しない場合(S4:NO)はステップS1の処理に戻す。
ステップS5において、コード検出部23は、検出したマーカCの画像から、前述した所定のコードを検出する。具体的には、コード検出部23は、マーカCの画像から、当該マーカCを識別するマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを読み取る。
次に、ステップS6において、目標位置情報要求部24は、ステップS5の処理において読み取った所定のコードに基づいて、マーカCに対応する目標位置情報の取得要求を位置情報管理装置40に供給する。具体的には、目標位置情報要求部24は、所定のコードにおける所在地情報に基づき位置情報管理装置40にアクセスし、マーク識別情報を位置情報管理装置40に供給する。
次に、ステップS7において、目標位置情報取得部25は、マーカCに対応する目標位置情報の取得要求を取り込んだ位置情報管理装置40から供給される、前記の取得要求に対応した目標位置情報を取り込む。すなわち、目標位置情報取得部25は、マーク識別情報に基づいて位置情報管理装置40によって取得された目標位置情報を位置情報管理装置40から取得する。
次に、ステップS8において、姿勢制御部26は、取得した目標位置情報が示す目標位置を、機械装置60の作業部の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。
次に、位置情報管理装置40の動作について説明する。
ステップS11において、位置情報管理装置40は、ステップS6の処理において目標位置情報要求部24から供給された取得要求を取り込む。
次に、ステップS12において、位置情報管理装置40は、取得要求に基づいて、記憶部に記憶された位置情報テーブルから目標位置情報を抽出する。
次に、ステップS13において、位置情報管理装置40は、抽出した目標位置情報を要求元である位置特定装置20の目標位置情報取得部25に供給する。
以上説明したとおり、本実施形態において、建設資材Mに設けられるマーカCは、マーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報(例えば、URL)とが含まれるコードを記録するものである。撮影装置10は、マーカCを撮影して得た画像データを位置特定装置20に供給する。そして、位置特定装置20は、撮影装置10から供給された画像データを取り込み、この画像データを解析してマーカCの画像を検出し、このマーカCの画像から、記録されたコードを読み出す。これにより、位置特定装置20は、マーカCを特定し、且つ位置情報テーブルの所在場所を把握する。
本実施形態において、建設資材Mの移動単位、すなわち建設資材Mまたは建設資材Mの組み合わせに対応する目標位置情報は、位置情報管理装置40が記憶する位置情報テーブルによって管理される。つまり、建設資材Mや建設資材Mの組み合わせが移動されると、GPS受信機等の位置検出装置が、移動先における目標位置を測定する。そして、端末が、測定によって得られた目標位置情報を取り込み、この目標位置情報を位置情報管理装置40に供給する。そして、位置情報管理装置40が、供給された目標位置情報を取り込み、この目標位置情報で位置情報テーブルの該当する項目を更新する。これにより、位置情報管理装置40は、建設資材Mの移動単位についての目標位置を的確に管理する。
本実施形態において、位置特定装置20は、特定したマーカCのマーカ識別情報と位置情報テーブルの所在場所を示す情報とに基づいて位置情報管理装置40にアクセスする。そして、位置情報管理装置40は、上記のマーカ識別情報に対応する目標位置情報を抽出し、この目標位置情報を要求元である位置特定装置20に供給する。これにより、位置特定装置20は、撮影装置10から取り込んだ画像データからマーカCの画像を検出し、このマーカCに記録されたコードを読み出して位置情報管理装置40にアクセスするだけで、位置情報管理装置40からマーカCが設けられた建設資材Mまたは建設資材Mの組み合わせに対応する目標位置情報を取得することができる。
本実施形態によれば、マーカCには固定的な目標位置情報が記録されないため、マーカCは建設資材Mに対して位置精度を有する必要がない。また、マーカCの建設資材Mに対する大きさに制限がなく、例えば、建設資材Mと撮影装置10との距離に応じてマーカCの大きさを決めてもよい。つまり、建設資材Mと撮影装置10との距離が長くなる程、マーカCの大きさを大きくしてもよい。
したがって、本実施形態によれば、建設資材Mの移動単位の位置が移動により変更されたり、マーカCの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその目標位置を特定することができる。
本実施形態は、複数の機械装置60が設置された建設現場において、これら複数の機械装置60が、マーカCが設けられた建設資材Mを順次中継移動させることによって、建設資材Mを移送する作業に適用可能である。
図6は、建設現場において、2台の機械装置60が建設資材Mを移送するクレーン制御システムを模式的に示す図である。
同図に示すとおり、建設現場には、機械装置60−1および機械装置60−2が設置されている。このクレーン制御システムにおいて、機械装置60−1は、場所A1に載置された建設資材Mを場所A2まで移動させる。機械装置60−2は、場所A2に載置された建設資材Mを場所A3まで移動させる。
建設資材Mが場所A1に載置されたとき、クレーン制御システムは、前述した、位置情報管理装置40に記憶された位置情報テーブルへのデータの登録および更新の処理によって、目標位置情報と現在日時を示す日時情報とを位置情報テーブルに登録または更新する。
機械装置60−1が、場所A1に載置された建設資材Mを場所A2まで移動させた場合、例えば、機械装置60−1の旋回角度、ジブ角度、ワイヤフック長等のクレーン情報に基づいて、クレーン制御システムは、場所A2における建設資材Mの目標位置を計算することができる。または、クレーン制御システムは、建設資材Mに設けられたGPS受信機等の位置検出装置による位置測定によって、建設資材Mの目標位置を得ることができる。よってクレーン制御システムは、前述した、位置情報管理装置40に記憶された位置情報テーブルへのデータの登録および更新の処理と同様に、新たに得た目標位置情報と現在日時を示す日時情報とを位置情報テーブルに登録または更新する。
機械装置60−2が、場所A2に載置された建設資材Mを場所A3まで移動させる場合についても、機械装置60−1の場合と同様にして目標位置情報と日時情報とを引き継いで位置情報テーブルに更新していくことができる。
このようにして、機械装置60−1,60−2が、マーカCが設けられた建設資材Mを順次中継移動させることによって、場所A1から場所A3まで建設資材Mを移送することができる。
このような、複数の機械装置60を有するクレーン制御システムは、例えば、作業者が操作可能な場所や安全が確保できる場所から、作業者が操作不可能な場所や安全の確保が困難である場所まで物品を移送する場合に有用である。
なお、上述した実施形態である位置特定装置20の一部の機能をコンピュータで実現するようにしてもよい。この場合、その機能を実現するための位置特定プログラムをコンピュータ読み取り可能な記録媒体に記録し、この記録媒体に記録された位置特定プログラムをコンピュータシステムに読み込ませて、このコンピュータシステムが実行することによって実現してもよい。なお、このコンピュータシステムとは、オペレーティング・システム(Operating System;OS)や周辺装置のハードウェアを含むものである。また、コンピュータ読み取り可能な記録媒体とは、フレキシブルディスク、光磁気ディスク、光ディスク、メモリカード等の可搬型記録媒体、コンピュータシステムに備えられる磁気ハードディスクやソリッドステートドライブ等の記憶装置のことをいう。さらに、コンピュータ読み取り可能な記録媒体とは、インターネット等のコンピュータネットワーク、および電話回線や携帯電話網を介してプログラムを送信する場合の通信回線のように、短時間の間、動的にプログラムを保持するもの、さらには、その場合のサーバ装置やクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持するものを含んでもよい。また上記の位置特定プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせにより実現するものであってもよい。
以上、本発明の実施の形態について図面を参照して詳述したが、具体的な構成はその実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれる。
1 クレーン制御システム
10 撮影装置
20 位置特定装置
21 画像データ取得部
22 マーカ画像検出部
23 コード検出部
24 目標位置情報要求部
25 目標位置情報取得部
26 姿勢制御部
30 ネットワーク
40 位置情報管理装置
50 姿勢制御装置
60 機械装置

Claims (12)

  1. 物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、
    前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
    前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
    前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
    を備え、
    前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、
    前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得する
    ことを特徴とする位置特定装置。
  2. 物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、
    前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
    前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
    前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
    前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新部と、
    を備え、
    前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、
    前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得する
    ことを特徴とする位置特定システム。
  3. 前記目標位置情報取得部は、前記更新された後の位置情報を前記位置情報管理装置から取得し、
    前記位置特定システムは、さらに、前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御部を有する
    ことを特徴とする請求項2記載の位置特定システム。
  4. 前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置である
    ことを特徴とする請求項2記載の位置特定システム。
  5. 物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを、画像データ取得部が取得する画像データ取得ステップと、
    前記画像データ取得部が取得した前記画像データから前記マーカの画像を、マーカ画像検出部が検出するマーカ画像検出ステップと、
    前記マーカ画像検出部が検出した前記マーカの画像から、コード検出部が前記所定のコードを検出するコード検出ステップと、
    前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出ステップにおいて検出された前記所定のコードに基づいて、目標位置情報取得部が前記物品に対応する前記目標位置情報を取得する目標位置情報取得ステップと、
    を有し、
    前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、
    前記目標位置情報取得ステップは、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得する
    ことを特徴とする位置特定方法。
  6. 前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新ステップと、
    を有することを特徴とする請求項5記載の位置特定方法。
  7. 前記目標位置情報取得ステップは、前記更新された後の位置情報を前記位置情報管理装置から取得し、
    前記位置特定方法は、さらに、姿勢制御部が前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した生成制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御ステップ
    を有することを特徴とする請求項6記載の位置特定方法。
  8. 前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置である
    ことを特徴とする請求項6記載の位置特定方法。
  9. コンピュータを、
    物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、
    前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
    前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
    前記物品に設けられた前記マーカを識別する識別情報と前記物品に対応する目標位置を示す目標位置情報とを対応付けるテーブルである位置情報テーブルを記憶する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
    として機能させ、
    前記所定のコードは、前記識別情報と前記位置情報テーブルのネットワーク上の所在地を示す情報である所在地情報とを含み、
    前記目標位置情報取得部は、前記所定のコードに含まれる前記所在地情報に基づいて前記位置情報テーブルの前記ネットワーク上の前記所在地を特定して前記位置情報テーブルにアクセスし、前記所定のコードに含まれる前記識別情報に基づいて前記識別情報に対応する前記目標位置情報を前記位置情報管理装置から取得する
    ことを特徴とする位置特定プログラム。
  10. コンピュータを、
    前記取得した目標位置情報に基づいて前記物品が捕捉され、機械装置よって前記物品が移動されると、前記位置情報管理装置に記憶された目標位置情報を、当該移動された後の前記物品の位置に応じた位置情報に更新する更新部、
    として機能させる
    ことを特徴とする請求項9記載の位置特定プログラム。
  11. 前記目標位置情報取得部は、前記更新された後の位置情報を前記位置情報管理装置から取得し、
    前記位置特定プログラムは、さらに、前記取得された前記更新された後の位置情報に基づく目標位置を前記機械装置の作業部の移動先目標位置として指定した生成制御命令を生成し、前記物品を移動させる次の機械装置に対して供給する姿勢制御部を有する、
    ことを特徴とする請求項10記載の位置特定プログラム。
  12. 前記機械装置は資材を移送するクレーンであって、前記目標位置は、クレーンのフックの玉掛け可能位置である
    ことを特徴とする請求項10記載の位置特定プログラム。
JP2011224941A 2011-10-12 2011-10-12 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム Expired - Fee Related JP5870444B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011224941A JP5870444B2 (ja) 2011-10-12 2011-10-12 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011224941A JP5870444B2 (ja) 2011-10-12 2011-10-12 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム

Publications (2)

Publication Number Publication Date
JP2013082549A JP2013082549A (ja) 2013-05-09
JP5870444B2 true JP5870444B2 (ja) 2016-03-01

Family

ID=48528163

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011224941A Expired - Fee Related JP5870444B2 (ja) 2011-10-12 2011-10-12 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム

Country Status (1)

Country Link
JP (1) JP5870444B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9846806B2 (en) * 2014-06-26 2017-12-19 Amazon Technologies, Inc. Performing automated tasks based on visual cues
JP6391006B2 (ja) * 2014-09-18 2018-09-19 清水建設株式会社 資材検査装置、資材検査方法、及び資材検査システム
US11130658B2 (en) * 2016-11-22 2021-09-28 Manitowoc Crane Companies, Llc Optical detection and analysis of a counterweight assembly on a crane

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6274809A (ja) * 1985-09-28 1987-04-06 Sharp Corp 自動仕分制御システム
JPH05246505A (ja) * 1992-03-06 1993-09-24 Murata Mach Ltd バーコードシステムにおけるノーリード対応方法
JPH0753010A (ja) * 1993-08-09 1995-02-28 Hitachi Ltd 自動倉庫の入出庫装置
JP3756851B2 (ja) * 2002-06-28 2006-03-15 三菱電機インフォメーションシステムズ株式会社 保管場所管理システム及び保管場所管理方法及びプログラムを記録したコンピュータ読み取り可能な記録媒体及びプログラム
JP2005083984A (ja) * 2003-09-10 2005-03-31 Neomax Co Ltd 物品位置確認システム
JP2006264914A (ja) * 2005-03-24 2006-10-05 Midori Service Kk 入荷検品システム
JP2008195466A (ja) * 2007-02-09 2008-08-28 Mpc Solutions Corp 製品置場管理システムとその管理方法
JP2011036107A (ja) * 2009-08-05 2011-02-17 Hino Motors Ltd 充電システムおよび車両
JP5884263B2 (ja) * 2010-11-22 2016-03-15 Jfeスチール株式会社 置場管理システム

Also Published As

Publication number Publication date
JP2013082549A (ja) 2013-05-09

Similar Documents

Publication Publication Date Title
JP5402969B2 (ja) 携帯端末及びプログラム
JP5255595B2 (ja) 端末位置特定システム、及び端末位置特定方法
JP4743522B2 (ja) 画像データ記録方法、画像データによる作業実績記録方法、画像データ記録装置、並びに画像データによる作業実績記録システム
JP6236199B2 (ja) 配筋検査システム
US20150106403A1 (en) Generating search database based on sensor measurements
US20150106373A1 (en) Generating search database based on earth's magnetic field measurements
JP2015001756A (ja) 状態変化管理システム、状態変化管理サーバ及び状態変化管理端末
JP5870444B2 (ja) 位置特定装置、位置特定方法、位置特定プログラム、および位置特定システム
WO2019087426A1 (ja) 荷物預かりシステム及び荷物管理方法
CN110678771B (zh) 位置测量用终端装置、存储有计算机程序的记录介质及系统
CN107203573A (zh) 一种基于关注点信息的信息推送方法及装置
JP7001711B2 (ja) カメラ撮影画像を用いる位置情報システム、及びそれに用いるカメラ付き情報機器
JP2006209604A (ja) 看板管理システム
JP5467308B2 (ja) 画像記録システム及び画像記録方法
JP2022092365A (ja) 位置管理システム
JP2022092364A (ja) 資機材管理システム
JP2006117413A (ja) 所在データ取得装置及びプログラム
JP6288166B2 (ja) 携帯端末及びプログラム
CN102480682A (zh) 移动定位装置、服务器及其移动定位方法
JP6098659B2 (ja) 携帯端末及びプログラム
JP5737362B2 (ja) 携帯端末及びプログラム
JP6474859B2 (ja) 携帯端末、制御プログラム及び制御方法
JP6319478B2 (ja) 携帯端末及びプログラム
US20240053427A1 (en) Display control system, method and information processing apparatus
US20240054301A1 (en) Process management system, method and information processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150605

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151225

R150 Certificate of patent or registration of utility model

Ref document number: 5870444

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees