JP2013082549A - Position specifying device, position specifying method, position specifying program, and position specifying system - Google Patents

Position specifying device, position specifying method, position specifying program, and position specifying system Download PDF

Info

Publication number
JP2013082549A
JP2013082549A JP2011224941A JP2011224941A JP2013082549A JP 2013082549 A JP2013082549 A JP 2013082549A JP 2011224941 A JP2011224941 A JP 2011224941A JP 2011224941 A JP2011224941 A JP 2011224941A JP 2013082549 A JP2013082549 A JP 2013082549A
Authority
JP
Japan
Prior art keywords
position information
marker
target position
image data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011224941A
Other languages
Japanese (ja)
Other versions
JP5870444B2 (en
Inventor
Tsutomu Yamamoto
力 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimizu Construction Co Ltd
Shimizu Corp
Original Assignee
Shimizu Construction Co Ltd
Shimizu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimizu Construction Co Ltd, Shimizu Corp filed Critical Shimizu Construction Co Ltd
Priority to JP2011224941A priority Critical patent/JP5870444B2/en
Publication of JP2013082549A publication Critical patent/JP2013082549A/en
Application granted granted Critical
Publication of JP5870444B2 publication Critical patent/JP5870444B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To specify a position with light processing load for a short time even if a target position is changed by being moved, or a marker placing position is displaced.SOLUTION: A position specifying device includes: an image data acquisition part 21 which is provided in construction materials and acquires image data obtained by photographing a marker where a predetermined code is visibly recorded; a marker image detection part 22 which detects an image of the marker from image data; a code detection part 23 which detects the predetermined code from the image of the marker; and a target position information acquisition part 25 which acquires target position information corresponding to the construction materials based on the predetermined code from a position information management device for managing the target position information indicative of the target position corresponding to the construction materials.

Description

本発明は、位置特定装置、位置特定方法、位置特定プログラム、および位置特定システムに関する。   The present invention relates to a position specifying device, a position specifying method, a position specifying program, and a position specifying system.

撮影装置により撮影されて得られた物体の画像の解析処理を実行することによって物体に設けられたターゲットを認識し、その画像上のターゲットを追尾することによって撮影装置と物体との位置関係を制御するビジュアルフィードバック技術が知られている。このビジュアルフィードバック技術は、クレーンのフックを資材の玉掛け可能位置に移動させる制御に応用されている。例えば、建設資材に設けられた特定のマーカ図形をターゲットとし、ビジュアルフィードバック技術を適用することによって、クレーンのフックを玉掛け可能位置に誘導するクレーン制御が知られている。   Controls the positional relationship between the imaging device and the object by recognizing the target provided on the object by executing analysis processing of the image of the object obtained by the imaging device and tracking the target on the image Visual feedback technology is known. This visual feedback technique is applied to control for moving a crane hook to a position where the material can be slung. For example, crane control that guides a hook of a crane to a stakeable position by applying a visual feedback technique with a specific marker graphic provided on a construction material as a target is known.

また、物体の位置情報が記録されたバーコードまたはQRコード(登録商標)をターゲットとし、位置調整部がこれらバーコードまたはQRコード(登録商標)に記録されたコードから位置情報を読み取り、この位置情報に基づいて位置を調整する技術が知られている(例えば、特許文献1参照)。   Further, a bar code or QR code (registered trademark) in which the position information of the object is recorded is targeted, and the position adjustment unit reads the position information from the code recorded in the bar code or QR code (registered trademark). A technique for adjusting the position based on information is known (see, for example, Patent Document 1).

特開2011−36107号公報JP 2011-36107 A

上記のビジュアルフィードバック技術においては、物体の撮像画像を時系列に取得し、各撮像画像について画像処理を実行してターゲットの位置をフィードバックさせる必要がある。よって、ビジュアルフィードバック技術では画像処理部の処理負荷が重いためコストが高く、また、位置合わせに時間がかかるという問題がある。また、ターゲットの設置位置の精度が重要であるため、この設置位置にずれがあると、誘導の誤差を生じさせることとなり、位置合わせに時間がかかってしまう。   In the visual feedback technique described above, it is necessary to acquire captured images of an object in time series, perform image processing on each captured image, and feed back the target position. Therefore, the visual feedback technique has a problem that the processing load of the image processing unit is heavy, so that the cost is high and the alignment takes time. Further, since the accuracy of the target installation position is important, if there is a deviation in the installation position, a guidance error will occur, and it will take time for alignment.

また、特許文献1に開示された技術は、バーコードまたはQRコード(登録商標)に記録された位置情報が、所定の基準位置に対する上、下、左、右、右上、右下、左上、左下等の方向を示す情報であり、位置合わせの対象である二つの物体の相互の位置関係が大よそ既知であることが前提である。よって、例えば、建設現場や大規模倉庫のように建設資材の置き場所が変更される環境においては、バーコードまたはQRコード(登録商標)に固定的に記録された位置情報を用いることができないため、特許文献1に開示された技術を適用して、建設資材に対するクレーンのフックの位置合わせを行うことは実現できない。   Further, in the technique disclosed in Patent Document 1, the position information recorded in the barcode or QR code (registered trademark) is above, below, left, right, upper right, lower right, upper left, lower left with respect to a predetermined reference position. It is premised that the mutual positional relationship between two objects to be aligned is generally known. Therefore, for example, in an environment where the location of the construction material is changed, such as a construction site or a large-scale warehouse, the position information fixedly recorded on the barcode or QR code (registered trademark) cannot be used. By applying the technique disclosed in Patent Document 1, it is not possible to align the hook of the crane with the construction material.

そこで、本発明は、上記の問題点を解決するためになされたものであり、目標位置(ターゲットの位置)が移動により変更されたり、ターゲットの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその位置を特定することができる、位置特定装置、位置特定方法、位置特定プログラム、および位置特定システムを提供することを目的とする。   Therefore, the present invention has been made to solve the above-described problems, and even if the target position (target position) is changed by movement or the target installation position is deviated, light processing is performed. An object of the present invention is to provide a position specifying device, a position specifying method, a position specifying program, and a position specifying system that can specify the position with a load in a short time.

[1]上記の課題を解決するため、本発明の一態様である位置特定装置は、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、を備えることを特徴とする。
[2]上記[1]記載の位置特定装置において、前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、前記目標位置情報取得部は、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[3]上記の課題を解決するため、本発明の一態様である位置特定方法は、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを、画像データ取得部が取得する画像データ取得ステップと、前記画像データ取得ステップにおいて取得された前記画像データから、マーカ画像検出部が前記マーカの画像を検出するマーカ画像検出ステップと、前記マーカ画像検出ステップにおいて検出された前記マーカの画像から、コード検出部が前記所定のコードを検出するコード検出ステップと、前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出ステップにおいて検出された前記所定のコードに基づいて、目標位置情報取得部が前記物品に対応する前記目標位置情報を取得する目標位置情報取得ステップと、を有することを特徴とする。
[4]上記[3]記載の位置特定方法において、前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、前記目標位置情報取得ステップは、前記目標位置情報取得部が、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[5]上記の課題を解決するため、本発明の一態様である位置特定プログラムは、コンピュータを、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、として機能させる。
[6]上記[5]記載の位置特定プログラムにおいて、前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、前記目標位置情報取得部は、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得することを特徴とする。
[7]上記の課題を解決するため、本発明の一態様である位置特定システムは、物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して画像データを生成する撮影部と、前記撮影部が生成した前記画像データを取り込む画像データ取得部と、前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理部と、前記位置情報管理部から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、を備えることを特徴とする。
[1] In order to solve the above-described problem, a position specifying device according to one aspect of the present invention uses image data obtained by photographing a marker provided on an article, in which a predetermined code is recorded so as to be visible. From the image data acquisition unit to be acquired, the marker image detection unit for detecting the image of the marker from the image data acquired by the image data acquisition unit, and the image of the marker detected by the marker image detection unit The code corresponding to the article based on the predetermined code detected by the code detector from a code detecting section that detects a code and a position information management device that manages target position information indicating a target position corresponding to the article A target position information acquisition unit that acquires target position information.
[2] In the position specifying device according to [1], the predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device, and the target location information acquisition unit includes: The location information management device is accessed based on the location information, the identification information is supplied to the location information management device, and the target location information acquired by the location information management device based on the identification information is the location information. It is acquired from an information management device.
[3] In order to solve the above-described problem, the position specifying method according to one aspect of the present invention is based on image data obtained by photographing a marker provided on an article, in which a predetermined code is recorded so as to be visible. An image data acquisition step acquired by the image data acquisition unit, a marker image detection step in which a marker image detection unit detects an image of the marker from the image data acquired in the image data acquisition step, and the marker image detection From the code detection step in which the code detection unit detects the predetermined code from the image of the marker detected in step, and the position information management device that manages the target position information indicating the target position corresponding to the article, the code Based on the predetermined code detected in the detection step, the target position information acquisition unit corresponds to the target position corresponding to the article. And having a target position information acquisition step of acquiring broadcast, the.
[4] In the position specifying method according to [3], the predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device, and the target location information acquisition step includes: The target position information acquisition unit accesses the position information management apparatus based on the location information, supplies the identification information to the position information management apparatus, and is acquired by the position information management apparatus based on the identification information. The target position information is acquired from the position information management device.
[5] In order to solve the above-described problem, the position specifying program according to one aspect of the present invention is obtained by photographing a marker provided on an article and recorded with a predetermined code so as to be visible. From the image data acquisition unit for acquiring image data, the marker image detection unit for detecting the image of the marker from the image data acquired by the image data acquisition unit, and the image of the marker detected by the marker image detection unit, Based on the predetermined code detected by the code detection unit, the code detection unit that detects the predetermined code and a position information management device that manages target position information indicating a target position corresponding to the item are used to store the article. It functions as a target position information acquisition unit that acquires the corresponding target position information.
[6] In the position specifying program according to [5], the predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device, and the target location information acquisition unit includes: The location information management device is accessed based on the location information, the identification information is supplied to the location information management device, and the target location information acquired by the location information management device based on the identification information is the location information. It is acquired from an information management device.
[7] In order to solve the above-described problem, the position specifying system according to one aspect of the present invention is an image capturing that generates image data by capturing a marker provided on an article and recorded so that a predetermined code is visible. An image data acquisition unit that captures the image data generated by the imaging unit, a marker image detection unit that detects an image of the marker from the image data acquired by the image data acquisition unit, and the marker image detection unit From the image of the marker detected by the code, a code detection unit that detects the predetermined code, a position information management unit that manages target position information indicating a target position corresponding to the article, and the position information management unit, A target position information acquisition unit that acquires the target position information corresponding to the article based on the predetermined code detected by the code detection unit.

本発明によれば、ターゲットの位置が移動により変更されたり、ターゲットの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその位置を特定することができる。   According to the present invention, even if the target position is changed by movement or the target installation position is deviated, the position can be specified in a short time with a light processing load.

本発明の一実施形態である位置特定システムを、建設現場や資材置き場等において用いられるクレーン制御システムに適用した場合の、概略の全体構成を示すブロック図である。It is a block diagram which shows the general whole structure at the time of applying the position specifying system which is one Embodiment of this invention to the crane control system used in a construction site, a material storage, etc. FIG. 同実施形態における位置特定装置の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the position specification apparatus in the embodiment. 位置情報管理装置の記憶部に記憶される、位置情報テーブルのデータ構成を示す図である。It is a figure which shows the data structure of the positional infomation table memorize | stored in the memory | storage part of a positional infomation management apparatus. 建設資材とこの建設資材に対する目標位置とを、模式的に示した図である。It is the figure which showed typically the construction material and the target position with respect to this construction material. 位置特定装置および位置情報管理装置の処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of a process of a position specific apparatus and a positional information management apparatus. 建設現場において、2台の機械装置が建設資材を移送するクレーン制御システムを模式的に示す図である。It is a figure which shows typically the crane control system in which two machine apparatuses transfer a construction material in a construction site.

以下、本発明を実施するための形態について、図面を参照して詳細に説明する。
図1は、本発明の一実施形態である位置特定システムを、建設現場や資材置き場等において用いられるクレーン制御システムに適用した場合の、概略の全体構成を示すブロック図である。このクレーン制御システムは、置き場所が固定されない建設資材の位置を正確に特定し、建設資材の玉掛け位置または玉掛け可能範囲内にクレーンのフックを移動させるシステムである。なお、上記の、置き場所が固定されないとは、建設現場や資材置き場等のように、建設資材の保管場所が変更され得ることである。
Hereinafter, embodiments for carrying out the present invention will be described in detail with reference to the drawings.
FIG. 1 is a block diagram showing a schematic overall configuration when a position specifying system according to an embodiment of the present invention is applied to a crane control system used in a construction site, a material storage, or the like. This crane control system is a system for accurately identifying the position of a construction material whose placement location is not fixed, and moving the crane hook within a construction material slinging position or a slingable range. It should be noted that the storage location is not fixed as described above, that is, the storage location of the construction material can be changed, such as a construction site or a material storage location.

図1に示すように、クレーン制御システム1は、撮影装置(撮影部)10と、位置特定装置20と、ネットワーク30と、位置情報管理装置(位置情報管理部)40と、姿勢制御装置50と、機械装置60とを含んで構成される。位置特定装置20と、位置情報管理装置40と、姿勢制御装置50とは、ネットワーク30を介して接続されている。   As shown in FIG. 1, the crane control system 1 includes an imaging device (imaging unit) 10, a location specifying device 20, a network 30, a location information management device (location information management unit) 40, and an attitude control device 50. And the mechanical device 60. The position specifying device 20, the position information management device 40, and the attitude control device 50 are connected via the network 30.

位置特定システムは、撮影装置10と、位置特定装置20と、ネットワーク30と、位置情報管理装置40とを含むものである。   The position specifying system includes an imaging device 10, a position specifying device 20, a network 30, and a position information management device 40.

上記の建設現場には、マーカCが設けられた物品である建設資材Mが、移動可能に地面やパレット等に置かれている。マーカCは、所定のコードが視認可能に記録された印(マーク、マーキング)である。マーカCは、例えば、バーコードや二次元コードである。二次元コードとしては、例えばQRコード(登録商標)が適用可能である。所定のコードは、マーカCの識別情報(マーカ識別情報)と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを含んでいる。位置情報テーブルは、マーカCごとの目標位置情報を格納するデータテーブルである。この位置情報テーブルについては、その詳細を後述する。所在地情報は、ネットワーク上で当該位置情報テーブルを特定する情報であり、例えば、位置情報管理装置40が格納する位置情報テーブルを示すURL(Uniform Resource Locator)である。なお、所在地情報は、位置情報管理装置40のネットワーク上の所在地を少なくとも示すものである。マーカCは、建設資材Mの移動単位ごとに、外側から視認できる位置に、貼付、印刷等によって設けられる。単一の建設資材Mが移動単位である場合は、建設資材MごとにマーカCが設けられる。また、例えば、パレットに載置された4組の建設資材Mが移動単位である場合は、外側から見える一の建設資材MにマーカCが設けられる。   In the construction site, the construction material M, which is an article provided with the marker C, is movably placed on the ground or a pallet. The marker C is a mark (mark, marking) in which a predetermined code is recorded so as to be visible. The marker C is, for example, a barcode or a two-dimensional code. As the two-dimensional code, for example, a QR code (registered trademark) is applicable. The predetermined code includes the identification information of the marker C (marker identification information) and the location information of the position information table registered in the position information management device 40. The position information table is a data table that stores target position information for each marker C. Details of the position information table will be described later. The location information is information for specifying the location information table on the network, and is, for example, a URL (Uniform Resource Locator) indicating the location information table stored in the location information management device 40. The location information indicates at least the location of the location information management device 40 on the network. The marker C is provided for each moving unit of the construction material M at a position where it can be visually recognized from the outside by pasting, printing, or the like. When a single construction material M is a moving unit, a marker C is provided for each construction material M. For example, when four sets of construction materials M placed on a pallet are moving units, a marker C is provided on one construction material M that can be seen from the outside.

建設資材Mは、建設用部材であり、例えば、プレキャストコンクリート(Precast Concrete;PC)板である。   The construction material M is a construction member, for example, a precast concrete (PC) board.

撮影装置10は、マーカCを撮影して得た画像データを位置特定装置20に供給する装置である。撮影装置10は、静止画像データを得るデジタルカメラ装置でもよいし、動画像データを得るデジタルビデオカメラ装置でもよい。また、撮影装置10は、モノクロ撮影機能を有するものでもよいし、カラー撮影機能を有するものでもよい。また、撮影装置10は、ネットワークに接続可能なカメラ装置により実現されるものであってもよい。ネットワークに接続可能なカメラ装置には、例えば、ウェブカメラ装置、スマートフォン等の撮影機能付携帯端末が含まれる。撮影装置10は、建設資材Mに設けられたマーカCを撮影可能な位置に、固定または可動に設けられる。または、撮影装置10は、利用者により保持される。   The imaging device 10 is a device that supplies image data obtained by imaging the marker C to the position specifying device 20. The photographing device 10 may be a digital camera device that obtains still image data or a digital video camera device that obtains moving image data. Further, the photographing apparatus 10 may have a monochrome photographing function or a color photographing function. Moreover, the imaging device 10 may be realized by a camera device that can be connected to a network. Camera devices that can be connected to a network include, for example, mobile terminals with photographing functions such as web camera devices and smartphones. The imaging device 10 is fixed or movable at a position where the marker C provided on the construction material M can be imaged. Alternatively, the imaging device 10 is held by a user.

位置特定装置20は、撮影装置10から供給される画像データを取り込み、この画像データからマーカCの画像を検出する。位置特定装置20は、例えば、公知のテンプレートマッチング法や、画像特徴量の抽出によるオブジェクト検出技術を適用して、画像データからマーカCの画像を検出する。
位置特定装置20は、検出したマーカCの画像から前述した所定のコードを読み取り、このコードに基づいて位置情報管理装置40から、マーカCに対応する目標位置情報を取得する。
位置特定装置20は、取得した目標位置情報が示す目標位置を、機械装置60の作業部(例えば、クレーンのフック)の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。
The position specifying device 20 takes in the image data supplied from the imaging device 10 and detects the image of the marker C from this image data. The position specifying device 20 detects the image of the marker C from the image data by applying, for example, a known template matching method or an object detection technique based on image feature amount extraction.
The position specifying device 20 reads the predetermined code described above from the detected image of the marker C, and acquires target position information corresponding to the marker C from the position information management device 40 based on this code.
The position specifying device 20 generates a posture control command in which the target position indicated by the acquired target position information is designated as the movement target position of the working unit of the mechanical device 60 (for example, a crane hook). This is supplied to the attitude control device 50.

ネットワーク30は、コンピュータネットワークを構成する電気通信回線であり、例えば、建設現場や建設工事会社に設けられたLAN(Local Area Network)やインターネットに接続される。   The network 30 is a telecommunication line that forms a computer network, and is connected to, for example, a LAN (Local Area Network) or the Internet provided at a construction site or a construction company.

位置情報管理装置40は、位置情報テーブルを記憶した記憶部を備えるサーバ装置である。記憶部は、磁気ハードディスク装置、半導体記憶装置等により実現される。位置情報管理装置40は、位置特定装置20から供給される、マーカCに対応する目標位置情報の取得要求を取り込む。位置情報管理装置40は、その取得要求に基づいて、記憶部に記憶された位置情報テーブルから目標位置情報を抽出し、この目標位置情報を要求元である位置特定装置20に供給する。   The location information management device 40 is a server device that includes a storage unit that stores a location information table. The storage unit is realized by a magnetic hard disk device, a semiconductor storage device, or the like. The position information management device 40 fetches an acquisition request for target position information corresponding to the marker C supplied from the position specifying device 20. Based on the acquisition request, the position information management device 40 extracts target position information from the position information table stored in the storage unit, and supplies the target position information to the position specifying device 20 that is the request source.

姿勢制御装置50は、位置特定装置20から供給される姿勢制御命令を取り込み、この姿勢制御命令が示す移動先目標位置にフック等の作業部を移動させるよう、機械装置60の操作制御を行う。
機械装置60は、例えば、移動単位である、建設資材Mまたは建設資材Mの組み合わせを吊り上げるクレーンである。機械装置60は、姿勢制御装置50による制御によってフック等の作業部を移動させる。
The posture control device 50 takes in the posture control command supplied from the position specifying device 20, and controls the operation of the mechanical device 60 so that the working unit such as a hook is moved to the destination target position indicated by the posture control command.
The mechanical device 60 is, for example, a crane that lifts a construction material M or a combination of construction materials M, which is a moving unit. The mechanical device 60 moves a working unit such as a hook under the control of the attitude control device 50.

図2は、位置特定装置20の機能構成を示すブロック図である。
同図に示すように、位置特定装置20は、画像データ取得部21と、マーカ画像検出部22と、コード検出部23と、目標位置情報要求部24と、目標位置情報取得部25と、姿勢制御部26とを備える。
FIG. 2 is a block diagram showing a functional configuration of the position specifying device 20.
As shown in the figure, the position specifying device 20 includes an image data acquisition unit 21, a marker image detection unit 22, a code detection unit 23, a target position information request unit 24, a target position information acquisition unit 25, and an attitude. And a control unit 26.

画像データ取得部21は、撮影装置10から供給される画像データを取り込む。画像データが静止画像データである場合、画像データ取得部21は、取り込んだ画像データをフレーム画像データとしてマーカ画像検出部22に供給する。また、画像データが動画像データである場合、画像データ取得部21は、取り込んだ動画像データからキーフレームを検出し、このキーフレームのデータをフレーム画像データとして、順次またはあらかじめ決定された所定フレーム数おきにマーカ画像検出部22に供給する。   The image data acquisition unit 21 captures image data supplied from the imaging device 10. When the image data is still image data, the image data acquisition unit 21 supplies the captured image data to the marker image detection unit 22 as frame image data. When the image data is moving image data, the image data acquisition unit 21 detects a key frame from the captured moving image data, and uses the data of the key frame as frame image data in order or a predetermined frame determined in advance. It supplies to the marker image detection part 22 every several numbers.

マーカ画像検出部22は、画像データ取得部21から供給されるフレーム画像データを取り込んでこのフレーム画像データからマーカCの画像を検出し、このマーカCの画像をコード検出部23に供給する。マーカ画像検出部22は、例えば、マーカCの外形や全てのマーカCに共通に設けられる特徴的な図形を参照画像データ(テンプレート画像データ)としてあらかじめ保有しておく。マーカ画像検出部22は、フレーム画像データにおいて参照画像データと一致する画像があるか否かを探索することにより、フレーム画像データからマーカCの画像を検出する。   The marker image detection unit 22 takes in the frame image data supplied from the image data acquisition unit 21, detects the image of the marker C from the frame image data, and supplies the image of the marker C to the code detection unit 23. For example, the marker image detection unit 22 holds in advance, as reference image data (template image data), the external shape of the marker C or a characteristic graphic provided in common to all the markers C. The marker image detection unit 22 detects the image of the marker C from the frame image data by searching for whether there is an image that matches the reference image data in the frame image data.

コード検出部23は、マーカ画像検出部22から供給されるマーカCの画像を取り込む。そして、コード検出部23は、マーカCの画像から所定のコードを検出し、この所定のコードを目標位置情報要求部24に供給する。具体的には、コード検出部23は、マーカCの画像から、当該マーカCを識別するマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを読み取り、これらの情報を目標位置情報要求部24に供給する。   The code detection unit 23 captures an image of the marker C supplied from the marker image detection unit 22. The code detection unit 23 detects a predetermined code from the image of the marker C, and supplies the predetermined code to the target position information request unit 24. Specifically, the code detection unit 23 reads marker identification information for identifying the marker C and location information of the position information table registered in the position information management device 40 from the image of the marker C, and these information Is supplied to the target position information request unit 24.

目標位置情報要求部24は、コード検出部23から供給される所定のコードを取り込み、この所定のコードに基づいて、マーカCに対応する目標位置情報の取得要求を位置情報管理装置40に供給する。具体的には、目標位置情報要求部24は、所定のコードにおける所在地情報に基づき位置情報管理装置40にアクセスし、マーク識別情報を位置情報管理装置40に供給する。
目標位置情報取得部25は、マーカCに対応する目標位置情報の取得要求を取り込んだ位置情報管理装置40から供給される、前記の取得要求に対応した目標位置情報を取り込む。すなわち、目標位置情報取得部25は、マーク識別情報に基づいて位置情報管理装置40によって取得された目標位置情報を位置情報管理装置40から取得する。そして、目標位置情報取得部25は、取り込んだ目標位置情報を姿勢制御部26に供給する。
The target position information request unit 24 takes in a predetermined code supplied from the code detection unit 23 and supplies an acquisition request for target position information corresponding to the marker C to the position information management device 40 based on the predetermined code. . Specifically, the target position information request unit 24 accesses the position information management device 40 based on the location information in a predetermined code, and supplies the mark identification information to the position information management device 40.
The target position information acquisition unit 25 acquires target position information corresponding to the acquisition request supplied from the position information management device 40 that has acquired the acquisition request for target position information corresponding to the marker C. That is, the target position information acquisition unit 25 acquires the target position information acquired by the position information management apparatus 40 from the position information management apparatus 40 based on the mark identification information. Then, the target position information acquisition unit 25 supplies the acquired target position information to the posture control unit 26.

姿勢制御部26は、目標位置情報取得部25から供給される目標位置情報を取り込む。そして、姿勢制御部26は、この目標位置情報が示す目標位置を、機械装置60の作業部の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。   The attitude control unit 26 takes in the target position information supplied from the target position information acquisition unit 25. Then, the posture control unit 26 generates a posture control command that designates the target position indicated by the target position information as the movement destination target position of the working unit of the mechanical device 60, and supplies this posture control command to the posture control device 50. To do.

図3は、位置情報管理装置40の記憶部に記憶される、位置情報テーブルのデータ構成を示す図である。同図に示すように、位置情報テーブルは、マーカ識別情報と、資材情報と、日時情報と、目標位置情報との各項目を対応付けたデータテーブルである。位置情報管理装置40は、マーカ識別情報を主キーとして位置情報テーブルからレコードを抽出する。   FIG. 3 is a diagram illustrating a data configuration of the position information table stored in the storage unit of the position information management device 40. As shown in the figure, the position information table is a data table in which items of marker identification information, material information, date information, and target position information are associated with each other. The position information management device 40 extracts a record from the position information table using the marker identification information as a main key.

項目「マーカ識別情報」は、マーカCを識別する文字、数字、記号、またはこれらの組み合わせによる情報を格納する項目である。
項目「資材情報」は、マーカ識別情報に対応するマーカCが設けられた一または複数の建設資材Mを特定する情報を格納する項目である。資材情報は、例えば、建設資材Mの型番、シリアル番号等の情報である。
項目「日時情報」は、項目「目標位置情報」に目標位置情報が格納または更新(上書き)されるときの日時を示す情報を格納する項目である。日時情報は、例えば、年、月、日、時、分、および秒を示す情報である。
The item “marker identification information” is an item for storing information by characters, numbers, symbols, or a combination thereof for identifying the marker C.
The item “material information” is an item for storing information for specifying one or a plurality of construction materials M provided with the marker C corresponding to the marker identification information. The material information is information such as the model number and serial number of the construction material M, for example.
The item “date and time information” is an item for storing information indicating the date and time when the target position information is stored or updated (overwritten) in the item “target position information”. The date / time information is information indicating, for example, year, month, day, hour, minute, and second.

項目「目標位置情報」は、マーカ識別情報に対応するマーカCが設けられた一または複数の建設資材Mについての、位置合わせの目標となる位置を示す位置情報である。目標位置情報は、図3に示すように、目標位置を示す緯経度および高度である。
なお、目標位置情報は、直交座標系によって特定される座標値としてもよい。直交座標系は、例えば、地球中心慣性ECI(Earth−Centered Inertial)座標系や、地球中心地球固定ECEF(Earth−Centered Earth−Fixed)座標系等である。
The item “target position information” is position information indicating a position that is a target of alignment for one or a plurality of construction materials M provided with the marker C corresponding to the marker identification information. As shown in FIG. 3, the target position information is latitude and longitude indicating the target position and altitude.
The target position information may be a coordinate value specified by an orthogonal coordinate system. The orthogonal coordinate system is, for example, an earth-centered inertial ECI (Earth-Centered Internal) coordinate system or an earth-centered Earth-fixed ECEF (Earth-Centered Earth-Fixed) coordinate system.

図4(a),(b)は、建設資材とこの建設資材に対する目標位置とを、模式的に示した図である。同図(a)は、建設資材Mに設けられたフック掛けへの玉掛け位置を目標位置Pとした例である。位置情報管理装置40が保有する位置情報テーブルには、建設資材Mに設けられたマーカCのマーカ識別情報と、建設資材Mを特定する資材情報と、目標位置Pを示す目標位置情報と、この目標位置情報を位置情報テーブルに格納または上書きしたときの日時を示す日時情報とが格納される。建設資材Mに対するマーカCの設置位置の精度は問われるものではない。
また、同図(b)は、建設資材Mb1,Mb2,Mb3からなる一組の建設資材に掛けられるワイヤへの玉掛け可能な位置を目標位置Pとした例である。位置情報管理装置40が保有する位置情報テーブルには、建設資材Mb1に設けられたマーカCのマーカ識別情報と、建設資材Mb1,Mb2,Mb3からなる一組の建設資材を特定する資材情報と、目標位置Pを示す目標位置情報と、この目標位置情報を位置情報テーブルに格納または上書きしたときの日時を示す日時情報とが格納される。建設資材Mb1に対するマーカCの設置位置の精度は問われるものではない。
4A and 4B are diagrams schematically showing the construction material and the target position for the construction material. FIG (a) shows an example in which the target position P a rigging position to hooking provided on the construction materials M a. The position information table in which location information management device 40 held by the marker identification information of the marker C a provided construction materials M a, a material information specifying the construction materials M a, a target position indicating the target position P a Information and date and time information indicating the date and time when the target position information is stored or overwritten in the position information table are stored. Not the accuracy of the installation position of the marker C a which is asked for construction materials M a.
Further, FIG. (B) is an example in which the sling possible positions on the wire to be subjected to a set of construction materials consisting of construction materials M b1, M b2, M b3 and the target position P b. The position information table location manager 40's, identification and marker identification information of the marker C b provided on construction materials M b1, a set of construction materials consisting of construction materials M b1, M b2, M b3 and materials information, and the target position information indicating a target position P b, and the date and time information indicating the date and time when this was the target position information stored or overwritten in the position information table is stored. Not the accuracy of the installation position of the marker C b also put for construction materials M b1.

次に、位置情報管理装置40が記憶する位置情報テーブルへのデータの登録および更新について説明する。このデータ登録および更新を実行する端末(例えば、コンピュータ装置)は、図1には図示していないが、ネットワーク30に接続されている。   Next, registration and update of data in the position information table stored in the position information management device 40 will be described. Although not shown in FIG. 1, a terminal (for example, a computer device) that executes the data registration and update is connected to the network 30.

第1の例として、建設資材Mが建設現場に搬入されると、端末は、オペレータによる操作によって、建設資材Mに設けられたマーカCに対応するマーカ識別情報を指定した検索要求を位置情報管理装置40に供給する。
位置情報管理装置40は、端末から供給される検索要求を取り込むと、この検索要求に指定されたマーカ識別情報をキーとして、記憶部に記憶された位置情報テーブルを検索する。そして、キーがヒットするレコードが検出された場合、位置情報管理装置40は、そのレコードを抽出し、このレコードを検索応答として端末に供給する。一方、キーがヒットするレコードが検出されない場合、位置情報管理装置40は、マーカ識別情報に対応するレコードが無いことを示す情報を検索応答として端末に供給する。
As a first example, when the construction material M is carried into the construction site, the terminal manages a search request specifying the marker identification information corresponding to the marker C provided on the construction material M by the operation of the operator. Supply to device 40.
When the position information management device 40 receives a search request supplied from the terminal, the position information management apparatus 40 searches the position information table stored in the storage unit using the marker identification information specified in the search request as a key. When a record that hits the key is detected, the location information management device 40 extracts the record and supplies this record to the terminal as a search response. On the other hand, when the record that hits the key is not detected, the position information management device 40 supplies information indicating that there is no record corresponding to the marker identification information to the terminal as a search response.

または、第2の例として、建設資材Mが建設現場に搬入されると、端末は、位置特定装置20を制御して、位置特定装置20から所定のコードを取得する。具体的には、端末は、位置特定装置20を制御し、撮影装置10にマーカCを撮影させて、撮影装置10から位置特定装置20に画像データを取り込ませる。そして、端末は、位置特定装置20が画像データから読み取った所定のコード、つまりマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを、位置特定装置20から取り込む。そして、端末は、取得した所定のコードを用いて位置情報管理装置40にアクセスする。
位置情報管理装置40は、端末からのアクセスを受けると、マーカ識別情報をキーとして、記憶部に記憶された位置情報テーブルを検索する。そして、キーがヒットするレコードが検出された場合、位置情報管理装置40は、そのレコードを抽出し、このレコードを検索応答として端末に供給する。一方、キーがヒットするレコードが検出されない場合、位置情報管理装置40は、マーカ識別情報に対応するレコードが無いことを示す情報を検索応答として端末に供給する。
Alternatively, as a second example, when the construction material M is carried into the construction site, the terminal controls the position specifying device 20 and acquires a predetermined code from the position specifying device 20. Specifically, the terminal controls the position specifying device 20 to cause the photographing device 10 to photograph the marker C, and causes the position identifying device 20 to capture image data. Then, the terminal takes in the predetermined code read by the position specifying device 20 from the image data, that is, the marker identification information, and the location information in the position information table registered in the position information management device 40 from the position specifying device 20. Then, the terminal accesses the location information management device 40 using the acquired predetermined code.
When receiving the access from the terminal, the position information management device 40 searches the position information table stored in the storage unit using the marker identification information as a key. When a record that hits the key is detected, the location information management device 40 extracts the record and supplies this record to the terminal as a search response. On the other hand, when the record that hits the key is not detected, the position information management device 40 supplies information indicating that there is no record corresponding to the marker identification information to the terminal as a search response.

端末は、位置情報管理装置40から供給される検索応答を取り込む。そして、検索応答がマーカ識別情報に対応するレコードである場合、このレコードに、資材情報Mを特定する資材情報を格納する。一方、検索応答がレコード無しであることを示す情報である場合、レコードを生成し、このレコードに、マーカCに対応するマーカ識別情報と、資材情報Mを特定する資材情報とを格納する。
そして、端末は、建設資材Mが保管場所等に置かれた後に測定された目標位置を示す目標位置情報と、現在日時を示す日時情報とをレコードに記録または更新する。目標位置の測定については後述する。
端末は、データが格納または更新されたレコードを、位置情報管理装置40に供給する。そして、位置情報管理装置40は、端末から供給されるレコードを取り込み、このレコードを位置情報テーブルに追加したり、そのレコードで更新したりする。
The terminal captures the search response supplied from the location information management device 40. If the search response is a record corresponding to the marker identification information, the material information for specifying the material information M is stored in this record. On the other hand, when the search response is information indicating that there is no record, a record is generated, and marker identification information corresponding to the marker C and material information specifying the material information M are stored in this record.
And a terminal records or updates the target position information which shows the target position measured after the construction material M was put in the storage place etc., and the date information which shows the present date. The measurement of the target position will be described later.
The terminal supplies a record in which data is stored or updated to the location information management device 40. Then, the location information management device 40 takes in the record supplied from the terminal, and adds this record to the location information table or updates it with the record.

建設資材Mに対応する目標位置は、建設資材Mが移動されるたびに測定される。この目標位置の測定方法について説明する。
建設資材Mに対する目標位置は、例えば、GPS(Global Positioning System)受信機等の位置検出装置による位置測定によって得られる。つまり、建設資材Mに対応する目標位置に位置検出装置を設け、この位置検出装置が測定して得る位置を目標位置とする。
The target position corresponding to the construction material M is measured every time the construction material M is moved. A method for measuring the target position will be described.
The target position with respect to the construction material M is obtained by position measurement by a position detection device such as a GPS (Global Positioning System) receiver. That is, a position detection device is provided at a target position corresponding to the construction material M, and a position obtained by measurement by this position detection device is set as a target position.

次に、本発明の一実施形態におけるクレーン制御システムの動作について説明する。
図5は、位置特定装置20および位置情報管理装置40の処理の手順を示すフローチャートである。
まず、位置特定装置20の動作について説明する。
ステップS1において、画像データ取得部21は、撮影装置10から供給される画像データを受け付けている(S1:NO)。そして、画像データ取得部21は、撮影装置10から画像データの供給を受けると(S1:YES)、ステップS2の処理に移す。
Next, the operation of the crane control system in one embodiment of the present invention will be described.
FIG. 5 is a flowchart showing a processing procedure of the position specifying device 20 and the position information management device 40.
First, the operation of the position specifying device 20 will be described.
In step S1, the image data acquisition unit 21 receives image data supplied from the photographing apparatus 10 (S1: NO). Then, when the image data acquisition unit 21 receives supply of image data from the photographing apparatus 10 (S1: YES), the image data acquisition unit 21 proceeds to the process of step S2.

ステップS2において、画像データ取得部21は、画像データを取り込む。画像データが静止画像データである場合、画像データ取得部21は、取り込んだ画像データをフレーム画像データとしてマーカ画像検出部22に供給する。また、画像データが動画像データである場合、画像データ取得部21は、取り込んだ動画像データからキーフレームを検出し、このキーフレームのデータをフレーム画像データとして、順次またはあらかじめ決定された所定フレーム数おきにマーカ画像検出部22に供給する。   In step S2, the image data acquisition unit 21 captures image data. When the image data is still image data, the image data acquisition unit 21 supplies the captured image data to the marker image detection unit 22 as frame image data. When the image data is moving image data, the image data acquisition unit 21 detects a key frame from the captured moving image data, and uses the data of the key frame as frame image data in order or a predetermined frame determined in advance. It supplies to the marker image detection part 22 every several numbers.

次に、ステップS3において、マーカ画像検出部22は、取り込んだフレーム画像データからマーカCの画像を検出する。例えば、マーカ画像検出部22は、例えば、マーカCの外形や全てのマーカCに共通に設けられる特徴的な図形を参照画像データとしてあらかじめ保有しておく。マーカ画像検出部22は、取り込んだフレーム画像データにおいて参照画像データと一致する画像があるか否かを探索することにより、フレーム画像データからマーカCの画像を検出する。
ステップS4において、マーカ画像検出部22は、フレーム画像データからマーカCの画像を検出した場合(S4:YES)はステップS5の処理に移し、フレーム画像データからマーカCの画像を検出しない場合(S4:NO)はステップS1の処理に戻す。
Next, in step S3, the marker image detection unit 22 detects an image of the marker C from the captured frame image data. For example, the marker image detection unit 22 holds, as reference image data, in advance, for example, the external shape of the marker C and a characteristic graphic provided in common to all the markers C. The marker image detection unit 22 detects the image of the marker C from the frame image data by searching whether or not there is an image that matches the reference image data in the captured frame image data.
In step S4, when the marker image detection unit 22 detects the image of the marker C from the frame image data (S4: YES), the marker image detection unit 22 proceeds to the process of step S5, and does not detect the image of the marker C from the frame image data (S4). : NO) returns to the process of step S1.

ステップS5において、コード検出部23は、検出したマーカCの画像から、前述した所定のコードを検出する。具体的には、コード検出部23は、マーカCの画像から、当該マーカCを識別するマーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報とを読み取る。
次に、ステップS6において、目標位置情報要求部24は、ステップS5の処理において読み取った所定のコードに基づいて、マーカCに対応する目標位置情報の取得要求を位置情報管理装置40に供給する。具体的には、目標位置情報要求部24は、所定のコードにおける所在地情報に基づき位置情報管理装置40にアクセスし、マーク識別情報を位置情報管理装置40に供給する。
In step S5, the code detection unit 23 detects the predetermined code described above from the detected image of the marker C. Specifically, the code detection unit 23 reads marker identification information for identifying the marker C and location information in the position information table registered in the position information management device 40 from the image of the marker C.
Next, in step S6, the target position information request unit 24 supplies an acquisition request for target position information corresponding to the marker C to the position information management device 40 based on the predetermined code read in the process of step S5. Specifically, the target position information request unit 24 accesses the position information management device 40 based on the location information in a predetermined code, and supplies the mark identification information to the position information management device 40.

次に、ステップS7において、目標位置情報取得部25は、マーカCに対応する目標位置情報の取得要求を取り込んだ位置情報管理装置40から供給される、前記の取得要求に対応した目標位置情報を取り込む。すなわち、目標位置情報取得部25は、マーク識別情報に基づいて位置情報管理装置40によって取得された目標位置情報を位置情報管理装置40から取得する。
次に、ステップS8において、姿勢制御部26は、取得した目標位置情報が示す目標位置を、機械装置60の作業部の移動先目標位置として指定した姿勢制御命令を生成し、この姿勢制御命令を姿勢制御装置50に供給する。
Next, in step S <b> 7, the target position information acquisition unit 25 supplies the target position information corresponding to the acquisition request supplied from the position information management device 40 that has received the acquisition request for the target position information corresponding to the marker C. take in. That is, the target position information acquisition unit 25 acquires the target position information acquired by the position information management apparatus 40 from the position information management apparatus 40 based on the mark identification information.
Next, in step S8, the posture control unit 26 generates a posture control command that designates the target position indicated by the acquired target position information as the destination target position of the working unit of the mechanical device 60. This is supplied to the attitude control device 50.

次に、位置情報管理装置40の動作について説明する。
ステップS11において、位置情報管理装置40は、ステップS6の処理において目標位置情報要求部24から供給された取得要求を取り込む。
次に、ステップS12において、位置情報管理装置40は、取得要求に基づいて、記憶部に記憶された位置情報テーブルから目標位置情報を抽出する。
次に、ステップS13において、位置情報管理装置40は、抽出した目標位置情報を要求元である位置特定装置20の目標位置情報取得部25に供給する。
Next, the operation of the location information management device 40 will be described.
In step S11, the position information management device 40 captures the acquisition request supplied from the target position information request unit 24 in the process of step S6.
Next, in step S12, the position information management device 40 extracts target position information from the position information table stored in the storage unit based on the acquisition request.
Next, in step S13, the position information management device 40 supplies the extracted target position information to the target position information acquisition unit 25 of the position specifying device 20 that is the request source.

以上説明したとおり、本実施形態において、建設資材Mに設けられるマーカCは、マーカ識別情報と、位置情報管理装置40に登録された位置情報テーブルの所在地情報(例えば、URL)とが含まれるコードを記録するものである。撮影装置10は、マーカCを撮影して得た画像データを位置特定装置20に供給する。そして、位置特定装置20は、撮影装置10から供給された画像データを取り込み、この画像データを解析してマーカCの画像を検出し、このマーカCの画像から、記録されたコードを読み出す。これにより、位置特定装置20は、マーカCを特定し、且つ位置情報テーブルの所在場所を把握する。   As described above, in the present embodiment, the marker C provided on the construction material M is a code including the marker identification information and the location information (for example, URL) of the location information table registered in the location information management device 40. Is to be recorded. The imaging device 10 supplies image data obtained by imaging the marker C to the position specifying device 20. Then, the position specifying device 20 takes in the image data supplied from the imaging device 10, analyzes the image data, detects the image of the marker C, and reads the recorded code from the image of the marker C. Thereby, the position specifying device 20 specifies the marker C and grasps the location of the position information table.

本実施形態において、建設資材Mの移動単位、すなわち建設資材Mまたは建設資材Mの組み合わせに対応する目標位置情報は、位置情報管理装置40が記憶する位置情報テーブルによって管理される。つまり、建設資材Mや建設資材Mの組み合わせが移動されると、GPS受信機等の位置検出装置が、移動先における目標位置を測定する。そして、端末が、測定によって得られた目標位置情報を取り込み、この目標位置情報を位置情報管理装置40に供給する。そして、位置情報管理装置40が、供給された目標位置情報を取り込み、この目標位置情報で位置情報テーブルの該当する項目を更新する。これにより、位置情報管理装置40は、建設資材Mの移動単位についての目標位置を的確に管理する。   In the present embodiment, the target position information corresponding to the movement unit of the construction material M, that is, the construction material M or the combination of the construction materials M, is managed by the position information table stored in the position information management device 40. That is, when the construction material M or the combination of the construction materials M is moved, a position detection device such as a GPS receiver measures the target position at the destination. Then, the terminal takes in the target position information obtained by the measurement, and supplies this target position information to the position information management device 40. Then, the position information management device 40 takes in the supplied target position information and updates the corresponding item in the position information table with this target position information. Thereby, the position information management device 40 accurately manages the target position for the unit of movement of the construction material M.

本実施形態において、位置特定装置20は、特定したマーカCのマーカ識別情報と位置情報テーブルの所在場所を示す情報とに基づいて位置情報管理装置40にアクセスする。そして、位置情報管理装置40は、上記のマーカ識別情報に対応する目標位置情報を抽出し、この目標位置情報を要求元である位置特定装置20に供給する。これにより、位置特定装置20は、撮影装置10から取り込んだ画像データからマーカCの画像を検出し、このマーカCに記録されたコードを読み出して位置情報管理装置40にアクセスするだけで、位置情報管理装置40からマーカCが設けられた建設資材Mまたは建設資材Mの組み合わせに対応する目標位置情報を取得することができる。   In the present embodiment, the position specifying device 20 accesses the position information management device 40 based on the marker identification information of the specified marker C and information indicating the location of the position information table. Then, the position information management device 40 extracts target position information corresponding to the marker identification information and supplies the target position information to the position specifying device 20 that is a request source. As a result, the position specifying device 20 detects the image of the marker C from the image data captured from the photographing device 10, reads the code recorded in the marker C, and accesses the position information management device 40. Target position information corresponding to the construction material M provided with the marker C or a combination of construction materials M can be acquired from the management device 40.

本実施形態によれば、マーカCには固定的な目標位置情報が記録されないため、マーカCは建設資材Mに対して位置精度を有する必要がない。また、マーカCの建設資材Mに対する大きさに制限がなく、例えば、建設資材Mと撮影装置10との距離に応じてマーカCの大きさを決めてもよい。つまり、建設資材Mと撮影装置10との距離が長くなる程、マーカCの大きさを大きくしてもよい。
したがって、本実施形態によれば、建設資材Mの移動単位の位置が移動により変更されたり、マーカCの設置位置にずれがあったりしても、軽い処理負荷で且つ短時間にその目標位置を特定することができる。
According to the present embodiment, since the fixed target position information is not recorded in the marker C, the marker C does not need to have positional accuracy with respect to the construction material M. Moreover, there is no restriction | limiting in the magnitude | size with respect to the construction material M of the marker C, For example, you may determine the magnitude | size of the marker C according to the distance of the construction material M and the imaging device 10. That is, the size of the marker C may be increased as the distance between the construction material M and the imaging device 10 increases.
Therefore, according to this embodiment, even if the position of the movement unit of the construction material M is changed by movement or the installation position of the marker C is shifted, the target position can be set in a short time with a light processing load. Can be identified.

本実施形態は、複数の機械装置60が設置された建設現場において、これら複数の機械装置60が、マーカCが設けられた建設資材Mを順次中継移動させることによって、建設資材Mを移送する作業に適用可能である。
図6は、建設現場において、2台の機械装置60が建設資材Mを移送するクレーン制御システムを模式的に示す図である。
同図に示すとおり、建設現場には、機械装置60−1および機械装置60−2が設置されている。このクレーン制御システムにおいて、機械装置60−1は、場所A1に載置された建設資材Mを場所A2まで移動させる。機械装置60−2は、場所A2に載置された建設資材Mを場所A3まで移動させる。
In the present embodiment, in a construction site where a plurality of mechanical devices 60 are installed, the plurality of mechanical devices 60 transfer the construction material M by sequentially moving the construction material M provided with the markers C. It is applicable to.
FIG. 6 is a diagram schematically showing a crane control system in which two mechanical devices 60 transfer the construction material M at the construction site.
As shown in the figure, a mechanical device 60-1 and a mechanical device 60-2 are installed at the construction site. In this crane control system, the mechanical device 60-1 moves the construction material M placed at the location A1 to the location A2. The mechanical device 60-2 moves the construction material M placed at the location A2 to the location A3.

建設資材Mが場所A1に載置されたとき、クレーン制御システムは、前述した、位置情報管理装置40に記憶された位置情報テーブルへのデータの登録および更新の処理によって、目標位置情報と現在日時を示す日時情報とを位置情報テーブルに登録または更新する。
機械装置60−1が、場所A1に載置された建設資材Mを場所A2まで移動させた場合、例えば、機械装置60−1の旋回角度、ジブ角度、ワイヤフック長等のクレーン情報に基づいて、クレーン制御システムは、場所A2における建設資材Mの目標位置を計算することができる。または、クレーン制御システムは、建設資材Mに設けられたGPS受信機等の位置検出装置による位置測定によって、建設資材Mの目標位置を得ることができる。よってクレーン制御システムは、前述した、位置情報管理装置40に記憶された位置情報テーブルへのデータの登録および更新の処理と同様に、新たに得た目標位置情報と現在日時を示す日時情報とを位置情報テーブルに登録または更新する。
When the construction material M is placed at the location A1, the crane control system performs the registration and update processing of the data in the position information table stored in the position information management device 40, and the target position information and the current date and time. Is registered or updated in the position information table.
When the mechanical device 60-1 moves the construction material M placed at the location A1 to the location A2, for example, based on crane information such as the turning angle, jib angle, and wire hook length of the mechanical device 60-1. The crane control system can calculate the target position of the construction material M at the location A2. Alternatively, the crane control system can obtain the target position of the construction material M by position measurement using a position detection device such as a GPS receiver provided in the construction material M. Therefore, the crane control system obtains the newly obtained target position information and date / time information indicating the current date / time, in the same manner as the registration and update processing of data in the position information table stored in the position information management device 40 described above. Register or update in the location information table.

機械装置60−2が、場所A2に載置された建設資材Mを場所A3まで移動させる場合についても、機械装置60−1の場合と同様にして目標位置情報と日時情報とを引き継いで位置情報テーブルに更新していくことができる。   In the case where the mechanical device 60-2 moves the construction material M placed at the location A2 to the location A3, the location information is inherited from the target location information and the date / time information as in the case of the mechanical device 60-1. You can update to the table.

このようにして、機械装置60−1,60−2が、マーカCが設けられた建設資材Mを順次中継移動させることによって、場所A1から場所A3まで建設資材Mを移送することができる。
このような、複数の機械装置60を有するクレーン制御システムは、例えば、作業者が操作可能な場所や安全が確保できる場所から、作業者が操作不可能な場所や安全の確保が困難である場所まで物品を移送する場合に有用である。
In this way, the mechanical devices 60-1 and 60-2 can transfer the construction material M from the location A1 to the location A3 by sequentially relaying the construction material M provided with the marker C.
Such a crane control system having a plurality of mechanical devices 60 is, for example, a place where an operator cannot operate or a place where it is difficult to ensure safety from a place where an operator can operate or a place where safety can be ensured. This is useful when transferring an article up to.

なお、上述した実施形態である位置特定装置20の一部の機能をコンピュータで実現するようにしてもよい。この場合、その機能を実現するための位置特定プログラムをコンピュータ読み取り可能な記録媒体に記録し、この記録媒体に記録された位置特定プログラムをコンピュータシステムに読み込ませて、このコンピュータシステムが実行することによって実現してもよい。なお、このコンピュータシステムとは、オペレーティング・システム(Operating System;OS)や周辺装置のハードウェアを含むものである。また、コンピュータ読み取り可能な記録媒体とは、フレキシブルディスク、光磁気ディスク、光ディスク、メモリカード等の可搬型記録媒体、コンピュータシステムに備えられる磁気ハードディスクやソリッドステートドライブ等の記憶装置のことをいう。さらに、コンピュータ読み取り可能な記録媒体とは、インターネット等のコンピュータネットワーク、および電話回線や携帯電話網を介してプログラムを送信する場合の通信回線のように、短時間の間、動的にプログラムを保持するもの、さらには、その場合のサーバ装置やクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持するものを含んでもよい。また上記の位置特定プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせにより実現するものであってもよい。   In addition, you may make it implement | achieve a part of function of the position specification apparatus 20 which is embodiment mentioned above with a computer. In this case, a position specifying program for realizing the function is recorded on a computer-readable recording medium, the position specifying program recorded on the recording medium is read into the computer system, and the computer system executes the position specifying program. It may be realized. This computer system includes an operating system (OS) and hardware of peripheral devices. The computer-readable recording medium is a portable recording medium such as a flexible disk, a magneto-optical disk, an optical disk, or a memory card, and a storage device such as a magnetic hard disk or a solid state drive provided in the computer system. Furthermore, a computer-readable recording medium dynamically holds a program for a short time, such as a computer network such as the Internet, and a communication line when transmitting a program via a telephone line or a cellular phone network. In addition, a server that holds a program for a certain period of time, such as a volatile memory inside a computer system serving as a server device or a client in that case, may be included. Further, the above-described position specifying program may be for realizing a part of the above-described functions, and further, realizing the above-described functions by a combination with a program already recorded in the computer system. May be.

以上、本発明の実施の形態について図面を参照して詳述したが、具体的な構成はその実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれる。   As mentioned above, although embodiment of this invention was explained in full detail with reference to drawings, the specific structure is not restricted to that embodiment, The design of the range which does not deviate from the summary of this invention, etc. are included.

1 クレーン制御システム
10 撮影装置
20 位置特定装置
21 画像データ取得部
22 マーカ画像検出部
23 コード検出部
24 目標位置情報要求部
25 目標位置情報取得部
26 姿勢制御部
30 ネットワーク
40 位置情報管理装置
50 姿勢制御装置
60 機械装置
DESCRIPTION OF SYMBOLS 1 Crane control system 10 Image pick-up device 20 Position specification apparatus 21 Image data acquisition part 22 Marker image detection part 23 Code detection part 24 Target position information request | requirement part 25 Target position information acquisition part 26 Posture control part 30 Network 40 Position information management apparatus 50 Posture Control device 60 Mechanical device

Claims (7)

物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、
前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
を備えることを特徴とする位置特定装置。
An image data acquisition unit configured to acquire image data obtained by photographing a marker provided on the article, in which a predetermined code is recorded so as to be visible;
A marker image detection unit that detects an image of the marker from the image data acquired by the image data acquisition unit;
A code detection unit for detecting the predetermined code from the image of the marker detected by the marker image detection unit;
Target position information for acquiring the target position information corresponding to the article based on the predetermined code detected by the code detection unit from a position information management device that manages target position information indicating the target position corresponding to the article. An acquisition unit;
A position specifying device comprising:
前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、
前記目標位置情報取得部は、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得する
ことを特徴とする請求項1記載の位置特定装置。
The predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device,
The target position information acquisition unit accesses the position information management apparatus based on the location information, supplies the identification information to the position information management apparatus, and is acquired by the position information management apparatus based on the identification information. The position specifying apparatus according to claim 1, wherein the target position information is acquired from the position information management apparatus.
物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを、画像データ取得部が取得する画像データ取得ステップと、
前記画像データ取得ステップにおいて取得された前記画像データから、マーカ画像検出部が前記マーカの画像を検出するマーカ画像検出ステップと、
前記マーカ画像検出ステップにおいて検出された前記マーカの画像から、コード検出部が前記所定のコードを検出するコード検出ステップと、
前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出ステップにおいて検出された前記所定のコードに基づいて、目標位置情報取得部が前記物品に対応する前記目標位置情報を取得する目標位置情報取得ステップと、
を有することを特徴とする位置特定方法。
An image data acquisition step in which the image data acquisition unit acquires image data obtained by photographing a marker provided on the article, in which a predetermined code is recorded so as to be visible;
A marker image detection step in which a marker image detection unit detects an image of the marker from the image data acquired in the image data acquisition step;
A code detection step in which a code detection unit detects the predetermined code from the image of the marker detected in the marker image detection step;
Based on the predetermined code detected in the code detection step from a position information management apparatus that manages target position information indicating a target position corresponding to the article, a target position information acquisition unit that corresponds to the article A target position information acquisition step for acquiring position information;
A position specifying method characterized by comprising:
前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、
前記目標位置情報取得ステップは、前記目標位置情報取得部が、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得する
ことを特徴とする請求項3記載の位置特定方法。
The predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device,
In the target position information acquisition step, the target position information acquisition unit accesses the position information management device based on the location information, supplies the identification information to the position information management device, and based on the identification information The position specifying method according to claim 3, wherein the target position information acquired by the position information management apparatus is acquired from the position information management apparatus.
コンピュータを、
物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して得られた画像データを取得する画像データ取得部と、
前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理装置から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
として機能させるための位置特定プログラム。
Computer
An image data acquisition unit configured to acquire image data obtained by photographing a marker provided on the article, in which a predetermined code is recorded so as to be visible;
A marker image detection unit that detects an image of the marker from the image data acquired by the image data acquisition unit;
A code detection unit for detecting the predetermined code from the image of the marker detected by the marker image detection unit;
Target position information for acquiring the target position information corresponding to the article based on the predetermined code detected by the code detection unit from a position information management device that manages target position information indicating the target position corresponding to the article. An acquisition unit;
Location program to function as.
前記所定のコードは、前記マーカの識別情報と前記位置情報管理装置の所在地を少なくとも示す所在地情報とを含み、
前記目標位置情報取得部は、前記所在地情報に基づいて前記位置情報管理装置にアクセスして前記識別情報を前記位置情報管理装置に供給し、前記識別情報に基づいて前記位置情報管理装置によって取得された前記目標位置情報を前記位置情報管理装置から取得する
ことを特徴とする請求項5記載の位置特定プログラム。
The predetermined code includes identification information of the marker and location information indicating at least a location of the location information management device,
The target position information acquisition unit accesses the position information management apparatus based on the location information, supplies the identification information to the position information management apparatus, and is acquired by the position information management apparatus based on the identification information. The position specifying program according to claim 5, wherein the target position information is acquired from the position information management device.
物品に設けられた、所定のコードが視認可能に記録されたマーカを撮影して画像データを生成する撮影部と、
前記撮影部が生成した前記画像データを取り込む画像データ取得部と、
前記画像データ取得部が取得した前記画像データから前記マーカの画像を検出するマーカ画像検出部と、
前記マーカ画像検出部が検出した前記マーカの画像から、前記所定のコードを検出するコード検出部と、
前記物品に対応する目標位置を示す目標位置情報を管理する位置情報管理部と、
前記位置情報管理部から、前記コード検出部が検出した前記所定のコードに基づいて前記物品に対応する前記目標位置情報を取得する目標位置情報取得部と、
を備えることを特徴とする位置特定システム。
An imaging unit that is provided on the article and shoots a marker on which a predetermined code is recorded so as to be visible, and generates image data;
An image data acquisition unit that captures the image data generated by the imaging unit;
A marker image detection unit that detects an image of the marker from the image data acquired by the image data acquisition unit;
A code detection unit for detecting the predetermined code from the image of the marker detected by the marker image detection unit;
A position information management unit for managing target position information indicating a target position corresponding to the article;
A target position information acquisition unit that acquires the target position information corresponding to the article based on the predetermined code detected by the code detection unit from the position information management unit;
A position specifying system comprising:
JP2011224941A 2011-10-12 2011-10-12 LOCATION DEVICE, LOCATION METHOD, LOCATION PROGRAM, AND LOCATION SYSTEM Expired - Fee Related JP5870444B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011224941A JP5870444B2 (en) 2011-10-12 2011-10-12 LOCATION DEVICE, LOCATION METHOD, LOCATION PROGRAM, AND LOCATION SYSTEM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011224941A JP5870444B2 (en) 2011-10-12 2011-10-12 LOCATION DEVICE, LOCATION METHOD, LOCATION PROGRAM, AND LOCATION SYSTEM

Publications (2)

Publication Number Publication Date
JP2013082549A true JP2013082549A (en) 2013-05-09
JP5870444B2 JP5870444B2 (en) 2016-03-01

Family

ID=48528163

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011224941A Expired - Fee Related JP5870444B2 (en) 2011-10-12 2011-10-12 LOCATION DEVICE, LOCATION METHOD, LOCATION PROGRAM, AND LOCATION SYSTEM

Country Status (1)

Country Link
JP (1) JP5870444B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016062313A (en) * 2014-09-18 2016-04-25 清水建設株式会社 Material inspection device, material inspection method, and material inspection system
JP2017527873A (en) * 2014-06-26 2017-09-21 アマゾン テクノロジーズ インコーポレイテッド Perform automated tasks based on visual cues
JP2018127357A (en) * 2016-11-22 2018-08-16 マニタウォック クレイン カンパニーズ, エルエルシーManitowoc Crane Companies, Llc Optical detection and analysis for counterweight assembly on crane

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6274809A (en) * 1985-09-28 1987-04-06 Sharp Corp Automatic assortment control system
JPH05246505A (en) * 1992-03-06 1993-09-24 Murata Mach Ltd Method for coping with no-read in bar code system
JPH0753010A (en) * 1993-08-09 1995-02-28 Hitachi Ltd Carrying-in/out device for atuomated warehouse
JP2004026478A (en) * 2002-06-28 2004-01-29 Mitsubishi Electric Information Systems Corp Storage place management system, storage place management method, computer-readable recording medium having program recorded therein, and the program
JP2005083984A (en) * 2003-09-10 2005-03-31 Neomax Co Ltd Article position checking system
JP2006264914A (en) * 2005-03-24 2006-10-05 Midori Service Kk Incoming merchandise inspection system
JP2008195466A (en) * 2007-02-09 2008-08-28 Mpc Solutions Corp Product storage space management system and its management method
JP2011036107A (en) * 2009-08-05 2011-02-17 Hino Motors Ltd Charging system and vehicle
JP2012111573A (en) * 2010-11-22 2012-06-14 Jfe Steel Corp Storage site management system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6274809A (en) * 1985-09-28 1987-04-06 Sharp Corp Automatic assortment control system
JPH05246505A (en) * 1992-03-06 1993-09-24 Murata Mach Ltd Method for coping with no-read in bar code system
JPH0753010A (en) * 1993-08-09 1995-02-28 Hitachi Ltd Carrying-in/out device for atuomated warehouse
JP2004026478A (en) * 2002-06-28 2004-01-29 Mitsubishi Electric Information Systems Corp Storage place management system, storage place management method, computer-readable recording medium having program recorded therein, and the program
JP2005083984A (en) * 2003-09-10 2005-03-31 Neomax Co Ltd Article position checking system
JP2006264914A (en) * 2005-03-24 2006-10-05 Midori Service Kk Incoming merchandise inspection system
JP2008195466A (en) * 2007-02-09 2008-08-28 Mpc Solutions Corp Product storage space management system and its management method
JP2011036107A (en) * 2009-08-05 2011-02-17 Hino Motors Ltd Charging system and vehicle
JP2012111573A (en) * 2010-11-22 2012-06-14 Jfe Steel Corp Storage site management system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017527873A (en) * 2014-06-26 2017-09-21 アマゾン テクノロジーズ インコーポレイテッド Perform automated tasks based on visual cues
JP2016062313A (en) * 2014-09-18 2016-04-25 清水建設株式会社 Material inspection device, material inspection method, and material inspection system
JP2018127357A (en) * 2016-11-22 2018-08-16 マニタウォック クレイン カンパニーズ, エルエルシーManitowoc Crane Companies, Llc Optical detection and analysis for counterweight assembly on crane
JP7152144B2 (en) 2016-11-22 2022-10-12 マニタウォック クレイン カンパニーズ, エルエルシー Optical detection and analysis of counterweight assemblies on cranes

Also Published As

Publication number Publication date
JP5870444B2 (en) 2016-03-01

Similar Documents

Publication Publication Date Title
JP5402969B2 (en) Mobile terminal and program
JP5255595B2 (en) Terminal location specifying system and terminal location specifying method
JP6236199B2 (en) Bar arrangement system
JP4743522B2 (en) Image data recording method, work result recording method using image data, image data recording apparatus, and work result recording system using image data
CN113226952B (en) Article position management device, article position management system, article position management method, and program
US20150106373A1 (en) Generating search database based on earth&#39;s magnetic field measurements
WO2019087426A1 (en) Baggage checking system and baggage management method
JP5870444B2 (en) LOCATION DEVICE, LOCATION METHOD, LOCATION PROGRAM, AND LOCATION SYSTEM
CN110678771A (en) Terminal device for position measurement, computer program, and system
JP7001711B2 (en) A position information system that uses images taken by a camera, and an information device with a camera that uses it.
JP2006209604A (en) Sign management system
JP5467308B2 (en) Image recording system and image recording method
JP2022092365A (en) Position management system
JP2006117413A (en) Location data acquiring device and program
JP6288166B2 (en) Mobile terminal and program
JP2022092364A (en) Equipment and materials management system
CN102480682A (en) Mobile positioning device, server and mobile positioning method thereof
JP6098659B2 (en) Mobile terminal and program
JP5737362B2 (en) Mobile terminal and program
JP6474859B2 (en) Portable terminal, control program, and control method
JP6319478B2 (en) Mobile terminal and program
JP5953812B2 (en) Mobile terminal and program
JP2019139642A (en) Device, system, and method for detecting locations
JP7448748B2 (en) Position detection system and position detection method
US20240053427A1 (en) Display control system, method and information processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150605

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151225

R150 Certificate of patent or registration of utility model

Ref document number: 5870444

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees