JP7184243B2 - POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM - Google Patents

POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM Download PDF

Info

Publication number
JP7184243B2
JP7184243B2 JP2017203909A JP2017203909A JP7184243B2 JP 7184243 B2 JP7184243 B2 JP 7184243B2 JP 2017203909 A JP2017203909 A JP 2017203909A JP 2017203909 A JP2017203909 A JP 2017203909A JP 7184243 B2 JP7184243 B2 JP 7184243B2
Authority
JP
Japan
Prior art keywords
reference point
mobile body
point installation
work
moving body
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017203909A
Other languages
Japanese (ja)
Other versions
JP2019078569A (en
Inventor
壮広 鶴田
幹太 宮口
昌宏 菅田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Takenaka Corp
Original Assignee
Takenaka Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Takenaka Corp filed Critical Takenaka Corp
Priority to JP2017203909A priority Critical patent/JP7184243B2/en
Publication of JP2019078569A publication Critical patent/JP2019078569A/en
Application granted granted Critical
Publication of JP7184243B2 publication Critical patent/JP7184243B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、位置認識方法、位置認識装置、基準点設置用移動体、作業用移動体、及び位置認識システムに関する。 The present invention relates to a position recognition method, a position recognition device, a reference point setting mobile body, a work mobile body, and a position recognition system.

従来、位置決め対象物を目標位置に位置決めする方法及びシステムが知られている(例えば、特許文献1を参照)。特許文献1に記載の技術では、レーザレンジファインダを使用して計測される位置決め対象物の位置に基づいて、位置決め対象物を目標位置に向けて移動させる。そして、位置決め対象物が移動した後に、トータルステーションを使用して計測される位置決め対象物の位置に基づいて、位置決め対象物を目標位置に位置決めする。 Conventionally, a method and a system for positioning an object to be positioned at a target position are known (see, for example, Patent Document 1). The technique described in Patent Literature 1 moves a positioning object toward a target position based on the position of the positioning object measured using a laser range finder. After the positioning object is moved, the positioning object is positioned at the target position based on the position of the positioning object measured using the total station.

また、物体の位置検出方法及び装置が知られている(例えば、特許文献2を参照)。特許文献2に記載の技術では、レーザポインタロボットの単独のレーザ光源から、対象とする物体に対して2本のレーザ光を順次照射する。そして、第1のレーザスポットの重心位置と第2のレーザスポットの重心位置を物体の物体内座標系で計測する。これにより、対象物体のエリア座標系での位置が検出される。 A method and device for detecting the position of an object are also known (see, for example, Patent Document 2). In the technique described in Patent Document 2, two laser beams are sequentially emitted from a single laser light source of a laser pointer robot to a target object. Then, the center-of-gravity position of the first laser spot and the center-of-gravity position of the second laser spot are measured in the intra-object coordinate system of the object. Thereby, the position of the target object in the area coordinate system is detected.

また、3台以上の自律走行ロボットを制御する自律走行ロボット群システムが知られている(例えば、特許文献3を参照)。特許文献3に記載の技術では、各自律走行ロボットが、他自律走行ロボットとの間の幾何学情報を測定し、自律走行ロボットの位置情報を算出する。 Also, an autonomous mobile robot group system that controls three or more autonomous mobile robots is known (see Patent Document 3, for example). In the technique described in Patent Literature 3, each autonomous mobile robot measures geometric information with other autonomous mobile robots, and calculates the position information of the autonomous mobile robot.

特許第5516204号公報Japanese Patent No. 5516204 特許第3731123号公報Japanese Patent No. 3731123 特許第3410508号公報Japanese Patent No. 3410508

建設現場おいて自律的にロボットが施工作業を行うためには、ロボットの位置を高精度に把握する必要がある。GPS信号が良好に受信できる環境下においては、各種建設機械を自動化させる取り組みが積極的に進められている。このような取り組みは良好なGPS信号を受信できる土木分野での応用が顕著である。 In order for a robot to perform construction work autonomously at a construction site, it is necessary to grasp the position of the robot with high accuracy. Under the environment in which GPS signals can be well received, efforts are being actively made to automate various construction machines. Such efforts are notable for application in the civil engineering field where good GPS signals can be received.

しかし、建築分野に目を向けてみると、建設現場においては、柱、梁、壁、及び屋根といった周囲の障害物の影響により、良好なGPS信号を受信することができず、高精度な位置認識をすることができない。 However, in the construction field, it is difficult to receive good GPS signals due to the influence of surrounding obstacles such as pillars, beams, walls, and roofs at construction sites. unable to recognize.

上記特許文献1及び上記特許文献2に記載の技術は、見通しが効く限定的な領域での利用にとどまっており、時々刻々と周辺環境が変化する建設現場で安定的に位置認識できる技術にはなっていない。 The technologies described in Patent Document 1 and Patent Document 2 are limited to use in limited areas where visibility is good, and there is no technology that can stably recognize the position at a construction site where the surrounding environment changes from moment to moment. is not.

また、上記特許文献3に記載の技術では、自律走行ロボットが移動を繰り返すことにより、位置誤差が蓄積されてしまうため、自律走行ロボットの位置を精度よく算出することができない。 In addition, in the technique described in Patent Document 3, positional errors accumulate as the autonomous mobile robot moves repeatedly, so the position of the autonomous mobile robot cannot be calculated with high accuracy.

具体的には、図16(a)に示されるように、1台の自律走行ロボットの位置が(d,0)であり、もう1台の自律走行ロボットの位置が(‐d,0)であり、残りの1台の自律走行ロボットとの間に形成される三角形の底角がθ1、θ2であるとすると、残りの1台の自律走行ロボットの位置P(x,y)を算出することができる。ここで角度は反時計まわりを正とし、三角形を二等辺三角形と仮定してθ1=-θ2=θとする。この場合、この三角形の底角θ1、θ2に誤差Δθ1、Δθ2が含まれる場合のP(x,y)の位置誤差Δx、Δyは以下の式(1)で表される。 Specifically, as shown in FIG. 16(a), the position of one autonomous mobile robot is (d, 0), and the position of another autonomous mobile robot is (-d, 0). , and the base angles of the triangle formed with the remaining autonomous mobile robot are θ1 and θ2, the position P(x, y) of the remaining autonomous mobile robot is calculated. can be done. Here, assuming that the counterclockwise rotation is positive and that the triangle is an isosceles triangle, θ1=−θ2=θ. In this case, the position errors Δx and Δy of P(x, y) when the errors Δθ1 and Δθ2 are included in the base angles θ1 and θ2 of this triangle are represented by the following equation (1).

Figure 0007184243000001

(1)
Figure 0007184243000001

(1)

Δθ1=-Δθ2=Δθである場合、図16(b)に示されるように、この二等辺三角形をn個積み重ねて、n番目の三角形の頂点が目標位置に到達する場合について考える。この移動シーケンスにおいてn個の三角形を積みあげた場合の位置誤差ΣΔx及びΣΔyは以下の式(2)で表される。ここでθeは、図16(a)に示されるように、最初の三角形の底角から見た目標位置の方位角を示している。 When Δθ1=−Δθ2=Δθ, consider the case where n isosceles triangles are stacked and the vertex of the n-th triangle reaches the target position as shown in FIG. 16(b). Position errors ΣΔx and ΣΔy when n triangles are accumulated in this movement sequence are expressed by the following equation (2). Here, .theta.e indicates the azimuth angle from the base angle of the first triangle to the target position, as shown in FIG. 16(a).

Figure 0007184243000002

(2)
Figure 0007184243000002

(2)

上記式(2)からわかるように、移動を繰り返す(nを増やす)ことによって誤差が蓄積されていくことがわかる。 As can be seen from the above formula (2), errors are accumulated by repeating the movement (increasing n).

本発明は上記事実を考慮して、建設現場における作業用移動体の位置を、精度良く認識することを目的とする。 SUMMARY OF THE INVENTION In consideration of the above facts, it is an object of the present invention to accurately recognize the position of a work vehicle at a construction site.

上記目的を達成するために、本発明の位置認識方法は、建設現場における床面上の基準点に対して識別マーカを設置する設置工程と、前記設置工程によって設置された前記識別マーカの位置に、基準点設置用移動体を移動させる移動工程と、前記移動工程によって移動した前記基準点設置用移動体の位置に応じて、前記建設現場において作業を行うための作業用移動体の位置を認識する認識工程と、を備える。これにより、建設現場における作業用移動体の位置を、精度良く認識することができる。 To achieve the above object, the position recognition method of the present invention includes an installation step of installing an identification marker with respect to a reference point on a floor surface at a construction site; a moving step of moving a reference point setting mobile body; and recognizing the position of the working mobile body for performing work at the construction site according to the position of the reference point setting mobile body moved by the moving step. and a recognition step. As a result, the position of the working vehicle at the construction site can be recognized with high accuracy.

本発明の位置認識装置は、建設現場における床面上の基準点に対して予め設置された識別マーカの位置に移動した、基準点設置用移動体の位置に応じて、前記建設現場において作業を行うための作業用移動体の位置を認識する位置認識部を備える。 The position recognition apparatus of the present invention performs work at a construction site according to the position of a reference point setting mobile body that has moved to the position of an identification marker that has been set in advance with respect to a reference point on a floor surface at the construction site. A position recognizing unit for recognizing the position of the work vehicle for performing the work is provided.

本発明の位置認識装置は、前記作業用移動体に搭載された位置計測部による計測処理によって前記基準点設置用移動体に搭載された距離測定用機器が検出されない場合に、前記基準点設置用移動体を移動させるように制御する制御部を更に備えるようにすることができる。これにより、作業用移動体の位置から基準点設置用移動体が検出されない場合であっても、基準点設置用移動体を移動させることにより、作業用移動体の位置を認識することができる。 The position recognition device of the present invention detects the distance measuring device mounted on the reference point installation mobile body by the measurement processing by the position measuring unit mounted on the work mobile body. It is possible to further include a control unit that controls the moving body to move. Accordingly, even when the reference point installation mobile body is not detected from the position of the work mobile body, the position of the work mobile body can be recognized by moving the reference point installation mobile body.

本発明の位置認識装置の前記制御部は、前記作業用移動体の前記位置計測部による計測処理によって前記基準点設置用移動体の前記距離測定用機器が検出されない場合に、前記作業用移動体の前記位置計測部によって前記基準点設置用移動体が検出される位置であって、現時刻の前記基準点設置用移動体の位置から最も近い前記識別マーカが設置された位置へ前記基準点設置用移動体を移動させるように制御するようにすることができる。これにより、作業用移動体から基準点設置用移動体が検出されない場合に、作業用移動体の位置を短時間で認識することができる。 The control unit of the position recognition device of the present invention detects the distance measurement device of the reference point setting mobile body by the measurement processing performed by the position measurement unit of the mobile work body. The reference point is installed at a position where the reference point installation moving body is detected by the position measuring unit of and where the identification marker closest to the position of the reference point installation moving body at the current time is installed. It is possible to control so as to move the moving body for use. Accordingly, when the reference point setting mobile body is not detected from the work mobile body, the position of the work mobile body can be recognized in a short time.

本発明の位置認識装置の前記制御部は、次時刻の前記作業用移動体の位置に基づいて、次時刻の前記作業用移動体の位置から前記位置計測部による計測処理によって前記基準点設置用移動体が検出される位置へ前記基準点設置用移動体を移動させるように制御するようにすることができる。これにより、作業用移動体から基準点設置用移動体が検出されない場合に、作業用移動体の位置を短時間で認識することができる。 The control unit of the position recognition device of the present invention performs the measurement processing by the position measurement unit based on the position of the work vehicle at the next time, and the position of the work vehicle at the next time. The reference point setting moving body may be controlled to move to a position where the moving body is detected. Accordingly, when the reference point setting mobile body is not detected from the work mobile body, the position of the work mobile body can be recognized in a short time.

本発明の基準点設置用移動体は、建設現場において作業を行う作業用移動体に搭載された位置計測部の計測処理によって検出される距離測定用機器と、前記建設現場の床面を撮像するカメラと、走行機構と、前記カメラによって撮像された画像に基づいて、前記建設現場における床面上の基準点に対して予め設置された識別マーカの位置で停止するように、前記走行機構を制御する基準点設置用移動体制御部とを備える。これにより、基準点設置用移動体の位置に応じて、建設現場における作業用移動体の位置を、精度良く認識することができる。 A reference point installation mobile body of the present invention picks up images of a distance measuring device detected by measurement processing of a position measuring unit mounted on a working mobile body that performs work at a construction site, and the floor surface of the construction site. A camera, a traveling mechanism, and controlling the traveling mechanism so as to stop at a position of an identification marker set in advance with respect to a reference point on the floor of the construction site based on the image captured by the camera. and a reference point setting moving body control unit. Accordingly, the position of the working mobile body at the construction site can be accurately recognized according to the position of the reference point setting mobile body.

本発明の作業用移動体は、建設現場における床面上の基準点に対して予め設置された識別マーカの位置に移動する基準点設置用移動体に搭載された距離測定用機器の位置を検出する位置計測部と、位置認識部と、を備えた作業用移動体であって、前記位置計測部は、前記基準点設置用移動体の前記距離測定用機器の位置の検出結果に基づいて、前記基準点設置用移動体の位置に対する前記作業用移動体の位置を計測し、前記位置認識部は、前記位置計測部によって計測された前記基準点設置用移動体の位置に対する前記作業用移動体の位置と、前記基準点設置用移動体の位置に対応する前記識別マーカの位置とに基づいて、作業用移動体の位置を認識する。これにより、基準点設置用移動体の位置に応じて、建設現場における作業用移動体の位置を、精度良く認識することができる。 A work mobile body of the present invention detects the position of a distance measuring device mounted on a reference point installation mobile body that moves to the position of an identification marker previously installed with respect to a reference point on a floor surface at a construction site. and a position recognizing unit, wherein the position measuring unit, based on the detection result of the position of the distance measuring device of the reference point setting mobile unit, The position of the working mobile body is measured with respect to the position of the reference point setting mobile body, and the position recognition unit measures the position of the working mobile body with respect to the position of the reference point setting mobile body measured by the position measuring unit. and the position of the identification marker corresponding to the position of the reference point setting mobile body, the position of the work mobile body is recognized. Accordingly, the position of the working mobile body at the construction site can be accurately recognized according to the position of the reference point setting mobile body.

本発明の位置認識システムは、本発明の基準点設置用移動体と、本発明の作業用移動体とを備える。これにより、建設現場における作業用移動体の位置を、精度良く認識することができる。 A position recognition system of the present invention includes the reference point setting mobile body of the present invention and the working mobile body of the present invention. As a result, the position of the working vehicle at the construction site can be recognized with high accuracy.

本発明によれば、建設現場における作業用移動体の位置を、精度良く認識することができる、という効果が得られる。 ADVANTAGE OF THE INVENTION According to this invention, the effect that the position of the mobile body for a work in a construction site can be recognized accurately is acquired.

本実施形態に係る位置認識システムの構成の一例を示す図である。It is a figure showing an example of composition of a position recognition system concerning this embodiment. 本実施形態の前提条件を説明するための説明図である。It is an explanatory view for explaining prerequisites of this embodiment. 本実施形態の前提条件を説明するための説明図である。It is an explanatory view for explaining prerequisites of this embodiment. 本実施形態に係る位置認識システムの機能的な構成の一例を示す図である。It is a figure showing an example of functional composition of a position recognition system concerning this embodiment. 基準点設置用移動体の具体的な構成例を示す図である。FIG. 4 is a diagram showing a specific configuration example of a reference point installation moving body; 親墨と識別マーカとを説明するための説明図である。FIG. 4 is an explanatory diagram for explaining the ink and the identification marker; 座標データベースに格納される座標テーブルの一例と位置記憶部に格納される情報の一例を示す図である。It is a figure which shows an example of the information stored in an example of the coordinate table stored in a coordinate database, and a position storage part. 作業用移動体の位置に対応する座標情報の認識処理を説明するための説明図である。FIG. 10 is an explanatory diagram for explaining processing for recognizing coordinate information corresponding to the position of the mobile body for work; 本実施形態で設定される座標について説明するための説明図である。It is an explanatory view for explaining coordinates set up by this embodiment. 位置認識システムの作用を説明するための説明図である。FIG. 4 is an explanatory diagram for explaining the action of the position recognition system; 作業用移動体移動処理を示すフローチャートである。It is a flow chart which shows a mobile body movement processing for work. 位置認識システムの作用を説明するための説明図である。FIG. 4 is an explanatory diagram for explaining the action of the position recognition system; サーバ制御処理を示すフローチャートである。6 is a flowchart showing server control processing; 位置認識システムの作用を説明するための説明図である。FIG. 4 is an explanatory diagram for explaining the action of the position recognition system; 基準点設置用移動体移動処理を示すフローチャートである。FIG. 11 is a flowchart showing reference point installation moving body movement processing; FIG. 従来技術を説明するための説明図である。It is an explanatory view for explaining conventional technology.

以下、本発明の実施形態について詳細に説明する。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described in detail.

本実施形態に係る位置認識システムは、建設現場において作業を行うための作業用移動体を、目標位置へ移動させるためのシステムである。図1は、本発明の実施形態に係る位置認識システム10の構成の一例を示す図である。位置認識システム10は、図1に示されるように、基準点設置用移動体12Aと、基準点設置用移動体12Bと、サーバ28と、作業用移動体38とを備える。 A position recognition system according to the present embodiment is a system for moving a working vehicle for performing work at a construction site to a target position. FIG. 1 is a diagram showing an example configuration of a position recognition system 10 according to an embodiment of the present invention. The position recognition system 10 includes a reference point installation mobile 12A, a reference point installation mobile 12B, a server 28, and a work mobile 38, as shown in FIG.

建設現場において、作業用移動体38(例えば、作業用ロボット)に対して何らかの作業を行わせるためには、作業用移動体38の位置を高精度に検出する必要がある。しかし、建設現場においては、柱、梁、壁、及び屋根といった周囲の障害物の影響により、良好なGPS信号を受信することができない場合がある。この場合には、作業用移動体38の位置を精度よく認識することができない。 At a construction site, it is necessary to detect the position of the working mobile body 38 with high accuracy in order to cause the working mobile body 38 (for example, a working robot) to perform some work. However, at construction sites, it may not be possible to receive good GPS signals due to the influence of surrounding obstacles such as pillars, beams, walls, and roofs. In this case, the position of the work moving body 38 cannot be accurately recognized.

そこで、本実施形態では、建設現場における床面上の基準点に対して識別マーカを予め設置する。また、基準点に対して設置された識別マーカの位置に、基準点設置用移動体12A及び基準点設置用移動体12Bを移動させる。そして、建設現場において作業を行うための作業用移動体38は基準点設置用移動体12Aの位置及び基準点設置用移動体12Bの位置を検出し、基準点設置用移動体12Aの位置及び基準点設置用移動体12Bの位置に応じて、作業用移動体38の位置を認識する。これにより、作業用移動体38の位置を精度よく認識することができる。以下、具体的に説明する。 Therefore, in the present embodiment, identification markers are installed in advance with respect to reference points on the floor surface of the construction site. In addition, the reference point installation mobile body 12A and the reference point installation mobile body 12B are moved to the position of the identification marker installed with respect to the reference point. Then, the work moving body 38 for performing work at the construction site detects the position of the reference point setting moving body 12A and the position of the reference point setting moving body 12B, and detects the position of the reference point setting moving body 12A and the reference point. The position of the work moving body 38 is recognized according to the position of the point installation moving body 12B. Thereby, the position of the work moving body 38 can be recognized with high accuracy. A specific description will be given below.

(前提条件) (prerequisite)

本実施形態では、以下の条件(1)~(5)を前提とする。図2及び図3に、本実施形態の前提条件を説明するための説明図を示す。 The present embodiment assumes the following conditions (1) to (5). 2 and 3 are explanatory diagrams for explaining the preconditions of this embodiment.

(1)図2に示されるように、本実施形態で対象とする建設現場においては、既に親墨が引かれている。
(2)親墨同士の交点(以下、基準点と称する)の座標は、建設現場の図面情報等から既知である。
(3)図3に示されるように、基準点には識別マーカが設置されている。識別マーカから得られる情報に基づいて、基準点の位置をユニークに識別することができる。
(4)サーバ28内に、各基準点を示す識別マーカと当該識別マーカに対応する位置を表す座標情報のデータベースが格納されている。
(5)建設現場においては、基準点設置用移動体12Aと基準点設置用移動体12Bと作業用移動体38とサーバ28とが通信可能な無線ネットワークが構築されている。
(1) As shown in FIG. 2, the construction site targeted in this embodiment has already been marked.
(2) The coordinates of the points of intersection (hereinafter referred to as reference points) between the inks are known from the drawing information of the construction site.
(3) As shown in FIG. 3, identification markers are installed at the reference points. The location of the reference point can be uniquely identified based on the information obtained from the identification marker.
(4) The server 28 stores a database of identification markers indicating reference points and coordinate information indicating positions corresponding to the identification markers.
(5) At the construction site, a wireless network is constructed in which the reference point installation mobile body 12A, the reference point installation mobile body 12B, the working mobile body 38, and the server 28 can communicate with each other.

上記(1)~(5)の前提条件が設定されることにより、例えば、基準点設置用移動体に搭載されたカメラ等によって識別マーカを読み取り、識別マーカから得られる情報とサーバ28内の座標のデータベースとを照合することで、基準点設置用移動体の位置を表す座標情報を認識することができる。そして、基準点設置用移動体の位置を表す座標情報に応じて、作業用移動体38の位置が認識される。 By setting the above prerequisites (1) to (5), for example, the identification marker is read by a camera or the like mounted on the reference point installation mobile body, and the information obtained from the identification marker and the coordinates in the server 28 are By collating with the database, it is possible to recognize the coordinate information representing the position of the reference point setting moving body. Then, the position of the work moving body 38 is recognized according to the coordinate information representing the position of the reference point setting moving body.

識別マーカとしては、例えば、図3に示されるようなQRコード(登録商標)を用いることができる。例えば、測量業者が親墨を引く際に、識別マーカを基準点に貼付する又は識別マーカを基準点に対してスタンプするなどして、識別マーカを基準点に設置する。このため、識別マーカの設置作業は、測量業者の現状の業務に対して作業負担を大きく増加させるものではない。 As an identification marker, for example, a QR code (registered trademark) as shown in FIG. 3 can be used. For example, when the surveyor draws the ink, the identification marker is attached to the reference point, or the identification marker is stamped on the reference point, so that the identification marker is placed at the reference point. For this reason, the installation work of the identification marker does not greatly increase the work load of the current work of the surveying company.

<第1の実施形態に係る位置認識システム> <Position Recognition System According to First Embodiment>

図4は、第1の実施形態に係る位置認識システム10の機能的な構成の一例を示す図である。図4に示されるように、位置認識システム10は、基準点設置用移動体12Aと、基準点設置用移動体12Bと、サーバ28と、作業用移動体38とを備える。 FIG. 4 is a diagram showing an example of the functional configuration of the position recognition system 10 according to the first embodiment. As shown in FIG. 4, the position recognition system 10 includes a reference point installation mobile 12A, a reference point installation mobile 12B, a server 28, and a work mobile .

(基準点設置用移動体) (Moving body for setting reference point)

図5に、基準点設置用移動体の具体的な構成例を示す。基準点設置用移動体12Aは、コンピュータ14Aと、走行機構20Aと、照明部22Aと、カメラ24Aと、全方向計測プリズム26Aと、を備える。また、同様に、基準点設置用移動体12Bは、コンピュータ14Bと、走行機構20Bと、照明部22Bと、カメラ24Bと、全方向計測プリズム26Bとを備える。なお、基準点設置用移動体12A及び基準点設置用移動体12Bを総称する場合又は基準点設置用移動体12A及び基準点設置用移動体12Bの何れか一方を称する場合には、アルファベット部分を省略して称呼する。また、同様に、基準点設置用移動体12Aの各構成要素及び基準点設置用移動体12Bの各構成要素についても、総称する場合又は何れか一方の各構成要素を称する場合には、アルファベット部分を省略して称呼する(例えば、全方向計測プリズム26)。 FIG. 5 shows a specific configuration example of the reference point setting moving body. The reference point installation moving body 12A includes a computer 14A, a traveling mechanism 20A, an illumination section 22A, a camera 24A, and an omnidirectional measurement prism 26A. Similarly, the reference point installation moving body 12B includes a computer 14B, a travel mechanism 20B, an illumination section 22B, a camera 24B, and an omnidirectional measurement prism 26B. When referring to the reference point installation mobile body 12A and the reference point installation mobile body 12B collectively, or when referring to either the reference point installation mobile body 12A or the reference point installation mobile body 12B, the alphabetical part is Omit and name. Similarly, when referring to each component of the reference point installation mobile body 12A and each component of the reference point installation mobile body 12B collectively, or when referring to either one of the components, the alphabet part is is abbreviated (for example, the omnidirectional measurement prism 26).

コンピュータ14は、CPU(Central Processing Unit)、各処理ルーチンを実現するためのプログラム等を記憶したROM(Read Only Memory)、データを一時的に記憶するRAM(Random Access Memory)、記憶手段としてのメモリ、及びネットワークインタフェース等を含んで構成されている。コンピュータ14は、機能的には、基準用通信部16と、基準用制御部18とを備える。 The computer 14 includes a CPU (Central Processing Unit), a ROM (Read Only Memory) that stores programs and the like for realizing each processing routine, a RAM (Random Access Memory) that temporarily stores data, and a memory as storage means. , and a network interface. The computer 14 functionally includes a reference communication section 16 and a reference control section 18 .

基準用通信部16は、作業用移動体38及びサーバ28との間で情報の送受信を行う。 The reference communication unit 16 transmits and receives information to and from the mobile body for work 38 and the server 28 .

基準用制御部18は、走行機構20、照明部22、カメラ24、及び全方向計測プリズム26を制御する。また、基準用制御部18は、カメラ24によって撮像された動画像の各フレームの画像に対して画像処理を行い、画像処理結果に応じて、走行機構20を制御する。基準用制御部18は、基準点設置用移動体制御部の一例である。 The reference control unit 18 controls the travel mechanism 20 , illumination unit 22 , camera 24 and omnidirectional measurement prism 26 . The reference control unit 18 also performs image processing on images of each frame of the moving image captured by the camera 24, and controls the traveling mechanism 20 according to the image processing results. The reference control unit 18 is an example of a reference point setting moving body control unit.

走行機構20は、例えば、複数の車輪を有し、車輪を別々のアクチュエータ(又はモータ)(図示省略)によって駆動する方式である独立多輪駆動機構によって実現することができる。また、走行機構20は多足歩行駆動によって実現することも可能であり、基準点設置用移動体12を移動させることができるような構成であれば、どのような構成であっても良い。本実施形態の走行機構20は、図5に示されるように、基準点設置用移動体12の左右の車輪を別々のアクチュエータ(図示省略)によって駆動させる独立2輪駆動機構である場合を例に説明する。なお、移動中の基準点設置用移動体の座標位置は、車輪回転数(エンコーダ情報)に基づくオドメトリや、基準点設置用移動体12に搭載したIMU情報を利用して算出することができる。 The traveling mechanism 20 can be implemented by, for example, an independent multi-wheel drive mechanism that has a plurality of wheels and drives the wheels by separate actuators (or motors) (not shown). Further, the traveling mechanism 20 can also be realized by multi-legged walking driving, and may have any configuration as long as it can move the reference point setting moving body 12 . As shown in FIG. 5, the traveling mechanism 20 of the present embodiment is an independent two-wheel drive mechanism in which the left and right wheels of the reference point setting moving body 12 are driven by separate actuators (not shown). explain. The coordinate position of the moving reference point installation mobile body can be calculated using odometry based on wheel rotation speed (encoder information) or IMU information mounted on the reference point installation mobile body 12 .

また、基準用制御部18は、カメラ24によって撮像された画像に基づいて、識別マーカの位置で停止するように走行機構20を制御する。基準用制御部18は、基準点設置用移動体12の走行中にカメラ24によって撮像された床面の画像を逐次取得する。基準用制御部18は、床面の画像内に識別マーカが検出され、かつ識別マーカの中心が床面の画像の中心と一致した場合に、基準点設置用移動体12の走行を停止するように制御する。そして、基準用制御部18は、床面の画像に映る識別マーカを読み取り、識別マーカに関する情報を取得する。 Based on the image captured by the camera 24, the reference control unit 18 controls the traveling mechanism 20 to stop at the position of the identification marker. The reference control unit 18 sequentially acquires images of the floor captured by the camera 24 while the reference point installation moving body 12 is traveling. When the identification marker is detected in the image of the floor surface and the center of the identification marker coincides with the center of the image of the floor surface, the reference control unit 18 causes the reference point installation moving body 12 to stop traveling. to control. Then, the reference control unit 18 reads the identification marker appearing in the image of the floor surface and acquires information about the identification marker.

なお、基準用制御部18は、床面の画像の中心と識別マーカの中心とが一致しない場合であっても、図6に示されるように、床面の画像の中心と識別マーカの中心との間のズレ量Δx及びΔyを画像から取得することができる。このため、基準用制御部18は、識別マーカのズレ量Δx及びΔyを考慮することにより、基準点設置用移動体12の位置を表す座標情報を補正することができる。 Note that even when the center of the floor surface image and the center of the identification marker do not match, the reference control unit 18 aligns the center of the floor surface image with the center of the identification marker as shown in FIG. can be obtained from the image. Therefore, the reference control unit 18 can correct the coordinate information representing the position of the reference point installation moving body 12 by taking into consideration the displacement amounts Δx and Δy of the identification markers.

識別マーカのズレ量Δx及びΔyを考慮する場合には、上記図6に示されるように、カメラ24によって撮像される床面の画像の中心が、基準点設置用移動体12の垂直方向の中心軸と床面との交点と一致するように予めキャリブレーションを行う必要がある。また、床面を撮影した際の画像の1ピクセルに相当する長さが一定値となるように事前にキャリブレーションしておく必要がある。キャリブレーションは、例えば、チェッカーパターンを用いた方法等により行うことができる。 When considering the displacement amounts Δx and Δy of the identification markers, as shown in FIG. It is necessary to calibrate in advance so that it coincides with the intersection of the axis and the floor surface. Further, it is necessary to perform calibration in advance so that the length corresponding to one pixel of the image of the floor surface is a constant value. Calibration can be performed, for example, by a method using a checker pattern.

また、基準用制御部18は、基準用通信部16及び無線ネットワーク11を介して、サーバ28の座標データベース30から座標テーブルを受信する。そして、基準用制御部18は、床面の識別マーカに関する情報と座標テーブルに格納された識別マーカに関する情報とを照合することにより、基準点設置用移動体12の位置に対応する座標情報を認識する。 The reference control unit 18 also receives the coordinate table from the coordinate database 30 of the server 28 via the reference communication unit 16 and the wireless network 11 . Then, the reference control unit 18 collates the information about the identification marker on the floor with the information about the identification marker stored in the coordinate table, thereby recognizing the coordinate information corresponding to the position of the reference point installation moving body 12. do.

そして、基準用制御部18は、基準点設置用移動体12の位置に対応する座標情報を、サーバ28へ送信する。基準点設置用移動体12の位置に対応する座標情報は、後述するサーバ28の位置記憶部34に格納される。 Then, the reference control unit 18 transmits coordinate information corresponding to the position of the reference point installation moving body 12 to the server 28 . Coordinate information corresponding to the position of the reference point setting mobile body 12 is stored in the position storage unit 34 of the server 28, which will be described later.

全方向計測プリズム26は、作業用移動体38に搭載されたトータルステーション40の計測ターゲットとなるプリズムである。そのため、全方向計測プリズム26は、後述する作業用移動体38に搭載されたトータルステーション40の計測処理によって検出される。全方向計測プリズム26は、距離測定用機器の一例である。 The omnidirectional measurement prism 26 is a prism that serves as a measurement target of the total station 40 mounted on the work moving body 38 . Therefore, the omnidirectional measurement prism 26 is detected by the measurement processing of the total station 40 mounted on the work moving body 38, which will be described later. The omnidirectional measurement prism 26 is an example of a distance measuring device.

(サーバ) (server)

サーバ28は、座標データベース30と、サーバ制御部32と、サーバ通信部36とを備える。 The server 28 includes a coordinate database 30 , a server control section 32 and a server communication section 36 .

座標データベース30には、識別マーカに関する情報と、建設現場における位置に対応する座標情報とが対応付けられて格納されている。図7(A)に、座標データベース30に格納される座標テーブルの一例を示す。例えば、図7(A)に示されるように、座標テーブルには、識別マーカに関する情報と座標情報とが一意に対応付けられている。このため、基準点設置用移動体12によって識別マーカが検出され、検出された識別マーカから識別マーカに関する情報が得られれば、基準点設置用移動体12の位置を一意に特定することができる。 The coordinate database 30 stores information related to the identification marker and coordinate information corresponding to the position on the construction site in association with each other. FIG. 7A shows an example of a coordinate table stored in the coordinate database 30. As shown in FIG. For example, as shown in FIG. 7A, the coordinate table uniquely associates information about identification markers with coordinate information. Therefore, if the identification marker is detected by the reference point installation mobile body 12 and information about the identification marker is obtained from the detected identification marker, the position of the reference point installation mobile body 12 can be uniquely identified.

サーバ制御部32は、基準点設置用移動体12A及び基準点設置用移動体12Bに対する制御信号と、作業用移動体38に対する制御信号とを出力する。また、サーバ制御部32は、基準点設置用移動体12A及び基準点設置用移動体12Bから送信された座標情報と、作業用移動体38から送信された座標情報とを取得し、位置記憶部34へ格納する。 The server control unit 32 outputs a control signal for the reference point installation mobile body 12A and the reference point installation mobile body 12B and a control signal for the work mobile body 38 . Further, the server control unit 32 acquires the coordinate information transmitted from the reference point installation mobile body 12A and the reference point installation mobile body 12B and the coordinate information transmitted from the work mobile body 38, and stores the position storage unit 34.

位置記憶部34には、基準点設置用移動体12Aの座標情報、基準点設置用移動体12Bの座標情報、及び作業用移動体38の座標情報が格納される。図7(B)に、位置記憶部34に格納される座標情報の一例を示す。例えば、図7(B)に示されるように、各移動体の座標情報が格納される。 The position storage unit 34 stores coordinate information of the reference point installation mobile body 12A, coordinate information of the reference point installation mobile body 12B, and coordinate information of the work mobile body 38 . FIG. 7B shows an example of coordinate information stored in the position storage unit 34. As shown in FIG. For example, as shown in FIG. 7B, coordinate information of each moving body is stored.

サーバ通信部36は、基準点設置用移動体12及び作業用移動体38との間で情報の送受信を行う。 The server communication unit 36 transmits and receives information to and from the reference point installation mobile unit 12 and the work mobile unit 38 .

(作業用移動体) (Moving body for work)

作業用移動体38は、トータルステーション40と、コンピュータ42と、走行機構20とを備える。作業用移動体38は、建設現場において特定の作業を行う移動体である。建設現場において特定の作業はどのような作業であってもよく、例えば、墨出し作業が挙げられる。 The working vehicle 38 includes a total station 40 , a computer 42 and a traveling mechanism 20 . The working mobile body 38 is a mobile body that performs specific work at a construction site. The specific work at the construction site may be any work, for example, marking work.

トータルステーション40は、所定の計測処理によって基準点設置用移動体12に搭載された全方向計測プリズム26の位置を検出する。また、トータルステーション40は、基準点設置用移動体12の全方向計測プリズム26の位置の検出結果に基づいて、基準点設置用移動体12の位置に対する作業用移動体38の位置を計測する。そして、トータルステーション40は、基準点設置用移動体12に搭載された全方向計測プリズム26の位置に応じて、基準点設置用移動体12との間の距離と方位とを計測する。トータルステーション40は、位置計測部の一例である。 The total station 40 detects the position of the omnidirectional measurement prism 26 mounted on the reference point setting moving body 12 by a predetermined measurement process. Further, the total station 40 measures the position of the work moving body 38 with respect to the position of the reference point setting moving body 12 based on the detection result of the position of the omnidirectional measurement prism 26 of the reference point setting moving body 12 . Then, the total station 40 measures the distance and azimuth to the reference point installation mobile 12 according to the position of the omnidirectional measurement prism 26 mounted on the reference point installation mobile 12 . The total station 40 is an example of a position measuring section.

コンピュータ42は、CPU、各処理ルーチンを実現するためのプログラム等を記憶したROM、データを一時的に記憶するRAM、記憶手段としてのメモリ、及びネットワークインタフェース等を含んで構成されている。コンピュータ42は、機能的には、位置認識部44と、基準用制御部18と、作業用通信部48とを備える。コンピュータ42は、位置認識装置の一例である。 The computer 42 includes a CPU, a ROM that stores programs and the like for implementing each processing routine, a RAM that temporarily stores data, a memory as storage means, a network interface, and the like. The computer 42 functionally includes a position recognition section 44 , a reference control section 18 and a work communication section 48 . Computer 42 is an example of a position recognition device.

位置認識部44は、識別マーカの位置に移動した基準点設置用移動体12の位置に応じて、作業用移動体38の位置を認識する。具体的には、位置認識部44は、トータルステーション40によって得られた、基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bの検出結果に応じて、基準点設置用移動体12A及び基準点設置用移動体12Bの位置を検出する。 The position recognition unit 44 recognizes the position of the work moving body 38 according to the position of the reference point setting moving body 12 that has moved to the position of the identification marker. Specifically, the position recognition unit 44 detects the omnidirectional measurement prism 26A of the reference point installation moving body 12A and the omnidirectional measurement prism 26B of the reference point installation moving body 12B obtained by the total station 40. to detect the positions of the reference point setting moving body 12A and the reference point setting moving body 12B.

まず、位置認識部44は、全方向計測プリズム26Aの検出結果に応じて、トータルステーション40と全方向計測プリズム26Aとの間の距離、トータルステーション40と全方向計測プリズム26Aとの間の方位角、及びトータルステーション40と全方向計測プリズム26Aとの間の仰角を取得する。また、位置認識部44は、全方向計測プリズム26Bの検出結果に応じて、トータルステーション40と全方向計測プリズム26Bとの間の距離、トータルステーション40と全方向計測プリズム26Bとの間の方位角、及びトータルステーション40と全方向計測プリズム26Bとの間の仰角を取得する。 First, the position recognition unit 44 determines the distance between the total station 40 and the omnidirectional measurement prism 26A, the azimuth angle between the total station 40 and the omnidirectional measurement prism 26A, and the distance between the total station 40 and the omnidirectional measurement prism 26A. The elevation angle between the total station 40 and the omnidirectional measurement prism 26A is obtained. In addition, the position recognizing unit 44 determines the distance between the total station 40 and the omnidirectional measurement prism 26B, the azimuth angle between the total station 40 and the omnidirectional measurement prism 26B, and the distance between the total station 40 and the omnidirectional measurement prism 26B, and The elevation angle between the total station 40 and the omnidirectional measurement prism 26B is obtained.

次に、位置認識部44は、サーバ28の位置記憶部34に格納された、基準点設置用移動体12A及び基準点設置用移動体12Bの位置に対応する座標情報を、作業用通信部48を介して取得する。これにより、基準点設置用移動体12Aの位置と基準点設置用移動体12Bの位置とが認識される。 Next, the position recognition unit 44 transmits the coordinate information corresponding to the positions of the reference point installation moving bodies 12A and 12B stored in the position storage unit 34 of the server 28 to the work communication unit 48. to get through. As a result, the position of the reference point installation moving body 12A and the position of the reference point installation moving body 12B are recognized.

そして、位置認識部44は、基準点設置用移動体12Aの位置に対応する座標情報と、基準点設置用移動体12Bの位置に対応する座標情報と、基準点設置用移動体12A及び基準点設置用移動体12Bに対する作業用移動体38の位置とから、作業用移動体38の位置を認識する。 Then, the position recognizing unit 44 recognizes the coordinate information corresponding to the position of the reference point installation mobile body 12A, the coordinate information corresponding to the position of the reference point installation mobile body 12B, the reference point installation mobile body 12A and the reference point. The position of the work moving body 38 is recognized from the position of the work moving body 38 with respect to the installation moving body 12B.

図8に、作業用移動体38の位置に対応する座標情報の認識処理を説明するための説明図を示す。図8に示されるように、基準点設置用移動体12Aが、B通りと2通りとの交点であるB2基準点を表すa点上に静止しており、基準点設置用移動体12Bが、B通りと3通りとの交点であるB3基準点を表すb点上に静止している場合を例に説明する。 FIG. 8 shows an explanatory diagram for explaining the process of recognizing coordinate information corresponding to the position of the working mobile body 38. As shown in FIG. As shown in FIG. 8, the reference point installation moving body 12A is stationary on a point a representing the B2 reference point, which is the intersection of B and 2, and the reference point installation moving body 12B An example will be described in which the object is stationary on the point b representing the B3 reference point, which is the intersection of the B pattern and the 3 pattern.

まず、作業用移動体38のトータルステーション40は、B2基準点上の基準点設置用移動体12Aに搭載されている全方向計測プリズム26A、及びB3基準点上の基準点設置用移動体12Bに搭載されている全方向計測プリズム26Bを検出する。また、トータルステーション40は、全方向計測プリズム26Aとの間の距離r及び全方向計測プリズム26Bとの間の距離rを計測する。また、トータルステーション40は、全方向計測プリズム26Aの位置を表す点a、トータルステーション40の位置を表す点c、及び全方向計測プリズム26Bの位置を表す点bの3点が成す角∠acbの角度を計測する。 First, the total station 40 of the work moving body 38 is mounted on the omnidirectional measurement prism 26A mounted on the reference point setting moving body 12A on the B2 reference point and on the reference point setting moving body 12B on the B3 reference point. The omnidirectional measurement prism 26B that is being used is detected. The total station 40 also measures the distance ra to the omnidirectional measurement prism 26A and the distance rb to the omnidirectional measurement prism 26B. In addition, the total station 40 determines the angle ∠acb formed by three points: point a representing the position of the omnidirectional measurement prism 26A, point c representing the position of the total station 40, and point b representing the position of the omnidirectional measurement prism 26B. measure.

次に、コンピュータ42の位置認識部44は、作業用通信部48を介して、サーバ28の位置記憶部34に格納されている、基準点設置用移動体12Aの座標情報(x,y)及び基準点設置用移動体12Bの座標情報(x,y)を取得する。 Next, the position recognition unit 44 of the computer 42 receives the coordinate information (x a , y a ) and the coordinate information (x b , y b ) of the reference point installation moving body 12B.

そして、位置認識部44は、基準点設置用移動体12Aの座標情報(x,y)と、基準点設置用移動体12Bの座標情報(x,y)とに基づいて、後方交会法により作業用移動体38の位置に対応する座標情報(x,y)を算出する。 Based on the coordinate information (x a , ya ) of the reference point installation mobile body 12A and the coordinate information (x b , y b ) of the reference point installation mobile body 12B, the position recognition unit 44 detects the rearward position. Coordinate information (x c , y c ) corresponding to the position of the working body 38 is calculated by the resection method.

そして、制御部46は、位置認識部44によって得られた座標情報(x,y)を、作業用通信部48及び無線ネットワーク11を介してサーバ28へ送信する。サーバ28のサーバ制御部32は、サーバ通信部36を介して座標情報(x,y)を取得し、位置記憶部34へ格納する。 The control unit 46 then transmits the coordinate information (x c , y c ) obtained by the position recognition unit 44 to the server 28 via the work communication unit 48 and the wireless network 11 . The server control unit 32 of the server 28 acquires the coordinate information (x c , y c ) via the server communication unit 36 and stores it in the position storage unit 34 .

制御部46は、位置認識部44によって算出された作業用移動体38の座標情報(x,y)と、目標位置に対応する座標情報(x,y)とに基づいて、作業用移動体38が目標位置に対応する座標情報(x,y)へ近づくように、走行機構20を制御する。なお、作業用移動体38の移動中の位置は、トータルステーション40による基準点設置用移動体12に搭載された全方向計測プリズム26の追尾によって算出することができる。目標位置に対応する座標情報(x,y)は、例えばコンピュータ42の記憶部(図示省略)に予め格納される。なお、制御部46は、作業用通信部48を介して、目標位置に対応する座標情報(x,y)を逐次取得するようにしてもよい。 Based on the coordinate information (x c , y c ) of the working body 38 calculated by the position recognition unit 44 and the coordinate information (x t , y t ) corresponding to the target position, the control unit 46 performs the work. The traveling mechanism 20 is controlled so that the moving body 38 approaches the coordinate information (x t , y t ) corresponding to the target position. The position of the work moving body 38 during movement can be calculated by tracking the omnidirectional measurement prism 26 mounted on the reference point setting moving body 12 by the total station 40 . Coordinate information (x t , y t ) corresponding to the target position is stored in advance in a storage unit (not shown) of the computer 42, for example. Note that the control unit 46 may sequentially acquire the coordinate information (x t , y t ) corresponding to the target position via the work communication unit 48 .

ここで、例えば、図9(a)に示されるように、作業用移動体38が、A2基準点、A3基準点、B2基準点、及びB3基準点に囲まれた領域へ移動した場合、作業用移動体38の位置である点cからみた基準点設置用移動体12Bの位置の点bは柱の陰になる。このため、作業用移動体38のトータルステーション40から基準点設置用移動体12Bの全方向計測プリズム26Bを検出することができず、作業用移動体38の位置を認識することができない。 Here, for example, as shown in FIG. The point b at the position of the reference point setting moving body 12B viewed from the point c at the position of the moving body 38 is behind the pillar. Therefore, the omnidirectional measurement prism 26B of the reference point setting mobile 12B cannot be detected from the total station 40 of the mobile working body 38, and the position of the mobile working body 38 cannot be recognized.

そこで、制御部46は、作業用移動体38に搭載されたトータルステーション40による計測処理によって、基準点設置用移動体の全方向計測プリズムが検出されない場合に、基準点設置用移動体を移動させるように制御する。 Therefore, when the omnidirectional measurement prism of the reference point installation moving body is not detected by the measurement processing by the total station 40 mounted on the work moving body 38, the control unit 46 moves the reference point installation moving body. to control.

具体的には、位置認識部44は、トータルステーション40による計測処理によって、基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bの少なくとも一方が検出されない場合に、基準点設置用移動体が検出されない旨の未検出制御信号を出力する。そして、制御部46は、位置認識部44によって出力された未検出制御信号を、サーバ28へ送信する。 Specifically, the position recognition unit 44 detects at least one of the omnidirectional measurement prism 26A of the reference point installation moving body 12A and the omnidirectional measurement prism 26B of the reference point installation moving body 12B by the measurement processing by the total station 40. If not detected, it outputs a non-detection control signal indicating that the reference point installation moving body is not detected. The control unit 46 then transmits the undetected control signal output by the position recognition unit 44 to the server 28 .

サーバ28のサーバ制御部32は、サーバ通信部36を介して、作業用移動体38から送信された未検出制御信号を取得する。そして、サーバ制御部32は、位置記憶部34に記憶された作業用移動体38の座標情報(x,y)に基づいて、作業用移動体38のトータルステーション40によって全方向計測プリズム26が検出される位置であって、かつ現時刻の基準点設置用移動体12の位置に対応する座標情報(x,y)から最も近い識別マーカが設置された位置へ基準点設置用移動体12を移動させるように、移動指示に関する制御信号を出力する。 The server control unit 32 of the server 28 acquires the undetected control signal transmitted from the working vehicle 38 via the server communication unit 36 . Based on the coordinate information (x c , y c ) of the work vehicle 38 stored in the position storage unit 34 , the server control unit 32 causes the total station 40 of the work vehicle 38 to move the omnidirectional measurement prism 26 . The reference point installation moving body 12 moves to the position where the identification marker closest to the detected position and the coordinate information (x c , y c ) corresponding to the position of the reference point installation moving body 12 at the current time is installed. 12 is moved, a control signal relating to a movement instruction is output.

例えば、図9(b)に示されるように、サーバ制御部32は、作業用移動体38に搭載されたトータルステーション40から検出できる基準点であるA3基準点へ移動するように、移動指示に関する制御信号を出力する。 For example, as shown in FIG. 9B, the server control unit 32 performs control related to the movement instruction so as to move to the A3 reference point, which is a reference point that can be detected from the total station 40 mounted on the work vehicle 38. Output a signal.

そして、サーバ制御部32は、サーバ通信部36を介して、基準点設置用移動体12Bに対し移動指示に関する制御信号を送信する。 Then, the server control unit 32 transmits a control signal regarding a movement instruction to the reference point installation moving body 12B via the server communication unit 36 .

基準点設置用移動体12Bのコンピュータ14の基準用制御部18は、サーバ28から送信された移動指示に関する制御信号に基づいて、例えば図9(b)に示されるように、A3基準点に移動するように走行機構20Bを制御する。そして、基準点設置用移動体12Bは、A3基準点に設置された識別マーカを検出すると、A3基準点で停止する。 The reference control unit 18 of the computer 14 of the reference point installation moving body 12B moves to the A3 reference point, for example, as shown in FIG. The traveling mechanism 20B is controlled so as to do so. When the reference point installation moving body 12B detects the identification marker installed at the A3 reference point, it stops at the A3 reference point.

基準点設置用移動体12BがA3基準点で停止すると、作業用移動体38のトータルステーション40によって距離r及び距離rと、全方向計測プリズム26A、トータルステーション40、及び全方向計測プリズム26Bの3点が成す角の角度∠acbとが計測される。そして、作業用移動体38のコンピュータの位置認識部44は、上記式(1)及び式(2)に従って、作業用移動体38の座標(x,y)を算出する。 When the reference point installation moving body 12B stops at the A3 reference point, the total station 40 of the work moving body 38 determines the distances ra and rb , and the omnidirectional measurement prism 26A, the total station 40, and the omnidirectional measurement prism 26B. The angle ∠acb of the angle between the points is measured. Then, the position recognition unit 44 of the computer of the work mobile 38 calculates the coordinates (x c , y c ) of the work mobile 38 according to the above equations (1) and (2).

<位置認識システムの作用> <Action of Position Recognition System>

次に、位置認識システム10の作用について、図10、図11、図12、図13、図14、及び図15を参照して説明する。図10(a)に示されるように、床面上の基準点に対して、当該基準点の座標を知ることのできる識別マーカを押印又は貼付しておく。また、図10(b)に示されるように、識別マーカが設置された基準点上に、基準点設置用移動体12Aと基準点設置用移動体12Bとを配置する。そして、例えば建設現場の担当者が、位置認識システム10の基準点設置用移動体12A、基準点設置用移動体12B、作業用移動体38、及びサーバ28を起動させると、作業用移動体38のコンピュータ42は、図11に示す作業用移動体移動処理を実行する。 Next, the operation of the position recognition system 10 will be described with reference to FIGS. 10, 11, 12, 13, 14 and 15. FIG. As shown in FIG. 10(a), an identification marker is stamped or affixed to a reference point on the floor so that the coordinates of the reference point can be known. Further, as shown in FIG. 10(b), a reference point installation moving body 12A and a reference point installation moving body 12B are arranged on the reference point on which the identification marker is installed. Then, for example, when a person in charge of a construction site activates the reference point installation mobile body 12A, the reference point installation mobile body 12B, the work mobile body 38, and the server 28 of the position recognition system 10, the work mobile body 38 The computer 42 of 1 executes the work moving body movement processing shown in FIG. 11 .

(作業用移動体の作用) (Action of mobile body for work)

まず、ステップS100において、コンピュータ42の位置認識部44は、全方向計測プリズム26の検出処理を実行するようにトータルステーション40を制御する。そして、図10(c)に示されるように、トータルステーション40によって全方向計測プリズム26の検出処理が実行され、基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bまでの、距離、方位角、及び仰角が計測される。位置認識部44は、トータルステーション40によって得られた全方向計測プリズム26A及び全方向計測プリズム26Bの検出結果を取得する。 First, in step S<b>100 , the position recognition section 44 of the computer 42 controls the total station 40 so as to execute detection processing of the omnidirectional measurement prism 26 . Then, as shown in FIG. 10(c), detection processing of the omnidirectional measurement prism 26 is executed by the total station 40, and the omnidirectional measurement prism 26A of the reference point installation moving body 12A and the reference point installation moving body 12B are detected. The distance, azimuth angle, and elevation angle are measured to the omnidirectional measurement prism 26B. The position recognition unit 44 acquires the detection results of the omnidirectional measurement prism 26A and the omnidirectional measurement prism 26B obtained by the total station 40 .

ステップS102において、位置認識部44は、上記ステップS102で取得された全方向計測プリズムの検出結果に基づき、基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bが検出されたか否かを判定する。基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bが検出された場合には、ステップS104へ進む。一方、基準点設置用移動体12Aの全方向計測プリズム26A及び基準点設置用移動体12Bの全方向計測プリズム26Bの少なくとも一方が検出されなかった場合には、ステップS110へ進む。 In step S102, the position recognizing unit 44 detects the omnidirectional measurement prism 26A of the reference point installation moving body 12A and all of the reference point installation moving body 12B based on the detection result of the omnidirectional measurement prism acquired in step S102. It is determined whether or not the direction measuring prism 26B has been detected. When the omnidirectional measurement prism 26A of the reference point installation moving body 12A and the omnidirectional measurement prism 26B of the reference point installation moving body 12B are detected, the process proceeds to step S104. On the other hand, if at least one of the omnidirectional measurement prism 26A of the reference point installation moving body 12A and the omnidirectional measurement prism 26B of the reference point installation moving body 12B is not detected, the process proceeds to step S110.

ステップS104において、位置認識部44は、サーバ28の位置記憶部34に格納された、基準点設置用移動体12Aの位置に対応する座標情報(x,y)及び基準点設置用移動体12Bの位置に対応する座標情報(x,y)を、作業用通信部48を介して取得する。 In step S104, the position recognizing unit 44 stores the coordinate information (x a , ya ) corresponding to the position of the reference point installation moving body 12A stored in the position storage unit 34 of the server 28 and the reference point installation moving body Coordinate information (x b , y b ) corresponding to the position of 12B is acquired via the work communication unit 48 .

ステップS106において、位置認識部44は、上記ステップS104で取得された、基準点設置用移動体12Aの位置に対応する座標情報(x,y)及び基準点設置用移動体12Bの位置に対応する座標情報(x,y)と、全方向計測プリズム26A及び全方向計測プリズム26Bの検出結果とから、作業用移動体38の現在位置に対応する座標情報(x,y)を認識する。 In step S106, the position recognition unit 44 recognizes the coordinate information (x a , y a ) corresponding to the position of the reference point installation moving body 12A and the position of the reference point installation moving body 12B acquired in step S104. Coordinate information ( xc , yc ) corresponding to the current position of the work moving body 38 from the corresponding coordinate information ( xb , yb) and the detection results of the omnidirectional measurement prism 26A and the omnidirectional measurement prism 26B to recognize

ステップS107において、制御部46は、上記ステップS106で得られた座標情報(x,y)を、作業用通信部48及び無線ネットワーク11を介して、サーバ28へ送信する。 In step S<b>107 , the control unit 46 transmits the coordinate information (x c , y c ) obtained in step S<b>106 to the server 28 via the work communication unit 48 and the wireless network 11 .

ステップS108において、制御部46は、上記ステップS106で認識された作業用移動体38の座標情報(x,y)と、目標位置に対応する座標情報(x,y)とに基づいて、図10(d)に示されるように、作業用移動体38が目標位置Tへ近づくように走行機構20を制御する。なお、制御部46は、作業用移動体38が目標位置Tの近傍に達した場合には、停止する。具体的には、目標位置との誤差が予め設定しておいた閾値以下であれば、動作を停止する。 In step S108, the control unit 46 controls the coordinate information (x c , y c ) of the working body 38 recognized in step S106 and the coordinate information (x t , y t ) corresponding to the target position. 10(d), the travel mechanism 20 is controlled so that the work vehicle 38 approaches the target position T. As shown in FIG. It should be noted that the control unit 46 stops when the work moving body 38 reaches the vicinity of the target position T. As shown in FIG. Specifically, if the error from the target position is equal to or less than a preset threshold value, the operation is stopped.

ステップS110において、位置認識部44は、基準点設置用移動体12が検出されない旨の未検出制御信号を出力する。そして、制御部46は、位置認識部44によって出力された未検出制御信号を、サーバ28へ送信する。例えば、前時刻までは図12(a)に示されるような位置関係であり、現時刻の移動制御によって図12(b)に示されるような位置関係となった場合、位置認識部44は、基準点設置用移動体12が検出されない旨の未検出制御信号を出力する。 In step S110, the position recognition unit 44 outputs a non-detection control signal indicating that the reference point installation moving body 12 is not detected. The control unit 46 then transmits the undetected control signal output by the position recognition unit 44 to the server 28 . For example, if the positional relationship until the previous time is as shown in FIG. 12(a), and the positional relationship is changed to that shown in FIG. A non-detection control signal indicating that the reference point installation moving body 12 is not detected is output.

ステップS112において、制御部46は、上記ステップS106で得られた現在位置に対応する座標情報(x,y)と、目標位置に対応する座標情報(x,y)との間の差分が閾値以下であるか否かを判定する。現在位置に対応する座標情報(x,y)と目標位置に対応する座標情報(x,y)との間の差分が閾値以下である場合には、ステップS114へ進む。一方、現在位置に対応する座標情報(x,y)と目標位置に対応する座標情報(x,y)との間の差分が閾値より大きい場合には、ステップS100へ戻る。 In step S112, the control unit 46 calculates the difference between the coordinate information ( xc , yc ) corresponding to the current position obtained in step S106 and the coordinate information ( xt , yt ) corresponding to the target position. It is determined whether or not the difference is equal to or less than the threshold. If the difference between the coordinate information (x c , y c ) corresponding to the current position and the coordinate information (x t , y t ) corresponding to the target position is equal to or less than the threshold, the process proceeds to step S114. On the other hand, if the difference between the coordinate information (x c , y c ) corresponding to the current position and the coordinate information (x t , y t ) corresponding to the target position is greater than the threshold, the process returns to step S100.

ステップS114において、制御部46は、走行機構20を停止させるように制御する。 In step S114, the controller 46 controls the traveling mechanism 20 to stop.

(サーバの作用) (Server action)

サーバ28は、図13に示すサーバ制御処理を実行する。 The server 28 executes server control processing shown in FIG.

ステップS200において、サーバ28のサーバ制御部32は、サーバ通信部36を介して座標情報(x,y)を取得し、位置記憶部34へ格納する。 In step S<b>200 , the server control unit 32 of the server 28 acquires coordinate information (x c , y c ) via the server communication unit 36 and stores it in the position storage unit 34 .

ステップS202において、サーバ28のサーバ制御部32は、基準点設置用移動体12が検出されない旨の未検出信号を取得したか否かを判定する。未検出信号を取得した場合には、ステップS204へ進む。一方、未検出信号を取得していない場合には、ステップS200へ戻る。 In step S202, the server control unit 32 of the server 28 determines whether or not a non-detection signal indicating that the reference point installation moving body 12 has not been detected has been acquired. If an undetected signal is acquired, the process proceeds to step S204. On the other hand, if the undetected signal has not been acquired, the process returns to step S200.

ステップS204において、サーバ制御部32は、位置記憶部34に記憶された作業用移動体38の座標情報(x,y)に基づいて、作業用移動体38のトータルステーション40によって全方向計測プリズム26が検出される位置であって、かつ現時刻の基準点設置用移動体12の位置に対応する座標情報(x,y)から最も近い識別マーカが設置された位置へ基準点設置用移動体12を移動させるように、移動指示に関する制御信号を送信する。例えば、図14(a)に示されるような位置関係である場合、サーバ制御部32は、基準点設置用移動体12を、識別マーカNへ移動させるような制御信号を、基準点設置用移動体12へ送信する。 In step S204, based on the coordinate information ( xc , yc ) of the mobile working body 38 stored in the position storage part 34, the server control unit 32 causes the total station 40 of the mobile working body 38 to perform an omnidirectional measurement prism. 26 is detected, and from the coordinate information (x c , y c ) corresponding to the position of the reference point installation moving body 12 at the current time, the nearest identification marker is installed. A control signal regarding a movement instruction is transmitted so that the mobile body 12 is moved. For example, when the positional relationship is as shown in FIG. 14A, the server control unit 32 outputs a control signal for moving the reference point installation moving body 12 to the identification marker N. transmit to body 12;

(基準点設置用移動体の作用) (Action of moving body for setting reference point)

基準点設置用移動体12のコンピュータ14の基準用制御部18は、サーバ28から送信された移動指示に関する制御信号を取得すると、図15に示す基準点設置用移動体移動処理を実行する。また、カメラ24によって、基準点設置用移動体12の下方向の床面の画像が撮像される。 When the reference control unit 18 of the computer 14 of the reference point installation mobile body 12 acquires the control signal related to the movement instruction transmitted from the server 28, the reference point installation mobile body movement processing shown in FIG. 15 is executed. In addition, the camera 24 captures an image of the floor surface in the downward direction of the reference point installation moving body 12 .

ステップS300において、基準用制御部18は、サーバ28から送信された移動指示に関する制御信号を取得する。移動指示に関する制御信号には、基準点設置用移動体12の移動方向に関する情報が含まれている。 In step S<b>300 , the reference control unit 18 acquires the control signal regarding the movement instruction transmitted from the server 28 . The control signal related to the movement instruction includes information related to the movement direction of the reference point installation moving body 12 .

ステップS302において、基準用制御部18は、カメラ24によって撮像された床面の画像を取得する。 In step S<b>302 , the reference control unit 18 acquires an image of the floor captured by the camera 24 .

ステップS304において、基準用制御部18は、上記ステップS302で取得された床面の画像に識別マーカが映っており、かつ識別マーカの中心と床面の画像の中心との間の差分が閾値以下であるか否かを判定する。識別マーカの中心と床面の画像の中心との間の差分が閾値以下である場合には、ステップS308へ進む。一方、識別マーカの中心と床面の画像の中心との間の差分が閾値より大きい場合には、ステップS306へ進む。 In step S304, the reference control unit 18 determines that the identification marker is reflected in the image of the floor surface acquired in step S302, and the difference between the center of the identification marker and the center of the image of the floor surface is equal to or less than a threshold. It is determined whether or not. If the difference between the center of the identification marker and the center of the floor image is equal to or less than the threshold, the process proceeds to step S308. On the other hand, if the difference between the center of the identification marker and the center of the image of the floor surface is greater than the threshold, the process proceeds to step S306.

ステップS306において、基準用制御部18は、図14(b)に示されるように、車輪回転数(エンコーダ情報)に基づくオドメトリや、基準点設置用移動体12に搭載したIMU情報を利用して、基準点設置用移動体の座標位置と姿勢を算出し、目標とする識別マーカへ到達するように走行機構20を制御する。 In step S306, as shown in FIG. 14B, the reference control unit 18 uses odometry based on the wheel rotation speed (encoder information) and IMU information mounted on the reference point installation moving body 12. , calculates the coordinate position and attitude of the reference point installation moving body, and controls the traveling mechanism 20 so as to reach the target identification marker.

ステップS308において、基準用制御部18は、図14(c)に示されるように、基準点設置用移動体12の走行を停止するように制御する。これにより、作業用移動体38から基準点設置用移動体12の全方向計測プリズム26が検出される。 In step S308, the reference control unit 18 controls the movement of the reference point installation moving body 12 to stop, as shown in FIG. 14(c). As a result, the omnidirectional measurement prism 26 of the reference point setting moving body 12 is detected from the work moving body 38 .

ステップS310において、基準用制御部18は、基準用通信部16及び無線ネットワーク11を介して、サーバ28の座標データベース30から座標テーブルを受信する。そして、基準用制御部18は、床面の識別マーカに関する情報と座標テーブルに格納された識別マーカに関する情報とを照合することにより、基準点設置用移動体12の位置に対応する座標情報を認識する。そして、基準用制御部18は、基準点設置用移動体12の位置に対応する座標情報を、サーバ28へ送信する。基準点設置用移動体12の位置に対応する座標情報は、後述するサーバ28の位置記憶部34に格納される。 In step S<b>310 , the reference control unit 18 receives the coordinate table from the coordinate database 30 of the server 28 via the reference communication unit 16 and the wireless network 11 . Then, the reference control unit 18 collates the information about the identification marker on the floor with the information about the identification marker stored in the coordinate table, thereby recognizing the coordinate information corresponding to the position of the reference point installation moving body 12. do. Then, the reference control unit 18 transmits coordinate information corresponding to the position of the reference point installation moving body 12 to the server 28 . Coordinate information corresponding to the position of the reference point setting mobile body 12 is stored in the position storage unit 34 of the server 28, which will be described later.

以上説明したように、本実施形態では、建設現場における床面上の基準点に対して識別マーカを設置し、設置された識別マーカの位置に、基準点設置用移動体を移動させる。そして、基準点設置用移動体の位置に応じて、建設現場において作業を行うための作業用移動体の位置を認識する。これにより、建設現場における作業用移動体の位置を、精度良く認識することができる。 As described above, in the present embodiment, an identification marker is installed with respect to a reference point on the floor surface of a construction site, and the reference point installation moving body is moved to the position of the installed identification marker. Then, the position of the working mobile body for performing work at the construction site is recognized according to the position of the reference point setting mobile body. As a result, the position of the working vehicle at the construction site can be recognized with high accuracy.

また、従来においては、建設現場の柱面に対してトータルステーション計測用のマーカを貼り付け、対象物の位置の検出に利用する場合があった。しかし、この場合には、耐火被覆吹付又は仕上げ工事などによって柱面のマーカが隠れてしまい、建設工事の初期の段階で、柱面のマーカを利用することはできなくなる。一方、本実施形態によれば、トータルステーション計測用の全方向計測プリズム26を備えた基準点設置用移動体12が移動することにより、トータルステーションの計測対象が建設工事の進捗によって隠れることはない。このため、建設工事の全工期に渡って、作業用移動体の位置を認識することができる。 Conventionally, there have been cases where markers for total station measurement are affixed to column surfaces of construction sites and used to detect the positions of objects. However, in this case, the markers on the column face are hidden by fireproof coating spraying or finishing work, etc., making it impossible to use the marker on the column face at the initial stage of the construction work. On the other hand, according to the present embodiment, by moving the reference point installation moving body 12 having the omnidirectional measurement prism 26 for total station measurement, the measurement target of the total station will not be hidden by the progress of the construction work. Therefore, it is possible to recognize the position of the working vehicle throughout the construction period.

また、従来の方法においても、トータルステーション計測用のマーカを建設現場の至るところに貼り付けることにより、トータルステーション計測の見通し外領域を減らすことができるが、この場合には、測量業者による計測用マーカの位置出し作業のコストが増加してしまう。一方、本実施形態によれば、測量業者の通常業務である親墨を引く作業の流れの中で親墨の交点に識別マーカを設置するだけでよく、測量業者の業務負担を著しく増加させずに、作業用移動体の位置を認識することができる。 Also, in the conventional method, it is possible to reduce the non-line-of-sight area for total station measurement by sticking markers for total station measurement all over the construction site. The cost of the positioning work will increase. On the other hand, according to the present embodiment, it is only necessary to set the identification marker at the crossing point of the ink in the flow of drawing the ink, which is the normal work of the surveying company, without significantly increasing the work load of the surveying company. In addition, the position of the work vehicle can be recognized.

また、例えば、上記特許文献3に示されるような従来の方法を用いた場合には、作業用移動体の位置の検出に際して誤差が蓄積されてしまう。一方、本実施の形態では、全方向計測プリズム26を備える基準点設置用移動体12は必ず基準点上に移動する。このため、作業用移動体と基準点設置用移動体との移動を繰り返したとしても、誤差の蓄積は発生しない。そのため、作業用移動体の位置を精度よく認識することができる。 Further, for example, when the conventional method as disclosed in Patent Document 3 is used, errors are accumulated when detecting the position of the working mobile body. On the other hand, in this embodiment, the reference point installation moving body 12 having the omnidirectional measurement prism 26 always moves onto the reference point. Therefore, even if the movement of the working mobile body and the reference point setting mobile body is repeated, accumulation of errors does not occur. Therefore, the position of the working mobile body can be recognized with high accuracy.

<第2の実施形態に係る位置認識システム> <Position Recognition System According to Second Embodiment>

次に、第2の実施の形態に係る位置認識システムについて説明する。なお、第2の実施の形態に係る位置認識システムの構成は、第1の実施の形態と同様の構成となるため、同一符号を付して説明を省略する。 Next, a position recognition system according to a second embodiment will be described. Note that the configuration of the position recognition system according to the second embodiment is the same as that of the first embodiment, so the same reference numerals are given and the description is omitted.

第2の実施形態では、次時刻の作業用移動体38の位置に基づいて、次時刻の作業用移動体38の位置からのトータルステーション40による計測処理によって基準点設置用移動体12が検出される位置へ基準点設置用移動体12を移動させるように制御する点が、第1の実施形態と異なる。 In the second embodiment, based on the position of the work moving body 38 at the next time, the reference point setting moving body 12 is detected by the measurement processing by the total station 40 from the position of the work moving body 38 at the next time. This differs from the first embodiment in that control is performed to move the reference point setting moving body 12 to a position.

第1の実施形態では、作業用移動体38のトータルステーション40の計測処理により、基準点設置用移動体12の全方向計測プリズム26が検出されなかった場合に、基準点設置用移動体12に対して移動指示を出力する場合を例に説明した。しかし、作業用移動体38のトータルステーション40によって基準点設置用移動体12が検出されないことが検知された後に移動指示を出力したのでは時間のロスが大きい。 In the first embodiment, when the omnidirectional measurement prism 26 of the reference point installation moving body 12 is not detected by the measurement processing of the total station 40 of the work moving body 38, the reference point installation moving body 12 is A case in which a movement instruction is output by pressing is described as an example. However, if the movement instruction is output after the total station 40 of the work moving body 38 detects that the reference point setting moving body 12 is not detected, a large amount of time is lost.

そこで、第2の実施形態では、作業用移動体38のトータルステーション40の計測処理によって基準点設置用移動体12の全方向計測プリズム26が検出されないことを予測して、予め基準点設置用移動体12に対して移動指示を出力する。 Therefore, in the second embodiment, it is predicted that the omnidirectional measurement prism 26 of the reference point installation moving body 12 will not be detected by the measurement processing of the total station 40 of the work moving body 38, and the reference point installation moving body 12 to output a movement instruction.

第2の実施形態のサーバ28のサーバ制御部32は、次時刻の作業用移動体38の位置に対応する座標情報を作業用移動体38から取得し、次時刻の作業用移動体38の位置からのトータルステーション40による計測処理によって基準点設置用移動体12が検出される位置へ基準点設置用移動体12を移動させるように制御する。 The server control unit 32 of the server 28 of the second embodiment acquires the coordinate information corresponding to the position of the mobile working body 38 at the next time from the mobile working body 38, and calculates the position of the mobile working body 38 at the next time. Control is performed so that the reference point installation moving body 12 is moved to a position where the reference point installation moving body 12 is detected by the measurement processing by the total station 40 from .

例えば、上記図8のような位置関係の状況から、作業用移動体38の次時刻の目的地がA2基準点、A3基準点、B2基準点、及びB3基準点に囲まれた領域となる場合を考える。この場合、作業用移動体38は、次の目的地の座標情報を、無線ネットワーク11を介してサーバ28へ送信する。これにより、サーバ28は、作業用移動体38がA2基準点、A3基準点、B2基準点、及びB3基準点に囲まれた領域へ移動した際には柱の影響により、作業用移動体38から基準点設置用移動体12に搭載されている全方向計測プリズム26を検出できなくなることを事前に検知することができる。 For example, when the next destination of the work vehicle 38 is an area surrounded by the A2 reference point, the A3 reference point, the B2 reference point, and the B3 reference point from the positional relationship shown in FIG. think of. In this case, the working vehicle 38 transmits the coordinate information of the next destination to the server 28 via the wireless network 11 . As a result, when the mobile work 38 moves to the area surrounded by the A2 reference point, the A3 reference point, the B2 reference point, and the B3 reference point, the server 28 causes the work mobile 38 to move due to the influence of the pillars. Therefore, it is possible to detect in advance that the omnidirectional measurement prism 26 mounted on the reference point setting moving body 12 cannot be detected.

そのため、サーバ28は作業用移動体38が現在地から次の目的地への移動を開始するとともに、基準点設置用移動体12をA3基準点に移動するように指示を出す。 Therefore, the server 28 starts moving the working mobile body 38 from the current location to the next destination, and issues an instruction to move the reference point setting mobile body 12 to the A3 reference point.

以上説明したように、第2の実施形態では、次時刻の作業用移動体の位置に基づいて、次時刻の作業用移動体の位置からトータルステーションによる計測処理によって基準点設置用移動体が検出される位置へ基準点設置用移動体を移動させるように制御する。これにより、作業用移動体から基準点設置用移動体が検出されない場合に、作業用移動体の位置を短時間で認識することができる。具体的には、全方向計測プリズムを検出することができない時間が低減され、時間のロスを低減することができる。 As described above, in the second embodiment, the reference point setting mobile body is detected by the measurement processing by the total station from the position of the mobile work body at the next time based on the position of the mobile work body at the next time. control to move the reference point installation moving body to the position where Accordingly, when the reference point setting mobile body is not detected from the work mobile body, the position of the work mobile body can be recognized in a short time. Specifically, the time during which the omnidirectional measurement prism cannot be detected is reduced, and time loss can be reduced.

なお、本発明は、上述した実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲内で様々な変形や応用が可能である。 The present invention is not limited to the above-described embodiments, and various modifications and applications are possible without departing from the gist of the present invention.

例えば、上記各実施形態では、作業用移動体38のコンピュータ42が図11に示す処理を実行し、サーバ28が図13に示す処理を実行し、基準点設置用移動体12のコンピュータ14が図15に示す処理を実行する場合を例に説明したが、これに限定されるものではない。例えば、作業用移動体38のコンピュータ42が図13に示す処理を実行するようにしてもよい。 For example, in each of the above embodiments, the computer 42 of the work mobile 38 executes the processing shown in FIG. 11, the server 28 executes the processing shown in FIG. 15 has been described as an example, but the present invention is not limited to this. For example, the computer 42 of the work vehicle 38 may execute the processing shown in FIG.

また、上記各実施形態では、サーバ28を介して情報のやり取りが行われる場合を例に説明したが、これに限定されるものではなく、作業用移動体38のコンピュータ42と基準点設置用移動体12のコンピュータ14とが直接情報のやり取りを行っても良い。 Further, in each of the above-described embodiments, the case where information is exchanged via the server 28 has been described as an example, but the present invention is not limited to this. The computer 14 on the body 12 may communicate directly with the computer 14 .

また、位置認識システムの各コンピュータは、外部サーバとの間で情報の通信を行うことにより、各種情報を取得するようにしてもよい。例えば、外部サーバには作業用移動体38の目標位置情報が格納されており、作業用移動体38の目標位置情報を外部サーバから逐次取得してもよい。 Further, each computer of the position recognition system may acquire various information by communicating information with an external server. For example, the target position information of the work mobile 38 is stored in the external server, and the target position information of the work mobile 38 may be sequentially acquired from the external server.

また、基準点設置用移動体12の移動中の位置は、車輪回転数(エンコーダ情報)に基づくオドメトリ、又は作業用移動体に搭載したIMU情報等によって、算出する場合を例に説明したが、基準点設置用移動体12に搭載したカメラ24によって撮像された画像をもとに親墨上を認識し、親墨上をトレースするような移動制御を行ってもよい。 In addition, the position of the reference point installation mobile body 12 during movement is calculated based on odometry based on the number of wheel rotations (encoder information) or IMU information mounted on the work mobile body. Based on the image picked up by the camera 24 mounted on the reference point setting moving body 12, the ink may be recognized, and movement control may be performed such that the ink is traced.

また、作業用移動体38の移動中の位置は、トータルステーション40による基準点設置用移動体12に搭載された全方向計測プリズム26の追尾によって算出する場合を例に説明したが、これに限定されるものではない。例えば、車輪回転数(エンコーダ情報)に基づくオドメトリ、又は作業用移動体に搭載したIMU情報等によって、作業用移動体38の移動中の位置を算出するようにしてもよい。 Further, although the position of the work moving body 38 during movement is calculated by tracking the omnidirectional measuring prism 26 mounted on the reference point setting moving body 12 by the total station 40 as an example, the present invention is not limited to this. not something. For example, the position of the work vehicle 38 during movement may be calculated based on odometry based on wheel rotation speed (encoder information), IMU information mounted on the work vehicle, or the like.

また、本実施形態では、作業用移動体に搭載された位置計測部がトータルステーション40であり、基準点設置用移動体に搭載された距離測定用機器が全方向計測プリズム26である場合を例に説明したが、これに限定されるものではない。作業用移動体から基準点設置用移動体の位置を計測可能であれば、位置計測部及び距離測定用機器はどのような構成であってもよい。例えば、基準点設置用移動体の位置が計測可能な三次元レーザ測量器を位置計測部として作業用移動体に搭載し、所定の三次元レーザ受光手段を距離測定用機器として基準点設置用移動体に搭載し、作業用移動体から基準点設置用移動体の位置を計測するようにしてもよい。この場合には、全方向計測プリズムを用いることなく、作業用移動体から基準点設置用移動体の位置を計測することができる。 Further, in this embodiment, the total station 40 is the position measuring unit mounted on the work moving body, and the omnidirectional measuring prism 26 is the distance measuring device mounted on the reference point setting moving body. Illustrated, but not limited to. As long as the position of the reference point setting mobile body can be measured from the working mobile body, the position measuring unit and the distance measuring device may have any configuration. For example, a three-dimensional laser surveying instrument capable of measuring the position of the reference point installation mobile body is mounted as a position measurement unit on the working mobile body, and a predetermined three-dimensional laser light receiving means is used as a distance measurement device for reference point installation movement. It may be mounted on a body to measure the position of the reference point setting mobile body from the working mobile body. In this case, the position of the reference point setting moving body can be measured from the work moving body without using an omnidirectional measurement prism.

また、上記ではプログラムが記憶部(図示省略)に予め記憶(インストール)されている態様を説明したが、プログラムは、CD-ROM、DVD-ROM及びマイクロSDカード等の記録媒体の何れかに記録されている形態で提供することも可能である。 In the above description, the program is pre-stored (installed) in a storage unit (not shown), but the program may be recorded on any recording medium such as a CD-ROM, DVD-ROM, micro SD card, or the like. It is also possible to provide it in the form provided.

10 位置認識システム
11 無線ネットワーク
12,12A,12B 基準点設置用移動体
14,14A,14B コンピュータ
16 基準用通信部
18 基準用制御部
20,20A,20B 走行機構
22,22A,22B 照明部
24,24A,24B カメラ
26,26A,26B 全方向計測プリズム
28 サーバ
30 座標データベース
32 サーバ制御部
34 位置記憶部
36 サーバ通信部
38 作業用移動体
40 トータルステーション
42 コンピュータ
44 位置認識部
46 制御部
48 作業用通信部
10 Position Recognition System 11 Wireless Networks 12, 12A, 12B Reference Point Setting Mobile Objects 14, 14A, 14B Computer 16 Reference Communication Unit 18 Reference Control Units 20, 20A, 20B Traveling Mechanisms 22, 22A, 22B Lighting Unit 24, 24A, 24B Cameras 26, 26A, 26B Omnidirectional measurement prism 28 Server 30 Coordinate database 32 Server control unit 34 Position storage unit 36 Server communication unit 38 Mobile body for work 40 Total station 42 Computer 44 Position recognition unit 46 Control unit 48 Communication for work Department

Claims (4)

コンピュータにより実現される位置認識部と、建設現場の床面を撮像するカメラと距離測定用機器とコンピュータとを備える基準点設置用移動体と、前記距離測定用機器との間の位置関係を計測する位置計測部を備える作業用移動体と、コンピュータにより実現される制御部と、を含む位置認識システムが実行する位置認識方法であって、
前記基準点設置用移動体の前記コンピュータが、前記基準点設置用移動体の前記カメラによって撮像された床面の画像と、建設現場における床面上の基準点に対して予め設置された識別マーカに関する情報と座標情報とが対応付けられた座標テーブルとに基づいて、前記床面の画像に写る識別マーカに対応する座標情報を取得し、前記基準点設置用移動体の識別情報と前記座標情報とを対応付けて位置記憶部へ格納し、
前記作業用移動体の前記位置計測部が、前記基準点設置用移動体の前記距離測定用機器を検出した場合に、前記作業用移動体と前記基準点設置用移動体との間の位置関係を計測し、
前記位置認識部が、前記位置記憶部に格納された前記基準点設置用移動体の座標情報と、前記作業用移動体と前記基準点設置用移動体との間の位置関係とに基づいて、前記作業用移動体の位置を認識し、
前記制御部が、前記作業用移動体の前記位置計測部による計測処理によって前記基準点設置用移動体の前記距離測定用機器が検出されない場合に、前記作業用移動体の前記位置計測部によって前記基準点設置用移動体が検出される位置であって、現時刻の前記基準点設置用移動体の位置から最も近い前記識別マーカが設置された位置へ前記基準点設置用移動体を移動させるように制御する、
位置認識方法。
Measuring the positional relationship between a reference point setting mobile body comprising a position recognition unit realized by a computer, a camera for imaging the floor surface of a construction site, a distance measuring device, and a computer, and the distance measuring device. A position recognition method executed by a position recognition system including a working mobile body provided with a position measurement unit that performs a position measurement, and a control unit realized by a computer ,
The computer of the reference point installation mobile body receives an image of the floor surface captured by the camera of the reference point installation mobile body, and an identification marker preliminarily installed with respect to the reference point on the floor surface at the construction site. Coordinate information corresponding to the identification marker appearing in the image of the floor surface is acquired based on a coordinate table in which the information about the reference point and the coordinate information are associated with each other, and the identification information and the coordinate information of the reference point installation moving body are acquired. are associated with and stored in the position storage unit,
a positional relationship between the work mobile body and the reference point installation mobile body when the position measuring unit of the work mobile body detects the distance measuring device of the reference point installation mobile body to measure
The position recognition unit, based on the coordinate information of the reference point installation mobile body stored in the position storage unit and the positional relationship between the work mobile body and the reference point installation mobile body, recognizing the position of the working mobile body ;
When the distance measuring device of the reference point setting mobile body is not detected by the measurement processing by the position measuring section of the working mobile body, the control section causes the position measuring section of the working mobile body to The reference point installation moving body is moved to a position where the reference point installation moving body is detected and where the identification marker closest to the position of the reference point installation moving body at the current time is installed. control to
Location awareness method.
コンピュータにより実現される位置認識部と、建設現場の床面を撮像するカメラと距離測定用機器とコンピュータとを備える基準点設置用移動体と、前記距離測定用機器との間の位置関係を計測する位置計測部を備える作業用移動体と、コンピュータにより実現される制御部と、を含む位置認識システムが実行する位置認識方法であって、
前記基準点設置用移動体の前記コンピュータが、前記基準点設置用移動体の前記カメラによって撮像された床面の画像と、建設現場における床面上の基準点に対して予め設置された識別マーカに関する情報と座標情報とが対応付けられた座標テーブルとに基づいて、前記床面の画像に写る識別マーカに対応する座標情報を取得し、前記基準点設置用移動体の識別情報と前記座標情報とを対応付けて位置記憶部へ格納し、
前記作業用移動体の前記位置計測部が、前記基準点設置用移動体の前記距離測定用機器を検出した場合に、前記作業用移動体と前記基準点設置用移動体との間の位置関係を計測し、
前記位置認識部が、前記位置記憶部に格納された前記基準点設置用移動体の座標情報と、前記作業用移動体と前記基準点設置用移動体との間の位置関係とに基づいて、前記作業用移動体の位置を認識し、
前記制御部が、前記作業用移動体の前記位置計測部による計測処理によって前記基準点設置用移動体の前記距離測定用機器が検出されない場合に、前記基準点設置用移動体を移動させるように制御し、
前記制御部が、次時刻に予定される前記作業用移動体の位置に基づいて、次時刻の前記作業用移動体の位置から前記位置計測部による計測処理によって前記基準点設置用移動体が検出される位置へ前記基準点設置用移動体を移動させるように制御する、
位置認識方法。
Measuring the positional relationship between a reference point setting mobile body comprising a position recognition unit realized by a computer, a camera for imaging the floor surface of a construction site, a distance measuring device, and a computer, and the distance measuring device. A position recognition method executed by a position recognition system including a working mobile body provided with a position measurement unit that performs a position measurement, and a control unit realized by a computer ,
The computer of the reference point installation mobile body receives an image of the floor surface captured by the camera of the reference point installation mobile body, and an identification marker preliminarily installed with respect to the reference point on the floor surface at the construction site. Coordinate information corresponding to the identification marker appearing in the image of the floor surface is acquired based on a coordinate table in which the information about the reference point and the coordinate information are associated with each other, and the identification information and the coordinate information of the reference point installation moving body are acquired. are associated with and stored in the position storage unit,
a positional relationship between the work mobile body and the reference point installation mobile body when the position measuring unit of the work mobile body detects the distance measuring device of the reference point installation mobile body to measure
The position recognition unit, based on the coordinate information of the reference point installation mobile body stored in the position storage unit and the positional relationship between the work mobile body and the reference point installation mobile body, recognizing the position of the working mobile body ;
The control unit moves the reference point installation moving body when the distance measuring device of the reference point installation moving body is not detected by the measurement processing by the position measuring unit of the work moving body. control and
The control unit detects the reference point setting mobile object from the position of the mobile object for work at the next time by the measurement processing by the position measuring unit based on the position of the mobile object for work scheduled at the next time. control to move the reference point installation moving body to the position where
Location awareness method.
コンピュータにより実現される位置認識部と、建設現場の床面を撮像するカメラと距離測定用機器とコンピュータとを備える基準点設置用移動体と、前記距離測定用機器との間の位置関係を計測する位置計測部を備える作業用移動体と、コンピュータにより実現される制御部と、を含む位置認識システムであって、
前記基準点設置用移動体の前記コンピュータが、前記基準点設置用移動体の前記カメラによって撮像された床面の画像と、建設現場における床面上の基準点に対して予め設置された識別マーカに関する情報と座標情報とが対応付けられた座標テーブルとに基づいて、前記床面の画像に写る識別マーカに対応する座標情報を取得し、前記基準点設置用移動体の識別情報と前記座標情報とを対応付けて位置記憶部へ格納し、
前記作業用移動体の前記位置計測部が、前記基準点設置用移動体の前記距離測定用機器を検出した場合に、前記作業用移動体と前記基準点設置用移動体との間の位置関係を計測し、
前記位置認識部が、前記位置記憶部に格納された前記基準点設置用移動体の座標情報と、前記作業用移動体と前記基準点設置用移動体との間の位置関係とに基づいて、前記作業用移動体の位置を認識し、
前記制御部が、前記作業用移動体の前記位置計測部による計測処理によって前記基準点設置用移動体の前記距離測定用機器が検出されない場合に、前記作業用移動体の前記位置計測部によって前記基準点設置用移動体が検出される位置であって、現時刻の前記基準点設置用移動体の位置から最も近い前記識別マーカが設置された位置へ前記基準点設置用移動体を移動させるように制御する、
位置認識システム。
Measuring the positional relationship between a reference point setting mobile body comprising a position recognition unit realized by a computer, a camera for imaging the floor surface of a construction site, a distance measuring device, and a computer, and the distance measuring device. A position recognition system including a working mobile body having a position measuring unit that
The computer of the reference point installation mobile body receives an image of the floor surface captured by the camera of the reference point installation mobile body, and an identification marker preliminarily installed with respect to the reference point on the floor surface at the construction site. Coordinate information corresponding to the identification marker appearing in the image of the floor surface is acquired based on a coordinate table in which the information about the reference point and the coordinate information are associated with each other, and the identification information and the coordinate information of the reference point installation moving body are acquired. are associated with and stored in the position storage unit,
a positional relationship between the work mobile body and the reference point installation mobile body when the position measuring unit of the work mobile body detects the distance measuring device of the reference point installation mobile body to measure
The position recognition unit, based on the coordinate information of the reference point installation mobile body stored in the position storage unit and the positional relationship between the work mobile body and the reference point installation mobile body, recognizing the position of the working mobile body;
When the distance measuring device of the reference point setting mobile body is not detected by the measurement processing by the position measuring section of the working mobile body, the control section causes the position measuring section of the working mobile body to The reference point installation moving body is moved to a position where the reference point installation moving body is detected and where the identification marker closest to the position of the reference point installation moving body at the current time is installed. control to
location-aware system.
コンピュータにより実現される位置認識部と、建設現場の床面を撮像するカメラと距離測定用機器とコンピュータとを備える基準点設置用移動体と、前記距離測定用機器との間の位置関係を計測する位置計測部を備える作業用移動体と、コンピュータにより実現される制御部と、を含む位置認識システムであって、
前記基準点設置用移動体の前記コンピュータが、前記基準点設置用移動体の前記カメラによって撮像された床面の画像と、建設現場における床面上の基準点に対して予め設置された識別マーカに関する情報と座標情報とが対応付けられた座標テーブルとに基づいて、前記床面の画像に写る識別マーカに対応する座標情報を取得し、前記基準点設置用移動体の識別情報と前記座標情報とを対応付けて位置記憶部へ格納し、
前記作業用移動体の前記位置計測部が、前記基準点設置用移動体の前記距離測定用機器を検出した場合に、前記作業用移動体と前記基準点設置用移動体との間の位置関係を計測し、
前記位置認識部が、前記位置記憶部に格納された前記基準点設置用移動体の座標情報と、前記作業用移動体と前記基準点設置用移動体との間の位置関係とに基づいて、前記作業用移動体の位置を認識し、
前記制御部が、前記作業用移動体の前記位置計測部による計測処理によって前記基準点設置用移動体の前記距離測定用機器が検出されない場合に、前記基準点設置用移動体を移動させるように制御し、
前記制御部が、次時刻に予定される前記作業用移動体の位置に基づいて、次時刻の前記作業用移動体の位置から前記位置計測部による計測処理によって前記基準点設置用移動体が検出される位置へ前記基準点設置用移動体を移動させるように制御する、
位置認識システム。
Measuring the positional relationship between a reference point setting mobile body comprising a position recognition unit realized by a computer, a camera for imaging the floor surface of a construction site, a distance measuring device, and a computer, and the distance measuring device. A position recognition system including a working mobile body having a position measuring unit that
The computer of the reference point installation mobile body receives an image of the floor surface captured by the camera of the reference point installation mobile body, and an identification marker preliminarily installed with respect to the reference point on the floor surface at the construction site. Coordinate information corresponding to the identification marker appearing in the image of the floor surface is acquired based on a coordinate table in which the information about the reference point and the coordinate information are associated with each other, and the identification information and the coordinate information of the reference point installation moving body are acquired. are associated with and stored in the position storage unit,
a positional relationship between the work mobile body and the reference point installation mobile body when the position measuring unit of the work mobile body detects the distance measuring device of the reference point installation mobile body to measure
The position recognition unit, based on the coordinate information of the reference point installation mobile body stored in the position storage unit and the positional relationship between the work mobile body and the reference point installation mobile body, recognizing the position of the working mobile body;
The control unit moves the reference point installation mobile body when the distance measurement device of the reference point installation mobile body is not detected by the measurement processing by the position measurement unit of the work mobile body. control and
The control unit detects the reference point setting mobile object from the position of the mobile object for work at the next time through the measurement processing by the position measuring unit based on the position of the mobile object for work scheduled at the next time. control to move the reference point installation moving body to the position where
location-aware system.
JP2017203909A 2017-10-20 2017-10-20 POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM Active JP7184243B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017203909A JP7184243B2 (en) 2017-10-20 2017-10-20 POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017203909A JP7184243B2 (en) 2017-10-20 2017-10-20 POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM

Publications (2)

Publication Number Publication Date
JP2019078569A JP2019078569A (en) 2019-05-23
JP7184243B2 true JP7184243B2 (en) 2022-12-06

Family

ID=66626437

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017203909A Active JP7184243B2 (en) 2017-10-20 2017-10-20 POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM

Country Status (1)

Country Link
JP (1) JP7184243B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7366735B2 (en) 2019-12-23 2023-10-23 株式会社安藤・間 Position measurement system and position measurement method
KR102284775B1 (en) * 2020-04-23 2021-08-02 (주)폴리곤 Method for 3d scaning using marker stamp

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004012278A (en) 2002-06-06 2004-01-15 Mitsubishi Heavy Ind Ltd Form and position measuring system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2615015B2 (en) * 1986-08-11 1997-05-28 三菱重工業株式会社 Self-propelled work vehicle position measurement method

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004012278A (en) 2002-06-06 2004-01-15 Mitsubishi Heavy Ind Ltd Form and position measuring system

Also Published As

Publication number Publication date
JP2019078569A (en) 2019-05-23

Similar Documents

Publication Publication Date Title
US20180209156A1 (en) Construction management system and method
JP6083520B2 (en) Robot guidance method and apparatus
KR101776823B1 (en) A mobile robot localization method and system via indoor surveillance cameras
JP4279703B2 (en) Autonomous mobile robot system
KR20200041355A (en) Simultaneous positioning and mapping navigation method, device and system combining markers
KR20160015987A (en) Remote Autonomous Driving System based on the High Accuracy of Localization by indoor Infrastructure&#39;s Map and Sensor and Method thereof
JP5016399B2 (en) Map information creation device and autonomous mobile device equipped with the map information creation device
US11441900B2 (en) Movable marking system, controlling method for movable marking apparatus, and computer readable recording medium
US11820001B2 (en) Autonomous working system, method and computer readable recording medium
CN109387194B (en) Mobile robot positioning method and positioning system
CN110928502B (en) Unlimited driving type marking system and marking method thereof
EP4102327A1 (en) Position recognition method and position recognition system for vehicle
CN112292580A (en) Positioning system and method for operating the same
JP7184243B2 (en) POSITION RECOGNIZATION METHOD, POSITION RECOGNIZATION DEVICE, REFERENCE POINT SETTING MOBILE, WORK MOBILE, AND POSITION RECOGNIZATION SYSTEM
JP2018092393A (en) Automatic carrier vehicle control system
KR20030026497A (en) Self-localization apparatus and method of mobile robot
CN114941985A (en) Six DoF measure auxiliary assembly
EP3929613A1 (en) A method for navigating a movable device along an inclined surface
US11577402B2 (en) Robot system and portable teaching device
JP7121489B2 (en) moving body
KR102495728B1 (en) Autonomous Working System, Method and Computer Readable Recording Medium
KR20230033656A (en) Autonomous Working System, Method and Computer Readable Recording Medium
JP2023032947A (en) Autonomous travel system
KR20220119351A (en) Location measuring system
KR20230112199A (en) A tunnel civil surveying and monitoring robot capable of positioning by text recognition and a surveying method using the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200924

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210817

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211012

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211209

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220809

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220809

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220817

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220823

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221025

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221111

R150 Certificate of patent or registration of utility model

Ref document number: 7184243

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150