JP2021071839A - Program for construction site recording - Google Patents

Program for construction site recording Download PDF

Info

Publication number
JP2021071839A
JP2021071839A JP2019197169A JP2019197169A JP2021071839A JP 2021071839 A JP2021071839 A JP 2021071839A JP 2019197169 A JP2019197169 A JP 2019197169A JP 2019197169 A JP2019197169 A JP 2019197169A JP 2021071839 A JP2021071839 A JP 2021071839A
Authority
JP
Japan
Prior art keywords
construction
image
post
scale
marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019197169A
Other languages
Japanese (ja)
Other versions
JP7346245B2 (en
Inventor
克彦 北
Katsuhiko Kita
克彦 北
峰雄 古村
Mineo Furumura
峰雄 古村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hokuriku Electrical Construction Co Ltd
Original Assignee
Hokuriku Electrical Construction Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hokuriku Electrical Construction Co Ltd filed Critical Hokuriku Electrical Construction Co Ltd
Priority to JP2019197169A priority Critical patent/JP7346245B2/en
Publication of JP2021071839A publication Critical patent/JP2021071839A/en
Application granted granted Critical
Publication of JP7346245B2 publication Critical patent/JP7346245B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To provide a program for construction site recording capable of displaying a condition of an unconstructed site in a portable terminal in an intuitively and easily understandable manner after construction.SOLUTION: A portable terminal is caused to execute: a preconstruction photographing step for photographing a preconstruction site by a photographing part to acquire a preconstruction image and displaying the image in a display part in response to an operation input to an input part; a preconstruction marker detection step for detecting an AR marker in the preconstruction image; a preconstruction calculation step for calculating a state of the AR marker; a postconstruction photographing step for photographing a constructed site by the photographing part to acquire a postconstruction image and displaying the image in the display part in response to an operation input to the input part; a postconstruction marker detection step for detecting the AR marker in the postconstruction image; a postconstruction calculation step for calculating the state of the AR marker; and a composite image display step for displaying a composite image obtained by overlapping the preconstruction image subjected to translucent processing on the postconstruction image with the states of the AR marker before and after construction as reference in the display part.SELECTED DRAWING: Figure 11

Description

本発明は、屋内配線などの施工現場の状況を記録するために用いられる携帯端末を制御するための施工現場記録用プログラムに関する。 The present invention relates to a construction site recording program for controlling a mobile terminal used for recording the situation of a construction site such as indoor wiring.

住宅などの建築物において、壁面に設けられるコンセントに接続される電気配線など、壁面の下に種々の配線が設置される。これらの配線は、壁面を施工した後には見えなくなるため、配線完了後、壁面の施工前に写真を撮影し、設計通りに配線が行われたことを記録しておく必要がある。従来、このような記録写真は、現場に工事内容を記載した黒板を置いて、カメラでその黒板を写し込むようにして撮影していた。しかしながら、高所など黒板を設置することが困難な場所もあることから、最近では、特許文献1に示すような、実際の黒板を用いない方法も提案されている。これは、撮影機能を備えるスマートフォンやタブレットなどの携帯端末を利用するものであって、携帯端末に工事内容についての情報を入力して、その情報を記載した仮想的な黒板を、撮影した画像に重ね合わせて表示するものである。 In buildings such as houses, various wirings are installed under the wall surface, such as electrical wiring connected to an outlet provided on the wall surface. Since these wires will not be visible after the wall surface is constructed, it is necessary to take a picture after the wiring is completed and before the wall surface is constructed, and record that the wiring was performed as designed. Conventionally, such recorded photographs have been taken by placing a blackboard on the site on which the construction details are described and using a camera to capture the blackboard. However, since there are places where it is difficult to install a blackboard such as a high place, a method without using an actual blackboard as shown in Patent Document 1 has recently been proposed. This uses a mobile terminal such as a smartphone or tablet that has a shooting function. Enter information about the construction content into the mobile terminal and use a virtual blackboard with that information as the shot image. It is displayed in an overlapping manner.

特開2013−117943号公報Japanese Unexamined Patent Publication No. 2013-117943

ところで、建築物の完成後に、壁面に棚を取り付けるなど壁面に対して何らかの工事を行う場合、壁面の下の配線を傷付けることがないように、配線の位置を確認する必要がある。その際には、上記の壁面施工前の記録写真(画像)を確認すればよい。しかしながら、この記録写真には当然ながら壁面は写っていないので、実際の壁面との位置関係の対応が直感的には分かりにくかった。 By the way, when some construction work is performed on the wall surface such as attaching a shelf to the wall surface after the building is completed, it is necessary to confirm the position of the wiring so as not to damage the wiring under the wall surface. In that case, the recorded photograph (image) before the wall surface construction may be confirmed. However, since the wall surface is not shown in this recorded photograph, it was difficult to intuitively understand the correspondence with the actual wall surface.

本発明は、このような事情を鑑みたものであり、施工後において、携帯端末に施工前の現場の状況を直感的にわかりやすく表示させることができる施工現場記録用プログラムを提供することを目的とする。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide a construction site recording program capable of intuitively and easily displaying the situation of the site before construction on a mobile terminal after construction. And.

本発明は、施工現場において施工前後の現場の状況を記録するために用いられるものであって、現場を撮影する撮影部と、前記撮影部により撮影された画像を表示する表示部と、操作入力を受け付ける入力部と、を有する携帯端末に、前記入力部への操作入力に応じて、前記撮影部により施工前の現場を撮影して施工前画像を取得し前記表示部に表示する施工前撮影ステップと、前記施工前画像内にARマーカが存在するか否かを検出する施工前マーカ検出ステップと、前記施工前画像内に前記ARマーカが存在する場合にその大きさ、位置および姿勢を算出する施工前算出ステップと、前記入力部への操作入力に応じて、前記撮影部により施工後の現場を撮影して施工後画像を取得し前記表示部に表示する施工後撮影ステップと、前記施工後画像内に前記ARマーカが存在するか否かを検出する施工後マーカ検出ステップと、前記施工後画像内に前記ARマーカが存在する場合にその大きさ、位置および姿勢を算出する施工後算出ステップと、前記施工前算出ステップと前記施工後算出ステップにおいて算出された前記ARマーカの大きさ、位置および姿勢を基準として前記施工後画像に半透明化した前記施工前画像を重ね合わせた合成画像を表示部に表示する合成画像表示ステップと、を実行させることを特徴とする。なお、施工前および施工後とは、必ずしもその現場の工事全体の開始前および終了後を示すものではなく、工事全体の中の1つの構造物の施工を基準として、その施工よりも前と後を示すものである。たとえば、建築物の工事において、屋内の電気配線を壁面で覆い隠す場合に、壁面の施工を基準とすれば、壁面がない状態で電気配線を敷設するまでが施工前となり、壁面の完成後が施工後となる。 The present invention is used to record the situation of the site before and after construction at the construction site, and has a photographing unit for photographing the site, a display unit for displaying an image photographed by the photographing unit, and an operation input. In response to an operation input to the input unit, the mobile terminal having an input unit that receives the image of the construction site is photographed by the photographing unit to acquire a pre-construction image and displayed on the display unit. The step, the pre-construction marker detection step for detecting whether or not the AR marker is present in the pre-construction image, and the size, position, and orientation of the AR marker when the AR marker is present in the pre-construction image are calculated. The pre-construction calculation step to be performed, the post-construction shooting step in which the post-construction site is photographed by the photographing unit in response to the operation input to the input unit, the post-construction image is acquired, and the post-construction image is displayed on the display unit. Post-construction marker detection step to detect whether or not the AR marker is present in the post-construction image, and post-construction calculation to calculate the size, position and orientation of the AR marker when it is present in the post-construction image. A composite image of the step, the pre-construction calculation step, and the semi-transparent pre-construction image superimposed on the post-construction image based on the size, position, and orientation of the AR marker calculated in the post-construction calculation step. It is characterized in that a composite image display step of displaying is executed on the display unit. Note that "before and after construction" does not necessarily mean before and after the start and end of the entire construction at the site, but before and after the construction of one structure in the entire construction as a reference. Is shown. For example, in the construction of a building, when the indoor electrical wiring is covered with a wall surface, if the construction of the wall surface is used as the standard, the period until the electrical wiring is laid without the wall surface is before the construction, and after the wall surface is completed. It will be after construction.

また、本発明は、前記携帯端末に、前記施工前画像内の前記ARマーカの大きさ、位置および姿勢に応じて前記施工前画像に施工前用スケールを重ねて前記表示部に表示する施工前スケール表示ステップと、前記合成画像内の前記ARマーカの大きさ、位置および姿勢に応じて前記合成画像に施工後用スケールを重ねて前記表示部に表示する施工後スケール表示ステップと、を実行させるものであってもよい。ここで、スケールとは、表示部に表示される帯状のものであって、長手方向にわたって等間隔に並んだ目盛と、ある目盛を原点としてそこから所定目盛数ごとに増加する数字とを付されたものである。 Further, in the present invention, the pre-construction scale is superimposed on the pre-construction image and displayed on the display unit according to the size, position and orientation of the AR marker in the pre-construction image on the mobile terminal. The scale display step and the post-construction scale display step of superimposing the post-construction scale on the composite image and displaying it on the display unit according to the size, position and orientation of the AR marker in the composite image are executed. It may be a thing. Here, the scale is a band-shaped one displayed on the display unit, and is given a scale arranged at equal intervals in the longitudinal direction and a number increasing from a certain scale as the origin by a predetermined number of scales. It is a thing.

また、本発明は、前記携帯端末に、前記入力部への操作入力に応じて、前記表示部に表示された前記施工前用スケールを任意の位置に移動して表示させる施工前スケール移動ステップと、前記施工前スケール移動ステップ終了後に、移動した前記施工前用スケールの前記ARマーカに対する相対位置を固定する施工前スケール固定ステップと、前記入力部への操作入力に応じて、前記表示部に表示された前記施工後用スケールを任意の位置に移動して表示させる施工後スケール移動ステップと、前記施工後スケール移動ステップ終了後に、移動した前記施工後用スケールの前記ARマーカに対する相対位置を固定する施工後スケール固定ステップと、を実行させるものであってもよい。 Further, the present invention comprises a pre-construction scale moving step in which the pre-construction scale displayed on the display unit is moved to an arbitrary position and displayed on the mobile terminal in response to an operation input to the input unit. After the completion of the pre-construction scale moving step, the pre-construction scale fixing step for fixing the relative position of the moved pre-construction scale with respect to the AR marker and the display on the display unit according to the operation input to the input unit. The post-construction scale moving step for moving and displaying the post-construction scale to an arbitrary position and the post-construction scale moving step after the completion of the post-construction scale moving step are fixed relative to the AR marker of the moved post-construction scale. The scale fixing step after construction may be executed.

また、本発明は、前記携帯端末に、施工現場の図面を前記表示部に表示する図面表示ステップと、前記入力部への操作入力に応じて、前記図面上の撮影対象箇所に目印を表示する目印表示ステップと、前記施工前画像を前記目印に紐付ける施工前紐付けステップと、前記合成画像を前記目印に紐付ける施工後紐付けステップと、前記合成画像が紐付けられた前記目印の色を変更する色変更ステップと、を実行させるものであってもよい。 Further, according to the present invention, the mobile terminal displays a drawing display step of displaying a drawing of a construction site on the display unit, and a mark is displayed on a shooting target portion on the drawing in response to an operation input to the input unit. The mark display step, the pre-construction linking step of linking the pre-construction image to the mark, the post-construction linking step of linking the composite image to the mark, and the color of the mark to which the composite image is linked. The color change step of changing the image may be executed.

本発明によれば、携帯端末の表示部に、施工後画像に半透明化した施工前画像を重ね合わせた合成画像を表示するものであるから、施工前の現場の状況について、施工後の現場との位置関係の対応が、直感的にわかりやすい。たとえば、建築物の屋内の壁面の施工後の画像に、壁面を施工する前の配線が露出した状態の画像を半透明化して重ね合わせることで、壁面下のどこに配線が位置しているのかを、直感的に把握することができる。また、施工前画像と施工後画像の合成は、画像内のARマーカが基準となるので、容易かつ正確に位置合わせされる。 According to the present invention, a composite image in which a semi-transparent pre-construction image is superimposed on a post-construction image is displayed on the display unit of the mobile terminal. Correspondence of the positional relationship with is intuitively easy to understand. For example, by superimposing an image of the exposed wiring before the wall construction on the image of the indoor wall surface of the building after construction, it is possible to find out where the wiring is located under the wall surface. , Can be grasped intuitively. Further, since the AR marker in the image is used as a reference for the composition of the pre-construction image and the post-construction image, the alignment is easily and accurately performed.

また、施工前と施工後のそれぞれにおいて、ARマーカに対応して携帯端末の表示部にスケールを表示するものであれば、実物のスケールを用いることなく、現場の各部の大きさや距離を表すためのスケールを表示できるので、実物のスケールの設置の手間がかからず、撮影が容易である。そして、特に施工後において合成画像に施工後用スケールを表示できるので、施工後の構造物と、施工前にしか見えない構造物(施工後には別の構造物に隠される構造物)との間の距離など、実物のスケールでは測ることができない部分についても、測ることが可能である。たとえば、建築物の屋内において、施工後の床や壁の位置を基準として、壁面下の配線までの距離を測ることができる。これにより、施工前の現場の状況について、施工後の現場との位置関係の対応を、より正確に把握できる。 In addition, if the scale is displayed on the display unit of the mobile terminal corresponding to the AR marker before and after the construction, the size and distance of each part of the site can be displayed without using the actual scale. Since the scale can be displayed, it is easy to take a picture without the trouble of installing the actual scale. And since the scale for post-construction can be displayed on the composite image especially after construction, between the structure after construction and the structure that can be seen only before construction (the structure hidden by another structure after construction). It is possible to measure parts that cannot be measured on the actual scale, such as the distance between the two. For example, in a building, the distance to the wiring under the wall surface can be measured based on the position of the floor or wall after construction. As a result, it is possible to more accurately grasp the correspondence between the situation of the site before the construction and the positional relationship with the site after the construction.

また、施工前と施工後のそれぞれにおいて、携帯端末の表示部に表示されたスケールを任意の位置に移動し固定できるものであれば、より撮影が容易である。すなわち、基本的にスケールはARマーカの位置に表示されるものであるが、現場の状況によっては、スケールを表示させたい最適な場所にARマーカを保持できない場合もある。そのような場合でも、表示部上において容易にスケールの位置を調整できる。そして、スケールを移動させた後は、ARマーカに対する相対位置が固定されるので、さらに携帯端末の向きや位置を変えて撮影のアングルなどを調整できる。 Further, if the scale displayed on the display unit of the mobile terminal can be moved and fixed at an arbitrary position before and after the construction, it is easier to take a picture. That is, the scale is basically displayed at the position of the AR marker, but depending on the situation at the site, the AR marker may not be held at the optimum place where the scale is to be displayed. Even in such a case, the position of the scale can be easily adjusted on the display unit. Then, after moving the scale, the relative position with respect to the AR marker is fixed, so that the direction and position of the mobile terminal can be further changed to adjust the shooting angle and the like.

また、携帯端末の表示部に図面を表示し、図面上の目印に施工前画像と合成画像を紐付けし、さらに合成画像が紐付けられた目印の色を変更するものであれば、図面上の目印の色によって、施工前画像のみが紐付けられているのか、施工前画像と合成画像の両方が紐付けられているのかが一目で見分けられるので、より使い勝手がよい。 In addition, if the drawing is displayed on the display unit of the mobile terminal, the pre-construction image and the composite image are linked to the mark on the drawing, and the color of the mark to which the composite image is linked is changed, the drawing is displayed. It is more convenient because it can be distinguished at a glance whether only the pre-construction image is linked or both the pre-construction image and the composite image are linked by the color of the mark.

本発明の施工現場記録用プログラムのフローチャート(施工前部分)である。It is a flowchart (pre-construction part) of the program for recording a construction site of this invention. 本発明の施工現場記録用プログラムのフローチャート(施工後部分)である。It is a flowchart (post-construction part) of the program for recording the construction site of this invention. 施工現場の説明図であり、(a)は施工前、(b)は施工後を示す。It is explanatory drawing of the construction site, (a) shows before construction, (b) shows after construction. 携帯端末のハードウェア構成図である。It is a hardware configuration diagram of a mobile terminal. 携帯端末の表示部に表示される図面表示画面であり、平面図が表示された状態である。It is a drawing display screen displayed on the display unit of the mobile terminal, and is in a state where a plan view is displayed. 携帯端末の表示部に表示される図面表示画面であり、平面図上に目印が表示された状態である。It is a drawing display screen displayed on the display unit of the mobile terminal, and a mark is displayed on the plan view. 携帯端末の表示部に表示される施工前撮影画面であり、スケールが表示された状態である。It is a pre-construction shooting screen displayed on the display unit of the mobile terminal, and the scale is displayed. 携帯端末の表示部に表示される施工前撮影画面であり、各部の寸法が表示された状態である。It is a pre-construction shooting screen displayed on the display part of the mobile terminal, and the dimensions of each part are displayed. 携帯端末の表示部に表示されるプレビュー画面である。This is a preview screen displayed on the display unit of the mobile terminal. 携帯端末の表示部に表示される施工前画像表示画面である。This is a pre-construction image display screen displayed on the display unit of the mobile terminal. 携帯端末の表示部に表示される施工後撮影画面であり、合成画像が表示された状態である。It is a post-construction shooting screen displayed on the display unit of the mobile terminal, and is in a state where a composite image is displayed. 携帯端末の表示部に表示される施工後撮影画面であり、スケールおよび各部の寸法が表示された状態である。It is a post-construction shooting screen displayed on the display part of the mobile terminal, and is in a state where the scale and the dimensions of each part are displayed.

以下、本発明の具体的な内容について説明する。本発明の施工現場記録用プログラムにより制御される携帯端末およびARマーカは、種々の施工現場において用いることができるものであるが、ここでは、建築物の屋内における電気配線およびその電気配線を覆い隠すように設けられる壁面の施工現場において用いる場合を示す。この場合、壁面がない状態で電気配線を敷設するまでが「施工前」となり、壁面の完成後が「施工後」となる。 Hereinafter, the specific contents of the present invention will be described. The mobile terminal and the AR marker controlled by the construction site recording program of the present invention can be used at various construction sites, but here, the electrical wiring inside the building and the electrical wiring thereof are obscured. The case where it is used at the construction site of the wall surface provided as described above is shown. In this case, "before construction" is until the electrical wiring is laid without the wall surface, and "after construction" is after the completion of the wall surface.

まず、その施工現場について説明する。図2(a)は、「施工前」の状態を示している。この建築物は、鉄筋コンクリート造であって、床、天井、柱や壁が、鉄筋コンクリートにより一体的に設けられている。そして、所定の位置に、LGS(軽量鉄骨)からなる間柱Cが設けられている。間柱Cには、所定の位置に、水平向きに延びるアームAが設けられており、このアームAに、コンセントやスイッチなどの機能を有するボックスBが取り付けられ、ボックスBに電気配線Lが接続されている。電気配線Lは、それぞれのボックスBから上向きに延びており、配電盤(図示省略)に接続されている。 First, the construction site will be described. FIG. 2A shows the state “before construction”. This building is made of reinforced concrete, and the floor, ceiling, columns and walls are integrally provided by reinforced concrete. A stud C made of LGS (lightweight steel frame) is provided at a predetermined position. The stud C is provided with an arm A extending horizontally at a predetermined position, a box B having a function such as an outlet or a switch is attached to the arm A, and an electric wiring L is connected to the box B. ing. The electrical wiring L extends upward from each box B and is connected to a switchboard (not shown).

また、図2(b)は、「施工後」の状態を示している。間柱Cに、プラスターボードからなる壁面Wが取り付けられ、間柱Cおよび電気配線Lが覆い隠されている。壁面WのボックスBに対応する位置には孔が形成されており、ボックスBの機能に応じたカバーが取り付けられ、壁面Wに設けられたコンセントPやスイッチSとなる。また、壁面Wの表面は、クロスを貼るなどして仕上げられる。さらに、床や天井にも仕上げ材が取り付けられ、内装の施工が完了する。 Further, FIG. 2B shows the state “after construction”. A wall surface W made of plasterboard is attached to the stud C, and the stud C and the electrical wiring L are obscured. A hole is formed at a position corresponding to the box B on the wall surface W, a cover corresponding to the function of the box B is attached, and the outlet P and the switch S provided on the wall surface W are provided. Further, the surface of the wall surface W is finished by pasting a cloth or the like. Furthermore, finishing materials are attached to the floor and ceiling, and the interior construction is completed.

そして、施工後において、図2(b)に示すように、壁面Wに棚Rを取り付ける場合を想定する。棚Rは、壁面Wに対して釘を打って固定するものであり、その際、壁面Wの下の電気配線Lを傷付けることがないように、電気配線Lの位置を確認する必要がある。そのために、本発明の施工現場記録用プログラムにより制御される携帯端末およびARマーカを用いる。 Then, after construction, as shown in FIG. 2B, it is assumed that the shelf R is attached to the wall surface W. The shelf R is fixed to the wall surface W by hitting a nail, and at that time, it is necessary to confirm the position of the electric wiring L so as not to damage the electric wiring L under the wall surface W. Therefore, a mobile terminal and an AR marker controlled by the construction site recording program of the present invention are used.

次に、本発明の施工現場記録用プログラムにより制御される携帯端末について説明する。この携帯端末10は、スマートフォンまたはタブレットからなるものであり、図3のハードウェア構成図に示すように、施工現場を撮影する撮影部としてのカメラ11、カメラ11により撮影された画像やその他の画像を表示する表示部としてのディスプレイ12、操作入力を受け付ける入力部としてのタッチパネル13、プログラムの命令を順番に実行するCPU14、プログラムやその他のデータなどを保存しておく記憶装置(メモリ)15、インターネットに接続するための通信装置16を備えている。ディスプレイ12とタッチパネル13とは、一体に形成されており、ディスプレイ12に表示されるボタンや画像自体が、タッチパネル13により入力部として機能する。また、入力部として、タッチパネル13の他に機械的なボタンなどの操作機構を有していてもよい。 Next, a mobile terminal controlled by the construction site recording program of the present invention will be described. The mobile terminal 10 is composed of a smartphone or a tablet, and as shown in the hardware configuration diagram of FIG. 3, the camera 11 as a photographing unit for photographing the construction site, the image taken by the camera 11 and other images. Display 12 as a display unit for displaying, a touch panel 13 as an input unit for receiving operation input, a CPU 14 for sequentially executing program commands, a storage device (memory) 15 for storing programs and other data, and the Internet. A communication device 16 for connecting to is provided. The display 12 and the touch panel 13 are integrally formed, and the buttons and images displayed on the display 12 function as input units by the touch panel 13. Further, as the input unit, an operation mechanism such as a mechanical button may be provided in addition to the touch panel 13.

次に、上記の携帯端末と組み合わせて用いられるARマーカについて説明する。そもそも、ARとは、「Augmented Reality=拡張現実」の略であり、現実の風景に仮想的な画像を重ねて表示することで、現実を仮想的に拡張するものである。そして、ARマーカは、後述するように、携帯端末のカメラに写し込ませて、本発明の施工現場記録用プログラムにより、その位置や姿勢を認識させるための図(画像)であり、仮想的な画像を表示するための基準となるものである。一般に、ARシステムにおけるARマーカは、図形、画像、写真など、どのようなものであってもよいが、ここでは、様々な背景の中でも認識されやすい白黒の二次元コードであって正方形のものを用いる。また、その大きさは必ずしも限定されないが、携帯端末と同程度の大きさの樹脂板からなるもの(樹脂板の表面に、二次元コードを印刷したもの、または二次元コードを印刷したシールを貼ったもの)とすれば、携帯端末と一緒に持ち運ぶ際に都合がよく、また耐水性もあるので望ましい。 Next, the AR marker used in combination with the above-mentioned mobile terminal will be described. In the first place, AR is an abbreviation of "Augmented Reality", and it virtually expands reality by superimposing a virtual image on a real landscape. Then, as will be described later, the AR marker is a diagram (image) for being imprinted on the camera of the mobile terminal and recognizing its position and posture by the construction site recording program of the present invention, and is virtual. It is a standard for displaying an image. In general, the AR marker in the AR system may be any shape, image, photograph, etc., but here, a black-and-white two-dimensional code that is easily recognized even in various backgrounds and is a square one. Use. The size of the resin plate is not necessarily limited, but it is made of a resin plate of the same size as a mobile terminal (a two-dimensional code is printed on the surface of the resin plate, or a sticker with the two-dimensional code printed is attached. It is desirable because it is convenient to carry with a mobile terminal and has water resistance.

次に、本発明の施工現場記録用プログラムの具体的内容について説明する。図1(a)、(b)に示すのは、このプログラムの処理の流れを表すフローチャートである。携帯端末にはこのプログラム(アプリ)がインストールされており、プログラムを起動することで、各処理が順次実行される。なお、プログラムの各ステップの名称やその説明において、「施工前」および「施工後」の文言が用いられているが、実際の施工現場の状態が施工前であるか施工後であるかについて、携帯端末(プログラム)が自動的に判断するものではなく、携帯端末の使用者の判断により、図面表示ステップS1〜施工前紐付けステップS13は施工前に実行され、画像呼出ステップS14〜色変更ステップS27は施工後に実行される。以下の説明は、そのとおりに実行されることを前提としているが、仮に、各ステップの名称における「施工前」「施工後」と、実際の施工現場の状態が異なっていたとしても、プログラムは同様に携帯端末を動作させるものである。 Next, the specific contents of the construction site recording program of the present invention will be described. 1 (a) and 1 (b) are flowcharts showing the processing flow of this program. This program (application) is installed in the mobile terminal, and each process is executed in sequence by starting the program. In addition, although the words "before construction" and "after construction" are used in the name of each step of the program and its explanation, the actual condition of the construction site is whether it is before or after construction. The mobile terminal (program) does not automatically determine, but the drawing display step S1 to the pre-construction linking step S13 is executed before the construction, and the image calling step S14 to the color change step are determined by the user of the mobile terminal. S27 is executed after construction. The following explanation is based on the assumption that it will be executed as it is, but even if the actual construction site conditions are different from "before construction" and "after construction" in the name of each step, the program will be Similarly, it operates a mobile terminal.

まず、施工現場の状態が施工前であることを前提とする。最初に、プログラムは、携帯端末に図面表示ステップS1を実行させる。図面表示ステップS1では、図4に示すように、ディスプレイに図面表示画面100が表示される。図面表示画面100では、施工現場となる建築物の平面図101が表示される。平面図101は、ディスプレイ(タッチパネル)に対するドラッグ操作により上下左右に動かしたり、ピンチイン・ピンチアウト操作により縮小・拡大したりすることができる。また、スタイラスなどにより、任意の書き込みをすることもできる。書き込みは、これ以降の画面においても可能である。なお、平面図101は、予め携帯端末の記憶装置に保存されたものであってもよいし、サーバに保存されたものであってもよい。平面図101がサーバに保存されたものの場合、携帯端末の通信装置によりサーバとインターネット接続され、平面図101がサーバから携帯端末へダウンロードされディスプレイに表示される。また、平面図が複数ある場合(建築物が複数階を有する場合や、建築物が複数ある場合)、それらの平面図を選択する画面が表示されるものであってもよい。 First, it is assumed that the condition of the construction site is before construction. First, the program causes the mobile terminal to execute the drawing display step S1. In the drawing display step S1, as shown in FIG. 4, the drawing display screen 100 is displayed on the display. On the drawing display screen 100, a plan view 101 of the building to be the construction site is displayed. The plan view 101 can be moved up / down / left / right by a drag operation on the display (touch panel), and can be reduced / enlarged by a pinch-in / pinch-out operation. In addition, arbitrary writing can be performed using a stylus or the like. Writing is also possible on subsequent screens. The plan view 101 may be stored in the storage device of the mobile terminal in advance, or may be stored in the server. When the plan view 101 is stored in the server, the communication device of the mobile terminal connects to the server via the Internet, and the plan view 101 is downloaded from the server to the mobile terminal and displayed on the display. Further, when there are a plurality of floor plans (when the building has a plurality of floors or when there are a plurality of buildings), a screen for selecting the floor plans may be displayed.

次に、図面表示画面100において、平面図101上の撮影対象箇所をタッチすると、プログラムは、携帯端末に目印表示ステップS2を実行させる。目印表示ステップS2では、図5に示すように、タッチした場所に目印102が表示される。目印102は、矢印形状であって、任意の向きに回転可能であり、これにより撮影方向を示すことができる。また、目印102は平面図101上において目立つように、赤色で表示されている。さらに、目印102は複数表示させることが可能であって、表示させた順に、自動的に番号が1,2,3,・・・と付される。 Next, when the shooting target portion on the plan view 101 is touched on the drawing display screen 100, the program causes the mobile terminal to execute the mark display step S2. In the mark display step S2, as shown in FIG. 5, the mark 102 is displayed at the touched place. The mark 102 has an arrow shape and can be rotated in any direction, whereby the photographing direction can be indicated. Further, the mark 102 is displayed in red so as to stand out on the plan view 101. Further, a plurality of marks 102 can be displayed, and numbers 1, 2, 3, ... Are automatically assigned in the order of display.

次に、図面表示画面100において、平面図101上の目印102をタッチすると、プログラムは、携帯端末に施工前撮影ステップS3を実行させる。施工前撮影ステップS3では、カメラが起動して、図6に示すように、ディスプレイに施工前撮影画面200が表示される。施工前撮影画面200では、カメラで撮影された施工前画像201(静止画ではなく、カメラで撮影したものがリアルタイムに表示されるものである)が表示されるとともに、左上部分に撮影ボタン202が表示され、左下部分に長方形のコメント欄203が表示される。コメント欄203は、撮影したい部分に重ならないように、自在に移動させることができる。施工前画像201には、間柱C、ボックスBおよび電気配線Lなどが写っている。なお、撮影時には、撮影対象箇所にARマーカMを載置して、写し込ませる。ARマーカMは、所定の水平基準線Nhと垂直基準線Nv(実際の現場に存在する線ではなく、設計上の線である)の交点に中心を一致させ、かつ上下辺を水平向き、左右辺を垂直向きにして載置される。 Next, when the mark 102 on the plan view 101 is touched on the drawing display screen 100, the program causes the mobile terminal to execute the pre-construction shooting step S3. In the pre-construction shooting step S3, the camera is activated and the pre-construction shooting screen 200 is displayed on the display as shown in FIG. On the pre-construction shooting screen 200, the pre-construction image 201 taken by the camera (not a still image, but the one taken by the camera is displayed in real time) is displayed, and the shooting button 202 is displayed in the upper left portion. It is displayed, and a rectangular comment field 203 is displayed in the lower left portion. The comment field 203 can be freely moved so as not to overlap the portion to be photographed. The pre-construction image 201 shows the stud C, the box B, the electrical wiring L, and the like. At the time of shooting, the AR marker M is placed on the shooting target location and imprinted. The AR marker M has a center aligned with the intersection of a predetermined horizontal reference line Nh and a vertical reference line Nv (not a line existing in an actual site, but a design line), and the upper and lower sides are oriented horizontally, left and right. It is placed with its sides facing vertically.

次に、プログラムは、携帯端末に施工前マーカ検出ステップS4を実行させる。施工前マーカ検出ステップS4では、カメラにより撮影された施工前画像201内にARマーカMが存在するか否かを検出する。ARマーカMが存在しなければ、検出が繰り返される。 Next, the program causes the mobile terminal to execute the pre-construction marker detection step S4. In the pre-construction marker detection step S4, it is detected whether or not the AR marker M is present in the pre-construction image 201 taken by the camera. If the AR marker M is not present, the detection is repeated.

そして、施工前マーカ検出ステップS4において画像内にARマーカMが存在した場合、プログラムは、携帯端末に施工前算出ステップS5を実行させる。施工前算出ステップS5では、二次元コードからなるARマーカMの大きさ、位置および姿勢を算出する。具体的な算出方法は、既知の方法によるものであり、ここでは詳細な説明は省略する。 Then, when the AR marker M is present in the image in the pre-construction marker detection step S4, the program causes the mobile terminal to execute the pre-construction calculation step S5. In the pre-construction calculation step S5, the size, position, and posture of the AR marker M composed of the two-dimensional code are calculated. The specific calculation method is based on a known method, and detailed description thereof will be omitted here.

次に、プログラムは、携帯端末に施工前スケール表示ステップS6を実行させる。施工前スケール表示ステップS6では、施工前算出ステップS5において算出されたARマーカMの大きさ、位置および姿勢に応じて、図6に示すように、施工前画像201に重ねてディスプレイに施工前用スケール(施工前用水平スケールSh1および施工前用垂直スケールSv1)を表示する。また併せて、ARマーカMの位置を基準として、水平基準線Nhおよび垂直基準線Nvも表示される。施工前用水平スケールSh1および施工前用垂直スケールSv1は、何れも直線状かつ帯状のものであって、長手方向にわたって等間隔に並んだ目盛と、ある目盛を原点としてそこから所定目盛数ごとに増加する数字とを付されたものである。施工前用水平スケールSh1は、水平方向に延びており、原点は垂直基準線Nv上に位置している。施工前用垂直スケールSv1は、垂直方向に延びており、原点は水平基準線Nh上に位置している。また、何れの施工前用スケールも原点から左右または上下の両方向へ向けて付された数字が増加している。なお、施工前用水平スケールSh1は、ARマーカMの上下辺に平行となり、施工前用垂直スケールSv1は、ARマーカMの左右辺に平行となるものであり、ARマーカMが傾いて写り込んでいれば、施工前用水平スケールSh1および施工前用垂直スケールSv1も傾いて表示されることになる。 Next, the program causes the mobile terminal to execute the pre-construction scale display step S6. In the pre-construction scale display step S6, as shown in FIG. 6, the AR marker M calculated in the pre-construction calculation step S5 is superimposed on the pre-construction image 201 and used for pre-construction on the display according to the size, position and orientation of the AR marker M. The scales (horizontal scale Sh1 for pre-construction and vertical scale Sv1 for pre-construction) are displayed. At the same time, the horizontal reference line Nh and the vertical reference line Nv are also displayed with reference to the position of the AR marker M. The pre-construction horizontal scale Sh1 and the pre-construction vertical scale Sv1 are both linear and strip-shaped, and have graduations arranged at equal intervals in the longitudinal direction and a certain graduation as the origin for each predetermined number of graduations. It is attached with an increasing number. The pre-construction horizontal scale Sh1 extends in the horizontal direction, and the origin is located on the vertical reference line Nv. The pre-construction vertical scale Sv1 extends in the vertical direction, and the origin is located on the horizontal reference line Nh. In addition, the numbers attached to all pre-construction scales from the origin in both the left and right or up and down directions are increasing. The pre-construction horizontal scale Sh1 is parallel to the upper and lower sides of the AR marker M, and the pre-construction vertical scale Sv1 is parallel to the left and right sides of the AR marker M. If so, the pre-construction horizontal scale Sh1 and the pre-construction vertical scale Sv1 are also displayed at an angle.

次に、施工前撮影画面200において、施工前用水平スケールSh1または施工前用垂直スケールSv1をタッチすると、プログラムは、携帯端末に施工前寸法表示ステップS7を実行させる。施工前寸法表示ステップS7では、図7に示すように、まず施工前用スケールに直交する向きに延びる寸法補助線D1が表示される。すなわち、施工前用水平スケールSh1をタッチすれば、垂直向きの寸法補助線が表示され、施工前用垂直スケールSv1をタッチすれば、水平向きの寸法補助線D1が表示される。寸法補助線D1は、一端に三角形が付された直線で表される。そして、寸法補助線D1は、任意の長さに伸縮させることが可能であって、かつその延びる方向に直交する方向に移動自在である。すなわち、垂直向きの寸法補助線D1は、施工前用水平スケールSh1に沿って移動自在であり、水平向きの寸法補助線D1は、施工前用垂直スケールSv1に沿って移動自在である。また、寸法補助線D1は、複数本表示させることができる。さらに、任意の平行な2本の寸法補助線D1を選んで、その間に寸法線D2を表示させ、その寸法線D2のそばに寸法値D3を表示させることができる。寸法線D2は、両端に矢印が付された直線で表される。また、寸法値D3としては、数値だけではなく、単位やその他のコメントを表示させることもできる。なお、寸法線D2および寸法値D3は、寸法補助線D1同士の間だけではなく、寸法補助線D1と、水平基準線Nhまたは垂直基準線Nvの間に表示させることもできる。図7においては、寸法補助線D1、寸法線D2および寸法値D3により、ボックスBの位置を示している。 Next, when the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1 is touched on the pre-construction shooting screen 200, the program causes the mobile terminal to execute the pre-construction dimension display step S7. In the pre-construction dimension display step S7, as shown in FIG. 7, first, the dimension auxiliary line D1 extending in the direction orthogonal to the pre-construction scale is displayed. That is, if the pre-construction horizontal scale Sh1 is touched, the vertical dimensional auxiliary line is displayed, and if the pre-construction vertical scale Sv1 is touched, the horizontal dimensional auxiliary line D1 is displayed. The extension line D1 is represented by a straight line having a triangle at one end. The extension line D1 can be expanded and contracted to an arbitrary length, and can be moved in a direction orthogonal to the extending direction thereof. That is, the vertical extension line D1 is movable along the pre-construction horizontal scale Sh1, and the horizontal extension line D1 is movable along the pre-construction vertical scale Sv1. Further, a plurality of dimensional auxiliary lines D1 can be displayed. Further, it is possible to select any two parallel dimensional auxiliary lines D1, display the dimensional line D2 between them, and display the dimensional value D3 beside the dimensional line D2. The dimension line D2 is represented by a straight line with arrows at both ends. Further, as the dimension value D3, not only a numerical value but also a unit and other comments can be displayed. The dimension line D2 and the dimension value D3 can be displayed not only between the extension lines D1 but also between the extension line D1 and the horizontal reference line Nh or the vertical reference line Nv. In FIG. 7, the position of the box B is indicated by the extension line D1, the dimension line D2, and the dimension value D3.

次に、プログラムは、携帯端末に施工前スケール移動ステップS8を実行させる。施工前スケール移動ステップS8では、ディスプレイに表示された施工前用水平スケールSh1または施工前用垂直スケールSv1にタッチしてそのままドラッグする(スライドさせる)ことで、ディスプレイ上において施工前用水平スケールSh1または施工前用垂直スケールSv1を任意の位置に移動させる。この際、寸法補助線D1、寸法線D2および寸法値D3も、施工前用水平スケールSh1または施工前用垂直スケールSv1と一緒に移動する。すなわち、寸法補助線D1、寸法線D2および寸法値D3は、施工前用水平スケールSh1または施工前用垂直スケールSv1に対して相対的に固定されている。そして、その操作入力を終了させる、すなわちタッチしていた指やスタイラスを離すと、プログラムは、携帯端末に施工前スケール固定ステップS9を実行させる。施工前スケール固定ステップS9では、施工前スケール移動ステップS8でディスプレイ上において移動された施工前用水平スケールSh1または施工前用垂直スケールSv1のARマーカMに対する相対位置を固定する。よって、その後に携帯端末を動かして、ディスプレイ上におけるARマーカMの位置が移動すると、施工前用水平スケールSh1および施工前用垂直スケールSv1はARマーカMに対する相対位置が変わらないまま移動する。なお、もう一度施工前用水平スケールSh1または施工前用垂直スケールSv1にタッチしてドラッグすれば、再びプログラムは携帯端末に施工前スケール移動ステップS8を実行させることになり、施工前用水平スケールSh1または施工前用垂直スケールSv1を移動させることができる。撮影された対象物の位置に応じて、適宜施工前用水平スケールSh1または施工前用垂直スケールSv1を移動させることで、画像がより分かりやすいものとなるが、元の状態で分かりやすければ、施工前スケール移動ステップS8および施工前スケール固定ステップS9は実行させなくてもよい。 Next, the program causes the mobile terminal to execute the pre-construction scale movement step S8. In the pre-construction scale moving step S8, by touching the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1 displayed on the display and dragging (sliding) it as it is, the pre-construction horizontal scale Sh1 or the pre-construction horizontal scale Sh1 or Move the pre-construction vertical scale Sv1 to an arbitrary position. At this time, the dimensional auxiliary line D1, the dimensional line D2, and the dimensional value D3 also move together with the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1. That is, the dimensional auxiliary line D1, the dimensional line D2, and the dimensional value D3 are fixed relative to the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1. Then, when the operation input is completed, that is, the touched finger or stylus is released, the program causes the mobile terminal to execute the pre-construction scale fixing step S9. In the pre-construction scale fixing step S9, the relative position of the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1 moved on the display in the pre-construction scale moving step S8 with respect to the AR marker M is fixed. Therefore, when the mobile terminal is subsequently moved to move the position of the AR marker M on the display, the pre-construction horizontal scale Sh1 and the pre-construction vertical scale Sv1 move without changing their relative positions with respect to the AR marker M. If the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1 is touched and dragged again, the program causes the mobile terminal to execute the pre-construction scale movement step S8 again, and the pre-construction horizontal scale Sh1 or The vertical scale Sv1 for pre-construction can be moved. By moving the pre-construction horizontal scale Sh1 or the pre-construction vertical scale Sv1 as appropriate according to the position of the photographed object, the image becomes easier to understand. The pre-scale moving step S8 and the pre-construction scale fixing step S9 need not be executed.

次に、施工前撮影画面200において、撮影ボタン202をタッチすると、プログラムは、携帯端末に施工前画像決定ステップS10を実行させる。施工前画像決定ステップS10では、ディスプレイに表示されている施工前画像201(カメラで撮影したものがリアルタイムに表示されるもの)が、撮影ボタン202をタッチした時点の静止画となり、カメラが停止する。続いて、プログラムは、携帯端末に施工前コメント入力ステップS11を実行させる。施工前コメント入力ステップS11では、図8に示すように、ディスプレイにプレビュー画面300が表示される。プレビュー画面300では、中央部に小さなサイズの施工前画像201S(施工前用水平スケールSh1、施工前用垂直スケールSv1や寸法補助線D1などが重ねて表示されたものであって、撮影ボタン202がタッチされた時点の静止画である)が表示される。また、施工前画像201Sの上側に、撮影日時入力欄301が表示され、施工前画像201Sの下側に、撮影者名入力欄302およびコメント入力欄303が表示される。さらに、施工前画像201Sの右側に、登録ボタン304と戻るボタン305が表示される。撮影日時入力欄301、撮影者名入力欄302およびコメント入力欄303については、それぞれをタッチすることで、テキスト入力が可能となる。なお、撮影日時入力欄301については、携帯端末の内蔵時計の日時が自動入力されるものであってもよい。各欄に入力された内容は、施工前画像201のコメント欄203に反映される。ここで、戻るボタン305をタッチすると、カメラが起動して、ディスプレイに再び施工前撮影画面200が表示され、施工前画像201の撮影をやり直すことができる。 Next, when the shooting button 202 is touched on the pre-construction shooting screen 200, the program causes the mobile terminal to execute the pre-construction image determination step S10. In the pre-construction image determination step S10, the pre-construction image 201 displayed on the display (the one taken by the camera is displayed in real time) becomes a still image when the shooting button 202 is touched, and the camera stops. .. Subsequently, the program causes the mobile terminal to execute the pre-construction comment input step S11. In the pre-construction comment input step S11, the preview screen 300 is displayed on the display as shown in FIG. On the preview screen 300, a small size pre-construction image 201S (horizontal scale Sh1 for pre-construction, vertical scale Sv1 for pre-construction, dimensional auxiliary line D1 and the like are superimposed and displayed in the center, and the shooting button 202 is displayed. (It is a still image at the time of touching) is displayed. Further, the shooting date / time input field 301 is displayed on the upper side of the pre-construction image 201S, and the photographer name input field 302 and the comment input field 303 are displayed on the lower side of the pre-construction image 201S. Further, a registration button 304 and a return button 305 are displayed on the right side of the pre-construction image 201S. By touching each of the shooting date / time input field 301, the photographer name input field 302, and the comment input field 303, text input becomes possible. In the shooting date / time input field 301, the date / time of the built-in clock of the mobile terminal may be automatically input. The content entered in each column is reflected in the comment column 203 of the pre-construction image 201. Here, when the back button 305 is touched, the camera is activated, the pre-construction shooting screen 200 is displayed again on the display, and the pre-construction image 201 can be retaken.

次に、プレビュー画面300において、登録ボタン304をタッチすると、プログラムは、携帯端末に施工前画像保存ステップS12を実行させる。施工前画像保存ステップS12では、プレビュー画面300に表示されていた状態の施工前画像201(施工前用水平スケールSh1、施工前用垂直スケールSv1や寸法補助線D1などが重ねて表示されたものであって、撮影ボタン202がタッチされた時点の静止画である)を、記憶装置に保存する。 Next, when the registration button 304 is touched on the preview screen 300, the program causes the mobile terminal to execute the pre-construction image saving step S12. In the pre-construction image saving step S12, the pre-construction image 201 (horizontal scale Sh1 for pre-construction, vertical scale Sv1 for pre-construction, dimensional auxiliary line D1 and the like displayed on the preview screen 300 are superimposed and displayed. (It is a still image at the time when the shooting button 202 is touched) is saved in the storage device.

次に、プログラムは、携帯端末に施工前紐付けステップS13を実行させる。施工前紐付けステップS13では、施工前画像保存ステップS12において保存された施工前画像201を、その撮影時にタッチした平面図101上の目印102に紐付ける処理が行われ、その結果が記憶装置に保存される。これにより、以後、図面表示画面100において、施工前画像201が紐付けられた目印102をタッチすると、ディスプレイに、その施工前画像201についてのプレビュー画面300が表示される。 Next, the program causes the mobile terminal to execute the pre-construction linking step S13. In the pre-construction linking step S13, the pre-construction image 201 saved in the pre-construction image saving step S12 is linked to the mark 102 on the plan view 101 touched at the time of shooting, and the result is stored in the storage device. It will be saved. As a result, thereafter, when the mark 102 associated with the pre-construction image 201 is touched on the drawing display screen 100, the preview screen 300 for the pre-construction image 201 is displayed on the display.

ここまでが、プログラムにおいて、施工前の施工現場において実行されることを前提とした部分である。そしてこれ以降は、施工後の施工現場において実行されることを前提とする部分である。 The above is the part of the program that is premised on being executed at the construction site before construction. After that, it is a part that is assumed to be executed at the construction site after construction.

施工後の施工現場において、プログラムは、携帯端末に画像呼出ステップS14を実行させる。画像呼出ステップS14では、図面表示画面100において、施工前画像201が紐付けられた目印102をタッチすると、ディスプレイに、その施工前画像201についてのプレビュー画面300が表示され、さらにプレビュー画面300において、小さな施工前画像201Sをタッチすると、施工前画像表示画面400が表示される。施工前画像表示画面400では、図9に示すように、ディスプレイの全体に施工前画像201(施工前用水平スケールSh1、施工前用垂直スケールSv1や寸法補助線D1などが重ねて表示されたものであって、撮影ボタン202がタッチされた時点の静止画である)が表示されるとともに、左上部分に透過ボタン401が表示される。 At the construction site after construction, the program causes the mobile terminal to execute the image calling step S14. In the image calling step S14, when the mark 102 associated with the pre-construction image 201 is touched on the drawing display screen 100, the preview screen 300 for the pre-construction image 201 is displayed on the display, and further, the preview screen 300 displays the preview screen 300. When the small pre-construction image 201S is touched, the pre-construction image display screen 400 is displayed. On the pre-construction image display screen 400, as shown in FIG. 9, the pre-construction image 201 (horizontal scale Sh1 for pre-construction, vertical scale Sv1 for pre-construction, dimensional auxiliary line D1 and the like are superimposed and displayed on the entire display. (It is a still image at the time when the shooting button 202 is touched) is displayed, and the transparent button 401 is displayed in the upper left portion.

次に、施工前画像表示画面400において、透過ボタン401をタッチすると、プログラムは、携帯端末に施工後撮影ステップS15を実行させる。施工後撮影ステップS15では、図10に示すように、ディスプレイに施工後撮影画面500が表示される。施工後撮影画面500では、施工前画像表示画面400で表示されていた施工前画像201が半透明化されて半透明施工前画像201Tになるとともに、カメラが起動して、カメラで撮影された施工後画像501(静止画ではなく、カメラで撮影したものがリアルタイムに表示されるものである)に半透明施工前画像201Tが重ね合わせて表示(オーバーレイ表示または重畳表示ともいう)される。さらに、左上部分に撮影ボタン502とスケールボタン503が表示され、左下部分に長方形のコメント欄504が表示される。コメント欄504は、撮影したい部分に重ならないように、自在に移動させることができる。施工後画像501には、壁面WおよびコンセントPやスイッチSなどが写っている。なお、撮影時には、撮影対象箇所にARマーカMを載置して、写し込ませる。ARマーカMは、施工前撮影ステップS3において写し込ませたものと同じものである。また、ARマーカMは、施工前撮影ステップS3の際と同じ水平基準線Nhと垂直基準線Nvの交点に中心を一致させ、かつ上下辺を水平向き、左右辺を垂直向きにして載置される。 Next, when the transparent button 401 is touched on the pre-construction image display screen 400, the program causes the mobile terminal to execute the post-construction shooting step S15. In the post-construction shooting step S15, as shown in FIG. 10, the post-construction shooting screen 500 is displayed on the display. On the post-construction shooting screen 500, the pre-construction image 201 displayed on the pre-construction image display screen 400 is translucent to become a semi-transparent pre-construction image 201T, and the camera is activated to perform the construction shot by the camera. The semi-transparent pre-construction image 201T is superimposed and displayed (also referred to as overlay display or superimposition display) on the rear image 501 (which is not a still image but is displayed in real time by a camera). Further, a shooting button 502 and a scale button 503 are displayed in the upper left portion, and a rectangular comment field 504 is displayed in the lower left portion. The comment field 504 can be freely moved so as not to overlap the portion to be photographed. The post-construction image 501 shows the wall surface W, the outlet P, the switch S, and the like. At the time of shooting, the AR marker M is placed on the shooting target location and imprinted. The AR marker M is the same as the one imprinted in the pre-construction shooting step S3. Further, the AR marker M is placed so that the center coincides with the intersection of the horizontal reference line Nh and the vertical reference line Nv, which is the same as in the pre-construction photographing step S3, and the upper and lower sides are oriented horizontally and the left and right sides are oriented vertically. To.

次に、プログラムは、携帯端末に施工後マーカ検出ステップS16を実行させる。施工後マーカ検出ステップS16では、カメラにより撮影された施工後画像501内にARマーカMが存在するか否かを検出する。ARマーカMが存在しなければ、検出が繰り返される。 Next, the program causes the mobile terminal to execute the post-construction marker detection step S16. In the post-construction marker detection step S16, it is detected whether or not the AR marker M is present in the post-construction image 501 taken by the camera. If the AR marker M is not present, the detection is repeated.

そして、施工後マーカ検出ステップS16において画像内にARマーカMが存在した場合、プログラムは、携帯端末に施工後算出ステップS17を実行させる。施工後算出ステップS17では、二次元コードからなるARマーカMの大きさ、位置および姿勢を算出する。具体的な算出方法は、既知の方法によるものであり、ここでは詳細な説明は省略する。 Then, when the AR marker M is present in the image in the post-construction marker detection step S16, the program causes the mobile terminal to execute the post-construction calculation step S17. In the post-construction calculation step S17, the size, position, and posture of the AR marker M composed of the two-dimensional code are calculated. The specific calculation method is based on a known method, and detailed description thereof will be omitted here.

次に、プログラムは、携帯端末に合成画像表示ステップS18を実行させる。合成画像表示ステップS18では、施工前算出ステップS5において算出された施工前画像201内のARマーカMの大きさ、位置および姿勢と、施工後算出ステップS17において算出された施工後画像501内のARマーカMの大きさ、位置および姿勢を基準として、施工後画像501(カメラで撮影したものがリアルタイムに表示されるもの)に、半透明施工前画像201T(施工前画像決定ステップS10において撮影ボタン202がタッチされた時点の静止画)を正確な大きさ、位置および姿勢で重ね合わせて、ディスプレイに表示させる。この施工後画像501に半透明施工前画像201Tが正確な大きさ、位置および姿勢で重ね合わせられた画像を、合成画像505とよぶ。携帯端末を動かして、ディスプレイ上におけるARマーカMの大きさ、位置や姿勢が変化すると、合成画像505における半透明施工前画像201Tもそれに合わせて変形し、施工後画像501に対する正確な大きさ、位置および姿勢が維持される。よって、合成画像505は、施工後画像501に重ねて、静止画である施工前画像201を透過処理してAR表示したもの、ということもできる。図10は、施工後画像501に対して、半透明施工前画像201Tの大きさ、位置および姿勢が調整されて重ね合わせられ、合成画像505となった状態を示す。 Next, the program causes the mobile terminal to execute the composite image display step S18. In the composite image display step S18, the size, position, and orientation of the AR marker M in the pre-construction image 201 calculated in the pre-construction calculation step S5 and the AR in the post-construction image 501 calculated in the post-construction calculation step S17. Based on the size, position, and orientation of the marker M, the post-construction image 501 (the one taken by the camera is displayed in real time) and the translucent pre-construction image 201T (pre-construction image determination step S10, the shooting button 202). (Still image at the time when is touched) is superimposed in the correct size, position and orientation, and displayed on the display. The image in which the translucent pre-construction image 201T is superimposed on the post-construction image 501 with an accurate size, position, and posture is called a composite image 505. When the size, position, and posture of the AR marker M on the display are changed by moving the mobile terminal, the translucent pre-construction image 201T in the composite image 505 is also deformed accordingly, and the exact size with respect to the post-construction image 501. Position and posture are maintained. Therefore, it can be said that the composite image 505 is an AR display of the pre-construction image 201, which is a still image, overlaid on the post-construction image 501. FIG. 10 shows a state in which the size, position, and posture of the translucent pre-construction image 201T are adjusted and superposed on the post-construction image 501 to obtain a composite image 505.

次に、施工後撮影画面500において、スケールボタン503をタッチすると、プログラムは、携帯端末に施工後スケール表示ステップS19を実行させる。施工後スケール表示ステップS19では、施工後算出ステップS17において算出されたARマーカMの大きさ、位置および姿勢に応じて、図11に示すように、合成画像505に重ねてディスプレイに施工後用スケール(施工後用水平スケールSh2および施工後用垂直スケールSv2)を表示する。これらの施工後用スケールは、施工前スケール表示ステップS6において表示される施工前用スケールと同様のものである。また併せて、ARマーカMの位置を基準として、水平基準線Nhおよび垂直基準線Nvも表示される。 Next, when the scale button 503 is touched on the post-construction shooting screen 500, the program causes the mobile terminal to execute the post-construction scale display step S19. In the post-construction scale display step S19, as shown in FIG. 11, the post-construction scale is displayed on the display by superimposing the composite image 505 according to the size, position and posture of the AR marker M calculated in the post-construction calculation step S17. (Horizontal scale Sh2 for post-construction and vertical scale Sv2 for post-construction) are displayed. These post-construction scales are the same as the pre-construction scales displayed in the pre-construction scale display step S6. At the same time, the horizontal reference line Nh and the vertical reference line Nv are also displayed with reference to the position of the AR marker M.

次に、施工後撮影画面500において、施工後用水平スケールSh2または施工後用垂直スケールSv2をタッチすると、プログラムは、携帯端末に施工後寸法表示ステップS20を実行させる。施工後寸法表示ステップS20では、施工前寸法表示ステップS7と同様に、寸法補助線D1、寸法線D2および寸法値D3が表示される。なお、施工後画像501に半透明施工前画像201Tが重ね合わせられた合成画像505に、さらに、施工後用水平スケールSh2、施工後用垂直スケールSv2および寸法補助線D1が表示されるので、施工後の仕上がった床や壁の位置を基準として、壁面下の電気配線Lまでの距離を測るなど、実物のスケールでは測ることができない部分についても、測ることができる。また、棚などの追加で取り付ける構造物を合成画像505に書き込んで、構造物の寸法や、床や壁から構造物までの距離を表示することもできる。図11においては、壁面Wに取り付ける棚Rが書き込まれており、寸法補助線D1、寸法線D2および寸法値D3により、棚Rの寸法と、仕上がった床および壁から棚Rまでの距離を示している。 Next, when the post-construction horizontal scale Sh2 or the post-construction vertical scale Sv2 is touched on the post-construction shooting screen 500, the program causes the mobile terminal to execute the post-construction dimension display step S20. In the post-construction dimension display step S20, the dimension auxiliary line D1, the dimension line D2, and the dimension value D3 are displayed as in the pre-construction dimension display step S7. The composite image 505 in which the semi-transparent pre-construction image 201T is superimposed on the post-construction image 501 further displays the post-construction horizontal scale Sh2, the post-construction vertical scale Sv2, and the dimensional auxiliary line D1. It is also possible to measure parts that cannot be measured on an actual scale, such as measuring the distance to the electrical wiring L under the wall surface, based on the position of the finished floor or wall. It is also possible to write an additional structure such as a shelf in the composite image 505 to display the dimensions of the structure and the distance from the floor or wall to the structure. In FIG. 11, a shelf R to be attached to the wall surface W is written, and the dimensions of the shelf R and the distance from the finished floor and wall to the shelf R are shown by the dimension auxiliary line D1, the dimension line D2, and the dimension value D3. ing.

次に、プログラムは、携帯端末に施工後スケール移動ステップS21を実行させる。施工後スケール移動ステップS21では、施工前スケール移動ステップS8と同様に、ディスプレイに表示された施工後用水平スケールSh2または施工後用垂直スケールSv2にタッチしてそのままドラッグする(スライドさせる)ことで、ディスプレイ上において施工後用水平スケールSh2または施工後用垂直スケールSv2を任意の位置に移動させる。そして、その操作入力を終了させる、すなわちタッチしていた指やスタイラスを離すと、プログラムは、携帯端末に施工後スケール固定ステップS22を実行させる。施工後スケール固定ステップS22では、施工前スケール固定ステップS9と同様に、施工後スケール移動ステップS21でディスプレイ上において移動された施工後用水平スケールSh2または施工後用垂直スケールSv2のARマーカMに対する相対位置を固定する。なお、もう一度施工後用水平スケールSh2または施工後用垂直スケールSv2にタッチしてドラッグすれば、再びプログラムは携帯端末に施工後スケール移動ステップS21を実行させることになり、施工後用水平スケールSh2または施工後用垂直スケールSv2を移動させることができる。施工前スケール移動ステップS8および施工前スケール固定ステップS9と同様に、施工後スケール移動ステップS21および施工後スケール固定ステップS22についても、必ずしも実行させなくてもよい。 Next, the program causes the mobile terminal to execute the post-construction scale movement step S21. In the post-construction scale moving step S21, as in the pre-construction scale moving step S8, the post-construction horizontal scale Sh2 or the post-construction vertical scale Sv2 displayed on the display is touched and dragged (sliding) as it is. The post-construction horizontal scale Sh2 or the post-construction vertical scale Sv2 is moved to an arbitrary position on the display. Then, when the operation input is completed, that is, the touched finger or stylus is released, the program causes the mobile terminal to execute the post-construction scale fixing step S22. In the post-construction scale fixing step S22, as in the pre-construction scale fixing step S9, the post-construction horizontal scale Sh2 or the post-construction vertical scale Sv2 moved on the display in the post-construction scale moving step S21 is relative to the AR marker M. Fix the position. If the post-construction horizontal scale Sh2 or the post-construction vertical scale Sv2 is touched and dragged again, the program causes the mobile terminal to execute the post-construction scale movement step S21 again, and the post-construction horizontal scale Sh2 or the post-construction vertical scale Sh2 or The vertical scale Sv2 for post-construction can be moved. Similar to the pre-construction scale moving step S8 and the pre-construction scale fixing step S9, the post-construction scale moving step S21 and the post-construction scale fixing step S22 do not necessarily have to be executed.

次に、施工後撮影画面500において、撮影ボタン502をタッチすると、プログラムは、携帯端末に施工後画像決定ステップS23を実行させる。施工後画像決定ステップS23では、ディスプレイに表示されている合成画像505(カメラで撮影したものがリアルタイムに表示される施工後画像501に、静止画である半透明施工前画像201Tを重ね合わせたもの)が、撮影ボタン502をタッチした時点の静止画となり、カメラが停止する。続いて、プログラムは、携帯端末に施工後コメント入力ステップS24を実行させる。施工後コメント入力ステップS24では、施工前コメント入力ステップS11と同様に、ディスプレイにプレビュー画面が表示される。プレビュー画面は図示省略するが、施工前コメント入力ステップS11の際と同様のものであり、小さなサイズの合成画像、各入力欄、登録ボタンおよび戻るボタンが表示される。ここで、戻るボタンをタッチすると、カメラが起動して、ディスプレイに再び施工後撮影画面500が表示され、施工後画像501の撮影をやり直すことができる。 Next, when the shooting button 502 is touched on the post-construction shooting screen 500, the program causes the mobile terminal to execute the post-construction image determination step S23. In the post-construction image determination step S23, the composite image 505 displayed on the display (the post-construction image 501 in which the image taken by the camera is displayed in real time is superimposed on the semi-transparent pre-construction image 201T which is a still image). ) Is a still image when the shooting button 502 is touched, and the camera stops. Subsequently, the program causes the mobile terminal to execute the post-construction comment input step S24. In the post-construction comment input step S24, a preview screen is displayed on the display as in the pre-construction comment input step S11. Although the preview screen is not shown, it is the same as in the pre-construction comment input step S11, and a small-sized composite image, each input field, a registration button, and a back button are displayed. Here, when the back button is touched, the camera is activated, the post-construction shooting screen 500 is displayed again on the display, and the post-construction image 501 can be retaken.

次に、プレビュー画面において、登録ボタンをタッチすると、プログラムは、携帯端末に施工後画像保存ステップS25を実行させる。施工後画像保存ステップS25では、プレビュー画面に表示されていた状態の合成画像505(施工後用水平スケールSh2、施工後用垂直スケールSv2や寸法補助線D1などが重ねて表示されたものであって、撮影ボタン502がタッチされた時点の静止画である)を、記憶装置に保存する。 Next, when the registration button is touched on the preview screen, the program causes the mobile terminal to execute the post-construction image saving step S25. In the post-construction image saving step S25, the composite image 505 (horizontal scale Sh2 for post-construction, vertical scale Sv2 for post-construction, extension line D1 and the like) displayed on the preview screen are superimposed and displayed. , It is a still image at the time when the shooting button 502 is touched) is saved in the storage device.

次に、プログラムは、携帯端末に施工後紐付けステップS26を実行させる。施工後紐付けステップS26では、施工後画像保存ステップS25において保存された合成画像505を、その撮影時にタッチした平面図101上の目印102に紐付ける処理が行われ、その結果が記憶装置に保存される。これにより、以後、図面表示画面100において、合成画像505が紐付けられた目印102をタッチすると、ディスプレイに、その合成画像505についてのプレビュー画面が表示される。さらに、この目印102には施工前画像201も紐付けられており、スワイプ操作によって、合成画像505のプレビュー画面と施工前画像201のプレビュー画面を切り替えられる。 Next, the program causes the mobile terminal to execute the post-construction linking step S26. In the post-construction linking step S26, the composite image 505 saved in the post-construction image saving step S25 is linked to the mark 102 on the plan view 101 touched at the time of shooting, and the result is saved in the storage device. Will be done. As a result, thereafter, when the mark 102 associated with the composite image 505 is touched on the drawing display screen 100, a preview screen for the composite image 505 is displayed on the display. Further, the pre-construction image 201 is also associated with the mark 102, and the preview screen of the composite image 505 and the preview screen of the pre-construction image 201 can be switched by a swipe operation.

次に、プログラムは、携帯端末に色変更ステップS27を実行させる。色変更ステップS27では、施工後紐付けステップS26において合成画像505が紐付けられた目印102の色を変更する(たとえば、赤色から緑色に変更する)。これにより、平面図101上において、合成画像505と施工前画像201の両方が紐付けられた目印102と、施工前画像201のみが紐付けられた目印102を、見分けることができる。 Next, the program causes the mobile terminal to execute the color change step S27. In the color change step S27, the color of the mark 102 to which the composite image 505 is linked is changed (for example, changed from red to green) in the post-construction linking step S26. Thereby, on the plan view 101, the mark 102 to which both the composite image 505 and the pre-construction image 201 are associated and the mark 102 to which only the pre-construction image 201 is associated can be distinguished.

以上で、このプログラムの一連の動作が終了する。複数の対象箇所を撮影する際には、この一連の動作を繰り返すことになる。 This completes the series of operations of this program. When shooting a plurality of target locations, this series of operations is repeated.

次に、上記の施工現場記録用プログラムにより制御される携帯端末およびARマーカを用いた、鉄筋コンクリート造の建築物の屋内における電気配線およびその電気配線を覆い隠すように設けられる壁面の施工ならびに完成後に壁面に棚を追加して設ける施工について、その工程を説明する。
(1)図面入力工程
施工現場となる建築物の平面図を、携帯端末の記憶装置に保存させる。この際、平面図のデータが保存された記憶媒体を携帯端末に接続して直接読み込ませてもよいし、携帯端末の通信装置によりサーバとインターネット接続して、サーバに保存された平面図をダウンロードしてもよい。複数の階層または複数の建築物が対象となるのであれば、複数の平面図を保存させる。
(2)前期施工工程
ここでは、上記で「施工前」としていた部分の工程を、前期施工工程とよぶ。すなわち、前期施工工程では、鉄筋コンクリートの床、天井、柱や壁を設け、所定の位置にLGSからなる間柱を設ける。そして、間柱の所定の位置にアームを設け、このアームにボックスを取り付けて、さらにボックスに電気配線を接続するまでの工程を行う。
(3)施工前撮影工程
「施工前」の状態において、携帯端末のカメラにより、施工現場を撮影して、施工前画像を得る。その際、所定の水平基準線と垂直基準線の交点にARマーカの中心を一致させて、写し込む。ARマーカは、台の上に載置してもよいし、撮影者とは別の作業者が保持してもよい。カメラによりARマーカを写し込ませることで、携帯端末のディスプレイには施工前用水平スケールおよび施工前用垂直スケールが表示されるので、これを適宜移動させる。また、必要な寸法補助線、寸法線および寸法値を表示させる。さらに、撮影日時や撮影者名など、必要事項を入力する。
(4)後期施工工程
ここでは、上記で「施工後」としていた部分の工程を、後期施工工程とよぶ。すなわち、後期施工工程では、間柱に壁面を取り付けて電気配線を覆い隠し、ボックスには機能に応じたカバーを取り付ける。そして、壁面の表面にクロスを貼るなどして仕上げ、さらに床や天井にも仕上げ材を取り付けて、建築物の内装を完成させるまでの工程を行う。
(5)施工後撮影工程
「施工後」の状態において、壁面に追加の工事が必要となった場合に、携帯端末のカメラにより、施工現場を撮影して、施工後画像を得る。その際、所定の水平基準線と垂直基準線の交点にARマーカの中心を一致させて、写し込む。壁面や、床・天井の仕上げ材が設けられているので、それらの面を基準に、水平基準線および垂直基準線の位置が割り出される。施工前撮影工程と同様に、ARマーカは、台の上に載置してもよいし、撮影者とは別の作業者が保持してもよい。そして、施工前後のARマーカを基準として、施工後画像に半透明化した施工前画像が重ね合わせられて、合成画像を得る。さらに、携帯端末のディスプレイには施工後用水平スケールおよび施工後用垂直スケールが表示されるので、これを適宜移動させる。また、必要な寸法補助線、寸法線および寸法値を表示させる。さらに、撮影日時や撮影者名など、必要事項を入力する。
(6)追加施工工程
合成画像により、壁面の下の電気配線の位置を確認し、電気配線を傷付けないようにして、壁面に棚を取り付ける。以上で、一連の工程が完了する。
Next, using the mobile terminal and AR marker controlled by the above construction site recording program, the electrical wiring inside the reinforced concrete building and the wall surface provided so as to cover the electrical wiring are constructed and after completion. The process of adding shelves to the wall surface will be explained.
(1) Drawing input process The plan view of the building to be the construction site is stored in the storage device of the mobile terminal. At this time, the storage medium in which the floor plan data is stored may be connected to the mobile terminal and read directly, or the communication device of the mobile terminal may be connected to the server via the Internet to download the floor plan stored in the server. You may. If multiple floors or multiple buildings are targeted, multiple floor plans are saved.
(2) Early-stage construction process Here, the process of the part that was referred to as "before construction" above is called the previous-stage construction process. That is, in the first-half construction process, reinforced concrete floors, ceilings, columns and walls are provided, and studs made of LGS are provided at predetermined positions. Then, an arm is provided at a predetermined position of the stud, a box is attached to the arm, and a process of connecting electrical wiring to the box is performed.
(3) Pre-construction shooting process In the "pre-construction" state, the construction site is photographed with a camera of a mobile terminal to obtain a pre-construction image. At that time, the center of the AR marker is aligned with the intersection of the predetermined horizontal reference line and the vertical reference line, and the image is imprinted. The AR marker may be placed on a table or may be held by an operator other than the photographer. By imprinting the AR marker with the camera, the horizontal scale for pre-construction and the vertical scale for pre-construction are displayed on the display of the mobile terminal, and these are moved as appropriate. In addition, the necessary extension lines, dimension lines and dimension values are displayed. In addition, enter the necessary information such as the shooting date and time and the photographer's name.
(4) Late construction process Here, the process of the part referred to as "after construction" above is called the late construction process. That is, in the late construction process, a wall surface is attached to the studs to cover the electrical wiring, and a cover according to the function is attached to the box. Then, a cloth is attached to the surface of the wall surface for finishing, and a finishing material is also attached to the floor and ceiling to complete the interior of the building.
(5) Post-construction shooting process When additional work is required on the wall surface in the “post-construction” state, the construction site is photographed with a camera of a mobile terminal to obtain a post-construction image. At that time, the center of the AR marker is aligned with the intersection of the predetermined horizontal reference line and the vertical reference line, and the image is imprinted. Since wall surface and floor / ceiling finishing materials are provided, the positions of the horizontal reference line and the vertical reference line are determined based on those surfaces. Similar to the pre-construction photographing step, the AR marker may be placed on a table or may be held by an operator other than the photographer. Then, with the AR markers before and after the construction as a reference, the translucent pre-construction image is superimposed on the post-construction image to obtain a composite image. Further, since the display of the mobile terminal shows the horizontal scale for post-construction and the vertical scale for post-construction, they are moved as appropriate. In addition, the necessary extension lines, dimension lines and dimension values are displayed. In addition, enter the necessary information such as the shooting date and time and the photographer's name.
(6) Additional construction process Confirm the position of the electrical wiring under the wall surface by the composite image, and attach the shelf to the wall surface without damaging the electrical wiring. This completes a series of steps.

このような施工現場記録用プログラムにより制御される携帯端末によれば、携帯端末の表示部に、施工後画像に半透明化した施工前画像を重ね合わせた合成画像を表示するものであるから、施工前の現場の状況について、施工後の現場との位置関係の対応が、直感的にわかりやすい。たとえば、上記のように、建築物の屋内の壁面の施工後の画像に、壁面を施工する前の配線が露出した状態の画像を半透明化して重ね合わせることで、壁面下のどこに配線が位置しているのかを、直感的に把握することができる。また、施工前画像と施工後画像の合成は、画像内のARマーカが基準となるので、容易かつ正確に位置合わせされる。 According to the mobile terminal controlled by such a construction site recording program, a composite image in which a semi-transparent pre-construction image is superimposed on the post-construction image is displayed on the display unit of the mobile terminal. It is easy to intuitively understand the situation of the site before construction and the correspondence with the site after construction. For example, as described above, by superimposing the image of the exposed wiring before the wall construction on the image after construction of the indoor wall surface of the building, the wiring is located under the wall surface. You can intuitively understand what you are doing. Further, since the AR marker in the image is used as a reference for the composition of the pre-construction image and the post-construction image, the alignment is easily and accurately performed.

また、施工前と施工後のそれぞれにおいて、ARマーカに対応して携帯端末の表示部にスケールを表示するものであり、実物のスケールを用いることなく、現場の各部の大きさや距離を表すためのスケールを表示できるので、実物のスケールの設置の手間がかからず、撮影が容易である。そして、特に施工後において合成画像に施工後用スケールを表示できるので、施工後の構造物と、施工前にしか見えない構造物(施工後には別の構造物に隠される構造物)との間の距離など、実物のスケールでは測ることができない部分についても、測ることが可能である。たとえば、建築物の屋内において、施工後の仕上がった床や壁の位置を基準として、壁面下の配線までの距離を測ることができる。これにより、施工前の現場の状況について、施工後の現場との位置関係の対応を、より正確に把握できる。さらに、上記のように、追加で取り付ける構造物を合成画像に書き込んで、構造物の寸法や、床や壁から構造物までの距離を表示することもできる。 In addition, the scale is displayed on the display unit of the mobile terminal corresponding to the AR marker before and after the construction, and the size and distance of each part of the site can be displayed without using the actual scale. Since the scale can be displayed, it is easy to take a picture without the trouble of installing the actual scale. And since the scale for post-construction can be displayed on the composite image especially after construction, between the structure after construction and the structure that can be seen only before construction (the structure hidden by another structure after construction). It is possible to measure parts that cannot be measured on the actual scale, such as the distance between the two. For example, inside a building, the distance to the wiring under the wall surface can be measured based on the position of the finished floor or wall after construction. As a result, it is possible to more accurately grasp the correspondence between the situation of the site before the construction and the positional relationship with the site after the construction. Further, as described above, the structure to be additionally attached can be written in the composite image to display the dimensions of the structure and the distance from the floor or wall to the structure.

また、施工前と施工後のそれぞれにおいて、携帯端末の表示部に表示されたスケールを任意の位置に移動し固定できるので、より撮影が容易である。すなわち、基本的にスケールはARマーカの位置に表示されるものであるが、現場の状況によっては、スケールを表示させたい最適な場所にARマーカを保持できない場合もある。そのような場合でも、表示部上において容易にスケールの位置を調整できる。そして、スケールを移動させた後は、ARマーカに対する相対位置が固定されるので、さらに携帯端末の向きや位置を変えて撮影のアングルなどを調整できる。 Further, since the scale displayed on the display unit of the mobile terminal can be moved and fixed at an arbitrary position before and after the construction, it is easier to take a picture. That is, the scale is basically displayed at the position of the AR marker, but depending on the situation at the site, the AR marker may not be held at the optimum place where the scale is to be displayed. Even in such a case, the position of the scale can be easily adjusted on the display unit. Then, after moving the scale, the relative position with respect to the AR marker is fixed, so that the direction and position of the mobile terminal can be further changed to adjust the shooting angle and the like.

また、携帯端末の表示部に図面を表示し、図面上の目印に施工前画像と合成画像を紐付けし、さらに合成画像が紐付けられた目印の色を変更するものであり、図面上の目印の色によって、施工前画像のみが紐付けられているのか、施工前画像と合成画像の両方が紐付けられているのかが一目で見分けられるので、より使い勝手がよい。 In addition, the drawing is displayed on the display unit of the mobile terminal, the pre-construction image and the composite image are linked to the mark on the drawing, and the color of the mark to which the composite image is linked is changed. Depending on the color of the mark, it is easier to use because it can be distinguished at a glance whether only the pre-construction image is linked or both the pre-construction image and the composite image are linked.

本発明は、上記の実施形態に限定されない。たとえば、施工現場記録用プログラムは、図1(a)、(b)のフローチャートで示したものに対して、処理の順序が異なるもの、一部の処理を除外したもの、または他の処理を付加したものであってもよい。処理の順序が異なるものの例として、施工前画像決定ステップS10が、施工前スケール表示ステップS6と施工前寸法表示ステップS7の間に実行されるものであってもよい。この場合、施工前画像決定ステップS10において静止画となった施工前画像上で、寸法線などの表示(施工前寸法表示ステップS7)や、スケールの移動・固定(施工前スケール移動ステップS8、施工前スケール固定ステップS9)が行われる。同様に、施工後画像決定ステップS23が、施工後スケール表示ステップS19と施工後寸法表示ステップS20の間に実行されるものであってもよい。この場合、施工後画像決定ステップS23において静止画となった合成画像上で、寸法線などの表示(施工後寸法表示ステップS20)や、スケールの移動・固定(施工後スケール移動ステップS21、施工後スケール固定ステップS22)が行われる。また、上記で説明した各画面のUI(ユーザーインターフェース)は一例であり、ボタンやその他の表示される要素の位置、大きさ、形状や表示順などが異なるものであってもよい。さらに、この施工現場記録用プログラムを、建築物の屋内配線以外の施工現場の記録のために用いてもよい。 The present invention is not limited to the above embodiments. For example, the construction site recording program has a different processing order, some processing is excluded, or other processing is added to the one shown in the flowcharts of FIGS. 1 (a) and 1 (b). It may be the one that has been used. As an example of the process in which the order of processing is different, the pre-construction image determination step S10 may be executed between the pre-construction scale display step S6 and the pre-construction dimension display step S7. In this case, on the pre-construction image that became a still image in the pre-construction image determination step S10, display of dimension lines and the like (pre-construction dimension display step S7) and movement / fixing of the scale (pre-construction scale movement step S8, construction). The pre-scale fixing step S9) is performed. Similarly, the post-construction image determination step S23 may be executed between the post-construction scale display step S19 and the post-construction dimension display step S20. In this case, on the composite image that became a still image in the post-construction image determination step S23, display of dimension lines and the like (post-construction dimension display step S20) and movement / fixing of the scale (post-construction scale movement step S21, post-construction) Scale fixing step S22) is performed. Further, the UI (user interface) of each screen described above is an example, and the positions, sizes, shapes, display orders, and the like of buttons and other displayed elements may be different. Furthermore, this construction site recording program may be used for recording construction sites other than indoor wiring of buildings.

S1 図面表示ステップ
S2 目印表示ステップ
S3 施工前撮影ステップ
S4 施工前マーカ検出ステップ
S5 施工前算出ステップ
S6 施工前スケール表示ステップ
S8 施工前スケール移動ステップ
S9 施工前スケール固定ステップ
S13 施工前紐付けステップ
S15 施工後撮影ステップ
S16 施工後マーカ検出ステップ
S17 施工後算出ステップ
S18 合成画像表示ステップ
S19 施工後スケール表示ステップ
S21 施工後スケール移動ステップ
S22 施工後スケール固定ステップ
S26 施工後紐付けステップ
S27 色変更ステップ

S1 Drawing display step S2 Mark display step S3 Pre-construction shooting step S4 Pre-construction marker detection step S5 Pre-construction calculation step S6 Pre-construction scale display step S8 Pre-construction scale movement step S9 Pre-construction scale fixing step S13 Pre-construction tying step S15 Construction Post-shooting step S16 Post-construction marker detection step S17 Post-construction calculation step S18 Post-construction image display step S19 Post-construction scale display step S21 Post-construction scale movement step S22 Post-construction scale fixing step S26 Post-construction linking step S27 Color change step

Claims (4)

施工現場において施工前後の現場の状況を記録するために用いられるものであって、
現場を撮影する撮影部と、前記撮影部により撮影された画像を表示する表示部と、操作入力を受け付ける入力部と、を有する携帯端末に、
前記入力部への操作入力に応じて、前記撮影部により施工前の現場を撮影して施工前画像を取得し前記表示部に表示する施工前撮影ステップと、
前記施工前画像内にARマーカが存在するか否かを検出する施工前マーカ検出ステップと、
前記施工前画像内に前記ARマーカが存在する場合にその大きさ、位置および姿勢を算出する施工前算出ステップと、
前記入力部への操作入力に応じて、前記撮影部により施工後の現場を撮影して施工後画像を取得し前記表示部に表示する施工後撮影ステップと、
前記施工後画像内に前記ARマーカが存在するか否かを検出する施工後マーカ検出ステップと、
前記施工後画像内に前記ARマーカが存在する場合にその大きさ、位置および姿勢を算出する施工後算出ステップと、
前記施工前算出ステップと前記施工後算出ステップにおいて算出された前記ARマーカの大きさ、位置および姿勢を基準として前記施工後画像に半透明化した前記施工前画像を重ね合わせた合成画像を表示部に表示する合成画像表示ステップと、
を実行させることを特徴とする施工現場記録用プログラム。
It is used to record the situation before and after construction at the construction site.
A mobile terminal having a photographing unit for photographing a scene, a display unit for displaying an image photographed by the photographing unit, and an input unit for receiving an operation input.
In response to the operation input to the input unit, the pre-construction shooting step of photographing the site before construction by the photographing unit, acquiring the pre-construction image, and displaying it on the display unit,
A pre-construction marker detection step for detecting whether or not an AR marker is present in the pre-construction image, and
A pre-construction calculation step for calculating the size, position, and posture of the AR marker when the AR marker is present in the pre-construction image, and
In response to the operation input to the input unit, the post-construction shooting step of photographing the site after construction by the photographing unit, acquiring the post-construction image, and displaying it on the display unit.
A post-construction marker detection step for detecting whether or not the AR marker is present in the post-construction image,
A post-construction calculation step for calculating the size, position, and posture of the AR marker when the AR marker is present in the post-construction image.
The display unit displays a composite image in which the semi-transparent pre-construction image is superimposed on the post-construction image based on the size, position and posture of the AR marker calculated in the pre-construction calculation step and the post-construction calculation step. The composite image display step to be displayed in
A program for recording construction sites, which is characterized by executing.
前記携帯端末に、
前記施工前画像内の前記ARマーカの大きさ、位置および姿勢に応じて前記施工前画像に施工前用スケールを重ねて前記表示部に表示する施工前スケール表示ステップと、
前記合成画像内の前記ARマーカの大きさ、位置および姿勢に応じて前記合成画像に施工後用スケールを重ねて前記表示部に表示する施工後スケール表示ステップと、
を実行させることを特徴とする請求項1記載の施工現場記録用プログラム。
To the mobile terminal
A pre-construction scale display step of superimposing a pre-construction scale on the pre-construction image and displaying it on the display unit according to the size, position, and posture of the AR marker in the pre-construction image.
A post-construction scale display step of superimposing a post-construction scale on the composite image and displaying it on the display unit according to the size, position, and posture of the AR marker in the composite image.
The construction site recording program according to claim 1, wherein the program is executed.
前記携帯端末に、
前記入力部への操作入力に応じて、前記表示部に表示された前記施工前用スケールを任意の位置に移動して表示させる施工前スケール移動ステップと、
前記施工前スケール移動ステップ終了後に、移動した前記施工前用スケールの前記ARマーカに対する相対位置を固定する施工前スケール固定ステップと、
前記入力部への操作入力に応じて、前記表示部に表示された前記施工後用スケールを任意の位置に移動して表示させる施工後スケール移動ステップと、
前記施工後スケール移動ステップ終了後に、移動した前記施工後用スケールの前記ARマーカに対する相対位置を固定する施工後スケール固定ステップと、
を実行させることを特徴とする請求項2記載の施工現場記録用プログラム。
To the mobile terminal
A pre-construction scale moving step of moving the pre-construction scale displayed on the display unit to an arbitrary position and displaying the scale in response to an operation input to the input unit.
After the completion of the pre-construction scale moving step, the pre-construction scale fixing step for fixing the relative position of the moved pre-construction scale with respect to the AR marker, and the pre-construction scale fixing step.
A post-construction scale moving step in which the post-construction scale displayed on the display unit is moved to an arbitrary position and displayed in response to an operation input to the input unit.
After the completion of the post-construction scale moving step, the post-construction scale fixing step for fixing the relative position of the moved post-construction scale with respect to the AR marker, and the post-construction scale fixing step.
2. The construction site recording program according to claim 2, wherein the program is executed.
前記携帯端末に、
施工現場の図面を前記表示部に表示する図面表示ステップと、
前記入力部への操作入力に応じて、前記図面上の撮影対象箇所に目印を表示する目印表示ステップと、
前記施工前画像を前記目印に紐付ける施工前紐付けステップと、
前記合成画像を前記目印に紐付ける施工後紐付けステップと、
前記合成画像が紐付けられた前記目印の色を変更する色変更ステップと、
を実行させることを特徴とする請求項1、2または3記載の施工現場記録用プログラム。

To the mobile terminal
A drawing display step for displaying a drawing of a construction site on the display unit,
A mark display step for displaying a mark at a shooting target location on the drawing in response to an operation input to the input unit, and a mark display step.
The pre-construction tying step of tying the pre-construction image to the mark, and
Post-construction linking step of linking the composite image to the mark,
A color change step for changing the color of the mark to which the composite image is associated, and
The construction site recording program according to claim 1, 2 or 3, wherein the program is executed.

JP2019197169A 2019-10-30 2019-10-30 Construction site recording program Active JP7346245B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019197169A JP7346245B2 (en) 2019-10-30 2019-10-30 Construction site recording program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019197169A JP7346245B2 (en) 2019-10-30 2019-10-30 Construction site recording program

Publications (2)

Publication Number Publication Date
JP2021071839A true JP2021071839A (en) 2021-05-06
JP7346245B2 JP7346245B2 (en) 2023-09-19

Family

ID=75713148

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019197169A Active JP7346245B2 (en) 2019-10-30 2019-10-30 Construction site recording program

Country Status (1)

Country Link
JP (1) JP7346245B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023042981A (en) * 2021-09-15 2023-03-28 株式会社日立プラントコンストラクション Display apparatus, program, and display method

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007228315A (en) 2006-02-24 2007-09-06 Mitsubishi Heavy Ind Ltd System for supporting construction work and inspection for structure inside building
JP5682060B2 (en) 2010-12-20 2015-03-11 国際航業株式会社 Image composition apparatus, image composition program, and image composition system
JP6071746B2 (en) 2013-05-21 2017-02-01 三菱電機ビルテクノサービス株式会社 Information providing apparatus and information providing system
JP5709190B1 (en) 2014-03-31 2015-04-30 一般財団法人住まいづくりナビセンター Method and program for assisting and displaying comparative photographs

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023042981A (en) * 2021-09-15 2023-03-28 株式会社日立プラントコンストラクション Display apparatus, program, and display method

Also Published As

Publication number Publication date
JP7346245B2 (en) 2023-09-19

Similar Documents

Publication Publication Date Title
CN109584295B (en) Method, device and system for automatically labeling target object in image
CN101533312B (en) Auto-aligning touch system and method
JP4508049B2 (en) 360 ° image capturing device
JP6255706B2 (en) Display control apparatus, display control method, display control program, and information providing system
JP4537557B2 (en) Information presentation system
EP3489627B1 (en) True to size 3d-model conglomeration
JP6471986B2 (en) Portable electronic device and program for photography and management
US20150317070A1 (en) Mobile handheld instruments and methods
JP2019191927A (en) Structure inspection system and inspection method
CN103782325A (en) Information display program and information display device
JP2020098568A (en) Information management device, information management system, information management method, and information management program
JP6910603B2 (en) Construction management system, construction management method, mobile terminal and program
US11395102B2 (en) Field cooperation system and management device
JP2017151026A (en) Three-dimensional information acquiring device, three-dimensional information acquiring method, and program
JP7346245B2 (en) Construction site recording program
JP2023118798A (en) Program, building facility display method, building facility display system and terminal device
CN111161350B (en) Position information and position relation determining method, position information acquiring device
JP7202805B2 (en) Construction record program
JP2016139199A (en) Image processing device, image processing method, and program
JP5691630B2 (en) Image composition method
JP6504703B2 (en) Imaging apparatus and imaging method
JP2002344963A (en) Photographing information attaching device
JP2005018385A (en) Operation information providing device
WO2023224031A1 (en) Information processing method, information processing device, and information processing program
WO2023224033A1 (en) Information processing method, information processing device, and information processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220720

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230410

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230822

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230906

R150 Certificate of patent or registration of utility model

Ref document number: 7346245

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150