JP6648971B2 - Structure inspection device - Google Patents

Structure inspection device Download PDF

Info

Publication number
JP6648971B2
JP6648971B2 JP2015037899A JP2015037899A JP6648971B2 JP 6648971 B2 JP6648971 B2 JP 6648971B2 JP 2015037899 A JP2015037899 A JP 2015037899A JP 2015037899 A JP2015037899 A JP 2015037899A JP 6648971 B2 JP6648971 B2 JP 6648971B2
Authority
JP
Japan
Prior art keywords
defect
image
rotary wing
camera
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015037899A
Other languages
Japanese (ja)
Other versions
JP2015194069A (en
Inventor
弦 関原
弦 関原
悠 森時
悠 森時
クオク ズン レ
クオク ズン レ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujita Corp
Original Assignee
Fujita Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujita Corp filed Critical Fujita Corp
Priority to JP2015037899A priority Critical patent/JP6648971B2/en
Publication of JP2015194069A publication Critical patent/JP2015194069A/en
Application granted granted Critical
Publication of JP6648971B2 publication Critical patent/JP6648971B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、構造物表面における不良の有無を点検する構造物の点検装置に関する。   The present invention relates to a structure inspection device for inspecting the structure surface for defects.

ダムやビル、高架橋等の構造物では、建設中から建設後に渡って、不良の有無を確認する点検作業が行われている。
従来、このような点検作業は、総足場組み立てや高所作業車を使用するなどして、人手によって行うのが一般的である。
例えば、下記特許文献1では、天井下地材上を作業員が歩いて点検・修理を行う場合にも、十分な強度を維持できるとともに、耐震性能に優れた天井下地構造を提供する技術が開示されている。
For structures such as dams, buildings, viaducts, etc., inspection work is being carried out during construction and after construction to check for defects.
Conventionally, such an inspection work is generally performed manually by assembling a total scaffold or using an aerial work vehicle.
For example, Patent Literature 1 below discloses a technology that provides a ceiling base structure that can maintain sufficient strength and is excellent in seismic performance even when a worker walks on a ceiling base material to perform inspection and repair. ing.

特開2013−036316号公報JP 2013-0331616 A

しかしながら、人手による点検作業には、高所作業等、危険が伴う場合があり、また人が近づけない場所で点検が必要となる可能性もある。
また、人手による点検作業では点検作業者によって点検結果がバラつく可能性もある。
さらに、大規模な構造物では、点検のために作業者が構造物内を巡回する時間、点検結果を集計する時間など、点検作業に多大な時間が必要となるという課題がある。
However, manual inspection work may involve dangers, such as working at heights, and may require inspection in a place that is inaccessible to humans.
In addition, in the case of manual inspection work, there is a possibility that the inspection result varies depending on the inspection worker.
Further, in a large-scale structure, there is a problem that a large amount of time is required for the inspection work, such as a time for an operator to go around the structure for the inspection and a time for counting the inspection results.

本発明は、上述した従来技術の問題点に鑑みてなされたものであり、効率的かつ安全に構造物の点検作業を行うことを目的とする。   The present invention has been made in view of the above-described problems of the related art, and has as its object to efficiently and safely inspect a structure.

上述した問題を解決し、目的を達成するため、本発明は、構造物表面における不良の有無を点検する構造物の点検装置であって、無線操縦式の回転翼機と、前記回転翼機に搭載され、前記構造物表面の画像を連続的に撮影するカメラと、前記カメラで撮影された前記画像を画像解析して、前記構造物に不良があるか否かを判定する判定手段と、前記構造物に不良がある場合に報知する報知手段と、前記回転翼機の現在位置を特定する位置特定手段とを備え、前記位置特定手段によって特定された現在位置は、前記画像とともに当該画像が撮影された位置を示す位置情報として記録され、前記判定手段は、前記画像に前記構造物の不良を示す事象が映っている場合に前記構造物に不良があると判定するとともに、前記画像とともに記録された前記位置情報を用いて前記不良を示す事象が発生している前記構造物上の位置を不良箇所位置として特定するものであり、前記構造物の三次元形状を測定する三次元形状取得手段と、前記三次元形状から前記構造物の三次元モデルを生成すると共に、前記三次元モデルと前記不良箇所位置とを関連付けた三次元不良箇所情報を生成する三次元データ生成手段と、前記構造物の三次元モデルを平面に展開することで前記構造物の展開図を生成する展開図生成手段と、前記カメラで撮影された前記画像を画像解析して、前記構造物の不良箇所の評価内容を示す不良計測情報を生成する不良計測情報生成手段とをさらに備え、前記報知手段は、前記構造物に不良がある場合、前記三次元不良箇所情報に基づいて前記構造物の三次元モデルと共に前記不良箇所を画面に表示し、前記三次元不良箇所情報に基づいて前記構造物の展開図と共に前記不良箇所を前記画面に表示し、前記報知手段による前記三次元不良箇所情報に基づく画面表示は、前記不良箇所の周辺の前記三次元モデルの部分と共に前記不良箇所を表示する第1画面と、前記構造物の全体の前記三次元モデルと共に前記前記不良箇所を表示する第2画面とを同一の画面上に表示することでなされ、前記第2画面は前記第1画面よりも小さい面積で前記第1画面上に表示され、さらに前記報知手段は、前記構造物の三次元形状の画像と前記三次元不良箇所情報と前記不良計測情報とを対応付けて報知し、前記報知手段による前記報知は、前記第1画面上に、前記不良箇所の場所および前記不良箇所の不良内容を説明する第1メッセージと、前記不良計測情報に関する第2メッセージとを表示することでなされる、ことを特徴とする。
また、本発明は、前記回転翼機は、予め定められた飛行経路および飛行速度で飛行し、前記カメラは、前記回転翼機が飛行を開始した時刻からの経過時間を前記画像とともに記録し、前記判定手段は、前記飛行経路、前記飛行速度、および前記画像とともに記録された前記経過時刻とを用いて前記不良を示す事象が発生している位置を特定する、ことを特徴とする。
また、本発明は、前記回転翼機は、前記構造物の周辺を所定期間ごとに同じ飛行経路で飛行し、前記カメラは、撮影ごとに同じ角度から前記構造物を撮影し、前記判定手段は、前記画像に前記不良を示す事象が映っている場合には、前記画像より前に撮影された過去画像と比較して、当該不良を示す事象が生じた日時を推定する、ことを特徴とする。
また、本発明は、前記カメラは全方位カメラあるいは全天球カメラである、ことを特徴とする。
また、本発明は、前記回転翼機に設けられ、前記構造物表面に当接することで前記構造物表面と前記回転翼機との距離を一定に保持しつつ、前記構造物表面に沿って前記回転翼機に移動を案内する案内手段を備える、ことを特徴とする。
また、本発明は、前記回転翼機に設けられ、前記構造物表面に対して吸着することで前記構造物表面と前記回転翼機との距離を一定に保持し、前記構造物表面に対する吸着を解除することで前記回転翼機の移動を許容する吸着手段を備える、ことを特徴とする。
また、本発明は、前記回転翼機に設けられ前記構造物表面を叩打する叩打手段と、前記回転翼機に設けられ前記構造物表面から発生する打音を検出する検出手段と、前記検出手段で検出された打音に基づいて前記構造物表面の不良の有無を判定する打音判定手段と、前記構造物表面の不良があると判定された場合に、当該不良を示す事象が発生している前記構造物上の位置を検出する位置検出手段とを備え、前記報知手段は、前記構造物表面の不良がある場合、当該不良を前記構造物上の位置とともに報知する、ことを特徴とする。
In order to solve the above-described problems and achieve the object, the present invention is a structure inspection device that inspects for the presence or absence of a defect on a structure surface, comprising a radio-controlled rotary wing machine, A camera that is mounted and continuously captures an image of the surface of the structure, and an image analysis unit that analyzes the image captured by the camera to determine whether the structure has a defect. It has a notifying means for notifying when there is a defect in the structure, and a position specifying means for specifying a current position of the rotary wing aircraft, and the current position specified by the position specifying means is obtained by capturing the image together with the image. Is recorded as position information indicating the position of the structure, and the determination unit determines that the structure has a defect when an event indicating the defect of the structure is reflected in the image, and is recorded together with the image. Before A position on the structure where the event indicating the defect has occurred using the position information is specified as a defective portion position, and a three-dimensional shape acquisition unit that measures a three-dimensional shape of the structure, A three-dimensional data generation unit that generates a three-dimensional model of the structure from a three-dimensional shape, and generates three-dimensional defect location information in which the three-dimensional model and the defect location are associated with each other; A development view generation means for generating a development view of the structure by developing the model on a plane, and a failure measurement indicating an evaluation content of a failure portion of the structure by analyzing an image of the image taken by the camera anda defect measurement information generation means for generating information, the notification means, if there is a defect in the structure, the together the three-dimensional model of the structure based on the three-dimensional defect point information not Displays on screen, the said defective portion displayed on the screen along with the developed view of the structure based on the three-dimensional defective portion information, the screen display based on the three-dimensional defective portion information by the notifying means, the A first screen for displaying the defective portion together with the portion of the three-dimensional model around the defective portion, and a second screen for displaying the defective portion together with the three-dimensional model of the entire structure are on the same screen. The second screen is displayed on the first screen with an area smaller than the first screen, and the notifying means further includes a three-dimensional image of the structure and the three-dimensional defect. The location information and the failure measurement information are associated with each other and reported, and the notification by the reporting unit is provided on the first screen by a first message explaining the location of the failure location and the failure content of the failure location. And a second message relating to the failure measurement information is displayed .
Further, according to the present invention, the rotary wing aircraft flies in a predetermined flight path and flight speed, and the camera records the elapsed time from the time when the rotary wing aircraft started flying, together with the image, The determination unit specifies a position where an event indicating the failure has occurred using the flight path, the flight speed, and the elapsed time recorded together with the image.
Further, according to the present invention, the rotary wing aircraft flies around the structure on the same flight path every predetermined period, the camera takes an image of the structure from the same angle for each photographing, In the case where the event indicating the defect is reflected in the image, the date and time when the event indicating the defect has occurred are estimated by comparing with a past image taken before the image. .
Further, the present invention is characterized in that the camera is an omnidirectional camera or an omnidirectional camera.
Further, the present invention is provided on the rotary wing machine, while maintaining a constant distance between the structure surface and the rotary wing machine by abutting the structure surface, along the structure surface along the structure surface It is provided with the guide means which guides movement to a rotary wing machine.
Further, the present invention is provided on the rotary wing machine, and holds the distance between the structure surface and the rotary wing machine constant by adsorbing to the surface of the structure, thereby adsorbing the surface of the structure. It is characterized by comprising suction means for allowing movement of the rotary wing machine by releasing.
The present invention also provides a tapping means provided on the rotary wing machine for hitting the surface of the structure, a detecting means provided on the rotary wing machine for detecting a tapping sound generated from the surface of the structure, and the detecting means A tapping sound determining means for determining the presence or absence of a defect on the surface of the structure based on the tapping sound detected in the above, and when it is determined that there is a defect on the surface of the structure, an event indicating the defect occurs. Position detecting means for detecting a position on the structure, wherein the notifying means, when there is a defect on the surface of the structure, notifies the defect together with the position on the structure. .

発明によれば、無線操縦式の回転翼機に搭載されたカメラで構造物の画像を撮影し、当該画像を画像解析して構造物に不良があるか否かを判定する。これにより、人が近づけない場所の点検が可能となり、構造物の安全性を向上させることができる。また、人手により点検作業を行うのと比較して、高所等における事故を防止して作業の安全性を向上させることができる。また、人手により点検作業を行うのと比較して、短時間で点検作業を完了させることができる。また、人手により点検作業を行うのと比較して、点検結果のバラつきを少なくし、点検作業の作業品質を向上させることができる。
また、本発明によれば、構造物に不良がある場合に報知する報知手段を備え、構造物に不良がある場合、当該不良を構造物上の位置とともに報知するので、不良が生じている箇所を容易に特定することができ、不良への対応を迅速に行うことができる。
また、本発明によれば、画像が撮影された位置を示す位置情報を画像とともに記録して、不良を示す事象が発生している位置の特定に用いるので、点検作業ごとに回転翼機の飛行経路が異なる場合でも不良箇所の位置を特定することができる。
また、本発明によれば、予め定められた回転翼機の飛行経路、飛行速度、および回転翼機からの経過時刻を用いて不良を示す事象が発生している位置を特定するので、位置特定手段を用いずに不良箇所の位置を特定することができ、点検装置のコストを低減することができる。
また、本発明によれば、不良を示す事象が生じた日時を推定するので、不良が生じた原因を推定しやすくなり、より的確な方法で不良に対応できる可能性を高くすることができる。
また、本発明によれば、画像の撮影に全方位カメラあるいは全天球カメラを用いるので、通常のカメラでは構造物がレンズの画角内に入るようにレンズの向きを調整しなくてはならないような場所でも、レンズの調整が不要となる。また、通常のカメラと比較して画角が広いので、少ない飛行時間で構造物全体の撮影が可能となり、点検作業を短時間で完了させることができる。
また、本発明によれば、三次元モデルの画像上に不良箇所を表示させることができ、構造物における不良箇所の位置をより効率的に把握する上で有利となる。
また、本発明によれば、構造物の展開図の画像上に不良箇所を表示させることができ、構造物における不良箇所の位置をより効率的に把握する上で有利となる。
また、本発明によれば、三次元モデルの画像上に不良箇所の評価内容を不良箇所と共に報知するので、不良箇所の不良内容を的確に把握する上で有利となる。
また、本発明によれば、構造物表面と回転翼機との距離を一定に保持しつつ、構造物表面に沿って回転翼機を移動できるので、構造物の表面の詳細をカメラで撮影する上で有利となる。
また、本発明によれば、吸着手段により構造物表面と回転翼機との距離を一定に保持できるため、構造物の表面の詳細をカメラで撮影する上で有利となる。
また、本発明によれば、画像に反映されにくい構造物の表面の状態である外装材の浮きや剥がれの有無などを正確に評価する上で有利となる。
According to the present invention, an image of a structure is captured by a camera mounted on a radio-controlled rotary wing machine, and the image is analyzed to determine whether the structure has a defect. This makes it possible to inspect places that are inaccessible to humans, thereby improving the safety of the structure. Further, as compared with a case where the inspection work is performed manually, an accident at a high place or the like can be prevented and the safety of the work can be improved. In addition, the inspection work can be completed in a shorter time than when the inspection work is performed manually. In addition, compared to performing the inspection work manually, it is possible to reduce the variation in the inspection result and improve the work quality of the inspection work.
Further , according to the present invention, there is provided a notifying means for notifying when there is a defect in the structure, and when the structure has a defect, the defect is notified together with the position on the structure. Can be easily specified, and a response to a defect can be promptly performed.
Further , according to the present invention, the position information indicating the position where the image was taken is recorded together with the image and used to specify the position where the event indicating the defect has occurred. Even when the routes are different, the position of the defective portion can be specified.
Further , according to the present invention, the position at which an event indicating a failure has occurred is specified using a predetermined flight route, flight speed, and elapsed time from the rotary wing aircraft, so that the position identification is performed. The position of the defective portion can be specified without using any means, and the cost of the inspection device can be reduced.
Further , according to the present invention, since the date and time when an event indicating a failure has occurred is estimated, it is easy to estimate the cause of the failure, and the possibility of dealing with the failure in a more accurate manner can be increased.
Further , according to the present invention, since the omnidirectional camera or the omnidirectional camera is used for capturing an image, in a normal camera, the direction of the lens must be adjusted so that the structure falls within the angle of view of the lens. In such a place, the lens adjustment becomes unnecessary. Further, since the angle of view is wider than that of a normal camera, it is possible to photograph the entire structure in a short flight time, and the inspection work can be completed in a short time.
Further , according to the present invention, a defective portion can be displayed on an image of a three-dimensional model, which is advantageous in more efficiently grasping the position of the defective portion in a structure.
Further , according to the present invention, a defective portion can be displayed on an image of a development view of the structure, which is advantageous in more efficiently grasping the position of the defective portion in the structure.
Further , according to the present invention, the evaluation content of the defective portion is notified together with the defective portion on the image of the three-dimensional model, which is advantageous in accurately grasping the defective content of the defective portion.
Further , according to the present invention, it is possible to move the rotary wing machine along the surface of the structure while keeping the distance between the surface of the structure and the rotary wing machine constant, so that the details of the surface of the structure are photographed by the camera. The above is advantageous.
Further , according to the present invention, since the distance between the surface of the structure and the rotary wing machine can be kept constant by the suction means, it is advantageous in photographing details of the surface of the structure with a camera.
Further , according to the present invention, it is advantageous in accurately evaluating the presence or absence of floating or peeling of the exterior material, which is the state of the surface of the structure that is not easily reflected on an image.

第1の実施の形態における点検対象となる構造物の一例であるダム50の構造を示す説明図である。It is explanatory drawing which shows the structure of the dam 50 which is an example of the structure used as an inspection object in 1st Embodiment. 第1の実施の形態における点検装置10の機能的構成を示すブロック図である。It is a block diagram showing functional composition of inspection device 10 in a 1st embodiment. 第1の実施の形態における回転翼機20の構成を示す説明図である。It is an explanatory view showing the composition of rotary wing machine 20 in a 1st embodiment. 第1の実施の形態における表示部306に表示される不良報知画面の一例を示す説明図である。FIG. 9 is an explanatory diagram illustrating an example of a defect notification screen displayed on the display unit 306 according to the first embodiment. 第1の実施の形態における点検装置10の処理を示すフローチャートである。It is a flowchart which shows the process of the inspection apparatus 10 in 1st Embodiment. 第2の実施の形態における点検装置10の機能的構成を示すブロック図である。It is a block diagram showing functional composition of inspection device 10 in a 2nd embodiment. 第2の実施の形態における表示部306に表示される不良報知画面の一例を示す説明図である。FIG. 14 is an explanatory diagram illustrating an example of a defect notification screen displayed on a display unit 306 according to the second embodiment. 第2の実施の形態における点検装置10の処理を示すフローチャートである。It is a flow chart which shows processing of inspection device 10 in a 2nd embodiment. 第3の実施の形態における表示部306に表示される不良報知画面の一例を示す説明図である。FIG. 19 is an explanatory diagram illustrating an example of a defect notification screen displayed on a display unit 306 according to the third embodiment. 第4の実施の形態における点検装置10の機能的構成を示すブロック図である。It is a block diagram showing functional composition of inspection device 10 in a 4th embodiment. 第4の実施の形態における表示部306に表示される不良報知画面の一例を示す説明図である。It is an explanatory view showing an example of a defect information screen displayed on display 306 in a 4th embodiment. 第5の実施の形態における点検装置10の機能的構成を示すブロック図である。It is a block diagram showing functional composition of inspection device 10 in a 5th embodiment. 第6の実施の形態における点検装置10の機能的構成を示すブロック図である。It is a block diagram showing functional composition of inspection device 10 in a 6th embodiment.

以下に添付図面を参照して、本発明にかかる構造物の点検装置の好適な実施の形態を詳細に説明する。本実施の形態では、点検対象とする構造物として建設中のダム50を例にして説明する。   DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Preferred embodiments of a structure inspection device according to the present invention will be described in detail below with reference to the accompanying drawings. In the present embodiment, a dam 50 under construction is described as an example of a structure to be inspected.

(第1の実施の形態)
図1は、点検対象となる構造物の一例であるダム50の構造を示す説明図であり、図1Aはダム50の上面図、図1Bはダム50の正面図(図1AのX矢視図)である。
ダム50は、主に貯水池Wに貯められた水をせき止めるダム堤体502によって構成されている。ダム堤体502の頂部には、所定の幅を有する天端504が設けられている。また、ダム堤体502の貯水池Wの反対側の側面には、排水用のゲート508を備える排水路506が形成されている。
ダム堤体502の両側は陸地Lとなっており、ダム50の建設作業中は、作業機器等が設置される。
ダム堤体502の高さ(堤高)は一般的に100m以上の場合が多く、人手によってダム50全体の点検を行うには多くの時間および労力がかかる。
よって、本実施の形態では、図2に示すような点検装置10を用いてダム50の点検を行う。
(First Embodiment)
FIG. 1 is an explanatory view showing a structure of a dam 50 which is an example of a structure to be inspected. FIG. 1A is a top view of the dam 50, and FIG. 1B is a front view of the dam 50 (a view taken along the arrow X in FIG. 1A). ).
The dam 50 is mainly configured by a dam embankment 502 that dams water stored in the reservoir W. A top end 504 having a predetermined width is provided at the top of the dam body 502. Further, a drainage channel 506 having a drainage gate 508 is formed on the side of the dam bank 502 opposite to the reservoir W.
Both sides of the dam embankment 502 are land L, and work equipment and the like are installed during the construction work of the dam 50.
The height of the dam embankment 502 (embankment height) is generally 100 m or more in many cases, and it takes a lot of time and labor to inspect the entire dam 50 manually.
Therefore, in this embodiment, the inspection of the dam 50 is performed using the inspection device 10 as shown in FIG.

図2は、点検装置10の機能的構成を示すブロック図である。
本実施の形態では点検装置10は、回転翼機20と管理端末30とによって構成される。
回転翼機20は無線操縦式の小型ヘリコプターであり、管理端末30または図示しないリモートコントローラによって飛行方向や飛行速度が制御される。
回転翼機20には、カメラ202、GPSユニット204、処理部206、通信部208が設けられている。
カメラ202は、構造物表面の画像を連続的に撮影する。
カメラ202で撮影する画像は、構造物表面を漏れなく撮影するために動画とすることが好ましいが、撮影間隔を適当に設定した静止画であってもよい。
また、カメラ202は、周囲180°を撮影範囲とする全方位カメラであってもよい。また、カメラ202は、全方位、すなわち、上下左右全方位の360°を撮影範囲とする全天球カメラであってもよい。
全方位カメラあるいは全天球カメラを用いることによって、通常のカメラではレンズの向きを調整しなくてはならないような場所でも、レンズの調整が不要となる。
また、通常のカメラと比較して画角が広いのでより構造物上のより広い領域を撮影範囲とすることができ、短時間で点検作業を終了することができる。
FIG. 2 is a block diagram illustrating a functional configuration of the inspection device 10.
In the present embodiment, the inspection device 10 includes a rotary wing machine 20 and a management terminal 30.
The rotary wing aircraft 20 is a radio-controlled small helicopter, and its flight direction and flight speed are controlled by the management terminal 30 or a remote controller (not shown).
The rotary wing machine 20 includes a camera 202, a GPS unit 204, a processing unit 206, and a communication unit 208.
The camera 202 continuously captures images of the structure surface.
The image photographed by the camera 202 is preferably a moving image in order to photograph the surface of the structure without omission, but may be a still image in which photographing intervals are appropriately set.
Further, the camera 202 may be an omnidirectional camera having a shooting range of 180 ° around. Further, the camera 202 may be an omnidirectional camera having an imaging range of 360 degrees in all directions, that is, all directions in all directions.
By using an omnidirectional camera or an omnidirectional camera, it is not necessary to adjust the lens even in a place where the direction of the lens must be adjusted in a normal camera.
Further, since the angle of view is wider than that of a normal camera, a wider area on the structure can be set as the photographing range, and the inspection work can be completed in a short time.

図3は、回転翼機20の構成を示す説明図である。
図3Aは回転翼機20の上面斜視図、図3Bは回転翼機20の底面図(図3AのY矢視図)である。
図Aの例では、回転翼機20には筐体212に4つのプロペラ214が設置されている。このため、風などの影響を受けやすい屋外等でも安定して飛行が可能である。
回転翼機20の操縦は、例えばリモートコントローラ(図示なし)などを用いて点検作業者が行ってもよいし、管理端末30やリモートコントローラからの自動制御によって行ってもよい。特に、後述するように、点検ごとに同じ飛行経路で飛行する場合には、自動制御によって操縦することが好ましい。
また、図3Bに示すように、回転翼機20の底面側(飛行中に地面に対向する面)には、カメラ202が設けられている。
本実施の形態では、カメラ202として、周囲180°を撮影範囲とする半球状の全方位カメラを用いることとする。
FIG. 3 is an explanatory diagram showing the configuration of the rotary wing machine 20.
3A is a top perspective view of the rotary wing machine 20, and FIG. 3B is a bottom view of the rotary wing machine 20 (a view taken in the direction of the arrow Y in FIG. 3A).
In the example of FIG. A, four propellers 214 are installed in the casing 212 of the rotary wing machine 20. For this reason, it is possible to fly stably even in the outdoors or the like, which is easily affected by wind or the like.
The operation of the rotary wing machine 20 may be performed by an inspection operator using, for example, a remote controller (not shown), or may be performed by automatic control from the management terminal 30 or the remote controller. In particular, as will be described later, when flying on the same flight path for each inspection, it is preferable to control the vehicle by automatic control.
As shown in FIG. 3B, a camera 202 is provided on the bottom surface side of the rotary wing machine 20 (the surface facing the ground during flight).
In the present embodiment, it is assumed that a hemispherical omnidirectional camera having a shooting range of 180 ° around is used as the camera 202.

図2の説明に戻り、GPSユニット204(位置特定手段)は、GPS衛星から送信される信号を受信して、回転翼機20の現在位置(例えば緯度経度および標高など)を特定する。
GPSユニット204で特定した回転翼機20の現在位置は、回転翼機20の飛行経路の制御等に用いられる。
Returning to the description of FIG. 2, the GPS unit 204 (position specifying means) receives a signal transmitted from a GPS satellite and specifies the current position (for example, latitude and longitude and altitude) of the rotary wing aircraft 20.
The current position of the rotary wing aircraft 20 specified by the GPS unit 204 is used for controlling the flight path of the rotary wing aircraft 20 and the like.

処理部206は、CPU、制御プログラムなどを格納・記憶するROM、制御プログラムの作動領域としてのRAM、各種データを書き換え可能に保持するEEPROM、周辺回路等とのインターフェースをとるインターフェース部などを含んで構成される。
処理部206は、カメラ202で撮影された画像と、GPSユニット204で特定した回転翼機20の現在位置とを関連づけて記録する。すなわち、処理部206は、GPSユニット204によって特定された現在位置を、カメラ202で撮影された画像とともに当該画像が撮影された位置を示す位置情報として記録する。
なお、位置情報とともに、画像撮影時のカメラ202の撮影方向を記録してもよい。
The processing unit 206 includes a CPU, a ROM for storing and storing a control program and the like, a RAM as an operation area of the control program, an EEPROM for rewritably holding various data, an interface unit for interfacing with peripheral circuits and the like. Be composed.
The processing unit 206 records the image captured by the camera 202 in association with the current position of the rotary wing aircraft 20 specified by the GPS unit 204. That is, the processing unit 206 records the current position specified by the GPS unit 204 together with the image captured by the camera 202 as position information indicating the position where the image was captured.
Note that the shooting direction of the camera 202 at the time of shooting an image may be recorded together with the position information.

通信部208は、管理端末30の通信部302との間で無線通信を行う。
通信部208は、カメラ202で撮影された画像を管理端末30に送信する。
通信部208による画像の送信は、カメラ202での撮影中に逐次行ってもよいし、一連の撮影が終了してから一括して行ってもよい。
The communication unit 208 performs wireless communication with the communication unit 302 of the management terminal 30.
The communication unit 208 transmits an image captured by the camera 202 to the management terminal 30.
The transmission of images by the communication unit 208 may be performed sequentially during photographing by the camera 202, or may be performed collectively after a series of photographing is completed.

つぎに、管理端末30について説明する。
管理端末30は、例えばパーソナルコンピュータやタブレット端末、スマートホン等であり、構造物周辺に位置する点検作業者が保持している。
管理端末30は、通信部302、処理部304(判定手段)、表示部306(報知手段)、設計データ記憶部308によって構成される。
通信部302は、回転翼機20の通信部208との間で無線通信を行う。
なお、通信部302を介して回転翼機20の飛行経路や飛行速度を制御する制御信号を送信してもよい。
Next, the management terminal 30 will be described.
The management terminal 30 is, for example, a personal computer, a tablet terminal, a smartphone, or the like, and is held by an inspection worker located around the structure.
The management terminal 30 includes a communication unit 302, a processing unit 304 (determination unit), a display unit 306 (notification unit), and a design data storage unit 308.
The communication unit 302 performs wireless communication with the communication unit 208 of the rotary wing machine 20.
In addition, a control signal for controlling the flight path and the flight speed of the rotary wing aircraft 20 may be transmitted via the communication unit 302.

処理部304は、CPU、制御プログラムなどを格納・記憶するROM、制御プログラムの作動領域としてのRAM、各種データを書き換え可能に保持するEEPROM、周辺回路等とのインターフェースをとるインターフェース部などを含んで構成される。
処理部304は、カメラ202で撮影された画像を画像解析して、構造物に不良があるか否かを判定する判定手段として機能する。
処理部304は、画像に構造物の不良を示す事象が映っている場合に構造物に不良があると判定する。構造物の不良を示す事象とは、例えば構造物表面のひびや水漏れ、周囲の土砂の崩落等である。
処理部304による不良の有無の判定は、従来公知の様々な画像解析技術を用いて行うことができる。処理部304は、例えばこれらの不良を示す事象が生じた際に画像上に現れるパターンを記憶し、カメラ202の撮影画像上に、不良を示すパターンとの一致度が所定値以上の領域がある場合に構造物に不良があると判定する。
The processing unit 304 includes a CPU, a ROM for storing and storing a control program and the like, a RAM as an operation area of the control program, an EEPROM for rewritably holding various data, an interface unit for interfacing with peripheral circuits and the like. Be composed.
The processing unit 304 functions as a determination unit that analyzes an image captured by the camera 202 and determines whether there is a defect in the structure.
The processing unit 304 determines that there is a defect in the structure when an event indicating the defect of the structure is reflected in the image. The event indicating the failure of the structure is, for example, a crack or water leak on the surface of the structure, a collapse of the surrounding earth and sand, and the like.
The determination of the presence or absence of a defect by the processing unit 304 can be performed using various conventionally known image analysis techniques. The processing unit 304 stores, for example, a pattern that appears on the image when an event indicating the defect occurs, and there is an area in the captured image of the camera 202 where the degree of coincidence with the pattern indicating the defect is equal to or more than a predetermined value. In this case, it is determined that the structure is defective.

また、処理部304は、不良を示す事象が発生している構造物上の位置を特定する。
処理部304は、例えば画像に関連付けて記録された位置情報に基づいて不良を示す事象が発生している位置を特定する。より詳細には、処理部304は、画像に関連付けて記録された位置情報に基づいて当該画像に映っている構造物の位置を推定し、不良を示す事象が発生している位置を特定する。
Further, the processing unit 304 specifies the position on the structure where the event indicating the failure has occurred.
The processing unit 304 specifies a position where an event indicating a defect has occurred based on, for example, position information recorded in association with the image. More specifically, the processing unit 304 estimates the position of the structure shown in the image based on the position information recorded in association with the image, and specifies the position where an event indicating a defect has occurred.

この時、処理部304は、設計データ記憶部308に記憶されたダム50の設計データを用いて、画像に映っている構造物の位置を推定する。なお、ダム50の設計データには、ダム50を構成する各部の位置情報(例えば緯度経度および標高など)が含まれるものとする。
処理部304は、まず画像に関連付けられた位置情報と設計データ内の位置情報とに基づいて、ダム50と回転翼機20との相対位置を特定する。カメラ202の画角および撮影方向は既知であるため、ダム50と回転翼機20との相対位置を特定できれば、画像がダム50のいずれの範囲を撮影したものかを特定することができる。
よって、不良を示す事象が映っている画像が、ダム50のいずれの範囲を撮影したものかを特定することにより、不良が発生している構造物(ダム50)上の位置を特定する。
At this time, the processing unit 304 estimates the position of the structure shown in the image using the design data of the dam 50 stored in the design data storage unit 308. It is assumed that the design data of the dam 50 includes position information (for example, latitude and longitude, altitude, and the like) of each part constituting the dam 50.
The processing unit 304 first specifies the relative position between the dam 50 and the rotary wing machine 20 based on the position information associated with the image and the position information in the design data. Since the angle of view and shooting direction of the camera 202 are known, if the relative position between the dam 50 and the rotary wing machine 20 can be specified, it is possible to specify which range of the dam 50 the image has been shot.
Therefore, the position on the structure (dam 50) where the failure has occurred is identified by identifying the range of the dam 50 where the image showing the event indicating the failure is captured.

また、不良の発生箇所の位置は、回転翼機20の飛行経路等から特定してもよい。
より詳細には、回転翼機20を予め定められた飛行経路および飛行速度で飛行するように設定しておき、カメラ202は回転翼機20が飛行を開始した時刻からの経過時間を画像とともに記録する。
この場合、回転翼機20が飛行を開始した時刻からの経過時間に基づいて、回転翼機20が飛行経路上のどの位置にいるかを推定することができ、回転翼機20の位置から画像に映った構造物の位置を特定することができる。
すなわち、処理部304は、飛行経路飛行速度、および画像とともに記録された経過時刻とを用いて不良を示す事象が発生している位置を特定する。
Further, the position of the failure occurrence location may be specified from the flight path of the rotary wing machine 20 or the like.
More specifically, the rotary wing aircraft 20 is set to fly in a predetermined flight path and flight speed, and the camera 202 records the elapsed time from the time when the rotary wing aircraft 20 started flying, together with an image. I do.
In this case, the position of the rotary wing aircraft 20 on the flight path can be estimated based on the elapsed time from the time when the rotary wing aircraft 20 starts flying, and the position of the rotary wing aircraft 20 is converted into an image. The position of the reflected structure can be specified.
That is, the processing unit 304 specifies the position where the event indicating the failure has occurred using the flight path flight speed and the elapsed time recorded together with the image.

また、定期的に回転翼機20で構造物の点検を行い、不良の発生日時を推定できるようにしてもよい。
より詳細には、回転翼機20に構造物の周辺を所定期間ごとに同じ飛行経路で飛行させ、カメラ202で撮影ごとに同じ角度から構造物を撮影する。
処理部304は、画像に不良を示す事象が映っている場合には、当該不良を示す事象が映っている画像より前に撮影された過去画像と比較して、当該不良を示す事象が生じた日時を推定する。
例えば、1日ごとに回転翼機20で構造物周辺を飛行させて点検を行う場合、ある日に撮影された画像の地点Aに不良を示す事象が映っていたとする。この場合、その前日に撮影された画像の地点Aと比較する。前日に撮影された画像に不良を示す事象が映っていない場合には、前日に画像が撮影された後、翌日の画像撮影前までに不良が生じたと推定することができる。
このように、不良の発生日時を推定することにより、不良の発生原因が特定しやすくなり、不良に対してより的確な対応を行うことができる。
Further, the structure may be periodically inspected by the rotary wing machine 20 so that the date and time of occurrence of the defect may be estimated.
More specifically, the rotary wing aircraft 20 is caused to fly around the structure on the same flight path every predetermined period, and the camera 202 photographs the structure from the same angle for each photographing.
When an event indicating a defect appears in the image, the processing unit 304 compares the image with the past image taken before the image in which the event indicating the defect appears, and the event indicating the defect has occurred. Estimate the date and time.
For example, when the rotary wing aircraft 20 flies around the structure every day to perform an inspection, it is assumed that an event indicating a defect is reflected at a point A of an image taken on a certain day. In this case, comparison is made with the point A of the image taken the day before. When an event indicating a defect is not shown in an image taken on the previous day, it can be estimated that the defect has occurred before the image was taken on the next day after the image was taken on the previous day.
In this way, by estimating the date and time of occurrence of a defect, the cause of the defect can be easily specified, and a more accurate response to the defect can be performed.

表示部306は、構造物に不良がある場合に報知する報知手段として機能する。
表示部306は、例えば構造物に不良がある場合、当該不良を構造物上の位置とともに報知する。
図4は、表示部306に表示される不良報知画面の一例を示す説明図である。
図4には、表示部306にダム50の不良箇所周辺の画像N1が表示されている。画像N1上の不良に対応する箇所にはポインタP1が点滅し、不良箇所を容易に特定できるようになっている。なお、不良箇所を特定の色やハイライトで表示するなど、不良箇所の表示形態は任意である。
また、表示部306の上部には、不良箇所(「A−6付近」)および不良内容(「ひび割れ」)に関するメッセージMが表示されている。
また、表示部306の下部には、ダム50全体の画像N2が表示されている。画像N2にも不良に対応する箇所にポインタP2が表示され、ダム50全体に対する不良箇所の位置を特定できるようになっている。
なお、画像N1,N2は、カメラ202で撮影した画像でもよいし、ダム50の設計データに基づいて描画した描画画像であってもよい。
また、報知手段としては、表示部306の他、音声で不良を報知する音声出力部を設けてもよい。
The display unit 306 functions as a notifying unit that notifies when there is a defect in the structure.
For example, when there is a defect in the structure, the display unit 306 notifies the defect together with the position on the structure.
FIG. 4 is an explanatory diagram illustrating an example of a defect notification screen displayed on the display unit 306.
In FIG. 4, an image N1 around the defective portion of the dam 50 is displayed on the display unit 306. The pointer P1 blinks at a position corresponding to the defect on the image N1, so that the defective portion can be easily specified. The display format of the defective portion is arbitrary, such as displaying the defective portion with a specific color or highlight.
At the top of the display unit 306, a message M relating to the defective portion ("around A-6") and the content of the defect ("crack") is displayed.
Further, an image N2 of the entire dam 50 is displayed below the display unit 306. The pointer P2 is also displayed at a position corresponding to the defect in the image N2, so that the position of the defective portion with respect to the entire dam 50 can be specified.
Note that the images N1 and N2 may be images captured by the camera 202 or drawn images drawn based on the design data of the dam 50.
Further, as the notification means, in addition to the display unit 306, an audio output unit for notifying the defect by audio may be provided.

図5は、点検装置10の処理を示すフローチャートである。
点検作業者等からの指示または自動制御によって点検開始が指示されると、点検装置10は、回転翼機20の飛行を開始させる(ステップS500)。
回転翼機20ではカメラ202で構造物表面を撮影し(ステップS502)、撮影した画像を通信部208を介して管理端末30へと送信する(ステップS504)。この時、処理部206では画像撮影時の位置情報または撮影時刻を画像に付加する。
FIG. 5 is a flowchart showing the processing of the inspection device 10.
When an inspection start is instructed by an instruction from an inspection worker or by automatic control, the inspection device 10 starts the flight of the rotary wing machine 20 (step S500).
In the rotary wing machine 20, the surface of the structure is photographed by the camera 202 (step S502), and the photographed image is transmitted to the management terminal 30 via the communication unit 208 (step S504). At this time, the processing unit 206 adds the position information or the photographing time at the time of photographing the image to the image.

管理端末30では回転翼機20が送信した画像を受信し(ステップS506)、処理部304によって画像解析を行う(ステップS508)。
画像解析の結果、不良が見つからなかった場合は(ステップS510:No)、そのまま本フローチャートによる処理を終了する。
なお、構造物全体において不良が見つからなかった場合には、点検の終了(不良なし)を示す表示等を行ってもよい。
一方、不良が見つかった場合は(ステップS510:Yes)、表示部306に不良が生じている旨および不良箇所を表示して(ステップS512)、本フローチャートによる処理を終了する。
The management terminal 30 receives the image transmitted by the rotary wing machine 20 (step S506), and performs image analysis by the processing unit 304 (step S508).
As a result of the image analysis, if no defect is found (step S510: No), the processing according to the present flowchart ends.
If no defect is found in the entire structure, a display indicating the end of inspection (no defect) may be displayed.
On the other hand, when a defect is found (Step S510: Yes), the fact that a defect has occurred and the location of the defect are displayed on the display unit 306 (Step S512), and the processing according to this flowchart ends.

なお、本実施の形態では点検装置10を回転翼機20と管理端末30とによって構成したが、これに限らず、例えば回転翼機20が管理端末30の機能(判定部や報知部)を備えるようにしてもよい。
この場合、点検作業者は回転翼機20が構造物全体の撮影を終えて戻った後に、不良の有無を知ることになる。
In the present embodiment, the inspection device 10 is configured by the rotary wing machine 20 and the management terminal 30. However, the present invention is not limited thereto. For example, the rotary wing machine 20 includes a function of the management terminal 30 (a determination unit and a notification unit). You may do so.
In this case, the inspector will know whether or not there is a defect after the rotary wing machine 20 returns after finishing photographing the entire structure.

また、本実施の形態では、構造物としてダム50を例にして説明したが、本発明は様々な構造物に対して適用可能である。
本発明の他の適用例としては、例えばビル等のコンクリート構造物の劣化診断、壁面タイルの剥離診断、橋梁下部(橋の裏側)の点検、災害時における被災状況の確認等が挙げられる。
Further, in the present embodiment, the dam 50 has been described as an example of a structure, but the present invention is applicable to various structures.
Other application examples of the present invention include, for example, diagnosis of deterioration of a concrete structure such as a building, diagnosis of peeling of wall tiles, inspection of a lower portion of a bridge (backside of a bridge), confirmation of a disaster situation at the time of a disaster, and the like.

以上説明したように、実施の形態にかかる構造物の点検装置10は、無線操縦式の回転翼機20に搭載されたカメラ202で構造物の画像を撮影し、当該画像を画像解析して構造物に不良があるか否かを判定する。
これにより、人が近づけない場所の点検が可能となり、構造物の安全性を向上させることができる。また、人手により点検作業を行うのと比較して、高所等における事故を防止して作業の安全性を向上させることができる。また、人手により点検作業を行うのと比較して、短時間で点検作業を完了させることができる。また、人手により点検作業を行うのと比較して、点検結果のバラつきを少なくし、点検作業の作業品質を向上させることができる。
また、点検装置10は、構造物に不良がある場合に報知する報知手段(表示部306)を備え、構造物に不良がある場合、当該不良を構造物上の位置とともに報知するので、不良が生じている箇所を容易に特定することができ、不良への対応を迅速に行うことができる。
また、点検装置10は、画像が撮影された位置を示す位置情報を画像とともに記録して、不良を示す事象が発生している位置の特定に用いるので、点検作業ごとに回転翼機20の飛行経路が異なる場合でも不良箇所の位置を特定することができる。
また、点検装置10において、予め定められた回転翼機20の飛行経路、飛行速度、および回転翼機からの経過時刻を用いて不良を示す事象が発生している位置を特定するようにすれば、位置特定手段であるGPSユニット204を用いずに不良箇所の位置を特定することができ、点検装置10のコストを低減することができる。
また、点検装置10は、不良を示す事象が生じた日時を推定するので、不良が生じた原因を推定しやすくなり、より的確な方法で不良に対応できる可能性を高くすることができる。
また、点検装置10は、画像の撮影に全方位カメラを用いるので、通常のカメラでは構造物がレンズの画角内に入るようにレンズの向きを調整しなくてはならないような場所でも、レンズの調整が不要となる。また、通常のカメラと比較して画角が広いので、少ない飛行時間で構造物全体の撮影が可能となり、点検作業を短時間で完了させることができる。
As described above, the structure inspection apparatus 10 according to the embodiment captures an image of the structure with the camera 202 mounted on the radio-controlled rotary wing machine 20 and analyzes the image to perform structural analysis. It is determined whether the object is defective.
This makes it possible to inspect places that are inaccessible to humans, thereby improving the safety of the structure. Further, as compared with a case where the inspection work is performed manually, an accident at a high place or the like can be prevented and the safety of the work can be improved. In addition, the inspection work can be completed in a shorter time than when the inspection work is performed manually. In addition, compared to performing the inspection work manually, it is possible to reduce the variation in the inspection result and improve the work quality of the inspection work.
In addition, the inspection device 10 includes a notifying unit (display unit 306) for notifying when there is a defect in the structure, and when there is a defect in the structure, notifies the defect together with the position on the structure. It is possible to easily identify the location where the error has occurred, and to respond quickly to a defect.
In addition, the inspection device 10 records the position information indicating the position where the image was captured together with the image and uses the information to specify the position where the event indicating the failure has occurred. Even when the routes are different, the position of the defective portion can be specified.
In addition, the inspection device 10 may identify a position where an event indicating a defect occurs using a predetermined flight path, flight speed, and elapsed time from the rotary wing aircraft 20. Further, the position of the defective portion can be specified without using the GPS unit 204 as the position specifying means, and the cost of the inspection device 10 can be reduced.
In addition, since the inspection device 10 estimates the date and time when the event indicating the defect has occurred, it is easy to estimate the cause of the defect, and it is possible to increase the possibility that the defect can be dealt with by a more accurate method.
In addition, since the inspection device 10 uses an omnidirectional camera for capturing images, even in a place where a normal camera must adjust the direction of the lens so that the structure falls within the angle of view of the lens, the inspection device 10 can use the lens. Adjustment is not required. Further, since the angle of view is wider than that of a normal camera, it is possible to photograph the entire structure in a short flight time, and the inspection work can be completed in a short time.

(第2の実施の形態)
次に第2の実施の形態について説明する。
第1の実施の形態では、構造物に不良がある場合、カメラ202で撮像した画像上に当該不良を表示することで、当該不良を構造物上の位置とともに報知するようにした場合について説明した。
そのため、構造物は二次元の画像で表示されるに留まることから、不良も二次元の画像上で表示されるため、立体的な構造物における不良の位置を効率的に把握する点で改善の余地がある。
そこで、第2の実施の形態は、構造物の立体的な形状を三次元モデルの画像として表示するとともに、三次元モデルの画像上に不良の位置を表示させるようにし、構造物における不良の位置をより効率的に把握できるようにしたものである。
(Second embodiment)
Next, a second embodiment will be described.
In the first embodiment, a case has been described in which, when a structure has a defect, the defect is displayed together with the position on the structure by displaying the defect on an image captured by the camera 202. .
For this reason, the structure is displayed only in a two-dimensional image, and the defect is also displayed on the two-dimensional image. This is an improvement in terms of efficiently grasping the position of the defect in the three-dimensional structure. There is room.
Therefore, the second embodiment displays the three-dimensional shape of the structure as a three-dimensional model image, and displays the position of the defect on the image of the three-dimensional model. Can be grasped more efficiently.

図6は、第2の実施の形態における点検装置10の機能的構成を示すブロック図である。なお、以下の実施の形態では、第1の実施の形態と同様の部分、部材については第1の実施の形態と同一の符号を付してその説明を省略する。
第2の実施の形態では、第1の実施の形態に加えて、回転翼機20に3Dスキャナ210が搭載されている。
3Dスキャナ210は、構造物の三次元形状を測定するものであり、三次元形状取得手段として機能する。
3Dスキャナ210は、レーザーパルス(レーザー光)を照射する光源と、レーザーパルスを受光するセンサなどを備え、光源と計測対象物との間をレーザーパルスが往復する時間を計測することで距離を計測すると共にレーザーパルスを発射した方向を計測することで計測対象物の3次元座標を生成するものである。
なお、三次元形状取得手段として、赤外線深度センサを用いても良い。赤外線深度センサは、赤外線レーザ光を用いてランダムなドットからなる単一の矩形状の投影パターンを計測対象物に照射する光源と、計測対象物で反射された赤外線光を検出するカメラなどを備え、カメラで撮像された計測対象物上のドットの画像から三角測量により画像上の各点の深度、言い換えると計測対象物の3次元座標を生成するものである。
また、三次元形状取得手段は、構造物の三次元形状を測定できれるものであればよく、従来公知の様々な3Dセンサを用いることができる。
FIG. 6 is a block diagram illustrating a functional configuration of the inspection device 10 according to the second embodiment. In the following embodiments, the same parts and members as those in the first embodiment are denoted by the same reference numerals as those in the first embodiment, and description thereof will be omitted.
In the second embodiment, a 3D scanner 210 is mounted on the rotary wing machine 20 in addition to the first embodiment.
The 3D scanner 210 measures a three-dimensional shape of a structure, and functions as a three-dimensional shape acquisition unit.
The 3D scanner 210 includes a light source that emits a laser pulse (laser light), a sensor that receives the laser pulse, and the like, and measures a distance by measuring a time required for the laser pulse to reciprocate between the light source and an object to be measured. In addition, three-dimensional coordinates of the measurement target are generated by measuring the direction in which the laser pulse is emitted.
Note that an infrared depth sensor may be used as the three-dimensional shape acquisition unit. The infrared depth sensor is equipped with a light source that irradiates a single rectangular projection pattern consisting of random dots to the measurement object using infrared laser light, a camera that detects infrared light reflected by the measurement object, etc. The depth of each point on the image, that is, the three-dimensional coordinates of the measurement object, is generated by triangulation from the image of the dot on the measurement object captured by the camera.
Further, the three-dimensional shape acquisition means only needs to be able to measure the three-dimensional shape of the structure, and various conventionally known three-dimensional sensors can be used.

処理部206は、カメラ202で撮影された画像と、3Dスキャナ210で取得された構造物の三次元形状と、GPSユニット204で特定した回転翼機20の現在位置とを関連づけて記録する。すなわち、処理部206は、GPSユニット204によって特定された現在位置を、カメラ202で撮影された画像および構造物の三次元形状とともに当該画像が撮影された位置を示す位置情報として記録する。
なお、位置情報とともに、画像撮影時のカメラ202の撮影方向を記録してもよい。
The processing unit 206 associates and records the image captured by the camera 202, the three-dimensional shape of the structure acquired by the 3D scanner 210, and the current position of the rotary wing aircraft 20 specified by the GPS unit 204. That is, the processing unit 206 records the current position specified by the GPS unit 204 as position information indicating the position at which the image was captured, together with the image captured by the camera 202 and the three-dimensional shape of the structure.
Note that the shooting direction of the camera 202 at the time of shooting an image may be recorded together with the position information.

通信部208は、カメラ202で撮影された画像および3Dスキャナ210で取得された構造物の三次元形状を管理端末30に送信する。
通信部208による画像および3Dスキャナ210で取得された構造物の三次元形状の送信は、カメラ202の撮影中および3Dスキャナ210による計測中に逐次行ってもよいし、一連の撮影および一連の3Dスキャナ210による計測が終了してから一括して行ってもよい。
The communication unit 208 transmits the image captured by the camera 202 and the three-dimensional shape of the structure acquired by the 3D scanner 210 to the management terminal 30.
The transmission of the image by the communication unit 208 and the three-dimensional shape of the structure acquired by the 3D scanner 210 may be sequentially performed during the shooting by the camera 202 and the measurement by the 3D scanner 210, or may be performed by a series of shooting and a series of 3D scanning. The measurement may be performed collectively after the measurement by the scanner 210 is completed.

管理端末30は、第1の実施の形態と同様に、例えばパーソナルコンピュータやタブレット端末、スマートホン等であり、構造物周辺に位置する点検作業者が保持している。
管理端末30は、通信部302、処理部304(判定手段)、表示部306(報知手段)、設計データ記憶部308によって構成される。
処理部304は、第1の実施の形態と同様に、カメラ202で撮影された画像を画像解析して、構造物に不良があるか否かを判定する判定手段として機能すると共に、不良を示す事象が発生している構造物上の位置を特定する。このような不良の有無の判定および不良箇所の位置特定の手順については第1の実施の形態と同様である。
さらに、処理部304は、3Dスキャナ210で取得された構造物の三次元形状から前記構造物の三次元モデルを生成すると共に、前記三次元モデルと前記不良箇所位置とを関連付けた三次元不良箇所情報を生成する三次元データ生成手段として機能する。
The management terminal 30 is, for example, a personal computer, a tablet terminal, a smartphone, or the like, as in the first embodiment, and is held by an inspection worker located around the structure.
The management terminal 30 includes a communication unit 302, a processing unit 304 (determination unit), a display unit 306 (notification unit), and a design data storage unit 308.
As in the first embodiment, the processing unit 304 analyzes an image captured by the camera 202 and functions as a determination unit that determines whether there is a defect in the structure, and indicates the defect. Identify the location on the structure where the event is occurring. The procedure for determining the presence / absence of such a defect and for specifying the position of the defective portion is the same as in the first embodiment.
Further, the processing unit 304 generates a three-dimensional model of the structure from the three-dimensional shape of the structure acquired by the 3D scanner 210, and associates the three-dimensional model with the position of the defect. It functions as three-dimensional data generation means for generating information.

表示部306は、第1の実施の形態と同様に、構造物に不良がある場合に報知する報知手段として機能する。
第2の実施の形態では、表示部306は、三次元不良箇所情報に基づいて構造物の三次元モデルと共に不良箇所を報知する報知手段としても機能する。
図7は、表示部306に表示される構造物の三次元モデルと共に不良箇所位置を報知した報知画面の一例を示す説明図である。
第2の実施の形態では、構造物がビル60である場合について説明する。なお、図中601はビル60に設けられた窓を示す。
表示部306に、不良箇所周辺のビル60の画像が三次元モデルで表示されると共に、画像N10上の不良に対応する箇所にはポインタP10が点滅し、不良箇所を容易に特定できるようになっている。
また、表示部306の上部には、不良箇所(「西側壁面」)および不良内容(「ひび割れ」)に関するメッセージMが表示されている。
また、表示部306の下部には、ビル60全体の三次元モデルの画像N12が表示されている。画像N12にも不良に対応する箇所にポインタP12が表示され、ビル60全体に対する不良箇所の位置を特定できるようになっている。
図7において、三次元モデルは、ビル60の斜め上方に位置した視点からビル60を俯瞰した状態で表示されているが、不良箇所の位置が特定しやすくなるように、三次元モデルの画像を見る視点の位置、ビル60を見る角度、倍率などを任意に設定すればよい。
The display unit 306 functions as a notifying unit for notifying when there is a defect in the structure, as in the first embodiment.
In the second embodiment, the display unit 306 also functions as a notifying unit for notifying the defect location together with the three-dimensional model of the structure based on the three-dimensional defect location information.
FIG. 7 is an explanatory diagram showing an example of a notification screen for notifying the position of the defect together with the three-dimensional model of the structure displayed on the display unit 306.
In the second embodiment, a case where the structure is a building 60 will be described. In the drawing, reference numeral 601 denotes a window provided in the building 60.
The display unit 306 displays an image of the building 60 around the defective portion in a three-dimensional model, and the pointer P10 blinks at a position corresponding to the defect on the image N10, so that the defective portion can be easily specified. ing.
At the top of the display unit 306, a message M relating to the defective portion (“west wall surface”) and the content of the defect (“crack”) is displayed.
An image N12 of a three-dimensional model of the entire building 60 is displayed below the display unit 306. The pointer P12 is also displayed at a position corresponding to the defect in the image N12, so that the position of the defective portion with respect to the entire building 60 can be specified.
In FIG. 7, the three-dimensional model is displayed in a state in which the building 60 is looked down from a viewpoint positioned obliquely above the building 60. However, the image of the three-dimensional model is displayed so that the position of the defective portion can be easily specified. The position of the viewing point, the angle at which the building 60 is viewed, the magnification, and the like may be arbitrarily set.

図8は、点検装置10の処理を示すフローチャートである。
点検作業者等からの指示または自動制御によって点検開始が指示されると、点検装置10は、回転翼機20の飛行を開始させる(ステップS600)。
回転翼機20ではカメラ202で構造物表面を撮影する(ステップS602)。
また、回転翼機20では、3Dスキャナ210で構造物表面を計測して三次元形状を取得する(ステップS604)。
次いで、撮影した画像および計測した三次元形状を通信部208を介して管理端末30へと送信する(ステップS606)。この時、処理部206では画像撮影時の位置情報または撮影時刻を画像に付加する。
FIG. 8 is a flowchart showing the processing of the inspection device 10.
When the start of inspection is instructed by an instruction from an inspection worker or by automatic control, the inspection device 10 starts flight of the rotary wing machine 20 (step S600).
In the rotary wing machine 20, the surface of the structure is photographed by the camera 202 (step S602).
In the rotary wing machine 20, the surface of the structure is measured by the 3D scanner 210 to acquire a three-dimensional shape (step S604).
Next, the captured image and the measured three-dimensional shape are transmitted to the management terminal 30 via the communication unit 208 (step S606). At this time, the processing unit 206 adds the position information or the photographing time at the time of photographing the image to the image.

管理端末30では回転翼機20が送信した画像および三次元形状を受信する(ステップS608)。
そして、処理部304によって画像に基づいて画像解析を行う(ステップS610)。
画像解析の結果、不良が見つからなかった場合は(ステップS612:No)、そのまま本フローチャートによる処理を終了する。
なお、構造物全体において不良が見つからなかった場合には、点検の終了(不良なし)を示す表示等を行ってもよい。
一方、不良が見つかった場合は不良箇所位置を特定し(ステップS612:Yes)、処理部304により構造物の三次元モデルを作成し(ステップS614)、三次元モデルと不良箇所位置とを関連付けた三次元不良箇所情報を生成する(ステップS616)。
そして、表示部306に、表示が生じている旨を表示すると共に、構造物の三次元モデルと共に不良箇所を表示して(ステップS618)、本フローチャートによる処理を終了する。
The management terminal 30 receives the image and the three-dimensional shape transmitted from the rotary wing machine 20 (step S608).
Then, the processing unit 304 performs image analysis based on the image (step S610).
As a result of the image analysis, when no defect is found (step S612: No), the process according to the flowchart is terminated as it is.
If no defect is found in the entire structure, a display indicating the end of inspection (no defect) may be displayed.
On the other hand, if a defect is found, the position of the defect is specified (step S612: Yes), the processing unit 304 creates a three-dimensional model of the structure (step S614), and associates the three-dimensional model with the position of the defect. Three-dimensional defect location information is generated (step S616).
Then, the fact that the display is occurring is displayed on the display unit 306, and the defective portion is displayed together with the three-dimensional model of the structure (step S618), and the processing according to this flowchart ends.

第2の実施の形態によれば、第1の実施の形態と同様の効果が奏されることは無論のこと、3Dスキャナ210で測定した構造物の三次元形状に基づいて作成した三次元モデルと共に構造物の不良箇所を報知するようにしたので、三次元モデルの画像上に不良箇所を表示させることができ、構造物における不良箇所の位置をより効率的に把握する上で有利となる。
なお、第2の実施の形態において、構造物の三次元モデルと共に不良箇所を表示部306により表示する状態と、第1の実施の形態と同様に不良が生じている旨および不良箇所を構造物の二次元の画像と共に表示部306により表示する状態とを、管理端末30の操作により切り替えるようにしてもよい。
このようにすると、構造物の三次元モデルの画像と、構造物の二次元の画像との双方を視認でき、不良箇所の位置を効率的に把握する上でより一層有利となる。
According to the second embodiment, it is needless to say that the same effects as those of the first embodiment are obtained. A three-dimensional model created based on the three-dimensional shape of the structure measured by the 3D scanner 210 In addition, since the defect point of the structure is notified, the defect point can be displayed on the image of the three-dimensional model, which is advantageous in more efficiently grasping the position of the defect point in the structure.
Note that, in the second embodiment, a state in which a defective portion is displayed on the display unit 306 together with the three-dimensional model of the structure, and the fact that a defect has occurred and the defective portion are indicated in the structure as in the first embodiment. The state displayed on the display unit 306 together with the two-dimensional image may be switched by operating the management terminal 30.
In this way, both the image of the three-dimensional model of the structure and the two-dimensional image of the structure can be visually recognized, which is further advantageous in efficiently grasping the position of the defective portion.

(第3の実施の形態)
次に第3の実施の形態について説明する。
第3の実施の形態は第2の実施の形態の変形例である。
図6を流用して説明すると、第3の実施の形態では、処理部304が、構造物の三次元モデルを平面に展開することで構造物の展開図を生成する展開図生成手段として機能する。
また、表示部306は、三次元不良箇所情報に基づいて構造物の展開図と共に不良箇所を報知する。
すなわち、構造物が平面視矩形のビル60であった場合、図9に示すように、表示部306には、ビル60の4つの側面602,604,606,608と、上面(屋上面)610との5つの面が展開図として表示され、また、画像N20上の不良に対応する箇所にはポインタP30が点滅し、不良箇所を容易に特定できるようになっている。
(Third embodiment)
Next, a third embodiment will be described.
The third embodiment is a modification of the second embodiment.
Explaining with reference to FIG. 6, in the third embodiment, the processing unit 304 functions as a development view generation unit that generates a development view of the structure by developing a three-dimensional model of the structure on a plane. .
In addition, the display unit 306 notifies the defect location together with the developed view of the structure based on the three-dimensional defect location information.
That is, when the structure is a building 60 having a rectangular shape in plan view, as shown in FIG. 9, the display unit 306 displays four side surfaces 602, 604, 606, 608 of the building 60 and an upper surface (roof surface) 610. Are displayed as a development view, and a pointer P30 blinks at a position corresponding to the defect on the image N20, so that the defective portion can be easily specified.

第3の実施の形態では、展開図と共に不良箇所が表示されるため、構造物の展開図の画像上に不良箇所を表示させることができ、構造物における不良箇所の位置をより効率的に把握する上で有利となる。   In the third embodiment, since the defective portion is displayed together with the developed view, the defective portion can be displayed on the image of the developed view of the structure, and the position of the defective portion in the structure can be more efficiently grasped. It is advantageous in doing so.

(第4の実施の形態)
次に第4の実施の形態について説明する。
第4の実施の形態は、構造物の不良箇所の有無に加えて、不良箇所の評価内容を取得し、その評価内容を不良箇所と共に報知するようにしたものである。
図10に示すように、第4の実施の形態では、処理部304が構造物の不良箇所の評価内容を示す不良計測情報を生成する不良計測情報生成手段として機能する。
具体的に説明すると、処理部304は、カメラ202で撮影された画像を画像解析して、構造物の不良箇所の評価を行なう。
すなわち、処理部304は、不良内容がひび割れであれば、画像解析によりひび割れの大きさ(長さ)を検出し、ひび割れの大きさを構造物の不良箇所の評価内容を示す不良計測情報として生成する。
(Fourth embodiment)
Next, a fourth embodiment will be described.
In the fourth embodiment, in addition to the presence / absence of a defective portion of a structure, the evaluation content of the defective portion is obtained, and the evaluation content is reported together with the defective portion.
As shown in FIG. 10, in the fourth embodiment, the processing unit 304 functions as a failure measurement information generation unit that generates failure measurement information indicating the evaluation content of a defective portion of a structure.
More specifically, the processing unit 304 analyzes an image captured by the camera 202 and evaluates a defective portion of the structure.
That is, if the failure content is a crack, the processing unit 304 detects the size (length) of the crack by image analysis and generates the size of the crack as failure measurement information indicating the evaluation content of the failure location of the structure. I do.

図11に示すように、表示部306は、構造物の三次元形状の画像と三次元不良箇所情報と不良計測情報とを対応付けて報知する。
すなわち、表示部306の上部には、不良箇所(「西側壁面」)および不良内容(「ひび割れ」)に関するメッセージM1と、不良計測情報(「ひび割れ50mm)」に関するメッセージM2が表示されている。
不良計測情報の表示形態としては、上記のように具体的なひび割れの寸法を表示する他に以下のような表示形態が考えられる。
1)ひび割れの寸法の大小に応じた複数の段階に分けて、例えば、「ひび割れ大」、「ひび割れ中」、「ひび割れ小」といったように文字で表示する。
2)ひび割れの大小に応じて色を変えたマークで表示する。例えば、ひび割れの寸法が大きいほど暖色系となり、ひび割れが小さいほど寒色系となるように色を変化させたマークで表示する。
このような不良計測情報の表示形態は、不良内容に応じて適宜決定される。
As illustrated in FIG. 11, the display unit 306 reports the three-dimensional image of the structure, the three-dimensional defect location information, and the defect measurement information in association with each other.
That is, at the upper part of the display unit 306, a message M1 relating to the defective portion (“west wall surface”) and the content of the defect (“crack”), and a message M2 relating to the defect measurement information (“crack 50 mm”) are displayed.
As a display form of the failure measurement information, besides displaying the specific size of the crack as described above, the following display forms can be considered.
1) It is divided into a plurality of stages according to the size of the size of the crack, and displayed in characters such as "large crack", "during crack", and "small crack".
2) Display with a mark that changes color according to the size of the crack. For example, a mark whose color is changed so that the larger the size of the crack becomes the warmer color and the smaller the crack becomes the cooler color, is displayed.
The display form of such failure measurement information is appropriately determined according to the content of the failure.

第4の実施の形態によれば、構造物の不良箇所の有無に加えて、三次元モデルの画像上に不良箇所の評価内容を不良箇所と共に報知するので、不良箇所の不良内容を的確に把握する上で有利となる。
なお、第4の実施の形態に第3の実施の形態を適用して、構造物の展開図と三次元不良箇所情報と不良計測情報とを対応付けて報知するようにしてもよい。
According to the fourth embodiment, in addition to the presence / absence of a defective portion of the structure, the evaluation content of the defective portion is reported on the image of the three-dimensional model together with the defective portion, so that the details of the defective portion can be accurately grasped. It is advantageous in doing so.
Note that the third embodiment may be applied to the fourth embodiment so that the development view of the structure, the three-dimensional defect location information, and the defect measurement information may be notified in association with each other.

(第5の実施の形態)
次に第5の実施の形態について説明する。
第1〜第4の実施の形態では、回転翼機20が構造物の近傍を飛行しつつカメラ202で構造物の表面を撮影する場合について説明した。
この場合、回転翼機20が構造物に衝突しないように回転翼機20と構造物とを一定距離以上離間させる必要があるため、カメラ202を構造物の表面に接近させてより詳細な画像を得る上で不利がある。また、構造物の表面を撮影して得られる画像に基づいて構造物の表面の状態を検出するため、画像に反映されにくい構造物の表面の状態、例えば、タイルなどの外装材の浮きや剥がれの有無などを評価することは困難である。
そこで、第5の実施の形態では、回転翼機20と構造物表面との距離を一定に保持しつつ構造物の表面をカメラ202で撮影すると共に、構造物表面を叩打することで発生する打音に基づいて構造物表面の状態をも判定するようにしたものである。
(Fifth embodiment)
Next, a fifth embodiment will be described.
In the first to fourth embodiments, the case where the rotary wing aircraft 20 shoots the surface of the structure with the camera 202 while flying near the structure has been described.
In this case, since it is necessary to keep the rotary wing aircraft 20 and the structure at a certain distance or more so that the rotary wing aircraft 20 does not collide with the structure, the camera 202 is brought closer to the surface of the structure to obtain a more detailed image. There is a disadvantage in obtaining. In addition, since the state of the surface of the structure is detected based on an image obtained by photographing the surface of the structure, the state of the surface of the structure that is difficult to be reflected in the image, for example, floating or peeling of an exterior material such as a tile. It is difficult to evaluate the presence or absence.
Therefore, in the fifth embodiment, while the distance between the rotary wing machine 20 and the surface of the structure is kept constant, the surface of the structure is photographed by the camera 202, and the strike generated by hitting the surface of the structure is performed. The state of the structure surface is also determined based on the sound.

図12に示すように、第5の実施の形態では、回転翼機20は、第1の実施の形態と同様のカメラ202、GPSユニット204、処理部206、通信部208に加えて、案内手段70と、打撃部220(叩打手段)と、打音検出部222(検出手段)とを備えている。
また、第5の実施の形態においても、カメラ202で撮影された画像を画像解析して、構造物に不良があるか否かを判定し、構造物に不良がある場合に報知する一連の処理は、第1の実施の形態と同様になされる。
As shown in FIG. 12, in the fifth embodiment, the rotary wing aircraft 20 includes a camera 202, a GPS unit 204, a processing unit 206, and a communication unit 208 similar to those of the first embodiment, 70, a striking section 220 (striking means), and a striking sound detecting section 222 (detecting means).
Also in the fifth embodiment, a series of processing is performed by analyzing the image captured by the camera 202 to determine whether or not the structure has a defect and notifying the user when the structure has a defect. Is performed in the same manner as in the first embodiment.

案内手段70は、構造物表面62(ビル60の表面62)に当接することで構造物表面と回転翼機20との距離を一定に保持しつつ、構造物表面62に沿って回転翼機20に移動を案内するものである。
本実施の形態では、案内手段70は、回転翼機20のボディに設けられた3個以上のキャスター(車輪)72で構成されている。
各キャスター72は、360度旋回可能な全方向キャスターで構成され、同一平面上に互いに間隔をおいて配置されており、各キャスター72が構造物表面62に当接した状態で回転翼機20と構造物表面62との距離が予め定められた寸法となるように構成されている。なお、構造物表面62は、構造物(ビル60)の側面や上面(屋根)を含む。
上記予め定められた寸法は、カメラ202が構造物表面62を撮影するために必要な焦点距離を確保するに足る寸法であればよい。
したがって、回転翼機20が構造物表面62に接近し、やがて各キャスター72が構造物表面62に当接すると、回転翼機20と構造物表面62との距離が予め定められた寸法となり、この状態を保ったまま回転翼機20が構造物表面62に沿って移動可能となる。
The guide means 70 abuts against the structure surface 62 (the surface 62 of the building 60) to maintain a constant distance between the structure surface and the rotary wing machine 20 while maintaining the distance between the structure surface 62 and the rotary wing machine 20. Is to guide the movement.
In the present embodiment, the guide means 70 includes three or more casters (wheels) 72 provided on the body of the rotary wing machine 20.
Each caster 72 is constituted by an omnidirectional caster capable of rotating 360 degrees, and is arranged at intervals on the same plane. Each caster 72 is in contact with the rotary wing machine 20 in a state where the caster 72 is in contact with the structure surface 62. The distance from the structure surface 62 is configured to be a predetermined dimension. The structure surface 62 includes a side surface and a top surface (roof) of the structure (building 60).
The predetermined size may be any size as long as the camera 202 secures a focal length necessary for photographing the structure surface 62.
Accordingly, when the rotary wing machine 20 approaches the structure surface 62 and each caster 72 comes into contact with the structure surface 62, the distance between the rotary wing machine 20 and the structure surface 62 becomes a predetermined dimension. The rotary wing aircraft 20 can move along the structure surface 62 while maintaining the state.

打撃部220は、構造物表面62を叩打することで構造物表面62から打音を発生させるものであり、例えば、ハンマーと、ハンマーを構造物表面62に向けて出没させるアクチュエータとを含んで構成されている。アクチュエータとしては、電磁ソレノイドやモータなど従来公知の様々なアクチュエータが使用可能である。
打音検出部222は、打撃部220により叩打された構造物から発生する打音を検出して打音検出信号を生成するものであり、例えば、マイクロフォンで構成されている。
The striking portion 220 generates a tapping sound from the structure surface 62 by hitting the structure surface 62, and includes, for example, a hammer and an actuator that causes the hammer to protrude and retract toward the structure surface 62. Have been. As the actuator, various conventionally known actuators such as an electromagnetic solenoid and a motor can be used.
The striking sound detection unit 222 detects a striking sound generated from the structure struck by the striking unit 220 and generates a striking sound detection signal, and is configured by, for example, a microphone.

処理部206は、打撃部220の動作を制御すると共に、打音検出部222から供給される打音検出信号に基づいて構造物表面62の不良の有無を判定する打音判定手段として機能する。
具体的には、処理部206は、例えば、打音検出信号の周波数、振幅、波長などに基づいて構造物表面62に貼り付けられているタイルなどの外装材の剥離の有無や構造物表面62における構造物部分の剥がれの有無や空洞の有無を検出しその検出結果に基づいて構造物表面62の不良の有無を判定する。このような打音に基づく構造物表面62の状態の検出方法として従来公知の様々な手法が採用可能である。
The processing unit 206 controls the operation of the striking unit 220 and also functions as a striking sound judging unit that judges the presence or absence of a defect on the structure surface 62 based on the striking sound detection signal supplied from the striking sound detection unit 222.
Specifically, for example, the processing unit 206 determines whether the exterior material such as a tile attached to the structure surface 62 has been peeled off based on the frequency, amplitude, wavelength, or the like of the hammer detection signal, and determines whether the structure surface 62 The presence or absence of peeling of the structure portion and the presence or absence of a cavity in the above are detected, and the presence or absence of a defect on the structure surface 62 is determined based on the detection result. As a method of detecting the state of the structure surface 62 based on such a tapping sound, various conventionally known methods can be adopted.

また、処理部206は、構造物表面62の不良があると判定された場合に、GPSユニット204により特定された回転翼機20の現在位置を、当該不良を示す事象が発生している構造物上の位置として検出する位置検出手段として機能する。
さらに、処理部206は、特定された回転翼機20の現在位置と構造物表面62の状態の判定結果とを関連付けた構造物表面状態情報を生成し、通信部208を介して管理端末30の処理部304に送信する。
管理端末30の処理部304は、構造物表面状態情報に含まれる回転翼機20の現在位置と、設計データ内の位置情報とに基づいて、構造物と回転翼機20との相対位置を特定し、表示部306に、構造物表面62の状態の判定結果を構造物上の位置とともに報知する。すなわち、報知手段により構造物表面62の状態の判定結果が構造物上の位置とともに報知される。
Further, when it is determined that there is a defect on the structure surface 62, the processing unit 206 changes the current position of the rotary wing aircraft 20 specified by the GPS unit 204 to the structure in which the event indicating the defect has occurred. It functions as a position detecting means for detecting as an upper position.
Further, the processing unit 206 generates structure surface state information in which the identified current position of the rotary wing aircraft 20 and the determination result of the state of the structure surface 62 are associated with each other, and the management terminal 30 The information is transmitted to the processing unit 304.
The processing unit 304 of the management terminal 30 specifies the relative position between the structure and the rotary wing aircraft 20 based on the current position of the rotary wing aircraft 20 included in the structure surface state information and the position information in the design data. Then, the display unit 306 is notified of the determination result of the state of the structure surface 62 together with the position on the structure. That is, the determination result of the state of the structure surface 62 is notified by the notification means together with the position on the structure.

表示部306に表示される構造物の画像の形態は以下のようなものであってよい。
1)第1の実施の形態(図4)のように二次元で示された構造物の画像(カメラ202で撮像された画像、あるいは、設計データに基づいて描画した描画画像)
2)第2の実施の形態(図7)のように三次元で示された構造物の画像(三次元モデルの画像)
3)第3の実施の形態(図9)のように構造物の三次元モデルを平面に展開することで得られる構造物の展開図の画像
The form of the image of the structure displayed on the display unit 306 may be as follows.
1) An image of a structure shown two-dimensionally as in the first embodiment (FIG. 4) (an image captured by the camera 202 or a drawn image drawn based on design data)
2) Image of structure shown in three dimensions as in the second embodiment (FIG. 7) (image of three-dimensional model)
3) An image of a developed view of the structure obtained by developing a three-dimensional model of the structure on a plane as in the third embodiment (FIG. 9).

以上説明したように第5の実施の形態によれば、回転翼機20に、構造物表面62に当接することで構造物表面62と回転翼機20との距離を一定に保持しつつ、構造物表面62に沿って回転翼機20に移動を案内する案内手段70を設けたので、回転翼機20により移動しつつ構造物表面62の詳細をカメラ202で撮影する上で有利となる。
また、第5の実施の形態によれば、構造物表面62を叩打して構造物表面62から発生する打音に基づいて構造物表面62の不良の有無を判定し、構造物表面62の不良があると判定された場合に、当該不良を示す事象が発生している構造物上の位置を特定し、当該不良を構造物上の位置とともに報知するようにしたので、画像に反映されにくい構造物表面62の状態、例えば、外装材の浮きや剥がれの有無などを正確に評価する上で有利となる。
また、第5の実施の形態によれば、案内手段70により構造物表面62と回転翼機20との距離を一定に保持できるため、構造物表面62に対する回転翼機20の位置および姿勢を安定した状態で構造物表面62を叩打することができ、打音の検出を安定して行え、構造物表面62の不良の有無の判定を正確に行なう上で有利となる。
As described above, according to the fifth embodiment, while maintaining the distance between the structure surface 62 and the rotary wing machine 20 constant by contacting the rotary wing machine 20 with the structure surface 62, the structure is improved. Since the guide means 70 for guiding the movement to the rotary wing machine 20 along the object surface 62 is provided, it is advantageous in taking the details of the structure surface 62 with the camera 202 while moving by the rotary wing machine 20.
Further, according to the fifth embodiment, the presence or absence of a defect in the structure surface 62 is determined based on a tapping sound generated from the surface 62 of the structure by hitting the surface 62 of the structure. When it is determined that there is a defect, the position on the structure where the event indicating the defect has occurred is specified, and the defect is notified together with the position on the structure, so that the structure that is hardly reflected in the image This is advantageous in accurately evaluating the state of the object surface 62, for example, the presence or absence of floating or peeling of the exterior material.
Further, according to the fifth embodiment, since the distance between the structure surface 62 and the rotary wing machine 20 can be kept constant by the guide means 70, the position and the attitude of the rotary wing machine 20 with respect to the structure surface 62 are stabilized. In this state, the structure surface 62 can be hit, and the hitting sound can be stably detected, which is advantageous in accurately determining whether or not the structure surface 62 is defective.

(第6の実施の形態)
次に第6の実施の形態について説明する。
第5の実施の形態では、案内手段70により回転翼機20の構造物表面62に対する位置および姿勢を安定して保持する場合について説明したが、第6の実施の形態では、案内手段70に代えて、構造物表面62に対して吸着する吸着手段80を回転翼機20に設けることで回転翼機20の構造物表面62に対する位置および姿勢を安定して保持する場合について説明する。
(Sixth embodiment)
Next, a sixth embodiment will be described.
In the fifth embodiment, the case where the position and the attitude of the rotary wing machine 20 with respect to the structure surface 62 are stably held by the guide means 70 has been described. However, in the sixth embodiment, the guide means 70 is replaced with the guide means 70. A description will be given of a case where the position and the attitude of the rotary wing machine 20 with respect to the structural surface 62 are stably maintained by providing the rotary wing machine 20 with the suction means 80 for sucking the structure surface 62.

図13に示すように、第6の実施の形態では、回転翼機20は、第5の実施の形態の案内手段70に代えて吸着手段80を備えている。
吸着手段80は、回転翼機20に設けられ、構造物表面62に吸着することで構造物表面62と回転翼機20との距離を一定に保持し、構造物表面62に対する吸着を解除することで回転翼機20の移動を許容するものである。
本実施の形態では、案内手段70は、バキュームチャック82と、真空ポンプ84とを備えている。
バキュームチャック82は、対象物を吸引固定する吸引面8202と、吸引面8202に開口する複数の吸引孔8204と、各吸引孔8204に連通する接続口8206を備えている。
真空ポンプ84は、処理部206の制御により駆動、駆動の停止が制御されるものであり、真空ポンプ84の吸気口8402がバキュームチャック82の接続口8206に接続されており、真空ポンプ84が作動することで吸引面8202が構造物表面62に吸着する。なお、処理部206の制御は、管理端末30によってなされる。
バキュームチャック82は、真空ポンプ84の動作により吸引面8202が構造物表面62に吸着した状態で回転翼機20と構造物表面62との距離が予め定められた寸法となるように、ブラケットを介して回転翼機20に取り付けられている。
そして、真空ポンプ84の駆動が停止された状態で構造物60の近傍において回転翼機20の移動がなされ、所望の位置で真空ポンプ84を駆動することで回転翼機20がバキュームチャック82を介して構造物表面62に固定されることになる。
As shown in FIG. 13, in the sixth embodiment, the rotary wing machine 20 includes a suction unit 80 instead of the guide unit 70 of the fifth embodiment.
The suction means 80 is provided on the rotary wing machine 20 to hold the distance between the structure surface 62 and the rotary wing machine 20 constant by sucking the structure surface 62 and release the suction to the structure surface 62. This allows the rotary wing machine 20 to move.
In the present embodiment, the guide unit 70 includes a vacuum chuck 82 and a vacuum pump 84.
The vacuum chuck 82 includes a suction surface 8202 for sucking and fixing an object, a plurality of suction holes 8204 opened in the suction surface 8202, and a connection port 8206 communicating with each suction hole 8204.
The vacuum pump 84 is driven and stopped by the control of the processing unit 206. The suction port 8402 of the vacuum pump 84 is connected to the connection port 8206 of the vacuum chuck 82, and the vacuum pump 84 operates. Then, the suction surface 8202 is adsorbed on the structure surface 62. The control of the processing unit 206 is performed by the management terminal 30.
The vacuum chuck 82 is provided via a bracket so that the distance between the rotary wing machine 20 and the structure surface 62 becomes a predetermined dimension in a state where the suction surface 8202 is attracted to the structure surface 62 by the operation of the vacuum pump 84. To the rotary wing machine 20.
Then, the rotary wing machine 20 is moved near the structure 60 in a state where the driving of the vacuum pump 84 is stopped, and the rotary wing machine 20 is driven via the vacuum chuck 82 by driving the vacuum pump 84 at a desired position. Thus, it is fixed to the structure surface 62.

第6の実施の形態によれば、回転翼機20に、構造物表面62に対して吸着することで構造物表面62と回転翼機20との距離を一定に保持し、構造物表面62に対する吸着を解除することで回転翼機20の移動を許容する吸着手段80を設けたので、構造物表面62の詳細をカメラ202で撮影する上で有利となる。
また、第6の実施の形態によれば、吸着手段80により構造物表面62と回転翼機20との距離を一定に保持できるため、構造物表面62に対する回転翼機20の位置および姿勢を安定した状態で構造物表面62を叩打することができ、打音の検出を安定して行え、構造物表面62の不良の有無の判定を正確に行なう上で有利となる。
なお、吸着手段80は、構造物表面62に吸着できればよいのであり、例えば、構造物表面62が鉄などのように磁石に吸引される材料で構成されている場合は、吸着手段80を電磁石および電磁石に電流を供給する駆動回路によって構成してもよい。
According to the sixth embodiment, the distance between the structure surface 62 and the rotary wing machine 20 is kept constant by adsorbing the structure surface 62 on the rotary wing machine 20, and the structure surface 62 Since the suction means 80 that allows the rotation of the rotary wing machine 20 by releasing the suction is provided, it is advantageous when the details of the structure surface 62 are photographed by the camera 202.
Further, according to the sixth embodiment, since the distance between the structure surface 62 and the rotary wing machine 20 can be kept constant by the suction means 80, the position and the attitude of the rotary wing machine 20 with respect to the structure surface 62 are stabilized. In this state, the structure surface 62 can be hit, and the hitting sound can be stably detected, which is advantageous in accurately determining whether or not the structure surface 62 is defective.
The adsorbing means 80 only needs to be capable of adsorbing on the surface 62 of the structure. For example, when the surface 62 of the structure is made of a material which is attracted to a magnet such as iron, the adsorbing means 80 may be connected to an electromagnet and an electromagnet. It may be constituted by a drive circuit for supplying a current to the electromagnet.

10……点検装置
20……回転翼機
202……カメラ
204……GPSユニット
206……処理部
208……通信部
212……筐体
214……プロペラ
30……管理端末
302……通信部
304……処理部
306……表示部
308……設計データ記憶部
60……ビル
62……表面
70……案内手段
72……キャスター
80……吸着手段
82……バキュームチャック
84……真空ポンプ
210……3Dスキャナ
220……打撃部
222……打音検出部
10 Inspection device 20 Rotary wing machine 202 Camera 204 GPS unit 206 Processing unit 208 Communication unit 212 Casing 214 Propeller 30 Management terminal 302 Communication unit 304 ... Processing unit 306 display unit 308 design data storage unit 60 building 62 surface 70 guide unit 72 caster 80 suction unit 82 vacuum chuck 84 vacuum pump 210 ... 3D scanner 220... Hitting section 222... Hitting sound detecting section

Claims (7)

構造物表面における不良の有無を点検する構造物の点検装置であって、
無線操縦式の回転翼機と、
前記回転翼機に搭載され、前記構造物表面の画像を連続的に撮影するカメラと、
前記カメラで撮影された前記画像を画像解析して、前記構造物に不良があるか否かを判定する判定手段と、
前記構造物に不良がある場合に報知する報知手段と、
前記回転翼機の現在位置を特定する位置特定手段とを備え、
前記位置特定手段によって特定された現在位置は、前記画像とともに当該画像が撮影された位置を示す位置情報として記録され、
前記判定手段は、前記画像に前記構造物の不良を示す事象が映っている場合に前記構造物に不良があると判定するとともに、前記画像とともに記録された前記位置情報を用いて前記不良を示す事象が発生している前記構造物上の位置を不良箇所位置として特定するものであり、
前記構造物の三次元形状を測定する三次元形状取得手段と、
前記三次元形状から前記構造物の三次元モデルを生成すると共に、前記三次元モデルと前記不良箇所位置とを関連付けた三次元不良箇所情報を生成する三次元データ生成手段と、
前記構造物の三次元モデルを平面に展開することで前記構造物の展開図を生成する展開図生成手段と
前記カメラで撮影された前記画像を画像解析して、前記構造物の不良箇所の評価内容を示す不良計測情報を生成する不良計測情報生成手段とをさらに備え、
前記報知手段は、前記構造物に不良がある場合、前記三次元不良箇所情報に基づいて前記構造物の三次元モデルと共に前記不良箇所を画面に表示し、前記三次元不良箇所情報に基づいて前記構造物の展開図と共に前記不良箇所を前記画面に表示し、
前記報知手段による前記三次元不良箇所情報に基づく画面表示は、前記不良箇所の周辺の前記三次元モデルの部分と共に前記不良箇所を表示する第1画面と、前記構造物の全体の前記三次元モデルと共に前記前記不良箇所を表示する第2画面とを同一の画面上に表示することでなされ、
前記第2画面は前記第1画面よりも小さい面積で前記第1画面上に表示され、
さらに前記報知手段は、前記構造物の三次元形状の画像と前記三次元不良箇所情報と前記不良計測情報とを対応付けて報知し、
前記報知手段による前記報知は、前記第1画面上に、前記不良箇所の場所および前記不良箇所の不良内容を説明する第1メッセージと、前記不良計測情報に関する第2メッセージとを表示することでなされる、
ことを特徴とする構造物の点検装置。
A structure inspection device for inspecting a structure surface for defects.
A radio-controlled rotary wing aircraft,
A camera mounted on the rotary wing machine and continuously taking an image of the surface of the structure,
Image analysis of the image taken by the camera, a determination unit to determine whether there is a defect in the structure,
Notifying means for notifying when there is a defect in the structure,
Position specifying means for specifying a current position of the rotary wing aircraft,
The current position specified by the position specifying unit is recorded as position information indicating a position where the image was captured together with the image,
The determining means determines that the structure has a defect when an event indicating the defect of the structure is reflected in the image, and indicates the defect using the position information recorded together with the image. A position on the structure where the event has occurred is specified as a defective portion position,
Three-dimensional shape acquisition means for measuring the three-dimensional shape of the structure,
A three-dimensional data generation unit that generates a three-dimensional model of the structure from the three-dimensional shape, and generates three-dimensional defect location information that associates the three-dimensional model with the defect location.
Development view generating means for generating a development view of the structure by developing a three-dimensional model of the structure on a plane ,
Image analysis of the image captured by the camera, further comprising a failure measurement information generating means for generating failure measurement information indicating the evaluation content of the defective portion of the structure,
The notifying unit, when there is a defect in the structure, displays the defect location on a screen together with a three-dimensional model of the structure based on the three-dimensional defect location information, and displays the defect location based on the three-dimensional defect location information. Displaying the defective portion on the screen together with a development view of the structure ,
A screen display based on the three-dimensional defect location information by the notifying unit includes a first screen displaying the defect location together with a part of the three-dimensional model around the defect location, and the three-dimensional model of the entire structure. And a second screen displaying the defective portion is displayed on the same screen,
The second screen is displayed on the first screen with an area smaller than the first screen,
Further, the notifying unit notifies the image of the three-dimensional shape of the structure in association with the three-dimensional defect location information and the defect measurement information,
The notification by the notification unit is performed by displaying, on the first screen, a first message describing the location of the defective portion and the content of the defective portion, and a second message related to the defective measurement information. ,
An inspection device for a structure.
前記回転翼機は、予め定められた飛行経路および飛行速度で飛行し、
前記カメラは、前記回転翼機が飛行を開始した時刻からの経過時間を前記画像とともに記録し、
前記判定手段は、前記飛行経路、前記飛行速度、および前記画像とともに記録された前記経過時刻とを用いて前記不良を示す事象が発生している位置を特定する、
ことを特徴とする請求項記載の構造物の点検装置。
The rotary wing aircraft flies in a predetermined flight path and flight speed,
The camera records the elapsed time from the time when the rotary wing aircraft started flying together with the image,
The determination unit specifies a position where an event indicating the failure has occurred using the flight path, the flight speed, and the elapsed time recorded together with the image.
The structure inspection device according to claim 1, wherein:
前記回転翼機は、前記構造物の周辺を所定期間ごとに同じ飛行経路で飛行し、
前記カメラは、撮影ごとに同じ角度から前記構造物を撮影し、
前記判定手段は、前記画像に前記不良を示す事象が映っている場合には、前記画像より前に撮影された過去画像と比較して、当該不良を示す事象が生じた日時を推定する、
ことを特徴とする請求項1または2記載の構造物の点検装置。
The rotary wing aircraft flies along the same flight path every predetermined period around the structure,
The camera shoots the structure from the same angle for each shot,
When the event indicating the defect is reflected in the image, the determining unit compares the event with the past image captured before the image to estimate the date and time when the event indicating the defect has occurred.
The structure inspection device according to claim 1 or 2, wherein:
前記カメラは全方位カメラあるいは全天球カメラである、
ことを特徴とする請求項1からのいずれか1項記載の構造物の点検装置。
The camera is an omnidirectional camera or a spherical camera;
The structure inspection device according to any one of claims 1 to 3 , wherein:
前記回転翼機に設けられ、前記構造物表面に当接することで前記構造物表面と前記回転翼機との距離を一定に保持しつつ、前記構造物表面に沿って前記回転翼機に移動を案内する案内手段を備える、
ことを特徴とする請求項1からのいずれか1項記載の構造物の点検装置。
The rotating wing machine is provided on the rotating wing machine, and moves to the rotating wing machine along the structure surface while maintaining a constant distance between the structure surface and the rotating wing machine by abutting on the structure surface. Equipped with guiding means for guiding,
The structure inspection device according to any one of claims 1 to 4 , wherein:
前記回転翼機に設けられ、前記構造物表面に対して吸着することで前記構造物表面と前記回転翼機との距離を一定に保持し、前記構造物表面に対する吸着を解除することで前記回転翼機の移動を許容する吸着手段を備える、
ことを特徴とする請求項1からのいずれか1項記載の構造物の点検装置。
The rotating wing is provided on the rotary wing machine, and the distance between the structure surface and the rotary wing machine is kept constant by adsorbing to the structure surface, and the rotation is released by releasing the suction to the structural surface. Equipped with suction means to allow movement of the wing aircraft,
The structure inspection device according to any one of claims 1 to 5 , wherein:
前記回転翼機に設けられ前記構造物表面を叩打する叩打手段と、
前記回転翼機に設けられ前記構造物表面から発生する打音を検出する検出手段と、
前記検出手段で検出された打音に基づいて前記構造物表面の不良の有無を判定する打音判定手段と、
前記構造物表面の不良があると判定された場合に、当該不良を示す事象が発生している前記構造物上の位置を検出する位置検出手段とを備え、
前記報知手段は、前記構造物表面の不良がある場合、当該不良を前記構造物上の位置とともに報知する、
ことを特徴とする請求項または記載の構造物の点検装置。
Hitting means provided on the rotary wing machine for hitting the surface of the structure,
Detecting means provided on the rotary wing machine and detecting a tapping sound generated from the surface of the structure;
A tapping sound determining unit that determines whether there is a defect on the surface of the structure based on the tapping sound detected by the detecting unit,
When it is determined that there is a defect on the surface of the structure, comprising a position detection unit that detects a position on the structure where an event indicating the defect has occurred,
When there is a defect on the surface of the structure, the notifying unit notifies the defect together with a position on the structure,
The structure inspection device according to claim 5 or 6, wherein:
JP2015037899A 2014-03-27 2015-02-27 Structure inspection device Active JP6648971B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015037899A JP6648971B2 (en) 2014-03-27 2015-02-27 Structure inspection device

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014065109 2014-03-27
JP2014065109 2014-03-27
JP2015037899A JP6648971B2 (en) 2014-03-27 2015-02-27 Structure inspection device

Publications (2)

Publication Number Publication Date
JP2015194069A JP2015194069A (en) 2015-11-05
JP6648971B2 true JP6648971B2 (en) 2020-02-19

Family

ID=54433320

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015037899A Active JP6648971B2 (en) 2014-03-27 2015-02-27 Structure inspection device

Country Status (1)

Country Link
JP (1) JP6648971B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102588141B1 (en) * 2022-10-13 2023-10-12 주식회사 승화기술 Deep learning based exterior inspection method using dron image

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6965160B2 (en) 2015-09-15 2021-11-10 住友建機株式会社 Excavator
JP6664209B2 (en) * 2015-12-16 2020-03-13 日立Geニュークリア・エナジー株式会社 Investigation method using flight-type survey aircraft
JP6363632B2 (en) * 2016-01-13 2018-07-25 公益財団法人鉄道総合技術研究所 Remote structure inspection system using a small unmanned aerial vehicle
CN114640827A (en) 2016-01-29 2022-06-17 住友建机株式会社 Shovel and autonomous flying body flying around shovel
JP6478329B2 (en) * 2016-02-02 2019-03-06 Jfe鋼板株式会社 Structure inspection system and inspection method
JP6672857B2 (en) * 2016-02-09 2020-03-25 日本電気株式会社 Unmanned flying device control system, unmanned flying device control method, and unmanned flying device
WO2017183636A1 (en) * 2016-04-19 2017-10-26 インダストリーネットワーク株式会社 Suction drone aircraft and work method using said suction drone aircraft
JP6522543B2 (en) * 2016-04-20 2019-05-29 ルーチェサーチ株式会社 Unmanned air vehicle
JP6577902B2 (en) * 2016-04-20 2019-09-18 ルーチェサーチ株式会社 Unmanned aerial vehicle
DE102016206982B4 (en) * 2016-04-25 2022-02-10 Siemens Aktiengesellschaft Airmobile for scanning an object and system for damage analysis of the object
TWI682876B (en) * 2016-05-27 2020-01-21 日商日本電氣股份有限公司 Inspection system, control device and control method
WO2017208281A1 (en) * 2016-06-01 2017-12-07 株式会社 スカイロボット Wave-detection-type searching system
CN109313166A (en) * 2016-06-16 2019-02-05 日本电气株式会社 Inspection system, robot moving equipment and inspection method
JP6427300B2 (en) 2016-06-30 2018-11-21 株式会社オプティム All-sky camera camera image display system, method and program
JP2018055351A (en) * 2016-09-28 2018-04-05 アトミクス株式会社 Estimation preparing system for roof painting or waterproof construction
JP6691878B2 (en) * 2017-02-06 2020-05-13 公益財団法人鉄道総合技術研究所 Elastic wave measurement system
CN110366670B (en) * 2017-03-02 2021-10-26 深圳市大疆创新科技有限公司 Three-dimensional shape estimation method, flight vehicle, mobile platform, program, and recording medium
KR101879673B1 (en) * 2017-06-02 2018-07-18 (주)건설표준시험원 Apparatus and method for inspecting of structure surface using unmanned aerial vehicle
JP7024997B2 (en) * 2017-11-03 2022-02-24 株式会社エアロネクスト Aircraft Maneuvering System and How to Maneuver an Aircraft Using an Aircraft Maneuvering System
JP6618564B2 (en) * 2018-03-30 2019-12-11 株式会社Liberaware Flying object
WO2019198155A1 (en) * 2018-04-10 2019-10-17 株式会社自律制御システム研究所 Unmanned aerial vehicle, flight control mechanism for unmanned aerial vehicle, and method for using unmanned aerial vehicle and mechanism for unmanned aerial vehicle
JP2021047059A (en) * 2019-09-18 2021-03-25 株式会社サテライトオフィス Drone system and program of drone system
JP6960440B2 (en) * 2019-09-30 2021-11-05 パナソニックホームズ株式会社 Tile wall diagnostic system and tile wall diagnostic method
US20230254559A1 (en) 2019-10-16 2023-08-10 NejiLaw inc. Image-information-acquistion-type fastening means and monitoring system
JP6772357B1 (en) * 2019-10-31 2020-10-21 純 丹澤 Inspection information provision system by unmanned aerial vehicle

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007139707A (en) * 2005-11-22 2007-06-07 Ricoma:Kk Wall face investigation system
US8060270B2 (en) * 2008-02-29 2011-11-15 The Boeing Company System and method for inspection of structures and objects by swarm of remote unmanned vehicles
JP2012145346A (en) * 2011-01-07 2012-08-02 Eda Tokushu Bosui Kogyo Kk Outer wall lifting detection system, outer wall lifting detection method and moving flight vehicle for detecting outer wall lifting
US20120136630A1 (en) * 2011-02-04 2012-05-31 General Electric Company Method and system for wind turbine inspection

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102588141B1 (en) * 2022-10-13 2023-10-12 주식회사 승화기술 Deep learning based exterior inspection method using dron image

Also Published As

Publication number Publication date
JP2015194069A (en) 2015-11-05

Similar Documents

Publication Publication Date Title
JP6648971B2 (en) Structure inspection device
Zhong et al. Assessment of the feasibility of detecting concrete cracks in images acquired by unmanned aerial vehicles
US10095087B2 (en) Unmanned aerial vehicle system for taking close-up picture of facility and photography method using the same
JP6579767B2 (en) Structure inspection device
US8655022B2 (en) System and method for detecting position of underwater vehicle
JP6203569B2 (en) Bridge damage state investigation system, bridge damage state investigation method and aerial mobile equipment
JP6581839B2 (en) Structure inspection method
JP2019036269A (en) Flight control method of pilotless small flying object, and inspection method of condition of internal space and condition of wall surface thereof
JP2019144191A (en) Image processing system, image processing method and program for inspecting structure such as bridge
JP2021015081A (en) Surveying apparatus
KR102153653B1 (en) 3D scan and VR inspection system of exposed pipe using drone
JP2016050876A (en) Hammering inspection recording device
CN112858476A (en) Building structure monitoring method, system, terminal and storage medium based on 5G
JP2016109557A (en) Inspection method of structure and inspection device of structure
KR101923314B1 (en) Unmanned air wehicle for tunnel structure investigation, and system using the same
Caroti et al. Indoor photogrammetry using UAVs with protective structures: issues and precision tests
Watanabe et al. Robot-assisted acoustic inspection of infrastructures-cooperative hammer sounding inspection
WO2016024303A1 (en) Nondestructive concrete-structure inspection system
WO2017199273A1 (en) Search system
JP7441067B2 (en) Mobile crack detection device and crack detection method
US20190035144A1 (en) Method for creating a 3d model of an object
KR102572904B1 (en) Drones and Inspection Methods
Durdevic et al. Lidar assisted camera inspection of wind turbines: experimental study
JP2016205901A (en) Position recognition apparatus for inspected object
TWM525323U (en) Flight apparatus and flight control system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150309

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20150309

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181010

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200116

R150 Certificate of patent or registration of utility model

Ref document number: 6648971

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250