JP2020197467A

JP2020197467A - Ｓｌａｍによる自律飛行機能を備えた無人機を用いた構造物の検査方法

Info

Publication number: JP2020197467A
Application number: JP2019104151A
Authority: JP
Inventors: 俊雄小泉; Toshio Koizumi; 賢司大石; Kenji Oishi
Original assignee: NETRISE Inc; Shinko Consultant Co Ltd
Current assignee: NETRISE Inc; Shinko Consultant Co Ltd
Priority date: 2019-06-04
Filing date: 2019-06-04
Publication date: 2020-12-10

Abstract

【課題】衛星測位システム情報を必要としない自律飛行機能を備えたドローンを用いた構造物等の検査方法を提示する。【解決手段】検査方法は、被検査構造物を複数個所から撮影した画像を得るステップＳｔ１と、複数画像から被検査構造物の三次元点群情報の画像を得るステップＳｔ２と、被検査構造物の３点以上の地上三次元座標情報を得るステップＳｔ３と、複数点の地上三次元座標情報を三次元点群情報の画像情報に重ねて被検査構造物の三次元点群情報の地上三次元座標情報を得るステップと、三次元点群情報から撮影位置を地上三次元座標情報で設定するステップと、ドローンに搭載したカメラの画像情報でSLAM手段を機能させてドローンの飛行領域の地図情報を得るステップと、地図情報を地上三次元座標に重ねるステップＳｔ６と、撮影位置に自律飛行させて被検査部位の検査画像を取得するステップＳｔ７とを踏む。【選択図】図１

Description

本発明はカメラやレーザー等を搭載した無人機を用いた構造物等の三次元形状体の検査方法に関するもので、特に、人が近づきにくい橋梁の下面部分など構造物の精密画像を近接距離から取得する検査方法に適した技術である。

我が国の社会インフラは、高度成長期に整備されたものが多く、老朽化の時期を迎え、橋、トンネルやダムといった設備の点検が必要となっている中、安全で財政的負担が軽くかつ効率的な検査技術や情報管理の技術が強く求められている。この様な要望に応える検査方法として、カメラやレーザー等を搭載した無人機（以下単にドローンという)による写真計測が注目され、実用化されつつある。この検査方法は危険部位に人が立ち入る必要がなく、足場を組む必要もなく、被検査部材表面の画像情報を取得することができるからである。

ドローン（Drone）は、元々偵察機として軍事用に開発されたものであったが、その後災害時の情報収集機として、近年では商業用や、民間利用も増加傾向にある。我が国では土木分野でもその活用が期待され、本発明者らは先に特許文献１の「無人機を用いた構造物等の検査方法」を出願し、特許権を取得した。この発明は、被検査構造物を複数個所から撮影した画像を得るステップと、該複数画像から前記被検査構造物の三次元点群情報の画像を得るステップと、前記被検査構造物の近傍に自動追尾型トータルステーションを設置して該構造物の３点以上の地上三次元座標情報を得るステップと、該複数点の地上三次元座標情報を前記三次元点群情報の画像情報に重ねて前記被検査構造物の三次元点群情報の地上三次元座標情報を得るステップと、前記三次元点群情報から被検査部位を撮影する位置を地上三次元座標情報で設定するステップと、カメラを搭載したドローンを前記自動追尾型トータルステーションにより前記撮影位置に誘導制御して前記被検査部位の検査画像を取得するステップとを踏むものである。

このドローンを用いた構造物の検査方法は、GNSSを用いないドローンの自律飛行手法を採用するものであるため、衛星測位電波の届かない領域でも使用可能であり、その位置制御精度も衛星測位制御に勝るとの効果を奏する上に、被検査構造物を複数個所から撮影した画像を得て前記被検査構造物の三次元点群情報の画像を取得するものであるから、その画像から破損個所など要検査部位を特定することができると共に、その被検査構造物の三次元点群情報から被検査構造物の立体構造を検知し、どの個所に応力集中等の負荷がかかり、疲労している箇所であるかを推定して特定することをドローンによるデータ取得前に容易に行うことができる。またその立体画像から損傷状態をある程度事前に把握できた場合には、どのアングルから撮影すれば効果的な検査画像が得られるかを決定することも可能となる。
また、この検査方法は、前記撮像位置情報を事前にメモリに記憶させておき、ドローンの移動をプログラムして位置制御させるようにすることにより、ドローンを飛行させその撮影画面から劣化・破損個所を検知しながら検査画像を撮影するようなオペレータに負担をかけることもなく、全領域にわたり撮影位置を均等間隔に設定して検査画像を自動取得できることは勿論、要検査部位を選定してより短時間で、かつ検査箇所の見落としもなく着実に検査画像を取得する構造物の検査を実施することができる。また、検査にあたり操作する者の負担を大きく軽減することができる。
更に、この検査方法は、前記被検査構造物の三次元点群情報の画像から欠陥部と推定される部位を把握し、該欠陥推定情報に応じて最適な位置と撮影視覚を決定し、撮影位置とカメラ角度を制御するようにしたことにより、被検査構造物の劣化・破損部の状況をよく観察できる適正画像の取得が可能となるというように、幾多の特有の効果を奏する画期的なものであった。

ところで、ドローンの自律飛行手法は、ドローンが野外空間を飛行させるものであるため、その自律飛行はGNSS等の衛星測位システムによる位置情報を用いることが一般的である。しかし、構造物等の検査方法においては、橋梁の下方領域など電波の届きにくい領域を飛行させることが多いため、衛星測位システムによる位置情報を用いることが不向きである。そのため、前述の構造物等の検査方法は、ドローンの自律飛行手法として被検査構造物の近傍位置に自動追尾型トータルステーション（以下トータルステーションをＴＳと略称する。）を設置し、ドローンの反射プリズムに向け、このＴＳからレーザ光を照射して捉え、該ドローンの現在位置を座標情報として把握するようにしていた。そのため、ＴＳとドローンの反射プリズム間に構造物等の障害物が存在する場合など、ＴＳがドローンの反射プリズムを捉えられない事態が生じると、ドローンの現在位置情報が得られなくなって自律飛行ができなくなってしまうという問題を起こすことが分かった。図５には特許文献１に示された手法で行う構造物10の検査において、構造物の下方突出物がＴＳ３とドローン１の間に遮蔽物となってドローンを追尾できなく状況が生じることを例示している。

特開２０１７−１１６４５３号公報「無人機を用いた構造物の検査方法」平成２９年６月２６日公開特表２０１３−５０３４０４号公報「移動ロボット環境の同時局在化およびマッピング方法および装置」平成２５年１月３１日公表

本発明の課題は、衛星測位システム情報を必要としない自律飛行機能を備えたドローンを用いた構造物等の検査方法において、ＴＳとドローンとの位置関係における構造物等の障害物の影響を受けることなく、自由度の高い堅実なドローンを用いた構造物等の検査方法を提示することにある。

本発明のSLAMによる自律飛行機能を備えたドローンを用いた構造物等の検査方法は、被検査構造物を複数個所から撮影した画像を得るステップと、該複数画像から前記被検査構造物の三次元点群情報の画像を得るステップと、前記被検査構造物の３点以上の地上三次元座標情報を得るステップと、該複数点の地上三次元座標情報を前記三次元点群情報の画像情報に重ねて前記被検査構造物の三次元点群情報の地上三次元座標情報を得るステップと、前記三次元点群情報から撮影位置を地上三次元座標情報で設定するステップと、ドローンに搭載したカメラやレーザー等の画像情報でSLAM(Simultaneous Localization And Mapping)手段を機能させてドローンの飛行領域の地図情報を得るステップと、該地図情報を前記地上三次元座標に重ねるステップと、前記撮影位置に自律飛行させて前記被検査部位の検査画像を取得するステップとを踏むものである。
そして、前記被検査構造物の３点以上の地上三次元座標情報を得る手段には、ＴＳ、レーザ測位システムまたは衛星測位システムを用いるものとした。
また、本発明のドローンを用いた構造物の検査方法は、上記構成に加え、前記撮像位置は事前にメモリに記憶させておき、ドローンの移動をプログラムして位置制御させるようにした。
また、更なる本発明のドローンを用いた構造物の検査方法は、上記構成に加え、前記被検査構造物の三次元点群情報の画像から欠陥と推定される部位を把握し、該情報に基づき最適な位置と撮影視覚を決定し、撮影位置とカメラ角度を制御するようにした。

本発明のドローンを用いた構造物の検査方法は、衛星測位システム情報を必要としないドローンの自律飛行手法としてSLAM手段を機能させてドローンの飛行領域の地図情報を得た上で該地図情報を前記地上三次元座標に重ねて使用するものであるため、従来のように現場に設置したＴＳとドローンとの位置関係において構造物等の障害物の影響を受けることがないため、入り組んだ複雑な構造物の検査も可能となり、自由度の高い堅実なドローンを用いた構造物等の検査方法を実現できる。
しかも、SLAMによる自律飛行であるため、ＴＳの設置位置などの原点位置から遠く離れた広い領域についても、自律飛行と検査が実行可能である。

本発明に係るSLAMによる無人機を用いた構造物の検査方法の実施手順を示したチャート図である。本発明のドローンをSLAM機能で位置制御する手法を概念的に示した図である。本発明におけるドローンを位置制御し、位置を自律制御する動作のフローチャートである。検査現場で使用したトータルステーションの測定状況図である。従来手法でのドローン自律位置制御の問題状況を示す図面である。

以下、本発明の構造物検査方法について、まず、全体的に説明する。本発明に係るSLAMによる自律飛行機能を備えたドローンを用いた構造物等の検査方法の実行手順は図１に示すとおりである。まず最初の作業（Ｓｔ１）は、橋梁などの被検査構造物を複数個所から画角の異なる撮影した複数の画像を得ることである。この作業から得られた多視点画像をステレオマッチングして被検査構造物の三次元点群データを作成する（Ｓｔ２）。被検査構造物が大型の場合は領域を分割し、複数領域の画像を組み合わせて全体画像を取得する。その場合、隣接画像は一部重なる部分を有するようにして重ねせて合成画像とする。この三次元点群データを作成する手法にはＳｆＭ（Structure from Motion）をはじめとする既存の手法が利用できるが、これによって得られる三次元座標データは三次元形状情報であってスケール情報を持たない。要するにこの三次元点群データは、形状が分かるがその寸法は分からない情報である。そこで、本発明は被検査構造物上の３点以上の特定点を選んでその位置を地上座標系データとして取得し（Ｓｔ３）、その複数の特定点位置座標データを前記三次元画像の点群データの特定点データに重ねてデータを対応させる（Ｓｔ４）。これによって、前記被検査構造物の三次元点群情報がすべて地上三次元座標情報に変換できる。これによって得られた被検査構造物の地上三次元座標情報をＰＣに記憶蓄積する。

本検査方法では、ドローンを飛翔させて被検査構造物の検査画像を取得する前作業として、前記三次元画像を用いて被検査構造物の劣化・破損部の位置と画像から判別できる情報を予め把握しておく。この情報から被検査構造物全領域にわたり撮影位置を設定する（Ｓｔ５）。この様にすることで、構造物の検査を効率的に実行することが出来る。以上Ｓｔ５までの検査手順は我々が先に提示した特許文献１と変わりはない。本発明の特異な手順はＳｔ６とＳｔ７の箇所となる。本発明では、ドローンの自律飛行に追尾型のＴＳを用いないで、SLAMによる自律飛行が採用されている。本発明で使用するドローンはSLAM機能を備えているので、飛行しながら地上の風景画像を動画撮像することで、周辺のマッピングと自己位置の算出ができる。SLAMの技術は特許文献２に示されるように、一般にロボットなどの地上移動装置用に開発されたもので、同時（Simultaneous）に自分の位置の推定（Localization）と周りの地図の作成（Mapping）を行うものである。ドローンは空を飛ぶ移動装置であり、地面近傍の低空を飛ばす場合には地上の風景が撮影できることから、これを採用することが可能であるはずとの知見に至ったものである。

本発明ではドローンが飛行しながら地上の風景画像を動画撮像することによって、SLAM機能を使い周辺のマッピングと自己位置の算出を行う。そして取得した地図情報を検査現場の特定点を原点とする地上座標データと重ねて対応を取る（Ｓｔ６）。SLAMによって得られる地図情報や自己位置情報が地上座標データに対応するものとなったので、Ｓｔ５で設定した撮影位置にドローンを誘導し、検査画像を自動取得することができる。また、その画像から三次元構造が分かるので、応力集中が起こる部分も把握できるし、既に表面が破損したり亀裂を生じたりしている個所についてはその画像からその部位を把握できる。したがって、前記三次元画像からは劣化や破損が認められなくてもその部分の近接画像を得て詳細に検査し、検討することができる。また、どのアングルから撮影すると要検査箇所の最適画像が得られるかも検知することができる。さらに、前記三次元画像を検証する作業によって被検査構造物全般についてではなく、どの部分の検査画像を取得するかを選別して特定し、その検査箇所を撮影するためのドローンの位置を地上三次元座標情報として設定するようにして、特定箇所の検査画像を効率的に取得することが可能である。前記被検査構造物の三次元点群情報がすべて地上三次元座標情報に変換されているので、検査箇所およびドローンの位置設定を地上三次元座標情報で管理することができる。

被検査構造物の検査箇所の特定および当該箇所の検査画像を撮影するためのドローンの位置設定がなされたならば、いよいよ検査画像の取得作業となる。SLAMによる位置制御によりカメラ３を搭載したドローン１を前記撮影位置に誘導して前記検査箇所の検査画像を撮影する。第１の検査箇所の検査画像が撮影されたなら、第２の検査箇所の検査画像を撮影するためのドローン１の移動を行い検査画像を撮影する（Ｓｔ７）。ドローンの位置情報はこの作業において１つの検査箇所を対象とした検査画像の撮影が完了した後、オペレータが次の位置情報を順次設定入力してもよいし、予めすべての位置情報をプログラム化して設定入力し位置制御を行わせるようにしてもよい。設定されたすべての場所での撮影が終了したところで本発明に係るドローンを用いた構造物の検査は完了する。

次に、本発明の構造物検査方法の実施の形態の要部となるSLAMを用いたドローンの自律飛行について、前記したＳｔ６の手順を詳しく説明する。１）飛行時のドローンの自己位置と傾きは、カメラによって撮影された動画情報を基にSLAMによって算出される。この計算はドローンに搭載されたＰＣによってでもよいし、地上に配備されたＰＣによって行ってもよい。また、SLAMに入力されるデータは一般的にはカメラの動画であるが、レーザ測位器のデータを用いることもできる。２）SLAMにより得られたドローンの自己位置情報は地上のＰＣに送信される。この地上のＰＣを用いて、３）ドローン座標と検査現場における構造物の位置情報を示す座標とを関係づける。この構造物の位置情報を示す座標は、現場の特定位置を原点とする座標系であっても衛星測位システム(GNSS)座標であってもよい。４）両者の座標対応関係が定まれば、以後の作業における検査位置情報をドローン座標の位置情報に変換し、ドローンの位置制御を行うことが可能となる。以上の準備作業を経ていよいよＳｔ７の検査画像の取得となる。５）SLAMによる位置制御によりカメラ２を搭載したドローン１を先に設定した撮影位置に誘導して特定された検査箇所の検査画像を撮影する。第１の検査箇所の検査画像が撮影されたなら、第２の検査箇所の検査画像を撮影するためのドローン１の移動を行い、以後順次設定箇所に移動させて検査画像を撮影する。

本発明において、ドローン座標と検査現場における構造物の位置情報を示す座標とを関係づける手法について説明する。図２に示したものは本発明のドローンを位置制御する手法を概念的に示した図であって、図中（ｘ，ｙ，ｚ）はドローンの座標系であり、（Ｘ，Ｙ，Ｚ）はＴＳ又はGNSSの座標系を示している。この構造物の位置情報を示す座標は、地球座標系であれば、現場の特定位置を原点とする座標系であっても、衛星測位システム座標(以下GNSS座標と呼ぶ。)であってもよいが、この図の例ではドローンの位置確認にＴＳを用い、現場の特定位置を原点とする座標系で位置制御するものとされている。このＴＳは被検査構造物上の３点以上の特定点を選んでその位置を地上座標系データとして取得するＳｔ３で使用するものを兼用することができる。

図３は位置制御し、ドローンを自律飛行させる動作をフローチャートで示したものである。まず、１）ドローンを飛行させ、２）その位置（Ａ点、Ｂ点、Ｃ点、Ｄ点）をＴＳ（又はGNSS）で測定し、ＰＣに送信する。３）一方同じＡ点、Ｂ点、Ｃ点、Ｄ点の位置データをSLAMでも測定し、ＰＣに送信する。４）ＰＣではＴＳ（又はGNSS）で測定した値とSLAMで測定した値との位置関係式を作成する。この演算はＡ(X_A,Y_A,Z_A)とＢ(X_B,Y_B,Z_B)とＣ(X_C,Y_C,Z_C)そしてＤ(X_D,Y_D,Z_D)の４点についてヘルマート変換／アフィン変換で確定し、ドローン座標とＴＳ（又はGNSS）座標との関係式を求める。５）この関係式が得られた後のドローン位置Ｅ点以降は４）で得られた関係式によって、SLAMによるドローン座標はＴＳ（又はGNSS）座標に変換される。６）被検査部位を撮影するために地上三次元座標情報で予め設定されたドローンの位置座標と、ドローンの現在位置情報との差から、ドローンの移動量をＰＣにて算出する。７）算出された移動制御量をＰＣからドローンの駆動機構に送信してドローンの移動を行う。８）ドローンの位置は設定値に一致しているかの確認を行う。もし一致していない場合は６）の動作に戻り一致するまで繰り返す。一致した場合は次に進む。９）この位置にドローンを留め構造物の要検査箇所の画像を撮影するなど、必要な作業を実行する。１０）要検査箇所が他にあるかを確認し、ある場合には次の設定位置情報に置き換え、６）の動作に戻る。もし、次に設定位置情報がないのであれば１１）動作完了（ＥＮＤ）となる。

上記の動作を実験によっておこない得られたデータを以下に示す。実験は図４に示されるようなあるビルの矩形の屋上で行われた。屋上の一隅にＴＳを設置して鉛直方向にＺ軸をとり、その屋上面位置を０(原点)とし、矩形の屋上の短辺に平行してＸ軸を、長辺に平行してＹ軸を設定しＴＳ座標とした。ドローン座標は同じく鉛直方向にｚ軸を取り、ドローン中心位置を原点とし、x軸はカメラの光学軸方向にあわせ、ｙ軸はそれに直交する方向とした。屋上平面から１〜５ｍ上方にＡ〜Ｆの６定点を決め、Ａ点はＴＳ座標で（２，６，１）、Ｂ点は（３，５，１）、Ｃ点は（４，４，１）、Ｄ点は（５，６，１）、Ｅ点は（６，５，３）、Ｆ点は（７，６，５）とした。以上の準備の後、ドローンを飛ばし、搭載したカメラによって動画撮影を開始し、SLAM機能によって自己位置測定を開始した。実際の現場ではＴＳを動作させてこのドローンを追尾させ、Ａ点に誘導させて、ホバリング停止させ、その際のドローン座標の値を取得するのが一般的なやり方となるが、この実験では位置情報を確実にするため、台を用意し、Ａ点からＤ点にこの台を据え、ドローンの中心位置が１ｍの位置に静止するようにドローンを載置した。そして得たデータは、Ａ点のドローン座標値が（1.368，3.759，1.000）であった。同様にＢ，Ｃ，Ｄ点についてのドローン座標値を順次取得した。その値は表１に示される通りであった。勿論、この様にドローンを特定位置の台上に載置して確実な位置情報を得る方法も現場の状況によっては採用できることは当然である。

次に、この４点のＴＳ座標ならびにドローン座標の値から３次元アフィン変換を用いて、両座標の変換式を計算した。三次元アフィン変換の一般式は次に示されるものである。
Ｘ＝ａ_１ｘ＋ｂ_１ｙ＋ｃ_１ｚ+ｄ_１
Ｙ＝ａ_２ｘ＋ｂ_２ｙ＋ｃ_２ｚ+ｄ_２ ‥‥‥‥‥‥１式
Ｚ＝ａ_３ｘ＋ｂ_３ｙ＋ｃ_３ｚ+ｄ_３

ｘ＝Ａ_１Ｘ＋Ｂ_１Ｙ＋Ｃ_１Ｚ+Ｄ_１
ｙ＝Ａ_２Ｘ＋Ｂ_２Ｙ＋Ｃ_２Ｚ+Ｄ_２ ‥‥‥‥‥‥２式
ｚ＝Ａ_３Ｘ＋Ｂ_３Ｙ＋Ｃ_３Ｚ+Ｄ_３
この変換式を用い、Ｅ点とＦ点のドローン座標を算出させると表１に示されるように（4.785，1.451，3.000）と（6.067，2.049，5.000）なる値を得た。続いて、Ｅ点とされる値のドローン座標位置にドローンを自律飛行させて停止させると共に、ＴＳをＥ点に照準を合わせてレーザを照射する。その際に照射したレーザがドローンの中心部を捉えていることを確認した。Ｆ点について同様の作業を行い、照射したレーザがドローンの中心部を捉えていることが確認できた。

地球座標のＺ軸は鉛直方向であり、ドローン座標においても鉛直方向をｚ軸とすることが一般的であろうから、両軸は鉛直方向となり、軸変換は不要となることから、ドローン座標の地球座標変換においては二次元のヘルマート変換でこれを行うことも可能である。
この実験では屋上という限られた領域で行ったため、Ａ点からＤ点の４か所の位置が近い位置に設定したが、この位置は距離を大きくとった方が軸変換式は精度が高くなって、広い領域にわたって位置情報が精度よくとれるので、推奨される。もっとも、本発明のような構造物の欠損箇所や疲労箇所の画像を得る検査においてはドローンを指定された位置への誘導については、測量値を得るような正確さが求められるわけではないので、ドローンの位置制御については高精度が求められるものではない。

上記の実施例では被検査構造物として橋梁を対象として説明したが、本発明は橋梁に限られるものではなく、トンネルや建築物、車両、三次元形状を備えたあらゆる構造物一般に適用可能である。

１ドローン２カメラ
３トータルステーション４コンピューター
１０被検査構造物

本発明はカメラやレーザー等を搭載した無人機を用いた構造物の三次元形状体の検査方法に関するもので、特に、人が近づきにくい橋梁の下面部分など構造物の精密画像を近接距離から取得する検査方法に適した技術である。

本発明の課題は、衛星測位システム情報を必要としない自律飛行機能を備えたドローンを用いた構造物の検査方法において、ＴＳとドローンとの位置関係における構造物の障害物の影響を受けることなく、自由度の高い堅実なドローンを用いた構造物の検査方法を提示することにある。

本発明のＳＬＡＭによる自律飛行機能を備えたドローンを用いた構造物の検査方法は、被検査構造物を複数個所から撮影した画像を得るステップと、該複数画像から前記被検査構造物の三次元点群情報の画像を得るステップと、前記被検査構造物の３点以上の地上三次元座標情報を得るステップと、該複数点の地上三次元座標情報を前記三次元点群情報の画像情報に重ねて前記被検査構造物の三次元点群情報の地上三次元座標情報を得るステップと、前記三次元点群情報から撮影位置を地上三次元座標情報で設定するステップと、ドローンに搭載したカメラやレーザー等の画像情報でＳＬＡＭ（ＳｉｍｕｌｔａｎｅｏｕｓＬｏｃａｌｉｚａｔｉｏｎＡｎｄＭａｐｐｉｎｇ）手段を機能させてドローンの飛行領域の地図情報を得るステップと、該地図情報を測位手段の較正によって、前記地上三次元座標に重ねるステップと、前記撮影位置に自律飛行させて前記被検査構造物の特定箇所の検査画像を取得するステップとを踏むものである。
そして、前記被検査構造物の３点以上の地上三次元座標情報を得る測位手段には、ＴＳ、レーザ測位システムまたは衛星測位システムを用いるものとした。
また、本発明のドローンを用いた構造物の検査方法は、上記構成に加え、前記撮像位置は事前にメモリに記憶させておき、ドローンの移動をプログラムして位置制御させるようにした。
また、更なる本発明のドローンを用いた構造物の検査方法は、上記構成に加え、前記被検査構造物の三次元点群情報の画像から欠陥と推定される部位を把握し、該情報に基づき最適な位置と撮影視覚を決定し、撮影位置とカメラ角度を制御するようにした。

本発明のドローンを用いた構造物の検査方法は、衛星測位システム情報を必要としないドローンの自律飛行手法としてＳＬＡＭ手段を機能させてドローンの飛行領域の地図情報を得た上で該地図情報を前記地上三次元座標に重ねて使用するものであるため、従来のように現場に設置したＴＳとドローンとの位置関係において構造物の障害物の影響を受けることがないため、入り組んだ複雑な構造物の検査も可能となり、自由度の高い堅実なドローンを用いた構造物の検査方法を実現できる。
しかも、ＳＬＡＭによる自律飛行であるため、ＴＳの設置位置などの原点位置から遠く離れた広い領域についても、自律飛行と検査が実行可能である。

以下、本発明の構造物検査方法について、まず、全体的に説明する。本発明に係るＳＬＡＭによる自律飛行機能を備えたドローンを用いた構造物の検査方法の実行手順は図１に示すとおりである。まず最初の作業（Ｓｔ１）は、橋梁などの被検査構造物を複数個所から画角の異なる撮影した複数の画像を得ることである。この作業から得られた多視点画像をステレオマッチングして被検査構造物の三次元点群データを作成する（Ｓｔ２）。被検査構造物が大型の場合は領域を分割し、複数領域の画像を組み合わせて全体画像を取得する。その場合、隣接画像は一部重なる部分を有するようにして重ねせて合成画像とする。この三次元点群データを作成する手法にはＳｆＭ（ＳｔｒｕｃｔｕｒｅｆｒｏｍＭｏｔｉｏｎ）をはじめとする既存の手法が利用できるが、これによって得られる三次元座標データは三次元形状情報であってスケール情報を持たない。要するにこの三次元点群データは、形状が分かるがその寸法は分からない情報である。そこで、本発明は被検査構造物上の３点以上の特定点を選んでその位置を地上座標系データとして取得し（Ｓｔ３）、その複数の特定点位置座標データを前記三次元画像の点群データの特定点データに重ねてデータを対応させる（Ｓｔ４）。これによって、前記被検査構造物の三次元点群情報がすべて地上三次元座標情報に変換できる。これによって得られた被検査構造物の地上三次元座標情報をＰＣに記憶蓄積する。

Claims

被検査構造物を複数個所から撮影した画像を得るステップと、該複数画像から前記被検査構造物の三次元点群情報の画像を得るステップと、前記被検査構造物の３点以上の地上三次元座標情報を得るステップと、該複数点の地上三次元座標情報を前記三次元点群情報の画像情報に重ねて前記被検査構造物の三次元点群情報の地上三次元座標情報を得るステップと、前記三次元点群情報から撮影位置を地上三次元座標情報で設定するステップと、ドローンに搭載したカメラの画像情報でSLAM手段を機能させてドローンの飛行領域の地図情報を得るステップと、該地図情報を前記地上三次元座標に重ねるステップと、前記撮影位置に自律飛行させて前記被検査部位の検査画像を取得するステップとを踏む、SLAMによる自律飛行機能を備えたドローンを用いた構造物等の検査方法。
SLAMによる前記地図情報を前記地上三次元座標に重ねる手段は、三次元アフィン変換または二次元ヘルマート変換を用いるものである請求項１に記載のSLAMによる自律飛行機能を備えたドローンを用いた構造物等の検査方法。
地上三次元座標情報を得る手段は、トータルステーション、レーザビーム測位計、衛星測位システムのいずれかを使用するものである請求項１または２に記載のSLAMによる自律飛行機能を備えたドローンを用いた構造物等の検査方法。