JP7022858B1 - 構造物表示装置、および、構造物表示方法 - Google Patents

Abstract

【課題】構造物を複数枚に分割して撮影した画像を表示するために役立つ管理情報を、効率的に作成する。【解決手段】構造物表示装置１００は、構造物を複数の撮影範囲で分割して撮影した分割画像３３を表示する構造物表示装置１００であって、それぞれの分割画像３３に識別情報３１を付与するとともに、識別情報３１に１つ以上の管理情報３２を対応付けて管理する記憶部３０と、識別情報３１または識別情報３１と管理情報３２とを組み合わせた抽出条件の入力を受け、抽出条件に合致する分割画像３３を記憶部３０から抽出して表示部４０に表示する制御部２０とを有する。【選択図】 図１

Description

本発明は、構造物表示装置、および、構造物表示方法に関わる。

特許文献１は、風力発電設備の点検報告書の作成業務を効率よく行うことが可能な報告書作成装置を開示する。また、特許文献１の段落００７９には、以下の記載がある。
「風力発電設備点検システム１において、報告書作成装置６は、無人飛行体２に取り付けられたカメラ３により風力発電設備４に近接させて撮影された画像を取得し、無人飛行体２の飛行記録データから飛行位置情報を取得し、画像と飛行位置情報とを対応付けた収集データ７３を生成する。また、損傷等の観察対象を含む画像が選択されると、選択された画像に対応付けられた飛行位置情報に基づき、損傷（観察対象）の位置情報である観察対象位置を求め、少なくとも画像と該画像に含まれる損傷（観察対象）の観察対象位置の情報とを含む点検報告書７５を作成して、出力する。」

特開２０１８－１８１２３５号公報

風力発電設備（サイト）を点検する工程では、風車のブレードに近づいて撮影し、その撮影画像から損傷箇所を検査する。各サイトには、多くの風車が稼働しているので、撮影画像の枚数が多く、その整理および報告書作成に時間を要している。
そのため、多くの撮影画像を整理し、ブレードの状態を効率的に把握させるための表示に活用することが求められる。

特許文献１には、報告書作成装置が、時刻情報に基づいて画像と無人飛行体の飛行位置とを対応付けた収集データを作成する旨が記載されている。この収集データには、ブレード番号、ブレード面、画像ＩＤ、画像の撮影位置（飛行位置）、撮影時刻、ルートからの距離（観察対象位置）、損傷番号（損傷ＩＤ）等のデータ項目を有する。

しかし、特許文献１の収集データは、点検報告書にそのまま文字情報として記載されることを目的として生成されている。一方、点検者の点検に役立つような所望の撮影画像を表示画面に表示させるために有効な管理情報は、作成されていない。例えば、撮影時刻の順に画像を一覧表示するだけでは、着目する画像がブレード全体のどの部分の画像かを把握できない。

そこで、本発明は、構造物を複数枚に分割して撮影した画像を表示するために役立つ管理情報を、効率的に作成することを主な課題とする。

上記の課題を解決するため、本発明の構造物表示装置は以下の特徴を有する。
本発明は、構造物を複数の撮影範囲で分割して撮影した分割画像を表示する構造物表示装置であって、
それぞれの前記分割画像に識別情報を付与するとともに、前記識別情報に１つ以上の管理情報を対応付けて管理する記憶部と、
前記識別情報または前記識別情報と前記管理情報とを組み合わせた抽出条件の入力を受け、前記抽出条件に合致する前記分割画像を前記記憶部から抽出する抽出処理を実行し、その抽出処理の結果を表示部に表示する制御部とを有しており、
前記抽出処理は、
前記抽出条件に前記管理情報が含まれない場合には、前記抽出条件の前記識別情報に対応する前記分割画像を抽出し、
前記抽出条件に前記管理情報が含まれる場合には、前記抽出条件の前記識別情報および前記抽出条件の前記管理情報の双方に合致する前記分割画像を抽出することを特徴とする。
その他の手段は、後記する。

本発明によれば、構造物を複数枚に分割して撮影した画像を表示するために役立つ管理情報を、効率的に作成することができる。

本実施形態に関する構造物表示装置を示す構成図である。 本実施形態に関する図１の構造物表示装置内でメッセージ交換される内容の説明図である。 本実施形態に関するデータベースの更新手順を示すフローチャートである。 本実施形態に関する分割画像の表示手順を示すフローチャートである。 本実施形態に関する点検対象となる風車を示す立体図である。 本実施形態に関するブレードを中心に定義する座標系を示す立体図である。 本実施形態に関するブレードのＲ軸に沿った無人飛行体の飛行ルートの移動を示す立体図である。 本実施形態に関する図７のＲ断面図である。 本実施形態に関する図８のＲ断面図の変形例である。 本実施形態に関するらせん状の飛行ルートを示す立体図である。 本実施形態に関する構造情報を示すテーブルである。 本実施形態に関する撮影情報を示すテーブルである。 本実施形態に関する点検情報を示すテーブルである。 本実施形態に関する順序情報を示すテーブルである。 本実施形態に関する第１の表示画面図である。 本実施形態に関する第２の表示画面図である。 本実施形態に関する第３の表示画面図である。 本実施形態に関する図１の構造物表示装置の変形例を示す構成図である。 本実施形態に関する第４の表示画面図である。 本実施形態に関する点検結果として正常であるか異常であるか区別した場合の表示画面図である。

以下、本発明の一実施形態を、図面を用いて説明する。

図１は、構造物表示装置１００を示す構成図である。
構造物表示装置１００は、入力部１０と、制御部２０と、記憶部３０と、表示部４０とを有する。
記憶部３０には、識別情報３１と、管理情報３２と、分割画像３３とが格納される。表示部４０は、識別情報３１と、管理情報３２とを参照して、構造物の分割画像３３を表示する。管理情報３２は、管理者から入力される情報であり、例えば、以下の情報である。
・構造情報３２ａ（サイト情報と号機情報とを含む設置条件など）は、図１１で後記する。
・撮影情報３２ｂ（撮影日時など）は、図１２で後記する。
・点検情報３２ｃ（損傷レベル、損傷個所など）は、図１３で後記する。
・順序情報３２ｄ（撮影順序など）は、図１４で後記する。

以下、構造物表示装置１００が表示対象とする構造物として、無人飛行体により空撮される風車７０のブレード７３（図５）を例示するが、構造物はブレード７３に限られない。多数の構造物が設置されており、かつ、その構造物が同一形状であれば、構造物表示装置１００の表示対象とすることができる。例えば、液化天然ガスを保存するガスタンクでも、表示対象として利用可能である。

入力部１０は、ルール入力部１１と、分割画像入力部１２とを有する。
分割画像入力部１２は、分割画像３３とその識別情報３１との入力を受け付ける。分割画像３３とは、１枚のブレード７３を複数の撮影範囲（撮影位置、撮影面）に分割して撮影された個々の画像である。識別情報３１とは、一つの画像情報（分割画像３３の情報）に対して一対一に決まる情報であり、例えば、画像情報に連番で付与される。

ルール入力部１１は、管理情報３２と、抽出条件と、画面表示ルールとの入力を受け付ける。
抽出条件とは、記憶部３０に格納された分割画像３３の集合から、今回の表示対象となる分割画像３３を抽出するための条件である。画面表示ルールとは、表示部４０へブレード７３を表示させる際のルールである。
なお、構造物表示装置１００が備える入力部１０を用いる代わりに、構造物表示装置１００とネットワークを介して接続される外部装置から、構造物表示装置１００は、抽出条件などの各種の入力情報を取得してもよい。

制御部２０は、抽出部２１と、データベース更新部２２と、ルール設定部２３と、表示制御部２４とを有する。
抽出部２１は、記憶部３０から分割画像３３を抽出する。
データベース更新部２２は、記憶部３０に格納されたデータベースを更新する。
ルール設定部２３は、表示部４０へブレード７３を表示させる際の画面表示ルールを設定する。
表示制御部２４は、画面表示ルールに基づき、ブレード７３の分割画像３３などの表示部４０への表示内容を制御する。

図２は、図１の構造物表示装置１００内でメッセージ交換される内容の説明図である。以下、図３および図４のフローチャートに沿って、メッセージＭ１～Ｍ７の内容を明らかにする。

図３は、データベースの更新手順を示すフローチャートである。
分割画像入力部１２は、分割画像３３とその撮影日時とを制御部２０へ送信する（メッセージＭ１）。データベース更新部２２は、分割画像３３を含むメッセージＭ１を受信する（Ｓ１１）。
ルール設定部２３は、メッセージＭ１の分割画像３３に対応する識別情報３１および管理情報３２を、ルール入力部１１からメッセージＭ２として受信する（Ｓ１２）。メッセージＭ２の管理情報３２とは、例えば、図１１の構造情報３２ａ（サイト名、号機番号、ブレードNo.、撮影面）である。

データベース更新部２２は、メッセージＭ１の分割画像３３および撮影日時と、メッセージＭ２の識別情報３１および管理情報３２とを対応付ける（Ｓ１３）。そして、データベース更新部２２は、Ｓ１３で対応付けた情報を含むメッセージＭ３を記憶部３０に通知することで、データベースの更新を行う（Ｓ１４）。

なお、Ｓ１４の更新処理には、記憶部３０に格納された構造情報３２ａに対して、識別情報３１を追記する処理が含まれる。
例えば、Ａサイトの１号機に設けられたブレードNo.１の撮影面ａについて、撮影された１０枚の分割画像３３に該当する識別情報３１を、構造情報３２ａに纏めて追記する。
また、１つのサイトあたり、５台の風車があり、１台の風車に3枚のブレードがあり、１つのブレードあたり４方向の撮影面からそれぞれ10分割して撮影する場合には、５×３×４×１０＝６００枚の分割画像３３が撮影される。その場合、識別情報３１の個数は、６００通りとなる。

図４は、分割画像の表示手順を示すフローチャートである。
ルール設定部２３は、記憶部３０に格納されている分割画像３３の集合から、今回の表示対象となる分割画像３３を抽出するための抽出条件を、ルール入力部１１からメッセージＭ４として受け付ける。抽出条件には、以下のいずれかの内容が含まれる。
・表示対象の識別情報３１が単独で指定されている。
・表示対象の識別情報３１に加え、絞り込み条件（AND条件）となる管理情報３２（例えば、サイト名、号機番号）が指定されている。なお、管理情報３２の選択は、例えばプルダウンメニューに候補を表示し、ユーザから候補のいずれかを選択する入力方法が例示される。
・表示対象の管理情報３２が単独で指定されている。

例えば、制御部２０は、以下の抽出条件を管理情報３２から指定する。
・管理情報３２の構造情報３２ａから、「サイト名=Ａサイト」、「号機番号=1号機」、「ブレードNo.=No.1」の指定
・管理情報３２の撮影情報３２ｂから、「撮影日時=2017年6月10日」の指定
ルール設定部２３は、指定された抽出条件を検索キーにして、記憶部３０から該当する識別情報３１（の分割画像３３）を読み出すよう、抽出部２１へ抽出条件を送信する。

抽出部２１は、抽出条件をメッセージＭ５として記憶部３０に通知することで、抽出条件に合致する分割画像３３をメッセージＭ６として抽出する（Ｓ２１）。なお、メッセージＭ５には、抽出条件の識別情報３１だけでなく、順序情報３２ｄも組み合わせて指定してもよい。
表示制御部２４は、抽出部２１からメッセージＭ６として受信した分割画像３３を表示画像とする画面を生成する（Ｓ２２）。そして、表示制御部２４は、ルール入力部１１から別途入力された画面表示ルールに従い、抽出された分割画像３３を表示部４０にメッセージＭ７として表示させる。

以上、図２～図４を参照して構造物表示装置１００の処理の概要を説明した。以下では、抽出条件の管理情報３２や、画面表示ルールに従った表示画面の詳細などを説明する。まず、識別情報３１や管理情報３２に含まれる撮影面を明らかにするために、点検対象となる風車７０の形状を説明する。

図５は、点検対象となる風車７０を示す立体図である。風車７０は、タワー７１上に設けられたナセル７２と、ナセル７２に固定されたブレード７３で構成されている。各ブレード７３は風力を受けて回転方向θに沿って回転し、この回転力を用いて発電が行われる。
また、以下の説明のために、ナセル７２の根本からブレード７３の先端に向かうブレード７３の長手方向に沿ったＲ軸を定義する。

図６は、ブレード７３を中心に定義する座標系を示す立体図である。
「Ｒ軸」は、図５で説明したようにブレード７３の長手方向に沿った軸である。回転方向θがどの方向を向いていても（上空向きでも、水平向きでも、地面向きでも）、Ｒ軸は回転方向θに追従して定義される。
「Ｒ断面」とは、Ｒ軸に垂直な平面であり、便宜上その１軸をＸ軸とし、もう１軸をＹ軸とする。

「撮影面」とは、ブレード７３をＲ断面のどの方向から撮影するかを規定する。
例えば、図６では、Ｙ軸プラス方向に画角を向けてブレード７３を撮影する撮影面aと、Ｘ軸マイナス方向に画角を向けてブレード７３を撮影する撮影面bと、Ｘ軸プラス方向の撮影面c（撮影面a,bの背後に隠れたので図示省略）と、Ｙ軸マイナス方向の撮影面d（撮影面a,bの背後に隠れたので図示省略）とで、合計４面の撮影面を例示した。
なお、ブレード周囲の撮影面は、図６に示すように４つ設けても良いし、５つなどの４つに限定せずに設けても良い。いずれにしても、ブレード７３を複数方向から撮影することで、未撮影の箇所が発生しないようにする。

図７は、ブレード７３のＲ軸に沿った無人飛行体の飛行ルート（往動時のＦ１，復動時のＦ２）の移動を示す立体図である。ナセル７２の近傍まで移動した無人飛行体は、ブレード７３の第１端部であるナセル７２近傍の基準位置（r=1）に移動する。この基準位置が飛行ルートＦ１の始点である。
なお、１枚の分割画像３３に対して、２つの情報（No.1,r=1など）が付加される。まず、第１付加情報（No.1,No.2,…No.20)は、その撮影位置で撮影される画像ごとにユニークな識別情報３１である。つまり、識別情報３１は画像の撮影順序に従って採番された情報ともいえる。

一方、第２付加情報（r=1,2,…10)は、ブレード７３の第１端部（r=1）から対向する第２端部（r=10）までのＲ軸に沿った撮影位置の特定情報である。rの値が小さいほどナセル７２近傍側の位置を示し、rの値が大きいほどブレード７３の先端側の位置を示す。
つまり、同じ撮影位置r=1であっても、飛行ルートＦ１に従い撮影面aを撮影するときには識別情報３１（No.1）が付され、飛行ルートＦ２に従い撮影面bを撮影するときには識別情報３１（No.20）が付される。

これにより、ブレードごとの撮影位置情報を分割画像３３に付与することで、ドローンが往復動した場合にも、ブレード全体を正しく画面表示できる。例えば、撮影位置r=1が同じである２つの画像（識別情報３１＝No.1とNo.20）を並べて表示するなど、点検に適した表示をしやすく分割画像３３を管理できる。

ブレード７３の先端に到達した無人飛行体は、今まで撮影していた撮影面aとは別の撮影面bに対して、復動時の飛行ルートＦ２に沿って同様に撮影を開始する。つまり、無人飛行体は、基準位置に遠い第２端部（ブレード７３先端のNo.11）から第１端部（ナセル７２の根本のNo.20）へ戻る方向に移動するとともに、所定の等間隔で撮影する。

図８は、図７のＲ断面図である。
ブレード７３の回転方向θ（点Pu,P0,Pdを通過する直線）に対して、ブレード断面（点Px,P0,Pyを通過する直線）が垂直に位置しており、無人飛行体は、回転方向θと対称な位置（点P1とP2とが線対称、点P3とP4とが線対称）からブレードを撮影する。

図７の説明では、第１端部（r=1）から第２端部（r=10）まで移動中に、同じ撮影面aを撮影し続ける飛行ルートＦ１を例示した。一方、図８では、同じＲ軸の撮影位置（例えばr=3）について、ブレード７３の周囲をＲ断面に沿って旋回することで、４回の撮影で４方向の撮影面の画像を取得するらせん状の飛行ルートＦ（立体図は図１０で後記）を示す。つまり、撮影面aを撮影する位置P1→撮影面bを撮影する位置P2→撮影面cを撮影する位置P3→撮影面dを撮影する位置P4の順に、撮影が行われる。

Ｒ断面図では、ブレード７３は表面と裏面とを有する流線形の板形状として近似される。よって、無人飛行体は、ブレード７３の表面を位置P1,P2で撮影し、ブレード７３の裏面を位置P3,P4で撮影することで、両面を撮影できる。
なお、ブレード７３の表面を位置P1,P2で撮影する代わりに、位置Puで撮影してもよい。同様に、ブレード７３の裏面を位置P3,P4で撮影する代わりに、位置Pdで撮影してもよい。これにより、撮影回数を４回から２回に削減できる。

しかし、位置Puに無人飛行体を移動させてしまうと、その位置Puはブレード７３の軌道上（回転方向θの直線上）なので、ブレード７３の位置が現在のP0から位置Puに回転してしまうと、無人飛行体と衝突することが懸念される。
通常、点検作業時はブレード７３の回転方向θを油圧ブレーキで固定することで、ブレード７３が回転しないようにできる。しかし、油圧ブレーキの給電が電源消失時に断たれてしまうと、ブレード７３の意図しない回転を抑止できない場合もある。

そこで、図８では、ブレード７３の円周方向θ（点Pu,P0,Pdを通過する線）と、Ｒ断面図のブレード７３面の長手方向（点Px,P0,Pyを通過する線）とが90°で直交しているとすると、その直交に対して約45°になるように撮影位置P1,P2,P3,P4を設定した。換言すると、制御装置２１は、無人飛行体の移動範囲（撮影位置）をブレード７３の回転方向θの範囲外に設定した。
これにより、仮にブレード７３の現在位置がP0から、PuやPdに移動してしまっても、ブレード７３の撮影位置での衝突を回避できる。

図９は、図８のＲ断面図の変形例である。
図９では、ブレード７３の回転方向θに対して、ブレード断面が垂直からずれて位置している。また、無人飛行体は、回転方向θに対して非対称な位置からブレードを撮影する。
そのため、風車７０の監視員は、ブレード７３のナセル７２に対する固定角度（点Px,P0,Pyを通過する線）を、図８の通常稼働時（回転方向θに直交）から少し右下がりになるように、点検前にずらしておく。そして、無人飛行体は、ブレード７３の表面を位置P5で撮影し、ブレード７３の裏面を位置P6で撮影する。
これにより、点検前後でブレード７３の角度を調節する手間は発生してしまうが、無人飛行体とブレード７３との撮影位置での衝突を回避でき、かつ、撮影枚数も４枚から２枚に削減できる。

図１０は、らせん状の飛行ルートＦを示す立体図である。
無人飛行体は、ブレード７３の周囲をらせん状に旋回しながら、ナセル７２の根本からブレード７３の先端までＲ軸を徐々に進行する飛行ルートＦを移動してもよい。図８で説明したように、同じ撮影位置（r=3など）では、位置P1,P2,P3,P4の合計４回の撮影で４方向の撮影面の画像を取得する。
以上、図７～図１０を参照して、Ｒ軸に沿って往復する飛行ルートと、Ｒ軸の周囲をらせん状に進行する飛行ルートとを説明した。以下、図１１～図１４を参照して、管理情報３２を説明する。

図１１は、構造情報３２ａを示すテーブルである。構造情報３２ａには、サイト名、号機番号、ブレード番号、撮影面と識別情報３１が対応付けて記録されている。
例えば、ある風力発電所Ｘの敷地内には、５台の風車が存在し、その１台の風車ごとに３枚のブレードが備えられている。この場合の構造情報３２ａでは、サイト名＝風力発電所Ｘ、号機番号＝１号機～５号機、ブレード番号＝１～３である。
データベース更新部２２は、データベースの更新処理（図３のＳ１４）において、例えば、Ａサイトの１号機に設けられてブレードNo.１の撮影面ａについて、撮影された１０枚の分割画像３３の識別情報３１（00001～00010）を、構造情報３２ａの識別情報列にまとめて追記する。

図１２は、撮影情報３２ｂを示すテーブルである。撮影情報３２ｂは、分割画像３３ごとに付与する識別情報３１と、図３のＳ１１で入力された撮影日時とを対応付ける情報である。
図１３は、点検情報３２ｃを示すテーブルである。
点検情報３２ｃは、識別情報３１ごとに、その分割画像３３に表示されている損傷の種類、損傷レベル、および、損傷個所を対応付ける情報である。

図１４は、順序情報３２ｄを示すテーブルである。
順序情報３２ｄは、撮影面と、撮影順序（図７ではNo.1～No.20）と、撮影位置（図７ではr=1～r=10）とを対応付ける情報である。これにより、図７の飛行ルート（往動時のＦ１，復動時のＦ２）のように、ブレードの撮影面によって、同じ撮影位置でも飛行ルートの方向により撮影順序が異なる場合でも、撮影面a,bで同じ撮影位置の分割画像３３を抽出し、正しい撮影順序で構造物を表示できる。

以下、図１５からは表示画面を説明する。
図１５は、第１の表示画面図である。
画面２００の抽出条件２０１では、管理情報３２として、Ａサイトにおける1号機のブレードNo.1を撮影日時「2017年6月10日」で撮影した画像集合が、表示対象として指定されている。この抽出条件２０１も画面２００の内部に表示される。
画面２００の画面表示ルールでは、画像集合の表示レイアウトとして以下が指定されている。Ｘ軸は横軸であり、Ｙ軸は縦軸である。
・Ｘ軸：撮影面（Ｘ軸の表示間隔：15mm）
・Ｙ軸：撮影位置（Ｙ軸の表示間隔：0mm）

このような画面表示ルールにより、表示部４０は、抽出条件に合致するブレードNo.1の分割画像３３を４つの撮影面に分けて、１つの画面２００内に表示させる。つまり、表示部４０は、画面２００内のＸ軸方向にそれぞれの撮影面a～dの分割画像３３を並べ、Ｙ軸方向にブレード７３の撮影位置（r=1,2,…10）ごとに分割した分割画像３３を並べる。このようにＸ軸およびＹ軸に沿って規則的に分割画像３３を並べるために、順序情報３２ｄが参照される（図１６以降も同様）。
この画面２００を閲覧した点検者は、ブレード全体の損傷度合いを容易に把握できる。

図１６は、第２の表示画面図である。
画面２１０の抽出条件２１１は、管理情報３２として、各サイトにおける1号機のブレードNo.1の撮影位置r=1を撮影日時「2017年6月10日」で撮影した画像集合が、表示対象として指定されている。
画面２１０の画面表示ルールでは、画像集合の表示レイアウトとして、以下が指定されている。
・Ｘ軸：撮影面（Ｘ軸の表示間隔：15mm）
・Ｙ軸：サイト（Ｙ軸の表示間隔：10mm）
このような画面表示ルールにより、表示部４０は、サイトごとに同じ撮影位置の画像情報を１つの画面内に分割して画面２１０に表示させている。これにより、風車の立地とブレード損傷状況の関係を、点検者が容易に確認できる。

図１７は、第３の表示画面図である。
画面２２０の抽出条件２２１は、管理情報３２として、サイトＡにおける1号機のブレードNo.1を撮影面aで撮影した画像集合が、表示対象として指定されている。
画面２２０の画面表示ルールでは、画像集合の表示レイアウトとして、以下が指定されている。
・Ｘ軸：撮影日時（Ｘ軸の表示間隔：15mm）
・Ｙ軸：撮影位置（Ｙ軸の表示間隔：0mm）

このような画面表示ルールにより、表示部４０は、Ａサイトの１号機におけるブレードNo.1について、撮影日時が互いに異なる撮影面aの画像情報を１つの画面２２０内に分割して表示させる。これにより、2019/6/10までは損傷が発生していないが、2020/6/10には損傷が発生したなどのブレード損傷状況の過程を、点検者が容易に確認できる。
また、表示部４０は、強調表示された損傷部２２３を有する分割画像３３に対して、レベル２の損傷度合いなどの損傷の説明情報２２２を併せて表示してもよい。これにより、点検者は、損傷の影響を把握できる。

図１８は、図１の構造物表示装置１００の変形例を示す構成図である。
図１８の構造物表示装置１００は、図１の構造物表示装置１００に損傷判定部２５を追加した。
損傷判定部２５は、入力された分割画像３３について損傷の有無や損傷の内容を判定し、その判定結果を点検情報３２ｃに書き出す。そのため、損傷判定部２５は、事前に記憶部３０に登録されている構造物の正常画像（正常状態を示す基準画像）と、入力された分割画像３３とを比較する。
この比較結果により、損傷判定部２５は、損傷種類と損傷レベルと損傷部とを判定する。損傷部は、例えばナセル７２の中心部からの距離（撮影位置r=1,2,…など）により特定する。

図１９は、第４の表示画面図である。
画面２３０の抽出条件２３１は、管理情報３２として、サイトＡにおける1号機のブレードNo.1を撮影面aで撮影した画像集合が、表示対象として指定されている。
画面２２０の画面表示ルールでは、画像集合の表示レイアウトとして、以下が指定されている。
・Ｘ軸：正常画像・撮像画像（Ｘ軸の表示間隔：50mm）
・Ｙ軸：撮影位置（Ｙ軸の表示間隔：0mm）

このような画面表示ルールにより、表示部４０は、Ａサイトの１号機におけるブレードNo.1について、撮影面aの画像情報および正常画像を１つの画面内に分割して表示させる。これにより、同じ撮影面の画像情報および正常画像を比較して表示させることで、点検者がブレードの損傷状態を容易に確認することができる。
また、表示部４０は、強調表示された損傷部２３３を有する分割画像３３に対して、レベル２の損傷度合いなどの損傷の説明情報２３２を併せて表示してもよい。これにより、点検者は、損傷の影響を把握できる。

図２０は、点検結果として正常であるか異常であるか区別した場合の表示画面図である。

表示制御部２４は、画面２４０内の第１表示２４１として、同じブレード７３の同じ撮影位置を異なる時刻で撮影した画像情報を横に並べて表示する。各表示画像の下には、2018/4/1などの撮影日と、診断処理の結果（正常の診断結果または異常の診断結果）、異常の場合の損傷度合いとが表示される。
なお、損傷判定部２５は、以下の手順のような機械学習やAIなどの手法で、画面２４０に表示する診断結果や損傷度合いを評価してもよい。
（手順１）損傷判定部２５は、過去の画像情報（分割画像３３）と、教師データとしての診断結果や損傷度合い(例えば、100％評価や5段階評価など)との組み合わせをあらかじめ判定器に機械学習しておく。
（手順２）損傷判定部２５は、今回の判定対象となる分割画像３３を受け、判定器に入力することにより、その分割画像３３に対応する診断結果や損傷度合いを評価する。
ここでは、2018/4/1には正常であったブレード７３が、2018/10/1には軽度の損傷２４１ａが発生し、2019/4/1には重度の損傷２４１ｂへと損傷度合いが進行している。

そのため、データベース更新部２２は、診断結果として異常とした画像情報について同じ撮影位置のものを時系列で記憶部３０に記憶し、その時系列で記憶した同じ撮影位置の分割画像３３を比較することで損傷状態の進行度合いを算出することができる。例えば、1年前の損傷状態が30％、現在の損傷状態が50％の場合、1年度の損傷状態は70％と予測することができる。損傷状態の進行度合いの評価手法としてここでは線形近似の例を示したが、その他の関数近似、機械学習やAIなどの手法を用いても良い。

表示制御部２４は、画面２４０内の第２表示２４２として、異なるブレード７３の対応する撮影位置（例えばr=5）を同じ時刻に撮影した画像情報を横に並べて表示する。
ここでは、Aサイト1号機の損傷２４２ａと、XサイトN号機の損傷２４２ｂとで、同様の損傷が発見されている。このように、第１表示２４１または第２表示２４２により、ブレード全体のうちの損傷箇所を容易に把握できる。

１０ 入力部
１１ ルール入力部
１２ 分割画像入力部
２０ 制御部
２１ 抽出部
２２ データベース更新部
２３ ルール設定部
２４ 表示制御部
２５ 損傷判定部
３０ 記憶部
３１ 識別情報
３２ 管理情報
３２ａ 構造情報
３２ｂ 撮影情報
３２ｃ 点検情報
３２ｄ 順序情報
３３ 分割画像
４０ 表示部
７０ 風車（風力発電設備）
７１ タワー
７２ ナセル
７３ ブレード
１００ 構造物表示装置

Claims (14)

1. 構造物を複数の撮影範囲で分割して撮影した分割画像を表示する構造物表示装置であって、
   それぞれの前記分割画像に識別情報を付与するとともに、前記識別情報に１つ以上の管理情報を対応付けて管理する記憶部と、
   前記識別情報または前記識別情報と前記管理情報とを組み合わせた抽出条件の入力を受け、前記抽出条件に合致する前記分割画像を前記記憶部から抽出する抽出処理を実行し、その抽出処理の結果を表示部に表示する制御部とを有しており、
   前記抽出処理は、
   前記抽出条件に前記管理情報が含まれない場合には、前記抽出条件の前記識別情報に対応する前記分割画像を抽出し、
   前記抽出条件に前記管理情報が含まれる場合には、前記抽出条件の前記識別情報および前記抽出条件の前記管理情報の双方に合致する前記分割画像を抽出することを特徴とする
   構造物表示装置。
2. 前記管理情報には、前記分割画像の撮影順序および撮影位置を示す順序情報が含まれることを特徴とする
   請求項１に記載の構造物表示装置。
3. 前記管理情報は、前記構造物およびその構造物を撮像するときの撮影面を特定するための構造情報が含まれることを特徴とする
   請求項２に記載の構造物表示装置。
4. 前記制御部は、
   前記抽出条件で指定された前記構造情報に合致する前記分割画像の集合を抽出し、
   抽出した前記分割画像を表示画面に配置するための画面表示ルールを受け、抽出した前記分割画像を前記順序情報に従い前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項３に記載の構造物表示装置。
5. 前記構造物は風力発電設備のブレードであって、前記分割画像は前記ブレードを複数の撮影面から撮影した画像であり、
   前記制御部は、
   前記抽出条件で指定された前記構造情報として、特定の前記風力発電設備が有する特定の前記ブレードに合致する前記分割画像の集合を抽出し、
   抽出した前記分割画像を前記順序情報の撮影位置ごと、および、撮影面ごとに表示画面に配置するための前記画面表示ルールを受け、抽出した前記分割画像を前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項４に記載の構造物表示装置。
6. 前記構造物は風力発電設備のブレードであって、前記分割画像は前記ブレードを複数の撮影面から撮影した画像であり、
   前記制御部は、
   前記抽出条件で指定された前記構造情報として、前記各風力発電設備が有する特定の前記ブレードに合致する前記分割画像の集合を抽出し、
   抽出した前記分割画像を前記風力発電設備ごと、および、撮影面ごとに表示画面に配置するための前記画面表示ルールを受け、抽出した前記分割画像を前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項４に記載の構造物表示装置。
7. 前記構造物は風力発電設備のブレードであって、
   前記制御部は、
   前記抽出条件で指定された前記構造情報として、特定の前記風力発電設備が有する特定の前記ブレードに合致する前記分割画像の集合を抽出し、
   抽出した前記分割画像を前記順序情報の撮影位置ごと、および、撮影日時ごとに表示画面に配置するための前記画面表示ルールを受け、抽出した前記分割画像を前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項４に記載の構造物表示装置。
8. 前記構造物は風力発電設備のブレードであって、前記記憶部には前記ブレードの正常状態を示す基準画像が記憶されており、
   前記制御部は、
   抽出した前記分割画像と前記基準画像とを前記順序情報の同じ撮影位置ごとに並べて表示画面に配置するための前記画面表示ルールを受け、抽出した前記分割画像を前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項４に記載の構造物表示装置。
9. 前記構造物は風力発電設備のブレードであって、
   前記制御部は、
   過去の画像情報と損傷度合いとを用いた機械学習に基づき、前記分割画像の損傷度合いを評価して前記記憶部に記憶し、前記順序情報の同じ撮影位置ごとに並べて表示画面に配置するための前記画面表示ルールを受け、抽出した前記分割画像および前記損傷度合いを前記画面表示ルールに沿って並べた表示画面とすることを特徴とする
   請求項４に記載の構造物表示装置。
10. 前記構造物は風力発電設備のブレードであって、
    前記制御部は、
    診断結果として異常とした前記分割画像について同じ撮影位置のものを時系列で前記記憶部に記憶し、前記時系列で記憶した同じ撮影位置の前記分割画像を比較することで損傷状態の進行度合いを算出することを特徴とする
    請求項４に記載の構造物表示装置。
11. 前記制御部は、前記表示画面において損傷部を強調表示することを特徴とする
    請求項５ないし請求項１０のいずれか１項に記載の構造物表示装置。
12. 前記制御部は、前記構造物表示装置が備える入力部、または、前記構造物表示装置とネットワークを介して接続される外部装置から前記抽出条件を取得することを特徴とする
    請求項１に記載の構造物表示装置。
13. 前記制御部は、前記分割画像およびその撮影日時の入力を受けるとともに、その前記分割画像の前記識別情報および前記管理情報の入力を受け、それらの入力された情報を対応付けて前記記憶部に格納することを特徴とする
    請求項１に記載の構造物表示装置。
14. 構造物を複数の撮影範囲で分割して撮影した分割画像を表示する構造物表示装置は、記憶部と、制御部とを有しており、
    前記記憶部には、それぞれの前記分割画像に識別情報を付与するとともに、前記識別情報に１つ以上の管理情報を対応付けて管理されており、
    前記制御部は、前記識別情報または前記識別情報と前記管理情報とを組み合わせた抽出条件の入力を受け、前記抽出条件に合致する前記分割画像を前記記憶部から抽出する抽出処理を実行し、その抽出処理の結果を表示部に表示し、
    前記抽出処理は、
    前記抽出条件に前記管理情報が含まれない場合には、前記抽出条件の前記識別情報に対応する前記分割画像を抽出し、
    前記抽出条件に前記管理情報が含まれる場合には、前記抽出条件の前記識別情報および前記抽出条件の前記管理情報の双方に合致する前記分割画像を抽出することを特徴とする
    構造物表示方法。

Images