JP2023010328A - 設備工事の検査装置、設備工事の検査方法、および設備工事の検査用プログラム - Google Patents

Abstract

【課題】設備工事を簡単、且つ、高精度に検査をする設備工事の検査装置、検査方法及びプログラムを提供する。【解決手段】設備工事の施工検査サーバ装置は、ユーザ端末装置１００から、検査項目が境界標示物であることを示す検査項目情報、境界標示物及び設備の一部を撮像した検査画像及び検査画像に含まれる境界標示物を撮像するためのガイド画像に関するガイド情報を取得する取得部（ＡＰＩ部）と、検査画像に基づいて境界標示物の確からしさを示す確信度を算出して確信度に基づいて検査画像に境界標示物が含まれるか否かを認識し、検査画像に基づいて設備の確からしさを示す確信度を算出して確信度に基づいて検査画像に設備が含まれるか否かを認識する検査対象認識部と、検査画像を撮像した向き情報に基づく境界標示物として認識された領域から延びる境界線と、設備として認識された領域との位置関係に基づいて設備工事の検査を実施する検査部と、を備える。【選択図】図１

Description

特許法第３０条第２項適用申請有り 〔１〕〔報道発表〕 開催日 令和３年 ４月２１日 集会名、開催場所 エヌ・ティ・ティ・コムウェア株式会社 新事業ブランド「ＳｍａｒｔＭａｉｎｔｅｃｈ（スマートメインテック）」記者発表会 ＮＴＴ品川ＴＷＩＮＳ アネックスビル １Ｆ（東京都港区港南１－９－１） ＰａｒｋＬａｂｏ．＆オンライン配信 ＜資 料＞ 記者発表会 発表資料 〔２〕〔ウェブサイト〕 ウェブサイトの掲載日 令和３年 ４月２１日 ウェブサイトのアドレス ｈｔｔｐｓ：／／ｗｗｗ．ｎｔｔｃｏｍ．ｃｏ．ｊｐ／ｎｅｗｓ／ｐｒ２１０４２１０１．ｈｔｍｌ ＜関連公開ウェブサイトアドレス＞ ｈｔｔｐｓ：／／ｂｕｉｌｔ．ｉｔｍｅｄｉａ．ｃｏ．ｊｐ／ｂｔ／ａｒｔｉｃｌｅｓ／２１０４／２３／ｎｅｗｓ０２１＿３．ｈｔｍｌ ｈｔｔｐｓ：／／ｗｗｗ．ｎｉｋｋｅｉ．ｃｏｍ／ａｒｔｉｃｌｅ／ＤＧＸＺＱＯＵＣ２１７Ｌ７０Ｒ２０Ｃ２１Ａ４００００００／ ｈｔｔｐｓ：／／ｎｅｗｓ．ｍｙｎａｖｉ．ｊｐ／ａｒｔｉｃｌｅ／２０２１０４２２－１８７６４０５／ ｈｔｔｐｓ：／／ｗｗｗ．ｋｅｎｓｅｔｓｕｎｅｗｓ．ｃｏｍ／ｗｅｂ－ｋａｎ／５６４３７３ ｈｔｔｐｓ：／／ｂ２ｂ－ｃｈ．ｉｎｆｏｍａｒｔ．ｃｏ．ｊｐ／ｎｅｗｓ／ｄｅｔａｉｌ．ｐａｇｅ？ＩＭＮＥＷＳ１＝２５３３１０９ ｈｔｔｐｓ：／／ｗｗｗ．ｓｕｇｉｔｅｃ．ｎｅｔ／２８５３２／ ｈｔｔｐｓ：／／ｂｐ－ａｆｆａｉｒｓ．ｃｏｍ／ｎｅｗｓ／２０２１／０４／２０２１０４２３－１０８２７．ｈｔｍｌ ＜資 料＞ ニュースリリース及びサービス内容公開ウェブページ ＜資 料＞ 関連公開ウェブサイトページ

本発明は、設備工事の検査装置、設備工事の検査方法、および設備工事の検査用プログラムに関する。

従来より、施工状態を検査する技術が知られている。例えば、特許文献１－３には、複数の部材を用いた施工状態を高い精度で検査するための技術が記載されている。特許文献１には、電柱の分線用金物の施工状態を検査するための技術が記載され、特許文献２には、電柱の支持部材の施工状態を検査するための技術が記載されている。さらに、特許文献３には、設備工事に含まれる複数の検査項目に応じて検査対象物のガイド枠やマスクを表示することが記載されている。

特開２０２１－６１７０９号公報 特開２０２１－６０８８７号公報 特開２０２１－６０８８８号公報

上述した特許文献１－３に記載された施工状態の検査においては、検査対象物ごとに検査項目や、検査項目ごとに必要な精度などが規定されている場合が多く、簡単、且つ高精度に検査をすることが望まれている。

本発明は、上記の課題に鑑みてなされたものであって、設備工事を簡単、且つ高精度に検査をすることができる設備工事の検査装置、設備工事の検査方法、および設備工事の検査用プログラムを提供することを目的としている。

（１）本発明の一態様は、端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得する取得部と、前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識し、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識する認識部と、前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施する検査部と、前記検査部により実施された検査の結果を前記端末装置に通知する通知部と、を備える、設備工事の検査装置である。

（２）本発明の一態様は、上記の設備工事の検査装置であって、前記検査部は、前記境界標示物から延びた２本の境界線に対する前記設備の位置を表し、直角に交差した２本の境界線の内側に前記設備が位置すること、直角に交差した２本の境界線の外側に前記設備が位置すること、または、水平に接続した２本の境界線に対して前記設備が水平に位置すること、を示す構図パターンに基づいて、設備工事の検査を実施してよい。

（３）本発明の一態様は、端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得するステップと、前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識し、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識するステップと、前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施するステップと、検査の結果を前記端末装置に通知するステップと、を備える、設備工事の検査方法である。

（４）本発明の一態様は、コンピュータに、端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得させ、前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識させ、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識させ、前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施させ、検査の結果を前記端末装置に通知させる、設備工事の検査用プログラムである。

本発明の一態様によれば、設備工事を簡単、且つ高精度に検査をすることができる。

実施形態の設備工事検査システムの一構成例を示すブロック図である。 検査対象認識部の一例を示すブロック図である。 設備工事検査システムにおける設備工事の検査処理の一例を示すシーケンス図である。 施工検査サーバ装置における設備工事の検査処理の一例を示すフローチャートである。 検査対象物を選択する画面の一例を示す図である。 プリカチューブを検査するためのガイド画像を選択するための画面の一例を示す図である。 プリカチューブの検査画像と、プリカチューブの認識結果との一例を示す図である。 プリカチューブのタグ情報の一例を示す図である。 プリカチューブのガイド画像の一例を示す図である。 プリカチューブについてのガイド情報の一例を示す図である。 プリカチューブの検査処理の一例を示す図である。 プリカチューブの検査処理の他の一例を示す図である。 プリカチューブの施工が所定の基準を満たしている検査結果画面の一例を示す図である。 プリカチューブの施工が所定の基準を満たしていない検査結果画面の一例を示す図である。 フェンスを検査するためのガイド画像を選択するための画面の一例を示す図である。 フェンスにおける格子形状物の検査画像およびガイド画像の一例を示す図である。 格子形状物の認識結果の一例を示す図である。 フェンスのタグ情報の一例を示す図である。 格子形状物のガイド情報の一例を示す図である。 格子形状物の施工が基準を満たしている検査結果画面の一例を示す図である。 フェンスにおける接合部の形状の一例を示す図である。 フェンスにおける接合部の形状に対応したガイド画像の一例を示す図である。 ナットの認識結果の一例を示す図である。 フェンスにおける接合部を含む検査画像にガイド画像を重畳させた画面の一例を示す図である。 接合部のガイド情報の一例を示す図である。 フェンス接合部の施工が基準を満たしている検査結果画面の一例を示す図である。 フェンスの接合部における検査処理の一例を示す図である。 絶縁ブッシングを検査するためのガイド画像を選択するための画面の一例を示す図である。 絶縁ブッシングを含む検査画像および認識結果の一例である。 絶縁ブッシングのタグ情報の一例を示す図である。 絶縁ブッシングの検査処理の一例を示す図である。 絶縁ブッシングについてのガイド情報の一例を示す図である。 境界プレートを検査するためのガイド画像を選択するための画面の一例を示す図である。 境界プレートおよび基礎部材の検査画像の一例を示す図である。 境界プレートのガイド画像および認識結果の一例を示す図である。 境界プレートおよび基礎部材のタグ情報の一例を示す図である。 ガイド情報の一例を示す図である。 境界線と基礎部材との関係を示す図である。 境界プレートについてのガイド画像の他の一例を示す図である。 境界プレートおよび基礎部材の認識結果の一例を示す図である。 境界プレートに関する検査結果の一例を示す図である。 塗料空缶についてのガイドの種類を選択する画面の一例を示す図である。 選択した塗料空缶の数量を設定する画面の一例を示す図である。 塗料缶を含む検査画像の一例を示す図である。 塗料缶の認識結果の一例を示す図である。 塗料缶の検査結果の一例を示す図である。

以下、本発明を適用した設備工事の検査装置、設備工事の検査方法、および設備工事の検査用プログラムを、図面を参照して説明する。

実施形態の設備工事検査システムは、基地局の設備工事の現場作業員により撮像された画像を用いて、当該設備工事の検査を行う。実施形態の設備工事検査システムは、現場作業員により撮像された画像内に検査対象としての施工部材が存在しているか否か、施工部材が適切に施工されているか否かを判定することによって、簡単に、且つ高い精度で検査するものである。また、実施形態の設備工事検査システムは、判定結果（施工部材の認識結果、および検査結果）を現場作業員に提示することによって、現場作業員による画像撮影の手間や、設備工事の検査者による検査の手間や、設備工事に不備がある場合の再施工などの手間を軽減することができる。

図１は、実施形態の設備工事検査システムの一構成例を示すブロック図である。設備工事検査システムは、例えば、一又は複数のユーザ端末装置１００と、施工検査サーバ装置２００と、管理端末３００とを備える。ユーザ端末装置１００、施工検査サーバ装置２００、および管理端末３００は、例えば、通信ネットワークＮＷに接続される。通信ネットワークＮＷに接続される各装置は、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）や無線通信モジュールなどの通信インターフェースを備えている（図１では不図示）。通信ネットワークＮＷは、例えば、インターネット、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、セルラー網などを含む。

ユーザ端末装置１００は、例えばスマートフォンやタブレット端末などのカメラ装置を備えた携帯型端末装置である。ユーザ端末装置１００は、ブラウザやアプリケーションプログラムなどのＵＡ（Ｕｓｅｒ Ａｇｅｎｔ）が起動する。ＵＡは、例えば、施工検査サーバ装置２００と通信等をするためのアプリケーションである。ユーザ端末装置１００は、ＵＡとしての施工検査用アプリケーションを利用し、施工検査サーバ装置２００から受信したコンテンツを用いて表示処理や操作の受け付け処理などを行う。また、ユーザ端末装置１００は、施工検査用アプリケーションを利用して、ユーザの操作に基づく操作情報や撮影画像等を施工検査サーバ装置２００に提供する。

施工検査サーバ装置２００は、設備工事の検査依頼を受け付け、設備工事の検査結果を提供する情報処理装置である。施工検査サーバ装置２００は、例えば、連携ＡＰＩ（Application Programming Interface）部２１０と、検査対象認識部２２０とを備える。連携ＡＰＩ部２１０および検査対象認識部２２０といった機能部は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等のプロセッサがプログラムメモリに格納されたプログラムを実行することにより実現される。また、これらの機能部のうち一部または全部は、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、またはＦＰＧＡ（Ｆｉｅｌｄ-Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等のハードウェアにより実現されてもよいし、ソフトウェアとハードウェアが協働することで実現されてもよい。

連携ＡＰＩ部２１０は、例えば、ＡＰＩ部２１２と、画像処理部２１４と、検査部２１６と、制御部２１８とを備える。ＡＰＩ部２１２は、ユーザ端末装置１００から各種の情報を受け付ける処理や、ユーザ端末装置１００にコンテンツを提供する処理などを行う。画像処理部２１４は、ユーザ端末装置１００から取得した画像データに対して所定の画像処理を施す。以下、検査に用いる画像を検査画像と記載する。検査部２１６は、ＡＰＩ部２１２により取得した検査画像および／または画像処理部２１４により処理された検査画像を用いて設備工事の検査処理を行う。制御部２１８は、検査対象認識部２２０における画像認識エンジンの起動等の制御を行う。

検査対象認識部２２０は、例えば複数の画像認識エンジン２２２Ａ、２２２Ｂ、・・・２２２Ｎ（Ｎは自然数）を備える。なお、複数の画像認識エンジンを総称する場合には単に画像認識エンジン２２２と記載する。各画像認識エンジン２２２は、複数の検査項目のうちの各検査項目に対応する。画像認識エンジン２２２は、検査項目における検査対象としての施工部材を認識する認識処理を行う。

図２は、検査対象認識部の一例を示すブロック図である。検査対象認識部２２０は、例えば、学習画像データベース２３０と、学習処理部２３２と、認識処理部２３４と、結果出力部２３６とを備える。

学習画像データベース２３０は、例えば管理端末３００から取得した画像を学習画像として記憶するデータベースである。学習画像データベース２３０は、学習画像として、例えば正例画像を記憶する。正例画像とは、正常な状態の対象物体を撮像した画像である。正例画像は、例えば、基地局設備の工事において使用される工事部材を撮像した画像である。工事部材は、例えば、プリカチューブ（配管）、フェンス、絶縁ブッシング、基礎や境界標示物、塗料缶などの基地局設備の構成物である。正例画像は、工事部材名を含むタグ情報と対応付けられる。なお、正例画像には例えば工程名、検査項目名を示す情報が対応付けられてよい。なお、学習画像データベース２３０には、正例画像に限らず、学習画像として、工事部材とは異なる物体（異常状態の物体や不良品）を撮像した画像が記憶されてよい。

学習処理部２３２には、学習画像データベース２３０から学習画像が供給される。学習処理部２３２は、学習画像を用いて認識処理を行い、判定結果を得る。学習処理部２３２は、施工部材を検出したという判定結果となるように認識処理部２３４（認識モデル２３４Ａ）の処理パラメータを学習し、学習結果データを生成する。認識処理部２３４（認識モデル２３４Ａ）の処理パラメータとは、例えば、ニューラルネットワークに含まれるフィルタ（重み、バイアスともいう）である。学習結果データは、学習結果データ記憶部２３４１に記憶される。

認識処理部２３４は、例えば、学習結果データ記憶部２３４１と、判定部２３４２とを有する。学習結果データ記憶部２３４１には、学習結果としての認識処理部２３４の処理パラメータが蓄積され、認識処理部２３４の処理パラメータは、学習処理部２３２によって更新される。認識処理部２３４は、検査画像を取得した場合、認識処理部２３４の処理パラメータに基づく認識モデル２３４Ａを用いて特徴量を抽出する。判定部２３４２は、抽出した特徴量に基づいて、施工部材を検出する。認識処理部２３４は、判定部２３４２による判定結果を、認識結果として出力する。

図３は、設備工事検査システムにおける設備工事の検査処理の一例を示すシーケンス図である。ユーザ端末装置１００は、ユーザの操作に基づいて検査項目情報を施工検査サーバ装置２００に送信し、検査画像および検査項目に対応したガイド情報を施工検査サーバ装置２００に送信する。次に施工検査サーバ装置２００は、検査画像に含まれる検査対象物の認識結果をユーザ端末装置１００に送信し、さらに、検査対象物の検査結果をユーザ端末装置１００に送信する。これにより、ユーザ端末装置１００が指定した検査項目および検査対象物について、施工検査サーバ装置２００が検査対象物を正確に認識できたか否か、および検査対象物の施工が適切に行われていることが検査されたか否かをユーザに通知することができる。

図４は、施工検査サーバ装置における設備工事の検査処理の一例を示すフローチャートである。まず、連携ＡＰＩ部２１０は、ユーザ端末装置１００から受信した情報に基づいて設備工事における検査項目名を取得する（ステップＳ１００）。連携ＡＰＩ部２１０は、検査項目名を取得した時点において検査対象認識部２２０の起動リストを取得する。連携ＡＰＩ部２１０は、ステップＳ１００において取得した検査項目名と起動リストとを比較し（ステップＳ１０４）、取得した検査項目名に対応する画像認識エンジン２２２が起動しているか否かを判定する（ステップＳ１０６）。連携ＡＰＩ部２１０は、検査項目名に対応した画像認識エンジン２２２が起動していない場合（ステップＳ１０６：ＮＯ）、検査項目名に対応した画像認識エンジン２２２を起動するよう制御する（ステップＳ１０８）。

連携ＡＰＩ部２１０は、検査項目名に対応した画像認識エンジン２２２が起動している場合（ステップＳ１０６：ＹＥＳ）、またはステップＳ１０８において検査項目名に対応する画像認識エンジン２２２を起動した後、画像ファイルおよび検査情報ファイルを取得する（ステップＳ１１０）。次に連携ＡＰＩ部２１０は、取得した画像ファイルに含まれる検査画像に所定の画像処理を施す（ステップＳ１１２）。所定の画像処理は、例えば、エッジ化（先鋭化）処理や、明るさ補正処理などがある。ユーザ端末装置１００は、所定の画像処理を施した検査画像を、検査項目名に対応した画像認識エンジン２２２に受け渡す。

画像認識エンジン２２２は、連携ＡＰＩ部２１０から取得した画像に基づいて検査項目名に対応した施工部材（検査対象）が存在するか否かを判定する認識処理を行う（ステップＳ１１４）。このとき、画像認識エンジン２２２は、施工部材ごとに確信度を算出する。また、画像認識エンジン２２２は、画像処理ごとに、施工部材の確信度を算出する。画像認識エンジン２２２は、施工部材の確信度が所定値以上である場合、当該施工部材が存在すると判定する。画像認識エンジン２２２は、施工部材が存在するという認識結果である場合（ステップＳ１１６：ＹＥＳ）、ステップＳ１２０に処理を進める。画像認識エンジン２２２は、施工部材が存在しないという認識結果である場合（ステップＳ１１６：ＮＯ）、検査画像を再取得する（ステップＳ１１８）。施工検査サーバ装置２００は、検査画像を再取得する場合、ユーザ端末装置１００に画像を再撮影する要求を送信する。

連携ＡＰＩ部２１０は、画像認識エンジン２２２により算出された施工部材の確信度と所定値とを比較する（ステップＳ１２０）。連携ＡＰＩ部２１０は、所定値よりも高い確信度で施工部材が認識された検査画像を用いて、検査項目の判定処理を行う（ステップＳ１２２）。なお、検査項目の判定処理については後述する。連携ＡＰＩ部２１０は、検査項目の判定処理の結果として、検査結果をユーザ端末装置１００に送信する（ステップＳ１２４）。

（プリカチューブ（配管）の検査）
以下、基地局設備におけるプリカチューブ（配管）の検査について説明する。
図５は、検査対象物を選択する画面の一例を示す図である。ユーザ端末装置１００は、ユーザの操作に基づいて図５に示す検査対象物の選択画面を表示し、選択画面に対する操作を受け付けることで、どの検査対象物が選択されたのかを認識する。ユーザ端末装置１００は、プリカチューブが選択された場合、図６に示す画面を表示する。図６は、プリカチューブを検査するためのガイド画像を選択するための画面の一例を示す図である。実施形態において、例えばプリカチューブの仕様として４つのパターンに対応したガイド画像が選択可能である。プリカチューブの仕様は例えばプリカチューブの径の太さであり、ユーザは施工したプリカチューブの径の太さを選択する。これにより、設備工事検査システムは、施工したプリカチューブの径の太さに対応した曲げ半径を検査することができる。

図７は、プリカチューブの検査画像と、プリカチューブの認識結果との一例を示す図であり、図８は、プリカチューブのタグ情報の一例を示す図であり、図９は、プリカチューブのガイド画像の一例を示す図であり、図１０は、プリカチューブについてのガイド情報の一例を示す図である。ユーザ端末装置１００は、図７（Ａ）に示す検査画像を撮像して施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、検査画像に対してプリカチューブの認識処理を行い、図７（Ｂ）に示すプリカチューブとして認識された検査画像中の領域に、タグ情報＃１を付与する。タグ情報は、画像認識エンジン２２２の認識結果としてのタグ名「ｕ－ｔｕｂｅ」を含む。なお、施工検査サーバ装置２００は、一つの検査画像に複数のプリカチューブが認識された場合に、プリカチューブの認識に失敗したという認識結果を生成してよい。

ユーザ端末装置１００は、図９に示すプリカチューブのガイド画像を表示させ、例えばガイド画像の位置を決定する操作を受け付けた場合に、ガイド情報を施工検査サーバ装置２００に送信する。ガイド画像は、プリカチューブの内径側に配置される内径側ガイド（第１画像）と、プリカチューブの外径側に配置される外径側ガイド（第２画像）と、内径側ガイドと外径側ガイドに重なる一対の位置決め用ガイド（第３画像）とを含む。内径側ガイドおよび外径側ガイドは、ユーザ（施工者）により選択されたプリカチューブの曲げ半径（仕様）に対応した形状を有する。位置決め用ガイドは、選択されたプリカチューブの内径部と外径部との距離だけ離れた一対の矩形領域である。ユーザ端末装置１００は、ガイド画像が位置決めされた操作を受け付けた場合に、内径側ガイド（ガイド円）の中心座標（ｘ，ｙ）およびガイド円の半径（ｒ）を示す送信情報を施工検査サーバ装置２００に送信する。

図１１は、プリカチューブの検査処理の一例を示す図である。施工検査サーバ装置２００は、ユーザ端末装置１００から受信した内径側ガイド（ガイド円）の中心座標Ｃ（ｘ，ｙ）および内径側ガイドの半径ｒを用いて、検査画像中に内径側ガイドを再現する。施工検査サーバ装置２００は、再現した内径側ガイドがプリカチューブとして認識された領域に重複していない場合にプリカチューブの施工が適切に行われていると判定し、再現した内径側ガイドがプリカチューブとして認識された領域に重複している場合にプリカチューブの施工が適切に行われてないと判定する。

図１２は、プリカチューブの検査処理の他の一例を示す図である。施工検査サーバ装置２００は、再現した内径側ガイドとプリカチューブとして認識された領域とが隣接する範囲のうち、一部の範囲を除外して検査を実施してよい。施工検査サーバ装置２００は、例えば、内径側ガイドの中心座標Ｃから下に所定距離だけ離れた範囲を除外範囲として設定する。所定距離は、例えば、半径ｒに所定の設定値（例えば０．７）を乗算した長さである。施工検査サーバ装置２００は、除外範囲の外において、再現した内径側ガイドがプリカチューブとして認識された領域に重複していない場合にプリカチューブの施工が適切に行われていると判定し、再現した内径側ガイドがプリカチューブとして認識された領域に重複している場合にプリカチューブの施工が適切に行われてないと判定する。なお、内径側ガイドの中心座標Ｃから半径ｒを０．７倍した距離から下の範囲を除外範囲として設定したが、これに限定されず、内径側ガイドの最下部が手振れ等で誤って重複してしまう可能性を低減することができれば除外範囲を変更してよい。

図１３は、プリカチューブの施工が所定の基準を満たしている検査結果画面の一例を示す図であり、図１４は、プリカチューブの施工が所定の基準を満たしていない検査結果画面の一例を示す図である。施工検査サーバ装置２００は、検査結果をユーザ端末装置１００に送信し、ユーザ端末装置１００は、検査結果に基づいて図１３または図１４に示す検査結果画面を表示させる。

（フェンスの検査）
以下、基地局設備におけるフェンスの検査について説明する。
ユーザ端末装置１００は、検査対象物としてフェンスが選択された場合、図１５に示す画面を表示する。図１５は、フェンスを検査するためのガイド画像を選択するための画面の一例を示す図である。実施形態において、例えばフェンスの格子形状物の場所や、フェンスにおける接合部の形状に対応したガイド画像が選択可能である。これにより、設備工事検査システムは、施工したフェンスの場所や接合部の形状に対応したフェンスの検査を実施することができる。

図１６は、フェンスにおける格子形状物の検査画像およびガイド画像の一例を示す図であり、図１７は、格子形状物の認識結果の一例を示す図であり、図１８は、フェンスのタグ情報の一例を示す図であり、図１９は、格子形状物のガイド情報の一例を示す図である。ユーザ端末装置１００は、図１６に示すような格子形状物を含む検査画像を撮像して施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、検査画像に対して格子形状物の認識処理を行い、図１７に示す格子形状物として認識された検査画像中の領域に、タグ情報（＃１または＃２）を付与する。タグ情報は、画像認識エンジン２２２の認識結果としてのタグ名「ｃｈｉｄｏｒｉ－ｇｉｎ」または「ｃｈｉｄｏｒｉ－ｃｈａ」を含む。

ユーザ端末装置１００は、図１６に示す格子形状物のガイド画像を表示させ、例えばガイド画像の位置を決定する操作を受け付けた場合に、ガイド情報を施工検査サーバ装置２００に送信する。ガイド画像は、一方向において所定間隔ごとに並んだ複数の円形画像を含む。各円形画像の領域は、格子形状物が含まれているか否かが検査される検査領域に相当する。ユーザ端末装置１００は、ガイド画像が位置決めされた操作を受け付けた場合に、各円形画像の中心座標（ｘ１，ｙ１，ｘ２，ｙ２，・・・）および半径（ｒ）を示す送信情報を施工検査サーバ装置２００に送信する。

施工検査サーバ装置２００は、ガイド情報を用いて、認識された格子形状物の数と円形画像（検査領域）の数とが同じであるか否かを検査する。施工検査サーバ装置２００は、図１６に示したようにガイド画像の個数が４個であり、図１７に示した格子形状物のタグ情報が付与された領域の数が４個であるので、格子形状物の施工が所定の基準を満たしているという検査結果を生成する。

図２０は、格子形状物の施工が基準を満たしている検査結果画面の一例を示す図である。施工検査サーバ装置２００は、検査結果をユーザ端末装置１００に送信し、ユーザ端末装置１００は、検査結果に基づいて図２０に示す検査結果画面を表示させる。

次にフェンスの接合部の検査について説明する。
図２１は、フェンスにおける接合部の形状の一例を示す図であり、図２２は、フェンスにおける接合部の形状に対応したガイド画像の一例を示す図である。フェンスにおける接合部の形状は、図２１に示すように複数種類あり、ユーザの操作に基づいていずれかが選択される。ユーザ端末装置１００は、選択されたフェンスにおける接合部の形状を示す情報を検査項目情報として施工検査サーバ装置２００に送信し、さらに、接合部を含む検査画像を撮像して施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、検査画像に対して接合部におけるナット（締結物）の認識処理を行い、ナットとして認識された検査画像中の領域に、タグ情報（図１８の＃３または＃４）を付与する。タグ情報は、画像認識エンジン２２２の認識結果としてのタグ名「ｎｕｔ－ｇｉｎ」または「ｎｕｔ－ｃｈａ」を含む。図２３は、ナットの認識結果の一例を示す図である。

図２４は、フェンスにおける接合部を含む検査画像にガイド画像を重畳させた画面の一例を示す図であり、図２５は、接合部のガイド情報の一例を示す図である。ガイド画像は、フェンスの格子形状物を支持する支柱に対応した形状の支柱ガイド画像と、支柱同士を締結するナット（締結物）に対応したナットガイド画像とを含む。ユーザ端末装置１００は、ガイド画像が位置決めされた操作を受け付けた場合に、ナットガイド画像の中心座標（ｘ１，ｙ１，ｘ２，ｙ２，・・・）および半径（ｒ）を示す送信情報を施工検査サーバ装置２００に送信する。

施工検査サーバ装置２００は、ガイド情報を用いて、検査画像から認識されたナット（締結物）の数と円形画像（検査領域）の数とが同じであるか否かを検査する。施工検査サーバ装置２００は、図２４に示したようにナットガイド画像の個数が２個であり、ナットのタグ情報が付与された領域の数が２個である場合、格子形状物の施工が所定の基準を満たしているという検査結果を生成する。施工検査サーバ装置２００は、検査結果をユーザ端末装置１００に送信し、ユーザ端末装置１００は、検査結果に基づいて検査結果画面を表示させる。

図２６は、フェンス接合部の施工が基準を満たしている検査結果画面の一例を示す図である。施工検査サーバ装置２００は、検査結果をユーザ端末装置１００に送信し、ユーザ端末装置１００は、検査結果に基づいて図２６に示す検査結果画面を表示させる。

図２７は、フェンスの接合部における検査処理の一例を示す図である。施工検査サーバ装置２００は、ユーザ端末装置１００から受信したナットガイド画像の中心座標Ｃ（ｘ，ｙ）および内径側ガイドの半径ｒを用いて、検査画像中にナットガイド画像を再現する。施工検査サーバ装置２００は、再現したナットガイド画像中に、１つ以上のナットとして認識された領域の重心座標が存在する場合、当該再現したナットガイド画像について、ナットが所定の基準を満たしていると判定する。施工検査サーバ装置２００は、再現したナットガイド画像ごとに判定を行うことで、フェンスの接合部の検査結果を生成する。

以下、絶縁ブッシングの検査について説明する。絶縁ブッシングは、例えば接合部におけるボルトと共に取り付けられる。図２８は、絶縁ブッシングを検査するためのガイド画像を選択するための画面の一例を示す図であり、図２９は、絶縁ブッシングを含む検査画像および認識結果の一例であり、図３０は、絶縁ブッシングのタグ情報の一例を示す図である。

ユーザ端末装置１００は、検査対象物として絶縁ブッシングが選択された場合、図２８に示す画面を表示する。ユーザ端末装置１００は、例えば、「絶縁ありボルト側」または「絶縁ありナット側」が選択された場合、検査項目情報と共に、図２９（Ａ）のように絶縁ブッシングを含む検査画像を、施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、検査画像に対して絶縁ブッシングの認識処理を行い、図２９（Ｂ）に示すように絶縁ブッシングとして認識された検査画像中の領域に、タグ情報（＃２）を付与する。タグ情報は、画像認識エンジン２２２の認識結果としてのタグ名「ｂｕｓｈ－ｂｌａｃｋ」または「ｂｕｓｈ－ｗｈｉｔｅ」を含む。なお、実施形態において、絶縁ありボルト側」および「絶縁ありナット側」以外の項目が選択された場合、ユーザ端末装置１００は、検査項目情報を施工検査サーバ装置２００に送信しなくてよく、施工検査サーバ装置２００による認識処理および検査処理を行わなくてもよい。

図３１は、絶縁ブッシングの検査処理の一例を示す図であり、図３２は、絶縁ブッシングについてのガイド情報の一例を示す図である。ユーザ端末装置１００は、例えばユーザの操作に基づいて検査画像のうち絶縁ブッシングが存在する座標範囲（ｘ１，ｙ１，ｘ２，ｙ２）を表す情報を生成し、施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、ユーザ端末装置１００から受信した座標範囲に、絶縁ブッシングとしての認識された領域の重心座標が一つ以上存在する場合、絶縁ブッシングの施工が所定の基準を満たしているという検査結果を生成する。

（境界標示物の検査）
以下、基地局設備における境界標示物の検査について説明する。
ユーザ端末装置１００は、ユーザの操作に基づいて図５に示す検査対象物の選択画面を表示し、選択画面に対する操作を受け付けることで、どの検査対象物が選択されたのかを認識する。ユーザ端末装置１００は、境界プレート（境界標示物）が選択された場合、図３３に示す画面を表示する。図３３は、境界プレートを検査するためのガイド画像を選択するための画面の一例を示す図である。実施形態において、例えば境界プレートと基礎部材との関係として３つの構図パターンに対応したガイド画像が選択可能である。この構図パターンは、例えば「水平」、「直角」、および「逆直角」と呼ばれ、ユーザは施工した構図パターンを選択する。これにより、設備工事検査システムは、構図パターンに対応した境界プレートの検査を実施することができる。

図３４は、境界プレートおよび基礎部材の検査画像の一例を示す図であり、図３５は、境界プレートのガイド画像および認識結果の一例を示す図であり、図３６は、境界プレートおよび基礎部材のタグ情報の一例を示す図であり、図３７は、ガイド情報の一例を示す図である。ユーザ端末装置１００は、図３４に示す検査画像を撮像して施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、検査画像に対して境界プレートおよび基礎部材の認識処理を行い、図３５に示す境界プレートとして認識された検査画像中の領域に、タグ情報＃１を付与する。タグ情報は、画像認識エンジン２２２の認識結果としてのタグ名「ｐｕｒａ」を含む。

ユーザ端末装置１００は、境界プレートのガイド画像を表示させ、例えばガイド画像の向きを決定する操作を受け付けた場合に、ガイド情報を施工検査サーバ装置２００に送信する。ガイド画像は、境界プレートに対応したガイド画像と、境界プレートから延びる２本の境界線に対応したガイド画像とを含む。境界プレートに対応したガイド画像と境界線に対応したガイド画像との関係は、ユーザにより選択された向きによって決定され、ユーザにより選択された向き情報は、ガイド情報として施工検査サーバ装置２００に送信される。例えば、ユーザが、「直角」およびleftを選択した場合、ユーザ端末装置１００は、図３５（Ａ）に示すガイド画像を表示させ、leftを示すガイド情報を施工検査サーバ装置２００に送信する。例えば、ユーザが、「直角」およびrightを選択した場合、ユーザ端末装置１００は、図３５（Ｂ）に示すガイド画像を表示させ、rightを示すガイド情報を施工検査サーバ装置２００に送信する。図３５（Ａ）におけるＸ方向に平行な境界線は、Ｙ方向における下端から１／３の座標ｙ１に位置し、Ｙ方向に平行な境界線は、Ｘ方向における右端から２／３の座標ｘ１に位置する。図３５（Ｂ）におけるＸ方向に平行な境界線は、Ｙ方向における下端から１／３の座標ｙ１に位置し、Ｙ方向に平行な境界線は、Ｘ方向における右端から１／３の座標ｘ２に位置する。

施工検査サーバ装置２００は、直角または逆直角のガイド画像を選択した場合、境界線の交わる座標と、境界プレートであると認識した領域とが重なるときに境界プレートが所定の場所に存在していると判定する。施工検査サーバ装置２００は、水平のガイド画像を選択した場合、境界線と境界プレートであると認識した領域とが交わるときに境界プレートが所定の場所に存在していると判定する。施工検査サーバ装置２００は、所定の場所に境界プレートが存在しないと判定した場合、境界プレートが検出することができなかったことをユーザ端末装置１００に通知する。

図３８は、境界線と基礎部材との関係を示す図である。施工検査サーバ装置２００は、選択された構図パターンと向き情報に基づいて、基礎部材と境界線との位置関係を判定する。施工検査サーバ装置２００は、図３８（Ａ）のように、構図パターンとして「直角」が選択され、向きがleftである場合、基礎部材のＸ方向における最大値ｘ１２がＹ軸に平行な境界線のＸ方向位置ｘ１１よりも小さく、基礎部材のＹ方向における最大値ｙ１２がＸ軸に平行な境界線のＹ方向位置ｙ１１よりも小さい場合、境界プレートと基礎部材との位置関係が適切であると判定する。施工検査サーバ装置２００は、図３８（Ｂ）のように、構図パターンとして「水平」が選択され、向きがleftである場合、基礎部材のＹ方向における最大値ｙ１２がＸ軸に平行な境界線のＹ方向位置ｙ１１よりも小さい場合、境界プレートと基礎部材との位置関係が適切であると判定する。施工検査サーバ装置２００は、図３８（Ｃ）のように、構図パターンとして「逆直角」が選択され、向きがleftである場合、２本の境界線の交点と、ＸおよびＹの最大値の点（画像中右下の点）とを対角線とする長方形の内部に基礎部材が存在しない場合、境界プレートと基礎部材との位置関係が適切であると判定する。

施工検査サーバ装置２００は、図３８（Ｄ）のように、構図パターンとして「直角」が選択され、向きがrightである場合、基礎部材のＸ方向における最小値ｘ２２がＹ軸に平行な境界線のＸ方向位置ｘ２１よりも小さく、基礎部材のＹ方向における最大値ｙ２２がＸ軸に平行な境界線のＹ方向位置ｙ２１よりも小さい場合、境界プレートと基礎部材との位置関係が適切であると判定する。施工検査サーバ装置２００は、図３８（Ｅ）のように、構図パターンとして「水平」が選択され、向きがrightである場合、基礎部材のＹ方向における最大値ｙ２２がＸ軸に平行な境界線のＹ方向位置ｙ２１よりも小さい場合、境界プレートと基礎部材との位置関係が適切であると判定する。施工検査サーバ装置２００は、図３８（Ｆ）のように、構図パターンとして「逆直角」が選択され、向きがrightである場合、２本の境界線の交点と、ＸおよびＹの最小値の点（画像中左下の点）とを対角線とする長方形の内部に基礎部材が存在しない場合、境界プレートと基礎部材との位置関係が適切であると判定する。

図３９は、境界プレートについてのガイド画像の他の一例を示す図であり、図４０は、境界プレートおよび基礎部材の認識結果の一例を示す図であり、図４１は、境界プレートに関する検査結果の一例を示す図である。上述したように、ユーザ端末装置１００は、構図パターンを選択し、境界線を含むガイド画像を検査画像に重畳させて表示させることによりガイド画像の向き情報を生成して施工検査サーバ装置２００に送信してよい。施工検査サーバ装置２００は、検査画像を認識することにより境界プレートの領域および基礎部材の領域を認識し、構図パターンおよび向き情報に基づいて、ユーザがガイド画像に合わせて撮影した境界線近傍に境界プレートが存在していること、および境界プレートに基づく境界線を超えて基礎部材が存在していないことを判定することができる。この結果、施工検査サーバ装置２００は、検査結果をユーザ端末装置１００に送信し、ユーザ端末装置１００は、検査結果に基づいて図４１に示す検査結果画面を表示させる。

（塗料缶の検査）
以下、基地局設備における塗料缶の検査について説明する。図４２は、塗料空缶についてのガイドの種類を選択する画面の一例を示す図であり、図４３は、選択した塗料空缶の数量を設定する画面の一例を示す図であり、図４４は、塗料缶を含む検査画像の一例を示す図であり、図４５は、塗料缶の認識結果の一例を示す図であり、図４６は、塗料缶の検査結果の一例を示す図である。ユーザ端末装置１００は、図４２の画面を表示させることで基地局の施工に使用した塗料缶の用途を選択させ、図４３の画面を表示させることで塗料缶の必要数量を選択させ、選択した塗料缶の用途および必要数量をガイド情報として施工検査サーバ装置２００に送信する。さらに、ユーザ端末装置１００は、図４４に示すように検査画像を撮像して施工検査サーバ装置２００に送信する。施工検査サーバ装置２００は、図４５に示すように塗料缶を認識し、ガイド情報および認識結果に基づいて塗料缶を用いた施工が所定の基準を満たしている場合、図４６に示すような検査結果を表示する。

（実施形態の効果）
以上説明した実施形態によれば、ユーザ端末装置１００から、検査項目が配管であることを示す検査項目情報、曲げ施工により設置された配管を撮像した検査画像、および検査画像に含まれる配管を撮像するためのガイド画像に関するガイド情報を取得するＡＰＩ部２１２と、検査画像に基づいて配管の確からしさを示す確信度を算出し、確信度に基づいて検査画像に配管が含まれるか否かを認識する検査対象認識部２２０と、配管として認識された領域およびガイド情報に基づいて設備工事の検査を実施する検査部２１６と、検査部２１６により実施された検査の結果をユーザ端末装置１００に通知する連携ＡＰＩ部２１０と、を備える、設備工事の検査装置を実現することができる。実施形態によれば、曲げ施工により設置された配管に関する設備工事を簡単、且つ高精度に検査をすることができる。

実施形態によれば、ユーザ端末装置１００から、検査項目がフェンスの構成物であることを示す検査項目情報、フェンスの構成物を撮像した検査画像、および検査画像に含まれるフェンスの構成物を撮像するためのガイド画像に関するガイド情報を取得するＡＰＩ部２１２と、検査画像に基づいてフェンスの構成物の確からしさを示す確信度を算出し、確信度に基づいて検査画像にフェンスの構成物が含まれるか否かを認識する検査対象認識部２２０と、ガイド情報に基づくフェンスの構成物の数と認識されたフェンスの構成物の数とが同じであるか否かを検査する検査部２１６と、検査部２１６により実施された検査の結果をユーザ端末装置１００に通知するＡＰＩ部２１２と、を備える、設備工事の検査装置を実現することができる。実施形態によれば、フェンスの構成物としての格子形状物や締結物や絶縁ブッシングに関する設備工事を簡単、且つ高精度に検査をすることができる。

実施形態によれば、ユーザ端末装置１００から、検査項目が境界標示物であることを示す検査項目情報、境界標示物および設備の一部を撮像した検査画像、および検査画像に含まれる境界標示物を撮像するためのガイド画像に関するガイド情報を取得するＡＰＩ部２１２と、検査画像に基づいて境界標示物の確からしさを示す確信度を算出して確信度に基づいて検査画像に境界標示物が含まれるか否かを認識し、検査画像に基づいて設備の確からしさを示す確信度を算出して確信度に基づいて検査画像に設備が含まれるか否かを認識する検査対象認識部２２０と、検査画像を撮像した向き情報に基づく境界標示物として認識された領域から延びる境界線と、設備として認識された領域との位置関係に基づいて設備工事の検査を実施する検査部２１６と、検査部２１６により実施された検査の結果をユーザ端末装置１００に通知するＡＰＩ部２１２と、を備える、設備工事の検査装置を実現することができる。実施形態によれば、境界標示物および設備に関する設備工事を簡単、且つ高精度に検査をすることができる。

なお、各実施形態および変形例について説明したが、一例であってこれらに限られず、例えば、各実施形態や各変形例のうちのいずれかや、各実施形態の一部や各変形例の一部を、他の１または複数の実施形態や他の１または複数の変形例と組み合わせて本発明の一態様を実現させてもよい。

本実施形態におけるユーザ端末装置１００や施工検査サーバ装置２００の各処理を実行するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、当該記録媒体に記録されたプログラムを、コンピュータシステムに読み込ませ、実行することにより、ユーザ端末装置１００や施工検査サーバ装置２００に係る上述した種々の処理を行ってもよい。

なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器などのハードウェアを含むものであってもよい。また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリなどの書き込み可能な不揮発性メモリ、ＣＤ－ＲＯＭなどの可搬媒体、コンピュータシステムに内蔵されるハードディスクなどの記憶装置のことをいう。

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネットなどのネットワークや電話回線などの通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Ｄｙｎａｍｉｃ
Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ））のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、このプログラムを記憶装置などに格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。

ここで、プログラムを伝送する「伝送媒体」は、インターネットなどのネットワーク（通信網）や電話回線などの通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

以上、本発明の実施形態について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計なども含まれる。例えば、本発明の実施形態として、ユーザ端末装置１００だけで構成される場合もある。

１００ ユーザ端末装置
２００ 施工検査サーバ装置
２１０ 連携ＡＰＩ部
２１２ ＡＰＩ部
２１４ 画像処理部
２１６ 検査部
２１８ 制御部
２２０ 検査対象認識部
２２２ 画像認識エンジン

Claims (4)

1. 端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得する取得部と、
   前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識し、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識する認識部と、
   前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施する検査部と、
   前記検査部により実施された検査の結果を前記端末装置に通知する通知部と、
   を備える、設備工事の検査装置。
2. 前記検査部は、前記境界標示物から延びた２本の境界線に対する前記設備の位置を表し、直角に交差した２本の境界線の内側に前記設備が位置すること、直角に交差した２本の境界線の外側に前記設備が位置すること、または、水平に接続した２本の境界線に対して前記設備が水平に位置すること、を示す構図パターンに基づいて、設備工事の検査を実施する、請求項１に記載の設備工事の検査装置。
3. 端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得するステップと、
   前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識し、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識するステップと、
   前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施するステップと、
   検査の結果を前記端末装置に通知するステップと、
   を備える、設備工事の検査方法。
4. コンピュータに、
   端末装置から、検査項目が境界標示物であることを示す検査項目情報、前記境界標示物および設備の一部を撮像した検査画像、および前記検査画像に含まれる前記境界標示物を撮像するためのガイド画像に関するガイド情報を取得させ、
   前記検査画像に基づいて前記境界標示物の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記境界標示物が含まれるか否かを認識させ、前記検査画像に基づいて前記設備の確からしさを示す確信度を算出して前記確信度に基づいて前記検査画像に前記設備が含まれるか否かを認識させ、
   前記検査画像を撮像した向き情報に基づく前記境界標示物として認識された領域から延びる境界線と、前記設備として認識された領域との位置関係に基づいて設備工事の検査を実施させ、
   検査の結果を前記端末装置に通知させる、
   設備工事の検査用プログラム。

Images