JP2020067729A - 情報処理システム及びプログラム - Google Patents
情報処理システム及びプログラム Download PDFInfo
- Publication number
- JP2020067729A JP2020067729A JP2018198930A JP2018198930A JP2020067729A JP 2020067729 A JP2020067729 A JP 2020067729A JP 2018198930 A JP2018198930 A JP 2018198930A JP 2018198930 A JP2018198930 A JP 2018198930A JP 2020067729 A JP2020067729 A JP 2020067729A
- Authority
- JP
- Japan
- Prior art keywords
- work
- buried pipe
- information processing
- image
- processing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
Description
また、埋設管の竣工図データの登録又は更新には、現在、1ヶ月ないし数ヶ月を必要とすることがある。このため、最新の竣工図データが登録又は更新されるまでの間に、次の掘削作業が行われると、掘削作業中に埋設管が破損される危険性が高くなる。
請求項2に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離に応じて前記提示の仕方を変化させる、請求項1に記載の情報処理システムである。
請求項3に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離を前記提示で使用する表示色を変化させる、請求項2に記載の情報処理システムである。
請求項4に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離が予め定めた基準値より小さくなると、前記提示を点滅表示に変更する、請求項2に記載の情報処理システムである。
請求項5に記載の発明は、前記提示制御手段は、作業環境に応じて前記提示の仕方を変化させる、請求項2に記載の情報処理システムである。
請求項6に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面の明るさに応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システムである。
請求項7に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面の色に応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システムである。
請求項8に記載の発明は、前記提示制御手段は、作業者による切り替え操作に応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システムである。
請求項9に記載の発明は、前記提示制御手段は、対象物以外の物体の存在位置も提示する、請求項1に記載の情報処理システムである。
請求項10に記載の発明は、前記提示制御手段は、作業箇所の表面又は底面から対象物以外の物体までの距離に応じて、対象物以外の物体の存在位置の前記提示の仕方を変化させる、請求項9に記載の情報処理システムである。
請求項11に記載の発明は、対象物の存在位置を示す画像を作業箇所の表面又は底面に投影する投影手段を更に有する、請求項1に記載の情報処理システムである。
請求項12に記載の発明は、作業者に装着された状態で、作業者の視線前方に配置される表示手段を更に有し、前記提示制御手段は、装着している作業員毎に、対象物の存在位置を示す画像を表示させる、請求項1に記載の情報処理システムである。
請求項13に記載の発明は、作業現場における作業箇所の状態を検出する検出手段と、前記提示制御手段による制御に基づき、対象物の存在位置を提示する提示手段と、を更に有する、請求項1〜12のいずれか1項に記載の情報処理システムである。
請求項14に記載の発明は、前記提示手段は、対象物の存在位置を示す画像を作業箇所の表面又は底面に投影する投影手段、作業者に装着された状態で作業者の視線前方に配置される表示手段、端末装置の表示手段、スピーカ、インジケータ、又は、バイブレータを含む、請求項13に記載の情報処理システムである。
請求項15に記載の発明は、コンピュータに、作業中における作業箇所の表面又は底面の状態を取得する機能と、作業者からの視認が妨げられる状態で作業現場に埋設されている又は敷設する対象物の座標位置を記録したデータと、前記機能の実行により取得された表面又は底面の現在の状態とに基づいて、対象物の存在位置を示す提示の仕方を制御する機能とを実行させるプログラムである。
請求項16に記載の発明は、埋設作業中の又は敷設作業中の対象物を含む画像を入力すると、対象物の名称及び材質の少なくとも一方を出力する処理手段と、前記処理手段から出力される対象物の名称及び材質の少なくとも一つと、埋設作業中の又は敷設作業中における作業箇所の表面又は底面の状態を取得する取得手段から出力される対象物の座標位置とを関連付けた竣工図データを保存装置に登録する登録手段とを有する情報処理システムである。
請求項17に記載の発明は、コンピュータに、埋設作業中の又は敷設作業中の対象物を含む画像を入力すると、対象物の名称及び材質の少なくとも一つを出力する機能と、前記機能の実行により出力される対象物の名称及び材質の少なくとも一つと、埋設作業中の又は敷設作業中における作業箇所の表面又は底面の状態を取得する取得手段から出力される対象物の座標位置とを関連付けた竣工図データを保存装置に登録する機能とを実行させるプログラムである。
請求項2記載の発明によれば、作業箇所の表面又は底面から対象物までの距離の変化を作業者が容易に把握できる。
請求項3記載の発明によれば、作業箇所の表面又は底面から対象物までの距離の変化を作業者が容易に把握できる。
請求項4記載の発明によれば、作業箇所の表面又は底面から対象物までの距離の変化を作業者が容易に把握できる。
請求項5記載の発明によれば、作業環境によらず、作業者による対象物の存在位置の把握を容易にできる。
請求項6記載の発明によれば、作業環境によらず、作業者による対象物の存在位置の把握を容易にできる。
請求項7記載の発明によれば、作業環境によらず、作業者による対象物の存在位置の把握を容易にできる。
請求項8記載の発明によれば、作業者が把握し易い提示の仕方を選択できる。
請求項9記載の発明によれば、対象物以外の物体の存在位置も把握できる。
請求項10記載の発明によれば、作業箇所の表面又は底面から対象物以外の物体までの距離の変化を作業者が容易に把握できる。
請求項11記載の発明によれば、複数の作業員による対象物の存在位置の把握を容易に実現できる。
請求項12記載の発明によれば、各作業員による対象物の存在位置の把握を容易にできる。
請求項13記載の発明によれば、作業現場における作業箇所の表面又は底面の状態の変化に応じ、作業箇所に埋設されている又は敷設される対象物の存在位置を示す提示の仕方を変更できる。
請求項14記載の発明によれば、作業現場における作業箇所の表面又は底面の状態の変化に応じ、作業箇所に埋設されている又は敷設される対象物の存在位置を示す提示の仕方を変更できる。
請求項15記載の発明によれば、作業現場における作業箇所の表面又は底面の状態の変化に応じ、作業箇所に埋設されている又は敷設される対象物の存在位置を示す提示の仕方を変更できる。
請求項16記載の発明によれば、敷設された対象物の竣工図データの登録作業を簡略化できる。
請求項17記載の発明によれば、敷設された対象物の竣工図データの登録作業を簡略化できる。
<実施の形態>
図1は、本実施の形態で想定する作業現場の一例を説明する図である。
本実施の形態で想定する作業は、掘削を伴う作業であり、例えば構造物を埋設する工事、構造物を敷設する工事、構造物を取り除く工事、構造物を修復する工事、構造物を建築する工事、地表面を整備する工事も含む。
なお、掘削の対象は、土砂などの自然物に限らず、アスファルトやコンクリート等の人工物でもよい。
本実施の形態における埋設管1には、例えばガス管、水道管、下水管、電力線が収容される電力管、通信線が収容される通信管、これらを収容する共同溝が含まれる。もっとも、広義の埋設管1には、水路、道路、地下鉄などの構造物を含めてもよい。埋設管1は、作業の対象物の一例である。
地表面を開削する作業は、埋設済みの埋設管1を交換等する場合だけでなく、例えば地表面を整備する場合、既設の構造物を取り除く場合、構造物を新たに埋設又は敷設する場合にも行われる。
本実施の形態では、作業現場のうち開削する位置又は範囲を作業箇所という。
また、本実施の形態では、開削により開削前の地表面より一段低くなった部分の面を掘削面という。もっとも、以下では、掘削前の地表面も含めて掘削面ということがある。
掘削面は、掘削により形成される溝3の底面であると共に、作業者から視認される土壌などの表面でもある。従って、掘削面は、作業箇所の表面又は底面の一例である。このように、開削の場合、作業箇所の表面と作業箇所の底部は一致する。
本実施の形態に係る情報処理システム10は、インターネット20に接続されたサーバ装置30と作業現場で使用される作業者端末40とで構成されている。作業者端末40は端末装置の一例であると共に、情報処理装置の一例でもある。
本実施の形態の場合、サーバ装置30は、工事作業を請け負う事業者や工事作業を発注する事業者が管理している。もっとも、サーバ装置30は、クラウドサービスを提供する事業者が管理してもよい。ここでのサーバ装置30は、情報処理装置の一例である。
もっとも、これらのデータの全てが、サーバ装置30に保存されている必要はなく、例えばインターネット20に接続された外部装置に保存されていてもよい。例えば竣工図データベース31は、市町村などの行政機関のサーバ装置(不図示)に台帳として保存されていてもよい。竣工図データベース31は、保存手段の一例である。
竣工図データには、例えば位置図、平面図、縦断図、詳細図、配管図、寸法図などが含まれる。換言すると、竣工図データには、個々の作業現場に埋設されている埋設管1の種類や寸法の他、現場で測定された埋設管1の配置に関する情報が含まれる。配置に関する情報は、例えば平面内の位置及び深さ方向の位置を特定する座標値で与えられる。
なお、座標値は、作業現場の基準点を用いて測定する。もっとも、測位衛星からの電波と3次元座標値が既知である基準局からの電波を、測定点に設置される移動局で受信することにより測定点の座標値をリアルタイムで測定するRTK−GPS(Real-Time Kinematic Global Positioning System)を用いて座標値を測定してもよい。
竣工図データは、例えば埋設管1を新設した場合に登録され、その後の保守作業によって更新される。本実施の形態の場合、竣工図データは、既設の埋設管1が存在する作業現場における掘削工事で使用される。
本実施の形態における学習済みモデル32は、埋設管1を新たに埋設する工事や交換する工事において、竣工図データの一項目である材料や名称の自動取り込みに使用される。なお、学習済みモデル32は、各工事現場での使用に伴い収集される作業員の評価結果を再学習に利用してもよい。
施工図データベース33は、埋設管1を新設する場合に使用される工事用の図面である。本実施の形態における施工図データには、埋設管1を埋設する位置を特定する情報、例えば地表面からの深さや平面内の位置を特定する情報が含まれる。
作業者端末40も、プログラム(基本ソフトウェア又はファームウェアを含む)の実行を通じて装置全体を制御するCPUと、BIOS等を記憶するROMと、プログラムの実行領域として使用されるRAMと、記憶領域としてのハードディスク装置や半導体メモリを有している。作業者端末40も、実時間での画像処理に特化した演算装置であるGPU(Graphics Processing Unit)を有していてもよい。
本実施の形態に係る作業者端末40は、掘削作業での使用に用いられる専用端末である必要はなく、プログラムのインストールによって様々な機能を実行する汎用型の端末でもよい。汎用型の端末は、例えばノート型のコンピュータ、スマートフォンでもよい。
なお、形成された溝3に埋設管1を新たに敷設する場合には、敷設された状態の埋設管1も計測され、その座標値が埋設管1の竣工図データベース31に登録される。
掘削状況計測装置41には、例えばオートレベル、GPS測量機、レーザスキャナその他の測量機器を使用する。なお、掘削状況計測装置41として、既設の埋設管1の内部を移動する計測装置(「ジャイロピグ」とも呼ばれる)を用いてもよい。
また、掘削状況計測装置41は、作業現場に設置して使用する装置の他、作業現場の上空を飛行するドローンに搭載される装置でもよい。また、掘削状況計測装置41は、ショベルカー2(図1参照)に取り付けられていてもよい。この場合、掘削状況計測装置41の取り付け位置を事前に校正する。
本実施の形態の場合、埋設管提示装置42としてプロジェクタを使用する。ここでのプロジェクタは、いわゆるプロジェクションマッピングの技術を用い、地表面や掘削面に埋設管1の画像を投影する。プロジェクタは、投影手段の一例である。
なお、埋設管提示装置42も、作業現場に設置されてもよいし、作業現場の上空を飛行するドローンに搭載されていてもよい。
埋設管提示装置42の3次元座標と投影方向を特定する情報は、作業者端末40を通じてサーバ装置30に与えられている。埋設管提示装置42の3次元座標の測定には、掘削状況計測装置41を用いてもよい。
なお、本実施の形態では、作業箇所の画像を撮像する不図示のカメラも使用される。不図示のカメラは、掘削状況計測装置41に搭載されていてもよいし、掘削状況計測装置41や埋設管提示装置42とは独立した装置として用意されてもよい。例えば作業者端末40に内蔵されるカメラ機能として用意されてもよい。
図3に示す機能は、プログラムの実行を通じて実現される。
図3に示すサーバ装置30は、地中に埋設されている埋設管1(図1参照)の位置や配置の様子を作業者に提示するための画像データ(以下「提示用画像データ」という)を送信する埋設管提示制御部301と、掘削状況計測装置41から計測データを受信して埋設管提示制御部301に与える掘削面状態取得部302と、不図示のカメラから受信した作業箇所の画像データと学習済みモデル32に基づいて今回の工事で埋設される埋設管1の材質や名称を出力する画像認識部303と、画像認識部303から出力される材質及び名称と掘削状況計測装置41から受信された計測データとに基づいて竣工図データを作成し竣工図データベース31に登録する竣工図データ作成部304としての機能を有している。
例えば作業現場における作業内容が既設の埋設管1(図1参照)の掘り起こしの場合、埋設管提示制御部301は、既設の埋設管1に対応する竣工図データを竣工図データベース31から読み出す。一方、作業現場における作業内容が新しい埋設管1の埋設の場合、埋設管提示制御部301は、埋設する埋設管1に対応する施工図データを施工図データベース33から読み出す。
例えば作業現場における作業内容が既設の埋設管1の掘り起こしの場合、埋設管提示制御部301は、地表面又は掘削面と埋設管1の最浅部との距離(例えば土被りの厚み)に応じ、提示用画像データの提示の仕方を変更する。
提示の仕方を変更する方法として、本実施の形態では、埋設管1に対応する3次元モデルの表示色を変更する方法を用いる。
これらの提示の仕方の変更は、例えば計算された距離と予め用意した1つ又は複数の閾値との比較結果に基づいて実行する。
例えば埋設管1を破損するおそれがない距離の間は安全であることを示す色(例えば青色)で3次元モデルを表示し、注意を要すると定めた距離未満になると注意を促す色(例えば黄色)で3次元モデルを表示し、限界値に定めた距離未満になると高度の注意を促す色(例えば赤色)で3次元モデルを表示する。
なお、表示色の変化は、3次元モデルの全体を単位とせず、部分毎に変化させることが望ましい。
この場合も、提示の仕方を変更する方法として、本実施の形態では、埋設管1に対応する3次元モデルの表示色を変更する方法を用いる。
これらの提示の仕方の変更は、例えば計算された距離と予め用意した1つ又は複数の閾値との比較結果に基づいて実行する。
例えば埋設管1の最浅部と地表面との距離が目標値未満の場合、掘削面の掘り下げを要求する色(例えば赤色)で3次元モデルを表示し、埋設管1の最浅部と地表面との距離が目標値を超えた場合、掘削面の深さが十分であることを示す色(例えば青色)で3次元モデルを表示する。なお、埋設管1の最浅部と地表面との距離が目標値未満の場合、不足する距離に応じて表示色を変更してもよい。この場合、作業者は、表示色から追加で掘る深さを知ることができる。
なお、表示色の変化は、3次元モデルの全体を単位とせず、部分毎に変化させることが望ましい。
また、本実施の形態における埋設管提示制御部301には、プロジェクタと3次元画像データが投影される地表面や掘削面までの距離や傾斜角などの情報も事前に与えられている。このため、埋設管提示制御部301は、3次元モデルの像を歪みなく地表面や掘削面に投影することができる。もっとも、投影される画像の歪み補正は、掘削状況計測装置41としてのプロジェクタ側で実行してもよい。
本実施の形態における画像認識部303と竣工図データ作成部304は、掘削により形成された溝3(図1参照)に敷設された埋設管1の竣工図データの作成に使用される機能である。
ここでの埋設管1の寸法に関する情報は、掘削面状態取得部302から与えられる。掘削面状態取得部302は、埋設管1を配置する前後における掘削面の起伏の変化から配置された埋設管1の形状及び寸法に関する情報を取得する。なお、掘削状況計測装置41として複数台のカメラが用いられる場合には、計測データとして色その他の属性情報も含まれており、それらの情報が形状及び寸法に関する情報の一部として画像認識部303に与えられる。因みに、掘削状況計測装置41として複数のカメラを用いる場合には、図3に示す画像データは、掘削状況計測装置41から与えられる。
本実施の形態の場合、埋設管1の材質として、例えば鋼管、鋳鉄管、ポリエチレン管、塩化ビニール管、弁のいずれかが出力される。また、埋設管1の部材の名称として、例えば直管、短管、エルボ、ベンド、チーズ、クロス、タンピース、センブル、カップ、平板、ブション、スリーブ、クランプ、レジューサー、コケ、電気防食設備のいずれかが出力される。もっとも、学習済みモデル32から出力される情報は、埋設管1の材質又は名称に限らない。
なお、画像認識部303には、形状及び寸法に関する情報ではなく、掘削状況計測装置41(図2参照)で計測された計測データを与えてもよい。また、画像認識部303は、画像データだけを与え、形状や寸法に関する情報や計測データを与えなくてもよい。
なお、本実施の形態においては、埋設管提示制御部301(図3参照)と掘削面状態取得部302(図3参照)の機能が実行される単独の装置又はネットワークで接続された複数台の装置を情報処理システムの一例として扱う。また、画像認識部303(図3参照)と竣工図データ作成部304(図3参照)の機能が実行される単独の装置又はネットワークで接続された複数台の装置を情報処理システムの一例として扱う。従って、図2に示すシステム構成は、情報処理システムの一例である。
図4は、情報処理システム10(図2参照)の処理動作例を説明する図である。なお、図4では、サーバ装置30、掘削状況計測装置41、埋設管提示装置42の間の通信を中継する作業者端末40(図2参照)を省略している。
図4では、埋設管1(図1参照)が埋設されている箇所を掘削する場合に実行される処理動作と、埋設管1を新規に埋設する場合に実行される処理動作について説明する。
<掘削前>
ここでは、図4と図5を用いて、埋設管1が埋設されている箇所を掘削する場合に情報処理システム10で実行される処理動作を説明する。
図5は、掘削を開始する前の作業現場の様子を例示的に説明する図である。(A)は埋設管1に対応する画像1Aの投影を説明する図であり、(B)は埋設管1に対応する画像1Aと埋設管1との位置関係を埋設管1の軸方向に垂直な面で破断して示す図である。
まず、作業現場では準備作業として、掘削状況計測装置41と埋設管提示装置42が設置される。
次に、掘削状況計測装置41によって、座標値が既知である基準点5A、5B、5Cが計測され、計測結果が計測データとして作業者端末40に出力される。これらの計測データは、作業者端末40からサーバ装置30に送信される。ここでの計測データには、地表面の起伏の状態を表す情報も含まれる。ここでの計測データは、図4の時点T1に対応する。
次に、サーバ装置30は、竣工図データに基づいて地中に埋設されている埋設管1の3次元モデルを作成する。また、サーバ装置30は、地表面の起伏の状態を特定し、埋設管1の最浅部と地表面との距離を計算する。この距離は、例えば土被りの厚さに相当する。続いて、サーバ装置30は、計算された距離と予め設定された閾値とを比較する。
ここでは、掘削が開始される前であり、埋設管1を破損するおそれがない。従って、サーバ装置30は、埋設管1に対応する3次元モデルの表示色として安全を示す色を指定した提示用画像データを埋設管提示装置42に送信する。
提示用画像データを受信した埋設管提示装置42は、地表面にプロジェクションマッピングの手法で、地中に埋設されている埋設管1の位置を示す画像1Aを投影する。この時点における画像1Aは、安全であることを示す色で投影されている。
図5に示すように、地表面に画像1Aが投影される場合、複数の作業員が裸眼によって、埋設管1が埋設されている位置を知ることができる。
なお、画像1Aが奥行き方向の距離も表現している場合には、画像1Aから地中の深さ位置も把握可能である。
ここでは、図4と図6を用いて、情報処理システム10で実行される処理動作を説明する。
図6は、掘削を開始した後の作業現場の様子を例示的に説明する図である。(A)は埋設管1に対応する画像1Bの投影を説明する図であり、(B)は埋設管1に対応する画像1Bと埋設管1との位置関係を埋設管1の軸方向に垂直な面で破断して示す図である。
図6の場合、掘削が開始されているので、掘削面が地表面よりも一段低くなっている。その結果、掘削面と埋設管1との距離は、掘削が開始される前に比して縮まっていることが分かる。
サーバ装置30は、新たな計測データが受信される度、地表面の起伏の状態を特定し、埋設管1の最浅部と地表面との距離を再計算し、再計算された距離と予め設定された閾値との比較結果に応じて埋設管1に対応する3次元モデルの表示色を決定する。
図6の例では、掘削面に投影されている画像1Bの表示色が、図5における表示色と異なっている。画像1Bの表示色は、距離の変化に伴い、安全であることを示す色から、注意を促す色、警戒を促す色に順番に変化する。
本実施の形態では、この表示色の変化を3段階で表現しているが、2段階でも4段階以上でも構わない。
作業現場の作業員は、この表示色の変化により、掘削面と埋設管1までの距離を把握することができる。
また、画像1Bが奥行き方向の距離も表現している場合には、画像1Bから地中の深さ位置も把握可能である。
ここでは、図4と図7を用いて、埋設管1を新たに埋設する場合に情報処理システム10で実行される処理動作を説明する。
図7は、掘削の開始前後における作業現場の様子を例示的に説明する図である。(A)は掘削を開始する前における埋設管1に対応する画像1Aの投影例を示す図であり、(B)は掘削を開始した後における埋設管1に対応する画像1Bの投影例を示す図である。
まず、作業現場では準備作業として、掘削状況計測装置41と埋設管提示装置42が設置される。
次に、サーバ装置30は、施工図データに基づいて地中に埋設する埋設管1の3次元モデルを作成する。また、サーバ装置30は、埋設管1を埋設する地表面上の位置、深さ、方向、角度などを施工図データから読み出す。更に、サーバ装置30は、施工図データの通りに埋設管1が埋設されたと仮定した場合における埋設管1の最浅部と地表面との距離を計算する。この距離は、例えば土被りの厚さに相当する。
続いて、サーバ装置30は、計算された距離と予め設定された閾値とを比較する。
提示用画像データを受信した埋設管提示装置42は、プロジェクションマッピングの手法で、埋設管1の埋設を予定する位置を示す画像1Aを地表面に投影する。この時点における画像1Aは、掘削量が目標とする深さに不足することを示す色(例えば青色)で投影される。換言すると、画像1Aは、掘り進んでも大丈夫であることを示す色で地表面に投影される。
図7に示すように、地表面に画像1Aが投影されることで、複数の作業員が裸眼によって、埋設管1(図1参照)を埋設する位置を知ることができる。また、画像1Aの表示色から掘削深さが不足している状態であることを知ることができる。このため、作業員は、画像1Aを目標として掘削作業を開始することができる。
なお、画像1Aが奥行き方向の距離も表現している場合には、画像1Aの表示から掘削すべき深さも把握可能である。
掘削状況計測装置41は、掘削作業の進行に伴う掘削面の起伏の状態の変化をリアルタイムで計測し、その計測データをリアルタイムでサーバ装置30に送信する。図4では、この送信を時点T12で表している。図4では、時点T12に示す計測データの送信は1回であるが、実際には複数回送信される。
サーバ装置30は、新たな計測データが受信される度、地表面の起伏の状態を特定し、予定深さに埋設管1を埋設した場合の埋設管1の最浅部と地表面との距離を再計算し、再計算された距離と予め設定された閾値との比較結果に応じて埋設管1に対応する3次元モデルに対応する画像1Bの表示色を決定する。例えば予定深さに近づくと、表示色は、注意を促す色(例えば黄色)に決定される。
掘削面が予定された深度に形成された場合((B)の場合)、サーバ装置30は、画像1Bの表示色として、掘削量が目標の深さに達したことを示す色(例えば赤色)を決定する。換言すると、画像1Bは、これ以上の掘削は不要であることを示す色で地表面に投影される。
作業現場の作業員は、この表示色の変化により、掘削の目標深さまでの距離を知ることができる。
また、画像1Bが奥行き方向の距離も表現している場合には、画像1Bから掘削の目標深さを裸眼で確認できる。
ここでは、図4と図8を用いて、竣工図データを登録する場合に情報処理システム10で実行される処理動作を説明する。
図8は、竣工図データが作成されるまでの過程を説明する図である。(A)は埋設管1を敷設する様子を説明する図であり、(B)は敷設された埋設管1を計測する様子を説明する図である。
図8に示す例では、掘削により形成された溝3の深さが施工図データで指定された深さに達しているので、埋設管1が溝3の底面に敷設されている。
この後、溝3を埋め戻すと作業の完了であるが、(B)に示すように、敷設された状態の埋設管1が掘削状況計測装置41によって計測される。埋設管1の計測データは、作業者端末40を通じてサーバ装置30(図2参照)に送信される。ここでの計測データは、図4の時点T13に対応する。
また、敷設された状態の埋設管1の画像データは、不図示のカメラにより撮像され、作業者端末40を通じてサーバ装置30に送信されている。
このように、本実施の形態の場合、竣工図データの登録に要する時間は、画像認識や計測に要する時間だけで済む。
すなわち、本実施の形態で説明した情報処理システム10の使用により、埋設管1の埋設工事から竣工図データの登録までの時間を従前に比して大幅に短縮できる。この結果、同一箇所を短期間で工事する場合でも、更新前の竣工図データが誤って用いられる可能性を無くすことができる。
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は上述の実施の形態に記載の範囲に限定されない。前述した実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
前述の実施の形態では、掘削前の地表面又は掘削作業中の掘削面に埋設管1の3次元モデルの画像を投影する場合について説明したが、作業員が頭部に装着するメガネ型の端末に画像を表示してもよい。
図9は、外界を透過的に視認可能なメガネ型の端末100を作業員が装着する場合の作業現場の見え方を説明する図である。ここでのメガネ型の端末100は端末装置の一例である。
図9には、メガネ型の端末100を装着した作業員が、掘削を開始する前の地表面に視線を向けた場合の見え方を示している。図9に示すように、作業員には、地表面に埋設管1(図1参照)の3次元モデルの画像1Aが重なって見えている。現実の空間に仮想的に存在する物体が重なって見える状態を拡張現実や複合現実という。複合現実は、実在する物体と仮想的に存在する物体とを視覚的に区別できない状態をいう。
また、図9では、作業員が1名であるが、作業員が複数名である場合には、各作業員の視点位置に応じた画像1Aが、各作業員のメガネ型の端末100に表示される。このため、作業員の立ち位置による死角の問題が生じ難く、作業の安全性を高めることが可能になる。
各作業者に応じた専用の画像は、例えば作業員ごとに位置情報と視線方向を取得するサーバ装置30(図2参照)によって生成してもよい。作業員ごとの位置情報や視線方向は、例えばメガネ型の端末100に取り付けられている撮像カメラの撮像画像を処理することにより取得できる。
もっとも、サーバ装置30では3次元モデルのみを生成し、この3次元モデルを受信したメガネ型の端末100において、各作業員の位置情報と視線方向に応じた専用の画像を生成して表示してもよい。
図9の例では、メガネの右目前方に3次元モデルの画像が入力されているが、左目前方に3次元モデルの画像が入力されてもよいし、両目の前方に3次元モデルの画像が入力されてもよい。
この種のメガネ型の端末100のハードウェア部分は、既に複数のメーカによって実用化されているので詳細な説明を省略する。この種のメガネ型の端末100には、画像を表示する原理の違いにより透過型デバイスや網膜投射型デバイスがある。
図10に示すメガネ型の端末100は、透過型デバイスの一例であり、透明度が高い導光板101と、画像を表示する小型の表示部102と、不図示の照度センサ、慣性計測センサ、深度センサ、撮像カメラ、通信装置などで構成されている。
なお、メガネ型の端末100と作業現場に配置される作業者端末40(図2参照)との通信は、無線でも有線でもよい。ここでのメガネ型の端末100は、情報処理装置の一例である。なお、メガネ型の端末100において、前述した埋設管提示制御部301(図3参照)及び掘削面状態取得部302(図3参照)の機能が実行される場合、メガネ型の端末100が単独で情報処理システムの一例となる。同様に、メガネ型の端末100において前述した画像認識部303(図3参照)及び竣工図データ作成部304(図3参照)の機能が実行される場合、メガネ型の端末100は、単独で情報処理システムの一例となる。
可視光透過型回折格子は、導光板101の前方から入射する外光B1を直線的に透過して作業員の眼球103に導くように作用する。一方で、可視光透過型回折格子は、表示部102から導光板101に入射した表示光B2を屈折させて導光板101の内部を伝搬させ、その後、眼球103の方向に表示光B2を屈折させるように作用する。
外光B1と表示光B2は、眼球103内で合成される。この結果、メガネ型の端末100を装着した作業員は、作業現場の風景に埋設管1の3次元モデルの画像を合成した拡張現実の風景を知覚する。
この場合、3次元モデルの画像は、作業員の視線方向に応じて表示される。この表示のため、作業員の視線方向を特定する情報がサーバ装置30(図2参照)にリアルタイムで送信される。
外界を透過的に視認できない端末には、例えば眼球の前方に表示画面を配置したヘッドマウントディスプレイがある。表示画面は、装置に一体化されているタイプ、スマートフォンを取り付けられるタイプなどがある。
前述の実施の形態においては、埋設管1に対応する3次元モデルの表示色を変更する方法について説明したが、地表面又は掘削面と埋設管1の最浅部との距離に応じ、提示用画像データの提示の仕方を変更する方法はこれに限らない。
図11は、3次元モデルに対応する画像1Bの表示に用いる点滅周期を、地表面又は掘削面と埋設管1の最浅部との距離に応じて変更する例を示す図である。(A)は埋設管1を破損するおそれがない状態の表示を示し、(B)は掘削面と埋設管1の距離が注意を要すると定めた距離未満になった状態を示し、(C)は掘削面と埋設管1の距離が限界値に定めた距離未満になった状態を示す。
ここでの埋設管1の最浅部は、竣工図データとして記録されている地中に埋設されている埋設管1の最浅部の他、施工図データから計算される埋設管1の予定の最浅部も含む。
図11では、表示色の変化も組み合わせているが、表示色の変化がなくても、画像1Bの表示の周期が短くなることで、作業員は距離の変化に気づくことができる。この点滅による表示は、他の形態例1にも組み合わせてもよい。
前述の実施の形態では、地表面又は掘削面と埋設管1の最浅部との距離と、埋設管1の3次元モデルを表す画像の表示に用いる色とが一対一に定まっている場合を想定しているが、自然光下での工事では作業の時間や日陰の有無によっては投影された3次元モデルの画像が見えづらくなる可能性がある。
図12は、作業現場の照度の違いによって投影する3次元モデルの画像1Bの表示に用いる色を変更する例を説明する図である。(A)は照度が低い場合の例であり、(B)は照度が高い場合の例である。
例えば影部や夕方のように作業現場の照度が低い場合には、投影される3次元モデルの画像1Bを白色系にすることで画像が目立ちやすくなり、作業員による画像1Bの確認が容易になる。また、地表面や掘削面における画像1Bの照度を高くすれば、画像1Bと周囲とのコントラスト差が大きくなり、作業員が画像1Bを見やすくなる。なお、彩度の高い青系である場合や画像1Bと周囲とのコントラスト差が少ないと、画像1Bは見えづらくなる。
一方で、例えば日向や照明機によって照らされているときのように作業現場の照度が高い場合には、3次元モデルの画像1Bの投影に使用する輝度を高めたり、彩度の高い色調の色を用いたりすることにより、投影される3次元モデルの画像1Bの確認を容易にできる。
前述の実施の形態では、地表面又は掘削面と埋設管1の最浅部との距離と、埋設管1の3次元モデルを表す画像の表示に用いる色とが一対一に定まっている場合を想定しているが、投影する地表面や掘削面の色調によっては、投影された3次元モデルの画像が見えづらくなる可能性がある。
図13は、掘削面の色調の違いによって投影する3次元モデルの画像1Bの表示に用いる色を変更する例を説明する図である。(A)は掘削面が黒〜灰色系の例であり、(B)は掘削面の色調が茶色系の例である。
例えばアスファルトや黒っぽい土壌の掘り起こしの場合には、3次元モデルの画像1Bを白色系又は高輝度で表示することが望ましい。投影先の掘削面の色と同系統の色で3次元モデルの画像1Bを表示したのでは確認が難しいが、例えば反対色で3次元モデルの画像1Bを表示すると、投影された画像1Bの確認が容易になる。
一方で、例えば茶色系の土壌の掘り起こしの場合には、例えば明るく淡い青色で表示することが望ましい。
前述の実施の形態では、地中には掘り起こしの対象である埋設管1だけが埋設されている場合や新たに埋設する埋設管1以外には掘り起こし場所に他の埋設管が存在しない場合を想定したが、実際の作業現場では、他の埋設物の存在も考慮する必要がある。
図14は、掘り起こしの対象である埋設管1よりも浅い位置に、他の埋設管11が存在する場合を説明する図である。図14には図5との対応部分に対応する符号を付して示している。
このような場合に、他の埋設管11の存在を知らないまま掘削作業を行うと、他の埋設管11を破損してしまう可能性が高い。
このため、図14に示す例では、図5の場合とは異なり、口径が埋設管1よりも小さい他の埋設管11の存在を示す3次元モデルの画像11Aが地表面に投影されている。
この表示により、作業者は、他の埋設管11の存在を知った上で作業を開始することができる。この他の埋設管11に対応する3次元モデルの画像11Aの表示も、前述の実施の形態と同様に、最浅部から掘削面との距離に応じて表示の色などを変化させることで、作業員は安全に掘削作業を行うことができる。
図15は、他の埋設管11に対応する3次元モデルの画像11Bの表示は、他の埋設管11の最浅部と地表面との距離が予め定めた距離未満になった場合を説明する図である。(A)は他の埋設管11と掘削面との距離が予め定めた距離より大きい場合の画像1Bの表示を示し、(B)は他の埋設管11と掘削面との距離が予め定めた距離より小さい場合の画像1B及び画像11Bの表示を示す。
図15の例では、当初は作業対象である埋設管1に対応する3次元モデルの画像1Bだけを埋設面に投影しているが、既設の他の埋設管11と掘削面との距離が短くなり、慎重な作業が必要とされる段階になると、他の埋設管11に対応する3次元モデルの画像11Bを追加的に掘削面に投影している。
なお、例えば他の埋設管11の方が作業対象である埋設管1よりも深い位置に埋設されている場合には、破損のおそれがない他の埋設管11の3次元モデルの画像11Bの表示が作業員を混乱させる可能性もある。このような場合には、他の埋設管11が存在しても地表面や掘削面に他の埋設管11に対応する3次元モデルの画像を表示しないことも可能である。
前述の実施の形態では、埋設管1(図1参照)の位置を3次元モデルの画像として表示しているが、2次元モデルの画像又は埋設管1の写真によって表示してもよい。
前述の実施の形態では、地上面を掘削する作業について説明したが、壁面を掘削する作業や天井を掘削する作業にも用いることができる。この場合、表示色の決定に使用する距離は、掘削面と埋設物との最短距離で定義される。
また、掘削作業は、地表面が濁り水や雪などで覆われている現場でも想定される。例えば台風や災害時の作業では、雨中や降雪の中での作業が想定されるが、その場合には、掘削面である地表を直接確認することができない場合が想定される。そのような場合には、埋設管1などの3次元モデルの画像を水面や雪面に投影することにより、水面や雪面から埋設物までの距離を把握した上で作業を進めることができる。
なお、水面や雪面を作業面とする場合には、対象物が地中に埋設されている場合に限らず、地表に敷設されている物体も作業の対象となる。
前述の実施の形態の場合には、埋設管1の最浅部と掘削面との距離を、埋設管1に対応する3次元モデルの画像の表示色の変化により作業員に提示しているが、他の提示装置を用いてもよい。例えば具体的な距離をスピーカから音声で出力してもよい。また、スピーカから出力される音の種類の変化により距離の変化を提示してもよい。また、インジケータの点灯数の変化により距離の変化を提示してもよい。また、作業員が装着するバイブレータの振動や振動強度の変化により距離の変化を提示してもよい。
前述の実施の形態では、画像認識部303(図3参照)が機械学習や強化学習によって作成された学習済みモデル32を用いて敷設された埋設管の材質及び名称を出力しているが、他の手法を用いて埋設管の材質及び名称などを出力してもよい。
例えば学習済みモデル32は、いわゆる人工知能を用いずに作成されたモデルでもよい。換言すると、人為的に入出力の関係を定めたモデルでもよい。
また例えば学習済みモデルを用いるのではなく、予めインストールされたプログラムの処理として、入力された画像を処理して特徴量(例えば形状、寸法、色など)を抽出し、抽出された複数の特徴量によって、各部材の諸元や画像を登録した部材データベースを検索し、一致の度合いが高い部材を出力してもよい。
前述の実施の形態では、サーバ装置30(図2参照)を作業現場とは別の地点に配置し、インターネット20経由で作業者端末40と接続しているが、サーバ装置30を作業現場に配置してもよい。この場合、サーバ装置30と作業者端末40は、ブルートゥース(登録商標)等の無線LAN、有線LAN、専用線等で接続してもよい。
また、サーバ装置30で実行している機能の全てを単独の装置(例えば情報処理装置としての作業者端末40)に搭載してもよいし、複数の装置(例えば情報処理装置としての掘削状況計測装置41と埋設管提示装置42)に分散的に搭載してもよい。
この場合、サーバ装置30で実行している機能の全てが搭載されている単独の装置又は機能の全てが分散的に搭載されている複数の装置が情報処理システムの一例となる。
Claims (17)
- 作業中における作業箇所の表面又は底面の状態を取得する取得手段と、
作業者からの視認が妨げられる状態で作業現場に埋設されている又は敷設する対象物の座標位置を記録したデータと、前記取得手段により取得された表面又は底面の現在の状態とに基づいて、対象物の存在位置を示す提示の仕方を制御する提示制御手段と
を有する情報処理システム。 - 前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離に応じて前記提示の仕方を変化させる、請求項1に記載の情報処理システム。
- 前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離を前記提示で使用する表示色を変化させる、請求項2に記載の情報処理システム。
- 前記提示制御手段は、作業箇所の表面又は底面から対象物までの距離が予め定めた基準値より小さくなると、前記提示を点滅表示に変更する、請求項2に記載の情報処理システム。
- 前記提示制御手段は、作業環境に応じて前記提示の仕方を変化させる、請求項2に記載の情報処理システム。
- 前記提示制御手段は、作業箇所の表面又は底面の明るさに応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システム。
- 前記提示制御手段は、作業箇所の表面又は底面の色に応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システム。
- 前記提示制御手段は、作業者による切り替え操作に応じて前記提示の仕方を変化させる、請求項5に記載の情報処理システム。
- 前記提示制御手段は、対象物以外の物体の存在位置も提示する、請求項1に記載の情報処理システム。
- 前記提示制御手段は、作業箇所の表面又は底面から対象物以外の物体までの距離に応じて、対象物以外の物体の存在位置の前記提示の仕方を変化させる、請求項9に記載の情報処理システム。
- 対象物の存在位置を示す画像を作業箇所の表面又は底面に投影する投影手段を更に有する、請求項1に記載の情報処理システム。
- 作業者に装着された状態で、作業者の視線前方に配置される表示手段を更に有し、
前記提示制御手段は、装着している作業員毎に、対象物の存在位置を示す画像を表示させる、請求項1に記載の情報処理システム。 - 作業現場における作業箇所の状態を検出する検出手段と、
前記提示制御手段による制御に基づき、
対象物の存在位置を提示する提示手段と、
を更に有する、請求項1〜12のいずれか1項に記載の情報処理システム。 - 前記提示手段は、対象物の存在位置を示す画像を作業箇所の表面又は底面に投影する投影手段、作業者に装着された状態で作業者の視線前方に配置される表示手段、端末装置の表示手段、スピーカ、インジケータ、又は、バイブレータを含む、請求項13に記載の情報処理システム。
- コンピュータに、
作業中における作業箇所の表面又は底面の状態を取得する機能と、
作業者からの視認が妨げられる状態で作業現場に埋設されている又は敷設する対象物の座標位置を記録したデータと、前記機能の実行により取得された表面又は底面の現在の状態とに基づいて、対象物の存在位置を示す提示の仕方を制御する機能と
を実行させるプログラム。 - 埋設作業中の又は敷設作業中の対象物を含む画像を入力すると、対象物の名称及び材質の少なくとも一方を出力する処理手段と、
前記処理手段から出力される対象物の名称及び材質の少なくとも一つと、埋設作業中の又は敷設作業中における作業箇所の表面又は底面の状態を取得する取得手段から出力される対象物の座標位置とを関連付けた竣工図データを保存装置に登録する登録手段と
を有する情報処理システム。 - コンピュータに、
埋設作業中の又は敷設作業中の対象物を含む画像を入力すると、対象物の名称及び材質の少なくとも一つを出力する機能と、
前記機能の実行により出力される対象物の名称及び材質の少なくとも一つと、埋設作業中の又は敷設作業中における作業箇所の表面又は底面の状態を取得する取得手段から出力される対象物の座標位置とを関連付けた竣工図データを保存装置に登録する機能と
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198930A JP7199198B2 (ja) | 2018-10-23 | 2018-10-23 | 情報処理システム及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198930A JP7199198B2 (ja) | 2018-10-23 | 2018-10-23 | 情報処理システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020067729A true JP2020067729A (ja) | 2020-04-30 |
JP7199198B2 JP7199198B2 (ja) | 2023-01-05 |
Family
ID=70390363
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018198930A Active JP7199198B2 (ja) | 2018-10-23 | 2018-10-23 | 情報処理システム及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7199198B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022071844A (ja) * | 2020-10-28 | 2022-05-16 | 大成建設株式会社 | 吹付厚管理装置およびトンネル施工方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015195457A (ja) * | 2014-03-31 | 2015-11-05 | 株式会社Jvcケンウッド | 対象物表示装置 |
WO2018026021A1 (ja) * | 2016-08-05 | 2018-02-08 | 株式会社小松製作所 | 管理システム |
JP2018092007A (ja) * | 2016-12-02 | 2018-06-14 | キヤノン株式会社 | 画像処理装置および画像処理方法、プログラム、並びに記憶媒体 |
WO2018164172A1 (ja) * | 2017-03-07 | 2018-09-13 | 住友重機械工業株式会社 | ショベル及び建設機械の作業支援システム |
-
2018
- 2018-10-23 JP JP2018198930A patent/JP7199198B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015195457A (ja) * | 2014-03-31 | 2015-11-05 | 株式会社Jvcケンウッド | 対象物表示装置 |
WO2018026021A1 (ja) * | 2016-08-05 | 2018-02-08 | 株式会社小松製作所 | 管理システム |
JP2018092007A (ja) * | 2016-12-02 | 2018-06-14 | キヤノン株式会社 | 画像処理装置および画像処理方法、プログラム、並びに記憶媒体 |
WO2018164172A1 (ja) * | 2017-03-07 | 2018-09-13 | 住友重機械工業株式会社 | ショベル及び建設機械の作業支援システム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022071844A (ja) * | 2020-10-28 | 2022-05-16 | 大成建設株式会社 | 吹付厚管理装置およびトンネル施工方法 |
JP7152730B2 (ja) | 2020-10-28 | 2022-10-13 | 大成建設株式会社 | 吹付厚管理装置およびトンネル施工方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7199198B2 (ja) | 2023-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5682060B2 (ja) | 画像合成装置、画像合成プログラム、及び画像合成システム | |
US20190272676A1 (en) | Local positioning system for augmented reality applications | |
US9824490B1 (en) | Augmentation of a dynamic terrain surface | |
US10829911B2 (en) | Visual assistance and control system for a work machine | |
US11783248B2 (en) | United states construction management system and method | |
KR100997084B1 (ko) | 지하시설물의 실시간 정보제공 방법 및 시스템, 이를 위한 서버 및 그 정보제공방법, 기록매체 | |
US9552669B2 (en) | System, apparatus, and method for utilizing geographic information systems | |
JP4671317B2 (ja) | 地形形状計測装置およびガイダンス装置 | |
US20080049012A1 (en) | 3D Line-of-Sight (Los) Visualization in User Interactive 3D Virtual Reality Environments | |
US20030014212A1 (en) | Augmented vision system using wireless communications | |
EP3798993A1 (en) | Design engineering tools for visualizing existing utility lines within a land area and validating placement of new utility lines | |
KR101934315B1 (ko) | Ict 기반 ar을 이용한 건설 유지 관리 원스톱 시스템 | |
KR101305059B1 (ko) | 수치지도의 실시간 편집 방법 및 시스템, 이를 위한 서버 및 기록매체 | |
JP2013044226A (ja) | 立入禁止区域を有する埋設された公共施設のデータ | |
JP2019148946A (ja) | 施工工程管理システム及び施工工程管理方法 | |
EP3748583A1 (en) | Subsurface utility visualization | |
Hansen et al. | Augmented reality for subsurface utility engineering, revisited | |
KR102264219B1 (ko) | 지하시설물 관련 혼합현실 제공방법 및 시스템 | |
Behzadan et al. | Interactive augmented reality visualization for improved damage prevention and maintenance of underground infrastructure | |
JP7199198B2 (ja) | 情報処理システム及びプログラム | |
KR101280210B1 (ko) | 이동 단말에서의 증강현실 기반 정보 제공 방법 | |
JP2018091721A (ja) | 埋設管管理装置、埋設管管理方法および埋設管管理プログラム | |
KR20210011609A (ko) | Gps-ar 기술을 이용한 굴착공사시 지하매설물 파손 예방 시스템 | |
KR101176446B1 (ko) | 수치지도의 실시간 편집 방법 및 시스템, 이를 위한 서버 및 기록매체 | |
JP7423389B2 (ja) | 作業支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210820 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220510 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220805 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221220 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7199198 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |