JP2023139399A - 撮影装置、撮影システムおよび撮影方法 - Google Patents

撮影装置、撮影システムおよび撮影方法 Download PDF

Info

Publication number
JP2023139399A
JP2023139399A JP2022044910A JP2022044910A JP2023139399A JP 2023139399 A JP2023139399 A JP 2023139399A JP 2022044910 A JP2022044910 A JP 2022044910A JP 2022044910 A JP2022044910 A JP 2022044910A JP 2023139399 A JP2023139399 A JP 2023139399A
Authority
JP
Japan
Prior art keywords
slope
photographing
data
angle
photographing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022044910A
Other languages
English (en)
Inventor
響 辰野
Hibiki Tatsuno
公平 牛尾
Kohei Ushio
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2022044910A priority Critical patent/JP2023139399A/ja
Priority to US18/185,645 priority patent/US20230308777A1/en
Publication of JP2023139399A publication Critical patent/JP2023139399A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/958Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4816Constructional features, e.g. arrangements of optical elements of receivers alone
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B30/00Camera modules comprising integrated lens units and imaging units, specially adapted for being embedded in other devices, e.g. mobile phones or vehicles
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Electromagnetism (AREA)
  • Image Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Studio Devices (AREA)

Abstract

【課題】斜面80の広い領域でピントが合った画像を得ること。【解決手段】移動体6に設置され、斜面80を撮影する撮影装置7であって、撮影レンズ700と、イメージセンサ740と、を備え、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を示すシャインプルーフ角θが、撮影レンズ700の中心軸700Cと斜面80のなす角度αに応じて設定されている。【選択図】図21

Description

本発明は、撮影装置、撮影システムおよび撮影方法に関する。
特許文献1には、天端2あるいは法尻3側方の平坦面4を走行する車両5から焦点距離の異なる複数のカメラ6により法面1を高さ方向に分割して地上解像度をほぼ均一にして連続撮影するとともに、前記車両5に搭載した位置計測手段7により撮影位置を記録し、得られた撮影画像および撮影位置に基づく写真測量の成果を用いて法面1の状態を外観観察し、変状が認められたときにその状態および位置を特定することが記載されている。
特許第6498488号公報
本発明は、斜面の広い領域でピントが合った画像を得ることを課題とする。
本発明の請求項1は、移動体に設置され、斜面を撮影する撮影装置であって、撮影レンズと、イメージセンサと、を備え、イメージセンサのセンサ面に対する垂線と撮影レンズの中心軸とのなす角度を示すシャインプルーフ角が、撮影レンズの中心軸と斜面のなす角度に応じて設定されている。
本発明は、斜面の広い領域でピントが合った画像を得ることができる。
実施形態に係る状態検査システムの全体構成の一例を示す図である。 実施形態に係る移動体システムを用いて法面状態を検査する様子の一例を示す図である。 法面の状態を説明する図である。 データ取得装置のハードウエア構成の一例を示す図である。 評価装置およびデータ管理装置のハードウエア構成の一例を示す図である。 状態検査システムの機能構成の一例を示す図である。 状態種別管理テーブルの一例を示す概念図である。 状態種別管理テーブルの一例を示す概念図である。 (A)は、取得データ管理テーブルに一例を示す概念図であり、(B)は、処理データ管理テーブルの一例を示す概念図である。 移動体システムによって取得される撮影画像について説明するための図である。 撮影画像と測距画像の説明図である。 移動体システムを用いたデータ取得処理の一例を示すシーケンス図である。 評価対象データの生成処理の一例を示すシーケンス図である。 法面状態の評価結果であるレポートの生成処理の一例を示すシーケンス図である。 法面状態の検出処理の一例を示すフローチャートである。 実施形態の課題を説明する図である。 実施形態に係る撮影装置を示す図である。 実施形態に係るデータ取得装置を示す図である。 データ取得装置の処理を示すフローチャートである。 実施形態における画像処理の説明図である。 実施形態における画像処理の説明図である。 実施形態に係るデータ取得装置の変形例を示す図である。 実施形態に係る撮影装置と距離センサの配置を示す上面図である。 変形例1に係る移動体システムを用いて法面状態を検査する様子の一例を示す図である。 変形例2に係る移動体システムを用いて法面状態を点検する様子の一例を示す図である。 変形例3に係る移動体システムを用いて法面状態を点検する様子の一例を示す図である。
以下、図面を参照しながら、発明を実施するための形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明は省略する。
●第1の実施形態●
●システムの概略
まず、図1および図2を用いて、状態検査システムの概略について説明する。図1は、実施形態に係る状態検査システムの全体構成の一例を示す図である。図1に示されている状態検査システム1は、情報処理システムの一例であり、移動体システム60によって取得された各種データを用いて、道路土工構造物の状態の検査を行うためのシステムである。道路土工構造物とは、道路を建設するために構築する土砂や岩石等の地盤材料を主材料として構成される構造物およびそれらに附帯する構造物の総称であり、切土・斜面安定施設、盛土、カルバートおよびこれらに類するものをいう。以下、道路土工構造物を法面と称する。
状態検査システム1は、移動体システム60、評価システム4、国、自治体の端末装置1100および委託事業者の端末装置1200によって構成されている。移動体システム60は、撮影システムの一例であり、データ取得装置9およびデータ取得装置9を搭載した車両等の移動体6によって構成されている。データ取得装置9は、構造物を計測する計測装置の例である撮影装置7、並びに距離センサ8aおよびGNSS(Global Navigation Satellite System:全球測位衛星システム)センサ8bを有している。GNSSは、GPS(Global Positioning System)または準天頂衛星(QZSS)等の衛星測位システムの総称である。
撮影装置7は、光電変換素子を一列または複数列に配置させたラインセンサを搭載したラインカメラである。撮影装置7は、移動体6の走行方向に沿った撮影面上にある所定の撮影範囲に沿った位置を撮影する。なお、撮影装置は、ラインカメラに限られず、光電変換素子が面状に配置されたエリアセンサを搭載したカメラであってもよい。また、撮影装置は、複数のカメラによって構成されていてもよい。
距離センサ8aは、ToFセンサ(Time of Flight)であり、撮影装置7によって撮影された被写体との距離を計測する。GNSSセンサ8bは、複数のGNSS衛星が発信した各時間の信号を受信し、各信号を受信した時刻との差で衛星までの距離を算出することで、地球上の位置を計測する測位手段である。測位手段は、測位専用の装置であってもよく、PC(Personal Computer)やスマートフォン等にインストールされた測位専用のアプリケーションであってもよい。距離センサ8aおよびGNSSセンサ8bは、センサ装置の一例である。また、距離センサ8aは、三次元センサの一例である。
距離センサ8aとして用いられるToFセンサは、光源から物体にレーザ光を照射し、その散乱や反射光を計測することにより、光源から物体までの距離を測定する。
本実施形態では、距離センサ8aは、LiDAR(Light Detection and Ranging)センサである。LiDARとは、パルスを用いて光飛行時間を測定する方式であるが、ToFセンサのその他の方式として、位相差検出方式で距離を計測してもよい。位相差検出方式では、基本周波数で振幅変調したレーザ光を計測範囲に照射し、その反射光を受光して照射光と反射光との位相差を測定することで時間を求め、その時間に光速をかけて距離を算出する。また、距離センサ8aは、ステレオカメラ等により構成されてもよい。
移動体システム60は、三次元センサを用いることで、法面の高さ、傾斜角度またははらみだし等の二次元の画像からは得ることが困難な三次元の情報を得ることができる。
なお、移動体システム60は、さらに、角度センサ8cを搭載した構成であってもよい。角度センサ8cは、撮影装置7の撮影方向の角度(姿勢)または角速度(または各加速度)を検出するためのジャイロセンサ等である。
評価システム4は、評価装置3およびデータ管理装置5によって構築されている。評価システム4を構成する評価装置3およびデータ管理装置5は、通信ネットワーク100を介して移動体システム60、端末装置1100および端末装置1200と通信することができる。通信ネットワーク100は、インターネット、移動体通信網、LAN(Local Area Network)等によって構築されている。なお、通信ネットワーク100には、有線通信だけでなく、3G(3rd Generation)、4G(4th Generation)、5G(5th Generation)、Wi-Fi(Wireless Fidelity)(登録商標)、WiMAX(Worldwide Interoperability for Microwave Access)またはLTE(Long Term Evolution)等の無線通信によるネットワークが含まれてもよい。また、評価装置3およびデータ管理装置5は、NFC(Near Field Communication)(登録商標)等の近距離通信技術による通信機能を備えていてもよい。
データ管理装置5は、情報処理装置の一例であり、データ取得装置9によって取得された各種データを管理するPC等のコンピュータである。データ管理装置5は、データ取得装置9から各種取得データを受信し、受信した各種取得データを、データ解析を行う評価装置3に受け渡す。なお、データ管理装置5から評価装置3への各種取得データの受け渡し方法はUSB(Universal Serial Bus)メモリ等を使った人的な移動であってもよい。
評価装置3は、データ管理装置5から受け渡された各種取得データに基づいて、法面の状態を評価するPC等のコンピュータである。評価装置3は、法面状態を評価するための専用アプリケーションプログラムがインストールされている。評価装置3は、撮影画像データおよびセンサデータから法面の種別または構造を検出して形状データを抽出するとともに、変状の有無や変状の度合いを検出することによる詳細分析を行う。また、評価装置3は、撮影画像データおよびセンサデータ、評価対象データ、並びに詳細分析結果を用いて、国、自治体または委託事業者等の道路管理者に提出するためのレポートを生成する。評価装置3によって生成されたレポートのデータは、委託事業者を介して国、自治体に、電子データまたは書類に印刷した状態で提出される。評価装置3によって生成されるレポートは、調査記録表、点検表、調査台帳または調書等と称される。なお、評価装置3は、PCに限られず、スマートフォンまたはタブレット端末等であってもよい。また、評価システム4は、評価装置3とデータ管理装置5を、一台の装置または端末として構築する構成であってもよい。
端末装置1200は、委託事業者に備えられており、端末装置1100は、国、自治体に備えられている。評価装置3、端末装置1100および端末装置1200は、データ管理装置5と通信可能な通信端末の例であり、データ管理装置5で管理される各種データが閲覧可能である。
図2は、実施形態に係る移動体システムを用いて法面状態を検査する様子の一例を示す図である。図2に示されているように、移動体システム6は、データ取得装置9を搭載した移動体6を道路上に走行させながら、撮影装置7で法面の所定範囲を撮影していく。
ここで、図2に示されているように、法面のうち、削った斜面を切土法面、土を盛った斜面を盛土法面という。また、山の脇に通した道路において、側面にある斜面のことを自然斜面という。切土法面や盛土法面は、法面の表面に植物を植えることで耐久性が増し、そのまま数十年変化させないで済ませられることがある。しかしながら、このようなケースばかりではなく、風雨等によって切土法面、盛土法面および自然斜面の劣化が進むと、表面の岩や土が落ちてくる表層崩壊や山が崩れて道路封鎖に至る崩壊が起こる。このような事態を避けるため、斜面の表面には、モルタルを吹き付けたり(モルタル吹付)、コンクリートの構造物を設置し固めることで斜面が風雨にさらされて劣化する速度を遅くしたりする手法が取られている。このような手法によって構築された構造物を土工構造物という。土工構造物には、自然斜面と道路の間に設置する擁壁や落石が道路に落下することを防ぐ落石防護柵等が存在するが、いずれも道路への土砂や落石などの流出による道路封鎖または人的被害を未然に防ぐためのものである。
近年、施工から数十年経過した土工構造物の劣化が著しく、社会インフラの整備が大きな課題となっている。そのため、土工構造物の劣化を早期に発見し、土工構造物を長持ちさせるための点検および老朽化保全が重要となる。従来の自然斜面および土工構造物の点検は、斜面の落石、崩壊、地滑りまたは土石流を調査して修繕計画を作成するもので、専門家による目視点検によって行われていた。
しかしながら、専門家による目視点検では、日本中に大量にある土工構造物を一定期間に点検しきれないことや高所や川沿いの盛土等を点検できないといった効率面の問題に加えて、目視点検では、土工構造物表層に発生するひびまたは剥離といった変状の劣化の進行度合いを定量的に把握できなかった。
そこで、実施形態に係る状態検査システム1は、撮影装置7によって土工構造物斜面の撮影画像データを取得し、距離センサ8a等の三次元センサによって三次元情報を含むセンサデータを取得する。そして、評価システム4は、取得された撮影画像データとセンサデータを組み合わせて法面状態の評価を行うことで、法面の三次元形状を示す形状データを検出するとともに、ひびや剥離といった変状を検出する。これによって、状態検査システム1は、人間の目視では点検が困難な評価を効率的に行うことができる。
図3は、法面の状態を説明する図である。図3(a)は、崩壊5年前の法面の表面を示す画像であり、図3(b)は、図3(a)に示す画像の説明図である。この状態は、法面表層のひび割れが目立つ段階であり、ひび割れ、剥離、湧水等の表層の変状または変状の予兆を検出するために、展開図等に示される画像解析が有効である。
図3(c)は、崩壊2年前の法面の表面を示す画像であり、図3(d)は、図3(c)に示す画像の説明図である。この状態は、法面内部が土砂化し、土砂が法面表層を押し、斜面が膨らんだ段階であり、ひび割れを伴う段差、はらみだし等の三次元的な変状を検出するために、展開図等の画像+断面図等の三次元解析が有効である。
図3(d)は、崩壊5年前の法面の表面を示す画像であり、図3(b)は、図3(a)に示す画像の説明図である。この状態は、法面表層が土砂を抑えきれず崩壊している。
●ハードウエア構成
次に、図4および図5を用いて、状態検査システム1を構成する各装置のハードウエア構成について説明する。なお、図4および図5に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。
○データ取得装置のハードウエア構成○
図4は、データ取得装置のハードウエア構成の一例を示す図である。データ取得装置9は、図1に示されているような撮影装置7およびセンサ装置8とともに、データ取得装置9の処理または動作を制御するコントローラ900を備える。
コントローラ900は、撮影装置I/F(Interface)901、センサ装置I/F902、バスライン910、CPU(Central Processing Unit)911、ROM(Read Only Memory)912、RAM(Random Access Memory)913、HD(Hard Disk)914、HDD(Hard Disk Drive)コントローラ915、ネットワークI/F916、DVD-RW(Digital Versatile Disk Rewritable)ドライブ918、メディアI/F922、外部機器接続I/F923およびタイマ924を備えている。
これらのうち、撮影装置I/F901は、撮影装置7との間で各種データまたは情報の送受信を行うためのインターフェースである。センサ装置I/F902は、センサ装置8との間で各種データまたは情報の送受信を行うためのインターフェースである。バスライン910は、図4に示されているCPU911等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
また、CPU911は、データ取得装置9全体の動作を制御する。ROM912は、IPL等のCPU911の駆動に用いられるプログラムを記憶する。RAM913は、CPU911のワークエリアとして使用される。HD914は、プログラム等の各種データを記憶する。HDDコントローラ915は、CPU911の制御にしたがってHD914に対する各種データの読み出しまたは書き込みを制御する。ネットワークI/F916は、通信ネットワーク100を利用してデータ通信をするためのインターフェースである。
DVD-RWドライブ918は、着脱可能な記録媒体の一例としてのDVD-RW917に対する各種データの読み出しまたは書き込みを制御する。なお、DVD-RWに限らず、DVD-RやBlu-ray(登録商標) Disc(ブルーレイディスク)等であってもよい。
メディアI/F922は、フラッシュメモリ等の記録メディア921に対するデータの読み出しまたは書き込み(記憶)を制御する。外部機器接続I/F923は、ディスプレイ、受付部および表示制御部を有する外部PC930等の外部機器を接続するためのインターフェースである。タイマ924は、時間計測機能を有する計測装置である。タイマ924は、コンピュータによるソフトタイマでもよい。
○評価装置のハードウエア構成○
図5は、評価装置のハードウエア構成の一例を示す図である。評価装置3の各ハードウエア構成は、300番台の符号で示されている。図5に示されているように、評価装置3は、コンピュータによって構築されており、図5に示されているように、CPU301、ROM302、RAM303、HD304、HDDコントローラ305、ディスプレイ306、外部機器接続I/F308、ネットワークI/F309、バスライン310、キーボード311、ポインティングデバイス312、DVD-RWドライブ314、およびメディアI/F316を備えている。
これらのうち、CPU301は、評価装置3全体の動作を制御する。ROM302は、IPL等のCPU301の駆動に用いられるプログラムを記憶する。RAM303は、CPU301のワークエリアとして使用される。HD304は、プログラム等の各種データを記憶する。HDDコントローラ305は、CPU301の制御にしたがってHD304に対する各種データの読み出しまたは書き込みを制御する。ディスプレイ306は、カーソル、メニュー、ウィンドウ、文字、または画像等の各種情報を表示する。ディスプレイ306は、表示部の一例である。外部機器接続I/F308は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、USBメモリやプリンタ等である。ネットワークI/F309は、通信ネットワーク100を利用してデータ通信をするためのインターフェースである。バスライン310は、図5に示されているCPU301等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。
また、キーボード311は、文字、数値、各種指示等の入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス312は、各種指示の選択や実行、処理対象の選択、カーソルの移動等を行う入力手段の一種である。DVD-RWドライブ314は、着脱可能な記録媒体の一例としてのDVD-RW313に対する各種データの読み出しまたは書き込みを制御する。なお、DVD-RWに限らず、DVD-RやBlu-ray) Disc等であってもよい。メディアI/F316は、フラッシュメモリ等の記録メディア315に対するデータの読み出しまたは書き込み(記憶)を制御する。
○データ管理装置のハードウエア構成○
図5は、データ管理装置のハードウエア構成の一例を示す図である。データ管理装置5の各ハードウエア構成は、括弧内の500番台の符号で示されている。図5に示されているように、データ管理装置5は、コンピュータによって構築されており、図5に示されているように、評価装置3と同様の構成を備えているため、各ハードウエア構成の説明を省略する。なお、端末装置1100.1200も、コンピュータによって構築され、評価装置3と同様の構成を備えているが、各ハードウエア構成の説明は省略する。
なお、上記各プログラムは、インストール可能な形式または実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、CD-R(Compact Disc Recordable)、DVD(Digital Versatile Disk)、Blu-ray Disc、SDカード、USBメモリ等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内または国外へ提供されることができる。例えば、実施形態に係る評価システム4は、本発明に係るプログラムが実行されることで本発明に係る評価方法を実現する。
●機能構成
次に、図6を用いて、実施形態に係る状態検査システムの機能構成について説明する。図6は、第1の実施形態に係る状態検査システムの機能構成の一例を示す図である。なお、図6には、図1に示されている装置のうち、後述の処理または動作に関連しているものが示されている。
○データ取得装置の機能構成○
まず、図6を用いて、データ取得装置9の機能構成について説明する。データ取得装置9は、通信部91、算出部92、撮影装置制御部93、センサ装置制御部94、撮影画像データ取得部95、センサデータ取得部96、時刻データ取得部97、要求受付部98および記憶・読出部99を有している。これら各部は、図4に示されている各構成要素のいずれかが、HD914からRAM913上に展開されたデータ取得装置用のプログラムに従ったCPU911からの命令によって動作することで実現される機能または手段である。また、データ取得装置9は、図4に示されているROM912およびHD914によって構築される記憶部9000を有している。また、図4に示されるデータ取得装置9に接続される外部PC930は、受付部および表示制御部を有する。
通信部91は、主に、ネットワークI/F916に対するCPU911の処理によって実現され、通信ネットワーク100を介して、他の装置との間で各種データまたは情報の通信を行う。通信部91は、例えば、撮影画像データ取得部95およびセンサデータ取得部96によって取得された取得データを、データ管理装置5に対して送信する。算出部92は、CPU911の処理によって実現され、各種算出を行う。
撮影装置制御部93は、主に、撮影装置I/F901に対するCPU911の処理によって実現され、撮影装置7による撮影処理を制御する。センサ装置制御部94は、主に、センサ装置I/F902に対するCPU911の処理によって実現され、センサ装置8に対するデータ取得処理を制御する。撮影装置制御部93は、角度変更部の一例である。
撮影画像データ取得部95は、主に、撮影装置I/F901に対するCPU911の処理によって実現され、撮影装置7によって撮影された撮影画像に係る撮影画像データを取得する。センサデータ取得部96は、主に、センサ装置I/F902に対するCPU911の処理によって実現され、センサ装置8による検知結果であるセンサデータを取得する。センサデータ取得部96は、距離情報取得部および位置情報取得部の一例である。時刻データ取得部97は、主に、タイマ924に対するCPU911の処理によって実現され、撮影画像データ取得部95またはセンサデータ取得部96によってデータが取得された時刻を示す時刻データを取得する。
要求受付部98は、主に、外部機器接続I/F923に対するCPU911の処理によって実現され、CPU911の処理によって実現され、外部PC930等から所定の要求を受け付ける。
記憶・読出部99は、主に、CPU911の処理によって実現され、記憶部9000に、各種データ(または情報)を記憶したり、記憶部9000から各種データ(または情報)を読み出したりする。
○評価装置の機能構成○
続いて、図6を用いて、評価装置3の機能構成について説明する。評価装置3は、通信部31、受付部32、表示制御部33、判断部34、評価対象データ生成部35、検出部36、地図データ管理部37、レポート生成部38および記憶・読出部39を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD304からRAM303上に展開され評価装置用のプログラムに従ったCPU301からの命令によって動作することで実現される機能または手段である。また、評価装置3は、図5に示されているROM302およびHD304によって構築される記憶部3000を有している。
通信部31は、主に、ネットワークI/F309に対するCPU301の処理によって実現され、通信ネットワーク100を介して、他の装置との間で各種データまたは情報の通信を行う。通信部31は、例えば、データ管理装置5との間で、法面状態の評価に係る各種データを送受信する。
受付部32は、主に、キーボード311またはポインティングデバイス312に対するCPU301の処理によって実現され、利用者から各種の選択または入力を受け付ける。受付部32は、後述する評価画面400に対する各種選択または入力を受け付ける。表示制御部33は、主に、CPU301の処理によって実現され、ディスプレイ306に、各種画像を表示させる。表示制御部33は、後述する評価画面400を、ディスプレイ306に表示させる。判断部34は、CPU301の処理によって実現され、各種判断を行う。受付部32は、操作受付手段の一例である。
評価対象データ生成部35は、CPU301の処理によって実現され、評価対象のデータを生成する。検出部36は、主に、CPU301の処理によって実現され、評価対象データ生成部35によって生成された評価対象データを用いて、法面の状態の検出処理を行う。地図データ管理部37は、主に、CPU301の処理によって実現され、外部サーバ等から取得した地図情報を管理する。地図情報は、地図上の任意の位置における位置情報を含む。
レポート生成部38は、主に、CPU301の処理によって実現され、評価結果に基づいて、道路管理者に提出する評価レポートを生成する。
記憶・読出部39は、主に、CPU301の処理によって実現され、記憶部3000に、各種データ(または情報)を記憶したり、記憶部3000から各種データ(または情報)を読み出したりする。
○データ管理装置の機能構成○
続いて、図6を用いて、データ管理装置5の機能構成について説明する。データ管理装置5は、通信部51、判断部52、データ管理部53および記憶・読出部59を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD504からRAM503上に展開されデータ管理装置用のプログラムに従ったCPU501からの命令によって動作することで実現される機能または手段である。また、データ管理装置5は、図5に示されているROM502およびHD504によって構築される記憶部5000を有している。
通信部51は、主に、ネットワークI/F509に対するCPU501の処理によって実現され、通信ネットワーク100を介して、他の装置との間で各種データまたは情報の通信を行う。通信部51は、例えば、データ取得装置9から送信された、撮影画像データおよびセンサデータを受信する。また、通信部51は、例えば、評価装置3等との間で、法面状態の評価等に係る各種データを送受信する。通信部51は、指示受付手段の一例である。判断部52は、位置生成手段の一例であり、CPU501の処理によって実現され、各種判断を行う。
データ管理部53は、主に、CPU501の処理によって実現され、法面状態の評価に係る各種データの管理を行う。データ管理部53は、例えば、データ取得装置9から送信された撮影画像データおよびセンサデータを、取得データ管理DB5001に登録する。また、データ管理部53は、例えば、評価装置3によって処理または生成されたデータを、処理データ管理DB5003に登録する。生成部54は、主に、CPU501の処理によって実現され、法面に係る各種画像データを生成する。
記憶・読出部59は、主に、CPU501の処理によって実現され、記憶部5000に、各種データ(または情報)を記憶したり、記憶部5000から各種データ(または情報)を読み出したりする。
○端末装置の機能構成○
続いて、図6を用いて、端末装置1100の機能構成について説明する。端末装置1100は、通信部1101、受付部1102、表示制御部1103、判断部1104および記憶・読出部1105を有している。これら各部は、図5に示されている各構成要素のいずれかが、HDからRAM上に展開され端末装置用のプログラムに従ったCPUからの命令によって動作することで実現される機能または手段である。また、データ管理装置5は、図5に示されているROMおよびHDによって構築される記憶部1106を有している。
通信部1101は、主に、ネットワークI/Fに対するCPUの処理によって実現され、通信ネットワーク100を介して、他の装置との間で各種データまたは情報の通信を行う。
受付部1102は、主に、キーボードまたはポインティングデバイスに対するCPUの処理によって実現され、利用者から各種の選択または入力を受け付ける。表示制御部1103は、主に、CPUの処理によって実現され、ディスプレイに、各種画像を表示させる。判断部1104は、CPU301の処理によって実現され、各種判断を行う。受付部1102は、操作受付手段の一例である。
記憶・読出部1105は、主に、CPUの処理によって実現され、記憶部1106に、各種データ(または情報)を記憶したり、記憶部1106から各種データ(または情報)を読み出したりする。
続いて、図6を用いて、端末装置1200の機能構成について説明する。端末装置1200は、通信部1201、受付部1202、表示制御部1203、判断部1204および記憶・読出部1205を有している。これら各部は、図5に示されている各構成要素のいずれかが、HDからRAM上に展開され端末装置用のプログラムに従ったCPUからの命令によって動作することで実現される機能または手段である。また、データ管理装置5は、図5に示されているROMおよびHDによって構築される記憶部1206を有している。
通信部1201は、主に、ネットワークI/Fに対するCPUの処理によって実現され、通信ネットワーク100を介して、他の装置との間で各種データまたは情報の通信を行う。
受付部1202は、主に、キーボードまたはポインティングデバイスに対するCPUの処理によって実現され、利用者から各種の選択または入力を受け付ける。表示制御部1203は、主に、CPUの処理によって実現され、ディスプレイに、各種画像を表示させる。判断部1204は、CPU301の処理によって実現され、各種判断を行う。
記憶・読出部1205は、主に、CPUの処理によって実現され、記憶部1206に、各種データ(または情報)を記憶したり、記憶部1206から各種データ(または情報)を読み出したりする。
○状態種別管理テーブル
図7および図8は、状態種別管理テーブルの一例を示す概念図である。状態種別管理テーブルは、法面の状態種別を検出するための教師データを管理するためのテーブルである。記憶部3000には、図7および図8に示されているような状態種別管理テーブルによって構成されている状態種別管理DB3001が構築されている。この状態種別管理テーブルでは、種別Noごとに、状態種別を示す種別名、教師画像、および備考欄が関連づけられて管理されている。
これらのうち、種別名は、法面、法面の周囲の物理量および現場情報の状態を識別するための状態種別を示す名称である。ここで、状態種別には、擁壁、法枠、吹付モルタル、金網、柵、排水穴、パイプ、小段の排水路等の構造物である法面そのものの種別と、湧水、苔、植物、落石、土砂、日当たり等の法面の周囲の物理量を示す種別が含まれる。また、状態種別には、移動体システム60によるデータ取得を支援する現場情報として、ポール、電柱、標識または看板等の種別が含まれている。さらに、状態種別には、構造物の付帯情報として、過去の点検実施時や施工時に設置された、変状の存在を示すチョーキング等の目印情報や、測定装置や、対策跡などの、人工物を含んでいても良い。また、教師画像は、教師データの一例であり、撮影画像データから法面、法面の周囲の物理量および現場情報の状態種別を判別するための機械学習に用いる教師画像である。ここで教師データとは、一般に画像と呼ばれる輝度画像やRGB画像等に限らず、状態種別の判別するための情報が含まれてさえいれば良く、深度情報やテキストや音声などの形式であっても良い。備考欄には、状態の種別を検出するための検出基準となる情報が示されている。
○取得データ管理テーブル
図9(A)は、取得データ管理テーブルの一例を示す概念図である。取得データ管理テーブルは、データ取得装置9によって取得された各種取得データを管理するためのテーブルである。記憶部5000には、図9(A)に示されているような取得データ管理テーブルによって構成されている取得データ管理DB5001が構築されている。この取得データ管理テーブルでは、フォルダごとに、撮影画像データ、センサデータおよび取得時刻が関連づけられて管理されている。
これらのうち、撮影画像データおよびセンサデータは、データ取得装置9から送信された取得データのデータファイルである。また、取得時刻は、撮影画像データおよびセンサデータがデータ取得装置9によって取得された時刻を示す。一つの点検工程において取得されたデータは、同一のフォルダ内に記憶される。撮影画像データおよびセンサデータに含まれる三次元センサデータは、後述するように、座標が対応付けて記憶される。また、撮影画像データおよびセンサデータに含まれる三次元センサデータは、センサデータに含まれる測位データに対応付けて記憶されている。これにより、評価装置3の地図データ管理部37により管理される地図情報における任意の位置を選択すると、当該位置における撮影画像データおよび三次元センサデータを、取得データ管理DB5001から読み出すことが可能である。
○処理データ管理テーブル
図9(B)は、処理データ管理テーブルの一例を示す概念図である。処理データ管理テーブルは、評価装置3によって処理された各種処理データを管理するためのテーブルである。記憶部5000には、図9(B)に示されているような処理データ管理テーブルによって構成されている処理データ管理DB5003が構築されている。この処理データ管理テーブルでは、フォルダごとに、評価対象データ、評価データ、測位データおよびコメントが関連づけられて管理されている。
これらのうち、評価対象データは、評価装置3による法面状態の検出評価に用いるデータファイルである。また、評価データは、評価装置3による評価結果を示すデータファイルである。さらに、測位データは、GNSSセンサ8bによって計測された位置情報を示すデータである。また、コメントは、評価対象データまたは評価データに対する評価者によって入力された書誌情報である。これにより、評価装置3の地図データ管理部37により管理される地図情報における任意の位置を選択すると、当該位置における評価データを、処理データ管理DB5003から読み出すことが可能である。
図10は、移動体システムによって取得される撮影画像について説明するための図である。
移動体システム60は、移動体6を走行させながら、データ取得装置9に備えられた撮影装置7を用いて、道路上に設けられた法面を撮影する。図10に示すX軸方向は、移動体6の移動方向を示し、Y軸方向は鉛直方向、Z軸方向は、X軸方向およびY軸方向に直交し、移動体6から法面に向かう奥行き方向を示す。
データ取得装置9は、移動体6の走行に伴い、図10に示されているように、撮影画像1、測距画像1および撮影画像2、測距画像2を時系列に取得していく。測距画像1および測距画像2は、距離センサ8aにより取得された画像である。このとき、撮影装置7およびセンサ装置8は、時刻同期が取られており、撮影画像1および測距画像1と、撮影画像2および測距画像2は、夫々法面の同じ領域に対する画像となる。また、撮影時の車両の姿勢から撮影画像の傾き補正(画像補正)が行われ、撮影画像の時刻から画像データと測位データ(北緯東経)が紐づけられる。
このように、移動体システム60は、移動体6としての車両を走行させながら、法面が撮影された撮影画像データおよび撮影装置7の撮影に応じて取得されたセンサデータを取得し、データ管理装置5に対してアップロードする。
図11は、撮影画像と測距画像の説明図である。
図11(a)は、図10に示した撮影画像1、2等の撮影画像データ7Aを示す。撮影装置7により取得された撮影画像データ7Aの各画素7A1は、図10に示したX軸方向およびY軸方向に対応する座標で配置されており、蓄電量に対応する輝度情報を有する。
そして、撮影画像データ7Aの各画素7A1の輝度情報は、図10に示したX軸方向およびY軸方向に対応する座標に対応付けて、図9に示した撮影画像データとして、記憶部5000に記憶される。
図11(b)は、図10に示した測距画像1、2等の測距画像データ8Aを示す。距離センサ8aにより取得された測距画像データ8Aの各画素8A1は、図10に示したX軸方向およびY軸方向に対応する座標で配置されており、蓄電量に対応する図10に示したZ軸方向における距離情報を有する。なお、測距画像データ8Aは、三次元点群データであるが、一般的にユーザに視認させる際には、輝度情報を付与して可視表示するため、測距画像データと称する。そして、撮影画像データ7Aおよび測距画像データ8Aを総称して、画像データと称する。
そして、測距画像データ7Bの各画素8A1の距離情報は、図10に示したX軸方向およびY軸方向に対応する座標に対応付けて、図9に示したセンサデータに含まれる三次元データとして、記憶部5000に記憶される。
ここで、図11(a)に示す撮影画像データ7Aと、図11(b)に示す測距画像データ8Aは、夫々法面の同じ領域に対する画像であるから、図10に示したX軸方向およびY軸方向に対応する座標に対応付けて、輝度情報および距離情報が、記憶部5000に記憶されることになる。
●実施形態の処理または動作
○データ取得処理○
次に、図12および図10を用いて、移動体システム60を用いたデータ取得処理について説明する。法面状態の点検作業者は、移動体6に搭乗して道路上の存在する法面の撮影を行い、取得したデータをデータ管理装置5にアップロードする。以下、詳細に説明する。
図12は、移動体システムを用いたデータ取得処理の一例を示すシーケンス図である。まず、点検作業者が外部PC330に対して所定の入力操作等を行うことで、データ取得装置9の要求受付部98は、データ取得開始要求を受け付ける(ステップS11)。そして、データ取得装置9は、撮影装置7およびセンサ装置8を用いたデータ取得処理を実行する(ステップS12)。具体的には、撮影装置制御部93は、撮影装置7に対して撮影要求を行うことで、所定の領域に対する撮影処理を開始する。また、センサ装置制御部94は、撮影装置7による撮影処理と同期させながら、距離センサ8aおよびGNSSセンサ8bによる検知処理を開始する。そして、撮影画像データ取得部95は、撮影装置7によって取得された撮影画像データを取得し、センサデータ取得部96は、距離センサ8aおよびGNSSセンサ8bによって取得されたセンサデータを取得する。また、時刻データ取得部97は、撮影画像データ取得部95およびセンサデータ取得部96によって各種データが取得された時刻を示す時刻データを取得する。
次に、点検作業者が外部PC330等に対して所定の入力操作を行うことで、要求受付部98は、取得した各種データのアップロード要求を受け付ける(ステップS13)。そして、通信部91は、データ管理装置5に対して、ステップS12で取得された取得データである撮影画像データ、センサデータおよび時刻データをアップロード(送信)する(ステップS14)。これにより、データ管理装置5の通信部51は、データ取得装置9から送信された取得データを受信する。そして、データ管理装置5のデータ管理部53は、ステップS14で受信された取得データを、取得データ管理DB5001(図9(A)参照)に登録する(ステップS15)。データ管理部53は、取得データに含まれている各データの取得時刻を示す時刻データに関連づけて、撮影画像データおよびセンサデータを一つのフォルダに記憶する。
○法面状態の評価処理○
○評価対象データの生成
図13は、評価対象データの生成処理の一例を示すシーケンス図である。
まず、評価装置3の通信部31は、データ管理装置5に対して、評価対象データの生成要求を送信する(ステップS31)。この生成要求には、生成対象のデータが記憶されたフォルダ名が含まれている。これにより、データ管理装置5の通信部51は、評価装置3から送信された生成要求を受信する。
次に、データ管理装置5の記憶・読出部59は、ステップS31で受信された生成要求に含まれているフォルダ名を検索キーとして取得データ管理DB5001を検索することにより、生成要求に含まれているフォルダ名に関連づけられた取得データを読み出す(ステップS32)。そいて、通信部51は、評価装置3に対して、ステップS32で読み出された取得データを送信する(ステップS33)。この取得データには、撮影画像データ、センサデータおよび時刻データが含まれている、これにより、評価装置3の通信部31は、データ管理装置5から送信された取得データを受信する。
次に、評価装置3の評価対象データ生成部35は、ステップS33で受信された取得データを用いて、評価対象データを生成する(ステップS34)。具体的には、評価対象データ生成部35は、受信された距離センサ8aのセンサデータに基づき、撮影時の撮影装置7(移動体6)の姿勢から撮影画像データの傾き補正を行う。また、評価対象データ生成部35は、受信された時刻データに基づき、受信されたGNSSセンサ8bのセンサデータである測位データと撮影画像データの紐づけを行う。さらに、評価対象データ生成部35は、複数の撮影画像データを一つの画像データに合成する処理を行う。
このように、評価対象データ生成部35は、画像データに対する傾き補正機能、画像データと位置情報の連携機能および画像データの合成機能を有する。評価対象データ生成部35は、データ管理装置5から受信された取得データを用いて、後述の検出部36およびレポート生成部38による処理が行いやすいように、受信された撮影画像データに対する画像補正を行う。
次に、評価装置3の通信部31は、データ管理装置5に対して、ステップS34で生成された生成データを送信する(ステップS35)この生成データには、評価対象データ生成部35で生成された評価対象データ、測位データおよびコメントが含まれている。これにより、データ管理装置5の通信部51は、評価装置3から送信された生成データを受信する。そして、データ管理装置5のデータ管理部53は、ステップS35で受信された生成データを、処理データ管理DB5003(図9(B)参照)に記憶する(ステップS36)。具体的には、データ管理部53は、生成データに含まれている評価対象データ、測位データおよびコメントを関連づけて一つのフォルダに記憶させる。
このように、評価システム4は、データ取得装置9から取得した各種データ(撮影画像データ、センサデータおよび時刻データ)に基づく画像処理を行うことで、法面状態の評価に用いる評価対象データを生成する。
○評価レポートの生成
図14は、法面状態の評価結果であるレポートの生成処理の一例を示すシーケンス図である。
まず、評価装置3の表示制御部33は、法面状態の評価処理を行うための評価画面400を、ディスプレイ306に表示させる(ステップS51)。
次に、評価装置3の受付部32は、評価対象データの選択を受け付ける(ステップS52)。
次に、通信部31は、データ管理装置5に対して、ステップS52で選択された評価対象データの読出要求を送信する(ステップS53)。この読出要求には、ステップS52で選択されたフォルダ名が含まれている。これにより、データ管理装置5の通信部51は、評価装置3から送信された読出要求を受信する。
次に、データ管理装置5の記憶・読出部59は、ステップS53で受信された読出要求に含まれているフォルダ名を検索キーとして処理データ管理DB5003(図9(B)参照)を検索することで、読出要求に含まれているフォルダ名に関連づけられた処理データを読み出す(ステップS54)。そして、通信部51は、評価装置3に対して、ステップS54で読み出された処理データを送信する(ステップS55)。この処理データには、評価対象データ、測位データおよびコメントが含まれている。これにより、評価装置3の通信部31は、データ管理装置5から送信された処理データを受信する。
次に、評価装置3の表示制御部33は、ステップS54で受信された処理データを、ディスプレイ306に表示させる(ステップS56)。
次に、評価装置3は、評価対象データを用いた法面状態の検出処理を行う(ステップS57)。法面状態の検出処理についての詳細は、後述する。
受付部32は、評価結果のアップロード要求を受け付ける(ステップS58)。そして、通信部31は、データ管理装置5に対して、評価結果のアップロード(送信)を行う(ステップS59)。これにより、データ管理装置5の通信部51は、評価装置3から送信された評価データを受信する。そして、データ管理装置5のデータ管理部53は、ステップS59で受信された評価データを、処理データ管理DB5003(図9(B)参照)に登録する(ステップS60)。この場合、データ管理部53は、評価データを、評価を行った評価対象データ等と関連づけて一つのフォルダに記憶する。
また、受付部32は、評価レポートの生成要求を受け付ける(ステップS61)。そして、レポート生成部38は、検出部36による法面状態の検出結果に基づいて、評価レポートを生成する(ステップS62)。レポート生成部38は、国等から発行された点検要領、または道路管理者からの要望に沿った様式に基づいて、上述した評価結果を示す評価データを整列させて評価レポートを生成する。
ここで、図15を用いて、法面状態の検出処理について詳細に説明する。図15は、法面状態の検出処理の一例を示すフローチャートである。
まず、受付部32は、形状検出要求を受け付ける(ステップS71)。次に、検出部36は、評価対象データを用いた形状検出処理を行う(ステップS72)。ここで、法面の形状を示す形状データは、法面の延長、高さおよび傾斜角度等の三次元情報、並びに位置情報等によって表される。法面の延長とは、平面図における法面の長さ(法面の傾斜が分かる横断面の奥行き方向の長さ)である。また、形状データには、法面が自然斜面であるか、または土工構造物であるかの法面の種類を示す情報も含まれる。さらに、法面は土工構造物である場合、形状データには、土工構造物の種別の情報も含まれる。土木構造物の種別は、例えば、擁壁、法枠、モルタル吹付、アンカーの有無、または盛土等である。
具体的には、検出部36は、評価対象データに含まれている画像データおよび三次元データに基づいて、法面の延長、高さおよび傾斜角度を検出する。また、検出部36は、状態種別管理DB3001(図7参照)を用いて、評価対象データである画像に示されている法面の種別を検出する。この場合、検出部36は、状態種別管理テーブルに示されている教師画像を用いた画像マッチング処理によって法面の種別を検出する。
次に、表示制御部33は、ステップS72における検出結果である形状データを、ディスプレイ306に表示させる(ステップS73)。なお、以上説明したステップS71~S73において、「形状検出」処理に代えて、「構造物情報検出」処理を行っても良い。
この場合、受付部32は、構造物情報検出要求を受け付ける(ステップS71)。次に、検出部36は、評価対象データを用いた構造物情報検出処理を行う(ステップS72)。そして、表示制御部33は、ステップS72における検出結果である構造物情報検出情報を、ディスプレイ306に表示させる(ステップS73)。
ここで、構造物情報は、上述した形状データ以外に、構造物の付帯情報を含む。具体的には、検出部36は、評価対象データに含まれている画像データおよび三次元データに基づいて、状態種別管理DB3001(図7および図8参照)を用いて、評価対象データである画像に示されている法面の種別、および法面の付帯情報の種別を検出する。この場合、検出部36は、状態種別管理テーブルに示されている教師画像を用いた画像マッチング処理によって法面の種別、および法面の付帯情報を検出する。
次に、受付部32は、法面状態の損傷検出を要求する損傷検出要求を受け付けた場合(ステップS74のYES)、処理をステップS75へ移行させる。一方で、受付部32は、損傷検出要求が受け付けられない場合(ステップS74のNO)、処理をステップS77へ移行させる。検出部36は、評価対象データに対する法面状態の損傷検出処理を行う(ステップS75)。
ここで、法面状態の損傷検出処理は、法面の損傷度合いを表す損傷データとして、法面に存在する変状の有無または変状の度合いを検出する。変状の度合いは、変状の劣化度合いを示し、ひびの幅、隔離のサイズ、または浮きの大きさ等である。検出部36は、評価対象データに含まれている画像データおよびセンサデータに基づいて、法面の変状の有無または変状の度合いを検出する。また、検出部36は、予め定められた変状劣化度の検出式等を用いて、変状の度合い所定値を超えているか否かを検出する。この場合、検出部36は、ひびの幅が一定以上であるか、剥離のサイズが一定以上か、または浮きが大きいか等を判定する。
そして、図13に示したステップS36において、データ管理装置5のデータ管理部53は、損傷位置の座標と損傷の種類を、図11に示した撮影画像データ7AにおけるX軸方向およびY軸方向に対応する座標に対応付けて、処理データ管理DB5003に記憶する。
次に、表示制御部33は、ステップS75における損傷検出結果を示す表示画面を、ディスプレイ306に表示させる(ステップS76)。
また、表示制御部33は、断面画像をディスプレイ306に表示させる。断面画像は、検出部36によって検出された形状データに基づいて描画された評価対象の法面の断面図を示す。形状データは、距離センサ8a(三次元センサ)によるセンサデータを用いて検出されるため、二次元画像のみでは算出できない法面の傾斜または高さ等の三次元情報も含めて詳細に表現することができる。
次に、受付部32は、地図情報取得要求を受け付けた場合(ステップS77のYES)、処理をステップS78へ移行させる。一方で、受付部32は、地図情報取得要求が受け付けられない場合(ステップS77のNO)、処理を終了する。検出部36は、評価対象の法面状態の位置を示す地図情報を生成する(ステップS78)。具体的には、検出部36は、外部のWEBサーバ等が提供する所定のサービスまたはアプリケーションを用いて利用可能な地図データに対応する、ステップS55で取得された測位データが示す位置(北緯、東経)に対して、法面の位置を示す画像が付与された地図情報を生成する。外部のWEBサーバ等から提供される地図データは、地図データ管理部37によって管理されている。
次に、表示制御部33は、ステップS78で生成された地図情報490を、ディスプレイ306に表示させる(ステップS79)。
受付部32は、法面状態の損傷の予兆検出を要求する予兆検出要求を受け付けた場合(ステップS80のYES)、処理をステップS81へ移行させる。一方で、受付部32は、予兆検出要求が受け付けられない場合(ステップS80のNO)、処理を終了させる。検出部36は、評価対象データに対する法面状態の予兆検出処理を行う(ステップS82)。
状態検査システム1において、従来から、法面の変状が認められたときにその状態および位置を特定することが行われている。しかしながら、法面に変状が生じる前に、変状が生じる位置の予兆を示す情報について計測する、という観点は知られていない。ここで、法面状態の損傷の予兆検出処理は、法面の損傷の予兆を表す予兆データとして、法面の周囲の物理量を示す周囲データを含む法面の計測データに基づき、法面の変状の予兆を検出する。
計測データは、法面を撮影装置7により撮影した撮影画像データ、あるいは、法面を距離センサ8a等の三次元センサにより計測したセンサデータを含む。
周囲データは、法面以外の物体の計測データを含み、法面以外の物体は、湧水、土砂、岩石、および植物のうちの少なくとも1つを含む。
法面の計測データに、法面表面に発生している湧水を示す周囲データが含まれる場合、法面の裏側から、滞留水が圧力をかけている可能性があるため、法面の変状の予兆があると検出される。具体的には、湧水の有無に限らず、湧水の量、種類および位置に応じて、法面の変状の予兆があると検出される。
法面の計測データに、法面表面に発生している植物、苔を示す周囲データが含まれる場合、湧水が発生し、法面の裏側から、滞留水が圧力をかけている可能性があるため、法面の変状の予兆があると検出される。具体的には、植物、苔の有無に限らず、植物、苔の量、種類および位置に応じて、法面の変状の予兆があると検出される。
法面の計測データに、法面周囲の落石、土砂を示す周囲データが含まれる場合、法面の裏側および上側に異常が生じている可能性があるため、法面の変状の予兆があると検出される。具体的には、落石、土砂の有無に限らず、落石、土砂の量、種類および位置に応じて、法面の変状の予兆があると検出される。
法面の計測データに、排水穴、パイプ、小段の排水路等の詰まりを示す周囲データが含まれる場合、法面の裏側から表側への排水が阻害され、法面の裏側から、滞留水が圧力をかけている可能性があるため、法面の変状の予兆があると検出される。具体的には、詰まりの有無に限らず、詰まりの原因となる異物の量、種類および位置に応じて、法面の変状の予兆があると検出される。
なお、排水穴、パイプ、小段の排水路等自体が損傷している場合は、法面の変状として検出されるが、排水穴、パイプ、小段の排水路等の詰まりは、法面の変状としては検出されず、法面の変状の予兆として検出される。
以上説明した法面以外の物体の計測データは、複数の計測データの組み合わせにより、法面の変状の予兆があると検出してもよい。具体的には、法面のごく一部にしか湧水を示す周囲データが存在しなかったとしても、法面の全面に苔が広がっている場合は、日常的には、法面の全面に湧水が広がっていると推定され、法面の変状の予兆があると検出される。
また、周囲データは、物体以外の物理量の計測データを含み、物体以外の物理量の計測データは光の計測データを含む。
法面の計測データに、日当たりの良さを示す周囲データが含まれる場合、上記した法面以外の物体の計測データと組み合わせて、法面の変状の予兆があると検出される。具体的には、日当たりがよく法面が乾燥しやすいにも関わらず、苔が発生している場合、湧水が発生し、法面の裏側から、滞留水が圧力をかけている可能性があるため、法面の変状の予兆があると検出される。
そして、法面状態の損傷の予兆検出処理は、法面の損傷の予兆を表す予兆データとして、法面の周囲の物理量を示す周囲データを含む法面の計測データに基づき、法面の変状の予兆についてのコメントを生成する。そして、図13に示したステップS36において、データ管理装置5のデータ管理部53は、変状の予兆の位置の座標とコメントを、図11に示した撮影画像データ7AにおけるX軸方向およびY軸方向に対応する座標に対応付けて、処理データ管理DB5003に記憶する。
具体的には、取得した周囲データの一例である撮影画像データに基づき、図8に示した状態種別管理テーブルの教師画像を参照し、湧水等の法面の周囲の物理量の種別およびその量や位置等を示すコメントを生成する。一例として、「苔率30%、起点高さ3~20m付近に多く分布」というコメントを生成する。
次に、表示制御部33は、ステップS81における予兆検出結果を示す表示画面を、ディスプレイ306に表示させる(ステップS82)。
また、表示制御部33は、断面画像をディスプレイ306に表示させる。
このように、評価システム4は、法面状態の評価として、三次元情報を含む法面の形状、法面の損傷の度合い、法面の変状の予兆および評価対象の法面の位置を検出する。
図16は、本実施形態の課題を説明する図である。
本実施形態では、高精細の撮影装置7を移動体6に設置し、走行しながら撮影することで、高精細画像を効率よく取得し、画像からひびや金網の破れなど、小さく細かい変状を発見可能なシステムを築くことで、点検やスクリーニングの効率化が期待される。
一方で、デジタル一眼レフや、コンパクトデジタルカメラ、スマートフォンのカメラ等の一般的な撮影装置で斜面を撮影すると、ピンボケが生じやすく、結果として高精細画像を得られない課題がある。
図16(a)は、一般的な撮影装置7の構成を示す。撮影装置7は、撮影レンズ700と、イメージセンサ740と、イメージセンサ740を保持して撮影レンズ700が取り付けられるボディ720と、を備え、イメージセンサ740のセンサ面に対する垂線740Pと、撮影レンズ700の中心軸700Cが同じである。
図16(b)は、移動体6である自動車の屋根(ルーフ)に図16(a)に示した撮影装置7を載せた構成を示し、撮影レンズ700の中心軸700Cが地面に水平に設置されており、傾斜角80aで傾斜する斜面80である法面を撮影する。
なお、中心軸700Cは、地面と傾いていてもよいが、説明を簡単にするため、中心軸700Cは地面に水平とした。
撮影画像の中心すなわち撮影レンズ700の中心軸700Cと斜面80の交点にてピントを合わせた場合、撮影レンズ700のピントが最も合った画像を撮影できるのは、平面700Fである。すなわち、撮影レンズ700のピントを合わせて平面700F全体を撮影すると、イメージセンサ740全体でピントが合った画像が撮れるように、撮影レンズ700は設計されている。
ここで、ピントが合って見えるのは被写界深度の範囲であるから、被写界深度を例えば±1mとすると、斜面80の撮影範囲70のうち、平面700Fから±1mの範囲の撮影範囲70Bでしかピントが合って見えず、それ以外の撮影範囲70A、70Cは写ってはいるもののピンボケ画像となってしまう。
なお、被写界深度は、銀塩フィルムカメラ時代にできた用語であり、写真を撮った際に、ピントが合って見える範囲を示し、イメージセンサの画素サイズや、撮影レンズ700の解像力、撮影レンズ700のF値などで決定される範囲である。図16は、仮に撮影レンズ700のF値が5.6だった場合を示している。
この課題は、撮影装置7の地面に対する角度を上下させても解決しない。撮影装置7を下向きにすれば地面近くの斜面80はピントが合って撮影できるかもしれないが、地面より高い頂上方向の画像を撮ることができない。
空撮であれば、斜面80の角度に合わせて飛行体の傾きを変えることでピントが合った画像を撮ることができるかもしれないが、道路を走行する移動体では困難である。
このように、道路を走行する移動体6に一般的な撮影装置7を搭載した構成であると、撮影レンズ700の画角を有効に使えず、画面端部は必ずピンボケしてしまい、斜面80全体にわたってピントが合った画像を得ることは困難であった。
日中、斜面80全体に太陽光が注がれ、撮影レンズ700のF値を大きくして被写界深度を広げられることができればこの状況は改善されるが、斜面80の周囲にはたいていは木々が繁殖し、影が出るものであるので大きなF値での撮影は影の部分が黒つぶれしてしまう。また、曇天の日に使えないシステムは使い勝手が悪い。天候が暗い中でF値を大きくすれば画像が黒つぶれし、使い物にならない。
F値を大きくしてこの課題を改善できないのであれば、走行しながら法面全体にわたってピントが合った画像を得るには、多くの撮影装置7を搭載して小分けに画像を撮る必要があった。
本実施形態は、このような課題に鑑み、少ない台数の撮影装置7で斜面80全体にピントが合った画像を取得できること、および多少自動車が走行中に蛇行してもピンボケしない撮影装置7、移動体システム60、および撮影方法を提供することを目的とする。
図17は、実施形態に係る撮影装置7を示す図である。
図17(a)は、本実施形態に係る撮影装置7の構成を示し、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を示すシャインプルーフ角θが、0度以外に設定されている。
撮影装置7は、斜めに向かい合った平面全体にピントが合うような特殊なカメラの一例であり、「あおりカメラ」、「チルトマウントカメラ」、または「シャインプルーフカメラ」と呼ばれる。
図17(b)は、移動体6である自動車の屋根(ルーフ)に図17(a)に示した撮影装置7を載せた構成を示し、シャインプルーフ角θは、以下の式1で求められる。
TAN(θ)=β×TAN(α)…式1
ここで、βは撮影レンズ700の倍率、αは撮影レンズ700の中心軸700Cと斜面80のなす角度を示し、βは、撮影レンズ700の焦点距離と、撮影装置7と斜面80の距離Dにより決定される。なお、α=90―斜面80の傾斜角80aである。
式1に示すように、シャインプルーフ角θを、撮影レンズ700の中心軸700Cと斜面80のなす角度αに応じて設定することにより、図17(b)に示すように、撮影範囲70全体を撮影レンズ700のピントが最も合った画像を撮影できる平面700Fとすることができる。すなわち、斜面80の広い領域でピントが合った画像を得ることができる 。
また、被写界深度は平面700Fに垂直前後方向に広がるので、移動体6が走行中に多少蛇行して図17(b)の左右方向にぶれたとしても、斜面80全体においてピントが合った画像の取得が可能となる。
このようなあおり撮影は、一般にはピントが部分的にぼけた特殊撮影や、工場での検品に用いられてきた。工場の検品においては、撮影装置7と検品対象物の距離や角度が一定になるように設定されるため、シャインプルーフ角はその設定に合わせて固定し、固定した値を変更することは無く、工場のライン変更の際にだけ変更していた。
本実施形態では、斜面の傾斜角80aはまちまちであり、撮影装置7と斜面80の距離Dも、道路の道幅、側道や歩行者道路の影響により変化し、式1の条件が変わるため、工場用途のように一定のシャインプルーフ角θでは固定されない。
以上述べた通りこの方法を基本に、移動体6によって斜面80全体においてピントが合った画像を取得可能な移動体システム60を構成することで上記課題を解決するが、複雑な斜面形状への対応や、取るべきアタッチメント部材の構造、画像取得後の画像処理の実施、複数撮影装置7使用時の画像処理など、多くのパターンが想定されるため、以下実施例にて紹介する。
図18は、実施形態に係るデータ取得装置9を示す図である。
図1に示したように、データ取得装置9は、撮影装置7とともに、距離センサ8aを備えており、本実施形態では、距離センサ8aによって取得されたセンサデータに基づき、撮影装置7におけるシャインプルーフ角θが設定されている。
図18(a)では、移動体6である自動車の屋根(ルーフ)に撮影装置7および距離センサ8aを載せた構成を示す。距離センサ8aは、移動体6の移動方向に垂直な断面において360度の距離情報を取得可能である。距離センサ8aは、撮影装置7よりも高い位置に配置されてもよいが、撮影装置7から斜面80までの距離Dを正確に測定するためには、撮影装置7と同じ高さに配置されることが好ましい。
図18(b)は、図18(a)の上面図であり、移動体6の移動方向に沿って、距離センサ8aと撮影装置7は異なる位置に配置されている。
図19は、データ取得装置9の処理を示すフローチャートである。
図19(a)において、図6に示したセンサデータ取得部96は、距離センサ8aによって取得されたセンサデータに基づき、斜面80の三次元情報を取得する(ステップS101)。
図6に示した算出部92は、ステップS101で取得した三次元情報に基づき、斜面80の傾斜角80a、および撮影装置7から斜面80への距離Dを算出する(ステップS102)。
続いて、算出部92は、ステップS102で算出した傾斜角80a、および距離Dに基づき、シャインプルーフ角θを算出する(ステップS103)。
そして、図6に示した撮影装置制御部93は、ステップS103で算出されたシャインプルーフ角θになるように、撮影レンズ700とボディ720のアタッチメントをアクチュエータで駆動して、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を変更する(ステップS104)。
図19(b)は、図19(a)に対する変形例であり、センサデータ取得部96は、距離センサ8aによって取得されたセンサデータに基づき、斜面80の三次元情報を取得するとともに、GNSSセンサ8bによって計測された測位データに基づき、位置情報を取得する(ステップS111)。
算出部92は、ステップS111で取得した三次元情報に基づき、斜面80の傾斜角80a、および撮影装置7から斜面80への距離Dを算出する(ステップS112)。
続いて、算出部92は、ステップS112で算出した傾斜角80a、および距離Dに基づき、シャインプルーフ角θを算出する(ステップS113)。
図6に示した記憶・読出部99は、ステップS111で取得した位置情報を対応づけて、ステップS113で算出したシャインプルーフ角θを記憶部9000に記憶させる(ステップS114)。
記憶・読出部99は、位置情報に基づき、ステップS114で記憶されたシャインプルーフ角θを記憶部9000から読み出して、撮影装置制御部93は、読み出されたステップS103で算出されたシャインプルーフ角θになるように、撮影レンズ700とボディ720のアタッチメントをアクチュエータで駆動して、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を変更する(ステップS115)。
以上において、撮影装置制御部93は、シャインプルーフ角θを変更する角度変更部の一例である。
なお、ステップS104およびステップS115に代えて、算出されたシャインプルーフ角θになるように、撮影レンズ700とボディ720のアタッチメントを人手で調整して、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を変更してもよい。
また、距離センサ8aによって取得されたセンサデータは通信ネットワーク100を介して、評価装置300等に転送され、評価装置300等によって斜面80の傾斜角80a、および撮影装置7から斜面80への距離Dを算出しても良い。
そして、距離センサ8aは移動体6に搭載されている事が望ましいが、必ずしもそうでなくてもよい。人間が法面に赴いて、道路から距離センサ8aによって法面の形状や車道から法面の距離を測定し、評価装置300等にて分析し、シャインプルーフ角を設定する方法でもよい。
■実施例1
実施例1の移動体システム60は、
・移動体6として普通自動車
・撮影装置7を1台(撮影レンズ700の焦点距離35mm、撮影レンズ700は地面に水平に配置)
・距離センサ8aを1台
・記憶部9000として記録保持装置
・GNSSセンサ8bとしてGNSS信号受信機(衛星測位装置)
によって構成され、加えてオフィスに設置された
・データ処理手段
を有する状態検査システム1である。
なお上記構成とは別途、普通自動車はドライブレコーダー用の撮影装置7を備えていても良い。
距離センサ8aによって取得されたセンサデータに基づき、撮影装置7から斜面80までの距離Dが4mと算出され、斜面80の傾斜角80aが60°と算出されれば、撮影レンズ700の焦点距離が35mmであり、撮影レンズ700を地面と水平に配置しているため、式1からシャインプルーフ角θは0.29°と設定される。
TAN(θ)=β×TAN(α)…式1
・θ…0.29°
・α…90-60=30°
・β…35mm÷4000mm=0.0088
この構成にすることで、走行しながら法面の3次元形状を把握すると同時に、道路に対して傾いている法面全体にピントが合った画像を取得可能となる。また、衛星測位装置を搭載することで、取得したデータが地図上のどの場所で取得したかが記録され、地図情報ごとに法面をリスト化することで、毎年あるいは数年おきのデータ取得による法面の経年変化観察が容易になる。
図20および図21は、実施形態における画像処理の説明図である。
図20(a)は、図16(a)でも説明した一般的な撮影装置7を示し、図20(b)は、図20(a)に示した撮影装置7により撮影された画像を示す。
図20(a)に示す撮影装置7が、正対する「Aという文字の記載された長方形の平面」を撮影する場合、イメージセンサ740は、当然ながら長方形の画像を取得する。
図21(a)は、図17(a)でも説明した本実施形態に係る撮影装置7を示し、図21(b)は、図21(a)に示した撮影装置7により撮影された画像を示す。
図21(a)に示す撮影装置7が、正対する「Aという文字の記載された長方形の平面」を撮影する場合、シャインプルーフ角θに起因して、イメージセンサ740が取得する画像は台形形状になる。
すなわち、図21(a)において、平面上で「上」と書いてある位置からの光線と、「下」と書いてある位置からの光線は、撮影レンズ700までは線対称であるが、イメージセンサ740が傾いているため、「上」の位置からイメージセンサ740までの距離が短く、「下」の位置からイメージセンサ740までの距離が長くなる。このため、取得した画像が台形形状になってしまう。
この場合、距離センサ8aによって撮影装置7から斜面80までの距離Dが既知であり、撮影レンズ700の焦点距離も既知、イメージセンサ740の傾きに対応するシャインプルーフ角θも既知であるため、どの程度の台形形状になるか計算は容易である。
データ処理手段にて、既知の情報から、台形形状を長方形に戻す画像処理を行うことで、撮影装置7を使うことによる不自然な台形ゆがみを取り除くことができる。ただし実施例1においては、シャインプルーフ角θ0.87°による台形ゆがみは小さな量であり、画像処理は必ずしも必要ない。画像処理の要・不要は、シャインプルーフ角θの大小や、最終的に作成する調査資料に求める基準によって決めるのが妥当である。
図22は、実施形態に係るデータ取得装置9の変形例を示す図である。
データ取得装置9は、撮影装置7として第1、第2の撮影装置71、72と、距離センサ8aを備えており、本実施形態では、距離センサ8aによって取得されたセンサデータに基づき、第1、第2の撮影装置71、72のそれぞれにおけるシャインプルーフ角θが設定されている。
■実施例2
実施例2の移動体システム60は、
・移動体6として普通自動車
・撮影装置7は、第1、第2の撮影装置71、72を含む
第1の撮影装置71は、撮影レンズ700の焦点距離35mm、撮影レンズ700は地面に水平に配置
第2の撮影装置72は、撮影レンズ700の焦点距離35mm、撮影レンズ700は地面に対して30°あおり(上空側を向けている状態)
・距離センサ8aを1台
・記憶部9000として記録保持装置
・GNSSセンサ8bとしてGNSS信号受信機(衛星測位装置)
によって構成され、移動体6内に設置された
・データ処理手段の一例としてセンサデータ取得部96および算出部92
を有する状態検査システム1である。
実施例1に対して、実施例2で撮影装置7を増加させる理由は、法面を撮影するにあたって、1つの撮影装置7では全体を写しきれない場合があるからである。
第1の撮影装置71に搭載する撮影レンズ700の焦点距離を短くする(広角レンズにする)、あるいは斜面80までの距離Dを長くすることで、法面全体を写し込むことは可能であるが、そうすることで法面上の変状(ひび割れや剥離など)を細かく高精細に写し込む能力が落ちてしまう。
この場合、結果として画像は得られたが大きな変状(崩壊など)しか判別できない画像しか得られなくなってしまう。
一定以上の細かさ、例えば1cmのひび割れ以上は判別できる解像度を得るためには、複数の撮影装置71、72を用いて、1つの法面の撮影領域を分担する必要がある。
実施例2における撮影装置71の撮影領域は、実施例1の撮影範囲と同じとした。D1=4m、傾斜角80a=60°、撮影レンズ700の傾きは地面と水平なので撮影レンズ700中心軸700Cと斜面80のなす角度α1=30°であり、実施例1と全く同じである。
一方で撮影装置72は、地面に対して撮影レンズ700を30°だけ上空側にあおっている。そして、傾斜角80a=60°であるため、撮影レンズ700中心軸700Cと斜面80のなす角度α2=90-30=60°である。
また、第2の撮影装置72から斜面80までの距離D2は、地面に水平方向において距離センサ8aで取得した距離D2‘=7mと、第2の撮影装置72のあおり角30°から、算出部92によって算出される。すなわち、D2=7÷(cos(30°))=8.1mである。
第2の撮影装置72のシャインプルーフ角θ2は、式1から以下のように求められる。
TAN(θ)=β×TAN(α)…式1
・θ2…0.43°
・α…60°
・β…35mm÷8100mm=0.0043
このように、斜面80の傾斜角80aが一定であっても、第1、第2の撮影装置71、72のそれぞれのシャインプルーフ角θは異なっている。
以上の説明から、同じ普通自動車に、同じ焦点距離の撮影レンズ700を付けた第1、第2の撮影装置71、72を、道路から法尻(法面と道路の交点)までの距離を同じにして撮影した場合においても、第1、第2の撮影装置71、72の撮影領域を分担するために、撮影レンズ700の角度を異ならせた場合、第1、第2の撮影装置71、72それぞれのシャインプルーフ角θが異なることを示した。
このように、複数の撮影装置により法面の撮影領域を分担させる場合には、撮影装置ごとにあおり角が異なること、さらに撮影レンズ700の中心軸700C方向において撮影装置から法面までの距離が異なることにより、撮影装置ごとにシャインプルーフ角θを変える必要がある。
この対応を行うことで、法面全体にピントが合った画像を得ることができる。地面から上方の画像を撮ろうとすればするほどシャインプルーフ角θが大きくなることから、上方にいくほど一般的な撮影装置ではピントが合った画像を撮れる範囲が狭くなることがわかる。
第1の撮影装置71のシャインプルーフ角θ1=0.29°、第2の撮影装置72のシャインプルーフ角θ2=0.43°である。
撮影装置7のボディ720と撮影レンズ700を傾けて組み付ける方法として、アタッチメント部材を複数種類用意する方法がある。例えば0.01°ごとにアタッチメント部材を用意すれば、所望のシャインプルーフ角θに応じてアタッチメント部材を選択すればよい。
一方で、この方法では用意するアタッチメント部材が多くなるため、調節式の方がよい場合もある。ダイヤルにシャインプルーフ角θが表示されており、その値に合わせれば所望のシャインプルーフ角θが得られるよう溝や突起を用いた構造体である。
ただ、これには一長一短ある。ダイヤル式のデメリットは、車の振動が多い道路を長距離走ることで、知らぬ間にダイヤルの値が変わっていることである。シャインプルーフ角θごとのアタッチメント部材であればこのような問題は発生しない。整備された道路であればこのような問題は発生しないため、道路によって使い分けるとよい。
■実施例3
実施例3の移動体システム60は、第2の撮影装置72の撮影レンズ700以外は全て実施例2と同じとする
・撮影装置7は、第1、第2の撮影装置71、72を含む
第1の撮影装置71は、撮影レンズ700の焦点距離35mm、撮影レンズ700は地面に水平に配置
第2の撮影装置72は、撮影レンズ700の焦点距離55mm、撮影レンズ700は地面に対して30°あおり(上空側を向けている状態)。
第2の撮影装置72の撮影レンズ700の焦点距離は55mmとするが、撮影レンズ700以外は実施例2と同じであるため
・D2=8.1m
・傾斜角80a=60°
この2つは変化しない。
しかし、焦点距離を変えると、シャインプルーフ角θは変化する。シャインプルーフ角θ2は、式1から
TAN(θ)=β×TAN(α)…式1
・θ2…0.67°
・α…60°
・β…55mm÷8100mm=0.0068
このようにシャインプルーフ角θ2は0.67°として求まる。
撮影レンズ700の焦点距離を伸ばす、すなわち望遠レンズにすることによって、法面上の変状(ひび割れや剥離など)がより細かく写せる画像を取得可能となる。
特に法面の上方、頂上の方は撮影装置7からの距離が遠くなるため、望遠レンズを使って、上方でも地面付近と同じように細かい変状が確認できることが望ましい。
一方で、望遠レンズを使うと被写界深度が狭くなることが知られており、より一層本実施形態に係る撮影装置7が求められる。ただし、撮影装置7の角度や位置を変えずとも、レンズを変える場合にはシャインプルーフ角θも変更が必要なことから、本実施例によって例示した。
なお、望遠レンズを使うことで、同じ撮影距離であっても撮影装置7毎に撮影倍率が異なる状態になるから、必要に応じてデータ処理手段による倍率補正が必要となる。具体的には、画像を繋ぐ際に、画像間の重なり部分において縮尺が異なるので、縮小処理が必要となる。
図23は、実施形態に係る撮影装置と距離センサの配置を示す上面図である。
図23(a)に示すように、第1、第2の撮影装置71、72と、距離センサ8aは、地面から同じ高さに並列に配置することが望ましい。
一方、図23(b)に示すように、第1、第2の撮影装置71、72を地面から異なる高さに配置し、距離センサ8aを第1、第2の撮影装置71、72の何れかと同じ高さで並列に配置してもよい。
この場合、距離センサ8aと第1、第2の撮影装置71、72の何れかの高さの違いをデータ処理手段における距離計算に反映すればよいからである。
●移動体システムの変形例
○変形例1○
次に、図24乃至図26を用いて、移動体システム60の変形例について説明する。まず、図24は、変形例1に係る移動体システムを用いて法面状態を検査する様子の一例を示す図である。変形例1に係る移動体システム60は、高所の撮影を可能にするため、データ取得装置9が移動体6の上面に設置したポールに固定されているシステムである。
上述の実施形態の撮影装置7では、地面からの高さが低く、図24に示されているような擁壁の上の小段、法枠の上の小段、またはモルタル吹付の上の小段の撮影を行うことが難しい。また、現在の道路土工構造物の小段は、図24に示されているように、蓋がなされておらず、枯れ葉等が堆積して水路が詰まる不具合が発生するおそれがあり、定期的な清掃を必要とする。そのため、高所からの撮影が可能な変形例1に係る移動体システム60を用いることで、例えば、人間が斜面を登って水路の詰まり具合を確認するのは難しい場合であっても、移動体6の走行動作に伴う撮影処理によって確認することができるので、点検効率が大幅に向上させることができる。
○変形例2○
図25は、変形例2に係る移動体システムを用いて法面状態を点検する様子の一例を示す図である。変形例2に係る移動体システム60(60a,60b)は、例えば、変形例1のポール付き撮影装置でも撮影できないような高所または道路脇より下の盛土法面の撮影を行うために、移動体6の一例として、データ取得装置9を搭載したドローンを用いるシステムである。
移動体6としてのドローンは、撮影装置7だけでなく、距離センサ8a、GNSSセンサ8b、または角度センサ8c等のセンサ装置を備えたデータ取得装置9を搭載することで、移動体6としての車両では評価できなかった高所や盛土の状態評価を行うことができる。特に、盛土や高所は、人間が近接目視に向かうことが困難な場所であり、変形例2のようなドローンによる撮影が望まれる。また、盛土や高所の法面は、木や草といった植生が多く茂っている場所が多い。そのため、データ取得装置9は、広角画像を撮影可能な撮影装置7を備えることが好ましい。
○変形例3○
図26は、変形例3に係る移動体システムを用いて法面状態を点検する様子の一例を示す図である。図26に示されているように、法面は、道路上の構造物であるトンネルや橋梁とは異なり、複雑な構造を持つ。例えば、法面は、斜面が平面ではなくうねっていたり(例えば、岸壁にモルタル吹き付けを行った土工構造物)、植生が生えていたり、金網が貼られていたりする。そのため、変形例3に係る移動体システム60(60a,60b,60c)は、植物や金網等の物体と法面の形状とを区別するため、センサ装置8として、波長情報を取得可能なスペクトルカメラ、赤外線カメラまたは被写界深度拡大カメラ(EDof(Expanded Depth of Field)カメラ)を備える。
また、変形例3に係る移動体システム60は、法面の形状と区別するためのツールだけでなく、データ取得装置9に照明装置を搭載に、天候や陽当たり等の様々な条件下で法面撮影が行える構成にすることが好ましい。この場合の照明装置は、撮影装置7による撮影範囲に対応したエリアを照射するライン照明装置、または撮影装置7およびセンサ装置8と同期させた時分割の照明装置であることが好ましい。
さらに、変形例3に係る移動体システム60によって取得されたデータを処理するために、評価装置3の評価対象データ生成部35は、細かな変状も見逃さないように手振れ補正機能、焦点深度補正機能(ぼけ補正機能)、歪み補正機能またはコントラスト強調機能等の画像処理機能を有していることが好ましい。また、評価対象データ生成部35は、草、苔または金網等の土工構造物上の変状を覆い隠すノイズの削除機能または草などの影と、ひびなどの変状とを判別する機能を有していることが好ましい。このように、状態検査システム1は、変形例3に係る移動体システム60を用いることで、複雑な構造を有する箇所や、草、苔または金網等が存在する箇所においても、法面状態の評価を精度良く行うことができる。
●まとめ●
以上説明したように、本発明の一実施形態に係る撮影装置7は、移動体6に設置され、斜面80を撮影する撮影装置7であって、撮影レンズ700と、イメージセンサ740と、を備え、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を示すシャインプルーフ角θが、撮影レンズ700の中心軸700Cと斜面80のなす角度αに応じて設定されている。これにより、斜面80の広い領域でピントが合った画像を得ることができる。
シャインプルーフ角θは、撮影レンズ700の中心軸700Cと斜面80のなす角度α、および撮影装置7から斜面80までの距離Dに応じて設定される。これにより、撮影装置7から斜面80までの距離Dが異なる場合でも、斜面80の広い領域でピントが合った画像を得ることができる。
シャインプルーフ角θは、また、撮影レンズ700の中心軸700Cと斜面80のなす角度α、および移動体6に対する撮影装置7の高さHに応じて設定される。
移動体6に対する撮影装置7の高さHが異なる場合、撮影装置7から斜面80までの距離Dが異なるが、この場合でも、斜面80の広い領域でピントが合った画像を得ることができる。
撮影装置7は、第1の撮影レンズと、第1のイメージセンサを有する第1の撮影装置71と、第2の撮影レンズと、第2のイメージセンサを有する第2の撮影装置72と、を備え、第1の撮影装置71および第2の撮影装置72は、それぞれ斜面80における異なる領域を撮影し、第1の撮影装置71は、斜面80までの距離Dまたは移動体6に対する高さHが第2の撮影装置72と異なり、シャインプルーフ角θが第2の撮影装置72と異なる。
これにより、斜面における異なる領域のそれぞれについて、斜面80の広い領域でピントが合った画像を得ることができる。なお、第2の撮影装置72は、第1の撮影装置71が撮影する斜面80とは傾斜角80aが異なる斜面80を撮影するものであってもよい。
第1の撮影装置71は、斜面80までの距離Dまたは移動体6に対する高さHが第2の撮影装置72と異なる。
これにより、斜面80における距離または高さが異なる領域のそれぞれについて、斜面80の広い領域でピントが合った画像を得ることができる。
第1の撮影レンズは、焦点距離が第2の撮影レンズと異なる。これにより、斜面80における距離が異なる領域のそれぞれについて、斜面80の広い領域でピントが合った画像を得ることができる。
撮影装置7は、撮影レンズ700の中心軸700Cと斜面80のなす角度α、斜面80までの距離Dまたは移動体6に対する高さHに応じて、シャインプルーフ角θを変更する角度変更部の一例である撮影装置制御部93を備える。
これにより、撮影レンズ700の中心軸700Cと斜面80のなす角度α、斜面80までの距離Dまたは移動体6に対する高さHが異なる場合でも、シャインプルーフ角θを変更することにより、斜面80の広い領域でピントが合った画像を得ることができる。
撮影装置7とセンサ装置8を備えるデータ取得装置9を備え、データ取得装置9は、撮影装置7から斜面80までの距離Dを示す距離情報を取得する距離情報取得部の一例であるセンサデータ取得部96を備え、撮影装置制御部93は、距離情報に基づきシャインプルーフ角θを変更する。
センサデータ取得部96は、投射部から斜面80に投射され、斜面80から反射された光に基づき、距離情報を取得する。
これにより、斜面80までの距離Dに応じてシャインプルーフ角θを変更して、斜面80の広い領域でピントが合った画像を得ることができる。
データ取得装置9は、移動体6の位置を示す位置情報を取得する位置情報取得部の一例であるセンサデータ取得部96を備え、撮影装置制御部93は、位置情報に基づきシャインプルーフ角θを変更する。ここで、位置情報に対応付けてシャインプルーフ角θが記憶されていることが好ましいが、位置情報に対応付けて、撮影装置7から斜面80までの距離Dまたは斜面80の傾斜角80aが記憶されていてもよい。
これにより、移動体6の位置を示す位置情報に応じてシャインプルーフ角θを変更して、斜面80の広い領域でピントが合った画像を得ることができる。
撮影装置7は、撮影レンズ700の中心軸700Cが、移動体6が移動する方向に交差する方向に向くように、移動体6に設置されている。
これにより、移動体6が移動する方向に交差する方向に正対する斜面80について、広い領域でピントが合った画像を得ることができる。
本実施形態に係る撮影システムの一例である移動体システム60は、移動体6と、移動体6に設置され、斜面80を撮影する撮影装置7と、を備え、撮影装置7は、撮影レンズ700と、イメージセンサ740と、を備え、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を示すシャインプルーフ角θが、撮影レンズ700の中心軸700Cと斜面80のなす角度αに応じて設定されている。
本実施形態に係る撮影方法は、移動体6に設置された撮影装置7により、斜面80を撮影する撮影方法であって、撮影装置7は、撮影レンズ700と、イメージセンサ740と、を備え、イメージセンサ740のセンサ面に対する垂線740Pと撮影レンズ700の中心軸700Cとのなす角度を示すシャインプルーフ角θが、撮影レンズ700の中心軸700Cと斜面80のなす角度αに応じて設定されている。
●補足●
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本実施形態における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウエアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP(digital signal processor)、FPGA(field programmable gate array)、SOC(System on a chip)、GPU(Graphics Processing Unit)および従来の回路モジュール等のデバイスを含むものとする。
また、上記で説明した実施形態の各種テーブルは、機械学習の学習効果によって生成されたものでもよく、関連づけられている各項目のデータを機械学習にて分類付けすることで、テーブルを使用しなくてもよい。ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり,コンピュータが,データ識別等の判断に必要なアルゴリズムを,事前に取り込まれる学習データから自律的に生成し,新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。
また、上記で説明した実施形態の各種テーブルは、画像処理手法を用いて生成されたものでもよい。画像処理手法の例としては、エッジ検出や直線検出、2値化処理等である。また、同様に、音声を取り扱う場合は、フーリエ変換等の音声変換手法を用いても良い。
これまで本発明の一実施形態に係る評価システム、状態検査システム、評価方法およびプログラムについて説明してきたが、本発明は、上述した実施形態に限定されるものではなく、他の実施形態の追加、変更または削除等、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。
1 状態検査システム(情報処理システムの一例)
3 評価装置(通信端末、外部装置の一例)
4 評価システム
5 データ管理装置(情報処理装置の一例)
6 移動体
7 撮影装置
7A 撮影画像データ(輝度画像)
8 センサ装置
8A 測距画像データ(三次元点群)
8a 距離センサ(三次元センサの一例)
8b GNSSセンサ
8c 角度センサ(三次元センサの一例)
9 データ取得装置(通信端末の一例)
92 算出部
93 撮影装置制御部(角度変更部の一例)
96 センサデータ取得部(距離情報取得部、位置情報取得部の一例)
31 通信部(受信手段の一例)
32 受付部(操作受付手段の一例)
33 表示制御部(表示制御手段の一例)
35 評価対象データ生成部(評価対象データ生成手段の一例)
36 検出部(検出手段の一例)
38 レポート生成部(評価情報生成手段の一例)
51 通信部(送信手段の一例)
52 判断部(位置生成手段の一例)
54 生成部(画像生成手段の一例)
55 設定部(設定手段の一例)
59 記憶・読出部(記憶制御手段の一例)
60 移動体システム(撮影システムの一例)
71、72 第1、第2の撮影装置
70 撮影範囲
700 撮影レンズ
700C 中心軸
700F 平面
720 ボディ
740 イメージセンサ
740P 垂線
80 斜面
80a 斜面の傾斜角
θ シャインプルーフ角
α 撮影レンズの中心軸と斜面のなす角度
β 横倍率
D 撮影装置から斜面までの距離
H 移動体に対する前記撮影装置の高さ

Claims (13)

  1. 移動体に設置され、斜面を撮影する撮影装置であって、
    撮影レンズと、
    イメージセンサと、を備え、
    前記イメージセンサのセンサ面に対する垂線と前記撮影レンズの中心軸とのなす角度を示すシャインプルーフ角が、前記撮影レンズの中心軸と前記斜面のなす角度に応じて設定されている撮影装置。
  2. 前記撮影レンズの中心軸と前記斜面のなす角度、および前記撮影装置から前記斜面までの距離に応じて、前記シャインプルーフ角が設定される請求項1記載の撮影装置。
  3. 前記撮影レンズの中心軸と前記斜面のなす角度、および前記移動体に対する前記撮影装置の高さに応じて、前記シャインプルーフ角が設定される請求項1または2記載の撮影装置。
  4. 第1の撮影レンズと、第1のイメージセンサを有する第1の撮影装置と、
    第2の撮影レンズと、第2のイメージセンサを有する第2の撮影装置と、を備え、
    前記第1の撮影装置および前記第2の撮影装置は、それぞれ前記斜面における異なる領域を撮影し、前記シャインプルーフ角が異なる請求項1~3の何れか記載の撮影装置。
  5. 前記第1の撮影装置は、前記斜面までの距離または前記移動体に対する高さが前記第2の撮影装置と異なる請求項4記載の撮影装置。
  6. 前記第1の撮影レンズは、焦点距離が前記第2の撮影レンズと異なる請求項4記載の撮影装置。
  7. 前記撮影レンズの中心軸と前記斜面のなす角度、前記斜面までの距離または前記移動体に対する高さに応じて、前記シャインプルーフ角を変更する角度変更部を備えた請求項1~6の何れか記載の撮影装置。
  8. 前記角度変更部は、前記撮影装置から前記斜面までの距離を示す距離情報を取得する距離情報取得部により取得された前記距離情報に基づき前記シャインプルーフ角を変更する、請求項7記載の撮影装置。
  9. 前記距離情報取得部は、
    投射部から前記斜面に投射され、前記斜面から反射された光に基づき、前記距離情報を取得する請求項8記載の撮影装置。
  10. 前記角度変更部は、前記移動体の位置を示す位置情報を取得する位置情報取得部により取得された前記位置情報に基づき前記シャインプルーフ角を変更する、請求項7記載の撮影装置。
  11. 前記撮影レンズの中心軸が、前記移動体が移動する方向に交差する方向に向くように、前記移動体に設置されている請求項1~10の何れか記載の撮影装置。
  12. 移動体と、
    前記移動体に設置され、斜面を撮影する撮影装置と、
    を備える撮影システムであって、
    前記撮影装置は、
    撮影レンズと、
    イメージセンサと、を備え、
    前記イメージセンサのセンサ面に対する垂線と前記撮影レンズの中心軸とのなす角度を示すシャインプルーフ角が、前記撮影レンズの中心軸と前記斜面のなす角度に応じて設定されている撮影システム。
  13. 移動体に設置された撮影装置により、斜面を撮影する撮影方法であって、
    前記撮影装置は、撮影レンズと、イメージセンサと、を備え、
    前記イメージセンサのセンサ面に対する垂線と前記撮影レンズの中心軸とのなす角度を示すシャインプルーフ角が、前記撮影レンズの中心軸と前記斜面のなす角度に応じて設定されている撮影方法。
JP2022044910A 2022-03-22 2022-03-22 撮影装置、撮影システムおよび撮影方法 Pending JP2023139399A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022044910A JP2023139399A (ja) 2022-03-22 2022-03-22 撮影装置、撮影システムおよび撮影方法
US18/185,645 US20230308777A1 (en) 2022-03-22 2023-03-17 Image capturing device, data acquisition unit, image capturing system, and image capturing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022044910A JP2023139399A (ja) 2022-03-22 2022-03-22 撮影装置、撮影システムおよび撮影方法

Publications (1)

Publication Number Publication Date
JP2023139399A true JP2023139399A (ja) 2023-10-04

Family

ID=88096871

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022044910A Pending JP2023139399A (ja) 2022-03-22 2022-03-22 撮影装置、撮影システムおよび撮影方法

Country Status (2)

Country Link
US (1) US20230308777A1 (ja)
JP (1) JP2023139399A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024084873A1 (ja) * 2022-10-19 2024-04-25 株式会社リコー 撮影方法及び情報処理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024084873A1 (ja) * 2022-10-19 2024-04-25 株式会社リコー 撮影方法及び情報処理方法

Also Published As

Publication number Publication date
US20230308777A1 (en) 2023-09-28

Similar Documents

Publication Publication Date Title
Bird et al. Photogrammetric monitoring of small streams under a riparian forest canopy
Esposito et al. Multitemporal monitoring of a coastal landslide through SfM‐derived point cloud comparison
Bates et al. High-resolution LiDAR and photogrammetric survey of the Fumanya dinosaur tracksites (Catalonia): implications for the conservation and interpretation of geological heritage sites
JP2008057994A (ja) 画像処理による水位観測システム
JP2024050847A (ja) 評価装置、状態検査システム、評価方法およびプログラム
US20230308777A1 (en) Image capturing device, data acquisition unit, image capturing system, and image capturing method
US20240040247A1 (en) Method for capturing image, method for processing image, image capturing system, and information processing system
CN116719334A (zh) 一种水库智能巡检系统及方法
Griesbaum et al. Direct local building inundation depth determination in 3-D point clouds generated from user-generated flood images
JP4958802B2 (ja) 露出地層・露出岩盤のスケッチ図作成・記録支援システム
Lascelles et al. Automated digital photogrammetry: a valuable tool for small‐scale geomorphological research for the non‐photogrammetrist?
Semaan et al. Underwater photogrammetric recording at the site of Anfeh, Lebanon
WO2024070532A1 (ja) 情報処理装置、情報処理方法、プログラムおよび情報処理システム
JP2024018910A (ja) 撮影方法、情報処理方法、撮影システムおよび情報処理システム
Casierra et al. Methodology for Infrastructure Site Monitoring using Unmanned Aerial Vehicles (UAVs)
JP7235159B1 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP2023030711A (ja) 評価システム、評価方法およびプログラム
JP2024047548A (ja) 情報処理装置、情報処理方法、プログラムおよび情報処理システム
US20230099282A1 (en) Information processing apparatus, information processing system, information processing method, and non-transitory computer-executable medium
JP2023136509A (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
WO2024084873A1 (ja) 撮影方法及び情報処理方法
WO2021039088A1 (ja) 撮像パラメータ出力方法、及び、撮像パラメータ出力装置
JP6970946B1 (ja) 分布図作成装置、分布図作成方法、及び、プログラム
Soulakellis et al. Synergistic Exploitation of Geoinformation Methods for Post-earthquake 3D Mapping and Damage Assessment
Adjidjonu et al. Optimal UAS Parameters for Aerial Mapping and Modeling

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20231012