JP7195185B2 - Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program - Google Patents

Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program Download PDF

Info

Publication number
JP7195185B2
JP7195185B2 JP2019042872A JP2019042872A JP7195185B2 JP 7195185 B2 JP7195185 B2 JP 7195185B2 JP 2019042872 A JP2019042872 A JP 2019042872A JP 2019042872 A JP2019042872 A JP 2019042872A JP 7195185 B2 JP7195185 B2 JP 7195185B2
Authority
JP
Japan
Prior art keywords
road surface
unit
surface condition
image
measurement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019042872A
Other languages
Japanese (ja)
Other versions
JP2020144079A (en
Inventor
田城 近藤
幸保 川畑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2019042872A priority Critical patent/JP7195185B2/en
Publication of JP2020144079A publication Critical patent/JP2020144079A/en
Application granted granted Critical
Publication of JP7195185B2 publication Critical patent/JP7195185B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Description

本発明は、路面性状計測データに位置情報を対応付けて管理する路面性状計測装置、路面性状計測システム、路面性状計測方法、および路面性状計測プログラムに関する。 The present invention relates to a road surface condition measuring device, a road surface condition measuring system, a road surface condition measuring method, and a road surface condition measuring program that manage position information in association with road surface condition measurement data.

路面の健全度を診断するためのシステムを路面性状計測システムという。路面性状計測システムでは、路面が映った路面画像が用いられ、路面のひび割れ、わだち掘れ、および平たん性が計測される。通常、路面性状計測システムは、計測を開始した地点からの移動距離と対応付けて路面性状計測データを保存する。このため、路面性状計測データと計測場所との紐づけを行う際、計測開始地点と計測ルートを別途データ管理しておく必要がある。 A system for diagnosing the soundness of a road surface is called a road surface condition measurement system. The road surface condition measurement system uses a road surface image showing the road surface to measure cracks, ruts, and evenness of the road surface. Normally, a road surface condition measurement system stores road surface condition measurement data in association with a distance traveled from a point where measurement was started. Therefore, when linking the road surface property measurement data with the measurement location, it is necessary to separately manage the measurement start point and the measurement route.

特許文献1には、位置情報を取得する位置情報計測ユニットと、路面性状を計測する路面性状計測ユニットとを搭載した計測車両が開示されている。 Patent Literature 1 discloses a measurement vehicle equipped with a position information measurement unit that acquires position information and a road surface condition measurement unit that measures road surface conditions.

特開2018-147353号公報JP 2018-147353 A

特許文献1では、路面性状計測データの管理および解析のために、計測車両で取得された路面性状計測データと位置情報を有効活用することができない。 In Patent Literature 1, the road surface condition measurement data and position information acquired by the measurement vehicle cannot be effectively used for management and analysis of the road surface condition measurement data.

本発明に係る路面性状計測システムは、路面性状計測データの管理および解析を容易にすることを目的とする。 An object of the present invention is to facilitate management and analysis of road surface condition measurement data.

本発明の路面性状計測装置は、
路面を走行する計測車両に搭載されたラインカメラであって前記路面を撮像するラインカメラにより撮像されたライン画像を用いて、前記路面の画像を路面画像として成形する画像成形部と、
前記路面画像を複数の単位画像に分割する領域規定部と、
前記路面画像に基づいて、前記複数の単位画像の各単位画像における路面性状を検出し、単位画像と、前記単位画像の路面性状を表す路面性状データと、前記単位画像を撮像した時刻と前記単位画像に撮像された路面の位置と前記単位画像を撮像した計測車両の姿勢とを含む位置姿勢情報とを対応付けた単位路面性状情報を生成する路面性状検出部と
を備えた。
The road surface condition measuring device of the present invention includes:
an image forming unit that forms an image of the road surface as a road surface image using a line image captured by a line camera that is mounted on a measurement vehicle traveling on the road surface and captures the image of the road surface;
an area defining unit that divides the road surface image into a plurality of unit images;
Based on the road surface image, a road surface condition in each unit image of the plurality of unit images is detected, and the unit image, road surface condition data representing the road surface condition of the unit image, the time when the unit image was captured, and the unit. a road surface condition detection unit that generates unit road surface condition information in which position and orientation information including the position of the road surface captured in the image and the orientation of the measurement vehicle that captured the unit image are associated with each other.

本発明に係る路面性状計測装置によれば、路面性状計測データを高精度な位置姿勢情報と対応付けて管理できるので、路面性状計測データの管理および解析を容易にすることができる。 According to the road surface condition measuring apparatus of the present invention, road surface condition measurement data can be managed in association with highly accurate position and orientation information, so management and analysis of road surface condition measurement data can be facilitated.

実施の形態1に係る路面性状計測システムの構成図。1 is a configuration diagram of a road surface condition measuring system according to Embodiment 1; FIG. 路面性状計測ユニットの構成図。The block diagram of a road surface property measurement unit. 路面性状計測ユニットの構成図。The block diagram of a road surface property measurement unit. 実施の形態1に係る路面性状計測装置の機能構成図。1 is a functional configuration diagram of a road surface condition measuring device according to Embodiment 1; FIG. 実施の形態1に係る路面性状計測処理のフロー図。4 is a flowchart of road surface condition measurement processing according to the first embodiment; FIG. 実施の形態1に係る路面画像を複数の単位画像に分割した図。FIG. 4 is a diagram obtained by dividing a road surface image into a plurality of unit images according to the first embodiment; 実施の形態1に係る単位路面性状情報の例を示す模式図。4 is a schematic diagram showing an example of unit road surface condition information according to Embodiment 1. FIG. 実施の形態1において路面種別をユーザに入力させる機能の例。An example of a function for allowing a user to input a road surface type in Embodiment 1. FIG. 実施の形態1において路面種別をユーザに入力させる機能の例。An example of a function for allowing a user to input a road surface type in Embodiment 1. FIG. 実施の形態1に係る路面種別に応じた判定パラメータの可変機能の例。4 is an example of a variable function of determination parameters according to the road surface type according to the first embodiment; 実施の形態1に係る地図重畳部により表示される路面性状画面の例。4 shows an example of a road surface condition screen displayed by a map superimposing unit according to Embodiment 1. FIG. 実施の形態1に係る地図重畳部により表示される路面性状画面の別例。FIG. 10 is another example of a road surface condition screen displayed by the map superimposing unit according to Embodiment 1; FIG. 実施の形態1に係る路面性状トレースの例。An example of a road surface condition trace according to Embodiment 1. FIG.

以下、本発明の実施の形態について、図を用いて説明する。なお、各図中、同一または相当する部分には、同一符号を付している。実施の形態の説明において、同一または相当する部分については、説明を適宜省略または簡略化する。 BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings. In each figure, the same reference numerals are given to the same or corresponding parts. In the description of the embodiments, the description of the same or corresponding parts will be omitted or simplified as appropriate.

実施の形態1.
***構成の説明***
図1は、本実施の形態に係る路面性状計測システム500の構成を示す図である。
路面性状計測システム500は、計測車両200と路面性状計測装置100とを備える。路面性状計測システム500は、路面のひび割れ、わだち掘れ、および平たん性といった項目を計測し、路面の健全度を診断する装置である。路面性状計測システム500は、路面性状を計測する計測車両200と、計測車両200で取得した路面性状計測データ301を編集し、帳票出力する路面性状計測装置100とにより構成される。
具体的には、ひび割れは、50cm四方内の路面のひびの本数をカウントする必要があるため、ラインカメラによる映像取得を行う。路面横断面の凹凸を確認するわだち掘れ、ならびに路面進行方向の平たん度合を確認する平たん性は、一般的に対象物までの距離を計測するレーザスキャナを使用する。
Embodiment 1.
*** Configuration description ***
FIG. 1 is a diagram showing the configuration of a road surface condition measuring system 500 according to this embodiment.
A road surface condition measuring system 500 includes a measurement vehicle 200 and a road surface condition measuring device 100 . The road surface condition measurement system 500 is a device that measures items such as cracks, rutting, and evenness of the road surface, and diagnoses the soundness of the road surface. The road surface condition measurement system 500 is composed of a measurement vehicle 200 that measures road surface conditions, and a road surface condition measurement device 100 that edits road surface condition measurement data 301 acquired by the measurement vehicle 200 and outputs it as a form.
Specifically, for cracks, it is necessary to count the number of cracks on the road surface within a 50 cm square, so image acquisition is performed using a line camera. Rutting to check the unevenness of the cross section of the road surface and flatness to check the degree of flatness in the direction of travel of the road surface generally use a laser scanner that measures the distance to the object.

計測車両200は、位置姿勢計測ユニット210と路面性状計測ユニット220とを備える。計測車両200は、計測車両取得データ300を取得する。計測車両200に搭載された位置姿勢計測ユニット210は、MMS(モービルマッピングシステム)と呼ばれる。位置姿勢計測ユニット210は、MMS計測ユニットとも呼ばれる。
位置姿勢計測ユニット210は、位置姿勢計測データ302を取得するための機器群である。位置姿勢計測データ302は道路地図の作成に必要なデータであり、MMS計測データとも呼ばれる。
路面性状計測ユニット220は、路面性状計測データ301を取得するための機器群である。路面性状計測データ301は路面性状の検査に必要なデータである。
位置姿勢計測データ302および路面性状計測データ301は計測時刻を含んでいる。計測時刻とは、データを得るための計測が行われた時刻である。
The measurement vehicle 200 includes a position/orientation measurement unit 210 and a road surface condition measurement unit 220 . The measurement vehicle 200 acquires measurement vehicle acquisition data 300 . A position and orientation measurement unit 210 mounted on the measurement vehicle 200 is called an MMS (mobile mapping system). The position and orientation measurement unit 210 is also called an MMS measurement unit.
A position and orientation measurement unit 210 is a group of devices for acquiring position and orientation measurement data 302 . The position and orientation measurement data 302 is data necessary for creating a road map, and is also called MMS measurement data.
The road surface condition measurement unit 220 is a device group for acquiring the road surface condition measurement data 301 . The road surface condition measurement data 301 is data necessary for inspecting the road surface condition.
The position/orientation measurement data 302 and the road surface property measurement data 301 contain measurement times. The measurement time is the time when the measurement for obtaining the data was performed.

路面性状計測装置100は、路面性状計測データ301に含まれる複数のライン画像を繋ぎ合わせて路面画像を生成する。ライン画像とは、路面を細い幅で撮影して得られた画像である。路面性状計測装置100は、計測車両200に搭載されていてもよいし、計測車両200以外のコンピュータに搭載されていてもよい。 The road surface condition measuring apparatus 100 connects a plurality of line images included in the road surface condition measurement data 301 to generate a road surface image. A line image is an image obtained by photographing a road surface with a narrow width. The road surface condition measuring device 100 may be mounted on the measurement vehicle 200 or may be mounted on a computer other than the measurement vehicle 200 .

また、路面性状計測装置100は、位置姿勢計測データ302に対する後処理を行って後処理データ303を生成する。後処理データ303は、MMS後処理データとも呼ばれる。位置姿勢計測データ302と後処理データ303とを総称してマッピング計測データともいう。なお、後処理データ303を生成する処理は、計測車両200の位置姿勢計測ユニット210で実施されてもよい。また、後処理データ303を生成する処理は、計測車両200および路面性状計測装置100とは別のコンピュータで実施されてもよい。
路面性状計測装置100は、路面性状計測データ301と位置姿勢計測データ302と後処理データ303とを、それぞれの計測時刻を用いて互いに関連付ける。
The road surface condition measuring apparatus 100 also performs post-processing on the position and orientation measurement data 302 to generate post-process data 303 . Post-processing data 303 is also referred to as MMS post-processing data. The position and orientation measurement data 302 and the post-processing data 303 are also collectively referred to as mapping measurement data. Note that the process of generating the post-processed data 303 may be performed by the position and orientation measurement unit 210 of the measurement vehicle 200 . Further, the process of generating post-processed data 303 may be performed by a computer separate from measurement vehicle 200 and road surface condition measuring apparatus 100 .
The road surface condition measurement device 100 associates the road surface condition measurement data 301, the position/orientation measurement data 302, and the post-processing data 303 with each other using the respective measurement times.

ここで、位置姿勢計測ユニット210の構成を説明する。
位置姿勢計測ユニット210は、受信機とレーザスキャナとラインカメラとIMU(inertial measurement unit)といった機器を備える。受信機は、測位衛星から発信される測位信号を受信する。受信機によって得られるデータを測位観測データという。レーザスキャナは、路面周辺にレーザ光を照射して路面周辺の地物に対する相対距離および相対方位を計測する。レーザスキャナによって得られるデータを地物距離方位データという。ラインカメラは路面周辺を撮影する。ラインカメラによって得られる画像を撮影画像という。IMUは慣性計測装置の略称である。IMUは、計測車両200の角速度および加速度を計測する。IMUによって得られるデータを慣性計測データという。
位置姿勢計測データ302は、測位観測データと地物距離方位データと撮影画像と慣性計測データとを含む。
Here, the configuration of the position and orientation measurement unit 210 will be described.
The position and orientation measurement unit 210 includes devices such as a receiver, a laser scanner, a line camera, and an IMU (inertial measurement unit). The receiver receives positioning signals transmitted from positioning satellites. The data obtained by the receiver is called positioning observation data. The laser scanner irradiates a laser beam around the road surface to measure the relative distance and relative azimuth with respect to features around the road surface. The data obtained by the laser scanner is called feature distance and direction data. The line camera takes pictures of the road surface. An image obtained by the line camera is called a photographed image. IMU is an abbreviation for inertial measurement unit. The IMU measures the angular velocity and acceleration of measurement vehicle 200 . The data obtained by the IMU is called inertial measurement data.
The position and orientation measurement data 302 includes positioning observation data, feature distance and direction data, captured images, and inertial measurement data.

図2および図3に基づいて、路面性状計測ユニット220の構成を説明する。
路面性状計測ユニット220は、高精度レーザ331とラインカメラ332とレーザ照明333と変位計334とを備える。
高精度レーザ331は、路面の各地点に向けてレーザ光を照射して路面の各地点に対する相対距離および相対方位を計測する。高精度レーザ331によって得られるデータを路面距離方位データという。路面距離方位データにより、路面性状のうちわだち掘れの状態が取得できる。
ラインカメラ332は、路面を走行する計測車両200に搭載され、路面を撮像する。ラインカメラ332は、路面を細い幅で1ラインずつ撮影する。ラインカメラ332によって得られる画像をライン画像という。路面画像は、複数のライン画像を繋ぎ合わせることによって得られる画像である。ラインカメラ332とレーザ照明333から得られた路面画像により、路面性状のひび割れの状態が取得できる。
変位計334は路面との距離を計測する。変位計334によって得られるデータを路面距離データという。路面距離データにより、路面性状の平たん性の状態が取得できる。
路面性状計測データ301には、路面距離方位データと路面画像と路面距離データが含まれる。
The configuration of the road surface condition measurement unit 220 will be described based on FIGS. 2 and 3. FIG.
The road surface condition measurement unit 220 includes a high precision laser 331 , a line camera 332 , a laser illumination 333 and a displacement meter 334 .
The high-precision laser 331 irradiates laser light toward each point on the road surface to measure the relative distance and relative azimuth with respect to each point on the road surface. The data obtained by the high-precision laser 331 is called road surface distance and direction data. From the road surface distance and direction data, the rutting state of the road surface properties can be obtained.
The line camera 332 is mounted on the measurement vehicle 200 traveling on the road surface and captures an image of the road surface. The line camera 332 photographs the road surface line by line with a narrow width. An image obtained by the line camera 332 is called a line image. A road surface image is an image obtained by connecting a plurality of line images. A road surface image obtained from the line camera 332 and the laser illumination 333 can be used to acquire the state of cracks in the road surface properties.
A displacement meter 334 measures the distance to the road surface. Data obtained by the displacement meter 334 is called road surface distance data. From the road surface distance data, the flatness of the road surface properties can be obtained.
The road surface condition measurement data 301 includes road distance and direction data, a road surface image, and road surface distance data.

計測車両200は、MMSといった位置姿勢計測ユニット210を搭載しており、各GPS時刻における正確な位置姿勢情報を計測する。このため、路面性状計測システム500では、路面性状計測データの測定時刻から、位置姿勢情報を特定できる。すなわち、路面性状計測システム500では、MMSによる高精度な位置姿勢情報と、道路縦横断勾配、わだち堀れ量、および路面画像といった路面性状計測データとを融合できる。よって、路面性状計測システム500では、路面性状計測データとMMS計測データとの融合により、路面性状計測データと地図情報とを重畳することが可能となる。 The measurement vehicle 200 is equipped with a position and orientation measurement unit 210 such as MMS, and measures accurate position and orientation information at each GPS time. Therefore, in the road surface condition measurement system 500, the position and orientation information can be specified from the measurement time of the road surface condition measurement data. That is, in the road surface condition measurement system 500, highly accurate position and orientation information obtained by MMS can be combined with road surface condition measurement data such as the road vertical and cross slope, the amount of rutting, and the road surface image. Therefore, in the road surface condition measurement system 500, it is possible to superimpose the road surface condition measurement data and the map information by fusing the road surface condition measurement data and the MMS measurement data.

図4を用いて、本実施の形態に係る路面性状計測装置100の機能構成について説明する。 A functional configuration of the road surface condition measuring device 100 according to the present embodiment will be described with reference to FIG.

路面性状計測装置100は、コンピュータである。路面性状計測装置100は、プロセッサ910を備えるとともに、メモリ921、補助記憶装置922、入力インタフェース930、出力インタフェース940、および通信装置950といった他のハードウェアを備える。プロセッサ910は、信号線を介して他のハードウェアと接続され、これら他のハードウェアを制御する。 The road surface condition measuring device 100 is a computer. The road surface condition measuring device 100 includes a processor 910 and other hardware such as a memory 921 , an auxiliary storage device 922 , an input interface 930 , an output interface 940 and a communication device 950 . The processor 910 is connected to other hardware via signal lines and controls these other hardware.

路面性状計測装置100は、機能要素として、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150と記憶部160とを備える。記憶部160には、路面性状計測データ301、位置姿勢計測データ302、後処理データ303、地図情報161、および単位路面性状情報162が記憶される。 The road surface condition measuring device 100 includes an image collecting unit 110, an image forming unit 120, an area defining unit 130, a road surface condition detecting unit 140, a map superimposing unit 150, and a storage unit 160 as functional elements. The storage unit 160 stores road surface condition measurement data 301 , position/orientation measurement data 302 , post-processing data 303 , map information 161 , and unit road surface condition information 162 .

画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能は、ソフトウェアにより実現される。記憶部160は、メモリ921に備えられる。 The functions of the image acquisition unit 110, the image formation unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposition unit 150 are implemented by software. The storage unit 160 is provided in the memory 921 .

プロセッサ910は、路面性状計測プログラムを実行する装置である。路面性状計測プログラムは、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能を実現するプログラムである。
プロセッサ910は、演算処理を行うIC(Integrated Circuit)である。プロセッサ910の具体例は、CPU(Central Processing
Unit)、DSP(Digital Signal Processor)、GPU(Graphics Processing Unit)である。
Processor 910 is a device that executes a road surface property measurement program. The road surface condition measurement program is a program that implements the functions of the image collection unit 110 , the image formation unit 120 , the area definition unit 130 , the road surface condition detection unit 140 and the map superimposition unit 150 .
The processor 910 is an IC (Integrated Circuit) that performs arithmetic processing. A specific example of the processor 910 is a CPU (Central Processing
Unit), DSP (Digital Signal Processor), and GPU (Graphics Processing Unit).

メモリ921は、データを一時的に記憶する記憶装置である。メモリ921の具体例は、SRAM(Static Random Access Memory)、あるいはDRAM(Dynamic Random Access Memory)である。
補助記憶装置922は、データを保管する記憶装置である。補助記憶装置922の具体例は、HDDである。また、補助記憶装置922は、SD(登録商標)メモリカード、CF、NANDフラッシュ、フレキシブルディスク、光ディスク、コンパクトディスク、ブルーレイ(登録商標)ディスク、DVDといった可搬記録媒体であってもよい。なお、HDDは、Hard Disk Driveの略語である。SD(登録商標)は、Secure Digitalの略語である。CFは、CompactFlash(登録商標)の略語である。DVDは、Digital Versatile Diskの略語である。
The memory 921 is a storage device that temporarily stores data. A specific example of the memory 921 is SRAM (Static Random Access Memory) or DRAM (Dynamic Random Access Memory).
Auxiliary storage device 922 is a storage device that stores data. A specific example of the auxiliary storage device 922 is an HDD. Also, the auxiliary storage device 922 may be a portable recording medium such as an SD (registered trademark) memory card, CF, NAND flash, flexible disk, optical disk, compact disk, Blu-ray (registered trademark) disk, or DVD. Note that HDD is an abbreviation for Hard Disk Drive. SD® is an abbreviation for Secure Digital. CF is an abbreviation for CompactFlash®. DVD is an abbreviation for Digital Versatile Disk.

入力インタフェース930は、マウス、キーボード、あるいはタッチパネルといった入力装置と接続されるポートである。また、入力インタフェース930は、路面性状計測データを取得するための記録装置と接続されるポートとしても使用される。入力インタフェース930は、具体的には、USB(Universal Serial Bus)端子である。なお、入力インタフェース930は、LAN(Local Area Network)と接続されるポートであってもよい。
出力インタフェース940は、ディスプレイといった出力機器のケーブルが接続されるポートである。出力インタフェース940は、具体的には、ディスプレイポートまたはHDMI(登録商標)(High Definition Multimedia Interface)端子である。ディスプレイは、具体的には、LCD(Liquid Crystal Display)である。
The input interface 930 is a port connected to an input device such as a mouse, keyboard, or touch panel. The input interface 930 is also used as a port connected to a recording device for acquiring road surface condition measurement data. The input interface 930 is specifically a USB (Universal Serial Bus) terminal. The input interface 930 may be a port connected to a LAN (Local Area Network).
The output interface 940 is a port to which a cable of an output device such as a display is connected. The output interface 940 is specifically a display port or HDMI (registered trademark) (High Definition Multimedia Interface) terminal. The display is specifically an LCD (Liquid Crystal Display).

通信装置950は、レシーバとトランスミッタを有する。通信装置950は、無線で、LAN、インターネット、あるいは電話回線といった通信網に接続している。通信装置950は、具体的には、通信チップまたはNIC(Network Interface Card)である。 Communication device 950 has a receiver and a transmitter. The communication device 950 is wirelessly connected to a communication network such as a LAN, the Internet, or a telephone line. The communication device 950 is specifically a communication chip or a NIC (Network Interface Card).

路面性状計測プログラムは、プロセッサ910に読み込まれ、プロセッサ910によって実行される。メモリ921には、路面性状計測プログラムだけでなく、OS(Operating System)も記憶されている。プロセッサ910は、OSを実行しながら、路面性状計測プログラムを実行する。路面性状計測プログラムおよびOSは、補助記憶装置922に記憶されていてもよい。補助記憶装置922に記憶されている路面性状計測プログラムおよびOSは、メモリ921にロードされ、プロセッサ910によって実行される。なお、路面性状計測プログラムの一部または全部がOSに組み込まれていてもよい。 The road surface condition measurement program is read into processor 910 and executed by processor 910 . The memory 921 stores not only the road surface condition measurement program but also an OS (Operating System). The processor 910 executes the road surface condition measurement program while executing the OS. The road surface condition measurement program and OS may be stored in the auxiliary storage device 922 . The road surface condition measurement program and OS stored in the auxiliary storage device 922 are loaded into the memory 921 and executed by the processor 910 . Part or all of the road surface condition measurement program may be incorporated in the OS.

路面性状計測装置100は、プロセッサ910を代替する複数のプロセッサを備えていてもよい。これら複数のプロセッサは、路面性状計測プログラムの実行を分担する。それぞれのプロセッサは、プロセッサ910と同じように、路面性状計測プログラムを実行する装置である。 The road surface condition measuring device 100 may include a plurality of processors that substitute for the processor 910 . These multiple processors share the execution of the road surface condition measurement program. Each processor, like the processor 910, is a device that executes a road surface condition measurement program.

路面性状計測プログラムにより利用、処理または出力されるデータ、情報、信号値および変数値は、メモリ921、補助記憶装置922、または、プロセッサ910内のレジスタあるいはキャッシュメモリに記憶される。 Data, information, signal values and variable values that are used, processed or output by the road surface condition measurement program are stored in the memory 921, the auxiliary storage device 922, or the register or cache memory within the processor 910. FIG.

画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の各部の「部」を「処理」、「手順」あるいは「工程」に読み替えてもよい。また、画像収集処理と画像成形処理と領域規定処理と路面性状検出処理と地図重畳処理の「処理」を「プログラム」、「プログラムプロダクト」または「プログラムを記録したコンピュータ読取可能な記録媒体」に読み替えてもよい。
路面性状計測プログラムは、上記の各部の「部」を「処理」、「手順」あるいは「工程」に読み替えた各処理、各手順あるいは各工程を、コンピュータに実行させる。また、路面性状計測方法は、路面性状計測装置100が路面性状計測プログラムを実行することにより行われる方法である。
路面性状計測プログラムは、コンピュータ読取可能な記録媒体に格納されて提供されてもよい。また、路面性状計測プログラムは、プログラムプロダクトとして提供されてもよい。
The "part" of each part of the image collecting part 110, the image forming part 120, the area defining part 130, the road surface condition detecting part 140, and the map superimposing part 150 may be read as "processing", "procedure" or "process". In addition, "processing" of image collection processing, image formation processing, area definition processing, road surface condition detection processing, and map superimposition processing should be read as "program", "program product", or "computer-readable recording medium recording the program". may
The road surface condition measurement program causes the computer to execute each process, each procedure, or each process, where the above "part" is read as "process,""procedure," or "process." Moreover, the road surface property measuring method is a method performed by the road surface property measuring device 100 executing a road surface property measuring program.
The road surface condition measurement program may be provided by being stored in a computer-readable recording medium. Also, the road surface condition measurement program may be provided as a program product.

***動作の説明***
図5は、本実施の形態に係る路面性状計測処理S100のフロー図である。
路面性状計測装置100は、路面性状計測ユニット220により計測された路面性状計測データ301と、位置姿勢計測ユニット210により計測された位置姿勢計測データ302とを用いて、路面性状を解析する路面性状計測処理S100を実施する。
路面性状計測処理S100は、画像収集処理S110、画像成形処理S120、領域規定処理S130、路面性状検出処理S140、および地図重畳処理S150を備える。
***Description of operation***
FIG. 5 is a flowchart of road surface condition measurement processing S100 according to the present embodiment.
The road surface condition measurement device 100 uses road surface condition measurement data 301 measured by the road surface condition measurement unit 220 and position/orientation measurement data 302 measured by the position/orientation measurement unit 210 to analyze the road condition. Processing S100 is performed.
The road surface condition measurement process S100 includes an image acquisition process S110, an image formation process S120, an area definition process S130, a road surface condition detection process S140, and a map superimposition process S150.

ステップS110において、画像収集部110は、ラインカメラ332により撮像された路面のライン画像を収集する。具体的には、路面性状計測装置100は、通信装置950あるいは入力インタフェース930を介して、路面性状計測ユニット220により計測された路面性状計測データ301を取得し、メモリ921に記憶する。路面性状計測データ301には、ラインカメラ332により撮像された路面のライン画像が含まれる。画像収集部110は、メモリ921に記憶されたライン画像を収集する。 In step S<b>110 , the image collection unit 110 collects line images of the road surface captured by the line camera 332 . Specifically, the road surface condition measuring device 100 acquires the road surface condition measurement data 301 measured by the road surface condition measuring unit 220 via the communication device 950 or the input interface 930 and stores it in the memory 921 . The road surface property measurement data 301 includes a line image of the road surface captured by the line camera 332 . The image acquisition unit 110 acquires line images stored in the memory 921 .

ステップS120において、画像成形部120は、ラインカメラ332により撮像されたライン画像を用いて、路面の画像を路面画像21として成形する。具体的には、画像成形部120は、ライン画像を束ねて、4メートル四方の路面画像21を成形する。 In step S<b>120 , the image forming section 120 forms the image of the road surface as the road surface image 21 using the line image captured by the line camera 332 . Specifically, the image forming section 120 bundles the line images to form the road surface image 21 of 4 meters square.

ステップS130において、領域規定部130は、路面画像21を複数の単位画像22に分割する。具体的には、領域規定部130は、路面の白線211を検出し、検出した白線211に基づいて、路面画像21を複数の単位画像22に分割する。すなわち、領域規定部130は、検出した白線211を基準として、路面画像21を複数の単位画像22に分割する。領域規定部130は、白線自動抽出処理により、路面画像21から白線211を検出する。そして、領域規定部130は、路面画像21における白線211の内側のエリアを、データを取得するエリアと特定する。領域規定部130は、データを取得するエリアを複数の単位画像22に分割する。単位画像22は、具体的には、50センチメートル四方の画像である。 In step S<b>130 , the area defining section 130 divides the road surface image 21 into a plurality of unit images 22 . Specifically, the area definition unit 130 detects the white lines 211 on the road surface, and divides the road surface image 21 into a plurality of unit images 22 based on the detected white lines 211 . That is, the area definition unit 130 divides the road surface image 21 into a plurality of unit images 22 based on the detected white line 211 . The area definition unit 130 detects the white line 211 from the road surface image 21 by the automatic white line extraction process. Then, the area definition unit 130 identifies the area inside the white line 211 in the road surface image 21 as the area from which data is to be acquired. The area definition unit 130 divides the area from which data is to be acquired into a plurality of unit images 22 . Specifically, the unit image 22 is a 50 cm square image.

図6は、本実施の形態に係る路面画像21を複数の単位画像22に分割した図の一部である。
図6の路面画像21では、路面画像21の白線211の右端を基準として、路面画像21が複数の単位画像22に分割されている。
FIG. 6 shows part of a diagram in which the road surface image 21 according to the present embodiment is divided into a plurality of unit images 22. As shown in FIG.
In the road surface image 21 of FIG. 6, the road surface image 21 is divided into a plurality of unit images 22 with the right end of the white line 211 of the road surface image 21 as a reference.

ステップS140において、路面性状検出部140は、路面画像21に基づいて、複数の単位画像の各単位画像22における路面性状を検出する。そして、路面性状検出部140は、単位画像22と、単位画像22の路面性状を表す路面性状データ221と、位置姿勢情報222とを対応付けた単位路面性状情報162を生成する。位置姿勢情報222には、単位画像22を撮像した時刻と単位画像に撮像された路面の位置と単位画像を撮像した計測車両の姿勢とが含まれる。具体的には、路面性状検出部140は、路面性状として路面のひび割れを検出する。そして、路面性状検出部140は、単位画像22と、単位画像22におけるひび割れの数と、単位画像22の位置姿勢情報222とを含む単位路面性状情報162を生成する。単位画像22におけるひび割れの数を検出する処理は、ひび割れ自動処理とも呼ばれる。 In step S<b>140 , the road surface condition detection unit 140 detects the road surface condition in each unit image 22 of the plurality of unit images based on the road surface image 21 . The road surface condition detection unit 140 then generates unit road surface condition information 162 in which the unit image 22 , road surface condition data 221 representing the road surface condition of the unit image 22 , and position/orientation information 222 are associated with each other. The position/orientation information 222 includes the time when the unit image 22 was captured, the position of the road surface captured in the unit image, and the attitude of the measurement vehicle that captured the unit image. Specifically, the road surface condition detection unit 140 detects cracks in the road surface as the road surface condition. The road surface condition detection unit 140 then generates unit road surface condition information 162 including the unit image 22 , the number of cracks in the unit image 22 , and the position and orientation information 222 of the unit image 22 . The process of detecting the number of cracks in the unit image 22 is also called automatic crack processing.

図7は、本実施の形態に係る単位路面性状情報162の例を示す模式図である。
単位路面性状情報162には、単位画像22と、単位画像22の路面性状データ221と、位置姿勢情報222とが対応付けられている。なお、単位路面性状情報162における位置姿勢情報222は、単位画像22を特定することができれば単位画像22おけるどの位置を表わしていてもよい。また、単位路面性状情報162は、単位画像22と、路面性状データ221と、位置姿勢情報222とを対応付けることができればどのような形式で構成されていてもよい。
FIG. 7 is a schematic diagram showing an example of the unit road surface condition information 162 according to this embodiment.
The unit road surface condition information 162 is associated with the unit image 22 , the road surface condition data 221 of the unit image 22 , and the position/orientation information 222 . Note that the position/orientation information 222 in the unit road surface condition information 162 may represent any position in the unit image 22 as long as the unit image 22 can be specified. Further, the unit road surface condition information 162 may be configured in any format as long as the unit image 22, the road surface condition data 221, and the position/orientation information 222 can be associated with each other.

ここで、ひび割れ自動処理の概要について説明する。
2値化によるひび割れの検出では、路面撮影の色むら、路面の粒度の粗さ、粗骨材、あるいは白線といった要因により、1つのひび割れが複数のひび割れとして過検出される場合がある。また、シミあるいは粗骨材といった要因による誤検出の発生により、ひび割れの数といった路面性状が正確に把握できない場合がある。
そこで、本実施の形態では、ひび割れ自動処理を以下のように実施する。
(1)路面画像の特徴量を算出し、アスファルトあるいはコンクリートといった路面種別、および路面の骨材粒度の大きさを判定し、ひび割れを抽出する際の判定パラメータを決定する。
(2)路面画像の2値化により抽出されたひび割れの領域に対しそれぞれの領域の面積、領域間の距離、および領域のお互いの角度(傾き)の差による領域の統合判定を行うことで途切れた領域として抽出されたひび割れの領域を1つのひび割れとして検出を行えるようにする。
(3)路面画像の2値化により抽出された背景輝度より低輝度の領域の面積とその領域に外接する円の面積の比より粗骨材の領域を抽出し、ひび割れの領域から除外する。
(4)ひび割れ抽出に用いられる各種判定パラメータについて、様々な路面状態に対する、多数の学習用画像、すなわち正解データといった情報を作成し、学習させ判定パラメータを更新することで、様々な路面の状況の変化あるいは路面の撮影条件に対応できるようにする。
Here, an outline of the crack automatic processing will be described.
In the detection of cracks by binarization, one crack may be over-detected as multiple cracks due to factors such as color unevenness in photographing the road surface, roughness of the grain size of the road surface, coarse aggregate, or white lines. In addition, due to erroneous detection caused by factors such as stains or coarse aggregate, road surface properties such as the number of cracks may not be accurately grasped.
Therefore, in the present embodiment, automatic crack processing is performed as follows.
(1) Calculate the feature amount of the road surface image, determine the road surface type such as asphalt or concrete, determine the size of the aggregate particle size of the road surface, and determine the determination parameters for extracting cracks.
(2) For the crack areas extracted by binarizing the road surface image, the area of each area, the distance between the areas, and the difference in the angle (inclination) between the areas are integrated and determined. A crack area extracted as a crack area can be detected as one crack.
(3) Coarse aggregate regions are extracted from the ratio of the area of a region with luminance lower than the background luminance extracted by binarizing the road surface image to the area of the circle circumscribing that region, and excluded from the crack region.
(4) For various determination parameters used for crack extraction, create information such as a large number of learning images, that is, correct data, for various road surface conditions, and update the determination parameters by learning, so that various road surface conditions can be obtained. To be able to cope with changes or shooting conditions of a road surface.

また、上記(1)において、路面画像21における路面種別をユーザに入力させる機能を有していてもよい。
図8および図9は、本実施の形態において路面種別をユーザに入力させる機能の一例を示す図である。
路面性状検出部140は、ユーザに路面種別を選択させる路面種別選択画面141をディスプレイに表示する。ユーザは、路面画像21の範囲を指定して、路面種別選択画面141を介して、路面種別を指定する。路面性状検出部140は、指定された路面種別に基づいて、ひび割れの数を検出する際の判定パラメータを決定する。また、その他が指定された場合には、路面性状検出部140は、路面種別選択画面141を介して、ユーザに排水性、透水性、および保水性といった路面情報を指定させてもよい。路面性状検出部140は、これらの路面情報から判定パラメータを決定してもよい。
また、路面性状検出部140は、路面画像21から自動的に路面種別を判定してもよい。
路面性状検出部140は、ユーザにより指定された路面種別、あるいは自動的に判定した路面種別に基づいて、判定パラメータを決定する。
Further, in (1) above, a function may be provided to allow the user to input the road surface type in the road surface image 21 .
8 and 9 are diagrams showing an example of a function for allowing the user to input the road surface type in this embodiment.
The road surface property detection unit 140 displays on the display a road surface type selection screen 141 that allows the user to select a road surface type. The user designates the range of the road surface image 21 and designates the road surface type via the road surface type selection screen 141 . The road surface condition detection unit 140 determines a determination parameter for detecting the number of cracks based on the designated road surface type. Further, when other is specified, the road surface condition detection unit 140 may cause the user to specify road surface information such as drainage, water permeability, and water retention through the road surface type selection screen 141 . The road surface condition detection unit 140 may determine determination parameters from these road surface information.
Further, the road surface condition detection unit 140 may automatically determine the road surface type from the road surface image 21 .
The road surface condition detection unit 140 determines determination parameters based on the road surface type specified by the user or the automatically determined road surface type.

図10は、本実施の形態に係る路面種別に応じた判定パラメータの可変機能の例を示す図である。
図10に示すように、コンクリート、アスファルト混合物、およびポーラスアスファルト混合物といった路面種別ごとに、ひび誤検知および道路シミの影響の大きさが異なる。路面性状検出部140は、ひび誤検知および道路シミの影響の違いを吸収するように、判定パラメータを決定する。
FIG. 10 is a diagram showing an example of a variable function of determination parameters according to the road surface type according to the present embodiment.
As shown in FIG. 10, the magnitude of the crack detection error and the impact of road stains differ for each road surface type, such as concrete, asphalt mixture, and porous asphalt mixture. The road surface condition detection unit 140 determines determination parameters so as to absorb the difference in the effects of crack detection errors and road stains.

ステップS150において、地図重畳部150は、入力インタフェース930を介して地図情報161における位置を表す地図位置データ61を取得する。地図重畳部150は、地図位置データ61により表される位置を含む路面の単位画像22と路面性状データ221と位置姿勢情報222とを、単位路面性状情報162から路面表示情報23として抽出する。そして、地図重畳部150は、路面表示情報23に含まれる情報を地図情報161に重畳してディスプレイに表示する。
地図重畳部150は、地図位置データ61により表される位置を含む単位画像22を地図情報161に重畳して表示する。あるいは、地図重畳部150は、地図位置データ61により表される位置を含む単位画像22における路面性状データ221と位置姿勢情報222とを地図情報161に重畳して表示する。
具体的には、以下の通りである。
In step S<b>150 , the map superimposing unit 150 acquires the map position data 61 representing the position in the map information 161 via the input interface 930 . The map superimposing unit 150 extracts the road surface unit image 22 including the position represented by the map position data 61 , the road surface condition data 221 , and the position/orientation information 222 from the unit road surface condition information 162 as the road surface display information 23 . Then, the map superimposing unit 150 superimposes the information included in the road surface display information 23 on the map information 161 and displays it on the display.
The map superimposing unit 150 superimposes the unit image 22 including the position represented by the map position data 61 on the map information 161 and displays it. Alternatively, the map superimposing unit 150 superimposes the road surface condition data 221 and the position/orientation information 222 in the unit image 22 including the position represented by the map position data 61 on the map information 161 for display.
Specifically, it is as follows.

図11は、本実施の形態に係る地図重畳部150により表示される路面性状画面62の例を示す図である。
地図重畳部150は、ディスプレイに地図情報161を表示し、ユーザに地図上の位置を表す地図位置データ61を入力させる。地図重畳部150は、地図位置データ61に基づいて、地図位置データ61により表される位置周辺の単位画像22の情報を路面表示情報23として、単位路面性状情報162から抽出する。地図位置データ61を基準として抽出する範囲は、予め設定されていてもよい。あるいは、地図重畳部150は、ユーザにより指定された範囲を地図位置データ61として取得し、ユーザにより指定された範囲の単位画像22の情報を、路面表示情報23として単位路面性状情報162から抽出してもよい。
地図重畳部150は、抽出した路面表示情報23を地図情報161に重畳し、路面性状画面62を生成する。
FIG. 11 is a diagram showing an example of road surface condition screen 62 displayed by map superimposing section 150 according to the present embodiment.
The map superimposing unit 150 displays the map information 161 on the display and prompts the user to input the map position data 61 representing the position on the map. Based on the map position data 61 , the map superimposing unit 150 extracts the information of the unit images 22 around the position represented by the map position data 61 from the unit road surface condition information 162 as the road surface display information 23 . The range to be extracted based on the map position data 61 may be set in advance. Alternatively, the map superimposing unit 150 acquires the range specified by the user as the map position data 61, and extracts the information of the unit image 22 in the range specified by the user from the unit road surface condition information 162 as the road surface display information 23. may
The map superimposing unit 150 superimposes the extracted road surface display information 23 on the map information 161 to generate the road surface condition screen 62 .

図11では、地図重畳部150は、路面表示情報23に含まれる路面性状データ221を地図情報161に重畳した路面性状画面62を表示している。地図重畳部150は、ユーザにより指定された地図位置データ61を含む路面表示情報23に含まれる路面性状データ221を地図情報161に重畳する。 In FIG. 11 , the map superimposing unit 150 displays a road surface condition screen 62 in which the road surface condition data 221 included in the road surface display information 23 is superimposed on the map information 161 . The map superimposing unit 150 superimposes the road surface condition data 221 included in the road surface display information 23 including the map position data 61 specified by the user on the map information 161 .

図12は、本実施の形態に係る地図重畳部150により表示される路面性状画面62の別例を示す図である。
図12では、地図重畳部150は、路面表示情報23に含まれる単位画像22を地図情報161に重畳した路面性状画面62を表示している。具体例として、空港のような広範なエリアを計測車両200が走行する場合がある。ユーザにより空港の任意の位置あるいは範囲を地図位置データ61として指定された場合でも、地図重畳部150は、ユーザにより指定された位置あるいは範囲の単位画像22の情報を、路面表示情報23として単位路面性状情報162から抽出することができる。そして、地図重畳部150は、路面表示情報23に含まれる位置姿勢情報222に基づいて単位画像22を連結した路面画像21を、地図情報161に重畳して路面性状画面62を表示する。
FIG. 12 is a diagram showing another example of the road surface condition screen 62 displayed by the map superimposing unit 150 according to this embodiment.
In FIG. 12 , the map superimposing unit 150 displays a road surface condition screen 62 in which the unit images 22 included in the road surface display information 23 are superimposed on the map information 161 . As a specific example, the measurement vehicle 200 may travel over a wide area such as an airport. Even if the user designates an arbitrary position or range of the airport as the map position data 61, the map superimposing unit 150 converts the information of the unit image 22 of the position or range designated by the user into the unit road surface display information 23. It can be extracted from the property information 162 . The map superimposing unit 150 then superimposes the road surface image 21 obtained by connecting the unit images 22 based on the position and orientation information 222 included in the road surface display information 23 on the map information 161 to display the road surface condition screen 62 .

また、地図重畳部150は、地図位置データ61と単位路面性状情報162とに基づいて、地図位置データ61により表される位置を含む路面の路面性状データ221の分布を表す路面性状トレース63を生成してもよい。
具体的には、ユーザにより地図位置データ61と路面性状トレース63の表示要求とを取得すると、地図重畳部150は、路面性状トレース63を生成し、ディスプレイに表示する。
Based on the map position data 61 and the unit road surface condition information 162, the map superimposing unit 150 also generates a road surface condition trace 63 representing the distribution of the road surface condition data 221 of the road surface including the position represented by the map position data 61. You may
Specifically, when the user acquires the map position data 61 and the display request for the road surface condition trace 63, the map superimposing unit 150 generates the road surface condition trace 63 and displays it on the display.

図13は、本実施の形態に係る路面性状トレース63の例を示す図である。
図13では、地図重畳部150は、ひびの数の分布を表す路面性状トレース63を表示している。ユーザにより地図情報161における任意の位置あるいは範囲が指定されると、地図重畳部150は、ユーザにより指定された位置あるいは範囲の単位画像22の情報を路面表示情報23として単位路面性状情報162から抽出する。地図重畳部150は、路面表示情報23に基づいて、具体例として、ひびの数の分布を表す路面性状トレース63を表示する。
FIG. 13 is a diagram showing an example of the road surface condition trace 63 according to this embodiment.
In FIG. 13, the map superimposing unit 150 displays a road surface condition trace 63 representing the distribution of the number of cracks. When an arbitrary position or range in the map information 161 is specified by the user, the map superimposing section 150 extracts the information of the unit image 22 of the position or range specified by the user from the unit road surface condition information 162 as the road surface display information 23. do. Based on the road surface display information 23, the map superimposing unit 150 displays, as a specific example, a road surface condition trace 63 representing the distribution of the number of cracks.

***本実施の形態の効果の説明***
本実施の形態に係る路面性状計測システムは、MMSを搭載しているため、路面性状計測データに、高精度な位置情報を付与することができる。このため、本実施の形態に係る路面性状計測システムによれば、地図情報との親和性が非常に高く、路面性状計測データを地図情報と重畳することができる。よって、本実施の形態に係る路面性状計測システムによれば、データの管理および解析を行うことが容易となる。
***Description of the effects of the present embodiment***
Since the road surface condition measurement system according to the present embodiment is equipped with MMS, highly accurate position information can be added to the road surface condition measurement data. Therefore, according to the road surface condition measurement system according to the present embodiment, the compatibility with the map information is very high, and the road surface condition measurement data can be superimposed on the map information. Therefore, according to the road surface condition measuring system according to the present embodiment, it becomes easy to manage and analyze data.

本実施の形態に係る路面性状計測システムでは、路面性状計測システムで計測する路面のひび割れ、わだち掘れ、および平たん性といった路面性状計測データに高精度な位置情報が付与されている。これにより、本実施の形態に係る路面性状計測システムでは、計測した路面性状計測データを、地図上に重畳することができる。したがって、本実施の形態に係る路面性状計測システムでは、ユーザにより指定された地図の任意地点の路面性状データ、すなわちひび割れ、わだち掘れ、および平たん性といった計測結果を瞬時に出力することが可能となる。 In the road surface condition measurement system according to the present embodiment, highly accurate position information is added to road surface condition measurement data such as cracks, ruts, and evenness measured by the road surface condition measurement system. Thus, in the road surface condition measurement system according to the present embodiment, the measured road surface condition measurement data can be superimposed on the map. Therefore, in the road surface condition measuring system according to the present embodiment, it is possible to instantaneously output road surface condition data at an arbitrary point on a map designated by the user, that is, measurement results such as cracks, ruts, and flatness. Become.

本実施の形態に係る路面性状計測システムでは、路面性状計測システムに含まれるPC(パーソナルコンピュータ)あるいはナビゲーションシステムのディスプレイといった表示機器に地図が表示される。そして、表示機器に表示されている地図上において任意の地点が選択されると、当該地点の路面性状情報が地図に重畳されて出力される。あるいは、当該地点の路面性状情報が路面性状トレースとして出力される。本実施の形態に係る路面性状計測システムでは、このような路面性状データ解析ソフトウェアを有しているので、路面性状計測データの管理および解析が容易になる。 In the road surface condition measuring system according to the present embodiment, a map is displayed on a display device such as a PC (personal computer) included in the road surface condition measuring system or a navigation system display. Then, when an arbitrary point is selected on the map displayed on the display device, the road surface condition information of the selected point is superimposed on the map and output. Alternatively, the road surface condition information at the point is output as a road surface condition trace. Since the road surface condition measurement system according to the present embodiment has such road surface condition data analysis software, management and analysis of the road surface condition measurement data are facilitated.

***他の構成***
<変形例1>
本実施の形態では、路面性状データとしてひび割れの数を例として説明した。しかし、路面性状データとしてわだち掘れあるいは平たん性の計測結果を用いてもよい。すなわち、これらの路面性状のうちの複数を路面性状画面に表示してもよい。あるいは、路面性状のうちのいずれかの分布を路面性状トレースとして表示してもよい。
***Other Configurations***
<Modification 1>
In the present embodiment, the number of cracks is used as an example of the road surface condition data. However, rutting or evenness measurement results may be used as the road surface condition data. That is, a plurality of these road surface properties may be displayed on the road surface property screen. Alternatively, the distribution of any of the road conditions may be displayed as a road condition trace.

<変形例2>
本実施の形態では、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能がソフトウェアで実現される。変形例として、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能がハードウェアで実現されてもよい。
<Modification 2>
In this embodiment, the functions of the image collection unit 110, the image formation unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposition unit 150 are implemented by software. As a modification, the functions of the image collection unit 110, the image formation unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposition unit 150 may be realized by hardware.

路面性状計測装置100は、プロセッサ910に替えて、電子回路を備える。
電子回路は、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能を実現する専用の電子回路である。
電子回路は、具体的には、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ロジックIC、GA、ASIC、または、FPGAである。GAは、Gate Arrayの略語である。ASICは、Application Specific Integrated Circuitの略語である。FPGAは、Field-Programmable Gate Arrayの略語である。
画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能は、1つの電子回路で実現されてもよいし、複数の電子回路に分散して実現されてもよい。
別の変形例として、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の一部の機能が電子回路で実現され、残りの機能がソフトウェアで実現されてもよい。また、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の一部またはすべての機能がファームウェアで実現されてもよい。
The road surface condition measuring device 100 has an electronic circuit in place of the processor 910 .
The electronic circuit is a dedicated electronic circuit that implements the functions of the image collecting section 110 , the image forming section 120 , the area defining section 130 , the road surface condition detecting section 140 and the map superimposing section 150 .
Electronic circuits are specifically single circuits, compound circuits, programmed processors, parallel programmed processors, logic ICs, GAs, ASICs or FPGAs. GA is an abbreviation for Gate Array. ASIC is an abbreviation for Application Specific Integrated Circuit. FPGA is an abbreviation for Field-Programmable Gate Array.
The functions of the image collecting unit 110, the image forming unit 120, the area defining unit 130, the road surface condition detecting unit 140, and the map superimposing unit 150 may be realized by one electronic circuit, or may be realized by being distributed among a plurality of electronic circuits. may be
As another modification, part of the functions of the image collection unit 110, the image formation unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposition unit 150 are realized by electronic circuits, and the rest of the functions are realized by software. may be Also, part or all of the functions of the image collection unit 110, the image formation unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposition unit 150 may be realized by firmware.

プロセッサと電子回路の各々は、プロセッシングサーキットリとも呼ばれる。つまり、路面性状計測装置100において、画像収集部110と画像成形部120と領域規定部130と路面性状検出部140と地図重畳部150の機能は、プロセッシングサーキットリにより実現される。 Each of the processor and electronic circuitry is also called processing circuitry. In other words, in the road surface condition measuring device 100, the functions of the image acquisition unit 110, the image forming unit 120, the area definition unit 130, the road surface condition detection unit 140, and the map superimposing unit 150 are realized by the processing circuitry.

以上の実施の形態では、路面性状計測装置の各部を独立した機能ブロックとして説明した。しかし、路面性状計測装置の構成は、上述した実施の形態のような構成でなくてもよい。路面性状計測装置の機能ブロックは、上述した実施の形態で説明した機能を実現することができれば、どのような構成でもよい。また、路面性状計測装置は、1つの装置でなく、複数の装置から構成されたシステムでもよい。
また、実施の形態1のうち、複数の部分を組み合わせて実施しても構わない。あるいは、この実施の形態のうち、1つの部分を実施しても構わない。その他、この実施の形態を、全体としてあるいは部分的に、どのように組み合わせて実施しても構わない。
すなわち、実施の形態1の部分の自由な組み合わせ、あるいは実施の形態1の任意の構成要素の変形、もしくは実施の形態1において任意の構成要素の省略が可能である。
In the above embodiment, each part of the road surface condition measuring device has been described as an independent functional block. However, the configuration of the road surface condition measuring device does not have to be the configuration of the above-described embodiment. The functional blocks of the road surface condition measuring device may have any configuration as long as they can implement the functions described in the above embodiments. Moreover, the road surface condition measuring device may be a system composed of a plurality of devices instead of one device.
Moreover, it is also possible to combine a plurality of portions of the first embodiment. Alternatively, one portion of this embodiment may be implemented. In addition, this embodiment may be implemented as a whole or partially in any combination.
In other words, it is possible to freely combine parts of the first embodiment, modify arbitrary constituent elements of the first embodiment, or omit arbitrary constituent elements from the first embodiment.

なお、上述した実施の形態は、本質的に好ましい例示であって、本発明の範囲、本発明の適用物の範囲、および本発明の用途の範囲を制限することを意図するものではない。上述した実施の形態は、必要に応じて種々の変更が可能である。 The above-described embodiments are essentially preferable examples, and are not intended to limit the scope of the invention, the scope of applications of the invention, or the scope of applications of the invention. Various modifications can be made to the above-described embodiments as required.

21 路面画像、22 単位画像、23 路面表示情報、211 白線、221 路面性状データ、222 位置姿勢情報、61 地図位置データ、62 路面性状画面、63
路面性状トレース、100 路面性状計測装置、110 画像収集部、120 画像成形部、130 領域規定部、140 路面性状検出部、141 路面種別選択画面、150 地図重畳部、160 記憶部、161 地図情報、162 単位路面性状情報、200 計測車両、210 位置姿勢計測ユニット、220 路面性状計測ユニット、300
計測車両取得データ、301 路面性状計測データ、302 位置姿勢計測データ、303 後処理データ、331 高精度レーザ、332 ラインカメラ、333 レーザ照明、334 変位計、500 路面性状計測システム、910 プロセッサ、921 メモリ、922 補助記憶装置、930 入力インタフェース、940 出力インタフェース、950 通信装置、S100 路面性状計測処理。
21 road surface image, 22 unit image, 23 road surface display information, 211 white line, 221 road surface condition data, 222 position and orientation information, 61 map position data, 62 road surface condition screen, 63
Road surface condition trace 100 Road surface condition measuring device 110 Image collecting unit 120 Image forming unit 130 Area defining unit 140 Road surface condition detecting unit 141 Road surface type selection screen 150 Map superimposing unit 160 Storage unit 161 Map information 162 unit road surface condition information 200 measurement vehicle 210 position and orientation measurement unit 220 road surface condition measurement unit 300
Measurement Vehicle Acquisition Data 301 Road Condition Measurement Data 302 Position and Orientation Measurement Data 303 Post-Processing Data 331 High Precision Laser 332 Line Camera 333 Laser Illumination 334 Displacement Meter 500 Road Condition Measurement System 910 Processor 921 Memory , 922 auxiliary storage device, 930 input interface, 940 output interface, 950 communication device, S100 road surface condition measurement processing.

Claims (10)

路面を走行する計測車両に搭載されたラインカメラであって、前記路面を撮像するラインカメラにより撮像されたライン画像を用いて、前記路面の画像を路面画像として成形する画像成形部と、
前記路面画像を複数の単位画像に分割する領域規定部と、
前記路面画像に基づいて、前記複数の単位画像の各単位画像における路面性状を検出し、単位画像と、前記単位画像の路面性状を表す路面性状データと、前記単位画像に撮像された路面におけるいずれかの位置と前記単位画像を撮像した計測車両の姿勢とを含む位置姿勢情報とが、前記単位画像を撮像した時刻で対応付けされた単位路面性状情報を生成する路面性状検出部と
を備えた路面性状計測装置。
a line camera mounted on a measurement vehicle running on a road surface, and an image forming unit that forms an image of the road surface as a road surface image using a line image captured by the line camera that captures the image of the road surface;
an area defining unit that divides the road surface image into a plurality of unit images;
Based on the road surface image, a road surface condition in each unit image of the plurality of unit images is detected, and road surface condition data representing the road surface condition of the unit image is detected . a road surface condition detection unit that generates unit road surface condition information in which position and orientation information including any of the positions and the orientation of the measurement vehicle that captured the unit image is associated with the time at which the unit image was captured. A road surface condition measuring device.
前記路面性状計測装置は、
入力インタフェースを介して地図情報における位置を表す地図位置データを取得し、前記地図位置データにより表される位置を含む路面の単位画像と路面性状データと位置姿勢情報とを路面表示情報として抽出し、前記路面表示情報に含まれる情報を前記地図情報に重畳して表示する地図重畳部を備えた請求項1に記載の路面性状計測装置。
The road surface condition measuring device includes:
acquiring map position data representing a position in map information via an input interface, extracting a unit image of a road surface including the position represented by the map position data, road surface condition data, and position and orientation information as road surface display information; 2. The road surface condition measuring apparatus according to claim 1, further comprising a map superimposing unit for superimposing information included in said road surface display information on said map information.
前記地図重畳部は、
前記地図位置データにより表される位置を含む単位画像を前記地図情報に重畳して表示する請求項2に記載の路面性状計測装置。
The map superimposing unit
3. The road surface condition measuring apparatus according to claim 2, wherein a unit image including the position represented by the map position data is superimposed on the map information and displayed.
前記地図重畳部は、
前記地図位置データにより表される位置を含む単位画像における路面性状データと位置姿勢情報とを前記地図情報に重畳して表示する請求項2または請求項3に記載の路面性状計測装置。
The map superimposing unit
4. The road surface condition measuring apparatus according to claim 2, wherein the road surface condition data and position/orientation information in a unit image including the position represented by the map position data are superimposed on the map information and displayed.
前記地図重畳部は、
前記地図位置データと前記単位路面性状情報とに基づいて、前記地図位置データにより表される位置を含む路面の路面性状データの分布を表す路面性状トレースを生成する請求項2から請求項4のいずれか1項に記載の路面性状計測装置。
The map superimposing unit
5. A road surface condition trace representing a distribution of road surface condition data of a road surface including a position represented by said map position data is generated based on said map position data and said unit road surface condition information. 1. The road surface property measuring device according to 1.
前記路面性状検出部は、
前記路面性状として前記路面のひび割れを検出し、前記単位画像と、前記単位画像におけるひび割れの数と、前記単位画像の前記位置姿勢情報とを含む前記単位路面性状情報を生成する請求項1から請求項5のいずれか1項に記載の路面性状計測装置。
The road surface condition detection unit
Detecting cracks in the road surface as the road surface condition, and generating the unit road surface condition information including the unit image, the number of cracks in the unit image, and the position and orientation information of the unit image. Item 6. The road surface condition measuring device according to any one of Item 5.
前記領域規定部は、
前記路面の白線を検出し、検出した白線に基づいて、前記路面画像を複数の単位画像に分割する請求項1から請求項6のいずれか1項に記載の路面性状計測装置。
The area definition unit
The road surface condition measuring device according to any one of claims 1 to 6, wherein the road surface image is divided into a plurality of unit images based on the detected white lines.
路面を走行する計測車両であって、前記路面の路面性状を計測する路面性状計測ユニットと、前記計測車両の位置と姿勢を計測する位置姿勢計測ユニットとを備えた計測車両と、
前記路面性状計測ユニットにより計測された路面性状計測データと、前記位置姿勢計測ユニットにより計測された位置姿勢計測データとを用いて、前記路面性状を解析する路面性状計測装置と
を備え、
前記路面性状計測装置は、
前記路面性状計測ユニットに含まれるラインカメラにより撮像されたライン画像を用いて、前記路面の画像を路面画像として成形する画像成形部と、
前記路面画像を複数の単位画像に分割する領域規定部と、
前記路面画像に基づいて、前記複数の単位画像の各単位画像における路面性状を検出し、単位画像と、前記単位画像の路面性状を表す路面性状データと、前記単位画像に撮像された路面におけるいずれかの位置と前記単位画像を撮像した計測車両の姿勢とを含む位置姿勢情報とが、前記単位画像を撮像した時刻で対応付けされた単位路面性状情報を生成する路面性状検出部と
を備えた路面性状計測システム。
A measuring vehicle that travels on a road surface, the measuring vehicle comprising a road surface condition measuring unit that measures the road surface condition of the road surface, and a position and orientation measuring unit that measures the position and orientation of the measuring vehicle;
a road surface condition measurement device that analyzes the road surface condition using the road surface condition measurement data measured by the road surface condition measurement unit and the position and orientation measurement data measured by the position and orientation measurement unit;
The road surface condition measuring device includes:
an image forming unit that forms an image of the road surface as a road surface image using a line image captured by a line camera included in the road surface condition measurement unit;
an area defining unit that divides the road surface image into a plurality of unit images;
Based on the road surface image, a road surface condition in each unit image of the plurality of unit images is detected, and road surface condition data representing the road surface condition of the unit image is detected . a road surface condition detection unit that generates unit road surface condition information in which position and orientation information including any of the positions and the orientation of the measurement vehicle that captured the unit image is associated with the time at which the unit image was captured. road surface condition measurement system.
画像成形部が、路面を走行する計測車両に搭載されたラインカメラであって、前記路面を撮像するラインカメラにより撮像されたライン画像を用いて、前記路面の画像を路面画像として成形し、
領域規定部が、前記路面画像を複数の単位画像に分割し、
路面性状検出部が、前記路面画像に基づいて、前記複数の単位画像の各単位画像における路面性状を検出し、単位画像と、前記単位画像の路面性状を表す路面性状データと、前記単位画像に撮像された路面におけるいずれかの位置と前記単位画像を撮像した計測車両の姿勢とを含む位置姿勢情報とが、前記単位画像を撮像した時刻で対応付けされた単位路面性状情報を生成する路面性状計測方法。
The image forming unit is a line camera mounted on a measurement vehicle traveling on a road surface, and forms the image of the road surface as a road surface image using the line image captured by the line camera that images the road surface,
a region definition unit dividing the road surface image into a plurality of unit images;
A road surface condition detection unit detects a road surface condition in each unit image of the plurality of unit images based on the road surface image, and generates a unit image, road surface condition data representing the road surface condition of the unit image, and the unit image. A road surface that generates unit road surface condition information in which position and orientation information including any position on the road surface imaged in and the orientation of the measurement vehicle that imaged the unit image are associated with the time when the unit image was imaged Property measurement method.
路面を走行する計測車両に搭載されたラインカメラであって、前記路面を撮像するラインカメラにより撮像されたライン画像を用いて、前記路面の画像を路面画像として成形する画像成形処理と、
前記路面画像を複数の単位画像に分割する領域規定処理と、
前記路面画像に基づいて、前記複数の単位画像の各単位画像における路面性状を検出し、単位画像と、前記単位画像の路面性状を表す路面性状データと、前記単位画像に撮像された路面におけるいずれかの位置と前記単位画像を撮像した計測車両の姿勢とを含む位置姿勢情報とが、前記単位画像を撮像した時刻で対応付けされた単位路面性状情報を生成する路面性状検出処理と
をコンピュータである路面性状計測装置に実行させる路面性状計測プログラム。
Image forming processing for forming an image of the road surface into a road surface image using a line image captured by a line camera mounted on a measurement vehicle traveling on the road surface and capturing the road surface;
an area defining process for dividing the road surface image into a plurality of unit images;
Based on the road surface image, a road surface condition in each unit image of the plurality of unit images is detected, and road surface condition data representing the road surface condition of the unit image is detected . a road surface condition detection process for generating unit road surface condition information in which position and orientation information including any position and the orientation of the measurement vehicle that captured the unit image is associated with the time at which the unit image was captured; A road surface condition measurement program to be executed by a road surface condition measurement device.
JP2019042872A 2019-03-08 2019-03-08 Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program Active JP7195185B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019042872A JP7195185B2 (en) 2019-03-08 2019-03-08 Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019042872A JP7195185B2 (en) 2019-03-08 2019-03-08 Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program

Publications (2)

Publication Number Publication Date
JP2020144079A JP2020144079A (en) 2020-09-10
JP7195185B2 true JP7195185B2 (en) 2022-12-23

Family

ID=72354018

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019042872A Active JP7195185B2 (en) 2019-03-08 2019-03-08 Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program

Country Status (1)

Country Link
JP (1) JP7195185B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7046279B1 (en) * 2020-10-30 2022-04-01 三菱電機株式会社 Crack detection device, crack detection method and crack detection program
JP7399065B2 (en) * 2020-11-18 2023-12-15 三菱電機株式会社 Structure information providing system, structure information providing method, and structure information providing device
WO2023144861A1 (en) * 2022-01-25 2023-08-03 日本電気株式会社 Information processing system, information processing method, and recording medium
WO2023144860A1 (en) * 2022-01-25 2023-08-03 日本電気株式会社 Information processing system, information processing method, and recording medium
JP7229432B1 (en) * 2022-04-08 2023-02-27 三菱電機株式会社 Facility management information display device, facility management information display system, facility management information display method and facility management information display program
JP2024013788A (en) * 2022-07-21 2024-02-01 株式会社アーバンエックステクノロジーズ Program, method, system, road map, and road map creation method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008046065A (en) 2006-08-21 2008-02-28 Nagoya City Road surface image creating method and road surface image producing device
CN101701919A (en) 2009-11-20 2010-05-05 长安大学 Pavement crack detection system based on image and detection method thereof
JP2015197804A (en) 2014-04-01 2015-11-09 阪神高速技術株式会社 Road measurement system
JP2015220623A (en) 2014-05-19 2015-12-07 三菱電機株式会社 Mobile body imaging system
JP2018021375A (en) 2016-08-03 2018-02-08 株式会社東芝 Pavement crack analyzer, pavement crack analysis method, and pavement crack analysis program
JP2018165726A (en) 2014-11-19 2018-10-25 首都高技術株式会社 Point group data utilization system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008046065A (en) 2006-08-21 2008-02-28 Nagoya City Road surface image creating method and road surface image producing device
CN101701919A (en) 2009-11-20 2010-05-05 长安大学 Pavement crack detection system based on image and detection method thereof
JP2015197804A (en) 2014-04-01 2015-11-09 阪神高速技術株式会社 Road measurement system
JP2015220623A (en) 2014-05-19 2015-12-07 三菱電機株式会社 Mobile body imaging system
JP2018165726A (en) 2014-11-19 2018-10-25 首都高技術株式会社 Point group data utilization system
JP2018021375A (en) 2016-08-03 2018-02-08 株式会社東芝 Pavement crack analyzer, pavement crack analysis method, and pavement crack analysis program

Also Published As

Publication number Publication date
JP2020144079A (en) 2020-09-10

Similar Documents

Publication Publication Date Title
JP7195185B2 (en) Road surface condition measuring device, road surface condition measuring system, road surface condition measuring method, and road surface condition measuring program
TWI634315B (en) Map data update device, map data update method, and map data update program product
US9710899B2 (en) Image processing device, inspection device, image processing method, and non-transitory recording medium
US10275661B2 (en) Image processing apparatus, image processing method, and computer program product
US8571354B2 (en) Method of and arrangement for blurring an image
JP4619962B2 (en) Road marking measurement system, white line model measurement system, and white line model measurement device
JP6487283B2 (en) Point cloud data processing device, point cloud data processing method, program, and recording medium
JP2010530997A (en) Method and apparatus for generating road information
JP2009294214A (en) Method and system for navigation based on topographic structure
JP2016048172A (en) Image processor, image processing method, and program
US20160091297A1 (en) Operating device, operating method, and program therefor
US11551411B2 (en) Data processor, data processing method, and data processing program for determining correspondence relationships between laser scanning point clouds
JP2008249555A (en) Position-specifying device, position-specifying method, and position-specifying program
JP2009140402A (en) Information display device, information display method, information display program, and recording medium with recorded information display program
JP2010190647A (en) Vehicle position measuring instrument and vehicle position measuring program
JP2009204385A (en) Targeting device, method, and program
JP7372616B2 (en) Stone and gravel detection system, stone and gravel detection method and program
US10346706B2 (en) Image processing device, image processing method, and non-transitory storage medium storing image processing program
JP6742262B2 (en) Intersection detector
JP2017142204A (en) Point group positioning device and point group positioning program
JP5230354B2 (en) POSITIONING DEVICE AND CHANGED BUILDING DETECTION DEVICE
JP7282578B2 (en) Angle measuring device, distance measuring device, speed measuring device, altitude measuring device, coordinate measuring device, angle measuring method, and program
JP2006322892A (en) Three-dimensional position measuring device and three-dimensional position measuring program
KR101224176B1 (en) Accuracy improvement system for an outdoor Augmented Reality (AR) and the method
JP2019138751A (en) Map complementing device and map complementing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220722

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221213

R150 Certificate of patent or registration of utility model

Ref document number: 7195185

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150