JP2020144862A - 石礫検出システム、石礫検出方法及びプログラム - Google Patents

石礫検出システム、石礫検出方法及びプログラム Download PDF

Info

Publication number
JP2020144862A
JP2020144862A JP2020032925A JP2020032925A JP2020144862A JP 2020144862 A JP2020144862 A JP 2020144862A JP 2020032925 A JP2020032925 A JP 2020032925A JP 2020032925 A JP2020032925 A JP 2020032925A JP 2020144862 A JP2020144862 A JP 2020144862A
Authority
JP
Japan
Prior art keywords
stone gravel
gravel
unit
stone
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020032925A
Other languages
English (en)
Other versions
JP7372616B2 (ja
Inventor
泰隆 倉本
Yasutaka Kuramoto
泰隆 倉本
真貴 榎本
Shinki Enomoto
真貴 榎本
善太郎 渡邉
Zentaro Watanabe
善太郎 渡邉
忠 井川
Tadashi Igawa
忠 井川
哲司 青山
Tetsuji Aoyama
哲司 青山
実苗 小山
Minae Koyama
実苗 小山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oriental Consultants Co Ltd
SkymatiX Inc
Original Assignee
Oriental Consultants Co Ltd
SkymatiX Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oriental Consultants Co Ltd, SkymatiX Inc filed Critical Oriental Consultants Co Ltd
Publication of JP2020144862A publication Critical patent/JP2020144862A/ja
Application granted granted Critical
Publication of JP7372616B2 publication Critical patent/JP7372616B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/30Assessment of water resources

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

【課題】地上物体の大きさと個数とを記した報告書の作成作業を簡略かつ短時間に行い、結果として報告書作成作業を安価に行うことを可能にする。【解決手段】石礫検出システム1は、上空から俯瞰した状態の俯瞰画像を生成する画像結合部19と、俯瞰画像に撮影された石礫の位置を検出する機械学習部23と、俯瞰画像に機械学習部23により検出された石礫の位置を重畳して表示する画面を表示するための表示制御信号を生成する地図・画像表示部31と、石礫の位置が重畳された俯瞰画像に対する関心領域の設定入力を受け入れる処理要求受付部11と、関心領域の設定入力に基づいて、石礫の位置が重畳された俯瞰画像に空間的なフィルタリング処理を行う空間フィルタ部25とを有する。【選択図】 図1

Description

本発明は、石礫検出システム、石礫検出方法及びプログラムに関する。
防災を目的として、例えば河原の石礫のような地上物体を検出してその大きさと個数とを記した報告書を作成することが行われている。特に、洪水で流されると下流に被害を生じかねない土砂の質(大きさ)を検出することの重要性は非常に高い。
一般的に、石礫の検出は、まず、空撮や地上での調査により渓流や河原の写真を撮影し、この写真に撮影された石礫を作業者が目視で抽出・特定し、作業者が計測が必要と判断した石礫についてはその大きさを目分量で特定し、その個数を数えて報告書を作成していた。さらに、石礫の場所を特定する必要があるときは、渓流や河原に作業者が出向いて石礫の場所を測量していた。
特許文献1には、高精度な3次元画像の生成処理に利用することのできる航空測量映像を、無人飛行体を使用して正確且つ効率的に収集できる技術が開示されている。また、特許文献2には、被写体が遠方にあって被写体までの距離が大きい場合でも、その被写体距離を正確に測定し、測距データや該測距データに基づくスケールデータを正確に写真画面に写し込むようにした技術が開示されている。
特開2006−27331号公報 特開平10−281765号公報
しかし、上述した石礫の大きさと個数とを記した報告書を作成する手法は人力によるものであり、手間と時間を要するとともに、報告書作成までの費用も高額になっていた。
また、人力で報告書を作成する作業の場合、石礫の大きさの判定などの判断基準が作業者によって差異が生じてしまう可能性があった。
加えて、報告書を作成する作業者の訓練にも時間を要する。
本発明は上記の課題に鑑みてなされたもので、地上物体の大きさと個数とを記した報告書の作成作業を簡略かつ短時間に行い、結果として報告書作成作業を安価に行うことが可能な石礫検出システム、石礫検出方法及びプログラムを提供することにある。
上記課題を解決すべく、本発明の一つの観点に従う石礫検出システムは、石礫を含む地面を撮影した複数の撮影画像を結合して、上空から俯瞰した状態の俯瞰画像を生成する画像結合部と、俯瞰画像に撮影された石礫の位置を検出する機械学習部と、俯瞰画像に、機械学習部により検出された石礫の位置を重畳して表示する画面を表示するための表示制御信号を生成する地図・画像表示部と、機械学習部により検出された石礫の長径及び短径を計算する長径・短径計算部と、長径・短径計算部により計算された前記石礫の長径及び短径に基づいて石礫のサイズのヒストグラムを生成するヒストグラム生成部と、ヒストグラム生成部が生成したヒストグラムを用いて報告書を生成する報告書生成部とを有する。
本発明によれば、地上物体の大きさと個数とを記した報告書の作成作業を簡略かつ短時間に行い、結果として報告書作成作業を安価に行うことが可能となる。
本発明の一実施例である石礫検出システムの全体構成を示す図である。 石礫検出システムにおけるデータ処理サーバとユーザとの間の基本的な通信の流れを示す図である。 データ処理サーバの3次元データ生成部が生成したオルソ画像の一例を示す図である。 ユーザ端末に表示される、石礫の検出結果の画面表示の一例を示す図である。 データ処理サーバの機械学習部が機械学習モデルを生成する手順を示す図である。 関心領域の設定入力の一例を示す図である。 関心領域の設定入力の他の例を示す図である。 関心領域の設定入力のまた他の例を示す図である。 関心領域の設定入力のさらに他の例を示す図である。 誤認識領域の設定入力の一例を示す図である。 データ処理サーバのヒストグラム生成部により生成されるヒストグラムの一例を示す図である。 データ処理サーバの報告書生成部により作成された調査報告書の一例を示す図である。
以下、本発明の実施形態について、図面を参照して説明する。なお、以下に説明する実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている諸要素及びその組み合わせの全てが発明の解決手段に必須であるとは限らない。
本実施例の石礫検出システムは、渓流や河原の石礫のような地上物体を画像を用いて検出し、この地上物体の大きさと個数とを計測して報告書を作成するシステムである。本実施例の石礫検出システムは、河原の石礫を検出するシステムに適用されるが、石礫検出システムにより検出する地上物体は石礫に限定されず、石礫より小さい砂・樹木や倒木(流木)や他の地上物体もあり得る。また、地上物体を抽出する入力データは画像に限定されず、点群データや他の空間状態を把握できるデータもあり得る。
<システムの全体構成>
図1は、本発明の一実施例である石礫検出システムの全体構成を示す図である。
図1に示すように、石礫検出システム1はデータ処理サーバ3を有し、データ処理サーバ3は1台又は複数台のサーバコンピュータマシンにより構成され得る。データ処理サーバ3は一人又は複数人のユーザのそれぞれに対して、それぞれのユーザにより指定される対象物を画像を用いて検査する作業と、その検査結果を報告書にまとめる作業とを手伝うサービスを提供する。
データ処理サーバ3は、Webサーバ5を介して、それぞれのユーザの使用するパーソナルコンピュータやスマートフォンなどの情報処理端末(以下、ユーザ端末)7のウェブブラウザとデータ通信を行うことができる。図1では、便宜上、一つのユーザ端末7だけが図示されており、以下では、一人のユーザがデータ処理サーバ3を利用する場合を例にとり、本システムの詳細を説明する。
データ処理サーバ3は、処理要求受付部11、データ保存・検索部13及び解析・演算部15などの処理コンポーネントを有する。
処理要求受付部11は、ユーザからの種々の処理要求(例えば、検査を行うための種々の処理要求、又は、報告書を作成するための種々の処理要求など)を受け付けて、要求された処理を行う処理コンポーネントにその要求を渡す。
データ保存・検索部13は、様々な検査対象の地図、画像、検査結果及び報告書などのデータを保存し、他の処理コンポーネントからのデータ要求に応じて、要求された地図、画像又は検査結果データを読み出してその処理コンポーネントに渡す。また、データ保存・検索部13には、データ処理サーバ3の起動時に実行されるファームウェア、データ処理サーバ3の基本的動作を制御するオペレーティングシステムなどのプログラムが格納されている。
解析・演算部15はデータ処理サーバ3全体の制御を行う。また、データ処理サーバ3の起動時にデータ保存・検索部13に格納されたファームウェアが解析・演算部15により実行されることで、この解析・演算部15は、次に説明する処理コンポーネントとしての機能を実行する。
解析・演算部15は、画像登録部17、画像結合部19、3次元データ生成部21、機械学習部23、空間フィルタ部25、長径・短径計算部27、ヒストグラム生成部29、地図・画像表示部31、報告書生成部33、報告書表示部35、報告書出力部37、土地被覆分類部39、土地被覆解析部41、空間フィルタ推論部43、報告書様式登録部45、報告書様式解析部47などの処理コンポーネントを有する。
画像登録部17は、ユーザ端末7から検出対象物である石礫を含む地面を撮影した撮影画像(それには、一般的な可視光の写真画像だけでなく、赤外線などの非可視光を用いた写真画像や、その他の種類の画像なども含まれ得る)を受け入れて、それらの画像を、その画像の地理的情報(緯度、経度など)とそのユーザに関連付けてデータ保存・検索部13に登録する。
通常、検出対象物である石礫は地面上に多数存在する。従って、河原などの検出対象空間について多数の撮影画像が登録される。例えば、無人飛行体に搭載されたカメラで河原のような広大な検出対象空間の写真を撮影した場合、その河原の一部をそれぞれ撮影した多数の高画質撮影画像がカメラにより撮影される。カメラは河原の一部を撮影した際の地理的情報を撮影画像に紐付けて記憶する。
従って、画像登録部17は、それぞれの撮影画像を、撮影したときの地理的情報に紐付けて登録する。この際、画像登録部17は、それぞれの撮影画像に紐付けられた地理的情報のうち、いずれかの地理的情報を、検出対象空間である河原を代表する地理的情報として紐付けて登録してもよい。
画像結合部19は、登録された多数の撮影画像を結合することで、検出対象空間全体のモザイク画像を生成する。
3次元データ生成部21は、画像結合部19がモザイク画像を生成する際に使用した入力データ(画像)が所定の条件を満たした場合、この入力データに対してSfM(Structure from motion)処理を行って、撮影された検出対象空間の3次元データを生成し、こ
の3次元データからオルソ画像を生成する。このオルソ画像は、検出対象空間(河原)を上空から俯瞰した状態の俯瞰画像である。オルソ画像とは、写真測量技術に基づき、カメラの傾きや比高等による歪みを補正して正射投影とした画像である。SfM及びSfMにより3次元データを生成し、この3次元データに基づいてオルソ画像を生成する手法は公知であるため、ここでの説明は省略する。
オルソ画像は、後述する地上物体検出精度(特に大きさとその位置の検出精度)を確保するために生成される。以降、このオルソ画像(俯瞰画像)に基づいて、検出対象空間に存在する検出対象物である石礫の検査を行う。3次元データ及びオルソ画像はデータ保存・検索部13に保存される。
機械学習部23は、オルソ画像に撮影された石礫の位置を検出する。より詳細には、機械学習部23は、機械学習モデルを用いて、オルソ画像から石礫が撮影されている位置を検出する。機械学習モデルの生成方法は公知であるため、ここでの説明は省略する。
空間フィルタ部25は、ユーザ端末7を介してユーザが設定入力した関心領域に基づいて、3次元データ生成部21が生成したオルソ画像に対して空間的なフィルタリング処理を行う。関心領域とは、後述する長径・短径計算部27及びヒストグラム生成部29による石礫の長径・短径の計算処理及び石礫の個数算出処理を行う領域であり、オルソ画像の少なくとも一部に設定される。空間的なフィルタリング処理とは、オルソ画像に対して関心領域を設定して、長径・短径計算部27等による計算処理をすべき領域を限定することである。
長径・短径計算部27は、空間フィルタ部25により設定された関心領域内におけるオルソ画像から、機械学習部23の出力結果、つまり石礫の検出結果に基づいて、この機械学習部23により検出された石礫の長径及び短径を計算する。
ヒストグラム生成部29は、長径・短径計算部27により計算された石礫の長径及び短径の計算結果に基づいて、石礫のサイズのヒストグラム、及び、石礫のサイズの累計ヒストグラムを生成する。
地図・画像表示部31は、ユーザからの処理要求に応じて、ユーザ端末7のスクリーンに表示されるオルソ画像等をWebサーバ5に送る。Webサーバ5は、オルソ画像を組み込んだ作業画面をユーザ端末7に送出し、ユーザ端末7はこの作業画面をウェブブラウザのスクリーン上に表示する。
特に、地図・画像表示部31は、機械学習部23により検出された石礫の位置をオルソ画像に重畳して表示する画面を表示するための表示制御信号を生成することができる。
報告書生成部33は、ユーザからの要求に応じて、オルソ画像、石礫の位置検出結果、石礫のサイズのヒストグラム、石礫のサイズの累計ヒストグラム等のデータを用いて、関心領域における石礫の調査報告書を作成する。この際、報告書生成部33は、ユーザがユーザ端末7を介して入力したコメントを処理要求受付部11を介して受け入れ、このコメントを含めた調査報告書を作成する。
報告書表示部35は、ユーザからの要求に応じて、報告書生成部33が作成した調査報告書をWebサーバ5に送る。Webサーバ5は調査報告書をユーザ端末7に送出し、ユーザ端末7はこの作業画面をウェブブラウザのスクリーン上に表示する。
報告書出力部37は、ユーザからの要求に応じて、報告書生成部33が作成した調査報告書をWebサーバ5に送る。Webサーバ5は、調査報告書をユーザがユーザ端末7にダウンロードすることを可能にする。
土地被覆分類部39は、オルソ画像の各画素が持つ分光放射特性やサブビクセルのテクスチャ情報から、オルソ画像中の各領域または各画素の土地被覆を推測する。土地被覆分類部39の処理自体は既知であり、例えば特開平8−320930号公報に開示された技術等が適用可能である。
土地被覆解析部41は、ユーザが設定入力した関心領域である空間フィルタと、土地被覆分類部39による分類された土地被覆分類結果との相関を調べる。一例として、土地被覆解析部41は、空間フィルタ内におけるオルソ画像中の各領域または各画素の土地被覆の推定結果を抽出する。
空間フィルタ推論部43は、石礫検出システム1においてまだ解析が行われていない検出対象空間についての調査報告書を作成する際に、土地被覆解析部41による土地被覆解析結果に基づいて、最適と思われる空間フィルタを設定する。
報告書様式登録部45は、ユーザがユーザ端末7を介して入力した、ユーザが作成を希望する調査報告書の様式(サンプル)と解析を導出するため手順を登録する。登録した調査報告書の様式と解析を導出するため手順はデータ保存・検索部13に格納される。
報告書様式解析部47は、報告書様式登録部45により登録され、データ保存・検索部13に格納された調査報告書の様式を解析して、様式を文字部、グラフ部、写真部などに分類して、この分類結果と略同一の比率を有する調査報告書のテンプレートを生成する。
<システムの動作>
図2は、石礫検出システム1におけるデータ処理サーバ3とユーザとの間の基本的な通信の流れを示す。
図2において、ステップ51で、ユーザ9が、調査報告書作成の際の基礎となる撮影画像をユーザ端末7を介してデータ処理サーバ3にアップロードする。ステップ53で、データ処理サーバ3の画像登録部17が、アップロードされた撮影画像を登録し、データ保存・検索部13に格納する。
ステップ55で、画像結合部19が、ステップ53で登録された撮影画像を結合して、検出対象空間のモザイク画像を生成する。この後、3次元データ生成部21が、画像結合部19が生成したモザイク画像に対してSfM処理を行って、3次元データ及びオルソ画像を生成する。図3は、3次元データ生成部21が生成したオルソ画像Pの一例を示す。
ステップ57で、3次元データ生成部21が生成したオルソ画像に基づいて、機械学習部23がオルソ画像に撮影された石礫の位置を検出する。そして、ステップ59で、地図・画像表示部31が、オルソ画像に検出された石礫の位置を重畳した画面をユーザ端末7に表示させる。
図4は、ユーザ端末7に表示される、石礫の検出結果の画面表示の一例を示す。オルソ画像Pに重畳して、機械学習部23が検出した石礫Tの位置がバーBとして表示されている。バーBの長さは、機械学習部23が検出した石礫Tのおおよその大きさに比例している。
図5は、機械学習部23が機械学習モデルを生成する手順を示す。モデル生成指示者(教師)は、オルソ画像Pにおいて石礫が撮影されている位置を矩形領域Rにより指定する。機械学習部23は、矩形領域Rの特徴量に基づいて機械学習モデルを生成する。
ステップ61で、ユーザ9は、ユーザ端末7に表示された画面を見ながら、石礫の位置及びその大きさを計算すべき関心領域の設定入力を行う。ステップ61における関心領域の設定入力は、例えば、ユーザ端末7に設けられたマウス等の入力機器を用いて行われる。
図6は、ステップ61において行われる関心領域の設定入力の一例を示す。まず、ユーザ9は、検出対象空間である渓流や河原における調査範囲工事予定地80から上流及び下流にnメートル(一例として200m)の長さ81を指定する。次いで、ユーザ9は、関心領域の幅を設定する。この際、川沿いの道路など、石礫の計数を行わない領域を除外して指定する。さらに、ユーザ9は、コンクリートブロック群のように、石礫の計数を行わない領域(除外領域)82を指定する。これにより、関心領域83の設定入力が行われる。加えて、ユーザ9は、関心領域83内において機械学習部23による検出漏れがあった石礫が撮影されている領域84を追記する。
ステップ63で、空間フィルタ部25は、ユーザが設定入力した関心領域83に基づいて、オルソ画像に対して空間的なフィルタリング処理を行う。ステップ65で、長径・短径計算部27が、関心領域83内にある石礫の長径・短径を計数し、さらに、石礫の個数を計数する。
ユーザ9は、ステップ61において設定入力をした関心領域83を、ステップS66において修正することができる。以下、図7〜図10を参照して、関心領域83の修正手法について説明する。
図7に示すように、ユーザ9は、渓流を横切るように、計画、調査、設計を行う検討の予定地80である線分を空撮画像上に引くことができる。(この線分は砂防ダム等構造物の建設や各種対策の計画検討、設計等を行う際の渓流調査の基準線を模擬し得る。)すると、関心領域83として、その線分の上流側と下流側にその線分を一辺としてもつ、長さ81の規定サイズ(例えば、それぞれ長さ200m、幅は線分の長さ)の2つの長方形領域が自動的に設定される。これら2つの長方形領域が関心領域83として設定される。
そして、ステップS65において、その関心領域83内に存在する石礫の複数のサイズレベル毎の個数と個数割合が自動計算され、その集計結果が画面上に表示される(図7の右下表参照)。この集計結果には、石礫のサイズレベルに固有の色マークが表示される。
さらに、空撮画像上にも、関心領域83内に存在する石礫の各々が、それが該当するサイズレベルの固有の色を付されて表示される。ユーザ9は、どのレベルのサイズの石礫が、関心領域内にどのように分布しているかを、視覚的に把握できる。
ユーザ9は、集計結果と、空撮画像上での渓流調査範囲、関心領域83内の石礫のサイズ別の分布などを見ることで、石礫の質の観点での渓流特性を把握し、砂防ダム等の計画設計や各種検討に活用できる。
ユーザは関心領域83を次のように変更できる。
例えば、図8に示すように、渓流調査の基準線(線分80)を固定したまま、その上流側と下流側の関心領域83の方向を個別に変えることができる(長方形領域が平行四辺形領域に変わる)。河川の折れ曲がりに対応できる。
また、図9に示すように、渓流調査の基準線(線分80)を固定したまま、その上流側と下流側の関心領域の方向に関心領域の長さ81を個別に変えることができる。渓流内の構造物近くに存在したり、渓流の幅が変化したりしている場合に対応しやすい。
さらに、図8、図9に示すように、空撮画像上で除外領域82を指定することで、除外領域82を関心領域83から除外することができる。
さらに、図示は省略するが、渓流調査の基準線(線分80)の長さや位置を変えることもできる。
さらに、図10に示すように、ユーザ9は、空撮画像上で石礫に該当しない領域が石礫と自動認識されて表示されていた場合、その誤認識された表示(例えば囲み枠84)を指定して、これを石礫から除外する修正を行うことができる。逆に、図示は省略するが、石礫に該当する領域が自動では認識漏れになっていた場合、その領域を指定して(例えば枠線で囲むことで)それを石礫に加える修正を行うことができる。
ユーザ9が上記の関心領域83変更や誤認識修正を行なうと、その都度、ステップ63、65において集計が再度行われ、集計結果の表示と、関心領域の表示と、関心領域内の石礫の表示とが更新される。そして、石礫のサイズに応じた色分け表示がされ、関心領域83内に存在する石礫のサイズレベルごとの石礫の個数と個数割合が計算され、画面に表示される。
関心領域83の更新が行われた後、ヒストグラム生成部29が、長径・短径計算部27により計算された石礫の長径及び短径の計算結果に基づいて、石礫のサイズのヒストグラム、及び、石礫のサイズの累計ヒストグラムを生成する。
図7は、ヒストグラム生成部29により生成されるヒストグラムの一例を示す。図7は、ヒストグラム生成部29によりヒストグラムが生成された後に、ユーザ9からの指示に基づいてユーザ端末7に表示される画面の一例である。
この画面には、石礫のサイズのヒストグラム90及び石礫のサイズの累計ヒストグラム91が表示されている。また、画面には、機械学習部23により検出された石礫の個数を表示する領域92、長径・短径計算部27により計算された石礫の径の平均を表示する領域93、検出された石礫全体の個数の50%に相当する石礫の径(D50)を表示する領域94、及び、検出された石礫全体の個数の95%に相当する石礫の径(D95)を表示する領域95が設けられている。
ステップ67で、報告書生成部33が調査報告書を作成する。図8は、報告書生成部33により作成された調査報告書の一例を示す。調査報告書は、書誌的事項及び検出結果が記載された文字部100、オルソ画像に石礫の検出結果が重畳された画像が表示された写真部101、及び、2種類のヒストグラムが表示されたグラフ部102を有する。
ステップ69で、報告書表示部35がユーザ端末7の画面に調査報告書を表示する。ステップ71で、ユーザ9がユーザ端末7を介して、調査報告書のコメントを入力することでこの調査報告書を編集する。ユーザ9が入力したコメントは文字部100に追記される。
ステップ73で、報告書生成部33が調査報告書をデータ保存・検索部13に格納する。ステップ75で、報告書出力部37が調査報告書をダウンロード可能な状態でWebサーバ5に送出し、ユーザ9は調査報告書をダウンロードする。
<システムの効果>
このように構成される本実施例によれば、撮影画像に基づいて石礫の位置を検出し、設定入力された関心領域に撮影されている石礫の大きさと個数とを計数し、さらに、石礫のサイズのヒストグラムを生成して、これらに基づいて調査報告書を作成することができる。
従って、本実施例によれば、石礫の大きさと個数と位置座標を記した報告書の作成作業を簡略かつ短時間に行い、結果として報告書作成作業を安価に行うことが可能となる。
変形例
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
また、上記の各構成、機能、処理部、処理手段等は、それらの一部または全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、SSD等の記録装置、または、ICカード、SDカード、DVD等の記録媒体に置くことができる。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
1…石礫検出システム 3…データ処理サーバ 5…Webサーバ 7…ユーザ端末 9…ユーザ 11…処理要求受付部 13…データ保存・検索部 15…解析・演算部 17…画像登録部 19…画像結合部 21…3次元データ生成部 23…機械学習部 25…空間フィルタ部 27…長径・短径計算部 29…ヒストグラム生成部 31…画像表示部 33…報告書生成部 83…関心領域 90…ヒストグラム 91…累計ヒストグラム P…オルソ画像 T…石礫


Claims (5)

  1. 石礫を含む地面を撮影した複数の撮影画像を結合して、上空から俯瞰した状態の俯瞰画像を生成する画像結合部と、
    前記俯瞰画像に撮影された前記石礫の位置を検出する機械学習部と、
    前記俯瞰画像に、前記機械学習部により検出された前記石礫の位置を重畳して表示する画面を表示するための表示制御信号を生成する地図・画像表示部と、
    前記機械学習部により検出された前記石礫の長径及び短径を計算する長径・短径計算部と、
    前記長径・短径計算部により計算された前記石礫の長径及び短径に基づいて前記石礫のサイズのヒストグラムを生成するヒストグラム生成部と、
    前記ヒストグラム生成部が生成した前記ヒストグラムを用いて報告書を生成する報告書生成部と
    を有する石礫検出システム。
  2. 前記撮影画像に基づいて、前記地面を含む検出対象空間の3次元データを生成し、この3次元データからオルソ画像を生成する3次元データ生成部を有し、
    前記機械学習部は、前記オルソ画像に基づいて前記石礫の位置を検出する
    ことを特徴とする請求項1に記載の石礫検出システム。
  3. 前記石礫の位置が重畳された前記俯瞰画像に対する関心領域の設定入力を受け入れる処理要求受付部と、
    前記関心領域の前記設定入力に基づいて、前記石礫の位置が重畳された前記俯瞰画像に空間的なフィルタリング処理を行う空間フィルタ部とを有し、
    前記長径・短径計算部は、前記関心領域内における前記俯瞰画像から、前記機械学習部により検出された前記石礫の長径及び短径を計算する
    ことを特徴とする請求項1に記載の石礫検出システム。
  4. 石礫検出システムにより実行される石礫検出方法であって、
    石礫を含む地面を撮影した複数の撮影画像を結合して、上空から俯瞰した状態の俯瞰画像を生成し、
    前記俯瞰画像に撮影された前記石礫の位置を検出し、
    前記俯瞰画像に、検出された前記石礫の位置を重畳して表示する画面を表示するための表示制御信号を生成し、
    検出された前記石礫の長径及び短径を計算し、
    計算された前記石礫の長径及び短径に基づいて前記石礫のサイズのヒストグラムを生成し、
    生成した前記ヒストグラムを用いて報告書を生成する
    石礫物体検出方法。
  5. コンピュータにより実行されるコンピュータプログラムであって、
    このコンピュータプログラムが実行されると、前記コンピュータを
    石礫を含む地面を撮影した複数の撮影画像を結合して、上空から俯瞰した状態の俯瞰画像を生成する画像結合部と、
    前記俯瞰画像に撮影された前記石礫の位置を検出する機械学習部と、
    前記俯瞰画像に、前記機械学習部により検出された前記石礫の位置を重畳して表示する画面を表示するための表示制御信号を生成する地図・画像表示部と、
    前記機械学習部により検出された前記石礫の長径及び短径を計算する長径・短径計算部と、
    前記長径・短径計算部により計算された前記石礫の長径及び短径に基づいて前記石礫のサイズのヒストグラムを生成するヒストグラム生成部と、
    前記ヒストグラム生成部が生成した前記ヒストグラムを用いて報告書を生成する報告書生成部と
    して機能させるコンピュータプログラム。


JP2020032925A 2019-03-01 2020-02-28 石礫検出システム、石礫検出方法及びプログラム Active JP7372616B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019037239 2019-03-01
JP2019037239 2019-03-01

Publications (2)

Publication Number Publication Date
JP2020144862A true JP2020144862A (ja) 2020-09-10
JP7372616B2 JP7372616B2 (ja) 2023-11-01

Family

ID=72354358

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020032925A Active JP7372616B2 (ja) 2019-03-01 2020-02-28 石礫検出システム、石礫検出方法及びプログラム

Country Status (1)

Country Link
JP (1) JP7372616B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114359128A (zh) * 2021-09-10 2022-04-15 数坤(北京)网络科技股份有限公司 一种血管狭窄的检测方法、装置及计算机可读介质
WO2024070532A1 (ja) * 2022-09-26 2024-04-04 株式会社リコー 情報処理装置、情報処理方法、プログラムおよび情報処理システム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6062217B2 (ja) 2012-11-11 2017-01-18 鹿島建設株式会社 堆積粒状材の粒径計測方法及びシステム並びにプログラム
JP6779698B2 (ja) 2016-08-03 2020-11-04 株式会社東芝 舗装ひび割れ解析装置、舗装ひび割れ解析方法及び舗装ひび割れ解析プログラム
CN107655796B (zh) 2017-09-18 2019-10-29 青岛理工大学 一种建筑用砂细度模数快速测定方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114359128A (zh) * 2021-09-10 2022-04-15 数坤(北京)网络科技股份有限公司 一种血管狭窄的检测方法、装置及计算机可读介质
WO2024070532A1 (ja) * 2022-09-26 2024-04-04 株式会社リコー 情報処理装置、情報処理方法、プログラムおよび情報処理システム

Also Published As

Publication number Publication date
JP7372616B2 (ja) 2023-11-01

Similar Documents

Publication Publication Date Title
JP7155321B2 (ja) ひび割れ解析データ編集装置、ひび割れ解析データ編集方法、及び、ひび割れ解析データの編集プログラム
US10863166B2 (en) Method and apparatus for generating three-dimensional (3D) road model
CN102084398B (zh) 街道级图像到3d建筑物模型的对准
CN110796714B (zh) 一种地图构建方法、装置、终端以及计算机可读存储介质
JP6353175B1 (ja) 視覚特徴を使用した画像の自動結合
CN104978390A (zh) 使用出行路径元数据进行情景感知目标检测
JP6238101B2 (ja) 数値表層モデル作成方法、及び数値表層モデル作成装置
US9529803B2 (en) Image modification
JP7372616B2 (ja) 石礫検出システム、石礫検出方法及びプログラム
Javadnejad et al. BridgeDex: Proposed web GIS platform for managing and interrogating multiyear and multiscale bridge-inspection images
JP6943183B2 (ja) 位置特定装置、位置特定方法、位置特定プログラムおよびカメラ装置
JP7427615B2 (ja) 情報処理装置、情報処理方法およびプログラム
Pyka et al. LiDAR-based method for analysing landmark visibility to pedestrians in cities: case study in Kraków, Poland
Corneli et al. Training of YOLO neural network for the detection of fire emergency assets
CN116824457A (zh) 基于全景视频中移动目标自动挂牌方法及相关装置
IOLI Evaluation of Airborne Image Velocimetry approaches using low-cost UAVs in riverine environments
JP7450182B2 (ja) 地上物体検出システム、地上物体検出方法及びプログラム
Pezzica et al. Photogrammetry as a participatory recovery tool after disasters: A grounded framework for future guidelines
Kubota et al. River maintenance management system using three-dimensional UAV data in Japan
JP2016071786A (ja) 地理情報ベクタ化支援システム及び地理情報ベクタ化支援方法
US20220128433A1 (en) Imaging parameter output method and imaging parameter output device
KR102393300B1 (ko) 객체 지도 생성 시스템 및 그 방법
Huang et al. Image analysis of measuring building configuration for seismic damage estimation
Sorgedrager Using consumer drones in surveying deltas and coastal systems
Hasan Generation of an Accurate, Metric Spatial Database of a Large Multi Storied Building

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200313

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221115

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230927

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231003

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231011

R150 Certificate of patent or registration of utility model

Ref document number: 7372616

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150