JP7217570B1 - 情報処理システム及びプログラム、情報処理方法、サーバ - Google Patents
情報処理システム及びプログラム、情報処理方法、サーバ Download PDFInfo
- Publication number
- JP7217570B1 JP7217570B1 JP2022577216A JP2022577216A JP7217570B1 JP 7217570 B1 JP7217570 B1 JP 7217570B1 JP 2022577216 A JP2022577216 A JP 2022577216A JP 2022577216 A JP2022577216 A JP 2022577216A JP 7217570 B1 JP7217570 B1 JP 7217570B1
- Authority
- JP
- Japan
- Prior art keywords
- crack
- shape
- unit
- region
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 31
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000004458 analytical method Methods 0.000 claims abstract description 31
- 239000011159 matrix material Substances 0.000 claims abstract description 12
- 238000012545 processing Methods 0.000 claims description 37
- 238000000034 method Methods 0.000 description 30
- 230000008569 process Effects 0.000 description 20
- 238000001514 detection method Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 238000010801 machine learning Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000004040 coloring Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000008094 contradictory effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/30—Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Geometry (AREA)
- Image Analysis (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
[項目1]
一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するヒビ割れ推定部と、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を解析するヒビ割れ形状解析部と、
を備える、
ことを特徴とする情報処理システム。
[項目2]
前記ヒビ割れ形状解析部は、前記ヒビ割れ領域の中心線を求め、当該中心線に対してヘッセ行列を利用することで前記ヒビ割れ形状の幅を算出し、前記中心線及び前記幅に基づきヒビ割れ形状を解析する、
ことを特徴とする項目1に記載の情報処理システム。
[項目3]
前記原画像と解析された前記原画像上のヒビ割れ形状の位置情報とを教師データとして設定するヒビ割れ推定学習部をさらに備える、
ことを特徴とする項目1または2に記載の情報処理システム。
[項目4]
処理部を有するコンピュータに情報処理を実行させるプログラムであって、
前記プログラムは、前記処理部に、
一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定することと、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を解析することと、
を備える、
を実行させる、プログラム。
[項目5]
ヒビ割れ推定部により、一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するステップと、
ヒビ割れ形状解析部により、推定した前記ヒビ割れ領域におけるヒビ割れ形状を解析するステップと、
をコンピュータにおいて実行する、情報処理方法。
[項目6]
一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するヒビ割れ推定部と、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を解析するヒビ割れ形状解析部と、
を備える、
ことを特徴とするサーバ。
以下、本発明の実施の形態による情報処理システムを説明する。添付図面において、同一または類似の要素には同一または類似の参照符号及び名称が付され、各実施形態の説明において同一または類似の要素に関する重複する説明は省略することがある。また、各実施形態で示される特徴は、互いに矛盾しない限り他の実施形態にも適用可能である。
図1に示されるように、本実施の形態における情報処理システムは、例えば建物や土木建造物などの構造物の壁面を撮像した画像を基に、そのような壁面に存在するヒビ割れを検出するものである。構造物の壁面は、一例として、ユーザ自身がカメラを操作して撮像してもよいし、あるいは、自律飛行もしくは遠隔操作により飛行する図1に示すような無人飛行体4に搭載したカメラを遠隔操作して撮像してもよい。
図2に示されるように、本実施の形態における情報処理システムは、サーバ1と、端末2と、無人飛行体4とを有している。サーバ1と、端末2と、無人飛行体4は、ネットワークNWを介して互いに通信可能に接続されていてもよい。なお、図示された構成は一例であり、これに限らず、例えば無人飛行体4がネットワークNWに接続されていなくてもよい。その場合、無人飛行体4の操作がユーザが操作する送信機(いわゆるプロポ)により行われたり、無人飛行体4のカメラにより取得した画像データが無人飛行体4に接続される補助記憶装置(例えばSDカードなどのメモリカードやUSBメモリなど)に記憶され、ユーザにより事後的に補助記憶装置からサーバ1や端末2に読み出されて記憶されたりする構成であってもよく、操作目的または画像データの記憶目的のいずれか一方の目的のためだけに無人飛行体4がネットワークNWに接続されていてもよい。
図2は、本実施形態におけるサーバ1のハードウェア構成を示す図である。なお、図示された構成は一例であり、これ以外の構成を有していてもよい。
図4に示される端末2もまた、プロセッサ20、メモリ21、ストレージ22、送受信部23、入出力部24等を備え、これらはバス25を通じて相互に電気的に接続される。各要素の機能は、上述したサーバ1と同様に構成することが可能であることから、各要素の詳細な説明は省略する。
図5は、無人飛行体4のハードウェア構成を示すブロック図である。フライトコントローラ41は、プログラマブルプロセッサ(例えば、中央演算処理装置(CPU))などの1つ以上のプロセッサを有することができる。
図6は、サーバ1及び端末2に実装される機能を例示したブロック図である。本実施の形態においては、サーバ1は、画像取得部115、処理部120、記憶部130を備えている。処理部120は、ヒビ割れ推定部121、ヒビ割れ形状解析部122、ヒビ割れ推定学習部123を含んでいる。また、記憶部130は、情報・画像記憶部131、ヒビ割れ推定学習モデル132を含んでいる。なお、各種機能部は、サーバ1のプロセッサ10における機能部として例示しているが、各種機能部の一部または全部は、サーバ1のプロセッサ10または端末2のプロセッサ20、無人飛行体4のコントローラ41の能力等に合わせて、プロセッサ10またはプロセッサ20、コントローラ41のうちのいずれの構成において実現されていてもよい。
続いて、図8等を参照して、本実施形態にかかる情報処理システムによるヒビ割れ領域検出方法について説明する。図8は、本実施形態にかかる情報処理システムによるヒビ割れ領域検出方法を実施する処理を示すフローチャートである。
続いて、図14を参照して、本実施形態にかかる情報処理システムによるヒビ割れ推定学習方法について説明する。図14は、本実施形態にかかる情報処理システムによるヒビ割れ推定学習方法を実施する処理を示すフローチャートである。図15は、本実施形態にかかるヒビ割れ推定学習方法を示す概念図である。
2 端末
4 無人飛行体
Claims (5)
- 一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するヒビ割れ推定部と、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を示す形状情報を取得するヒビ割れ形状解析部と、
取得したヒビ割れ形状が前記原画像に重畳された解析済み画像と、取得した前記形状情報と、を用いて、前記ヒビ割れ推定学習モデルを再学習する再学習部と、
を備える、
ことを特徴とする情報処理システム。 - 前記ヒビ割れ形状解析部は、前記ヒビ割れ領域の中心線を求め、当該中心線に対してヘッセ行列を利用することで前記ヒビ割れ形状の幅を算出し、前記中心線及び前記幅に基づきヒビ割れ形状を解析する、
ことを特徴とする請求項1に記載の情報処理システム。 - 処理部を有するコンピュータに情報処理を実行させるプログラムであって、
前記プログラムは、前記処理部に、
一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定することと、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を示す形状情報を取得することと、
取得したヒビ割れ形状が前記原画像に重畳された解析済み画像と、取得した前記形状情報と、を用いて、前記ヒビ割れ推定学習モデルを再学習することと、
を実行させる、プログラム。 - ヒビ割れ推定部により、一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するステップと、
ヒビ割れ形状解析部により、推定した前記ヒビ割れ領域におけるヒビ割れ形状を示す形状情報を取得するステップと、
再学習部により、取得したヒビ割れ形状が前記原画像に重畳された解析済み画像と、取得した前記形状情報と、を用いて、前記ヒビ割れ推定学習モデルを再学習するステップと、
をコンピュータにおいて実行する、情報処理方法。 - 一以上の対象物が映る原画像に対してヒビ割れ推定学習モデルを用いて当該対象物におけるヒビ割れ領域を推定するヒビ割れ推定部と、
推定した前記ヒビ割れ領域におけるヒビ割れ形状を示す形状情報を取得するヒビ割れ形状解析部と、
取得したヒビ割れ形状が前記原画像に重畳された解析済み画像と、取得した前記形状情報と、を用いて、前記ヒビ割れ推定学習モデルを再学習する再学習部と、
を備える、
ことを特徴とするサーバ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023005042A JP2024022441A (ja) | 2022-08-04 | 2023-01-17 | 情報処理システム及びプログラム、情報処理方法、サーバ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2022/029980 WO2024029046A1 (ja) | 2022-08-04 | 2022-08-04 | 情報処理システム及びプログラム、情報処理方法、サーバ |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023005042A Division JP2024022441A (ja) | 2022-08-04 | 2023-01-17 | 情報処理システム及びプログラム、情報処理方法、サーバ |
Publications (1)
Publication Number | Publication Date |
---|---|
JP7217570B1 true JP7217570B1 (ja) | 2023-02-03 |
Family
ID=85131332
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022577216A Active JP7217570B1 (ja) | 2022-08-04 | 2022-08-04 | 情報処理システム及びプログラム、情報処理方法、サーバ |
JP2023005042A Pending JP2024022441A (ja) | 2022-08-04 | 2023-01-17 | 情報処理システム及びプログラム、情報処理方法、サーバ |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023005042A Pending JP2024022441A (ja) | 2022-08-04 | 2023-01-17 | 情報処理システム及びプログラム、情報処理方法、サーバ |
Country Status (2)
Country | Link |
---|---|
JP (2) | JP7217570B1 (ja) |
WO (1) | WO2024029046A1 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019066267A (ja) * | 2017-09-29 | 2019-04-25 | 清水建設株式会社 | ひび割れ検出装置、ひび割れ検出方法、および、コンピュータプログラム |
WO2020059706A1 (ja) * | 2018-09-20 | 2020-03-26 | 富士フイルム株式会社 | 学習用データ収集装置、学習用データ収集方法、及びプログラム |
CN112633354A (zh) * | 2020-12-18 | 2021-04-09 | 广东省大湾区集成电路与系统应用研究院 | 路面裂缝检测方法、装置、计算机设备和存储介质 |
JP2021081953A (ja) * | 2019-11-19 | 2021-05-27 | 富士通株式会社 | 演算プログラム、演算装置及び演算方法 |
JP2021165909A (ja) * | 2020-04-06 | 2021-10-14 | キヤノン株式会社 | 情報処理装置、情報処理装置の情報処理方法およびプログラム |
JP2021184163A (ja) * | 2020-05-21 | 2021-12-02 | 清水建設株式会社 | 学習装置、クラック検出装置、学習方法、クラック検出方法 |
KR20220017657A (ko) * | 2020-08-05 | 2022-02-14 | (주)이포즌 | 콘크리트 균열 탐지 장치 및 방법 |
-
2022
- 2022-08-04 WO PCT/JP2022/029980 patent/WO2024029046A1/ja unknown
- 2022-08-04 JP JP2022577216A patent/JP7217570B1/ja active Active
-
2023
- 2023-01-17 JP JP2023005042A patent/JP2024022441A/ja active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019066267A (ja) * | 2017-09-29 | 2019-04-25 | 清水建設株式会社 | ひび割れ検出装置、ひび割れ検出方法、および、コンピュータプログラム |
WO2020059706A1 (ja) * | 2018-09-20 | 2020-03-26 | 富士フイルム株式会社 | 学習用データ収集装置、学習用データ収集方法、及びプログラム |
JP2021081953A (ja) * | 2019-11-19 | 2021-05-27 | 富士通株式会社 | 演算プログラム、演算装置及び演算方法 |
JP2021165909A (ja) * | 2020-04-06 | 2021-10-14 | キヤノン株式会社 | 情報処理装置、情報処理装置の情報処理方法およびプログラム |
JP2021184163A (ja) * | 2020-05-21 | 2021-12-02 | 清水建設株式会社 | 学習装置、クラック検出装置、学習方法、クラック検出方法 |
KR20220017657A (ko) * | 2020-08-05 | 2022-02-14 | (주)이포즌 | 콘크리트 균열 탐지 장치 및 방법 |
CN112633354A (zh) * | 2020-12-18 | 2021-04-09 | 广东省大湾区集成电路与系统应用研究院 | 路面裂缝检测方法、装置、计算机设备和存储介质 |
Non-Patent Citations (2)
Title |
---|
藤田悠介、ほか,画像処理によるコンクリート構造物のひび割れ幅の分類,コンクリート工学年次論文集,2012年06月15日,Vol. 34, No. 1,pp. 1792-1797,https://data.jci-net.or.jp/data_pdf/34/034-01-1291.pdf |
藤田悠介、ほか: "画像処理によるコンクリート構造物のひび割れ幅の分類", コンクリート工学年次論文集, vol. 34, no. 1, JPN6022044312, 15 June 2012 (2012-06-15), pages 1792 - 1797, ISSN: 0004962831 * |
Also Published As
Publication number | Publication date |
---|---|
WO2024029046A1 (ja) | 2024-02-08 |
JP2024022441A (ja) | 2024-02-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6364049B2 (ja) | 点群データに基づく車両輪郭検出方法、装置、記憶媒体およびコンピュータプログラム | |
WO2021093240A1 (en) | Method and system for camera-lidar calibration | |
JP2021514885A (ja) | 自動運転車のlidar測位に用いられるディープラーニングに基づく特徴抽出方法 | |
CN110399775A (zh) | 生成式对抗网络中的同时定位和建图约束 | |
JP2021515178A (ja) | 自動運転車両においてrnnとlstmを用いて時間平滑化を行うlidar測位 | |
JP6404527B1 (ja) | カメラ制御システム、カメラ制御方法、およびプログラム | |
WO2021199449A1 (ja) | 位置算出方法及び情報処理システム | |
JP7118490B1 (ja) | 情報処理システム、情報処理方法、プログラム、移動体、管理サーバ | |
US11460855B1 (en) | Systems and methods for sensor calibration | |
JP6807093B1 (ja) | 点検システム及び管理サーバ、プログラム、ヒビ割れ情報提供方法 | |
JP7217570B1 (ja) | 情報処理システム及びプログラム、情報処理方法、サーバ | |
JP7149569B2 (ja) | 建造物の測定方法 | |
JP7228310B1 (ja) | 情報処理システム及びプログラム、情報処理方法、サーバ | |
CN115588187A (zh) | 基于三维点云的行人检测方法、装置、设备以及存储介质 | |
JP6807092B1 (ja) | 点検システム及び管理サーバ、プログラム、ヒビ割れ情報提供方法 | |
JP7004374B1 (ja) | 移動体の移動経路生成方法及びプログラム、管理サーバ、管理システム | |
CN114282776A (zh) | 车路协同评估自动驾驶安全性的方法、装置、设备和介质 | |
JP7228298B1 (ja) | 情報処理システム、情報処理方法、プログラム、移動体、管理サーバ | |
JP7228311B1 (ja) | 情報処理システム、情報処理方法、プログラム、サーバ | |
JP7385332B1 (ja) | 情報処理システム及びプログラム、情報処理方法、サーバ | |
JP7401068B1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP7487900B1 (ja) | 情報処理方法、情報処理システム及びプログラム | |
JP7072311B1 (ja) | 移動体の移動経路生成方法及びプログラム、管理サーバ、管理システム | |
WO2024069669A1 (ja) | 情報処理システム及びプログラム、情報処理方法、端末、サーバ | |
JP7370045B2 (ja) | 寸法表示システムおよび寸法表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221214 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221214 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230112 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230117 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7217570 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |