JP7372611B1 - 構造体観測装置、モデル構築方法及びモデル構築プログラム - Google Patents
構造体観測装置、モデル構築方法及びモデル構築プログラム Download PDFInfo
- Publication number
- JP7372611B1 JP7372611B1 JP2022144710A JP2022144710A JP7372611B1 JP 7372611 B1 JP7372611 B1 JP 7372611B1 JP 2022144710 A JP2022144710 A JP 2022144710A JP 2022144710 A JP2022144710 A JP 2022144710A JP 7372611 B1 JP7372611 B1 JP 7372611B1
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- muography
- detected
- image
- learning
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010276 construction Methods 0.000 title claims description 4
- 230000004907 flux Effects 0.000 claims abstract description 50
- 238000012545 processing Methods 0.000 claims abstract description 47
- 230000008859 change Effects 0.000 claims abstract description 46
- 238000003384 imaging method Methods 0.000 claims abstract description 13
- 238000001228 spectrum Methods 0.000 claims abstract description 8
- 238000000034 method Methods 0.000 claims description 26
- 238000004458 analytical method Methods 0.000 claims description 22
- 230000008569 process Effects 0.000 claims description 20
- 230000003595 spectral effect Effects 0.000 claims description 4
- 238000012549 training Methods 0.000 claims description 3
- 230000007613 environmental effect Effects 0.000 abstract description 14
- 238000010586 diagram Methods 0.000 abstract description 7
- 230000000694 effects Effects 0.000 abstract description 6
- 101150013335 img1 gene Proteins 0.000 abstract description 4
- 230000006854 communication Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 12
- 238000013528 artificial neural network Methods 0.000 description 11
- 230000000875 corresponding effect Effects 0.000 description 6
- 239000004065 semiconductor Substances 0.000 description 6
- 239000013598 vector Substances 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 101150071665 img2 gene Proteins 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 239000000839 emulsion Substances 0.000 description 4
- ADZWSOLPGZMUMY-UHFFFAOYSA-M silver bromide Chemical compound [Ag]Br ADZWSOLPGZMUMY-UHFFFAOYSA-M 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 239000002245 particle Substances 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- JJWKPURADFRFRB-UHFFFAOYSA-N carbonyl sulfide Chemical compound O=C=S JJWKPURADFRFRB-UHFFFAOYSA-N 0.000 description 2
- 239000013078 crystal Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 108010010803 Gelatin Proteins 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000499 gel Substances 0.000 description 1
- 239000008273 gelatin Substances 0.000 description 1
- 229920000159 gelatin Polymers 0.000 description 1
- 235000019322 gelatine Nutrition 0.000 description 1
- 235000011852 gelatine desserts Nutrition 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 239000003673 groundwater Substances 0.000 description 1
- 230000008595 infiltration Effects 0.000 description 1
- 238000001764 infiltration Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Landscapes
- Analysing Materials By The Use Of Radiation (AREA)
- Geophysics And Detection Of Objects (AREA)
Abstract
Description
本実施の形態にかかる構造体観測装置は、ミュオグラフィによって観測対象の構造体の内部構造を観測するものとして構成される。ミュオグラフィは、天空から降り注ぐ宇宙線ミューオンを線源としており、ミューオンの高い透過性を利用することで、観察対象物の内部を非破壊で観察・可視化することができる技術である。
画素P1及び画素P2に対応したミューオンは大気通過時にほぼ同等の気温や気圧の影響を受けるので、式[3]のように両者の比を取ることで、これらの影響がほぼキャンセルされる。その結果、山体内部状態に変化がない場合には式[3]の値にほぼ変動が無いものの、変化が生じた場合には式[3]の値にも変動が見られるようになる。
検出器11は、山体100に指向された状態で、入射するミューオンフラックスを検出する。これにより、撮像処理部12は、山体100及び山体100の上空領域110を通過するミューオンフラックスを撮像した、学習用のミュオグラフィ画像IMG1を取得する。なお、学習用データLDの作成にあたっては、時間を変えて複数回、例えば、N枚のミュオグラフィ画像IMG1を取得する。
データ生成部13は、N枚のミュオグラフィ画像IMG1のそれぞれにおいて、山体100内の注目画素P1と、上空領域110の領域A1及びA2に設定した2つ以上のM個の画素P2のそれぞれとの間で、正規化相互相関、天頂角相関乖離度及び注目画素P1のフーリエスペクトラムを算出する。なお、学習処理において用いる画素P1は第1の画素、画素P2は第2の画素とも称する。
データ生成部13は、ステップS12での計算結果と、注目画素の状態変化の有無を示す情報と、を要素とするN×M個の学習用入力ベクトルを含む学習用データLDを生成して、学習処理部14に入力する。
学習処理部14は、N×M個の学習用ベクトルからなる学習用データLDをニューラルネットワークに入力して、学習済みモデルLMを構築する。学習処理部14は、学習済みモデルLMを推定部15に渡す。
検出器11は、山体100に指向された状態で、入射するミューオンフラックスを検出する。これにより、撮像処理部12は、山体及び山体の上空を通過するミューオンフラックスを撮像した、推定対象のミュオグラフィ画像IMG2を取得する。
データ生成部13は、ミュオグラフィ画像IMG2内の山体100内の注目画素P1と、上空領域120に設定した2つ以上のM個の画素P2のそれぞれとの間で、正規化相互相関、天頂角相関乖離度及びミュオグラフィ画像IMG2の注目画素P1のフーリエスペクトラムを算出する。なお、推定処理において用いる画素P1は第3の画素、画素P2は第4の画素とも称する。
データ生成部13は、ステップS22での計算結果を要素とするM個の入力ベクトルからなる入力データINを生成して、推定部15に入力する。
推定部15は、入力データINを学習済みモデルLMに入力して、ミュオグラフィ画像IMG2の注目画素P1において、環境要因による状態変化が生じているか否かの推定結果R1を出力する。この場合、推定結果は確率として出力され、例えば、注目画素に環境要因による状態変化が生じている確率を、0以上1以下の値として出力してもよい。そして、推定部15は、推定結果R1を解析部16へ出力する。
解析部16は、受け取った推定結果R1に基づき、注目画素P1に環境要因による状態変化が生じているか示す解析結果R2を出力する。解析部16は、解析結果R2として、ミュオグラフィ画像IMG2の山体100内の各画素について、環境要因による状態変化が生じているかを示すデータセットを出力してもよい。また、解析部16は、解析結果R2として、画素に状態変化が生じているかを示す2次元画像を出力してもよい。この場合、各画素について、状態変化が生じているかを2階調で表示してもよいし、状態変化が生じているかを示す確率に応じて多値階調で表示するなどしてもよい。
表示部17は、解析結果R2を、構造体観測装置1のユーザに対して視認可能に表示する。
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、上述の実施の形態では、学習処理部14が図6に示すニューラルネットワークに学習用データLDを入力して学習済みモデルLMを構築するものとして説明したが、これは例示に過ぎない。学習手法はこれに限られるものはなく、更に層数が多いニューラルネットワークを用いるディープラーニングなどの、各種の教師有り学習手法を用いてもよい。
11 検出器
12 撮像処理部
13 データ生成部
14 学習処理部
15 推定部
16 解析部
17 表示部
100 山体
1001 CPU
1002 ROM
1003 RAM
1004 バス
1005 入出力インターフェイス
1006 入力部
1007 出力部
1008 通信部
1009 記憶部
1010 ドライブ
1011 磁気ディスク
1012 光ディスク
1013 フレキシブルディスク
1014 半導体メモリ
1020 ネットワーク
1030 サーバ
1000 コンピュータ
DET 検出信号
IMG、IMG1、IMG2 ミュオグラフィ画像
LD 学習用データ
IN 入力データ
R1 推定結果
R2 解析結果
Claims (8)
- ミューオンフラックスを検出する検出器と、
前記検出器が検出した前記ミューオンフラックスに基づいて、観測対象の構造体のミュオグラフィ画像を取得する撮像処理部と、
前記ミュオグラフィ画像において前記構造体に対応する領域の第1の画素のスペクトル情報と、
前記第1の画素と、前記ミュオグラフィ画像において前記構造体に対応する前記領域以外の領域から選択された前記第1の画素の上方の第2の画素と、の相関を示す情報と、
前記第1の画素において検出対象となる状態の変化を示す情報と、
を含む学習用データを生成するデータ生成部と、
前記学習用データを学習することで、前記第1の画素において検出対象となる状態の変化が生じているか否かを推定する学習済みモデルを構築する学習処理部と、を備える、
構造体観測装置。 - 推定対象のミュオグラフィ画像に基づいて生成された入力データを前記学習済みモデルに入力することで、前記推定対象のミュオグラフィ画像に映り込んだ構造体に対応する第3の画素において検出対象となる状態の変化が生じているか否かの推定結果を出力する推定部と、
前記推定結果に基づいて、前記第3の画素における検出対象となる状態の変化の有無を解析して、解析結果を出力する解析部と、
前記解析結果を表示する表示部と、をさらに備え、
前記検出器は推定対象となるミューオンフラックスを検出し、
前記撮像処理部は、前記検出器が検出した前記推定対象のミューオンフラックスに基づいて前記推定対象のミュオグラフィ画像を取得し、
前記データ生成部は、前記推定対象のミュオグラフィ画像に映り込んだ構造体に対応する前記第3の画素のスペクトル情報と、前記第3の画素と前記構造体の上方領域において前記第3の画素の直上の第4の画素との相関を示す情報と、を含む入力データを生成して、前記推定部に入力する、
請求項1に記載の構造体観測装置。 - 前記撮像処理部は、時刻を変えて複数の前記ミュオグラフィ画像を取得し、
前記データ生成部は、前記複数の前記ミュオグラフィ画像について、前記学習用データを生成する、
請求項2に記載の構造体観測装置。 - 前記第1の画素と前記第2の画素との相関を示す情報は、前記第1の画素と前記第2の画素との間の正規化相互相関と、天頂角相関乖離度と、を含み、
前記第3の画素と前記第4の画素との相関を示す情報は、前記第3の画素と前記第4の画素との間の正規化相互相関と、天頂角相関乖離度と、を含み、
時刻をiとし、
2つの画素の一方の、時刻iにおけるミューオンフラックスをs1(i)、平均ミューオンフラックスをm1、天頂角をθ1とし、
前記2つの画素の他方の画素の、時刻iにおけるミューオンフラックスをs2(i)、平均ミューオンフラックスをm2、天頂角をθ2とすると、
前記正規化相互相関NCCは、以下の式で表され、
- 前記推定部は、前記第3の画素において検出対象となる状態の変化が生じているかを推定した確率を、前記推定結果として出力する、
請求項2又は3に記載の構造体観測装置。 - 前記表示部は、前記推定対象のミュオグラフィ画像に映り込んだ構造体について、検出対象となる状態の変化が生じている画素と、前記検出対象となる状態の変化が生じていない画素と、を識別可能に表示する、
請求項2又は3に記載の構造体観測装置。 - ミューオンフラックスを検出し、
検出した前記ミューオンフラックスに基づいて、観測対象の構造体のミュオグラフィ画像を取得し、
前記ミュオグラフィ画像において前記構造体に対応する領域の第1の画素のスペクトル情報と、
前記第1の画素と、前記ミュオグラフィ画像において前記構造体に対応する前記領域以外の領域から選択された前記第1の画素の上方の第2の画素と、の相関を示す情報と、
前記第1の画素において検出対象となる状態の変化を示す情報と、
を含む学習用データを生成し、
前記学習用データを学習することで、前記第1の画素において検出対象となる状態の変化が生じているか否かを推定する学習済みモデルを構築する、
モデル構築方法。 - 検出器が検出したミューオンフラックスに基づいて、観測対象の構造体のミュオグラフィ画像を取得する処理と、
前記ミュオグラフィ画像において前記構造体に対応する領域の第1の画素のスペクトル情報と、
前記第1の画素と、前記ミュオグラフィ画像において前記構造体に対応する前記領域以外の領域から選択された前記第1の画素の上方の第2の画素と、の相関を示す情報と、
前記第1の画素において検出対象となる状態の変化を示す情報と、
を含む学習用データを生成する処理と、
前記学習用データを学習することで、前記第1の画素において検出対象となる状態の変化が生じているか否かを推定する学習済みモデルを構築する処理と、をコンピュータに実行させる、
モデル構築プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022144710A JP7372611B1 (ja) | 2022-09-12 | 2022-09-12 | 構造体観測装置、モデル構築方法及びモデル構築プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022144710A JP7372611B1 (ja) | 2022-09-12 | 2022-09-12 | 構造体観測装置、モデル構築方法及びモデル構築プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7372611B1 true JP7372611B1 (ja) | 2023-11-01 |
JP2024039945A JP2024039945A (ja) | 2024-03-25 |
Family
ID=88509980
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022144710A Active JP7372611B1 (ja) | 2022-09-12 | 2022-09-12 | 構造体観測装置、モデル構築方法及びモデル構築プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7372611B1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020188739A1 (ja) | 2019-03-19 | 2020-09-24 | 日本電気株式会社 | ダム堆積物推定システム、及びダム堆積物推定方法 |
WO2020194577A1 (ja) | 2019-03-27 | 2020-10-01 | 日本電気株式会社 | 火山監視システム及び火山監視方法 |
WO2020194560A1 (ja) | 2019-03-26 | 2020-10-01 | 日本電気株式会社 | 津波検出システム及び津波検出方法 |
WO2022097305A1 (ja) | 2020-11-09 | 2022-05-12 | 日本電気株式会社 | 推定装置、推定方法及び非一時的なコンピュータ可読媒体 |
-
2022
- 2022-09-12 JP JP2022144710A patent/JP7372611B1/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020188739A1 (ja) | 2019-03-19 | 2020-09-24 | 日本電気株式会社 | ダム堆積物推定システム、及びダム堆積物推定方法 |
WO2020194560A1 (ja) | 2019-03-26 | 2020-10-01 | 日本電気株式会社 | 津波検出システム及び津波検出方法 |
WO2020194577A1 (ja) | 2019-03-27 | 2020-10-01 | 日本電気株式会社 | 火山監視システム及び火山監視方法 |
WO2022097305A1 (ja) | 2020-11-09 | 2022-05-12 | 日本電気株式会社 | 推定装置、推定方法及び非一時的なコンピュータ可読媒体 |
Non-Patent Citations (1)
Title |
---|
NOMURA, Yukihiro et al.,Pilot study of eruption forecasting with muography using convolutional neural network,SCIENTIFIC REPORTS,英国,Nature Research,2020年03月24日,10:5272,pp.1-9 |
Also Published As
Publication number | Publication date |
---|---|
JP2024039945A (ja) | 2024-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Kim et al. | High-speed drone detection based on yolo-v8 | |
Shih et al. | Occupancy estimation using ultrasonic chirps | |
JP5617100B2 (ja) | センサ統合システム及びセンサ統合方法 | |
US11216705B2 (en) | Object detection based on machine learning combined with physical attributes and movement patterns detection | |
US20180329020A1 (en) | Uav detection | |
CN111259779B (zh) | 一种基于中心点轨迹预测的视频动作检测方法 | |
Wallace EURASIP Member et al. | Full waveform analysis for long-range 3D imaging laser radar | |
JP7021053B2 (ja) | 監視システム、プログラム、及び記憶媒体 | |
US20230048497A1 (en) | Apparatus and method with object detection | |
CN107831493B (zh) | 暴雨预测方法、暴雨预测装置、应用暴雨预测装置的系统以及暴雨预测程序 | |
Łopatka et al. | Application of vector sensors to acoustic surveillance of a public interior space | |
Hamatapa et al. | Image processing for drones detection | |
JP7372611B1 (ja) | 構造体観測装置、モデル構築方法及びモデル構築プログラム | |
CN117994916A (zh) | 一种点云数据和视频相融合的在线监测预警方法 | |
Kim | A knowledge based infrared camera system for invisible gas detection utilizing image processing techniques | |
JPWO2020194560A1 (ja) | 津波検出システム及び津波検出方法 | |
US20210304417A1 (en) | Observation device and observation method | |
KR101280348B1 (ko) | 다중 표적 추적 방법 | |
US20170169576A1 (en) | Crowd intelligence on flow velocity measurement | |
Cai et al. | KCF‐Based Identification Approach for Vibration Displacement of Double‐Column Bents under Various Earthquakes | |
KR102087076B1 (ko) | 무인기 항공 측량시 폐색 영역 발생에 대한 예측 시스템 및 이를 이용한 무인기의 최적 항공 경로 결정 방법 | |
US10580144B2 (en) | Method and system for tracking holographic object | |
Tie et al. | Intelligent detection of dynamic cracking along an interface of brittle material using high-speed photography assisted by data augmentation and machine learning | |
Kobeissi et al. | Innovative Single-Camera Depth Mapping for Enhanced Indoor Fire Detection and Localization | |
Kharuk et al. | Machine learning in Baikal-GVD experiment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220912 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20220914 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230830 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230912 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231005 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7372611 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |