JP7153306B2 - 検出対象位置特定システム - Google Patents
検出対象位置特定システム Download PDFInfo
- Publication number
- JP7153306B2 JP7153306B2 JP2018079448A JP2018079448A JP7153306B2 JP 7153306 B2 JP7153306 B2 JP 7153306B2 JP 2018079448 A JP2018079448 A JP 2018079448A JP 2018079448 A JP2018079448 A JP 2018079448A JP 7153306 B2 JP7153306 B2 JP 7153306B2
- Authority
- JP
- Japan
- Prior art keywords
- detection
- detection target
- probability
- image data
- cell
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 414
- 230000004807 localization Effects 0.000 title claims 2
- 238000009826 distribution Methods 0.000 claims description 48
- 238000012800 visualization Methods 0.000 claims description 44
- 238000004364 calculation method Methods 0.000 claims description 32
- 238000013473 artificial intelligence Methods 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 13
- 239000003086 colorant Substances 0.000 claims description 10
- 238000012545 processing Methods 0.000 claims description 9
- 238000005259 measurement Methods 0.000 claims description 3
- 210000004027 cell Anatomy 0.000 description 104
- 230000006870 function Effects 0.000 description 35
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 13
- 238000000034 method Methods 0.000 description 7
- 238000013528 artificial neural network Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000012549 training Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 3
- 238000007726 management method Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 210000002569 neuron Anatomy 0.000 description 2
- 238000009790 rate-determining step (RDS) Methods 0.000 description 2
- 241000282994 Cervidae Species 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Image Analysis (AREA)
Description
ドローン11が飛行(移動)する飛行地域(地域)を含む確率セル集合19を生成し初期値を設定して初期化する(確率セル集合生成手段)。つづいて、検出対象検出部15において人工知能(人工ニューラルネットワーク)に学習済みの係数をロードする。確率セル集合生成手段によって生成された確率セル集合19は、図3に示すように、所定容積の六面体の確率セル集合領域である。
なお、検出対象18(人)を確率セル集合19におけるセル毎の確率値の高低として確実に特定するためには、2回以上異なる位置、異なる方向から検出対象18を含む撮影エリアSeを撮影し、既述の処理(検出対象検出手段、窺知確率算出手段、確率分布値更新手段までの各手段)を2回以上実施して更新対象範囲20の確率値を複数回更新する必要がある。ドローン11に設置した高解像度カメラ14を下向きに制御して移動しながら複数回撮影を行い、更新対象範囲20の確率値の処理を行った場合の確率分布の変化を図4~図6に示している。
11 ドローン(移動体)
12 演算装置(コンピュータ)
13 ディスプレイ(表示装置)
14 高解像度カメラ(撮影機能)
15 検出対象検出部
16 確率分布計算部
17 キーボード
18 検出対象
19 確率セル集合
20 更新対象範囲
Vi 可視化画面
Ei 画像データ
Se 撮影エリア
Claims (11)
- 撮影機能を備えた移動体と、前記移動体によって撮影された画像を受信する演算装置とから形成され、
前記移動体が、所定面積の地域を移動しつつその撮影機能によって画像データを取得する撮影手段と、前記撮影手段によって異なる位置・撮影方向から撮影された複数の前記画像データを前記演算装置に送信する画像送信手段とを有し、
前記演算装置が、前記移動体が移動する地域の確率セル集合を生成する確率セル集合生成手段と、人工知能を利用して前記画像データに含まれる所定の検出対象の検出尤度および該検出対象の前記画像データ上の位置、大きさを求める検出対象検出手段と、前記画像送信手段によって前記移動体から送信された該移動体の位置情報および前記画像データの撮影方向をもとに前記確率セル集合における更新対象範囲を特定し、前記更新対象範囲に含まれる各セルの確率値をベイズの定理を応用した所定の更新数式を使用し、前記検出対象検出手段によって検出した前記検出対象の検出尤度および該検出対象の前記画像データ上の位置、大きさをもとに更新する確率分布値更新手段と、前記検出対象検出手段から前記確率分布値更新手段までの各手段を1回以上繰り返し実施することで、前記検出対象を前記確率セル集合におけるセル毎の確率値の高低として特定する検出対象位置特定手段とを有することを特徴とする検出対象位置特定システム。 - 前記検出対象位置特定システムが、前記演算装置の演算処理によって作られた可視化画像を出力する出力装置を含み、前記演算装置が、前記検出対象位置特定手段によって特定された前記検出対象の前記確率セル集合におけるセル毎の確率値の高低をもとに可視化画面を生成する可視化画面生成手段と、前記可視化画面生成手段によって生成した可視化画面を前記出力装置に出力する可視化画面出力手段とを含む請求項1に記載の検出対象位置特定システム。
- 前記演算装置が、前記画像データの各画素に対して前記検出対象が窺知となる窺知確率を算出する窺知確率算出手段を含み、前記確率分布値更新手段において利用される前記更新数式が、前記窺知確率算出手段によって算出した窺知確率を含む更新数式である請求項1または請求項2に記載の検出対象位置特定システム。
- 前記可視化画面生成手段によって生成される前記可視化画面が、前記確率セル集合におけるセル毎の確率値の高低に基づき、各画素が三原色(RGB)および透明度で構成された疑似カラー表示、および/または、前記確率セル集合におけるセル毎の確率値が近傍セルに比較して最も高いセルに対する検出対象アイコンの表示である請求項2または請求項2を引用する請求項3に記載の検出対象位置特定システム。
- 前記可視化画面生成手段が、航空写真または地図の画面表示に対して前記疑似カラー表示および前記検出対象アイコンが重なって表示される請求項4に記載の検出対象位置特定システム。
- 前記演算装置が、前記検出対象検出手段によって検出した前記検出対象の検出尤度および該検出対象の画像データ上の位置、大きさをもとに前記画像データの各画素に対する検出尤度を対応付ける2次元尤度データ生成手段を含み、前記2次元尤度データ生成手段が、前記画像データの各画素に前記検出尤度を対応付ける際、複数の検出尤度が対応付く場合はそれら検出尤度のうちの最大の検出尤度をその画素に対応付け、何も検出尤度が対応付けられない場合はその画素に尤度0を対応付ける請求項3ないし請求項5いずれかに記載の検出対象位置特定システム。
- 前記確率分布値更新手段が、前記移動体の3次元位置データと前記撮影機能の姿勢と該撮影機能の定数パラメータとから前記確率セル集合における前記画像データの各画素に対応する観測方向を算出しつつ、前記観測方向に存在する確率セルを参照し、前記窺知確率算出手段において所定の窺知確率算出数式によって前記検出対象が窺知となる窺知確率を算出する請求項3、請求項3を引用する請求項4ないし請求項6いずれかに記載の検出対象位置特定システム。
- 前記移動体の3次元位置データが、前記移動体の経度、緯度、高度であり、前記撮影機能の姿勢が、四元数または前記四元数と同等の姿勢を表すロール、ピッチ、ヨー角である請求項7に記載の検出対象位置特定システム。
- 前記確率分布値更新手段が、前記確率セル集合のセルの確率値を前記更新数式によって更新する場合、該確率セル集合のセルの3次元位置と前記移動体の3次元位置データと前記撮影機能の姿勢と該撮影機能の定数パラメータとから前記画像データ上の参照すべき画素を特定し、前記窺知確率算出手段によって対応付けられた前記窺知確率および前記2次元尤度データ生成手段によって対応付けられた前記検出尤度を読み出して計算する請求項3および請求項7を引用する請求項6ないし請求項8いずれかに記載の検出対象位置特定システム。
- 前記可視化画面生成手段が、3次元の前記確率セル集合の1つの座標軸方向に対し、最大値を求める処理を行うことによって前記3次元の確率セル集合を2次元のデータに圧縮し、その確率値の高低を用いて前記各画素が三原色(RGB)および透明度で構成された疑似カラー表示を行う請求項2を引用する請求項4ないし請求項9いずれかに記載の検出対象位置特定システム。
- 前記移動体が、空中を飛行する無人航空機(ドローン)であり、前記撮影機能が、前記無人航空機(ドローン)に設置されて空中から地上を撮影するカメラであり、前記無人航空機(ドローン)が、衛星測位システムと前記カメラの撮影時の姿勢計測システムとを有する請求項1ないし請求項10いずれかに記載の検出対象位置特定システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018079448A JP7153306B2 (ja) | 2018-04-17 | 2018-04-17 | 検出対象位置特定システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018079448A JP7153306B2 (ja) | 2018-04-17 | 2018-04-17 | 検出対象位置特定システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019185689A JP2019185689A (ja) | 2019-10-24 |
JP7153306B2 true JP7153306B2 (ja) | 2022-10-14 |
Family
ID=68341471
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018079448A Active JP7153306B2 (ja) | 2018-04-17 | 2018-04-17 | 検出対象位置特定システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7153306B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021081830A1 (en) * | 2019-10-30 | 2021-05-06 | SZ DJI Technology Co., Ltd. | Computation load distribution |
JP7040827B1 (ja) | 2021-01-14 | 2022-03-23 | 株式会社ロックガレッジ | 捜索支援システムおよび救助支援プログラム |
KR102659185B1 (ko) * | 2021-11-16 | 2024-04-18 | 동국대학교 산학협력단 | 객체 위치 추정 장치 및 방법 |
CN114476065B (zh) * | 2022-03-28 | 2022-11-22 | 黄河水利职业技术学院 | 一种测绘工程测量用无人机遥感装置 |
KR102622623B1 (ko) * | 2022-05-12 | 2024-01-10 | 한국광기술원 | 3차원 영상 정보를 제공하기 위한 이동형 영상 촬영 장치, 이에 대한 방법 및 이를 포함하는 시스템 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010101227A1 (ja) | 2009-03-04 | 2010-09-10 | 日本電気株式会社 | 物体位置推定用情報作成装置、物体位置推定用情報作成方法およびプログラム |
JP2010257341A (ja) | 2009-04-27 | 2010-11-11 | Nippon Telegr & Teleph Corp <Ntt> | 適応型視線位置推定方法、適応型視線位置推定装置、プログラム、及び記録媒体 |
JP2017022574A (ja) | 2015-07-10 | 2017-01-26 | 株式会社東芝 | 補正情報出力装置、画像処理装置、補正情報出力方法、撮像制御システム及び移動体制御システム |
-
2018
- 2018-04-17 JP JP2018079448A patent/JP7153306B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010101227A1 (ja) | 2009-03-04 | 2010-09-10 | 日本電気株式会社 | 物体位置推定用情報作成装置、物体位置推定用情報作成方法およびプログラム |
US20120020523A1 (en) | 2009-03-04 | 2012-01-26 | Hiroo Ikeda | Information creation device for estimating object position and information creation method and program for estimating object position |
JP2010257341A (ja) | 2009-04-27 | 2010-11-11 | Nippon Telegr & Teleph Corp <Ntt> | 適応型視線位置推定方法、適応型視線位置推定装置、プログラム、及び記録媒体 |
JP2017022574A (ja) | 2015-07-10 | 2017-01-26 | 株式会社東芝 | 補正情報出力装置、画像処理装置、補正情報出力方法、撮像制御システム及び移動体制御システム |
Non-Patent Citations (2)
Title |
---|
園田 潤 外4名,屋内外シームレス電波環境解析のためのUAV-SfMによるFDTD実環境マルチスケール数値モデル構築,電子情報通信学会論文誌B,電子情報通信学会,2017年09月01日,第J100-B巻 第9号,pp. 773-781 |
宮里 太也 外2名,多目的自律型ドローンのための俯瞰視点人物検知システムに関する研究,電気学会研究会資料,日本,一般社団法人電気学会,2017年09月21日,pp. 11-16 |
Also Published As
Publication number | Publication date |
---|---|
JP2019185689A (ja) | 2019-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7153306B2 (ja) | 検出対象位置特定システム | |
EP3903164B1 (en) | Collision avoidance system, depth imaging system, vehicle, map generator, amd methods thereof | |
US20210012520A1 (en) | Distance measuring method and device | |
US20210116943A1 (en) | Systems and methods for uav interactive instructions and control | |
US10475209B2 (en) | Camera calibration | |
US11032527B2 (en) | Unmanned aerial vehicle surface projection | |
CN109219785B (zh) | 一种多传感器校准方法与系统 | |
CN108351653B (zh) | 用于uav飞行控制的系统和方法 | |
US20190385339A1 (en) | Sensor fusion using inertial and image sensors | |
EP3158417B1 (en) | Sensor fusion using inertial and image sensors | |
EP3158293B1 (en) | Sensor fusion using inertial and image sensors | |
EP3158411B1 (en) | Sensor fusion using inertial and image sensors | |
US10852723B2 (en) | Unmanned aerial vehicle swarm photography | |
WO2018193574A1 (ja) | 飛行経路生成方法、情報処理装置、飛行経路生成システム、プログラム及び記録媒体 | |
WO2021250914A1 (ja) | 情報処理装置、移動装置、情報処理システム、および方法、並びにプログラム | |
EP2523062B1 (en) | Time phased imagery for an artificial point of view | |
US10521663B1 (en) | Iterative image position determination | |
WO2020225979A1 (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
US20230296793A1 (en) | Motion-Based Calibration Of An Aerial Device | |
WO2022113482A1 (ja) | 情報処理装置、方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20180516 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210413 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220419 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220614 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220926 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7153306 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |