JP7307927B2 - 無人機の制御システム - Google Patents
無人機の制御システム Download PDFInfo
- Publication number
- JP7307927B2 JP7307927B2 JP2021184005A JP2021184005A JP7307927B2 JP 7307927 B2 JP7307927 B2 JP 7307927B2 JP 2021184005 A JP2021184005 A JP 2021184005A JP 2021184005 A JP2021184005 A JP 2021184005A JP 7307927 B2 JP7307927 B2 JP 7307927B2
- Authority
- JP
- Japan
- Prior art keywords
- range
- aerial vehicle
- unmanned aerial
- orientation
- unmanned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 claims description 22
- 238000000034 method Methods 0.000 description 114
- 230000008569 process Effects 0.000 description 91
- 238000012545 processing Methods 0.000 description 40
- 238000004891 communication Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 9
- 230000009466 transformation Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000007792 addition Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Description
図1は、本実施形態の制御システムSのハードウェア構成及びソフトウェア構成の一例を示すブロック図である。制御システムSは、無人機Uと、無人機Uを操作可能な操作システムCとを含んで構成される。
操作システムCは、1以上の位置取得手段1と、位置取得手段1及び無人機Uを制御可能な制御装置2とを有するよう構成される。
位置取得手段1は、第1範囲R1の内部において指定された第1位置P1を取得可能であれば、特に限定されない。位置取得手段1は、例えば、1以上の撮影装置(例えば、図1の第1撮影装置1a及び第2撮影装置1b等)を含む手段であってもよい。また、位置取得手段1は、3次元的な座標を取得可能なセンサを含む手段であってもよい。位置取得手段1が3次元的な座標を取得可能なセンサを含む手段である場合、当該センサは、向きを取得可能なセンサであってもよい。
制御装置2は、制御部21と、記憶部22と、通信部23と、を備える。
制御部21は、CPU(Central Processing Unit)、RAM(Random Access Memory)、及びROM(Read Only Memory)等を備える。
記憶部22は、データ及び/又はファイルが記憶される装置であって、ハードディスク、半導体メモリ、記録媒体、及びメモリカード等によるデータのストレージ部を有する。記憶部22は、ネットワークNを介してNAS(Network Attached Storage)、SAN(Storage Area Network)、クラウドストレージ、ファイルサーバ及び/又は分散ファイルシステム等の記憶装置又は記憶システムとの接続を可能にする仕組みを有してもよい。
通信部23は、制御装置2をネットワークNに接続して位置取得手段1それぞれ及び/又は無人機U等と通信可能にするものであれば特に限定されず、例えば、携帯電話ネットワークに対応した無線装置、IEEE802.11に準拠したWi-Fi(Wireless Fidelity)対応デバイス、Bluetooth(登録商標)規格等に対応した近距離無線装置、及びイーサネット規格に対応したネットワークカード等が挙げられる。
第1範囲R1は、内部において指定された第1位置P1を位置取得手段1が取得可能な範囲である。第1範囲R1は、操作者が第1位置P1等を指定する範囲として用いられる。第1範囲R1は、現実空間内における範囲でもよく、地図等の仮想空間及び/又は拡張現実空間における範囲でもよい。第1範囲R1は、なかでも、現実空間内における範囲であることが好ましい。これにより、操作システムCは、3次元的な座標を取得可能なセンサ等の比較的複雑な部材を用いることなく、第1範囲R1を撮影可能な撮影装置を用いて、第1範囲R1の内部で第1位置P1を指定したことを示す撮影画像を撮影し、当該撮影画像から第1位置P1を取得し得る。第1範囲R1が拡張現実空間における範囲である場合、第1範囲R1は、障害物等の周囲に第1位置P1を指定可能な仮想物体を配置可能であることが好ましい。これにより、当該仮想物体を用いて第1位置P1を指定し、障害物等への衝突を防ぎ得る。
必須の態様ではないが、操作システムCは、第1位置P1を指定可能な指示手段Iを有するよう構成されることが好ましい。指示手段Iは、特に限定されず、例えば、第1位置P1を示す目印が取り付けられた棒等でよい。
第2範囲R2は、第1範囲R1を拡大した範囲であり、無人機Uが移動可能な移動範囲の少なくとも一部又は全部である。第2範囲R2は、操作者の視界内の範囲でもよく、視界外を含む範囲でもよい。第2範囲R2は、操作者の視界内の範囲であることが好ましい。これにより、操作者は、第1範囲R1と第2範囲R2との対応を見て確認しながら無人機Uを制御できる。
無人機Uは、制御装置2からの制御によって少なくとも第2範囲R2内部を移動可能であれば、特に限定されず、例えば、無人航空機、無人地上車両、無人水上艇、無人潜水艇、無人宇宙機等でよい。無人機Uは、無人航空機であることが好ましい。無人機Uが無人航空機であることにより、縦、横、高さの各方向に移動可能であり、高度が高い場所で障害物等に衝突して破損するリスクが無人地上車両、無人水上艇、無人潜水艇等より高い無人航空機の制御を容易に行い得る。無人航空機は、特に限定されず、例えば、無人操縦可能なクアッドコプター等によって例示される無人操縦可能なマルチコプター(「ドローン」とも称する。)でよい。第1範囲R1が立体的な範囲である場合、無人機Uは、無人航空機、無人潜水艇、及び/又は無人宇宙機であることが好ましい。これにより、無人機Uは、立体的な範囲を無人地上車両及び無人水上艇より容易に移動できる。
ネットワークNの種類は、制御装置2と位置取得手段1及び/又は無人機U等とを通信可能にするネットワークであれば特に限定されず、例えば、パーソナルエリアネットワーク、ローカルエリアネットワーク、イントラネット、エクストラネット、インターネット、Wi-Fiネットワーク、携帯電話ネットワーク、Bluetooth(登録商標)規格等に対応したネットワーク、あるいはこれらのネットワークを複数組み合わせたネットワーク等が挙げられる。
図2は、制御装置2で実行される制御処理の好ましい流れの一例を示すフローチャートである。以下、図2を用いて本実施形態の制御装置2で実行される制御処理の好ましい流れの一例を説明する。以下の説明では、無人機Uが無人航空機であり、位置取得手段1が1以上の撮影装置を含む手段であり、撮影装置から撮影画像を受信して第1位置P1を取得するものとして説明する。なお、無人機Uが無人地上車両、無人水上艇、無人潜水艇、無人宇宙機等である場合も、無人機Uが無人航空機である場合と同様に無人機Uを制御できる。また、位置取得手段1が撮影装置を含まず、3次元的な座標を取得可能なセンサ等を含む手段である場合も、撮影画像に代えて位置情報を受信することで第1位置P1を取得し、位置取得手段1が1以上の撮影装置を含む手段である場合と同様に無人機Uを制御できる。
制御部21は、通信部23と協働して位置情報受信部211を実行し、位置取得手段1が含む撮影装置のいずれかから撮影画像を受信したか判別する処理を実行する(ステップS1)。撮影画像を受信したと判別したならば、制御部21は、処理をステップS2に移す。撮影画像を受信したと判別していないならば、制御部21は、制御処理を終了し、処理をステップS1に移して、ステップS1からステップS8の処理を繰り返す。
制御部21は、記憶部22と協働して位置情報受信部211を実行し、ステップS1において受信した撮影画像それぞれに第1範囲R1が写っているか判別する処理を実行する(ステップS2)。第1範囲R1が写っていると判別したならば、制御部21は、処理をステップS3に移す。第1範囲R1が写っていると判別していないならば、制御部21は、制御処理を終了し、処理をステップS1に移して、ステップS1からステップS8の処理を繰り返す。
制御部21は、記憶部22と協働して位置情報受信部211を実行し、ステップS1において受信した撮影画像それぞれに第1位置P1が示されているか判別する処理を実行する(ステップS3)。第1位置P1が示されていると判別したならば、制御部21は、処理をステップS4に移す。第1位置P1が示されていると判別していないならば、制御部21は、制御処理を終了し、処理をステップS1に移して、ステップS1からステップS8の処理を繰り返す。
制御部21は、記憶部22と協働して第2位置特定部212を実行し、ステップS1で受信し、ステップS2で第1範囲R1が撮影されていると判別され、ステップS3で第1位置P1が示されていると判別された撮影画像から第2範囲R2の内部における第2位置P2を特定する処理を実行する(ステップS4、第2位置特定処理)。制御部21は、処理をステップS5に移す。
制御部21は、記憶部22及び通信部23と協働して移動指令部213を実行し、ステップS4で特定した第2位置P2への移動を無人機Uに指令する処理を実行する(ステップS5、移動指令処理)。制御部21は、処理をステップS6に移す。
制御部21は、記憶部22と協働して位置情報受信部211を実行し、ステップS1において受信した撮影画像それぞれに向きD1が示されているか判別する処理を実行する(ステップS6)。向きD1が示されていると判別したならば、制御部21は、処理をステップS7に移す。向きD1が示されていると判別していないならば、制御部21は、制御処理を終了し、処理をステップS1に移して、ステップS1からステップS8の処理を繰り返す。
制御部21は、記憶部22と協働して第2位置特定部212を実行し、ステップS1で受信し、ステップS6で向きD1が示されていると判別された撮影画像から第2範囲R2の内部における対応向きD2を特定する処理を実行する(ステップS7)。制御部21は、処理をステップS8に移す。
制御部21は、記憶部22及び通信部23と協働して移動指令部213を実行し、ステップS7で特定した対応向きD2を向くよう無人機Uに指令する処理を実行する(ステップS8)。制御部21は、制御処理を終了し、処理をステップS1に移して、ステップS1からステップS8の処理を繰り返す。
続いて、実施形態に係る制御システムSの使用例を説明する。
まず、制御システムSの利用者は、位置取得手段1が含む撮影装置を、第1範囲R1を撮影可能に配置し、第1範囲R1を示す所定の目印、撮影画像等を用いて、第1範囲R1を指定する。
続いて、制御システムSの利用者は、第2範囲R2が含まれる撮影画像及び/又は地図等を用いて、第2範囲R2を指定する。
制御システムSの利用者は、無人機Uを地上に載置する等して、無人機Uを移動可能に準備する。
図3は、平面的な第1範囲R1において指定された第1位置P1を用いて第2範囲R2内部の第2位置P2を平面的に特定することを示す概略図である。以下、図3を用いて、平面的な第1範囲R1の場合における無人機Uの制御を説明する。
制御システムSの利用者は、指示手段I等を用いて原点(0,0)から対向する点(XMax,YMax)までの略長方形状の平面的な第1範囲R1内部における第1位置P1を指定する。第1撮影装置1aは、第1範囲R1及び第1位置P1(X,Y)を指定する指示手段Iを撮影し、撮影した撮影画像を制御装置2へ送信する。
制御装置2は、所定の高度Hにて第2位置P2(sX,sY)へ移動するよう、無人機Uを制御する。無人機Uは、第2位置P2(sX,sY)へ所定の高度Hにて移動する。
図4は、立体的な第1範囲R1において指定された第1位置P1を用いて第2範囲R2内部の第2位置P2を立体的に特定することを示す概略図である。以下、図4を用いて、立体的な第1範囲R1の場合における無人機Uの制御を説明する。
制御システムSの利用者は、指示手段I等を用いて原点(0,0,0)から対向する点(XMax,YMax,ZMax)までの略直方体状の立体的な第1範囲R1内部における第1位置P1を立体的に指定する。第1撮影装置1a及び第2撮影装置1bは、第1範囲R1及び第1位置P1(X,Y,Z)を指定する指示手段Iを撮影し、撮影した撮影画像をそれぞれ制御装置2へ送信する。操作システムCが複数の撮影装置を備えるため、操作システムCは、第1撮影装置1a及び第2撮影装置1bを用いて互いに相異なる方向から第1範囲R1を撮影し、立体的に指定された第1位置P1(X,Y,Z)を判別できる。
制御装置2は、第2位置P2(sX,sY,sZ)へ移動するよう、無人機Uを制御する。無人機Uは、第2位置P2(sX,sY,sZ)へ移動する。
図5は、立体的な第1範囲R1において指定された第1位置P1及び向きD1を用いて第2範囲R2内部の第2位置P2及び対応向きD2を立体的に特定することを示す概略図である。以下、図5を用いて、立体的な第1範囲R1において向きD1も指定する場合における無人機Uの制御を説明する。
制御システムSの利用者は、指示手段方向指示部IMを有する指示手段I等を用いて立体的な第1範囲R1内部における第1位置P1を立体的に指定し、さらに、向きD1を指定する。第1撮影装置1a及び第2撮影装置1bは、第1範囲R1並びに第1位置P1(X,Y,Z)及び向きD1を指定する指示手段Iを撮影し、撮影した撮影画像をそれぞれ制御装置2へ送信する。
制御装置2は、第2位置P2(sX,sY,sZ)へ移動し、対応向きD2を向くよう、無人機Uを制御する。無人機Uは、第2位置P2(sX,sY,sZ)へ移動し、対応向きD2を向く。
C 操作システム
1 位置取得手段
1a 第1撮影装置
1b 第2撮影装置
2 制御装置
21 制御部
211 位置情報受信部
212 第2位置特定部
213 移動指令部
22 記憶部
23 通信部
I 指示手段
IM 指示手段方向指示部
R1 第1範囲
P1 第1位置
D1 向き
R2 第2範囲
P2 第2位置
D2 対応向き
U 無人機
N ネットワーク
Claims (2)
- 第1範囲の内部において指定された第1位置を取得可能な位置取得手段と、
前記第1範囲を拡大した第2範囲の内部を移動可能な無人機と、
前記位置取得手段及び前記無人機を制御可能な制御装置と、
を備え、
前記制御装置は、
前記第1範囲の内部で前記第1位置を指定したことを示す位置情報を前記位置取得手段から受信可能な画像受信部と、
前記位置情報から前記第2範囲の内部における第2位置を特定可能な第2位置特定部と、
前記第2位置に移動するよう前記無人機に指令可能な移動指令部と、
を有し、
前記制御システムは、前記第1範囲を撮影可能な1以上の撮影装置を含み、前記位置取得手段は、前記撮影装置から受信した撮影画像であって、前記第1範囲の内部で前記第1位置を指定したことを示す撮影画像を用いて前記第1位置を取得可能であり、
前記撮影装置の数が2以上であり、前記第1範囲が立体的な範囲である、
無人機の制御システム。 - 前記画像受信部は、前記第1範囲の内部で前記第1位置及び向きを指定したことを示す前記撮影画像を前記撮影装置から受信可能であり、
前記第2位置特定部は、前記撮影画像から前記第2範囲の内部における前記第2位置及び前記向きに対応する対応向きを特定可能であり、
前記移動指令部は、前記第2位置に移動し、前記対応向きを向くよう前記無人機に指令可能である、請求項1に記載の制御システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021184005A JP7307927B2 (ja) | 2021-11-11 | 2021-11-11 | 無人機の制御システム |
JP2023103426A JP2023112145A (ja) | 2021-11-11 | 2023-06-23 | 無人機の制御システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021184005A JP7307927B2 (ja) | 2021-11-11 | 2021-11-11 | 無人機の制御システム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023103426A Division JP2023112145A (ja) | 2021-11-11 | 2023-06-23 | 無人機の制御システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023071322A JP2023071322A (ja) | 2023-05-23 |
JP7307927B2 true JP7307927B2 (ja) | 2023-07-13 |
Family
ID=86409780
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021184005A Active JP7307927B2 (ja) | 2021-11-11 | 2021-11-11 | 無人機の制御システム |
JP2023103426A Pending JP2023112145A (ja) | 2021-11-11 | 2023-06-23 | 無人機の制御システム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023103426A Pending JP2023112145A (ja) | 2021-11-11 | 2023-06-23 | 無人機の制御システム |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7307927B2 (ja) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6829513B1 (ja) | 2020-04-03 | 2021-02-10 | 株式会社センシンロボティクス | 位置算出方法及び情報処理システム |
-
2021
- 2021-11-11 JP JP2021184005A patent/JP7307927B2/ja active Active
-
2023
- 2023-06-23 JP JP2023103426A patent/JP2023112145A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6829513B1 (ja) | 2020-04-03 | 2021-02-10 | 株式会社センシンロボティクス | 位置算出方法及び情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
JP2023112145A (ja) | 2023-08-10 |
JP2023071322A (ja) | 2023-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10475209B2 (en) | Camera calibration | |
EP3591490B1 (en) | Obstacle avoidance method and device, and unmanned aerial vehicle | |
JP6583840B1 (ja) | 検査システム | |
KR101880437B1 (ko) | 실제카메라 영상과 가상카메라 영상을 활용하여 넓은 시야각을 제공하는 무인선 관제시스템 | |
CN107065894B (zh) | 无人飞行器、飞行高度控制装置、方法以及计算机可读取记录介质 | |
US11122209B2 (en) | Three-dimensional shape estimation method, three-dimensional shape estimation system, flying object, program and recording medium | |
US20210185235A1 (en) | Information processing device, imaging control method, program and recording medium | |
JP2023100642A (ja) | 検査システム | |
JP6875196B2 (ja) | モバイルプラットフォーム、飛行体、支持装置、携帯端末、撮像補助方法、プログラム、及び記録媒体 | |
WO2019061334A1 (en) | SYSTEMS AND METHODS FOR PROCESSING AND DISPLAYING IMAGE DATA BASED ON ATTITUDE INFORMATION | |
WO2021251441A1 (ja) | 方法、システムおよびプログラム | |
CN109891188B (zh) | 移动平台、摄像路径生成方法、程序、以及记录介质 | |
WO2020225979A1 (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
CN110799801A (zh) | 基于无人机的测距方法、装置及无人机 | |
JP7501535B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム | |
JP6681101B2 (ja) | 検査システム | |
CN113677412B (zh) | 信息处理装置、信息处理方法和程序 | |
JP7307927B2 (ja) | 無人機の制御システム | |
KR102473202B1 (ko) | 촬영장비를 구비한 이동체의 위치정보를 판단하는 방법 및 시스템 | |
KR101620983B1 (ko) | 실시간 3차원 전술정보 표시 시스템 및 그 방법 | |
JP7437930B2 (ja) | 移動体及び撮像システム | |
WO2021134715A1 (zh) | 一种控制方法、设备、无人机及存储介质 | |
KR20190053018A (ko) | 카메라를 포함하는 무인 비행 장치를 조종하는 방법 및 전자장치 | |
JP6681102B2 (ja) | 検査システム | |
JP2020095519A (ja) | 形状推定装置、形状推定方法、プログラム、及び記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220510 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230601 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230623 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7307927 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |