JP7028247B2 - 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム - Google Patents
飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム Download PDFInfo
- Publication number
- JP7028247B2 JP7028247B2 JP2019537542A JP2019537542A JP7028247B2 JP 7028247 B2 JP7028247 B2 JP 7028247B2 JP 2019537542 A JP2019537542 A JP 2019537542A JP 2019537542 A JP2019537542 A JP 2019537542A JP 7028247 B2 JP7028247 B2 JP 7028247B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- flight
- altitude information
- flying object
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 17
- 238000003384 imaging method Methods 0.000 claims description 15
- 230000003068 static effect Effects 0.000 claims description 15
- 238000000605 extraction Methods 0.000 description 9
- 239000013598 vector Substances 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000001174 ascending effect Effects 0.000 description 4
- 230000009194 climbing Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 1
- OTMSDBZUPAUEDD-UHFFFAOYSA-N Ethane Chemical compound CC OTMSDBZUPAUEDD-UHFFFAOYSA-N 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
- G05D1/102—Simultaneous control of position or course in three dimensions specially adapted for aircraft specially adapted for vertical take-off of aircraft
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/04—Control of altitude or depth
- G05D1/06—Rate of change of altitude or depth
- G05D1/0607—Rate of change of altitude or depth specially adapted for aircraft
- G05D1/0653—Rate of change of altitude or depth specially adapted for aircraft during a phase of take-off or landing
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0094—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U10/00—Type of UAV
- B64U10/10—Rotorcrafts
- B64U10/13—Flying platforms
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2101/00—UAVs specially adapted for particular uses or applications
- B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
- B64U2201/10—UAVs characterised by their flight controls autonomous, i.e. by navigating independently from ground or air stations, e.g. by using inertial navigation systems [INS]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
Landscapes
- Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Description
飛行体の周囲を撮像するための撮像手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
前記撮像手段により撮影された画像を前記飛行高度情報と対応付けて記録する記録手段と、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録手段に記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
を備え、
前記記録手段は、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御手段は、前記飛行高度情報に応じて、利用すべき画像を前記記録手段から選択する。
飛行体の周囲を撮像して取得した画像を受信する画像受信手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
前記画像受信手段により受信された画像を前記飛行高度情報と対応付けて記録する記録手段と、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録手段に記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
を備え、
前記記録手段は、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御手段は、前記飛行高度情報に応じて、利用すべき画像を前記記録手段から選択する。
飛行体の周囲を撮像する撮像ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
前記撮像ステップにより撮影された画像を前記飛行高度情報と対応付けて記録する記録ステップと、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録ステップにて記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
を備え、
前記記録ステップは、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御ステップは、前記飛行高度情報に応じて、利用すべき画像を前記記録ステップで記録された画像から選択する。
飛行体の周囲を撮像する撮像ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
前記撮像ステップにより撮影された画像を前記飛行高度情報と対応付けて記録する記録ステップと、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録ステップにて記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
をコンピュータに実行させる飛行体の制御プログラムであって、
前記記録ステップは、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御ステップは、前記飛行高度情報に応じて、利用すべき画像を前記記録ステップで記録された画像から選択する。
本発明の第1実施形態としての飛行体100について、図1を用いて説明する。図1に示すように、飛行体100は、ホバリング判定部101と撮像部102と画像記録部103と静止制御部104とを含む。
次に本発明の第2実施形態に係る飛行体について、図2A乃至図5を用いて説明する。図2Aは、本実施形態に係る飛行体200の離発着の様子を説明するための図である。飛行体200を災害現場に派遣するため、例えばビルの谷間に、車両210を停車させ、そのルーフに設けられたターゲットマーク215から飛行体200を離発着させる。
次に本発明の第3実施形態に係る飛行体900について、図9を用いて説明する。図9は、本実施形態に係る飛行体900の内部構成を説明するための図である。本実施形態に係る飛行体900は、上記第2実施形態と比べると、特徴抽出部906において移動体除去部961を有する点で異なる。その他の構成および動作は、第2実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
次に本発明の第4実施形態に係る飛行体について説明する。上記実施形態では、離陸上昇時に記録された下方画像と、ホバリング中に撮影された下方画像とを用いて飛行位置制御を行なったが、本実施形態では、さらに、他のタイミングで記録手段に記録された事前画像情報を用いて、ホバリング制御を行なう。具体的には、図12に示すように、操縦士が、ホバリング位置として指定した位置において(S1201)、画像撮影および高度取得を行ない(S803)、そこで撮影された画像および高度を利用して、静止制御を行なってもよい(S819)。
次に本発明の第5実施形態に係る飛行体について説明する。上記実施形態では、離陸上昇時に記録された下方画像と、ホバリング中に撮影された下方画像とを用いて飛行位置制御を行なったが、本実施形態では、さらに、飛行体の前方画像を用いて、ホバリング制御を行なう。具体的には、図13に示すように、マンション1301の窓を撮影した正面画像またはその特徴点を例えば部屋番号に対応付けて画像データベース302に記録し、部屋番号の指示に応じて、所定の位置にて飛行体1300をホバリングさせてもよい。図14に示すように、鉄塔1401を撮影した正面画像を、高度情報に対応付けて画像データベース302に記録し、操縦士からの高度の指定に応じて、読出した正面画像または特徴点を利用して飛行体1400を所定の位置にてホバリングさせてもよい。
次に本発明の第6実施形態に係る飛行体制御装置1500について、図15を用いて説明する。図15は、本実施形態に係る飛行体制御装置1500(いわゆるプロポ)の内部構成を説明するための図である。
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
Claims (5)
- 飛行体の周囲を撮像するための撮像手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
前記撮像手段により撮影された画像を前記飛行高度情報と対応付けて記録する記録手段と、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録手段に記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
を備え、
前記記録手段は、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御手段は、前記飛行高度情報に応じて、利用すべき画像を前記記録手段から選択する飛行体。 - 前記記録手段は、前記画像から抽出された特徴点を記録し、前記静止制御手段は、前記記録手段に記録された前記特徴点と、飛行中に撮像された画像から抽出された特徴点とを比較して、前記飛行体を空中で静止させる請求項1に記載の飛行体。
- 飛行体の周囲を撮像して取得した画像を受信する画像受信手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
前記画像受信手段により受信された画像を前記飛行高度情報と対応付けて記録する記録手段と、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録手段に記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御手段と、
前記飛行体の飛行高度情報を取得する高度取得手段と、
を備え、
前記記録手段は、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御手段は、前記飛行高度情報に応じて、利用すべき画像を前記記録手段から選択する飛行体制御装置。 - 飛行体の周囲を撮像する撮像ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
前記撮像ステップにより撮影された画像を前記飛行高度情報と対応付けて記録する記録ステップと、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録ステップにて記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
を備え、
前記記録ステップは、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御ステップは、前記飛行高度情報に応じて、利用すべき画像を前記記録ステップで記録された画像から選択する飛行体の制御方法。 - 飛行体の周囲を撮像する撮像ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
前記撮像ステップにより撮影された画像を前記飛行高度情報と対応付けて記録する記録ステップと、
前記飛行体をホバリングさせる場合に、前記飛行高度情報に基づいて前記記録ステップにて記録された画像から選択された画像と飛行中に撮像された画像とを利用して、前記飛行体を空中で静止させる静止制御ステップと、
前記飛行体の飛行高度情報を取得する高度取得ステップと、
をコンピュータに実行させる飛行体の制御プログラムであって、
前記記録ステップは、異なる撮影高度に対応する複数の画像を前記飛行高度情報と対応付けて記録し、
前記静止制御ステップは、前記飛行高度情報に応じて、利用すべき画像を前記記録ステップで記録された画像から選択する飛行体の制御プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2017/030627 WO2019038927A1 (ja) | 2017-08-25 | 2017-08-25 | 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019038927A1 JPWO2019038927A1 (ja) | 2020-09-24 |
JP7028247B2 true JP7028247B2 (ja) | 2022-03-02 |
Family
ID=65438634
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019537542A Active JP7028247B2 (ja) | 2017-08-25 | 2017-08-25 | 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20210157338A1 (ja) |
JP (1) | JP7028247B2 (ja) |
WO (1) | WO2019038927A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022219722A1 (ja) * | 2021-04-13 | 2022-10-20 | 三菱電機ビルテクノサービス株式会社 | エレベーターの昇降路の内部を点検する飛翔体、飛翔体の制御装置および飛翔体の飛行方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006027331A (ja) | 2004-07-13 | 2006-02-02 | Hiroboo Kk | 無人飛行体を利用した航空映像情報の収集方法 |
JP2016111414A (ja) | 2014-12-03 | 2016-06-20 | コニカミノルタ株式会社 | 飛行体の位置検出システム及び飛行体 |
-
2017
- 2017-08-25 JP JP2019537542A patent/JP7028247B2/ja active Active
- 2017-08-25 WO PCT/JP2017/030627 patent/WO2019038927A1/ja active Application Filing
- 2017-08-25 US US16/641,521 patent/US20210157338A1/en not_active Abandoned
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006027331A (ja) | 2004-07-13 | 2006-02-02 | Hiroboo Kk | 無人飛行体を利用した航空映像情報の収集方法 |
JP2016111414A (ja) | 2014-12-03 | 2016-06-20 | コニカミノルタ株式会社 | 飛行体の位置検出システム及び飛行体 |
Non-Patent Citations (2)
Title |
---|
KDSフライメンタ 3Dの実力は,ラジコン技術 2月号,第50巻第2号,株式会社電波実験社,2010年02月01日,第42~43頁 |
藤田 匠,サンプル値最適レギュレータによる無人航空機の位置制御,第59回 システム制御情報学会 研究発表講演会講演論文集 [CD-ROM] 第59回システム制御情報学会 研究発表講演会 講演論文集,2015年05月22日 |
Also Published As
Publication number | Publication date |
---|---|
US20210157338A1 (en) | 2021-05-27 |
JPWO2019038927A1 (ja) | 2020-09-24 |
WO2019038927A1 (ja) | 2019-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11604479B2 (en) | Methods and system for vision-based landing | |
US20230236611A1 (en) | Unmanned Aerial Vehicle Sensor Activation and Correlation System | |
US10670407B2 (en) | Systems and methods for auto-return | |
CN107240063B (zh) | 一种面向移动平台的旋翼无人机自主起降方法 | |
EP3729227B1 (en) | Image based localization for unmanned aerial vehicles, and associated systems and methods | |
US11827352B2 (en) | Visual observer for unmanned aerial vehicles | |
US9817394B1 (en) | Systems and methods for adjusting flight control of an unmanned aerial vehicle | |
US20190243356A1 (en) | Method for controlling flight of an aircraft, device, and aircraft | |
WO2018058307A1 (en) | Systems and methods for initialization of target object in a tracking system | |
US20230388449A1 (en) | Flying body control apparatus, flying body control method, and flying body control program | |
CN114689030A (zh) | 一种基于机载视觉的无人机辅助定位方法及系统 | |
Moon et al. | Development of multiple AR. Drone control system for indoor aerial choreography | |
JP7028247B2 (ja) | 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム | |
JP7028248B2 (ja) | 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム | |
JP7070636B2 (ja) | 飛行体、飛行体制御装置、飛行体制御方法および飛行体制御プログラム | |
KR20220068606A (ko) | 부분 영상을 고려한 드론의 자동 착륙 알고리즘 | |
AU2021105629A4 (en) | System and Method for Monitoring, Detecting and Counting Fruits in a Field | |
KR101590889B1 (ko) | 표적 추적 정확도 분석을 위한 영상 기반의 위치추정 방법 및 이를 위한 위치추정 시스템 | |
KR102679721B1 (ko) | 포인트클라우드를 이용한 드론의 비행 제어 방법 | |
KR20180116026A (ko) | 무인항공기의 관찰수행 위치 인식방법 및 장치 | |
JP2024012827A (ja) | 無人航空機対処システム及び映像追尾装置 | |
Blenkhorn et al. | Towards an inexpensive computer-vision based automated landing system for small unmanned aerial vehicles |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210615 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210816 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220118 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220131 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7028247 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |