JP2020114726A - コンピュータビジョンに基づく、航空機の自律着陸または監視自律着陸 - Google Patents
コンピュータビジョンに基づく、航空機の自律着陸または監視自律着陸 Download PDFInfo
- Publication number
- JP2020114726A JP2020114726A JP2019228097A JP2019228097A JP2020114726A JP 2020114726 A JP2020114726 A JP 2020114726A JP 2019228097 A JP2019228097 A JP 2019228097A JP 2019228097 A JP2019228097 A JP 2019228097A JP 2020114726 A JP2020114726 A JP 2020114726A
- Authority
- JP
- Japan
- Prior art keywords
- aircraft
- runway
- image
- adjusted
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013459 approach Methods 0.000 claims abstract description 29
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims abstract description 15
- 238000000034 method Methods 0.000 claims description 48
- 230000015654 memory Effects 0.000 claims description 23
- 238000005259 measurement Methods 0.000 claims description 10
- 230000007423 decrease Effects 0.000 claims description 8
- 238000003384 imaging method Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 4
- 230000000875 corresponding effect Effects 0.000 description 46
- 230000006870 function Effects 0.000 description 17
- 238000004891 communication Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/08—Control of attitude, i.e. control of roll, pitch, or yaw
- G05D1/0808—Control of attitude, i.e. control of roll, pitch, or yaw specially adapted for aircraft
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/04—Control of altitude or depth
- G05D1/06—Rate of change of altitude or depth
- G05D1/0607—Rate of change of altitude or depth specially adapted for aircraft
- G05D1/0653—Rate of change of altitude or depth specially adapted for aircraft during a phase of take-off or landing
- G05D1/0676—Rate of change of altitude or depth specially adapted for aircraft during a phase of take-off or landing specially adapted for landing
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/005—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10032—Satellite or aerial image; Remote sensing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Aviation & Aerospace Engineering (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
飛行場の滑走路に進入している航空機(131)を支援するための装置(600)であって、装置は、プロセッサ(601)とメモリ(602)を備え、メモリは、実行可能な命令を格納し、実行可能な命令は、プロセッサによる実行に応答して、装置に、少なくとも、
飛行場滑走路に対する航空機の現在の姿勢推定値であって、現在の高度、方位、および飛行場滑走路からの距離を有する現在の姿勢推定値を取得すること;
航空機の複数の近接姿勢であって、各近接姿勢が、現在の高度、方位、および飛行場滑走路からの距離から所定量以内の、調整された高度、調整された方位、および調整された距離を有する、複数の近接姿勢を、航空機の現在の姿勢推定値に基づいて決定すること;
複数の近接姿勢に対応する航空機の複数の予想される視点からの、飛行場滑走路の複数の画像を、飛行場の飛行場モデルデータから生成すること;
飛行場滑走路に進入している航空機上の撮像デバイスから、飛行場滑走路のリアルタイム画像を取得すること;
リアルタイム画像と複数の画像の比較を実行して、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値に基づいて、複数の画像からベストマッチ画像を識別することであって、ベストマッチ画像は、航空機の複数の近接姿勢のうちの対応する近接姿勢に対応する、複数の予想される視点のうちの対応する視点からの画像であり、複数の近接姿勢のうちの対応する近接姿勢が、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離を有する、識別すること;
対応する調整された高度、調整された方位、および飛行場滑走路までの調整された距離を有する、航空機の更新された現在の姿勢推定値を、ベストマッチ画像と、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離とに基づいて生成すること;ならびに
最終進入での航空機の誘導に使用するため、更新された現在の姿勢推定値を航空機の飛行制御コンピュータに出力すること、
を行なわせる、装置(600)。
装置に、現在の姿勢推定値を取得させることは、
航空機システムデータを介して、飛行場滑走路に対する航空機(131)の初期姿勢推定値を決定すること;および
初期姿勢推定値を現在の姿勢推定値として設定すること、
を行なわせることを含む、条項1の装置(600)。
装置に、更新された現在の姿勢推定値を出力させることは、飛行場に関連する計器着陸システムの航法データを使用せずに、最終進入で航空機を誘導するのに使用するため、更新された現在の姿勢推定値を航空機(131)の飛行制御コンピュータに出力させることを、含む、条項1または2の装置(600)。
複数の近接姿勢は、ある数の近接姿勢を含み、装置に、複数の近接姿勢を決定させることは、飛行場滑走路からの現在の距離が減少するにつれて、決定される近接姿勢の数を減らさせることを、含む、条項1から3のいずれかの装置(600)。
装置に、比較を実行させることは、装置に、リアルタイム画像と複数の画像の比較を実行させて、リアルタイム画像と複数の画像内に識別された共通オブジェクトを含む、ベストマッチ画像の1つ以上のセクションを識別させることを、含む、条項1から4のいずれかの装置(600)。
装置に、比較を実行させることは、装置に、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値として、リアルタイム画像と複数の画像との間の相関度を決定させることを、含む、条項1から5のいずれかの装置(600)。
リアルタイム画像とベストマッチ画像との間の相関度は、リアルタイム画像とベストマッチ画像との間の類似性のレベルを示し、メモリ(602)は、プロセッサ(601)による実行に応答して、装置に、さらに、類似性のレベルをユーザに示すインジケータを生成させる、さらなる実行可能な命令を格納する、条項6の装置(600)。
メモリ(602)が、プロセッサ(601)による実行に応答して、装置に、さらに、更新された現在の姿勢推定値を使用して、最終進入のための航空機(131)の自動着陸システム(141)の命令を有効にさせる、さらなる実行可能な命令を格納する、条項1から7のいずれかの装置(600)。
飛行場の滑走路に進入している航空機(131)を支援する方法(500)であって、
飛行場滑走路に対する航空機の現在の姿勢推定値であって、現在の高度、方位、および飛行場滑走路からの距離を有する現在の姿勢推定値を取得すること(501);
航空機の複数の近接姿勢であって、各近接姿勢が、現在の高度、方位、および飛行場滑走路からの距離から所定量以内の、調整された高度、調整された方位、および調整された距離を有する、複数の近接姿勢を、航空機の現在の姿勢推定値に基づいて決定すること(502);
複数の近接姿勢に対応する航空機の複数の予想される視点からの、飛行場滑走路の複数の画像を、飛行場の飛行場モデルデータから生成すること(503);
飛行場滑走路に進入している航空機上の撮像デバイスから、飛行場滑走路のリアルタイム画像を取得すること(504);
リアルタイム画像と複数の画像の比較を実行して、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値に基づいて、複数の画像からベストマッチ画像を識別することであって、ベストマッチ画像は、航空機の複数の近接姿勢のうちの対応する近接姿勢に対応する、複数の予想される視点のうちの対応する視点からの画像であり、複数の近接姿勢のうちの対応する近接姿勢が、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離を有する、識別すること(505);
対応する調整された高度、調整された方位、および飛行場滑走路までの調整された距離を有する、航空機の更新された現在の姿勢推定値を、ベストマッチ画像と、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離とに基づいて生成すること(506);ならびに
最終進入での航空機の誘導に使用するため、更新された現在の姿勢推定値を航空機の飛行制御コンピュータに出力すること(507)、
を含む方法(500)。
現在の姿勢推定値を取得すること(501)は、
航空機システムデータを介して、飛行場滑走路に対する航空機(131)の初期姿勢推定値を決定すること;および
初期姿勢推定値を現在の姿勢推定値として設定すること、
を含む、条項9の方法(500)。
飛行場に関連する計器着陸システムの航法データを使用せずに、最終進入で航空機を誘導するのに使用するため、更新された現在の姿勢推定値が、航空機(131)の飛行制御コンピュータに出力される、条項9または10の方法(500)。
複数の近接姿勢は、ある数の近接姿勢を含み、複数の近接姿勢を決定すること(502)は、飛行場滑走路からの現在の距離が減少するにつれて、決定される近接姿勢の数を減らすことを、含む、条項9から11のいずれかの方法(500)。
比較を実行すること(505)は、リアルタイム画像と複数の画像の比較を実行して、リアルタイム画像と複数の画像内に識別された共通オブジェクトを含む、ベストマッチ画像の1つ以上のセクションを識別することを、含む、条項9から12のいずれかの方法(500)。
比較を実行すること(505)は、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値として、リアルタイム画像と複数の画像との間の相関度を決定することを、含む、条項9から13のいずれかの方法(500)。
リアルタイム画像とベストマッチ画像との間の相関度は、リアルタイム画像とベストマッチ画像との間の類似性のレベルを示し、方法は、類似性のレベルをユーザに示すインジケータを生成することを、さらに含む、条項14の方法(500)。
更新された現在の姿勢推定値を使用して、最終進入のための航空機(131)の自動着陸システム(141)の命令を有効にすることを、さらに含む、条項9から15のいずれかの方法(500)。
飛行場の滑走路に進入している航空機(131)を支援するためのコンピュータ可読記憶媒体(602)であって、コンピュータ可読記憶媒体は、非一過性であり、かつコンピュータ可読プログラムコード(603)を格納しており、コンピュータ可読プログラムコードは、プロセッサ(601)による実行に応答して、装置(600)に、少なくとも、
飛行場滑走路に対する航空機の現在の姿勢推定値であって、現在の高度、方位、および飛行場滑走路からの距離を有する現在の姿勢推定値を取得すること;
航空機の複数の近接姿勢であって、各近接姿勢が、現在の高度、方位、および飛行場滑走路からの距離から所定量以内の、調整された高度、調整された方位、および調整された距離を有する、複数の近接姿勢を、航空機の現在の姿勢推定値に基づいて決定すること;
複数の近接姿勢に対応する航空機の複数の予想される視点からの、飛行場滑走路の複数の画像を、飛行場の飛行場モデルデータから生成すること;
飛行場滑走路に進入している航空機上の撮像デバイスから、飛行場滑走路のリアルタイム画像を取得すること;
リアルタイム画像と複数の画像の比較を実行して、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値に基づいて、複数の画像からベストマッチ画像を識別することであって、ベストマッチ画像は、航空機の複数の近接姿勢のうちの対応する近接姿勢に対応する、複数の予想される視点のうちの対応する視点からの画像であり、複数の近接姿勢のうちの対応する近接姿勢が、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離を有する、識別すること;
対応する調整された高度、調整された方位、および飛行場滑走路までの調整された距離を有する、航空機の更新された現在の姿勢推定値を、ベストマッチ画像と、対応する調整された高度、調整された方位、および飛行場滑走路からの調整された距離とに基づいて生成すること;ならびに
最終進入での航空機の誘導に使用するため、更新された現在の姿勢推定値を航空機の飛行制御コンピュータに出力すること、
を行なわせる、コンピュータ可読記憶媒体(602)。
装置(600)に、現在の姿勢推定値を取得させることは、
航空機システムデータを介して、飛行場滑走路に対する航空機(131)の初期姿勢推定値を決定すること;および
初期姿勢推定値を現在の姿勢推定値として設定すること、
を行なわせることを含む、条項17のコンピュータ可読記憶媒体(602)。
装置(600)に、更新された現在の姿勢推定値を出力させることは、飛行場に関連する計器着陸システムの航法データを使用せずに、最終進入で航空機を誘導するのに使用するため、更新された現在の姿勢推定値を航空機(131)の飛行制御コンピュータに出力させることを、含む、条項17のコンピュータ可読記憶媒体(602)。
複数の近接姿勢は、ある数の近接姿勢を含み、装置(600)に、複数の近接姿勢を決定させることは、飛行場滑走路からの現在の距離が減少するにつれて、決定される近接姿勢の数を減らさせることを、含む、条項17のコンピュータ可読記憶媒体(602)。
装置(600)に、比較を実行させることは、装置に、リアルタイム画像と複数の画像の比較を実行させて、リアルタイム画像と複数の画像内に識別された共通オブジェクトを含む、ベストマッチ画像の1つ以上のセクションを識別させることを、含む、条項17のコンピュータ可読記憶媒体(602)。
装置(600)に、比較を実行させることは、装置に、リアルタイム画像と複数の画像内に識別された共通オブジェクトの測定値として、リアルタイム画像と複数の画像との間の相関度を決定させることを、含む、条項17のコンピュータ可読記憶媒体(602)。
リアルタイム画像とベストマッチ画像との間の相関度は、リアルタイム画像とベストマッチ画像との間の類似性のレベルを示し、コンピュータ可読記憶媒体は、プロセッサ(601)による実行に応答して、装置(600)に、さらに、類似性のレベルをユーザに示すインジケータを生成させる、さらなるコンピュータ可読プログラムコード(603)を格納している、条項22のコンピュータ可読記憶媒体(602)。
プロセッサ(601)による実行に応答して、装置(600)に、さらに、更新された現在の姿勢推定値を使用して、最終進入のための航空機(131)の自動着陸システム(141)の命令を有効にさせる、さらなるコンピュータ可読プログラムコード(603)を格納している、条項17のコンピュータ可読記憶媒体(602)。
Claims (15)
- 飛行場の滑走路に進入している航空機(131)を支援するための装置(600)であって、前記装置は、プロセッサ(601)とメモリ(602)を備え、前記メモリは、実行可能な命令を格納し、前記実行可能な命令は、前記プロセッサによる実行に応答して、前記装置に、少なくとも、
前記滑走路に対する前記航空機の現在の姿勢推定値であって、現在の高度、方位、および前記滑走路からの距離を有する現在の姿勢推定値を取得すること;
前記航空機の複数の近接姿勢であって、各近接姿勢が、前記現在の高度、方位、および前記滑走路からの距離から所定量以内の、調整された高度、調整された方位、および調整された距離を有する、複数の近接姿勢を、前記航空機の前記現在の姿勢推定値に基づいて決定すること;
前記複数の近接姿勢に対応する前記航空機の複数の予想される視点からの前記滑走路の複数の画像を、前記飛行場の飛行場モデルデータから生成すること;
前記滑走路に進入している前記航空機上の撮像デバイスから、前記滑走路のリアルタイム画像を取得すること;
前記リアルタイム画像と前記複数の画像の比較を実行して、ベストマッチ画像であって、前記ベストマッチ画像は、前記航空機の前記複数の近接姿勢のうちの対応する近接姿勢に対応する、前記複数の予想される視点のうちの対応する視点からの画像であり、前記複数の近接姿勢のうちの前記対応する近接姿勢は、対応する調整された高度、調整された方位、および前記滑走路からの調整された距離を有する、ベストマッチ画像を、前記リアルタイム画像内と前記複数の画像内に識別された共通オブジェクトの測定値に基づいて、前記複数の画像から識別すること;
前記対応する調整された高度、調整された方位、および前記滑走路までの調整された距離を有する、前記航空機の更新された現在の姿勢推定値を、前記ベストマッチ画像、ならびに前記対応する調整された高度、調整された方位、および前記滑走路からの調整された距離に基づいて生成すること;ならびに
最終進入での前記航空機の誘導に使用するため、前記更新された現在の姿勢推定値を前記航空機の飛行制御コンピュータに出力すること、
を行なわせる、装置(600)。 - 前記現在の姿勢推定値を取得することを、前記装置に行なわせることは、
航空機システムデータを介して、前記滑走路に対する前記航空機(131)の初期姿勢推定値を決定すること;および
前記初期姿勢推定値を前記現在の姿勢推定値として設定すること、
を行なわせることを含む、請求項1に記載の装置(600)。 - 前記更新された現在の姿勢推定値を出力することを、前記装置に行なわせることは、前記飛行場に関連する計器着陸システムの航法データを使用しない、前記最終進入での前記航空機の誘導に使用するため、前記更新された現在の姿勢推定値を前記航空機(131)の前記飛行制御コンピュータに出力することを、行なわせることを含む、請求項1または2に記載の装置(600)。
- 前記複数の近接姿勢は、ある数の近接姿勢を含み、前記複数の近接姿勢を決定することを、前記装置に行なわせることは、前記滑走路からの前記現在の距離が減少するにつれて、決定される近接姿勢の数を減らすことを、行なわせることを含む、請求項1から3のいずれか一項に記載の装置(600)。
- 前記比較を実行することを、前記装置に行なわせることは、前記リアルタイム画像と前記複数の画像の前記比較を実行して、前記リアルタイム画像内と前記複数の画像内に識別された前記共通オブジェクトを含む、前記ベストマッチ画像の1つ以上のセクションを識別することを、前記装置に行なわせることを含む、請求項1から4のいずれか一項に記載の装置(600)。
- 前記比較を実行することを、前記装置に行なわせることは、前記リアルタイム画像内と前記複数の画像内に識別された共通オブジェクトの前記測定値として、前記リアルタイム画像と前記複数の画像との間の相関度を決定することを、前記装置に行なわせることを含む、請求項1から5のいずれか一項に記載の装置(600)。
- 前記リアルタイム画像と前記ベストマッチ画像との間の相関度は、前記リアルタイム画像と前記ベストマッチ画像との間の類似性のレベルを示し、前記メモリ(602)は、さらなる実行可能な命令であって、前記プロセッサ(601)による実行に応答して、前記類似性のレベルをユーザに示すインジケータを生成することを、前記装置に、さらに行なわせる、さらなる実行可能な命令を格納する、請求項6に記載の装置(600)。
- 前記メモリ(602)が、さらなる実行可能な命令であって、前記プロセッサ(601)による実行に応答して、前記更新された現在の姿勢推定値を使用して、前記最終進入のための前記航空機(131)の自動着陸システム(141)の命令を有効にすることを、前記装置に、さらに行なわせる、さらなる実行可能な命令を格納する、請求項1から7のいずれか一項に記載の装置(600)。
- 飛行場の滑走路に進入している航空機(131)を支援する方法(500)であって、
前記滑走路に対する前記航空機の現在の姿勢推定値であって、現在の高度、方位、および前記滑走路からの距離を有する現在の姿勢推定値を取得すること(501);
前記航空機の複数の近接姿勢であって、各近接姿勢が、前記現在の高度、方位、および前記滑走路からの距離から所定量以内の、調整された高度、調整された方位、および調整された距離を有する、複数の近接姿勢を、前記航空機の前記現在の姿勢推定値に基づいて決定すること(502);
前記複数の近接姿勢に対応する前記航空機の複数の予想される視点からの前記滑走路の複数の画像を、前記飛行場の飛行場モデルデータから生成すること(503);
前記滑走路に進入している前記航空機上の撮像デバイスから、前記滑走路のリアルタイム画像を取得すること(504);
前記リアルタイム画像と前記複数の画像の比較を実行して、ベストマッチ画像であって、前記ベストマッチ画像は、前記航空機の前記複数の近接姿勢のうちの対応する近接姿勢に対応する、前記複数の予想される視点のうちの対応する視点からの画像であり、前記複数の近接姿勢のうちの前記対応する近接姿勢は、対応する調整された高度、調整された方位、および前記滑走路からの調整された距離を有する、ベストマッチ画像を、前記リアルタイム画像内と前記複数の画像内に識別された共通オブジェクトの測定値に基づいて、前記複数の画像から識別すること(505);
前記対応する調整された高度、調整された方位、および前記滑走路までの調整された距離を有する、前記航空機の更新された現在の姿勢推定値を、前記ベストマッチ画像、ならびに前記対応する調整された高度、調整された方位、および前記滑走路からの調整された距離に基づいて生成すること(506);ならびに
最終進入での前記航空機の誘導に使用するため、前記更新された現在の姿勢推定値を前記航空機の飛行制御コンピュータに出力すること(507)、
を含む方法(500)。 - 前記現在の姿勢推定値を取得すること(501)は、
航空機システムデータを介して、前記滑走路に対する前記航空機(131)の初期姿勢推定値を決定すること;および
前記初期姿勢推定値を前記現在の姿勢推定値として設定すること、
を含む、請求項9に記載の方法(500)。 - 前記飛行場に関連する計器着陸システムの航法データを使用しない、前記最終進入での前記航空機の誘導に使用するため、前記更新された現在の姿勢推定値が、前記航空機(131)の前記飛行制御コンピュータに出力される、請求項9または10に記載の方法(500)。
- 前記複数の近接姿勢は、ある数の近接姿勢を含み、前記複数の近接姿勢を決定すること(502)は、前記滑走路からの前記現在の距離が減少するにつれて、決定される近接姿勢の数を減らすことを、含む、請求項9から11のいずれか一項に記載の方法(500)。
- 前記比較を実行すること(505)は、前記リアルタイム画像と前記複数の画像の前記比較を実行して、前記リアルタイム画像内と前記複数の画像内に識別された前記共通オブジェクトを含む、前記ベストマッチ画像の1つ以上のセクションを、識別することを含み、かつ/または前記比較を実行すること(505)は、前記リアルタイム画像内と前記複数の画像内に識別された共通オブジェクトの前記測定値として、前記リアルタイム画像と前記複数の画像との間の相関度を決定することを含む、請求項9から12のいずれか一項に記載の方法(500)。
- 前記リアルタイム画像と前記ベストマッチ画像との間の相関度は、前記リアルタイム画像と前記ベストマッチ画像との間の類似性のレベルを示し、前記方法は、前記類似性のレベルをユーザに示すインジケータを生成することを、さらに含む、請求項13に記載の方法(500)。
- 前記更新された現在の姿勢推定値を使用して、前記最終進入のための前記航空機(131)の自動着陸システム(141)の命令を有効にすることを、さらに含む、請求項9から14のいずれか一項に記載の方法(500)。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/227,153 US11055875B2 (en) | 2018-12-20 | 2018-12-20 | Computer-vision-based autonomous or supervised- autonomous landing of aircraft |
US16/227,153 | 2018-12-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020114726A true JP2020114726A (ja) | 2020-07-30 |
JP7340440B2 JP7340440B2 (ja) | 2023-09-07 |
Family
ID=68531427
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019228097A Active JP7340440B2 (ja) | 2018-12-20 | 2019-12-18 | コンピュータビジョンに基づく、航空機の自律着陸または監視自律着陸 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11055875B2 (ja) |
EP (1) | EP3671397B1 (ja) |
JP (1) | JP7340440B2 (ja) |
CN (1) | CN111352434B (ja) |
CA (1) | CA3058723A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11370422B2 (en) * | 2015-02-12 | 2022-06-28 | Honda Research Institute Europe Gmbh | Method and system in a vehicle for improving prediction results of an advantageous driver assistant system |
CN112208783A (zh) * | 2020-10-19 | 2021-01-12 | 陈穗 | 一种卫星定位数字通道式飞机低可见度辅助降落装置系统 |
CN112797982A (zh) * | 2020-12-25 | 2021-05-14 | 中国航空工业集团公司沈阳飞机设计研究所 | 一种基于机器视觉的无人机自主着陆测量方法 |
US11900633B2 (en) | 2021-01-27 | 2024-02-13 | The Boeing Company | Vehicle pose determination systems and methods |
US11995228B2 (en) | 2022-01-11 | 2024-05-28 | Rockwell Collins, Inc. | Head tracking system with extended kalman filter combining absolute and relative navigation |
CN115329932A (zh) * | 2022-08-05 | 2022-11-11 | 中国民用航空飞行学院 | 基于数字孪生的飞机着陆姿态监视方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5809171A (en) | 1996-01-05 | 1998-09-15 | Mcdonnell Douglas Corporation | Image processing method and apparatus for correlating a test image with a template |
US6980892B1 (en) * | 2003-11-18 | 2005-12-27 | Garmin International, Inc. | Avionics system and method for providing altitude alerts during final landing approach |
US20090306840A1 (en) | 2008-04-08 | 2009-12-10 | Blenkhorn Kevin P | Vision-based automated landing system for unmanned aerial vehicles |
US8332083B1 (en) * | 2008-07-03 | 2012-12-11 | Rockwell Collins, Inc. | System and method for generating a missed approach path |
JP5971466B2 (ja) * | 2012-05-08 | 2016-08-17 | 日本電気株式会社 | フライトパス表示システム、方法及びプログラム |
FR3009117B1 (fr) * | 2013-07-24 | 2016-11-25 | Airbus Operations Sas | Procede et systeme d'atterrissage automatique autonome |
US9517844B2 (en) * | 2013-09-25 | 2016-12-13 | Honeywell International Inc. | System and method for displaying airport features on a dynamic airport moving map display |
EP3021306B1 (en) * | 2014-11-14 | 2020-10-28 | Airbus Defence and Space GmbH | Automatic take-off and landing control device |
KR102364730B1 (ko) * | 2015-07-29 | 2022-02-18 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어방법 |
US9836064B2 (en) * | 2016-03-02 | 2017-12-05 | The Boeing Company | Aircraft landing systems and methods |
CN106927059A (zh) * | 2017-04-01 | 2017-07-07 | 成都通甲优博科技有限责任公司 | 一种基于单目视觉的无人机降落方法及装置 |
WO2019061111A1 (zh) * | 2017-09-27 | 2019-04-04 | 深圳市大疆创新科技有限公司 | 一种路径调整方法及无人机 |
-
2018
- 2018-12-20 US US16/227,153 patent/US11055875B2/en active Active
-
2019
- 2019-10-11 CA CA3058723A patent/CA3058723A1/en active Pending
- 2019-11-11 EP EP19208279.0A patent/EP3671397B1/en active Active
- 2019-12-16 CN CN201911291921.7A patent/CN111352434B/zh active Active
- 2019-12-18 JP JP2019228097A patent/JP7340440B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US20200202559A1 (en) | 2020-06-25 |
EP3671397B1 (en) | 2021-09-22 |
CN111352434A (zh) | 2020-06-30 |
CA3058723A1 (en) | 2020-06-20 |
CN111352434B (zh) | 2023-11-28 |
JP7340440B2 (ja) | 2023-09-07 |
US11055875B2 (en) | 2021-07-06 |
EP3671397A1 (en) | 2020-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7340440B2 (ja) | コンピュータビジョンに基づく、航空機の自律着陸または監視自律着陸 | |
CN110458961B (zh) | 基于增强现实的系统 | |
US10767990B2 (en) | Device, method, and system for processing survey data, and program therefor | |
US20170131716A1 (en) | Methods and apparatus to autonomously navigate a vehicle by selecting sensors from which to obtain measurements for navigation | |
US20160093225A1 (en) | Landing system for an aircraft | |
US20160086497A1 (en) | Landing site tracker | |
EP2618322B1 (en) | System and method for detecting and displaying airport approach lights | |
KR102003187B1 (ko) | 무인 비행체에 의해 촬영된 이미지들을 사용하여 측량 대상지의 위치 정보를 포함하는 GCP (Ground Control Point)들의 각각이 매칭된 결과 이미지를 모델링하는 방법 및 장치 | |
AU2019203567B2 (en) | Geo-registering an aerial image by an object detection model using machine learning | |
KR101684293B1 (ko) | 무인 비행체의 비상 착륙 지점 검출 시스템 및 그 방법 | |
JP2021184280A (ja) | 航空機着陸システム及び方法 | |
KR102217422B1 (ko) | 운전면허시험 처리 장치 | |
EP1584896A1 (en) | Passive measurement of terrain parameters | |
US20170082429A1 (en) | Passive altimeter | |
KR101821992B1 (ko) | 무인비행체를 이용한 목표물의 3차원 위치 산출 방법 및 장치 | |
EP4032813A1 (en) | Computer vision systems and methods for aiding landing decision | |
Tonhäuser et al. | Integrity concept for image-based automated landing systems | |
US10330769B1 (en) | Method and apparatus for geolocating emitters in a multi-emitter environment | |
US20070127012A1 (en) | Rate-based range and geolocation | |
KR20160070384A (ko) | 열화상 감지에 의한 비행물체 탐지시스템 | |
KR101470694B1 (ko) | 위치 계산 장치 및 방법 | |
US20220198703A1 (en) | Determining a current pose estimate of an aircraft relative to a runway to support the aircraft on approach | |
KR102515245B1 (ko) | 무인 비행체의 분실을 방지하는 방법 및 장치 | |
CN111649761A (zh) | 一种多拼相机pos数据获取方法、装置、设备及介质 | |
KR20220123901A (ko) | 무인 비행체 또는 항공기에 의해 촬영된 항공 영상에 기반하여 hd 맵을 생성하는 방법 및 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221214 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230713 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230801 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230828 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7340440 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |