JP2021534481A - 障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体 - Google Patents

障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体 Download PDF

Info

Publication number
JP2021534481A
JP2021534481A JP2021505707A JP2021505707A JP2021534481A JP 2021534481 A JP2021534481 A JP 2021534481A JP 2021505707 A JP2021505707 A JP 2021505707A JP 2021505707 A JP2021505707 A JP 2021505707A JP 2021534481 A JP2021534481 A JP 2021534481A
Authority
JP
Japan
Prior art keywords
aircraft
sub
obstacle
regions
ground
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021505707A
Other languages
English (en)
Inventor
リーチャン ジェン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xaircraft Technology Co Ltd
Original Assignee
Guangzhou Xaircraft Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xaircraft Technology Co Ltd filed Critical Guangzhou Xaircraft Technology Co Ltd
Publication of JP2021534481A publication Critical patent/JP2021534481A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G05D1/106Change initiated in response to external conditions, e.g. avoidance of elevated terrain or of no-fly zones
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D45/00Aircraft indicators or protectors not otherwise provided for
    • B64D45/04Landing aids; Safety measures to prevent collision with earth's surface
    • B64D45/08Landing aids; Safety measures to prevent collision with earth's surface optical
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/933Lidar systems specially adapted for specific applications for anti-collision purposes of aircraft or spacecraft
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G5/00Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/0017Arrangements for implementing traffic-related aircraft activities, e.g. arrangements for generating, displaying, acquiring or managing traffic information
    • G08G5/0021Arrangements for implementing traffic-related aircraft activities, e.g. arrangements for generating, displaying, acquiring or managing traffic information located in the aircraft
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G5/00Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/04Anti-collision systems
    • G08G5/045Navigation or guidance aids, e.g. determination of anti-collision manoeuvers
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G5/00Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • G08G5/06Traffic control systems for aircraft, e.g. air-traffic control [ATC] for control when on the ground
    • G08G5/065Navigation or guidance aids, e.g. for taxiing or rolling
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4808Evaluating distance, position or velocity data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Image Processing (AREA)

Abstract

本出願は、障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体を開示し、当該障害物又は地面の認識方法は、航空機の前方領域の点群データを決定するステップと、前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップと、前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、を含む。【選択図】図1

Description

関連出願の相互参照
本出願は、広州極飛科技有限公司が2018年8月15日に提出された、発明の名称が「障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体」であり、中国特許出願番号が「201810931105.7」である優先権を主張する。
本出願は、航空機技術に関し、特に、障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体に関する。
航空機の普及に伴い、ますます多くの人々が航空機を理解して使用するようになった。現在民間の航空機は、主に、民生用航空機と産業用(業界レベル)航空機の2種類に分けられ、この2種類の航空機は、通常、すべて手動又は自動制御下で、航空機を正確に制御していくつかの飛行タスクを完了し、これらの飛行タスクは、散布作業、航空写真、ライン検査、測量、計量、貨物輸送などを含む。
航空機の作業中に、下方の検知装置によって航空機が地面と設定距離を保つようにすることによって、模擬飛行を行い、前方の検知装置によって前方に障害物があるか否かを判断し、航空機の前方に障害物が存在することが認識された場合、障害物回避操作を行う。
しかし、航空機の飛行中に、航空機の前方の検知装置によって航空機の前方地面の勾配が一つの設定範囲内にあると決定された場合、航空機は模擬飛行することができるが、航空機は、それを障害物と見なし、障害物回避操作を行う。したがって、航空機が前方の障害物又は地面を正確に認識することができないため、模擬飛行と障害物回避操作が衝突し、作業フロー及び作業効率に影響を与える。
本出願は、航空機の前方領域における障害物又は地面を正確に認識することによって、航空機の作業効率を向上させることができる障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体を提供する。
第1の態様において、本出願は、障害物又は地面の認識方法を提供し、航空機の前方領域の点群データを決定するステップと、前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップと、前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、を含む。
前記いくつかのサブ領域の標高を直線フィッティングするステップは、前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、直線フィッティングを行うステップを含む。
前記フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、フィッティングされた直線の傾きが傾きしきい値より小さく、且つ前記フィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、前記前方領域に地面が存在すると決定し、そうでない場合、前記前方領域に障害物が存在すると決定するステップを含む。
前記いくつかのサブ領域の標高をフィッティングするステップは、前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うステップを含む。
前記フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、セグメントのフィッティングされた直線の傾きの平均値を決定するステップと、各セグメントのフィッティングされた直線の傾きと前記平均値の差がいずれも第1の設定値より小さく、且つ前記平均値が前記傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前記前方領域に地面が存在すると決定するステップと、そうでない場合、前記前方領域に障害物が存在すると決定するステップと、を含む。
前記前方領域をいくつかのサブ領域に分割するステップは、前記前方領域を前記航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割するステップを含む。
各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップは、前記点群データをサブ領域に対応する配列に保存するステップと、各前記サブ領域に対して、前記サブ領域の配列を標高の大きい順に設定数の点群データを除去するステップと、前記配列内の残りの点群データに基づいて、標高平均値を決定するステップと、前記標高平均値を前記サブ領域の標高とするステップと、を含む。
各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップは、前記点群データをサブ領域に対応する配列に保存するステップと、各前記サブ領域に対して、前記配列内のすべての点群データに基づいて、標高平均値を決定するステップと、前記標高平均値を前記サブ領域の標高とするステップと、を含む。
前記点群データをサブ領域に対応する配列に保存する前に、前記点群データをダウンサンプリング処理するステップをさらに含む。
前記方法は、前記航空機の予め設定された航路と、前記航空機の位置と、前記航空機の幅とに基づいて前記航空機の前方領域を決定するステップをさらに含み、前記前方領域における各点から前記航空機までの水平距離は、第1の設定距離範囲内にあり、前記前方領域における各点から前記航空機までの垂直距離は、第2の設定距離範囲内にある。
前記航空機の前方領域の点群データを決定するステップは、航空機検知領域の点群データを決定し、前記前方領域以外の点群データをフィルタリングして、前記航空機の前方領域の点群データを取得するステップを含み、前記検知領域は、前記航空機の有効検知範囲である。
第2の態様において、本出願は、飛行制御方法をさらに提供し、航空機の前方領域の点群データを決定するステップと、前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップと、前記いくつかのサブ領域の標高をフィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、前記前方領域に障害物が存在する場合、前記航空機を制御して障害物回避操作を行い、前記前方領域に地面が存在する場合、前記航空機を制御して模擬飛行するステップと、を含む。
第3の態様において、本出願は、障害物又は地面の認識装置をさらに提供し、航空機の前方領域の点群データを決定するための点群データ決定モジュールと、前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するための標高決定モジュールと、前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するための障害物決定モジュールと、を含む。
第4の態様において、本出願は、飛行制御装置をさらに提供し、航空機の前方領域の点群データを決定するための点群データ決定モジュールと、前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するための標高決定モジュールと、前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するための障害物決定モジュールと、前記前方領域に障害物が存在する場合、前記航空機を制御して障害物回避操作を行い、前記前方領域に地面が存在する場合、前記航空機を制御して模擬飛行するための飛行制御モジュールと、を含む。
第5の態様において、本出願は、機器をさらに提供し、メモリと、プロセッサと、メモリに記憶され、プロセッサで実行可能なコンピュータプログラムとを含み、前記プロセッサが前記プログラムを実行する場合に、本出願により提供される障害物又は地面の認識方法が実現される。
第6の態様において、本出願は、コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体をさらに提供し、当該プログラムがプロセッサによって実行される場合に、本出願により提供される障害物又は地面の認識方法、又は飛行制御方法が実現される。
本出願は、航空機の前方領域をいくつかのサブ領域に分割し、航空機の前方領域の点群データを対応するサブ領域にマッチングし、サブ領域内の点群データに基づいてサブ領域の標高を決定し、いくつかのサブ領域の標高によって直線フィッティングを行うことによって、フィッティング結果に基づいて航空機の前方領域に障害物及び/又は地面が存在するか否かを判別し、航空機の前方の障害物又は地面を正確に認識することによって、模擬飛行と障害物回避操作との衝突を回避し、作業効率を向上させることができる。
本出願により提供される障害物又は地面の認識方法のフローチャートである。 本出願により提供される航空機の前方領域を長手方向に区分する平面図である。 本出願により提供される別の障害物又は地面の認識方法のフローチャートである。 本出願により提供される他の障害物又は地面の認識方法のフローチャートである。 本出願により提供されるもう一つの障害物又は地面の認識方法のフローチャートである。 本出願により提供されるもう一つの障害物又は地面の認識方法のフローチャートである。 本出願により提供される飛行制御方法のフローチャートである。 本出願により提供される障害物又は地面の認識装置の構造ブロック図である。 本出願により提供される飛行制御装置の構造ブロック図である。 本出願により提供される機器の概略構成図である。
以下、図面と実施例とを組み合わせて、本出願についてさらに詳しく説明する。なお、ここで説明される具体的な実施例は、単に本出願を解釈するためのものであり、本出願を限定するものではない。また、説明の便宜上、図面には、すべての構成ではなく、本出願に係る部分だけが示されている。
図1は、本出願により提供される障害物又は地面の認識方法のフローチャートである。障害物又は地面の認識方法は、障害物又は地面の認識装置によって実行され、障害物又は地面の認識装置は、ソフトウェア及び/又はハードウェアによって実現され、障害物又は地面の認識装置は、航空機に構成されてもよいし、航空機と通信可能な機器に構成されてもよく、例えば、端末、サーバなどであってもよい。端末は、スマートフォン、タブレットコンピュータ、スマートリモコンなどであってもよい。サーバは、クラウドサーバであってもよいし、他のタイプのサーバであってもよい。その中、航空機は、無人航空機であってもよく、その中、無人航空機は、植物保護無人航空機であってもよい。
本出願により提供される方法は、航空機の前方領域に疑似障害物が存在することが検出されたシーンに適用されることができ、特に、航空機が植物に対する散布、航空写真、巡航などの作業を行う場合、航空機の前方領域に疑似障害物が存在することが検出されたシーンに適用されることができる。その中、疑似障害物は、真の障害物である可能性もあり、真の障害物ではない可能性もあることを理解されたい。例えば、航空機の前方領域にスロープが存在し、且つスロープの勾配が一定の範囲内にある場合、航空機は、検知装置によってスロープが疑似障害物であることを検出することができる。
従来技術では、航空機は、当該スロープを真の障害物として扱い、障害物回避操作を行うが、当該スロープの勾配はあまり大きくなく、航空機は、模擬飛行することができるが、航空機は当該スロープを真の障害物として扱うため、障害物回避操作を実行する。したがって、従来技術では、航空機の前方領域における障害物又は地面を認識する方法が適切ではなく、模擬飛行と障害物回避操作とが衝突することになりやすい。本出願により提供される方法は、航空機の前方領域の障害物又は地面をさらに認識することによって、模擬飛行と障害物回避操作との衝突を回避することができる。
図1に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S110:航空機の前方領域の点群データを決定する。
本出願では、航空機は、無人航空機であってもよく、又は他のタイプの航空機であってもよい。無人航空機は、植物保護無人航空機であってもよい。
その中、航空機は飛行中に、検知装置によって前方領域を検知し、航空機の前方領域における障害物及び/又は地面を判断することができる。その中、検知装置は、マルチラインレーザレーダ、双眼測距センサ、及び深度画像(RGB−D)測距センサなどを含むことができるが、これらに限定されない。その中、検知装置は、航空機の前方に取付けることができる。その中、検知装置は、実際の作業状況に応じてオン及びオフにすることができ、例えば、航空機が起動された場合、検知装置をオンにし、航空機の作業タスクが完了した場合、検知装置をオフにすることができる。他のセンサ装置と合わせて使用することもでき、例えば、他のセンサ装置が複雑なシーンを検知する場合、検知装置をオンにすることができる。
航空機の飛行中に、検知装置によって航空機の前方領域の元のデータを取得することができ、元のデータによって前方領域の点群データを計算することができる。例えば、マルチラインレーザレーダを使用して検知する場合、マルチラインレーザレーダによって物体から航空機までの距離を検知することができ、物体から航空機までの距離、レーザレーダによって放出された検知ビームの角度、及び航空機の位置によって物体の各点の位置情報を決定することができる。その中、物体の各点位置情報は、物体の緯度と経度の座標及び高さを含むことができる。物体の各点の位置情報を座標変換することによって、機体座標系に変換することで、物体の各点の機体座標系における位置情報を決定することができる。その中、機体の軸線の水平面は、X軸とY軸を含む平面座標系、垂直水平面をZ軸とし、機体座標系を取得することができる。物体の各点の位置情報は点群データを形成する。元のデータは、レーザレーダによって放出されたスキャンビームの角度、スキャンビームによって検知された航空機と物体との距離などであってもよい。
また、RGB−D測距センサを使用して検知する場合、撮影された画像の深度によって前方領域内の物体の各点と航空機との距離を決定することができ、RGB−D測距センサの航空機における取付け位置及び角度によって、画素座標系と機体座標系との変換関係を取得することができる。物体の各点の画像における画素座標、物体の各点と航空機との距離、及び画素座標系と機体座標系との変換関係に基づいて、物体の各点を機体座標系にマッピングすることができる。その中、元のデータは、撮影画像の深度情報、RGB−D測距センサの航空機における取付け位置及び角度などであってもよい。
航空機の前方領域における点群データを決定する前に、航空機の予め設定された航路と、航空機の位置と、航空機の幅とに基づいて航空機の前方領域を決定するステップをさらに含み、前方領域における各点から航空機までの水平距離は、第1の設定距離範囲内にあり、前方領域における各点から航空機までの垂直距離は、第2の設定距離範囲内にある。これにより、前方領域は一つの空間領域であってもよく、障害物又は地面を認識する場合、前方領域を2次元地図にマッピングすることができ、色などの情報を使用して前方領域における障害物又は地面の各点の標高を特徴付けることができ、データ処理が容易になることができ、その中、当該2次元地図は、機体座標系、世界座標系、又は他の座標系を座標系とすることができる。
航空機の飛行中に、前方の検知装置によって航空機の前方のより多くの点群データを検知することができるが、航空機の前方領域内の障害物のみが航空機の飛行に影響を与える可能性がある。選択可能には、航空機の前方領域の点群データを決定するステップは、航空機検知領域の点群データを決定し、前方領域以外の点群データをフィルタリングして、航空機の前方領域の点群データを取得するステップを含み、検知領域は、航空機の有効検知範囲である。その中、前方領域は、航空機の前方の作業領域と理解することができ、その中、前方領域は、航空機の位置を中心とし、航空機の幅を左右の幅とし、航空機の航路を幅の延長方向として取得された前方領域であってもよく、その中、前方領域における各点から航空機までの水平距離は、第1の設定距離範囲内にあり、前方領域における各点から航空機までの垂直距離は、第2の設定距離範囲内にある。点群データをフィルタリングする場合、前方領域以外の点群データをフィルタリングして、前方領域の点群データを取得することができる。前方領域以外の点群データを除去し、前方領域内の点群データを保持することによって、データの処理量を減らし、認識効率を向上させることができる。
S120:前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。
その中、前方領域をいくつかのサブ領域に分割することができ、前方領域をいくつかのサブ領域に等距離に分割することを含むことができ、前方領域を航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割することができる。図2は、航空機の前方領域を長手方向に区分する平面図である。図2に示すように、航空機100の前方領域101における各サブ領域102の幅は同じであり、各サブ領域102は、航空機航路方向に沿って順次に並べられる。
このステップでは、取得された航空機の前方領域の点群データを対応するサブ領域にマッチングし、サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。その中、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定するステップは、点群データをサブ領域に対応する配列に保存するステップと、各サブ領域に対して、サブ領域の配列を標高値の大きい順に設定数の点群データを除去するステップと、配列内の残りの点群データに基づいて、標高平均値を決定するステップと、標高平均値をサブ領域の標高とするステップと、を含むことができる。
その中、設定数は、1、2、3などの数であってもよく、設定数は、一定の上限がある。各サブ領域の配列は、順序付き動的配列であってもよく、点群データをサブ領域に対応する配列に保存する場合、当該配列に基づいて、標高点群データを順序づける。サブ領域内の標高が設定標高値より大きい点群データを除去し、残りの点群データに基づいて当該サブ領域の標高平均値を決定し、これを当該サブ領域の標高とすることができる。例えば、標高の大きい順にn個の点群データを順次に除去し、残りの点群データに基づいて、標高平均値を計算し、これを当該サブ領域の標高とすることができる。又は、残りの点群データから標高の大きい順に一定数の点群データを選択し、選択された点群データに基づいて、標高平均値を計算し、これを当該サブ領域の標高とすることができる。
これにより、異常な点群データを除去し、残りの点群データに基づいて標高を計算する方法によって、不正確な点群データを除去することができ、サブ領域の標高を正確に取得することにより、障害物又は地面を正確に認識することができる。例えば、航空機の飛行中に、深度イメージセンサで画像を撮影し、航空機の前方領域の点群データを計算する場合、イメージセンサが前方領域における空を撮影した時、画像中の空のテクスチャの認識が不正確であるため、画像中の空の画像データに基づいて点群データを計算しやすく、当該点群データを航空機の前方領域における障害物又は地面の点群データとするため、点群データが異常となる。空の位置が高く、前方領域における障害物ではないため、画像内の異常な点群データを除去し、すなわち標高異常(より高い)の点群データをフィルタリングすることによって、サブ領域の標高を正確に計算することを確保する。その中、点群データの異常状況は、上記の状況に限定されない。
なお、その中、サブ領域の標高の計算方法は、上記の方法に限定されず、必要に応じて点群データを選択することによって、サブ領域の標高を計算することもできる。例えば、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定するステップは、点群データをサブ領域に対応する配列に保存するステップと、各サブ領域に対して、配列内のすべての点群データに基づいて、標高平均値を決定するステップと、標高平均値をサブ領域の標高とするステップと、をさらに含むことができる。すなわち、サブ領域内のすべての点群データに基づいて当該サブ領域の標高平均値を決定し、これを当該サブ領域の標高とすることができる。
なお、前方領域を分割する場合、等距離に分割してもよい。前方領域を等距離に分割する場合、サブ領域内の点群データで計算して、計算効率を向上させることができる。
なお、本出願の図2は、例示的に航空機の前方領域を矩形のサブ領域に分割するが、これは本出願の一例にすぎず、本出願では、サブ領域の形状が、正方形、梯形、半円形、又は他の形状であってもよいが、サブ領域の形状が矩形である場合、計算が容易になり、計算効率を向上させることができる。
S130:いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
このステップでは、いくつかのサブ領域の標高を直線フィッティングすることは、いくつかのサブ領域の標高に対して直線フィッティングすることであってもよい。一つの設定された座標系では、いくつかのサブ領域の位置を決定することができ、いくつかのサブ領域の標高を決定することもできる。各サブ領域の標高を直線にフィッティングし、フィッティングされた直線の特徴によって航空機の前方領域における障害物及び/又は地面を判別することができる。その中、具体的なフィッティング方法及び判別方法は、以下で詳細に説明する。本出願は、航空機の前方領域をいくつかのサブ領域に分割し、取得された航空機の前方領域の点群データを対応するサブ領域にマッチングし、サブ領域内の点群データに基づいてサブ領域の標高を決定し、いくつかのサブ領域の標高によって直線フィッティングを行うことによって、フィッティング結果に基づいて航空機の前方領域における障害物及び/又は地面を判別し、航空機の前方の障害物又は地面を正確に認識することによって、模擬飛行と障害物回避操作との衝突を回避し、作業効率を向上させることができる。
図3は、本出願により提供される障害物又は地面の認識方法のフローチャートであり、いくつかのサブ領域の標高を直接にフィッティングする場合である。図3に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S210:航空機の前方領域の点群データを決定する。
S220:前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。
S230:航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、直線フィッティングを行う。
このステップでは、航空機と各サブ領域の水平距離は、航空機から各サブ領域中心までの水平距離として理解してもよく、航空機から各サブ領域設定位置までの水平距離として理解してもよい。
このステップでは、最小二乘法を採用して直線フィッティングを行うことができ、もちろん、他の方法を採用して直線フィッティングを行うこともできる。例えば、各サブ領域と航空機の水平距離を横座標とし、サブ領域の標高を縦座標とする。直線方程式を一覧表示することができる。
その中、1番目のサブ領域の座標は(x、y)であり、2番目のサブ領域の座標は(x、y)であり、このように類推して、n番目の小領域の座標(x、y)を取得することができる。
Figure 2021534481

その中、最小二乘法を使用して、
Figure 2021534481

を取得することができ、その中、平均二乗誤差は、
Figure 2021534481

である。
上記の方法によってフィッティングされた直線の傾きを計算することができ、フィッティングされた直線の平均二乗誤差を計算することもできる。
S240:フィッティングされた直線の傾きが傾きしきい値より小さいか否か、且つフィッティングされた直線の平均二乗誤差が誤差しきい値より小さいか否かを判断する。
そうであれば、S250を実行し、そうでなければ、S260を実行する。
S250:前方領域に地面が存在すると決定する。
S260:前方領域に障害物が存在すると決定する。
本出願では、平均二乗誤差は、サブ領域の標高のフィッティングの度合いを評価するために用いられ、平均二乗誤差が小さいほど、サブ領域の標高フィッティングの度合いが良いことを示す。フィッティングされた直線の傾きが傾きしきい値より小さく、且つフィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、航空機の前方領域に地面が存在すると判断され、そうでない場合、航空機の前方領域に障害物が存在すると判断される。その中、地面は、平面、又は勾配が設定値より小さいスロープを含む。
なお、航空機の前方領域のスロープの勾配が設定値より大きい場合、航空機は、当該スロープを障害物として扱うことで、正常な飛行を確保するために障害物回避操作を行うことができる。
これにより、直線の傾きと平均二乗誤差をフィッティングすることによって航空機の前方領域における障害物又は地面を判断し、前方領域に障害物が存在するか、それとも地面が存在するかを正確に認識することができる。
図4は、本出願により提供される障害物又は地面の認識方法であり、いくつかのサブ領域の標高をセグメントしてフィッティングする場合である。図4に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S310:航空機の前方領域の点群データを決定する。
S320:前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。
S330:航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、セグメントで直線フィッティングを行う。
このステップでは、航空機と各サブ領域の水平距離は、航空機から各サブ領域中心までの水平距離として理解してもよく、航空機から各サブ領域設定位置までの水平距離として理解してもよい。
その中、セグメントで直線フィッティングを行うステップは、すべてのサブ領域をいくつかの部分に分割することができ、各部分について、航空機とサブ領域の水平距離を横座標として採用し、サブ領域の標高を縦座標として採用して直線フィッティングすることによって、いくつかのフィッティングされた直線を取得することができる。その中、各部分について、直線フィッティングの方法は上記の直線フィッティングの方法と同じでもよく、これについては再度説明しない。
S340:セグメントのフィッティングされた直線の傾きの平均値を決定する。
このステップでは、セグメントのフィッティングされた直線の傾きの平均値は、各セグメントのフィッティングされた直線の傾きの合計を加算し、セグメントのフィッティングされた直線の数で割ることによって取得される。
S350:各セグメントのフィッティングされた直線の傾きと平均値の差がいずれも第1の設定値より小さいか否か、且つ平均値が傾きしきい値より小さいか否か、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さいか否かを判断する。
そうであれば、S360を実行し、そうでなければ、S370を実行する。
S360:前方領域に地面が存在すると決定する。
S370:前方領域に障害物が存在すると決定する。
本出願では、セグメントのフィッティングされた直線の傾きと傾きの平均値の差が第1の設定値より小さい場合、各セグメントのフィッティングされた直線の傾きが大きく変化しないことを示し、航空機の前方領域に目立った突起がないことを示し、傾きの平均値が傾きしきい値より小さい場合、航空機の前方領域に勾配が小さい物体が存在することを示し、各セグメントのフィッティングされた直線の平均二乗誤差が第2の設定値より小さく、各セグメントのフィッティングされた直線のフィッティングの度合いが良いことを示す。
その中、各セグメントのフィッティングされた直線の傾きと傾きの平均値の差均が第1の設定値より小さく、且つ傾きの平均値が傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、航空機の前方領域に地面が存在すると判断され、その中、地面は、平面、又は勾配が設定値より小さいスロープを含む。そうでない場合、上記の三つの条件を同時に満たしていない場合、航空機の前方領域に障害物が存在すると判断される。その中、当該障害物は、勾配が設定値のスロープより大きい他の障害物であってもよい。
これにより、セグメント直線フィッティングを行い、セグメント直線の傾きと平均二乗誤差をフィッティングすることによって航空機の前方領域における障害物又は地面を判断し、前方領域に障害物が存在するか、それとも地面が存在するかを正確に認識することができる。
図5は、本出願により提供される障害物又は地面の認識方法のフローチャートである。図5に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S410:航空機の前方領域の点群データを決定する。
S420:前方領域を航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割する。
S430:物体の点群データに対してダウンサンプリング処理を行う。
このステップでは、物体の点群データに対してダウンサンプリング処理を行うステップは、物体の点群データに対して希釈処理を行って、物体の点群データの数を減らすことによって、データの処理量を減らし、効率を向上させることができる。
S440:点群データをサブ領域に対応する配列に保存する。
S450:各サブ領域に対して、サブ領域の配列を標高値の大きい順に設定数の点群データを除去する。
S460:配列内の残りの点群データに基づいて、標高平均値を決定し、標高平均値をサブ領域の標高とする。
S470:いくつかのサブ領域の標高をフィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
その中、ステップ470の具体的な実施方式は、上記で説明されている方式であってもよい。
図6は、本出願により提供される障害物又は地面の認識方法のフローチャートである。本出願では、航空機は、好ましくは、植物保護無人航空機であり、本出願の応用により提供される方法は、植物保護無人航空機が作業するシーンに適用される。
図6に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S510:植物保護無人航空機の前方領域の点群データを決定する。
S520:前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定し、
S530:いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
その中、当該ステップの具体的な実施方式は、上記の内容に対応されるステップの実施方式と同じであり、これについては再度説明しない。
上記の方法によって、植物保護無人航空機が作業する場合、前方領域における障害物及び/又は地面を正確に認識することによって、模擬飛行と障害物回避操作との衝突を回避し、作業効率を向上させることができる。
図7は、本出願により提供される飛行制御方法のフローチャートである。方法は、飛行制御装置によって実行され、装置は、ソフトウェア及び/又はハードウェアによって実現され、装置は、航空機に構成されてもよいし、航空機と通信可能な機器に構成されてもよく、例えば、端末、サーバなどであってもよい。端末は、スマートフォン、タブレットコンピュータ、スマートリモコンなどであってもよい。サーバは、クラウドサーバであってもよいし、他のタイプのサーバであってもよい。その中、航空機は、無人航空機であってもよい。
本出願により提供される方法は、航空機の前方領域に疑似障害物が存在することが検出されたシーンに適用されることができ、特に、航空機が植物に対する散布、航空写真、巡航などの作業を行う場合、航空機の前方領域に疑似障害物が存在することが検出されたシーンに適用されることができる。その中、疑似障害物は、真の障害物である可能性もあり、真の障害物ではない可能性もあることを理解されたい。例えば、航空機の前方領域にスロープが存在し、且つスロープの勾配が一定の範囲内にある場合、航空機は、検知装置によってスロープが疑似障害物であることを検出することができる。
従来技術では、航空機は、当該スロープを真の障害物として扱い、障害物回避操作を行うが、当該スロープの勾配はあまり大きくなく、航空機は、模擬飛行することができるが、航空機は当該スロープを真の障害物として扱うため、障害物回避操作を実行する。したがって、従来技術では、航空機の前方領域における障害物又は地面を認識する方法が適切ではなく、模擬飛行と障害物回避操作とが衝突することになりやすい。本出願により提供される方法は、航空機の前方領域の障害物又は地面をさらに認識することによって、模擬飛行と障害物回避操作との衝突を回避することができる。
図7に示すように、本出願により提供される技術案は、以下のようなステップを含む。
S610:航空機の前方領域の点群データを決定する。
S620:前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。
S630:いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
S640:前方領域に障害物が存在する場合、航空機を制御して障害物回避操作を行い、前方領域に地面が存在する場合、航空機を制御して模擬飛行する。
その中、模擬飛行は、航空機を制御して地面と設定垂直距離を保持するように飛行することであってもよく、航空機と地面の角度などのような他のパラメータも必要に応じて制御することができる。その中、障害物回避操作のプロセスは、障害物のパラメータ情報を判断し、障害物のパラメータ情報と、障害物と航空機との間の距離などに基づいて、飛行路径、航空機の速度、及び航空機の姿勢などを計画することができる。障害物回避操作のプロセスは、上記のプロセスに限定されず、他の方式であってもよい。
いくつかのサブ領域の標高を直線フィッティングするステップは、航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、直線フィッティングを行うステップを含む。
フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、フィッティングされた直線の傾きが傾きしきい値より小さく、且つフィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、前方領域に地面が存在すると決定し、そうでない場合、前方領域に障害物が存在すると決定するステップを含む。
いくつかのサブ領域の標高を直線フィッティングするステップは、航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うステップを含む。
フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、セグメントのフィッティングされた直線の傾きの平均値を決定するステップと、各セグメントのフィッティングされた直線の傾きと平均値の差均が第1の設定値より小さく、且つ平均値が傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前方領域に地面が存在すると決定し、そうでない場合、前方領域に障害物が存在すると決定するステップと、を含む。
前方領域をいくつかのサブ領域に分割するステップは、前方領域を航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割するステップを含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定するステップは、点群データをサブ領域に対応する配列に保存するステップと、各サブ領域に対して、サブ領域の配列を標高の大きい順に設定数の点群データを除去するステップと、配列内の残りの点群データに基づいて、標高平均値を決定するステップと、標高平均値をサブ領域の標高とするステップと、を含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定するステップは、点群データをサブ領域に対応する配列に保存するステップと、各サブ領域に対して、配列内のすべての点群データに基づいて、標高平均値を決定するステップと、標高平均値をサブ領域の標高とするステップと、を含む。選択可能には、点群データをサブ領域に対応する配列に保存する前に、点群データをダウンサンプリング処理するステップをさらに含む。
当該方法は、航空機の予め設定された航路と、航空機の位置と、航空機の幅とに基づいて、航空機の前方領域を決定するステップをさらに含み、その中、前方領域における各点から航空機までの水平距離は、第1の設定距離範囲内にあり、前方領域における各点から航空機までの垂直距離は、第2の設定距離範囲内にある。
航空機の前方領域の点群データを決定するステップは、航空機検知領域の点群データを決定し、前方領域以外の点群データをフィルタリングして、航空機の前方領域の点群データを取得するステップを含み、検知領域は、航空機の有効検知範囲である。選択可能には、航空機は無人航空機である。
本出願は、航空機の前方領域をいくつかのサブ領域に分割し、航空機の前方領域の点群データを対応するサブ領域にマッチングし、サブ領域内の点群データに基づいてサブ領域の標高を決定し、いくつかのサブ領域の標高によって直線フィッティングを行うことによって、フィッティング結果に基づいて航空機の前方領域に障害物及び/又は地面が存在するか否かを判別し、航空機の前方の障害物又は地面を正確に認識することによって、模擬飛行と障害物回避操作との衝突を回避し、作業効率を向上させることができる。
図8は、本出願により提供される障害物又は地面装置である。図8に示すように、本出願により提供される装置は、点群データ決定モジュール710と、標高決定モジュール720と、障害物決定モジュール730とを含む。
その中、点群データ決定モジュール710は、航空機の前方領域の点群データを決定する。
標高決定モジュール720は、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。
障害物決定モジュール730は、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
いくつかのサブ領域の標高を直線フィッティングすることは、航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うことを含む。
フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断することは、セグメントのフィッティングされた直線の傾きの平均値を決定することと、各セグメントのフィッティングされた直線の傾きと平均値の差均が第1の設定値より小さく、且つ平均値が傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前方領域に地面が存在すると決定し、そうでない場合、前方領域に障害物が存在すると決定することと、を含む。
前方領域をいくつかのサブ領域に分割することは、前方領域を航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割することを含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定することは、点群データをサブ領域に対応する配列に保存することと、各サブ領域に対して、サブ領域の配列を標高の大きい順に設定数の点群データを除去することと、配列内の残りの点群データに基づいて、標高平均値を決定することと、標高平均値をサブ領域の標高とすることと、を含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定することは、点群データをサブ領域に対応する配列に保存することと、各サブ領域に対して、配列内のすべての点群データに基づいて、標高平均値を決定することと、標高平均値をサブ領域の標高とすることと、を含む。
当該装置は、点群データをサブ領域に対応する配列に保存する前に、物体の点群データに対してダウンサンプリング処理するダウンサンプリング処理モジュール740をさらに含む。
当該装置は、航空機の予め設定された航路と、航空機の位置と、航空機の幅とに基づいて航空機の前方領域を決定する前方領域決定モジュール750をさらに含み、前方領域における各点から航空機までの水平距離は、第1の設定距離範囲内にあり、前方領域における各点から航空機までの垂直距離は、第2の設定距離範囲内にある。
点群データ決定モジュール710は、航空機検知領域の点群データを決定し、前方領域以外の点群データをフィルタリングして、航空機の前方領域の点群データを取得し、検知領域は、航空機の有効検知範囲である。選択可能には、航空機は無人航空機である。
上記の装置は、本出願により提供される障害物又は地面の認識方法を実行することができ、障害物又は地面の認識方法を実行することに対応する機能モジュール及び有益な効果を備える。
図9は、本出願により提供される飛行制御装置である。図9に示すように、本出願により提供される装置は、点群データ決定モジュール810と、標高決定モジュール820と、障害物決定モジュール830と、飛行制御モジュール840と、を含む。
点群データ決定モジュール810は、航空機の前方領域の点群データを決定する。標高決定モジュール820は、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定する。障害物決定モジュール830は、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。飛行制御モジュール840は、前方領域に障害物が存在する場合、航空機を制御して障害物回避操作を行い、前方領域に地面が存在する場合、航空機を制御して模擬飛行する。
いくつかのサブ領域の標高を直線フィッティングすることは、航空機と各サブ領域の水平距離を横座標とし、各サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うことを含む。
フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断することは、セグメントのフィッティングされた直線の傾きの平均値を決定することと、各セグメントのフィッティングされた直線の傾きと平均値の差均が第1の設定値より小さく、且つ平均値が傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前方領域に地面が存在すると決定し、そうでない場合、前方領域に障害物が存在すると決定することと、を含む。
前方領域をいくつかのサブ領域に分割することは、前方領域をいくつかの等距離のサブ領域に分割することを含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定することは、点群データをサブ領域に対応する配列に保存することと、各サブ領域に対して、サブ領域の配列を標高の大きい順に設定数の点群データを除去することと、配列内の残りの点群データに基づいて、標高平均値を決定することと、標高平均値をサブ領域の標高とすることと、を含む。
各サブ領域内の点群データに基づいて、各サブ領域の標高を決定することは、点群データをサブ領域に対応する配列に保存することと、各サブ領域に対して、配列内のすべての点群データに基づいて、標高平均値を決定することと、標高平均値をサブ領域の標高とすることと、を含む。選択可能には、当該装置は、点群データをサブ領域に対応する配列に保存する前に、点群データをダウンサンプリング処理するダウンサンプリング処理モジュール850をさらに含む。
当該装置は、航空機の予め設定された航路と、航空機の位置と、航空機の幅とに基づいて航空機の前方領域を決定する前方領域決定モジュール860をさらに含み、前方領域における各点から航空機までの水平距離は、第1の設定距離範囲内にあり、前方領域における各点から航空機までの垂直距離は、第2の設定距離範囲内にある。
点群データ決定モジュール810は、航空機検知領域の点群データを決定し、前方領域以外の点群データをフィルタリングして、航空機の前方領域の点群データを取得し、検知領域は、航空機の有効検知範囲である。選択可能には、航空機は無人航空機である。
上記の装置は、本出願により提供される飛行制御方法を実行することができ、飛行制御方法を実行することに対応する機能モジュール及び有益な効果を備える。
図10は、本出願により提供される機器の概略構成図である。図10に示すように、当該機器は、一つ又は複数のプロセッサ910と、メモリ920と、を含み、図11では一つのプロセッサ910を例とし、機器は、入力装置930と、出力装置940と、をさらに含むことができる。
機器内のプロセッサ910、メモリ920、入力装置930、及び出力装置940は、バス又は他の方式によって接続することができ、図10では、バスによって接続されることを例とする。
メモリ920は、本出願における障害物又は地面の認識方法に対応するプログラム命令/モジュール(例えば、図8に示される点群データ決定モジュール710、標高決定モジュール720、及び障害物決定モジュール730、又は図9に示される点群データ決定モジュール810、標高決定モジュール820、障害物決定モジュール830、及び飛行制御モジュール840)のような、非一時的なコンピュータ読み取り可能な記憶媒体として、ソフトウェアプログラム、コンピュータ実行可能なプログラム、及びモジュールを記憶する。プロセッサ910は、メモリ920に記憶されているソフトウェアプログラム、命令及びモジュールを実行することによって、コンピュータ機器の様々な機能アプリケーション及びデータ処理を実行し、上記の障害物又は地面の認識方法を実現し、すなわち、航空機の前方領域の点群データを決定し、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定し、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
又は、上記の飛行制御方法を実現することができ、すなわち、航空機の前方領域における点群データを決定し、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定し、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断し、前方領域に障害物が存在する場合、航空機を制御して障害物回避操作を行い、前方領域に地面が存在する場合、航空機を制御して模擬飛行する。
メモリ920は、ストレージプログラム領域とストレージデータ領域とを含むことができ、ストレージプログラム領域は、オペレーティングシステム、少なくとも一つの機能に必要なアプリケーションプログラムを記憶することができ、ストレージデータ領域は、コンピュータ機器の使用に応じて作成されたデータなどを記憶することができる。また、メモリ920は、高速ランダムアクセスメモリを含むことができ、少なくとも一つの磁気ディスク記憶装置、フラッシュメモリデバイス、又は他の非一時的な固体記憶デバイスなどの非一時的な性メモリをさらに含むことができる。メモリ920は、オプションとして、プロセッサ910に対して遠隔的に設けられるメモリを含み、これらの遠隔メモリは、ネットワークを介して端末機器に接続されることができる。上記のネットワークの例は、インターネット、イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク、及びその組み合わせを含むが、これらに限定されない。
入力装置930は、入力されたデジタル又は文字情報を受信し、及びコンピュータ機器のユーザ設定及び機能制御に関するキー信号入力を生成することができる。出力装置940は、ディスプレイなどのディスプレイ装置を含むことができる。
本出願は、コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体を提供し、当該プログラムがプロセッサによって実行される場合に、本出願により提供される障害物又は地面の認識方法が実現され、すなわち、航空機の前方領域の点群データを決定し、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定し、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断する。
又は、当該プログラムがプロセッサによって実行される場合に、本出願により提供される飛行制御方法が実現され、すなわち、航空機の前方領域の点群データを決定し、前方領域をいくつかのサブ領域に分割し、各サブ領域内の点群データに基づいて、各サブ領域の標高を決定し、いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前方領域に障害物及び/又は地面が存在するか否かを判断し、前方領域に障害物が存在する場合、航空機を制御して障害物回避操作を行い、前方領域に地面が存在する場合、航空機を制御して模擬飛行する。
一つ又は複数のコンピュータ読み取り可能な媒体の任意の組み合わせを採用することができる。コンピュータ読み取り可能な媒体は、コンピュータ読み取り可能な信号媒体、或いはコンピュータ読み取り可能な記憶媒体であってもよい。コンピュータ読み取り可能な媒体は、例えば、電子、磁気、光、電磁気、赤外線、又は半導体のシステム、装置又はデバイス、或いは上記の任意の組み合わせであってもよいがこれらに限定されない。コンピュータ読み取り可能な記憶媒体のより具体的な例(非網羅的なリスト)は、一つ又は複数の配線を備える電気接続部、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、消去可能なプログラマブル読み出し専用メモリ(EPROM又はフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスク読み出し専用メモリ(CD-ROM)、光記憶装置、磁気記憶装置、又は上記の任意の適切な組み合わせを含む。この文書において、コンピュータ読み取り可能な記憶媒体は、命令実行システム、装置又はデバイスにより使用され、或いはそれらと組み合わせて使用されることが可能であるプログラムを含む又は記憶する任意の有形の媒体であってもよい。
コンピュータ読み取り可能なの信号媒体は、ベースバンドにおける、又は搬送波の一部として伝播するデータ信号を含むことができ、その中のにはコンピュータ読み取り可能なのプログラムコードが搭載される。この伝播するデータ信号は様々な形式を採用することができ、電磁信号、光信号又は上記の任意の適切な組み合わせを含むがこれらに限定されない。コンピュータ読み取り可能なの信号媒体は、さらに、コンピュータ読み取り可能な記憶媒体以外の任意のコンピュータ読み取り可能な媒体であってもよく、当該コンピュータ読み取り可能な媒体は、命令実行システム、装置又はデバイスにより使用され、或いはそれらと組み合わせて使用されるプログラムを送信、伝播又は伝送することができる。
コンピュータ読み取り可能な媒体に含まれるプログラムコードは、無線、有線、光ケーブル、RFなど、又は上記の任意の適切な組み合わせを含むがこれらに限定されない任意の適切な媒体によって伝送することができる。
一つ又は複数のプログラミング言語又はそれらの組み合わせで本出願の動作を実行するためのコンピュータプログラムコードを作成することができ、前記プログラミング言語は、Java、Smalltalk、C++などのプロジェクト指向のプログラミング言語を含み、さらに、「C」言語又は同様のプログラミング言語といった従来の手続き型プログラミング言語をも含む。プログラムコードは、完全にユーザーコンピュータで実行されてもよいし、部分的にユーザーコンピュータに実行されてもよいし、スタンドアロンソフトウェアパッケージとして実行されてもよいし、部分的にユーザーコンピュータで、部分的にリモートコンピュータで実行されてもよい、又は完全にリモートコンピュータ又はサーバーで実行してもよい。リモートコンピュータに係る場合、リモートコンピュータは、ローカルネットワーク(LAN)又は広域ネットワーク(WAN)を含む任意種類のインターネットを介して、ユーザーコンピュータに接続することができ、或いは、外部コンピュータ(例えば、インターネットサービスプロバイダを利用してインターネットを介して接続する)に接続することもできる。
なお、以上は、本出願の好ましい実施例及び運用される技術的原理に過ぎない。当業者は、本出願がここで記載される特定の実施例に限定されないことを理解することができる。当業者であれば、本出願の保護範囲を逸脱することはなく、種々の明らかな変化、新たな調整及び取り換えることができる。したがって、上記実施例により本出願について比較的詳細に説明したが、本出願は、上記実施例のみに限定されず、本出願の構想を逸脱しない場合、より多くの他の効果同等な実施例をさらに含むことができ、本出願の範囲は、特許請求の範囲によって决定される。
前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、前記いくつかのサブ領域の標高を直線フィッティングして、対応するフィッティングされた直線を取得するステップと、前記フィッティングされた直線の特徴に基づいて、前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、を含む。
前記フィッティングされた直線の特徴に基づいて、前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、前記フィッティングされた直線の特徴が予め設定された条件を満たす場合、前記前方領域に地面が存在すると判断し、そうでない場合、前記前方領域に障害物が存在すると判断するステップと、を含み、前記フィッティングされた直線の特徴は、傾き及び平均二乗誤差を含み、前記予め設定された条件は、前記フィッティングされた直線の傾きと平均二乗誤差がそれぞれ対応する設定値を満たすことを少なくとも含む。
前記フィッティングされた直線の特徴が予め設定された条件を満たす場合、前記前方領域に地面が存在すると判断し、そうでない場合、前記前方領域に障害物が存在すると判断するステップは、フィッティングされた直線の傾きが傾きしきい値より小さく、且つ前記フィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、前記前方領域に地面が存在すると決定し、そうでない場合、前記前方領域に障害物が存在すると決定するステップを含む。
前記いくつかのサブ領域の標高を直線フィッティングして、対応するフィッティングされた直線を取得するステップは、前記いくつかのサブ領域の標高をセグメントで直線フィッティングを行うステップを含む。
前記フィッティングされた直線の特徴が予め設定された条件を満たす場合、前記前方領域に地面が存在すると判断し、そうでない場合、前記前方領域に障害物が存在すると判断するステップは、各セグメントのフィッティングされた直線の傾きと前記平均値の差がいずれも第1の設定値より小さく、且つ前記平均値が前記傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前記前方領域に地面が存在すると決定するステップと、そうでない場合、前記前方領域に障害物が存在すると決定するステップと、を含む。
前記フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、
フィッティングされた直線の傾きが傾きしきい値より小さく、且つ前記フィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、前記前方領域に地面が存在すると決定し、そうでない場合、前記前方領域に障害物が存在すると決定するステップを含む。
前記いくつかのサブ領域の標高を直線フィッティングするステップは、前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、直線フィッティングを行うステップを含む。
前記いくつかのサブ領域の標高をフィッティングするステップは、前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うステップを含む。

Claims (16)

  1. 障害物又は地面の認識方法であって、
    航空機の前方領域の点群データを決定するステップと、
    前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップと、
    前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、を含む、
    ことを特徴とする障害物又は地面の認識方法。
  2. 前記いくつかのサブ領域の標高を直線フィッティングするステップは、
    前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、直線フィッティングを行うステップを含む、
    ことを特徴とする請求項1に記載の障害物又は地面の認識方法。
  3. 前記フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、
    フィッティングされた直線の傾きが傾きしきい値より小さく、且つ前記フィッティングされた直線の平均二乗誤差が誤差しきい値より小さい場合、前記前方領域に地面が存在すると決定し、そうでない場合、前記前方領域に障害物が存在すると決定するステップを含む、
    ことを特徴とする請求項1又は2に記載の障害物又は地面の認識方法。
  4. 前記いくつかのサブ領域の標高をフィッティングするステップは、
    前記航空機と各前記サブ領域の水平距離を横座標とし、各前記サブ領域の標高を縦座標として、セグメントで直線フィッティングを行うステップを含む、
    ことを特徴とする請求項1に記載の障害物又は地面の認識方法。
  5. 前記フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップは、
    セグメントのフィッティングされた直線の傾きの平均値を決定するステップと、
    各セグメントのフィッティングされた直線の傾きと前記平均値の差がいずれも第1の設定値より小さく、且つ前記平均値が前記傾きしきい値より小さく、及び各セグメントのフィッティングされた直線の平均二乗誤差がいずれも第2の設定値より小さい場合、前記前方領域に地面が存在すると決定するステップと、
    そうでない場合、前記前方領域に障害物が存在すると決定するステップと、を含む、
    ことを特徴とする請求項4に記載の障害物又は地面の認識方法。
  6. 前記前方領域をいくつかのサブ領域に分割するステップは、
    前記前方領域を前記航空機航路方向に沿って順次に並べられた等距離のサブ領域に分割するステップを含む、
    ことを特徴とする請求項1〜5のいずれかに記載の障害物又は地面の認識方法。
  7. 各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップは、
    前記点群データをサブ領域に対応する配列に保存するステップと、
    各前記サブ領域に対して、前記サブ領域の配列を標高の大きい順に設定数の点群データを除去するステップと、
    前記配列内の残りの点群データに基づいて、標高平均値を決定するステップと、
    前記標高平均値を前記サブ領域の標高とするステップと、を含む、
    ことを特徴とする請求項1〜6のいずれかに記載の障害物又は地面の認識方法。
  8. 各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップは、
    前記点群データをサブ領域に対応する配列に保存するステップと、
    各前記サブ領域に対して、前記配列内のすべての点群データに基づいて、標高平均値を決定するステップと、
    前記標高平均値を前記サブ領域の標高とするステップと、を含む、
    ことを特徴とする請求項1〜6のいずれかに記載の障害物又は地面の認識方法。
  9. 前記点群データをサブ領域に対応する配列に保存する前に、
    前記点群データをダウンサンプリング処理するステップをさらに含む、
    ことを特徴とする請求項7又は8に記載の障害物又は地面の認識方法。
  10. 前記航空機の予め設定された航路と、前記航空機の位置と、前記航空機の幅とに基づいて、前記航空機の前方領域を決定するステップをさらに含み、
    前記前方領域における各点から前記航空機までの水平距離は、第1の設定距離範囲内にあり、前記前方領域における各点から前記航空機までの垂直距離は、第2の設定距離範囲内にある、
    ことを特徴とする請求項1〜9のいずれかに記載の障害物又は地面認識方法。
  11. 前記航空機の前方領域の点群データを決定するステップは、
    航空機検知領域の点群データを決定し、前記前方領域以外の点群データをフィルタリングして、前記航空機の前方領域の点群データを取得するステップを含み、
    前記検知領域は、前記航空機の有効検知範囲である、
    ことを特徴とする請求項10に記載の障害物又は地面の認識方法。
  12. 飛行制御方法であって、
    航空機の前方領域の点群データを決定するステップと、
    前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するステップと、
    前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するステップと、
    前記前方領域に障害物が存在する場合、前記航空機を制御して障害物回避操作を行い、前記前方領域に地面が存在する場合、前記航空機を制御して模擬飛行するステップと、を含む、
    ことを特徴とする飛行制御方法。
  13. 障害物又は地面の認識装置であって、
    航空機の前方領域の点群データを決定するための点群データ決定モジュールと、
    前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するための標高決定モジュールと、
    前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するための障害物決定モジュールと、を含む、
    ことを特徴とする障害物又は地面の認識装置。
  14. 飛行制御装置であって、
    航空機の前方領域の点群データを決定するための点群データ決定モジュールと、
    前記前方領域をいくつかのサブ領域に分割し、各前記サブ領域内の点群データに基づいて、各前記サブ領域の標高を決定するための標高決定モジュールと、
    前記いくつかのサブ領域の標高を直線フィッティングし、フィッティング結果に基づいて前記前方領域に障害物及び/又は地面が存在するか否かを判断するための障害物決定モジュールと、
    前記前方領域に障害物が存在する場合、前記航空機を制御して障害物回避操作を行い、前記前方領域に地面が存在する場合、前記航空機を制御して模擬飛行するための飛行制御モジュールと、を含む、
    ことを特徴とする飛行制御装置。
  15. 機器であって、
    メモリと、プロセッサと、メモリに記憶され、プロセッサで実行可能なコンピュータプログラムとを含み、前記プロセッサが前記プログラムを実行する場合に、請求項1〜11のいずれかに記載の障害物又は地面の認識方法、又は請求項12に記載の飛行制御方法が実現される、
    ことを特徴とする機器。
  16. コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
    当該プログラムがプロセッサによって実行される場合に、請求項1〜11のいずれかに記載の障害物又は地面の認識方法、又は請求項12に記載の飛行制御方法が実現される、
    ことを特徴とするコンピュータ読み取り可能な記憶媒体。
JP2021505707A 2018-08-15 2019-07-25 障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体 Pending JP2021534481A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201810931105.7 2018-08-15
CN201810931105.7A CN109144097B (zh) 2018-08-15 2018-08-15 障碍物或地面识别及飞行控制方法、装置、设备及介质
PCT/CN2019/097639 WO2020034820A1 (zh) 2018-08-15 2019-07-25 障碍物或地面识别及飞行控制方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
JP2021534481A true JP2021534481A (ja) 2021-12-09

Family

ID=64789847

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021505707A Pending JP2021534481A (ja) 2018-08-15 2019-07-25 障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体

Country Status (8)

Country Link
US (1) US11119511B2 (ja)
EP (1) EP3677980A4 (ja)
JP (1) JP2021534481A (ja)
CN (1) CN109144097B (ja)
AU (1) AU2019321145B2 (ja)
CA (1) CA3077523A1 (ja)
RU (1) RU2768997C1 (ja)
WO (1) WO2020034820A1 (ja)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109144097B (zh) * 2018-08-15 2021-04-06 广州极飞科技有限公司 障碍物或地面识别及飞行控制方法、装置、设备及介质
CN110147116B (zh) * 2019-04-10 2022-09-13 广州极飞科技股份有限公司 用于无人飞行器爬坡的控制方法、控制装置和无人飞行器
CN111829531A (zh) * 2019-04-15 2020-10-27 北京京东尚科信息技术有限公司 二维地图构建方法、装置、机器人定位系统和存储介质
CN110471086B (zh) * 2019-09-06 2021-12-03 北京云迹科技有限公司 一种雷达测障系统及方法
CN110688913B (zh) * 2019-09-09 2022-11-11 苏州臻迪智能科技有限公司 一种基于智能设备的障碍物检测方法及装置
CN112560548B (zh) * 2019-09-24 2024-04-02 北京百度网讯科技有限公司 用于输出信息的方法和装置
CN111750857B (zh) * 2019-10-24 2021-12-28 广州极飞科技股份有限公司 航线生成方法、装置、终端及存储介质
CN110927731B (zh) * 2019-11-15 2021-12-17 深圳市镭神智能系统有限公司 一种立体防护方法、三维检测装置和计算机可读存储介质
CN111077541B (zh) * 2019-12-30 2022-03-22 深圳优地科技有限公司 一种障碍物识别方法、障碍物识别装置及移动机器人
CN111275715A (zh) * 2020-01-14 2020-06-12 深圳前海达闼云端智能科技有限公司 点云分割方法、装置、电子设备、存储介质和机器人
CN111025323B (zh) * 2020-02-17 2021-02-26 广西大学 一种基于多线激光雷达的圆柱形绿篱修剪机的对中方法
CN111220966A (zh) * 2020-04-22 2020-06-02 成都纵横融合科技有限公司 一种机载激光雷达系统等航宽滤波方法
CN111750859B (zh) * 2020-05-29 2021-11-05 广州极飞科技股份有限公司 过渡路径规划方法及相关装置
CN111783648A (zh) * 2020-06-30 2020-10-16 厦门大学 道路点云中护栏的提取方法及装置
CN111984034A (zh) * 2020-08-24 2020-11-24 广东电网有限责任公司 一种无人机电力巡线系统
CN112782717B (zh) * 2020-12-10 2023-03-21 中寰卫星导航通信有限公司 一种激光雷达地面提取方法、系统、存储介质及设备
CN112540616B (zh) * 2020-12-11 2021-07-16 北京赛目科技有限公司 一种基于无人驾驶的激光点云生成方法及装置
CN112581579B (zh) * 2020-12-22 2022-11-18 同济大学 一种磁浮滑行面点云数据提取方法
CN112859893A (zh) * 2021-01-08 2021-05-28 中国商用飞机有限责任公司北京民用飞机技术研究中心 一种飞行器避障方法、装置
CN114872029B (zh) * 2022-06-09 2024-02-02 深圳市巨龙创视科技有限公司 一种机器人视觉识别系统
CN114880332B (zh) * 2022-07-08 2022-09-16 深圳市信润富联数字科技有限公司 点云数据的存储方法、装置、电子设备及存储介质
CN116954265B (zh) * 2023-09-20 2023-12-05 天津云圣智能科技有限责任公司 局部运动轨迹的重规划方法、装置和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011158278A (ja) * 2010-01-29 2011-08-18 Pasuko:Kk レーザデータのフィルタリング方法及び装置
CN107077148A (zh) * 2016-11-22 2017-08-18 深圳市大疆创新科技有限公司 无人机避障控制方法、飞行控制器及无人飞行器
WO2017154389A1 (ja) * 2016-03-10 2017-09-14 株式会社リコー 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2689668B1 (fr) * 1992-04-07 1994-05-20 Dassault Electronique Procede et dispositif d'anti-collisions terrain pour aeronef.
US7307579B2 (en) 2004-11-03 2007-12-11 Flight Safety Technologies, Inc. Collision alerting and avoidance system
US8380367B2 (en) * 2009-03-26 2013-02-19 The University Of North Dakota Adaptive surveillance and guidance system for vehicle collision avoidance and interception
EP2388760B1 (en) * 2010-05-21 2013-01-16 AGUSTAWESTLAND S.p.A. Aircraft capable of hovering, aircraft manoeuvring assist method, and interface
FR2978282B1 (fr) * 2011-07-22 2013-08-30 Thales Sa Procede et dispositif pour le filtrage d'alertes provenant d'un systeme de detection de collision d'un aeronef
DE102012202463A1 (de) 2012-02-17 2013-08-22 Bayerische Motoren Werke Aktiengesellschaft Verfahren zu einem Modellaufbau für eine Reisezeitendatenbank
US9347793B2 (en) * 2012-04-02 2016-05-24 Honeywell International Inc. Synthetic vision systems and methods for displaying detached objects
US8600589B2 (en) * 2012-04-24 2013-12-03 Exelis, Inc. Point cloud visualization of acceptable helicopter landing zones based on 4D LIDAR
US9063544B2 (en) * 2012-09-19 2015-06-23 The Boeing Company Aerial forest inventory system
CN103869820B (zh) * 2014-03-18 2015-10-21 北京控制工程研究所 一种巡视器地面导航规划控制方法
US9524647B2 (en) 2015-01-19 2016-12-20 The Aerospace Corporation Autonomous Nap-Of-the-Earth (ANOE) flight path planning for manned and unmanned rotorcraft
KR101706455B1 (ko) * 2015-04-15 2017-02-27 한양대학교 산학협력단 도로표지판 검출 기반 주행 차로 추정 방법 및 장치
CN107735794B (zh) * 2015-08-06 2021-06-04 埃森哲环球服务有限公司 使用图像处理的状况检测
JP6559535B2 (ja) * 2015-10-22 2019-08-14 株式会社東芝 障害物マップ生成装置、その方法、及び、そのプログラム
EP3163323B1 (en) * 2015-10-27 2021-08-25 Sikorsky Aircraft Corporation Lidar-based vehicle distance measurement system
CN106204705B (zh) * 2016-07-05 2018-12-07 长安大学 一种基于多线激光雷达的3d点云分割方法
CN106774392B (zh) * 2016-12-13 2020-05-01 中国南方电网有限责任公司超高压输电公司检修试验中心 一种电力线路巡检过程中飞行路径的动态规划方法
RU2757549C2 (ru) * 2017-01-06 2021-10-18 Аурора Флайт Сайенсиз Корпорейшн Система и способ для предупреждения столкновений беспилотного летательного аппарата
CN106997049B (zh) * 2017-03-14 2020-07-03 奇瑞汽车股份有限公司 一种基于激光点云数据的检测障碍物的方法和装置
CN107238845A (zh) * 2017-05-19 2017-10-10 云南电网有限责任公司电力科学研究院 一种基于三维激光扫描的输电线路无人机飞行路径检测方法
CN107169986B (zh) 2017-05-23 2019-09-17 北京理工大学 一种障碍物检测方法及系统
US11508247B2 (en) * 2017-07-27 2022-11-22 Honeywell International Inc. Lidar-based aircraft collision avoidance system
CN107588760B (zh) 2017-08-24 2020-01-17 北京理工大学 适用于固定翼无人机跟踪道路的定高高精度航迹生成方法
US10962650B2 (en) * 2017-10-31 2021-03-30 United States Of America As Represented By The Administrator Of Nasa Polyhedral geofences
CN109144097B (zh) 2018-08-15 2021-04-06 广州极飞科技有限公司 障碍物或地面识别及飞行控制方法、装置、设备及介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011158278A (ja) * 2010-01-29 2011-08-18 Pasuko:Kk レーザデータのフィルタリング方法及び装置
WO2017154389A1 (ja) * 2016-03-10 2017-09-14 株式会社リコー 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム
CN107077148A (zh) * 2016-11-22 2017-08-18 深圳市大疆创新科技有限公司 无人机避障控制方法、飞行控制器及无人飞行器

Also Published As

Publication number Publication date
CA3077523A1 (en) 2020-02-20
CN109144097A (zh) 2019-01-04
EP3677980A4 (en) 2021-12-01
AU2019321145B2 (en) 2021-09-16
US20200333806A1 (en) 2020-10-22
CN109144097B (zh) 2021-04-06
RU2768997C1 (ru) 2022-03-28
AU2019321145A1 (en) 2020-04-16
WO2020034820A1 (zh) 2020-02-20
EP3677980A1 (en) 2020-07-08
US11119511B2 (en) 2021-09-14

Similar Documents

Publication Publication Date Title
JP2021534481A (ja) 障害物又は地面の認識及び飛行制御方法、装置、機器及び記憶媒体
US11042723B2 (en) Systems and methods for depth map sampling
CN110765894B (zh) 目标检测方法、装置、设备及计算机可读存储介质
US20210090263A1 (en) Method and apparatus for detecting ground point cloud points
CN108508916B (zh) 一种无人机编队的控制方法、装置、设备及存储介质
CN110687549A (zh) 障碍物检测方法和装置
WO2021253245A1 (zh) 识别车辆变道趋势的方法和装置
CN110795978B (zh) 路面点云数据提取方法、装置、存储介质及电子设备
CN113887400B (zh) 障碍物检测方法、模型训练方法、装置及自动驾驶车辆
CN112327930A (zh) 一种巡检路径确定方法和装置
CN115406457A (zh) 一种可行驶区域检测方法、系统、设备及存储介质
CN115139303A (zh) 一种栅格井盖检测方法、装置、设备及存储介质
CN111722640A (zh) 无人机的控制方法、装置和计算机可读存储介质
EP4083336B1 (en) Method and apparatus for detecting operating terrain, and engineering equipment for detecting operating terrain
CN115909253A (zh) 一种目标检测、模型训练方法、装置、设备及存储介质
CN115359332A (zh) 基于车路协同的数据融合方法、装置、电子设备及系统
CN113867389A (zh) 一种无人机拍摄控制方法、装置、设备及存储介质
CN114694106A (zh) 道路检测区域的提取方法、装置、计算机设备和存储介质
CN114581615B (zh) 一种数据处理方法、装置、设备和存储介质
CN116795131A (zh) 基于雷达的配电线路无人机巡检方法和装置
CN116958917A (zh) 路沿检测方法、电子设备及自动行走设备
CN117496485A (zh) 对象检测方法及装置、电子设备和计算机可读存储介质
CN111767761A (zh) 可移动设备的行驶区域的确定方法、确定装置及电子设备
CN118155165A (zh) 路沿检测方法、装置、车辆及计算机可读存储介质
JP2023057731A (ja) 情報処理装置、情報処理装置の制御方法及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210219

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220329

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220331

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220624

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220906

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230404