KR20220143621A - Unmanned aerial vehicle and method for moving obstacle collision avoidance - Google Patents

Unmanned aerial vehicle and method for moving obstacle collision avoidance Download PDF

Info

Publication number
KR20220143621A
KR20220143621A KR1020220130031A KR20220130031A KR20220143621A KR 20220143621 A KR20220143621 A KR 20220143621A KR 1020220130031 A KR1020220130031 A KR 1020220130031A KR 20220130031 A KR20220130031 A KR 20220130031A KR 20220143621 A KR20220143621 A KR 20220143621A
Authority
KR
South Korea
Prior art keywords
obstacle
candidate
aiming
detected
sphere
Prior art date
Application number
KR1020220130031A
Other languages
Korean (ko)
Other versions
KR102610559B1 (en
KR102610559B9 (en
Inventor
박종호
Original Assignee
아주대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아주대학교산학협력단 filed Critical 아주대학교산학협력단
Priority to KR1020220130031A priority Critical patent/KR102610559B1/en
Publication of KR20220143621A publication Critical patent/KR20220143621A/en
Application granted granted Critical
Publication of KR102610559B1 publication Critical patent/KR102610559B1/en
Publication of KR102610559B9 publication Critical patent/KR102610559B9/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENTS OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D45/00Aircraft indicators or protectors not otherwise provided for
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/10Simultaneous control of position or course in three dimensions
    • G05D1/101Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G05D1/106Change initiated in response to external conditions, e.g. avoidance of elevated terrain or of no-fly zones
    • B64C2201/141
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2201/00UAVs characterised by their flight controls
    • B64U2201/10UAVs characterised by their flight controls autonomous, i.e. by navigating independently from ground or air stations, e.g. by using inertial navigation systems [INS]

Abstract

The present invention relates to an unmanned aerial vehicle capable of moving obstacle automatic avoidance and an avoidance method thereof. The unmanned aerial vehicle according to one embodiment of the present invention may comprise: an obstacle detection unit which detects a first obstacle by a predetermined method to generate a first sphere including the detected first obstacle, and generates first obstacle information including at least one of the diameter and the radius of the first sphere and the central point of the first sphere; and a collision avoidance processing unit which uses the first obstacle information sequentially inputted to expect a first moving route of the first obstacle, extracts the n number of candidate aiming points corresponding to the first moving route, detects the mth candidate aiming point which has a higher order of priority among the n number of candidate aiming points, and determines collision possibility with the first obstacle while moving to the mth candidate aiming point. Therefore, the moving obstacle may be detected and collision thereagainst may be avoided.

Description

동적 장애물 충돌 회피 무인기 및 그 회피 방법{UNMANNED AERIAL VEHICLE AND METHOD FOR MOVING OBSTACLE COLLISION AVOIDANCE}Dynamic obstacle collision avoidance drone and its avoidance method

본 발명은 동적(動的) 장애물 자동 충돌 회피가 가능한 무인기 및 그 회피 방법에 대한 것이다. The present invention relates to an unmanned aerial vehicle capable of automatic collision avoidance of dynamic obstacles and a method for avoiding the same.

일반적으로 항공기는 지표면에 대한 공기의 반작용으로 대기 중에서 지지력을 획득할 수 있는 기계를 의미한다. 항공기 중에서 무인기(UAV, Unmanned Aerial Vehicle)는 조종사가 탑승하지 않는 항공기로서, 최근 군사 분야뿐 아니라 민간 분야에서도 많은 주목을 끌고 있다. 대표적인 무인기로는 쿼드로터(quadrotor), 헥사콥터(hexacopter) 등이 있는데, 수직 이착륙이 가능한 회전익 무인기의 종류이다. In general, an aircraft refers to a machine that can acquire bearing capacity in the atmosphere by the reaction of air against the ground. Among aircraft, an unmanned aerial vehicle (UAV) is an aircraft that does not have a pilot on board, and has recently attracted a lot of attention not only in the military field but also in the civilian field. Representative UAVs include quadrotor and hexacopter, which are types of rotary wing UAVs capable of vertical take-off and landing.

무인기는 전쟁터, 재난지역과 같이 위험환경에서도 효율적이면서도 효과적으로 다양한 임무 수행을 할 수 있어, 감시, 정찰, 탐사, 운송 등과 같은 임무를 위해 광범위하게 사용되고 있다. 이러한 임무를 수행함에 있어서 자연구조물 및 인공구조물을 포함하는 다양한 장애물(obstacle)에 근접해야 할 것이 요구되고 있어, 주어진 임무를 성공적으로 수행하기 위해서는 이러한 장애물에 충돌하는 것을 회피할 필요성이 야기되고 있으며, 이를 위해 무인기에서 장애물을 감지하고 회피할 것이 요구되고 있다.UAVs can efficiently and effectively perform various missions in hazardous environments such as battlefields and disaster areas, and are widely used for missions such as surveillance, reconnaissance, exploration, and transportation. In performing these tasks, it is required to be close to various obstacles including natural and man-made structures, and in order to successfully perform a given task, it is necessary to avoid colliding with these obstacles, For this purpose, it is required to detect and avoid obstacles from the unmanned aerial vehicle.

이러한 목적으로 무인기를 위해 개발되어 사용되고 있는 센서들이 있다. 센서들은 감지하는 에너지가 인공적인지 자연적인지 여부에 기초하여 분류될 수 있다. 그 중, 능동 센서(active sensor)는 환경 속으로 에너지를 발상함으로써 동작하게 되고, 이후 빔의 반사를 측정하게 되는데, 예를 들면 레이더(radar), 레이저 레이더(ladar), 라이더(lidar) 등이 있을 수 있다. There are sensors developed and used for UAVs for this purpose. Sensors can be classified based on whether the energy they sense is artificial or natural. Among them, the active sensor operates by generating energy into the environment, and then measures the reflection of the beam. For example, radar, laser radar, lidar, etc. there may be

한국공개특허 10-2013-0037697호(무인항공기의 충돌 방지 시스템 및 방법)에는 2차원 전자지도 기반 하에서 자동으로 다음 비행 경유지로 이동중 사용자가 지정한 비행 고도보다 중간 경유지에 비행 고도보다 높은 산, 빌딩 등이 있는 경우 자동비행 중 충돌 위험을 조종자에게 사전에 알려주어 고도를 수정하거나 경유지를 변경하도록 하는 기술이 개시되어 있다. 하지만, 이 경우 영상 정보를 사용하지 않고 초음파 센서를 사용하여 장애물을 탐지하고 있을 뿐이며, 이를 조종사에게 미리 경고하여 조종사가 다음 목적지로 이동하는 무인항공기의 고도나 비행 경로를 수정하는 방식이 적용되어 있다.Korean Patent Laid-Open Patent No. 10-2013-0037697 (System and Method for Collision Prevention of Unmanned Aircraft) states that automatically moving to the next flight stop based on a two-dimensional electronic map, such as mountains, buildings, etc. In this case, there is disclosed a technology for notifying the pilot of the risk of collision during automatic flight in advance to correct the altitude or change the waypoint. However, in this case, an obstacle is detected using an ultrasonic sensor without using image information, and the pilot is warned in advance to modify the altitude or flight path of the unmanned aerial vehicle moving to the next destination. .

최근 라이더(lidar)와 같은 능동 센서가 저렴한 비용으로 인해 무인기에 많이 장착되고 있어, 이를 이용한 동적(動的)장애물 탐지 및 충돌 회피 방안이 필요한 실정이다. Recently, active sensors such as lidar have been widely installed on unmanned aerial vehicles due to their low cost, and thus a method for detecting dynamic obstacles and avoiding collisions using them is required.

전술한 배경기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.The above-mentioned background art is technical information possessed by the inventor for the derivation of the present invention or acquired in the process of derivation of the present invention, and cannot necessarily be said to be a known technique disclosed to the general public prior to the filing of the present invention.

대한민국 특허공개공보 제10-2015-0136209호Korean Patent Publication No. 10-2015-0136209

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 본 발명의 목적은 능동 센서를 이용하여 동적 장애물의 탐지 및 충돌 회피를 할 수 있는 장애물 회피 무인기 및 그 회피 방법을 제공하고자 한다. SUMMARY OF THE INVENTION The present invention is to solve the above problems, and an object of the present invention is to provide an obstacle avoiding unmanned aerial vehicle capable of detecting and avoiding collisions using an active sensor and a method of avoiding the same.

본 발명의 일 실시예에 따르면, 미리 설정된 방법에 따라 제1 장애물을 탐지하고, 탐지된 상기 제1 장애물을 포함하는 제1 스피어(sphere)를 생성하고, 상기 제1 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제1 장애물 정보를 생성하는 장애물 탐지부; 및 순차적으로 입력되는 제1 장애물 정보를 이용하여, 상기 제1 장애물의 제1 이동 경로를 예측하고, 상기 제1 이동 경로에 상응하는 n개의 후보 조준점을 추출하고, 상기 n개의 후보 조준점 중 우선 순위가 높은 제m 후보 조준점을 검출하고, 상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하는 충돌회피 처리부;를 포함하되, 상기 n은 2 이상의 자연수이고, 상기 m은 상기 n 이하의 자연수인, 무인기가 개시된다. According to an embodiment of the present invention, a first obstacle is detected according to a preset method, a first sphere including the detected first obstacle is generated, and at least a diameter or a radius of the first sphere is detected. an obstacle detector for generating first obstacle information including one and a center point of the first sphere; and predicting a first movement path of the first obstacle using sequentially input first obstacle information, extracting n candidate aiming points corresponding to the first moving path, and prioritizing the n candidate aiming points A collision avoidance processing unit that detects an m-th candidate aiming point having a high An unmanned aerial vehicle, which is a natural number less than or equal to n, is disclosed.

실시예에 따라, 상기 장애물 탐지부는, 상기 제1 장애물이 탐지된 후 미리 설정된 조건이 만족되기 전에는 탐지 시간, 장애물 이동 거리를 고려하여 상기 제1 장애물 정보를 생성하고, 상기 충돌회피 처리부는, 상기 조건 만족 전에 입력된 상기 제1 장애물 정보를 이용하여 상기 제1 장애물의 제1 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제1 이동 경로를 이용하여 상기 예측을 수행할 수 있다. According to an embodiment, the obstacle detecting unit generates the first obstacle information in consideration of a detection time and an obstacle moving distance before a preset condition is satisfied after the first obstacle is detected, and the collision avoidance processing unit comprises: The first movement path of the first obstacle may be tracked using the first obstacle information input before the condition is satisfied, and the prediction may be performed using the tracked first movement path after the condition is satisfied.

실시예에 따라, 상기 장애물 탐지부는, 상기 조건이 만족된 후에는, 구비된 능동 센서에서 입력된 정보들을 미리 설정된 방법에 따라 클러스터링하여 상기 제1 장애물을 탐지하고, 상기 충돌회피 처리부는, 상기 조건이 만족된 후에는, 미리 설정된 칼만 필터(Kalman filter)를 이용하여 상기 예측을 수행할 수 있다. According to an embodiment, the obstacle detection unit detects the first obstacle by clustering information input from the provided active sensor according to a preset method after the condition is satisfied, and the collision avoidance processing unit includes the condition After this is satisfied, the prediction may be performed using a preset Kalman filter.

실시예에 따라, 상기 조건은 미리 설정된 초기 시간에 상응하되, 상기 초기 시간은 상기 제1 장애물이 최초로 탐지된 순간부터 기산될 수 있다. According to an embodiment, the condition corresponds to a preset initial time, but the initial time may be calculated from a moment when the first obstacle is first detected.

실시예에 따라, 상기 충돌회피 처리부는, 상기 예측에 상응하는 파이프(pipe)를 생성하고, 상기 파이프에 포함된 상기 n개의 후보 조준점을 추출할 수 있다.According to an embodiment, the collision avoidance processing unit may generate a pipe corresponding to the prediction and extract the n candidate aiming points included in the pipe.

실시예에 따라, 상기 충돌회피 처리부는, 상기 n개의 후보 조준점 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 상기 제m 후보 조준점으로 검출할 수 있다. According to an embodiment, the collision avoidance processing unit may detect, as the mth candidate aiming point, the closest distance to a preset target point among the n candidate aiming points.

실시예에 따라, 상기 충돌회피 처리부는, 상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 거리가 상기 반경 이하인 경우가 존재하면 상기 제1 장애물과의 충돌 가능성이 있다고 판단할 수 있다. According to an embodiment, the collision avoidance processing unit may determine that there is a possibility of collision with the first obstacle if there is a case where the distance to the first obstacle is less than or equal to the radius while moving to the mth candidate aiming point.

실시예에 따라, 상기 충돌회피 처리부는, 상기 n개의 후보 조준점 중 상기 제m 후보 조준점을 제외한 나머지 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 제p 후보 조준점으로 검출하고, 상기 제p 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하되, 상기 p은 상기 n 이하의 자연수 중 상기 m과 상이한 자연수일 수 있다. According to an embodiment, the collision avoidance processing unit detects, as the p-th candidate aiming point, the closest distance to a preset target point among the n candidate aiming points except for the m-th candidate aiming point, and as the p-th candidate aiming point. A possibility of colliding with the first obstacle is determined while moving, wherein p may be a natural number different from m among natural numbers less than or equal to n.

실시예에 따라, 상기 장애물 탐지부는, 상기 미리 설정된 방법에 따라 제2 장애물을 탐지하고, 탐지된 상기 제2 장애물을 포함하는 제2 스피어(sphere)를 생성하고, 상기 제2 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제2 장애물 정보를 생성하고, 상기 충돌회피 처리부는, 순차적으로 입력되는 제2 장애물 정보를 이용하여, 상기 제2 장애물의 제2 이동 경로를 예측하고, 상기 제1 이동 경로 및 상기 제2 이동 경로에 상응하는 q개의 후보 조준점을 추출하고, 상기 q개의 후보 조준점 중 우선 순위가 높은 제a 후보 조준점을 검출하고, 상기 제a 후보 조준점으로 이동하는 동안 상기 제1 장애물 및 상기 제2 장애물과의 충돌 가능성을 판단하되, 상기 q는 상기 n을 초과하는 자연수이고, 상기 a는 상기 q 이하의 자연수일 수 있다. According to an embodiment, the obstacle detecting unit detects a second obstacle according to the preset method, generates a second sphere including the detected second obstacle, and a diameter or radius of the second sphere generates second obstacle information including at least one of at least one and the center point of the first sphere, and the collision avoidance processing unit predicts a second movement path of the second obstacle by using the sequentially input second obstacle information extracting q candidate aiming points corresponding to the first and second moving paths, detecting the a-th candidate aiming point having a higher priority among the q candidate aiming points, and moving to the a-th candidate aiming point While determining the possibility of collision with the first obstacle and the second obstacle, q may be a natural number greater than n, and a may be a natural number less than or equal to q.

실시예에 따라, 상기 장애물 탐지부는, 상기 제1 장애물이 탐지된 후 미리 설정된 조건이 만족되기 전에는 상기 탐지 시간, 장애물 이동 거리를 고려하여 상기 제1 장애물 정보를 생성하고, 상기 제2 장애물이 탐지된 후 상기 조건이 만족되기 전에는 상기 탐지 시간, 상기 장애물 이동 거리를 고려하여 상기 제2 장애물 정보를 생성하며, 상기 충돌회피 처리부는, 상기 조건 만족 전에 입력된 상기 제1 장애물 정보를 이용하여 상기 제1 장애물의 제1 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제1 이동 경로를 이용하여 상기 제1 이동 경로를 예측하고, 상기 조건 만족 전에 입력된 상기 제2 장애물 정보를 이용하여 상기 제2 장애물의 제2 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제2 이동 경로를 이용하여 상기 제2 이동 경로를 예측하되, 상기 조건은 미리 설정된 초기 시간에 상응하고, 상기 초기 시간은 상기 제1 장애물이 최초로 탐지된 순간부터 기산될 수 있다. According to an embodiment, the obstacle detector generates the first obstacle information in consideration of the detection time and the obstacle movement distance before a preset condition is satisfied after the first obstacle is detected, and the second obstacle is detected. before the condition is satisfied, the second obstacle information is generated in consideration of the detection time and the obstacle movement distance, and the collision avoidance processing unit is configured to generate the second obstacle information using the first obstacle information input before the condition is satisfied. Tracks a first movement path of a first obstacle, predicts the first movement path using the tracked first movement path after the condition is satisfied, and uses the second obstacle information input before the condition is satisfied 2 Track the second movement path of the obstacle, and predict the second movement path using the tracked second movement path after the condition is satisfied, wherein the condition corresponds to a preset initial time, and the initial time is the The first obstacle may be counted from the moment it is first detected.

실시예에 따라, 상기 장애물 탐지부는, 상기 조건이 만족된 후에는, 구비된 능동 센서에서 입력된 정보들을 미리 설정된 방법에 따라 클러스터링하여 상기 제1 장애물 및 상기 제2 장애물 중 하나 이상을 탐지하고, 상기 충돌회피 처리부는, 상기 조건이 만족된 후에는, 미리 설정된 칼만 필터(Kalman filter)를 이용하여 상기 제1 이동 경로 및 상기 제2 이동 경로 중 하나 이상을 예측할 수 있다. According to an embodiment, the obstacle detecting unit detects at least one of the first obstacle and the second obstacle by clustering information input from the provided active sensor according to a preset method after the condition is satisfied, After the condition is satisfied, the collision avoidance processing unit may predict at least one of the first movement path and the second movement path using a preset Kalman filter.

실시예에 따라, 상기 충돌회피 처리부는, 상기 제1 이동 경로 예측에 상응하는 제1 파이프(pipe)를 생성하고, 상기 제2 이동 경로 예측에 상응하는 제2 파이프(pipe)를 생성하고, 상기 제1 파이프 및 상기 제2 파이프에 포함된 상기 q개의 후보 조준점을 추출할 수 있다. According to an embodiment, the collision avoidance processing unit generates a first pipe corresponding to the prediction of the first movement path, generates a second pipe corresponding to the prediction of the second movement path, and the The q candidate aiming points included in the first pipe and the second pipe may be extracted.

실시예에 따라, 상기 충돌회피 처리부는, 상기 q개의 후보 조준점 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 상기 제a 후보 조준점으로 검출할 수 있다. According to an embodiment, the collision avoidance processing unit may detect, as the a-th candidate aiming point, the closest distance to a preset target point among the q candidate aiming points.

실시예에 따라, 상기 충돌회피 처리부는, 상기 제a 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 거리가 상기 제1 스피어의 반경 이하인 경우 또는 상기 제2 장애물과의 거리가 상기 제2 스피어의 반경 이하인 경우가 존재하면 상기 제1 장애물 또는 상기 제2 장애물과의 충돌 가능성이 있다고 판단할 수 있다. According to an embodiment, the collision avoidance processing unit may include, while moving to the a-th candidate aiming point, when the distance to the first obstacle is less than or equal to the radius of the first sphere or the distance to the second obstacle is the second sphere's If the radius or less exists, it may be determined that there is a possibility of collision with the first obstacle or the second obstacle.

실시예에 따라, 상기 충돌회피 처리부는, 상기 q개의 후보 조준점 중 상기 제a 후보 조준점을 제외한 나머지 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 상기 제b 후보 조준점으로 검출하고, 상기 제b 후보 조준점으로 이동하는 동안 상기 제1 장애물 및 상기 제2 장애물과의 충돌 가능성을 판단하되, 상기 b은 상기 q 이하의 자연수 중 상기 a와 상이한 자연수일 수 있다. According to an embodiment, the collision avoidance processing unit is configured to detect, as the bth candidate aiming point, the closest distance to a preset target point among the q candidate aiming points except for the a-th candidate aiming point, and the b-th candidate aiming point. A possibility of collision with the first obstacle and the second obstacle is determined while moving to , wherein b may be a natural number different from a among natural numbers less than or equal to q.

본 발명은 능동 센서를 이용하여 동적 장애물을 탐지하고, 자동으로 동적 장애물과의 충돌을 회피할 수 있다. The present invention can detect a dynamic obstacle using an active sensor and automatically avoid collision with the dynamic obstacle.

도 1은 본 발명의 일 실시예에 따른 장애물 회피 무인기에 대한 블록 구성도이다.
도 2 내지 도 4는 본 발명의 일 실시예에 따른 무인기의 장애물 탐지 및 회피 동작을 설명하기 위한 도면이다.
도 5 내지 도 10은 본 발명의 일 실시예에 따른 무인기의 장애물 회피 시뮬레이션 결과를 비교 설명하기 위한 도면이다.
도 11은 본 발명의 다른 실시예에 따른 장애물 탐지 및 회피 방법에 대한 순서도이다.
1 is a block diagram of an obstacle avoiding unmanned aerial vehicle according to an embodiment of the present invention.
2 to 4 are diagrams for explaining an operation of detecting and avoiding obstacles of an unmanned aerial vehicle according to an embodiment of the present invention.
5 to 10 are diagrams for comparing and explaining an obstacle avoidance simulation result of an unmanned aerial vehicle according to an embodiment of the present invention.
11 is a flowchart of a method for detecting and avoiding an obstacle according to another embodiment of the present invention.

본 명세서에서 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.Specific structural or functional descriptions of the embodiments according to the concept of the present invention disclosed in this specification are only exemplified for the purpose of explaining the embodiments according to the concept of the present invention, and the embodiments according to the concept of the present invention are It may be implemented in various forms and is not limited to the embodiments described herein.

본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 변경, 균등물 또는 대체물을 포함한다. Since the embodiments according to the concept of the present invention may have various changes and may have various forms, the embodiments will be illustrated in the drawings and described in detail herein. However, this is not intended to limit the embodiments according to the concept of the present invention to specific disclosed forms, and includes changes, equivalents or substitutes included in the spirit and scope of the present invention.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만, 예를 들어 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다. Terms such as first or second may be used to describe various elements, but the elements should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from other components, for example, without departing from the scope of rights according to the concept of the present invention, a first component may be named as a second component, Similarly, the second component may also be referred to as the first component.

어떤 구성요소가 다른 구성요소에 “연결되어” 있다거나 “접속되어” 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 “직접 연결되어” 있다거나 “직접 접속되어” 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 표현들, 예를 들어 “~사이에”와 “바로~사이에” 또는 “~에 이웃하는”과 “~에 직접 이웃하는” 등도 마찬가지로 해석되어야 한다. When an element is referred to as being “connected” or “connected” to another element, it is understood that it may be directly connected or connected to the other element, but other elements may exist in between. it should be On the other hand, when it is mentioned that a certain element is "directly connected" or "directly connected" to another element, it should be understood that there is no other element in the middle. Expressions describing the relationship between components, for example, “between” and “between” or “neighboring to” and “directly adjacent to”, should be interpreted similarly.

본 명세서에서 사용한 용어는 단지 특정한 실시 예들을 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서 “포함하다” 또는 “가지다” 등의 용어를 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. The terms used herein are used only to describe specific embodiments, and are not intended to limit the present invention. The singular expression includes the plural expression unless the context clearly dictates otherwise. In the present specification, terms such as “comprise” or “have” are intended to designate the presence of the specified feature, number, step, operation, component, part, or combination thereof, but one or more other features, number, or step , it should be understood that it does not preclude the possibility of the existence or addition of , operation, components, parts or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present specification. does not

이하, 첨부된 도면을 참조하여 본 발명의 일 실시예에 따른 장애물 회피 무인기 및 그 회피 방법에 대해 살펴보기로 한다.Hereinafter, an obstacle avoiding unmanned aerial vehicle and a method for avoiding the same according to an embodiment of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 장애물 회피 무인기에 대한 블록 구성도이고, 도 2 내지 도 4는 본 발명의 일 실시예에 따른 무인기의 장애물 탐지 및 회피 동작을 설명하기 위한 도면이다. 1 is a block diagram of an obstacle avoiding unmanned aerial vehicle according to an embodiment of the present invention, and FIGS. 2 to 4 are diagrams for explaining an obstacle detection and avoiding operation of the unmanned aerial vehicle according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 무인기(100)는 능동 센서부(110), 장애물 탐지부(120), 충돌회피 처리부(130) 및 무인기 기동부(140)를 포함할 수 있다. Referring to FIG. 1 , an unmanned aerial vehicle 100 according to an embodiment of the present invention may include an active sensor unit 110 , an obstacle detection unit 120 , a collision avoidance processing unit 130 , and an unmanned aerial vehicle starting unit 140 . have.

무인기 기동부(140)는 무인기(100)의 동작 모드에 따라 로터를 동작시켜 무인기(100)의 위치 및 자세를 변화시켜 무인기(100)를 기동시킬 수 있다. 본 발명의 일 실시예에 따른 동작 모드는 목표점 기동 모드, 충돌 회피 모드를 포함할 수 있다. 목표점 기동 모드는 미리 설정된 목표점을 향해 최적의 경로로 자동 운항하는 동작 모드일 수 있다. 충돌 회피 모드는 네비게이션 모드 중 장애물이 탐지되고, 충돌이 예상될 경우의 동작 모드일 수 있다. 이하, 장애물이 탐지되어 무인기(100)가 충돌 회피 모드로 동작되는 경우에 대해 설명한다. The unmanned aerial vehicle starter 140 may operate the rotor according to the operation mode of the unmanned aerial vehicle 100 to change the position and posture of the unmanned aerial vehicle 100 to start the unmanned aerial vehicle 100 . The operation mode according to an embodiment of the present invention may include a target point starting mode and a collision avoidance mode. The target point maneuvering mode may be an operation mode in which the vehicle automatically navigates in an optimal path toward a preset target point. The collision avoidance mode may be an operation mode when an obstacle is detected in the navigation mode and a collision is expected. Hereinafter, a case in which an obstacle is detected and the unmanned aerial vehicle 100 is operated in a collision avoidance mode will be described.

능동 센서부(110)는 구비된 센서(예를 들어, 라이다(lidar)와 같은 능동 센서)를 통해 주변 사물을 센싱한 정보를 생성할 수 있다. 또는 능동 센서부(110)는 비전 센서(vision Sensor)를 포함할 수 있고, 비전 센서 등을 통해 주변 사물을 센싱한 정보를 생성할 수 있다. The active sensor unit 110 may generate information sensing a surrounding object through a provided sensor (eg, an active sensor such as lidar). Alternatively, the active sensor unit 110 may include a vision sensor, and may generate information sensing a surrounding object through a vision sensor or the like.

장애물 탐지부(120)는 능동 센서부(110)에서 생성된 정보에 기초하여 장애물을 탐지할 수 있다. 예를 들어, 장애물 탐지부(120)는 능동 센서부(110) 에서 센싱된 3차원 정보를 이용하여 주변 사물, 지형지물 등을 감지하고 이를 모델링 해낼 수 있다. The obstacle detector 120 may detect an obstacle based on the information generated by the active sensor unit 110 . For example, the obstacle detection unit 120 may use the 3D information sensed by the active sensor unit 110 to detect a surrounding object, a topographical feature, and the like, and model it.

여기서, 능동 센서부(110) 및 장애물 탐지부(120)는 미리 설정된 이벤트가 발생되면 장애물을 탐지하도록 설정될 수 있다. 예를 들어, 능동 센서부(110)는 미리 설정된 시간을 주기로 주변 사물을 센싱한 정보를 생성할 수 있고, 장애물 탐지부(120)는 능동 센서부(110)로부터 정보가 입력될 때마다 장애물의 존부를 탐지할 수 있다. Here, the active sensor unit 110 and the obstacle detection unit 120 may be set to detect an obstacle when a preset event occurs. For example, the active sensor unit 110 may generate information sensing a surrounding object at a preset time period, and the obstacle detection unit 120 detects obstacles whenever information is input from the active sensor unit 110 . existence can be detected.

장애물 탐지부(120)는 장애물이 탐지되면 당해 장애물을 포함하는 스피어(Sphere)를 생성할 수 있다. 예를 들어, 장애물 탐지부(120)는 탐지된 장애물 전부를 포함하는 가상의 공간인 스피어를 생성하되, 미리 설정된 마진(margin)을 적용하여 스피어를 생성할 수 있다. 즉, 생성된 스피어의 중심점은 탐지된 장애물의 중심점과 같고, 스피어의 부피는 장애물의 부피보다 '미리 설정된 만큼' 클 수 있다. When an obstacle is detected, the obstacle detector 120 may generate a sphere including the obstacle. For example, the obstacle detector 120 may generate a sphere that is a virtual space including all detected obstacles, but may generate the sphere by applying a preset margin. That is, the center point of the generated sphere is the same as the center point of the detected obstacle, and the volume of the sphere may be 'by a preset amount' greater than the volume of the obstacle.

도 2를 참조하면, 무인기(100)의 장애물 탐지부(120)는 구비된 센서들을 통해 센싱된 정보를 분석하여 장애물(210-1, 210-2)을 탐지할 수 있고, 개별 장애물(210-1, 220-2) 전체를 포함하면서 미리 설정된 마진이 적용된 스피어(220-1, 220-2)를 생성할 수 있다. Referring to FIG. 2 , the obstacle detecting unit 120 of the unmanned aerial vehicle 100 may detect obstacles 210 - 1 and 210 - 2 by analyzing information sensed through provided sensors, and individual obstacles 210 - 1 and 220-2) while including all of the spheres 220-1 and 220-2 to which a preset margin is applied may be generated.

장애물 탐지부(120)는 생성된 스피어의 중심점, 지름(또는 반지름)을 포함하는 장애물 정보를 생성할 수 있다. 예를 들어, 장애물 탐지부(120)는 제1 장애물(210-1)이 처음 탐지되면 미리 설정된 방법에 따라 제1 장애물(210-1)에 상응하는 제1 스피어(220-1)를 생성할 수 있다. 또한 장애물 탐지부(120)는 제1 스피어(220-1)의 중심점 및 지름(또는 반지름)을 포함하는 제1 장애물 정보를 생성할 수 있다. 또한, 장애물 탐지부(120)는 제2 장애물(210-2)이 처음 탐지되면 미리 설정된 방법에 따라 제2 장애물(210-2)에 상응하는 제2 스피어(220-2)를 생성할 수 있다. 또한 장애물 탐지부(120)는 제2 스피어(220-2)의 중심점 및 지름(또는 반지름)을 포함하는 제2 장애물 정보를 생성할 수 있다.The obstacle detector 120 may generate obstacle information including a center point and a diameter (or radius) of the generated sphere. For example, when the first obstacle 210-1 is detected for the first time, the obstacle detector 120 may generate a first sphere 220-1 corresponding to the first obstacle 210-1 according to a preset method. can Also, the obstacle detector 120 may generate first obstacle information including a center point and a diameter (or radius) of the first sphere 220 - 1 . Also, when the second obstacle 210 - 2 is first detected, the obstacle detector 120 may generate a second sphere 220 - 2 corresponding to the second obstacle 210 - 2 according to a preset method. . Also, the obstacle detector 120 may generate second obstacle information including the center point and the diameter (or radius) of the second sphere 220 - 2 .

한편, 장애물 탐지부(120)는 미리 설정된 시간을 주기로 계속적으로 장애물을 탐지할 수 있다. 즉, 장애물 탐지부(120)는 제1 장애물(210-1)을 처음으로 탐지한 후 미리 설정된 시간이 경과하면 다시 제1 장애물(210-1)을 탐지할 수 있다. 이는 제2 장애물(210-2)에도 마찬가지로 적용될 수 있다. 따라서, 장애물 탐지부(120)는 제1 시간에서의 제1 스피어(220-1) 및/또는 제1 장애물 정보, 제2 시간에서의 제1 스피어(220-1) 및/또는 제1 장애물 정보, 제x 시간에서의 제1 스피어(220-1) 및/또는 제1 장애물 정보를 각각 생성하여 출력할 수 있다. 마찬가지로 장애물 탐지부(120)는 제1 시간에서의 제2 스피어(220-2) 및/또는 제2 장애물 정보, 제2 시간에서의 제2 스피어(220-2) 및/또는 제2 장애물 정보, 제x 시간에서의 제2 스피어(220-1) 및/또는 제2 장애물 정보를 각각 생성하여 출력할 수 있다. 여기에서, x는 임의의 자연수일 수 있다. 또한, 제x 시간은 제x-1 시간보다 미리 설정된 시간이 경과된 후를 의미할 수 있다. Meanwhile, the obstacle detector 120 may continuously detect an obstacle at a preset time period. That is, when a preset time elapses after first detecting the first obstacle 210-1, the obstacle detector 120 may detect the first obstacle 210-1 again. This may also be applied to the second obstacle 210 - 2 . Accordingly, the obstacle detection unit 120 is the first sphere 220-1 and/or the first obstacle information at the first time, the first sphere 220-1 and/or the first obstacle information at the second time. , the first sphere 220-1 and/or the first obstacle information at the x-th time may be respectively generated and output. Similarly, the obstacle detection unit 120 includes the second sphere 220-2 and/or the second obstacle information at the first time, the second sphere 220-2 and/or the second obstacle information at the second time, The second sphere 220-1 and/or second obstacle information at the x-th time may be generated and output, respectively. Here, x may be any natural number. Also, the x-th time may mean after a preset time has elapsed from the x-1 time.

능동 센서부(110)가 센싱 정보를 생성하고, 장애물 탐지부(120)가 센싱 정보를 통해 장애물을 탐지하는 동작은 대한민국 특허공개공보 제10-2015-0136209호 등 다수의 선행기술들에 의해 공개되어 있으므로, 이에 대한 보다 구체적인 설명은 생략한다. An operation in which the active sensor unit 110 generates sensing information and the obstacle detector 120 detects an obstacle through the sensing information is disclosed by a number of prior arts such as Korean Patent Application Laid-Open No. 10-2015-0136209 Therefore, a more detailed description thereof will be omitted.

충돌회피 처리부(130)는 무인기(100)와 장애물(210-1, 210-2)의 충돌 가능성을 예상하고, 예상 결과 충돌 가능성이 있다고 판단되면 신규 경로점인 선택 조준점을 생성할 수 있다. 이때, 당해 장애물(210-1, 210-2)은 동적(動的) 장애물일 수 있다. 즉, 충돌회피 처리부(130)는 장애물(210-1, 210-2)의 이동 경로를 예측하고, 무인기(100)의 미리 설정된 이동 목표점(230)까지의 경로와 장애물(210-1, 210-2)의 이동 경로가 겹치고, 무인기(100)의 속도와 장애물(210-1, 210-2)의 속도를 고려하여 충돌 가능성이 있는지 여부를 판단할 수 있을 것이다. 이하 충돌회피 처리부(130)의 장애물(210-1, 210-2) 충돌 회피 동작에 대해 설명한다. The collision avoidance processing unit 130 may anticipate the possibility of collision between the unmanned aerial vehicle 100 and the obstacles 210 - 1 and 210 - 2 , and when it is determined that there is a possibility of collision as a result of the prediction, it may create a new path point, a selective aiming point. In this case, the obstacles 210-1 and 210-2 may be dynamic obstacles. That is, the collision avoidance processing unit 130 predicts the movement path of the obstacles 210 - 1 and 210 - 2 , and the path and the obstacles 210 - 1 and 210 - to the preset movement target point 230 of the unmanned aerial vehicle 100 . The movement paths of 2) overlap, and whether there is a possibility of a collision may be determined in consideration of the speed of the unmanned aerial vehicle 100 and the speed of the obstacles 210 - 1 and 210 - 2 . Hereinafter, the collision avoidance operation of the obstacles 210 - 1 and 210 - 2 of the collision avoidance processing unit 130 will be described.

도 3을 참조하면, 제1`장애물(210-1)에 대응하여 제1-1 스피어(310-1)(점선으로 도시)가 생성되고, 제1-2 스피어(310-2)(실선으로 도시), 제1-3 스피어(310-3)(실선으로 도시) 및 제1-4 스피어(310-4)(실선으로 도시)의 위치가 예측된 경우가 예시된다. 또한, 도 3을 참조하면, 제2 장애물(210-2)에 대응하여 제2-1 스피어(320-1)(점선으로 도시)가 생성되고, 제2-2 스피어(320-2)(실선으로 도시) 및 제2-3 스피어(320-3)(실선으로 도시)의 위치가 예측된 경우가 예시된다. 즉, 충돌회피 처리부(130)는 제1 장애물(210-1)이 제1-1 스피어(310-1)의 중심점에서 제1-4 스피어(310-4)의 중심점 방향으로 이동하고 있다고 예측할 수 있다. 마찬가지로, 충돌회피 처리부(130)는 제2 장애물(210-2)이 제2-1 스피어(320-1)의 중심점에서 제2-3 스피어(320-3)의 중심점 방향으로 이동하고 있다고 예측할 수 있다.Referring to FIG. 3 , a 1-1 sphere 310-1 (shown by a dotted line) is generated in response to the first 'obstacle 210-1, and a 1-2 sphere 310-2 (in a solid line) is generated. A case in which the positions of the 1-3 spheres 310-3 (shown by a solid line), and the 1-4th spheres 310-4 (shown by a solid line) (shown by a solid line) is predicted is exemplified. Also, referring to FIG. 3 , a 2-1 sphere 320-1 (shown by a dotted line) is generated in response to the second obstacle 210-2, and a 2-2 sphere 320-2 (solid line) is generated. A case in which the positions of the 2-3 spheres 320-3 (shown by solid lines) are predicted is exemplified. That is, the collision avoidance processing unit 130 can predict that the first obstacle 210-1 is moving from the center point of the 1-1 sphere 310-1 to the center point of the 1-4 sphere 310-4. have. Similarly, the collision avoidance processing unit 130 can predict that the second obstacle 210-2 is moving from the center point of the 2-1 sphere 320-1 to the center point of the 2-3 sphere 320-3. have.

도 3에 도시된 각 스피어들은 원형으로 도시되었으나, 당해 원형은 스피어(sphere)의 표면을 이루는 수많은 원형 중에서 장애물의 이동 방향에 대응되는 하나의 원을 도시한 것에 불과하다. Each of the spheres shown in FIG. 3 is illustrated as a circle, but the circle is merely a circle corresponding to the moving direction of the obstacle among numerous circles constituting the surface of the sphere.

여기서, 충돌회피 처리부(130)는 제1 장애물(210-1)에 상응하는 복수의 스피어들 중 하나 이상을 분석하여(특히 스피어들의 중심점을 분석하여) 제1 장애물(210-1)의 상태변수(위치, 속도, 가속도 등)를 예측할 수 있는다. 이때 충돌회피 처리부(130)는 칼만 필터(Kalman filter)를 이용할 수 있다. 마찬가지로, 충돌회피 처리부(130)는 제2 장애물(210-2)에 상응하는 복수의 스피어 중 하나 이상을 분석하여(특히 스피어들의 중심점을 분석하여) 제2 장애물(210-2)의 상태변수(위치, 속도, 가속도 등)를 예측할 수 있는다. 이때에도 충돌회피 처리부(130)는 칼만 필터(Kalman filter)를 이용할 수 있다. Here, the collision avoidance processing unit 130 analyzes one or more of the plurality of spheres corresponding to the first obstacle 210-1 (particularly by analyzing the center point of the spheres) to determine the state variable of the first obstacle 210-1. (position, velocity, acceleration, etc.) can be predicted. In this case, the collision avoidance processing unit 130 may use a Kalman filter. Similarly, the collision avoidance processing unit 130 analyzes one or more of the plurality of spheres corresponding to the second obstacle 210-2 (particularly by analyzing the center points of the spheres) to determine the state variable ( position, velocity, acceleration, etc.) can be predicted. Even in this case, the collision avoidance processing unit 130 may use a Kalman filter.

그런데, 칼만 필터가 이용될 경우 탐지된 장애물에 대한 상태변수 추정치가 정상상태로 수렴되는 시간이 요구되기 때문에, 충돌회피 처리부(130)는 제1 장애물(210-1) 또는 제2 장애물(210-2)이 처음으로 탐지된 후 미리 설정된 시간이 경과된 후부터 칼만 필터를 이용하여 제1 장애물(210-1) 또는 제2 장애물(210-2)의 상태변수를 예측할 수 있다. However, when the Kalman filter is used, since it takes time for the state variable estimates for the detected obstacles to converge to the normal state, the collision avoidance processing unit 130 performs the first obstacle 210-1 or the second obstacle 210- 2) is detected for the first time, and after a preset time has elapsed, the state variable of the first obstacle 210 - 1 or the second obstacle 210 - 2 may be predicted using the Kalman filter.

또한, 충돌회피 처리부(130)는 칼만 필터 등을 이용하여 상태변수를 예측하기 전에는 각 장애물(210-1, 210-2)의 위치를 "추적"하고, 추적한 위치를 추후 상태변수 예측에 이용할 수 있다. 예를 들어, 제1 장애물(210-1)이 최초로 인식되고 미리 설정된 조건이 만족되기 전인 경우를 한정한다. 이때, 충돌회피 처리부(130)는 제1-1 장애물 정보 내지 제1-y 장애물 정보(단, y는 자연수임)를 이용하여 제1 장애물(120-1)의 중심점 이동을 "추적"할 수 있다. 또한, 충돌회피 처리부(103)는 초기(즉, 최초 인식 후 미리 설정된 조건이 만족되기 전)에 추적된 제1 장애물(120-1)의 이동 경로(중심점 이동)를 추후 칼만 필터의 상태변수 예측에 이용할 수 있다. 이러한 충돌회피 처리부(130)의 제1 장애물(210-1) 추적 방법은 제2 장애물(210-2) 등에도 동일 유사하게 적용될 수 있다. In addition, the collision avoidance processing unit 130 "tracks" the position of each obstacle 210-1, 210-2 before predicting the state variable using a Kalman filter, etc., and uses the tracked position to predict the state variable later. can For example, a case before the first obstacle 210-1 is recognized for the first time and a preset condition is satisfied is limited. At this time, the collision avoidance processing unit 130 may "track" the movement of the center point of the first obstacle 120-1 using the 1-1 obstacle information to the 1-y obstacle information (where y is a natural number). have. In addition, the collision avoidance processing unit 103 predicts the state variable of the Kalman filter later on the movement path (center point movement) of the first obstacle 120-1 tracked at the initial stage (that is, after the initial recognition and before the preset condition is satisfied) . is available for The method of tracking the first obstacle 210 - 1 of the collision avoidance processing unit 130 may be similarly applied to the second obstacle 210 - 2 .

한편, 장애물 탐지부(120)는 능동 센서부(110)에서 입력된 정보들을 이용하여 장애물을 구분할 때 미리 설정된 클러스터링 기법을 이용할 수 있는데, 장애물이 처음으로 탐지되고 일정 시간이 지나기 전까지는 클러스터링 기법이 안정화되지 않을 수 있다. 장애물이 처음으로 탐지되면 장애물의 형상 중 일부분만 탐지될 수 있고, 시간이 경과함에 따라 전체 형상이 탐지될 수 있기 때문이다. 따라서, 장애물 탐지부(120)는 제1 장애물(210-1)이 최초로 탐지된 후 미리 설정된 조건이 만족되기 전에는 제1 장애물(210-1)을 탐지한 시간, 제1 장애물(210-1) 및/또는 다른 장애물들의 이동 거리 등을 고려하여 제1 장애물 정보를 생성할 수 있다. On the other hand, the obstacle detection unit 120 may use a preset clustering technique when classifying obstacles using the information input from the active sensor unit 110. The clustering technique is not performed until a predetermined time elapses after the obstacle is detected for the first time. may not be stable. This is because, when an obstacle is detected for the first time, only a part of the shape of the obstacle may be detected, and over time, the entire shape may be detected. Accordingly, the obstacle detecting unit 120 detects the first obstacle 210-1 after the first obstacle 210-1 is first detected and before a preset condition is satisfied, the first obstacle 210-1 is detected. And/or the first obstacle information may be generated in consideration of moving distances of other obstacles.

예를 들어, 능동 센서부(110)가 비전 센서를 포함하고, 비전 센서에서 출력된 정보는 포인트 클라우드(점 구름, point cloud)에 상응하는 경우를 가정한다. 이때, 장애물 탐지부(120)는 포인트 클라우드를 미리 설정된 클러스터링 기법(clustering, 예를 들어 중심기반 군집화 기법, 밀도기반 군집화 기법 등)을 통해 구분하여 장애물을 탐지할 수 있다. 따라서, 장애물 탐지부(120)는 능동 센서부(110)에서 입력된 포인트 클라우드 중 이미 탐지된 다른 장애물(이하, '기장애물'이라 약칭함)의 이동 거리/속도 및 탐지 시간을 고려할 때, 기장애물에 속할 수 없는 포인트 클라우드를 군집화하여 제1 장애물(210-1)로 탐지할 수 있다. For example, it is assumed that the active sensor unit 110 includes a vision sensor, and information output from the vision sensor corresponds to a point cloud (point cloud). In this case, the obstacle detector 120 may detect the obstacle by classifying the point cloud through a preset clustering technique (clustering, for example, a center-based clustering technique, a density-based clustering technique, etc.) . Therefore, the obstacle detection unit 120 considers the movement distance/speed and detection time of the other obstacles (hereinafter, abbreviated as 'obstacles') that have already been detected among the point clouds input by the active sensor unit 110, Point clouds that do not belong to the obstacle may be clustered and detected as the first obstacle 210-1.

또한, 제1 장애물(210-1)이 최초로 탐지된 후 일정 시간 동안은 제1 장애물(210-1)의 형상이 계속 변형될 수 있으므로(처음에 인지된 제1 장애물(210-1)의 형상은 그 전부가 아니므로), 장애물 탐지부(120)는 미리 설정된 조건이 만족되기 전까지 장애물들(새로 탐지된 제1 장애물(210-1) 포함)의 이동거리, 속도, 탐지시간 등을 고려하여 포인트 클라우드를 클러스터링할 수 있을 것이다. 예를 들어, 기장애물이 A 속도(단, A는 실수임)로 이동하던 중에 새로이 포인트들이 탐지되었다면, 새로운 포인트들이 기장애물에 속할 수 있는지 여부가 판단될 수 있고, 이후에는 모든 장애물들의 이동 속도, 탐지 시간을 고려하여 새로 탐지된 포인트가 어떤 장애물에 속할 것인지 판단될 수 있는 것이다. In addition, since the shape of the first obstacle 210-1 may continue to be deformed for a certain period of time after the first obstacle 210-1 is detected for the first time (the shape of the first recognized obstacle 210-1) is not all), the obstacle detection unit 120 considers the moving distance, speed, and detection time of obstacles (including the newly detected first obstacle 210-1) until a preset condition is satisfied. It will be possible to cluster point clouds. For example, if points are newly detected while the obstacle is moving at speed A (however, A is a real number), it can be determined whether the new points can belong to the obstacle, and thereafter, the movement speed of all obstacles , it is possible to determine which obstacle the newly detected point belongs to in consideration of the detection time.

이러한 장애물 탐지부(120)의 장애물 탐지 방법은 제2 장애물(210-2) 등에도 동일 유사하게 적용될 수 있다. The obstacle detection method of the obstacle detector 120 may be similarly applied to the second obstacle 210 - 2 .

여기서, 장애물 탐지부(120) 및/또는 충돌회피 처리부(130)의 미리 설정된 조건은 초기 시간에 상응할 수 있다. 초기 시간이란 장애물이 최초로 탐지된 순간부터 기산되는 시간일 수 있다. 예를 들어, 초기 시간이 1초로 설정된 경우, 제1 장애물(210-1)이 최초로 탐지된 후 1초가 경과하면 상기 초기 시간이 만족되었다고 판단될 수 있을 것이다. Here, the preset condition of the obstacle detection unit 120 and/or the collision avoidance processing unit 130 may correspond to the initial time. The initial time may be a time calculated from the moment the obstacle is first detected. For example, when the initial time is set to 1 second, it may be determined that the initial time is satisfied when 1 second has elapsed after the first obstacle 210-1 is first detected.

또한, 미리 설정된 조건이 만족되면(예를 들어 초기 시간이 경과되면), 충돌회피 처리부(130)는 순차적으로 입력된 제1 장애물정보들과 제2 장애물정보들을 이용하여 제1 장애물(210-1)의 이동 경로 및/또는 제2 장애물(210-2)의 이동 경로를 예측할 수 있다. 이때, 칼만 필터가 사용될 수 있음은 상술한 바와 같다. In addition, when a preset condition is satisfied (eg, when the initial time has elapsed), the collision avoidance processing unit 130 uses the sequentially input first obstacle information and second obstacle information to generate the first obstacle 210-1. ) and/or the movement path of the second obstacle 210 - 2 may be predicted. In this case, the Kalman filter may be used as described above.

도 3의 예시에서, 최초로 인식된 제1 장애물(210-1)의 제1-1 스피어(310-1) 및 이와 이어지는 점들(310-11)이 미리 설정된 조건이 만족되기 전에 인식된 제1 장애물 정보에 상응할 수 있다. 또한, 제1-2 스피어(310-2) 내지 제1-4 스피어(310-4)는 충돌회피 처리부(130)에서 예측된 제1 장애물(210-1)의 이동 경로를 의미한다. 마찬가지로 최초로 인식된 제2 장애물(210-2)의 제2-1 스피어(320-1) 및 이와 이어지는 점들(320-11)이 미리 설정된 조건이 만족되기 전에 인식된 제2 장애물 정보에 상응하고, 제2-2 스피어(320-2) 내지 제2-3 스피어(320-3)는 충돌회피 처리부(130)에서 예측된 제2 장애물(210-2)의 이동 경로를 의미한다.In the example of FIG. 3 , the first obstacle recognized before the 1-1 sphere 310-1 and the points 310-11 connected thereto of the first recognized obstacle 210-1 are satisfied before a preset condition is satisfied. may correspond to information. In addition, the 1-2 spheres 310-2 to 1-4 spheres 310-4 refer to the movement paths of the first obstacle 210-1 predicted by the collision avoidance processing unit 130 . Similarly, the first 2-1 sphere 320-1 of the first recognized second obstacle 210-2 and the points 320-11 following it correspond to the second obstacle information recognized before the preset condition is satisfied, The 2-2 spheres 320 - 2 to 2 - 3 spheres 320 - 3 refer to the movement paths of the second obstacle 210 - 2 predicted by the collision avoidance processing unit 130 .

또한, 충돌회피 처리부(130)는 제1 장애물(210-1) 이동 경로 예측에 상응하는 가상의 제1 파이프(Pipe)를 생성할 수 있다. 마찬가지로 충돌회피 처리부(130)는 제2 장애물(210-2) 이동 경로 예측에 상응하는 가상의 제2 파이프를 생성할 수 있다. Also, the collision avoidance processing unit 130 may generate a first virtual pipe corresponding to the prediction of the movement path of the first obstacle 210-1. Similarly, the collision avoidance processing unit 130 may generate a virtual second pipe corresponding to the prediction of the movement path of the second obstacle 210 - 2 .

도 4를 참조하면, 제1 파이프(410)의 지름은 제1 스피어의 지름과 동일하고, 제1 파이프(410)의 중심선은 제1 장애물(210-1)의 중심선과 동일한 경우가 예시된다. 또한, 제2 파이프(420)의 지름은 제2 스피어의 지름과 동일하고, 제2 파이프(420)의 중심선은 제2 장애물(210-2)의 중심선과 동일한 경우가 예시된다. 여기서, 제1 장애물(210-1)의 중심선은 예측된 제1 장애물(210-1)의 중심점을 연결하는 가상의 선을 의미할 수 있고, 제2 장애물(210-2)의 중심선은 예측된 제2 장애물(210-2)의 중심점을 연결하는 가상의 선을 의미할 수 있다. Referring to FIG. 4 , the diameter of the first pipe 410 is the same as the diameter of the first sphere, and the centerline of the first pipe 410 is the same as the centerline of the first obstacle 210-1. Also, a case where the diameter of the second pipe 420 is the same as the diameter of the second sphere and the centerline of the second pipe 420 is the same as the centerline of the second obstacle 210-2 is exemplified. Here, the center line of the first obstacle 210 - 1 may mean a virtual line connecting the predicted center points of the first obstacle 210 - 1 , and the center line of the second obstacle 210 - 2 is the predicted center line of the first obstacle 210 - 1 . It may mean a virtual line connecting the center points of the second obstacle 210 - 2 .

이후 충돌회피 처리부(130)는 제1 파이프(410)에 포함된 포인트들 및/또는 제2 파이프(420)에 포함된 포인트들을 후보 조준점으로 추출할 수 있다. 무인기(100)가 제1 파이프(410) 또는 제2 파이프(420)에 포함된 포인트로 이동할 때는 제1 장애물(210-1) 및/또는 제2 장애물(210-2)와 충돌할 위험이 있기 때문이다. Thereafter, the collision avoidance processing unit 130 may extract points included in the first pipe 410 and/or points included in the second pipe 420 as candidate aiming points. When the drone 100 moves to a point included in the first pipe 410 or the second pipe 420 , there is a risk of colliding with the first obstacle 210-1 and/or the second obstacle 210-2. Because.

또한, 충돌회피 처리부(130)는 후보 조준점들 중 우선 순위가 가장 높은 후보 조준점을 제m 후보 조준점으로 검출할 수 있다(단, m은 후보 조준점들의 총 개수 이하의 자연수임). 예를 들어, 우선 순위는 무인기(100)의 목표점(230)(즉, 무인기(100)가 향하고 있던 지점)과 가장 가까운 순서에 상응할 수 있다. Also, the collision avoidance processing unit 130 may detect a candidate aiming point having the highest priority among the candidate aiming points as the mth candidate aiming point (where m is a natural number equal to or less than the total number of candidate aiming points). For example, the priority may correspond to the order closest to the target point 230 of the UAV 100 (ie, the point to which the UAV 100 was facing).

또한, 충돌회피 처리부(130)는 무인기(100)가 미리 설정된 속도로 제m 후보 조준점으로 가는 동안 제1 장애물(210-1)과의 거리가 제1 스피어의 제1 반경(430) 이하가 되는 경우가 있거나 제2 장애물(210-2)과의 거리가 제2 스피어의 제2 반경(440) 이하가 되는 경우가 있는지 여부를 판단할 수 있다. 충돌회피 처리부(130)는 무인기(100)가 제m 후보 조준점으로 가는 모든 시간 동안에 걸쳐 상기 경우의 존부를 판단하여야 한다. 무인기(100)가 제m 후보 조준점에 도달하기 전에 장애물들 중 어느 하나와 충돌할 수도 있기 때문이다. In addition, the collision avoidance processing unit 130 determines that the distance to the first obstacle 210-1 is less than or equal to the first radius 430 of the first sphere while the drone 100 goes to the m-th candidate aiming point at a preset speed. It may be determined whether there is a case or the distance to the second obstacle 210 - 2 is less than or equal to the second radius 440 of the second sphere. The collision avoidance processing unit 130 must determine the existence of the above-mentioned case over all the time that the unmanned aerial vehicle 100 goes to the mth candidate aiming point. This is because the unmanned aerial vehicle 100 may collide with any one of the obstacles before reaching the mth candidate aiming point.

판단 결과, 충돌회피 처리부(130)는 제m 후보 조준점으로 무인기(100)가 이동하는 동안 제1 장애물(210-1)와 제1 반경(430) 이하의 거리가 되거나 제2 장애물(220-2)과 제2 반경(440) 이하의 거리가 되는 경우가 있다면, 차우선순위인 제p 후보 조준점을 독출할 수 있다. 여기서 p은 후보 조준점들의 총 개수 이하의 자연수 중 m이 아닌 자연수일 수 있다. 제p 후보 조준점은 전체 후보 조준점 중 제m 후보 조준점 다음으로 우선순위가 높은 후보 조준점일 수 있다. 예를 들어, 제p 후보 조준점은 전체 후보 조준점 중 제m 후보 조준점 다음으로 목표점(230)과의 거리가 가까운 후보 조준점일 수 있다.As a result of the determination, the collision avoidance processing unit 130 sets the distance between the first obstacle 210-1 and the first radius 430 or less or the second obstacle 220-2 while the UAV 100 moves to the m-th candidate aiming point. ) and the second radius 440 or less, it is possible to read the p th candidate aiming point, which is the next priority. Here, p may be a natural number other than m among natural numbers less than or equal to the total number of candidate aiming points. The p-th candidate aiming point may be a candidate aiming point having a higher priority than the m-th candidate aiming point among all the candidate aiming points. For example, the p-th candidate aiming point may be a candidate aiming point having the closest distance to the target point 230 after the m-th candidate aiming point among all the candidate aiming points.

충돌회피 처리부(130)는 제p 후보 조준점으로 무인기(100)가 이동하는 동안 제1 장애물(210-1)와 제1 반경(430) 이하의 거리가 되거나 제2 장애물(220-2)과 제2 반경(440) 이하의 거리가 되는 경우가 있는지 여부를 판단할 수 있다. 판단 결과, 그런 경우가 없다면, 충돌회피 처리부(130)는 제p 후보 조준점을 선택 조준점으로 지정할 수 있다. The collision avoidance processing unit 130 becomes the distance between the first obstacle 210-1 and the first radius 430 or less or the second obstacle 220-2 and the second obstacle while the UAV 100 moves to the p-th candidate aiming point. It may be determined whether there is a case where the distance is less than or equal to 2 radius 440 . As a result of the determination, if there is no such case, the collision avoidance processing unit 130 may designate the p-th candidate aiming point as the selective aiming point.

이후 무인기 기동부(140)는 무인기(100)가 선택 조준점에 상응하는 지점을 향하도록 로터를 동작시킬 수 있다. 이에 의해 무인기(100)는 제1 장애물(210-1) 및 제2 장애물(210-2)을 자동으로 효율적으로 회피할 수 있을 것이다. Thereafter, the unmanned aerial vehicle starter 140 may operate the rotor so that the unmanned aerial vehicle 100 faces a point corresponding to the selected aiming point. Accordingly, the unmanned aerial vehicle 100 may automatically and efficiently avoid the first obstacle 210-1 and the second obstacle 210-2.

이상에서는 장애물이 2개인 경우를 가정하고 설명하였으나, 장애물이 3개 이상인 경우도 상기의 경우가 쉽게 응용될 수 있을 것이다. 따라서 장애물의 개수는 본 발명의 권리범위를 제한할 수 없음이 자명하다. In the above description, it is assumed that there are two obstacles, but the above case can be easily applied even when there are three or more obstacles. Therefore, it is obvious that the number of obstacles cannot limit the scope of the present invention.

도 5 내지 도 10은 본 발명의 일 실시예에 따른 무인기의 장애물 회피 시뮬레이션 결과를 비교 설명하기 위한 도면이다. 5 to 10 are diagrams for comparing and explaining an obstacle avoidance simulation result of an unmanned aerial vehicle according to an embodiment of the present invention.

도 5에는 본 발명의 일 실시예에 따른 무인기(100, UAV) 및 동적 장애물 3개의 이동 경로가 예시된다. 또한, 도 6 내지 도 8은 본 발명의 일 실시예에 따른 무인기(100)의 오일러각, 각속도, 속도, 속력, 클러스터 관리, 장애물과의 최소거리를 나타낸다. 5 illustrates a movement path of the unmanned aerial vehicle 100 (UAV) and three dynamic obstacles according to an embodiment of the present invention. 6 to 8 show the Euler angle, angular velocity, speed, speed, cluster management, and minimum distance to obstacles of the unmanned aerial vehicle 100 according to an embodiment of the present invention.

비행이 시작되면, 무인기(100)는 목표점을 향해 비행을 수행하며, 0개의 장애물(클러스터)을 탐지할 수 있다. 이후 무인기(100)는 첫 번째 장애물을 탐지할 수 있고, 탐지 후 미리 설정된 초기 시간이 도과하면 첫 번째 장애물에 대한 칼만 필터 적용을 개시하여 파이프를 생성할 수 있다. 도 9에 도시된 파이프가 바로 첫 번째 장애물에 상응하는 것일 수 있다. When the flight starts, the unmanned aerial vehicle 100 may fly toward a target point and detect 0 obstacles (clusters). Thereafter, the unmanned aerial vehicle 100 may detect the first obstacle, and when a preset initial time has elapsed after detection, the Kalman filter may be applied to the first obstacle to generate a pipe. The pipe shown in FIG. 9 may correspond to the first obstacle.

이후 무인기(100)는 두 번째 장애물을 탐지할 수 있지만, 미리 설정된 두 번째 장애물을 탐지한 후 초기 시간이 도과하기 전에는 칼만 필터를 적용할 수 없다. 도 9에 도시된 바와 같이 두 번째 장애물에 대한 파이프는 아직 생성되지 않음을 확인할 수 있다. Thereafter, the unmanned aerial vehicle 100 may detect the second obstacle, but cannot apply the Kalman filter until the initial time elapses after detecting the preset second obstacle. As shown in FIG. 9 , it can be seen that the pipe for the second obstacle is not yet created.

두 번째 장애물 탐지 후 초기 시간이 도과되면 두 번째 장애물에 대한 파이프도 생성될 수 있다. 마찬가지로 세 번째 장애물도 탐지 후 초기 시간이 도과되면 세번째 장애물에 대한 파이프도 생성될 수 있다. 도 10에 도시된 바와 같이 두 번째 장애물 및 세 번째 장애물에 대한 파이프들도 생성됨을 확인할 수 있다. If the initial time elapses after detection of the second obstacle, a pipe to the second obstacle may also be created. Similarly, when the initial time elapses after detecting the third obstacle, a pipe for the third obstacle may also be created. As shown in FIG. 10 , it can be confirmed that pipes for the second obstacle and the third obstacle are also generated.

이후 무인기(100)는 탐지된 모든 장애물들과의 충돌 가능성을 예측한 후 선택 조준점을 생성할 수 있고, 선택 조준점을 향하도록 로터를 동작시켜 장애물들을 효율적으로 회피할 수 있다. Thereafter, the unmanned aerial vehicle 100 may generate a selective aiming point after predicting the possibility of collision with all detected obstacles, and may efficiently avoid the obstacles by operating the rotor to face the selected aiming point.

도 11은 본 발명의 다른 실시예에 따른 장애물 탐지 및 회피 방법에 대한 순서도이다. 11 is a flowchart of a method for detecting and avoiding an obstacle according to another embodiment of the present invention.

이하에서 설명될 각 단계들은 도 1을 참조하여 설명한 무인기(100)의 각 구성요소에서 수행되는 단계들일 수 있으나, 이해와 설명의 편의를 위하여 무인기(100)에서 수행되는 것으로 통칭하여 설명한다. Each of the steps to be described below may be steps performed in each component of the UAV 100 described with reference to FIG. 1 , but for convenience of understanding and description, they will be collectively described as being performed in the UAV 100 .

단계 S1110에서, 무인기(100)는 하나 이상의 동적 장애물을 탐지할 수 있다. 무인기(100)는 비전 센서, 라이다 등과 같은 능동 센서를 포함할 수 있고, 이를 통해 동적 장애물을 탐지할 수 있다. In step S1110, the unmanned aerial vehicle 100 may detect one or more dynamic obstacles. The unmanned aerial vehicle 100 may include an active sensor such as a vision sensor and lidar, and may detect a dynamic obstacle through this.

단계 S1120에서, 무인기(100)는 센서를 통해 탐지된 장애물을 미리 설정된 방법에 따라 스피어(sphere)로 형상화할 수 있다. In step S1120, the unmanned aerial vehicle 100 may shape the obstacle detected through the sensor into a sphere according to a preset method.

단계 S1130에서, 무인기(100)는 미리 설정된 초기 시간 동안 탐지시간, 기장애물의 속도, 거리 등을 고려하여 당해 장애물의 스피어를 형상화할 수 있다. In step S1130, the unmanned aerial vehicle 100 may shape the sphere of the obstacle in consideration of the detection time, the speed, the distance, and the like of the obstacle for the initial preset time.

단계 S1140에서, 무인기(100)는 초기 시간이 경과하면 미리 설정된 방법에 따라 장애물의 이동 경로를 예측할 수 있다. 예를 들어, 무인기(100)는 추적된 장애물의 중심점을 이용하여 칼만 필터를 통해 장애물의 이동 경로를 예측할 수 있을 것이다. In step S1140 , when the initial time has elapsed, the unmanned aerial vehicle 100 may predict the movement path of the obstacle according to a preset method. For example, the unmanned aerial vehicle 100 may predict the movement path of the obstacle through the Kalman filter using the center point of the tracked obstacle.

단계 S1150에서, 무인기(100)는 예측된 이동경로에 포함된 n개의 후보 조준점을 추출할 수 있다. 장애물이 복수인 경우, 무인기(100)는 장애물의 이동 경로 예측에 상응하는 복수의 파이프를 형상화할 수 있고, 복수의 파이프 내에 포함된 n개의 포인트들을 후보 조준점을 추출할 수 있는 것이다(단, n은 2 이상의 자연수임)In step S1150, the unmanned aerial vehicle 100 may extract n candidate aiming points included in the predicted movement path. When there are a plurality of obstacles, the drone 100 may shape a plurality of pipes corresponding to the prediction of the movement path of the obstacle, and extract candidate aiming points from n points included in the plurality of pipes (however, n is a natural number greater than or equal to 2)

단계 S1160에서, 무인기(100)는 n개의 후보 조준점 중 미리 설정된 우선 순위(예를 들어, 목표점과의 거리가 가까운 순위)가 가장 높은 제m 후보 조준점을 검출할 수 있다. In step S1160 , the unmanned aerial vehicle 100 may detect an mth candidate aiming point having the highest preset priority (eg, a rank having a close distance to the target point) among the n candidate aiming points.

단계 S1170에서, 무인기(100)는 현재 위치에서 제m 후보 조준점까지 이동하는 전체 시간 동안 개별 동적 장애물과의 거리를 판단할 수 있다. In step S1170 , the unmanned aerial vehicle 100 may determine a distance to an individual dynamic obstacle during the entire time it moves from the current position to the mth candidate aiming point.

단계 S1180에서, 판단 결과 무인기(100)는 개별 장애물과의 거리가 그 장애물과의 반경 이하인 경우가 존재한다면 제m 후보 조준점으로 이동시 장애물과의 충돌 위험이 있다고 판단할 수 있다. 따라서, 무인기(100)는 미리 설정된 차순위에 상응하는 제p 후보 조준점을 검출하여 상기 단계 S1160 내지 S1180을 재수행할 수 있다. In step S1180 , as a result of the determination, if there is a case where the distance to the individual obstacle is less than or equal to the radius of the obstacle, the drone 100 may determine that there is a risk of collision with the obstacle when moving to the mth candidate aiming point. Accordingly, the unmanned aerial vehicle 100 may detect the p-th candidate aiming point corresponding to the preset next priority and re-perform steps S1160 to S1180.

단계 S1170에서, 무인기(100)는 제m 후보 조준점으로 이동하는 전체 시간 동안 개별 장애물과의 거리가 그 장애물과의 반경 이하인 경우가 존재하지 않는다면 제m 후보 조준점을 선택 조준점으로 결정할 수 있다. 이후 무인기(100)는 선택 조준점을 향하도록 로터를 동작시켜 장애물들을 효율적으로 회피할 수 있다. In step S1170 , the unmanned aerial vehicle 100 may determine the mth candidate aiming point as the selective aiming point if there is no case in which the distance to the individual obstacle is less than or equal to the radius of the obstacle during the entire time of moving to the mth candidate aiming point. Thereafter, the unmanned aerial vehicle 100 may efficiently avoid obstacles by operating the rotor to face the selected aiming point.

전술된 실시예는 모든 면에서 예시적인 것이며, 한정적인 것이 아닌 것으로 이해되어야 하며, 본 발명의 범위는 전술된 상세한 설명보다는 후술 될 특허청구범위에 의하여 나타내어질 것이다. 그리고 이 특허청구범위의 의미 및 범위는 물론, 그 등가 개념으로부터 도출되는 모든 변경 및 변형 가능한 형태가 본 발명의 범주에 포함되는 것으로 해석되어야 한다.It is to be understood that the above-described embodiments are illustrative in all respects and not restrictive, and the scope of the present invention will be indicated by the following claims rather than the foregoing detailed description. And it should be construed that all changes and modifications derived from the meaning and scope of the claims as well as equivalent concepts are included in the scope of the present invention.

100: 무인기
110 : 능동 센서부
120 : 장애물 탐지부
130 : 충돌회피 처리부
140 : 무인기 기동부
100: drone
110: active sensor unit
120: obstacle detection unit
130: collision avoidance processing unit
140: unmanned aerial vehicle maneuvering unit

Claims (11)

미리 설정된 방법에 따라 제1 장애물을 탐지하고, 탐지된 상기 제1 장애물을 포함하는 제1 스피어(sphere)를 생성하고, 상기 제1 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제1 장애물 정보를 생성하는 장애물 탐지부; 및
순차적으로 입력되는 제1 장애물 정보를 이용하여, 상기 제1 장애물의 제1 이동 경로를 예측하고, 상기 제1 이동 경로에 상응하는 n개의 후보 조준점을 추출하고, 상기 n개의 후보 조준점 중 우선 순위가 높은 제m 후보 조준점을 검출하고, 상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하는 충돌회피 처리부;
를 포함하되,
상기 n은 2 이상의 자연수이고, 상기 m은 상기 n 이하의 자연수이고,
상기 장애물 탐지부는,
상기 제1 장애물이 탐지된 후 미리 설정된 조건이 만족되기 전에는 탐지 시간, 장애물 이동 거리를 고려하여 상기 제1 장애물 정보를 생성하고,
상기 조건이 만족된 후에는, 구비된 능동 센서에서 입력된 정보들을 미리 설정된 방법에 따라 클러스터링하여 상기 제1 장애물을 탐지하며,
상기 충돌회피 처리부는,
상기 조건 만족 전에 입력된 상기 제1 장애물 정보를 이용하여 상기 제1 장애물의 제1 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제1 이동 경로를 이용하여 상기 예측을 수행하고,
상기 조건이 만족된 후에는, 미리 설정된 칼만 필터(Kalman filter)를 이용하여 상기 예측을 수행하는, 무인기.
A first obstacle is detected according to a preset method, a first sphere including the detected first obstacle is generated, and at least one of a diameter or a radius of the first sphere and a center point of the first sphere are determined. an obstacle detector for generating first obstacle information including; and
Using the sequentially input first obstacle information, the first movement path of the first obstacle is predicted, n candidate aiming points corresponding to the first moving path are extracted, and the priority among the n candidate aiming points is determined. a collision avoidance processing unit detecting a high m-th candidate aiming point and determining a possibility of collision with the first obstacle while moving to the m-th candidate aiming point;
including,
Wherein n is a natural number greater than or equal to 2, and m is a natural number less than or equal to n,
The obstacle detection unit,
After the first obstacle is detected and before a preset condition is satisfied, the first obstacle information is generated in consideration of a detection time and an obstacle movement distance,
After the condition is satisfied, the first obstacle is detected by clustering the information input from the provided active sensor according to a preset method,
The collision avoidance processing unit,
tracking the first movement path of the first obstacle using the first obstacle information input before the condition is satisfied, and performing the prediction using the tracked first movement path after the condition is satisfied;
After the condition is satisfied, the UAV performs the prediction using a preset Kalman filter.
제1항에 있어서,
상기 조건은 미리 설정된 초기 시간에 상응하되,
상기 초기 시간은 상기 제1 장애물이 최초로 탐지된 순간부터 기산되는, 무인기.
According to claim 1,
The condition corresponds to a preset initial time,
The initial time is calculated from the moment the first obstacle is detected for the first time, the unmanned aerial vehicle.
미리 설정된 방법에 따라 제1 장애물을 탐지하고, 탐지된 상기 제1 장애물을 포함하는 제1 스피어(sphere)를 생성하고, 상기 제1 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제1 장애물 정보를 생성하는 장애물 탐지부; 및
순차적으로 입력되는 제1 장애물 정보를 이용하여, 상기 제1 장애물의 제1 이동 경로를 예측하고, 상기 제1 이동 경로에 상응하는 n개의 후보 조준점을 추출하고, 상기 n개의 후보 조준점 중 우선 순위가 높은 제m 후보 조준점을 검출하고, 상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하는 충돌회피 처리부;
를 포함하되,
상기 n은 2 이상의 자연수이고, 상기 m은 상기 n 이하의 자연수이고,
상기 충돌회피 처리부는,
상기 예측에 상응하는 파이프(pipe)를 생성하고, 상기 파이프에 포함된 상기 n개의 후보 조준점을 추출하며, 상기 n개의 후보 조준점 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 상기 제m 후보 조준점으로 검출하는, 무인기.
A first obstacle is detected according to a preset method, a first sphere including the detected first obstacle is generated, and at least one of a diameter or a radius of the first sphere and a center point of the first sphere are determined. an obstacle detector for generating first obstacle information including; and
Using the sequentially input first obstacle information, the first movement path of the first obstacle is predicted, n candidate aiming points corresponding to the first moving path are extracted, and the priority among the n candidate aiming points is determined. a collision avoidance processing unit detecting a high m-th candidate aiming point and determining a possibility of collision with the first obstacle while moving to the m-th candidate aiming point;
including,
Wherein n is a natural number greater than or equal to 2, and m is a natural number less than or equal to n,
The collision avoidance processing unit,
A pipe corresponding to the prediction is generated, the n candidate aiming points included in the pipe are extracted, and the closest distance to a preset target point among the n candidate aiming points is detected as the mth candidate aiming point. to do, drone.
제3항에 있어서,
상기 충돌회피 처리부는,
상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 거리가 상기 반경 이하인 경우가 존재하면 상기 제1 장애물과의 충돌 가능성이 있다고 판단하는, 무인기.
4. The method of claim 3,
The collision avoidance processing unit,
and determining that there is a possibility of collision with the first obstacle if the distance to the first obstacle is equal to or less than the radius while moving to the mth candidate aiming point.
제4항에 있어서,
상기 충돌회피 처리부는,
상기 n개의 후보 조준점 중 상기 제m 후보 조준점을 제외한 나머지 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 제p 후보 조준점으로 검출하고, 상기 제p 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하되,
상기 p은 상기 n 이하의 자연수 중 상기 m과 상이한 자연수인, 무인기.
5. The method of claim 4,
The collision avoidance processing unit,
Among the n candidate aiming points excluding the mth candidate aiming point, the closest distance to the preset target point is detected as the pth candidate aiming point, and the possibility of collision with the first obstacle while moving to the pth candidate aiming point to judge,
The p is a natural number different from the m among the natural numbers less than or equal to n, the unmanned aerial vehicle.
미리 설정된 방법에 따라 제1 장애물을 탐지하고, 탐지된 상기 제1 장애물을 포함하는 제1 스피어(sphere)를 생성하고, 상기 제1 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제1 장애물 정보를 생성하는 장애물 탐지부; 및
순차적으로 입력되는 제1 장애물 정보를 이용하여, 상기 제1 장애물의 제1 이동 경로를 예측하고, 상기 제1 이동 경로에 상응하는 n개의 후보 조준점을 추출하고, 상기 n개의 후보 조준점 중 우선 순위가 높은 제m 후보 조준점을 검출하고, 상기 제m 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 충돌 가능성을 판단하는 충돌회피 처리부;
를 포함하되,
상기 n은 2 이상의 자연수이고, 상기 m은 상기 n 이하의 자연수이고,
상기 충돌회피 처리부는,
상기 예측에 상응하는 파이프(pipe)를 생성하고, 상기 파이프에 포함된 상기 n개의 후보 조준점을 추출하고,
상기 장애물 탐지부는,
상기 미리 설정된 방법에 따라 제2 장애물을 탐지하고, 탐지된 상기 제2 장애물을 포함하는 제2 스피어(sphere)를 생성하고, 상기 제2 스피어의 직경 또는 반경 중 적어도 하나와 상기 제1 스피어의 중심점을 포함하는 제2 장애물 정보를 생성하고,
상기 충돌회피 처리부는,
순차적으로 입력되는 제2 장애물 정보를 이용하여, 상기 제2 장애물의 제2 이동 경로를 예측하고, 상기 제1 이동 경로 및 상기 제2 이동 경로에 상응하는 q개의 후보 조준점을 추출하고, 상기 q개의 후보 조준점 중 우선 순위가 높은 제a 후보 조준점을 검출하고, 상기 제a 후보 조준점으로 이동하는 동안 상기 제1 장애물 및 상기 제2 장애물과의 충돌 가능성을 판단하며,
상기 장애물 탐지부는,
상기 제1 장애물이 탐지된 후 미리 설정된 조건이 만족되기 전에는 탐지 시간, 장애물 이동 거리를 고려하여 상기 제1 장애물 정보를 생성하고, 상기 제2 장애물이 탐지된 후 상기 조건이 만족되기 전에는 상기 탐지 시간, 상기 장애물 이동 거리를 고려하여 상기 제2 장애물 정보를 생성하며,
상기 충돌회피 처리부는,
상기 조건 만족 전에 입력된 상기 제1 장애물 정보를 이용하여 상기 제1 장애물의 제1 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제1 이동 경로를 이용하여 상기 제1 이동 경로를 예측하고,
상기 조건 만족 전에 입력된 상기 제2 장애물 정보를 이용하여 상기 제2 장애물의 제2 이동 경로를 추적하고, 상기 조건 만족 후에 상기 추적된 제2 이동 경로를 이용하여 상기 제2 이동 경로를 예측하되,
상기 조건은 미리 설정된 초기 시간에 상응하고, 상기 초기 시간은 상기 제1 장애물이 최초로 탐지된 순간부터 기산되는, 무인기.
A first obstacle is detected according to a preset method, a first sphere including the detected first obstacle is generated, and at least one of a diameter or a radius of the first sphere and a center point of the first sphere are determined. an obstacle detector for generating first obstacle information including; and
Using the sequentially input first obstacle information, the first movement path of the first obstacle is predicted, n candidate aiming points corresponding to the first moving path are extracted, and the priority among the n candidate aiming points is determined. a collision avoidance processing unit detecting a high m-th candidate aiming point and determining a possibility of collision with the first obstacle while moving to the m-th candidate aiming point;
including,
Wherein n is a natural number greater than or equal to 2, and m is a natural number less than or equal to n,
The collision avoidance processing unit,
generating a pipe corresponding to the prediction, and extracting the n candidate aiming points included in the pipe;
The obstacle detection unit,
Detect a second obstacle according to the preset method, generate a second sphere including the detected second obstacle, and at least one of a diameter or a radius of the second sphere and a center point of the first sphere Generates second obstacle information comprising a,
The collision avoidance processing unit,
Using the sequentially input second obstacle information, predicting the second movement path of the second obstacle, extracting q candidate aiming points corresponding to the first movement path and the second movement path, and the q detecting the a-th candidate aiming point having a higher priority among the candidate aiming points, and determining the possibility of collision with the first obstacle and the second obstacle while moving to the a-th candidate aiming point;
The obstacle detection unit,
After the first obstacle is detected, the first obstacle information is generated in consideration of a detection time and an obstacle movement distance before a preset condition is satisfied, and after the second obstacle is detected, the detection time before the condition is satisfied , generating the second obstacle information in consideration of the obstacle movement distance,
The collision avoidance processing unit,
tracking the first movement path of the first obstacle using the first obstacle information input before the condition is satisfied, and predicting the first movement path using the tracked first movement path after the condition is satisfied;
A second movement path of the second obstacle is tracked using the second obstacle information input before the condition is satisfied, and the second movement path is predicted using the tracked second movement path after the condition is satisfied,
The condition corresponds to a preset initial time, and the initial time is calculated from the moment the first obstacle is first detected.
제6항에 있어서,
상기 장애물 탐지부는,
상기 조건이 만족된 후에는, 구비된 능동 센서에서 입력된 정보들을 미리 설정된 방법에 따라 클러스터링하여 상기 제1 장애물 및 상기 제2 장애물 중 하나 이상을 탐지하고,
상기 충돌회피 처리부는,
상기 조건이 만족된 후에는, 미리 설정된 칼만 필터(Kalman filter)를 이용하여 상기 제1 이동 경로 및 상기 제2 이동 경로 중 하나 이상을 예측하는, 무인기.
7. The method of claim 6,
The obstacle detection unit,
After the condition is satisfied, at least one of the first obstacle and the second obstacle is detected by clustering information input from the provided active sensor according to a preset method,
The collision avoidance processing unit,
After the condition is satisfied, predicting at least one of the first movement path and the second movement path using a preset Kalman filter.
제6항에 있어서,
상기 충돌회피 처리부는,
상기 제1 이동 경로 예측에 상응하는 제1 파이프(pipe)를 생성하고, 상기 제2 이동 경로 예측에 상응하는 제2 파이프(pipe)를 생성하고, 상기 제1 파이프 및 상기 제2 파이프에 포함된 상기 q개의 후보 조준점을 추출하는, 무인기.
7. The method of claim 6,
The collision avoidance processing unit,
A first pipe corresponding to the prediction of the first movement path is generated, a second pipe corresponding to the prediction of the second movement path is generated, and the first pipe and the pipe included in the second pipe are generated. extracting the q candidate aiming points.
제8항에 있어서,
상기 충돌회피 처리부는,
상기 q개의 후보 조준점 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 상기 제a 후보 조준점으로 검출하는, 무인기.
9. The method of claim 8,
The collision avoidance processing unit,
and detecting, as the a-th candidate aiming point, the closest distance to a preset target point among the q candidate aiming points.
제9항에 있어서,
상기 충돌회피 처리부는,
상기 제a 후보 조준점으로 이동하는 동안 상기 제1 장애물과의 거리가 상기 제1 스피어의 반경 이하인 경우 또는 상기 제2 장애물과의 거리가 상기 제2 스피어의 반경 이하인 경우가 존재하면 상기 제1 장애물 또는 상기 제2 장애물과의 충돌 가능성이 있다고 판단하는, 무인기.
10. The method of claim 9,
The collision avoidance processing unit,
If the distance to the first obstacle is less than or equal to the radius of the first sphere or the distance to the second obstacle is less than or equal to the radius of the second sphere while moving to the a-th candidate aiming point, the first obstacle or determining that there is a possibility of collision with the second obstacle, the unmanned aerial vehicle.
제10항에 있어서,
상기 충돌회피 처리부는,
상기 q개의 후보 조준점 중 상기 제a 후보 조준점을 제외한 나머지 중 미리 설정된 목표점과의 거리가 가장 가까운 것을 제b 후보 조준점으로 검출하고, 상기 제b 후보 조준점으로 이동하는 동안 상기 제1 장애물 및 상기 제2 장애물과의 충돌 가능성을 판단하되,
상기 b은 상기 q 이하의 자연수 중 상기 a와 상이한 자연수인, 무인기.
11. The method of claim 10,
The collision avoidance processing unit,
Among the q candidate aiming points excluding the a-th candidate aiming point, the closest distance to a preset target point is detected as the b-th candidate aiming point, and the first obstacle and the second aiming point are detected while moving to the b-th candidate aiming point. Determining the possibility of collision with obstacles,
wherein b is a natural number different from a among natural numbers less than or equal to q.
KR1020220130031A 2020-12-15 2022-10-11 Unmanned aerial vehicle and method for moving obstacle collision avoidance KR102610559B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220130031A KR102610559B1 (en) 2020-12-15 2022-10-11 Unmanned aerial vehicle and method for moving obstacle collision avoidance

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020200175652A KR20220085513A (en) 2020-12-15 2020-12-15 Unmanned aerial vehicle and method for moving obstacle collision avoidance
KR1020220130031A KR102610559B1 (en) 2020-12-15 2022-10-11 Unmanned aerial vehicle and method for moving obstacle collision avoidance

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020200175652A Division KR20220085513A (en) 2020-12-15 2020-12-15 Unmanned aerial vehicle and method for moving obstacle collision avoidance

Publications (3)

Publication Number Publication Date
KR20220143621A true KR20220143621A (en) 2022-10-25
KR102610559B1 KR102610559B1 (en) 2023-12-07
KR102610559B9 KR102610559B9 (en) 2024-02-08

Family

ID=82216535

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020200175652A KR20220085513A (en) 2020-12-15 2020-12-15 Unmanned aerial vehicle and method for moving obstacle collision avoidance
KR1020220130031A KR102610559B1 (en) 2020-12-15 2022-10-11 Unmanned aerial vehicle and method for moving obstacle collision avoidance

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020200175652A KR20220085513A (en) 2020-12-15 2020-12-15 Unmanned aerial vehicle and method for moving obstacle collision avoidance

Country Status (1)

Country Link
KR (2) KR20220085513A (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117075603A (en) * 2023-06-06 2023-11-17 成都时代星光科技有限公司 Intelligent unmanned aerial vehicle movement guiding method based on potential energy field

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150136209A (en) 2014-05-26 2015-12-07 서울대학교산학협력단 Obstacle avoidance system and method based on multiple images
US20160018822A1 (en) * 2014-07-18 2016-01-21 Helico Aerospace Industries Sia Autonomous vehicle operation
US20170193830A1 (en) * 2016-01-05 2017-07-06 California Institute Of Technology Controlling unmanned aerial vehicles to avoid obstacle collision
KR20170111395A (en) * 2016-03-28 2017-10-12 한양대학교 산학협력단 Method and device for avoiding obstacles based on risk of obstacles

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150136209A (en) 2014-05-26 2015-12-07 서울대학교산학협력단 Obstacle avoidance system and method based on multiple images
US20160018822A1 (en) * 2014-07-18 2016-01-21 Helico Aerospace Industries Sia Autonomous vehicle operation
US20170193830A1 (en) * 2016-01-05 2017-07-06 California Institute Of Technology Controlling unmanned aerial vehicles to avoid obstacle collision
KR20170111395A (en) * 2016-03-28 2017-10-12 한양대학교 산학협력단 Method and device for avoiding obstacles based on risk of obstacles

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
LiDAR and Camera Detection Fusion in a Real-Time Industrial Multi-Sensor Collision Avoidance System(2018.03.30.)* *
Real-Time Path Planning Based on the Situation Space of UCAVs in a Dynamic Environment(2018.09.06.)* *

Also Published As

Publication number Publication date
KR102610559B1 (en) 2023-12-07
KR102610559B9 (en) 2024-02-08
KR20220085513A (en) 2022-06-22

Similar Documents

Publication Publication Date Title
Gyagenda et al. A review of GNSS-independent UAV navigation techniques
Jayaweera et al. A dynamic artificial potential field (D-APF) UAV path planning technique for following ground moving targets
Lin et al. Fast 3D collision avoidance algorithm for fixed wing UAS
García et al. Simulation in real conditions of navigation and obstacle avoidance with PX4/Gazebo platform
Chand et al. Sense and avoid technology in unmanned aerial vehicles: A review
Call et al. Obstacle avoidance for unmanned air vehicles using image feature tracking
Marzat et al. Reactive MPC for autonomous MAV navigation in indoor cluttered environments: Flight experiments
Al-Darraji et al. A technical framework for selection of autonomous uav navigation technologies and sensors
Yu et al. Observability-based local path planning and obstacle avoidance using bearing-only measurements
KR102610559B1 (en) Unmanned aerial vehicle and method for moving obstacle collision avoidance
Frew et al. Flight demonstrations of self-directed collaborative navigation of small unmanned aircraft
Yu et al. A vision-based collision avoidance technique for micro air vehicles using local-level frame mapping and path planning
CN110823223A (en) Path planning method and device for unmanned aerial vehicle cluster
Strobel et al. Cooperative sense and avoid: Implementation in simulation and real world for small unmanned aerial vehicles
Suarez et al. Cooperative virtual sensor for fault detection and identification in multi-UAV applications
Bauer et al. Three Dimensional Intruder Closest Point of Approach Estimation Based-on Monocular Image Parameters in Aircraft Sense and Avoid: Motto:’Almost Everything from Almost Nothing’
Lin et al. A fast obstacle collision avoidance algorithm for fixed wing uas
Lin et al. Sampling based collision avoidance for UAVs
Wubben et al. FFP: A Force Field Protocol for the tactical management of UAV conflicts
Sherman et al. Collision avoidance system for fixed-wing UAVs using ping-2020 ADS-B transreceivers
Jenie et al. Velocity obstacle method for non-cooperative autonomous collision avoidance system for UAVs
Li et al. UAV obstacle avoidance by human-in-the-loop reinforcement in arbitrary 3D environment
Bethke Persistent vision-based search and track using multiple UAVs
Zhu et al. Hawkeye: Open source framework for field surveillance
Rondon et al. Optical flow-based controller for reactive and relative navigation dedicated to a four rotor rotorcraft

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
G170 Re-publication after modification of scope of protection [patent]