KR20230041518A - Method for generating high definition map by using fixed lidar and server using the same - Google Patents

Method for generating high definition map by using fixed lidar and server using the same Download PDF

Info

Publication number
KR20230041518A
KR20230041518A KR1020210125246A KR20210125246A KR20230041518A KR 20230041518 A KR20230041518 A KR 20230041518A KR 1020210125246 A KR1020210125246 A KR 1020210125246A KR 20210125246 A KR20210125246 A KR 20210125246A KR 20230041518 A KR20230041518 A KR 20230041518A
Authority
KR
South Korea
Prior art keywords
specific
lidar data
frame
server
data
Prior art date
Application number
KR1020210125246A
Other languages
Korean (ko)
Inventor
권한솔
김정대
현승화
한지형
Original Assignee
(주) 오토노머스에이투지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 오토노머스에이투지 filed Critical (주) 오토노머스에이투지
Priority to KR1020210125246A priority Critical patent/KR20230041518A/en
Publication of KR20230041518A publication Critical patent/KR20230041518A/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/66Tracking systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4808Evaluating distance, position or velocity data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions

Abstract

According to the present invention, in a method for generating a precise map using a fixed lidar, disclosed is a method, which includes the steps of: (a) obtaining, by a server, object information from specific lidar data; (b) classifying, by the server, objects having the same object ID with reference to object IDs among the object information included in a plurality of consecutive frames, and storing a moving path for each object ID; and (c) generating, by the server, the precise map with reference to each moving path stored for each object ID.

Description

고정된 라이다를 이용하여 정밀 지도를 생성하는 방법 및 이를 이용한 서버 {METHOD FOR GENERATING HIGH DEFINITION MAP BY USING FIXED LIDAR AND SERVER USING THE SAME}Method for generating precision map using fixed lidar and server using the same

본 발명은 고정된 라이다를 이용하여 정밀 지도를 생성하는 방법 및 이를 이용한 서버에 관한 것이다.The present invention relates to a method for generating a precise map using a fixed LIDAR and a server using the same.

라이다는 레이저 펄스를 발사하고, 그 빛이 주위의 대상 물체에서 반사되어 돌아오는 것을 받아 물체까지의 거리 등을 측정함으로써 주변의 모습을 정밀하게 그려내는 장치이다. 라이다는 그 이름의 기원을 따지면 'light"와 'radar(radio detection and ranging)"를 혼합하여 만든 합성어이다. 즉, 라이다라는 명칭은 전파 대신에 빛을 쓰는 레이다를 뜻하는 것으로, 전통적인 레이다와 원리가 같으나 그 사용하는 전자기파의 파장이 다르므로 실제 이용 기술과 활용 범위는 차이가 있다.Lida is a device that accurately draws the surroundings by emitting laser pulses, receiving the light reflected from nearby objects and measuring the distance to the object. Lidar is a compound word made by mixing 'light' and 'radar (radio detection and ranging)' in terms of its origin. In other words, the name LIDAR means a radar that uses light instead of radio waves, and the principle is the same as that of traditional radar, but the wavelength of the electromagnetic wave used is different, so the actual use technology and application range are different.

최근에는 일반적인 자동차뿐만 아니라 자율주행 자동차, 오토바이, 전동 킥보드 등 다양한 교통 주체가 생기고 있으므로, 이러한 현실을 반영하여 좀 더 발전된 형태의 교통 인프라 시스템이 필요하게 되었다. In recent years, various transportation subjects such as self-driving cars, motorcycles, and electric kickboards as well as general cars are emerging, so a more advanced transportation infrastructure system is needed to reflect this reality.

하지만, 이러한 교통 인프라 시스템에 라이다를 활용하여 좀 더 정확하고 빠르게 교통 데이터를 획득할 수 있는 시스템이 구현된 사례는 많지 않으며, 있다고 하더라도 자동차 등에 라이다를 탑재한 상태로 자동차를 운행하면서 교통 데이터를 획득하는 기술에 불과하였다. 가령, 라이다를 교통 인프라 시스템에 이용하는 사례는 대부분 자동차에 라이다가 장착되어 해당 자동차가 주행하는 동안 주변의 오브젝트를 검출하고 이를 회피하기 위해 운전자에게 경고를 주는 것으로서, 주로 자율주행 자동차에서 이를 많이 이용하고 있다. However, there are not many cases in which a system that can obtain traffic data more accurately and quickly by using lidar in such a transportation infrastructure system has been implemented. It was just a skill to acquire. For example, most cases in which lidar is used in transportation infrastructure systems are equipped with lidar in cars to detect objects around them while the car is driving and give a warning to the driver to avoid them. are using

그러나, 교차로 등과 같은 곳에 라이다를 고정적으로 설치하고 이를 이용하여 교차로의 복잡다단한 교통 데이터를 획득하고 이용하고자 하는 기술이 거의 없는 실정이다. 즉, 교차로 등에 라이다를 설치하고 교차로 주변을 지나가는 자동차, 보행자 등의 동적인 오브젝트와 시설물 등의 정적인 오브젝트를 검출하고, 검출된 데이터를 참조로 하여 정밀지도를 생성하고 이를 자동으로 업데이트하기 위한 방법 및 서버가 필요한 상황이다. However, there is almost no technology for obtaining and using complex traffic data of intersections by using LIDAR in a fixed location such as an intersection. In other words, LIDAR is installed at an intersection, etc., and dynamic objects such as cars and pedestrians passing around the intersection and static objects such as facilities are detected, and a precision map is created with reference to the detected data, and it is automatically updated. This is a situation where methods and servers are needed.

본 발명은 상술한 문제점들을 모두 해결하는 것을 그 목적으로 한다.The present invention has as its object to solve all the problems mentioned above.

또한, 본 발명은 라이다로부터 오브젝트 정보를 획득하고 오브젝트 정보 중 오브젝트 ID가 동일한 것끼리 분류하여, 오브젝트 ID 별로 이동 경로를 저장하고 이를 참조로 하여 정밀 지도를 생성하는 것을 또 다른 목적으로 한다. In addition, another object of the present invention is to obtain object information from LiDAR, classify objects having the same object ID among object information, store a moving path for each object ID, and create a detailed map with reference to this.

또한, 본 발명은 오브젝트를 고속 이동 오브젝트 및 저속 이동 오브젝트로 분류하고, 차로 영역, 차량정지선영역, 보행자횡단보도대기영역, 보행자횡단보도보행영역으로 판단하여 정밀 지도를 보다 정확하게 생성하기 위한 것을 또 다른 목적으로 한다. In addition, the present invention classifies the object into a high-speed moving object and a low-speed moving object, and determines the lane area, vehicle stop line area, pedestrian crosswalk waiting area, and pedestrian crosswalk walking area to more accurately generate a precision map. The purpose.

본 발명의 일 태양에 따르면, 고정된 라이다를 이용하여 정밀 지도를 생성하는 방법에 있어서, 서버가, 특정 라이다 데이터로부터 오브젝트 정보를 획득하는 단계; (b) 상기 서버가, 연속된 복수의 프레임 내에 포함되는 상기 오브젝트 정보 중 오브젝트 ID 를 참조로 하여, 상기 오브젝트 ID가 동일한 것끼리 분류하고, 상기 오브젝트 ID별로 이동 경로를 저장하는 단계; 및 (c) 상기 서버가, 상기 오브젝트 ID별로 저장된 각각의 이동 경로를 참조로 하여, 상기 정밀 지도를 생성하는 단계;를 포함하는 방법이 개시된다.According to one aspect of the present invention, in a method for generating a precise map using a fixed lidar, the server comprising: acquiring object information from specific lidar data; (b) classifying, by the server, objects having the same object ID with reference to object IDs among the object information included in a plurality of consecutive frames, and storing a moving path for each object ID; and (c) generating, by the server, the precision map with reference to each movement path stored for each object ID.

일례로서, 상기 (a) 단계에서, 상기 서버가, 상기 오브젝트 정보에 포함된 각각의 오브젝트의 속도, 크기, 높이 데이터 중 적어도 일부를 참조로 하여 차량 및 보행자 중 어느 하나로 구분하고, 상기 (b) 단계에서, 상기 서버가, 상기 차량으로 구분된 고속 이동 오브젝트 ID 에 대한 이동 경로를 저장하고, 상기 (c) 단계에서, 상기 서버가, 상기 고속 이동 오브젝트 ID 에 대응되는 고속 이동 오브젝트가 지나온 이동 경로를 그리드 맵의 복수의 주행 셀과 매칭하여 상기 주행 셀 각각을 지나간 상기 고속 이동 오브젝트의 개수의 카운트를 상기 주행 셀별로 증가시키고, 상기 주행 셀의 카운트가 제1 임계치 이상이면, 상기 주행 셀을 차로 영역으로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in step (a), the server classifies at least a portion of the speed, size, and height data of each object included in the object information into one of a vehicle and a pedestrian, and (b) In step (c), the server stores a movement path for the high-speed-moving object ID identified as the vehicle, and in step (c), the server moves along the movement path of the fast-moving object corresponding to the high-speed object ID. is matched with a plurality of driving cells of the grid map to increase the count of the number of the high-speed moving objects passing through each of the driving cells for each driving cell, and if the count of the driving cells is equal to or greater than a first threshold value, the driving cell is set as a vehicle A method characterized by determining by area is disclosed.

일례로서, 상기 (c) 단계에서, 상기 서버가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 차량으로 구분된 상기 고속 이동 오브젝트가 정지하는 제1 특정 셀을 상기 주행 셀 중에서 선택하고, 상기 제1 특정 셀에서 제1 시간 동안 정지한 상기 고속 이동 오브젝트의 개수의 카운트를 상기 제1 특정 셀별로 증가시키고, 상기 제1 특정 셀의 카운트가 제2 임계치 이상이면, 상기 제1 특정 셀을 차량정지선영역으로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (c), the server selects a first specific cell in which the high-speed moving object classified as the vehicle stops from among the driving cells with reference to the speed of the object in the object information; A count of the number of the high-speed moving objects stopped for a first time in the first specific cell is increased for each first specific cell, and if the count of the first specific cell is equal to or greater than a second threshold, the first specific cell A method characterized in determining the vehicle stop line area is disclosed.

일례로서, 상기 (b) 단계에서, 상기 서버가, 상기 보행자로 구분된 저속 이동 오브젝트 ID에 대한 이동 경로를 저장하고, 상기 (c) 단계에서, 상기 서버가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 보행자로 구분된 상기 저속 이동 오브젝트가 정지하는 제2 특정 셀을 상기 주행 셀 이외의 셀 중에서 선택하고, 상기 제2 특정 셀에서 제2 시간 동안 정지한 상기 저속 이동 오브젝트의 개수의 카운트를 상기 제2 특정 셀별로 증가시키고, 상기 제2 특정 셀의 카운트가 제3 임계치 이상이면, 상기 제2 특정 셀을 보행자횡단보도대기영역으로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (b), the server stores a moving path for the low-speed moving object ID classified as the pedestrian, and in the step (c), the server stores the speed of the object among the object information. With reference to, a second specific cell in which the slow-moving object classified as a pedestrian stops is selected from cells other than the driving cell, and the number of slow-moving objects stopped in the second specific cell for a second time A count is increased for each second specific cell, and when the count of the second specific cell is greater than or equal to a third threshold, the second specific cell is determined as a pedestrian crosswalk waiting area.

일례로서, 상기 (c) 단계에서, 상기 서버는, 상기 차로 영역, 상기 차량정지선영역, 및 상기 보행자횡단보도대기영역 중 적어도 일부를 참조로 하여, 보행자횡단보도보행영역을 추가로 판단하는 것을 특징으로 하는 방법이 개시된다. As an example, in step (c), the server further determines a pedestrian crosswalk walking area with reference to at least a part of the lane area, the vehicle stop line area, and the pedestrian crosswalk waiting area. A method for doing so is disclosed.

일례로서, 상기 (a) 단계 이전에, (a01) 초기 라이다 데이터가 획득되면, 상기 서버가, 기설정된 기준에 따른 필터링을 수행하여 상기 초기 라이다 데이터 중에서 고정 오브젝트에 대응되는 고정 라이다 데이터를 분류하는 단계; 및 (a02) 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하여 잔여 라이다 데이터를 상기 특정 라이다 데이터로서 획득하는 단계;를 더 포함하는 방법이 개시된다.As an example, before the step (a), if (a01) initial lidar data is obtained, the server performs filtering according to a preset criterion to perform fixed lidar data corresponding to a fixed object among the initial lidar data. classifying; and (a02) obtaining residual lidar data as the specific lidar data by removing the fixed lidar data from the initial lidar data.

일례로서, 상기 (a01) 단계에서, 상기 서버가, 상기 고정 라이다 데이터를 참조로 하여 상기 고정 오브젝트가 존재하는 고정물존재영역정보를 획득하고, 상기 (c) 단계에서, 상기 서버는, 상기 이동 경로 및 상기 고정물존재영역정보를 참조로 하여, 상기 이동 경로를 기설정된 너비를 가지는 적어도 하나의 차로로 구획하는 것을 특징으로 하는 방법이 개시된다. As an example, in the step (a01), the server obtains information on the fixed object existence area where the fixed object exists with reference to the fixed lidar data, and in the step (c), the server obtains information on the fixed object existence area where the fixed object exists. A method characterized by dividing the moving route into at least one lane having a predetermined width with reference to the route and the information on the fixture presence area is disclosed.

일례로서, 상기 (a01) 단계에서, 상기 서버가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터가 검출되는 수를 카운팅하고, 상기 셀들 중 카운팅된 수가 임계치 이상인 제3 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (a01), the server divides the area covered by the lidar into a virtual 3D grid area, and the initial layer for each cell in the grid area for at least one observation frame. A method characterized in that counting the number of detected data and determining the initial lidar data detected in third specific cells in which the counted number of the cells is equal to or greater than a threshold value as the fixed lidar data is disclosed.

일례로서, 상기 (a01) 단계에서, 상기 서버가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터의 관측 포인트 데이터 수를 카운팅하고 상기 각각의 셀의 기설정된 평균 포인트 데이터 수와 비교하여, 상기 관측 포인트 데이터 수와 상기 평균 포인트 데이터 수와의 차이의 비율이 임계비율 이하인 제4 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in the step (a01), the server divides the area covered by the lidar into a virtual 3D grid area, and the initial layer for each cell in the grid area for at least one observation frame. In fourth specific cells, the ratio of the difference between the observation point data number and the average point data number is equal to or less than the threshold ratio by counting the observation point data number of the data and comparing it with the preset average point data number of each cell. A method characterized in that the detected initial lidar data is determined as the fixed lidar data is disclosed.

일례로서, 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하기 전에 상기 고정 라이다 데이터를 판단함에 있어서, 상기 (a01) 단계 이전에, 상기 서버가, 상기 초기 라이다 데이터로부터 획득되는 적어도 하나의 참조 프레임의 교통량을 획득하고, 상기 교통량이 기설정된 수치 이하인 것으로 판단되면 상기 참조 프레임에 대응되는 참조 로깅 데이터를 기록하며, 상기 (a01) 단계에서, 상기 서버가, 상기 참조 프레임보다 시간적으로 후행하는 적어도 하나의 관측 프레임 동안 상기 참조 로깅 데이터를 이용하여 상기 관측 프레임 동안의 상기 초기 라이다 데이터에 포함된 상기 고정 라이다 데이터를 판단하는 것을 특징으로 하는 방법이 개시된다.As an example, in determining the fixed lidar data before removing the fixed lidar data from the initial lidar data, before the step (a01), the server, at least one obtained from the initial lidar data Obtains the traffic volume of a reference frame of and records the reference logging data corresponding to the reference frame when it is determined that the traffic volume is equal to or less than a predetermined value, and in the step (a01), the server is temporally later than the reference frame. A method characterized by determining the fixed lidar data included in the initial lidar data during the observation frame by using the reference logging data during at least one observation frame for the observation frame is disclosed.

일례로서, 상기 (b) 단계에서, 상기 오브젝트 ID 각각에는 오브젝트 에이지(Object Age) 각각이 매칭되어 있고, 상기 오브젝트 에이지 값이 높을수록 긴 시간 동안 상기 이동 경로를 트래킹한 것이며, 상기 서버는, (i) 상기 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹되지 않은 제1 특정 오브젝트 ID가 제t 프레임에서 트래킹되는 경우, 상기 제t 프레임에서 상기 제1 특정 오브젝트 ID의 제1 특정 오브젝트 에이지 값을 초기치로 생성하고, (ii) 상기 제(t-1) 프레임에서 트래킹된 제2 특정 오브젝트 ID가 상기 제t프레임에서도 트래킹되는 경우, 상기 제t 프레임에서 상기 제2 특정 오브젝트 ID의 제2 특정 오브젝트 에이지 값은 상기 제(t-1) 프레임에서의 상기 제2 특정 오브젝트 에이지 값보다 크게 증가시키고, (iii) 상기 연속된 복수의 프레임 내에 포함되는 상기 제(t-1) 프레임에서 트래킹된 제3 특정 오브젝트 ID가 상기 제t 프레임에서 트래킹되지 않는 경우, 상기 제t 프레임에서 상기 제3 특정 오브젝트 ID의 제3 특정 오브젝트 에이지 값을 삭제하며, (iv) 상기 제3 특정 오브젝트 에이지 값이 삭제된 경우에는 상기 제t 프레임으로부터 기설정된 기간의 프레임 동안 상기 제3 특정 오브젝트 ID를 사용하지 못하도록 설정하고, 상기 (c) 단계에서, 상기 서버는, 상기 각각의 오브젝트 ID에 포함된 상기 각각의 오브젝트 에이지 값을 상기 각각의 이동 경로와 맵핑하여 상기 정밀 지도를 생성하는 것을 특징으로 하는 방법이 개시된다. As an example, in the step (b), each object age is matched with each of the object IDs, and the higher the value of the object age, the longer the moving path is tracked, and the server, ( i) When the first specific object ID that is not tracked in the (t-1)th frame included in the plurality of consecutive frames is tracked in the tth frame, the first specific object ID of the first specific object ID in the tth frame A specific object age value is generated as an initial value, and (ii) when the second specific object ID tracked in the (t-1)th frame is also tracked in the tth frame, the second specific object ID in the tth frame The second specific object age value of is increased more than the second specific object age value in the (t-1)th frame, and (iii) the (t-1)th frame included in the plurality of consecutive frames. If the third specific object ID tracked in is not tracked in the t th frame, the third specific object age value of the third specific object ID is deleted in the t th frame, (iv) the third specific object age If the value is deleted, the third specific object ID is set not to be used during a frame of a predetermined period from the t th frame, and in the step (c), the server, A method characterized by generating the precise map by mapping each object age value with each movement path is disclosed.

일례로서, 상기 (b) 단계에서, 상기 서버는, 상기 오브젝트를 구성하는 포인트들의 XY 좌표의 평균값을 참조로 하여, 상기 오브젝트의 상기 이동 경로를 저장하는 것을 특징으로 하는 방법이 개시된다. As an example, in step (b), the server stores the movement path of the object with reference to an average value of XY coordinates of points constituting the object.

일례로서, 상기 서버는, 다항 회귀(Polynomial Fitting) 알고리즘을 이용하여 상기 이동 경로를 보정하는 것을 특징으로 하는 방법이 개시된다. As an example, a method characterized in that the server corrects the moving path using a polynomial fitting algorithm is disclosed.

일레로서, 상기 (a) 단계 이전에, (a11) 획득된 제1 라이다 데이터에 대해 기설정된 기준에 따른 필터링을 적용하여 상기 제1 라이다 데이터로부터 고정 오브젝트에 대응되는 고정 라이다 데이터를 획득한 상태에서, 상기 서버가, 제2 라이다 데이터를 획득하는 단계; 및 (a12) 상기 서버가, 상기 제2 라이다 데이터 및 상기 고정 라이다 데이터를 참조로 하여, 제2 잔여 라이다 데이터를 획득하는 단계;를 더 포함하는 방법이 개시된다.As an example, prior to step (a), filtering according to a predetermined criterion is applied to (a11) obtained first lidar data to obtain fixed lidar data corresponding to a fixed object from the first lidar data. In one state, obtaining, by the server, second LiDAR data; and (a12) obtaining, by the server, second residual lidar data with reference to the second lidar data and the fixed lidar data.

본 발명의 다른 태양에 따르면, 고정된 라이다를 이용하여 정밀 지도를 생성하는 서버에 있어서, 인스트럭션들을 저장하는 적어도 하나의 메모리; 및 상기 인스트럭션들을 실행하기 위해 구성된 적어도 하나의 프로세서;를 포함하되, 상기 프로세서는, (I) 특정 라이다 데이터로부터 오브젝트 정보를 획득하는 프로세스; (II) 연속된 복수의 프레임 내에 포함되는 상기 오브젝트 정보 중 오브젝트 ID 를 참조로 하여, 상기 오브젝트 ID가 동일한 것끼리 분류하고, 상기 오브젝트 ID별로 이동 경로를 저장하는 프로세스; 및 (III) 상기 오브젝트 ID별로 저장된 각각의 이동 경로를 참조로 하여, 상기 정밀 지도를 생성하는 프로세스;를 수행하는 서버가 제공된다.According to another aspect of the present invention, a server for generating an accurate map using a fixed LIDAR includes at least one memory for storing instructions; and at least one processor configured to execute the instructions, wherein the processor comprises: (I) a process of obtaining object information from specific lidar data; (II) a process of classifying objects having the same object ID with reference to object IDs among the object information included in a plurality of consecutive frames, and storing a moving path for each object ID; and (III) a process of generating the precise map with reference to each movement path stored for each object ID.

일례로서, 상기 (I) 프로세스에서, 상기 프로세서가, 상기 오브젝트 정보에 포함된 각각의 오브젝트의 속도, 크기, 높이 데이터 중 적어도 일부를 참조로 하여 차량 및 보행자 중 어느 하나로 구분하고, 상기 (II) 프로세스에서, 상기 프로세서가, 상기 차량으로 구분된 고속 이동 오브젝트 ID 에 대한 이동 경로를 저장하고, 상기 (III) 프로세스에서, 상기 프로세서가, 상기 고속 이동 오브젝트 ID 에 대응되는 고속 이동 오브젝트가 지나온 이동 경로를 그리드 맵의 복수의 주행 셀과 매칭하여 상기 주행 셀 각각을 지나간 상기 고속 이동 오브젝트의 개수의 카운트를 상기 주행 셀별로 증가시키고, 상기 주행 셀의 카운트가 제1 임계치 이상이면, 상기 주행 셀을 차로 영역으로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the (I) process, the processor classifies at least a portion of the speed, size, and height data of each object included in the object information into one of a vehicle and a pedestrian, and the (II) In the process, the processor stores a moving path for the high-speed moving object ID identified as the vehicle, and in the process (III), the processor stores the moving path along which the high-speed moving object corresponding to the fast-moving object ID has passed. is matched with a plurality of driving cells of the grid map to increase the count of the number of the high-speed moving objects passing through each of the driving cells for each driving cell, and if the count of the driving cells is equal to or greater than a first threshold value, the driving cell is set as a vehicle A server characterized in that the determination is based on the area is provided.

일례로서, 상기 (III) 프로세스에서, 상기 프로세서가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 차량으로 구분된 상기 고속 이동 오브젝트가 정지하는 제1 특정 셀을 상기 주행 셀 중에서 선택하고, 상기 제1 특정 셀에서 제1 시간 동안 정지한 상기 고속 이동 오브젝트의 개수의 카운트를 상기 제1 특정 셀별로 증가시키고, 상기 제1 특정 셀의 카운트가 제2 임계치 이상이면, 상기 제1 특정 셀을 차량정지선영역으로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the process (III), the processor selects a first specific cell in which the high-speed moving object classified as the vehicle stops from among the traveling cells with reference to the speed of the object in the object information; A count of the number of the high-speed moving objects stopped for a first time in the first specific cell is increased for each first specific cell, and if the count of the first specific cell is equal to or greater than a second threshold, the first specific cell A server characterized in that it is determined as a vehicle stop line area is provided.

일례로서, 상기 (II) 프로세스에서, 상기 프로세서가, 상기 보행자로 구분된 저속 이동 오브젝트 ID에 대한 이동 경로를 저장하고, 상기 (III) 프로세스에서, 상기 프로세서가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 보행자로 구분된 상기 저속 이동 오브젝트가 정지하는 제2 특정 셀을 상기 주행 셀 이외의 셀 중에서 선택하고, 상기 제2 특정 셀에서 제2 시간 동안 정지한 상기 저속 이동 오브젝트의 개수의 카운트를 상기 제2 특정 셀별로 증가시키고, 상기 제2 특정 셀의 카운트가 제3 임계치 이상이면, 상기 제2 특정 셀을 보행자횡단보도대기영역으로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the (II) process, the processor stores a moving path for the low-speed moving object ID classified as the pedestrian, and in the (III) process, the processor stores the speed of the object among the object information. With reference to, a second specific cell in which the slow-moving object classified as a pedestrian stops is selected from cells other than the driving cell, and the number of slow-moving objects stopped in the second specific cell for a second time The server increases the count for each second specific cell, and determines the second specific cell as a pedestrian crosswalk waiting area when the count of the second specific cell is equal to or greater than a third threshold.

일례로서, 상기 (III) 프로세스에서, 상기 프로세서는, 상기 차로 영역, 상기 차량정지선영역, 및 상기 보행자횡단보도대기영역 중 적어도 일부를 참조로 하여, 보행자횡단보도보행영역을 추가로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the process (III), the processor further determines a pedestrian crosswalk walking area with reference to at least a part of the lane area, the vehicle stop line area, and the pedestrian crosswalk waiting area. A server is provided.

일례로서, 상기 (I) 프로세스 이전에, (I01) 초기 라이다 데이터가 획득되면, 상기 프로세서가, 기설정된 기준에 따른 필터링을 수행하여 상기 초기 라이다 데이터 중에서 고정 오브젝트에 대응되는 고정 라이다 데이터를 분류하는 프로세스; 및 (I02) 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하여 잔여 라이다 데이터를 상기 특정 라이다 데이터로서 획득하는 프로세스;를 더 수행하는 서버가 제공된다.As an example, before the (I) process, if (I01) initial lidar data is obtained, the processor performs filtering according to a predetermined criterion to perform fixed lidar data corresponding to a fixed object among the initial lidar data. the process of classifying; and (I02) a process of obtaining residual lidar data as the specific lidar data by removing the fixed lidar data from the initial lidar data.

일례로서, 상기 (I01) 프로세스에서, 상기 프로세서가, 상기 고정 라이다 데이터를 참조로 하여 상기 고정 오브젝트가 존재하는 고정물존재영역정보를 획득하고, 상기 (III) 프로세스에서, 상기 프로세서는, 상기 이동 경로 및 상기 고정물존재영역정보를 참조로 하여, 상기 이동 경로를 기설정된 너비를 가지는 적어도 하나의 차로로 구획하는 것을 특징으로 하는 서버가 제공된다. As an example, in the process (I01), the processor obtains information on the fixed object existence area where the fixed object exists with reference to the fixed lidar data, and in the process (III), the processor performs the movement A server characterized in that the moving path is divided into at least one lane having a preset width with reference to the path and the fixed object presence area information.

일례로서, 상기 (I01) 프로세스에서, 상기 프로세서가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터가 검출되는 수를 카운팅하고, 상기 셀들 중 카운팅된 수가 임계치 이상인 제3 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the (I01) process, the processor divides the area covered by the LIDAR into a virtual 3D grid area, and the initial layer for each cell in the grid area during at least one observation frame. A server is provided that counts the number of detected data and determines the initial lidar data detected in third specific cells in which the counted number of the cells is equal to or greater than a threshold value as the fixed lidar data.

일례로서, 상기 (I01) 프로세스에서, 상기 프로세서가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터의 관측 포인트 데이터 수를 카운팅하고 상기 각각의 셀의 기설정된 평균 포인트 데이터 수와 비교하여, 상기 관측 포인트 데이터 수와 상기 평균 포인트 데이터 수와의 차이의 비율이 임계비율 이하인 제4 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in the (I01) process, the processor divides the area covered by the LIDAR into a virtual 3D grid area, and the initial layer for each cell in the grid area during at least one observation frame. In fourth specific cells, the ratio of the difference between the observation point data number and the average point data number is equal to or less than the threshold ratio by counting the observation point data number of the data and comparing it with the preset average point data number of each cell. A server is provided, characterized in that for determining the detected initial lidar data as the fixed lidar data.

일례로서, 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하기 전에 상기 고정 라이다 데이터를 판단함에 있어서, 상기 (I01) 프로세스 이전에, 상기 프로세서가, 상기 초기 라이다 데이터로부터 획득되는 적어도 하나의 참조 프레임의 교통량을 획득하고, 상기 교통량이 기설정된 수치 이하인 것으로 판단되면 상기 참조 프레임에 대응되는 참조 로깅 데이터를 기록하며, 상기 (I01) 프로세스에서, 상기 프로세서가, 상기 참조 프레임보다 시간적으로 후행하는 적어도 하나의 관측 프레임 동안 상기 참조 로깅 데이터를 이용하여 상기 관측 프레임 동안의 상기 초기 라이다 데이터에 포함된 상기 고정 라이다 데이터를 판단하는 것을 특징으로 하는 서버가 제공된다.As an example, in determining the fixed lidar data before removing the fixed lidar data from the initial lidar data, before the (I01) process, the processor, at least one obtained from the initial lidar data Obtains the traffic volume of a reference frame of and records reference logging data corresponding to the reference frame when it is determined that the traffic volume is less than or equal to a predetermined value, and in the process (I01), the processor is temporally later than the reference frame. A server is provided, characterized in that for determining the fixed lidar data included in the initial lidar data during the observation frame using the reference logging data during at least one observation frame.

일례로서, 상기 (II) 프로세스에서, 상기 오브젝트 ID 각각에는 오브젝트 에이지(Object Age) 각각이 매칭되어 있고, 상기 오브젝트 에이지 값이 높을수록 긴 시간 동안 상기 이동 경로를 트래킹한 것이며, 상기 프로세서는, (i) 상기 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹되지 않은 제1 특정 오브젝트 ID가 제t 프레임에서 트래킹되는 경우, 상기 제t 프레임에서 상기 제1 특정 오브젝트 ID의 제1 특정 오브젝트 에이지 값을 초기치로 생성하고, (ii) 상기 제(t-1) 프레임에서 트래킹된 제2 특정 오브젝트 ID가 상기 제t프레임에서도 트래킹되는 경우, 상기 제t 프레임에서 상기 제2 특정 오브젝트 ID의 제2 특정 오브젝트 에이지 값은 상기 제(t-1) 프레임에서의 상기 제2 특정 오브젝트 에이지 값보다 크게 증가시키고, (iii) 상기 연속된 복수의 프레임 내에 포함되는 상기 제(t-1) 프레임에서 트래킹된 제3 특정 오브젝트 ID가 상기 제t 프레임에서 트래킹되지 않는 경우, 상기 제t 프레임에서 상기 제3 특정 오브젝트 ID의 제3 특정 오브젝트 에이지 값을 삭제하며, (iv) 상기 제3 특정 오브젝트 에이지 값이 삭제된 경우에는 상기 제t 프레임으로부터 기설정된 기간의 프레임 동안 상기 제3 특정 오브젝트 ID를 사용하지 못하도록 설정하고, 상기 (III) 프로세스에서, 상기 프로세서는, 상기 각각의 오브젝트 ID에 포함된 상기 각각의 오브젝트 에이지 값을 상기 각각의 이동 경로와 맵핑하여 상기 정밀 지도를 생성하는 것을 특징으로 하는 서버가 제공된다. As an example, in the (II) process, each object age is matched with each of the object IDs, and the higher the value of the object age, the longer the moving path is tracked, and the processor, ( i) When the first specific object ID that is not tracked in the (t-1)th frame included in the plurality of consecutive frames is tracked in the tth frame, the first specific object ID of the first specific object ID in the tth frame A specific object age value is generated as an initial value, and (ii) when the second specific object ID tracked in the (t-1)th frame is also tracked in the tth frame, the second specific object ID in the tth frame The second specific object age value of is increased more than the second specific object age value in the (t-1)th frame, and (iii) the (t-1)th frame included in the plurality of consecutive frames. If the third specific object ID tracked in is not tracked in the t th frame, the third specific object age value of the third specific object ID is deleted in the t th frame, (iv) the third specific object age If the value is deleted, the third specific object ID is set not to be used for a frame of a predetermined period from the t th frame, and in the process (III), the processor, A server characterized in that for generating the precise map by mapping each object age value with each movement path is provided.

일례로서, 상기 (II) 프로세스에서, 상기 프로세서는, 상기 오브젝트를 구성하는 포인트들의 XY 좌표의 평균값을 참조로 하여, 상기 오브젝트의 상기 이동 경로를 저장하는 것을 특징으로 하는 서버가 제공된다.As an example, in the process (II), the processor stores the movement path of the object with reference to an average value of XY coordinates of points constituting the object.

일례로서, 상기 프로세서는, 다항 회귀(Polynomial Fitting) 알고리즘을 이용하여 상기 이동 경로를 보정하는 것을 특징으로 하는 서버가 제공된다. As an example, the server is provided, characterized in that the processor corrects the moving path using a polynomial fitting algorithm.

일례로서, 상기 (I) 프로세스 이전에, (I11) 획득된 제1 라이다 데이터에 대해 기설정된 기준에 따른 필터링을 적용하여 상기 제1 라이다 데이터로부터 고정 오브젝트에 대응되는 고정 라이다 데이터를 획득한 상태에서, 상기 프로세서가, 제2 라이다 데이터를 획득하는 프로세스; 및 (I12) 상기 프로세서가, 상기 제2 라이다 데이터 및 상기 고정 라이다 데이터를 참조로 하여, 제2 잔여 라이다 데이터를 획득하는 프로세스;를 더 수행하는 서버가 제공된다.As an example, before the (I) process, (I11) obtains fixed lidar data corresponding to a fixed object from the first lidar data by applying filtering according to a predetermined criterion to the obtained first lidar data. In one state, the process of obtaining, by the processor, second lidar data; and (I12) a process in which the processor obtains second residual lidar data by referring to the second lidar data and the fixed lidar data.

본 발명은 라이다로부터 오브젝트 정보를 획득하고 오브젝트 정보 중 오브젝트 ID가 동일한 것끼리 분류하여, 오브젝트 ID 별로 이동 경로를 저장하고 이를 참조로 하여 정밀 지도를 생성할 수 있는 효과가 있다. The present invention has an effect of obtaining object information from LiDAR, classifying objects having the same object ID among object information, storing a moving path for each object ID, and generating a precise map by referring to it.

또한, 본 발명은 오브젝트를 고속 이동 오브젝트 및 저속 이동 오브젝트로 분류하고, 차로 영역, 차량정지선영역, 보행자횡단보도대기영역, 보행자횡단보도보행영역으로 판단하여 정밀 지도를 보다 정확하게 생성할 수 있는 효과가 있다. In addition, the present invention classifies the object into a high-speed moving object and a low-speed moving object, and determines a lane area, a vehicle stop line area, a pedestrian crosswalk waiting area, and a pedestrian crosswalk walking area, so that a precise map can be generated more accurately. there is.

도 1은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하는 서버의 개략적인 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행하는 일례를 설명하기 위한 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행하는 다른 일례를 설명하기 위한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행함에 있어서, 라이다를 기준으로 하여 기설정된 거리마다 대응되는 가상 구역의 예를 나타내는 도면이다.
도 5a는 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거하기 전의 화면 예를 나타내는 도면이고, 도 5b는 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거한 후의 화면 예를 나타내는 도면이다.
도 6은 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 검출된 이동 오브젝트를 2D 사각형에 피팅하고 피팅된 2D 사각형에 중앙값이 포함되어 있는 예를 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하는 방법의 전체적인 순서를 설명하기 위한 흐름도이다.
도 8은 본 발명의 일 실시예에 따라 오브젝트가 지나온 이동 경로를 매칭하는 그리드 맵의 예를 나타내는 도면이다.
도 9a는 본 발명의 일 실시예에 따라 고속 이동 오브젝트의 이동 경로의 예를 나타내는 도면이고, 도 9b는 본 발명의 일 실시예에 따라 고속 이동 오브젝트를 참조로 하여 차로 영역을 판단하고, 차로 영역의 예를 나타내는 도면이다.
도 10a는 본 발명의 일 실시예에 따라 고속 이동 오브젝트의 이동 경로 중에서 고속 이동 오브젝트가 정지한 영역의 예를 나타내는 도면이고, 도 10b는 본 발명의 일 실시예에 따라 고속 이동 오브젝트를 참조로 하여 차량정지선영역을 판단하고, 차량정지선영역의 예를 나타내는 도면이다.
도 11a는 본 발명의 일 실시예에 따라 저속 이동 오브젝트의 이동 경로의 예를 나타내는 도면이고, 도 11b는 본 발명의 일 실시예에 따라 저속 이동 오브젝트를 참조로 하여 보행자횡단보도대기영역 및 보행자횡단보도보행영역을 판단하고, 보행자횡단보도대기영역 및 보행자횡단보도보행영역의 예를 나타내는 도면이다.
1 is a diagram showing a schematic configuration of a server for generating a precise map using a fixed LIDAR according to an embodiment of the present invention.
2 is a flowchart for explaining an example of performing a determination on a moving object before generating a precision map using a fixed LIDAR according to an embodiment of the present invention.
3 is a flowchart for explaining another example of determining a moving object before generating a precision map using a fixed LIDAR according to an embodiment of the present invention.
4 is an example of a virtual zone corresponding to each predetermined distance based on a lidar in performing determination on a moving object before generating a precision map using a fixed lidar according to an embodiment of the present invention is a drawing representing
5A is a diagram showing an example of a screen before removing fixed lidar data corresponding to a fixed object before generating a precise map using a fixed lidar according to an embodiment of the present invention, and FIG. It is a diagram showing an example of a screen after removing fixed lidar data corresponding to a fixed object before generating a precision map using a fixed lidar according to an embodiment.
6 is a diagram illustrating an example in which a moving object detected using a fixed LIDAR is fitted to a 2D rectangle and a median value is included in the fitted 2D rectangle according to an embodiment of the present invention.
7 is a flowchart for explaining the overall sequence of a method for generating a precision map using a fixed LIDAR according to an embodiment of the present invention.
8 is a diagram illustrating an example of a grid map matching a movement path through which an object has passed according to an embodiment of the present invention.
9A is a diagram showing an example of a movement path of a high-speed moving object according to an embodiment of the present invention, and FIG. 9B is a diagram showing a lane area determined with reference to a high-speed moving object according to an embodiment of the present invention, and a lane area It is a drawing showing an example of
10A is a diagram showing an example of a region where a high-speed moving object stops in a moving path of a high-speed object according to an embodiment of the present invention, and FIG. It is a diagram showing an example of the vehicle stop line area after determining the vehicle stop line area.
11A is a diagram showing an example of a movement path of a slow-moving object according to an embodiment of the present invention, and FIG. 11B is a pedestrian crosswalk waiting area and a pedestrian crossing with reference to a slow-moving object according to an embodiment of the present invention. It is a diagram showing an example of a pedestrian crosswalk waiting area and a pedestrian crosswalk walking area by determining a sidewalk walking area.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The detailed description of the present invention which follows refers to the accompanying drawings which illustrate, by way of illustration, specific embodiments in which the present invention may be practiced. These embodiments are described in sufficient detail to enable one skilled in the art to practice the present invention. It should be understood that the various embodiments of the present invention are different from each other but are not necessarily mutually exclusive. For example, specific shapes, structures, and characteristics described herein may be implemented in one embodiment in another embodiment without departing from the spirit and scope of the invention. Additionally, it should be understood that the location or arrangement of individual components within each disclosed embodiment may be changed without departing from the spirit and scope of the invention. Accordingly, the detailed description set forth below is not to be taken in a limiting sense, and the scope of the present invention, if properly described, is limited only by the appended claims, along with all equivalents as claimed by those claims. Like reference numbers in the drawings indicate the same or similar function throughout the various aspects.

이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily practice the present invention.

도 1은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하는 서버의 개략적인 구성을 나타내는 도면이다.1 is a diagram showing a schematic configuration of a server for generating a precise map using a fixed LIDAR according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 라이다를 이용하여 정밀 지도를 생성하는 서버(100)는 메모리(110) 및 프로세서(120)를 포함할 수 있다.As shown in FIG. 1 , the server 100 generating a detailed map using the LIDAR of the present invention may include a memory 110 and a processor 120 .

정밀 지도를 생성하는 서버(100)의 메모리(110)는 프로세서(120)에 의해 수행될 인스트럭션들을 저장할 수 있는데, 구체적으로, 인스트럭션들은 정밀 지도를 생성하는 서버(100)로 하여금 특정의 방식으로 기능하게 하기 위한 목적으로 생성되는 코드로서, 컴퓨터 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장될 수 있다. 인스트럭션들은 본 발명의 명세서에서 설명되는 기능들을 실행하기 위한 프로세스들을 수행할 수 있다.The memory 110 of the server 100 generating the map may store instructions to be executed by the processor 120, specifically, the instructions cause the server 100 to generate the map to function in a particular way. As code generated for the purpose of doing so, it may be stored in a computer usable or computer readable memory that may be directed to a computer or other programmable data processing equipment. Instructions may perform processes for executing functions described in the specification of the present invention.

그리고, 정밀 지도를 생성하는 서버(100)의 프로세서(120)는 MPU(Micro Processing Unit) 또는 CPU(Central Processing Unit), 캐쉬 메모리(Cache Memory), 데이터 버스(Data Bus) 등의 하드웨어 구성을 포함할 수 있다. 또한, 운영체제, 특정 목적을 수행하는 애플리케이션의 소프트웨어 구성을 더 포함할 수도 있다.In addition, the processor 120 of the server 100 that generates the detailed map includes a hardware configuration such as a micro processing unit (MPU) or a central processing unit (CPU), a cache memory, and a data bus. can do. In addition, it may further include a software configuration of an operating system and an application that performs a specific purpose.

또한, 정밀 지도를 생성하는 서버(100)는 데이터베이스(미도시)와 연동될 수 있다. 여기서, 데이터베이스(미도시)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있으며, 이에 한정되지 않으며 데이터를 저장할 수 있는 모든 매체를 포함할 수 있다. 또한, 데이터베이스(미도시)는 정밀 지도를 생성하는 서버(100)와 분리되어 설치되거나, 이와는 달리 정밀 지도를 생성하는 서버(100)의 내부에 설치되어 데이터를 전송하거나 수신되는 데이터를 기록할 수도 있고, 도시된 바와 달리 둘 이상으로 분리되어 구현될 수도 있으며, 이는 발명의 실시 조건에 따라 달라질 수 있다. In addition, the server 100 that generates the detailed map may be linked with a database (not shown). Here, the database (not shown) is a flash memory type, a hard disk type, a multimedia card micro type, and a card type memory (for example, SD or XD memory). , RAM (Random Access Memory, RAM), SRAM (Static Random Access Memory), ROM (ReadOnly Memory, ROM), EEPROM (Electrically Erasable Programmable ReadOnly Memory), PROM (Programmable ReadOnly Memory), magnetic memory, magnetic disk, optical disk It may include at least one type of storage medium, but is not limited thereto and may include any medium capable of storing data. In addition, the database (not shown) may be installed separately from the server 100 that generates the detailed map, or may be installed inside the server 100 that generates the detailed map to transmit data or record received data. And, unlike the illustration, it may be implemented by being separated into two or more, which may vary depending on the implementation conditions of the invention.

한편, 이하에서는 도 2 내지 도 6을 참조로 하여, 정밀 지도를 생성하기 전에 고정 오브젝트를 제거하는 과정을 먼저 설명하도록 하지만, 이러한 과정은 본 발명에 있어서 필수적인 것은 아닐 것이다. 다만, 설명의 편의상, 도 2 내지 도 6의 프로세스들이 사전적인 프로세스들로서 먼저 수행될 수 있는 특성이 있으므로, 본 발명의 주요 프로세스들에 대한 설명이 이루어질 도 7 이후의 내용이 나오기 전에 먼저 설명하는 것으로 이해되어야 할 것이다.Meanwhile, in the following, a process of removing a fixed object before generating a precision map will be described with reference to FIGS. 2 to 6 , but this process will not be essential in the present invention. However, for convenience of description, since the processes of FIGS. 2 to 6 have a characteristic that can be performed first as preliminary processes, the main processes of the present invention will be described first before the contents of FIG. 7 and later appear. It should be understood.

도 2는 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행하는 일례를 설명하기 위한 흐름도이다.2 is a flowchart for explaining an example of performing a determination on a moving object before generating a precision map using a fixed LIDAR according to an embodiment of the present invention.

먼저, 제1 라이다 데이터가 획득(S210)되면, 기설정된 기준에 따른 필터링(S221)을 수행하여 제1 라이다 데이터로부터 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거(S222)하여 잔여 라이다 데이터를 획득할 수 있다. First, when first lidar data is obtained (S210), filtering (S221) according to a predetermined criterion is performed to remove fixed lidar data corresponding to a fixed object from the first lidar data (S222), and residual lidar data is obtained. data can be obtained.

이후, 상기 잔여 라이다 데이터를 참조로 하여, 이동 오브젝트를 트래킹할 수 있다(S230). 이동 오브젝트를 트래킹한 이후에는, 이를 저장(S235)하고 이동 오브젝트를 분류(S240)할 수 있다.Thereafter, the moving object may be tracked with reference to the residual lidar data (S230). After the moving object is tracked, it can be stored (S235) and the moving object can be classified (S240).

또한, 이동 오브젝트 분류(S240)가 완료되면, 이를 이용하여 정밀지도를 생성하거나 교차로 상태를 검지(S245) 할 수도 있다. In addition, when the moving object classification (S240) is completed, a precise map may be generated or an intersection state may be detected (S245).

여기서, 제1 라이다 데이터는 실시간 데이터일 수도 있고 이미 획득한 데이터일 수도 있을 것이다. Here, the first lidar data may be real-time data or already acquired data.

한편, 본 발명의 다른 실시예에 따라 이동 오브젝트에 대한 판단을 수행할 수도 있다. 이를 도 3에서 설명하면 다음과 같다. Meanwhile, according to another embodiment of the present invention, determination of a moving object may be performed. This is explained in FIG. 3 as follows.

도 3은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행하는 다른 일례를 설명하기 위한 흐름도이다.3 is a flowchart for explaining another example of determining a moving object before generating a precision map using a fixed LIDAR according to an embodiment of the present invention.

즉, 도 3은 본 발명의 일 실시예에 따라 제1 라이다 데이터 및 제2 라이다 데이터를 이용하여 이동 오브젝트에 대한 판단을 수행하는 방법의 전체적인 순서를 설명하기 위한 흐름도이다. That is, FIG. 3 is a flowchart for explaining the overall sequence of a method for determining a moving object using first lidar data and second lidar data according to an embodiment of the present invention.

먼저, 제1 라이다 데이터가 획득(S310)되면, 제1 라이다 데이터로부터 고정 오브젝트에 대응되는 고정 라이다 데이터를 판별(S320)하여 제1 잔여 라이다 데이터를 획득할 수 있다. 이러한 작업은 후술할 제2 라이다 데이터가 획득되기 전에 미리 수행될 수 있을 것이다. 다음으로, 제2 라이다 데이터가 획득(S330)되면, 제1 잔여 라이다 데이터 및 제2 라이다 데이터를 참조로 하여, 제2 잔여 라이다 데이터를 획득(S340)할 수 있다. 제2 잔여 라이다 데이터는 고정 라이다 데이터가 제거된 데이터이다. First, when first lidar data is obtained (S310), first residual lidar data may be obtained by determining fixed lidar data corresponding to a fixed object from the first lidar data (S320). This operation may be performed in advance before obtaining second LiDAR data to be described later. Next, when the second lidar data is obtained (S330), the second residual lidar data may be obtained (S340) with reference to the first residual lidar data and the second lidar data. The second residual lidar data is data from which fixed lidar data has been removed.

여기서, 제2 라이다 데이터 및 고정 라이다 데이터를 참조로 하여 제2 잔여 라이다 데이터를 획득할 때, (i) 고정 라이다 데이터에 대응되는 복수의 제1 포인트 위치 및 (ii) 제2 라이다 데이터 각각을 획득한 복수의 제2 포인트 위치를 매칭할 수 있다. 즉, 제1 포인트 위치 및 제2 포인트 위치가 겹치는 특정 위치에 대응되는 특정 포인트로부터 검출되는 특정 라이다 데이터를 제2 라이다 데이터로부터 제거하여 제2 잔여 라이다 데이터를 획득할 수 있다. Here, when obtaining the second residual lidar data with reference to the second lidar data and the fixed lidar data, (i) a plurality of first point positions corresponding to the fixed lidar data and (ii) the second lidar data It is possible to match the locations of a plurality of second points obtained with each of the data. That is, the second residual lidar data may be obtained by removing specific lidar data detected from a specific point corresponding to a specific position where the first point location and the second point location overlap from the second lidar data.

다시 말해, 기존에 획득한 고정 오브젝트에 대한 포인트 위치를 실시간으로 획득한 오브젝트의 포인트 위치에 매칭하여, 실시간 라이다 데이터에서 고정 오브젝트에 대한 고정 라이다 데이터를 제거하여, 이동 오브젝트만 존재하는 제2 잔여 라이다 데이터를 획득할 수 있는 것이다. In other words, by matching the previously acquired point position of the fixed object to the point position of the object acquired in real time, removing the fixed lidar data for the fixed object from the real-time lidar data, the second lidar data in which only the moving object exists. It is possible to acquire the remaining LIDAR data.

이후, 제2 잔여 라이다 데이터를 참조로 하여, 이동 오브젝트를 트래킹할 수 있다(S350). 이동 오브젝트를 트래킹한 이후에는, 이를 저장(S355)하고 이동 오브젝트를 분류(S360)할 수 있다.Thereafter, the moving object may be tracked with reference to the second residual lidar data (S350). After the moving object is tracked, it can be stored (S355) and the moving object can be classified (S360).

마찬가지로, 이동 오브젝트 분류(S360)가 완료되면, 이를 이용하여 정밀지도를 생성하거나 교차로 상태를 검지(S365)할 수도 있다. Similarly, when the moving object classification (S360) is completed, a precision map may be generated or an intersection state may be detected (S365).

여기서, 제1 라이다 데이터는 이미 획득한 데이터일 수도 있으나, 제2 라이다 데이터는 실시간 데이터에 해당될 수 있다. Here, the first lidar data may be already acquired data, but the second lidar data may correspond to real-time data.

위의 실시예들에서, 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거하기 전에 고정 라이다 데이터로 판단하는 방법의 예시는 다음과 같다. In the above embodiments, an example of a method of determining the fixed lidar data as fixed lidar data before removing the fixed lidar data corresponding to the fixed object is as follows.

고정 라이다 데이터를 판단하는 일례는, 먼저 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분한다. 라이다는 다수의 레이어로부터 포인트 데이터를 획득하기 때문에 X축, Y축, Z축으로 포함되는 3차원의 그리드 영역으로 구분할 수 있는 것이다. In an example of determining fixed lidar data, first, an area covered by lidar is divided into a virtual 3D grid area. Since LIDAR acquires point data from multiple layers, it can be divided into three-dimensional grid areas included in the X-axis, Y-axis, and Z-axis.

그리고, 적어도 하나의 관측 프레임 동안 그리드 영역 내의 각각의 셀별로 제1 라이다 데이터가 검출되는 수를 카운팅하고, 셀들 중 카운팅된 수가 임계치 이상인 특정 셀들에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있다. In addition, counting the number of first lidar data detected for each cell in the grid area during at least one observation frame, and converting the first lidar data detected in specific cells in which the counted number of cells is equal to or greater than a threshold value to fixed lidar data can be judged by

즉, 계속적으로 제1 라이다 데이터가 검출되는 셀에 고정 오브젝트가 있다고 판단하는 것이다. 가령, 제1 셀에서 100개의 관측 프레임 중 90개의 관측 프레임에서 제1 라이다 데이터가 검출되는 경우에는, 제1 셀에 고정 오브젝트가 존재한다고 판단하는 것이다. 반대로, 제2 셀에서 100개의 관측 프레임 중 80개의 관측 프레임에서 제1 라이다 데이터가 검출되는 경우에는, 제2 셀에는 고정 오브젝트가 존재하지 않는 것으로 판단하는 것이다. 여기서, 임계치는 사용자의 설정에 따라 변경될 수 있으나, 위의 예시에서 임계치는 "90개의 관측 프레임 이상"이라고 설정된 것으로 상정할 수 있다. That is, it is determined that there is a fixed object in a cell where the first lidar data is continuously detected. For example, when first lidar data is detected in 90 observation frames out of 100 observation frames in the first cell, it is determined that a fixed object exists in the first cell. Conversely, when the first lidar data is detected in 80 observation frames out of 100 observation frames in the second cell, it is determined that the fixed object does not exist in the second cell. Here, the threshold may be changed according to the user's setting, but in the above example, it may be assumed that the threshold is set to "more than 90 observation frames".

여기서, 임계치를 천편일률적으로 동일하게 설정할 수도 있지만, 바람직하게는 다음과 같이 라이다로부터의 거리에 따라 임계치를 다르게 설정할 수 있을 것이다.Here, the threshold may be uniformly set uniformly, but preferably, the threshold may be set differently depending on the distance from the lidar as follows.

가령, 라이다로부터의 기설정된 거리마다 대응되는 가상 구역이 설정된 상태에서, 관측 프레임 동안 제k 구역에 포함된 제k 셀들 중 제1 라이다 데이터가 검출되는 특정 관측 프레임의 수가 제k 임계치 이상인 제k 특정 셀들에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있다.For example, in a state in which a corresponding virtual zone is set for each predetermined distance from lidar, the number of specific observation frames in which the first lidar data is detected among the k cells included in the k th zone during the observation frame is greater than or equal to the k th threshold k First lidar data detected in specific cells may be determined as fixed lidar data.

한편, 관측 프레임 동안 제k 구역보다 라이다로부터 더 멀리 떨어져 있는 인근 영역인 제(k+1) 구역에 포함된 제(k+1) 셀들 중 제1 라이다 데이터가 검출되는 특정 관측 프레임의 수가 제(k+1) 임계치 이상인 제(k+1) 특정 셀들에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있다. On the other hand, during the observation frame, the number of specific observation frames in which the first lidar data is detected among the (k+1)th cells included in the (k+1)th zone, which is a nearby area farther from lidar than the kth zone, is First lidar data detected in the (k+1)th specific cells that are equal to or greater than the (k+1)th threshold may be determined as fixed lidar data.

여기서, 제(k+1) 임계치는 제k 임계치보다 낮거나 같은 값으로 설정할 수 있고, 가상 구역은 제1 구역 내지 제n 구역을 포함하며, 제1 구역이 라이다로부터 가장 가까운 가상 구역이고 제n 구역이 라이다로부터 가장 먼 가상 구역이다. Here, the (k+1)th threshold may be set to a value lower than or equal to the kth threshold, the virtual zone includes the first to nth zones, the first zone being the closest to the lidar and the virtual zone being the closest to the lidar. Zone n is the farthest imaginary zone from LiDAR.

이를 도 4를 통해서 설명하고자 한다. This will be explained through FIG. 4 .

도 4는 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트에 대한 판단을 수행함에 있어서, 라이다를 기준으로 하여 기설정된 거리마다 대응되는 가상 구역의 예를 나타내는 도면이다.4 is an example of a virtual zone corresponding to each predetermined distance based on a lidar in performing determination on a moving object before generating a precision map using a fixed lidar according to an embodiment of the present invention is a drawing representing

도 4에서는 편의상 2개의 구역을 도시화하였다. 제k 영역(410) 및 제(k+1) 영역(420)이 있다. 제k 영역(410)이 제(k+1) 영역(420)보다 라이다가 설치된 지점으로부터 더 가까운 영역이다. In FIG. 4, two zones are illustrated for convenience. There is a kth region 410 and a (k+1)th region 420 . The kth area 410 is an area closer to the LiDAR installation point than the (k+1)th area 420 .

여기서, 제k 영역(410)에 포함된 셀의 개수가 10개이고 제(k+1) 영역(420)에 포함된 셀의 개수가 15개인 것으로 가정하였다. 또한, 임계치가 90% 인 것으로 가정하였다. 즉, 특정 셀에서 90% 이상의 라이다 데이터가 검출되어야 해당 특정 셀로부터 고정 라이다 데이터가 검출되는 것으로 판단하는 것으로 가정하였다.Here, it is assumed that the number of cells included in the kth region 410 is 10 and the number of cells included in the (k+1)th region 420 is 15. Also, it is assumed that the threshold is 90%. That is, it is assumed that it is determined that fixed lidar data is detected from the specific cell only when 90% or more lidar data is detected in the specific cell.

이 때, 제k 영역(410)에 포함된 10개의 셀들 중에서 제1 라이다 데이터가 검출되는 특정 관측 프레임의 수가 90개(즉, 관측 프레임 100개 중에서 제1 라이다 데이터가 검출되는 특정 관측 프레임이 90개인 것임) 이상인 셀들이 2개라면, 2개의 셀에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있는 것이다. 특정 관측 프레임의 수가 90개 미만인 8개의 셀에서 검출되는 제1 라이다 데이터는 고정 라이다 데이터가 아닌 것으로 판단할 수 있다. At this time, the number of specific observation frames in which the first lidar data is detected among the 10 cells included in the kth region 410 is 90 (ie, the specific observation frame in which the first lidar data is detected among 100 observation frames). If there are two cells that are 90 or more), the first lidar data detected in the two cells can be determined as fixed lidar data. It may be determined that the first lidar data detected in 8 cells in which the number of specific observation frames is less than 90 is not fixed lidar data.

반면, 제(k+1) 영역(420)에 포함된 15개의 셀들 중에서 제1 라이다 데이터가 검출되는 특정 관측 프레임의 수가 90개(즉, 관측 프레임 100개 중에서 제1 라이다 데이터가 검출되는 특정 관측 프레임이 90개인 것임) 이상인 셀들을 고정 라이다 데이터에 해당되는 셀들로 판단하고자 한다면, 제k 영역(410)에 비해 오류가 많을 수 있다. 왜냐하면, 라이다로부터 먼 거리일수록 데이터의 부정확할 가능성이 높기 때문에 동일한 임계치 기준으로 적용한다면 실제로는 고정 라이다 데이터임에도 이를 고정 라이다 데이터로 판단하지 못하는 확률이 높아지기 때문이다. 따라서, 제(k+1) 영역(420)에 대해서는 임계치를 다소 낮춰서 제1 라이다 데이터가 검출되는 특정 관측 프레임의 수가 80개 이상이면 고정 라이다 데이터에 해당되는 셀들로 판단하게 해 줄 수 있을 것이다.On the other hand, the number of specific observation frames in which the first lidar data is detected among 15 cells included in the (k+1)th region 420 is 90 (ie, the first lidar data is detected among 100 observation frames). If it is desired to determine cells having 90 or more specific observation frames as cells corresponding to fixed lidar data, there may be more errors than the kth region 410 . This is because, if the data is more likely to be inaccurate as the distance from the lidar increases, the probability of not determining it as fixed lidar data increases even if it is actually fixed lidar data if applied with the same threshold criterion. Therefore, for the (k + 1)th region 420, the threshold is slightly lowered so that if the number of specific observation frames in which the first lidar data is detected is 80 or more, cells corresponding to fixed lidar data can be determined. will be.

한편, 고정 라이다 데이터를 판단하는 다른 일례는, 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 그리드 영역 내의 각각의 셀별로 제1 라이다 데이터의 관측 포인트 데이터 수를 카운팅하고 각각의 셀의 기설정된 평균 포인트 데이터 수(이에 대해서는 과거의 프레임에서 이미 정보를 획득하고 분석하여 평균 포인트 데이터 수를 확보한 상태임)와 비교하여, 관측 포인트 데이터 수와 평균 포인트 데이터 수와의 차이의 비율이 임계 비율 이하인 특정 셀들에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있다. On the other hand, in another example of determining fixed lidar data, the area covered by lidar is divided into a virtual 3-dimensional grid area, and the first lidar data for each cell in the grid area during at least one observation frame. The number of observation point data is counted and compared with the preset average number of point data of each cell (for this, information has already been acquired and analyzed in the past frame to secure the average number of point data), the number of observation point data and First lidar data detected in specific cells having a difference ratio of the average point data number equal to or less than a threshold ratio may be determined as fixed lidar data.

더 자세하게 설명하면, 제k 영역(410)에 해당되는 거리에서는 고정 라이다 데이터로 판단 받은 셀의 포인트 데이터 수의 평균이 10이었다고 가정하면, 제k 영역(410)의 특정 셀에서 검출된 포인트 데이터가 9인 상태에서는, 평균치인 10 대비하여 90%에 해당되므로 해당 셀에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 있다. 여기서, 임계 비율은 90% 로 설정된 것으로 가정하였다.More specifically, assuming that the average number of point data in cells judged as fixed lidar data is 10 at a distance corresponding to the kth area 410, point data detected in a specific cell in the kth area 410 In a state where is 9, since it corresponds to 90% compared to the average value of 10, the first lidar data detected in the cell can be determined as fixed lidar data. Here, it is assumed that the critical ratio is set to 90%.

그런데, 제(k+1) 영역(420)에 해당되는 거리에서 고정 라이다 데이터로 판단 받은 셀의 포인트 데이터 수의 평균이 5이었다고 가정하면, 제(k+1) 영역(420)의 특정 셀에서 검출된 포인트 데이터가 4인 상태에서는, (임계 비율이 제k 영역(410)의 임계 비율과 마찬가지로 90% 에 해당된다면) 제(k+1) 영역(420)의 특정 셀에서 검출된 4개의 포인트 데이터는 평균치인 5 대비하여 80% 에 불과하므로 해당 셀에서 검출되는 제1 라이다 데이터를 고정 라이다 데이터로 판단할 수 없게 된다. 이는 특정 셀이 거리가 멀어서 노이즈에 취약할 수 있음에도 불구하고 동일한 임계 비율을 적용함으로써 고정 라이다 데이터로 판단을 받지 못하는 불합리한 판단결과가 생기게 되는 것이며, 이러한 불합리함을 막기 위하여 제(k+1) 영역(420)에 포함된 셀들에 대해서는 고정 라이다 데이터인지 여부를 판단하기 위한 임계 비율을 80% 로 낮출 수 있다는 것이다. However, assuming that the average number of point data of cells judged as fixed lidar data at a distance corresponding to the (k+1)th area 420 was 5, a specific cell in the (k+1)th area 420 In a state where the point data detected in 4 is 4, (if the threshold ratio corresponds to 90% like the critical ratio of the k th region 410), the 4 points detected in a specific cell in the (k+1)th region 420 Since the point data is only 80% of the average value of 5, it is impossible to determine the first lidar data detected in the cell as fixed lidar data. This is because even though a specific cell may be vulnerable to noise due to its long distance, by applying the same threshold ratio, an irrational decision result that is not judged as fixed LIDAR data occurs. For the cells included in the region 420, the threshold ratio for determining whether or not the LIDAR data is fixed may be lowered to 80%.

위와 같은 예시 중 적어도 어느 하나를 이용하여 고정 라이다 데이터를 판단하고 고정 라이다 데이터를 제거하여, 잔여 라이다 데이터를 획득할 수 있다. Remaining lidar data may be obtained by determining fixed lidar data using at least one of the above examples and removing the fixed lidar data.

다음으로 도 5a 및 도 5b를 살펴보자. Next, let's look at Figures 5a and 5b.

도 5a는 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거하기 전의 화면 예를 나타내는 도면이다. 5A is a diagram showing an example of a screen before removing fixed lidar data corresponding to a fixed object before generating a precision map using a fixed lidar according to an embodiment of the present invention.

도 5b는 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 고정 오브젝트에 대응되는 고정 라이다 데이터를 제거한 후의 화면 예를 나타내는 도면이다. 5B is a diagram showing an example of a screen after removing fixed lidar data corresponding to a fixed object before generating a precision map using a fixed lidar according to an embodiment of the present invention.

도 5a와 같이, 고정 라이다 데이터를 제거하기 전에는 다수의 노랑 포인트들이 산재되어 있다. 이 경우 고정 라이다 데이터와 잔여 라이다 데이터와의 구분이 쉽지 않다.As shown in FIG. 5A, before removing the fixed lidar data, a number of yellow points are scattered. In this case, it is not easy to distinguish between fixed lidar data and residual lidar data.

하지만, 도 5b의 경우, 앞서 언급한 예시를 이용하여 고정 라이다 데이터가 제거된 상태이므로 도 5a와 비교하여 노랑 포인트들이 상당히 줄어들었음을 알 수 있고, 도 5b에 보이는 노랑 포인트들은 보다 정확도 높게 이동 오브젝트로 판단 받을 수 있는 것이다. However, in the case of FIG. 5B, since the fixed lidar data is removed using the above-mentioned example, it can be seen that the yellow points are significantly reduced compared to FIG. 5A, and the yellow points shown in FIG. 5B move with higher accuracy. It can be judged as an object.

한편, 고정 라이다 데이터를 판단함에 있어서, 사전 프로세스로서, 제1 라이다 데이터로부터 교통량을 모니터링하는 도중에, 교통량이 기설정된 수치 이하인 것으로 판단되는 동안의 프레임들을 참조 프레임으로 설정하고 해당 참조 프레임에 대응되는 참조 로깅 데이터를 기록할 수 있다. On the other hand, in determining fixed lidar data, as a pre-process, while monitoring the traffic volume from the first lidar data, frames during which it is determined that the traffic volume is equal to or less than a predetermined value are set as reference frames and correspond to the reference frames. Reference logging data can be recorded.

왜냐하면, 고정 오브젝트에 대응되는 고정 라이다 데이터를 판단할 때, 이동 오브젝트가 가능한 적은 시간대의 프레임을 참조 프레임으로 설정하고 측정을 해야 정확도를 더 높일 수 있기 때문이다. 그러므로, 라이다가 설치된 지역의 교통량을 분석하여 이동 오브젝트가 적은 시간대(가령, 새벽시간)에 측정한 로깅 데이터를 참조 로깅 데이터로 기록하고, 이후 참조 로킹 데이터를 이용하여 고정 라이다 데이터를 판단하는 것이다. This is because, when determining fixed lidar data corresponding to a fixed object, accuracy can be further increased only when a frame of a time period in which a moving object is as small as possible is set as a reference frame and measurement is performed. Therefore, by analyzing the traffic volume in the area where the lidar is installed, logging data measured in a time zone with few moving objects (eg, early morning) is recorded as reference logging data, and then using the reference locking data to determine fixed lidar data will be.

이후, 참조 프레임보다 시간적으로 후행하는 적어도 하나의 관측 프레임 동안 이동 오브젝트를 보다 정확하게 판단하기 위하여, 사전 프로세스로서 기록해두었던 참조 로깅 데이터를 불러와서 관측 프레임 동안의 제1 라이다 데이터에 포함된 고정 라이다 데이터를 판단하여 제거하는데에 도움을 받을 수 있다. Thereafter, in order to more accurately determine a moving object during at least one observation frame temporally following the reference frame, the reference logging data recorded as a pre-process is called and the fixed lidar included in the first lidar data during the observation frame. We can help you determine and remove the data.

한편, 고정 라이다 데이터가 제거된 잔여 라이다 데이터를 참조로 하여, 이동 오브젝트를 트래킹할 수 있다. 여기서, 이동 오브젝트를 트래킹 하기 위하여, 이동 오브젝트의 이동경로포인트를 판단할 수 있다. Meanwhile, a moving object may be tracked with reference to residual lidar data from which fixed lidar data is removed. Here, in order to track the moving object, a moving path point of the moving object may be determined.

이동경로포인트를 판단하는 방법은, 이동 오브젝트의 MeanX, MeanY 값을 이용하거나, 이동 오브젝트를 2D 사각형에 피팅(Fitting)하고 피팅된 2D 사각형의 중앙값을 이용하거나, 이동 오브젝트를 3D 사각형에 피팅하고 피팅된 3D 사각형의 중앙값을 이용하여 이동경로포인트를 판단할 수 있다. The method for determining the moving path point is to use the MeanX and MeanY values of the moving object, or to fit the moving object to a 2D rectangle and use the median of the fitted 2D rectangle, or to fit the moving object to a 3D rectangle and then fit. The movement route point can be determined using the median value of the 3D rectangle.

또한, 도 4에서 살펴본 바와 같이, 상기 라이다로부터의 기설정된 거리마다 대응되는 가상 구역(상기 가상 구역은 제1 구역 내지 제n 구역을 포함하며, 상기 제1 구역이 상기 라이다로부터 가장 가까운 가상 구역이고 상기 제n 구역이 상기 라이다로부터 가장 먼 가상 구역임)이 설정된 상태에서, 서버(100)는, 제k 구역(410)에 포함된 제1 카테고리의 이동 오브젝트의 특징과 제2 카테고리의 이동 오브젝트의 특징을 구분하기 위한 제k 기준값을, 제(k+1) 구역(420)에 포함된 상기 제1 카테고리의 이동 오브젝트의 특징과 상기 제2 카테고리의 이동 오브젝트의 특징을 구분하기 위한 제(k+1) 기준값보다 크거나 같게 설정할 수 있을 것이다. 여기서, 제1 카테고리는 차량이고 제2 카테고리는 보행자일 수 있으나 이에 한정되는 것은 아니고, 제1 카테고리가 제1 종류의 차량이고 제2 카테고리가 제2 종류의 차량일 수도 있을 것이며, 다양한 변형예를 상정할 수 있을 것이다. 또한, 제k 기준값과 제(k+1) 기준값이란, 가령 오브젝트의 크기 팩터와 오브젝트의 포인트 수 팩터 중 적어도 일부 팩터에 대한 기준값을 포함하는 개념일 수 있으며, 경우에 따라서는 두 가지 팩터 각각에 대한 기준값을 의미할 수도 있을 것이다. 또한, 제k 기준값과 제(k+1) 기준값은 상기 팩터들 각각에 대한 각각의 중앙값일 수 있으나 이에 한정되는 것은 아닐 것이다.In addition, as seen in FIG. 4, a virtual zone corresponding to each predetermined distance from the lidar (the virtual zone includes a first to n-th zone, and the first zone is the closest virtual zone from the lidar) zone, and the n-th zone is a virtual zone farthest from the LIDAR) is set, the server 100 determines the characteristics of the moving object of the first category included in the k-th zone 410 and the second category. The kth reference value for distinguishing the characteristics of the moving object is the first category included in the (k+1)th zone 420 and the second category for distinguishing the characteristics of the moving object from the first category. (k+1) may be set greater than or equal to the reference value. Here, the first category may be a vehicle and the second category may be a pedestrian, but is not limited thereto, and the first category may be a first type of vehicle and the second category may be a second type of vehicle. will be able to assume In addition, the kth reference value and the (k+1)th reference value may be concepts including reference values for at least some factors of, for example, the size factor of an object and the number of points of an object factor. In some cases, each of the two factors It may mean the standard value for In addition, the k th reference value and the (k+1) th reference value may be median values for each of the factors, but will not be limited thereto.

도 6은 본 발명의 일 실시예에 따라 고정된 라이다를 이용하여 정밀 지도를 생성하기 전에 이동 오브젝트를 2D 사각형에 피팅하고 피팅된 2D 사각형에 중앙값이 포함되어 있는 예를 나타내는 도면이다. FIG. 6 is a diagram illustrating an example in which a moving object is fitted to a 2D rectangle and a median value is included in the fitted 2D rectangle before generating a precision map using a fixed LIDAR according to an embodiment of the present invention.

도 6과 같이, 이동 오브젝트를 2D 사각형에 피팅하였다. 2D 사각형의 중앙 포인트는 빨간 점이지만, 2D 사각형의 중앙값은 노랑 점이다. 노랑 점인 중앙값을 이용하여 이동 오브젝트의 이동경로포인트를 판단할 수 있는 것이다. As shown in Fig. 6, the moving object was fitted to a 2D rectangle. The center point of a 2D rectangle is the red point, but the median of a 2D rectangle is the yellow point. The moving path point of the moving object can be determined using the median value, which is the yellow dot.

한편, 앞에서 계속 언급한 이동 오브젝트는, 차량 또는 보행자로 분류할 수 있다. 여기서, 이동 오브젝트의 특징 데이터 세트(Feature Data Set)를 참고로 하여, 이동 오브젝트의 특징(Feature) 각각의 중앙값(median)을 획득하고, 중앙값을 이용하여 이동 오브젝트를 분류할 수 있다. Meanwhile, the previously mentioned moving objects may be classified as vehicles or pedestrians. Here, with reference to the feature data set of the moving object, the median of each feature of the moving object may be obtained, and the moving object may be classified using the median value.

여기서, 특징은 이동 오브젝트의 크기, 이동 오브젝트의 속도, 라이다로부터의 거리, 제1 라이다 데이터의 포인트 데이터 수 중 적어도 일부를 포함할 수 있다. 또한, 중앙값은, 서포트 벡터 머신(Support Vector Machine), 뉴럴 네트워크(Neural Network), 나이브 베이즈 분류(Na

Figure pat00001
ve Bayes Classification), 딥러닝(Deep Learning), 머신러닝(Machine Learning) 중 적어도 하나를 이용하여 획득될 수 있으며, 이에 한정하는 것은 아니다.Here, the characteristics may include at least some of the size of the moving object, the speed of the moving object, the distance from the lidar, and the number of point data of the first lidar data. In addition, the median value is a support vector machine (Support Vector Machine), a neural network (Neural Network), naive Bayes classification (Na
Figure pat00001
ve Bayes Classification), deep learning (Deep Learning), and can be obtained using at least one of machine learning (Machine Learning), but is not limited thereto.

위와 같이, 이동 오브젝트의 분류가 완료되면, 이를 이용하여 정밀지도를 생성할 수 있다. 이제부터 정밀지도를 생성하는 방법에 대하여 구체적으로 설명하고자 한다. As described above, when the classification of the moving object is completed, a precision map may be generated using this. Hereinafter, a method for generating a precision map will be described in detail.

참고로, 앞에서 설명한 부분은 필수적인 부분은 아니고, 그 외 다양한 방법으로 구현할 수 있을 것이다. For reference, the part described above is not an essential part, and can be implemented in various other ways.

도 7은 본 발명의 일 실시예에 따른 고정된 라이다를 이용하여 정밀 지도를 생성하는 방법의 전체적인 순서를 설명하기 위한 흐름도이다.7 is a flowchart for explaining the overall sequence of a method for generating a precision map using a fixed LIDAR according to an embodiment of the present invention.

도 7과 같이, 먼저 오브젝트 정보를 획득할 수 있다(S710). As shown in FIG. 7 , object information may be obtained first (S710).

참고로, 오브젝트 정보에는, 오브젝트의 속도, 오브젝트의 크기, 오브젝트의 높이 데이터 중 적어도 일부가 포함되어 있다. 또한, 이러한 오브젝트의 정보를 참조로 하여 오브젝트를 차량 또는 보행자 중 어느 하나로 구분할 수 있다. 즉, 차량은 고속 이동 오브젝트이고, 보행자는 저속 이동 오브젝트로 지칭할 수 있을 것이다. For reference, the object information includes at least a part of object speed, object size, and object height data. In addition, the object may be classified as either a vehicle or a pedestrian by referring to the object information. That is, a vehicle may be referred to as a high-speed moving object, and a pedestrian may be referred to as a low-speed moving object.

이후, 연속된 복수의 프레임 내에 포함되는 오브젝트 정보 중 오브젝트 ID 를 참조로 하여, 오브젝트 ID가 동일한 것끼리 분류하고, 오브젝트 ID별로 이동 경로를 저장할 수 있다(S720).Thereafter, with reference to object IDs among object information included in a plurality of consecutive frames, objects having the same object ID may be classified, and moving paths may be stored for each object ID (S720).

다음으로, 오브젝트 ID별로 저장된 각각의 이동 경로를 참조로 하여, 정밀 지도를 생성할 수 있다(S730).Next, with reference to each movement path stored for each object ID, a detailed map may be generated (S730).

여기서, 오브젝트 ID는 프레임마다 오브젝트가 트래킹되는 것을 관리하기 위하여 ID number를 부여하고, 각각의 오브젝트 ID에는 각각의 오브젝트 에이지가 매칭되어 있다. Here, an ID number is assigned to the object ID to manage object tracking for each frame, and each object ID is matched with each object age.

오브젝트 에이지는 연속되는 복수의 프레임이 진행되면서 오브젝트가 계속적으로 트래킹되는 지를 카운트하는 것으로, 오브젝트 에이지 값이 높을수록 긴 시간동안 트래킹된 것을 의미한다. The object age counts whether an object is continuously tracked as a plurality of consecutive frames progress, and the higher the object age value, the longer the tracking time.

여기서, 오브젝트 에이지 값을 증가시키는 일례는 다음과 같다. Here, an example of increasing the object age value is as follows.

먼저, 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹되지 않은 제1 특정 오브젝트 ID가 제t 프레임에서 트래킹되는 경우, 제t 프레임에서 상기 제1 특정 오브젝트 ID의 제1 특정 오브젝트 에이지 값을 초기치로 생성할 수 있다. First, when a first specific object ID that is not tracked in the (t-1)th frame included in a plurality of consecutive frames is tracked in the tth frame, the first specific object of the first specific object ID in the tth frame The age value can be created as an initial value.

가령, 제5 프레임까지 "고속 이동 오브젝트 A의 ID"가 트래킹되지 않았고, 제6 프레임에서 처음으로 "고속 이동 오브젝트 A의 ID"가 트래킹되었을 경우, 제6 프레임에서 "고속 이동 오브젝트 A의 ID"의 오브젝트 에이지 값은 1로 생성될 수 있다. 여기서, 1이 초기치이다. For example, if "ID of high-speed moving object A" is not tracked until the 5th frame and "ID of high-speed moving object A" is first tracked in the 6th frame, "ID of high-speed moving object A" is tracked in the 6th frame. The object age value of can be created as 1. Here, 1 is the initial value.

두번째로, 제(t-1) 프레임에서 트래킹된 제2 특정 오브젝트 ID가 제t프레임에서도 트래킹되는 경우, 제t 프레임에서 제2 특정 오브젝트 ID의 제2 특정 오브젝트 에이지 값은 제(t-1) 프레임에서의 제2 특정 오브젝트 에이지 값보다 크게 증가되도록 할 수 있다. Second, when the second specific object ID tracked in the (t-1)th frame is also tracked in the tth frame, the second specific object age value of the second specific object ID in the tth frame is It may be increased more than the second specific object age value in the frame.

가령, 제8 프레임에서 "저속 이동 오브젝트 B의 ID"의 오브젝트 에이지 값이 8인 경우, 제9 프레임에서도 "저속 이동 오브젝트 B의 ID"가 트래킹되면 제9 프레임에서의 "저속 이동 오브젝트 B의 ID"의 오브젝트 에이지 값은 9가 될 수 있다. 물론 9보다 더 큰 수가 될 수도 있으나, 편의상 연속되는 프레임마다 오브젝트 에이지 값이 1씩 증가된다고 가정할 경우 9가 될 것이다. For example, if the object age value of “ID of slow-moving object B” is 8 in the 8th frame, if “ID of slow-moving object B” is also tracked in the 9th frame, “ID of slow-moving object B” in the 9th frame The object age value of " can be 9. Of course, it may be a number larger than 9, but for convenience, it will be 9 if it is assumed that the object age value is increased by 1 for each successive frame.

한편, 경우에 따라서는 오브젝트 에이지 값이 삭제될 수도 있다. Meanwhile, the object age value may be deleted in some cases.

즉, 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹된 제3 특정 오브젝트 ID가 제t 프레임에서 트래킹되지 않는 경우, 제t 프레임에서 제3 특정 오브젝트 ID의 제3 특정 오브젝트 에이지 값은 삭제될 수 있다. 물론, 곧바로 삭제하지 않고, 연속하여 x 프레임 동안 계속하여 제3 특정 오브젝트 ID가 트래킹되지 않는 경우에 해당 제3 특정 오브젝트 에이지 값이 삭제되도록 할 수도 있을 것이다.That is, when the third specific object ID tracked in the (t-1)th frame included in a plurality of consecutive frames is not tracked in the tth frame, the third specific object age of the third specific object ID in the tth frame Values can be deleted. Of course, if the third specific object ID is not tracked continuously for x frames without deletion immediately, the corresponding third specific object age value may be deleted.

여기서, 제3 특정 오브젝트 에이지 값이 삭제된 경우에는 삭제된 프레임으로부터 기설정된 기간의 프레임 동안 제3 특정 오브젝트 ID를 사용하지 못하도록 설정할 수 있다. Here, when the third specific object age value is deleted, the third specific object ID may be set not to be used during a frame of a predetermined period from the deleted frame.

이는 삭제된지 얼마되지 않은 프레임에서 또 다시 삭제된 ID 와 동일한 ID 를 사용하게 된다면, 삭제된 ID와 동일한 ID로 판단될 수 있는 오류가 생길 수 있기 때문에 이를 방지하기 위함이다. This is to prevent an error that can be determined as the same ID as the deleted ID if the same ID as the deleted ID is used again in a frame recently deleted.

이와 같이, 각각의 오브젝트 ID에 포함된 각각의 오브젝트 에이지 값을 각각의 이동 경로와 맵핑하여 정밀 지도를 생성하는 것이다. In this way, each object age value included in each object ID is mapped with each movement path to generate a precision map.

또한, 오브젝트를 구성하는 포인트들의 XY 좌표의 평균값을 참조로 하여, 오브젝트의 이동 경로를 저장할 수 있다. 여기서, 이동 경로를 보정하는 방법으로는 다항 회귀(Polynomial Fitting) 알고리즘을 이용하나 이에 한정하는 것은 아니다. In addition, the movement path of the object may be stored with reference to the average value of XY coordinates of points constituting the object. Here, as a method of correcting the movement path, a polynomial fitting algorithm is used, but is not limited thereto.

이하에서는 오브젝트 ID 별로 이동 경로를 참조하여 정밀 지도를 생성하는 것을 좀 더 자세하게 설명하고자 한다. Hereinafter, generating a precise map by referring to a movement path for each object ID will be described in more detail.

먼저, 이동 경로를 이용하여 정밀 지도를 생성하기 위해서는 오브젝트가 이동한 이동 경로를 그리드 맵에 매칭하는 작업이 필요하다. 그리드 맵은 라이다가 설치된 위치로부터 일정 반경 이내의 영역을 그리드로 구성하는 것으로, 도 8과 같다. First, in order to generate a precise map using the movement path, it is necessary to match the movement path along which the object moved to the grid map. The grid map configures an area within a certain radius from the location where the lidar is installed as a grid, as shown in FIG. 8 .

도 8은 본 발명의 일 실시예에 따라 오브젝트가 지나온 이동 경로를 매칭하는 그리드 맵의 예를 나타내는 도면이다. 참고로, 도 8은 편의상 각각의 그리드를 크게 도식화하였지만, 실제로는 더 작은 사이즈의 그리드로 구성될 수 있다.8 is a diagram illustrating an example of a grid map matching a movement path through which an object has passed according to an embodiment of the present invention. For reference, although FIG. 8 shows each grid in a large size for convenience, it may actually be configured with a smaller size grid.

도 8에 포함되어 있는 차로 영역(810), 차량정지선영역(820), 보행자횡단보도대기영역(미도시), 및 보행자횡단보도보행영역(830)을 생성하는 방법은 아래와 같다. A method of generating the lane area 810, vehicle stop line area 820, pedestrian crosswalk waiting area (not shown), and pedestrian crosswalk walking area 830 included in FIG. 8 is as follows.

먼저, 차량으로 구분된 고속 이동 오브젝트를 참조로 하여 차로 영역(810) 및 차량정지선영역(820)을 판단하는 일례를 살펴보자. First, an example of determining a lane area 810 and a vehicle stop line area 820 with reference to a high-speed moving object classified as a vehicle will be described.

도 9a는 본 발명의 일 실시예에 따라 고속 이동 오브젝트의 이동 경로의 예를 나타내는 도면이고, 도 9b는 본 발명의 일 실시예에 따라 고속 이동 오브젝트를 참조로 하여 판단된 차로 영역의 예를 나타내는 도면이다. 9A is a diagram showing an example of a moving path of a high-speed moving object according to an embodiment of the present invention, and FIG. 9B is a diagram showing an example of a lane area determined with reference to a high-speed moving object according to an embodiment of the present invention. it is a drawing

구체적으로, 차량으로 구분된 고속 이동 오브젝트 ID에 대한 이동 경로를 저장하고, 고속 이동 오브젝트 ID에 대응되는 고속 이동 오브젝트가 지나온 이동 경로를 그리드 맵의 복수의 주행 셀과 매칭할 수 있다. 이후, 주행 셀 각각을 지나간 고속 이동 오브젝트의 개수를 카운트하고, 이를 주행 셀별로 증가시켜 주행 셀의 카운트가 제1 임계치 이상이면, 해당 주행 셀을 차로 영역으로 판단하는 것이다.Specifically, a moving path for a high-speed moving object ID classified as a vehicle may be stored, and a moving path passed by a high-speed moving object corresponding to the high-speed moving object ID may be matched with a plurality of driving cells of the grid map. Thereafter, the number of high-speed moving objects passing through each driving cell is counted, and the number is increased for each driving cell. If the count of the driving cell is equal to or greater than a first threshold, the corresponding driving cell is determined to be a lane area.

즉, 도 9a를 참조하여 다시 설명하면, 도 9a의 오브젝트 중에서 고속 이동 오브젝트의 이동 경로를 주행 셀에 매칭하고, 가령, 제1 임계치가 90% 인 경우, 고속 이동 오브젝트의 카운트가 90% 이상인 주행 셀을 차로 영역으로 판단하는 것이다. That is, again referring to FIG. 9A, among the objects of FIG. 9A, the movement path of the high-speed moving object is matched to the driving cell, and, for example, when the first threshold value is 90%, the count of the high-speed moving object is 90% or more. The cell is determined as a vehicle area.

편의상 도 9a에서 제1 임계치 이상인 주행 셀은 주황색 박스(910, 920, 930)로 표시하였다. 이는 차로 영역인 것이다. For convenience, in FIG. 9A , driving cells that are equal to or greater than the first threshold are indicated by orange boxes 910 , 920 , and 930 . This is the car area.

고속 이동 오브젝트의 흐름으로부터 획득된 도 9b에 있는 실선(940)은 "차로"를 나타내며, "차로"는 차량이 한 줄로 정해진 부분을 통행하도록 구분되는 차도를 말하는 것이다. 한편, 도 9b와 같이 차로 영역이 생기면, 추가로 차선 영역을 생성할 수도 있다. 여기서, "차선"은 "차로"의 양 옆에 차량의 주행을 돕거나 제한하기 위해 일정 방향으로 그은 선이다. 차선 영역은 차로 영역이 생성되면 동일하게 생성할 수 있으므로 자세한 설명은 생략한다. A solid line 940 in FIG. 9B obtained from the flow of a high-speed moving object represents a “lane”, and the “lane” refers to a road divided so that vehicles pass through a predetermined part in one line. Meanwhile, when a lane area is created as shown in FIG. 9B , a lane area may be additionally created. Here, the "lane" is a line drawn in a certain direction to help or limit the driving of the vehicle on both sides of the "lane". Since the lane area can be generated identically when the lane area is created, a detailed description thereof will be omitted.

도 10a는 본 발명의 일 실시예에 따라 고속 이동 오브젝트의 이동 경로 중에서 고속 이동 오브젝트가 정지한 영역의 예를 나타내는 도면이다. 10A is a diagram illustrating an example of a region where a high-speed moving object stops in a moving path of the high-speed object according to an embodiment of the present invention.

도 10b는 본 발명의 일 실시예에 따라 고속 이동 오브젝트를 참조로 하여 차량정지선영역을 판단하고, 차량정지선영역의 예를 나타내는 도면이다. FIG. 10B is a diagram illustrating an example of a vehicle stop line area after determining a vehicle stop line area with reference to a high-speed moving object according to an embodiment of the present invention.

즉, 오브젝트 정보 중 오브젝트의 속도를 참조로 하여 차량으로 구분된 고속 이동 오브젝트가 정지하는 제1 특정 셀을 주행 셀 중에서 선택하고, 제1 특정 셀에서 제1 시간 동안 정지한 고속 이동 오브젝트의 개수의 카운트를 제1 특정 셀별로 증가시키고, 제1 특정 셀의 카운트가 제2 임계치 이상이면, 제1 특정 셀을 차량정지선영역으로 판단하는 것이다. That is, by referring to the speed of the object among the object information, a first specific cell in which a high-speed moving object classified as a vehicle stops is selected from driving cells, and the number of high-speed moving objects stopped in the first specific cell for the first time The count is increased for each first specific cell, and if the count of the first specific cell is equal to or greater than the second threshold, the first specific cell is determined to be a vehicle stop line area.

앞에서 설명한 차로 영역을 판단하는 것과 동일하게 차량정지선영역을 판단하는 것으로, 도 10a 및 도 10b를 참조하면, 보라색 박스는 차량정지선영역이다. The vehicle stop line area is determined in the same way as the previously described lane area is determined. Referring to FIGS. 10A and 10B , a purple box indicates a vehicle stop line area.

이미 차로 영역 및 차선 영역을 판단했고, 주행 셀에서 정해진 시간(가령, 5분 이내)에 정지하는 고속 이동 오브젝트의 개수를 카운트하여, 역시 셀별로 그 카운트를 증가시키고, 가령 제2 임계치가 80% 이상인 경우, 고속 이동 오브젝트가 정지한 카운트가 80% 이상인 주행 셀 중 특정 셀을 차량정지선영역으로 판단하는 것이다. The lane area and the lane area have already been determined, and the number of high-speed moving objects stopping within a set time (eg, within 5 minutes) is counted in the driving cell, and the count is also increased for each cell, for example, the second threshold is 80% In the above case, it is determined that a specific cell among driving cells in which the count of the high-speed moving object stopped is 80% or more as the vehicle stop line area.

차로 영역(940), 차선 영역(950), 차량정지선영역(1010)으로 판단된 부분을 매칭하면 도 10b와 같다. Matching the parts determined as the lane area 940, the lane area 950, and the vehicle stop line area 1010 is as shown in FIG. 10B.

도 11a는 본 발명의 일 실시예에 따라 저속 이동 오브젝트의 이동 경로의 예를 나타내는 도면이다. 11A is a diagram illustrating an example of a movement path of a slow-moving object according to an embodiment of the present invention.

도 11b는 본 발명의 일 실시예에 따라 저속 이동 오브젝트를 참조로 하여 보행자횡단보도대기영역 및 보행자횡단보도보행영역을 판단하고, 보행자횡단보도대기영역 및 보행자횡단보도보행영역의 예를 나타내는 도면이다.11B is a diagram illustrating an example of a pedestrian crosswalk waiting area and a pedestrian crosswalk walking area by determining a pedestrian crosswalk waiting area and a pedestrian crosswalk walking area with reference to a slow-moving object according to an embodiment of the present invention. .

즉, 오브젝트 정보 중 오브젝트의 속도를 참조로 하여 보행자로 구분된 저속 이동 오브젝트가 정지하는 제2 특정 셀을 주행 셀 이외의 셀 중에서 선택하고, 제2 특정 셀에서 제2 시간 동안 정지한 상기 저속 이동 오브젝트의 개수의 카운트를 제2 특정 셀별로 증가시키고, 제2 특정 셀의 카운트가 제3 임계치 이상이면, 제2 특정 셀을 보행자횡단보도대기영역으로 판단하는 것이다.That is, by referring to the speed of the object among object information, a second specific cell in which a low-speed moving object classified as a pedestrian stops is selected from cells other than the traveling cell, and the low-speed movement stopped in the second specific cell for a second time The count of the number of objects is increased for each second specific cell, and if the count of the second specific cell is greater than or equal to a third threshold, the second specific cell is determined as a pedestrian crosswalk waiting area.

도 11a 및 도 11b를 참조하면, 앞에서 차로 영역(940) 및 차량정지선영역(1010)을 판단하는 것과 동일하게, 이번에는 저속 이동 오브젝트의 이동 경로를 판단하여 저속 이동 오브젝트가 정해진 시간(가령, 3분 이내)에 정지하는 셀을 카운트하여, 역시 셀별로 그 카운트를 증가시키고 가령 제3 임계치가 50% 이상인 경우, 저속 이동 오브젝트가 주행 셀이 아닌 셀 중에서 정지한 카운트가 50% 이상인 특정 셀을 보행자횡단보도대기영역(1110)으로 판단하는 것이다. Referring to FIGS. 11A and 11B , in the same way as determining the lane area 940 and the vehicle stop line area 1010 in the previous section, the moving path of the low-speed object is determined this time, and the low-speed object moves at a predetermined time (e.g., 3 minutes), the count is also increased for each cell, and for example, if the third threshold is 50% or more, a specific cell in which the stopped count is 50% or more among cells in which the slow-moving object is not a traveling cell is designated as a pedestrian. It is determined by the crosswalk waiting area 1110.

또한, 앞에서 언급한 차로 영역(940), 차선 영역(950), 차량정지선영역(1010), 및 보행자횡단보도대기영역(1110) 중 적어도 일부를 참조로 하여, 보행자횡단보도보행영역(1120)을 추가로 판단할 수도 있다. In addition, with reference to at least a part of the aforementioned lane area 940, lane area 950, vehicle stop line area 1010, and pedestrian crosswalk waiting area 1110, the pedestrian crosswalk walking area 1120 Additional judgments may be made.

한편, 앞에서 언급한 오브젝트 정보에는 아래와 같은 정보를 더 포함할 수도 있다. Meanwhile, the above-mentioned object information may further include the following information.

이는, Max X(라이다 설치 지점을 기준으로 오브젝트를 구성하는 포인트의 X 좌표의 최대값), Max Y(라이다 설치 지점을 기준으로 오브젝트를 구성하는 포인트의 Y 좌표의 최대값), Min X(라이다 설치 지점을 기준으로 오브젝트를 구성하는 포인트의 X 좌표의 최소값), Min Y(라이다 설치 지점을 기준으로 오브젝트를 구성하는 포인트의 Y 좌표의 최소값), MinMax Box Size(X 좌표의 최소값, Y 좌표의 최소값, X 좌표의 최대값, Y 좌표의 최대값을 이용하여 만든 박스의 사이즈), Relative Vx(라이다를 기준으로 오브젝트의 X축 상대 속도), Relative Vy(라이다를 기준으로 오브젝트의 Y축 상대 속도), Absolute Vx(라이다를 기준으로 오브젝트의 X축 절대 속도), Absolute Vy(라이다를 기준으로 오브젝트의 Y축 절대 속도) 등이며, 이러한 오브젝트 정보를 추가로 이용하여 정밀 지도를 생성할 수 있다. 위와 같은 오브젝트 정보는 이에 한정하는 것은 아니며 이와 유사한 것을 상정할 수도 있다. These are Max X (maximum value of the X coordinate of the point constituting the object based on the lidar installation point), Max Y (maximum value of the Y coordinate of the point constituting the object based on the lidar installation point), Min X (minimum value of the X coordinate of the point constituting the object based on the lidar installation point), Min Y (minimum value of the Y coordinate of the point constituting the object based on the lidar installation point), MinMax Box Size (minimum value of the X coordinate , the size of the box created using the minimum value of the Y coordinate, the maximum value of the X coordinate, and the maximum value of the Y coordinate), Relative Vx (relative speed of the X axis of the object relative to the lidar), Relative Vy (based on the lidar) Y-axis relative velocity of the object), Absolute Vx (X-axis absolute velocity of the object based on the lidar), Absolute Vy (Y-axis absolute velocity of the object based on the lidar), etc. You can create precise maps. The above object information is not limited to this, and similar things may be assumed.

또한, 이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magnetooptical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.In addition, the embodiments according to the present invention described above may be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer readable recording medium. The computer readable recording medium may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on the computer-readable recording medium may be specially designed and configured for the present invention, or may be known and usable to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, and magnetooptical media such as floptical disks. , and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include high-level language codes that can be executed by a computer using an interpreter or the like as well as machine language codes such as those produced by a compiler. The hardware device may be configured to act as one or more software modules to perform processing according to the present invention and vice versa.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.In the above, the present invention has been described by specific details such as specific components and limited embodiments and drawings, but these are provided to help a more general understanding of the present invention, and the present invention is not limited to the above embodiments. , Those skilled in the art to which the present invention pertains may seek various modifications and variations from these descriptions.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.Therefore, the spirit of the present invention should not be limited to the above-described embodiments, and not only the claims described later, but also all modifications equivalent or equivalent to these claims belong to the scope of the spirit of the present invention. will do it

Claims (24)

고정된 라이다를 이용하여 정밀 지도를 생성하는 방법에 있어서,
(a) 서버가, 특정 라이다 데이터로부터 오브젝트 정보를 획득하는 단계;
(b) 상기 서버가, 연속된 복수의 프레임 내에 포함되는 상기 오브젝트 정보 중 오브젝트 ID 를 참조로 하여, 상기 오브젝트 ID가 동일한 것끼리 분류하고, 상기 오브젝트 ID별로 이동 경로를 저장하는 단계; 및
(c) 상기 서버가, 상기 오브젝트 ID별로 저장된 각각의 이동 경로를 참조로 하여, 상기 정밀 지도를 생성하는 단계;
를 포함하는 방법.
In the method of generating a precise map using a fixed lidar,
(a) obtaining, by the server, object information from specific lidar data;
(b) classifying, by the server, objects having the same object ID with reference to object IDs among the object information included in a plurality of consecutive frames, and storing a moving path for each object ID; and
(c) generating, by the server, the precise map with reference to each moving path stored for each object ID;
How to include.
제1항에 있어서,
상기 (a) 단계에서,
상기 서버가, 상기 오브젝트 정보에 포함된 각각의 오브젝트의 속도, 크기, 높이 데이터 중 적어도 일부를 참조로 하여 차량 및 보행자 중 어느 하나로 구분하고,
상기 (b) 단계에서,
상기 서버가, 상기 차량으로 구분된 고속 이동 오브젝트 ID 에 대한 이동 경로를 저장하고,
상기 (c) 단계에서,
상기 서버가, 상기 고속 이동 오브젝트 ID 에 대응되는 고속 이동 오브젝트가 지나온 이동 경로를 그리드 맵의 복수의 주행 셀과 매칭하여 상기 주행 셀 각각을 지나간 상기 고속 이동 오브젝트의 개수의 카운트를 상기 주행 셀별로 증가시키고, 상기 주행 셀의 카운트가 제1 임계치 이상이면, 상기 주행 셀을 차로 영역으로 판단하는 것을 특징으로 하는 방법.
According to claim 1,
In step (a),
The server distinguishes between a vehicle and a pedestrian by referring to at least a portion of the speed, size, and height data of each object included in the object information,
In step (b),
The server stores a movement path for the high-speed moving object ID classified as the vehicle,
In step (c),
The server matches a movement path passed by a high-speed moving object corresponding to the high-speed object ID with a plurality of driving cells of a grid map, and increases a count of the number of the high-speed moving objects that have passed each of the driving cells for each driving cell. and if the count of the driving cells is equal to or greater than a first threshold, determining the driving cells as a lane area.
제2항에 있어서,
상기 (c) 단계에서,
상기 서버가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 차량으로 구분된 상기 고속 이동 오브젝트가 정지하는 제1 특정 셀을 상기 주행 셀 중에서 선택하고, 상기 제1 특정 셀에서 제1 시간 동안 정지한 상기 고속 이동 오브젝트의 개수의 카운트를 상기 제1 특정 셀별로 증가시키고, 상기 제1 특정 셀의 카운트가 제2 임계치 이상이면, 상기 제1 특정 셀을 차량정지선영역으로 판단하는 것을 특징으로 하는 방법.
According to claim 2,
In step (c),
The server selects, among the driving cells, a first specific cell in which the high-speed moving object classified as a vehicle stops with reference to the speed of the object in the object information, and in the first specific cell for a first time A count of the number of stopped high-speed moving objects is increased for each first specific cell, and if the count of the first specific cell is equal to or greater than a second threshold, the first specific cell is determined as a vehicle stop line area. method.
제3항에 있어서,
상기 (b) 단계에서,
상기 서버가, 상기 보행자로 구분된 저속 이동 오브젝트 ID에 대한 이동 경로를 저장하고,
상기 (c) 단계에서,
상기 서버가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 보행자로 구분된 상기 저속 이동 오브젝트가 정지하는 제2 특정 셀을 상기 주행 셀 이외의 셀 중에서 선택하고, 상기 제2 특정 셀에서 제2 시간 동안 정지한 상기 저속 이동 오브젝트의 개수의 카운트를 상기 제2 특정 셀별로 증가시키고, 상기 제2 특정 셀의 카운트가 제3 임계치 이상이면, 상기 제2 특정 셀을 보행자횡단보도대기영역으로 판단하는 것을 특징으로 하는 방법.
According to claim 3,
In step (b),
The server stores a moving path for the slow-moving object ID classified as the pedestrian,
In step (c),
The server selects a second specific cell in which the slow-moving object classified as a pedestrian stops, among cells other than the traveling cell, with reference to the speed of the object among the object information, and selects a second specific cell in the second specific cell The count of the number of slow moving objects stopped for 2 hours is increased for each second specific cell, and if the count of the second specific cell is equal to or greater than a third threshold, the second specific cell is determined as a pedestrian crosswalk waiting area A method characterized by doing.
제4항에 있어서,
상기 (c) 단계에서,
상기 서버는, 상기 차로 영역, 상기 차량정지선영역, 및 상기 보행자횡단보도대기영역 중 적어도 일부를 참조로 하여, 보행자횡단보도보행영역을 추가로 판단하는 것을 특징으로 하는 방법.
According to claim 4,
In step (c),
The method of claim 1 , wherein the server additionally determines a pedestrian crosswalk walking area by referring to at least a part of the lane area, the vehicle stop line area, and the pedestrian crosswalk waiting area.
제1항에 있어서,
상기 (a) 단계 이전에,
(a01) 초기 라이다 데이터가 획득되면, 상기 서버가, 기설정된 기준에 따른 필터링을 수행하여 상기 초기 라이다 데이터 중에서 고정 오브젝트에 대응되는 고정 라이다 데이터를 분류하는 단계; 및
(a02) 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하여 잔여 라이다 데이터를 상기 특정 라이다 데이터로서 획득하는 단계;
를 더 포함하는 방법.
According to claim 1,
Before step (a),
(a01) classifying, by the server, fixed lidar data corresponding to a fixed object from among the initial lidar data by performing filtering according to a predetermined criterion when initial lidar data is acquired; and
(a02) obtaining residual lidar data as the specific lidar data by removing the fixed lidar data from the initial lidar data;
How to include more.
제6항에 있어서,
상기 (a01) 단계에서,
상기 서버가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터가 검출되는 수를 카운팅하고, 상기 셀들 중 카운팅된 수가 임계치 이상인 제3 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 방법.
According to claim 6,
In step (a01),
The server divides the area covered by the lidar into a virtual 3D grid area, counts the number of times the initial lidar data is detected for each cell in the grid area during at least one observation frame, And determining the initial lidar data detected in third specific cells in which the counted number of the cells is equal to or greater than a threshold value as the fixed lidar data.
제6항에 있어서,
상기 (a01) 단계에서,
상기 서버가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터의 관측 포인트 데이터 수를 카운팅하고 상기 각각의 셀의 기설정된 평균 포인트 데이터 수와 비교하여, 상기 관측 포인트 데이터 수와 상기 평균 포인트 데이터 수와의 차이의 비율이 임계비율 이하인 제4 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 방법.
According to claim 6,
In step (a01),
The server divides the area covered by the lidar into a virtual three-dimensional grid area, and counts the number of observation point data of the initial lidar data for each cell in the grid area during at least one observation frame, Compared with the preset average number of point data of each cell, the initial lidar data detected in the fourth specific cells in which the ratio of the difference between the number of observation point data and the average number of point data is equal to or less than a threshold ratio is fixed. A method characterized by judging by LiDAR data.
제6항에 있어서,
상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하기 전에 상기 고정 라이다 데이터를 판단함에 있어서,
상기 (a01) 단계 이전에,
상기 서버가, 상기 초기 라이다 데이터로부터 획득되는 적어도 하나의 참조 프레임의 교통량을 획득하고, 상기 교통량이 기설정된 수치 이하인 것으로 판단되면 상기 참조 프레임에 대응되는 참조 로깅 데이터를 기록하며,
상기 (a01) 단계에서,
상기 서버가, 상기 참조 프레임보다 시간적으로 후행하는 적어도 하나의 관측 프레임 동안 상기 참조 로깅 데이터를 이용하여 상기 관측 프레임 동안의 상기 초기 라이다 데이터에 포함된 상기 고정 라이다 데이터를 판단하는 것을 특징으로 하는 방법.
According to claim 6,
In determining the fixed lidar data before removing the fixed lidar data from the initial lidar data,
Before the step (a01),
The server obtains the traffic volume of at least one reference frame obtained from the initial lidar data, and records reference logging data corresponding to the reference frame when it is determined that the traffic volume is equal to or less than a predetermined value,
In step (a01),
Characterized in that the server determines the fixed lidar data included in the initial lidar data during the observation frame using the reference logging data for at least one observation frame temporally following the reference frame method.
제1항에 있어서,
상기 (b) 단계에서,
상기 오브젝트 ID 각각에는 오브젝트 에이지(Object Age) 각각이 매칭되어 있고, 상기 오브젝트 에이지 값이 높을수록 긴 시간 동안 상기 이동 경로를 트래킹한 것이며,
상기 서버는, (i) 상기 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹되지 않은 제1 특정 오브젝트 ID가 제t 프레임에서 트래킹되는 경우, 상기 제t 프레임에서 상기 제1 특정 오브젝트 ID의 제1 특정 오브젝트 에이지 값을 초기치로 생성하고, (ii) 상기 제(t-1) 프레임에서 트래킹된 제2 특정 오브젝트 ID가 상기 제t프레임에서도 트래킹되는 경우, 상기 제t 프레임에서 상기 제2 특정 오브젝트 ID의 제2 특정 오브젝트 에이지 값은 상기 제(t-1) 프레임에서의 상기 제2 특정 오브젝트 에이지 값보다 크게 증가시키고, (iii) 상기 연속된 복수의 프레임 내에 포함되는 상기 제(t-1) 프레임에서 트래킹된 제3 특정 오브젝트 ID가 상기 제t 프레임에서 트래킹되지 않는 경우, 상기 제t 프레임에서 상기 제3 특정 오브젝트 ID의 제3 특정 오브젝트 에이지 값을 삭제하며, (iv) 상기 제3 특정 오브젝트 에이지 값이 삭제된 경우에는 상기 제t 프레임으로부터 기설정된 기간의 프레임 동안 상기 제3 특정 오브젝트 ID를 사용하지 못하도록 설정하고,
상기 (c) 단계에서,
상기 서버는, 상기 각각의 오브젝트 ID에 포함된 상기 각각의 오브젝트 에이지 값을 상기 각각의 이동 경로와 맵핑하여 상기 정밀 지도를 생성하는 것을 특징으로 하는 방법.
According to claim 1,
In step (b),
Each object age is matched with each of the object IDs, and the higher the value of the object age, the longer the moving path is tracked.
The server, (i) when a first specific object ID that is not tracked in the (t-1)th frame included in the plurality of consecutive frames is tracked in the tth frame, the first specific object ID in the tth frame A first specific object age value of the object ID is generated as an initial value, and (ii) when the second specific object ID tracked in the (t-1)th frame is also tracked in the tth frame, the The second specific object age value of the second specific object ID is increased more than the second specific object age value in the (t-1)th frame, and (iii) the th ( t-1) when the third specific object ID tracked in the frame is not tracked in the t th frame, deleting the third specific object age value of the third specific object ID in the t th frame; (iv) the When the third specific object age value is deleted, setting the third specific object ID not to be used during a frame of a predetermined period from the t th frame;
In step (c),
The method of claim 1 , wherein the server generates the precise map by mapping each object age value included in each object ID with each movement path.
제1항에 있어서,
상기 (b) 단계에서,
상기 서버는,
상기 오브젝트를 구성하는 포인트들의 XY 좌표의 평균값을 참조로 하여, 상기 오브젝트의 상기 이동 경로를 저장하는 것을 특징으로 하는 방법.
According to claim 1,
In step (b),
The server,
and storing the movement path of the object with reference to an average value of XY coordinates of points constituting the object.
제11항에 있어서,
상기 서버는,
다항 회귀(Polynomial Fitting) 알고리즘을 이용하여 상기 이동 경로를 보정하는 것을 특징으로 하는 방법.
According to claim 11,
The server,
A method characterized in that for correcting the movement path using a polynomial regression (Polynomial Fitting) algorithm.
고정된 라이다를 이용하여 정밀 지도를 생성하는 서버에 있어서,
인스트럭션들을 저장하는 적어도 하나의 메모리; 및
상기 인스트럭션들을 실행하기 위해 구성된 적어도 하나의 프로세서;를 포함하되,
상기 프로세서는, (I) 특정 라이다 데이터로부터 오브젝트 정보를 획득하는 프로세스; (II) 연속된 복수의 프레임 내에 포함되는 상기 오브젝트 정보 중 오브젝트 ID 를 참조로 하여, 상기 오브젝트 ID가 동일한 것끼리 분류하고, 상기 오브젝트 ID별로 이동 경로를 저장하는 프로세스; 및 (III) 상기 오브젝트 ID별로 저장된 각각의 이동 경로를 참조로 하여, 상기 정밀 지도를 생성하는 프로세스;를 수행하는 서버.
In a server that generates a precise map using a fixed lidar,
at least one memory for storing instructions; and
at least one processor configured to execute the instructions;
The processor may include (I) a process of obtaining object information from specific lidar data; (II) a process of classifying objects having the same object ID with reference to object IDs among the object information included in a plurality of consecutive frames, and storing a moving path for each object ID; and (III) a process of generating the precise map with reference to each movement path stored for each object ID.
제13항에 있어서,
상기 (I) 프로세스에서,
상기 프로세서가, 상기 오브젝트 정보에 포함된 각각의 오브젝트의 속도, 크기, 높이 데이터 중 적어도 일부를 참조로 하여 차량 및 보행자 중 어느 하나로 구분하고,
상기 (II) 프로세스에서,
상기 프로세서가, 상기 차량으로 구분된 고속 이동 오브젝트 ID 에 대한 이동 경로를 저장하고,
상기 (III) 프로세스에서,
상기 프로세서가, 상기 고속 이동 오브젝트 ID 에 대응되는 고속 이동 오브젝트가 지나온 이동 경로를 그리드 맵의 복수의 주행 셀과 매칭하여 상기 주행 셀 각각을 지나간 상기 고속 이동 오브젝트의 개수의 카운트를 상기 주행 셀별로 증가시키고, 상기 주행 셀의 카운트가 제1 임계치 이상이면, 상기 주행 셀을 차로 영역으로 판단하는 것을 특징으로 하는 서버.
According to claim 13,
In the above (I) process,
The processor distinguishes between a vehicle and a pedestrian by referring to at least a portion of speed, size, and height data of each object included in the object information,
In the above (II) process,
The processor stores a moving path for the high-speed moving object ID identified as the vehicle;
In the above (III) process,
The processor matches a movement path along which the high-speed moving object corresponding to the high-speed object ID has passed with a plurality of driving cells of a grid map, and increases a count of the number of the fast-moving objects that have passed each of the driving cells for each driving cell. and if the count of the driving cells is greater than or equal to a first threshold, determining the driving cell as a lane area.
제14항에 있어서,
상기 (III) 프로세스에서,
상기 프로세서가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 차량으로 구분된 상기 고속 이동 오브젝트가 정지하는 제1 특정 셀을 상기 주행 셀 중에서 선택하고, 상기 제1 특정 셀에서 제1 시간 동안 정지한 상기 고속 이동 오브젝트의 개수의 카운트를 상기 제1 특정 셀별로 증가시키고, 상기 제1 특정 셀의 카운트가 제2 임계치 이상이면, 상기 제1 특정 셀을 차량정지선영역으로 판단하는 것을 특징으로 하는 서버.
According to claim 14,
In the above (III) process,
The processor selects, among the driving cells, a first specific cell in which the high-speed moving object classified as the vehicle stops with reference to the speed of the object in the object information, and in the first specific cell for a first time A count of the number of stopped high-speed moving objects is increased for each first specific cell, and if the count of the first specific cell is equal to or greater than a second threshold, the first specific cell is determined as a vehicle stop line area. server.
제15항에 있어서,
상기 (II) 프로세스에서,
상기 프로세서가, 상기 보행자로 구분된 저속 이동 오브젝트 ID에 대한 이동 경로를 저장하고,
상기 (III) 프로세스에서,
상기 프로세서가, 상기 오브젝트 정보 중 상기 오브젝트의 속도를 참조로 하여 상기 보행자로 구분된 상기 저속 이동 오브젝트가 정지하는 제2 특정 셀을 상기 주행 셀 이외의 셀 중에서 선택하고, 상기 제2 특정 셀에서 제2 시간 동안 정지한 상기 저속 이동 오브젝트의 개수의 카운트를 상기 제2 특정 셀별로 증가시키고, 상기 제2 특정 셀의 카운트가 제3 임계치 이상이면, 상기 제2 특정 셀을 보행자횡단보도대기영역으로 판단하는 것을 특징으로 하는 서버.
According to claim 15,
In the above (II) process,
The processor stores a movement path for the slow-moving object ID classified as the pedestrian,
In the above (III) process,
The processor selects a second specific cell in which the slow-moving object classified as a pedestrian stops from among cells other than the traveling cell with reference to the speed of the object among the object information, and selects a second specific cell from the second specific cell. The count of the number of slow moving objects stopped for 2 hours is increased for each second specific cell, and if the count of the second specific cell is equal to or greater than a third threshold, the second specific cell is determined as a pedestrian crosswalk waiting area A server characterized by doing.
제16항에 있어서,
상기 (III) 프로세스에서,
상기 프로세서는, 상기 차로 영역, 상기 차량정지선영역, 및 상기 보행자횡단보도대기영역 중 적어도 일부를 참조로 하여, 보행자횡단보도보행영역을 추가로 판단하는 것을 특징으로 하는 서버.
According to claim 16,
In the above (III) process,
The server, characterized in that the processor further determines a pedestrian crosswalk walking area by referring to at least a part of the lane area, the vehicle stop line area, and the pedestrian crosswalk waiting area.
제13항에 있어서,
상기 (I) 프로세스 이전에,
(I01) 초기 라이다 데이터가 획득되면, 상기 프로세서가, 기설정된 기준에 따른 필터링을 수행하여 상기 초기 라이다 데이터 중에서 고정 오브젝트에 대응되는 고정 라이다 데이터를 분류하는 프로세스; 및
(I02) 상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하여 잔여 라이다 데이터를 상기 특정 라이다 데이터로서 획득하는 프로세스;
를 더 수행하는 서버.
According to claim 13,
Prior to the (I) process,
(I01) a process of classifying, by the processor, fixed lidar data corresponding to a fixed object from among the initial lidar data by performing filtering according to a predetermined criterion when initial lidar data is acquired; and
(I02) a process of removing the fixed lidar data from the initial lidar data to obtain residual lidar data as the specific lidar data;
A server that does more.
제18항에 있어서,
상기 (I01) 프로세스에서,
상기 프로세서가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터가 검출되는 수를 카운팅하고, 상기 셀들 중 카운팅된 수가 임계치 이상인 제3 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 서버.
According to claim 18,
In the above (I01) process,
The processor divides the area covered by the lidar into a virtual 3D grid area, counts the number of times the initial lidar data is detected for each cell in the grid area during at least one observation frame, The server, characterized in that for determining the initial lidar data detected in third specific cells in which the counted number of the cells is equal to or greater than a threshold value as the fixed lidar data.
제18항에 있어서,
상기 (I01) 프로세스에서,
상기 프로세서가, 상기 라이다에 의해 커버되는 영역을 가상의 3차원 그리드 영역으로 구분하고, 적어도 하나의 관측 프레임 동안 상기 그리드 영역 내의 각각의 셀별로 상기 초기 라이다 데이터의 관측 포인트 데이터 수를 카운팅하고 상기 각각의 셀의 기설정된 평균 포인트 데이터 수와 비교하여, 상기 관측 포인트 데이터 수와 상기 평균 포인트 데이터 수와의 차이의 비율이 임계비율 이하인 제4 특정 셀들에서 검출되는 상기 초기 라이다 데이터를 상기 고정 라이다 데이터로 판단하는 것을 특징으로 하는 서버.
According to claim 18,
In the above (I01) process,
The processor divides the area covered by the lidar into a virtual three-dimensional grid area, counts the number of observation point data of the initial lidar data for each cell in the grid area during at least one observation frame, Compared with the preset average number of point data of each cell, the initial lidar data detected in the fourth specific cells in which the ratio of the difference between the number of observation point data and the average number of point data is equal to or less than a threshold ratio is fixed. A server characterized in that it is judged by lidar data.
제18항에 있어서,
상기 초기 라이다 데이터로부터 상기 고정 라이다 데이터를 제거하기 전에 상기 고정 라이다 데이터를 판단함에 있어서,
상기 (I01) 프로세스 이전에,
상기 프로세서가, 상기 초기 라이다 데이터로부터 획득되는 적어도 하나의 참조 프레임의 교통량을 획득하고, 상기 교통량이 기설정된 수치 이하인 것으로 판단되면 상기 참조 프레임에 대응되는 참조 로깅 데이터를 기록하며,
상기 (I01) 프로세스에서,
상기 프로세서가, 상기 참조 프레임보다 시간적으로 후행하는 적어도 하나의 관측 프레임 동안 상기 참조 로깅 데이터를 이용하여 상기 관측 프레임 동안의 상기 초기 라이다 데이터에 포함된 상기 고정 라이다 데이터를 판단하는 것을 특징으로 하는 서버.
According to claim 18,
In determining the fixed lidar data before removing the fixed lidar data from the initial lidar data,
Before the (I01) process,
The processor obtains the traffic volume of at least one reference frame obtained from the initial lidar data, and records reference logging data corresponding to the reference frame when it is determined that the traffic volume is equal to or less than a predetermined value,
In the above (I01) process,
Characterized in that the processor determines the fixed lidar data included in the initial lidar data during the observation frame using the reference logging data for at least one observation frame temporally following the reference frame server.
제13항에 있어서,
상기 (II) 프로세스에서,
상기 오브젝트 ID 각각에는 오브젝트 에이지(Object Age) 각각이 매칭되어 있고, 상기 오브젝트 에이지 값이 높을수록 긴 시간 동안 상기 이동 경로를 트래킹한 것이며,
상기 프로세서는, (i) 상기 연속된 복수의 프레임 내에 포함되는 제(t-1) 프레임에서 트래킹되지 않은 제1 특정 오브젝트 ID가 제t 프레임에서 트래킹되는 경우, 상기 제t 프레임에서 상기 제1 특정 오브젝트 ID의 제1 특정 오브젝트 에이지 값을 초기치로 생성하고, (ii) 상기 제(t-1) 프레임에서 트래킹된 제2 특정 오브젝트 ID가 상기 제t프레임에서도 트래킹되는 경우, 상기 제t 프레임에서 상기 제2 특정 오브젝트 ID의 제2 특정 오브젝트 에이지 값은 상기 제(t-1) 프레임에서의 상기 제2 특정 오브젝트 에이지 값보다 크게 증가시키고, (iii) 상기 연속된 복수의 프레임 내에 포함되는 상기 제(t-1) 프레임에서 트래킹된 제3 특정 오브젝트 ID가 상기 제t 프레임에서 트래킹되지 않는 경우, 상기 제t 프레임에서 상기 제3 특정 오브젝트 ID의 제3 특정 오브젝트 에이지 값을 삭제하며, (iv) 상기 제3 특정 오브젝트 에이지 값이 삭제된 경우에는 상기 제t 프레임으로부터 기설정된 기간의 프레임 동안 상기 제3 특정 오브젝트 ID를 사용하지 못하도록 설정하고,
상기 (III) 프로세스에서,
상기 프로세서는, 상기 각각의 오브젝트 ID에 포함된 상기 각각의 오브젝트 에이지 값을 상기 각각의 이동 경로와 맵핑하여 상기 정밀 지도를 생성하는 것을 특징으로 하는 서버.
According to claim 13,
In the above (II) process,
Each object age is matched with each of the object IDs, and the higher the value of the object age, the longer the moving path is tracked.
The processor may (i) when a first specific object ID that is not tracked in the (t-1)th frame included in the plurality of consecutive frames is tracked in the tth frame, the first specific object ID in the tth frame A first specific object age value of the object ID is generated as an initial value, and (ii) when the second specific object ID tracked in the (t-1)th frame is also tracked in the tth frame, the The second specific object age value of the second specific object ID is increased more than the second specific object age value in the (t-1)th frame, and (iii) the th ( t-1) when the third specific object ID tracked in the frame is not tracked in the t th frame, deleting the third specific object age value of the third specific object ID in the t th frame; (iv) the When the third specific object age value is deleted, setting the third specific object ID not to be used during a frame of a predetermined period from the t th frame;
In the above (III) process,
wherein the processor generates the precise map by mapping each of the object age values included in each of the object IDs with each of the moving paths.
제13항에 있어서,
상기 (II) 프로세스에서,
상기 프로세서는,
상기 오브젝트를 구성하는 포인트들의 XY 좌표의 평균값을 참조로 하여, 상기 오브젝트의 상기 이동 경로를 저장하는 것을 특징으로 하는 서버.
According to claim 13,
In the above (II) process,
the processor,
and storing the movement path of the object with reference to an average value of XY coordinates of points constituting the object.
제23항에 있어서,
상기 프로세서는,
다항 회귀(Polynomial Fitting) 알고리즘을 이용하여 상기 이동 경로를 보정하는 것을 특징으로 하는 서버.
According to claim 23,
the processor,
The server, characterized in that for correcting the movement path using a polynomial fitting algorithm.
KR1020210125246A 2021-09-17 2021-09-17 Method for generating high definition map by using fixed lidar and server using the same KR20230041518A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210125246A KR20230041518A (en) 2021-09-17 2021-09-17 Method for generating high definition map by using fixed lidar and server using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210125246A KR20230041518A (en) 2021-09-17 2021-09-17 Method for generating high definition map by using fixed lidar and server using the same

Publications (1)

Publication Number Publication Date
KR20230041518A true KR20230041518A (en) 2023-03-24

Family

ID=85872700

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210125246A KR20230041518A (en) 2021-09-17 2021-09-17 Method for generating high definition map by using fixed lidar and server using the same

Country Status (1)

Country Link
KR (1) KR20230041518A (en)

Similar Documents

Publication Publication Date Title
WO2018068653A1 (en) Point cloud data processing method and apparatus, and storage medium
US9870512B2 (en) Lidar-based classification of object movement
CN109521757B (en) Static obstacle identification method and device
JP2021523443A (en) Association of lidar data and image data
CN112526993B (en) Grid map updating method, device, robot and storage medium
CN113228040A (en) Multi-level object heading estimation
CN110674705A (en) Small-sized obstacle detection method and device based on multi-line laser radar
CN116685874A (en) Camera-laser radar fusion object detection system and method
RU2744012C1 (en) Methods and systems for automated determination of objects presence
CN112613424A (en) Rail obstacle detection method, rail obstacle detection device, electronic apparatus, and storage medium
US20230126901A1 (en) Method, apparatus, server, and computer program for collision accident prevention
US20230400859A1 (en) Predicting Jaywaking Behaviors of Vulnerable Road Users
JP2021082286A (en) System and method for improving lane change detection, and non-temporary computer-readable medium
US20220171975A1 (en) Method for Determining a Semantic Free Space
CN113008296A (en) Method and vehicle control unit for detecting a vehicle environment by fusing sensor data on a point cloud plane
Avşar et al. Moving vehicle detection and tracking at roundabouts using deep learning with trajectory union
CN115240154A (en) Method, device, equipment and medium for extracting point cloud features of parking lot
Dey et al. Robust perception architecture design for automotive cyber-physical systems
KR20230041518A (en) Method for generating high definition map by using fixed lidar and server using the same
KR102640491B1 (en) Method for detectting status of crossroads by using fixed lidar and server using the same
CN116863325A (en) Method for multiple target detection and related product
CN111886167A (en) Autonomous vehicle control via collision risk map
KR20230041515A (en) Method for recognizing moving objects by using lidar and server using the same
CN114067552A (en) Pedestrian crossing track tracking and predicting method based on roadside laser radar
Klette et al. Vision-based driver assistance systems

Legal Events

Date Code Title Description
E902 Notification of reason for refusal