KR20180124713A - An electronic device and method thereof for estimating shape of road - Google Patents
An electronic device and method thereof for estimating shape of road Download PDFInfo
- Publication number
- KR20180124713A KR20180124713A KR1020180029920A KR20180029920A KR20180124713A KR 20180124713 A KR20180124713 A KR 20180124713A KR 1020180029920 A KR1020180029920 A KR 1020180029920A KR 20180029920 A KR20180029920 A KR 20180029920A KR 20180124713 A KR20180124713 A KR 20180124713A
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- objects
- estimating
- electronic device
- vector
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/06—Road conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
- B60W30/14—Adaptive cruise control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0001—Details of the control system
- B60W2050/0002—Automatic control, details of type of controller or control system architecture
- B60W2050/0004—In digital systems, e.g. discrete-time systems involving sampling
- B60W2050/0005—Processor details or data handling, e.g. memory registers or chip architecture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/06—Direction of travel
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/10—Longitudinal speed
-
- B60W2550/10—
-
- B60W2550/14—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/20—Static objects
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4041—Position
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
- B60Y2300/00—Purposes or special features of road vehicle drive control systems
- B60Y2300/14—Cruise control
Abstract
Description
도로의 형상을 추정하는 전자 장치 및 그 동작 방법에 관한 것으로서, 더욱 상세하게는 주행 중인 차량에 포함되어 차량 주변 도로의 형상을 추정하는 전자 장치 및 그 동작 방법에 관한 것이다.The present invention relates to an electronic device for estimating the shape of a road and a method of operating the same. More particularly, the present invention relates to an electronic device included in a running vehicle and estimating the shape of a road around the vehicle, and an operation method thereof.
자율주행 차량에 대한 연구가 활발히 진행되고 있다. 자율 주행 차량은 하나 이상의 센서를 이용하여 주행 경로에 존재하는 물체들을 감지하고, 감지된 물체들을 회피하면서 사용자가 원하는 목적지까지 스스로 이동할 수 있는 차량을 의미한다. Research on autonomous vehicles is actively being carried out. An autonomous vehicle refers to a vehicle that uses one or more sensors to detect objects in a traveling path and can move to a desired destination while avoiding sensed objects.
자율주행을 위해서는 자율주행 차량의 주변 도로의 형상을 추정할 필요가 있다. 자율주행 차량은 별도의 센서를 이용하지 않고 자율주행 차량 내부에 설치된 조향 장치에서 요레이트(yaw rate)를 CAN 통신을 이용해 수신함으로써 자율주행 차량의 주행 방향을 추정할 수 있지만, 자율주행 차량 주변의 다른 물체들에 관한 정보를 활용하는 측면에서는 한계가 있었다.For autonomous driving, it is necessary to estimate the shape of the road around the autonomous vehicle. The autonomous vehicle can estimate the running direction of the autonomous driving vehicle by receiving the yaw rate using the CAN communication in the steering device provided in the autonomous driving vehicle without using a separate sensor, There was a limit in terms of utilizing information about other objects.
다양한 실시예들은, 주행 중인 차량에 포함되어 차량 주변 도로의 형상을 추정하는 전자 장치 및 그 동작 방법을 제공할 수 있다.Various embodiments can provide an electronic device included in a running vehicle to estimate the shape of a road around the vehicle and an operation method thereof.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 개시의 제1 측면은 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들에 기초하여, 상기 복수의 물체가 정지(stop) 상태인지를 판단하는 단계; 상기 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 산출하는 단계; 및 상기 산출된 평균 벡터를 이용하여 상기 차량의 주행 속도 및 주행 방향을 추정하는 단계; 및 상기 주행 속도, 상기 주행 방향, 및 상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 위치에 기초하여, 상기 도로의 형상을 추정하는 단계를 포함하는, 주행 중인 차량에 포함된 전자 장치가 도로의 형상을 추정하는 방법을 제공할 수 있다.As a technical means for achieving the above-mentioned technical object, a first aspect of the present disclosure is a vehicle control system for a vehicle, comprising: a plurality of objects stopping on the basis of relative velocity vectors of the plurality of objects, Determining whether the state is a state; Calculating an average vector of relative velocity vectors for each of at least one stationary object among the plurality of objects with respect to the vehicle; Estimating a traveling speed and a traveling direction of the vehicle using the calculated average vector; And estimating a shape of the road based on the traveling speed, the running direction, and the position of each of a plurality of objects located in the periphery of the vehicle with respect to the vehicle, Can provide a method of estimating the shape of the road.
또한, 본 개시의 제2 측면은, 센싱부; 적어도 하나의 프로그램이 저장되는 메모리; 외부 장치와 데이터를 송수신하는 통신부; 및 상기 적어도 하나의 프로그램을 실행함으로써 도로의 형상을 추정하는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로그램은, 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들에 기초하여, 상기 복수의 물체가 정지(stop) 상태인지를 판단하는 단계; 상기 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 산출하는 단계; 및 상기 산출된 평균 벡터를 이용하여 상기 차량의 주행 속도 및 주행 방향을 추정하는 단계; 및 상기 주행 속도, 상기 주행 방향, 및 상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 위치에 기초하여, 상기 도로의 형상을 추정하는 단계를 실행하는 명령어들을 더 포함하는 것을 특징으로 하는, 주행 중인 차량에 포함되어 도로의 형상을 추정하는 전자 장치를 제공할 수 있다.Also, a second aspect of the present disclosure is a sensing device comprising: a sensing unit; A memory in which at least one program is stored; A communication unit for transmitting and receiving data to and from an external device; And at least one processor for estimating the shape of the road by executing the at least one program, wherein the at least one program is based on at least one of relative speed vectors for each of a plurality of objects located around the vehicle, Determining whether the plurality of objects is in a stop state; Calculating an average vector of relative velocity vectors for each of at least one stationary object among the plurality of objects with respect to the vehicle; Estimating a traveling speed and a traveling direction of the vehicle using the calculated average vector; And estimating a shape of the road based on the running speed, the running direction, and the position of each of a plurality of objects located in the periphery of the vehicle with respect to the vehicle , And an electronic device included in the running vehicle to estimate the shape of the road can be provided.
또한, 본 개시의 제3 측면은, 제1 측면의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체를 제공할 수 있다. In addition, the third aspect of the present disclosure can provide a computer-readable recording medium on which a program for causing a computer to execute the method of the first aspect is recorded.
도 1은 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 방법을 설명하기 위한 개요도이다.
도 2는 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 도시하는 흐름도이다.
도 3은 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 구체화하여 도시한 흐름도이다.
도 4는 또 다른 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 구체화하여 도시한 흐름도이다.
도 5는 일 실시예에 따른 전자 장치가 차량의 주행 속도 및 주행 방향을 추정하는 과정을 설명하기 위한 도면이다.
도 6은 일 실시예에 따른 전자 장치가 획득한, 차량 주변의 물체에 관한 정보를 도시하는 도면이다.
도 7 및 도 8은 일부 실시예에 따른 전자 장치의 구성을 도시하는 블록도이다.1 is a schematic diagram for explaining a method of estimating a shape of a road by an electronic device according to an embodiment.
2 is a flowchart showing a process of estimating the shape of a road by an electronic device according to an embodiment.
FIG. 3 is a flowchart illustrating a process of estimating the shape of a road according to an embodiment of the present invention.
4 is a flow chart illustrating the process of estimating the shape of a road according to another embodiment of the present invention.
5 is a diagram for explaining a process of estimating a running speed and a running direction of a vehicle according to an embodiment of the present invention.
6 is a diagram showing information about an object around the vehicle, which is obtained by the electronic device according to the embodiment.
7 and 8 are block diagrams showing the configuration of an electronic device according to some embodiments.
아래에서는 첨부한 도면을 참조하여 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 실시예를 상세히 설명한다. 그러나 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, which will be readily apparent to those skilled in the art. However, the disclosure may be embodied in many different forms and is not limited to the embodiments described herein. In order to clearly illustrate the invention in the drawings, parts not related to the description are omitted, and like parts are denoted by like reference numerals throughout the specification.
명세서에서 사용된 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.The terms used in the specification may be used to describe various components, but the components should not be limited by terms. Terms are used only for the purpose of distinguishing one component from another.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 다른 부분과 “연결”되어 있다고 함은 어떤 부분이 다른 부분과 신호 송수신을 통해 데이터 통신을 수행할 수 있는 상태가 되어 있는 경우를 포함한다.Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only "directly connected" but also "electrically connected" with another part in between . Also, when a part is "connected" to another part, it includes a case where a part is in a state capable of performing data communication with another part and signal transmission / reception.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Also, when an element is referred to as " comprising ", it means that it can include other elements as well, without departing from the other elements unless specifically stated otherwise.
첨부된 도면은 발명의 일 실시예를 설명하기 위하여 개략적으로 도시될 수 있으며, 몇몇 치수는 보다 명확한 표현을 위해 과장될 수 있다. 이와 유사하게, 도면의 상당 부분은 임의로 표현될 수 있다.The accompanying drawings may be schematically illustrated to illustrate one embodiment of the invention, and some dimensions may be exaggerated for clarity. Similarly, a substantial portion of the figures may be expressed arbitrarily.
개시에서 사용되는 “모듈”이라는 용어는 용어가 사용된 문맥에 따라서 소프트웨어, 하드웨어 또는 그 조합을 포함할 수 있는 것으로 해석되어야 한다. 예를 들어, 소프트웨어는 기계어, 펌웨어(firmware), 임베디드 코드(embedded code), 및 애플리케이션 소프트웨어일 수 있다. 또 다른 예로, 하드웨어는 회로, 프로세서, 컴퓨터, 집적 회로, 집적 회로 코어, 센서, 멤스(MEMS; Micro-Electro-Mechanical System), 수동 디바이스, 또는 그 조합일 수 있다.The term " module " as used in the disclosure should be interpreted as including software, hardware, or a combination thereof, depending on the context in which the term is used. For example, the software may be machine language, firmware, embedded code, and application software. As another example, the hardware may be a circuit, a processor, a computer, an integrated circuit, an integrated circuit core, a sensor, a micro-electro-mechanical system (MEMS), a passive device, or a combination thereof.
개시에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 발명을 한정하려는 의도가 아니다. 개시에서 사용한 용어는 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나 이는 당 분야에 종사하는 기술자의 의도, 판례, 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terminology used in the description is used only to describe a specific embodiment and is not intended to limit the invention. Although the terminology used in the present invention selects general terms that are widely used in the present invention while considering the functions in the invention, it may vary depending on the intention of the artisan, the precedent, or the emergence of new technology. Also, in certain cases, there may be a term selected arbitrarily by the applicant, in which case the meaning thereof will be described in detail in the description of the corresponding invention. Therefore, the term used in the invention should be defined based on the meaning of the term, not on the name of a simple term, but on the entire contents of the invention.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expressions include plural expressions unless the context clearly dictates otherwise. In the present application, the terms "comprises" or "having" and the like are used to specify that there is a feature, a number, a step, an operation, an element, a component or a combination thereof described in the specification, But do not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.
개시에 기재된 실시예 및 첨부된 도면은 발명의 다양한 실시예 중 일부를 통해 발명을 설명하기 위한 것이며, 개시에 기재된 실시예 및 첨부된 도면만으로 발명이 한정되는 것은 아니다.The embodiments described in the disclosure and the accompanying drawings are for explaining the invention through some of the various embodiments of the invention, and the invention is not limited to the embodiments described in the disclosure and the accompanying drawings.
본 명세서에서 "자율주행"은 차량이 하나 이상의 센서를 이용하여 주행 경로에 존재하는 물체들을 감지하고, 감지된 물체들을 회피하면서 사용자가 원하는 목적지까지 스스로 이동하는 것을 의미할 수 있다.In the present specification, the term " autonomous driving " may mean that a vehicle uses one or more sensors to detect objects present in a traveling path, and moves to a desired destination by avoiding sensed objects.
이하 첨부된 도면을 참고하여 개시를 상세히 설명하기로 한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The present invention will now be described in detail with reference to the accompanying drawings.
도 1은 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 방법을 설명하기 위한 개요도이다.1 is a schematic diagram for explaining a method of estimating a shape of a road by an electronic device according to an embodiment.
본 명세서에서 "전자 장치"는 주행 중인 차량(100)에 포함되어 도로(120)의 형상을 추정하는 장치를 의미할 수 있다. 전자 장치는 차량(100)에 설치된 장치일 수 있으나 이에 한정되는 것은 아니며, 예를 들어 전자 장치는 차량(100) 자체를 의미할 수도 있다. 차량(100)은 자율주행 차량일 수 있으나, 이에 한정되는 것은 아니다.As used herein, the term " electronic device " may refer to an apparatus included in a running
일 실시예에 따른 전자 장치는 차량(100)의 주변에 위치한 복수의 물체에 관한 정보를 획득할 수 있다. 복수의 물체는, 예를 들어 도 1에 도시된 나무, 전봇대 등을 의미할 수 있다. The electronic device according to one embodiment may obtain information about a plurality of objects located in the periphery of the
보다 구체적으로, 전자 장치는 주행중인 차량으로부터 기 설정된 거리 내에 위치하는 복수의 물체 각각에 관한 복수의 신호를 센싱부를 통해 감지할 수 있다. 물체에 관한 신호는, 예를 들어 전자 장치의 센싱부가 감지하는 레이더 신호를 의미할 수 있으나, 이에 한정되는 것은 아니다. 전자 장치는 감지된 복수의 신호를 분석함으로써 복수의 물체의 위치 정보, 크기 정보, 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들 및 복수의 신호의 세기를 획득할 수 있다.More specifically, the electronic device can sense through the sensing unit a plurality of signals relating to each of a plurality of objects located within a predetermined distance from the vehicle being driven. A signal relating to an object may mean, for example, a radar signal sensed by an electronic device, but is not limited thereto. The electronic device can acquire the position information of the plurality of objects, the size information, the relative velocity vectors of the plurality of objects with respect to the
일 실시예에 따른 전자 장치는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들, 복수의 물체의 크기 정보 및 복수의 신호의 세기를 이용하여, 복수의 물체를 분류할 수 있다. The electronic device according to one embodiment uses the relative velocity vectors of the plurality of objects located in the periphery of the
예를 들어, 전자 장치는 복수의 물체의 크기 정보를 기준으로 복수의 물체를 1차 분류할 수 있다. 다음으로, 전자 장치는 1차 분류된 복수의 물체를, 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들을 기준으로 2차 분류할 수 있다. 이어서, 전자 장치는 2차 분류된 복수의 물체를, 복수의 신호의 세기를 이용하여 3차 분류할 수 있다.For example, an electronic device can first classify a plurality of objects based on size information of a plurality of objects. Next, the electronic device can classify a plurality of objects that are primarily classified based on the relative velocity vectors of the plurality of objects located in the periphery of the
일 실시예에 따른 전자 장치는, 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들을 이용하여 도로(120)의 형상을 추정할 수 있다. 도 1은 도로(120)의 형상을 추정하는 전자 장치의 사용자 인터페이스 화면(110)의 예시를 확대하여 도시하고 있다. 사용자 인터페이스 화면(110)에 디스플레이 된, 전자 장치가 추정한 도로(120)의 형상을 참조하여, 차량(100)은 자율주행을 할 수 있다. 차량(100)이 자율주행 차량이 아닌 경우에는, 사용자는 사용자 인터페이스 화면(110)을 참조하여 차량(100)을 운전할 수 있다.The electronic device according to one embodiment can estimate the shape of the
도 1의 사용자 인터페이스 화면(110)은 도로(120) 및 차량(100)만을 디스플레이하고 있으나, 실시예가 이에 한정되는 것은 아니다. 예를 들어, 사용자 인터페이스 화면(110)은 도로(120) 상의 다른 차량들도 디스플레이 할 수 있고, 차량(100) 주변의 복수의 물체도 디스플레이 할 수 있다. The
도 2는 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 도시하는 흐름도이다.2 is a flowchart showing a process of estimating the shape of a road by an electronic device according to an embodiment.
단계 210에서, 전자 장치는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들에 기초하여, 복수의 물체가 정지 상태인지를 판단할 수 있다.In
일 실시예에 따른 전자 장치는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들을 획득할 수 있다. 보다 구체적으로, 전자 장치는 차량(100)으로부터 기 설정된 거리 내에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들을 획득할 수 있다. An electronic device according to an embodiment may obtain relative velocity vectors for the
예를 들어, 전자 장치는 차량으로부터 반경 100미터 내에 위치한 제1 나무, 제2 나무 및 표지판 각각의 차량에 대한 상대 속도 벡터들을 획득할 수 있다. 차량에 대한 상대 속도 벡터들은 2차원 벡터 또는 3차원 벡터로 표현될 수 있으나, 이에 한정되는 것은 아니다. For example, an electronic device may obtain relative velocity vectors for a first tree, a second tree, and a sign on a vehicle located within a radius of 100 meters from the vehicle. The relative velocity vectors for the vehicle may be expressed as a two-dimensional vector or a three-dimensional vector, but are not limited thereto.
일 실시예에 따른 전자 장치는 획득한 상대 속도 벡터들에 기초하여, 복수의 물체가 정지 상태인지를 판단할 수 있다. The electronic device according to an embodiment can determine whether a plurality of objects are in a stop state based on the obtained relative velocity vectors.
예를 들어, 제1 물체의 차량(100)에 대한 상대 속도 벡터가, 조향 장치(steering system)를 이용하여 추정한 차량(100)의 현재 속도 벡터를 원점 대칭한 벡터와 유사한 경우, 전자 장치는 제1 물체가 정지 상태라고 판단할 수 있다. For example, if the relative velocity vector of the first object with respect to the
또 다른 예에서, 전자 장치는 제2 물체의 레이더 신호에 표시되는 인덱스(index)에 기초하여, 제2 물체가 정지 상태인지 여부를 판단할 수 있다.In yet another example, the electronic device can determine whether the second object is in a stationary state, based on an index indicated in the radar signal of the second object.
단계 220에서, 전자 장치는 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 차량(100)에 대한 상대 속도 벡터들의 평균 벡터를 산출할 수 있다.In
일 실시예에 따른 전자 장치는, 적어도 하나의 정지 상태의 물체 각각의 차량(100)에 대한 상대 속도 벡터들의 평균 벡터를 복수의 시점에서 산출할 수 있다. 시점 간 간격의 최소 단위는 기 설정된 시간 값일 수 있다. 예를 들어, 복수의 시점 중 제1 시점 이후에 도래하는 가장 빠른 시점인 제2시점은, 제1시점으로부터 기 설정된 시간이 도과한 후에 도래할 수 있다. The electronic device according to the embodiment can calculate the average vector of the relative velocity vectors for the
일 실시예에 따른 전자 장치는, 복수의 물체 중 적어도 하나의 비정지(non-stop) 상태의 물체 중에서, 도로(120) 상에 위치한 물체의 위치 변화를 추적 알고리즘(trace algorithm)을 통해 추적할 수 있다. 추적 알고리즘을 통해 추적한, 도로(120) 상에 위치한 물체의 위치 변화에 관한 정보는 차량(100)의 자율주행에 이용될 수 있다.The electronic device according to an embodiment is configured to track a change in position of an object located on the
단계 230에서, 전자 장치는 산출된 평균 벡터를 이용하여 차량의 주행 속도 및 주행 방향을 추정할 수 있다. In
단계 240에서, 전자 장치는 차량(100)의 주행 속도, 주행 방향, 및 차량(100)의 주변에 위치한 복수의 물체 각각의 차량에 대한 위치에 기초하여, 도로(120)의 형상을 추정할 수 있다.The electronic device can estimate the shape of the
도 3은 일 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 구체화하여 도시한 흐름도이다.FIG. 3 is a flowchart illustrating a process of estimating the shape of a road according to an embodiment of the present invention.
여기서, 도 2에 대한 설명과 중복되는 내용은 간략히 설명하기로 한다.Here, the description overlapping with the description of FIG. 2 will be briefly described.
단계 310에서, 전자 장치는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들에 기초하여, 복수의 물체가 정지 상태인지를 판단할 수 있다.In
단계 320에서, 전자 장치는 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 차량(100)에 대한 상대 속도 벡터들의 평균 벡터를 산출할 수 있다.In
단계 330에서, 전자 장치는 산출된 평균 벡터를 원점 대칭 시킴으로써 차량(100)의 주행 벡터를 산출할 수 있다. In
또는, 전자 장치는 산출된 평균 벡터의 시작점(start point)을 기 설정된 2차원 벡터 공간의 원점으로 이동시키고, 원점으로 이동한 평균 벡터를 원점에 대해 대칭 시킴으로써 차량(100)의 주행 벡터를 산출할 수 있다. Alternatively, the electronic device moves the start point of the calculated mean vector to the origin of the predetermined two-dimensional vector space, and calculates the travel vector of the
예를 들어, 차량(100)의 주행 벡터는 차량(100)의 주행 속도 및 주행 방향을 나타내는 것일 수 있다.For example, the running vector of the
단계 340에서, 전자 장치는 차량(100)의 주행 벡터 및 차량(100)의 주변에 위치한 복수의 물체 각각의 차량에 대한 위치에 기초하여, 도로의 형상을 추정할 수 있다.In
일 실시예에 따른 전자 장치는, 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터를 산출할 수 있다. 또한, 전자 장치는 복수의 시점에서 산출된 복수의 평균 벡터들 중, 복수의 시점에서 산출된 평균 벡터들의 평균 벡터와의 유사도가 기 설정된 임계치 이상인 적어도 하나의 벡터를 이용하여 보외법(extrapolation)을 적용함으로써 도로(120)의 형상을 추정할 수 있다. 보다 구체적인 설명은 도 4에서 후술하기로 한다.An electronic device according to an embodiment can calculate an average vector of a plurality of average vectors calculated at a plurality of time points. Also, the electronic device may perform extrapolation using at least one vector having a degree of similarity to a mean vector of average vectors calculated at a plurality of points of time from a plurality of average vectors calculated at a plurality of points of time, The shape of the
일 실시예에 따른 전자 장치는, 복수의 시점 중 제1 시점 및 제2 시점에 차량(100)으로부터 소정의 거리 내에 계속하여 위치하는 적어도 하나의 물체를 식별할 수 있다. 또한, 전자 장치는 식별된 적어도 하나의 물체의 위치 변화를 추적 알고리즘을 통해 추적할 수 있다. 또한, 전자 장치는 추적에 기초하여 위치 정보를 보정할 수 있다.The electronic device according to an embodiment can identify at least one object continuously positioned within a predetermined distance from the
도 4는 또 다른 실시예에 따른 전자 장치가 도로의 형상을 추정하는 과정을 구체화하여 도시한 흐름도이다.4 is a flow chart illustrating the process of estimating the shape of a road according to another embodiment of the present invention.
여기서, 도 2 또는 도 3에 대한 설명과 중복되는 내용은 간략히 설명하기로 한다. Here, the description overlapping with the description of FIG. 2 or FIG. 3 will be briefly described.
단계 410에서, 전자 장치는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 상대 속도 벡터들에 기초하여, 복수의 물체가 정지 상태인지를 판단할 수 있다.In
단계 420에서, 전자 장치는 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 차량(100)에 대한 상대 속도 벡터들의 평균 벡터를 복수의 시점에서 산출할 수 있다.In
단계 430에서, 전자 장치는 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터를 산출할 수 있다.In
예를 들어, 제1 시점에서 산출된 평균 벡터가 (5, 11)이고, 제2 시점에서 산출된 평균 벡터가 (6, 8)이고, 제3 시점에서 산출된 평균 벡터가 (1, 2)인 경우, 전자 장치는 제1 시점 내지 제3 시점에서 산출된 복수의 평균 벡터들의 평균 벡터인 (4, 7)을 산출할 수 있다.For example, if the average vector calculated at the first time point is (5, 11), the mean vector calculated at the second time point is (6, 8) , The electronic device can calculate the average vectors (4, 7) of a plurality of average vectors calculated at the first time point to the third time point.
단계 440에서, 전자 장치는 복수의 시점에서 산출된 복수의 평균 벡터들 중, 복수의 시점에서 산출된 평균 벡터들의 평균 벡터와의 유사도가 기 설정된 임계치 이상인 적어도 하나의 벡터를 이용하여 보외법(extrapolation)을 적용함으로써 도로(120)의 형상을 추정할 수 있다.In
달리 말하면, 전자 장치는 복수의 시점에서 산출된 복수의 평균 벡터들에 최소제곱법(method of least squares)을 적용하여 상이한 벡터를 제거한 후, 나머지 벡터들을 이용하여 보외법을 적용함으로써 도로(120)의 형상을 추정할 수 있다.In other words, the electronic device applies the method of least squares to a plurality of average vectors calculated at a plurality of points of view to remove different vectors, and then applies the extrapolation method using the remaining vectors, Can be estimated.
예를 들어, 전자 장치는 제1 시점에서 산출된 평균 벡터인 (5, 11), 제2 시점에서 산출된 평균 벡터인 (6, 8), 및 제3 시점에서 산출된 평균 벡터인 (1, 2) 중, 제1 시점 내지 제3 시점에서 산출된 평균 벡터들의 평균 벡터인 (4, 7)과의 유사도가 기 설정된 임계치 이상인, 제1 시점에서 산출된 평균 벡터 (5, 11) 및 제2 시점에서 산출된 평균 벡터 (6, 8)을 이용하여 보외법을 적용함으로써 도로(120)의 형상을 추정할 수 있다.For example, the electronic device may include an average vector (5, 11) calculated at a first time point, an average vector (6, 8) calculated at a second time point, (5, 11) calculated at the first point in time, at which the degree of similarity to the mean vectors (4, 7) of the mean vectors calculated at the first point of time to the third point of time is equal to or greater than a predetermined threshold, The shape of the
도 5는 일 실시예에 따른 전자 장치가 차량의 주행 속도 및 주행 방향을 추정하는 과정을 설명하기 위한 도면이다.5 is a diagram for explaining a process of estimating a running speed and a running direction of a vehicle according to an embodiment of the present invention.
도 5는 차량(500)의 주행 속도 및 주행 방향을 추정하는 과정을 설명하기 위한 도면이다. 차량(500)은 주행 속도 및 주행 방향을 추정하기 위한 전자 장치를 포함하고 있다. 도로(10)상에는 차량(500) 이외에도 세 대의 차량(505, 510, 515)이 더 존재한다. 5 is a diagram for explaining a process of estimating the running speed and the running direction of the
속도 벡터(520)를 가지며 주행하는 차량(500)과 차량(500) 주변의 복수의 물체는 서로 상대 속도를 갖는다. 일 실시예에 따른 전자 장치는, 도로(10)의 형상을 추정하기 위해 복수의 물체 중 정지 상태의 물체 각각의 차량(500)에 대한 상대 속도 벡터들(555, 560, 565)을 이용할 수 있다. 전자 장치는 복수의 물체 중 정지 상태의 물체 각각의 차량(500)에 대한 상대 속도 벡터들(555, 560, 565)의 평균 벡터를 산출할 수 있고, 산출된 평균 벡터를 이용하여 차량(500)의 주행 벡터(570)를 추정할 수 있다. 전자 장치는 추정된 차량(500)의 주행 벡터(570)에 기초하여 도로(10)의 형상을 추정할 수 있다.A
차량(500) 이외의 세 대의 차량(505, 510, 515) 각각의 차량(500)에 대한 상대 속도 벡터들(540, 545, 550)은, 세 대의 차량(505, 510, 515) 각각의 속도 벡터들(525, 530, 535)과 차량(500)의 속도 벡터(520)를 이용하여 산출할 수 있다. 세 대의 차량(505, 510, 515)은 비정지 상태의 물체이므로, 세 대의 차량(505, 510, 515) 각각의 차량(500)에 대한 상대 속도 벡터들(540, 545, 550)는 차량(500)의 주행 벡터(570)를 추정하는 과정에 이용되지 않는다. 다만 전자 장치는 비정지 상태의 물체 중 도로(10) 상에 위치한 물체, 즉 세 대의 차량(505, 510, 515)의 위치 변화를 추적 알고리즘을 통해 추적할 수 있다. 세 대의 차량(505, 510, 515)의 위치 변화에 관한 정보는 차량(500)이 자율주행을 하는 경우 이용될 수 있다. The
도 6은 일 실시예에 따른 전자 장치가 획득한, 차량 주변의 물체에 관한 정보를 도시하는 도면이다.6 is a diagram showing information about an object around the vehicle, which is obtained by the electronic device according to the embodiment.
도 6은 제1 시점(S1)에서 획득한, 복수의 물체(물체1, 물체2, ... , 물체9, ...)의 위치, 상대속도, 물체 크기 및 신호 크기에 관한 정보를 도시하고 있다. 6 shows information on the position, relative speed, object size, and signal size of a plurality of objects (
일 실시예에 따른 전자 장치는 복수의 물체의 크기 정보를 기준으로 복수의 물체를 1차 분류할 수 있다. 예를 들어, 전자 장치는 1차 분류를 통해 도 6의 길이(Length)가 1이고 폭(Width)이 2인 물체1과 물체2를 동일 그룹에 포함시킬 수 있다. The electronic device according to an embodiment can classify a plurality of objects in a primary classification based on size information of a plurality of objects. For example, the electronic device can include
또한, 전자 장치는 1차 분류된 복수의 물체를, 복수의 물체 각각의 차량(100)에 대한 상대 속도를 기준으로 2차 분류할 수 있다. 도 6의 물체1과 물체2를 예로 들면, 물체1의 X축 방향 상대 속도인 -1.25와 물체2의 X축 방향 상대 속도인 -2가 서로 유사하고, 물체2의 Y축 방향 상대 속도인 -8.875와 물체2의 Y축 방향 상대 속도인 -9가 서로 유사하므로, 전자 장치는 2차 분류에서도 물체1과 물체2를 동일 그룹에 포함시킬 수 있다.Further, the electronic device can classify a plurality of objects that are primarily classified based on the relative speed of each of the plurality of objects with respect to the
또한, 전자 장치는 2차 분류된 복수의 물체를, 복수의 신호의 세기를 기준으로 3차 분류할 수 있다. 예를 들어, 전자 장치는 3차 분류를 통해 도 6의 물체1과 물체2를 서로 다른 그룹에 포함시킬 수 있다. 물체1의 신호의 세기인 RCS(Radar Cross Section)는 -3.5로, 물체2의 RCS인 1.5와의 차이가 크기 때문이다. Further, the electronic device can classify a plurality of objects, which are secondary classified, into tertiary based on the intensity of a plurality of signals. For example, the electronic device can include
상기된 1차, 2차 및 3차 분류 기준에 의거하여, 전자 장치는 복수의 물체를 적어도 하나의 그룹으로 분류할 수 있다. 분류된 각 그룹에 속한 물체들은 동종의 물체일 수 있으나, 이에 한정되는 것은 아니다.Based on the above-described primary, secondary and tertiary classification criteria, the electronic device can classify a plurality of objects into at least one group. Objects belonging to each classified group may be of the same type, but are not limited thereto.
도 7 및 도 8은 일부 실시예에 따른 전자 장치의 구성을 도시하는 블록도이다.7 and 8 are block diagrams showing the configuration of an electronic device according to some embodiments.
도 7 및 도 8에 도시된 전자 장치(700)의 구성 요소는 도 1 내지 도 6에서 전술된 전자 장치(700)의 동작들을 수행할 수 있다. 따라서, 도 1 내지 도 6에 대한 설명과 중복되는 구체적인 내용은 설명을 간략히 하거나 생략하기로 한다.The components of the
도 7에 도시된 바와 같이, 일 실시예에 따른 전자 장치(700)는 프로세서(740), 통신부(730), 메모리(720) 및 센싱부(710)를 포함할 수 있다. 그러나, 도 7에 도시된 구성 요소 모두가 전자 장치(700)의 필수 구성 요소인 것은 아니다. 도 7에 도시된 구성 요소보다 많은 구성 요소에 의해 전자 장치(700)가 구현될 수도 있고, 도 7에 도시된 구성 요소보다 적은 구성 요소에 의해 전자 장치(700)가 구현될 수도 있다.7, an
예를 들면, 도 8에 도시된 바와 같이, 일부 실시예에 따른 전자 장치(700)은, 도 7에 도시된 프로세서(740), 통신부(730), 메모리(720) 및 센싱부(710) 이외에 출력부(770), 사용자 입력부(750) 및 구동부(760)를 더 포함할 수 있다.8, an
센싱부(710)는 전자 장치(700) 주변 환경에 관한 정보를 감지하도록 구성되는 다수의 센서들을 포함할 수 있고, 센서들의 위치 및/또는 배향을 수정하도록 구성되는 하나 이상의 액추에이터들을 포함할 수 있다. 예를 들어, 센싱부(710)는 GPS(Global Positioning System)(711), IMU(Inertial Measurement Unit)(712), RADAR 센서(713), LIDAR 센서(714), 이미지 센서(715), 환경 센서(716), 근접 센서(717), RGB 센서(718) 및 움직임 센싱부(719)를 포함할 수 있다. The
이미지 센서(715)는 일 실시예에 따라, 카메라, 스테레오 카메라, 모노 카메라, 와이드 앵글 카메라, 또는 3D 비전 센서를 포함할 수 있다. The
또한, 환경 센서(716)는 온/습도 센서(716-1), 적외선 센서(716-2), 기압 센서(716-3), 및 먼지 센서(716-4) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. In addition, the
예를 들어, 환경 센서(716)는 초음파 센서를 더 포함할 수 있다. 초음파 센서는 초음파를 출력하여 돌아오는 에코 신호를 이용하여 전자 장치(700)로부터의 단거리에 위치한 장애물들을 감지하도록 구성되는 센서일 수 있다.For example, the
또한, 센싱부(710)는 이미지 센서(715)와 RADAR 센서(713)가 복합된 형태로 구성되거나, 이미지 센서(715)와 LIDAR 센서(714)가 복합된 형태로 구성될 수 있다. 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.The
움직임 센싱부(719)는 전자 장치(700)의 움직임을 센싱할 수 있다. 움직임 센싱부(719)는 지자기 센서(Magnetic sensor)(719-1), 가속도 센서(Acceleration sensor)(719-2), 및 자이로스코프 센서(719-3)를 포함할 수 있다.The
GPS(711)는 전자 장치(700)의 지리적 위치를 추정하도록 구성되는 센서일 수 있다. 즉, GPS(711)는 지구에 대한 전자 장치(700)의 위치를 추정하도록 구성되는 송수신기를 포함할 수 있다.The
IMU(712)는 관성 가속도에 기초하여 전자 장치(700)의 위치 및 배향 변화들을 감지하도록 구성되는 센서들의 조합이 될 수 있다. 예를 들어, 센서들의 조합은, 가속도계들 및 자이로스코프들을 포함할 수 있다.
RADAR 센서(713)는 무선 신호를 사용하여 전자 장치(700)이 위치해 있는 환경 내의 물체들을 감지하도록 구성되는 센서일 수 있다. 또한, RADAR 센서(713)는, 물체들의 속도 및/또는 방향을 감지하도록 구성될 수 있다.The
LIDAR 센서(714)는 주로 근적외선(Near Infrared, NIR)을 사용하여, 물체에 반사된 빛을 분석하여 물체와의 거리를 측정하도록 구성되는 센서일 수 있다. LIDAR 센서(714)에 의해 측정된 데이터는 3차원 영상을 구현하는데 이용될 수 있다. 또한, 일 실시예에서, LIDAR 센서(714)는 레이저를 사용하여 전자 장치(700)가 위치해 있는 환경 내의 물체들을 감지하도록 구성되는 센서일 수 있다. 보다 구체적으로, LIDAR 센서(714)는 레이저를 방출하도록 구성되는 레이저 광원 및/또는 레이저 스캐너와, 레이저의 반사를 검출하도록 구성되는 검출기를 포함할 수 잇다. LIDAR 센서(714)는 코히런트(coherent)(예컨대, 헤티로다인 검출을 사용함) 또는 비코히런트(incoherent) 검출 모드에서 동작하도록 구성될 수 있다.The
이미지 센서(715)는 전자 장치(700) 외부의 환경을 기록하도록 구성되는 스틸 카메라 또는 비디오 카메라가 될 수 있다. 예를 들어, 이미지 센서(715)는 다수의 카메라들을 포함할 수 있고, 다수의 카메라들은 전자 장치(700)의 내부 및 외부 상의 다수의 위치들에 배치될 수 있다.The
메모리(720)는, 프로세서(740)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치(700)로 입력되거나 전자 장치(700)로부터 출력되는 데이터를 저장할 수도 있다. The
메모리(720)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. The
메모리(720)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(721), 터치 스크린 모듈(722), 알림 모듈(723) 등으로 분류될 수 있다. The programs stored in the
UI 모듈(721)은, 애플리케이션 별로 전자 장치(700)와 연동되는 특화된 UI, GUI 등을 제공할 수 있다. 터치 스크린 모듈(722)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 프로세서(740)로 전달할 수 있다. 일 실시예에 따른 터치 스크린 모듈(722)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(722)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.The
알림 모듈(723)은 전자 장치(700)의 이벤트 발생을 알리기 위한 신호를 발생할 수 있다. 전자 장치(700)에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 일정 알림 등이 있다. 알림 모듈(723)은 디스플레이부(771)를 통해 비디오 신호 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(772)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(773)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.The
통신부(730)는 다른 장치와 무선으로 통신하기 위한 적어도 하나의 안테나를 포함할 수 있다. 일 실시예에 의하면, 통신부(730)는 무선 통신 모듈을 포함할 수 있다. 예를 들어, 통신부(730)는, 근거리 통신부(예컨대, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(NFC/RFID 부), WLAN(Wi-Fi) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등), 이동 통신부(예컨대, 2G, 3G, 4G, LTE 등)를 포함할 수 있으나, 이에 한정되는 것은 아니다.The
사용자 입력부(750)는 전자 장치(700)을 제어하기 위한 데이터를 입력하는 수단을 의미한다. 예를 들어, 사용자 입력부(750)에는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다. 또한, 사용자 입력부(750)는 마이크를 포함할 수 있는 바, 마이크는 전자 장치(700)의 사용자로부터 오디오(예를 들어, 음성 명령)를 수신하도록 구성될 수 있다.The
출력부(770)는 오디오 신호 또는 비디오 신호를 출력할 수 있으며, 디스플레이부(771), 음향 출력부(772), 및 진동 모터(773)를 포함할 수 있다.The
디스플레이(771)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 출력부(770)의 구현 형태에 따라, 출력부(770)는 디스플레이부(771)를 2개 이상 포함할 수도 있다.The
음향 출력부(772)는 통신부(730)로부터 수신되거나 메모리(720)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력부(772)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The
진동 모터(773)는 전기적 에너지를 이용하여 물리적 진동을 생성할 수 있다.The
사용자 입력부(750) 및 출력부(770)는 네트워크 인터페이스를 포함할 수 있고, 터치 스크린으로 구현될 수 있다.The
프로세서(740)는, 메모리(720)에 저장된 적어도 하나의 프로그램들을 실행함으로써, 센싱부(710), 통신부(730), 사용자 입력부(750), 메모리(720), 및 출력부(770)를 전반적으로 제어할 수 있다. 또한, 프로세서(740)는 하나 이상의 프로세서를 포함할 수 있다. 또한, 프로세서(740)는 메모리(720)에 저장된 적어도 하나의 프로그램들을 실행함으로써, 도 1 내지 도 6에 기재된 전자 장치(700)의 기능을 수행할 수 있다. The
메모리(720)에 저장된 적어도 하나의 프로그램들은, 전자 장치(700)를 포함하는 차량(100)의 주변에 위치한 복수의 물체 각각의 차량에 대한 상대 속도 벡터들을 획득하는 단계, 획득한 상대 속도 벡터들에 기초하여, 복수의 물체가 정지 상태인지를 판단하는 단계, 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 상대 속도 벡터들의 평균 벡터를 산출하는 단계, 산출된 평균 벡터를 이용하여 차량(100)의 주행 속도 및 주행 방향을 추정하는 단계 및 차량(100)의 주행 속도, 주행 방향, 및 차량(100)의 주변에 위치한 복수의 물체 각각의 차량(100)에 대한 위치에 기초하여, 도로(120)의 형상을 추정하는 단계를 실행하는 명령어들을 포함할 수 있다. At least one of the programs stored in the
또한, 메모리(720)에 저장된 적어도 하나의 프로그램들은, 적어도 하나의 정지 상태의 물체 각각의 차량(100)에 대한 상대 속도 벡터들의 평균 벡터를 복수의 시점에서 산출하는 단계, 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터를 산출하는 단계, 및 복수의 시점에서 산출된 복수의 평균 벡터들 중, 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터와의 유사도가 기 설정된 임계치 이상인 적어도 하나의 벡터를 이용하여 보외법을 적용함으로써 도로(120)의 형상을 추정하는 단계를 실행하는 명령어들을 포함할 수 있다.The at least one programs stored in the
전술한 발명의 설명은 예시를 위한 것이며, 발명이 속하는 기술분야의 통상의 지식을 가진 자는 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.It will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. For example, each component described as a single entity may be distributed and implemented, and components described as being distributed may also be implemented in a combined form.
개시의 권리범위는 후술하는 특허청구범위에 의하여 나타내어 질 수 있으며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함될 수 있는 것으로 해석되어야 한다.The scope of the disclosure is to be defined by the appended claims, and all changes or modifications that come within the meaning and range of equivalency of the claims, and equivalents thereof, .
Claims (17)
상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들에 기초하여, 상기 복수의 물체가 정지(stop) 상태인지를 판단하는 단계;
상기 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 산출하는 단계;
상기 산출된 평균 벡터를 이용하여 상기 차량의 주행 속도 및 주행 방향을 추정하는 단계; 및
상기 주행 속도, 상기 주행 방향, 및 상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 위치에 기초하여, 상기 도로의 형상을 추정하는 단계를 포함하는, 방법.
A method of estimating a shape of a road by an electronic device included in a running vehicle,
Determining whether the plurality of objects is in a stop state based on relative velocity vectors of the plurality of objects located in the vicinity of the vehicle;
Calculating an average vector of relative velocity vectors for each of at least one stationary object among the plurality of objects with respect to the vehicle;
Estimating a traveling speed and a traveling direction of the vehicle using the calculated average vector; And
Estimating a shape of the road based on the traveling speed, the running direction, and the position of each of a plurality of objects located in the periphery of the vehicle with respect to the vehicle.
상기 차량의 주행 속도 및 주행 방향을 추정하는 단계는,
상기 산출된 평균 벡터를 원점 대칭 시킴으로써 상기 차량의 주행 벡터를 산출하는 단계를 더 포함하는, 방법.
The method according to claim 1,
Wherein the step of estimating the running speed and running direction of the vehicle comprises:
And calculating the traveling vector of the vehicle by symmetrically calculating the calculated average vector.
상기 차량에 포함된 센서(sensor)에 의해 감지되는, 상기 복수의 물체 각각에 관한 복수의 신호를 분석하는 단계; 및
상기 복수의 신호를 분석함으로써, 상기 복수의 물체의 위치 정보, 크기 정보, 상기 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들 및 상기 복수의 신호의 세기를 획득하는 단계를 더 포함하는, 방법.
The method according to claim 1,
Analyzing a plurality of signals relating to each of the plurality of objects, the signals being sensed by a sensor included in the vehicle; And
Further comprising analyzing the plurality of signals to obtain position information of the plurality of objects, size information, relative velocity vectors for the vehicle of each of the plurality of objects, and intensity of the plurality of signals .
상기 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들, 상기 크기 정보 및 상기 복수의 신호의 세기를 이용하여, 상기 복수의 물체를 분류하는 단계를 더 포함하는, 방법.
The method of claim 3,
Further comprising classifying the plurality of objects using the relative velocity vectors for the vehicle, the magnitude information, and the intensity of the plurality of signals for each of the plurality of objects.
상기 평균 벡터를 산출하는 단계는,
상기 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 복수의 시점에서 산출하는 단계를 포함하는, 방법.
The method according to claim 1,
Wherein the step of calculating the average vector comprises:
Calculating an average vector of relative velocity vectors for each of the at least one stationary object relative to the vehicle at a plurality of time points.
상기 차량의 주행 속도 및 주행 방향을 추정하는 단계는,
상기 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터를 산출하는 단계를 포함하고,
상기 도로의 형상을 추정하는 단계는,
상기 복수의 시점에서 산출된 복수의 평균 벡터들 중, 상기 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터와의 유사도가 기 설정된 임계치 이상인 적어도 하나의 벡터를 이용하여 보외법(extrapolation)을 적용함으로써 상기 도로의 형상을 추정하는 단계를 포함하는, 방법.
6. The method of claim 5,
Wherein the step of estimating the running speed and running direction of the vehicle comprises:
And calculating an average vector of a plurality of average vectors calculated at the plurality of time points,
The step of estimating the shape of the road includes:
An extrapolation is applied using at least one vector having a similarity degree to a mean vector of a plurality of average vectors calculated at the plurality of time points from a plurality of average vectors calculated at the plurality of time points, Thereby estimating the shape of the road.
상기 복수의 시점은 제1 시점 및 제2 시점을 포함하고,
상기 방법은,
상기 제1 시점 및 상기 제2 시점에 상기 차량으로부터 소정의 거리 내에 계속하여 위치하는 적어도 하나의 물체를 식별하는 단계;
상기 식별된 적어도 하나의 물체의 위치 변화를 추적 알고리즘(trace algorithm)을 통해 추적하는 단계; 및
상기 추적에 기초하여 상기 복수의 물체의 위치 정보를 보정하는 단계를 더 포함하는, 방법.
6. The method of claim 5,
Wherein the plurality of viewpoints include a first viewpoint and a second viewpoint,
The method comprises:
Identifying at least one object continuously positioned within a predetermined distance from the vehicle at the first viewpoint and the second viewpoint;
Tracking a change in position of the identified at least one object through a trace algorithm; And
And correcting position information of the plurality of objects based on the tracking.
상기 복수의 물체 중 적어도 하나의 비정지(non-stop) 상태의 물체 중에서, 상기 도로 상에 위치한 물체의 위치 변화를 추적 알고리즘을 통해 추적하는 단계를 더 포함하는, 방법.
The method according to claim 1,
Further comprising tracking, through a tracking algorithm, a positional change of an object located on the road from among at least one non-stop object among the plurality of objects.
센싱부;
적어도 하나의 프로그램이 저장되는 메모리;
외부 장치와 데이터를 송수신하는 통신부; 및
상기 적어도 하나의 프로그램을 실행함으로써 상기 도로의 형상을 추정하는 적어도 하나의 프로세서를 포함하고,
상기 적어도 하나의 프로그램은,
상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들에 기초하여, 상기 복수의 물체가 정지 상태인지를 판단하는 단계;
상기 복수의 물체 중 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 산출하는 단계; 및
상기 산출된 평균 벡터를 이용하여 상기 차량의 주행 속도 및 주행 방향을 추정하는 단계; 및
상기 주행 속도, 상기 주행 방향, 및 상기 차량의 주변에 위치한 복수의 물체 각각의 상기 차량에 대한 위치에 기초하여, 상기 도로의 형상을 추정하는 단계를 실행하는 명령어들을 포함하는 것을 특징으로 하는, 전자 장치.
1. An electronic device for estimating a shape of a road included in a running vehicle,
Sensing unit;
A memory in which at least one program is stored;
A communication unit for transmitting and receiving data to and from an external device; And
And at least one processor for estimating the shape of the road by executing the at least one program,
Wherein the at least one program comprises:
Determining whether the plurality of objects are in a stopped state based on relative velocity vectors of the plurality of objects located in the vicinity of the vehicle with respect to the vehicle;
Calculating an average vector of relative velocity vectors for each of at least one stationary object among the plurality of objects with respect to the vehicle; And
Estimating a traveling speed and a traveling direction of the vehicle using the calculated average vector; And
And estimating a shape of the road based on the traveling speed, the running direction, and the position of each of a plurality of objects located in the periphery of the vehicle with respect to the vehicle. Device.
상기 차량의 주행 속도 및 주행 방향을 추정하는 단계는,
상기 산출된 평균 벡터를 원점 대칭 시킴으로써 상기 차량의 주행 벡터를 산출하는 단계를 더 포함하는, 전자 장치.
10. The method of claim 9,
Wherein the step of estimating the running speed and running direction of the vehicle comprises:
And calculating the traveling vector of the vehicle by symmetrically calculating the calculated average vector.
상기 센싱부에 의해 감지되는, 상기 복수의 물체 각각에 관한 복수의 신호를 분석하는 단계; 및
상기 복수의 신호를 분석함으로써, 상기 복수의 물체의 위치 정보, 크기 정보, 상기 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들 및 상기 복수의 신호의 세기를 획득하는 단계를 더 포함하는, 전자 장치.
10. The method of claim 9,
Analyzing a plurality of signals pertaining to each of the plurality of objects, the plurality of signals being sensed by the sensing unit; And
Further comprising analyzing the plurality of signals to obtain position information of the plurality of objects, size information, relative velocity vectors for the vehicle of each of the plurality of objects, and intensity of the plurality of signals, Device.
상기 적어도 하나의 프로그램은,
상기 복수의 물체 각각의 상기 차량에 대한 상대 속도 벡터들, 상기 크기 정보 및 상기 복수의 신호의 세기를 이용하여, 상기 복수의 물체를 분류하는 단계를 실행하는 명령어들을 더 포함하는 것을 특징으로 하는, 전자 장치.
12. The method of claim 11,
Wherein the at least one program comprises:
Further comprising instructions for performing the step of classifying the plurality of objects using the relative velocity vectors for the vehicle, the magnitude information, and the intensity of the plurality of signals of each of the plurality of objects. Electronic device.
상기 차량의 주행 속도 및 주행 방향을 추정하는 단계는,
상기 적어도 하나의 정지 상태의 물체 각각의 상기 차량에 대한 상대 속도 벡터들의 평균 벡터를 복수의 시점에서 산출하는 단계를 포함하는, 전자 장치.
10. The method of claim 9,
Wherein the step of estimating the running speed and running direction of the vehicle comprises:
And calculating an average vector of relative velocity vectors for each of the at least one stationary object with respect to the vehicle at a plurality of points in time.
상기 차량의 주행 속도 및 주행 방향을 추정하는 단계는,
상기 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터를 산출하는 단계를 포함하고,
상기 도로의 형상을 추정하는 단계는,
상기 복수의 시점에서 산출된 복수의 평균 벡터들 중, 상기 복수의 시점에서 산출된 복수의 평균 벡터들의 평균 벡터와의 유사도가 기 설정된 임계치 이상인 적어도 하나의 벡터를 이용하여 보외법을 적용함으로써 상기 도로의 형상을 추정하는 단계를 포함하는, 방법.
14. The method of claim 13,
Wherein the step of estimating the running speed and running direction of the vehicle comprises:
And calculating an average vector of a plurality of average vectors calculated at the plurality of time points,
The step of estimating the shape of the road includes:
Applying an extrapolation method using at least one vector having a similarity degree to a mean vector of a plurality of average vectors calculated at the plurality of time points from a plurality of average vectors calculated at the plurality of time points, And estimating the shape of the first portion.
상기 복수의 시점은 제1 시점 및 제2 시점을 포함하고,
상기 적어도 하나의 프로그램은,
상기 제1 시점 및 상기 제2 시점에 상기 차량으로부터 소정의 거리 내에 계속하여 위치하는 적어도 하나의 물체를 식별하는 단계;
상기 식별된 적어도 하나의 물체의 위치 변화를 추적 알고리즘을 통해 추적하는 단계; 및
상기 추적에 기초하여 상기 복수의 물체의 위치 정보를 보정하는 단계를 실행하는 명령어들을 더 포함하는 것을 특징으로 하는, 전자 장치.
14. The method of claim 13,
Wherein the plurality of viewpoints include a first viewpoint and a second viewpoint,
Wherein the at least one program comprises:
Identifying at least one object continuously positioned within a predetermined distance from the vehicle at the first viewpoint and the second viewpoint;
Tracking a change in position of the identified at least one object through a tracking algorithm; And
And correcting position information of the plurality of objects based on the tracking.
상기 적어도 하나의 프로그램은,
상기 복수의 물체 중 적어도 하나의 비정지(non-stop) 상태의 물체 중에서, 상기 도로 상에 위치한 물체의 위치 변화를 추적 알고리즘을 통해 추적하는 단계를 실행하는 명령어들을 더 포함하는 것을 특징으로 하는, 전자 장치.
10. The method of claim 9,
Wherein the at least one program comprises:
Further comprising the step of tracking through a tracking algorithm a change in position of an object located on the road from among at least one non-stop object of the plurality of objects. Electronic device.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762505297P | 2017-05-12 | 2017-05-12 | |
US62/505,297 | 2017-05-12 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20180124713A true KR20180124713A (en) | 2018-11-21 |
Family
ID=64602697
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180029920A KR20180124713A (en) | 2017-05-12 | 2018-03-14 | An electronic device and method thereof for estimating shape of road |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20180124713A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102019007168A1 (en) | 2018-10-18 | 2020-04-23 | Silicon Works Co., Ltd. | VEHICLE LAMP CONTROL DEVICE |
KR20210148518A (en) * | 2020-05-29 | 2021-12-08 | 서울대학교산학협력단 | Apparatus and method for virtual lane generation based on traffic flow for autonomous driving in severe weather condition |
KR20220079360A (en) * | 2020-12-03 | 2022-06-13 | 모셔널 에이디 엘엘씨 | Localization based on surrounding vehicles |
-
2018
- 2018-03-14 KR KR1020180029920A patent/KR20180124713A/en unknown
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102019007168A1 (en) | 2018-10-18 | 2020-04-23 | Silicon Works Co., Ltd. | VEHICLE LAMP CONTROL DEVICE |
KR20210148518A (en) * | 2020-05-29 | 2021-12-08 | 서울대학교산학협력단 | Apparatus and method for virtual lane generation based on traffic flow for autonomous driving in severe weather condition |
KR20220079360A (en) * | 2020-12-03 | 2022-06-13 | 모셔널 에이디 엘엘씨 | Localization based on surrounding vehicles |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2656933C2 (en) | Method and device for early warning during meeting at curves | |
US11859997B2 (en) | Electronic device for generating map data and operation method thereof | |
CN112912294A (en) | Vehicle driving control apparatus and calibration method executed by the same | |
US9691251B2 (en) | Lost child search system, recording medium, and lost child search method | |
EP3164769B1 (en) | Machine safety dome | |
CN111356902A (en) | RADAR assisted visual inertial ranging initialization | |
US11183056B2 (en) | Electronic device for generating map data and operating method therefor | |
CN110979318B (en) | Lane information acquisition method and device, automatic driving vehicle and storage medium | |
US10495480B1 (en) | Automated travel lane recommendation | |
US11745765B2 (en) | Electronic device and method for assisting with driving of vehicle | |
KR20180124713A (en) | An electronic device and method thereof for estimating shape of road | |
EP3546310A1 (en) | Electronic device and method for assisting in vehicle driving | |
US11904853B2 (en) | Apparatus for preventing vehicle collision and method thereof | |
US10964048B2 (en) | Method and device for generating image for indicating object on periphery of vehicle | |
KR20180104496A (en) | Apparatus and method for assisting driving of a vehicle | |
CN111361550B (en) | Parking space identification method and device and storage medium | |
CN106200654A (en) | The control method of unmanned plane during flying speed and device | |
CN115221937A (en) | Sensor information fusion method and apparatus, and recording medium | |
KR20120078877A (en) | Navigation for vehicel and land departure warning method of navigation for vehicel | |
US11318984B2 (en) | Electronic device for assisting driving of vehicle and method therefor | |
JP6933065B2 (en) | Information processing equipment, information provision system, information provision method, and program | |
US11704827B2 (en) | Electronic apparatus and method for assisting with driving of vehicle | |
KR101658089B1 (en) | Method for estimating a center lane for lkas control and apparatus threof | |
KR20200084446A (en) | Electronic apparatus for self driving of vehicles based on intersection node and thereof control method | |
US20120226439A1 (en) | Navigation device and navigation mode switch method |