KR20160064275A - 차량 위치 인식 장치 및 방법 - Google Patents

차량 위치 인식 장치 및 방법 Download PDF

Info

Publication number
KR20160064275A
KR20160064275A KR1020140167124A KR20140167124A KR20160064275A KR 20160064275 A KR20160064275 A KR 20160064275A KR 1020140167124 A KR1020140167124 A KR 1020140167124A KR 20140167124 A KR20140167124 A KR 20140167124A KR 20160064275 A KR20160064275 A KR 20160064275A
Authority
KR
South Korea
Prior art keywords
vehicle
image
lane
information
lanes
Prior art date
Application number
KR1020140167124A
Other languages
English (en)
Other versions
KR101635831B1 (ko
Inventor
서지원
김진효
배일
문재영
신영훈
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020140167124A priority Critical patent/KR101635831B1/ko
Publication of KR20160064275A publication Critical patent/KR20160064275A/ko
Application granted granted Critical
Publication of KR101635831B1 publication Critical patent/KR101635831B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • B60W40/072Curvature of the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • B60W40/076Slope angle of the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/15Road slope, i.e. the inclination of a road segment in the longitudinal direction
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/802Longitudinal distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/10Path keeping
    • B60Y2300/12Lane keeping

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 차량 위치 인식 장치에 관한 것으로, 차량 주변의 제1 영상을 촬영하는 제1 영상 촬영부; 도로를 향하는 방향으로 제2 영상을 촬영하는 제2 영상 촬영부; 촬영된 제1 영상에서 차로의 개수를 산출하고, 차량이 위치하는 차로 정보를 결정하고, 촬영된 제2 영상에서 차선과 차량 간의 거리 정보를 산출하며, 차로 정보와 상기 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 인식부를 포함하는 차량 위치 인식 장치를 개시한다.

Description

차량 위치 인식 장치 및 방법{APPARATUS AND METHOD FOR RECOGNIZING POSITION OF VEHICLE}
본 발명은 차량의 위치를 인식하는 장치 및 방법에 관한 것으로, 보다 상세하게는 도로상에서 주행하는 차량의 차로 정보를 포함하는 위치 정보를 산출하는 장치 및 방법에 관한 것이다.
차량에 장착된 영상 센서를 이용하여 차선을 검출하고, 차선과 차량 간의 거리를 계산하여 차로 이탈 여부를 판단하는 기술이 공지되어 있다. 예를 들어, 대한민국 등록특허공보 10-0956858호에는 "차량 주변 영상을 이용하는 차선 이탈 감지 방법 및 장치"가 개시되어 있다. 그러나, 종래의 기술은 도로상의 전체 차로에서 차량이 주행하는 차로를 판단하거나, 이로부터 차량의 정확한 위치를 결정하는 기술에 대하여는 개시하지 않는다.
본 발명은 차량에서 촬영한 영상으로부터 추출한 도로의 차선 정보를 기반으로 차량의 위치를 정확하게 인식할 수 있는 차량 위치 인식 장치 및 방법을 제공하는 것을 목적으로 한다.
또한, 본 발명이 해결하고자 하는 다른 과제는 차량의 전,후방에서 촬영한 영상의 차선 정보를 기반으로 차량의 위치 및 자세를 정확하게 인식할 수 있는 차량 위치 인식 장치 및 방법을 제공하는 것에 있다.
본 발명이 해결하고자 하는 과제는 이상에서 언급된 과제로 제한되지 않는다. 언급되지 않은 다른 기술적 과제들은 이하의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 측면에 따른 차량 위치 인식 장치는 차량 주변의 제1 영상을 촬영하는 제1 영상 촬영부; 도로를 향하는 아래 방향으로 제2 영상을 촬영하는 제2 영상 촬영부; 촬영된 제1 영상에서 차로의 개수를 산출하고, 차량이 위치하는 차로 정보를 결정하고, 촬영된 제2 영상에서 차선과 차량 간의 거리 정보를 산출하며, 상기 차로 정보와 상기 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 인식부를 포함한다.
상기 차량 위치 인식부는, 상기 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 차로 결정부; 상기 제2 영상에서 차선과 차량을 추출하고, 상기 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 거리 산출부; 및 상기 차로 결정부에 의해 결정된 차로 정보와, 상기 거리 산출부에 의해 산출된 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 산출부를 포함할 수 있다.
상기 제2 영상 촬영부는, 차량의 주행 방향을 기준으로 차량의 좌측면에 설치되어 좌측 영상을 촬영하는 좌측 영상 촬영부; 및 차량의 주행 방향을 기준으로 차량의 우측면에 설치되어 우측 영상을 촬영하는 우측 영상 촬영부를 포함하고, 상기 거리 산출부는 상기 좌측 영상에서 추출한 차선과 차량의 좌측면 간의 제1 거리 및 상기 우측 영상에서 추출한 차선과 차량의 우측면 간의 제2 거리를 산출하고, 상기 차량 위치 산출부는 상기 제1 거리와 상기 제2 거리를 비교하여 차량의 위치를 산출할 수 있다.
상기 차량 위치 인식 장치는 도로 정보를 가진 전자 맵에 상기 차량의 위치를 맵핑하는 차량 위치 맵핑부; 및 상기 차량 위치 맵핑부에 의하여 차량의 위치가 맵핑된 도로 정보 전자 맵을 디스플레이하는 디스플레이부를 더 포함할 수 있다.
상기 제1 영상 촬영부는, 차량의 주행 방향을 기준으로 전방을 향하여 도로상의 차선들을 촬영하여 전방 영상을 생성하는 전방 영상 촬영 장치; 및 차량의 주행 방향을 기준으로 후방을 향하여 도로상의 차선들을 촬영하여 후방 영상을 생성하는 후방 영상 촬영 장치를 포함할 수 있다.
상기 차량 위치 인식부는 상기 전방 영상에서 추출된 차선의 기울기 및 상기 후방 영상에서 추출된 차선의 기울기에 근거하여 차량의 자세를 인식할 수 있다.
본 발명의 다른 일 측면에 따르면, 차량 주변에 대해 촬영된 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 차로 결정부; 도로를 향하는 아래 방향으로 촬영된 제2 영상에서 차선과 차량을 추출하고, 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 거리 산출부; 및 상기 차로 결정부에 의해 결정된 차로 정보와, 상기 거리 산출부에 의해 산출된 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 산출부를 포함하는 차량 위치 인식 장치가 제공된다.
본 발명의 또 다른 일 측면에 따르면, 차량 주변에 대해 촬영된 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 단계; 도로를 향하는 아래 방향으로 촬영된 제2 영상에서 차선과 차량을 추출하고, 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 단계; 및 상기 차량이 위치하는 차로 정보와, 상기 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 단계를 포함하는 차량 위치 인식 방법이 제공된다.
상기 차량 위치 인식 방법은 차량의 주행 방향을 기준으로 전방을 향하여 촬영된 전방 영상에서 추출된 차선의 기울기 및 차량의 주행 방향을 기준으로 후방을 향하여 촬영된 전방 영상에서 추출된 차선의 기울기에 근거하여 차량의 자세를 인식하는 단계를 더 포함할 수 있다.
상기 차량 위치 인식 방법은 도로 정보를 가진 전자 맵에 상기 차량의 위치 정보를 맵핑하는 단계; 및 상기 차량의 위치가 맵핑된 도로 정보 전자 맵을 디스플레이하는 단계를 더 포함할 수 있다.
본 발명의 또 다른 일 측면에 따르면, 상기 차량 위치 인식 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체가 제공된다.
본 발명의 실시 예에 의하면, 도로의 차선을 기반으로 차량의 위치를 정확하게 인식할 수 있다.
또한, 본 발명의 실시 예에 의하면, 차량의 전,후방에서 촬영한 영상의 차선 정보를 기반으로 차량의 위치 및 자세를 정확하게 인식할 수 있다.
본 발명의 효과는 상술한 효과들로 제한되지 않는다. 언급되지 않은 효과들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시 예에 따른 차량 위치 인식 장치를 구비한 차량이 도로를 주행하는 것을 보여주는 도면이다.
도 2는 본 발명의 일 실시 예에 따른 차량 위치 인식 장치의 구성도이다.
도 3은 본 발명의 일 실시 예에 따른 차량 위치 인식 장치를 구성하는 차량 위치 인식부의 구성도이다.
도 4는 본 발명의 일 실시 예에 따른 차량 위치 인식 방법의 흐름도이다.
도 5는 도 4에 도시된 단계 S20을 설명하기 위한 도면이다.
도 6 내지 도 7은 도 4에 도시된 단계 S30을 설명하기 위한 도면이다.
도 8 및 도 9는 본 발명의 다른 일 실시 예에 따른 차량 위치 인식 방법을 설명하기 위한 도면이다.
본 발명의 다른 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술하는 실시 예를 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예에 한정되지 않으며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 만일 정의되지 않더라도, 여기서 사용되는 모든 용어들(기술 혹은 과학 용어들을 포함)은 이 발명이 속한 종래 기술에서 보편적 기술에 의해 일반적으로 수용되는 것과 동일한 의미를 갖는다. 공지된 구성에 대한 일반적인 설명은 본 발명의 요지를 흐리지 않기 위해 생략될 수 있다. 본 발명의 도면에서 동일하거나 상응하는 구성에 대하여는 가급적 동일한 도면부호가 사용된다. 본 발명의 이해를 돕기 위하여, 도면에서 일부 구성은 다소 과장되거나 축소되어 도시될 수 있다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다", "가지다" 또는 "구비하다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서 전체에서 사용되는 '~부'는 적어도 하나의 기능이나 동작을 처리하는 단위로서, 예를 들어 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미할 수 있다. 그렇지만 '~부'가 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '~부'는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다.
일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함할 수 있다. 구성요소와 '~부'에서 제공하는 기능은 복수의 구성요소 및 '~부'들에 의해 분리되어 수행될 수도 있고, 다른 추가적인 구성요소와 통합될 수도 있다.
도 1은 본 발명의 일 실시 예에 따른 차량 위치 인식 장치(100)를 구비한 차량(10)이 도로(20)를 주행하는 것을 보여주는 도면이고, 도 2는 본 발명의 일 실시 예에 따른 차량 위치 인식 장치(100)의 구성도이다. 도 1 및 도 2를 참조하면, 본 발명의 일 실시 예에 따른 차량 위치 인식 장치(100)는 차량(10)에 구비된 영상 촬영부(110,120)를 이용하여 차량 주변의 차선(21)을 촬영한 영상을 분석하여 차량(10)이 주행하는 차로 순서를 결정하고, 도로(20)상의 차선(21)을 촬영한 영상으로부터 차량 좌우측면과 차선(21)까지의 거리 정보를 산출하고, 차로 순서와 거리 정보를 결합하여 차량의 정확한 위치를 검출한다.
본 발명의 실시 예에 따른 차량 위치 인식 장치(100)는 제1 영상 촬영부(110), 제2 영상 촬영부(120), 차량 위치 인식부(130), 차량 위치 맵핑부(140) 및 디스플레이부(150)를 포함한다. 제1 영상 촬영부(110)는 차량 주변의 제1 영상을 촬영한다. 제1 영상 촬영부(110)는 전방 영상 촬영부(111)와 후방 영상 촬영부(112)를 포함할 수 있다. 전방 영상 촬영부(111)는 차량(10)의 주행 방향을 기준으로 전방을 향해 영상을 촬영한다. 후방 영상 촬영부(112)는 차량(10)의 주행 방향을 기준으로 후방을 향해 영상을 촬영한다.
전방 영상 촬영부(111)와 후방 영상 촬영부(112)는 차량(10)의 폭 방향을 기준으로 중심 측에 설치될 수 있다. 전방 영상 촬영부(111)는 차량(10)의 전후 방향을 기준으로 전방 측에 설치되고, 후방 영상 촬영부(112)는 차량(10)의 전후 방향을 기준으로 후방 측에 설치될 수 있다. 전방 영상 촬영부(111)와 후방 영상 촬영부(112)는 초점거리와 같은 내부 파라미터가 동일한 값을 갖는 카메라로 제공될 수 있다.
제2 영상 촬영부(120)는 차량(10)의 측면에 설치되어 도로(20)를 향하는 방향, 즉 아래 방향으로 제2 영상을 촬영한다. 제2 영상 촬영부(120)는 좌측 영상 촬영부(121)와 우측 영상 촬영부(122)를 포함할 수 있다. 좌측 영상 촬영부(121)는 차량(10)의 주행 방향을 기준으로 차량(10)의 좌측면에 설치되어 좌측 영상을 촬영하고, 우측 영상 촬영부(122)는 차량(10)의 주행 방향을 기준으로 차량(10)의 우측면에 설치되어 우측 영상을 촬영한다.
도 1의 실시 예에서는 차량(10)의 전후좌우 각각에 영상 촬영부(111,112,121,122)가 설치되어 있으나, 영상 촬영부의 설치 개수나 설치 위치는 다양하게 변형될 수 있음은 물론이다. 다수의 영상 촬영부(111,112,121,122)를 이용하여 차선(21)을 촬영하면, 차량(10)의 위치를 정확하게 인식할 수 있으며, 곡선 도로에서도 차량(10)의 위치 및 자세 정보를 정확하게 인식할 수 있는 이점이 제공된다. 곡선 도로에서 차량(10)의 위치 및 자세를 인식하는 방법에 대하여는 도 8 및 도 9를 참조하여 후술한다.
차량 위치 인식부(130)는 제1 영상 촬영부(110)와 제2 영상 촬영부(120)에 의해 촬영된 영상을 입력받고, 이로부터 도로(20)상의 차선(21)을 촬영한 영상으로부터 차량(10)이 주행하는 차로 순서, 즉 전체 차로 중 어느 차로에 차량이 위치하는지를 결정하고, 차량 좌우측면과 차선(21)까지의 거리 정보를 산출하며, 차로 순서와 차선 및 차량 간의 거리 정보를 결합하여 차량의 위치를 정확하게 인식할 수 있다.
도 3은 본 발명의 일 실시 예에 따른 차량 위치 인식 장치(100)를 구성하는 차량 위치 인식부(130)의 구성도이다. 도 3을 참조하면, 차량 위치 인식부(130)는 차로 결정부(131), 거리 산출부(132) 및 차량 위치 산출부(133)를 포함한다.
차로 결정부(131)는 제1 영상 촬영부(110)에 의해 촬영된 제1 영상에서 차선들(211,212,213)을 추출하고, 제1 영상에서 추출된 차선(211,212,213)의 개수로부터 차로의 개수를 산출하고, 제1 영상에서의 차선들(211,212,213) 각각의 위치 정보에 근거하여 차량이 위치하는 차로를 결정한다. 즉, 차로 결정부(131)는 전체 차선(211,212,213)의 개수와 영상에서 차선들(211,212,213)의 위치를 기반으로 주행 차로를 인식한다.
차로 결정부(131)는 제1 영상 촬영부(110)에 의해 촬영된 영상에서 가장 좌측에 위치한 중앙선 차선(211), 가장 우측에 위치한 경계선 차선(212), 중앙선 차선(211)과 경계선 차선(212) 사이의 차선(213)을 인식하여 전체 차선(211,212,213)의 개수를 산출할 수 있다. 차로 결정부(131)는 영상의 색상 정보를 기초로 노랑 색의 차선을 중앙선 차선(211)으로 인식할 수 있다. 도 1의 실시 예에서 차선(211,212,213)의 개수는 3개이므로, 차량(10)이 2차선 도로를 주행하는 것으로 판단할 수 있다. 또한, 영상에서 차선들(211,212,213)의 위치를 기반으로 차량(10)이 1차선을 따라 주행하고 있는 것으로 판단할 수 있다.
거리 산출부(132)는 제2 영상 촬영부(120)에 의해 촬영된 제2 영상에서 차선(211,213)과 차량(10)을 추출하고, 제2 영상에서 추출된 차선(211,213)과 차량(10) 간의 거리를 산출한다. 차량(10)의 크기에 영향받지 않고 차선(211,213)과 차량(10) 간의 거리를 정확하게 산출하기 위해, 거리 산출부(132)는 좌측 영상 촬영부(121)에 의해 촬영된 영상에서 추출한 차선(211)과 차량(10)의 좌측면 간의 거리 및 우측 영상 촬영부(122)에 의해 촬영된 영상에서 추출한 차선(213)과 차량(10)의 우측면 간의 거리를 산출할 수 있다.
차량 위치 산출부(133)는 차로 결정부(131)에 의해 결정된 차로 정보와, 거리 산출부(132)에 의해 산출된 차선(211,213)과 차량(10) 간의 거리 정보를 결합하여, 차선들(211,212,213)을 기준으로 차량(10)의 정확한 위치 정보를 산출할 수 있다.
다시 도 2를 참조하면, 차량 위치 맵핑부(140)는 도로 정보를 가진 전자 맵(map)에 차량 위치 인식부(130)에 의해 인식된 차량(10)의 위치를 맵핑한다. 전자 맵은 N(N은 1 이상의 정수)차선의 도로 정보, 주요 주변 건물 등의 정보를 포함할 수 있다. 차량 위치 맵핑부(140)는 N차선의 도로상에서 차량(10)이 위치한 정확한 위치를 표시한다.
디스플레이부(150)는 차량 위치 맵핑부(140)에 의하여 차량(10)의 위치가 맵핑된 도로 정보 전자 맵을 디스플레이한다. 이를 통해 차량 운전자에게 차선 변경 안내 등 다양한 편의를 제공할 수 있다. 디스플레이부(150)는 예를 들어 LCD(liquid crystal display) 화면으로 제공될 수 있다. 디스플레이부(150) 상에는 차량(10)이 몇 차선에서 주행하고 있는지, 차량(10)과 차선 간의 간격이 얼마인지 등의 정보가 표시될 수 있다.
도 4는 본 발명의 일 실시 예에 따른 차량 위치 인식 방법의 흐름도이다. 도 1 내지 도 4를 참조하면, 단계 S10에서 차량(10)에 설치된 영상 촬영부(110,120)에 의하여 차량 주변의 영상 정보를 수신한다. 도 5는 도 4에 도시된 단계 S20을 설명하기 위한 도면이다. 도 4 및 도 5를 참조하면, 차로 결정부(131)는 제1 영상 촬영부(110)에 의해 촬영된 제1 영상(I1)을 분석하여 도로상의 차선 개수를 계산하고, 차량(10)의 주행 차로를 인식할 수 있다(S20).
예를 들어, 차로 결정부(131)는 중앙선 차선(211), 도로(20)와 인도 간의 경계선 차선(212), 중앙선 차선(211)과 경계선 차선(212) 사이의 점선 차선(213)을 인식하여, 전체 차선의 개수를 산출하고, 영상(I1)의 중심점(CP)이 어떤 차선 사이에 위치하는지에 따라 차량(10)의 주행 차로를 인식할 수 있다. 도 5에 도시된 예에서, 차로 결정부(131)는 영상(I1)의 중심점(CP)은 중앙선 차선(211)과 점선 차선(213) 사이에 위치하고 있으므로, 차량(10)이 1차선에서 주행 중이라고 판단할 수 있다.
도 6 내지 도 7은 도 4에 도시된 단계 S30을 설명하기 위한 도면이다. 도 1 내지 도 3, 도 6을 참조하면, 거리 산출부(132)는 제2 영상 촬영부(120)에 의해 촬영된 제2 영상에서 차선과 차량을 추출하고, 제2 영상에서 추출된 차선과 차량 간의 거리를 산출한다(S30).
거리 산출부(132)는 좌,우측 영상 촬영부(121,122)에 의해 촬영된 영상에서 차선(211,213)과 차량(10)을 추출하고, 좌측 영상 촬영부(121)에 의해 촬영된 영상에서 추출한 차선(211)과 차량(10)의 좌측면 간의 거리(ℓ1) 및 우측 영상 촬영부(122)에 의해 촬영된 영상에서 추출한 차선(213)과 차량(10)의 우측면 간의 거리(ℓ2)를 산출할 수 있다.
차량(10)의 좌측 차선(211)과 차량(10)의 좌측면 간의 거리(ℓ1) 및 차량(10)의 우측 차선(213)과 차량(10)의 우측면 간의 거리(ℓ2) 값의 비교 결과에 따라 차량(10)이 차선 내에서 어떠한 위치에서 주행하고 있는지를 정확하게 판단할 수 있다. 도 7을 참조하면, 거리 산출부(132)는 제2 영상 촬영부(120)에 의해 촬영된 영상(I2)에서 차선(211)이 추출된 픽셀 위치 정보(L)와, 제2 영상 촬영부(120)가 설치된 높이 정보를 기반으로, 차량(10)과 차선(211) 간의 실제 거리(ℓ1) 값을 산출할 수 있다.
다시 도 1 내지 도 4를 참조하면, 차량 위치 산출부(133)는 차로 결정부(131)에 의해 결정된 차로 정보와, 거리 산출부(132)에 의해 산출된 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출한다(S40). 차량 위치 맵핑부(140)는 도로 정보를 가진 전자 맵(map)에 차량 위치 인식부(130)에 의해 인식된 차량(10)의 위치를 맵핑하며(S50), 디스플레이부(150)는 차량 위치 맵핑부(140)에 의하여 차량(10)의 위치가 맵핑된 도로 정보의 전자 맵을 디스플레이한다.
도 8 및 도 9는 본 발명의 다른 일 실시 예에 따른 차량 위치 인식 방법을 설명하기 위한 도면이다. 도 8은 본 발명의 실시 예에 따른 차량 위치 인식 장치(100)를 구성하는 전방 영상 촬영부(111)에서 촬영한 영상(I11)을 예시한 도면이고, 도 9는 본 발명의 실시 예에 따른 차량 위치 인식 장치(100)를 구성하는 후방 영상 촬영부(112)에서 촬영한 영상(I12)을 예시한 도면이다.
도 8 및 도 9를 참조하면, 곡선 도로에서 전방 영상 촬영부(111)와 후방 영상 촬영부(112)에서 촬영된 영상(I11,I12)에서 차선(211,212,213)은 서로 다른 위치 및 방향으로 추출될 수 있다. 이러한 경우, 후방 영상 촬영부(112)에서 촬영한 영상(I12)에서의 차선(211)의 기울기(G2)에 대한 전방 영상 촬영부(111)에서 촬영한 영상(I11)에서의 차선(211)의 기울기(G1)의 변화율로부터 곡선 도로의 곡률을 인식할 수 있고, 인식한 곡선 도로의 곡률을 반영하여 차량(10)의 위치 및 자세(주행 방향)를 정확하게 산출할 수 있다.
일 실시 예로, 직선 차선인 경우에 대하여 차선의 기울기 값을 미리 설정하고, 후방 영상 촬영부(112)에서 촬영한 영상(I12)에서의 차선(211)의 기울기(G2) 값과, 전방 영상 촬영부(111)에서 촬영한 영상(I11)에서의 차선(211)의 기울기(G1) 값을 설정된 기울기 값과 비교하여 차이 값을 구하고, 각각의 차이 값을 반영하여 차량(10)의 자세를 정확하게 산출할 수 있다.
본 발명의 실시 예에 따른 방법은 예를 들어 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 컴퓨터로 읽을 수 있는 기록매체는 SRAM(Static RAM), DRAM(Dynamic RAM), SDRAM(Synchronous DRAM) 등과 같은 휘발성 메모리, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Electrically Programmable ROM), EEPROM(Electrically Erasable and Programmable ROM), 플래시 메모리 장치, PRAM(Phase-change RAM), MRAM(Magnetic RAM), RRAM(Resistive RAM), FRAM(Ferroelectric RAM)과 같은 불휘발성 메모리, 플로피 디스크, 하드 디스크 또는 광학적 판독 매체 예를 들어 시디롬, 디브이디 등과 같은 형태의 저장매체일 수 있으나, 이에 제한되지는 않는다.
이상의 실시 예들은 본 발명의 이해를 돕기 위하여 제시된 것으로, 본 발명의 범위를 제한하지 않으며, 이로부터 다양한 변형 가능한 실시 예들도 본 발명의 범위에 속하는 것임을 이해하여야 한다. 본 발명의 기술적 보호범위는 특허청구범위의 기술적 사상에 의해 정해져야 할 것이며, 본 발명의 기술적 보호범위는 특허청구범위의 문언적 기재 그 자체로 한정되는 것이 아니라 실질적으로는 기술적 가치가 균등한 범주의 발명에 대하여까지 미치는 것임을 이해하여야 한다.
110: 제1 영상 촬영부
120: 제2 영상 촬영부
130: 차량 위치 인식부
131: 차로 결정부
132: 거리 산출부
133: 차량 위치 산출부
140: 차량 위치 맵핑부
141: 도로 정보 전자맵
150: 디스플레이부

Claims (11)

  1. 차량 주변의 제1 영상을 촬영하는 제1 영상 촬영부;
    도로를 향하는 아래 방향으로 제2 영상을 촬영하는 제2 영상 촬영부;
    촬영된 제1 영상에서 차로의 개수를 산출하고, 차량이 위치하는 차로 정보를 결정하고, 촬영된 제2 영상에서 차선과 차량 간의 거리 정보를 산출하며, 상기 차로 정보와 상기 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 인식부를 포함하는 차량 위치 인식 장치.
  2. 제1 항에 있어서,
    상기 차량 위치 인식부는,
    상기 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 차로 결정부;
    상기 제2 영상에서 차선과 차량을 추출하고, 상기 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 거리 산출부; 및
    상기 차로 결정부에 의해 결정된 차로 정보와, 상기 거리 산출부에 의해 산출된 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 산출부를 포함하는 차량 위치 인식 장치.
  3. 제2 항에 있어서,
    상기 제2 영상 촬영부는,
    차량의 주행 방향을 기준으로 차량의 좌측면에 설치되어 좌측 영상을 촬영하는 좌측 영상 촬영부; 및
    차량의 주행 방향을 기준으로 차량의 우측면에 설치되어 우측 영상을 촬영하는 우측 영상 촬영부를 포함하고,
    상기 거리 산출부는 상기 좌측 영상에서 추출한 차선과 차량의 좌측면 간의 제1 거리 및 상기 우측 영상에서 추출한 차선과 차량의 우측면 간의 제2 거리를 산출하고,
    상기 차량 위치 산출부는 상기 제1 거리와 상기 제2 거리를 비교하여 차량의 위치를 산출하는 차량 위치 인식 장치.
  4. 제1 항에 있어서,
    도로 정보를 가진 전자 맵에 상기 차량의 위치를 맵핑하는 차량 위치 맵핑부; 및
    상기 차량 위치 맵핑부에 의하여 차량의 위치가 맵핑된 도로 정보 전자 맵을 디스플레이하는 디스플레이부를 더 포함하는 차량 위치 인식 장치.
  5. 제1 항에 있어서,
    상기 제1 영상 촬영부는,
    차량의 주행 방향을 기준으로 전방을 향하여 도로상의 차선들을 촬영하여 전방 영상을 생성하는 전방 영상 촬영 장치; 및
    차량의 주행 방향을 기준으로 후방을 향하여 도로상의 차선들을 촬영하여 후방 영상을 생성하는 후방 영상 촬영 장치를 포함하는 차량 위치 인식 장치.
  6. 제5 항에 있어서,
    상기 차량 위치 인식부는 상기 전방 영상에서 추출된 차선의 기울기 및 상기 후방 영상에서 추출된 차선의 기울기에 근거하여 차량의 자세를 인식하는 차량 위치 인식 장치.
  7. 차량 주변에 대해 촬영된 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 차로 결정부;
    도로를 향하는 아래 방향으로 촬영된 제2 영상에서 차선과 차량을 추출하고, 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 거리 산출부; 및
    상기 차로 결정부에 의해 결정된 차로 정보와, 상기 거리 산출부에 의해 산출된 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 차량 위치 산출부를 포함하는 차량 위치 인식 장치.
  8. 차량 주변에 대해 촬영된 제1 영상에서 차선들을 추출하고, 상기 제1 영상에서 추출된 차선의 개수로부터 차로의 개수를 산출하고, 상기 제1 영상에서의 차선들 각각의 위치 정보에 근거하여 차량이 위치하는 차로 정보를 결정하는 단계;
    도로를 향하는 아래 방향으로 촬영된 제2 영상에서 차선과 차량을 추출하고, 제2 영상에서 추출된 차선과 차량 간의 거리 정보를 산출하는 단계; 및
    상기 차량이 위치하는 차로 정보와, 상기 차선과 차량 간의 거리 정보를 결합하여, 차량의 위치 정보를 산출하는 단계를 포함하는 차량 위치 인식 방법.
  9. 제8 항에 있어서,
    차량의 주행 방향을 기준으로 전방을 향하여 촬영된 전방 영상에서 추출된 차선의 기울기 및 차량의 주행 방향을 기준으로 후방을 향하여 촬영된 전방 영상에서 추출된 차선의 기울기에 근거하여 차량의 자세를 인식하는 단계를 더 포함하는 차량 위치 인식 방법.
  10. 제8 항에 있어서,
    도로 정보를 가진 전자 맵에 상기 차량의 위치 정보를 맵핑하는 단계; 및
    상기 차량의 위치가 맵핑된 도로 정보 전자 맵을 디스플레이하는 단계를 더 포함하는 차량 위치 인식 방법.
  11. 제8 항 내지 제10 항 중 어느 한 항의 차량 위치 인식 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020140167124A 2014-11-27 2014-11-27 차량 위치 인식 장치 및 방법 KR101635831B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140167124A KR101635831B1 (ko) 2014-11-27 2014-11-27 차량 위치 인식 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140167124A KR101635831B1 (ko) 2014-11-27 2014-11-27 차량 위치 인식 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20160064275A true KR20160064275A (ko) 2016-06-08
KR101635831B1 KR101635831B1 (ko) 2016-07-05

Family

ID=56193311

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140167124A KR101635831B1 (ko) 2014-11-27 2014-11-27 차량 위치 인식 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101635831B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101951683B1 (ko) * 2017-09-08 2019-02-26 충북대학교 산학협력단 자율주행 자동차를 위한 차선 인식 시스템 및 방법
KR20190097453A (ko) * 2018-02-12 2019-08-21 삼성전자주식회사 차량의 주행을 위한 정보를 제공하는 방법 및 그 장치들
KR20230067243A (ko) * 2021-11-09 2023-05-16 계명대학교 산학협력단 듀얼 카메라를 이용한 차선 유지 보조 시스템의 시험 평가 장치 및 방법
KR20230119932A (ko) 2022-02-08 2023-08-16 현대건설(주) 통신 지오메트리를 이용한 차량의 주행차로 판단 시스템 및 이를 이용한 차로별 교통정보 제공방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100809417B1 (ko) * 2006-09-28 2008-03-05 한국전자통신연구원 주행 차선의 상대적 위치 인식 장치 및 방법
WO2011007484A1 (ja) * 2009-07-17 2011-01-20 パナソニック株式会社 運転支援装置、運転支援方法及びプログラム
KR20130010718A (ko) * 2011-07-19 2013-01-29 현대모비스 주식회사 내비게이션 및 그의 주행차선에 기반한 경로 안내 방법
WO2013069099A1 (ja) * 2011-11-08 2013-05-16 トヨタ自動車株式会社 車両の走行軌跡制御装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100809417B1 (ko) * 2006-09-28 2008-03-05 한국전자통신연구원 주행 차선의 상대적 위치 인식 장치 및 방법
WO2011007484A1 (ja) * 2009-07-17 2011-01-20 パナソニック株式会社 運転支援装置、運転支援方法及びプログラム
KR20130010718A (ko) * 2011-07-19 2013-01-29 현대모비스 주식회사 내비게이션 및 그의 주행차선에 기반한 경로 안내 방법
WO2013069099A1 (ja) * 2011-11-08 2013-05-16 トヨタ自動車株式会社 車両の走行軌跡制御装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101951683B1 (ko) * 2017-09-08 2019-02-26 충북대학교 산학협력단 자율주행 자동차를 위한 차선 인식 시스템 및 방법
KR20190097453A (ko) * 2018-02-12 2019-08-21 삼성전자주식회사 차량의 주행을 위한 정보를 제공하는 방법 및 그 장치들
KR20230067243A (ko) * 2021-11-09 2023-05-16 계명대학교 산학협력단 듀얼 카메라를 이용한 차선 유지 보조 시스템의 시험 평가 장치 및 방법
KR20230119932A (ko) 2022-02-08 2023-08-16 현대건설(주) 통신 지오메트리를 이용한 차량의 주행차로 판단 시스템 및 이를 이용한 차로별 교통정보 제공방법

Also Published As

Publication number Publication date
KR101635831B1 (ko) 2016-07-05

Similar Documents

Publication Publication Date Title
JP7461720B2 (ja) 車両位置決定方法及び車両位置決定装置
TWI638343B (zh) 車道檢測系統及方法
JP6844043B2 (ja) 視覚測位方法、装置、電子機器およびシステム
US20150278610A1 (en) Method and device for detecting a position of a vehicle on a lane
CN106663193B (zh) 用于路缘检测和行人危险评估的系统和方法
KR101584693B1 (ko) 카메라 파라미터 측정 장치 및 그 방법
JP5810773B2 (ja) 二輪車の後方映像表示装置
KR102365501B1 (ko) 이미지 센서의 외재적 파라미터를 교정하기 위한 방법 및 장치
KR20200036335A (ko) 차로를 결정하는 방법 및 장치
KR101635831B1 (ko) 차량 위치 인식 장치 및 방법
US20200125860A1 (en) Method and apparatus for determining driving information
JP2013187562A (ja) 車両用後方視界支援装置
US10789677B2 (en) Image stitching processing method and system thereof
KR101285075B1 (ko) 자이로스코프의 센서 정보와 차선 정보를 이용한 증강현실 뷰 모드 표현 방법 및 그 장치
JP6375633B2 (ja) 車両周辺画像表示装置、車両周辺画像表示方法
JP5521217B2 (ja) 障害物検出装置、及び障害物検出方法
JP2018073275A (ja) 画像認識装置
JP6802999B2 (ja) 区画線検出システム
EP3410345A1 (en) Information processing apparatus and non-transitory recording medium storing thereon a computer program
KR20200068045A (ko) 어라운드 뷰 모니터링 시스템 및 딥러닝을 이용한 주차선 검출 방법
KR101470230B1 (ko) 주차 영역 추적 장치 및 그 방법
KR102003387B1 (ko) 조감도 이미지를 이용한 교통 장애물의 검출 및 거리 측정 방법, 교통 장애물을 검출하고 거리를 측정하는 프로그램을 저장한 컴퓨터 판독가능 기록매체
CN110832851B (zh) 图像处理装置、图像变换方法
JP6032141B2 (ja) 走行路面標示検知装置および走行路面標示検知方法
JP5742559B2 (ja) 位置判定装置およびナビゲーション装置並びに位置判定方法,プログラム

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191105

Year of fee payment: 4