KR101155270B1 - 영상인식을 이용한 신호등 변경 통보 시스템 및 방법 - Google Patents

영상인식을 이용한 신호등 변경 통보 시스템 및 방법 Download PDF

Info

Publication number
KR101155270B1
KR101155270B1 KR1020060003046A KR20060003046A KR101155270B1 KR 101155270 B1 KR101155270 B1 KR 101155270B1 KR 1020060003046 A KR1020060003046 A KR 1020060003046A KR 20060003046 A KR20060003046 A KR 20060003046A KR 101155270 B1 KR101155270 B1 KR 101155270B1
Authority
KR
South Korea
Prior art keywords
traffic light
image
light
signal
pattern
Prior art date
Application number
KR1020060003046A
Other languages
English (en)
Other versions
KR20070074913A (ko
Inventor
박현진
Original Assignee
주식회사 현대오토넷
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 현대오토넷 filed Critical 주식회사 현대오토넷
Priority to KR1020060003046A priority Critical patent/KR101155270B1/ko
Publication of KR20070074913A publication Critical patent/KR20070074913A/ko
Application granted granted Critical
Publication of KR101155270B1 publication Critical patent/KR101155270B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/3623Destination input or retrieval using a camera or code reader, e.g. for optical or magnetic codes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

본 발명은 차량의 운전보조 시스템에 관한 것으로, 보다 상세하게는 차량 주행 시 신호등의 신호 변화를 운전자에게 알려주는 영상인식을 이용한 신호등 변경 통보 시스템 및 그 방법에 관한 것이다. 이러한 본 발명은 영상인식을 이용한 신호등 변경 통보 시스템에 있어서, 운전자의 차량의 방향지시 스위치 조작에 따른 주행방향을 점멸하여 표시하는 방향지시등과, 상기 방향지시등과 연결되어 방향지시등의 온/오프 여부 및 진행방향을 검출하고, 점멸하는 방향지시등의 방향을 검출하여 출력하는 방향지시등 방향 검출부와, 신호등을 촬영하기 위해 주행중의 차량 전방 상단을 촬영하고, 촬영된 영상을 영상데이터로 변환하여 출력하는 영상부와, 신호등을 검출하기 위한 신호등 형상에 대응하는 패턴 및 신호등의 색 패턴을 저장하는 저장부와, 소정의 제어를 받아 신호등 변경에 따른 경보신호를 발생하는 경보부와, 상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하고, 신호등 검출 시 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 신호등의 색 패턴을 비교하여 색을 인지하고, 상기 신호등 패턴과 색에 의해 신호를 판단하고, 판단된 신호와 상기 검출된 방향지시등 방향과 일치하면 상기 진행방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제어부로 이루어짐을 특징으로 한다.
신호등, 영상인식, GPS, 방향지시등, 신호 변화 인식

Description

영상인식을 이용한 신호등 변경 통보 시스템 및 방법{SYSTEM AND METHOD FOR REPORTING CHANGE OF SIGNAL LAMP USING IMAGE RECOGNITION}
도 1은 본 발명의 제1실시 예에 따른 영상인식을 이용한 신호등 변경 통보 시스템의 구성을 나타낸 도면
도 2는 본 발명의 제1실시 예에 따른 영상인식을 이용한 신호등 변경 통보 방법을 나타낸 흐름도
도 3은 본 발명의 제2실시 예에 따른 영상인식을 이용한 신호등 변경 통보 시스템의 구성을 나타낸 도면
도 4는 본 발명의 제2실시 예에 따른 영상인식을 이용한 신호등 변경 통보 방법을 나타낸 도면
본 발명은 차량의 운전보조 시스템에 관한 것으로, 보다 상세하게는 차량 주행 시 신호등의 신호 변화를 운전자에게 알려주는 영상인식을 이용한 신호등 변경 통보 시스템 및 그 방법에 관한 것이다.
일반적으로, 운전자는 주행중 신호등으로 인해 빈번하게 정차한다. 신호 대기 정차 시마다 운전자는 신호등의 변경 시점을 모르므로 주기적으로 또는 지속적으로 신호등이 변경되는지를 주시하여야 한다.
이는 운전자에게 눈의 피로감을 줄 수 있는 문제점이 있으며, 실수로 신호등의 신호를 잘못 인지하고 출발할 경우 사고가 발생할 수도 있는 문제점이 있었다.
또한, 운전자가 신호등 변경을 늦게 인지하는 경우 후방 차량들로부터 빨리 출발하라는 경적을 듣게 되므로 운전자가 스트레스를 받을 수 있는 문제점이 있었다.
따라서, 본 발명의 목적은 차량 주행 시 신호등의 신호 변화를 영상인식을 통해 판단하여 운전자에게 음성 및/또는 그래픽으로 통보하여 주는 영상인식을 이용한 신호등 변경 통보 시스템 및 그 방법을 제공함에 있다.
상기한 목적을 달성하기 위한 본 발명의 장치는; 영상인식을 이용한 신호등 변경 통보 시스템에 있어서, 운전자의 차량의 방향지시 스위치 조작에 따른 주행방향을 점멸하여 표시하는 방향지시등과, 상기 방향지시등과 연결되어 방향지시등의 온/오프 여부 및 진행방향을 검출하고, 점멸하는 방향지시등의 방향을 검출하여 출력하는 방향지시등 방향 검출부와, 신호등을 촬영하기 위해 주행중의 차량 전방 상단을 촬영하고, 촬영된 영상을 영상데이터로 변환하여 출력하는 영상부와, 신호등을 검출하기 위한 신호등 형상에 대응하는 패턴 및 신호등의 색 패턴을 저장하는 저장부와, 소정의 제어를 받아 신호등 변경에 따른 경보신호를 발생하는 경보부와, 상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하고, 신호등 검출 시 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 신호등의 색 패턴을 비교하여 색을 인지하고, 상기 신호등 패턴과 색에 의해 신호를 판단하고, 판단된 신호와 상기 검출된 방향지시등 방향과 일치하면 상기 진행방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제어부로 이루어짐을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 다른 장치는; 영상인식을 이용한 신호등 변경 통보 시스템에 있어서, 자신의 현재 위치를 측정하고, 상기 현재위치를 지도데이터에 맵매칭하여 출력하고, 소정의 목적지를 입력받고, 상기 현재 위치에서 상기 목적지까지의 경로를 탐색하고 탐색된 경로를 상기 지도데이터에 매칭하여 출력하는 내비게이션 모듈과, 신호등을 촬영하기 위해 주행중의 차량 전방 상단을 촬영하고, 촬영된 영상을 영상데이터로 변환하여 출력하는 영상부와, 신호등을 검출하기 위한 신호등 형상에 대응하는 패턴 및 신호등의 등 색 패턴을 저장하는 저장부와, 소정의 제어를 받아 신호등 변경에 따른 경보신호를 발생하는 경보부와, 상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하고, 신호등 검출 시 상기 경로 전방에 방향 전환점이 있으면 상기 신호등 색패턴에 의해 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등의 색을 인지하고, 상기 인식된 신호등 패턴과 색에 의해 신호를 판단하고, 상기 판단된 신호와 상기 방향 전환점에서 경로의 진행방향과 일치하면 상기 진행방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제어부로 이루어짐을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 방법은; 방향지시등과, 방향지시등 방향 검출부와, 영상부와, 신호등을 검출하기 위한 다수의 신호등 형상에 대응하는 패턴 및 신호등의 등 색 패턴을 저장하는 저장부와, 경보부를 구비하는 영상인식을 이용한 신호등 변경 통보 시스템에 있어서, 상기 영상부를 통해 영상을 촬영하고, 촬영된 영상을 영상데이터로 변환하는 과정과, 상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하는 과정과, 상기 신호등 검출 시 상기 방향지시등의 온/오프 여부 및 방향을 검출하는 과정과, 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 상기 저장부의 신호등의 색 패턴을 비교하여 신호를 판단하는 과정과, 상기 판단된 신호와 상기 신호등의 온/오프 여부 및 검출된 방향지시등 방향이 일치하면 상기 방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 과정으로 이루어짐을 특징으로 한다.
상기한 목적을 달성하기 위한 본 발명의 다른 방법은; 내비게이션 모듈과, 영상부와, 신호등을 검출하기 위한 다수의 신호등 형상에 대응하는 신호등 패턴들 및 신호등의 등 색 패턴을 저장하는 저장부와, 경보부와 디스플레이부를 구비하는 영상인식을 이용한 신호등 변경 통보 시스템에 있어서, 목적지를 입력받고 상기 내비게이션 모듈에 의해 측정된 현재 위치에서 상기 목적지까지의 경로를 맵핑하여 지도데이터를 디스플레이 하는 과정과, 상기 영상부를 통해 영상을 촬영하고, 촬영된 영상을 영상데이터로 변환하는 과정과, 상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하는 과정과, 상기 신호등 검출 시 상기 경로 전방에 방향전환점이 있는지를 판단하는 과정과, 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 상기 저장부의 신호등의 색 패턴을 비교하여 신호를 판단하는 과정과, 상기 판단된 신호와 상기 경로의 방향전환점에서 방향이 일치하면 상기 방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 과정으로 이루어짐을 특징으로 한다.
이하, 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 벗어나지 않도록 생략될 것이라는 것을 유의하여야 한다.
본 발명의 제1실시 예는 차량 전방의 신호등을 촬영하고, 촬영된 영상으로부터 신호등의 신호를 인식하고, 방향지시등의 온/오프 여부 및 방향에 대응하는 신호등의 신호가 인식되면 해당 방향에 대한 주행 방향 안내를 음성 및/또는 텍스트 및/또는 그래픽으로 운전자에게 알려주는 것이다.
그리고 본 발명의 제2실시 예는 차량 전방의 신호등을 촬영하고, 촬영된 영상으로부터 신호등의 신호를 인식하며, 내비게이션 시스템에 의해 설정된 경로의 방향 전환점에서 상기 경로의 방향에 대응되는 신호등의 신호가 인식되면 해당 방향에 대한 주행 방향 안내를 음성 및/또는 텍스트 및/또는 그래픽으로 운전자에게 알려주는 것이다.
이하 도면을 참조하여 본 발명에 따른 영상인식을 이용한 신호등 변경 통보 시스템 및 방법을 설명한다.
도 1은 본 발명의 제1실시 예에 따른 영상인식을 이용한 신호등 변경 통보 시스템의 구성을 나타낸 도면이다.
본 발명의 제1실시 예에 따른 신호등 변경 통보 시스템은 제어부(10)와 저장부(20)와 영상부(30)와 방향지시등(50)과 방향지시등 검출부(60)와 주행속도 검출부(70)와 경보부(80)로 구성된다.
상기 제어부(10)는 본 발명에 따른 신호등 변경 통보 시스템의 전반적인 동작을 제어한다.
저장부(20)는 상기 신호등 변경 통보 시스템을 제어하기 위한 제어프로그램을 저장하는 영역과, 상기 제어프로그램에 의해 발생하는 데이터를 일시 저장하는 영역과, 다수의 신호등 형상들에 대한 신호등 패턴 및 신호등 색 패턴들을 저장하는 영역으로 구성된다.
영상부(30)는 차량 전방 상단을 촬영하여 출력하는 CCD 카메라(35)와 상기 촬영된 영상을 엠펙4(MPEG4) 등의 영상데이터로 변환하여 상기 제어부(10)로 출력하는 영상처리부(33)로 구성된다.
방향지시등(50)은 차량의 주행방향을 전방 및 후방의 차량 및 사람들에게 알리기 위한 중요한 신호 램프로서, 방향지시등 조작 스위치부(도시하지 않음)를 포함하며, 운전자의 상기 방향지시등 조작 스위치 조작에 의해 동작한다. 상기 방향 지시등은 좌회전 방향지시등과 우회전 방향지시등이 있으며, 상기 방향지등의 오프는 직진을 의미하고, 좌회전 방향지시등은 좌회전을 우회전 방향지시등은 우회전을 의미한다.
방향지시등 검출부(70)는 상기 방향지시등(50)의 좌회전 방향지시등과 우회전 방향지시등 각각에 연결되어 상기 좌회전 방향지시등 및 우회전 방향지시등의 온/오프 여부를 검사하여 상기 제어부(10)로 출력한다. 상기 방향지시등 검출부(70)는 상기 방향지시등 조작 스위치부에 연결되어 방향지시등의 온/오프 여부 및 방향을 검출하여 상기 제어부(10)로 출력할 수도 있을 것이다.
주행속도 검출부(70)는 차량의 주행속도를 측정하여 상기 제어부(10)로 출력한다.
경보부(80)는 상기 제어부(10)의 제어를 받아 주행 방향을 안내하는 경보를 발생한다. 상기 경보부(80)는 상기 주해 방향을 음성으로 출력하는 오디오 처리 장치가 될 수도 있고, 텍스트 및 그래픽으로 출력하는 디스플레이 장치가 될 수도 있을 것이다.
도 2는 본 발명의 제1실시 예에 따른 영상인식을 이용한 신호등 변경 통보 방법을 나타낸 흐름도이다. 이하 도 1 및 도 2를 참조하여 설명한다.
우선, 제어부(10)는 201단계에서 영상처리부(33)로부터 입력하는 영상데이터와 저장부(20)에 저장되어 있는 다수의 신호등 패턴들 순차 비교하여 전방에 신호등이 있는지를 검사한다.
상기 검사 중에 신호등이 검출되면 제어부(10)는 203단계로 진행하여 영상데 이터의 신호등 크기에 따른 거리를 추정한다. 즉 CCD 카메라(35)의 포커싱 거리가 일정하면 상기 포커싱 거리와 영상데이터의 신호등 크기에 의해 거리를 계산할 수 있다.
상기 203단계에서 차량과 신호등간의 거리가 추정되면 제어부(10)는 205단계에서 상기 거리가 일정 거리 이내인지를 판단한다. 상기 거리를 차량의 차량의 주행 속도별로 다르게 설정될 수 있을 것이다. 예를 들어, 차량이 정차하고 있을 경우에는 50m, 20Km~30Km에서는 100m 등이 될 수 있을 것이다. 차량 속도를 고려하기 위해서는 상기 주행속도 검출부(70)를 통해 차량 속도를 측정하고, 상기 측정된 속도에 따른 거리들이 저장부(20)에 정의되어 있어야 한다.
판단결과 일정 거리 이내이면 제어부(10)는 213단계와 221단계에서 방향지시등 검출부(60)로부터 우측 방향지시등 신호가 입력하는지 좌측 방향지시등 신호가 입력하는지를 검사한다.
상기 213단계에서 우측 방향지시등 신호가 입력하면 영상데이터를 통한 신호등 인식 없이 우측 방향 시지등이 온된 것으로 판단하고 223단계로 진행하여 경보부(80)를 통해 우회전 주행방향 안내를 수행한다.
반면, 상기 좌측 방향지시등 신호가 입력하면 제어부(10)는 225단계로 진행하여 신호등 검출 시 사용된 신호등 패턴과 색 패턴을 통해 신호등의 신호를 인식한다. 예를 들면, 신호등의 등이 4개인 경우, 즉 좌회전 신호(녹색), 직진신호(녹색), 정지신호(적색), 대기 신호(황색)인 경우, 등이 4개짜리인 신호등 패턴과 상기 신호등 패턴의 등의 각 위치에 대응하는 색 패턴들을 비교하여 신호등의 신호를 판단한다.
상기 225단계에서 신호등이 인식되면 제어부(10)는 227단계로 진행하여 인식된 신호등이 좌회전 신호인지를 검사한다.
좌회전 신호가 아니면 제어부(10)는 상기 225단계로 돌아가 다시 신호등을 인식하고, 인식된 신호가 좌회전 신호이면 229단계로 진행하여 경보부(80)를 통해 좌회전 주행방향 안내를 수행한다.
반면, 상기 213단계와 221단계에서 어떤 방향시지등 신호도 입력하지 않으면 제어부(10)는 215단계로 진행하여 신호등을 인식한다.
상기 신호등이 인식되면 제어부(10)는 217단계에서 상기 인식된 신호등이 직진 신호등인지를 판단한다.
판단결과, 직진신호등이 아니면 상기 215단계로 돌아가 신호등을 재인식하고, 직진신호등이면 219단계로 진행하여 직진 주행방향 안내를 수행한다.
도 3은 본 발명의 제2실시 예에 따른 영상인식을 이용한 신호등 변경 통보 시스템의 구성을 나타낸 도면이다.
본 발명에 따른 제2실시 예에서는 내비게이션 시스템을 이용한다.
따라서 본 발명의 제2실시 예에 따른 신호등 변경 통보 시스템은 내비게이션 모듈(160)을 구비한다. 내비게이션 모듈(160)은 GPS 모듈(63)과 지도데이터 데이터베이스(Database: DB)(130)로 구성된다. 상기 내비게이션 모듈(160)은 상기 GPS 모듈(163)을 통해 다수의 GPS 위성들로부터 각각의 위치데이터를 수신받고, 상기 위치데이터들로부터 자신의 위치를 계산하고, 계산된 자신의 위치를 지도데이터 DB(30)의 지도데이터에 맵매칭하여 출력하며, 입력부(113)를 통한 목적지 입력 시 제어부(10)로부터 목적지를 입력받고, 상기 현재 위치에서 상기 목적지까지의 경로를 탐색하고, 탐색된 경로를 상기 지도데이터에 매칭하여 상기 제어부(110)로 출력하고, 측정된 현재 위치를 기준으로 상기 경로를 안내하는 안내 데이터를 제어부(110)로 출력한다.
경보부(180)는 오디오 처리장치로서, 제어부(110)의 제어를 받아 경로 안내 데이터를 음성데이터로 변환하여 음성으로 출력한다. 또한, 상기 경보부(180)는 상기 제어부(10)의 제어를 받아 주행 방향 안내 음성을 출력한다.
도 4는 본 발명의 제2실시 예에 따른 영상인식을 이용한 신호등 변경 통보 방법을 나타낸 도면으로서 상기 내비게이션 모듈을 이용한 신호등 변경 통보 방법을 설명한다.
우선, 제어부(110)는 411단계에서 입력부(113)로부터 목적지가 입력하면 상기 목적지를 내비게이션 모듈(160)로 제공한다. 그러면 내비게이션 모듈(160)은 GPS 모듈(163)은 측정된 자신의 위치에서 상기 목적지까지의 경로를 탐색하고, 탐색된 경로를 지도데이터에 매칭하여 제어부(110)로 출력한다. 상기 경로가 매칭된 지도데이터를 입력받은 제어부(110)는 상기 지도데이터를 터치스크린(115) 등의 표시장치에 디스플레이 하고, 상기 안내 데이터를 경보부(180)를 통해 출력한다.
상기 411단계에서 경로 안내가 수행되면 제어부(10)는 412단계에서 지도데이터 DB(135)를 참조하여 상기 경로 상에 신호등이 있는지를 검사한다.
상기 412단계에서 신호등이 있으면 제어부(110)는 413단계에서 상기 내비게 이션 모듈(160)에서 측정된 현재 위치와 지도데이터의 신호등까지의 거리를 계산한다.
상기 거리가 계산되면 제어부(110)는 414단계에서 상기 계산된 거리가 일정 거리 이내인지를 검사하고, 상기 계산된 거리가 일정 거리 이내이면 415단계로 진행하여 영상부(130)를 통해 신호등을 검출되는지를 검사한다.
상기 신호등이 검출되면 제어부(110)는 416단계로 진행하여 상기 경로 전방에 방향 전환점이 있는지를 판단한다.
상기 416단계에서 경로상에 방향 전환점이 없으면 제어부(110)는 417단계로 진행하여 신호등을 인식하고, 419단계에서 상기 인식된 신호등이 직진 신호인지를 판단한다.
상기 419단계에서의 판단 결과 직진신호가 아니면 상기 417단계로 돌아가 신호등 인식을 다시 수행하고, 직진신호이면 421단계로 진행하여 직진 진행방향 안내를 수행한다.
반면, 상기 416단계에서 경로상에 방향 전환점이 있으면 제어부(110)는 423단계로 진행하여 상기 방향 전환점에서의 경로가 좌회전인지를 판단한다.
판단결과, 우회전이면 제어부(110)는 425단계로 진행하여 우회전 진행방향 안내를 수행하고, 좌회전이면 431단계로 진행하여 좌회전 진행방향 안내를 수행한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도내에서 여러 가지 변형이 가능함은 물론이 다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
상술한 바와 같은 본 발명은, 운전자가 가고자 하는 방향에 대한 신호로 변경 시 운전자에게 알려주므로 운전자가 신호등에 일일이 신경을 쓰지 않아도 되는 편리성을 가진다.

Claims (18)

  1. 영상인식을 이용한 신호등 변경 통보 시스템에 있어서,
    운전자의 차량의 방향지시 스위치 조작에 따른 주행방향을 점멸하여 표시하는 방향지시등과,
    상기 방향지시등과 연결되어 방향지시등의 온/오프 여부 및 진행방향을 검출하고, 점멸하는 방향지시등의 방향을 검출하여 출력하는 방향지시등 방향 검출부와,
    신호등을 촬영하기 위해 주행중의 차량 전방 상단을 촬영하고, 촬영된 영상을 영상데이터로 변환하여 출력하는 영상부와,
    신호등을 검출하기 위한 신호등 형상에 대응하는 패턴 및 신호등의 색 패턴을 저장하는 저장부와,
    소정의 제어를 받아 신호등 변경에 따른 경보신호를 발생하는 경보부와,
    상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하고, 신호등 검출 시 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 신호등의 색 패턴을 비교하여 색을 인지하고, 상기 신호등 패턴과 색에 의해 신호를 판단하고, 판단된 신호와 상기 검출된 방향지시등 방향과 일치하면 상기 진행방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제어부로 이루어짐을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  2. 제1항에 있어서,
    상기 제어부가 상기 영상데이터의 신호등 크기에 의해 차량과 상기 신호등간의 거리를 계산함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  3. 제2항에 있어서,
    상기 제어부가 상기 계산된 거리가 미리 설정된 거리 이내의 거리이면 방향지시등의 방향고 신호등 인식에 따른 진행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  4. 제1항에 있어서,
    상기 경보부가 음성으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  5. 제1항에 있어서,
    상기 경보부가 텍스트 또는 그래픽으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  6. 제5항에 있어서,
    상기 경보부가 텍스트 또는 그래픽으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  7. 영상인식을 이용한 신호등 변경 통보 시스템에 있어서,
    자신의 현재 위치를 측정하고, 상기 현재위치를 지도데이터에 맵매칭하여 출력하고, 소정의 목적지를 입력받고, 상기 현재 위치에서 상기 목적지까지의 경로를 탐색하고 탐색된 경로를 상기 지도데이터에 매칭하여 출력하는 내비게이션 모듈과,
    신호등을 촬영하기 위해 주행중의 차량 전방 상단을 촬영하고, 촬영된 영상을 영상데이터로 변환하여 출력하는 영상부와,
    신호등을 검출하기 위한 신호등 형상에 대응하는 패턴 및 신호등의 등 색 패턴을 저장하는 저장부와,
    소정의 제어를 받아 신호등 변경에 따른 경보신호를 발생하는 경보부와,
    상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하고, 신호등 검출 시 상기 경로 전방에 방향 전환점이 있으면 상기 신호등 색패턴에 의해 상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등의 색을 인지하고, 상기 인식된 신호등 패턴과 색에 의해 신호를 판단하고, 상기 판단된 신호 와 상기 방향 전환점에서 경로의 진행방향과 일치하면 상기 진행방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제어부로 이루어짐을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  8. 제7항에 있어서,
    상기 제어부가 상기 지도데이터 데이터베이스의 지도데이터를 참조하여 경로상에 신호등이 있으면 상기 진행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  9. 제8항에 있어서, 상기 제어부가 상기 지도데이터의 신호등과 자신의 위치까지의 거리를 계산하고, 계산된 거리가 미리 설정된 거리 이내일 때 상기 진행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  10. 제7항에 있어서,
    상기 경보부가 음성으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  11. 제7항에 있어서,
    상기 경보부가 텍스트 또는 그래픽으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  12. 제10항에 있어서,
    상기 경보부가 텍스트 또는 그래픽으로 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 시스템.
  13. 방향지시등과, 방향지시등 방향 검출부와, 영상부와, 신호등을 검출하기 위한 다수의 신호등 형상에 대응하는 패턴 및 신호등의 등 색 패턴을 저장하는 저장부와, 경보부를 구비하는 영상인식을 이용한 신호등 변경 통보 시스템에 있어서,
    상기 영상부를 통해 영상을 촬영하고, 촬영된 영상을 영상데이터로 변환하는 제1과정과,
    상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하는 제2과정과,
    상기 신호등 검출 시 상기 방향지시등의 온/오프 여부 및 방향을 검출하는 제3과정과,
    상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 상기 저장부의 신호등의 색 패턴을 비교하여 신호를 판단하는 제4과정과,
    상기 판단된 신호와 상기 신호등의 온/오프 여부 및 검출된 방향지시등 방향이 일치하면 상기 방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 제5과정으로 이루어짐을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
  14. 제13항에 있어서,
    상기 신호 판단 시 영상데이터의 신호등 크기에 의해 차량과 상기 신호등간의 거리를 계산하는 과정과,
    상기 계산된 거리가 미리 설정된 거리 이내인지를 판단하는 과정을 더 구비하여 상기 계산된 거리가 상기 거리 이내이면 상기 제1과정을 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
  15. 제14항에 있어서,
    상기 방향지시등이 오프이고 상기 신호등의 녹색등이 검출되면 직진 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
  16. 제14항에 있어서,
    상기 방향지시등이 온이고 좌회전 방향지시등이면 상기 신호등 패턴에 의한 원형 및 좌측 화살표 녹색등이 검출되면 좌회전 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
  17. 제14항에 있어서,
    상기 방향지시등이 온이고 우회전 방향지시등이면 우회전 주행방향 안내를 수행함을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
  18. 내비게이션 모듈과, 영상부와, 신호등을 검출하기 위한 다수의 신호등 형상에 대응하는 신호등 패턴들 및 신호등의 등 색 패턴을 저장하는 저장부와, 경보부와 디스플레이부를 구비하는 영상인식을 이용한 신호등 변경 통보 시스템에 있어서,
    목적지를 입력받고 상기 내비게이션 모듈에 의해 측정된 현재 위치에서 상기 목적지까지의 경로를 맵핑하여 지도데이터를 디스플레이 하는 과정과,
    상기 영상부를 통해 영상을 촬영하고, 촬영된 영상을 영상데이터로 변환하는 과정과,
    상기 영상데이터와 상기 신호등 패턴을 비교하여 전방에 존재하는 신호등을 검출하는 과정과,
    상기 신호등 검출 시 상기 경로 전방에 방향전환점이 있는지를 판단하는 과정과,
    상기 영상데이터로부터 검출된 신호등 패턴에 대한 신호등과 상기 저장부의 신호등의 색 패턴을 비교하여 신호를 판단하는 과정과,
    상기 판단된 신호와 상기 경로의 방향전환점에서 방향이 일치하면 상기 방향에 따른 주행방향 안내를 상기 경보부를 통해 경보하는 과정으로 이루어짐을 특징으로 하는 영상인식을 이용한 신호등 변경 통보 방법.
KR1020060003046A 2006-01-11 2006-01-11 영상인식을 이용한 신호등 변경 통보 시스템 및 방법 KR101155270B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020060003046A KR101155270B1 (ko) 2006-01-11 2006-01-11 영상인식을 이용한 신호등 변경 통보 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060003046A KR101155270B1 (ko) 2006-01-11 2006-01-11 영상인식을 이용한 신호등 변경 통보 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20070074913A KR20070074913A (ko) 2007-07-18
KR101155270B1 true KR101155270B1 (ko) 2012-06-18

Family

ID=38500138

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060003046A KR101155270B1 (ko) 2006-01-11 2006-01-11 영상인식을 이용한 신호등 변경 통보 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101155270B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160132700A (ko) * 2015-05-11 2016-11-21 주식회사 경신 능동형 차량 출발 알림 시스템 및 그 제어방법
KR20170008340A (ko) 2015-07-13 2017-01-24 경북대학교 산학협력단 촬영영상을 이용한 교통신호기 검출장치 및 그 방법
WO2017200162A1 (ko) * 2016-05-18 2017-11-23 엘지전자 주식회사 차량 운전 보조 장치 및 차량

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101259159B1 (ko) * 2011-11-07 2013-04-30 에스엘 주식회사 신호등 인식을 통한 차량 경고 장치 및 그 방법
KR101405085B1 (ko) * 2012-12-21 2014-06-19 (주)에이치아이디솔루션 차량녹화영상분석 방법 및 장치
KR102371620B1 (ko) * 2014-06-16 2022-03-07 현대자동차주식회사 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능한 기록 매체
KR20160093275A (ko) 2015-01-29 2016-08-08 쌍용자동차 주식회사 차량 및 신호등 인식/표시장치 및 그 방법
KR101727054B1 (ko) 2015-06-17 2017-04-26 한밭대학교 산학협력단 교통신호등의 특징점 추출에 기초한 교통신호등의 검출과 인식 방법
KR102252913B1 (ko) 2015-12-11 2021-05-18 현대자동차주식회사 신호등 인식 시스템 및 그 방법
KR102600313B1 (ko) * 2016-04-20 2023-11-09 현대오토에버 주식회사 교차로 통행 정보 분석 방법
CN109684900B (zh) * 2017-10-18 2021-03-02 百度在线网络技术(北京)有限公司 用于输出颜色信息的方法和装置
CN111723625B (zh) * 2019-03-22 2023-08-08 上海海拉电子有限公司 交通灯图像识别处理方法、装置、辅助通行系统及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR960025272A (ko) * 1994-12-29 1996-07-20 김주용 자동차용 차내 신호등 장치
KR20000019327A (ko) * 1998-09-10 2000-04-06 류정열 신호등 검출에 따른 차량제어장치 및 그 제어방법
JP2002373396A (ja) 2001-06-18 2002-12-26 Nissan Motor Co Ltd 信号情報提供装置
KR20050073804A (ko) * 2004-01-12 2005-07-18 엘지전자 주식회사 신호등 상태 안내방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR960025272A (ko) * 1994-12-29 1996-07-20 김주용 자동차용 차내 신호등 장치
KR20000019327A (ko) * 1998-09-10 2000-04-06 류정열 신호등 검출에 따른 차량제어장치 및 그 제어방법
JP2002373396A (ja) 2001-06-18 2002-12-26 Nissan Motor Co Ltd 信号情報提供装置
KR20050073804A (ko) * 2004-01-12 2005-07-18 엘지전자 주식회사 신호등 상태 안내방법 및 장치

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160132700A (ko) * 2015-05-11 2016-11-21 주식회사 경신 능동형 차량 출발 알림 시스템 및 그 제어방법
KR101698585B1 (ko) 2015-05-11 2017-01-20 주식회사 경신 능동형 차량 출발 알림 시스템 및 그 제어방법
KR20170008340A (ko) 2015-07-13 2017-01-24 경북대학교 산학협력단 촬영영상을 이용한 교통신호기 검출장치 및 그 방법
WO2017200162A1 (ko) * 2016-05-18 2017-11-23 엘지전자 주식회사 차량 운전 보조 장치 및 차량
KR101843774B1 (ko) * 2016-05-18 2018-03-30 엘지전자 주식회사 차량 운전 보조 장치 및 차량

Also Published As

Publication number Publication date
KR20070074913A (ko) 2007-07-18

Similar Documents

Publication Publication Date Title
KR101155270B1 (ko) 영상인식을 이용한 신호등 변경 통보 시스템 및 방법
JP6218618B2 (ja) 運転支援装置、運転支援方法及び運転支援プログラム
JP2005202678A (ja) 走行支援装置
KR101986166B1 (ko) 차선 인식 장치 및 방법
JP2010113601A (ja) 車両用警告装置
JP2007015525A (ja) カメラが撮影した前方画像に基づいて、先行車両と自車両との間の接近の危険に対処するための信号を出力する出力装置、および、当該出力装置のためのプログラム
JP2005025692A (ja) 車両用情報提供装置
JP2006215982A (ja) 交差点までの距離算出方法、装置及びシステム
KR20090055848A (ko) 신호등 인식 장치 및 방법
JP2008040974A (ja) 運転支援装置
JP4561338B2 (ja) 走行支援装置
US11862018B2 (en) Driving assistance apparatus
KR101250566B1 (ko) 나이트 비전 시스템 및 그 제어방법
JP2019185218A (ja) 警報装置
JP2009074888A (ja) 車間距離計測装置
JP2004349926A (ja) 障害物検出装置及び方法並びに障害物検出用プログラム
JP2004341801A (ja) 追跡車両ランプ検出システムおよび追跡車両ランプ検出方法
JP2012093100A (ja) 車高計測装置
JP2010006249A (ja) 車両ランプ切れ報知システム及びプログラム
KR101717938B1 (ko) 교차로 진입 안내 장치 및 방법
CN108638958B (zh) 警示方法及应用其的警示装置
KR20170069551A (ko) 신호등 인식 시스템 및 그 방법
JP2007133644A (ja) 歩行者認識装置
KR20170060449A (ko) 표지판 인식을 이용한 진입 가능 알림 시스템 및 방법
JP2000149195A (ja) 走路環境認識装置およびそれを用いた安全運転支援装置並びに自動運転装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150512

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160518

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180525

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 8