KR102474723B1 - 방향지시등 고장 판정 시스템 및 방법 - Google Patents

방향지시등 고장 판정 시스템 및 방법 Download PDF

Info

Publication number
KR102474723B1
KR102474723B1 KR1020200189223A KR20200189223A KR102474723B1 KR 102474723 B1 KR102474723 B1 KR 102474723B1 KR 1020200189223 A KR1020200189223 A KR 1020200189223A KR 20200189223 A KR20200189223 A KR 20200189223A KR 102474723 B1 KR102474723 B1 KR 102474723B1
Authority
KR
South Korea
Prior art keywords
pattern
histogram
contrast
turn
color
Prior art date
Application number
KR1020200189223A
Other languages
English (en)
Other versions
KR20220096618A (ko
Inventor
강태룡
이윤재
Original Assignee
주식회사 유라코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유라코퍼레이션 filed Critical 주식회사 유라코퍼레이션
Priority to KR1020200189223A priority Critical patent/KR102474723B1/ko
Publication of KR20220096618A publication Critical patent/KR20220096618A/ko
Priority to KR1020220163973A priority patent/KR102484082B1/ko
Application granted granted Critical
Publication of KR102474723B1 publication Critical patent/KR102474723B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q11/00—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00
    • B60Q11/005—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not
    • B60Q11/007—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not the lighting devices indicating change of drive direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/40—Image enhancement or restoration using histogram techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993—Evaluation of the quality of the acquired pattern
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2306/00—Other features of vehicle sub-units
    • B60Y2306/15—Failure diagnostics

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Mechanical Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)

Abstract

본 발명은 방향지시등 고장 판정 시스템 및 방법에 관한 것이다.
또한, 본 발명은 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하는 턴 시그널 수신단계와, 차량의 전방 또는 후방을 촬영한 영상을 수신하여 히스토그램을 추출하는 추출 단계와, 히스토그램에 기반하여 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 생성하고, 사전에 저장된 방향지시등 동작 패턴과 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 비교하여 방향지시등의 고장 여부를 판정하는 고장 판정단계를 구비함으로써, 차량의 전방 또는 후방을 촬영한 영상을 이용하여 방향지시등의 고장 여부를 판정할 수 있고, 차량 내부의 운전자에게 방향지시등의 고장 상태에 대한 정보를 제공할 수 있다.

Description

방향지시등 고장 판정 시스템 및 방법{Failure determination system and method for turn signal lamp}
본 발명은 방향지시등 고장 판정 시스템 및 방법에 관한 것이다.
일반적으로, 자동차의 방향지시등은 차량의 주행 상태, 차선 변경 여부 등을 다른 차량의 운전자에게 알려주기 위한 장치로서, 운전자가 특정 방향의 방향지시등 레버를 조작하면, 조작된 특정 방향의 방향지시등이 주기적으로 점멸하게 된다.
한편, 차량의 운전자는 차량의 실내에서 외부 환경이나 타 차량은 쉽게 살펴볼 수 있으나, 차량 자체의 외부를 육안으로 살펴볼 수는 없기 때문에, 방향지시등이 고장나거나 단선되어 실제로 동작하지 않는 상황이 발생하더라도, 방향지시등의 동작 상태를 정확하게 확인할 수 없고 고장 상태를 인식하기 어려운 문제점이 있다.
이로 인해, 차량의 운전자가 방향지시등을 조작하여 타 차량에게 차선 변경 여부나 주행 방향에 대해 알려준 것으로 오인한 상태로 차선을 변경하거나 좌회전 또는 우회전을 할 수도 있고, 타 차량에서는 방향지시등을 켜지 않은 차량이 갑작스럽게 차선을 변경하여 끼어들게 되는 상황이 발생하여 차량 간의 사고를 야기할 수도 있는 문제점이 있다.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 차량을 운전하는 운전자에게 방향지시등의 고장 상태에 대한 정보를 제공할 수 있는 방향지시등 고장 판정 시스템 및 방법을 제공하는데 그 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기와 같은 목적을 달성하기 위한 본 발명은 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하는 턴 시그널 수신단계; 차량의 전방 또는 후방을 촬영한 영상을 수신하여 히스토그램을 추출하는 추출 단계; 및 상기 히스토그램에 기반하여 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 생성하고, 사전에 저장된 방향지시등 동작 패턴과 상기 명암 히스토그램 패턴 또는 상기 컬러 히스토그램 패턴을 비교하여 방향지시등의 고장 여부를 판정하는 고장 판정단계;를 포함하는, 방향지시등 고장 판정 방법을 제공한다.
또한, 본 발명은 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하는 턴 시그널 수신단계; 차량의 전방 또는 후방을 촬영한 영상을 수신하여 명암 히스토그램을 추출하는 추출 단계; 및 명암 비율을 고려하여, 명암 히스토그램 패턴을 생성하거나 명암 히스토그램을 컬러 히스토그램으로 변환하여 컬러 히스토그램 패턴을 생성하고, 상기 생성된 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴과 사전에 저장된 방향지시등 동작 패턴을 비교하여 방향지시등의 고장 여부를 판정하는 고장 판정단계;를 포함하는, 방향지시등 고장 판정 방법을 제공한다.
바람직한 실시예에 있어서, 상기 추출 단계는, 명암 히스토그램과 컬러 히스토그램을 추출하고, 상기 고장 판정단계는, 명암 비율을 고려하여 명암 히스토그램 패턴 및 컬러 히스토그램 패턴 중 어느 하나를 생성한다.
바람직한 실시예에 있어서, 상기 명암 히스토그램 패턴 및 상기 컬러 히스토그램 패턴은, 컬러 히스토그램 또는 명암 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를, 영상의 프레임별로 카운트하여 생성한다.
또한, 본 발명은 프로세서; 및 상기 프로세서에 의해 실행 가능한 하나 이상의 인스트럭션을 저장하는 메모리;를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하고, 차량의 전방 또는 후방을 촬영한 영상을 수신하여 히스토그램을 추출하며, 상기 히스토그램에 기반하여 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 생성하고, 사전에 저장된 방향지시등 동작 패턴과 상기 명암 히스토그램 패턴 또는 상기 컬러 히스토그램 패턴을 비교하여 방향지시등의 고장 여부를 판정하는, 방향지시등 고장 판정 시스템을 제공한다.
또한, 본 발명은 프로세서; 및 상기 프로세서에 의해 실행 가능한 하나 이상의 인스트럭션을 저장하는 메모리;를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하고, 차량의 전방 또는 후방을 촬영한 영상을 수신하여 명암 히스토그램을 추출하며, 명암 비율을 고려하여, 명암 히스토그램 패턴을 생성하거나 명암 히스토그램을 컬러 히스토그램으로 변환하여 컬러 히스토그램 패턴을 생성하고, 상기 생성된 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴과 사전에 저장된 방향지시등 동작 패턴을 비교하여 방향지시등의 고장 여부를 판정하는, 방향지시등 고장 판정 시스템을 제공한다.
바람직한 실시예에 있어서, 상기 프로세서는, 명암 히스토그램과 컬러 히스토그램을 추출하고, 명암 비율을 고려하여 명암 히스토그램 패턴 및 컬러 히스토그램 패턴 중 어느 하나를 생성한다.
바람직한 실시예에 있어서, 상기 명암 히스토그램 패턴 및 상기 컬러 히스토그램 패턴은, 컬러 히스토그램 또는 명암 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를, 영상의 프레임별로 카운트하여 생성한다.
전술한 과제해결 수단에 의해 본 발명은 차량의 전방 또는 후방을 촬영한 영상을 이용하여 방향지시등의 고장 여부를 판정할 수 있고, 차량 내부의 운전자에게 방향지시등의 고장 상태에 대한 정보를 제공할 수 있는 효과가 있다.
도 1은 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템을 설명하기 위한 도면.
도 2는 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템의 프로세서에 의해 수행되는 기능을 설명하기 위한 블록도.
도 3은 본 발명의 일실시예에 따른 히스토그램 추출을 위한 관심 영역을 설명하기 위한 도면.
도 4는 본 발명의 일실시예에 따른 주간과 야간의 판정 과정을 설명하기 위한 도면.
도 5는 본 발명의 일실시예에 따른 히스토그램 패턴의 생성 과정을 설명하기 위한 도면.
도 6은 본 발명의 일실시예에 따른 방향지시등 동작 패턴과 히스토그램 패턴의 비교 과정을 설명하기 위한 도면.
도 7은 방향지시등의 온오프 여부에 따른 컬러 히스토그램의 실측 데이터를 나타내는 도면.
도 8은 본 발명의 일실시예에 따른 방향지시등 고장 판정 방법을 설명하기 위한 도면.
하기의 설명에서 본 발명의 특정 상세들이 본 발명의 전반적인 이해를 제공하기 위해 나타나 있는데, 이들 특정 상세들 없이 또한 이들의 변형에 의해서도 본 발명이 용이하게 실시될 수 있다는 것은 이 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도 1 내지 도 8을 참조하여 상세히 설명하되, 본 발명에 따른 동작 및 작용을 이해하는데 필요한 부분을 중심으로 설명한다.
도 1은 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템을 설명하기 위한 도면이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)은 프로세서(110) 및 메모리(120)를 포함하여 구성될 수 있다.
여기서, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)은 차량에 구비되는 주행 영상기록장치(Drive Video Record System, DVRS, 200) 또는 블랙박스에 탑재되거나, 주행 영상기록장치(200)와 연동하여 동작하는 차량 내 제어기 또는 컨트롤 보드에 탑재될 수 있다.
이때, 전술한 주행 영상기록장치(200)는 차량 내부에 장착된 카메라부(210)를 통해 영상을 녹화하는 장치로서, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)은 전술한 카메라부(210)에서 촬영되는 영상을 수신할 수 있다.
또한, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)은 차량에 탑재된 방향지시등 조작 스위치(300) 또는 방향지시등 조작 스위치(300)와 연동하는 차량 내 제어기로부터 턴 시스널을 수신할 수 있고, 차량의 클러스터(400)를 통해 방향지시등의 고장 여부를 판정한 결과를 출력할 수 있다.
상기 프로세서(110)는 하나 이상으로 포함될 수 있고, 메모리(120)에 저장된 프로그램들을 실행할 수 있으며, 아울러, 방향지시등 고장 판정 시스템(100)의 전반적인 동작을 제어할 수도 있다.
상기 메모리(120)는 프로세서(110)에 의해 실행 가능한 명령어들, 프로세서(110)에 의해 실행되는 프로그램들을 저장할 수도 있고, 입/출력되는 데이터들을 저장할 수도 있다.
구체적으로, 메모리(120)는 프로세서(110)의 적어도 하나의 구성요소에 관계된 명령 또는 데이터를 저장할 수 있다. 메모리(120)는 소프트웨어 및/또는 프로그램을 저장할 수 있다. 메모리(120)는 커널, 미들웨어, 어플리케이션 프로그래밍 인터페이스(API), 및/또는 어플리케이션 프로그램 등을 포함할 수 있다. 커널, 미들웨어, 또는 API의 적어도 일부는, 운영 시스템으로 지칭될 수 있다. 커널은, 예를 들면, 다른 프로그램들(예: 미들웨어, API, 또는 어플리케이션 프로그램)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스, 프로세서, 또는 메모리 등)을 제어 또는 관리할 수 있다. 또한, 커널은 미들웨어, API, 또는 어플리케이션 프로그램에서 서버의 개별 구성요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
이하에서는, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)에서 프로세서(110)에 의해 수행되는 기능들을 구체적으로 설명한다.
도 2는 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템의 프로세서에 의해 수행되는 기능을 설명하기 위한 블록도이고, 도 3은 본 발명의 일실시예에 따른 히스토그램 추출을 위한 관심 영역을 설명하기 위한 도면이며, 도 4는 본 발명의 일실시예에 따른 주간과 야간의 판정 과정을 설명하기 위한 도면이고, 도 5는 본 발명의 일실시예에 따른 히스토그램 패턴의 생성 과정을 설명하기 위한 도면이며, 도 6은 본 발명의 일실시예에 따른 방향지시등 동작 패턴과 히스토그램 패턴의 비교 과정을 설명하기 위한 도면이고, 도 7은 방향지시등의 온오프 여부에 따른 컬러 히스토그램의 실측 데이터를 나타내는 도면이다.
참고로, 도 2에 도시된 블록들의 일부 또는 전부는, 특정 기능을 실행하는 하드웨어 및/또는 소프트웨어 구성들로 구현될 수 있다. 도 2에 도시된 블록들이 수행하는 기능들은, 하나 이상의 마이크로프로세서에 의해 구현되거나, 해당 기능을 위한 회로 구성들에 의해 구현될 수 있다. 도 2에 도시된 블록들의 일부 또는 전부는 프로세서(110)에서 실행되는 다양한 프로그래밍 언어 또는 스크립트 언어로 구성된 소프트웨어 모듈일 수 있다.
도 2 내지 도 7을 참조하면, 본 발명의 일실시예에 따른 방향지시등 고장 판정 시스템(100)의 프로세서(110)는 수신부(111), 히스토그램 추출부(112), 제어부(113) 및 고장 알림부(114)를 포함할 수 있다.
상기 수신부(111)는 방향지시등의 턴 시그널을 수신한다.
이러한, 수신부(111)는 차량에 탑재된 방향지시등 조작 스위치(300) 또는 방향지시등 조작 스위치(300)와 연동하는 차량 내 제어기로부터 턴 시스널을 수신하여 방향지시등의 조작 상태를 확인할 수 있다.
또한, 수신부(111)는 방향지시등이 조작되어 점등된 것이 확인되면, 후술하는 히스토그램 추출부(112)와 제어부(113)에 방향지시등이 조작된 것을 알리는 정보를 출력할 수 있다. 그외에도, 좌측과 우측 중 어느 방향의 방향지시등이 켜진 것인지 알리는 정보를 더 포함할 수도 있다.
상기 히스토그램 추출부(112)는 차량 내부에 장착된 카메라부(210)로부터 차량의 전방 또는 후방을 촬영한 영상을 수신하고, 수신한 영상에서 히스토그램을 추출한다.
이러한, 히스토그램 추출부(112)는 도 3에 도시된 바와 같이, 영상 내에 설정된 관심 영역(10a, 10b)에서 명암 히스토그램(30)을 추출할 수 있는데, 여기서, 관심 영역(10a, 10b)은 영상 내에서 방향지시등의 위치를 고려하여 설정된 영역으로, 방향지시등에서 조사되는 빛의 영향을 받아 색상이나 밝기의 변화가 발생하는 영역일 수 있다.
이 경우, 영상의 전체 영역에서 히스토그램을 추출하는 것에 비해 시간과 부하를 줄일 수 있다.
한편, 히스토그램 추출부(112)는 명암 히스토그램(30)과 함께 컬러 히스토그램(20)을 추출할 수도 있다. 또한, 히스토그램 추출부(112)는 좌측 방향지시등이 켜지면 좌측 관심 영역(10a)에서 히스토그램을 추출하고, 우측 방향지시등이 켜진 것으로 확인되면 우측 관심 영역(10b)에서 히스토그램을 추출할 수도 있다.
상기 제어부(113)는 히스토그램에 기반하여 히스토그램 패턴(40)을 생성하고, 방향지시등 동작 패턴(50)과 히스토그램 패턴(40)을 비교하여 방향지시등의 고장 여부를 판정한다.
여기서, 전술한 방향지시등 동작 패턴(50)은 방향지시등에 입력되는 PWM 신호의 패턴일 수 있으며, 히스토그램 패턴(40)의 경우에도 펄스 신호 형태의 패턴으로 생성될 수 있다. 한편, 전술한 방향지시등 동작 패턴(50)은 방향지시등에 단선이 발생하면, 단선되지 않은 방향지시등이 정상 시에 비해 빠르게 점멸하는 점이 반영될 수도 있다.
이러한, 제어부(113)는 히스토그램 패턴(40)의 생성 시, 명암 히스토그램(30)의 명암 비율을 이용하여 영상의 밝고 어두운 정도를 먼저 판정한다.
이때, 제어부(113)는 도 4에 도시된 바와 같이, 명암 히스토그램(30)에서 기준값(31)보다 어두운 명암값을 갖는 픽셀들의 수와 기준값(31)보다 밝은 명암값을 갖는 픽셀들의 수를 비교하고, 어두운 명암값을 갖는 픽셀들이 더 많으면 영상이 어두운 것으로 판정하며, 밝은 명암값을 갖는 픽셀들이 더 많으면 영상이 밝은 것으로 판정할 수 있다. 참고로, 도 4의 X축은 픽셀의 밝기이고 Y축은 픽셀 수를 나타낸다.
여기서, 전술한 기준값(31)은 특정 명암값으로 실험 또는 시뮬레이션을 통해 사전에 설정될 수 있으며, 주간인 경우 영상이 밝은 것으로 판정될 수 있고, 야간이나 터널 등을 주행하는 경우에는 영상이 어두운 것으로 판정될 수 있다.
그리고, 제어부(113)는 영상이 어두운 것으로 판정되면, 명암 히스토그램(30)으로부터 명암 히스토그램 패턴을 생성하여 방향지시등 동작 패턴(50)과 비교하고, 영상이 밝은 것으로 판정되면, 명암 히스토그램(30)을 컬러 히스토그램(20)으로 전환한 후 컬러 히스토그램(20)으로부터 컬러 히스토그램 패턴을 생성하여 방향지시등 동작 패턴(50)과 비교할 수 있다.
한편, 명암 히스토그램(30)과 컬러 히스토그램(20)을 동시에 추출한 경우에는, 명암 히스토그램(30)을 컬러 히스토그램(20)으로 전환하는 과정이 생략될 수도 있다.
그리고, 제어부(113)는 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를 영상의 프레임별로 카운트하여 히스토그램 패턴(40)을 생성한다.
도 5의 (a)에 도시된 바와 같이, 컬러 히스토그램(20)에서 히스토그램 패턴(40)인 컬러 히스토그램 패턴을 생성하는 경우, 기설정된 색상 범위(21)의 픽셀의 수를 카운팅하고, 색상 범위(21)에서 카운팅된 픽셀의 수가 임계치보다 많으면, 히스토그램 패턴(40)에 하이(high)로 저장하고, 도 5의 (b)에 도시된 바와 같이, 기설정된 색상 범위(21)의 픽셀의 수가 임계치보다 적으면, 히스토그램 패턴(40)에 로우(low)로 저장하는 방식으로 컬러 히스토그램 패턴을 생성할 수 있다. 참고로, 도 5의 X축은 픽셀의 색상값이고 Y축은 픽셀 수를 나타낸다.
아울러, 명암 히스토그램 패턴의 경우에도 동일한 방식으로 생성할 수 있으며, 전술한 임계치는 실험 또는 시뮬레이션을 통해 사전에 설정될 수 있다.
그 후, 도 6에 도시된 바와 같이, 제어부(113)는 방향지시등 동작 패턴(50)과 히스토그램 패턴(40)을 비교하여, 방향지시등 동작 패턴(50)과 히스토그램 패턴(40)이 서로 일치하거나 사전에 설정된 범위 이내에서 유사하면, 방향지시등이 정상 동작하는 것으로 판정하고(a), 히스토그램 패턴(40)이 방향지시등 동작 패턴(50)과 상이하면, 방향지시등에 고장이나 단선이 발생하여 정상적으로 동작하지 못하는 것으로 판정할 수 있다(b). 참고로, 도 6의 X축은 시간이고 Y축은 전압을 나타낸다.
한편, 차량의 주변 환경이 밝기 때문에, 컬러 히스토그램(20)을 추출하여 히스토그램 패턴을 생성하고 방향지시등의 동작 여부를 판정하는 과정이 곤란한 것처럼 오인될 수 있다.
그러나, 도 7에 도시된 바와 같이, 실제로 차량을 주행하면서 촬영된 영상의 컬러 히스토그램(20)을 추출하면, 방향지시등을 켜지 않은 상태(a)와 방향지시등을 켠 상태(b)에서 컬러 히스토그램(20)에 설정된 색상 범위(21)에서 특정 색성분의 차이가 발생하게 된다.
즉, 영상의 컬러 히스토그램(20)에서 특정한 색성분, 예를 들면, 방향지시등에 주로 사용되는 주황색 성분의 차이를 이용하여 방향지시등이 정상적으로 점멸하고 있는지 확인할 수 있다.
아울러, 특정 차량의 경우에는 방향 지시등에 고장이 발생하면 정상인 방향 지시등이 빠르게 점멸시키도록 구비되어 있으므로, 관심 영역(10a, 10b)에서 히스토그램을 용이하게 추출할 수 있으며, 방향지시등의 고장 여부도 명확하게 판정할 수 있게 된다.
상기 고장 알림부(114)는 방향지시등의 고장 여부를 판정한 결과를 출력한다.
이러한, 고장 알림부(114)는 제어부(113)에서 방향지시등이 고장인 것으로 판정되면, 차량의 클러스터(400)를 통해 방향지시등의 고장을 알리는 알림 또는 메시지를 출력할 수 있다.
따라서, 운전자는 차량의 내부에서 방향지시등의 고장 여부에 대한 정보를 확인할 수 있으며, 특히, 차량을 이용하여 도로를 주행하는 상태에서도 실시간으로 방향지시등의 고장 여부를 확인할 수 있다.
이와 같은, 본 발명은 프로세서(110)가 메모리(120)에 저장된 적어도 하나의 실행 가능한 명령어 또는 적어도 하나의 실행 가능한 프로그램을 실행함으로써 구현될 수 있으며, 후술하는 본 발명의 일실시예에 따른 방향지시등 고장 판정 방법의 경우에도 동일하게, 메모리(120)에 저장된 적어도 하나의 실행 가능한 명령어 또는 적어도 하나의 실행 가능한 프로그램을 프로세서(110)가 실행함으로써 구현될 수 있다.
도 8은 본 발명의 일실시예에 따른 방향지시등 고장 판정 방법을 설명하기 위한 도면이다.
도 8을 참조하면, 방향지시등 고장 판정 시스템(100)의 프로세서(110)는, 먼저, 방향지시등의 턴 시그널을 수신한다(S100).
이때, 프로세서(110)는 차량에 탑재된 방향지시등 조작 스위치(300) 또는 방향지시등 조작 스위치(300)와 연동하는 차량 내 제어기로부터 턴 시스널을 수신할 수 있으며, 이를 근거로 방향지시등의 조작 상태를 확인할 수 있다.
그 다음, 프로세서(110)는 차량의 전방 또는 후방을 촬영한 영상을 수신하고, 수신한 영상에서 히스토그램을 추출한다(S200).
이때, 프로세서(110)는 차량 내부에 장착된 카메라부(210)를 통해 영상을 수신할 수 있으며, 수신한 영상에서 명암 히스토그램(30)을 추출할 수 있다.
또한, 프로세서(110)는 영상 내에서 방향지시등의 위치를 고려하여 설정된 관심 영역(10a, 10b)에서 명암 히스토그램(30)을 추출함으로써, 영상의 전체 영역에서 히스토그램을 추출하는 것에 비해 시간과 부하를 줄일 수 있다.
한편, S200단계에서 프로세서(110)는 명암 히스토그램(30)과 컬러 히스토그램(20)을 동시에 추출할 수도 있다.
그 다음, 프로세서(110)는 히스토그램에 기반하여 히스토그램 패턴(40)을 생성하고, 사전에 저장된 방향지시등 동작 패턴(50)과 히스토그램 패턴(40)을 비교하여 방향지시등의 고장 여부를 판정한다(S300).
이때, 프로세서(110)는 영상의 밝고 어두운 정도를 먼저 판정하고(S310), 영상이 밝은 것으로 판정되면, 명암 히스토그램(30)을 컬러 히스토그램(20)으로 전환하여 컬러 히스토그램 패턴을 생성한 후 방향지시등 동작 패턴(50)과 비교하고(S320), 영상이 어두운 것으로 판정되면, 명암 히스토그램 패턴을 생성하여 방향지시등 동작 패턴(50)과 비교할 수 있다(S330).
그리고, 프로세서(110)는 컬러 히스토그램 패턴 또는 명암 히스토그램 패턴이 방향지시등 동작 패턴(50)과 일치하는지 판정하고(S340), 방향지시등 동작 패턴(50)과 일치하면 방향지시등이 정상적으로 동작하는 것으로 판정하며(S350), 방향지시등 동작 패턴(50)과 상이하면 방향지시등에 고장이나 단선이 발생하여 정상적으로 동작하지 않는 것으로 판정할 수 있다(S360).
또한, 전술한 S310단계는 명암 히스토그램(30)에서 기준값(31)보다 어두운 명암값을 갖는 픽셀들의 수와 기준값(31)보다 밝은 명암값을 갖는 픽셀들의 수를 비교하여, 어두운 명암값을 갖는 픽셀들이 더 많으면 영상이 어두운 것으로 판정하고, 밝은 명암값을 갖는 픽셀들이 더 많으면 영상이 밝은 것으로 판정할 수 있다.
또한, S320단계와 S330단계에서 프로세서(110)는 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를, 영상의 프레임별로 카운트하여 히스토그램 패턴(40)을 생성할 수 있다.
이때, 프로세서(110)는 특정 범위에 포함되는 픽셀의 수를 카운팅하고, 카운팅된 수가 임계치보다 많으면 하이(high)로 저장하고, 카운팅된 수가 임계치보다 적으면 로우(low)로 저장하는 과정을 각각의 프레임별로 반복하여 히스토그램 패턴(40)을 생성할 수 있다. 여기서, 전술한 임계치는 실험 또는 시뮬레이션을 통해 사전에 설정된다.
또한, 전술한 방향지시등 동작 패턴(50)은 방향지시등에 입력되는 PWM 신호의 패턴일 수 있으며, 히스토그램 패턴(40)의 경우에도 펄스 신호 형태의 패턴으로 생성될 수 있다.
그 다음, 프로세서(110)는 방향지시등이 고장인 것으로 판정되면, 방향지시등의 고장 여부를 판정한 결과를 알림 또는 메시지로 출력한다(S400).
이때, 프로세서(110)는 차량의 클러스터(400)에 알림 또는 메시지를 출력함으로써, 운전자가 차량의 내부에서 방향지시등의 고장 여부에 대한 정보를 확인할 수 있도록 하며, 차량을 이용하여 도로를 주행하는 상태에서도 실시간으로 방향지시등의 고장 여부를 확인할 수 있게 한다.
본 발명의 실시예와 관련하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로 직접 구현되거나, 하드웨어에 의해 실행되는 소프트웨어 모듈로 구현되거나, 또는 이들의 결합에 의해 구현될 수 있다.
소프트웨어 모듈은 RAM(Random Access Memory), ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리(Flash Memory), 하드 디스크, 착탈형 디스크, CD-ROM, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터 판독 가능한 저장 매체에 상주할 수 있다.
본 발명의 구성 요소들은 비일시적 저장매체에 저장되고, 프로세서를 포함하는 컴퓨터에서 실행되어 전술한 방법 또는 알고리즘의 단계들을 수행하며, 하드웨어인 컴퓨터와 결합되어 실행되기 위해 컴퓨터 프로그램(또는 애플리케이션)으로 구현되어 컴퓨터 판독 가능한 저장 매체에 저장될 수 있다. 본 발명의 구성 요소들은 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있으며, 이와 유사하게, 실시 예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다.
이상에서는 본 발명의 바람직한 실시예를 예시적으로 설명하였으나, 본 발명의 범위는 이와 같은 특정 실시예에만 한정되는 것은 아니며, 특허청구범위에 기재된 범주 내에서 적절하게 변경 가능한 것이다.
100 : 방향지시등 고장 판정 시스템
110 : 프로세서
111 : 수신부 112 : 히스토그램 추출부
113 : 제어부 114 : 고장 알림부
120 : 메모리

Claims (8)

  1. 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하는 턴 시그널 수신단계;
    차량의 전방 또는 후방을 촬영한 영상을 수신하여 히스토그램을 추출하는 추출 단계; 및
    상기 히스토그램에 기반하여 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 생성하고, 사전에 저장된 방향지시등 동작 패턴과 상기 명암 히스토그램 패턴 또는 상기 컬러 히스토그램 패턴을 비교하여 방향지시등의 고장 여부를 판정하는 고장 판정단계;를 포함하고,
    상기 방향지시등 동작 패턴은 방향지시등에 입력되는 PWM 신호의 패턴이며,
    상기 명암 히스토그램 패턴과 상기 컬러 히스토그램 패턴은 펄스 신호 형태의 패턴인 것을 특징으로 하는 방향지시등 고장 판정 방법.
  2. 방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하는 턴 시그널 수신단계;
    차량의 전방 또는 후방을 촬영한 영상을 수신하여 명암 히스토그램을 추출하는 추출 단계; 및
    명암 비율을 고려하여, 명암 히스토그램 패턴을 생성하거나 명암 히스토그램을 컬러 히스토그램으로 변환하여 컬러 히스토그램 패턴을 생성하고, 상기 생성된 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴과 사전에 저장된 방향지시등 동작 패턴을 비교하여 방향지시등의 고장 여부를 판정하는 고장 판정단계;를 포함하고,
    상기 방향지시등 동작 패턴은 방향지시등에 입력되는 PWM 신호의 패턴이며,
    상기 명암 히스토그램 패턴과 상기 컬러 히스토그램 패턴은 펄스 신호 형태의 패턴인 것을 특징으로 하는 방향지시등 고장 판정 방법.
  3. 제 1항에 있어서,
    상기 추출 단계는, 명암 히스토그램과 컬러 히스토그램을 추출하고,
    상기 고장 판정단계는,
    명암 비율을 고려하여 명암 히스토그램 패턴 및 컬러 히스토그램 패턴 중 어느 하나를 생성하는 것을 특징으로 하는 방향지시등 고장 판정 방법.
  4. 제 1항 또는 제 2항에 있어서,
    상기 명암 히스토그램 패턴 및 상기 컬러 히스토그램 패턴은,
    컬러 히스토그램 또는 명암 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를, 영상의 프레임별로 카운트하여 생성하는 것을 특징으로 하는 방향지시등 고장 판정 방법.
  5. 프로세서; 및
    상기 프로세서에 의해 실행 가능한 하나 이상의 인스트럭션을 저장하는 메모리;를 포함하고,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하고,
    차량의 전방 또는 후방을 촬영한 영상을 수신하여 히스토그램을 추출하며,
    상기 히스토그램에 기반하여 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴을 생성하고, 사전에 저장된 방향지시등 동작 패턴과 상기 명암 히스토그램 패턴 또는 상기 컬러 히스토그램 패턴을 비교하여 방향지시등의 고장 여부를 판정하며,
    상기 방향지시등 동작 패턴은 방향지시등에 입력되는 PWM 신호의 패턴이고,
    상기 명암 히스토그램 패턴과 상기 컬러 히스토그램 패턴은 펄스 신호 형태의 패턴인 것을 특징으로 하는 방향지시등 고장 판정 시스템.
  6. 프로세서; 및
    상기 프로세서에 의해 실행 가능한 하나 이상의 인스트럭션을 저장하는 메모리;를 포함하고,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    방향지시등의 턴 시그널을 수신하여 방향지시등의 조작 상태를 확인하고,
    차량의 전방 또는 후방을 촬영한 영상을 수신하여 명암 히스토그램을 추출하며,
    명암 비율을 고려하여, 명암 히스토그램 패턴을 생성하거나 명암 히스토그램을 컬러 히스토그램으로 변환하여 컬러 히스토그램 패턴을 생성하고, 상기 생성된 명암 히스토그램 패턴 또는 컬러 히스토그램 패턴과 사전에 저장된 방향지시등 동작 패턴을 비교하여 방향지시등의 고장 여부를 판정하며,
    상기 방향지시등 동작 패턴은 방향지시등에 입력되는 PWM 신호의 패턴이고,
    상기 명암 히스토그램 패턴과 상기 컬러 히스토그램 패턴은 펄스 신호 형태의 패턴인 것을 특징으로 하는 방향지시등 고장 판정 시스템.
  7. 제 5항에 있어서,
    상기 프로세서는,
    명암 히스토그램과 컬러 히스토그램을 추출하고, 명암 비율을 고려하여 명암 히스토그램 패턴 및 컬러 히스토그램 패턴 중 어느 하나를 생성하는 것을 특징으로 하는 방향지시등 고장 판정 시스템.
  8. 제 5항 또는 제 6항에 있어서,
    상기 명암 히스토그램 패턴 및 상기 컬러 히스토그램 패턴은,
    컬러 히스토그램 또는 명암 히스토그램에 포함된 특정 범위의 색상 또는 명암을 갖는 픽셀의 수를, 영상의 프레임별로 카운트하여 생성하는 것을 특징으로 하는 방향지시등 고장 판정 시스템.
KR1020200189223A 2020-12-31 2020-12-31 방향지시등 고장 판정 시스템 및 방법 KR102474723B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200189223A KR102474723B1 (ko) 2020-12-31 2020-12-31 방향지시등 고장 판정 시스템 및 방법
KR1020220163973A KR102484082B1 (ko) 2020-12-31 2022-11-30 방향지시등 고장 판정 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200189223A KR102474723B1 (ko) 2020-12-31 2020-12-31 방향지시등 고장 판정 시스템 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020220163973A Division KR102484082B1 (ko) 2020-12-31 2022-11-30 방향지시등 고장 판정 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20220096618A KR20220096618A (ko) 2022-07-07
KR102474723B1 true KR102474723B1 (ko) 2022-12-06

Family

ID=82398695

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020200189223A KR102474723B1 (ko) 2020-12-31 2020-12-31 방향지시등 고장 판정 시스템 및 방법
KR1020220163973A KR102484082B1 (ko) 2020-12-31 2022-11-30 방향지시등 고장 판정 시스템 및 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020220163973A KR102484082B1 (ko) 2020-12-31 2022-11-30 방향지시등 고장 판정 시스템 및 방법

Country Status (1)

Country Link
KR (2) KR102474723B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101784629B1 (ko) 2016-09-30 2017-10-11 쌍용자동차 주식회사 카메라를 이용한 차량의 램프 고장진단방법
JP2020147068A (ja) 2019-03-11 2020-09-17 三菱自動車工業株式会社 車両用灯具の診断システム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150117167A (ko) * 2014-04-09 2015-10-19 한국전자통신연구원 안전등화 미준수 차량 경고 장치 및 방법
KR20170030812A (ko) * 2015-09-10 2017-03-20 주식회사 만도 후방 램프 고장 판단 장치 및 방법
KR102347078B1 (ko) * 2017-09-11 2022-01-05 현대자동차주식회사 촬영기를 이용하는 자동차의 램프 고장 진단 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101784629B1 (ko) 2016-09-30 2017-10-11 쌍용자동차 주식회사 카메라를 이용한 차량의 램프 고장진단방법
JP2020147068A (ja) 2019-03-11 2020-09-17 三菱自動車工業株式会社 車両用灯具の診断システム

Also Published As

Publication number Publication date
KR20220163339A (ko) 2022-12-09
KR20220096618A (ko) 2022-07-07
KR102484082B1 (ko) 2023-01-04

Similar Documents

Publication Publication Date Title
EP3094075B1 (en) In-vehicle-camera image processing device
JP5437855B2 (ja) 障害物検知装置およびそれを備えた障害物検知システム、並びに障害物検知方法
US9449390B1 (en) Detecting an extended side view mirror
JP2017017635A (ja) 故障診断装置
WO2017102150A1 (de) Verfahren zum bewerten einer durch zumindest einen sensor eines fahrzeugs erfassten gefahrensituation, verfahren zum steuern einer wiedergabe einer gefahrenwarnung und verfahren zum wiedergeben einer gefahrenwarnung
CN113691776A (zh) 一种车内摄像系统及补光方法
KR102484082B1 (ko) 방향지시등 고장 판정 시스템 및 방법
CN113682319B (zh) 摄像头调整方法及装置、电子设备和存储介质
CN113479136A (zh) 一种数字后视镜系统显示控制方法和装置
CN110329156B (zh) 车辆逆光盲区车前信息的识别方法及装置
US20170339375A1 (en) Redundant video path for vehicle rear view camera system
JP6592522B2 (ja) 周囲光を検出する方法及びシステム
CN113723282B (zh) 车辆行驶提示方法、装置、电子设备以及存储介质
CN115027349A (zh) 车辆远光灯智能控制方法及装置、设备、存储介质
CN115848412A (zh) 感知融合方法、装置、设备及存储介质
CN108259819B (zh) 动态影像特征加强方法与系统
WO2019175920A1 (ja) 霧特定装置、霧特定方法及び霧特定プログラム
JP7155870B2 (ja) 車両検出装置と方法及び電子機器
US20220242446A1 (en) Automatic driving control device and automatic driving control method
CN110834582A (zh) 转向灯自动关闭方法、装置、氢能汽车及存储介质
CN116071724B (zh) 车载相机遮挡场景识别方法、电子设备、存储介质及车辆
CN114593394B (zh) 在高清前照灯中推断降低的图像刷新频率的方法和系统
CN111376829A (zh) 用于车辆的控制方法、控制设备和车辆
CN111497732B (zh) 汽车车灯控制方法、装置、控制设备、系统及存储介质
CN116386004A (zh) 交通灯的遮挡状态识别方法、装置和电子设备

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant