KR20120074820A - 얼굴 인식 기능을 이용한 차량 제어 시스템 - Google Patents

얼굴 인식 기능을 이용한 차량 제어 시스템 Download PDF

Info

Publication number
KR20120074820A
KR20120074820A KR1020100136770A KR20100136770A KR20120074820A KR 20120074820 A KR20120074820 A KR 20120074820A KR 1020100136770 A KR1020100136770 A KR 1020100136770A KR 20100136770 A KR20100136770 A KR 20100136770A KR 20120074820 A KR20120074820 A KR 20120074820A
Authority
KR
South Korea
Prior art keywords
driver
image
vehicle
face
unit
Prior art date
Application number
KR1020100136770A
Other languages
English (en)
Inventor
권대우
장은경
Original Assignee
대성전기공업 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 대성전기공업 주식회사 filed Critical 대성전기공업 주식회사
Priority to KR1020100136770A priority Critical patent/KR20120074820A/ko
Publication of KR20120074820A publication Critical patent/KR20120074820A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image

Abstract

본 발명은 얼굴 인식 기능을 이용한 차량 제어 시스템에 관한 것으로, 카메라부에 의해 촬영된 운전자의 얼굴 영상을 통해 운전자 식별, 눈감음 상태 또는 얼굴 방향과 같은 운전자의 상태를 감지하고, 감지된 운전자의 상태에 따라 요구되는 다양한 기능을 수행하도록 함으로써, 운전자에게 편리함을 제공함과 동시에 주행 중 사고를 미연에 방지할 수 있도록 하며, 카메라부를 통해 촬영된 운전자의 얼굴 영상으로부터 얼굴 윤곽선을 추출하고, 추출된 얼굴 윤곽선의 내부 영역을 분석 판단하는 방식을 통해 운전자의 상태를 감지하도록 함으로써, 영상 처리 속도를 단축하여 운전자의 상태에 따라 실시간으로 신속하게 다양한 기능을 수행할 수 있어 주행 중의 긴급한 상황에서 대형 사고를 미연에 방지할 수 있는 얼굴 인식 기능을 이용한 차량 제어 시스템을 제공한다.

Description

얼굴 인식 기능을 이용한 차량 제어 시스템{Control System for Vehicle Using Face Recognition Function}
본 발명은 얼굴 인식 기능을 이용한 차량 제어 시스템에 관한 것이다. 보다 상세하게는 카메라부에 의해 촬영된 운전자의 얼굴 영상을 통해 운전자 식별, 눈감음 상태 또는 얼굴 방향과 같은 운전자의 상태를 감지하고, 감지된 운전자의 상태에 따라 요구되는 다양한 기능을 수행하도록 함으로써, 운전자에게 편리함을 제공함과 동시에 주행 중 사고를 미연에 방지할 수 있도록 하며, 카메라부를 통해 촬영된 운전자의 얼굴 영상으로부터 얼굴 윤곽선을 추출하고, 추출된 얼굴 윤곽선의 내부 영역을 분석 판단하는 방식을 통해 운전자의 상태를 감지하도록 함으로써, 영상 처리 속도를 단축하여 운전자의 상태에 따라 실시간으로 신속하게 다양한 기능을 수행할 수 있어 주행 중의 긴급한 상황에서 대형 사고를 미연에 방지할 수 있는 얼굴 인식 기능을 이용한 차량 제어 시스템에 관한 것이다.
자동차 등의 차량에는, 이동 수단으로서의 기능을 넘어서 사용자로 하여금 보다 안정적이면서도 편안한 주행 상태를 제공할 수 있도록 하는 각종 편의 수단으로서 기능이 요구되고 있다. 따라서, 차량에는 다양한 편의 시설과 이를 작동 및 제어하기 위한 각종 장치들이 구비된다.
특히, 최근에는 차량의 안전 장치에 대한 중요성이 부각되고 있는데, 이러한 추세에 따라 차량의 사고 발생시 운전자 및 탑승자를 보호하는 시스템에 대한 연구 개발이 활발하게 진행되고 있을 뿐만 아니라 이에 더 나아가 차량의 주행 중 사고를 미연에 방지할 수 있는 제어 시스템에 대한 연구 개발 또한 활발하게 진행되고 있다.
예를 들면, 운전자의 음주 상태를 측정하여 음주 운전의 경우에는 차량의 시동이 오프 상태가 되도록 자동 제어되는 시스템이라든지 또는 주행 중 운전자의 상태를 관찰하여 운전자가 졸음 운전을 하는 경우에 운전자에게 졸음 방지 경고를 하는 시스템 등과 같이 운전자의 상태에 따라 안전 운전을 유도하여 주행 중 사고를 미연에 방지하고자 하는 다양한 제어 시스템들이 연구되고 있다.
그러나, 이러한 제어 시스템들은 아직까지 매우 초보적인 수준으로 실제 차량에 널리 적용되지 못하고 있는 실정이다.
본 발명은 종래 기술의 문제점을 해결하기 위해 발명한 것으로서, 본 발명의 목적은 카메라부에 의해 촬영된 운전자의 얼굴 영상을 통해 운전자 식별, 눈감음 상태 또는 얼굴 방향과 같은 운전자의 상태를 감지하고, 감지된 운전자의 상태에 따라 요구되는 다양한 기능을 수행하도록 함으로써, 운전자에게 편리함을 제공함과 동시에 주행 중 사고를 미연에 방지할 수 있도록 하는 얼굴 인식 기능을 이용한 차량 제어 시스템을 제공하는 것이다.
본 발명의 다른 목적은 카메라부를 통해 촬영된 운전자의 얼굴 영상으로부터 얼굴 윤곽선을 추출하고, 추출된 얼굴 윤곽선의 내부 영역을 분석 판단하는 방식을 통해 운전자의 상태를 감지하도록 함으로써, 영상 처리 속도를 단축할 수 있고, 이에 따라 운전자의 상태에 대응하여 실시간으로 신속하게 다양한 기능을 수행할 수 있어 주행 중의 긴급한 상황에서 대형 사고를 미연에 방지할 수 있는 얼굴 인식 기능을 이용한 차량 제어 시스템을 제공하는 것이다.
본 발명은, 차량 실내에 배치되어 운전자의 얼굴 영상을 촬영하는 카메라부; 및 상기 카메라부에 의해 촬영된 영상을 전송받아 영상을 분석 판단하고, 영상에 대한 분석 판단 결과를 차량 시스템을 제어하는 차량 제어부에 인가하는 카메라 제어부를 포함하고, 상기 카메라 제어부는 전송된 영상으로부터 얼굴 윤곽선을 추출하고 상기 얼굴 윤곽선의 내부 영역을 통해 영상을 분석 판단하도록 구성되는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템을 제공한다.
이때, 상기 카메라부에는 적외선 촬영이 가능하도록 적외선 램프 및 적외선 필터가 구비되고, 상기 카메라 제어부는 상기 적외선 램프의 동작 상태를 제어하는 램프 구동부; 상기 카메라부에 의해 촬영된 영상을 캡쳐하여 임시 저장 또는 사용자의 등록에 의해 등록 저장하는 영상 저장부; 상기 영상 저장부에 저장된 영상을 분석 판단하는 연산부; 및 상기 연산부와 상기 차량 제어부를 상호 정보 전달 가능하게 하는 통신부를 포함하여 구성될 수 있다.
이때, 상기 적외선 필터는 상기 카메라부의 렌즈 또는 이미지 센서의 표면에 코팅 처리되는 방식으로 도포될 수 있다.
또한, 상기 연산부는 상기 카메라부로부터 전송된 영상에 대해 다수개의 휘도 포인트를 설정하고, 상기 휘도 포인트의 휘도 평균값과 휘도 기준값을 비교하여 상기 적외선 램프의 휘도가 조절될 수 있도록 상기 램프 구동부를 제어할 수 있다.
또한, 상기 연산부는 상기 카메라부로부터 전송된 영상에 대해 다수개의 특징 포인트를 추출하고, 추출된 다수개의 특징 포인트를 기준으로 상기 얼굴 윤곽선을 추출하여 영상을 분석 판단하도록 구성될 수 있다.
또한, 상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역과 상기 영상 저장부에 등록 저장된 얼굴 윤곽선 내부 영역을 상호 비교하고, 상호 비교한 결과를 메인 운전자 식별 신호로 상기 차량 제어부에 인가하도록 구성될 수 있다.
이때, 상기 메인 운전자 식별 신호를 통해 등록된 운전자가 아닌 것으로 판단된 경우, 상기 차량 제어부는 차량의 시동 상태가 강제 오프되도록 제어할 수 있다.
또한, 상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 일정 시간 간격마다 분석하여 운전자가 계속적으로 동일한지 여부를 파악하고, 파악한 결과를 서브 운전자 식별 신호로 상기 차량 제어부에 인가하도록 구성될 수 있다.
이때, 차량 실내에는 운전자에게 휴식을 권고하는 휴식 경고 장치가 구비되고, 상기 차량 제어부는 차량이 주행중인 상태에서 상기 서브 운전자 식별 신호에 의해 운전자가 설정된 시간 동안 동일하게 유지되는 것으로 판단된 경우 상기 휴식 경고 장치가 작동하도록 제어할 수 있다.
한편, 상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 분석하여 운전자의 눈감음 상태를 감지하고, 감지된 결과를 눈감음 감지 신호로 상기 차량 제어부에 인가하도록 구성될 수 있다.
이때, 상기 연산부는 눈에 대한 다수개의 특징 포인트의 위치 변화를 감지하는 방식으로 운전자의 눈감음 상태를 감지할 수 있다.
또한, 차량 실내에는 운전자에게 졸음 방지를 경고하는 졸음 방지 경고 장치가 구비되고, 상기 차량 제어부는 상기 눈감음 감지 신호가 설정된 시간 동안 유지되는 경우 상기 졸음 방지 경고 장치가 작동하도록 제어할 수 있다.
한편, 상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 분석하여 운전자의 얼굴 방향을 감지하고, 감지된 결과를 얼굴 방향 감지 신호로 상기 차량 제어부에 인가하도록 구성될 수 있다.
이때, 상기 연산부는 입과 코에 대한 특징 포인트를 통해 얼굴 중심선을 설정하고, 상기 중심선으로부터 각각 양쪽 눈 중심에 대한 특징 포인트까지의 거리 변화를 감지하는 방식으로 운전자의 얼굴 방향을 감지할 수 있다.
또한, 차량 실내에는 운전자에게 전방 주시 상태를 경고하는 전방 주시 경고 장치가 구비되고, 상기 차량 제어부는 상기 얼굴 방향 감지 신호에 의해 운전자의 얼굴 방향이 전방 주시 상태가 아닌 것으로 판단된 경우 상기 전방 주시 경고 장치가 작동하도록 제어할 수 있다.
또한, 상기 차량 제어부는 차량 바퀴의 조향 각도를 파악하여 상기 얼굴 방향 감지 신호에 의한 운전자의 얼굴 방향이 차량 바퀴의 조향 각도와 일정 구간 범위 내에서 일치하는 경우에는 상기 전방 주시 경고 장치가 작동하지 않도록 제어할 수 있다.
본 발명에 의하면, 카메라부에 의해 촬영된 운전자의 얼굴 영상을 통해 운전자 식별, 눈감음 상태 또는 얼굴 방향과 같은 운전자의 상태를 감지하고, 감지된 운전자의 상태에 따라 요구되는 다양한 기능을 수행하도록 함으로써, 운전자에게 편리함을 제공함과 동시에 주행 중 사고를 미연에 방지할 수 있는 효과가 있다.
또한, 카메라부를 통해 촬영된 운전자의 얼굴 영상으로부터 얼굴 윤곽선을 추출하고, 추출된 얼굴 윤곽선의 내부 영역을 분석 판단하는 방식을 통해 운전자의 상태를 감지하도록 함으로써, 영상 처리 속도를 단축할 수 있고, 이에 따라 운전자의 상태에 대응하여 실시간으로 신속하게 다양한 기능을 수행할 수 있어 주행 중의 긴급한 상황에서 대형 사고를 미연에 방지할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 구성을 개념적으로 도시한 개념도,
도 2는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 동작 제어 흐름을 단계적으로 도시한 동작 흐름도,
도 3은 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 운전자 식별 방법을 개념적으로 도시한 개념도,
도 4는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 눈감음 상태 감지 방법을 개념적으로 도시한 개념도,
도 5는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 얼굴 방향 감지 방법을 개념적으로 도시한 개념도이다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 구성을 개념적으로 도시한 개념도이고, 도 2는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 동작 제어 흐름을 단계적으로 도시한 동작 흐름도이다.
본 발명의 일 실시예에 따른 차량 제어 시스템은 카메라부를 통해 운전자의 얼굴을 인식하여 운전자를 식별하고 운전자의 눈감음 상태 및 전방 주시 상태 등을 감지하며, 운전자의 상태에 따라 각종 경고 장치 등을 작동시킬 수 있는 시스템으로, 도 1에 도시된 바와 같이 차량 실내에 배치되어 운전자의 얼굴 영상을 촬영하는 카메라부(100)와, 카메라부(100)에 의해 촬영된 영상을 전송받아 영상을 분석 판단하여 그 결과를 차량 제어부(300)에 인가하는 카메라 제어부(200)를 포함하여 구성된다.
카메라부(100)는 운전자의 얼굴 영상을 촬영하기 위한 구성으로, 촬영이 용이하도록 스티어링 칼럼(미도시)의 상단부에 장착될 수 있으나 이외에도 운전자의 얼굴 촬영이 용이한 각도로 다양한 위치에 장착될 수 있다.
이러한 카메라부(100)는 야간에도 운전자의 얼굴을 원활하게 촬영할 수 있도록 적외선 카메라 방식으로 적용되는 것이 바람직하며, 이러한 적외선 촬영이 가능하도록 적외선을 피사체에 발산하는 적외선 램프(140)와, 적외선 영역의 광이미지를 수집할 수 있도록 적외선 필터(130)가 구비된다. 이때, 적외선 필터(130)는 광이미지를 입사받는 렌즈(120)와 수광된 광이미지를 전기적 신호로 변환하는 이미지 센서(110) 사이에 배치되는데, 광이미지의 집중도를 향상시킬 수 있도록 렌즈(120)의 후면 또는 이미지 센서(110)의 전면에 코팅 처리되는 방식으로 도포되도록 구성될 수 있다. 또한, 적외선 램프(140)는 카메라 제어부(200)를 통해 그 휘도가 조절될 수 있도록 구성된다.
카메라 제어부(200)는 카메라부(100)에 의해 촬영된 영상을 전송받아 영상을 분석 판단하고, 영상에 대한 분석 판단 결과를 차량 시스템을 제어하는 차량 제어부(300)에 인가하도록 구성되는데, 램프 구동부(230), 영상 저장부(250), 연산부(210) 및 통신부(240)를 포함하여 구성된다.
영상 저장부(250)는 카메라부(100)에 의해 촬영된 영상을 캡쳐하여 저장하는 구성으로, 촬영된 영상을 임시 저장하는 임시 저장부(251)와, 사용자의 등록에 의해 등록 저장하는 등록 저장부(252)를 포함한다. 또한, 연산부(210)에 의해 활용되는 각종 연산 프로그램을 저장하는 프로그램 저장부(253)를 포함하여 구성된다. 이때, 등록 저장부(252)에 사용자가 촬영 영상을 등록 저장하기 위한 방법은 스티어링 휠에 장착된 스티어링 휠 리모컨 스위치(400)의 조작을 통해 카메라부(100)를 작동시켜 자신의 얼굴을 촬영하고 저장하는 방식으로 구성될 수 있으며, 등록 저장된 영상 또는 촬영 중인 영상은 차량의 클러스터(500)에 디스플레이되도록 구성될 수 있다.
연산부(210)는 영상 저장부(250)에 저장된 영상을 분석 판단하며, 연산부(210)에 의해 분석 판단된 결과는 차량 제어부(300)로 전송되는데, 이러한 연산부(210)와 차량 제어부(300)의 통신은 연산부(210)와 차량 제어부(300)를 상호 정보 전달 가능하게 하는 통신부(240)에 의해 수행되도록 구성된다.
한편, 카메라 제어부(200)에는 카메라부(100)에 의해 촬영된 영상에 대한 아날로그 신호를 전송받아 디지털 신호로 변환하는 영상 디코더(220)가 구비되고, 영상 디코더(220)에 의해 디지털 신호로 변환된 영상이 영상 저장부(250)에 저장되도록 구성된다.
램프 구동부(230)는 카메라부(100)의 적외선 램프(140) 동작 상태를 구동 제어하는데, 예를 들어, 촬영된 영상이 기준보다 너무 어두운 경우 적외선 램프(140)의 휘도가 증가하도록 제어하고, 촬영된 영상이 기준보다 너무 밝은 경우 적외선 램프(140)의 휘도가 감소하도록 제어한다. 이때, 램프 구동부(230)는 카메라부(100)로부터 전송된 영상에 대한 연산부(210)의 분석 판단 결과에 따라 동작하도록 제어된다.
좀 더 구체적으로 살펴보면, 카메라부(100)로부터 전송된 영상에 대해 연산부(210)는 다수개의 휘도 포인트를 설정하고, 다수개 휘도 포인트의 휘도 평균값과 미리 설정된 휘도 기준값을 비교하여 비교한 결과에 따라 적외선 램프(140)의 휘도가 조절될 수 있도록 램프 구동부(230)가 동작한다. 따라서, 주간에는 적외선 램프(140)의 휘도가 상대적으로 낮게 조절되도록 램프 구동부(230)가 동작하고, 야간에는 적외선 램프(140)의 휘도가 상대적으로 높게 조절되도록 램프 구동부(230)가 동작한다.
이와 같은 구조에 따라 본 발명의 일 실시예에 따른 차량 제어 시스템은 카메라부(100)를 통해 운전자의 얼굴 영상을 촬영하고, 촬영된 영상에 대해 카메라 제어부(200)를 통해 분석 판단하여 그 결과를 차량 제어부(300)로 인가하게 되는데, 이때, 카메라 제어부(200)는 본 발명의 일 실시예에 따라 카메라부(100)에서 전송된 영상으로부터 얼굴 윤곽선(Q)을 추출하고, 얼굴 윤곽선(Q)의 내부 영역을 통해 영상을 분석 판단하도록 구성된다.
이와 같이 카메라부(100)로부터 전송된 영상에 대해 얼굴 윤곽선(Q)을 추출하고, 이러한 얼굴 윤곽선(Q)을 기준으로 영상을 분석 판단하므로, 영상에 대한 분석 판단 처리 시간이 매우 단축되어 운전자 상태에 대한 감지 기능을 매우 신속하게 처리할 수 있고, 이에 따라 운전자 상태에 따라 차량 제어부(300)를 통해 실시간으로 특정 기능을 수행하도록 할 수 있다.
이러한 얼굴 윤곽선(Q) 추출 방법은, 먼저 카메라부(100)로부터 전송된 영상에 대해 문턱치 처리를 통해 에지 라인을 검출하고, 검출된 에지 라인을 통해 눈, 코, 입 등 얼굴과 관련된 특징 포인트(P)를 다수개 추출한다(도 3의 (a)참조). 이후 추출된 다수개의 특징 포인트(P)를 기준으로 하여 얼굴 윤곽선(Q)을 추출하는 방식(도 3의 (b) 참조)으로 진행된다. 이때, 문턱치 처리란 영상의 흑백 부분만을 검출하기 위한 영상 분석 처리 기법의 하나로 이는 영상 분석 처리 분야에서 널리 사용되고 있는 공지된 기술이므로, 이에 대한 상세한 설명은 생략한다.
이와 같이 얼굴 윤곽선(Q)을 추출한 후, 얼굴 윤곽선(Q) 내부 영역의 분석 판단 결과를 차량 제어부(300)에 인가하고, 얼굴 윤곽선(Q) 내부 영역에 대한 분석 판단 결과를 통해 파악된 운전자의 상태에 따라 차량 제어부(300)를 통해 다양한 기능을 수행할 수 있다. 예를 들어, 차량 실내에는 도 1에 도시된 바와 같이 차량 제어부(300)를 통해 동작 제어되는 휴식 경고 장치(310), 졸음 방지 경고 장치(320) 및 전방 주시 경고 장치(330) 등이 구비될 수 있으며, 차량 제어부(300)는 카메라 제어부(200)에 의해 판단된 운전자의 얼굴 윤곽선(Q) 분석 판단 결과에 따라 해당 장치들이 동작하도록 제어할 수 있다.
이상에서 설명한 본 발명의 일 실시예에 따른 차량 제어 시스템의 동작 상태를 정리하면, 도 2에 도시된 바와 같이 먼저 카메라부(100)를 통해 영상을 촬영하고(S1), 촬영된 영상이 카메라 제어부(200)로 전송되며(S2), 촬영된 영상은 캡쳐된 상태로 영상 저장부(250)에 저장된다(S3). 연산부(210)는 영상 저장부(250)에 저장된 캡쳐된 영상에 대해 다수개의 휘도 포인트를 검출하고(S4), 휘도 포인트의 휘도 평균값을 휘도 기준값과 비교 분석한다(S5). 이때, 휘도 평균값이 휘도 기준값보다 일정 범위 이상 높아서 영상이 너무 밝은 경우에는 램프 구동부(230)를 통해 적외선 램프(140)의 휘도를 어둡게 조정하고(S6), 카메라부(100)를 통해 재촬영한다. 만약, 휘도 평균값이 휘도 기준값보다 일정 범위 이상 낮아서 영상이 너무 어두운 경우에는 램프 구동부(230)를 통해 적외선 램프(140)의 휘도를 밝게 조정하고(S7), 카메라부(100)를 통해 재촬영한다. 휘도 평균값이 휘도 기준값의 일정 오차 범위 이내에서 일치하게 되면, 영상에 대해 문턱치 처리하고(S8), 눈, 코, 입과 같은 얼굴과 관련된 특징 포인트(P)를 추출한다(S9). 이후 추출된 특징 포인트(P)를 기준으로 얼굴 윤곽선(Q)을 추출한다. 이와 같이 얼굴 윤곽선(Q)이 추출되면, 연산부(210)는 얼굴 윤곽선(Q) 내부 영역을 중심으로 영상을 분석 판단하여 운전자를 식별하거나(S11), 운전자의 눈감음 상태를 감지하거나(S12), 운전자의 얼굴 방향을 감지한다(S13).
이와 같이 연산부(210)에 의해 운전자 식별, 눈감음 상태 감지, 얼굴 방향 감지 등의 분석 판단 작업이 수행되면, 각 분석 판단 결과는 차량 제어부(300)로 인가되고, 차량 제어부(300)를 통해 운전자의 상태에 따라 필요한 다양한 기능이 수행될 수 있다. 예를 들면, 휴식 경고 장치(310), 졸음 방지 경고 장치(320) 및 전방 주시 경고 장치(330) 등의 동작을 수행하게 할 수 있으며, 이외에도 운전자의 편의를 위한 다양한 기능을 수행하게 할 수 있다.
도 3은 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 운전자 식별 방법을 개념적으로 도시한 개념도이고, 도 4는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 눈감음 상태 감지 방법을 개념적으로 도시한 개념도이고, 도 5는 본 발명의 일 실시예에 따른 얼굴 인식 기능을 이용한 차량 제어 시스템의 얼굴 방향 감지 방법을 개념적으로 도시한 개념도이다.
도 3에는 본 발명의 일 실시예에 따른 운전자 식별 방법이 도시되는데, 도 3의 (a)에 도시된 바와 같이 먼저 문턱 처리된 영상으로부터 얼굴과 관련된 특징 포인트(P)를 추출하고, 이를 기준으로 도 3의 (b)에 도시된 바와 같이 얼굴 윤곽선(Q)을 추출한다. 이와 같이 추출된 얼굴 윤곽선(Q) 및 특징 포인트(P)는 도 3의 (c)에 도시된 바와 같이 사용자의 등록에 의해 영상 저장부(250)에 저장될 수 있다. 이와 같이 영상 저장부(250)에는 촬영된 영상 전체 이미지가 저장되는 것이 아니라 얼굴 윤곽선(Q)의 내부 영역, 즉 얼굴 윤곽선(Q)과 얼굴 관련 특징 포인트(P)만 저장된다. 이때, 사용자의 등록에 의해 영상 저장부(250)에 저장되는 얼굴 윤곽선(Q) 내부 영역은 현재 운전자가 등록된 운전자인지 여부를 판단하는 기준 데이터로서 활용된다.
즉, 차량에 운전자가 탑승하면, 카메라부(100)는 운전자의 얼굴 영상을 촬영하고, 촬영된 영상은 캡쳐되어 영상 저장부(250)에 임시 저장된다. 이후, 연산부(210)는 도 3의 (d)에 도시된 바와 같이 영상 저장부(250)에 임시 저장된 영상으로부터 얼굴 윤곽선(Q')을 추출하고, 도 3의 (e)에 도시된 바와 같이 이를 이미 등록 저장된 얼굴 윤곽선(Q) 내부 영역 데이터와 비교한다. 즉, 현재 운전자에 대해 임시 저장된 영상의 얼굴 윤곽선(Q') 내부 영역과 이미 등록 저장된 얼굴 윤곽선(Q) 내부 영역을 비교함으로써, 현재 운전자가 등록 저장된 운전자에 해당하는지 여부를 판단한다.
이와 같이 비교 판단한 결과는 메인 운전자 식별 신호로서 차량 제어부(300)에 인가되고, 메인 운전자 식별 신호를 통해 현재 운전자가 등록 저장된 운전자에 해당된다고 판단되면, 차량 제어부(300)는 등록 저장된 운전자가 선호하는 각종 차량 편의 장치, 시트 위치, 사이드 미러의 각도 등이 등록 저장된 운전자에 적합하게 조절되도록 제어할 수 있다. 만약, 메인 운전자 식별 신호를 통해 현재 운전자가 등록 저장된 운전자에 해당되지 않는다고 판단되면, 차량 제어부(300)는 차량의 시동 상태가 강제 오프되도록 제어할 수 있고, 이에 따라 차량의 도난을 방지할 수 있다.
한편, 등록 저장된 운전자에 대한 얼굴 윤곽선(Q) 내부 영역에 대한 데이터는 적어도 2개 이상의 촬영 영상을 통해 2개 이상 등록 저장되는 것이 바람직하며, 현재 운전자에 대해 임시 저장된 얼굴 윤곽선(Q) 정보와 비교하는 과정에서 좀더 정확성을 향상시킬 수 있도록 2개 이상 등록 저장된 데이터와 모두 비교하여 판단하도록 하는 것이 바람직하다.
또한, 연산부(210)는 현재 촬영되어 영상 저장부(250)에 임시 저장된 영상의 얼굴 윤곽선(Q) 내부 영역을 일정 시간 간격마다 분석하여 운전자가 계속적으로 동일한지 여부를 파악하고, 파악한 결과를 서브 운전자 식별 신호로 차량 제어부(300)에 인가하도록 구성될 수 있다. 즉, 서브 운전자 식별 신호는 현재 운전자가 등록 저장된 운전자인지 여부와 무관하게 현재 운전자가 계속해서 동일한 운전자인지 여부를 일정 시간 간격마다 판단하는 신호이다.
이와 같이 서브 운전자 식별 신호가 차량 제어부(300)에 인가되면, 차량 제어부(300)는 차량이 주행중인 상태에서 서브 운전자 식별 신호에 의해 운전자가 설정된 시간 동안 동일하게 유지되는 것으로 판단된 경우 전술한 휴식 경고 장치(310)가 작동하도록 제어할 수 있다. 휴식 경고 장치(310)는 운전자에게 휴식을 권고하는 장치로서 스피커를 통해 안내 방송을 하는 방식으로 구성될 수도 있고, 별도의 알람벨이나 또는 조명 장치 등의 형태로 구성될 수도 있는 등 운전자에게 용이하게 인식될 수 있는 다양한 형태로 구성될 수 있다.
이러한 구조에 따라 본 발명의 일 실시예에 따른 차량 제어 시스템은 메인 운전자 식별 신호를 통해 등록된 운전자인지 여부를 판단하여 각종 편의 장치 등을 해당 운전자에 맞게 세팅 조절할 수 있을 뿐만 아니라 아울러 도난 방지 기능 또한 수행할 수 있으며, 서브 운전자 식별 신호를 통해 동일 운전자가 장시간 운전하였는지 여부를 판단하여 운전자에게 휴식을 권고함으로써 피로에 의한 사고 위험을 미연에 방지할 수 있다.
한편, 본 발명의 일 실시예에 따른 차량 제어 시스템은 현재 촬영되어 영상 저장부(250)에 임시 저장된 영상의 얼굴 윤곽선(Q) 내부 영역을 분석하여 운전자의 눈감음 상태를 감지하고, 감지된 결과를 눈감음 감지 신호로 차량 제어부(300)에 인가하도록 구성된다. 이러한 눈감음 감지 신호는 운전자가 운전 중 졸고 있는지 여부를 판단하기 위한 신호로서, 차량 제어부(300)는 이러한 눈감음 감지 신호가 설정된 시간 동안 유지되는 경우 전술한 졸음 방지 경고 장치(320)가 작동하도록 제어할 수 있다. 졸음 방지 경고 장치(320)는 운전자에게 졸음 방지를 경고하는 장치로서, 스피커를 통한 안내 방송, 알람벨 또는 에어컨을 통한 냉풍 공급 등 운전자에게 주의를 환기시키는 다양한 형태로 구성될 수 있다.
예를 들어, 눈감음 감지 신호에 의해 운전자의 눈감음 상태가 단기적으로 1초 이상 계속되거나 또는 장기적으로 일정 시간을 기준으로 총 눈감음 상태의 시간을 백분율로 계산하여 일정 임계치 이상이면 졸음 방지 경고 장치(320)가 작동하도록 제어할 수 있다.
이때, 운전자의 눈감음 상태를 감지하는 방법은 본 발명의 일 실시예에 따라 영상 저장부(250)에 임시 저장된 영상의 얼굴 윤곽선(Q) 내부 영역에서 눈에 대한 다수개의 특징 포인트(P)의 위치 변화를 감지하는 방식으로 구성될 수 있다. 즉, 도 4에 도시된 바와 같이 눈 주위를 따라 다수개의 특징 포인트(P)가 추출되고, 눈의 상하부에 지정된 특징 포인트(P)의 이격 거리(X)에 대한 변화량을 측정하는 방식으로 운전자의 눈감음 상태를 감지할 수 있다. 이와 같이 특징 포인트(P)의 위치 변화를 이용하여 감지하게 되면, 그 처리 속도가 단축되어 도로 주행 중의 긴박한 상황에서 신속하게 운전자에게 졸음 방지에 대한 경고를 할 수 있다는 점에서 대형 사고를 미연에 방지할 수 있는 효과가 있다.
한편, 본 발명의 일 실시예에 따른 차량 제어 시스템은 현재 촬영되어 영상 저장부(250)에 임시 저장된 영상의 얼굴 윤곽선(Q) 내부 영역을 분석하여 운전자의 얼굴 방향을 감지하고, 감지된 결과를 얼굴 방향 감지 신호로 차량 제어부(300)에 인가하도록 구성된다. 이러한 얼굴 방향 감지 신호는 운전자의 전방 주시 상태를 감지하기 위한 신호로서, 차량 제어부(300)는 얼굴 방향 감지 신호에 의해 운전자의 얼굴 방향이 전방 주시 상태가 아닌 것으로 판단된 경우 전술한 전방 주시 경고 장치(330)가 작동하도록 제어할 수 있다. 전방 주시 경고 장치(330)는 운전자에게 전방 주시 상태를 경고하기 위한 장치로서, 스피커를 통한 안내 방송, 알람벨 또는 기타 조명 장치 등을 이용하여 운전자의 주의를 환기시키는 다양한 형태로 구성될 수 있다.
이때, 차량 제어부(300)는 조향각 센서(미도시) 등을 통해 차량 바퀴의 조향 각도를 파악하여 얼굴 방향 감지 신호에 의한 운전자의 얼굴 방향이 차량 바퀴의 조향 각도와 일정 구간 범위 내에서 일치하는 경우에는 전방 주시 경고 장치(330)가 작동하지 않도록 제어한다.
따라서, 본 발명의 일 실시예에 따른 차량 제어 시스템은 운전자의 얼굴 방향을 감지하여 운전자가 전방 주시를 하지 않는다고 판단되면, 이를 운전자에게 인식시킬 수 있도록 전방 주시 경고 장치(330)를 작동시키는데, 이때, 차량이 곡선 주로를 주행하는 경우 운전자의 얼굴 방향이 곡선 주로를 향해 돌아가게 되므로, 이 경우에는 전방 주시 경고 장치(330)가 작동하지 않도록 구성된다. 즉, 본 발명의 일 실시예에 따른 차량 제어 시스템은 차량 바퀴의 조향 각도와 운전자의 얼굴 방향을 함께 고려하여 운전자의 전방 주시 상태를 감지하고, 이에 대응하여 전방 주시 경고 장치(330)가 작동하도록 제어함으로써, 더욱 정확하게 전방 주시 상태에 대한 경고 기능을 수행할 수 있다.
한편, 운전자의 얼굴 방향을 감지하는 방법은 도 5에 도시된 바와 같이 영상 저장부(250)에 임시 저장된 영상의 얼굴 윤곽선(Q) 내부 영역에서 얼굴 중심선(C)을 설정하고, 얼굴 중심선(C)으로부터 각각 양쪽 눈 중심에 대한 특징 포인트(P)까지의 거리(Y1,Y2) 변화를 감지하는 방식으로 구성될 수 있다. 이때, 얼굴 중심선(C)은 도 5에 도시된 바와 같이 입과 코에 대한 특징 포인트(P)를 연결하는 방식으로 설정할 수 있다. 이와 같이 중심선(C)으로부터 양쪽 눈 중심에 대한 특징 포인트(P)까지의 거리(Y1,Y2)는 운전자의 얼굴 방향이 전방 주시 상태에서 양측 방향으로 돌아감에 따라 각각 서로 다른 길이로 변화하게 되므로, 이러한 Y1,Y2의 거리 변화를 측정함으로써 운전자의 얼굴 방향을 감지할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 카메라부 130: 적외선 필터
140: 적외선 램프 200: 카메라 제어부
210: 연산부 250: 영상 저장부
300: 차량 제어부 310: 휴식 경고 장치
320: 졸음 방지 경고 장치 330: 전방 주시 경고 장치

Claims (16)

  1. 차량 실내에 배치되어 운전자의 얼굴 영상을 촬영하는 카메라부; 및
    상기 카메라부에 의해 촬영된 영상을 전송받아 영상을 분석 판단하고, 영상에 대한 분석 판단 결과를 차량 시스템을 제어하는 차량 제어부에 인가하는 카메라 제어부
    를 포함하고, 상기 카메라 제어부는 전송된 영상으로부터 얼굴 윤곽선을 추출하고 상기 얼굴 윤곽선의 내부 영역을 통해 영상을 분석 판단하도록 구성되는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  2. 제 1 항에 있어서,
    상기 카메라부에는 적외선 촬영이 가능하도록 적외선 램프 및 적외선 필터가 구비되고,
    상기 카메라 제어부는
    상기 적외선 램프의 동작 상태를 제어하는 램프 구동부;
    상기 카메라부에 의해 촬영된 영상을 캡쳐하여 임시 저장 또는 사용자의 등록에 의해 등록 저장하는 영상 저장부;
    상기 영상 저장부에 저장된 영상을 분석 판단하는 연산부; 및
    상기 연산부와 상기 차량 제어부를 상호 정보 전달 가능하게 하는 통신부
    를 포함하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  3. 제 2 항에 있어서,
    상기 적외선 필터는 상기 카메라부의 렌즈 또는 이미지 센서의 표면에 코팅 처리되는 방식으로 도포되는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  4. 제 2 항에 있어서,
    상기 연산부는 상기 카메라부로부터 전송된 영상에 대해 다수개의 휘도 포인트를 설정하고, 상기 휘도 포인트의 휘도 평균값과 휘도 기준값을 비교하여 상기 적외선 램프의 휘도가 조절될 수 있도록 상기 램프 구동부를 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  5. 제 2 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 연산부는 상기 카메라부로부터 전송된 영상에 대해 다수개의 특징 포인트를 추출하고, 추출된 다수개의 특징 포인트를 기준으로 상기 얼굴 윤곽선을 추출하여 영상을 분석 판단하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  6. 제 5 항에 있어서,
    상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역과 상기 영상 저장부에 등록 저장된 얼굴 윤곽선 내부 영역을 상호 비교하고, 상호 비교한 결과를 메인 운전자 식별 신호로 상기 차량 제어부에 인가하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  7. 제 6 항에 있어서,
    상기 메인 운전자 식별 신호를 통해 등록된 운전자가 아닌 것으로 판단된 경우, 상기 차량 제어부는 차량의 시동 상태가 강제 오프되도록 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  8. 제 6 항에 있어서,
    상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 일정 시간 간격마다 분석하여 운전자가 계속적으로 동일한지 여부를 파악하고, 파악한 결과를 서브 운전자 식별 신호로 상기 차량 제어부에 인가하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  9. 제 8 항에 있어서,
    차량 실내에는 운전자에게 휴식을 권고하는 휴식 경고 장치가 구비되고,
    상기 차량 제어부는 차량이 주행중인 상태에서 상기 서브 운전자 식별 신호에 의해 운전자가 설정된 시간 동안 동일하게 유지되는 것으로 판단된 경우 상기 휴식 경고 장치가 작동하도록 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  10. 제 5 항에 있어서,
    상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 분석하여 운전자의 눈감음 상태를 감지하고, 감지된 결과를 눈감음 감지 신호로 상기 차량 제어부에 인가하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  11. 제 10 항에 있어서,
    상기 연산부는 눈에 대한 다수개의 특징 포인트의 위치 변화를 감지하는 방식으로 운전자의 눈감음 상태를 감지하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  12. 제 10 항에 있어서,
    차량 실내에는 운전자에게 졸음 방지를 경고하는 졸음 방지 경고 장치가 구비되고, 상기 차량 제어부는 상기 눈감음 감지 신호가 설정된 시간 동안 유지되는 경우 상기 졸음 방지 경고 장치가 작동하도록 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  13. 제 5 항에 있어서,
    상기 연산부는 현재 촬영되어 상기 영상 저장부에 임시 저장된 영상의 얼굴 윤곽선 내부 영역을 분석하여 운전자의 얼굴 방향을 감지하고, 감지된 결과를 얼굴 방향 감지 신호로 상기 차량 제어부에 인가하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  14. 제 13 항에 있어서,
    상기 연산부는 입과 코에 대한 특징 포인트를 통해 얼굴 중심선을 설정하고, 상기 중심선으로부터 각각 양쪽 눈 중심에 대한 특징 포인트까지의 거리 변화를 감지하는 방식으로 운전자의 얼굴 방향을 감지하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  15. 제 13 항에 있어서,
    차량 실내에는 운전자에게 전방 주시 상태를 경고하는 전방 주시 경고 장치가 구비되고, 상기 차량 제어부는 상기 얼굴 방향 감지 신호에 의해 운전자의 얼굴 방향이 전방 주시 상태가 아닌 것으로 판단된 경우 상기 전방 주시 경고 장치가 작동하도록 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
  16. 제 15 항에 있어서,
    상기 차량 제어부는 차량 바퀴의 조향 각도를 파악하여 상기 얼굴 방향 감지 신호에 의한 운전자의 얼굴 방향이 차량 바퀴의 조향 각도와 일정 구간 범위 내에서 일치하는 경우에는 상기 전방 주시 경고 장치가 작동하지 않도록 제어하는 것을 특징으로 하는 얼굴 인식 기능을 이용한 차량 제어 시스템.
KR1020100136770A 2010-12-28 2010-12-28 얼굴 인식 기능을 이용한 차량 제어 시스템 KR20120074820A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100136770A KR20120074820A (ko) 2010-12-28 2010-12-28 얼굴 인식 기능을 이용한 차량 제어 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100136770A KR20120074820A (ko) 2010-12-28 2010-12-28 얼굴 인식 기능을 이용한 차량 제어 시스템

Publications (1)

Publication Number Publication Date
KR20120074820A true KR20120074820A (ko) 2012-07-06

Family

ID=46708894

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100136770A KR20120074820A (ko) 2010-12-28 2010-12-28 얼굴 인식 기능을 이용한 차량 제어 시스템

Country Status (1)

Country Link
KR (1) KR20120074820A (ko)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101442641B1 (ko) * 2012-12-27 2014-09-19 전자부품연구원 차량용 좌석 및 미러 조정 장치 및 방법
KR101490955B1 (ko) * 2013-10-29 2015-02-06 현대자동차 주식회사 차량용 조작 장치
WO2015093823A1 (ko) * 2013-12-16 2015-06-25 엘지전자 주식회사 차량 운전 보조 장치 및 이를 구비한 차량
CN108263380A (zh) * 2016-12-30 2018-07-10 现代自动车株式会社 考虑行人注视方式的行人碰撞预防装置和方法
KR20180119258A (ko) * 2017-04-25 2018-11-02 만도헬라일렉트로닉스(주) 운전자 상태 감지 시스템, 운전자 상태 감지 방법 및 운전자 감지 시스템을 장착한 차량
KR102093858B1 (ko) 2019-10-01 2020-03-26 주식회사 사로리스 바이오메트릭스 기반 차량 제어 장치 및 이를 이용한 차량 제어 방법
WO2021002520A1 (ko) * 2019-07-04 2021-01-07 주식회사 피엘케이테크놀로지 운전자 상태 모니터링을 이용한 차선 이탈 경보 판단 방법
US10901504B2 (en) 2018-10-05 2021-01-26 Hyundai Motor Company Gaze detection apparatus and congestion control method thereof
US10963678B2 (en) * 2018-11-14 2021-03-30 Hyundai Motor Company Face recognition apparatus and face recognition method
KR20210082723A (ko) * 2019-12-26 2021-07-06 경북대학교 산학협력단 관심영역을 이용한 운전자 모니터링 시스템

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101442641B1 (ko) * 2012-12-27 2014-09-19 전자부품연구원 차량용 좌석 및 미러 조정 장치 및 방법
KR101490955B1 (ko) * 2013-10-29 2015-02-06 현대자동차 주식회사 차량용 조작 장치
WO2015093823A1 (ko) * 2013-12-16 2015-06-25 엘지전자 주식회사 차량 운전 보조 장치 및 이를 구비한 차량
CN108263380A (zh) * 2016-12-30 2018-07-10 现代自动车株式会社 考虑行人注视方式的行人碰撞预防装置和方法
KR20180119258A (ko) * 2017-04-25 2018-11-02 만도헬라일렉트로닉스(주) 운전자 상태 감지 시스템, 운전자 상태 감지 방법 및 운전자 감지 시스템을 장착한 차량
US10901504B2 (en) 2018-10-05 2021-01-26 Hyundai Motor Company Gaze detection apparatus and congestion control method thereof
US10963678B2 (en) * 2018-11-14 2021-03-30 Hyundai Motor Company Face recognition apparatus and face recognition method
WO2021002520A1 (ko) * 2019-07-04 2021-01-07 주식회사 피엘케이테크놀로지 운전자 상태 모니터링을 이용한 차선 이탈 경보 판단 방법
KR20210004302A (ko) * 2019-07-04 2021-01-13 (주)에이아이매틱스 운전자 상태 모니터링을 이용한 차선 이탈 경보 판단 방법
US11014579B2 (en) * 2019-07-04 2021-05-25 A. I. Matics Inc. Lane departure warning determination method using driver state monitoring
KR102093858B1 (ko) 2019-10-01 2020-03-26 주식회사 사로리스 바이오메트릭스 기반 차량 제어 장치 및 이를 이용한 차량 제어 방법
KR20210082723A (ko) * 2019-12-26 2021-07-06 경북대학교 산학협력단 관심영역을 이용한 운전자 모니터링 시스템

Similar Documents

Publication Publication Date Title
KR20120074820A (ko) 얼굴 인식 기능을 이용한 차량 제어 시스템
TWI758689B (zh) 車內人員危險動作識別方法和裝置、電子設備、儲存介質
WO2019232972A1 (zh) 驾驶管理方法和系统、车载智能系统、电子设备、介质
JP5549721B2 (ja) ドライバモニタ装置
US10165971B2 (en) Driver state determination apparatus
KR101950476B1 (ko) 운전자 상태 감지 시스템, 운전자 상태 감지 방법 및 운전자 감지 시스템을 장착한 차량
KR101386823B1 (ko) 동작, 안면, 눈, 입모양 인지를 통한 2단계 졸음운전 방지 장치
US10417512B2 (en) Driver abnormality detection device and driver abnormality detection method
US20100214105A1 (en) Method of detecting drowsiness of a vehicle operator
WO2015131857A2 (zh) 集成摄像头模组和光传感器的视觉辅助方法及装置
WO2013157466A1 (ja) 喫煙検出装置、方法及びプログラム
US20160262682A1 (en) Driver monitoring apparatus
JP2010013090A (ja) 運転者状態監視システム
US11783600B2 (en) Adaptive monitoring of a vehicle using a camera
US10604160B2 (en) Driver condition detection system
US9981598B2 (en) Alighting notification device
JP2005108033A (ja) 運転者状況判定装置および運転者状況判定方法
KR101410182B1 (ko) 카메라를 이용한 승객 안전하차 감지시스템 및 그 방법
KR20140107880A (ko) 졸음 운전 방지 시스템 및 그 방법
CN111114430A (zh) 一种车门的防夹控制系统及其方法与车辆
KR101500016B1 (ko) 차선 이탈 경보 방법
JP2014146267A (ja) 歩行者検出装置、運転支援装置
CN110558998A (zh) 一种基于adas系统的汽车疲劳驾驶检测控制方法
KR101702950B1 (ko) 차량용 디스플레이 장치 및 그 제어방법
US20220319200A1 (en) Device and method for determining image data of the eyes, eye positions and/or a viewing direction of a vehicle user in a vehicle

Legal Events

Date Code Title Description
A201 Request for examination
E601 Decision to refuse application